(57)【要約】【課題】テキストメッセージに変換されたハンドライティングメッセージの編集を容易に行えるようにする。【解決手段】タッチスクリーン上に入力されたハンドライティングメッセージをテキストメッセージに変換して出力する過程と、前記変換されたテキストメッセージの編集要請時、候補文字リストを出力する過程と、前記候補文字リストから選択された候補文字を用いて前記テキストメッセージを修正する過程と、を含む。【選択図】図２
2018077867.tif 000002
【特許請求の範囲】
【請求項１】
タッチスクリーン上に入力されたハンドライティングメッセージをテキストメッセージに変換して出力する過程と、
前記変換されたテキストメッセージの編集要請時、候補文字リストを出力する過程と、
前記候補文字リストから選択された候補文字を用いて前記テキストメッセージを修正する過程と、
前記テキストメッセージ上で発生するタッチイベントに応答して、タッチされた前記テキストメッセージに対応する、前記ハンドライティングメッセージの少なくとも一部の領域を囲む領域設定ウィンドウを前記ハンドライティングメッセージとともに出力する過程と、
前記ハンドライティングメッセージで再認識される領域を設定するため、ユーザ入力に基づいて前記領域設定ウィンドウの大きさを変更する過程と、
前記領域設定ウィンドウにより選択されたハンドライティングメッセージの再認識を要請する変換メニューを含む変換メニューウィンドウを出力する過程と、
前記変換メニューが選択されたことに応答し、前記領域設定ウィンドウにより選択されたハンドライティングメッセージの少なくとも一部を再認識する過程を含み、
前記領域設定ウィンドウは、前記領域設定ウィンドウの横サイズおよび縦サイズのうち少なくとも一つを変更できる複数のサイズ変更マークを含むことを特徴とする携帯端末機のユーザインターフェース提供方法。
【請求項２】
前記ハンドライティングメッセージをテキストメッセージに変換して出力する過程は、
前記テキストメッセージを全体の画面に出力する過程と、
画面を分割して前記ハンドライティングメッセージおよび前記テキストメッセージを互いに異なる領域に出力する過程と、
のうちいずれか一つを含むことを特徴とする請求項１に記載の携帯端末機のユーザインターフェース提供方法。
【請求項３】
前記候補文字リストを出力する過程は、
前記テキストメッセージ上で発生するタッチイベントを感知する過程と、
前記タッチイベントが発生した地点に位置する単語を抽出する過程と、
前記タッチイベントが発生した地点に隣接する位置に、前記抽出された単語に基づいて生成された少なくとも一つの候補文字を含むポップアップウィンドウを出力するか、または、前記抽出された単語に基づいて生成された少なくとも一つの候補文字を含む仮想キーパッドを出力する過程と、
を含むことを特徴とする請求項１に記載の携帯端末機のユーザインターフェース提供方法。
【請求項４】
前記テキストメッセージを修正する過程は、
前記選択された候補文字に前記抽出された単語を変更する過程と、
前記選択された候補文字を前記タッチイベントが発生した地点に追加する過程と
のうち少なくとも一つを含むことを特徴とする請求項３に記載の携帯端末機のユーザインターフェース提供方法。
【請求項５】
前記テキストメッセージの再認識が要請される過程と、
前記テキストメッセージを再認識する言語を選択する言語リストウィンドウを出力する過程と、
前記言語リストウィンドウから言語を選択する過程と、
前記選択された言語で前記テキストメッセージを再認識する過程と、
を含むことを特徴とする請求項１に記載の携帯端末機のユーザインターフェース提供方法。
【請求項６】
前記選択された一部のテキストメッセージの再認識が要請される過程と、
前記選択された一部のテキストメッセージを再認識する言語を選択する言語リストウィンドウを出力する過程と、
前記言語リストウィンドウから言語を選択する過程と、
前記選択された一部のテキストメッセージを前記選択された言語で再認識する過程と、
をさらに含むことを特徴とする請求項１に記載の携帯端末機のユーザインターフェース提供方法。
【請求項７】
前記領域設定ウィンドウを用いて前記ハンドライティングメッセージの少なくとも一部の領域を選択する過程と、
前記再認識する時に使用する言語を選択する言語リストウィンドウを出力する過程と、
前記言語リストウィンドウから言語を選択する過程と、
前記選択されたハンドライティングメッセージの少なくとも一部の領域を前記選択された言語で再認識する過程と、
をさらに含むことを特徴とする請求項１に記載の携帯端末機のユーザインターフェース提供方法。
【請求項８】
ハンドライティング入力モードの活性化時、ハンドライティングメッセージの入力を受けるタッチスクリーンと、
前記ハンドライティングメッセージをテキストメッセージに変換し、前記変換されたテキストメッセージの編集要請時に候補文字リストを出力するように前記タッチスクリーンを制御し、前記候補文字リストから選択された候補文字を用いて前記テキストメッセージを修正する制御部と、を含み、
前記制御部は、前記テキストメッセージ上で発生するタッチイベントに応答して、タッチされた前記テキストメッセージに対応する、前記ハンドライティングメッセージの少なくとも一部の領域を囲む領域設定ウィンドウを前記ハンドライティングメッセージとともに出力し、前記ハンドライティングメッセージで再認識される領域を設定するため、ユーザ入力に基づいて前記領域設定ウィンドウの大きさを変更し、前記領域設定ウィンドウにより選択されたハンドライティングメッセージの再認識を要請する変換メニューを含む変換メニューウィンドウを出力し、前記変換メニューが選択されたことに応答し、前記領域設定ウィンドウにより選択されたハンドライティングメッセージの少なくとも一部を再認識し、
前記領域設定ウィンドウは、前記領域設定ウィンドウの横サイズおよび縦サイズのうち少なくとも一つを変更できる複数のサイズ変更マークを含むことを特徴とする携帯端末機のユーザインターフェース提供装置。
【請求項９】
前記タッチスクリーンは、
前記テキストメッセージの出力時、前記テキストメッセージを全体の画面に出力するか、または、画面を２個の領域に分割した後に前記ハンドライティングメッセージおよび前記テキストメッセージを互いに異なる領域に出力することを特徴とする請求項８に記載の携帯端末機のユーザインターフェース提供装置。
【請求項１０】
前記制御部は、
前記テキストメッセージ上でタッチイベントの発生時、前記タッチイベントが発生した地点に位置する単語を抽出し、前記抽出された単語に基づいて少なくとも一つの候補文字を生成し、前記タッチイベントが発生した地点に隣接する位置に前記生成された少なくとも一つの候補文字を含むポップアップウィンドウを出力するか、または、前記生成された少なくとも一つの候補文字を含む仮想キーパッドを出力することを特徴とする請求項８に記載の携帯端末機のユーザインターフェース提供装置。
【請求項１１】
前記制御部は、
前記少なくとも一つの候補単語のうち選択された候補単語に前記抽出された単語を変更するか、前記選択された候補単語を前記タッチイベントが発生した地点に追加して前記テキストメッセージを修正することを特徴とする請求項１０に記載の携帯端末機のユーザインターフェース提供装置。
【請求項１２】
前記制御部は、
前記テキストメッセージの再認識要請の発生時、前記テキストメッセージを再認識する言語を選択する言語リストウィンドウを出力し、前記言語リストウィンドウから選択された言語で前記テキストメッセージを再認識することを特徴とする請求項８に記載の携帯端末機のユーザインターフェース提供装置。
【請求項１３】
前記制御部は、
前記変換メニューの活性化時、前記ハンドライティングメッセージを再認識するために使用される言語を選択する言語リストウィンドウを出力し、前記領域設定ウィンドウを通じて選択された前記ハンドライティングメッセージの少なくとも一部の領域を前記言語リストウィンドウから選択された言語で再認識することを特徴とする請求項８に記載の携帯端末機のユーザインターフェース提供装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末機のユーザインターフェースに関し、特に、タッチスクリーンを通じて入力されたハンドライティング（Ｈａｎｄｗｒｉｔｉｎｇ）メッセージをテキストに変換し、前記変換されたテキストメッセージをユーザが容易に編集できるようにするユーザインターフェース（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）を提供する携帯端末機のユーザインターフェース提供方法および装置に関する。
【背景技術】
【０００２】
近年、情報通信技術と半導体技術などのまぶしい発展に力づけられ、携帯端末機の普及と利用が急速に増加している。特に、最近の携帯端末機は、伝統的な固有領域に留まらず、他の端末機の領域まで合わせるモバイル融合（ｍｏｂｉｌｅ  ｃｏｎｖｅｒｇｅｎｃｅ）段階に至っている。代表的に移動通信端末機の場合には、音声通話やメッセージ送受信のような一般的な通信機能の他にも、ＴＶ視聴機能（例えば、ＤＭＢ（Ｄｉｇｉｔａｌ  Ｍｕｌｔｉｍｅｄｉａ  Ｂｒｏａｄｃａｓｔｉｎｇ）やＤＶＢ（Ｄｉｇｉｔａｌ  Ｖｉｄｅｏ  Ｂｒｏａｄｃａｓｔｉｎｇ）のような移動放送）、音楽再生機能（例えば、ＭＰ３（ＭＰＥＧ  Ａｕｄｉｏ  Ｌａｙｅｒ−３））、写真撮影機能、データ通信機能、インターネット接続機能、および近距離無線通信機能などの多様な機能を提供している。
【０００３】
一方、入力の便宜性によってタッチスクリーン（Ｔｏｕｃｈ−ｓｃｒｅｅｎ）を備える携帯端末機が増加するにつれて、最近の携帯端末機は、前記タッチスクリーンを利用したハンドライティング入力機能を提供している。前記ハンドライティング入力機能は、ユーザがタッチスクリーン上で指またはスタイラス（Ｓｔｙｌｕｓ）等を用いてメッセージを入力すれば、これを格納する機能である。これに加えて、前記携帯端末機は、格納されたハンドライティングメッセージをテキストに変換するハンドライティングメッセージ認識機能を提供している。しかしながら、前記ハンドライティングメッセージ認識機能は、完全ではない。したがって、ユーザは、変換されたテキストメッセージを確認し、間違って認識された文字が存在する場合には、ハンドライティングメッセージを再入力した後に再認識するか、文字入力機を用いて変換されたテキストメッセージを修正しなければならないという不便さが存在する。また、前記ハンドライティングメッセージ認識機能は、既設定されたシステム言語だけによって、ハンドライティングメッセージを認識することができる。すなわち、従来のハンドライティングメッセージ認識機能は、言語を変更して再認識できる機能を提供していない。したがって、システム言語と異なる言語でハンドライティングメッセージが作成されて誤認識された場合、ユーザは、メイン画面に復帰してシステム言語を変更した後、ハンドライティングメッセージを再認識しなければならないという不便さが存在する。したがって、最近では、前記テキストメッセージ表示画面上でテキストメッセージを容易に修正することができるユーザインターフェースが要求されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特表２００９−５４３２０９号公報
【特許文献２】米国特許出願公開第２００５／００９９３９８号明細書
【特許文献３】特開平０８−０１６３１３号公報
【特許文献４】特開２００９−０２５４２０号公報
【特許文献５】特開平０８−０５５１８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、上述した従来技術の問題点を解決するために創案されたもので、本発明の目的は、ハンドライティングメッセージをテキストに変換した後、変換されたテキストメッセージを容易に編集できるユーザインターフェースを提供する携帯端末機のユーザインターフェース提供方法および装置を提供することにある。
【課題を解決するための手段】
【０００６】
上述した目的を達成するための本発明の好ましい実施例に係る携帯端末機のユーザインターフェース提供方法は、タッチスクリーン上に入力されたハンドライティングメッセージをテキストメッセージに変換して出力する過程と、前記変換されたテキストメッセージの編集要請時、候補文字リストを出力する過程と、前記候補文字リストから選択された候補文字を用いて前記テキストメッセージを修正する過程と、を含むことを特徴とする。
【０００７】
上述した目的を達成するための本発明の好ましい実施例に係る携帯端末機のユーザインターフェース提供装置は、ハンドライティング入力モードの活性化時、ハンドライティングメッセージの入力を受けるタッチスクリーンと、前記ハンドライティングメッセージをテキストメッセージに変換し、前記変換されたテキストメッセージの編集要請時、候補文字リストを出力するように前記タッチスクリーンを制御し、前記候補文字リストから選択された候補文字を用いて前記テキストメッセージを修正する制御部と、を含むことを特徴とする。
【発明の効果】
【０００８】
以上で調べてみたように、本発明の実施例に係る携帯端末機のユーザインターフェース提供方法および装置は、ハンドライティングメッセージをテキストに変換した後、変換されたテキストメッセージを容易に編集することができる。すなわち、本発明は、変換されたテキストメッセージの少なくとも一部を容易に修正することができ、特定言語に変換されたテキストメッセージの少なくとも一部を他の言語で容易に再認識することができる。これによって、本発明は、ユーザの便宜性を向上させることができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施例に係る携帯端末機の構成を概略的に示す図である。
【図２】本発明の実施例に係る携帯端末機のユーザインターフェース提供方法を概略的に説明するためのフローチャートである。
【図３】本発明の実施例により、ハンドライティングメッセージをテキストに変換して表示するインターフェースの例を示した画面例示図である。
【図４】本発明の第１実施例により、テキストメッセージを修正するためのインターフェースの例を示した画面例示図である。
【図５】本発明の第２実施例により、テキストメッセージを修正するためのインターフェースの例を示した画面例示図である。
【図６】本発明の実施例により、言語を変更してテキストメッセージの全体を再認識するインターフェースの例を示した画面例示図である。
【図７】本発明の実施例により、言語を変更してテキストメッセージの一部を再認識するインターフェースの例を示した画面例示図である。
【図８】本発明の実施例に係るハンドライティングメッセージを再認識してテキストメッセージを修正するインターフェースの例を示した画面例示図である。
【発明を実施するための形態】
【００１０】
以下、添付された図面を参照して本発明の好ましい実施例を詳細に説明する。このとき、添付された図面で同一の構成要素は、なるべく同一の符号で示していることに留意しなければならない。また、本発明の要旨を不明瞭にする公知機能および構成に対する詳細な説明は省略する。
【００１１】
一方、本明細書と図面に開示された本発明の実施例は、本発明の技術内容を容易に説明し、本発明の理解を助けるために特定例を提示したものに過ぎず、本発明の範囲を限定するものではない。ここに開示された実施例の他にも、本発明の技術的思想に基づいた他の変形例が実施可能であることは、本発明が属する技術分野で通常の知識を有する者に自明である。
【００１２】
詳細な説明に先立ち、本発明の実施例に係る携帯端末機は、タッチスクリーンを備える電子機器であって、移動通信端末機（Ｍｏｂｉｌｅ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｔｅｒｍｉｎａｌ）、個人情報端末機（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ；ＰＤＡ）、スマートフォン（Ｓｍａｒｔ  Ｐｈｏｎｅ）、タブレットＰＣ（Ｔａｂｌｅｔ  Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ  Ｍｕｌｔｉｍｅｄｉａ  Ｐｌａｙｅｒ）等を含んでもよい。
【００１３】
図１は、本発明の実施例に係る携帯端末機の構成を概略的に示す図である。
前記図１を参照すれば、本発明の実施例に係る携帯端末機１００は、無線通信部１５０、入力部１４０、タッチスクリーン１３０、格納部１２０、および制御部１１０を含む。前記タッチスクリーン１３０は、表示パネル１３１およびタッチパネル１３２を含んでもよく、前記制御部１１０は、ハンドライティング認識部１１１を含んでもよい。
【００１４】
前記無線通信部１５０は、基地局と通話（音声通話および画像通話を含む）するための通信チャネルおよびデータを送信するためのデータ通信チャネルなどを形成する。これのために、前記無線通信部１５０は、送信される信号の周波数上昇変換および増幅する無線周波数の送信部（図示せず）、受信される信号を低雑音増幅して周波数下降変換する無線周波数の受信部（図示せず）、および受信信号と送信信号を分離する送受信分離部（図示せず）等を含んでもよい。特に、本発明の実施例に係る無線通信部１５０は、ハンドライティングメッセージを変換して生成したテキスト（Ｔｅｘｔ）メッセージを他の携帯端末機に送信することができる。
【００１５】
前記入力部１４０は、数字または多様な文字情報の入力を受けて、各種機能の設定および前記携帯端末機１００の機能制御のための入力キーとファンクションキーを含む。特に、本発明に係る前記入力部１４０は、ハンドライティングモードの実行を要請する信号、ハンドライティングメッセージのテキスト変換を要請する信号、前記テキストメッセージの編集と関連する信号などを制御部１１０に入力することができる。このような入力部１４０は、ボタン式キーパッド（Ｋｅｙ  Ｐａｄ）、ボールジョイスティック（Ｂａｌｌ  Ｊｏｙｓｔｉｃｋ）、オプティカルジョイスティック（Ｏｐｔｉｃａｌ  Ｊｏｙｓｔｉｃｋ）、ホイールキー（Ｗｈｅｅｌ  Ｋｅｙ）、タッチキー（Ｔｏｕｃｈ  ｋｅｙ）、タッチパッド（Ｔｏｕｃｈ  Ｐａｄ）、タッチスクリーン１３０のような入力手段のうちいずれか一つまたはこれらの組合で形成される。
【００１６】
前記タッチスクリーン１３０は、入力機能および出力機能を行うことができる。これのために前記タッチスクリーン１３０は、出力機能を行う表示パネル１３１と、入力機能を行うタッチパネルとを１３２を含む。
【００１７】
前記タッチパネル１３２は、表示パネル１３１の前面に装着され、タッチ入力装置、例えば、ユーザの指またはスタイラスなどの接触によってタッチイベントを生成し、生成されたタッチイベントを制御部１１０に伝達することができる。前記タッチパネル１３２は、タッチ入力装置の接触による物理量（例えば、静電容量、抵抗など）の変化によってタッチを認識し、タッチの種類（タップ（Ｔａｐ）、ドラッグ（Ｄｒａｇ）、フリック（Ｆｌｉｃｋ）、ダブルタッチ（Ｄｏｕｂｌｅ−ｔｏｕｃｈ）、ロングタッチ（Ｌｏｎｇ−ｔｏｕｃｈ）、マルチタッチ（Ｍｕｌｔｉ−ｔｏｕｃｈ）など）およびタッチされた位置情報を制御部１１０に伝達することができる。このような前記タッチパネル１３２は、本発明の技術分野で通常の知識を有する者にとって自明なものであるため、詳細な説明は省略する。
【００１８】
前記表示パネル１３１は、携帯端末機１００の各種メニューをはじめとして、ユーザが入力した情報またはユーザに提供する情報を表示する。すなわち、表示パネル１３１は、携帯端末機１００の利用による多様な画面、例えば、待機画面（ホーム画面）、メニュー画面、メッセージ作成画面、通話画面、スケジュール管理画面、アドレス帳画面などを提供する。特に、本発明の表示パネル１３１は、ハンドライティングメッセージの入力画面、前記テキストメッセージの表示画面、前記テキストメッセージを修正するための画面、前記テキストメッセージまたはハンドライティングメッセージを再認識する言語を選択できる言語リスト画面などを出力することができる。これに対する詳細な説明は、図３〜図８の画面例示図を参照して後述する。このような表示パネル１３１は、液晶表示装置（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ：ＬＣＤ）、ＯＬＥＤ（Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ  Ｅｍｉｔｔｅｄ  Ｄｉｏｄｅ）、ＡＭＯＬＥＤ（Ａｃｔｉｖｅ  Ｍａｔｒｉｘ  Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ  Ｅｍｉｔｔｅｄ  Ｄｉｏｄｅ）などで形成される。
【００１９】
前記格納部１２０は、携帯端末機１００のオペレーティングシステム（ＯＳ、Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）をはじめとして、その他のオプション（ｏｐｔｉｏｎｓ）機能、例えば、音声再生機能、イメージまたは動画の再生機能、放送再生機能などに必要なアプリケーションをはじめとして、ユーザデータおよび通信時に送受信されるデータなどを格納する。例えば、前記格納部１２０は、タッチスクリーン１３０の運用のためのキーマップやメニューマップなどを格納する。ここで、キーマップ、メニューマップは、それぞれ多様な形態で構成される。例えば、前記キーマップは、キーボードマップや３×４キーマップ、Ｑｗｅｒｔｙキーマップであってもよく、現在活性化されているアプリケーションの運用制御のための制御キーマップであってもよい。また、前記メニューマップは、現在活性化されているアプリケーションの運用制御のためのメニューマップであってもよい。また、前記格納部１２０は、文字メッセージ、ゲームファイル、音楽ファイル、映画ファイル、連絡先などを格納することができる。特に、本発明に係る格納部１２０は、ユーザがタッチスクリーン１３０上に入力したハンドライティングメッセージをテキストに変換するハンドライティング認識ルーチン、変換されたテキストメッセージの修正要請時に候補文字を提供する候補文字提供ルーチン、前記変換されたテキストメッセージの少なくとも一部を候補文字に代替するか又は前記候補文字を追加するテキストメッセージ修正ルーチンなどを含んでもよい。前記ハンドライティング認識ルーチンは、ハンドライティングメッセージを分析した後、既格納された文字と比較して最も類似する文字が入力されたことと認識することができる。このとき、選択されていない類似文字は、修正要請時に候補文字として提供される。例えば、前記ハンドライティングメッセージを分析した結果、「Ｇｏｏｄ」、「Ｍｏｏｄ」などの単語のうち「Ｇｏｏｄ」が最も類似するものと判断し、「Ｇｏｏｄ」をテキストメッセージ表示画面に出力した状態で、「Ｇｏｏｄ」の修正が要請される場合、前記候補文字提供ルーチンは、「Ｍｏｏｄ」を候補文字として提供する。また、前記変換されたテキストメッセージ「Ｇｏｏｄ」の修正が要請される場合、前記候補文字提供ルーチンは、前記認識されたテキストに基づいて予想される候補文字、例えば、「ｇｏｏｄ」、「Ｇｏｏｄｓ」、「ｇｏｏｄｎｅｓｓ」、「ｇｏｏｄｗｉｌｌ」等を提供する。これのために、前記格納部１２０は、テキストメッセージの修正要請時に提供される予想候補文字を抽出するための辞書を格納することができる。前記格納部１２０は、言語別に多数の辞書を格納することができる。
【００２０】
前記制御部１１０は、携帯端末機１００の全般的な動作および携帯端末機１００の内部ブロック間の信号流れを制御し、データを処理するデータ処理機能を行うことができる。特に、本発明に係る制御部１１０は、タッチスクリーン１３０を通じてユーザが入力したハンドライティングメッセージをテキストに変換し、変換されたテキストメッセージを編集（修正、再認識）する手続を制御することができる。これのために前記制御部１１０は、ハンドライティング認識部１１１を含む。前記ハンドライティング認識部１１１は、ハンドライティングメッセージを分析し、既格納された文字と形態を比較して、最も類似する文字が入力されたことと認識することができる。このような前記制御部１１０に対する詳細な説明は、図２〜図８を参照して後述する。
【００２１】
一方、前記図１に示していないが、前記携帯端末機１００は、イメージまたは動画撮影のためのカメラモジュール、近距離無線通信のための近距離通信モジュール、放送受信のための放送受信モジュール、ＭＰ３モジュールのようなデジタル音源再生モジュール、およびインターネット機能を行うインターネット通信モジュールなどの付加機能を有する構成要素を選択的にさらに含んでもよい。このような構成要素は、デジタル機器のコンバージェンス（ｃｏｎｖｅｒｇｅｎｃｅ）の傾向により変形が非常に多様であって、全部列挙することはできないが、本発明に係る携帯端末機１００は、前記言及された構成要素と同等な水準の構成要素をさらに含んでもよい。
【００２２】
図２は、本発明の実施例に係る携帯端末機のユーザインターフェース提供方法を概略的に説明するためのフローチャートである。
【００２３】
前記図１および図２を参照すれば、本発明の実施例に係る制御部１１０は、アイドル状態（Ｉｄｌｅ  ｓｔａｔｅ）でありうる。次に、前記制御部１１０は、２０３ステップにおいて、ハンドライティングモードが活性化されるか否かを確認することができる。ここで、前記ハンドライティングモードとは、タッチスクリーン１３０にスタイラスのようなタッチ入力装置を用いてノートに筆記するように、ユーザが直接メッセージを入力できる入力モードを意味する。前記ハンドライティングモードは、メモや文字メッセージの作成のように、文字を入力することができるすべての状況で活性化される。
【００２４】
前記ハンドライティングモードが活性化されなければ、前記制御部１１０は、２０５ステップで該当機能を行うことができる。例えば、前記制御部１１０は、ユーザの要請によって音楽再生機能、動画再生機能、インターネット接続機能などを行うか、アイドル状態を維持することができる。その一方で、前記ハンドライティングモードが活性化されれば、前記制御部１１０は、２０７ステップでハンドライティングの入力画面を出力し、２０９ステップでユーザのメッセージ（以下、ハンドライティングメッセージ）の入力を感知することができる。前記ハンドライティングメッセージの入力が感知されれば、前記制御部１１０は、タッチ入力装置の動きによって変化するタッチ位置データを格納し、前記ハンドライティングメッセージを格納することができる。前記ハンドライティングの入力画面に対する説明は、図３を参照して後述する。
【００２５】
次に、前記制御部１１０は、２１１ステップにおいて、ハンドライティングメッセージのテキスト変換が要請されるか否かを確認することができる。前記２１１ステップでテキスト変換が要請されない場合には、前記制御部１１０は、２１２ステップでハンドライティングモードの終了信号が入力されるか否かを確認する。前記ハンドライティングモードの終了信号が入力されれば、前記制御部１１０は、ハンドライティングモードを終了することができる。その一方で、ハンドライティングモードが終了しなければ、前記制御部１１０は、２０９ステップに復帰することができる。
【００２６】
一方、前記２１１ステップでテキスト変換が要請される場合には、前記制御部１１０は、２１３ステップでハンドライティングメッセージをテキストメッセージに変換することができる。これのために前記制御部１１０は、ハンドライティング認識部１１１を含んでもよい。前記ハンドライティングメッセージの変換が完了すれば、前記制御部１１０は、２１５ステップで前記テキストメッセージを表示するテキストメッセージの画面を出力するように、タッチスクリーン１３０を制御することができる。前記テキストメッセージの画面に対する説明は、図３を参照して後述する。
【００２７】
次に、前記制御部１１０は、２１７ステップでテキストメッセージの編集要請が発生するか否かを確認することができる。前記編集要請が発生しなければ、前記制御部１１０は、後述する２２１ステップに進むことができる。その一方で、前記編集要請が発生すれば、前記制御部１１０は、２１９ステップで前記編集要請に対応して前記テキストメッセージを編集することができる。簡略に説明すれば、前記制御部１１０は、テキストメッセージを修正するか、または、テキストメッセージの少なくとも一部の領域を他の言語で再認識することができる。このようなテキストメッセージの編集方法に対する詳細な説明は、図４〜図８を参照して後述する。
【００２８】
次に、前記制御部１１０は、２２１ステップにおいて、ハンドライティングの入力画面への復帰が要請されるか否かを確認することができる。前記復帰要請は、以前のステップに移動するように既設定されたキー（例えば、取り消しキー）の入力またはメニューを通じて入力される。前記ハンドライティングの入力画面への復帰が要請される場合には、前記制御部１１０は、前記２０７ステップに復帰して上述した過程を行うことができる。その一方で、前記ハンドライティングの入力画面への復帰が要請されない場合には、前記制御部１１０は、２２３ステップでハンドライティングモードの終了信号が入力されるか否かを確認することができる。前記ハンドライティングモードの終了信号が入力されなければ、前記制御部１１０は、前記２１７ステップに復帰することができる。その一方で、前記ハンドライティングモードの終了信号が入力されれば、前記制御部１１０は、ハンドライティングモードを終了することができる。
【００２９】
一方、前記図２で示していないが、メモモードで前記ハンドライティングモードが実行された場合、前記制御部１１０は、テキストメッセージをメモとして格納することができる。または、文字メッセージの作成モードにおいてハンドライティングモードが実行された場合、前記制御部１１０は、テキストメッセージを他の携帯端末機に送信することができる。
【００３０】
図３は、本発明の実施例に係るハンドライティングメッセージをテキストに変換して表示するインターフェースの例を示した画面例示図である。
【００３１】
前記図１〜図３を参照すれば、前記ハンドライティングモードが活性化されれば、前記タッチスクリーン１３０は、ハンドライティングの入力画面を出力することができる。前記ハンドライティングの入力画面は、スクロール（Ｓｃｒｏｌｌ）可能である。前記ハンドライティングの入力画面が出力されれば、ユーザは、スタイラスまたは指などを用いて前記識別符号３１０の画面例示図に示すように、メッセージ１０（以下、ハンドライティングメッセージ）を入力することができる。
【００３２】
前記ハンドライティングメッセージの入力後、ユーザが変換メニューを実行させれば、前記タッチスクリーン１３０は、前記ハンドライティングメッセージをテキストに変換してテキストメッセージ２０を出力することができる。例えば、前記タッチスクリーン１３０は、制御部１１０の制御下で識別符号３２０の画面例示図に示すように、テキストメッセージ２０だけを含む第１テキストメッセージ表示画面を出力することができる。前記第１テキストメッセージの画面は、スクロール可能である。または、前記タッチスクリーン１３０は、制御部１１０の制御下で識別符号３３０の画面例示図に示すように、テキストメッセージ２０を出力するテキスト領域３１と、ハンドライティングメッセージ１０を表示するハンドライティング領域３２とに分割された第２テキストメッセージ表示画面を出力することができる。このとき、前記テキスト領域３１およびハンドライティング領域３２は、スクロール可能である。
【００３３】
以上では、テキストメッセージを表示するためのインターフェース画面の一例を説明した。以下では、テキストメッセージを編集するためのインターフェース画面の一例を説明する。一方、以下では、前記第２テキストメッセージ表示画面を基準として説明する。
【００３４】
図４は、本発明の第１実施例により、テキストメッセージを修正するためのインターフェースの例を示した画面例示図である。
【００３５】
前記図１〜図４を参照すれば、識別符号４１０の画面例示図に示すように、テキストメッセージを修正するために、ユーザは、テキスト領域３１をタッチすることができる。前記テキスト領域３１でタッチが感知されれば、前記制御部１１０は、識別符号４２０の画面例示図に示すように、タッチされた地点と隣接する位置に候補文字を含む候補文字リストウィンドウ４０をポップアップするように、タッチスクリーン１３０を制御することができる。このとき、前記制御部１１０は、タッチされた地点に位置する単語を抽出し、前記抽出された単語に基づいて少なくとも一つの候補文字を生成することができる。前記候補文字は、ハンドライティングメッセージの変換時に認識された類似文字のうち選択されなかった文字であってもよい。または、前記候補文字は、抽出された単語に基づく予想単語であってもよい。これに対する説明は上述したので、省略することにする。
【００３６】
前記候補文字リストウィンドウ４０は、スクロール可能である。例えば、ユーザは、候補文字リストウィンドウ４０の両側端に位置するスクロールメニュー４１をタッチして、該当方向に候補文字リストをスクロールさせることができる。しかしながら、本発明はこれに限定されない。例えば、ユーザは、候補文字リストウィンドウ４０内におけるタッチ移動（ドラッグ、フリック等）を通じて候補文字リストをスクロールさせることができる。
【００３７】
前記候補文字リストウィンドウ４０から特定候補文字が選択されれば、前記制御部１１０は、識別符号４３０の画面例示図に示すように、タッチされた地点に位置するメッセージ「Ｔｏｍｏｎｏｗ」を、選択された候補文字「Ｔｏｍｏｒｒｏｗ」に変更することができる。このように、本発明は、テキストメッセージのタッチ時に候補文字リストをポップアップウィンドウの形態で出力し、前記候補文字リストのうちいずれか一つを選択することにより、テキストメッセージの誤認識された部分を容易に修正することができる。
【００３８】
図５は、本発明の第２実施例により、テキストメッセージを修正するためのインターフェースの例を示した画面例示図である。
【００３９】
前記図１〜図５を参照すれば、前記テキスト領域３１でタッチが感知されれば、前記制御部１１０は、前記図５の識別符号５１０の画面例示図に示すように、タッチされた地点にカーソル５５を表示し、文字入力のための仮想キーパッド５０を出力することができる。前記仮想キーパッド５０は、一般的なキー領域５１と候補文字表示領域５２を含む。
【００４０】
前記識別符号５１０の画面例示図のような状態で、ユーザは、前記候補文字表示領域５２に含まれた文字のうちいずれか一つを選択することができる。このとき、前記制御部１１０は、識別符号５２０の画面例示図に示すように、前記カーソル５５が位置する領域に選択された候補文字を追加で入力する。一方、前記識別符号５１０の画面例示図のような状態で、前記候補文字表示領域５２に所望の候補文字が存在しない場合には、ユーザは、拡張メニュー５３をタッチして候補文字表示領域５２を拡張し、さらに多くの候補文字が出力されるようにする。または、ユーザは、キー領域５１を通じてテキストメッセージを修正することも可能である。
【００４１】
前記図５では、選択された候補文字がカーソル５５の位置に追加されることと説明したが、本発明がこれに限定されるものではない。例えば、本発明の他の実施例では、前記候補文字表示領域５２から候補文字が選択される場合、前記図４で説明したように、タッチされた地点に位置するメッセージ「Ｔｏｍｏｎｏｗ」を候補文字「Ｔｏｍｏｒｒｏｗ」に交替するようにする。
【００４２】
図６は、本発明の実施例により、言語を変更してテキストメッセージの全体を再認識するインターフェースの例を示した画面例示図である。
【００４３】
前記図１〜図６を参照すれば、識別符号６１０の画面例示図に示すようにシステム言語が第１言語に設定された状態で、第２言語で作成されたハンドライティングメッセージを変換する場合、前記制御部１１０のハンドライティング認識部１１１は、ハンドライティングメッセージをまともに認識することができない。すなわち、前記制御部１１０のハンドライティング認識部１１１は、識別符号６２のように入力されたハンドライティングメッセージを誤認識して出力する。ここで、前記識別符号６１０の画面例示図の識別符号６１を参照すれば、システム言語が英語に設定されていることが分かる。
【００４４】
このような状態で、ハンドライティングメッセージの全体を再認識しようとする場合、ユーザは、既設定されたメニューキー（図示せず）を入力することができる。前記メニューキーが入力されれば、前記制御部１１０は、再認識メニュー６３をタッチスクリーン１３０の下端に出力する。前記再認識メニュー６３が活性化（例えば、タッチ）されれば、前記制御部１１０は、識別符号６２０の画面例示図に示すように、ハンドライティングメッセージの再認識時に使用する言語を選択することができる言語リストウィンドウ６４を出力する。前記言語リストウィンドウ６４からいずれか一つの言語が選択されれば、前記制御部１１０は、前記ハンドライティングメッセージを選択された言語で再認識し、識別符号６３０の画面例示図に示すように、以前の誤認識メッセージ６２を再認識されたメッセージ６５に変更して出力する。例えば、前記制御部１１０は、ユーザが前記言語リストウィンドウ６４から韓国語を選択する場合、以前の英語で誤認識されたメッセージ６２を前記選択された韓国語で再認識したメッセージ６５に変更することができる。このように、ハンドライティングメッセージがシステム言語と異なる言語で作成されて誤認識された場合、本発明は、従来のようにシステム言語を変更しなくても、前記誤認識されたメッセージを他の言語で容易に再認識することができる。これによって、本発明は、ユーザの便宜性を向上させることができる。
【００４５】
図７は、本発明の実施例により、言語を変更してテキストメッセージの一部を再認識するインターフェースの例を示した画面例示図である。
【００４６】
前記図１〜図７を参照すれば、誤認識されたテキストメッセージが出力された状態で、ユーザは、識別符号７１０の画面例示図に示すようにテキストメッセージのうち再認識することを希望する領域（以下、再認識領域）を選択することができる。このとき、前記再認識領域は、多様な方法によって選択される。例えば、ユーザがテキストメッセージをタッチすれば、前記制御部１１０は、開始マーク７１および終了マーク７２を表示し、ユーザは、開始マーク７１および終了マーク７２を移動させて再認識領域を設定することができる。または、ユーザは、スタイラスのようなタッチ入力装置でテキストメッセージの一部領域をドラッグすることにより、再認識領域を設定することができる。または、ダブルタッチまたはロングタッチのような既設定されたタッチイベントの入力時、前記制御部１１０は、タッチイベントが発生した地点に位置する単語を再認識領域として設定することができる。
【００４７】
前記再認識領域の設定が完了すれば、前記制御部１１０は、識別符号７１０の画面例示図に示すように、メニューウィンドウ７０を出力する。例えば、前記メニューウィンドウ７０は、選択された領域のメッセージをコピーするコピーメニュー７３、選択された領域のメッセージを切り取る切り取りメニュー７４、および再認識メニュー７５を含む。しかしながら、本発明がこれに限定されるものではない。すなわち、前記メニューウィンドウ７０に含まれるメニューは、設計者の意図によって再認識メニュー７５だけを含んでもよく、追加メニューをさらに含んでもよい。一方、前記メニューウィンドウ７０は、再認識領域の設定完了後、既設定された信号の入力時に出力されてもよい。例えば、開始マーク７１および終了マーク７２を用いて再認識領域を設定した後、開始マーク７１または終了マーク７２のロングタッチ信号が入力される場合、前記制御部１１０は、メニューウィンドウ７０を出力する。
【００４８】
前記メニューウィンドウ７０から再認識メニュー７５がタッチされれば、前記制御部１１０は、識別符号７２０の画面例示図に示すように、再認識領域に含まれたメッセージを再認識するための言語を選択することができる言語リストウィンドウ７６を出力する。前記言語リストウィンドウ７６から特定言語が選択されれば、前記制御部１１０は、再認識領域に含まれたメッセージを前記選択された言語で再認識し、再認識領域に含まれたメッセージを再認識されたメッセージに変更して出力する。例えば、前記制御部１１０は、識別符号７３０の画面例示図に示すように、誤認識メッセージ７７を韓国語で再認識したメッセージ７８に変更することができる。このように本発明は、テキストメッセージの一部を選択して再認識することができる。したがって、本発明は、多数の言語が混用されているハンドライティングメッセージを変換することにより、前記テキストメッセージの一部だけが誤認識された場合、誤認識された部分だけを再認識することができ、ユーザの便宜性を向上させることができる。
【００４９】
図８は、本発明の実施例に係るハンドライティングメッセージを再認識してテキストメッセージを修正するインターフェースの例を示した画面例示図である。
【００５０】
前記図１〜図８を参照すれば、本発明の実施例では、ハンドライティング領域３２を通じてテキストメッセージを修正することができる。例えば、ユーザがテキスト領域３１をタッチすれば、前記制御部１１０は、識別符号８１０の画面例示図に示すように、テキスト領域３１のタッチされた地点にカーソル８４を表示し、ハンドライティング領域３２に領域設定ウィンドウ８０と、前記領域設定ウィンドウ８０に含まれたハンドライティングメッセージの変換を要請する変換メニューを含む変換メニューウィンドウ８２とを出力することができる。前記領域設定ウィンドウ８０は、長方形を有し、サイズを変更するための複数のサイズ変更マークを含む。前記領域設定ウィンドウ８０は、前記図８に示すように上下左右および対角線方向にそれぞれサイズを増加または減少できるように、８個のサイズ変更マークを含む。例えば、ユーザが識別符号８１０のサイズ変更マークをタッチした後、タッチ移動する場合、前記制御部１１０は、タッチ移動に対応して前記領域設定ウィンドウ８０の上側辺と左側辺のサイズを同時に増加または減少させることができる。一方、ユーザは、前記領域設定ウィンドウ８０のサイズ変更マークが表示されていない領域をタッチした状態でタッチ移動することにより、前記領域設定ウィンドウ８０の位置を移動させることができる。ユーザは、上述した領域設定ウィンドウ８０の位置移動およびサイズ変更の方法により、ハンドライティングメッセージのうち再認識しようとする領域を設定することができる。
【００５１】
前記領域設定ウィンドウ８０を通じて再認識しようとする領域の設定を完了した後、ユーザが変換メニューウィンドウ８２をタッチすれば、前記制御部１１０は、識別符号８２０の画面例示図に示すように、言語リストウィンドウ８５を出力することができる。前記言語リストウィンドウ８５からいずれか一つの言語が選択されれば、前記制御部１１０は、選択された言語で選択された領域のハンドライティングメッセージを再認識した後、識別符号８３０の画面例示図に示すように、候補文字リストウィンドウ８６に少なくとも一つの再認識された候補文字を出力することができる。このとき、前記制御部１１０は、変換メニューウィンドウ８２を候補文字リストウィンドウ８６に変更して候補文字リストを出力することができる。前記候補文字リストウィンドウ８６は、スクロール可能である。前記候補文字リストウィンドウ８６に出力された少なくとも一つの候補文字のうちいずれか一つが選択されれば、前記制御部１１０は、識別符号８４０の画面例示図に示すように、テキスト領域３１のカーソル８４が位置する地点に選択された候補文字を追加入力することができる。前記候補文字が追加入力されれば、前記制御部１１０は、候補文字リストウィンドウ８６を変換メニューウィンドウ８２に変更することができる。
【００５２】
一方、前記識別符号８１０の画面例示図のような状態で変換メニューウィンドウ８２がタッチされた時、前記制御部１１０は、言語リストウィンドウ８５を出力するステップを省略し、前記８３０の画面例示図のような状態に進めることもある。このような場合、前記制御部１１０は、領域設定ウィンドウ８０を通じて選択された領域のハンドライティングメッセージを既設定されたシステム言語で再認識し、候補文字を候補文字リストウィンドウ８６に出力することができる。
【００５３】
また、以上では、タッチされた地点（すなわち、カーソル８４の位置）に再認識されたテキストメッセージを追加することと説明したが、本発明がこれに限定されるものではない。例えば、前記図７で説明したように、前記テキストメッセージ領域から修正する部分をブロック設定した状態で、前記領域設定ウィンドウ８０を用いてハンドライティングメッセージの一部を再認識する場合、前記制御部１０は、ブロック設定されたテキストメッセージを前記再認識されたテキストメッセージに変更するように制御することができる。
【００５４】
上述した本発明の実施例に係る携帯端末機のユーザインターフェース提供方法は、多様なコンピュータ手段を通じて行われるプログラム命令形態に実現され、コンピュータで読取可能な記録媒体に記録される。このとき、前記コンピュータで読取可能な記録媒体は、プログラム命令、データファイル、データ構造などを単独でまたは組み合わせて含む。一方、記録媒体に記録されるプログラム命令は、本発明のために特別に設計されて構成されたものであるか、コンピュータソフトウェア当業者に公知されて使用可能になったものである。前記コンピュータで読取可能な記録媒体には、ハードディスク、フロッピー（登録商標）ディスクおよび磁気テープのような磁気媒体（Ｍａｇｎｅｔｉｃ  Ｍｅｄｉａ）、ＣＤ−ＲＯＭ、ＤＶＤのような光記録媒体（Ｏｐｔｉｃａｌ  Ｍｅｄｉａ）、フロプティカルディスク（Ｆｌｏｐｔｉｃａｌ  Ｄｉｓｋ）のような磁気−光媒体（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ  Ｍｅｄｉａ）、およびＲＯＭ、ＲＡＭ、フラッシュメモリなどのようなプログラム命令を格納して行うように特別に構成されたハードウェア装置が含まれる。また、プログラム命令には、コンパイラによって作られるような機械語コードだけでなく、インタープリタなどを使用してコンピュータによって実行される高級言語コードを含む。上述したハードウェア装置は、本発明の動作を行うために一つ以上のソフトウェアモジュールとして作動するように構成される。
【００５５】
以上では、本発明の実施例に係る携帯端末機のユーザインターフェース提供方法および装置について、本明細書および図面を通じて好ましい実施例に対して説明した。特定用語が使用されたが、これは、単に本発明の技術内容を容易に説明し、発明の理解を助けるために一般的な意味で使用されたもので、本発明が前述した実施例に限定されるものではない。すなわち、本発明の技術的思想に基づく多様な実施例が可能であることは、本発明が属する技術分野で通常の知識を有する者に自明である。
【符号の説明】
【００５６】
１００：携帯端末機
１１０：制御部
１２０：格納部
１３０：タッチスクリーン
１４０：入力部
１５０：無線通信部
１１１：ハンドライティング認識部
【図１】
2018077867.tif 000003
【図２】
2018077867.tif 000004
【図３】
2018077867.tif 000005
【図４】
2018077867.tif 000006
【図５】
2018077867.tif 000007
【図６】
2018077867.tif 000008
【図７】
2018077867.tif 000009
【図８】
2018077867.tif 000010