(57)【要約】【課題】イメージからデータを認識して自動的にスケジュールを登録できるようにした、光学式文字読取機を用いたスケジュール管理方法、及び携帯端末を提供する。【解決手段】本発明に係るスケジュール管理方法は、表示部に表示されるイメージ内に少なくとも一つの認識領域を、制御部により設定するステップと、前記設定された認識領域からデータを、前記制御部により抽出するステップと、前記抽出されたデータを、前記制御部により予め定められた分類規則に従い分類するステップと、前記抽出されたデータを使用してスケジュールデータを生成するステップと、を含むことを特徴とする。【選択図】  図１０
2013054742.tif 000002
【特許請求の範囲】
【請求項１】
光学式文字読取機を用いたスケジュール管理方法であって、
表示部に表示されるイメージ内に少なくとも一つの認識領域を、制御部により設定するステップと、
前記設定された認識領域からデータを、前記制御部により抽出するステップと、
前記抽出されたデータを、前記制御部により予め定められた分類規則に従い分類するステップと、
前記分類されたデータを使用してスケジュールデータを生成するステップと、
を含むことを特徴とする方法。
【請求項２】
カメラから受信されるイメージから、前記カメラの光軸に対するイメージデータの傾き値を測定するステップと、
前記測定されたイメージデータの傾き値を第１の閾値と比較して、前記受信されたイメージ内のオブジェクトが予め定められた誤差範囲内において前記カメラの光軸と整列しているか否かを判断するステップと、
前記受信されたイメージ内のオブジェクトが前記予め定められた誤差範囲内において前記カメラの光軸と整列していると判断されたならば、指示子を表示するステップと、
を含むことを特徴とする請求項１に記載の方法。
【請求項３】
さらに、
センサー部から傾き入力信号を受信するステップと、前記受信された傾き入力信号を第２の閾値と比較して前記受信されるイメージが予め定められた誤差範囲内において水平であるか否かを判断するステップと、
前記受信されたイメージが前記予め定められた誤差範囲内において水平であると判断されたか否かを示す指示子を表示するステップと、
を含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記少なくとも一つの認識領域を設定するステップは、
キャプチャーされたイメージを表示する間にユーザー入力装置から少なくとも一つのユーザー入力イベントを受信するステップと、
前記受信されたユーザー入力イベントに相当する個所（ポイント）を認識領域として設定するステップと、
を含むことを特徴とする請求項３に記載の方法。
【請求項５】
前記抽出したデータを分類するステップは、
前記抽出されたデータのうち時間関係の情報は予定日時として分類するステップを含むことを特徴とする請求項１に記載の方法。
【請求項６】
前記抽出したデータを分類するステップは、
前記抽出されたデータのうちフォントの最も大きなデータを題目として分類するステップと、
前記予定日時及び前記題目として分類されたデータを除く残りのデータを詳細情報として分類するステップと、
をさらに含むことを特徴とする請求項５に記載の方法。
【請求項７】
前記スケジュールデータを生成するステップは、
前記詳細情報を位置情報に変換するステップを含むことを特徴とする請求項６に記載の方法。
【請求項８】
ユーザー入力装置から少なくとも一つのユーザー入力イベントを受信するステップと、
撮影中のイメージにおける前記受信されたユーザー入力イベントに相当する個所をフォーカスするようにカメラを制御するステップと、
をさらに含み、
前記少なくとも一つの認識領域を設定するステップは、前記受信されたユーザー入力イベントに相当する個所を認識領域として設定することを特徴とする請求項１に記載の方法。
【請求項９】
イメージをキャプチャーする（取り込む）ように配備されたカメラと、
前記カメラから受信されるイメージからデータを抽出し、前記抽出されたデータを予め定められた分類規則に従って分類し、前記分類されたデータを用いてスケジュールデータを生成する制御部と、
前記生成されたスケジュールデータを格納する格納部と、
前記生成されたスケジュールデータを表示する表示部と、
を備えることを特徴とする携帯端末。
【請求項１０】
前記制御部は、
カメラから受信されたイメージから前記カメラの光軸に対するイメージデータの傾き値を測定し、
前記測定されたイメージデータの傾き値を第１の閾値と比較して、前記受信されたイメージ内のオブジェクトが予め定められた誤差範囲内において前記カメラの光軸と整列しているか否かを判断し、
前記判断の結果、前記受信されたイメージ内のオブジェクトが前記予め定められた誤差範囲内において前記カメラの光軸と整列していると判断されたならば、指示子を表示するように前記表示部を制御することを特徴とする請求項９に記載の携帯端末。
【請求項１１】
水平面に対する前記携帯端末の傾き角を測定して前記測定された傾き角を前記制御部に受け渡すセンサー部をさらに備え、
前記制御部は、前記センサー部から受信した前記傾き角を第２の閾値と比較して、前記携帯端末が予め定められた誤差範囲内において水平であるか否かを判断することを特徴とする請求項１０に記載の携帯端末。
【請求項１２】
タッチ入力に応じてタッチイベントを発生し、前記タッチイベントを前記制御部に受け渡すタッチスクリーンをさらに備え、
前記制御部は、前記タッチスクリーンから受信された少なくとも一つのタッチイベントを基にイメージ内に認識領域を設定し、前記設定された認識領域からデータを抽出することを特徴とする請求項１１に記載の携帯端末。
【請求項１３】
前記制御部は、
前記抽出されたデータのうち時間関係の情報は予定日時として分類することを特徴とする請求項９に記載の携帯端末。
【請求項１４】
前記制御部は、
前記抽出されたデータのうちフォントが最も大きなデータは題目として分類し、前記予定日時及び前記題目として分類されたデータを除く残りのデータを詳細情報として分類することを特徴とする請求項１３に記載の携帯端末。
【請求項１５】
タッチ入力に応じてタッチイベントを発生し、前記タッチイベントを前記制御部に受け渡すタッチスクリーンをさらに備え、
前記制御部は、前記タッチスクリーンから受信される少なくとも一つのタッチイベントに相当する個所をフォーカスするように前記カメラを制御し、前記フォーカスされた個所を基にイメージ内に認識領域を設定し、前記設定された認識領域からデータを抽出することを特徴とする請求項９に記載の携帯端末。  
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は光学式文字読取機を用いたスケジュール管理方法、及び携帯端末に係り、特に、イメージから抽出されたデータを用いて自動的にスケジュールデータを生成できるようにした、光学式文字読取機を用いたスケジュール管理方法、及び携帯端末に関する。
【背景技術】
【０００２】
携帯端末市場は、購買を刺激する種々のデザインとアプリケーションによって飛躍的に成長している。特に、スマートフォンは、限られた数の機能しか有しない既存の携帯電話とは異なり、オンラインマーケットなどから、写真撮影や動画記録、オーディオ及びビデオ再生、オンラインゲーム、放送メディア聴取、ソーシャルネットワークサービスなどのための種々のアプリケーションをダウンロードしてインストールできる。
【０００３】
一方、携帯端末には、最近、タッチスクリーンが設けられる傾向にあり、このようなタッチスクリーンを用いてユーザーのスケジュールを管理する方法が提供されている。しかしながら、従来のスケジュール管理方法によれば、チケット、ポスターなどに書かれている予定日時などの情報をユーザーが自らスケジュール管理装置に入力しなければならないという点で不便である。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の具現化の目的は、上述の従来技術の幾つかの問題を解消し、イメージからデータを認識して自動的にスケジュールデータを生成する、光学式文字読取機を用いたスケジュール管理方法、及び該方法を具現化する携帯端末を提供するところにある。
【課題を解決するための手段】
【０００５】
本発明に係る光学式文字読取機を用いたスケジュール管理方法は、表示部に表示されるイメージ内に少なくとも一つの認識領域を、制御部により設定するステップと、前記設定された認識領域からデータを、前記制御部により抽出するステップと、前記抽出されたデータを、前記制御部により予め定められた分類規則に従い分類するステップと、前記分類されたデータを使用してスケジュールデータを生成するステップと、を含むことを特徴とする。
【０００６】
また、本発明に係る携帯端末は、イメージをキャプチャーする（取り込む）ように配備されたカメラと、前記カメラから受信されるイメージからデータを抽出し、前記抽出されたデータを予め定められた分類規則に従って分類し、前記分類されたデータを用いてスケジュールデータを生成する制御部と、前記生成されたスケジュールデータを格納する格納部と、前記生成されたスケジュールデータを表示する表示部と、を備えることを特徴とする。
【発明の効果】
【０００７】
本発明に係る光学式文字読取機を用いたスケジュール管理方法、及び携帯端末によれば、カメラから受信された又は既に格納されているイメージからデータを認識して自動的にスケジュールを登録できる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に係るスケジュール管理装置の構成を示す図である。
【図２】本発明の一実施形態に係るプレビュー画面及び撮影メニュー画面を説明するための図である。
【図３】本発明の一実施形態に係るデータ認識率を高めるための機能を説明するための図である。
【図４】本発明の一実施形態に係るデータ認識率を高めるための機能を説明するための図である。
【図５】本発明の一実施形態に係るデータ認識率を高めるための機能を説明するための図である。
【図６】本発明の一実施形態に係る多重フォーカシング機能を説明するための図である。
【図７】本発明の一実施形態に係る認識領域選択機能を説明するための図である。
【図８】本発明の一実施形態に係るスケジュールデータ生成機能を説明するための図である。
【図９】本発明の一実施形態に係るスケジュールデータ生成機能を説明するための図である。
【図１０】本発明の一実施形態に係るスケジュール管理方法を説明するためのフローチャートである。
【図１１】本発明の他の実施形態に係るスケジュール管理方法を説明するためのフローチャートである。
【発明を実施するための形態】
【０００９】
以下、添付図面に基づき、本発明の好適な実施形態に係るスケジュール管理方法及び装置について詳述する。但し、本発明を説明するにあたって、関連する公知の機能又は構成についての具体的な説明が本発明の要旨を余計に曖昧にする虞があると判断される場合にその詳細な説明を省く。
【００１０】
本発明を詳細に説明するに先立って、以下において用いられる用語や単語は通常的又は辞書的な意味に限定して解釈されてはならず、本発明の技術的思想に見合う意味と概念を有するとして解釈さるべきである。よって、本明細書及び図面は本発明の好適な実施形態に過ぎず、本発明の技術的思想をいずれも代替するものではないので、本願の出願時点においてこれらに置き換えられる種々の均等物と変形例があり得るということを理解しなければならない。なお、図中、一部の構成要素は誇張、省略、又は、概略的に示されており、各構成要素の大きさは、実際の大きさを全的に反映するものではない。よって、本発明は、添付図面に描かれている相対的な大きさや間隔によって制限されるものではない。
【００１１】
本発明のスケジュール管理装置は、携帯電話、スマートフォン、タブレットＰＣ、ハンドヘルドＰＣ、ポータブルマルチメディアプレーヤー（ＰＭＰ、Ｐｏｒｔａｂｌｅ  Ｍｕｌｔｉｍｅｄｉａ  Ｐｌａｙｅｒ）、個人用の携帯情報端末（ＰＤＡ、Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）、音楽再生機（例えば、ＭＰ３プレーヤー、携帯型ゲーム端末、又はデジタル放送プレーヤーなどの様々な情報通信機器とマルチメディア機器に適用可能であるということはいうまでもない。
【００１２】
また、本発明のスケジュール管理装置は、光学式文字読取機と、ユーザー入力装置と、を備える。光学式文字読取機は一般に、カメラと、イメージから文字を認識して抽出する文字読み取りアプリケーションと、を備える。さらに、ユーザー入力装置には周知の如く、ライトペン、マウス、タッチパッド、トラックボール及びタッチスクリーンなどがある。以下、スケジュール管理装置をスマートフォンとし、ユーザー入力装置をタッチスクリーンとして説明する。
【００１３】
また、本発明のスケジュール管理装置は、ユーザーのスケジュールを管理するアプリケーション又はウィジェットを備える。ここで、ウィジェットは、アプリケーションを介さずにコンテンツや機能を直ちに利用できるようにするミニアプリケーションである。例えば、天気、カレンダー、計算機、ニュースなどのアプリケーションがウィジェットに相当する。以下、本発明において、スケジュール管理アプリケーションとは、スケジュール管理ミニアプリケーション、即ち、スケジュール管理ウィジェットを含む概念であることを明らかにしておく。このようなスケジュール管理アプリケーションは、オンラインマーケットからダウンロードできる。
【００１４】
特に、本発明の一実施例に係るスケジュール管理アプリケーションは、撮影された又は既に格納されたイメージからデータを認識して抽出する機能と、抽出されたデータを予め定められた分類規則に従って、予め定められた項目（カテゴリ）のグループの一つに自動的に分類してスケジュールを生成する機能と、を提供する。また、本発明に係るスケジュール管理アプリケーションは、撮影時又はイメージ取り込み（ｃａｐｔｕｒｅ）時にデータの認識率を高めるための機能を提供する。具体的に、これらの機能は、手振れを補正する機能と、センサーから入力される傾きを基に取り込むべきイメージが水平であることを示すビジュアルキュー、即ち、指示子を表示する機能と、プレビュー状態、即ち、カメラが撮影しているイメージを表示中の状態でユーザーによって指定された個所にフォーカシングする機能と、イメージの種類によってカメラの撮影モードを設定する機能と、を含む。
【００１５】
図１は、本発明の一実施形態に係るスケジュール管理装置の構成を示す図である。
【００１６】
図１を参照すると、本発明のスケジュール管理装置は、タッチスクリーン１１０と、キー入力部１２０と、表示部１３０と、格納部１４０と、センサー部１５０と、カメラ１６０及び制御部１７０を備える。
【００１７】
図１に示すような構成を有するスケジュール管理装置は、プレビュー画面と、これにオーバーラップされた撮影メニュー画面と、を表示できる。ここで、撮影メニュー画面は、撮影モードを選択するためのモード選択アイコンと、撮影中のイメージ、即ち、プレビュー画面をキャプチャーするためのキャプチャーアイコンと、既に格納されたイメージを選択するためのギャラリーアイコンと、を備える。
また、本発明の一実施例に係るスケジュール管理装置は、文字を認識するに当たって、イメージの傾きの程度が予め文字を最適認識できるように選ばれた所定の範囲内にあるか否かを示す指示子をプレビュー画面にオーバーラップして表示する。
即ち、スケジュール管理装置は、このような指示子を表示することにより、カメラ、従って、取り込むべきイメージと取り込むべきオブジェクトとの整列をユーザーが確保できるように誘導し、その結果、イメージの中の文字が、表示画面の例えばＸ軸と整列する。若しくは、指示子は、水平面に対するイメージの傾きの程度が所定の範囲内にあるか否かを指示する。
さらに、スケジュール管理装置は、ユーザーが指定した個所の取り込んだイメージをフォーカシングする。特に、本発明に係るスケジュール管理装置は、多重フォーカス機能を支援する。そして、スケジュール管理装置は、前記指示子をフォーカシング個所に表示する。また、スケジュール管理装置は、撮影モードをＰＣ画面撮影モード、チケット撮影モード、ポスター撮影モードなどに分類し、撮影モードに応じてカメラの倍率などを自動的に調整する。
さらに、スケジュール管理装置は、イメージキャプチャー画面と、これにオーバーラップしたスケジュールデータ生成メニュー画面と、を表示する。ここで、スケジュールデータ生成メニュー画面は、認識領域を選択するための選択ツールアイコンと、取り消しアイコンと、完了アイコンと、を備える。そして、スケジュール管理装置は、選択された認識領域からデータを抽出し、抽出されたデータの全部又は一部を含むスケジュールデータを生成し、スケジュールのタイトル、期限、詳細情報及び位置情報などを含むスケジュールデータエントリー画面を表示する。以下、このようなスケジュール管理装置の各構成について詳述する。
【００１８】
引き続き図１を参照して、タッチスクリーン１１０は、画面の特定の個所に対するユーザーのタッチに応答してタッチイベントを発生し、生成したタッチイベントを制御部１７０に受け渡す。このようなタッチイベントは、その動作によって、タッチ、タップ、ダブルタップ、プレス、ドラッグ、ドラッグアンドドロップ、フリック及びドラッグアンドフリックなどに分類できる。
ここで、タッチは、ユーザーがタッチスクリーンのある一個所をタッチする動作であり、タップは、ユーザーがある一個所をタッチした後にタッチングオブジェクト、例えば、指、の移動なしに当該個所から手を離す動作である。タッチイベントがタップに分類されるためには、タッチしている指がタッチスクリーンからある所定の時間内に離れなければならない。
ダブルタップは、ユーザーがある一個所を有る所定の時間内に連続して２回タップする動作であり、プレスは、タップを登録する場合よりも相対的に長い所定の時間だけタッチした後に指の移動なしに当該個所から指を離す動作であり、ドラッグは、ユーザーがタッチスクリーンとの接触を維持した状態で指を所定の方向に移動する動作であり、ドラッグアンドドロップは、ユーザーがドラッグした後に手を離す動作であり、フリックは、ユーザーがタッチスクリーンを横切って跳ねるようにその指を高速移動した後に離す動作である。ここで、ドラッグはスクロールとも呼ばれる。
なお、ドラッグアンドフリックは例えば、ユーザーがタッチスクリーンを横切ってドラッグしていてある時点においてフリックをする動作（即ち、指がタッチスクリーン１１０に接触して離れない状態でドラッグとフリックとが中段なく連続して行われる動作）を意味する。
制御部１７０は、移動速度によってフリックとドラッグを区別する。制御部１７０は、このようなタッチイベントに応答して表示部１３０を制御する。
【００１９】
キー入力部１２０は、スケジュール管理装置の操作のための単数又は複数のキーから構成され、キー信号を制御部１７０に受け渡す。制御部１７０は、このようなキー信号に応答して表示部１３０などを制御する。キー信号は、電源オン／オフ信号、ボリューム調節信号、又は画面オン／オフ信号などに分類できる。
【００２０】
引き続き図１を参照すると、表示部１３０は、制御部１７０から入力された映像データをアナログ信号に変換して表示する。即ち、表示部１３０は、スケジュール管理装置の利用による種々の画面、例えば、ロック（ｌｏｃｋ）画面、ホーム画面及びアプリケーション起動画面などを表示する。ここで、ロック画面は、一般に、表示部１３０に対する電源オン信号が発生する場合に表示される映像である。
例えば、ドラッグのタッチスクリーン入力の軌跡が予め定められた軌跡と一致すると、制御部１７０は画面に表示される映像をロック画面からホーム画面又はアプリケーション起動画面に切り替える。ホーム画面は好ましくは、アプリケーションの起動のための複数のアイコンを含むイメージ映像である。ユーザーがアイコンをタッチすると、制御部１７０は当該アプリケーションを起動し、表示される映像をホーム画面からアプリケーション起動画面に切り替える。特に、スケジュール管理アプリケーションの起動画面は、前記プレビュー画面、撮影メニュー画面、キャプチャー（取り込み）画面、スケジュールデータ生成メニュー画面及びスケジュール画面などを含む。
【００２１】
さらに、表示部１３０は、ＬＣＤ（液晶表示装置）、ＯＬＥＤ（Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）などのフラット表示パネルにより構成可能である。また、表示部１３０は、左眼イメージと右眼イメージを表示して、左／右眼イメージの差によりユーザーに奥行きを感じさせる３Ｄ具現部を備えることができる。３Ｄ具現方式は、周知の如く、眼鏡方式と無眼鏡方式とに分けられる。眼鏡方式としては、色フィルター方式、偏光フィルター方式及びシャッターグラス方式などがあり、無眼鏡方式としては、レンチキュラレンズ方式及びパララックスバリア方式などがある。
【００２２】
格納部１４０は好ましくは、持続性（電源を切っても内容が消えない）の機械読取可能な媒体を含み、表示部１３０に出力されるべき画面、特に、本発明の実施形態に係る機能動作に必要な、スケジュール管理アプリケーションの起動画面をはじめとするアプリケーションを格納する。
そして、格納部１４０は、タッチスクリーン１１０の運用のためのキーマップやメニューマップなどを格納できる。ここで、キーマップ及びメニューマップは、それぞれ種々の形態を取り得る。即ち、キーマップは例えば、キーボードマップ、３×４キーマップ、クウォーティー（Ｑｗｅｒｔｙ）キーマップ、又は、現在起動中のアプリケーションの制御のための制御キーマップである。なお、メニューマップは例えば、現在起動中のアプリケーションの制御のためのメニューマップである。
【００２３】
さらに図１を参照すると、格納部１４０は大別して、プログラム領域とデータ領域とを備える。
プログラム領域は、スケジュール管理装置のブート及び上述した各構成要素の運用のためのオペレーティングシステム（ＯＳ、Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）と、種々のユーザー機能、例えば、通話機能の支援のためのユーザー機能、インターネットサーバーに接続するためのウェブブラウザー、その他の音源を再生するためのＭＰ３ユーザー機能、写真などを再生するためのイメージ出力機能、動画再生機能などをそれぞれ支援するための応用プログラムと、を格納する。
特に、本発明のプログラム領域は、前記スケジュール管理アプリケーションを格納する。
【００２４】
一方、データ領域は、スケジュール管理装置の使用に伴い制御部１７０によって発生されるデータ、特に、スケジュールが格納される領域であって、例えば、スケジュールに関わるイメージ（例えば、地図）、期限情報、アラーム時間、スヌーズ設定有無を示す設定値及び詳細情報などを格納する。
【００２５】
センサー部１５０は、スケジュール管理装置の傾きを測定して制御部１７０に受け渡す。具体的に、センサー部１５０は、水平面とスケジュール管理装置の横（幅）方向との間の水平角θｗ（以下、横傾き）、及び、水平面とスケジュール管理装置の縦（長手）方向との間の水平角θｌ（以下、縦傾き）を測定して制御部１７０に受け渡す。このようなセンサー部１５０は、加速度センサー、慣性センサーなどにより実現可能である。
【００２６】
カメラ１６０は、イメージを撮影し、取り込んだイメージを制御部１７０に出力するものであり、２つ又はそれ以上の別々のカメラ、例えば、端末の前面に配置される前面カメラと、背面に配置される背面カメラと、を含むカメラモジュールを備え得る。
特に、本発明に係るカメラ１６０は、倍率を調整する機能、接写撮影機能、ぼやけた静止画イメージ及びグラグラ揺れる動画イメージを防ぐ手振れ補正機能及び多重フォーカシング機能を有し得る。ここで、このような多重フォーカシングを支援するために、カメラ１６０は、２以上のレンズを備え得るが、このような多重フォーカシングは、周知のように、ソフトウェア的にも実現可能である。
【００２７】
制御部１７０は、プロセッサ又はマイクロプロセッサを備え、スケジュール管理装置の全般的な動作及びスケジュール管理装置の内部ブロック間の信号の流れを制御する。特に、本発明に係る制御部１７０は、タッチスクリーン１１０から入力されるタッチイベントに応答して前記スケジュール管理アプリケーションの起動画面を表示するように表示部１３０を制御する機能を行う。
また、制御部１７０は、センサー部１５０から入力される傾きを基に一種のフィードバックを行い、その傾きがイメージ撮影にとり適切になるようにユーザーを案内する機能を行う。さらに、制御部１７０は、タッチスクリーン１１０から入力されるタッチイベントに応答して多重フォーカシングするようにカメラ１６０を制御する機能を行う。そして、制御部１７０は、フォーカシングされた領域からデータを抽出し、予め定められた規則によって抽出されたデータを用いてスケジュールデータを生成する機能を行う。なお、制御部１７０は、ユーザーによって設定又は要請された認識領域からデータを抽出しても良い。このような制御部１７０の機能について、以下、図面に基づいて詳述する。
【００２８】
図２は、本発明の一実施形態に係るプレビュー画面及び撮影メニュー画面を説明するための図である。このプレビュー画面及び撮影メニュー画面は全くの一具体例に過ぎず、その外見は広範囲に変動し得ることは容易に理解されよう。図２を参照すると、ホーム画面に表示されるアイコンのうちスケジュール管理アプリケーションを起動するためのアイコンがユーザーによってタッチされると、タッチスクリーン１１０はこれと関わるタッチイベントを制御部１７０に受け渡す。これにより、制御部１７０は表示部１３０を制御して、スケジュール管理アプリケーションのメイン画面を表示する。例えば、スケジュール画面がメイン画面として指定される。メイン画面において撮影アイコンがタッチされると、タッチスクリーン１１０はこれと関わるタッチイベントを制御部１７０に受け渡す。これにより、制御部１７０はカメラ１６０を駆動する。そして、制御部１７０は、カメラ１６０から入力されるプレビュー画面２１０を表示部１３０に受け渡し、表示部１３０はプレビュー画面２１０を表示する。
【００２９】
さらに、制御部１７０は、撮影メニュー画面２２０がプレビュー画面２１０にオーバーラップされるように表示部１３０を制御する。ここで、撮影メニュー画面２２０にはモード選択アイコン２１１、キャプチャーアイコン２１２及びギャラリーアイコン２１３が含まれる。ユーザーは、トッグル方式により撮影モードを選択できる。具体的に、撮影モードは、ＰＣ画面撮影モード、チケット撮影モード及びポスター撮影モードに分けられる。撮影モードとしてＰＣ撮影モードが選択されていると、モード選択アイコン２１１は「ＰＣ」と表示される。「ＰＣ」と表示されているモード選択アイコン２１１をユーザーがタップ又はフリックすると、タッチスクリーン１１０は、これと対応するタッチイベントを制御部１７０に受け渡す。
これにより、制御部１７０は表示部１３０を制御してモード選択アイコン２１１を「Ｔｉｃｋｅｔ」と表示するようにする。そして、制御部１７０は、現在設定されている倍率をチケット撮影モードに予め指定されている倍率に変更するようにカメラ１６０を制御する。このように制御部１７０は、モード選択アイコン２１１の選択により、ＰＣ、チケット及びポスターのうち少なくとも一つの撮影モードに切り替わるように制御する。一方、制御部１７０は、キャプチャーアイコン２１２が選択されると、カメラ１６０から入力されるイメージをキャプチャーして格納部１４０に格納し、表示部１３０を制御してキャプチャー画面を表示するようにする。なお、制御部１７０は、ギャラリーアイコン２１３が選択されると、カメラ１６０の駆動を中止する。そして、制御部１７０は、プレビュー画面２１０の代わりに既に格納されたイメージを表示するように表示部１３０を制御する。
【００３０】
図３乃至図５は、本発明の一実施形態に係るデータ認識率を高めるための機能を説明するための図である。先ず、図３を参照すると、制御部１７０は、カメラ１６０から入力されるイメージからデータを認識する。次いで、制御部１７０は、データの横基準線３０１の、スケジュール管理装置の横基準線３０２に対する水平角Φ（以下、データ傾き）を測定する。このとき、制御部１７０は、認識されたデータの横基準線３０１とスケジュール管理装置の横基準線３０２を表示するように表示部１３０を制御する。制御部１７０は、測定されたデータ傾きΦと予め定められたデータ傾き閾値Ｔｈ＿Φとを比較する。比較の結果、データ傾きΦがその閾値Ｔｈ＿Φ以内であれば、制御部１７０は前記２本の横基準線３０１、３０２を消す。
【００３１】
次いで、図４を参照すると、制御部１７０は、スケジュール管理アプリケーションが撮影モードにあれば、センサー部１５０を駆動する。これにより、センサー部１５０は、イメージ４１０が置かれた水平面４２０とスケジュール管理装置４３０の横との間の横傾きθｗを測定して制御部１７０に受け渡す。また、センサー部１５０は、水平面４２０とスケジュール管理装置４３０の縦との間の縦傾きθｌを測定して制御部１７０に受け渡す。これにより、制御部１７０は、受信された横傾きと予め定められた横傾き閾値Ｔｈ＿θｗとを比較する。そして、制御部１７０は、受信された縦傾きと予め定められた縦傾き閾値Ｔｈ＿θｌとを比較する。
【００３２】
次に、図５（ａ）を参照すると、制御部１７０は、前記比較の結果、Φ≦Ｔｈ＿Φ、θｗ≦Ｔｈ＿θｗ、及び、θｌ≦Ｔｈ＿θｌという条件を満たすと、イメージが前記所定の条件を満たすことを示す第１の指示子５１０を表示するように表示部１３０を制御する。
これに対し、上述した条件が一つでも満たされていなければ、図５（ｂ）に示すように、イメージが前記所定の条件を満たさないことを示す第２の指示子５２０を表示するように表示部１３０を制御する。前記所定の条件を満たすイメージの方が、前記所定の条件を満たさないイメージよりも認識が容易である、即ち、コンピュータ資源を要しない。前記条件は本発明の動作を具体的に説明するための一例であり、変更可能である。
また本実施例では、第１指示子５１０と第２指示子の差異は、第１指示子が塗りつぶされていることであるが、当業者ならば、本発明の範囲内で様々な選択肢があること、例えば、指示子がブリンク（点滅）する、又は異なるレートで点滅する、サイズ又は色が異なる、若しくは、表示時間が異なる、という選択肢があること、を容易に理解できるであろう。
【００３３】
図６は、本発明の一実施形態に係る多重フォーカシング機能を説明するための図である。
図６を参照すると、制御部１７０は、表示部１３０を制御してプレビュー画面６１０が表示されるようにする。そして、制御部１７０は、モード選択アイコン６２１、キャプチャーアイコン６２２及びギャラリーアイコン６２３がプレビュー画面６１０にオーバーラップされるように表示部１３０を制御する。一方、プレビュー画面６１０において複数の特定の個所６３１、６３２、６３３がタッチされると、タッチスクリーン１１０は、これと関わるタッチイベントを制御部１７０に受け渡す。これにより、制御部１７０は、タッチされた特定の個所６３１、６３２、６３３にそれぞれフォーカス６４１、６４２、６４３を表示するように表示部１３０を制御する。そして、制御部１７０は、タッチされた特定の個所６３１、６３２、６３３を多重フォーカシングするようにカメラ１６０を制御する。
【００３４】
図７は、本発明の一実施形態に係る認識領域選択機能を説明するための図である。先ず、図２及び図６に戻ると、制御部１７０は、キャプチャーアイコン２１２、６２２が選択されると、カメラ１６０から入力されるイメージをキャプチャーする。
そして、図７（ａ）を参照すると、制御部１７０は、キャプチャーされたイメージを含むキャプチャー画面７１０を表示するように表示部１３０を制御する。そして、制御部１７０は、スケジュールデータ生成メニュー画面７２０がキャプチャー画面７１０にオーバーラップするように表示部１３０を制御する。画面７１０と７２０が表示の異なる領域を占めて互いにオーバーラップしないようにする選択肢があることは容易に理解できよう。
ここで、スケジュールデータ生成メニュー画面７２０には、認識領域を選択するための選択ツールアイコン７２１と、取り消しアイコン‘Ｃａｎｃｅｌ’７２２と、完了アイコン‘Ｄｏｎｅ’７２３が含まれている。なお、選択ツールアイコン７２１は、既設定された図形７２１ａ及びユーザー指定図形７２１ｂを備え得る。
【００３５】
既設定された図形７２１ａが選択されると、制御部１７０は、図７（ｂ）に示すように、タッチされた個所７３０を基に、タッチされた個所７３０に位置するデータが含まれるように認識領域７４０を設定する。そして、制御部１７０は、このようにして設定された認識領域７４０を表示するように表示部１３０を制御する。また、タッチされた個所７３０が再タッチされるか、あるいは、表示されている認識領域７４０がタッチされると、制御部１７０は設定を取り消す。そして、制御部１７０は、表示部１３０を制御して認識領域７４０を消えさせる。このようにして、制御部１７０は複数の認識領域を設定できる。
【００３６】
一方、ユーザー指定図形７２１ｂが選択されると、制御部１７０は、図７（ｃ）に示すように、ユーザーが描く軌跡７５０を表示するように表示部１３０を制御する。このような軌跡７５０が、図７（ｄ）に示すように、閉曲線７６０になると、制御部１７０は、閉曲線７６０内の領域を認識領域として設定する。このようにして設定された認識領域は、ユーザーのタッチによって設定が取り消されるようにもできる。
【００３７】
図８及び図９は、本発明の一実施形態に係るスケジュールデータ生成機能を説明するための図である。先ず、図８（ａ）を参照すると、制御部１７０は、完了アイコン８１０が選択されると、設定された認識領域８２０、８３０からデータを抽出する。これに対し、取り消しアイコン８４０が選択されると、プレビュー画面又はメイン画面に戻る。
【００３８】
次いで、図８（ｂ）を参照すると、制御部１７０は、抽出されたデータを、予め定められた分類規則に従い、所定の項目のグループの一つに分類してスケジュールデータを生成する。ここで、抽出されたデータは、テキストだけではなく、イメージ、地図など種々の情報を含む。そして、制御部１７０は、生成されたスケジュールデータを含むスケジュールデータエントリー画面８５０を表示するように表示部１３０を制御する。具体的に、制御部１７０は、抽出されたデータのうちフォントが最も大きなデータを題目として分類する。
そして、制御部１７０は、抽出されたデータのうち時間関係の情報を予定日時として分類する。ここで、予定日時は、図８（ｂ）を参照すると、開始時間と終了時間を含む。終了時間は、例えば、制御部１７０が開始時間を参照して自動的に指定する。即ち、制御部１７０は、抽出された時間を開始時間として分類し、開始時間から、例えば、１時間後を終了時間として設定する。もし、抽出された時間が複数である場合に、制御部１７０は、最も早い時間を開始時間として分類し、残りは詳細情報として分類する。また、制御部１７０は、題目及び予定日時として分類されたデータを除く残りのデータを詳細情報として分類する。なお、制御部１７０は、格納アイコン‘Ｓａｖｅ’８６０が選択されると、生成されたスケジュールを格納部１４０に格納する。これに対し、取り消しアイコン‘Ｃａｎｃｅｌ’８７０が選択されると、例えば、プレビュー画面又はメイン画面に戻る。
【００３９】
次いで、図９を参照すると、制御部１７０は、詳細情報項目９１０が選択されると、項目変更メニュー９２０を表示するように表示部１３０を制御する。そして、制御部１７０は、既存の項目を項目変更メニュー９２０から選択された項目、例えば、位置‘Ｌｏｃａｔｉｏｎ’に変更する。このように項目が位置に変更された状態で、完了アイコン９３０が選択されると、制御部１７０は、例えば、位置項目９４０に記載のデータ情報と関連する位置情報９５０を含むスケジュール画面９６０を表示するように表示部１３０を制御する。ここで、位置情報９５０は、例えば、スケジュール管理装置がネットワークを介してサーバーからダウンロードされたものであるか、又は、格納部１４０に格納された地図から抽出されたものである。なお、制御部１７０は、イメージビューアイコン９７０が選択されると、キャプチャーされたイメージを表示するように表示部１３０を制御する。
【００４０】
図１０は、本発明の一実施形態に係るスケジュール管理方法を説明するためのフローチャートである。
図１０を参照すると、ステップ１００１において、制御部１７０はスケジュール管理アプリケーションを起動する。表示される起動画面から撮影メニューが選択（ステップ１００２）される場合、ステップ１００３において、制御部１７０はカメラ１６０を駆動する。そして、制御部１７０は、カメラ１６０から入力されるイメージを表示部１３０に受け渡して表示されるようにする。
ステップ１００４において、制御部１７０は、入力されるイメージからデータ傾きを測定する。そして、制御部１７０は、測定されたデータ傾きΦ及びセンサー部１５０から受信された横傾きθｗ、縦傾きθｌをそれぞれ、その閾値と比較して撮影中のイメージが水平であり、且つ撮影すべき対象がカメラに整列しているか否かを判断する。即ち、制御部１７０は、Φ≦Ｔｈ＿Φ、θｗ≦Ｔｈ＿θｗ、及び、θｌ≦Ｔｈ＿θｌという条件が満たされるか否かを判断する。
【００４１】
ステップ１００４における判断の結果、カメラが水平でないか、及び／又は、撮影すべき対象がカメラに整列していない場合、即ち、前記条件のうちいずれか一つでも満たされていない場合には、制御部１７０はステップ１００５に移行して第２の指示子５２０を表示するように表示部１３０を制御する。これに対し、誤差範囲内においてイメージが水平であり、且つ、撮影すべき対象がカメラに整列している場合には、制御部１７０はステップ１００６に移行して第１の指示子５１０を表示するように表示部１３０を制御する。
【００４２】
次いで、キャプチャーアイコン２１２、６２２が選択されると、ステップ１００７において、制御部１７０はカメラ１６０から入力されるイメージをキャプチャーして格納部１４０に格納し、ステップ１００８に移行してキャプチャーされたイメージを含むキャプチャー画面を表示するように表示部１３０を制御する。次いで、ステップ１００９において、制御部１７０は、表示されるイメージから少なくとも一つの認識領域を設定する。このような認識領域の設定については、既に図７に基づいて詳述した。ステップ１０１０において、制御部１７０は、設定された認識領域からデータを抽出する。そして、ステップ１０１１において、制御部１７０は、予め定められた分類規則により、抽出されたデータを含むスケジュールデータを生成する。このような分類規則の例は、図８に基づいて既に説明した。ステップ１０１２において、制御部１７０は、生成されたスケジュールを格納する。
【００４３】
図１１は、本発明の他の実施形態に係るスケジュール管理方法を説明するためのフローチャートである。図１１を参照すると、ステップ１１０１乃至ステップ１１０６は、それぞれ上述したステップ１００１乃至ステップ１００６と同じ過程であるので、詳細な説明を省略する。ステップ１１０７において、制御部１７０は、少なくとも一つのユーザー入力イベントを感知すると、ステップ１１０８に移行してユーザー入力イベントに相当する個所にフォーカシングするようにカメラ１６０を制御する。
即ち、制御部１７０は、カメラ１６０のフォーカシング機能を用いてプレビュー画面から認識領域を設定する。ここで、ユーザー入力イベントは、ユーザー入力装置から制御部１７０に入力されるイベントであり、タッチスクリーン１１０により発生されるタッチイベントであってもよい。そして、制御部１７０は、ユーザー入力個所にフォーカスを表示するように表示部１３０を制御する。次いで、キャプチャーアイコン２１２、６２２が選択されると、ステップ１１０９において、制御部１７０は、カメラ１６０から入力されるイメージをキャプチャーして格納部１４０に格納する。そして、ステップ１１１０において、制御部１７０は、キャプチャーされたイメージからデータを抽出する。次いで、ステップ１１１１において、制御部１７０は、予め定められた分類規則により、抽出されたデータ項目別に分類してスケジュールデータを生成する。このような規則の例は、図８に基づいて既に説明した。次いで、ステップ１１１２において、制御部１７０は、生成されたスケジュールデータを格納する。
【００４４】
本発明に係るスケジュール管理方法及び装置は上述した実施形態に何ら制限されるものではなく、本発明の技術思想が許容する範囲において種々に変形して実施できるであろう。
【符号の説明】
【００４５】
１１０    タッチスクリーン
１２０    キー入力部
１３０    表示部
１４０    格納部
１５０    センサー部
１６０    カメラ
１７０    制御部
２１０    プレビュー画面
２１１    モード選択アイコン
２１２    キャプチャーアイコン
２１３    ギャラリーアイコン
２２０    撮影メニュー画面
３０１    データの横基準線
３０２    スケジュール管理装置の横基準線
４１０    イメージ
４２０    水平面
４３０    スケジュール管理装置
５１０    第１の指示子
５２０    第２の指示子
６１０    プレビュー画面
６２１    モード選択アイコン
６２２    キャプチャーアイコン
６２３    ギャラリーアイコン
６３１、６３２、６３３    タッチされた特定の個所
６４１、６４２、６４３    フォーカス
７１０    キャプチャー画面
７２０    スケジュールデータ生成メニュー画面
７２１    選択ツールアイコン
７２１ａ    選択ツールアイコンの既に設定された図形
７２１ｂ    ユーザー指定図形
７２２、８４０、８７０    取り消しアイコン
７２３、８１０、９３０    完了アイコン
７３０    タッチされた個所
７４０、８２０、８３０    認識領域
７５０    ユーザーが描く軌跡
７６０    ユーザーが描く軌跡の閉曲線
８５０    スケジュールデータエントリー画面
８６０    格納アイコン
９１０    詳細情報項目
９２０    項目変更メニュー
９４０    位置項目
９５０    位置情報
９６０    スケジュール画面
９７０    イメージビューアイコン
【図１】
2013054742.tif 000003
【図２】
2013054742.tif 000004
【図３】
2013054742.tif 000005
【図４】
2013054742.tif 000006
【図５】
2013054742.tif 000007
【図６】
2013054742.tif 000008
【図７】
2013054742.tif 000009
【図８】
2013054742.tif 000010
【図９】
2013054742.tif 000011
【図１０】
2013054742.tif 000012
【図１１】
2013054742.tif 000013