(57)【要約】【課題】情報処理端末装置のスケジュール管理機能により管理するスケジュールと、スケジュール手帳に書き込まれたスケジュールとを正確かつ十分に把握する。【解決手段】情報処理端末装置２０の保存処理部５７は、スケジュール手帳を撮像して得た原画像データで示される各日の手書きデータを生成して、この手書きデータを同じ日のスケジュールデータと日付データに関連づけて保存する。そして、情報処理端末装置２０の表示処理部５４は、指定された日付の手書きデータを同じ日付のスケジュールデータとあわせてタッチパネルディスプレイに表示させる。【選択図】図５
2013235396.tif 000002
【特許請求の範囲】
【請求項１】
所定位置に日付が記述され、かつ前記日付の記述位置を含んで定義される所定領域内に当該日付の関連情報が記述された撮像対象物を撮像する撮像手段と、
前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される、前記日付の関連情報を当該画像データに関わる日付に関連付けて保存する画像データ保存手段と
を備えたことを特徴とする情報処理装置。
【請求項２】
前記日付のスケジュール情報の入力を受け付ける入力手段と、
表示装置と、
前記入力手段により入力されたスケジュール情報を当該スケジュール情報に関わる日付に関連付けて保存する入力情報保存手段と、
前記入力情報保存手段により保存したスケジュール情報に対応する日付と、前記画像データ保存手段により保存した画像データで示される日付とに基づいて、同じ日付について、前記画像データ保存手段により保存した画像データと前記入力情報保存手段により保存したスケジュール情報とをあわせて前記表示装置に表示する表示制御手段と
をさらに備えたことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記表示制御手段は、
前記入力情報保存手段により保存した情報で示される、所定の週に属する日付と、前記画像データ保存手段により保存した画像データで示される前記所定の週に属する日付とに基づいて、同じ週に属するそれぞれの日付について、前記画像データ保存手段により保存した画像データと前記入力情報保存手段により保存した情報とをあわせて前記表示装置に表示する
ことを特徴とする請求項２に記載の情報処理装置。
【請求項４】
前記表示制御手段は、
前記入力情報保存手段により保存した情報で示される所定の年月日と、前記画像データ保存手段により保存した画像データで示される前記所定の年月日とに基づいて、同じ年月日について、前記画像データ保存手段により保存した画像データと前記入力情報保存手段により保存した情報とをあわせて前記表示装置に表示する
ことを特徴とする請求項２乃至請求項３のいずれかに記載の情報処理装置。
【請求項５】
前記表示制御手段は、
前記画像データ保存手段により保存した、所定の月に属する各日の画像データを一覧形式で前記表示装置に表示する
ことを特徴とする請求項２乃至請求項４のいずれかに記載の情報処理装置。
【請求項６】
前記画像データ保存手段により保存した画像データのそれぞれにはタグ情報が関連付けられており、
前記表示制御手段は、
前記画像データ保存手段により保存した、所定のタグ情報に属する画像データを一覧形式で前記表示装置に表示する
ことを特徴とする請求項２乃至請求項５のいずれかに記載の情報処理装置。
【請求項７】
前記撮像対象物は、
所定位置に、図形からなるシンボルコードにより形成された位置決め用シンボルを有し、
前記位置決め用シンボルを基準に特定される第１の所定領域内の所定位置に日付が記述され、かつ前記日付の記述位置を含んで定義される、前記第１の所定領域内の第２の所定領域内に当該日付の関連情報が記述され、
前記画像データ保存手段は、
前記撮像手段により前記撮像対象物を撮像して得た原画像データ内の前記第２の所定領域内に記述された日付および前記日付の関連情報を関連付けて保存する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項８】
前記撮像手段により得た画像には、前記第２の所定領域に対応し、かつ日付の情報が記述されるマス目が示され、
前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される、月の始まりの日のマス目の位置、および月の終わりの日のマス目の位置に基づいて、当該原画像データで示される日付が属する年および月を判定する判定手段をさらに備え、
前記画像データ保存手段は、
前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される、前記日付の関連情報を当該画像データに関わる、前記判定手段により判定した年および月に属する日付に関連付けて保存する
ことを特徴とする請求項７に記載の情報処理装置。
【請求項９】
前記撮像手段により得た画像には、前記第２の所定領域に対応するマス目が示され、
前記画像データ保存手段は、
前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される各日に対応するマス目の位置を特定し、この特定したマス目内の画像を、該当の日の関連情報および該当の日付に関連付けて保存する
ことを特徴とする請求項７に記載の情報処理装置。
【請求項１０】
日付の関連情報を当該画像データに関わる日付に関連付けて保存する画像データ保存手段と、
前記日付の関連情報の入力を受け付ける入力手段と、
表示装置と、
前記入力手段により入力された関連情報を当該関連情報に関わる日付に関連付けて保存する入力情報保存手段と、
前記入力情報保存手段により保存した情報で示される日付と、前記画像データ保存手段により保存した画像データで示される日付とに基づいて、同じ日付について、前記画像データ保存手段により保存した画像データと前記入力情報保存手段により保存した情報とをあわせて前記表示装置に表示する表示制御手段と
を備えたことを特徴とする情報処理装置。
【請求項１１】
所定位置に日付が記述され、かつ前記日付の記述位置を含んで定義される所定領域内に当該日付の関連情報が記述された撮像対象物を撮像する撮像手段を有する情報処理装置における情報処理方法であって、
前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される、前記日付の関連情報を当該画像データに関わる日付に関連付けて保存する
ことを特徴とする情報処理方法。
【請求項１２】
所定位置に日付が記述され、かつ前記日付の記述位置を含んで定義される所定領域内に当該日付の関連情報が記述された撮像対象物を撮像する撮像手段を有するコンピュータを、
前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される、前記日付の関連情報を当該画像データに関わる日付に関連付けて保存する画像データ保存手段
として機能させるための情報処理プログラム。
【請求項１３】
所定位置に、図形からなるシンボルコードにより形成された位置決め用シンボルを有し、この位置決め用シンボルを基準にして特定される第１の所定領域内の所定位置に日付が記述され、かつ前記日付の記述位置を含んで定義される前記第１の所定領域内の第２の所定領域内に当該日付の関連情報が記述される撮像対象物を撮像する撮像手段、前記撮像手段により前記撮像対象物を撮像して得た原画像画像データから前記シンボルを検出し、このシンボルを基準に特定される前記第１の所定領域内に記述された日付および前記日付の関連情報を当該画像データに関わる日付に関連付けて保存する画像データ保存手段を有する情報処理装置で用いられる撮像対象物であって、
前記第１の所定領域を特定するための位置決め用シンボルを備えた
ことを特徴とする撮像対象物。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、スケジュール情報を管理する機能を有する情報処理装置、情報処理方法、情報処理プログラムおよび撮像対象物に関する。
【背景技術】
【０００２】
従来、スマートフォンなどの情報処理端末装置のユーザは、スケジュール管理機能を用いてカレンダーを表示させて、所望の日時のスケジュールの文字入力などを行なった上で、この情報処理端末装置のディスプレイに任意に表示させることでスケジュールを確認している。
【０００３】
また、ユーザは、情報処理端末装置とは別に、紙媒体のスケジュール手帳を携帯し、このスケジュール手帳のカレンダーを開いて、所望の日付の欄に文字や図形などのスケジュールを書き込むことができる。このスケジュール手帳を用いる際は、情報処理端末装置のように起動する手間がいらないため、素早くスケジュールを記録しておきたい際に有効である。
【０００４】
ユーザは、前述した情報処理端末装置とスケジュール手帳とを併用する場合、例えば、スケジュール手帳に書き込んだ、ある日付のスケジュールの文字情報を、情報処理端末装置のスケジュール管理機能を用いて、同じ日時のスケジュールとして改めて入力したり、情報処理端末装置のスケジュール表示画面と、スケジュール手帳のカレンダーとをあわせて参照したりしている。
【０００５】
また、スケジュール手帳に書き込んだスケジュール情報を情報処理端末装置に取り込むために、例えば、特許文献１に開示されるように、撮像機能付き情報処理端末装置で、手帳などのドキュメントの撮像をする際にドキュメント用紙に位置決めシンボルを印刷しておき、この位置決めシンボルを基準に画像処理を行うものがある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１２−６８７４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述したようにスケジュール手帳を撮像して得た画像データは、撮像を行なった情報処理端末装置の記憶装置に保存して、この情報処理端末装置のディスプレイに任意に表示させる事ができる。
【０００８】
しかしながら、ディスプレイに表示されるのは、スケジュール手帳に書き込まれていた、ある日付のスケジュールを示す画像のみであり、ユーザは、情報処理端末装置のスケジュール管理機能で入力された、同じ日付のスケジュールをあわせて参照する事はできないので、スケジュールを正確かつ十分に参照することができない。
【０００９】
そこで、本発明の目的は、情報処理端末装置のスケジュール管理機能により管理するスケジュールと、スケジュール手帳に書き込まれたスケジュールとを正確かつ十分に把握することが可能になる情報処理装置、情報処理方法、情報処理プログラムおよび撮像対象物を提供することにある。
【課題を解決するための手段】
【００１０】
すなわち、本発明に係わる情報処理装置は、所定位置に日付が記述され、かつ前記日付の記述位置を含んで定義される所定領域内に当該日付の関連情報が記述された撮像対象物を撮像する撮像手段と、前記撮像手段により前記撮像対象物を撮像して得られる原画像データで示される、前記日付の関連情報を当該画像データに関わる日付に関連付けて保存する画像データ保存手段とを備えたことを特徴とする。
【発明の効果】
【００１１】
本発明に係わる情報処理装置では、情報処理端末装置のスケジュール管理機能により管理するスケジュールと、スケジュール手帳に書き込まれたスケジュールとを正確かつ十分に把握することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施形態における情報処理端末装置による撮像対象物であるスケジュール手帳の記述例を示す図。
【図２】本発明の実施形態における情報処理端末装置をネットワークで使用した場合の構成例を示す図。
【図３】本発明の実施形態における情報処理端末装置の構成例を示す図。
【図４】本発明の実施形態における情報処理端末装置のデータベースを示す図。
【図５】本発明の実施形態における情報処理端末装置の機能を示す機能ブロック図。
【図６】本発明の実施形態における情報処理端末装置のデータの使用形態を示す図。
【図７】本発明の実施形態における情報処理端末装置による撮像処理を説明するためのフローチャート。
【図８】本発明の実施形態における情報処理端末装置によるスケジュール手帳の撮像画面の一例を示す図。
【図９】本発明の実施形態における情報処理端末装置による画像切り出し処理を説明するためのフローチャート。
【図１０】本発明の実施形態における情報処理端末装置による撮像画像の属する年と月の候補表示画面の一例を示す図。
【図１１】本発明の実施形態における情報処理端末装置による表示制御処理を説明するためのフローチャート。
【図１２】本発明の実施形態における情報処理端末装置による表示制御処理を説明するためのフローチャート。
【図１３】本発明の実施形態における情報処理端末装置による表示モード選択画面の一例を示す図。
【図１４】本発明の実施形態における情報処理端末装置による月表示画面の一例を示す図。
【図１５】本発明の実施形態における情報処理端末装置による週表示画面の一例を示す図。
【図１６】本発明の実施形態における情報処理端末装置による日表示画面の一例を示す図。
【図１７】本発明の実施形態における情報処理端末装置によるリスト表示画面の一例を示す図。
【図１８】本発明の実施形態における情報処理端末装置による月別メモギャラリー表示画面の一例を示す図。
【図１９】本発明の実施形態における情報処理端末装置による切り出し画像のタグ設定画面の一例を示す図。
【図２０】本発明の実施形態における情報処理端末装置によるタグ検索表示画面の一例を示す図。
【図２１】本発明の実施形態における情報処理端末装置によるタグ別メモギャラリー表示画面の一例を示す図。
【図２２】本発明の実施形態における情報処理端末装置によるメモ拡大画像画面の一例を示す図。
【図２３】本発明の実施形態における情報処理端末装置による共有保存画面の一例を示す図である。
【発明を実施するための形態】
【００１３】
以下図面により本発明の実施形態について説明する。  
図１は、本発明の実施形態における情報処理端末装置による撮像対象物であるスケジュール手帳の表面の構成を示す図である。  
図１に示した紙媒体のスケジュール手帳は、本発明の実施形態における情報処理端末装置による撮像対象物であり、このスケジュール手帳には、例えば一年分のカレンダーが月ごとに分けて印刷されている。
【００１４】
それぞれの月のカレンダーには、年および月の記述部分と、曜日に対応するマス目の記述部分と、各日に対応するマス目の記述部分とがある。各日のマス目の一部分、例えば図１に示したような、当該マス目の左上の部分には該当日の数字が所定のフォントにて印刷されている。例えば各月１日のマス目には、この１日を示す「１」が印刷されている。
【００１５】
本実施形態では、スケジュール手帳のカレンダーの一月分のマス目全体の四隅に図形からなるシンボルコードにより形成された位置決め用シンボルであるマーカー１が印刷されている。このマーカーは、マス目全体の左上、右上、左下、右下にそれぞれ印刷される。
【００１６】
スケジュール手帳における、前述した四隅のマーカー１に囲まれた領域の、各日に対応するそれぞれのマス目における日付の数字の印刷部分以外には、ユーザが該当日のスケジュールとして手書きの文字、図形、記号、絵等を描画できるようになっている。例えば１月１日に対応するマス目には、この１月１日のスケジュールを示す手書きの文字、図形、記号、絵等を描画できるようになっている。そして、これらマーカー１に囲まれた領域が撮像されて原画像データとして保存される。  
また、本実施形態では、各月のカレンダーの四隅のマーカー１に囲まれた領域のサイズは同じであり、各日に対応するマス目の数は、各月の日数に関わらず、６行７列でなる計４２個であるとする。これらのマス目のうち、日付が印刷されないマス目は空欄となっている。例えば、２月の終わりの日が２８日であって、２月２８日が土曜日である場合は、下２行分のマス目は空欄となる。
【００１７】
図２は、本発明の実施形態における情報処理端末装置をネットワークで使用した場合の構成例を示す図である。  
本実施形態における情報処理端末装置２０はスマートフォンであり、図２に示すように、無線電話回線を通じて基地局（ＢＳ）１２を経由してインターネット、公衆回線網などのネットワーク１０に接続可能となっている。また、この情報処理端末装置２０は、無線ＬＡＮのアクセスポイント１３と通信可能となっており、いずれかの通信手段を経由してネットワーク１０への接続が可能となっている。このネットワーク１０には電子メールサーバなどのサーバ装置１１が接続可能となっており、情報処理端末装置２０との間で通信を行なえるようになっている。また、情報処理端末装置２０は、スマートフォンに限らず、スケジュール管理機能及びスケジュール手帳の撮像機能を有する他の端末装置であってもよい。
【００１８】
図３は、本発明の実施形態における情報処理端末装置の構成例を示す図である。  
図３に示すように、情報処理端末装置２０は、バス２１にＣＰＵ２２、通信部２３、メモリ２４、カメラ２５、タッチパネルディスプレイ２６、スピーカ２７、ホームボタン２８、及び記憶装置であるハードディスクドライブ（ＨＤＤ）２９が接続されている。ハードディスクドライブ（ＨＤＤ）２９は、不揮発性メモリであってもよい。
【００１９】
ＨＤＤ２９には、画像管理アプリケーションプログラム３１、スケジュール管理アプリケーションプログラム３２、オペレーティングシステム３３、データベース３４が格納される。画像管理アプリケーションプログラム３１やスケジュール管理アプリケーションプログラム３２はオペレーティングシステム３３の動作のもとで動作する。また、オペレーティングシステム３３には、カメラ２５の機能を利用して撮像対象物を撮影し原画像データとして取り込むための撮影機能も備えている。
【００２０】
ＣＰＵ２２は、ＨＤＤ２９に記憶された画像管理アプリケーションプログラム３１やスケジュール管理アプリケーションプログラム３２と協働して、本発明の実施形態に係る各種処理の動作を司る。
【００２１】
通信部２３は、ネットワーク１０を介して、サーバ装置１１などの外部装置との通信の制御を司る。  
メモリ２４は、画像管理アプリケーションプログラム３１やスケジュール管理アプリケーションプログラム３２を実行する際に必要とされるワークエリアなどとして使用される。
【００２２】
タッチパネルディスプレイ２６は、タッチパネルとディスプレイが一体化されたものである。ホームボタン２８は、タッチパネルディスプレイ２６に表示されるアイコンやメニューをホーム画面に復帰させるものである。
【００２３】
画像管理アプリケーションプログラム３１は、ＣＰＵ２２と協働して、本発明の実施形態に係る撮像画像の切り出し処理を実現するものであって、図７及び図９に示すフローチャートの処理を実現するためのアプリケーションプログラムである。
【００２４】
スケジュール管理アプリケーションプログラム３２は、ＣＰＵ２２と協働して、任意の年月日の任意の時間帯についてのスケジュールの入力を受け付けて、データベース３４に保存する処理を実現するためのアプリケーションプログラムである。
【００２５】
画像管理アプリケーションプログラム３１およびスケジュール管理アプリケーションプログラム３２は、画像管理機能とスケジュール管理機能とをともに実現する単一のアプリケーションプログラムであってもよい。  
画像管理アプリケーションプログラム３１およびスケジュール管理アプリケーションプログラム３２は、別々に動作するものであってもよいし、必要に応じて協働して動作するものであってもよい。  
画像管理アプリケーションプログラム３１およびスケジュール管理アプリケーションプログラム３２は、ＨＤＤ２９に上記のように予め格納されるものであってもよいし、通信部２３により、外部装置からネットワーク１０を介してダウンロードしてＨＤＤ２９に格納するものであってもよい。
【００２６】
図４は、本発明の実施形態における情報処理端末装置のデータベースを示す図である。情報処理端末装置２０データベース３４では、図４に示すように、日付データ４１、スケジュールデータ４２、手書きデータ４３などが互いに関連付けて日付毎に記憶されている。
【００２７】
スケジュールデータ４２は、スケジュール管理アプリケーションプログラム３２を起動させて、ユーザにより所定の日の所定の時間帯について入力されたスケジュールデータである。
【００２８】
手書きデータ４３は、ユーザによりスケジュール手帳に描画された、ユーザが手書きの文字、図形、記号、絵等をカメラ２５により撮像して得た画像データを日毎に切り出したものである。
【００２９】
図５は、本発明の実施形態における情報処理端末装置の機能を示す機能ブロック図である。  
図５に示すように、情報処理端末装置２０は、通信部５１、画像管理部５２、スケジュール管理部５３、表示処理部５４を有している。また、画像管理部５２は、画像処理部５５、判定部５６、保存処理部５７を有している。スケジュール管理部５３は、スケジュール管理アプリケーションプログラム３２により実現される機能であり、画像管理部５２や表示処理部５４は画像管理アプリケーションプログラム３１により実現される機能である。
【００３０】
通信部５１は、ネットワークを介してサーバ装置１１とのデータ通信を行なう。  
画像管理部５２の画像処理部５５は、前記撮影機能に基づきカメラ２５により撮像して得た画像の歪みや色調を補正してデータベース３４に保存する。  
画像管理部５２の判定部５６は、スケジュール手帳のマーカー１で囲まれた領域をカメラ２５により撮像して得た画像で示されるカレンダーが属する年と月を判定する。
【００３１】
画像管理部５２の保存処理部５７は、スケジュール手帳のマーカー１で囲まれた領域をカメラ２５により撮像して得た画像を日毎に切り出して、この切り出し画像を、同じ日についてスケジュール管理部５３により管理するスケジュールデータと関連付けてデータベース３４に保存する。
【００３２】
表示処理部５４は、データベース３４に保存された、所定の日付について関連付けられたスケジュールデータと切り出し画像とをあわせてタッチパネルディスプレイ２６に表示させる。
【００３３】
図６は、本発明の実施形態における情報処理端末装置のデータの使用形態を示す図である。  
本実施形態では、情報処理端末装置２０のスケジュール管理部５３は、データベース３４のスケジュールデータ４２へのアクセスを行なう。また、情報処理端末装置２０の画像管理部５２は、データベース３４のスケジュールデータ４２および手書きデータ４３へのアクセスを行なう。
【００３４】
次に、図３に示した構成の情報処理端末装置２０の動作について説明する。図７は、本発明の実施形態における情報処理端末装置による撮像処理を説明するためのフローチャートである。図８は、本発明の実施形態における情報処理端末装置によるスケジュール手帳の撮像画面の一例を示す図である。  
まず、ユーザのタッチパネルのタッチ操作によって画像管理アプリケーションプログラムが選択・起動されると（ステップＳ１）、カメラ２５の機能が作動状態となり、カメラ２５がスケジュール手帳のカレンダーに向けられて（ステップＳ２）、図８に示すように、撮像対象物であるスケジュール手帳の位置決めシンボルである四隅のマーカー１に囲まれた範囲が、撮像画面に表示されるカメラ２５の撮像範囲に入るようにして、シャッター操作がなされると（ステップＳ４）、画像処理部５５は、この撮像して得た画像に４つのマーカー１が含まれているか否かを判定する（ステップＳ５のＹＥＳ）。この判定を行なうには、４つのマーカー１の画像をデータベース３４に記憶しておき、この画像と撮像して得た画像とを照合すればよい。
【００３５】
撮像して得た画像に４つのマーカー１が含まれていれば（ステップＳ５のＹＥＳ）、このマーカー１に囲まれた画像である原画像データを生成し（ステップＳ６）、この画像の４辺の位置と距離をデータベース３４に予め記憶されている基準位置・距離・色調と整合させるための歪み・色調の補正を行ない（ステップＳ７）、補正後の画像をスケジュール手帳の原画像データとしてデータベース３４に保存する（ステップＳ８）。
【００３６】
図９は、本発明の実施形態における情報処理端末装置による画像切り出し処理を説明するためのフローチャートである。  
この画像切り出し処理は、本発明における特徴を顕著に表すものであり、前述した原画像データを日毎に切り出す処理である。ここでは、各日の日付データ４１およびスケジュールデータ４２が関連付けられてデータベース３４に記憶されているとする。また、スケジュール手帳の各日に対応するマス目には、予め印刷された日付の数字以外の日付は手書きにて書き込まれていないものとする。
【００３７】
情報処理端末装置２０の判定部５６は、Ｓ８で保存した原画像データをデータベース３４から読み出し、この原画像データにおける、月の始まりの日に対応するマス目を検出し、このマス目の、原画像データで示される左上のマス目を基準とした位置を特定する（ステップＳ２１）。
【００３８】
月の始まりの日に対応するマス目を検出するには、判定部５６は、原画像データの左上のマス目に日付が印刷されていれば、このマス目の位置を月の始まりの日に対応するマス目の位置として検出する。また、原画像データの左上のマス目に日付が印刷されていなければ、判定部５６は、このマス目から右横のマス目に日付が印刷されているか否かを判定し、日付が印刷されていれば、このマス目の位置を月の始まりの日に対応するマス目の位置として検出する。また、この右横のマス目にも日付が印刷されていなければ、判定部５６は、右横に向かって１つずつ判定対象を変えていき、日付が印刷されているマス目の位置を月の始まりの日に対応するマス目の位置として検出する。
【００３９】
そして、情報処理端末装置２０の判定部５６は、Ｓ８で保存した原画像データをデータベース３４から読み出し、この原画像データにおける、月に終わりの日に対応するマス目の位置を検出し、このマス目の、原画像データで示される左上のマス目を基準とした位置を特定し、この月の終わりの日の日付を特定する（ステップＳ２２）。
【００４０】
月の終わりの日に対応するマス目の位置を検出するには、判定部５６は、原画像データの右下のマス目に日付が印刷されていれば、このマス目の位置を月の終わりの日に対応するマス目の位置として検出する。また、原画像データの右下のマス目に日付が印刷されていなければ、判定部５６は、このマス目から左横のマス目に日付が印刷されているか否かを判定し、日付が印刷されていれば、このマス目の位置を月の終わりの日に対応するマス目の位置として検出する。また、この左横のマス目にも日付が印刷されていなければ、判定部５６は、左横に向かって１つずつ判定対象を変えていき、日付が印刷されているマス目の位置を月の終わりの日に対応するマス目の位置として検出する。
【００４１】
月の終わりの日は「２８」、「２９」、「３０」、「３１」のいずれかであるので、月の終わりの日の日付を特定するには、判定部５６は、例えば、「３１」が印刷されるマス目が月の終わりの日に対応するマス目として検出されれば、月の終わりの日が３１日であるとして特定し、例えば、「３０」が印刷されるマス目が月の終わりの日に対応するマス目として検出されれば、月の終わりの日が３０日であるとして特定し、例えば、「２９」が印刷されるマス目が月の終わりの日に対応するマス目として検出されれば、月の終わりの日が２９日であるとして特定し、例えば、「２８」が印刷されるマス目が月の終わりの日に対応するマス目として検出されれば、月の終わりの日が２８日であるとして特定する。
【００４２】
次に、判定部５６は、原画像データについて特定した、月の始まりの日の位置、および、月の終わりの日の日付とその位置、および、データベース３４に予め記憶されている、各年各月のカレンダーとを照合する事で、原画像データで示されるカレンダーが属する年と月の候補の情報を生成する（ステップＳ２３）。このカレンダーでは、各年各月の第１週から終わりの週までの各日の位置関係が記されている。
【００４３】
また、ユーザが、スケジュール手帳を撮像するタイミングは、すでに撮像した最新の原画像データの撮像日時に近いタイミングであることが多いため、判定部５６は、データベース３４に保存される、すでに撮像した最新の原画像データの撮像日時以後で当該撮像日時に近い年および月の情報のみを原画像データで示されるカレンダーが属する年と月の候補として生成してもよい。
【００４４】
図１０は、本発明の実施形態における情報処理端末装置による撮像画像の属する年と月の候補表示画面の一例を示す図である。  
表示処理部５４は、判定部５６により生成した年と月の候補の情報を、図１０に示すようにタッチパネルディスプレイ２６に表示させる（ステップＳ２４）。
【００４５】
この表示された候補の中に、原画像データで示されるカレンダーが属する正しい年と月の情報があり、ユーザにより、この表示部分１０１をタッチするための操作がなされた場合（ステップＳ２５）、判定部５６は、このタッチされた表示部分に対応する年と月を、原画像データで示されるカレンダーが属する年と月として決定する（ステップＳ２６）。
【００４６】
また、表示された候補の中に、原画像データで示されるカレンダーが属する正しい年と月の情報がない場合、ユーザは、候補表示画面に示されるエリア１０２に正しい年を入力し、エリア１０３に正しい月を入力する事ができる。この入力が終了してアイコン１０４が選択された場合には、判定部５６は、エリア１０２に入力された年およびエリア１０３に入力された月を、原画像データで示されるカレンダーが属する年と月として決定する。
【００４７】
また、Ｓ２３で生成した、原画像データで示されるカレンダーが属する年と月の候補が1つであり、この候補が、原画像データで示されるカレンダーが属する正しい年と月である事が明らかである場合には、判定部５６は、ユーザによる操作を経ることなく、この年と月を、原画像データで示されるカレンダーが属する年と月として決定するようにしてもよい。
【００４８】
更には、図１０に示すようなタッチパネルディスプレイ２６を表示させるステップＳ２４及び操作するステップＳ２５の手順を省略しても良い。この場合、操作開始時点の年月日を自動で読み取り、直近で該当する年と月のカレンダーを決定し、自動的に表示することとなる。
【００４９】
次に、保存処理部５７は、Ｓ８で保存した原画像データをデータベース３４から読み出し（ステップＳ２７）、この原画像データで示されるカレンダーの月の始まりの日の次の日に対応するマス目の位置を特定する（ステップＳ２８）。
【００５０】
原画像データにおける、月の始まりの日の次の日に対応するマス目の位置を特定するには、保存処理部５７は、原画像データにおける、特定済みの、月の始まりの日に対応するマス目の右横にマス目があれば、このマス目の位置を月の始まりの日の次の日に対応するマス目の位置として検出し、この右横にマス目がなければ、次の週、つまり１行下の行の左端のマス目の位置を、原画像データにおける、月の始まりの日の次の日に対応するマス目の位置として特定する。
【００５１】
以後、検出対象のマス目を、前述のように、右横もしくは１行下の行の左端のマス目に変更していって、月の始まりの日の次の日から月の終わりの日の前日までの各日に対応するマス目の位置を特定する（ステップＳ２９）。これにより、既に特定済みの、月の始まりの日に対応するマス目の位置、月の終わりの日に対応するマス目の位置とあわせて、原画像データで示されるカレンダーの各列各行のマス目、つまり各日に対応するマス目の位置を特定することができる。
【００５２】
そして、保存処理部５７は、原画像データから特定した、ある日に対応するマス目に、日付の数字以外の情報、つまり該当日のスケジュール情報としての手書きの文字、図形、記号、絵等が描画されている場合（ステップＳ３０のＹＥＳ）、このマス目の画像を該当日の切り出し画像として切り出すことで手書きデータ４３を生成して（ステップＳ３１）、この手書きデータ４３を、データベース３４に記憶されている、該当日の日付データ４１およびスケジュールデータ４２と関連付けて、このデータベース３４に保存する（ステップＳ３２）。
【００５３】
また、この保存が行われた後で、スケジュール手帳への追記などを行なった事により、同じ月のカレンダーに対する前述した撮像処理や画像切り出し処理を行なった場合は、手書きデータ４３は該当日の日付データ４１およびスケジュールデータ４２と関連付けてデータベース３４に上書き保存される。
【００５４】
次に、手書きデータなどの表示処理について説明する。  
本実施形態における表示画面は、月表示画面、週表示画面、日表示画面、リスト表示画面、月別メモギャラリー表示画面、タグ検索表示画面、タグ別メモギャラリー表示画面、およびメモ拡大画像画面がある。
【００５５】
月表示画面は、所定の年および月のカレンダーおよび該当月のスケジュールデータを表示させるための画面である。  
週表示画面は、所定の年および月に属する週の各日の手書きデータおよび該当の週のスケジュールデータを表示させるための画面である。  
日表示画面は、所定の年月日の手書きデータおよび該当の日のスケジュールデータを時間帯で区分して表示させるための画面である。
【００５６】
リスト表示画面は、所定の年月日の手書きデータおよび該当の日のスケジュールデータをスケジュールごとに区分して表示させるための画面である。  
月別メモギャラリー表示画面は、所定の月の各日について保存した手書きデータを一覧形式で表示させるための画面である。
【００５７】
タグ検索表示画面は、手書きデータついてタグを設定した場合において、所望のタグを検索するための画面である。タグとは、例えばビジネス、食事などのカテゴリーや各種項目である。
【００５８】
タグ別メモギャラリー表示画面は、所定のタグが設定された手書きデータを一覧形式で表示させるための画面である。  
メモ拡大画像画面は、月別メモギャラリー表示画面やタグ別メモギャラリー表示画面に表示された手書きデータを拡大表示するための画面である。
【００５９】
表示処理部５４は、月表示画面、週表示画面、日表示画面、リスト表示画面、月別メモギャラリー表示画面、タグ検索表示画面、タグ別メモギャラリー表示画面が表示された際に、この表示された画面上における所定の操作により、他の表示画面への切り替えを行なうことができる。
【００６０】
図１１は、本発明の実施形態における情報処理端末装置による表示制御処理を説明するためのフローチャートである。  
図１２は、本発明の実施形態における情報処理端末装置による表示制御処理を説明するためのフローチャートである。  
図１３は、本発明の実施形態における情報処理端末装置による表示モード選択画面の一例を示す図である。  
図１４は、本発明の実施形態における情報処理端末装置による月表示画面の一例を示す図である。  
まず、タッチパネルディスプレイ２６に対し、図１３に示した表示モード選択画面に表示されるアイコン１２１の選択を経て、所定の年および月の指定、およびこの指定された月についての月表示画面の表示のための操作がなされると（ステップＳ４１のＹＥＳ）、表示処理部５４は、該当の年および月に関わるスケジュール情報とカレンダーをデータベース３４から読み出し（ステップＳ４２）、カレンダーで示される各日に対応する日付データ４１に手書きデータ４３が関連付けられてデータベース３４に記憶されている場合、この日を手書きデータのある日として特定する（ステップＳ４３）。
【００６１】
表示処理部５４は、該当の年および月に関わるスケジュール情報とＳ４２で読み出したカレンダーを、図１４に示すようにカレンダー１３１としてタッチパネルディスプレイ２６に表示し、このカレンダー１３１における、手書きデータのある日として特定された日のエリアには、手書きデータのある日である事を示すためのマーク１３２を重ねて表示する（ステップＳ４４）。
【００６２】
図１５は、本発明の実施形態における情報処理端末装置による週表示画面の一例を示す図である。  
また、タッチパネルディスプレイ２６に対し、図１３に示した表示モード選択画面に表示されるアイコン１２１の選択を経て、所定の年および月における週の指定、およびこの指定された週についての週表示画面の表示のための操作がなされると（ステップＳ４５のＹＥＳ）、表示処理部５４は、該当の週の各日に関わるスケジュールデータ４２をデータベース３４から読み出し、かつ、このスケジュールデータ４２に手書きデータ４３が関連付けられてデータベース３４に記憶されている場合、この手書きデータを読み出す（ステップＳ４６）。
【００６３】
表示処理部５４は、この読み出したスケジュールデータを所定のレイアウトに応じて、図１５に示すようにタッチパネルディスプレイ２６に表示するとともに、手書きデータがある日については、Ｓ４６で読み出した手書きデータを縮小した画像１４１を該当の日のスケジュールデータとあわせてタッチパネルディスプレイ２６における画面上方に表示する（ステップＳ４７）。なお、手書きデータがない日については、スケジュールデータのみが表示される。このような処理を行なう事により、ユーザは、所望の週のスケジュールを、該当の週の各日の手書きデータとあわせて参照する事ができる。
【００６４】
図１６は、本発明の実施形態における情報処理端末装置による日表示画面の一例を示す図である。  
また、タッチパネルディスプレイ２６に対し、図１３に示した表示モード選択画面に表示されるアイコン１２１の選択を経て、例えば月表示画面における所定の日が選択されて、所定の年および月における、所定の日の指定、およびこの指定された日についての日表示画面の表示のための操作がなされると（ステップＳ４８のＹＥＳ）、表示処理部５４は、該当の日に関わるスケジュールデータ４２をデータベース３４から読み出し、かつ、このスケジュールデータ４２に手書きデータ４３が関連付けられてデータベース３４に記憶されている場合、この手書きデータを読み出す（ステップＳ４９）。
【００６５】
表示処理部５４は、この読み出したスケジュールデータを所定のレイアウトに応じて、図１６に示すようにタッチパネルディスプレイ２６に表示するとともに、手書きデータがあれば、Ｓ４９で読み出した手書きデータを縮小した画像１５１を該当の日のスケジュールデータとあわせてタッチパネルディスプレイ２６における画面上方に表示する（ステップＳ５０）。このような処理を行なう事により、ユーザは、所望の日のスケジュールを該当の日の手書きデータとあわせて参照する事ができる。
【００６６】
図１７は、本発明の実施形態における情報処理端末装置によるリスト表示画面の一例を示す図である。  
また、タッチパネルディスプレイ２６に対し、図１３に示した表示モード選択画面に表示されるアイコン１２１の選択を経て、所定の年月日の指定、およびこの指定された日についてのリスト表示画面の表示のための操作がなされると（ステップＳ５１のＹＥＳ）、表示処理部５４は、該当の日に関わるスケジュールデータ４２をデータベース３４から読み出し、かつ、このスケジュールデータ４２に手書きデータ４３が関連付けられてデータベース３４に記憶されている場合、この手書きデータを読み出す（ステップＳ５２）。
【００６７】
表示処理部５４は、この読み出したスケジュールデータを所定のレイアウトに応じて、図１７に示すようにリスト形式でタッチパネルディスプレイ２６に表示するとともに、手書きデータがあれば、Ｓ５２で読み出した手書きデータを縮小した画像１６１を該当の日のスケジュールデータとあわせてタッチパネルディスプレイ２６における画面上方に表示する（ステップＳ５３）。また、この画面では、エリア１６２への入力を行なうことで表示されたスケジュールの種別を検索することができる。  
このような表示を行なうことにより、ユーザは、所望の日のスケジュールを、該当の日の手書きデータとあわせて参照する事ができる。
【００６８】
図１８は、本発明の実施形態における情報処理端末装置による月別メモギャラリー表示画面の一例を示す図である。  
タッチパネルディスプレイ２６に対し、図１３に示した表示モード選択画面に表示されるアイコン１２２の選択を経て、所定の年および月の指定、およびこの指定された月についての月別メモギャラリー表示画面の表示のための操作がなされると（ステップＳ６１のＹＥＳ）、表示処理部５４は、該当の月に関わる各日の日付データ４１に関連付けられている手書きデータ４３をデータベース３４から読み出す（ステップＳ６２）。
【００６９】
表示処理部５４は、この読み出した手書きデータを縮小した画像１８１を、図１８に示すようにタッチパネルディスプレイ２６に一覧形式で表示する（ステップＳ６３）。図１８に示した画面では、１つの月につき４つの手書きデータが表示されているが、この月の手書きデータがさらにある場合、この表示画面へのスクロール操作を行なうことで、該当月についての他の手書きデータを表示させる事ができる。
【００７０】
図１９は、本発明の実施形態における情報処理端末装置による手書きデータのタグ設定画面の一例を示す図である。  
本実施形態では、前述した手書きデータについて、この手書きデータが属するタグを設定することができる。  
タッチパネルディスプレイ２６に対し、所定の日の所定の手書きデータのタグの設定モードの起動のための操作がなされると、表示処理部５４は、該当の日の手書きデータ４３をデータベース３４から読み出し、この手書きデータを縮小した画像１８５、該当日の日付、およびタグ情報入力エリア１８６を、図１９に示すようにタッチパネルディスプレイ２６に表示させる。
【００７１】
このタグ情報入力エリア１８６に所望のタグの情報が入力されて、図１９に示すアイコン１８７が選択された場合には、保存処理部５７は、このタグの情報を手書きデータ４３と関連付けてデータベース３４に保存する。
【００７２】
図２０は、本発明の実施形態における情報処理端末装置によるタグ検索表示画面の一例を示す図である。  
また、タッチパネルディスプレイ２６に対し、タグ検索表示画面の表示のための操作がなされると、表示処理部５４は、タグ検索表示画面をタッチパネルディスプレイ２６に表示する。この画面におけるエリア１８８への検索対象のタグを入力する事で、対応するタグの種別を、このタグが設定される手書きデータの数が表示される。この画面のアイコン１８９を選択した場合には、エリア１８８へ入力された情報がキャンセルされる。
【００７３】
また、前述した月別メモギャラリー画面では、エリア１８２へのタグの種別の入力を行なう、または、タグのアイコン１８４が選択されることで、このタグが設定された手書きデータを検索することができる。図１８に表示される各月の欄に表示されるタグのアイコン１８４は、該当月の手書きデータに設定されたタグの種別に対応する。また、この画面のアイコン１８３を選択するとホーム画面に戻る。  
このような表示を行なうことにより、ユーザは、所望の月の手書きデータを一覧形式で参照する事ができる。
【００７４】
図２１は、本発明の実施形態における情報処理端末装置によるタグ別メモギャラリー表示画面の一例を示す図である。  
タッチパネルディスプレイ２６に対し、図１３に示した表示モード選択画面に表示されるアイコン１２３の選択を経て、所望のタグの指定、およびこの指定されたタグについてのタグ別メモギャラリー表示画面の表示のための操作がなされる、または、月別メモギャラリー表示画面のエリア１８２への所望のタグの種別の入力が行われると（ステップＳ６４のＹＥＳ）、表示処理部５４は、該当のタグが設定されている手書きデータ４３をデータベース３４から読み出す（ステップＳ６５）。
【００７５】
表示処理部５４は、この読み出した手書きデータを縮小した画像１９３をタッチパネルディスプレイ２６に一覧形式で表示する（ステップＳ６６）。また、この画面では、エリア１９１に、前述した該当のタグの名称が表示される。また、この画面のアイコン１９２を選択する事で、直前に表示されていた画面に戻る。  
このような表示を行なうことにより、ユーザは、所望のタグが設定された手書きデータを一覧形式で参照する事ができる。
【００７６】
図２２は。本発明の実施形態における情報処理端末装置によるメモ拡大画像画面の一例を示す図である。  
前述した月別メモギャラリー表示画面やタグ別メモギャラリー表示画面で表示された手書きデータの拡大表示のための操作がなされると、表示処理部５４は、この選択された画像を拡大した画像を表示するためのメモ拡大画像画面をタッチパネルディスプレイ２６に表示する。拡大された画面は、図２２に示した画像２０３である。この画面には、表示される手書きデータについて設定されたタグ２０４が表示される。また、この画面のアイコン２０１を選択する事で、直前に表示されていた画面に戻り、この画面のアイコン２０２を選択する事で、手書きデータの表示を終了する。また、この画面上では、所定の操作を行なうことで、表示された手書きデータの削除、明るさの調整、白黒化やシェア保存を行なうこともできる。
【００７７】
図２３は、本発明の実施形態における情報処理端末装置による共有保存画面の一例を示す図である。  
本実施形態では、データベース３４に記憶された日付データ４１および当該日付データに関連付けられたスケジュールデータ４２を、図２３に示した画面への所定の操作を行なうことで、情報処理端末装置２０のＨＤＤ２９に格納される、他の所定のスケジュール管理用アプリケーションプログラムにより管理するスケジュールデータに同期化させることができる。また、前述した他の所定のスケジュール管理用アプリケーションプログラムにより管理するスケジュールデータを、スケジュール管理アプリケーションプログラム３２により管理するスケジュールデータに同期化させることもできる。
【００７８】
また、本実施形態では、図２３に示した画面のアイコン２１１への操作を経て、データベース３４に記憶された手書きデータを、evernote（登録商標）などの画像管理アプリケーションのデータとしてアップロードすることができる。また、データベース３４に記憶された手書きデータを、図２３に示した画面のアイコン２１２への操作を経て、電子メールを利用して、他の情報処理端末装置に送ることもできる。
【００７９】
また、また、データベース３４に記憶された手書きデータを、図２３に示した画面のアイコン２１３への操作を経て、データベース３４内の、カメラ２５による通常の撮影画像の記憶エリアであるカメラロールに保存することもできる。
【００８０】
また、データベース３４に記憶された手書きデータを、画面への所定の操作により、dropbox（登録商標）などのオンラインストレージのデータとしてアップロードすることもできる。
【００８１】
以上のように、本発明の実施形態における情報処理端末装置では、スケジュール手帳を撮像して得た原画像データで示される各日の手書きデータを切り出して、スケジュールデータと関連づけて保存し、ある日付の手書きデータを同じ日付のスケジュールデータをあわせて表示させる。このような処理を行なうことにより、スケジュール管理機能により管理するスケジュールと、スケジュール手帳に書き込まれたスケジュールとを正確かつ十分に把握することができる。
【００８２】
なお、この発明は前記実施形態そのままに限定されるものではなく実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、前記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を省略してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【００８３】
また、実施形態に記載した手法は、計算機（コンピュータ）に実行させることができるプログラム（ソフトウエア手段）として、例えば磁気ディスク（ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ、ＭＯ等）、半導体メモリ（ＲＯＭ、ＲＡＭ、フラッシュメモリ等）等の記録媒体に格納し、また通信媒体により伝送して頒布することもできる。なお、媒体側に格納されるプログラムには、計算機に実行させるソフトウエア手段（実行プログラムのみならずテーブルやデータ構造も含む）を計算機内に構成させる設定プログラムをも含む。本装置を実現する計算機は、記録媒体に記録されたプログラムを読み込み、また場合により設定プログラムによりソフトウエア手段を構築し、このソフトウエア手段によって動作が制御されることにより上述した処理を実行する。なお、本明細書でいう記録媒体は、頒布用に限らず、計算機内部あるいはネットワークを介して接続される機器に設けられた磁気ディスクや半導体メモリ等の記憶媒体を含むものである。
【符号の説明】
【００８４】
１…マーカー、１０…ネットワーク、１１…サーバ装置、１２…基地局、１３…アクセスポイント、２０…情報処理端末装置、２１…バス、２２…ＣＰＵ、２３…通信部、２４…メモリ、２５…カメラ、２６…タッチパネルディスプレイ、２７…スピーカ、２８…ホームボタン、２９…ハードディスクドライブ、３１…画像管理アプリケーションプログラム、３２…スケジュール管理アプリケーションプログラム、３３…オペレーティングシステム、３４…データベース、４１…日付データ、４２…スケジュールデータ、４３…手書きデータ、５１…通信部、５２…画像管理部、５３…スケジュール管理部、５４…表示処理部、５５…画像処理部、５６…判定部、５７…保存処理部。
【図１】
2013235396.tif 000003
【図２】
2013235396.tif 000004
【図３】
2013235396.tif 000005
【図４】
2013235396.tif 000006
【図５】
2013235396.tif 000007
【図６】
2013235396.tif 000008
【図７】
2013235396.tif 000009
【図８】
2013235396.tif 000010
【図９】
2013235396.tif 000011
【図１０】
2013235396.tif 000012
【図１１】
2013235396.tif 000013
【図１２】
2013235396.tif 000014
【図１３】
2013235396.tif 000015
【図１４】
2013235396.tif 000016
【図１５】
2013235396.tif 000017
【図１６】
2013235396.tif 000018
【図１７】
2013235396.tif 000019
【図１８】
2013235396.tif 000020
【図１９】
2013235396.tif 000021
【図２０】
2013235396.tif 000022
【図２１】
2013235396.tif 000023
【図２２】
2013235396.tif 000024
【図２３】
2013235396.tif 000025