(57)【要約】      （修正有）【課題】スクリーン上の手書き情報を後で利用する際の使い勝手を向上させることができる手書き情報記録方法、投影記録装置を提供する。【解決手段】プロジェクタにデジタルカメラを設け、かつメモリカードが着脱自在な構成とする。ドキュメントの投影中に、ユーザーの撮影操作に応じ、ドキュメント投影状態のスクリーンを撮影し文書画像Ｇ１を取得した後、ドキュメントの投影を停止した非投影状態のスクリーンを撮影し、スクリーン上に直接記述された手書き情報だけが映った手書き情報画像Ｇ２を取得する。双方の画像Ｇ１，Ｇ２を所定の方法で互いに対応させてメモリカードに記録する。メモリカードをパソコン等に装着すれば、パソコン上で手書き情報画像Ｇ２が利用でき、その際には、対応する文書画像Ｇ１を確認することにより、手書き情報画像Ｇ２に映っている手書き情報がどのドキュメント（又はドキュメントページ）に対応するのか知ることができる。【選択図】図４
2008152766.tif 000002
【特許請求の範囲】
【請求項１】
文書の表示画像を投影したスクリーン上に直接記述された手書き情報を記録する方法であって、
文書を投影した投影状態の前記スクリーンと、手書き情報が記述された後に当該文書の投影を停止した非投影状態の前記スクリーンとをそれぞれ撮影する工程と、
前記非投影状態での撮影により取得したスクリーン画像を、前記投影状態での撮影により取得した文書画像が有する前記文書を示す索引情報に対応付けて記憶手段に記憶させる工程と
からなることを特徴とする手書き情報記録方法。
【請求項２】
文書の表示画像をスクリーンに投影する投影手段と、
この投影手段による前記表示画像の投影を要求に応じて停止させる投影制御手段と、
前記スクリーンを撮影する撮影手段と、
この撮影手段に、前記投影手段により表示画像が投影されている投影状態の前記スクリーンを撮影させて文書画像を取得させ、かつ前記投影制御手段により投影手段による表示画像の投影が停止された非投影状態の前記スクリーンを撮影させてスクリーン画像を取得させる撮影制御手段と、
前記撮影手段により取得された前記スクリーン画像を、前記文書画像が有する前記文書を示す索引情報に対応付けて記憶する記憶手段と
を備えたことを特徴とする投影記録装置。
【請求項３】
前記索引情報は前記文書画像それ自体であることを特徴とする請求項２記載の投影記録装置。
【請求項４】
前記文書画像から、前記索引情報を取得する情報取得手段を備えたことを特徴とする請求項２記載の投影記録装置。
【請求項５】
前記情報取得手段は、前記文書画像における所定領域を認識領域として文字認識を行う文字認識手段であるとともに、前記索引情報は前記文字認識手段により認識された文字情報であることを特徴とする請求項４記載の投影記録装置。
【請求項６】
前記認識領域は、スクリーンに投影された文書におけるページの表示領域であることを特徴とする請求項５記載の投影記録装置。
【請求項７】
前記所定領域は、スクリーンに投影された文書におけるタイトルの表示領域であることを特徴とする請求項５記載の投影記録装置。
【請求項８】
前記投影手段は、文書の内容である画像情報とは別に前記索引情報を表す二次元情報が事前に合成された表示画像をスクリーンに投影し、前記情報取得手段は、前記文書画像から、それに含まれている前記二次元情報に基づき前記索引情報を取得することを特徴とする請求項４記載の投影記録装置。
【請求項９】
前記投影手段により投影される文書を記憶する文書記憶手段と、
前記記憶手段に記憶されている前記索引情報に基づき、前記記憶手段に記憶されているスクリーン画像と前記文書記憶手段に記憶されている文書との対応関係を判別する判別手段と
を備えたことを特徴とする請求項１〜８のいずれか１項に記載の投影記録装置。
【請求項１０】
前記投影手段により投影される文書を記憶する文書記憶手段と、
この文書記憶手段に記憶されている文書を画像情報に変換する変換手段と、
この変換手段により変換された画像情報と前記記憶手段に記憶されている文書画像とを比較することにより、前記記憶手段に記憶されているスクリーン画像と前記文書記憶手段に記憶されている文書との対応関係を判別する判別手段とを備えたことを特徴とする請求項３記載の投影記録装置。
【請求項１１】
文書の表示画像をスクリーンに投影する投影手段と前記スクリーンを撮影する撮影手段とを備えた投影装置が有するコンピュータに、
前記投影手段による表示画像の投影を要求に応じて停止させる処理と、
前記撮影手段に、前記投影手段により表示画像が投影されている投影状態の前記スクリーンを撮影させて文書画像を取得させ、かつ投影手段による前記文書の投影が停止された非投影状態の前記スクリーンを撮影させてスクリーン画像を取得させる処理と、
前記撮影手段により取得された前記スクリーン画像、および前記文書画像が有する前記文書を示す索引情報を、互いに対応付けて記憶手段に記憶させるための処理と
を実行させるためのプログラム。
【請求項１２】
自己が保有する文書を、文書の表示画像をスクリーンに投影するとともに、前記スクリーンを撮影した撮影画像を取得する機能を備えた投影装置に対して供給する装置が有するコンピュータを、
手書き情報が記述された後に文書の投影を停止した非投影状態の前記スクリーンを撮影することにより前記投影装置が取得したスクリーン画像と、自己が保有する文書との対応関係を、前記スクリーン画像と対応するとともに当該スクリーン画像の取得に際して投影が停止された文書が投影されている投影状態で前記スクリーンを撮影することにより前記投影装置が取得した文書画像が有する、文書を示す索引情報に基づき判別する判別手段として機能させるためのプログラム。
【請求項１３】
文書の表示画像を投影したスクリーン上に直接記述された手書き情報を記録する方法であって、
手書き情報が記述された後に当該文書の投影を停止した非投影状態の前記スクリーンを撮影する工程と、
前記非投影状態での撮影により取得したスクリーン画像を、その取得時に投影を停止した文書に対応付けて記憶手段に記憶させる工程と
からなることを特徴とする手書き情報記録方法。
【請求項１４】
文書の表示画像をスクリーンに投影する投影手段と、
この投影手段による前記表示画像の投影を要求に応じて停止させる投影制御手段と、
前記スクリーンを撮影する撮影手段と、
この撮影手段に、前記投影制御手段により投影手段による文書の投影が停止された非投影状態における前記スクリーンを撮影させスクリーン画像を取得させる撮影制御手段と、
前記撮影手段により取得されたスクリーン画像が、前記投影制御手段により投影手段による表示画像の投影を停止された文書に対応付けられて記憶される記憶手段と
を備えたことを特徴とする投影記録装置。
【請求項１５】
前記スクリーン画像と前記文書との対応関係を示す管理情報を生成する管理情報生成手段と、
この管理情報生成手段により生成された管理情報を記憶する管理情報記憶手段と
を備えたことを特徴とする請求項１４記載の投影記録装置。
【請求項１６】
前記管理情報は、前記投影手段により投影された文書毎の投影開始時刻および投影終了時刻と、前記スクリーン画像の取得時刻とを含むことを特徴とする請求項１５記載の投影記録装置。
【請求項１７】
前記投影開始時刻および投影終了時刻と前記取得時刻は、同一基準により調整された時刻であることを特徴とする請求項１６記載の投影記録装置。
【請求項１８】
前記スクリーン画像に、その取得に際して前記投影手段による表示画像の投影を停止された文書を示す文書情報を付加する付加手段を備え、
前記記憶手段は、前記付加手段により文書情報が付加されたスクリーン画像を記憶することを特徴とする請求項１４記載の投影記録装置。
【請求項１９】
文書情報に基づく文書をスクリーンに投影する投影手段を備えた投影装置が有するコンピュータに、
前記投影手段による文書の投影を要求に応じて停止させる処理と、
撮影手段に、投影手段による前記文書の投影が停止された非投影状態における前記スクリーンを撮影させてスクリーン画像を取得させる処理と、
前記撮影手段により取得されたスクリーン画像を、前記投影手段による投影が停止された文書に対応付けて記憶手段に記憶させるための処理と
を実行させるためのプログラム。
【請求項２０】
自己が保有する文書を、文書の表示画像をスクリーンに投影するとともに、前記スクリーンを撮影した撮影画像を取得する機能を備えた投影装置に対して供給する装置が有するコンピュータを、
手書き情報が記述された後に文書の投影を停止した非投影状態の前記スクリーンを撮影することにより前記投影装置が取得するスクリーン画像と、自己が保有する文書との対応関係を示す管理情報を生成する管理情報生成手段と、
この管理情報生成手段により生成された管理情報を記憶する管理情報記憶手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投影装置によって文書が投影されたスクリーン上に直接記述された手書き情報を利用する際の使い勝手を向上させる手書き情報記録方法、投影記録装置に関する。
【背景技術】
【０００２】
従来、企画説明や商品説明等のプレゼンテーションにおいては、パーソナルコンピュータ（ＰＣ）にデータとして記憶されているドキュメント、すなわち文字や図表等とからなる文書をプロジェクタによりスクリーン上に拡大して投影することが行われている。プロジェクタとしては、液晶やマイクロミラーアレイ等の画像変換素子を用いて、ＰＣから映像信号として出力されたドキュメントの画像情報を投影光に変換する構成を備えたものが一般的である。
【０００３】
ところで、プレゼンテーションにおいては、投影したドキュメントに対して、プレゼンテーションの参加者がコメントやアンダーライン等を直接（スクリーン上に）記述することがよくある。そのため、投影用のスクリーンとしてホワイトボードが使用される場合が多い。一方、ドキュメントの作成者等の説明者が、参加者によって記述されたコメント等を後で活用したい場合、例えばコメント等を参考にしたドキュメントの内容修正や、ドキュメントへのコメント等の付加を行いたい場合においては、コメント等の手書き情報を、予めスクリーンとして所謂電子ボードを用いることによりハードコピー（印刷）として保存したり、別途用意したデジタルカメラでホワイトボード等を撮影することにより、画像データとして保存することが行われている。なお、用途は全く異なるが、例えば下記の特許文献１にはカメラが搭載されたプロジェクタが記載されている。
【０００４】
【特許文献１】特開２００１−１６９２１１公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、前述したように保存したスクリーン上の手書き情報を活用する場合、プレゼンテーションに使用されるドキュメントの枚数（ページ数）が多いときには、プレゼンテーションの終了後において、保存した手書き情報とドキュメントとの対応関係を判別することが困難になる。特に、保存した手書き情報の数がドキュメントの枚数と一致していない場合（通常は、保存される手書き情報の方がドキュメントよりも少ないことが多い。）には、それが著しいという問題があった。
【０００６】
本発明は、かかる従来の課題に鑑みてなされたものであり、ドキュメントの投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を向上させることができる手書き情報記録方法、投影記録装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するために請求項１の発明にあっては、文書の表示画像を投影したスクリーン上に直接記述された手書き情報を記録する方法であって、文書を投影した投影状態の前記スクリーンと、手書き情報が記述された後に当該文書の投影を停止した非投影状態の前記スクリーンとをそれぞれ撮影する工程と、前記非投影状態での撮影により取得したスクリーン画像を、前記投影状態での撮影により取得した文書画像が有する前記文書を示す索引情報に対応付けて記憶手段に記憶させる工程とからなる方法とした。
【０００８】
かかる方法によれば、スクリーン画像が、その取得時に投影を停止した文書を示す索引情報に対応付けられて記憶手段に記憶されるため、スクリーン画像に含まれる手書き情報、すなわちスクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを索引情報から知ることができる。
【０００９】
また、請求項２の発明にあっては、文書の表示画像をスクリーンに投影する投影手段と、この投影手段による前記表示画像の投影を要求に応じて停止させる投影制御手段と、前記スクリーンを撮影する撮影手段と、この撮影手段に、前記投影手段により表示画像が投影されている投影状態の前記スクリーンを撮影させて文書画像を取得させ、かつ前記投影制御手段により投影手段による表示画像の投影が停止された非投影状態の前記スクリーンを撮影させてスクリーン画像を取得させる撮影制御手段と、前記撮影手段により取得された前記スクリーン画像を、前記文書画像が有する前記文書を示す索引情報に対応付けて記憶する記憶手段とを備えたものとした。
【００１０】
かかる構成においては、所定の要求があると、スクリーンにおける文書の投影が停止され、その状態でスクリーンが撮影されてスクリーン画像が取得される。取得されたスクリーン画像は、その取得時にスクリーンに投影されていた文書を撮影して取得された文書画像が有する、その文書を示す索引情報に対応付けられて記憶手段に記憶される。したがって、スクリーン画像の取得時に、スクリーン上に手書き情報が記述されていた場合、スクリーン画像に含まれるその手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを索引情報から知ることができる。
【００１１】
また、請求項３の発明にあっては、前記索引情報は前記文書画像それ自体であるものとした。
【００１２】
また、請求項４の発明にあっては、前記文書画像から、前記索引情報を取得する情報取得手段を備えたものとした。
【００１３】
かかる構成においては、スクリーン画像に含まれるその手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、情報取得手段によって取得された文書画像から知ることができる。
【００１４】
また、請求項５の発明にあっては、前記情報取得手段は、前記文書画像における所定領域を認識領域として文字認識を行う文字認識手段であるとともに、前記索引情報は前記文字認識手段により認識された文字情報であるものとした。
【００１５】
かかる構成においては、スクリーン画像に含まれるその手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、対応する文書の所定箇所に含まれている文字情報から知ることができる。
【００１６】
また、請求項６の発明にあっては、前記認識領域は、スクリーンに投影された文書におけるページの表示領域であるものとした。
【００１７】
かかる構成においては、スクリーン画像に含まれるその手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、対応する文書のページから知ることができる。
【００１８】
また、請求項７の発明にあっては、前記所定領域は、スクリーンに投影された文書におけるタイトルの表示領域であるものとした。
【００１９】
かかる構成においては、スクリーン画像に含まれるその手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、対応する文書のタイトルから知ることができる。
【００２０】
また、請求項８の発明にあっては、前記投影手段は、文書の内容である画像情報とは別に前記索引情報を表す二次元情報が事前に合成された表示画像をスクリーンに投影し、前記情報取得手段は、前記文書画像から、それに含まれている前記二次元情報に基づき前記索引情報を取得するものとした。
【００２１】
かかる構成においては、索引情報として、手書き情報と対応する文書の検索作業等により適した情報を用いることが可能となる。
【００２２】
また、請求項９の発明にあっては、前記投影手段により投影される文書を記憶する文書記憶手段と、前記記憶手段に記憶されている前記索引情報に基づき、前記記憶手段に記憶されているスクリーン画像と前記文書記憶手段に記憶されている文書との対応関係を判別する判別手段とを備えたものとした。
【００２３】
かかる構成においては、スクリーン上に記述された手書き情報が、どの文書の投影時に記述されていたのかが、文書画像が有する索引情報に基づき自動的に判別される。
【００２４】
また、請求項１０の発明にあっては、前記投影手段により投影される文書を記憶する文書記憶手段と、この文書記憶手段に記憶されている文書を画像情報に変換する変換手段と、この変換手段により変換された画像情報と前記記憶手段に記憶されている文書画像とを比較することにより、前記記憶手段に記憶されているスクリーン画像と前記文書記憶手段に記憶されている文書との対応関係を判別する判別手段とを備えたものとした。
【００２５】
かかる構成においては、スクリーン上に記述された手書き情報が、どの文書の投影時に記述されていたのかが、文書画像に基づき自動的に判別される。
【００２６】
また、請求項１１の発明にあっては、文書の表示画像をスクリーンに投影する投影手段と前記スクリーンを撮影する撮影手段とを備えた投影装置が有するコンピュータに、前記投影手段による表示画像の投影を要求に応じて停止させる処理と、前記撮影手段に、前記投影手段により表示画像が投影されている投影状態の前記スクリーンを撮影させて文書画像を取得させ、かつ投影手段による前記文書の投影が停止された非投影状態の前記スクリーンを撮影させてスクリーン画像を取得させる処理と、前記撮影手段により取得された前記スクリーン画像、および前記文書画像が有する前記文書を示す索引情報を、互いに対応付けて記憶手段に記憶させるための処理とを実行させるためのプログラムとした。
【００２７】
また、請求項１２の発明にあっては、自己が保有する文書を、文書の表示画像をスクリーンに投影するとともに、前記スクリーンを撮影した撮影画像を取得する機能を備えた投影装置に対して供給する装置が有するコンピュータを、手書き情報が記述された後に文書の投影を停止した非投影状態の前記スクリーンを撮影することにより前記投影装置が取得したスクリーン画像と、自己が保有する文書との対応関係を、前記スクリーン画像と対応するとともに当該スクリーン画像の取得に際して投影が停止された文書が投影されている投影状態で前記スクリーンを撮影することにより前記投影装置が取得した文書画像が有する、文書を示す索引情報に基づき判別する判別手段として機能させるためのプログラムとした。
【００２８】
また、請求項１３の発明にあっては、文書の表示画像を投影したスクリーン上に直接記述された手書き情報を記録する方法であって、手書き情報が記述された後に当該文書の投影を停止した非投影状態の前記スクリーンを撮影する工程と、前記非投影状態での撮影により取得したスクリーン画像を、その取得時に投影を停止した文書に対応付けて記憶手段に記憶させる工程とからなる方法とした。
【００２９】
かかる方法によれば、スクリーン画像が、その取得時に投影を停止した文書の文書情報に対応付けられて記憶手段に記憶されるため、スクリーン画像に含まれる手書き情報、すなわちスクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを直ちに知ることができる。
【００３０】
また、請求項１４の発明にあっては、文書の表示画像をスクリーンに投影する投影手段と、この投影手段による前記表示画像の投影を要求に応じて停止させる投影制御手段と、前記スクリーンを撮影する撮影手段と、この撮影手段に、前記投影制御手段により投影手段による文書の投影が停止された非投影状態における前記スクリーンを撮影させスクリーン画像を取得させる撮影制御手段と、前記撮影手段により取得されたスクリーン画像が、前記投影制御手段により投影手段による表示画像の投影を停止された文書に対応付けられて記憶される記憶手段とを備えたものとした。
【００３１】
かかる構成においては、所定の要求があると、スクリーンにおける文書の投影が停止され、その状態でスクリーンが撮影されてスクリーン画像が取得される。取得されたスクリーン画像は、その取得時にスクリーンに投影されていた文書に対応付けられて記憶手段に記憶される。したがって、スクリーン画像の取得時に、スクリーン上に手書き情報が記述されていた場合、スクリーン画像に含まれるその手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを直ちに知ることができる。
【００３２】
また、請求項１５の発明にあっては、前記スクリーン画像と前記文書との対応関係を示す管理情報を生成する管理情報生成手段と、この管理情報生成手段により生成された管理情報を記憶する管理情報記憶手段とを備えたものとした。
【００３３】
かかる構成においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを管理情報を介して直ちに知ることができる。
【００３４】
また、請求項１６の発明にあっては、前記管理情報は、前記投影手段により投影された文書毎の投影開始時刻および投影終了時刻と、前記スクリーン画像の取得時刻とを含むものとした。
【００３５】
かかる構成においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、文書の投影期間とスクリーン画像の取得時刻とから直ちに知ることができる。
【００３６】
また、請求項１７の発明にあっては、前記投影開始時刻および投影終了時刻と前記取得時刻は、同一基準により調整された時刻であるものとした。
【００３７】
かかる構成においては、手書き情報と文書との対応関係をより正確に知ることができる。
【００３８】
また、請求項１８の発明にあっては、前記スクリーン画像に、その取得に際して前記投影手段による表示画像の投影を停止された文書を示す文書情報を付加する付加手段を備え、前記記憶手段は、前記付加手段により文書情報が付加されたスクリーン画像を記憶するものとした。
【００３９】
かかる構成においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、スクリーン画像に付加されている文書情報から直ちに知ることができる。
【００４０】
また、請求項１９の発明にあっては、文書情報に基づく文書をスクリーンに投影する投影手段を備えた投影装置が有するコンピュータに、前記投影手段による文書の投影を要求に応じて停止させる処理と、撮影手段に、投影手段による前記文書の投影が停止された非投影状態における前記スクリーンを撮影させてスクリーン画像を取得させる処理と、前記撮影手段により取得されたスクリーン画像を、前記投影手段による投影が停止された文書に対応付けて記憶手段に記憶させるための処理とを実行させるためのプログラムとした。
【００４１】
かかるプログラムを
【００４２】
また、請求項２０の発明にあっては、自己が保有する文書を、文書の表示画像をスクリーンに投影するとともに、前記スクリーンを撮影した撮影画像を取得する機能を備えた投影装置に対して供給する装置が有するコンピュータを、手書き情報が記述された後に文書の投影を停止した非投影状態の前記スクリーンを撮影することにより前記投影装置が取得するスクリーン画像と、自己が保有する文書との対応関係を示す管理情報を生成する管理情報生成手段と、この管理情報生成手段により生成された管理情報を記憶する管理情報記憶手段として機能させるためのプログラムとした。
【発明の効果】
【００４３】
以上説明したように請求項１及び請求項７の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、文書画像や、文書の所定箇所に含まれている文字情報（文書のページや文書のタイトル等）等の索引情報によって知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を向上させることが可能となる。
【００４４】
また、請求項８の発明においては、索引情報として、手書き情報と対応する文書の検索作業等により適した情報を用いることが可能となる。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を、さらに向上させることができる。
【００４５】
また、請求項９又は請求項１０の発明においては、スクリーン上に記述された手書き情報が、どの文書の投影時に記述されていたのかが、文書画像が有する索引情報や文書画像に基づき自動的に判別されるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を、さらに向上させることが可能となる。
【００４６】
また、請求項１１の発明においては、そのプログラムを用いることにより、コンピュータを有する投影装置において請求項１及び請求項２の発明を実施することが可能となる。
【００４７】
また、請求項１２の発明においては、そのプログラムを用いることにより、自己が保有する文書を、文書の表示画像をスクリーンに投影するとともに、前記スクリーンを撮影した撮影画像を取得する機能を備えた投影装置に対して供給する装置と、上記投影装置とを用いて請求項９又は請求項１０の発明を実施することが可能となる。
【００４８】
また、請求項１３及び請求項１４の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを直ちに知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を向上させることが可能となる。しかも、記憶手段に記憶させる画像は非投影状態のスクリーンを撮影したものだけでよいことから、記憶手段のより有効な利用が可能となる。
【００４９】
また、請求項１５及び請求項１６の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを文書の投影期間とスクリーン画像の取得時刻等の管理情報を介して直ちに知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を向上させることが可能となる。
【００５０】
また、請求項１７の発明においては、手書き情報と文書との対応関係をより正確に知ることが可能となる。
【００５１】
また、請求項１８の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、スクリーン画像に付加されている文書情報から直ちに知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を一層向上させることが可能となる。
【００５２】
また、請求項１９の発明においては、そのプログラムを用いることにより、文書情報に基づく文書をスクリーンに投影する投影手段を備えた投影装置において請求項１３及び請求項１４の発明を実施することが可能となる。
【００５３】
また、請求項２０の発明においては、そのプログラムを用いることにより、自己が保有する文書を、文書の表示画像をスクリーンに投影するとともに、前記スクリーンを撮影した撮影画像を取得する機能を備えた投影装置に対して供給する装置と、上記投影装置とを用いて請求項１５又は請求項１６の発明を実施することが可能となる。
【発明を実施するための最良の形態】
【００５４】
以下、本発明の一実施の形態を図にしたがって説明する。
【００５５】
（第１の実施の形態）
図１は本実施の形態における投影システムを示す構成図である。この投影システムは、プレゼンテーション等においてドキュメントの投影に使用されるプロジェクタ１と、汎用のパーソナルコンピュータ（ＰＣ）２とから構成されており、プロジェクタ１とＰＣ２はＲＧＢケーブル３を介して接続されている。プロジェクタ１はスクリーンＳ（ホワイトボード等）を撮影するためのデジタルカメラが内蔵されたものであって、本体の正面側には、前記表示画像の投影レンズ等の光学系からなる投影部１ａと、撮影レンズ等の光学系からなる撮影部１ｂとが並んで設けられている。さらに、メモリカード４を装着するためのスロットル（図示せず）を有しており、メモリカード４を介してＰＣ２へのデータの受け渡しが可能となっている。
【００５６】
図２はプロジェクタ１とＰＣ２の概略構成を示すブロック図である。プロジェクタ１は、主としてＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、表示部１４、キー入力部１５、デジタルカメラ部１６、前記メモリカード４に対するデータの入出力を行うためのカードインターフェイス回路１７から構成されるとともに、ＲＧＢケーブル３が接続されたＲＢＧ信号の入力端子１８を有している。
【００５７】
前記表示部１４は本発明の投影手段であって、クリプトンランプ等の光源、光源の光を投影光に変換するための液晶やマイクロミラーアレイ等の画像変換素子、その画像変換素子を、入力端子１８から入力したＲＢＧ信号に応じて駆動する駆動回路、前記投影部１ａにおける投影レンズ等の光学系を含み、ＰＣ２から出力されたドキュメント（文字や図表等とからなる文書）の表示画像をスクリーンＳに投影する。
【００５８】
キー入力部１５は、ユーザーがプロジェクタ１の操作を行うために用意された、複数の操作ボタンにより構成されている。デジタルカメラ部１６は、前記撮影部１ｂにおける撮影レンズ等の光学系、光学系により結像された光学像を画像信号に光電変換するＣＭＯＳセンサやＣＣＤ等の撮像素子、撮像素子から出力されデジタル信号に変換された撮像信号を圧縮する、画像データ圧縮信号処理回路等から構成される。デジタルカメラ部１６は、キー入力部１５を構成する所定の操作ボタンが押されることにより本発明の撮影手段として機能し、前記スクリーンＳを被写体とした撮影動作を行う。デジタルカメラ部１６で生成された画像データは、最終的にはＪＰＥＧ形式の画像ファイルとしてカードインターフェイス回路１７を介して前記メモリカード４に記録される。なお、本実施の形態においてはメモリカード４が本発明の記憶手段である。
【００５９】
ＣＰＵ１１は、ＲＯＭ１２に格納されているプログラムに従い、ＲＡＭ１３を作業用メモリとして前述した各部を制御することにより本発明の投影制御手段、撮影制御手段として機能する。なお、前記入力端子１８は、ＣＰＵ１１に接続された図示しない入力画像処理回路に設けられている。
【００６０】
一方、ＰＣ２は主としてＣＰＵ２１、ＲＡＭ２２、記憶装置２３、本体に設けられた複数のキーや、本体に接続されたマウス等の入力装置２４、ＬＣＤ及びその駆動回路等からなる表示装置２５、前記メモリカード４に対するデータの入出力を行うためのカードインターフェイス回路２６から構成されるとともに、ＲＧＢケーブル３が接続されたＲＢＧ信号の出力端子２７を有している。前記記憶装置２３は記憶容量の比較的大きなハードディスク等であり、記憶装置２３には、プレゼンテーション用のドキュメントの作成・編集を行うための所定のプレゼンテーション・プログラムが格納されている。なお、前記出力端子２７は、ＣＰＵ１１に接続された図示しない画像信号処理回路に設けられている。
【００６１】
以下、前述したプロジェクタ１の本発明に係る動作を図３のフローチャートに従い説明する。図３は、ＰＣ２からＲＢＧ信号として出力されたドキュメント（文字や図表等とからなる文書）の表示画像の投影中におけるプロジェクタ１の手書き情報記録動作を示したものである。なお、以下の説明においては、スクリーンＳ上に、プレゼンテーションの参加者によってコメントやアンダーライン等の手書き情報が直接記述されているものとする。
【００６２】
プロジェクタ１は、ユーザーによって所定の操作ボタンの押下による撮影操作が行われると（ステップＳＡ１でＹＥＳ）、前記デジタルカメラ部１６によって、その時点におけるスクリーンＳ、すなわちドキュメント情報に基づく表示画像を投影している投影状態のスクリーンＳを撮影し、撮影により取得した画像、例えば図４（ａ）に示したような撮影画像（以下、文書画像と呼ぶ）Ｇ１のデータをインデックス情報（索引情報）としてＲＡＭ１３に一時記憶する（ステップＳＡ２）。次に、投影中のドキュメントの投影を停止し、白色光のみをスクリーンＳに照射した非投影状態のスクリーンＳを撮影し、例えば図４（ｂ）に示したような手書き情報が映った撮影画像（以下、手書き情報画像と呼ぶ）Ｇ２を取得する（ステップＳＡ３）。そして、前記文書画像Ｇ１と手書き情報画像Ｇ２とを１セットにして、本体に装着されているメモリカード４に記録する（ステップＳＡ４）。係る処理は、双方の画像Ｇ１，Ｇ２が同一の撮影操作に応じて記録されたことが識別できるよう互いを対応させて記録する処理であり、例えば両画像Ｇ１，Ｇ２に末尾のみが異なるファイル名（「ＡＡＡＡ−１．ｊｐｇ」と「ＡＡＡＡ−２．ｊｐｇ」等）を付与して記録する処理である。これにより、１回の手書き情報記録動作を終了する。そして、ドキュメントの投影中には、ユーザーによって撮影操作が行われる毎に、前述した動作を繰り返す。
【００６３】
これにより、本実施の形態によれば、ユーザーつまりドキュメントの作成者等は、プレゼンテーション等の終了後に、メモリカード４をＰＣ２等へ装着し、そこに記憶されている手書き情報画像Ｇ２を表示させることにより手書き情報を使用することができる。しかも、その際には、手書き情報画像Ｇ２と対応して記録されている文書画像Ｇ１を観ることにより、その手書き情報が、どのドキュメントの投影時に記述されていたのかを容易に知ることができる。
【００６４】
なお、本実施の形態では、ユーザーによる所定の撮影操作に応じてスクリーンＳを連続的に撮影し、文書画像Ｇ１と手書き情報画像Ｇ２とを相前後して取得するようにしたが以下のようにしてもよい。
【００６５】
すなわち手書き情報画像Ｇ２を先に取得した後、文書画像Ｇ１を取得するようにしてもよい。また、両画像Ｇ１，Ｇ２の取得時期を撮影操作があった時点ではなく、投影するドキュメントを切り替える時点としてもよい。例えばプロジェクタ１に、ＰＣ２から送られてくるＲＢＧ信号の内容の変化に基づき投影するドキュメントが切り替えられたことを検出する機能を設け、それを検出したら、まずそれ以前の表示画像を投影した状態を維持したままでスクリーンＳを撮影させ、しかる後、本実施の形態と同様に非投影状態のスクリーンＳを撮影させればよい。つまり全てのドキュメントについて、文書画像Ｇ１と手書き情報画像Ｇ２（但し、手書き情報が存在しない場合もある）とを自動的に取得して記録させる構成としてもよい。
【００６６】
さらに、文書画像Ｇ１の取得時期は、投影するドキュメントや、そのページが切り替わった直後のように、スクリーンＳ上に手書き情報が記述されていない状態にある時期としても構わない。例えばドキュメントのページが切り替わった直後に、手書き情報が記述されていない状態のスクリーンＳを自動的に撮影させ、取得した文書画像Ｇ１を予めＲＡＭ１３等に記憶しておき、ユーザーによる撮影操作があったとき時には手書き情報画像Ｇ２のみを取得させるようにしてもよい。
【００６７】
また、本実施の形態では、プロジェクタ１が取得した文書画像Ｇ１と手書き情報画像Ｇ２をメモリカード４に記録するものとしたが、例えばプロジェクタ１がＰＣ２へのデータの出力を可能とする構成を有している場合には、文書画像Ｇ１と手書き情報画像Ｇ２のデータ（画像ファイル）をＰＣ２へ逐次出力させ、それらを１セットでＰＣ２側（記憶装置２３等）に記憶させる構成としてもよい。
【００６８】
また、プロジェクタ１がＰＣ２から出力されたＲＢＧ信号に基づきドキュメントの表示画像をスクリーンＳに投影する構成である場合を示したが、例えばメモリカード４から、それに記録されているドキュメントの元データ（所定形式の文書ファイル）を読み出してドキュメントの表示画像をスクリーンＳに投影する機能を有したプロジェクタにおいても本発明を採用することができる。
【００６９】
（第２の実施の形態）
次に、本発明の第２の実施の形態について説明する。図５は本実施の形態における投影システムを示す構成図である。この投影システムも第１の実施の形態と同様にプロジェクタ１とＰＣ２とから構成されている。図６は、本実施の形態におけるプロジェクタ１とＰＣ２の概略構成を示すブロック図である。本実施の形態においてプロジェクタ１とＰＣ２は、それぞれがＵＳＢ端子１９，２８を有しており、ＵＳＢケーブル３１を介して互いに接続されている。なお、図示しないがＵＳＢ端子１９，２８は、実際にはＣＰＵ１１，２１に接続されたＵＳＢインターフェイス回路に設けられており、これによりＰＣ２からプロジェクタ１に対して後述する所定のデータが送信可能となっている。
【００７０】
また、本実施の形態においては、プロジェクタ１が有するＲＯＭ１２に、ＣＰＵ１１を本発明の文字認識手段と機能させるためのプログラムが格納され、かつＰＣ２が有する記憶装置２３が本発明の文書記憶手段であるとともに、記憶装置２３には、ＣＰＵ２１を本発明の判別手段として機能せるためのプログラムが格納されている。これ以外の構成については、第１の実施の形態に示したものと同様である。
【００７１】
以下、本実施の形態におけるプロジェクタ１とＰＣ２の動作を説明する。まず、プロジェクタ１の動作について説明する。図７は、ＰＣ２からＲＢＧ信号として出力されたドキュメントの投影中におけるプロジェクタ１の手書き情報記録動作を示したものである。なお、ここでは、スクリーンＳ上に、プレゼンテーションの参加者によってコメントやアンダーライン等の手書き情報が直接記述されているものとする。
【００７２】
本実施の形態においても、プロジェクタ１はユーザーによる撮影操作に応じた撮影処理を行い、図４に示した文書画像Ｇ１と手書き情報画像Ｇ２とを取得する（ステップＳＢ１）。係る処理は、第１の実施の形態において図３に示したステップＳＡ１〜ＳＡ３の処理と同一である。次に、プロジェクタ１は、ＵＳＢケーブル３１を介してＰＣ２から、その時点で投影しているドキュメントのヘッダ情報を取得するとともに、そのヘッダ情報に含まれるページ番号の印字位置を確認する（ステップＳＢ２）。
【００７３】
そして、ヘッダ情報にページ番号の位置情報（印刷位置を示す情報）があれば（ステップＳＢ３でＹＥＳ）、文書画像Ｇ１上のページ番号位置（位置情報で示された位置に対応する領域）に対してＯＣＲ機能による文字認識を行い、文書画像Ｇ１の画像データからページ番号を取得する（ステップＳＢ４）。しかる後、取得したページ番号をインデックス情報（索引情報）として、それと手書き情報画像Ｇ２とを１セットにして、本体に装着されているメモリカード４に記録する（ステップＳＢ５）。
【００７４】
一方、ステップＳＢ３の判別結果がＮＯであって、ＰＣ２から取得したヘッダ情報にページ番号の位置情報がなければ、図８に示したように文書画像Ｇ１の四隅及び下方中央部分ａ〜ｅ、つまりページ番号が印刷（表示）される可能性の高い部分を認識領域としてＯＣＲ機能による文字認識を行い、各認識領域（ａ〜ｅ）のイメージをテキストデータに変換し（ステップＳＢ６）、いずれかの領域に数字が存在するか確認する（ステップＳＢ７）。そして、数字が存在していれば（ステップＳＢ８でＹＥＳ）、その数字をページ番号とし、それを手書き情報画像Ｇ２と１セットにしてメモリカード４に記録する（ステップＳＢ５）。
【００７５】
また、いずれかの領域にも数字が存在していない場合には（ステップＳＢ８でＮＯ）、ユーザーにページ番号を入力させた後（ステップＳＢ９）、入力されたページ番号を手書き情報画像Ｇ２と１セットにしてメモリカード４に記録する（ステップＳＢ５）。これにより、１回の手書き情報記録動作を終了する。そして、ドキュメントの投影中には、ユーザーによって撮影操作が行われる毎に、前述した動作を繰り返す。
【００７６】
なお、前述したステップＳＢ５の処理は、上記のように取得したページ番号と手書き情報画像Ｇ２とが同一の撮影操作に応じて記録されたことが識別できるよう互いを対応させて記録する処理であり、例えばページ番号と手書き情報画像Ｇ２に、データ種別を示す識別子の部分のみが異なる同一のファイル名（「ＡＡＡＡ．ｊｐｇ」と「ＡＡＡＡ．ｔｘｔ」等）を付与したり、或いは双方のデータをメモリカード４内に決められた順に（記録アドレスを連続させて）記録する処理である。
【００７７】
図９は、上述したように互いに対応する１又は複数組の手書き情報画像Ｇ２とページ番号とが記録された状態のメモリカード４が装着された後、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。なお、ここでは処理対象となるドキュメントがユーザーによって予め指定されるものとする。
【００７８】
ＰＣ２は、まず、メモリカード４から手書き情報画像Ｇ２を読み込み（ステップＳＣ１）、さらに、手書き情報画像Ｇ２と対応するページ番号を読み込む（ステップＳＣ２）。次に、読み込んだページ番号を元に、記憶装置２３に記憶されているとともに、事前に指定されたドキュメントの該当するページに手書き情報画像Ｇ２を貼り付ける（ステップＳＣ３）。そして、以上の処理をメモリカード４に記録されている手書き情報画像Ｇ２の数だけ順に繰り返す。
【００７９】
したがって、本実施の形態によれば、ユーザーは、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報を対応するページに自動的に貼り付けて利用することができる。
【００８０】
なお、本実施の形態においても、第１の実施の形態と同様に、文書画像Ｇ１と手書き情報画像Ｇ２の取得順、及び文書画像Ｇ１の取得時期は適宜変更することができる。
【００８１】
また、本実施の形態においては、プロジェクタ１が、投影しているドキュメントのヘッダ情報をＰＣ２から取得するようにしたが、ＰＣ２からドキュメントのヘッダ情報を取得しない構成としてもよい。つまり、プロジェクタ１とＰＣ２とをＵＳＢケーブル３１で接続しなくともよく、第１の実施の形態と同様のハード構成を採用してもよい。その場合には、図７に示した処理においてステップＳＢ２〜ＳＢ４の処理を省略するようにしてもよい。
【００８２】
また、ドキュメントのヘッダ情報をＰＣ２から取得しない場合には、以下のようにしてもよい。例えば第１の実施の形態と同様の手順で、互いに対応する１又は複数組の文書画像Ｇ１及び手書き情報画像Ｇ２をメモリカード４に記録した後、ユーザーの要求に応じて、まず、複数の文書画像Ｇ１についてステップＳＢ６の処理を一括して行い後、続くステップＳＢ７では、全ての文書画像Ｇ１の同じ位置（領域）に数字が存在するか確認する。そして、同じ位置に数字が存在していれば（ステップＳＢ８でＹＥＳ）、ステップＳＢ５において各文書画像Ｇ１の同じ位置から取得した数字をページ番号として採用し、各々のページ番号を対応する手書き情報画像Ｇ２と１セットにしてメモリカード４に記録させるようにしてもよい。その場合には、より正確に手書き情報画像Ｇ２に対応するページ番号を取得することができる。
【００８３】
また、本実施の形態では、プロジェクタ１が取得した文書画像Ｇ１とページ番号とをメモリカード４に記録するものとしたが、例えばプロジェクタ１からＰＣ２へ、ＵＳＢケーブル３１を介して文書画像Ｇ１とページ番号とを逐次出力させ、それらをＰＣ２側（記憶装置２３等）に記憶させる構成としてもよい。さらに、プロジェクタ１には、前述したステップＳＢ１で取得した文書画像Ｇ１と手書き情報画像Ｇ２とをそのままＰＣ２へ出力させ、ＰＣ２に、前述した画像貼り付け処理に先立ち、プロジェクタ１が行っていたページ番号の取得に関する処理を行わせる構成としてもよい。
【００８４】
また、第１の実施の形態と同様、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有したプロジェクタに本発明を採用することもできる。その場合には、プロジェクタ１に、前述したＰＣ２による画像貼り付け処理をユーザーによる所定の操作に応じて行わせたり、ユーザーによる撮影操作がある毎に逐次行わせたりしてもよい。
【００８５】
（第３の実施の形態）
次に、本発明の第３の実施の形態について説明する。本実施の形態は、第２の実施の形態で図５及び図６に示した投影システムにおいて、ドキュメントの各ページに存在するページタイトルを、手書き情報画像Ｇ２と１セットにしてメモリカード４に記録させるものである。
【００８６】
以下、プロジェクタ１とＰＣ２の本発明に係る動作について説明する。まず、プロジェクタ１の動作について説明する。図１０は、ＰＣ２からＲＢＧ信号として出力されたドキュメントの投影中におけるプロジェクタ１の手書き情報記録動作を示したものである。なお、ここでは、スクリーンＳ上に、プレゼンテーションの参加者によってコメントやアンダーライン等の手書き情報が直接記述されているものとする。
【００８７】
本実施の形態においても、プロジェクタ１は画像投影中においてユーザーによる撮影操作に応じた撮影処理を行い、第１の実施の形態で図４に示した文書画像Ｇ１と手書き情報画像Ｇ２とを取得する（ステップＳＤ１）。係る処理は、第１の実施の形態において図３に示したステップＳＡ１〜ＳＡ３の処理と同一である。次に、プロジェクタ１は、ＵＳＢケーブル３１を介してＰＣ２から、その時点で投影しているドキュメントのヘッダ情報を取得するとともに、そのヘッダ情報に含まれるページタイトルの印字位置を確認する（ステップＳＤ２）。
【００８８】
そして、ヘッダ情報にページタイトルの位置情報（印刷位置を示す情報）があれば（ステップＳＤ３でＹＥＳ）、文書画像Ｇ１上のページタイトル位置（位置情報で示された位置に対応する領域）に対してＯＣＲ機能による文字認識を行い、文書画像Ｇ１の画像データからページタイトルを取得する（ステップＳＤ４）。しかる後、取得したページタイトルをインデックス情報（索引情報）とし、それと手書き情報画像Ｇ２とを１セットにして、本体に装着されているメモリカード４に記録する（ステップＳＤ５）。
【００８９】
一方、ステップＳＤ３の判別結果がＮＯであって、ＰＣ２から取得したヘッダ情報にページタイトルの位置情報がなければ、図１１に示したように文書画像Ｇ１の上部ｆ、つまりページタイトルが印刷（表示）される可能性の高い部分を認識領域としてＯＣＲ機能による文字認識を行い、その認識領域（ｆ）のイメージをテキストデータに変換する（ステップＳＤ６）。そして、そこにテキストが存在していれば（ステップＳＤ７でＹＥＳ）、そのテキストの上方から２行をページタイトルとし（ステップＳＤ８）、それを手書き情報画像Ｇ２と１セットにしてメモリカード４に記録する（ステップＳＤ５）。また、テキストが存在していない場合（ステップＳＤ７でＮＯ）、ステップＳＤ５では、手書き情報画像Ｇ２のみをメモリカード４に記録する。
【００９０】
なお、前述したステップＳＤ５の処理は、上記のように取得したページタイトルと手書き情報画像Ｇ２とが同一の撮影操作に応じて記録されたことが識別できるよう互いを対応させて記録する処理であり、具体的な処理内容については第２の実施の形態と同様である。
【００９１】
図１２は、上述したように互いに対応する１又は複数組の文書画像Ｇ１とページタイトルとが記録された状態のメモリカード４が装着された後、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。なお、ここでは処理対象となるドキュメントがユーザーによって予め指定されるものとする。
【００９２】
ＰＣ２は、まず、メモリカード４から手書き情報画像Ｇ２を読み込み（ステップＳＥ１）、さらにそれと対応するページタイトルを読み込む（ステップＳＥ２）。ここで、ページタイトルが存在していれば（ステップＳＥ３でＹＥＳ）、読み込んだページタイトルと、記憶装置２３に記憶されているとともに、事前に指定されたドキュメントの全てのページにおけるページタイトルとをテキストとして比較し、一致する文字の多いページに手書き情報画像Ｇ２を貼り付ける（ステップＳＥ４）。
【００９３】
また、ステップＳＥ３の判別結果がＮＯであって、ページタイトルが存在していない場合には、ページタイトルが無いものとして、ユーザーの手作業による貼付を行う。つまり対応するページをユーザーに指定させ、指定されたページに手書き情報画像Ｇ２を貼り付ける（ステップＳＥ５）。そして、以上の処理をメモリカード４に記録されている手書き情報画像Ｇ２の数だけ順に繰り返す。
【００９４】
したがって、本実施の形態によれば、ユーザーは、ドキュメントの各ページにページタイトルが存在している場合には、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報を対応するページに自動的に貼り付けて利用することができる。
【００９５】
なお、本実施の形態においても、第１及び第２の実施の形態と同様に、文書画像Ｇ１と手書き情報画像Ｇ２の取得順、及び文書画像Ｇ１の取得時期は適宜変更することができる。
【００９６】
また、本実施の形態では、プロジェクタ１が、前述した処理中において文書画像Ｇ１からページタイトルを取得できなかった場合には（ステップＳＤ８でＮＯ）、続くステップＳＤ５では手書き情報画像Ｇ２のみをメモリカード４に記録するものとしたが、上記場合には、取得できなかったページタイトルに代えて、第１の実施の形態と同様に文書画像Ｇ１を手書き情報画像Ｇ２とセットにして記録するようにしてもよい。その場合には、ＰＣ２において、例えばユーザーの手作業による貼付を行うとき（ステップＳＥ５）、手書き情報画像Ｇ２を表示させるようにすれば、手書き情報画像Ｇ２がドキュメントのどのページ（ページタイトルが存在していないページ）に対応するのかをユーザーに教えることが可能となる。
【００９７】
また、本実施の形態においても、第２の実施の形態と同様に、プロジェクタ１がＰＣ２からドキュメントのヘッダ情報を取得しない構成としてもよく、その場合には、図１０に示した処理においてステップＳＤ２〜ＳＤ４の処理を省略すればよい。また、ドキュメントのヘッダ情報をＰＣ２から取得しない場合には、例えば第１の実施の形態と同様の手順で、互いに対応する１又は複数組の文書画像Ｇ１及び手書き情報画像Ｇ２をメモリカード４に記録した後、ユーザーの要求に応じて、ステップＳＤ６〜ＳＤ８、ＳＤ５の処理を一括して行うようにしてもよい。
【００９８】
また、本実施の形態では、プロジェクタ１が取得した文書画像Ｇ１とページタイトルとをメモリカード４に記録するものとしたが、例えばプロジェクタ１からＰＣ２へ、ＵＳＢケーブル３１を介して文書画像Ｇ１とページタイトルとを逐次出力させ、それらをＰＣ２側（記憶装置２３等）に記憶させる構成としてもよい。さらに、プロジェクタ１には、前述したステップＳＤ１で取得した文書画像Ｇ１と手書き情報画像Ｇ２とをそのままＰＣ２へ出力させ、ＰＣ２に、画像貼り付け処理に先立ち、プロジェクタ１が行っていたページタイトルの取得に関する処理を前述した行わせる構成としてもよい。
【００９９】
また、第１の実施の形態と同様、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有したプロジェクタに本発明を採用することもできる。その場合には、プロジェクタ１に、前述したＰＣ２による画像貼り付け処理をユーザーによる所定の操作に応じて行わせたり、ユーザーによる撮影操作がある毎に逐次行わせたりしてもよい。
【０１００】
（第４の実施の形態）
次に、本発明の第４の実施の形態について説明する。本実施の形態は、第１の実施の形態で説明した投影システム（図１及び図２）において、
ＰＣ２が有する記憶装置２３が本発明の文書記憶手段であるとともに、記憶装置２３には、ＣＰＵ２１を本発明の変換手段、判別手段として機能せるためのプログラムが格納されているものである。
【０１０１】
図１３は、図３で説明した手順でプロジェクタ１によって１又は複数組の文書画像Ｇ１と手書き情報画像Ｇ２とが記録されたメモリカード４が、前記ＰＣ２に装着された後、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。なお、ここでも処理対象となるドキュメントがユーザーによって予め指定されるものとする。
【０１０２】
すなわちＰＣ２は前記記憶装置２３に記憶されているドキュメントの１ページ分のデータに基づき、その表示イメージの画像データを作成した後（ステップＳＦ１）、作成した画像データを標準パターンとして、メモリカード４に記憶されている全ての文書画像Ｇ１についてパターンマッチング、例えば前記標準パターン（テンプレート）を文書画像Ｇ１に重ねながら移動し、２つの画像における画素データレベル対応の相関を調べるテンプレートマッチングを行う（ステップＳＦ２）。そして、パターンがマッチングする文書画像Ｇ１があったときには（ステップＳＦ３でＹＥＳ）、標準パターンの元になったドキュメントページに、メモリカード４に、パターンがマッチングした文書画像Ｇ１に対応して記録されている手書き情報画像Ｇ２を貼り付ける（ステップＳＦ４）。
【０１０３】
以後、全てのドキュメントページのマッチング処理が終了するまで上記の処理を繰り返し、それが終了した時点で（ステップＳＦ５でＹＥＳ）、パターンマッチングでいずれのページともマッチングしなかった文書画像Ｇ１がなければ（ステップＳＦ６でＮＯ）、そのまま処理を完了する。また、マッチングしなかった文書画像Ｇ１（１又は複数）があった場合には（ステップＳＦ６でＹＥＳ）、各々の文書画像Ｇ１に対応してメモリカード４に記録されている各々の手書き情報画像Ｇ２について、ユーザーの手作業による貼付を行う。つまり対応するページをユーザーに指定させ、指定されたページに手書き情報画像Ｇ２を貼り付け（ステップＳＦ７）、処理を完了する。
【０１０４】
したがって、本実施の形態によれば、ユーザーは、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報の殆どを対応するページに自動的に貼り付けて利用することができる。
【０１０５】
なお、本実施の形態においても、第１〜第３の実施の形態と同様に、文書画像Ｇ１と手書き情報画像Ｇ２の取得順、及び文書画像Ｇ１の取得時期は適宜変更することができる。
【０１０６】
また、本実施の形態では、プロジェクタ１が取得した文書画像Ｇ１と手書き情報画像Ｇ２とをメモリカード４に記録するものを示したが、第２及び第３の実施の形態のようにプロジェクタ１とＰＣ２とをＵＳＢケーブル３１によって接続する構成とし、プロジェクタ１からＰＣ２へ文書画像Ｇ１と手書き情報画像Ｇ２とを逐次出力させ、それらをＰＣ２側（記憶装置２３等）に記憶させる構成としてもよく、さらに、ＰＣ２には、前出した画像貼り付け処理をリアルタイムで行わせてもよい。その場合には、予めドキュメントの全ページについて、その画像データを作成しておき、プロジェクタ１から送られた互いに対応する文書画像Ｇ１と手書き情報画像Ｇ２をいったんＲＡＭ２２等に記憶した後、その文書画像Ｇ１を標準パターンとして全てのページの画像データについてパターンマッチングを行い、パターンがマッチした画像データの元になったドキュメントページに手書き情報画像Ｇ２を貼り付ける処理を行わせるようにすればよい。
【０１０７】
また、プロジェクタ１が、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有している場合には、プロジェクタ１に、前述したＰＣ２による画像貼り付け処理をユーザーによる所定の操作に応じて行わせたり、ユーザーによる撮影操作がある毎に逐次行わせたりしてもよい。
【０１０８】
（第５の実施の形態）
次に、本発明の第５の実施の形態について説明する。第１の実施の形態で図１に示した投影システムにおいて、ＰＣ２の記憶装置２３に後述する動作を行わせるためのプログラムが格納されているものである。
【０１０９】
以下、プロジェクタ１とＰＣ２の本発明に係る動作を説明する。図１４は、ドキュメントの投影中におけるプロジェクタとパーソナルコンピュータの動作を示すフローチャートである。
【０１１０】
ＰＣ２は、入力装置２４の操作によりユーザーにより指定されたドキュメントのデータを記憶装置２３から読み込んだ後（ステップＳＧ１）、それに含まれているドキュメント情報、すなわちデータの格納場所であるフォルダ名、ファイル名、ページ番号を取得する（ステップＳＧ２）。なお、ページ番号は、その時点で表示すべきドキュメントページのページ番号であり、当初は「１」である。次に、取得したドキュメント情報を、本発明の本発明の二次元情報である２次元バーコードに変換し（ステップＳＧ３）、その２次元バーコードをドキュメントページの所定箇所に表示用の画像データとして合成する（ステップＳＧ４）。しかる後、合成した画像データを表示装置に表示するとともに、ＲＧＢケーブル３を介してプロジェクタ１へ出力する（ステップＳＧ５）。そして、表示するページが切り替えられる毎に（ステップＳＧ６でＮＯ）、ステップＳＧ２〜ＳＧ５の処理を繰り返す。
【０１１１】
その間、プロジェクタ１は、ＰＣ２から出力された画像データによる表示画像（図１５参照）をスクリーンＳに投影するとともに、第１の実施の形態と同様に、ユーザーによる撮影操作に応じて撮影処理を行い、ドキュメントが表示された状態の撮影画像、つまり図１５に示したように左下の隅に２次元バーコードＢが存在する文書画像Ｇ３と手書き情報画像Ｇ２（図４（ｂ）参照）とを１セットにして、本体に装着されているメモリカード４に記録する（ステップＳＡ１〜ＳＡ４）。
【０１１２】
図１６は、前述したように互いに対応する１又は複数組の文書画像Ｇ３と手書き情報画像Ｇ２とが記録された状態のメモリカード４が装着された後、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。ＰＣ２は、まず、メモリカード４から文書画像Ｇ３を読み込み（ステップＳＧ１１）、それに含まれる２次元バーコードＢより前述したドキュメント情報を取得する（ステップＳＧ１２）。引き続き、取得したドキュメント情報により示されるドキュメントのファイルにアクセスし、それを読み出した後（ステップＳＧ１３）、ドキュメント情報に含まれるページ番号に該当するページに手書き情報画像Ｇ２を貼り付け、そのデータを記録する（ステップＳＧ１４）。そして、以上の処理をメモリカード４に記録されている文書画像Ｇ３及び手書き情報画像Ｇ２の数だけ順に繰り返す。
【０１１３】
したがって、本実施の形態によれば、ユーザーは、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報を対応するページに自動的に貼り付けて利用することができる。しかも、前述した２次元バーコードＢには、必要に応じてドキュメント情報とは別の情報を組み込むことも可能であるというメリットがある。
【０１１４】
なお、本実施の形態においては、本発明の二次元情報として２次元バーコードＢを使用するものを示したが、これ以外に限らず、その必要面積が比較的小さいものであれば他の二次元情報（例えば、公知のインタクトコード）を、ドキュメントの所定箇所に合成して表示させるようにしても構わない。
【０１１５】
また、本実施の形態においても、第１〜第４の実施の形態と同様に、文書画像Ｇ１と手書き情報画像Ｇ２の取得順、及び文書画像Ｇ１の取得時期は適宜変更することができる。
【０１１６】
また、例えば第２及び第３の実施の形態のようにプロジェクタ１とＰＣ２とをＵＳＢケーブル３１によって接続する構成とし、プロジェクタ１からＰＣ２へ文書画像Ｇ３と手書き情報画像Ｇ２とを逐次出力させ、それらをＰＣ２側（記憶装置２３等）に記憶させる構成としてもよい。
【０１１７】
また、プロジェクタ１が、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有している場合には、プロジェクタ１に、前述したＰＣ２による画像貼り付け処理をユーザーによる所定の操作に応じて行わせるようにしてもよい。
【０１１８】
（第６の実施の形態）
次に、本発明の第６の実施の形態について説明する。第１の実施の形態で図１に示した投影システムにおいて、プロジェクタ１とＰＣ２とが図１７に示したように電波時計２０，２９を備えている。また、本実施の形態においては、ＰＣ２が有する記憶装置２３が本発明の管理情報記憶手段であるとともに、記憶装置２３に、ＣＰＵ２１を本発明の管理情報生成手段として機能せるためのプログラムが格納され、かつプロジェクタ１のＲＯＭ１２には、後述する動作を行わせるためのプログラムが格納されている。
【０１１９】
以下、プロジェクタ１とＰＣ２の本発明に係る動作を説明する。図１８は、ドキュメントの投影中におけるプロジェクタとパーソナルコンピュータの動作を示すフローチャートである。
【０１２０】
ＰＣ２は、入力装置２４の操作によりユーザーにより指定されたドキュメントのデータを記憶装置２３から読み込み（ステップＳＨ１）、所定のページの画像データを表示装置に表示するとともに、ＲＧＢケーブル３を介してプロジェクタ１へ出力する（ステップＳＨ２）。続いて、電波時計２９により示されている現在時刻を取得し（ステップＳＨ３）、そのドキュメントページの表示開始時刻と、ドキュメント名（フォルダ名＋ファイル名）とページ番号をＲＡＭ２２に格納する（ステップＳＨ４）。その後、表示終了操作すなわちページの切り替え操作、又はドキュメントの表示終了操作があれば（ステップＳＨ５でＹＥＳ）、再び電波時計２９により示されている現在時刻を取得し（ステップＳＨ６）、その時刻を当該ドキュメントページの表示終了時刻としてＲＡＭ２２に格納する（ステップＳＨ７）。
【０１２１】
引き続き、前記表示終了操作がドキュメントの表示終了操作でなければ（ステップＳＨ８でＮＯ）、ステップＳＨ２〜ＳＨ７の動作を繰り返す。これによりＲＡＭ２２には、図１９に示すような、表示したページ毎に付与された管理ＩＤと、ドキュメント名、ページ番号、開始／終了フラグ、開始時間、終了時間の各データからなる表示履歴情報１００が順に蓄積される。なお、この表示履歴情報１００が本発明の管理情報である。また開始／終了フラグは「０」で表示中、「１」で表示終了を示すデータである。そして、前記表示終了操作がドキュメントの表示終了操作であったときには（ステップＳＨ８でＹＥＳ）、その時点でＲＡＭ２２に蓄積されている表示履歴情報１００を記憶装置２３に格納する。
【０１２２】
その間、プロジェクタ１は、ＰＣ２から出力された画像データによる表示画像をスクリーンＳに投影し（ステップＳＩ１）、その後、ユーザーによる撮影操作が行われた時点で、投影中のドキュメント情報の投影を停止して、白色光のみをスクリーンＳに照射した非投影状態のスクリーンＳを撮影し、手書き情報画像Ｇ２（図４（ｂ）参照）を取得する（ステップＳＩ２）。なお、ここではスクリーンＳ上に手書き情報が直接記述されていることを前提とする。引き続き、電波時計２０により示されている現在時刻を取得し（ステップＳＩ３）、その時刻データと手書き情報画像Ｇ２のデータを本体に装着されているメモリカード４に記録する（ステップＳＩ４）。つまりステップＳＩ４で取得した時刻が撮影時刻として記憶された画像ファイルを生成し、それをメモリカード４に記録する。なお、以上の動作は、投影するドキュメントページ、又はドキュメントが切り替わる毎に繰り返し行われる。
【０１２３】
図２０は、前述したように１又は複数の手書き情報画像Ｇ２が記録された状態のメモリカード４が装着された後、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。ＰＣ２は、まず、先に説明した手順で記憶してある表示履歴情報１００を記憶装置２３から読み込み（ステップＳＨ１１）、ドキュメントの１ページ目を表示していた時間（開始時刻と終了時刻）を取得する（ステップＳＨ１２）。そして、その時間内に撮影された手書き情報画像Ｇ２をメモリカード４から検索し（ステップＳＨ１３）、検索した手書き情報画像Ｇ２を、ドキュメントの１ページ目に貼り付け、そのデータを記憶装置２３に記録する（ステップＳＨ１４）。なお、ドキュメントの他のページについてもステップＳＨ１１〜ＳＨ１４の処理を行う。但し、いずれかのページについて、その表示時間に撮影された手書き情報画像Ｇ２が検索できなかったときには、ステップＳＨ１４の処理を省略する。
【０１２４】
したがって、本実施の形態においても、ユーザーは、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報を対応するページに自動的に貼り付けて利用することができる。また、手書き情報画像Ｇ２の撮影時刻と表示履歴情報１００に記録されるドキュメントの各ページの表示時間とが電波時計２０，２９により取得されたものであり、同一基準により調整されている時刻であることから、手書き情報とドキュメントのページとを正確に対応させることができる。しかも、前述した第１〜第５の実施の形態とは異なり、プロジェクタ１が投影中に取得しメモリカード４に記録する画像が手書き情報画像Ｇ２のみであることから、メモリカード４をより有効に利用することができる。
【０１２５】
なお、本実施の形態についても、例えば第２及び第３の実施の形態のようにプロジェクタ１とＰＣ２とをＵＳＢケーブル３１によって接続する構成とし、プロジェクタ１からＰＣ２へ手書き情報画像Ｇ２を逐次出力させ、それらをＰＣ２側（記憶装置２３等）に記憶させる構成としてもよい。
【０１２６】
また、プロジェクタ１が、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有している場合には、プロジェクタ１に、前述したＰＣ２による画像貼り付け処理をユーザーによる所定の操作に応じて行わせるようにしてもよい。その場合には、前述した電波時計２０がユーザーによって時刻の調整が行われる通常の時計であっても、本実施の形態と同様に手書き情報とドキュメントのページとを正確に対応させることができる。
【０１２７】
（第７の実施の形態）
次に、本発明の第７の実施の形態について説明する。図２１は本実施の形態における投影システムを示す構成図である。この投影システムは、第２の実施の形態で図５に示したものと同様、ＲＧＢケーブル３とＵＳＢケーブル３１を介して接続されたプロジェクタ１とＰＣ２とから構成されている。但し、本実施の形態のプロジェクタ１とＰＣ２においては、図２２に示したようにカードインターフェイス回路１７，２６が省略されている。また、本実施の形態においても、ＰＣ２が有する記憶装置２３が本発明の管理情報記憶手段であるとともに、記憶装置２３にはＣＰＵ２１を本発明の管理情報生成手段として機能せるためのプログラムが格納されている。
【０１２８】
以下、プロジェクタ１とＰＣ２の本発明に係る動作を説明する。図２３は、ドキュメントの投影中におけるＰＣ２の画像管理情報生成処理に関する動作と、そのときのプロジェクタ１の動作を示すフローチャートである。
【０１２９】
ＰＣ２は、入力装置２４の操作によりユーザーにより指定されたドキュメントのデータを記憶装置２３から読み込み、所定のページの画像データを表示装置に表示するとともに、ＲＧＢケーブル３を介してプロジェクタ１へ出力する（ステップＳＪ１）。一方、プロジェクタ１は、ＰＣ２から出力された画像データによる表示画像をスクリーンＳに投影し（ステップＳＫ１）、その後、ユーザーによる撮影操作が行われた時点で、投影中のドキュメント情報の投影を停止して、白色光のみをスクリーンＳに照射した非投影状態のスクリーンＳを撮影し、手書き情報画像Ｇ２（図４（ｂ）参照）を取得する（ステップＳＫ２）。なお、ここではスクリーンＳ上に手書き情報が直接記述されていることを前提とする。そして、プロジェクタ１は手書き情報画像Ｇ２のデータをＵＳＢケーブル３１を介してＰＣ２へ出力する（ステップＳＫ３）。なお、以上の動作は、投影するドキュメントページ、又はドキュメントが切り替わる毎に繰り返し行われる。
【０１３０】
また、ＰＣ２では、プロジェクタ１から画像データが出力されると割り込み処理によって、入力した画像データをＲＡＭ２２に格納する（ステップＳＪ２）。さらに、その時点で表示しているドキュメントの元データに含まれているドキュメント情報、すなわちデータの格納場所であるフォルダ名、ファイル名、ページ番号を、前記画像データ（手書き情報画像Ｇ２）に対応させてＲＡＭ２２に格納する（ステップＳＪ３）。なお、ページ番号は、その時点で表示すべきドキュメントページのページ番号であり、当初は「１」である。しかる後、ＲＡＭ２２に格納してある画像データと、図２４に示すような画像管理情報２００、すなわち表示したページ毎に付与された管理ＩＤと、ドキュメント名、ページ番号、画像名の各データからなるデータを記憶装置２３の所定領域に記憶する（ステップＳＪ４）。なお、ドキュメント名はと画像名は、フォルダ名つまり記憶装置２３における記録場所（ドキュメント用の記録場所２３ａ、画像データ用の記録場所２３ｂ）＋ファイル名であるとともに、この画像管理情報２００が本発明の管理情報である。そして、ＰＣ２は、上記処理をドキュメントの表示終了操作があるまで繰り返すとともに、その間においてはページの切り替え操作があれば表示及び出力するページを切り替える。
【０１３１】
図２５は、記憶装置２３に１又は複数のページに関する画像管理情報２００が記憶されている状態において、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。ＰＣ２は、画像管理情報２００を記憶装置２３から読み込み（ステップＳＪ１１）、画像管理情報２００に示されているドキュメントを読み込んだ後（ステップＳＪ１２）、各管理ＩＤに対応して示されている画像データすなわち手書き情報画像Ｇ２のファイルを記憶装置２３から読み込むとともに、それを対応するページ番号のドキュメントページに貼り付け、そのデータ（ドキュメントのデータ）を記憶装置２３に記録する（ステップＳＪ１２）。
【０１３２】
したがって、本実施の形態においても、ユーザーは、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報を対応するページに自動的に貼り付けて利用することができる。また、第６の実施の形態と同様、プロジェクタ１が投影中に取得しメモリカード４に記録する画像が手書き情報画像Ｇ２のみであることから、メモリカード４をより有効に利用することができる。
【０１３３】
なお、本実施の形態とは異なり、プロジェクタ１が、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有している場合には、プロジェクタ１に前述したＰＣ２による動作を全て行わせるようにしてもよい。
【０１３４】
（第８の実施の形態）
次に、本発明の第８の実施の形態について説明する。本実施の形態は、第２の実施の形態で図５及び図６に示した投影システムにおいて、プロジェクタ１が有するＲＯＭ１２に、ＣＰＵ１１を本発明の付加手段と機能させるためのプログラムが格納されているものである。
【０１３５】
以下、プロジェクタ１とＰＣ２の本発明に係る動作を説明する。図２３は、ドキュメントの投影中におけるＰＣ２とプロジェクタ１の動作を示すフローチャートである。ＰＣ２は、入力装置２４の操作によりユーザーにより指定されたドキュメントのデータを記憶装置２３から読み込み、所定のページの画像データを表示装置に表示するとともに、ＲＧＢケーブル３を介してプロジェクタ１へ出力する（ステップＳＬ１）。さらに、その時点で表示しているドキュメントの元データに含まれているドキュメント情報、すなわちデータの格納場所であるフォルダ名、ファイル名、ページ番号をＵＳＢケーブル３１を介してプロジェクタ１へ出力する（ステップＳＬ２）。
【０１３６】
その間、プロジェクタ１は、ＰＣ２から出力された画像データによる表示画像をスクリーンＳに投影し（ステップＳＭ１）、さらに、ＰＣ２から出力された前記ドキュメント情報を取得しＲＡＭ１３に格納する（ステップＳＭ２）。その後、ユーザーによる撮影操作が行われた時点で、投影中のドキュメント情報の投影を停止して、白色光のみをスクリーンＳに照射した非投影状態のスクリーンＳを撮影し、手書き情報画像Ｇ２（図４（ｂ）参照）を取得する（ステップＳＭ３）。なお、ここではスクリーンＳ上に手書き情報が直接記述されていることを前提とする。
【０１３７】
そして、撮影により取得した画像データのプロパティに、ＲＡＭ１３のドキュメント情報を付加し、より具体的には、図２７に示したように、手書き情報画像Ｇ２のファイルにおいて画像データ本体に付加する付加データ３００のうち、当該ファイルの全般に関する属性を示すデータとして、ターゲットファイル（フォルダ名＋ファイル名）とターゲットページ（ページ番号）の各データを加え、その画像ファイルを本体に装着されているメモリカード４に記録する（ステップＳＭ４）。なお、以上の動作は、投影するドキュメントページ、又はドキュメントが切り替わる毎に繰り返し行われる。
【０１３８】
図２５は、上述したように１又は複数の手書き情報画像Ｇ２が状態のメモリカード４が装着された後、例えば前記プレゼンテーション・プログラムに設けられている所定のコマンドが選択されたときＰＣ２が実行する画像貼り付け処理に関する動作を示したフローチャートである。ＰＣ２は、まず、メモリカード４から手書き情報画像Ｇ２のデータ（画像ファイル）を読み込み（ステップＳＮ１）、そのプロパティよりドキュメント情報、つまりターゲットファイル、及びターゲットページのデータを取得する（ステップＳＮ２）。引き続き、ターゲットファイルに該当するドキュメントを記憶装置２３から読み込み（ステップＳＮ３）、ターゲットページに該当するドキュメントページに手書き情報画像Ｇ２を貼り付け、そのデータ（ドキュメントのデータ）を記憶装置２３に記録する（ステップＳＮ４）。そして、以上の処理をメモリカード４に記録されている手書き情報画像Ｇ２の数だけ順に繰り返す。
【０１３９】
したがって、本実施の形態においても、ユーザーは、ドキュメントの投影時に保存した手書き情報がドキュメントのどのページに対応するのかを、自分で確認せずとも、保存した手書き情報を対応するページに自動的に貼り付けて利用することができる。また、第６及び第７の実施の形態と同様、プロジェクタ１が投影中に取得しメモリカード４に記録する画像が手書き情報画像Ｇ２のみであることから、メモリカード４をより有効に利用することができる。
【０１４０】
しかも、第６や第７の実施の形態と異なり、前述した表示履歴情報１００や画像管理情報２００といった管理情報を作成して記憶しておく必要がなく、手書き情報画像Ｇ２から直接、それと対応するドキュメントページを知ることができるため、第６や第７の実施の形態と比べ使い勝手がよいというメリットがある。
【０１４１】
なお、本実施の形態では、プロジェクタ１が取得した手書き情報画像Ｇ２をメモリカード４に記録するものとしたが、例えばプロジェクタ１からＰＣ２へ、ＵＳＢケーブル３１を介して手書き情報画像Ｇ２を逐次出力させ、それらをＰＣ２側（記憶装置２３等）に記憶させる構成としてもよい。
【０１４２】
また、プロジェクタ１が、メモリカード４に記録されているドキュメントの元データを読み出し、読み出したデータに基づきドキュメントの表示画像をスクリーンＳに投影する機能を有している場合には、プロジェクタ１に、前述したＰＣ２による画像貼り付け処理をユーザーによる所定の操作に応じて行わせるようにしてもよい。
【０１４３】
一方、以上説明した第２〜第８の実施の形態では、主としてＰＣ２が、手書き情報画像Ｇ２を対応するドキュメントの所定ページに自動的に貼り付ける機能を有する場合について説明したが、それとは別に、各実施の形態において、ＰＣ２に、単に手書き情報画像Ｇ２と対応するページを、ページ番号やページタイトルを表示する等の任意の方法でユーザーに教える機能を持たせてもよい。その場合においても、ユーザーはスクリーンＳに直接記述された手書き情報を容易に利用するとき、どのドキュメントの投影時に記述されていたのかを容易に知ることができるという効果が得られる。
【０１４４】
さらに、以上説明した第１〜第８の実施の形態では、主としてデジタルカメラが内蔵されたプロジェクタ１を用いて本発明を実施するものを示したが、これ以外にも、例えばドキュメントの投影機能のみを有するプロジェクタに単体のデジタルカメラが外付けされた構成としても本発明を実施することができる。その場合には、プロジェクタに、必要に応じてデジタルカメラに所定のシャッター信号を送り、それによりデジタルカメラの撮影動作を制御させるようにすればよい。
【図面の簡単な説明】
【０１４５】
【図１】本発明の第１、第４〜６の実施の形態を示す投影システムの構成図である。
【図２】第１及び第４、第５の実施の形態に共通するプロジェクタとパーソナルコンピュータの概略構成を示すブロック図である。
【図３】第１の実施の形態におけるプロジェクタの動作を示すフローチャートである。
【図４】同実施の形態で記憶される文書画像とスクリーン画像の一例を示す図である。
【図５】本発明の第２、第３、第８の実施の形態に共通する投影システムの構成図である。
【図６】同投影システムにおけるプロジェクタとパーソナルコンピュータの概略構成を示すブロック図である。
【図７】同実施の形態におけるプロジェクタの動作を示すフローチャートである。
【図８】同実施の形態における文書画像の文字認識領域を示す図である。
【図９】同実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【図１０】本発明の第３の実施の形態におけるプロジェクタの動作を示すフローチャートである。
【図１１】同実施の形態における文書画像の文字認識領域を示す図である。
【図１２】同実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【図１３】第４の実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【図１４】第５の実施の形態を示すドキュメントの投影中におけるプロジェクタとパーソナルコンピュータの動作を示すフローチャートである。
【図１５】同実施の形態における投影画像の一例を示す図である。
【図１６】同実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【図１７】第６の実施の形態におけるプロジェクタとパーソナルコンピュータの概略構成を示すブロック図である。
【図１８】同実施の形態においてドキュメントの投影中におけるプロジェクタとパーソナルコンピュータの動作を示すフローチャートである。
【図１９】同実施の形態でパーソナルコンピュータが作成する表示履歴情報を示す模式図である。
【図２０】同実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【図２１】第７の実施の形態を示す投影システムの構成図である。
【図２２】同投影システムを構成するプロジェクタとパーソナルコンピュータの概略構成を示すブロック図である。
【図２３】同実施の形態においてドキュメントの投影中におけるプロジェクタとパーソナルコンピュータの動作を示すフローチャートである。
【図２４】同実施の形態でパーソナルコンピュータが作成する画像管理データを示す模式図である。
【図２５】同実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【図２６】第８の実施の形態を示すドキュメントの投影中におけるプロジェクタとパーソナルコンピュータの動作を示すフローチャートである。
【図２７】同実施の形態でプロジェクタが記録する画像ファイルの付加データの内容を示す図である。
【図２８】同実施の形態におけるパーソナルコンピュータによる画像貼り付け処理の手順を示すフローチャートである。
【符号の説明】
【０１４６】
１  プロジェクタ
１ｂ  撮影部
２  ＰＣ
３  ＲＧＢケーブル
４  メモリカード
１１  ＣＰＵ
１２  ＲＯＭ
１３  ＲＡＭ
１４  表示部
１６  デジタルカメラ部
２０  電波時計
２１  ＣＰＵ
２２  ＲＡＭ
２３  記憶装置
２９  電波時計
３１  ＵＳＢケーブル
１００  表示履歴情報
２００  画像管理情報
３００  付加データ
Ｓ  スクリーン
Ｇ１  文書画像
Ｇ２  手書き情報画像
Ｇ３  文書画像
【図１】
2008152766.tif 000003
【図２】
2008152766.tif 000004
【図３】
2008152766.tif 000005
【図４】
2008152766.tif 000006
【図５】
2008152766.tif 000007
【図６】
2008152766.tif 000008
【図７】
2008152766.tif 000009
【図８】
2008152766.tif 000010
【図９】
2008152766.tif 000011
【図１０】
2008152766.tif 000012
【図１１】
2008152766.tif 000013
【図１２】
2008152766.tif 000014
【図１３】
2008152766.tif 000015
【図１４】
2008152766.tif 000016
【図１５】
2008152766.tif 000017
【図１６】
2008152766.tif 000018
【図１７】
2008152766.tif 000019
【図１８】
2008152766.tif 000020
【図１９】
2008152766.tif 000021
【図２０】
2008152766.tif 000022
【図２１】
2008152766.tif 000023
【図２２】
2008152766.tif 000024
【図２３】
2008152766.tif 000025
【図２４】
2008152766.tif 000026
【図２５】
2008152766.tif 000027
【図２６】
2008152766.tif 000028
【図２７】
2008152766.tif 000029
【図２８】
2008152766.tif 000030
【手続補正書】
【提出日】平成19年12月10日(2007.12.10)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
文書の表示画像を投影したスクリーン上に直接記述された手書き情報を記録する方法であって、
手書き情報が記述された後に当該文書の投影を停止した非投影状態の前記スクリーンを撮影する工程と、
前記非投影状態での撮影により取得したスクリーン画像とその取得時に投影を停止した文書とを対応付けて着脱可能な記憶手段に記憶させる工程と
からなることを特徴とする手書き情報記録方法。
【請求項２】
文書の表示画像をスクリーンに投影する投影手段と、
この投影手段による前記表示画像の投影を要求に応じて停止させる投影制御手段と、
前記スクリーンを撮影する撮影手段と、
この撮影手段に、前記投影制御手段により投影手段による文書の投影が停止された非投影状態における前記スクリーンを撮影させスクリーン画像を取得させる撮影制御手段と、
前記撮影手段により取得されたスクリーン画像と前記投影制御手段により投影手段による表示画像の投影を停止された文書とを対応付けられて記憶する着脱可能な記憶手段と
を備えたことを特徴とする投影記録装置。
【請求項３】
前記スクリーン画像と前記文書との対応関係を示す管理情報を生成する管理情報生成手段と、
この管理情報生成手段により生成された管理情報を記憶する管理情報記憶手段と
を備えたことを特徴とする請求項２記載の投影記録装置。
【請求項４】
前記管理情報は、前記投影手段により投影された文書毎の投影開始時刻および投影終了時刻と、前記スクリーン画像の取得時刻とを含むことを特徴とする請求項３記載の投影記録装置。
【請求項５】
前記投影開始時刻および投影終了時刻と前記取得時刻は、同一基準により調整された時刻であることを特徴とする請求項４記載の投影記録装置。
【請求項６】
前記スクリーン画像に、その取得に際して前記投影手段による表示画像の投影を停止された文書を示す文書情報を付加する付加手段を備え、
前記記憶手段は、前記付加手段により文書情報が付加されたスクリーン画像を記憶することを特徴とする請求項２記載の投影記録装置。
【請求項７】
文書情報に基づく文書をスクリーンに投影する投影手段を備えた投影装置が有するコンピュータに、
前記投影手段による文書の投影を要求に応じて停止させる処理と、
撮影手段に、投影手段による前記文書の投影が停止された非投影状態における前記スクリーンを撮影させてスクリーン画像を取得させる処理と、
前記撮影手段により取得されたスクリーン画像と前記投影手段による投影が停止された文書とを対応付けて着脱可能な記憶手段に記憶させるための処理と
を実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】削除
【補正の内容】
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】削除
【補正の内容】
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】削除
【補正の内容】
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】削除
【補正の内容】
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】削除
【補正の内容】
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】削除
【補正の内容】
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】削除
【補正の内容】
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】削除
【補正の内容】
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】削除
【補正の内容】
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】削除
【補正の内容】
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】削除
【補正の内容】
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】削除
【補正の内容】
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】削除
【補正の内容】
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】削除
【補正の内容】
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】削除
【補正の内容】
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】削除
【補正の内容】
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】削除
【補正の内容】
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】削除
【補正の内容】
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】変更
【補正の内容】
【００２８】
前記課題を解決するために請求項１の発明にあっては、文書の表示画像を投影したスクリーン上に直接記述された手書き情報を記録する方法であって、手書き情報が記述された後に当該文書の投影を停止した非投影状態の前記スクリーンを撮影する工程と、前記非投影状態での撮影により取得したスクリーン画像とその取得時に投影を停止した文書とを対応付けて着脱可能な記憶手段に記憶させる工程とからなる方法とした。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
また、請求項２の発明にあっては、文書の表示画像をスクリーンに投影する投影手段と、この投影手段による前記表示画像の投影を要求に応じて停止させる投影制御手段と、前記スクリーンを撮影する撮影手段と、この撮影手段に、前記投影制御手段により投影手段による文書の投影が停止された非投影状態における前記スクリーンを撮影させスクリーン画像を取得させる撮影制御手段と、前記撮影手段により取得されたスクリーン画像と前記投影制御手段により投影手段による表示画像の投影を停止された文書とを対応付けられて記憶する着脱可能な記憶手段とを備えたものとした。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
また、請求項３の発明にあっては、前記スクリーン画像と前記文書との対応関係を示す管理情報を生成する管理情報生成手段と、この管理情報生成手段により生成された管理情報を記憶する管理情報記憶手段とを備えたものとした。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
また、請求項４の発明にあっては、前記管理情報は、前記投影手段により投影された文書毎の投影開始時刻および投影終了時刻と、前記スクリーン画像の取得時刻とを含むものとした。
【手続補正２７】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
また、請求項５の発明にあっては、前記投影開始時刻および投影終了時刻と前記取得時刻は、同一基準により調整された時刻であるものとした。
【手続補正２８】
【補正対象書類名】明細書
【補正対象項目名】００３８
【補正方法】変更
【補正の内容】
【００３８】
また、請求項６の発明にあっては、前記スクリーン画像に、その取得に際して前記投影手段による表示画像の投影を停止された文書を示す文書情報を付加する付加手段を備え、前記記憶手段は、前記付加手段により文書情報が付加されたスクリーン画像を記憶するものとした。
【手続補正２９】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】変更
【補正の内容】
【００４０】
また、請求項７の発明にあっては、文書情報に基づく文書をスクリーンに投影する投影手段を備えた投影装置が有するコンピュータに、前記投影手段による文書の投影を要求に応じて停止させる処理と、撮影手段に、投影手段による前記文書の投影が停止された非投影状態における前記スクリーンを撮影させてスクリーン画像を取得させる処理と、前記撮影手段により取得されたスクリーン画像と前記投影手段による投影が停止された文書とを対応付けて着脱可能な記憶手段に記憶させるための処理とを実行させるためのプログラムとした。
【手続補正３０】
【補正対象書類名】明細書
【補正対象項目名】００４１
【補正方法】削除
【補正の内容】
【手続補正３１】
【補正対象書類名】明細書
【補正対象項目名】００４２
【補正方法】削除
【補正の内容】
【手続補正３２】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】削除
【補正の内容】
【手続補正３３】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】削除
【補正の内容】
【手続補正３４】
【補正対象書類名】明細書
【補正対象項目名】００４５
【補正方法】削除
【補正の内容】
【手続補正３５】
【補正対象書類名】明細書
【補正対象項目名】００４６
【補正方法】削除
【補正の内容】
【手続補正３６】
【補正対象書類名】明細書
【補正対象項目名】００４７
【補正方法】削除
【補正の内容】
【手続補正３７】
【補正対象書類名】明細書
【補正対象項目名】００４８
【補正方法】変更
【補正の内容】
【００４８】
以上説明したように請求項１及び請求項２の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを直ちに知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を向上させることが可能となる。しかも、記憶手段に記憶させる画像は非投影状態のスクリーンを撮影したものだけでよいことから、記憶手段のより有効な利用が可能となる。
【手続補正３８】
【補正対象書類名】明細書
【補正対象項目名】００４９
【補正方法】変更
【補正の内容】
【００４９】
また、請求項３及び請求項４の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを文書の投影期間とスクリーン画像の取得時刻等の管理情報を介して直ちに知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を向上させることが可能となる。
【手続補正３９】
【補正対象書類名】明細書
【補正対象項目名】００５０
【補正方法】変更
【補正の内容】
【００５０】
また、請求項５の発明においては、手書き情報と文書との対応関係をより正確に知ることが可能となる。
【手続補正４０】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
また、請求項６の発明においては、スクリーン上に記述された手書き情報を後で利用する際には、その手書き情報がどの文書の投影時に記述されていたのかを、スクリーン画像に付加されている文書情報から直ちに知ることができるようにした。よって、投影時に保存したスクリーン上の手書き情報を後で利用する際の使い勝手を一層向上させることが可能となる。
【手続補正４１】
【補正対象書類名】明細書
【補正対象項目名】００５２
【補正方法】変更
【補正の内容】
【００５２】
また、請求項７の発明においては、そのプログラムを用いることにより、文書情報に基づく文書をスクリーンに投影する投影手段を備えた投影装置において請求項１及び請求項２の発明を実施することが可能となる。
【手続補正４２】
【補正対象書類名】明細書
【補正対象項目名】００５３
【補正方法】削除
【補正の内容】