(57)【要約】【課題】資料提示装置に関する技術を提供する。【解決手段】資料提示装置とタブレット端末とからなる資料提示システムであって、資料提示装置は、撮像画像を含む第１の情報を、タブレット端末に無線を介して送信し、ユーザがタブレット端末を用いて行う描画操作に関する情報を含む第２の情報を、タブレット端末から無線を介して受信し、第２の情報に基づいて、撮像画像に描画操作に対応する描画画像を重ねた画像を表示画像として表示装置に表示させる。タブレット端末は、ユーザが描画操作を行う操作面を備える操作部と、描画操作に基づいて、第２の情報を資料提示装置に無線を介して送信し、第１の情報を資料提示装置から無線を介して受信し、第１の情報に基づいて、撮像画像に描画画像を重ねた画像を操作面に表示する。【選択図】図１
2012138666.tif 000002
【特許請求の範囲】
【請求項１】
カメラを備える資料提示装置と画像を表示するタブレット端末とからなる資料提示システムであって、
前記資料提示装置は、
前記カメラによって所定領域を撮像した撮像画像を取得する撮像部と、
前記撮像画像を含む第１の情報を、前記タブレット端末に無線を介して送信する第１情報送信部と、
ユーザが前記タブレット端末を用いて行う描画操作に関する情報を含む第２の情報を、前記タブレット端末から無線を介して受信する第２情報受信部と、
前記第２の情報に基づいて、前記撮像画像に前記描画操作に対応する描画画像を重ねた画像を表示画像として表示装置に表示させる表示出力部と
を単一の筐体内に備え、
前記タブレット端末は、
前記ユーザが前記描画操作を行う操作面を備える操作部と、
前記描画操作に基づいて、前記第２の情報を、前記資料提示装置に無線を介して送信する第２情報送信部と、
前記第１の情報を、前記資料提示装置から無線を介して受信する第１情報受信部と、
前記第１の情報に基づいて、前記撮像画像に前記描画画像を重ねた画像であるタブレット表示画像を前記操作面に表示する画像表示手段と
を備える
資料提示システム。
【請求項２】
請求項１記載の資料提示システムであって、
前記第２情報送信部は、前記描画画像を前記第２の情報として前記資料提示装置に送信し、
前記画像表示手段は、前記撮像画像に前記描画画像を重ねた画像を前記タブレット表示画像として生成するタブレット表示画像生成部を備え
前記資料提示装置は、更に、前記第２情報受信部が受信した前記描画画像を記憶する受信描画画像記憶部を備え、
前記表示出力部は、前記撮像画像に前記描画画像を重ねた画像を前記表示画像として生成する表示画像生成部を備える
資料提示システム。
【請求項３】
請求項２記載の資料提示システムであって、
前記描画画像生成部は、
前記操作面を所定の領域毎にブロックとして区分し、前記描画画像を各ブロック毎の画像であるブロック画像の集合として記憶するブロック画像記憶部と、
前記ユーザの描画操作によって画像が変更されたブロックである変更ブロックについての前記ブロック画像記憶部に記憶されているブロック画像を、前記変更後のブロック画像に更新するタブレット側ブロック更新部と
を備え、
前記第２情報送信部は、前記変更ブロックに対応するブロック画像を前記第２の情報として前記資料提示装置に送信し、
前記受信描画画像記憶部は、前記描画画像を前記ブロック画像の集合として記憶し、
前記資料提示装置は、更に、前記第２の情報としてのブロック画像を受信した場合に、前記受信したブロック画像について、前記受信描画画像記憶部に記憶している描画を更新する資料提示装置側ブロック更新部を備える
資料提示システム。
【請求項４】
請求項３記載の資料提示システムであって、
前記第１情報送信部は前記タブレット端末が前記第１の情報の取得を要求した場合に前記第１の情報を送信し、
前記第２情報送信部は、前記ユーザの操作によって前記画像が変更された場合には随時、前記変更ブロックに対応するブロック画像を前記第２の情報として前記資料提示装置に送信する
資料提示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、資料提示装置とタブレット端末とを備える資料提示システムに関するものである。
【背景技術】
【０００２】
近年、資料提示装置を活用したプレゼンテーションが広く行われている。資料提示装置に関する技術としては、例えば下記特許文献１が知られている。
【０００３】
しかし、資料提示装置の操作にポインティングデバイスを用いる場合、特にタブレット端末を用いて表示画像への描画操作を行う場合や表示画像上の位置を指定する場合に、ユーザは表示装置（例えばテレビやプロジェクタ）が表示する表示画像を見ながら手元のタブレット端末で描画操作等を行う必要があったため、所望の描画操作や表示画像上の位置の指定が困難な場合があり、タブレット端末の操作性の向上が課題となっていた。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２４５６９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、上述した従来の課題を解決するためになされたものであり、資料提示装置においてタブレット端末を使用する際の操作性を向上することができる技術を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、上述の課題の少なくとも一部を解決するために、以下の形態または適用例を取ることが可能である。
【０００７】
［適用例１］
カメラを備える資料提示装置と画像を表示するタブレット端末とからなる資料提示システムであって、前記資料提示装置は、前記カメラによって所定領域を撮像した撮像画像を取得する撮像部と、前記撮像画像を含む第１の情報を、前記タブレット端末に無線を介して送信する第１情報送信部と、ユーザが前記タブレット端末を用いて行う描画操作に関する情報を含む第２の情報を、前記タブレット端末から無線を介して受信する第２情報受信部と、前記第２の情報に基づいて、前記撮像画像に前記描画操作に対応する描画画像を重ねた画像を表示画像として表示装置に表示させる表示出力部とを単一の筐体内に備え、前記タブレット端末は、前記ユーザが前記描画操作を行う操作面を備える操作部と、前記描画操作に基づいて、前記第２の情報を、前記資料提示装置に無線を介して送信する第２情報送信部と、前記第１の情報を、前記資料提示装置から無線を介して受信する第１情報受信部と、前記第１の情報に基づいて、前記撮像画像に前記描画画像を重ねた画像であるタブレット表示画像を前記操作面に表示する画像表示手段とを備える資料提示システム。
【０００８】
この資料提示システムによると、撮像画像に描画画像を重ねたタブレット表示画像をタブレット端末の操作面に表示させるので、ユーザは手元のタブレット画像を見ながら描画操作を行うことができ、ユーザがタブレット端末を用いて資料提示装置を操作する際の操作性が向上する。
【０００９】
［適用例２］
適用例１記載の資料提示システムであって、前記第２情報送信部は、前記描画画像を前記第２の情報として前記資料提示装置に送信し、前記画像表示手段は、前記撮像画像に前記描画画像を重ねた画像を前記タブレット表示画像として生成するタブレット表示画像生成部を備え、前記資料提示装置は、更に、前記第２情報受信部が受信した前記描画画像を記憶する受信描画画像記憶部を備え、前記表示出力部は、前記撮像画像に前記描画画像を重ねた画像を前記表示画像として生成する表示画像生成部を備える資料提示システム。
【００１０】
この資料提示システムによると、撮像画像に描画画像を重ねた画像を生成する処理を、資料提示装置とタブレット端末の各々が行うので、撮像画像に描画画像を重ねた画像を第１の情報および第２の情報として無線を介して送受信する必要がなく、転送するデータの容量を減少させることができる。
【００１１】
［適用例３］
適用例２記載の資料提示システムであって、前記描画画像生成部は、前記操作面を所定の領域毎にブロックとして区分し、前記描画画像を各ブロック毎の画像であるブロック画像の集合として記憶するブロック画像記憶部と、前記ユーザの描画操作によって画像が変更されたブロックである変更ブロックについての前記ブロック画像記憶部に記憶されているブロック画像を、前記変更後のブロック画像に更新するタブレット側ブロック更新部とを備え、前記第２情報送信部は、前記変更ブロックに対応するブロック画像を前記第２の情報として前記資料提示装置に送信し、前記受信描画画像記憶部は、前記描画画像を前記ブロック画像の集合として記憶し、前記資料提示装置は、更に、前記第２の情報としてのブロック画像を受信した場合に、前記受信したブロック画像について、前記受信描画画像記憶部に記憶している描画を更新する資料提示装置側ブロック更新部を備える資料提示システム。
【００１２】
この資料提示システムによると、タブレット端末から資料提示装置に送信する第２の情報として、描画操作によって画像が変更されたブロック画像を送信する。従って、描画画像全体を第２の情報として送信する場合と比較して、送受信するデータ容量を小さくすることができる。
【００１３】
［適用例４］
適用例３記載の資料提示システムであって、前記第１情報送信部は前記タブレット端末が前記第１の情報の取得を要求した場合に前記第１の情報を送信し、前記第２情報送信部は、前記ユーザの操作によって前記画像が変更された場合には随時、前記変更ブロックに対応するブロック画像を前記第２の情報として前記資料提示装置に送信する資料提示システム。
【００１４】
この資料提示システムによると、撮像画像を含む第１の情報の送受信を、タブレット端末が要求した場合に行い、第２の情報として変更ブロックに対応するブロック画像の送受信は随時行う。資料提示装置が撮像する被写体が動的に変化するものではない場合には、タブレット端末側が要求した場合に送受信を行うとしてもユーザの操作性に支障を来すことはなく、かつ、データの送受信の回数を減少させることができる。一方、この資料提示システムは、第２の情報としての変更ブロックに対応する画像ブロックについては、随時送受信を行うので、ユーザが行った描画操作に追従した表示画像を、表示装置およびタブレット端末に表示させることが可能である。
【００１５】
なお、本発明は、種々の態様で実現することが可能である。例えば、資料提示方法および装置、プレゼンテーションシステム、それらの方法または装置の機能を実現するための集積回路、コンピュータプログラム、そのコンピュータプログラムを記録した記録媒体等の形態で実現することができる。
【図面の簡単な説明】
【００１６】
【図１】資料提示システム１０の構成を説明する説明図である。
【図２】資料提示装置２０の内部構成を説明するブロック図である。
【図３】タブレット３０の内部構成を説明するブロック図である。
【図４】描画画像表示処理のフローチャートである。
【図５】描画画像表示処理を説明する説明図である。
【図６】描画画像表示処理を説明する説明図である。
【図７】変形例１の描画画像表示処理のフローチャートである。
【図８】変形例２のカーソル表示処理のフローチャートである。
【図９】変形例４を説明する説明図である。
【発明を実施するための形態】
【００１７】
次に、本発明の実施の形態を実施例に基づいて説明する。
Ａ．第１実施例：
（Ａ１）資料提示システムの構成：
図１は、本発明の実施例としての資料提示システム１０の構成を説明する説明図である。資料提示システム１０は、資料提示装置２０、タブレット３０、テレビ４０、を備える。資料提示装置２０とテレビ４０とはデータ転送用のケーブルで互いに接続されている。資料提示装置２０とタブレット３０とは無線ＵＳＢによって無線を介して接続されている。資料提示システム１０は、資料提示装置２０の撮像領域ＲＡに載置された資料ＲＳを資料提示装置２０によって撮像し、撮像画像をテレビ４０がスクリーンに表示画像ＩＡとして表示する。表示された表示資料ＩＳが資料ＲＳに対応する。
【００１８】
資料提示装置２０は、机などに設置される本体２２と、本体２２に設けられた操作部２３と、本体２２から上側に伸びた支柱２４と、支柱２４の先端に取り付けられたカメラヘッド２６と、ズーム用ダイヤル２７とを備える。カメラヘッド２６にはＣＣＤを用いたビデオカメラが内蔵されており、机などに載置された資料ＲＳを単位時間当たりに所定のフレーム数で撮像する。本実施例では、資料提示装置２０は資料ＲＳを６０フレーム／秒で撮像する。また、本体２２に備えられているＵＳＢインターフェース２７６には、タブレット３０と所定のデータのやり取りを行う無線ＵＳＢの送受信部２９が接続されている。また、送受信部２９を資料提示装置２０の筐体内に内蔵している構成としてもよい。
【００１９】
タブレット３０は、ユーザが当該タブレット３０が備えるタッチパネルに対して行った操作に関する情報である操作情報を、無線ＵＳＢによって資料提示装置２０に送信する。また、タブレット３０は、資料提示装置２０から無線ＵＳＢによって送信された所定の画像を、タブレット３０が備えるタッチパネルに表示することができる。本実施例では、資料提示装置２０とタブレット３０とは無線ＵＳＢによって情報のやりとりをするとしているが、ブルートゥースや赤外線、無線ＬＡＮなどの他の無線技術を利用して情報をやり取りするとしてもよい。
【００２０】
図２は、資料提示装置２０の内部構成を説明するブロック図である。資料提示装置２０は、撮像部２１０、画像処理ユニット２２０、ＣＰＵ２３０、ＲＡＭ２４０、ハードディスク（ＨＤＤ）２５０、ＲＯＭ２６０を備える。また、資料提示装置２０は、デジタルデータ出力インターフェース（デジタルデータ出力ＩＦ）２７２、アナログデータ出力インターフェース（アナログデータ出力ＩＦ）２７４、ＵＳＢインターフェース（ＵＳＢＩＦ）２７６、操作部２３を備える。ＵＳＢＩＦ２７６には、所定のデータの送受信をタブレット３０との間で行うための送受信部２９、即ち無線ＵＳＢの送受信部が接続されている。
【００２１】
撮像部２１０にはレンズユニット２１２と電荷結合素子（ＣＣＤ）２１４とが備えられている。ＣＣＤ２１４は、レンズユニット２１２を透過した光を受光して電気信号に変換するイメージセンサである。画像処理ユニット２２０は、ＡＧＣ（Automatic Gain Control）回路やＤＳＰ（Digital Signal Processor）から構成され、ＣＣＤ２１４から出力される電気信号を入力し撮像画像データを生成する。画像処理ユニット２２０が生成した撮像画像は、ＲＡＭ２４０が備える撮像画像バッファ２４１に記憶される。
【００２２】
ＣＰＵ２３０は、資料提示装置２０全体の動作を制御するとともに、ＨＤＤ２５０およびＲＯＭ２６０に記憶されているプログラムを読み込んで実行することにより、タブレットドライバ２３２、および表示出力部２３３として動作する。さらに、タブレットドライバ２３２は、撮像画像伝送処理部２３４、ブロック更新部２３５、画像合成部２３６を備える。これら処理部については後で詳しく説明する。
【００２３】
ＲＡＭ２４０は、撮像画像バッファ２４１、受信ブロックバッファ２４２、描画画像バッファ２４３、合成画像バッファ２４４を備える。これらのバッファは、後述する描画画像表示処理の処理過程で記憶する必要があるデータをそれぞれ記憶するバッファである。詳細については後で詳しく説明する。
【００２４】
デジタルデータ出力ＩＦ２７２は、撮像画像データまたは合成画像データを符号化し、デジタル信号として外部に出力する。アナログデータ出力ＩＦ２７４は、撮像画像データまたは合成画像データをデジタル／アナログ変換し、ＲＧＢデータとして外部に出力する。アナログデータ出力ＩＦ２７４にはＤ／Ａコンバータ（ＤＡＣ）が含まれる。デジタルデータ出力ＩＦ２７２およびアナログデータ出力ＩＦ２７４にはケーブル接続用のコネクタが備えられている。本実施例では、アナログデータ出力ＩＦ２７４にテレビ４０が接続されている。
【００２５】
次にタブレット３０について説明する。タブレット３０は、ユーザが表示画像ＩＡ（図１参照）の位置を指定するモードであるカーソルモードと、描画を行うことができる描画モードとを備える。カーソルモードは、ユーザがタブレット３０を用いて指定した表示画像ＩＡ上の位置にカーソルを表示するモードである。描画モードは、ユーザがタブレット３０を用いて表示画像ＩＡ上に描画をすることを可能にするモードである。また、タブレット３０のタッチパネル上には、資料提示装置２０が撮像した撮像画像が表示される。以下、タッチパネル上に表示される画像をパネル画像ＰＡとも呼ぶ。ユーザは、パネル画像ＰＡを見ながら、表示画像ＩＡ上の位置の指定や描画などの操作を行う。ユーザがタブレット３０で行った操作に対する処理結果、例えば描画操作に対応する描画画像は、リアルタイムに撮像画像に重ねてパネル画像ＰＡとして表示される。
【００２６】
図３は、タブレット３０の内部構成を説明するブロック図である。タブレット３０は、タッチパネル３１０、ＣＰＵ３３０、ＲＡＭ３４０、ＲＯＭ３５０、送受信部３６０を備える。タッチパネル３１０は、投影型静電容量方式のタッチパネルであり、タッチパネル３１０が有する導電膜とタブレット用ペンＰｎあるいは指先との間の静電容量の変化を捉えて位置を検出する位置検出部３１２と、画像を表示する画像表示部３１４とからなる。画像表示部３１４は、液晶ディスプレイからなり、資料提示装置２０が撮像した撮像画像を表示するとともに、ユーザが位置検出部３１２に対して行った操作に対する処理結果（例えば、カーソルや描画画像）をリアルタイムに撮像画像に重ねて表示する。
【００２７】
ＣＰＵ３３０は、描画処理部３３１、ブロック判定部３３２、ブロック更新部３３３、画像合成部３３４を備える。これら処理部については後で詳しく説明する。ＲＡＭ３４０は、撮像画像バッファ３４１、描画データバッファ３４２、描画画像バッファ３４３、合成画像バッファ３４４を備える。撮像画像バッファ３４１は、後述する描画画像表示処理において資料提示装置２０から受信した撮像画像を記憶する。描画データバッファ３４２は、ユーザが描画操作を行った際に、描画操作によって描かれた線画をベクターデータとして記憶する。描画画像バッファ３４３は、描画操作によって描かれた線画を、タッチパネル３１０を所定の領域ごとに区分し、各領域毎にラスターデータ（本実施例ではビットマップ）として記憶する。合成画像バッファ３４４は、資料提示装置２０が撮像した撮像画像と、ユーザが描画操作によって描画した描画画像とを重畳した合成画像データを記憶する。送受信部３６０は、資料提示装置２０の送受信部２９との間で、後述する所定のデータの送受信を行う。
【００２８】
（Ａ２）描画画像表示処理：
次に資料提示システム１０が行う描画処理について説明する。描画画像表示処理は、資料提示装置２０が撮像した撮像画像と、ユーザがタブレット３０を用いて描画した描画画像とを、タッチパネル３１０に表示する処理である。図４は、描画画像表示処理の流れについて説明したフローチャートである。描画画像表示処理は資料提示装置２０およびタブレット３０の電源をオンにすることによって開始される。
【００２９】
描画画像表示処理を開始すると、資料提示装置２０のＣＰＵ２３０は、撮像部２１０によって撮像領域ＲＡに載置された資料ＲＳを撮像し、撮像部２１０および画像処理ユニット２２０によって撮像画像を生成し、撮像画像バッファ２４１に記憶する（ステップＳ１１０）。その後、ＣＰＵ２３０は、タブレット３０から撮像画像の取得要求を受信したか否かを判断し（ステップＳ１１２）、タブレット３０から撮像画像の取得要求を受信した場合には（Ｓ１１２：ＹＥＳ、ステップＳ２１２）、資料提示装置２０のＣＰＵ２３０は撮像画像を送信し（ステップＳ１１４）、タブレット３０のＣＰＵ３３０は送信された撮像画像を受信して撮像画像バッファ３４１に記憶する（ステップＳ２１４）。その後、タブレット３０のＣＰＵ３３０は、ユーザがタブレット３０によって描画操作を行ったか否か判断する（ステップＳ２１６）。資料提示システム１０では、タブレット３０の画像表示部３１４に表示された画像をユーザが見ながら描画操作を行う。従って、描画画像表示処理の開始直後でユーザが描画操作をしていない場合（ステップＳ２１６：ＮＯ）、ＣＰＵ３３０は撮像画像と描画画像との画像合成処理を開始するが（ステップＳ２２６）、合成する描画画像が存在しないため、実質的には撮像画像を合成画像として画像表示部３１４に表示する（ステップＳ２２８）。タブレット３０側における描画画像表示処理は電源がＯＦＦになるまで繰り返されるが（ステップＳ２３０：ＮＯ）、２サイクル目以降の描画画像表示処理においては、タブレット３０の画像表示部３１４には撮像画像が表示されているため、ユーザは表示された撮像画像を見ながら描画操作を行うことになる。よって、タブレット３０側における２サイクル目以降の描画画像表示処理のステップ２１６において、ユーザが位置検出部３１２に対して描画操作を行った場合（ステップＳ２１６：ＹＥＳ）、ＣＰＵ３３０が描画処理部３３１の機能として、描画操作によって描かれた線画をベクターデータとして描画データバッファ３４２に記憶する（ステップＳ２１８）。
【００３０】
タブレット３０は描画画像のベクターデータを記憶後、以下に説明する変更ブロック判定処理（ステップＳ２２０）、変更ブロック更新処理（ステップＳ２２２）、変更ブロック送信処理（ステップＳ２２４）を行う。また資料提示装置２０のＣＰＵ２３０は、タブレット３０による変更ブロック送信処理によって送信された変更ブロックを受信し（ステップＳ１１６）、ブロック更新処理（ステップＳ１１８）を行う。以下、これら一連の処理について説明する。
【００３１】
図５はタブレット３０における変更ブロック判定処理（ステップＳ２２０）〜変更ブロック送信処理（ステップＳ２２４）および資料提示装置２０における変更ブロック受信（ステップＳ１１６）、ブロック更新処理（ステップＳ１１８）について説明する説明図である。具体例として、ユーザがタブレット３０を用いた描画操作としてタブレット用ペンＰｎを用いて矢印（描画画像Ｊとする）を描こうとした場合について説明する。
【００３２】
ユーザがタブレット３０の位置検出部３１２に描画操作として描画画像Ｊを描画した場合、上述したようにタブレット３０のＣＰＵ３３０は、描画画像Ｊを短い直線を示すベクトルデータの集合（以下、ベクターデータとも呼ぶ）として、描画データバッファ３４２に記憶する。もとより、直線ではなく、ベジュエ曲線などの集合として表し、これを記憶するものとしてもよい。図５（Ａ）は、描画データバッファ３４２に記憶されたベクターデータを、タッチパネル３１０の領域（以下、パネル領域ＰＦとも呼ぶ）と対応させて模式的に示している。
【００３３】
次にＣＰＵ３３０は、描画データバッファ３４２に記憶したベクターデータをラスターデータに変換して、描画画像バッファ３４３に記憶する。その際、ＣＰＵ３３０は描画処理部３３１の機能として、パネル領域ＰＦにおける所定の領域（後述する変更ブロック）のみ、ラスターデータに変換して記憶する。図５（Ｂ）はタブレット３０が備える描画画像バッファ３４３を示している。描画画像バッファ３４３は、パネル領域ＰＦをｍ×ｎ個の領域（以下、ブロックとも呼ぶ）に分割しており、これをＢ１１，Ｂ１２・・・Ｂ１ｎ、Ｂ２１，Ｂ２２・・・Ｂ２ｎ、・・・・Ｂｍｎとして扱う。このうち、左上の２×３個のブロックＢ１１，Ｂ１２，Ｂ１３，Ｂ２１，Ｂ２２，Ｂ２３を示したのが図５（Ａ）である。描画画像バッファ３４３は、描画画像Ｊを各領域毎のラスターデータとして記憶する。
【００３４】
ＣＰＵ３３０は、描画画像Ｊをベクターデータとして記憶した後、描画画像ＪがブロックＢ１１〜Ｂ２３のいずれのブロックに描かれている画像であるかを判定する（図４：ステップＳ２２０）。換言すれば、繰り返し行われる描画画像表示処理において、１つ前の描画画像表示処理における変更ブロック判定処理（図４：ステップＳ２２０）の時点から、現処理時点までに描画画像として変更のあったブロック（以下、変更ブロックとも呼ぶ）を検出する。本具体例の場合、描画画像ＪはブロックＢ１１とブロックＢ２１に描かれているので、ＣＰＵ３３０は、ブロックＢ１１とブロックＢ２１とを変更ブロックと判定する。
【００３５】
図５（Ｂ）に示すように、ＣＰＵ３３０は、変更ブロックであるＢ１１とＢ２１のベクターデータをラスターデータにデータ変換し、描画画像バッファ３４３に当初記憶していたブロックＢ１１，Ｂ２１のラスターデータと置き換える。すなわち、描画操作によって変更のあったブロックのみ、描画画像バッファ３４３に記憶していたラスターデータの更新を行う（ステップＳ２２２）。
【００３６】
ＣＰＵ３３０は、ラスターデータの更新を行とともに、変更ブロックのラスターデータを符号化して資料提示装置２０に送信する（ステップＳ２２４）。また、ユーザが描画操作を行ったものの、変更ブロックが無い場合（例えば、タッチパネル上でタブレット用ペンＰｎを静止させている場合等）は、変更ブロックに替えて空のパケットを送信する。図５（Ｃ）は資料提示装置２０が備える描画画像バッファ２４３を示している。描画画像バッファ２４３は、図５（Ｂ）で説明した３４３と同様に、描画画像をブロック単位のタスターデータとして記憶している。以下、資料提示装置２０の描画画像バッファ２４３におけるブロックをブロックＣ１１〜Ｃ２３で表記する。
【００３７】
資料提示装置２０は、送受信部２９を介して符号化された変更ブロックを受信すると、符号化された変更ブロックを複合化し、受信ブロックバッファ２４２に一時的に記憶した後（ステップＳ１１６：ＹＥＳ）、変更ブロックとしてのＣ１１，Ｃ２１のラスターデータを、描画画像バッファ２４３に以前に記憶したブロックＣ１１，Ｃ２１と置き換えるブロック更新処理を行う（ステップＳ１１８）。このようにして、資料提示システム１０は、変更ブロック判定処理（ステップＳ２２０）〜変更ブロック送信処理（ステップＳ２２４）および変更ブロック受信（ステップＳ１１６）、ブロック更新処理（ステップＳ１１８）を行う。
【００３８】
その後、資料提示装置２０のＣＰＵ２３０は、ブロック更新処理後、撮像画像バッファ２４１に記憶している撮像画像に、描画画像バッファ２４３に記憶されているブロックＣ１１〜Ｃ２３のラスターデータを重ねるように画像合成を行い（ステップＳ１２０）、合成した合成画像を表示出力部２３３の機能としてアナログデータ出力ＩＦ２７４を介してテレビ４０に出力する（ステップＳ１２２）。ＣＰＵ２３０はステップＳ１１０〜ステップＳ１２２の処理を電源がオフになるまで繰り返す（ステップＳ１２４）。
【００３９】
一方、タブレット３０のＣＰＵ３３０は、描画画像バッファ３４３の変更ブロックを更新し（ステップＳ２２２）、変更ブロックを資料提示装置２０に送信後（ステップＳ２２４）、撮像画像バッファ３４１に記憶している撮像画像に、描画画像バッファ３４３に記憶されているブロックＢ１１〜Ｂ２３のラスターデータを重ねるように画像合成を行い（ステップＳ２２６）、合成した合成画像を画像表示部３１４に表示する（ステップＳ２２８）。ＣＰＵ３３０はステップＳ２１２〜ステップＳ２３０の処理を電源がオフになるまで繰り返す（ステップＳ２３０）。
【００４０】
また、図６に示したように、例えば、ユーザが描画画像Ｊを描いた後に、描画画像Ｋとして曲線を描いた場合は、描画画像Ｊを描いた場合と同様に、変更されたブロックのみ描画画像バッファ３４３および描画画像バッファ２４３を更新し、更新後にそれぞれ撮像画像との合成を行う。
【００４１】
以上説明したように、資料提示システム１０は、描画画像表示処理によって、タブレット３０のタッチパネル３１０に、撮像画像および描画画像を表示するので、ユーザは手元の画像を見ながら描画操作を行うことができる。よって、表示装置（本実施例ではテレビ４０）の表示画像を見ながら手元のタブレット３０を操作する場合と比較して、描画操作を正確に行うことができ、タブレット３０の操作性が向上する。
【００４２】
描画画像表示処理において、タブレット３０は、描画操作によって変更ブロックのラスターデータのみ資料提示装置２０に送信するので、常にパネル領域ＰＦ全体のラスターデータを資料提示装置２０に送信する場合と比較して、送信するデータ容量を減少させることができ、処理速度を向上させることができる。また、本実施例では、タブレット３０は、変更ブロックの判定（ステップＳ２２０）、変更ブロックの更新（ステップＳ２２２）、変更ブロックの送信（ステップＳ２２４）を、描画画像表示処理の１サイクル毎に、即ち所定のインターバルで行っているので、タブレット３０の画像表示部３１４は、リアルタイムに、変更した描画画像を反映した合成画像を表示することができる。画像の合成についてもタブレット３０内で行っているので、描画操作に追随して描画画像を画像表示部３１４に反映させることが可能である。よって、タッチパネル３１０を見ながら描画操作を行っているユーザがとまどうことがない。また、一回に送信する変更ブロックの数を少なくすることができるため、１回に転送するデータ量を少なくすることができる。
【００４３】
さらに、資料提示装置２０は、タブレットドライバ２３２を備えることにより、タブレット３０から直接的に変更ブロックのラスターデータを受信して処理を行うので、別個に、処理用のコンピュータを必要としない。従って、ユーザは、資料提示システム１０の設置、配線の接続、運搬等を容易に行うことができる。
【００４４】
加えて、資料提示システム１０は、無線を利用したタブレット３０を用いて、描画操作およびカーソルの移動が可能である。従って、タブレット３０と資料提示装置２０を接続するケーブルを取り回す手間が不要となり、断線故障も生じない。
【００４５】
特許請求の範囲との対応としては、描画画像表示処理において資料提示装置２０がタブレット３０に送信する撮像画像が特許請求の範囲に記載の第１の情報に対応し、タブレット３０が資料提示装置２０に送信する変更ブロックが特許請求の範囲に記載の第２の情報に対応する。また、画像合成部２３６および表示出力部２３３の機能が特許請求の範囲に記載の表示出力部に対応し、タッチパネル３１０が特許請求の範囲に記載の操作面に対応し、画像表示部３１４が特許請求の範囲に記載の画像表示手段に対応する。
【００４６】
Ｂ．変形例：
（Ｂ１）変形例１：
上記実施例では、描画画像表示処理として、資料提示装置２０はタブレット３０に対して撮像画像を送信し、タブレット３０は資料提示装置２０に対して変更ブロックを送信し、資料提示装置２０およびタブレット３０の両方において画像合成処理を行う態様であったが、タブレット３０のタッチパネル３１０に、撮像画像または撮像画像に描画画像を重ねた画像を表示させる処理としては、他の態様を採用することも可能である。図７は、変形例１としての描画画像表示処理の流れを示したフローチャートである。
【００４７】
資料提示装置２０は撮像画像を取得した後（ステップＳ１４０）、一定期間毎に送信されてくるタブレット３０からの描画画像を取得する（ステップＳ１４２：ＹＥＳ）。ここで送信される描画画像は、描画画像全体のベクターデータまたはラスターデータのいずれの態様でもよいが、本変形例ではラスターデータを採用する。資料提示装置２０のＣＰＵ２３０は、ラスターデータとしての描画画像を受信すると、描画画像バッファ２４３に記憶する（ステップＳ１４４）。描画画像表示処理は電源がオフになるまで繰り返し行われるが、２回目以降の処理において、資料提示装置２０がタブレット３０から描画画像を受信した場合は、ＣＰＵ２３０は描画画像バッファ２４３に記憶している描画画像を更新する。
【００４８】
ＣＰＵ２３０は、描画画像を受信後、描画画像バッファ２４３から描画画像を読み出して、撮像画像に描画画像を重ねるように合成し合成画像を生成する（ステップＳ１４６）。仮に、資料提示装置２０がタブレット３０から描画画像を受信しておらず描画画像バッファ２４３に描画画像が記憶されていない場合には（ステップＳ１４２：ＮＯ）、ＣＰＵ２３０は、撮像画像を合成画像として取り扱う。
【００４９】
その後、ＣＰＵ２３０は生成した合成画像をタブレット３０に送信する（ステップＳ１４８）。合成画像の送信後、ＣＰＵ２３０は合成画像をアナログデータ出力ＩＦ２７４を介してテレビ４０に合成画像を出力する（ステップＳ１５０）。ＣＰＵ２３０は、この処理を電源がオフになるまで繰り返し行う（ステップＳ１５０）。
【００５０】
一方、タブレット３０は、ユーザが描画操作を行った場合には（ステップＳ２４０：ＹＥＳ）、描画画像をラスターデータに変換し描画画像バッファ３４３に記憶する描画画像処理を行う（ステップＳ２４２）。その後、ラスターデータとしての描画画像を資料提示装置２０に送信する（ステップＳ２４４）。そして、ＣＰＵ３３０は、資料提示装置２０において撮像画像と描画画像とから合成された合成画像を、資料提示装置２０から受信し（ステップＳ２４６）、受信した合成画像を画像表示部３１４に表示する（ステップＳ２４８）。上記処理をＣＰＵ３３０は、電源がオフになるまで繰り返し行う（ステップＳ２５０）。また、ステップＳ２４０において、ユーザが描画操作を行っていない場合には（ステップＳ２４０：ＮＯ）、線画等が存在しない空白のフレーム画像を描画画像として資料提示装置２０に送信する（ステップＳ２４４）。
【００５１】
描画画像表示処理を図７で説明した態様の処理としても、タブレット３０のタッチパネル３１０に撮像画像、または撮像画像に描画画像を重ねた合成画像を表示することができる。
【００５２】
（Ｂ２）変形例２：
上記実施例では、ユーザの描画操作について説明をしたが、ユーザがタブレット３０を用いてカーソルを移動させるカーソル操作を行った場合にも、資料提示装置２０がテレビ４０に表示させる表示画像および、タブレット３０の画像表示部３１４に、カーソルを撮像画像とともに表示する処理を実現することができる。以下、その一例を説明する。図８は、資料提示システム１０が行うカーソル表示処理の流れを示すフローチャートである。カーソル表示処理においては、タブレット３０は、第１実施例と同様に資料提示装置２０に対して撮像画像の取得要求をし（ステップＳ２６０）、撮像画像を取得する（ステップＳ２６２）。その後、ユーザがカーソル操作としてカーソルの移動を行った場合には（ステップＳ２６４：ＹＥＳ）、ユーザがタッチパネル３１０において指定したカーソル位置の座標を、所定の期間毎（本変形例では６０Ｈｚ）に位置検出部３１２が検出し、ＣＰＵ３３０が座標情報として取得しＲＡＭ３４０に記憶する（ステップＳ２６６）。ＣＰＵ３３０は、座標情報を取得すると、ＲＡＭ３４０に記憶する座標情報を更新し（ステップＳ２６８）、ＲＡＭ３４０に記憶した座標情報を資料提示装置２０に座標情報を送信し（ステップＳ２７０）。座標情報を送信後、ＣＰＵ３３０は、座標情報に基づいて、カーソル画像を撮像画像の座標情報に対応する座標位置に重ねるように合成する（ステップＳ２７２）。画像合成処理後、ＣＰＵ３３０は、画像表示部３１４に合成画像を表示する（ステップＳ２７４）。
【００５３】
一方、資料提示装置２０のＣＰＵ２３０は、撮像画像の取得（ステップＳ１６０）、撮像画像の取得要求の受信（ステップＳ１６２：ＹＥＳ）、撮像画像の送信（ステップＳ１６４）を行った後、タブレット３０から座標情報を受信し（ステップＳ１６６）、ＲＡＭ２４０に記憶、更新する（ステップＳ１６８）。その後、カーソル画像を撮像画像の座標情報に対応する座標位置に重ねるように合成する（ステップＳ１７０）。画像合成処理後、ＣＰＵ２３０は、アナログデータ出力ＩＦ２７４を介してテレビ４０に合成画像を表示する（ステップＳ１７２）。
【００５４】
資料提示システム１０は上記処理を行うことにより、ユーザがタブレット３０を用いてカーソル操作を行った場合にも、そのカーソルおよび撮像画像をタッチパネル３１０に表示させることができ、ユーザがタブレット３０を用いる際の操作性が向上する。
【００５５】
（Ｂ３）変形例３：
第１実施例では、描画画像表示処理（図４）において、タブレット３０は、変更ブロックの判定（ステップＳ２２０）、変更ブロックの更新（ステップＳ２２２）、変更ブロックの送信（ステップＳ２２４）を、描画画像表示処理の１サイクル毎に、即ち所定のインターバルで行うとしたが、ユーザの描画操作によって描画が次のブロックに跨ったタイミングで、先に描画された変更ブロックを送信するとしてもよい。この場合、各ブロックの大きさをより小さく、即ち、パネル画像ＰＡを、より多くのブロックに分割することで（ブロックの細分化）、タブレット３０の画像表示部３１４は、変更した描画画像を反映した合成画像を、リアルタイムに近いタイミングで表示することができる。また、各ブロックの大きさを上記実施例と比較して小さくすることで、一回に送信するするデータ量を少なくすることができる。
【００５６】
さらに、第一実施例と比較してブロックの細分化を行なった上で、変更ブロックの判定（ステップＳ２２０）、変更ブロックの更新（ステップＳ２２２）、変更ブロックの送信（ステップＳ２２４）を所定のインターバルで行うとしてもよい。転送データ量を低減しつつ、変更ブロックを反映させた合成画像をリアルタイムに画像表示部３１４に表示させることができる。
【００５７】
その他、タブレット用ペンＰｎが位置検出部３１２から離れたときに、変更ブロックを資料提示装置２０に送信するとしてもよい。このように、タブレット３０は、様々なタイミングで、変更ブロックの判定（ステップＳ２２０）、変更ブロックの更新（ステップＳ２２２）、変更ブロックの送信（ステップＳ２２４）を行うことができる。
【００５８】
（Ｂ４）変形例４：
上記実施例においては、資料提示装置として、図１に示した資料提示装置２０を採用したが、様々な構成の資料提示装置を採用することができる。例えば、資料ＲＳを載置する資料テーブルが付加されているものや、撮像画像を表示する表示装置（例えばプロジェクタ）が一体となったものなどを採用することができる。また、図９に示すように、カメラヘッド２６の取り付部分が軸周りに回転する構成や、支柱２４が２つの軸を中心に回転する構成を採用することも可能である。
【００５９】
（Ｂ５）変形例５：
上記実施例の構成に加え、ユーザがズーム用ダイヤル２７（図１参照）を用いて、資料ＲＳを拡大して画像表示装置（本実施例ではテレビ４０）に表示させると、タブレット３０の画像表示部３１４に表示される資料ＲＳに対応する画像も拡大して表示され、タブレット３０による書き込みの解像度も高くなる構成としてもよい。ズーム用ダイヤル２７による拡大・縮小の度合を資料提示装置２０がタブレット３０に送信し、タブレット３０のＣＰＵ３３０が、ユーザの描いた描画画像の解像度を、その拡大率に合わせて増減させることによって実現することができる。
【００６０】
（Ｂ６）変形例６：
上記実施例では、画像表示部３１４は液晶パネルとしたが、その他、種々の画像表示手段を用いることができる。例えば、有機ＥＬパネル、電子ペーパなどを用いるとしても上記実施例と同様の効果を得ることが可能である。また、画像表示部３１４として、天井に設置したプロジェクタによって、ユーザの手元に表示画像を表示するとしてもよい。この場合、位置検出部３１２として、タブレット用ペンＰｎやユーザの指先の動きを検知するカメラを設けタブレット用ペンＰｎや指先の動きを読み取ることによって、ユーザが指定している表示画像上の位置の検出や描画操作の検出をすることが可能である。
【００６１】
（Ｂ７）変形例７：
上記実施例では、タッチパネル３１０として投影型静電容量方式を採用したが、抵抗膜方式、表面弾性波方式、電磁誘導方式、映像解析方式など、他の方式を採用することも可能である。例えば、抵抗膜方式は、タブレット３０に用いる２枚の透明電極の一方に抵抗をもたせ、対向する２枚の透明電極のうち１枚に対して電圧をかける。ユーザの操作によって、両電極が接触した際に、両電極の導通部分の位置を電圧によって検出する。このように、種々のタッチパネルの方式を採用することが可能である。
【００６２】
（Ｂ８）変形例８：
上記実施例では、画像を表示する画像表示装置としてテレビ４０を用いたが、それに限ることなく、プロジェクタや、液晶ディスプレイ等の他の画像表示装置を用いるとしてもよい。このようにしても上記実施例と同様の効果を得ることができる。
【００６３】
（Ｂ９）変形例９：
上記実施例においては、資料提示システム１０は画像表示装置（上記実施例ではテレビ４０）およびタブレット３０を１つずつ備えるものとしたが、それに限ることなく、画像表示装置を複数またはタブレット３０を複数、画像表示装置とタブレット３０の両方を複数備える態様としてもよい。タブレット３０が複数の場合は、無線ＵＳＢによるアドレスによっても、タブレット３０毎に付されたＩＤによっても識別できるので、時分割で各タブレット３０からの信号を処理し、タブレット３０毎に別々の描画の操作情報として処理をすることで実現することができる。また、各タブレットからの操作情報を処理した結果を、タブレット毎に異なる態様、例えば色の違いや、線の太さの違い、濃さの違いなどで識別可能に表示することも好ましい。例えば、教育現場において、複数の生徒がそれぞれにタブレット３０を用いて表示画像に対して描画操作をすることが可能となり、新規な授業形態を採用することが可能となる。
【００６４】
資料提示側でどのタブレットを有効とするかを選択するスイッチを設けても良い。また、タブレットは常に有効にしておき、処理した結果を表示することを禁止するスイッチを設けても良い。この場合、禁止されている間も処理は継続し、禁止が解除されたた処理結果を一度に表示するものとしても良い。生徒が回答や絵などを描く間は表示させず、後から回答を一度に表示させることができる。このようなタブレットを選択するスイッチの色と描画色とを合わせておくとしてもよい。タブレットの選択処理がしやすくなり利便性が向上する。
【００６５】
画像表示装置を複数にする場合は、資料提示装置２０に設けるデジタルデータ出力ＩＦ２７２、アナログデータ出力ＩＦ２７４を複数設け、複数の画像表示装置を接続することで実現が可能である。複数の画像表示装置に同じ撮像画像または描画画像を合成した合成画像を表示するとしてもよいし、一つの画像を複数の画像表示装置（例えばプロジェクタ）で分割して表示し、複数の分割した表示画像を合わせて一つの表示画像とする態様としてもよい。この場合、資料提示装置２０が表示装置に表示させる画像を分割する画像分割部と、分割した画像を各出力ＩＦに同期して出力する出力処理部を備えることにより実現可能である。
【００６６】
（Ｂ１０）変形例１０：
上記実施例においてソフトウェアで実現されている機能の一部をハードウェアで実現してもよく、あるいは、ハードウェアで実現されている機能の一部をソフトウェアで実現してもよい。
【符号の説明】
【００６７】
１０…資料提示システム
２０…資料提示装置
２２…本体
２３…操作部
２４…支柱
２６…カメラヘッド
２９…送受信部
３０…タブレット
４０…テレビ
２１０…撮像部
２１２…レンズユニット
２１４…ＣＣＤ
２２０…画像処理ユニット
２３０…ＣＰＵ
２３２…タブレットドライバ
２３３…表示出力部
２３４…撮像画像伝送処理部
２３５…ブロック更新部
２３６…画像合成部
２４０…ＲＡＭ
２４１…撮像画像バッファ
２４２…受信ブロックバッファ
２４３…描画画像バッファ
２４４…合成画像バッファ
３１０…タッチパネル
３１２…位置検出部
３１４…画像表示部
３３０…ＣＰＵ
３３１…画像処理部
３３２…ブロック判定部
３３３…ブロック更新部
３３４…画像合成部
３４０…ＲＡＭ
３４１…撮像画像バッファ
３４２…描画データバッファ
３４３…描画画像バッファ
３４４…合成画像バッファ
３６０…送受信部
２７２…デジタルデータ出力ＩＦ
２７４…アナログデータ出力ＩＦ
ＲＡ…撮像領域
ＩＡ…表示画像
ＰＡ…パネル画像
ＰＦ…パネル領域
ＲＳ…資料
ＩＳ…表示資料
Ｐｎ…タブレット用ペン
Ｂ２１〜２６，３１〜３６…ブロック
【図１】
2012138666.tif 000003
【図２】
2012138666.tif 000004
【図３】
2012138666.tif 000005
【図４】
2012138666.tif 000006
【図５】
2012138666.tif 000007
【図６】
2012138666.tif 000008
【図７】
2012138666.tif 000009
【図８】
2012138666.tif 000010
【図９】
2012138666.tif 000011