(57)【特許請求の範囲】
【請求項１】
提示画像の所定の位置を指し示すポイント画像を生成する機能を備えた資料提示装置に、前記ポイント画像の位置制御を行うための制御信号を送信する端末の動作方法であって、
前記資料提示装置から前記提示画像の画像データを受信するステップと、
前記画像データに基づいた画像を自身の表示装置に表示するステップと、
前記表示装置の画面中にポインティング可能な領域を示すポインティングエリアを表示するステップと、
前記ポインティングエリア内にポイント画像の表示が指定された場合に、その座標を検出し、さらにその座標を前記資料提示装置が生成する画像中における座標に変換するステップと、
前記座標のデータを前記資料提示装置に送信するステップと
を備えることを特徴とする端末の動作方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を提示してのプレゼンテーションや教育を行う際に利用される資料提示装置に係り、提示する画像中の所定部分を指し示すポイント画像の表示位置を制御する技術に関する。
【背景技術】
【０００２】
図表等の資料をスクリーンに投影し、それを指し示しながらプレゼンテーションを行う手法が知られている。この手法は、会議での説明や授業において多用されている。この手法においては、資料を撮像するための装置として資料提示装置が利用される。
【０００３】
資料提示装置は、書画カメラとも呼ばれている。資料提示装置の基本的な機能は、セットした資料を撮像装置で撮像する点にある。この撮像された画像は、スクリーンに投影され、その投影した画像を視聴者に見せながらプレゼンテーションが行われる。
【０００４】
この資料を提示してのプレゼンテーションにおいて、提示画像中に矢印等のポイント画像を表示し、その表示を適宜動かすことで、提示画像中の任意の位置を指し示し、プレゼンテーションを効果的に行う技術が知られている。
【０００５】
この技術においては、説明者（プレゼンター）が、提示画像の所定の位置を指し示したことを光学的に検出し、提示画像中のその検出位置に対応する位置にポイント画像を表示する処理が行われる（例えば、特許文献１参照）。
【０００６】
また、市販の携帯型情報処理端末（ＰＤＡ(Personal Digital Assistance)）を用いて、提示画像中に表示されたポイント画像を制御する技術についても提案されている（例えば、特許文献２参照）。
【０００７】
【特許文献１】特開２００３−２１６３２２号公報（要約書）
【特許文献２】特開２００４−２５９０９０号公報（要約書）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、特許文献１に記載されているような、従来の技術においては、ポイント画像の表示位置を特定するのに、専用のポインティング装置を必要としていた。このことは、製品の割高感や、専用の機器を必要とするデメリット感をユーザに与える要因となっていた。また、この技術においては、説明者が指し示した提示画像中のポインティング位置を光学的に読み取る必要があるために、説明者の立ち位置等が制限されるという問題もあった。
【０００９】
また、特許文献２に記載されている携帯型情報処理端末をポインティング装置として用いる方法は、ポイント画像と提示画像の合成を携帯型情報処理端末内で行うので、演算速度やメモリ容量に制限のある携帯型情報処理端末に加わる負担が大きいという問題があった。このため、動作不良や応答の悪さといった不具合が生じやすく、ユーザにとって利便性のある技術ではなかった。
【００１０】
また、小型であるが故に、携帯型情報処理端末のディスプレイは、通常画面の縦横比と異なったものが多く（例えば、縦型）、表示画面を利用してのポインティングに際して、ポインティングする位置と、投影装置によりスクリーン上に投影表示した提示画面上の位置との関係が把握し難く、ポインティング操作が行い難いという問題があった。
【００１１】
本発明は、提示画像中にポイント画像を表示してのプレゼンテーションを行う技術において、低コスト性、既に市販されている機器を流用することによるユーザにとっての利便性、そしてプレゼンテーション時における説明者の立ち位置等の制限の解消、さらにポインティング操作の行い易さを実現することができる技術の提供を目的とする。
【課題を解決するための手段】
【００２０】
本発明は、提示画像の所定の位置を指し示すポイント画像を生成する機能を備えた資料提示装置に、前記ポイント画像の位置制御を行うための制御信号を送信する端末の動作方法であって、前記資料提示装置から前記提示画像の画像データを受信するステップと、前記画像データに基づいた画像を自身の表示装置に表示するステップと、前記表示装置の画面中にポインティング可能な領域を示すポインティングエリアを表示するステップと、前記ポインティングエリア内にポイント画像の表示が指定された場合に、その座標を検出し、さらにその座標を前記資料提示装置が生成する画像中における座標に変換するステップと、前記座標のデータを前記資料提示装置に送信するステップとを備えることを特徴とする。
【００２１】
上記端末の動作方法によれば、市販の携帯型情報処理端末（ＰＤＡ(Personal Digital Assistance)）を用いたポイント画像の位置制御を行う場合に得られる優位性を得ることができる。この端末の動作方法に関する発明を実現するには、前述の手順を実行するプログラムを市販のＰＤＡにインストールすればよい。
【００２３】
この態様によれば、端末の表示画面の縦横寸法比が、資料提示装置から投影装置等を経由して表示される画面の縦横寸法比と異なっていても、ポインティングが可能な範囲が端末のディスプレイ上に表示される。これにより、ポインティングが可能な範囲が説明者にとり容易に認識でき、ポインティング時の操作性を高めることができる。特にプレゼンテーション時には、説明を行いつつポインティングを行わなくてはならないので、一目でポインティングが可能な範囲を認識できることは便利である。
【００２４】
また、ポイント画像の位置を読み取る範囲が限られることで、指定された位置を特定する際に、無駄な演算を行わなくて済む。これにより、端末に加わる負荷が抑えられ、処理の遅延や意図しない処理の停止（エラー処理に伴うフリーズ状態）を避けることができる。
【発明の効果】
【００２５】
本発明によれば、市販ＰＤＡを利用してポイント画像の表示位置の制御を行うことができる。また、ＰＤＡの画面が小さく、またその縦横寸法比が提示画面の寸法比と異なっていても、ポインティングの範囲をＰＤＡの画面上に表示することで、効率よくポイント画像を用いたポインティングを行うことができる。こうして、提示画像中にポイント画像を表示してのプレゼンテーションを行う技術において、（１）低コスト性、（２）市販されている機器を流用することによるユーザにとっての利便性、（３）プレゼンテーション時における説明者の立ち位置等の制限の解消、（４）ポインティング操作を行い易い、といった優位性を得ることができる。
【発明を実施するための最良の形態】
【００２６】
（１） 第１の実施形態
１−１．第１の実施形態の構成
図１は、発明を利用したプレゼンテーションシステムの概要を示す概念図である。図１には、資料提示装置１０１、投影装置１０２、スクリーン１０３、画像伝送ケーブル１０４、提示資料１１６、タッチペン１１８、携帯型情報処理端末（ＰＤＡ）１２１および説明者（プレゼンター）１２０が示されている。
【００２７】
資料提示装置１０１は、ディスプレイ１１１、ディスプレイ支持アーム１１２、ＣＣＤカメラを備えた撮像装置１１３、カメラ支持アーム１１４、および操作手段１１５を備えている。
【００２８】
資料提示装置１０１は、撮像装置１１３によって資料１１６を撮像し、その画像データを投影装置１０２に送る機能、その画像データを携帯型情報処理端末１２１に送る機能、その画像データを内部の記憶装置に記憶する機能、さらにこの記憶した画像データを適宜読み出し、それを投影装置１０２および携帯型情報処理端末１２１に送る機能を備えている。また、資料提示装置１０１は、携帯型情報処理端末１２１からの指示信号に基づいて、資料１１６の画像に矢印等のポイント画像を合成し、この合成画像の画像データを投影装置１０２に送る機能を備えている。
【００２９】
ディスプレイ１１１は、表示面の仰角が制御できるようにディスプレイ支持アーム１１２によって支持されている。ディスプレイ１１１は、撮像装置１１３が撮像した画像を表示する機能、更に各種のデータや操作内容等を表示する機能を有している。撮像装置１１３は、資料１１６を撮像するためのもので、撮像装置支持アーム１１４によって、撮像方向や画角を調整することができるように支持されている。操作手段１１５は、資料提示装置１０１の動作を制御するためのもので、電源スイッチや各種のモード設定スイッチ、提示画像の拡大縮小表示スイッチ等を備えている。
【００３０】
携帯型情報処理端末１２１は、市販のＰＤＡをそのまま利用したものであり、入力装置兼表示装置１２２を備えている。入力装置兼表示装置１２２は、後述するように液晶ディスプレイとタッチパネル機能を備えており、各種画像データの表示とタッチペンを接触させての操作やデータ入力を行うことができる。また、入力装置兼表示装置１２２には、撮像装置１１３によって撮像した資料１１６の撮像画像が表示される。
【００３１】
タッチペン１１８は、入力装置兼表示装置１２２のタッチパネル機能を利用して、携帯型情報処理端末１２１を利用した各種の操作を行うためのもので、ディスプレイ面の所定部分に圧力を加えるためのペン型の部材である。
【００３２】
タッチペン１１８を利用して、プレゼンテーション時におけるポインティング（矢印表示等のポイント画像１２３を用いて、所定部分を指し示す行為）を行うことができる。すなわち、入力装置兼表示装置１２２に資料１１６の撮像画像が表示され、その任意の部分をタッチペン１１８によって触れることで、スクリーン１０３上の対応する位置にポイント画像１２３を表示することができる。また、入力装置兼表示装置１２２上におけるタッチペン１１８の触れる位置を移動させることで、ポイント画像１２３のスクリーン１０３上における表示を動かすことができる。
【００３３】
図２は、資料提示装置１０１および携帯型情報処理端末１２１の概要を示すブロック図である。資料提示装置１０１は、撮像装置１１３、通信装置２０１、ポインタ位置設定装置２０２、画像生成装置２０３、記憶装置２０４および画像合成装置２０５を備えている。
【００３４】
撮像装置１１３は、ＣＣＤカメラを内蔵しており、資料１１６（図１参照）を撮像し、その撮像画像データを通信装置２０１、記憶装置２０４および画像合成装置２０５に出力する。通信装置２０１は、撮像装置１１３が撮像した画像のデータ（画像データ）を携帯型情報処理端末１２１の通信装置２１６に送信する機能、通信装置２１６から送られてくるポイント画像の表示位置を決める制御信号を受信する機能を備えている。なお通信は、マイクロ波を用いた無線規格が用いられる。
【００３５】
ポインタ位置設定装置２０２は、携帯型情報処理端末１２１から送られてくるポイント画像の表示位置を決める制御信号に基づいて、ポインタ位置（ポインティングが行われた位置）の座標を設定する。ポイント画像生成装置２０３は、ポインタ位置設定装置２０２が設定した座標にポイント画像（例えば矢印の画像）を表示するための画像信号を生成する。記憶装置２０４は、撮像装置１１３が撮像した画像の画像データを記憶し、必要に応じてその記憶した画像データは読み出され、画像合成装置２０５に送られる。画像合成装置２０５は、提示する資料の画像中にポイント画像を合成し、提示画像中にポイント画像が表示された画像を生成する。
【００３６】
携帯型情報処理端末１２１は、タッチパネル機構２１１と液晶ディスプレイ２１２を備えた入力兼表示装置１２２、ポインティングエリア設定装置２１３、ポイント座標検出装置２１４、座標変換装置２１５、および通信装置２１６を備えている。
【００３７】
タッチパネル機構２１１は、液晶ディスプレイ２１２の表示画面上に重ねて配置されており、圧力センサの機能により、ディスプレイ上の押された位置を特定するための信号を出力する。
【００３８】
ポインティングエリア設定装置２１３は、液晶ディスプレイ２１２の表示画面上に、タッチペン１１８（図１参照）を用いてのポインティングが可能なエリア（ポインティングエリア）を示す表示（例えば枠の表示）を行うための画像生成手段である。ポインティングエリアの表示は、タッチペン１１８を用いてのポインティングが可能な範囲を示す目安表示として機能する。
【００３９】
ポインティングエリアの形状としては、縦横比３：４の矩形状の例を挙げることができる。携帯型情報処理端末１２１の入力装置兼表示装置１２２の表示画面（液晶ディスプレイ２１２の表示画面）の形状が縦長である場合、ポインティングエリアをスクリーン１０３の投影画面の形状に合わせた横長の形状にすることで、実際に有効なポインティングの範囲を説明者１２０が容易に把握することができ、無駄なポインティング操作を行わなくて済むようにできる。また、説明者に端末上におけるポインティングが有効な範囲を明確に認識させることができ、端末のポインティング装置としての操作性を高めることができる。
【００４０】
ポイント座標検出装置２１４は、タッチパネル機構２１１からの出力を受けて、タッチペン１１８によって押された液晶ディスプレイ２１２上の位置を特定する座標を算出する。座標変換装置２１５は、ポイント座標検出装置２１４で得られたポイント位置の座標をスクリーン１０３（図１参照）上に投影される画面上での座標に変換する。このような座標変換を行うのは、一般に、入力装置兼表示装置１２２の表示画面の縦横比と、スクリーン１０３に投影される画面の縦横比とが異なるからである。
【００４１】
通信装置２１６は、座標変換装置２１５から出力されるポイント画像を表示すべき座標のデータを資料提示装置１０１の通信装置２０１に送る。また、通信装置２１６は、資料提示装置１０１から送られてくる資料１１６（図１参照）の画像データを受信し、それを入力兼表示装置１２２の液晶ディスプレイ２１２に送る。
【００４２】
なお、資料提示装置１０１において、撮像装置１１３と通信装置２０１との間に、撮像装置１１３が撮像した画像を、携帯型情報処理端末１２１の液晶ディスプレイ２１２の表示画面の大きさに合わせた縮小画像に変換する画像縮小装置を配置してもよい。この画像縮小装置を利用することで、携帯型情報処理端末１２１に送信する画像を液晶ディスプレイの大きさに合わせた縮小画像とし、その縮小画像の画像データを通信装置２０１から通信装置２１６に送信することができる。こうすることで、資料提示装置１０１から携帯型情報処理端末１２１への転送データのデータ量を少なくすることができ、通信時間を短縮し、携帯型情報処理端末に加わる負荷を低減することができる。これは、動作を高速化する上で有利となる。
【００４３】
１−２．第１の実施形態の動作（１）
以下、図１および図２に示すシステムの動作例を説明する。ここでは、資料を資料提示装置１０１によって撮像し、その撮像した画像を投影装置１０２からスクリーン１０３に投影し、その際に使用者１２０によって表示位置が制御されたポイント画像１２３が資料１１６の画像に重ねてスクリーン１０３上に表示される場合の例を説明する。
【００４４】
まず、各装置の電源をＯＮにした状態において、提示する資料１１６を撮像装置１１３の下に載置し、撮像装置１１３により資料１１６の撮像を行う。撮像装置１１３は、資料１１６の撮像データを通信装置２０１に送ると共に、画像合成装置２０５に送る。
【００４５】
この段階では、ポイント画像を用いたポインティングは行われていないので、画像合成装置２０５におけるポイント画像の画像合成処理は行われず、資料１１６の画像データは、投影装置１０２に送られる。投影装置１０２は、この画像データに基づいて資料１１６の画像をスクリーン１０３に投影表示する。
【００４６】
一方、通信装置２０１は、この画像データを通信装置２１６に送り、通信装置２１６は、それを液晶ディスプレイ２１２に送る。液晶ディスプレイ２１２は、この画像データに基づいて、資料１１６の画像を表示する。なお、入力装置兼表示装置１２２の液晶ディスプレイ２１２には、ポインティングエリア設定装置２１３の機能により、ポインティングエリアを決める枠も同時に表示される。
【００４７】
この状態において、説明者１２０がタッチペン１１８の先端を入力装置兼表示装置１２２上に表示された資料１１６の画像の任意の部分に当てると、その位置がタッチパネル機構２１１によって読み取られる。そして、このタッチペン１１８によって指し示した位置の座標が、ポイント座標検出装置２１５によって算出され、さらに座標変換装置２１５において、この座標データがスクリーン１０３上における座標データに変換される。
【００４８】
この際、入力装置兼表示装置１２２上に表示されたポインティングエリア内において、上述したポイント画像の表示位置の制御のための動作が実行され、ポインティングエリア外においては、その動作は実行されない。
【００４９】
スクリーン１０３上におけるポイント画像の表示位置を決める制御信号は、座標変換装置２１５から通信装置２１６に送られ、さらに資料提示装置１０１の通信装置２０１に送られる。この制御信号は、通信装置２０１からポインタ位置設定装置２０２に送られ、そこでポイント画像を表示する位置が算出される。ポイント画像生成装置２０３は、この位置に矢印表示のポイント画像を表示した画像データを生成し、それを画像合成装置２０５に送る。
【００５０】
画像合成装置２０５は、撮像装置１１３（または記憶装置２０４）から送られてきた資料１１６の撮像画像中に、ポイント画像生成装置２０３において生成されたポイント画像を合成し、この合成画像データを投影装置１０２に送る。そして、投影装置１０２は、この合成画像をスクリーン１０３に投影する。こうして、スクリーン１０３に、資料１１６の画像中にポイント画像１２３が合成された内容の画像が投影される。
【００５１】
ここで、説明者１２０がタッチペン１１８の先端を入力装置兼表示装置１２２上に接触させた状態のまま、それを動かすと、タッチペンの接触部分の移動がタッチパネル機構２１１によって読み取られ、上述した経路で処理が行われて、スクリーン１０３上におけるポイント画像１２３の表示位置が動く。こうして、説明者１２０がタッチペン１１８を操作することで、スクリーン１０３上におけるポイント画像１２３の表示位置を制御することができる。
【００５２】
この際、説明者１２０は、入力装置兼表示装置１２２上に表示された資料１１６の画像を見ながら、その表示画像中の任意の部分をタッチペン１１８によってポインティングすることができる。このため、説明者１２０は、スクリーン１０３を見なくても提示画像を用いたプレゼンテーションを行うことができ、姿勢や体の向きが限定されない。
【００５３】
また、携帯型情報処理端末１２１において画像の合成を行わないので、携帯型情報処理端末１２１に加わる負担を抑えることができ、素早い応答を期待することができる。また、負担が抑えられるので、携帯型情報処理端末１２１に他のアプリケーション・ソフト・ウェアがインストールされていたり、大容量のデータが記憶されていたりしても、動作が滞ったり遅延したりする不都合の発生が抑えられる。
【００５４】
また、入力装置兼表示装置１２２の表示画面上（液晶ディスプレイ２１２の表示画面上）にポインティングが有効なポインティングエリアが表示されているので、説明者１２０がタッチペン１１８を用いたポインティングを行い易く、さらにスクリーン１０３上への表示が不可能な位置を指し示した場合等における無駄な演算が携帯型情報処理端末１２１内で行われることが抑えられる。このことも、携帯型情報処理端末１２１の負担を軽減するのに有効となる。
【００５５】
なお、提示資料１１６が複数ある場合は、資料１１６を別な資料に代え、上述した動作を繰り返せばよい。
【００５６】
１−３．第１の実施形態の動作（２）
図１に示すシステムにおいて、予め資料１１６の画像データを資料提示装置１０１に記憶させておき、それを適宜読み出しながらプレゼンテーションを行うこともできる。この場合、予め提示する資料を、撮像装置１１３を用いて撮像し、その画像データを資料提示装置１０１内の記憶装置２０４に記憶しておく。また、記憶装置２０４から通信装置２０１に画像データを送ることが可能で、さらに携帯側情報処理端末１２１側で選択した所定の画像を記憶装置２０４内から読み出すことが可能なようにしておく。
【００５７】
そして、プレゼンテーションを行う際に、当該プレゼンテーションに利用する画像群のサムネール画像（縮小画像）群を入力装置兼表示装置１２２に表示し、その中から所望の画像を説明者１２０が、入力装置兼表示装置１２２が備えるタッチパネル機構２１１を用いて選択する。そして、この選択されたサムール画像の元画像の画像データが、記憶装置２０４から読み出され、それが資料提示装置１０１から投影装置１０２に送られ、その画像が投影装置１０２からスクリーン１０３に投影される。
【００５８】
この場合も、入力装置兼表示装置１２２に、スクリーン１０３に投影表示している資料の画像と同じものが表示され、タッチペン１１８を用いたポイント画像１２３の位置制御を行うことができる。
【００５９】
（２）第２の実施形態
資料提示装置１０１として、通常のパーソナル・コンピュータを利用することもできる。この場合、パーソナル・コンピュータに第１の実施形態において説明した動作を実行するプログラムをインストールする。そして、デジタル・カメラで撮像した資料の画像データをパーソナル・コンピュータに取り込み、第１の実施形態において説明したのと同様に、携帯型情報処理端末１２１をポインティング装置として機能させての提示画像へのポインティングを実行する。
【００６０】
また、この実施形態において、予め提示画像の画像データをパーソナル・コンピュータ中や外付けの記憶装置に記憶しておき、携帯型情報処理端末１２１を操作することで、それを適宜読み出し、その読み出したものを投影装置１０２からスクリーン１０３上に投影表示することもできる。この場合も、携帯型情報処理端末１２１を操作してのポイント画像１２３の表示位置の制御を行うことができる。
【００６１】
本実施形態は、ハードウェアとして、市販のパーソナル・コンピュータと携帯型情報処理端末を用意すればよいという簡便性がある。
【産業上の利用可能性】
【００６２】
本発明は、講演会、セミナー、各種の授業において、資料を画像として提示する資料提示技術に利用することができる。
【図面の簡単な説明】
【００６３】
【図１】プレゼンテーションシステムの概要を示す概念図である。
【図２】資料提示装置および携帯型情報処理端末の一例を示すブロック図である。
【符号の説明】
【００６４】
１０１…資料提示装置、１０２…投影装置、１０３…スクリーン、１０４…画像伝送ケーブル、１１１…ディスプレイ、１１２…ディスプレイ支持アーム、１１３…撮像装置、１１４…撮像装置支持アーム、１１５…操作手段、１１６…資料、１１８…タッチペン、１２０…説明者（プレゼンター）、１２１…携帯型情報処理端末、１２２…入力装置兼表示装置、２０１…通信装置、２０２…ポインタ位置設定装置、２０３…ポイント画像生成装置、２０４…記憶装置、２０５…画像合成装置、２１１…タッチパネル機構、２１２…液晶ディスプレイ、２１３…ポインティングエリア設定装置、２１４…ポイント座標検出装置、２１５…座標変換装置、２１６…通信装置。
【図１】
0004744217.tif 000002
【図２】
0004744217.tif 000003