(57)【要約】【課題】ポインタが指示したオブジェクトにアンダーライン等の指示指標を付与する際に、指示指標やオブジェクトが見難くなることを抑制すること。【解決手段】投影制御装置１は、プロジェクタ５に第１の画像情報に基づく投影画像Ｐｉを投影させるとともに、カメラ６で投影画像Ｐｉを撮像することにより、第２の画像情報を得る。そして、投影制御装置１は、第１の画像情報と第２の画像情報とに基づき、第１の画像情報中に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを抽出する。その後、投影制御装置１は、抽出したオブジェクトに対応する領域を生成する。そして、投影制御装置１は、生成した領域内に、第１の時間、ポインタ等による指示を継続して検出すると、指示されているオブジェクトに対して指示指標を加えた画像をプロジェクタ５に投影させる。【選択図】図１
2011150609.tif 000002
【特許請求の範囲】
【請求項１】
所定の画像を投影させるための第１の画像情報と、投影された前記所定の画像を撮像することによって得られる第２の画像情報とを比較することにより、前記所定の画像に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを第１のオブジェクトとして特定し、
前記第１のオブジェクトに対応する領域である第１の領域を生成し、
当該第１の領域内に指示を、第１の時間、継続して検出すると、前記第１のオブジェクトに対して指示指標を加えた画像を投影させる、投影制御手段を備える
ことを特徴とする投影制御装置。
【請求項２】
前記投影制御手段は、
投影装置に接続されて、前記第１の画像情報を投影画像として出力する出力手段と、
撮影装置に接続されて、撮影画像が前記第２の画像情報として入力される入力手段と、をさらに備える
請求項１に記載の投影制御装置。
【請求項３】
画像を投影する投影手段が前記出力手段に接続され、
当該投影手段が投影した画像を撮像可能な撮像手段が前記入力手段に接続され、
前記投影制御手段は、前記第１の画像情報に基づき前記投影手段に前記所定の画像を投影させ、前記撮像手段に前記所定の画像を撮像させることによって前記第２の画像情報を得る請求項２に記載の投影制御装置。
【請求項４】
前記投影制御手段は、
前記第１の領域を生成してから前記第１のオブジェクトに指示指標を加える前に、前記第１の領域内の指示が外れてから第２の時間以上、継続して前記第１の領域内に指示を検出しない制御と、前記投影制御装置は前記第１の領域を消去する請求項３に記載の投影制御装置。
【請求項５】
前記投影制御手段は、
前記第１の画像情報に基づいて前記投影手段が投影した画像の投影位置における寸法と、前記第１のオブジェクトが前記第２の画像情報に占める割合と、指示者と前記投影位置との距離と、の少なくとも一つに基づき、前記第１の時間及び前記第２の時間の少なくとも一方を決定する請求項４に記載の投影制御装置。
【請求項６】
前記投影制御手段は、
前記第１の画像情報に基づいて前記投影手段が投影した画像の投影位置における寸法と、前記第１のオブジェクトが前記第２の画像情報に占める割合と、指示者と前記投影位置との距離と、の少なくとも一つに基づき、前記第１の領域の寸法を決定する請求項４に記載の投影制御装置。
【請求項７】
前記投影制御手段は、
前記オブジェクトが文字と数字との少なくとも一方で構成される場合、
前記第１のオブジェクトに含まれる文字若しくは数字のフォントを変更した画像を、前記指示指標を加えた画像として前記投影手段に投影させる請求項３から６のいずれか１項に記載の投影制御装置。
【請求項８】
前記投影制御手段は、
前記指示指標が加えられた第１のオブジェクトと、当該第１のオブジェクトに隣接する第２のオブジェクトと、を含む画像を前記投影手段に投影させているとき、前記第２のオブジェクトに対応する領域である第２の領域を生成し、かつ前記第１の領域から前記第２の領域への指示の移動を検出すると、
前記第２のオブジェクトに指示指標を加えた画像を前記第１のオブジェクトとともに前記投影手段に投影させる請求項３から７のいずれか１項に記載の投影制御装置。
【請求項９】
前記投影制御手段は、
前記第２のオブジェクトに前記第１のオブジェクトに加えた指示指標と同様の指示指標を加える請求項８に記載の投影制御装置。
【請求項１０】
前記投影制御手段は、
前記第１のオブジェクトに対して所定の方向に隣接するオブジェクトのみを前記第２のオブジェクトとして取り扱い可能である請求項８又は９に記載の投影制御装置。
【請求項１１】
前記投影制御手段は、
前記指示指標が加えられた第１のオブジェクトに対応する第１の領域内に、第３の時間、継続して指示を検出すると、
前記指示指標が加えられた第１のオブジェクトに新たな指示指標を加えた画像を前記投影手段に投影させる請求項３から１０のいずれか１項に記載の投影制御装置。
【請求項１２】
前記投影制御手段は、
前記指示指標が加えられた第１のオブジェクトに対応する第１の領域内に、第４の時間、継続して指示を検出すると、
前記指示指標が加えられた第１のオブジェクトの当該指示指標を削除した画像を前記投影手段に投影させる請求項３から１１のいずれか１項に記載の投影制御装置。
【請求項１３】
音声を入力する音声入力手段がさらに接続され、
前記投影制御手段は、
当該音声入力手段に入力された音声から特定の音声を検出すると、前記指示指標を削除した画像を前記投影手段に投影させる請求項３から１２のいずれか１項に記載の投影制御装置。
【請求項１４】
前記第１の画像情報内の複数のオブジェクトに前記指示指標が加えられている場合、
前記投影制御装置は、少なくとも１つの前記指示指標を削除した画像を前記投影手段に投影させる請求項１３に記載の投影制御装置。
【請求項１５】
前記投影手段に所定の画像を投影させるための第１の画像情報を通信回線から取得する通信手段がさらに接続され、
前記投影制御手段は、前記通信手段から得た前記第１の画像情報に基づき前記投影手段に前記所定の画像を投影させ、前記撮像手段に前記所定の画像を撮像させることによって前記第２の画像情報を得る請求項３から１４のいずれか１項に記載の投影制御装置。
【請求項１６】
第１の画像情報に基づき、投影手段に所定の画像を投影させる工程と、
前記投影手段が投影した前記所定の画像を撮像手段に撮像させる工程と、
前記第１の画像情報と、前記撮像手段が前記所定の画像を撮像することによって得られる第２の画像情報とを比較することにより、前記第１の画像情報中に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを第１のオブジェクトとして特定する工程と、
前記第１のオブジェクトに対応する領域である第１の領域を生成する工程と、
当該領域内に指示を、第１の時間、継続して検出すると、前記第１のオブジェクトに指示指標を加えた画像を前記投影手段に投影させる工程と、
を含むことを特徴とする投影方法。
【請求項１７】
コンピュータに、
第１の画像情報に基づき、投影手段に所定の画像を投影させる処理と、
前記投影手段が投影した前記所定の画像を撮像手段に撮像させる処理と、
前記第１の画像情報と、前記撮像手段が前記所定の画像を撮像することによって得られる第２の画像情報とを比較することにより、前記第１の画像情報中に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを第１のオブジェクトとして特定する処理と、
前記第１のオブジェクトに対応する領域である第１の領域を生成する処理と、
当該領域内に指示を、第１の時間、継続して検出すると、前記第１のオブジェクトに指示指標を加えた画像を前記投影手段に投影させる処理と、
を実行させることを特徴とする投影制御用コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投影装置が投影した画像をポインタ等で指示した場合に、投影装置に投影させる画像を変更することに関する。
【背景技術】
【０００２】
従来から、壁面やスクリーンに画像を投影する装置としては、いわゆるプロジェクタがある。プレゼンテーションの場等では、プロジェクタによって投影された画像中に存在する文字や図形等のオブジェクトを、講演者がレーザーポインタ等によって指示することがある。例えば、特許文献１には、スクリーン上に投影されている映像に対して発光ポインターによる光が照射されたとき、該発光ポインターによる光の反射光を受光することにより、発光ポインターによる光の軌跡を検知して、スクリーン上に光の軌跡に対応した表示を行う会議支援方法が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−２４２４２７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
通常、レーザーポインタ等の発光ポインタは手で持って操作するため、発光ポインタの軌跡を投影する場合には手ブレを起こすおそれがある。特許文献１に開示された技術は、発光ポインタによって照射された光の軌跡のすべてがスクリーンに投影されてしまうため、手ブレや間違いによる不要な光の軌跡に対応した表示がスクリーンに投影されてしまう。その結果、強調したいオブジェクトを判別することが難しくなることがある。また、ブレた光の軌跡に対応した表示がスクリーンに投影されて、見る者に不快な印象を与えるおそれもある。さらに、光の軌跡を投影し続けていくと、オブジェクトに軌跡の線が重なったり、線が徐々に多くなったりするため、投影された画像の内容が見難くなってしまう。
【０００５】
本発明は、上記に鑑みてなされたものであって、プロジェクタ等の投影手段が投影した画像に含まれるオブジェクトのうち、ポインタが指示したものにアンダーライン等の指示指標を付与する際に、指示指標やオブジェクトが見難くなることを抑制することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明に係る投影制御装置は、所定の画像を投影させるための第１の画像情報と、投影された前記所定の画像を撮像することによって得られる第２の画像情報とを比較することにより、前記所定の画像に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを第１のオブジェクトとして特定し、前記第１のオブジェクトに対応する領域である第１の領域を生成し、当該第１の領域内に指示を、第１の時間、継続して検出すると、前記第１のオブジェクトに対して指示指標を加えた画像を投影させる、投影制御手段を備えることを特徴とする。
【０００７】
本発明の好ましい態様としては、前記投影制御手段は、投影装置に接続されて、前記第１の画像情報を投影画像として出力する出力手段と、撮影装置に接続されて、撮影画像が前記第２の画像情報として入力される入力手段と、をさらに備えることが好ましい。
【０００８】
本発明の好ましい態様としては、画像を投影する投影手段が前記出力手段に接続され、当該投影手段が投影した画像を撮像可能な撮像手段が前記入力手段に接続され、前記投影制御手段は、前記第１の画像情報に基づき前記投影手段に前記所定の画像を投影させ、前記撮像手段に前記所定の画像を撮像させることによって前記第２の画像情報を得ることが好ましい。
【０００９】
本発明の好ましい態様としては、前記投影制御手段は、前記第１の領域を生成してから前記第１のオブジェクトに指示指標を加える前に、前記第１の領域内の指示が外れてから第２の時間以上、継続して前記第１の領域内に指示を検出しない制御と、前記投影制御装置は前記第１の領域を消去することが好ましい。
【００１０】
本発明の好ましい態様としては、前記投影制御手段は、前記第１の画像情報に基づいて前記投影手段が投影した画像の投影位置における寸法と、前記第１のオブジェクトが前記第２の画像情報に占める割合と、指示者と前記投影位置との距離と、の少なくとも一つに基づき、前記第１の時間及び前記第２の時間の少なくとも一方を決定することが好ましい。
【００１１】
本発明の好ましい態様としては、前記投影制御手段は、前記第１の画像情報に基づいて前記投影手段が投影した画像の投影位置における寸法と、前記第１のオブジェクトが前記第２の画像情報に占める割合と、指示者と前記投影位置との距離と、の少なくとも一つに基づき、前記第１の領域の寸法を決定することが好ましい。
【００１２】
本発明の好ましい態様としては、前記投影制御手段は、前記オブジェクトが文字と数字との少なくとも一方で構成される場合、前記第１のオブジェクトに含まれる文字若しくは数字のフォントを変更した画像を、前記指示指標を加えた画像として前記投影手段に投影させることが好ましい。
【００１３】
本発明の好ましい態様としては、前記投影制御手段は、前記指示指標が加えられた第１のオブジェクトと、当該第１のオブジェクトに隣接する第２のオブジェクトと、を含む画像を前記投影手段に投影させているとき、前記第２のオブジェクトに対応する領域である第２の領域を生成し、かつ前記第１の領域から前記第２の領域への指示の移動を検出すると、前記第２のオブジェクトに指示指標を加えた画像を前記第１のオブジェクトとともに前記投影手段に投影させることが好ましい。
【００１４】
本発明の好ましい態様としては、前記投影制御手段は、前記第２のオブジェクトに前記第１のオブジェクトに加えた指示指標と同様の指示指標を加えることが好ましい。
【００１５】
本発明の好ましい態様としては、前記投影制御手段は、前記第１のオブジェクトに対して所定の方向に隣接するオブジェクトのみを前記第２のオブジェクトとして取り扱い可能であることが好ましい。
【００１６】
本発明の好ましい態様としては、前記投影制御手段は、前記指示指標が加えられた第１のオブジェクトに対応する第１の領域内に、第３の時間、継続して指示を検出すると、前記指示指標が加えられた第１のオブジェクトに新たな指示指標を加えた画像を前記投影手段に投影させることが好ましい。
【００１７】
本発明の好ましい態様としては、前記投影制御手段は、前記指示指標が加えられた第１のオブジェクトに対応する第１の領域内に、第４の時間、継続して指示を検出すると、前記指示指標が加えられた第１のオブジェクトの当該指示指標を削除した画像を前記投影手段に投影させることが好ましい。
【００１８】
本発明の好ましい態様としては、音声を入力する音声入力手段がさらに接続され、前記投影制御手段は、当該音声入力手段に入力された音声から特定の音声を検出すると、前記指示指標を削除した画像を前記投影手段に投影させることが好ましい。
【００１９】
本発明の好ましい態様としては、前記第１の画像情報内の複数のオブジェクトに前記指示指標が加えられている場合、前記投影制御装置は、少なくとも１つの前記指示指標を削除した画像を前記投影手段に投影させることが好ましい。
【００２０】
本発明の好ましい態様としては、前記投影手段に所定の画像を投影させるための第１の画像情報を通信回線から取得する通信手段がさらに接続され、前記投影制御手段は、前記通信手段から得た前記第１の画像情報に基づき前記投影手段に前記所定の画像を投影させ、前記撮像手段に前記所定の画像を撮像させることによって前記第２の画像情報を得ることが好ましい。
【００２１】
上述した課題を解決し、目的を達成するために、本発明に係る投影方法は、第１の画像情報に基づき、投影手段に所定の画像を投影させる工程と、前記投影手段が投影した前記所定の画像を撮像手段に撮像させる工程と、前記第１の画像情報と、前記撮像手段が前記所定の画像を撮像することによって得られる第２の画像情報とを比較することにより、前記第１の画像情報中に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを第１のオブジェクトとして特定する工程と、前記第１のオブジェクトに対応する領域である第１の領域を生成する工程と、当該領域内に指示を、第１の時間、継続して検出すると、前記第１のオブジェクトに指示指標を加えた画像を前記投影手段に投影させる工程と、を含むことを特徴とする。
【００２２】
上述した課題を解決し、目的を達成するために、本発明に係る投影制御用コンピュータプログラムは、コンピュータに、第１の画像情報に基づき、投影手段に所定の画像を投影させる処理と、前記投影手段が投影した前記所定の画像を撮像手段に撮像させる処理と、前記第１の画像情報と、前記撮像手段が前記所定の画像を撮像することによって得られる第２の画像情報とを比較することにより、前記第１の画像情報中に含まれるオブジェクトに対する指示を検出するとともに、指示されているオブジェクトを第１のオブジェクトとして特定する処理と、前記第１のオブジェクトに対応する領域である第１の領域を生成する処理と、当該領域内に指示を、第１の時間、継続して検出すると、前記第１のオブジェクトに指示指標を加えた画像を前記投影手段に投影させる処理と、を実行させることを特徴とする。
【発明の効果】
【００２３】
本発明は、プロジェクタ等の投影手段が投影した画像に含まれるオブジェクトのうち、ポインタが指示したものにアンダーライン等の指示指標を付与する際に、指示指標やオブジェクトが見難くなることを抑制できる。
【図面の簡単な説明】
【００２４】
【図１】図１は、本実施形態に係る投影制御装置及びこの投影制御装置を用いて投影手段に画像を投影させている状態を示す模式図である。
【図２】図２は、投影手段の光軸と撮像手段の光軸との関係を示す模式図である。
【図３】図３は、本実施形態に係る投影装置の構成図である。
【図４】図４は、本実施形態に係る携帯端末装置の構成図である。
【図５】図５は、本実施形態に係る投影方法の工程を示すフローチャートである。
【図６】図６は、本実施形態に係る投影方法の説明図である。
【図７】図７は、本実施形態に係る投影方法の説明図である。
【図８】図８は、ポインタの指示を検出する手法の説明図である。
【図９】図９は、新たな指示指標を追加した例を示す図である。
【図１０】図１０は、プロジェクタが投影した投影画像の投影位置における寸法に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。
【図１１】図１１は、プロジェクタが投影した投影画像の投影位置における寸法に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。
【図１２】図１２は、情報抽出部が抽出したオブジェクトが第２の画像情報に占める割合に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。
【図１３】１３は、指示者と投影位置との距離に基づいて、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。
【図１４】図１４は、付与対象が文字列である場合に、名詞を抽出して指示指標を付与する工程を示すフローチャートである。
【図１５】図１５は、付与対象が文字である場合に、名詞を抽出して指示指標を付与する工程を示す説明図である。
【図１６−１】図１６−１は、指示指標が付与されたオブジェクトに隣接するオブジェクトに対して、指示指標を付与する手法を示す図である。
【図１６−２】図１６−２は、指示指標が付与されたオブジェクトに隣接するオブジェクトに対して、指示指標を付与する手法を示す図である。
【図１６−３】図１６−３は、指示指標が付与されたオブジェクトに隣接するオブジェクトに対して、指示指標を付与する手法を示す図である。
【図１６−４】図１６−４は、指示指標が付与されたオブジェクトに隣接するオブジェクトに対して、指示指標を付与する手法を示す図である。
【図１７】図１７は、指示指標を削除する第１の手法のフローチャートである。
【図１８】図１８は、指示指標を削除する手法を説明する図である。
【図１９】図１９は、指示指標を削除する第２の手法のフローチャートである。
【図２０】図２０は、指示指標を削除する第３の手法のフローチャートである。
【図２１】図２１は、指示指標を削除する第３の手法の説明図である。
【図２２】図２２は、指示指標を削除する第４の手法の説明図である。
【発明を実施するための形態】
【００２５】
以下、本発明につき図面を参照しつつ詳細に説明する。以下の説明により本発明が限定されるものではない。また、以下の説明における構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。以下に開示する構成要素は、適宜組み合わせることができる。
【００２６】
図１は、本実施形態に係る投影制御装置及びこの投影制御装置を用いて投影手段に画像を投影させている状態を示す模式図である。図１に示す投影制御装置１は、投影手段であるプロジェクタ５に所定の画像を投影させる制御を実行する。プロジェクタ５が投影している画像を投影画像Ｐｉという。また、投影制御装置１は、オブジェクト指示手段であるポインタ８による、投影画像Ｐｉ中の所定のオブジェクトｏｊに対する指示を検出した場合には、オブジェクトｏｊにアンダーライン等の指示指標Ｉを加えて、オブジェクトｏｊを強調した画像を投影させる制御を実行するものである。オブジェクトｏｊは、画像中に配列される文字、数字、図形、文字列、模様等である。
【００２７】
投影制御装置１は、投影制御手段として、処理部２と、記憶部３と、入出力部（ＩＯ）４と、を有する。処理部２は、投影制御装置１の全体的な動作を統括的に制御する機能を有する。すなわち、処理部２は、投影制御装置１の各種の処理が、記憶部３に記憶されるソフトウェアに応じて適切な手順で実行されるように、プロジェクタ５や撮像手段であるカメラ６の動作を制御する。投影制御装置１の各種の処理としては、例えば、プロジェクタ５に所定の画像を投影させる処理や、撮像手段であるカメラ６にプロジェクタ５が投影した画像を撮像させる処理や、本実施形態に係る投影方法を実行する処理等がある。
【００２８】
処理部２は、記憶部３に記憶されているプログラム（例えば、オペレーティングシステムプログラム、アプリケーションプログラム等）から命令コードを順次読み込んで処理を実行する。処理部２は、例えば、マイクロプロセッサユニット（ＭＰＵ：Micro Processing Unit）で構成され、前記ソフトウェアで指示された手順にしたがって上述した投影制御装置１の各種の処理を実行する。
【００２９】
処理部２は、複数のアプリケーションプログラムを実行する機能を有する。処理部２が実行するアプリケーションプログラムとしては、例えば、プロジェクタ５やカメラ６の駆動を制御するアプリケーションプログラムや、各種の画像データ（画像情報）を記憶部３から読み出してデコードするアプリケーションプログラム、及びデコードして得られる画像をプロジェクタ５に投影させるアプリケーションプログラム等の複数のアプリケーションプログラムがある。
【００３０】
本実施形態において、処理部２は、投影部２ａ、投影画像取得部２ｂ、情報抽出部２ｃ、領域生成部２ｄ、判定部２ｅ、画像編集部２ｆ、音声検出部２ｇ、主制御部２ＭＣを有する。投影部２ａ、投影画像取得部２ｂ、情報抽出部２ｃ、領域生成部２ｄ、判定部２ｅ、画像編集部２ｆ、音声検出部２ｇがそれぞれ有する機能は、処理部２及び記憶部３で構成されるハードウェア資源が、処理部２の主制御部２ＭＣが割り当てるタスクを実行することにより実現される。ここで、タスクとは、アプリケーションソフトウェアが行っている処理全体、又は同じアプリケーションソフトウェアが行っている処理のうち、同時に実行できない処理単位である。
【００３１】
投影部２ａは、投影画像記憶部３ｂに記憶されている画像情報をプロジェクタ５に投影させる。情報抽出部２ｃは、プロジェクタ５が現在投影している投影画像Ｐｉの元となっている画像情報（第１の画像情報）と、第１の画像情報に基づいてプロジェクタ５が投影している投影画像Ｐｉをカメラ６が撮像することによって得られる画像情報（第２の画像情報）とを比較して、ポインタ８による指示Ｐｏの位置を抽出する。また、情報抽出部２ｃは、抽出した指示Ｐｏの位置から、指示Ｐｏが指し示しているオブジェクトｏｊを抽出する。領域生成部２ｄは、指示Ｐｏのブレを許容する領域を設定する。判定部２ｅは、指示Ｐｏが領域内にあるか否かを判定する。画像編集部２ｆは、領域生成部２ｄが生成した領域内に指示Ｐｏが所定時間存在する場合には、当該領域内に存在する所定のオブジェクトｏｊに指示指標Ｉを付与した画像情報を生成して、投影画像記憶部３ｂに記憶させる。音声検出部２ｇは音声入力手段であり、音声入力手段であるマイク７が取得した音声から特定の音声を検出する。主制御部２ＭＣは、投影制御装置１のハードウェア資源（処理部２や記憶部３）にタスクを割り当てて、前記ハードウェア資源にタスクに記述された処理を実行させる。
【００３２】
記憶部３には、処理部２での処理に利用されるソフトウェアやデータが記憶されており、上述した、プロジェクタ５やカメラ６の駆動を制御するアプリケーションプログラムを作動させるタスクや、本実施形態に係る投影制御用コンピュータプログラムを作動させるタスクが記憶されている。また、記憶部３には、これらのタスク以外にも、例えば、記憶部３に対する制御に処理部２が用いるソフトウェア、ソフトウェアの処理過程で用いられる一時的なデータ等が記憶されている。記憶部３は、例えば、不揮発性の記憶デバイス（ＲＯＭ：Read Only Memory等の不揮発性半導体メモリ、ハードディスク装置等）や、読み書き可能な記憶デバイス（例えば、ＳＲＡＭ：Static Random Access Memory、ＤＲＡＭ：Dynamic Random Access Memory）等で構成される。
【００３３】
記憶部３は、ドキュメント記憶部３ａ、投影画像記憶部３ｂ、領域記憶部３ｃを有している。ドキュメント記憶部３ａは、投影制御装置１がプロジェクタ５に投影させる画像情報を記憶する。投影画像記憶部３ｂは、初期状態においては、投影制御装置１がプロジェクタ５に投影させる画像情報を記憶しており、本実施形態に係る投影方法を実行する場合には、画像編集部２ｆが生成した画像情報を記憶する。領域記憶部３ｃは、領域生成部２ｄが生成した、指示のブレを許容する領域の情報（例えば、座標）を記憶する。
【００３４】
出力手段及び入力手段としての入出力部４は、投影制御装置１に接続される機器類と処理部２との間に設けられて、両者間の情報のやり取りに用いられる。本実施形態において、入出力部４に接続される機器類は、プロジェクタ５、カメラ６、マイク７である。プロジェクタ５は、投影制御装置１によって制御されて、投影制御装置１の投影画像記憶部３ｂに記憶されている第１の画像情報に基づき、画像を投影する。プロジェクタ５は、例えば、レーザーを光源としたスキャン方式のものを用いることができるが、これに限定されるものではない。カメラ６は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサのような撮像素子を用いて構成されており、プロジェクタ５による投影画像Ｐｉを撮像することができる。図１に示すように、カメラ６の撮像領域Ｃｒは、プロジェクタ５による投影画像Ｐｉをすべて撮像できるように設定される。マイク７は、ポインタ８を取り扱う者（指示者、あるいは講演者）の話す声を取得する。
【００３５】
図２は、投影手段の光軸と撮像手段の光軸との関係を示す模式図である。投影手段であるプロジェクタ５の光軸Ｚｐと、撮像手段であるカメラ６の光軸Ｚｃとは平行であることが好ましい。このようにすれば、カメラ６の撮像領域Ｃｒ内にプロジェクタ５の投影画像Ｐｉがすべて含まれるようにすると、カメラ６は、撮像した投影画像Ｐｉの歪みを最小限に抑えることができる。なお、プロジェクタ５の光軸Ｚｐとカメラ６の光軸Ｚｃとが平行でない場合は、カメラ６に撮像された投影画像Ｐｉは台形形状に歪むが、光軸Ｚｐと光軸Ｚｃとの傾き角度の大きさに応じて、カメラ６が撮像した投影画像Ｐｉに対して投影制御装置１が台形補正をすればよい。光軸Ｚｐと光軸Ｚｃとが平行になるようにすれば、台形補正が不要になるので、投影制御装置１は処理の負荷が軽減され、好ましい。
【００３６】
投影制御装置１は、プロジェクタ５、カメラ６、マイク７とは別体で構成されてもよい。また、パーソナルコンピュータにプロジェクタ５、カメラ６、マイク７を接続するとともに、投影制御装置１の機能を前記パーソナルコンピュータで実現してもよい。この場合、前記パーソナルコンピュータが投影制御装置１となる。このような態様である場合、例えば、前記パーソナルコンピュータが有する集音手段や撮像手段（例えば、モバイルカメラ）をマイク７やカメラ６として利用してもよい。
【００３７】
図３は、本実施形態に係る投影装置の構成図である。図４は、本実施形態に係る携帯端末装置の構成図である。図３に示す投影装置１０は、プロジェクタ５と、カメラ６と、マイク７と、上述した投影制御装置１とを一つの筐体内に備えている。図４に示す携帯端末装置１１は、上述した投影制御装置１と、プロジェクタ５と、カメラ６と、マイク７と、アンテナ１２と投影制御装置１に接続される通信部１３とで構成される通信手段とを一つの筐体内に備えている。このように、携帯端末装置１１は、無線通信機能を有している。携帯端末装置１１は、例えば、携帯電話機であり、アンテナ１２及び通信部１３は、基地局によって割り当てられるチャネルを介し、基地局との間でＣＤＭＡ（Code Division Multiple Access）方式などによる無線信号回線を確立し、基地局との間で電話通信及び情報通信を行う。携帯端末装置１１は、携帯電話機に限定されるものではなく、例えば、ＰＨＳ（Personal Handyphone System）、ＰＤＡ、ゲーム機等であってもよい。次に、本実施形態に係る投影方法を説明する。本実施形態に係る投影方法は、上述した投影制御装置１が、本実施形態に係る投影制御用コンピュータプログラムを実行することにより実現される。
【００３８】
図５は、本実施形態に係る投影方法の工程を示すフローチャートである。図６、図７は、本実施形態に係る投影方法の説明図である。図６は、指示指標を付与する対象が文字又は数字の少なくとも一方で構成される場合を示し、図７は、指示指標を付与する対象が図形である場合を示す。図８は、ポインタの指示を検出する手法の説明図である。以下において、文字列というときには、文字と数字との少なくとも一方で構成されるものをいうこととする。
【００３９】
本実施形態に係る投影制御を図１に示す投影制御装置１が実行するにあたっては、プロジェクタ５が画像を投影していることが前提となる。すなわち、図１に示す投影制御装置１の投影部２ａが、記憶部３の投影画像記憶部３ｂから第１の画像情報を取得し、プロジェクタ５に投影させる。投影画像記憶部３ｂは、初期状態においては、ドキュメント記憶部３ａに記憶されている画像情報と同じものを第１の画像情報として記憶しているが、前記第１の画像情報に指示指標が付与された後は、指示指標が付与された第１の画像情報を、新たな第１の画像情報として記憶する。図４に示す携帯端末装置１１においては、投影制御装置１は、通信手段を介して通信回線から第１の画像情報を取得し、投影画像記憶部３ｂに記憶させる。
【００４０】
ステップＳ１０１において、投影制御装置１の情報抽出部２ｃは、第１の画像情報に基づき、プロジェクタ５が投影している投影画像Ｐｉのオブジェクト上に、ポインタ８による当該オブジェクトに対する指示Ｐｏを検出したか否かを判定する。ポインタ８の指示Ｐｏを検出したか否かは、図８に示すように、情報抽出部２ｃが、プロジェクタ５が投影している投影画像Ｐｉの元の画像情報である第１の画像情報Ｐｄ１と、プロジェクタ５が投影している投影画像Ｐｉをカメラ６が撮像することによって得られる第２の画像情報Ｐｄ２とを比較する。第２の画像情報Ｐｄ２は、図１に示す投影制御装置１の投影画像取得部２ｂがカメラ６から取得する。
【００４１】
情報抽出部２ｃは、第１の画像情報Ｐｄ１と第２の画像情報Ｐｄ２とを比較し、第１の画像情報Ｐｄ１と第２の画像情報Ｐｄ２との差分から、ポインタ８の指示Ｐｏを検出する。すなわち、図８に示す例では、第１の画像情報Ｐｄ１と第２の画像情報Ｐｄ２との差分を求めると、両者の間で異なる情報は、ポインタ８の指示Ｐｏのみになるので、指示Ｐｏを検出できる。ここで、本実施形態においては、ポインタ８にレーザーポインタを用いるが、ポインタ８はこれに限定されるものではなく、例えば、指棒であってもよい。
【００４２】
ステップＳ１０１において、情報抽出部２ｃが指示Ｐｏを検出しなかった場合（ステップＳ１０１、Ｎｏ）、本実施形態に係る投影制御は終了する。ステップＳ１０１において、情報抽出部２ｃが指示Ｐｏを検出した場合（ステップＳ１０１、Ｙｅｓ）、指示Ｐｏによって指示されているオブジェクトを抽出して、ステップＳ１０２へ進む。図６に示す（１）においては、投影画像Ｐｉの文字列オブジェクトｏｊｃの「あ」の位置に、指示Ｐｏが存在する。また、図７に示す（１）においては、投影画像Ｐｉの図形オブジェクトｏｊｆの位置に、指示Ｐｏが存在する。このような投影画像Ｐｉをカメラ６が撮像することによって得られた第２の画像情報Ｐｄ２と、投影画像Ｐｉの元となった第１の画像情報Ｐｄ１とを情報抽出部２ｃが比較し、両者の差分を取ることにより、指示Ｐｏが検出される。そして、情報抽出部２ｃは、検出した指示Ｐｏの位置に存在するオブジェクト（図６の（１）においては、文字列オブジェクトｏｊｃの「あ」であり、図７の（１）においては、図形オブジェクトのｏｊｆ）を抽出する。指示Ｐｏの位置に存在するオブジェクトが、指示Ｐｏによって指示されているオブジェクトであると判断できるからである。抽出されたオブジェクトの情報（座標やフォントの種類等といったオブジェクトの属性に関する情報）は、記憶部３の所定領域へ一時的に記憶される。
【００４３】
ステップＳ１０２において、図１に示す投影制御装置１の領域生成部２ｄは、第１の画像情報Ｐｄ１に、図６、図７の（Ａ）に示すように、抽出されたオブジェクト（図６の（Ａ）においては、文字列オブジェクトｏｊｃの「あ」であり、図７の（Ａ）においては、図形オブジェクトｏｊｆ）に対応する第１の領域である領域Ａｐを生成する。生成された領域Ａｐは、記憶部３の領域記憶部３ｃが記憶する。
【００４４】
領域Ａｐは、ポインタ８を持つ指示者の手ブレ等によって、ポインタ８の指示Ｐｏが本来指示すべきオブジェクトからずれた場合に、そのずれを許容する領域である。領域Ａｐは、予め設定して記憶部３の所定領域に記憶させておいてもよいし、指示Ｐｏに基づいて抽出されたオブジェクトの寸法から決定してもよい。後者の場合、領域生成部２ｄは、例えば、抽出されたオブジェクトの周囲の所定範囲（例えば、数画素〜数十画素分）に領域Ａｐを生成する。
【００４５】
また、抽出されたオブジェクトが文字列オブジェクトｏｊｃの一部である場合、領域生成部２ｄは、抽出されたオブジェクトの周囲の所定範囲、かつ当該オブジェクトから文字列の配列方向（通常は、右から左に向かう方向）に向かって所定の範囲に領域Ａｐを生成してもよい。ポインタ８で文字列オブジェクトｏｊｃを強調する場合、文字列オブジェクトｏｊｃに含まれる単独の文字のみならず、文字列の配列方向に向かって指示Ｐｏを移動させて、複数の文字を強調することが多い。文字列の配列方向に向かって所定の範囲に領域Ａｐを生成すれば、図６の（Ａ）に示すように、抽出されたオブジェクトを含む文字列オブジェクトｏｊｃを領域Ａｐに含ませることができる。これによって、これからポインタ８の指示Ｐｏが移動すると予想される部分にも領域Ａｐを生成することができるので、ポインタ８による指示Ｐｏの移動を確実に検出して、強調したい文字列に対して確実に指示指標を付与することができる。
【００４６】
本実施形態において、領域生成部２ｄが生成した領域Ａｐは、通常はプロジェクタ５によって投影されない不可視の領域になる。しかし、領域Ａｐを可視として、プロジェクタ５に投影させてもよい。このようにすると、強調したいオブジェクトの周りに領域Ａｐが顕在化して表示されるので、領域Ａｐ内を狙ってポインタ８で指示Ｐｏを与えればよい。これによって、領域Ａｐがポインタ８の指示Ｐｏのガイドとなるので、手ブレ自体を抑制する効果が得られる。
【００４７】
領域Ａｐが生成されたら、ステップＳ１０３へ進む。ステップＳ１０３において、図１に示す投影制御装置１の判定部２ｅは、領域生成部２ｄが生成した領域Ａｐ内に、指示Ｐｏを検出したか否かを判定する。判定部２ｅが、領域Ａｐ内に指示Ｐｏを検出したと判定したらステップＳ１０４へ進む。ステップＳ１０４において、判定部２ｅは、領域Ａｐ内に指示Ｐｏを検出した時間が、予め定めた第１の時間（Ｔ１）、経過したか否かを判定する。経過していない場合（ステップＳ１０４、Ｎｏ）、判定部２ｅは、第１の時間（Ｔ１）が経過するまで、ステップＳ１０３、ステップＳ１０４を繰り返す。領域Ａｐ内に指示Ｐｏを検出した時間が、第１の時間（Ｔ１）、経過した場合（ステップＳ１０４、Ｙｅｓ）、ステップＳ１０５へ進む。このように、ステップＳ１０３、ステップＳ１０４によって、判定部２ｅは、領域Ａｐ内に、指示Ｐｏを、第１の時間（Ｔ１）、継続して検出したか否かを判定する。
【００４８】
例えば、図６の（２）において、ポインタ８による指示Ｐｏは、文字列オブジェクトｏｊｃの「あいう」を強調したいため、この部分を文字列の配列方向に向かって移動しているが、手ブレの影響により指示Ｐｏの軌跡ｔｒは歪んでいる。同様に、図７の（２）において、ポインタ８による指示Ｐｏは、図形オブジェクトｏｊｆを強調したいため、この部分を囲むように移動しているが、手ブレの影響により指示Ｐｏの軌跡ｔｒは歪んでいる。しかし、投影制御装置１の領域生成部２ｄは、図６の（Ｂ）や図７の（Ｂ）に示すように、ステップＳ１０１で検出された指示Ｐｏに指示されているオブジェクトに対応して領域Ａｐを生成しているため、指示Ｐｏが移動する過程で大きく揺れ動いたとしても、その軌跡ｔｒは、領域Ａｐ内に留まる。ステップＳ１０３、ステップＳ１０４で、判定部２ｅは、領域Ａｐ内に、指示Ｐｏを、第１の時間（Ｔ１）、継続して検出したか否かを判定することにより、指示者が、ポインタ８の指示Ｐｏにより強調したいオブジェクトを示したい意思を有していることを確認する。
【００４９】
ステップＳ１０４でＹｅｓと判定された場合、ポインタ８の指示Ｐｏにより強調したいオブジェクトを示したいという指示者の意思が確認できるので、ステップＳ１０５へ進む。ステップＳ１０５において、判定部２ｅは、指示指標を付与する対象（付与対象）を決定する。例えば、図６の（Ｂ）においては、領域Ａｐ内の「あいう」が付与対象ｏｊａとなる。付与対象ｏｊａは、例えば、指示Ｐｏの移動範囲から決定される。すなわち、判定部２ｅは、指示Ｐｏが移動した範囲に存在するオブジェクトを付与対象ｏｊａとする。また、例えば、図７の（Ｂ）においては、領域Ａｐ内の図形オブジェクトが付与対象ｏｊａとなる。この場合、例えば、判定部２ｅは、指示Ｐｏの軌跡ｔｒと重なる図形オブジェクトを付与対象ｏｊａとする。
【００５０】
次に、ステップＳ１０６へ進み、図１に示す投影制御装置１の画像編集部２ｆは、図６の（Ｃ）、図７の（Ｃ）に示すように、付与対象ｏｊａに指示指標Ｉを付与した画像情報（第１の画像情報）Ｐｄ１ａを生成する。例えば、図６の（Ｃ）に示すように、付与対象ｏｊａが文字列オブジェクトの一部である場合、画像編集部２ｆは、付与対象ｏｊａに含まれる文字若しくは数字のフォントを変更した画像を、プロジェクタ５に投影させる画像の元となる第１の画像情報Ｐｄ１ａとして生成し、投影部２ａが指示指標Ｉを加えた画像としてプロジェクタ５に投影させる。図６の（Ｃ）で示す例では、フォントを下線付きに変更することで、下線を指示指標Ｉとして付与対象ｏｊａに付与している。指示指標Ｉは下線に限定されるものではなく、例えば、付与対象ｏｊａを太文字にしたり、字体を変更したり、色を付したりすることを指示指標としてもよい。このように、フォントを変更することで、簡易に指示指標を付与対象ｏｊａに付与できる。
【００５１】
図７の（Ｃ）に示すように、付与対象ｏｊａが図形オブジェクトである場合、画像編集部２ｆは、付与対象ｏｊａの周りを線で取り囲んだ画像を、プロジェクタ５に投影させる画像の元となる第１の画像情報Ｐｄ１ａとして生成し、投影部２ａが指示指標Ｉを加えた画像としてプロジェクタ５に投影させる。図７の（Ｃ）で示す例では、付与対象ｏｊａを取り囲む線を指示指標Ｉとして付与対象ｏｊａに付与している。指示指標Ｉは囲む線に限定されるものではなく、例えば、付与対象ｏｊａに色を付すことを指示指標としてもよい。
【００５２】
ステップＳ１０６で、画像編集部２ｆが、付与対象ｏｊａに指示指標Ｉを付与した第１の画像情報Ｐｄ１ａを生成したら、この第１の画像情報Ｐｄ１ａを記憶部３の投影画像記憶部３ｂに記憶させる。その後、ステップＳ１０７へ進み、投影部２ａは、投影画像記憶部３ｂから第１の画像情報Ｐｄ１ａを取得し、これに基づいた画像をプロジェクタ５に投影させる。図６の（３）に示すように、第１の画像情報Ｐｄ１ａによるプロジェクタ５の投影画像Ｐｉは、文字列オブジェクトｏｊｃの付与対象ｏｊａ（図６（３）の「あいう））に、指示指標Ｉとして下線が付されたものとなる。また、図７の（３）に示すように、図形オブジェクトが付与対象ｏｊａである場合、第１の画像情報Ｐｄ１ａによるプロジェクタ５の投影画像Ｐｉは、付与対象ｏｊａの周りを線で囲んだものとなる。
【００５３】
図９は、新たな指示指標を追加した例を示す図である。プロジェクタ５が第１の画像情報Ｐｄ１ａに基づいた画像を投影したら、ステップＳ１０８へ進む。ステップＳ１０８において、判定部２ｅは、予め定めた所定の第３の時間（Ｔ３）、領域Ａｐ内に指示Ｐｏを継続して検出したか否かを判定する。なお、領域Ａｐ内のオブジェクトには、ステップＳ１０５によって、すでに指示指標Ｉが付与されている。Ｔ３は、例えば、Ｔ１よりも長くすることができる。判定部２ｅが、第３の時間（Ｔ３）継続して領域Ａｐ内に指示Ｐｏを検出しない場合（ステップＳ１０８、Ｎｏ）、本実施形態に係る投影方法は終了する。
【００５４】
判定部２ｅが、第３の時間（Ｔ３）継続して領域Ａｐ内に指示Ｐｏを検出した場合（ステップＳ１０８、Ｙｅｓ）、ステップＳ１０９へ進む。ステップＳ１０９において、画像編集部２ｆは、図９に示すように、指示指標Ｉが付与された第１の画像情報Ｐｄ１ａを投影画像記憶部３ｂから取得し、これに、新たな指示指標Ｉｎを追加した第１の画像情報Ｐｄ１ｂを生成し、投影画像記憶部３ｂに記憶させる。そして、ステップＳ１１０へ進み、投影部２ａは、投影画像記憶部３ｂから第１の画像情報Ｐｄ１ｂを取得し、これに基づいた画像をプロジェクタ５に投影させる。
【００５５】
図９に示す例において、新たな指示指標Ｉｎは、付与対象ｏｊａに付与された指示指標Ｉとしての下線に追加される下線である。新たな指示指標Ｉｎはこれに限定されるものではなく、例えば、指示指標Ｉとしての下線をより太くするものであってもよいし、前記下線の色を変更するものであってもよいし、付与対象ｏｊａの色を変更するものであってもよい。新たな指示指標Ｉｎは、指示指標Ｉと同様に、画像編集部２ｆが、付与対象ｏｊａのフォントを変更した画像を第１の画像情報Ｐｄ１ｂとして生成することによって、付与対象ｏｊａに付与される。このように、領域Ａｐ内に指示Ｐｏを所定時間置くことで、簡易な操作によって、指示指標Ｉを付与したオブジェクトをさらに強調させてプロジェクタ５に投影させることができる。なお、新たな指示指標Ｉｎを付与する操作は、これに限定されるものではなく、例えば、指示指標追加のボタンを有する画像をプロジェクタ５に投影させ、これに指示Ｐｏを置くものであってもよいし、指示指標Ｉが付与されたオブジェクト上を指示Ｐｏで複数回往復させるようなものであってもよい。次に、ステップＳ１０３へ戻って説明する。
【００５６】
ステップＳ１０３において、判定部２ｅが、領域Ａｐ内に指示Ｐｏを検出しないと判定したらステップＳ１１１へ進む。ステップＳ１１１において、判定部２ｅは、指示Ｐｏを領域Ａｐ内に検出しない状態で、予め定めた所定の第２の時間（Ｔ２）が経過したか否かを判定する。この状態は、プロジェクタ５の投影画像Ｐｉ内のオブジェクトに指示指標を加える前の状態である。指示Ｐｏを領域Ａｐ内に検出しない時間が第２の時間（Ｔ２）以下である場合（ステップＳ１１１、Ｎｏ）、ステップＳ１０３へ戻り、判定部２ｅは、領域Ａｐ内に指示Ｐｏを検出したか否かを判定する。Ｔ２は、例えば、Ｔ１よりも短くすることができる。
【００５７】
ステップＳ１０３、ステップＳ１１１で、判定部２ｅが、領域Ａｐ内に指示Ｐｏを検出せずに第２の時間（Ｔ２）が検出したか否かを判定することにより、指示Ｐｏの動きが手ブレによるものであるか否かを判定することができる。すなわち、ステップＳ１０３において指示Ｐｏが領域Ａｐ内に検出された後、指示Ｐｏが領域Ａｐの外に出た時間が第２の時間（Ｔ２）経過していなければ（ステップＳ１１１、Ｎｏ）、指示者は、ポインタ８の指示Ｐｏにより強調したいオブジェクトを示したい意思を有しているが、手ブレによってやむを得ず指示Ｐｏが領域Ａｐの外に出てしまったと判断できる。一方、指示Ｐｏが領域Ａｐの外に出てから第２の時間（Ｔ２）が経過した場合には、指示者は、ポインタ８の指示Ｐｏを、最初に指示したオブジェクトから変更したい意思を有していると判断できる。
【００５８】
したがって、本実施形態では、指示Ｐｏが領域Ａｐの外に出た時間が第２の時間（Ｔ２）、経過したと判定部２ｅが判定した場合（ステップＳ１１１、Ｙｅｓ）、ステップＳ１１２へ進み、領域生成部２ｄは、領域Ａｐを消去する。具体的には、領域生成部２ｄは、領域記憶部３ｃに記憶されている領域Ａｐを消去する。これによって、強調したい新たなオブジェクトを指示者がポインタ８で指示する操作に備える。なお、プロジェクタ５が投影している投影画像の元となっている第１の画像情報が変更された場合、領域Ａｐは領域記憶部３ｃから消去され、また、指示指標Ｉを有する第１の画像情報は、投影画像記憶部３ｂから削除される。
【００５９】
ポインタ８の指示Ｐｏの軌跡をそのまま指示指標としてオブジェクトに付与すると、手ブレの影響が指示指標Ｉに現れて、指示指標Ｉがオブジェクトに重なったり、指示指標Ｉ自体が重なったりしてオブジェクトが見難くなってしまう。しかし、本実施形態では、領域Ａｐ内において指示Ｐｏに指示されているオブジェクトを抽出し、抽出されたオブジェクトの固定位置（例えば、文字の下や図形の周囲）に指示指標Ｉを付与するので、ポインタ８の指示Ｐｏの軌跡をそのまま指示指標としてオブジェクトに付与する場合と比較して、指示者が意図したオブジェクトに対して適切に指示指標を付与できる。これによって、指示Ｐｏの手ブレの影響が指示指標Ｉに現れることを回避できるので、指示指標Ｉがオブジェクトに重なったり、指示者が意図しないオブジェクトに指示指標Ｉが付与されたり、指示指標Ｉ自体が重なったりしてオブジェクトや指示指標Ｉが見難くなることを回避できる。また、見る者に不快な印象を与えるおそれもほとんど発生しない。さらに、オブジェクトや指示指標Ｉが見難くなることを回避できるので、指示者が強調したいオブジェクトをより明確にすることができる。
【００６０】
また、上述した特許文献１に開示された技術では、発光ポインタによる光点が移動した場合、光の軌跡に対応した表示を付与した画像を逐一更新する必要があり、画像情報を記憶させるために大量の記憶領域が必要であった。しかし、本実施形態では、オブジェクトの周囲に形成された領域Ａｐ内に指示Ｐｏが検出された場合に、オブジェクトへ指示指標Ｉが付与される。このため、指示Ｐｏが移動しても、原則として指示指標Ｉは変更されないので、指示Ｐｏの移動により、画像を逐一更新する必要はない。このため、本実施形態では、画像情報を記憶させるための記憶領域は小さくて済む。
【００６１】
また、本実施形態では、手ブレによって領域Ａｐから指示Ｐｏが出てしまった場合でも、第２の時間（Ｔ２）以内であれば手ブレであると判定して領域Ａｐを維持する。これによって、本実施形態では、指示指標Ｉを付与したいオブジェクトから手ブレによって指示Ｐｏが一時的に外れた場合でも、指示者による指示指標Ｉを付与したいオブジェクトの指定を維持することができる。特に、図４に示すような携帯端末装置１１は、携帯端末装置１１の操作ボタンを操作することによって、投影される画像自体が動くことも想定される。また、携帯端末装置１１を一方の手に持って画像を投影させながら、他方の手でポインタ８を操作するような場合、手ブレの影響はより大きくなる。本実施形態によれば、このような場合でも、指示者による指示指標Ｉを付与したいオブジェクトの指定を維持することができるので、特に、プロジェクタ５を備える携帯端末装置１１に対して好ましい。
【００６２】
本実施形態に係る投影方法において、ステップＳ１０４における第１の時間（Ｔ１）及びステップＳ１１１における第２の時間（Ｔ２）は、第１の画像情報Ｐｄ１に基づいてプロジェクタ５が投影した投影画像Ｐｉの投影位置における寸法と、情報抽出部２ｃが抽出したオブジェクトが第２の画像情報に占める割合と、指示者と投影位置との距離と、の少なくとも一つに基づいて変更してもよい。次に、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する手法について説明する。
【００６３】
図１０、図１１は、プロジェクタが投影した投影画像の投影位置における寸法に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。図１に示すプロジェクタが投影した投影画像Ｐｉの投影位置における寸法が小さくなるにしたがって、手ブレの影響により、図６、図７に示す領域Ａｐ外へ指示Ｐｏが出る確率は高くなる。したがって、投影位置における投影画像Ｐｉの寸法が小さくなるにしたがって、第２の時間（Ｔ２）を大きくし、第１の時間（Ｔ１）を小さくすることが好ましい。これによって、手ブレの影響をより確実に取り除き、投影画像の寸法や指示指標を付与しようとするオブジェクトの寸法によって、オブジェクトに指示指標を付与できない状況を回避することができる。
【００６４】
図１０に示すように、カメラ６によって撮像された画像に基づき、図１に示す投影制御装置１の画像編集部２ｆによって生成された第２の画像情報Ｐｄ２を示している。第２の画像情報から、プロジェクタ５が投影した投影画像Ｐｉの投影位置における寸法（縦方向の寸法）２×Ｙｐ１は、カメラ６の撮像領域Ｃｒ内に投影画像Ｐｉが入っていることから、式（１）で求めることができる。ここで、図１０のＺｃは、カメラ６の光軸であり、Ｙｐ１は光軸Ｚｃから投影画像Ｐｉの一辺までの距離、Ｙｐ２は光軸Ｚｃから撮像領域Ｃｒの一辺までの距離、Ｙｐ３は撮像領域Ｃｒの一辺と投影画像Ｐｉの一辺との距離である。Ｙｐ１、Ｙｐ２、Ｙｐ３は、いずれも画素数であり、第２の画像情報Ｐｄ２において、１画素の寸法は等しい。
２×Ｙｐ１＝２×（Ｙｐ２−Ｙｐ３）・・（１）
【００６５】
図１１から、カメラ６と投影位置Ｐｐとの距離Ｌと、光軸Ｚｃから投影画像Ｐｉの投影位置Ｐｐにおける撮像領域Ｃｒの一辺までの距離Ｙ２との関係は、カメラ６の撮像角度２×αを用いて、式（２）のように表すことができる。距離Ｌは、距離センサ９によって求められる。
Ｙ２＝Ｌ×ｔａｎα・・（２）
【００６６】
第２の画像情報Ｐｄ２の１画素の寸法をａとすると、Ｙ２／Ｙｐ２は、投影画像Ｐｉの投影位置Ｐｐにおける、第２の画像情報Ｐｄ２の１画素の寸法になる。したがって、投影位置Ｐｐにおける投影画像Ｐｉの寸法２×Ｙ１は、式（３）で求めることができる。
２×Ｙ１＝２×Ｙｐ１×Ｙ２／Ｙｐ２＝２×（Ｙ２−Ｙ２×Ｙｐ３／Ｙｐ２）＝２×Ｌ×（１−Ｙｐ３／Ｙｐ２）×ｔａｎα・・（３）
【００６７】
例えば、本実施形態に係る投影制御を実行する際に、図１に示す投影制御装置１の主制御部２ＭＣが、投影位置Ｐｐにおける投影画像Ｐｉの寸法を求めるタスクを実行する。そして、主制御部２ＭＣは、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更するタスクを実行して、得られた投影画像Ｐｉの投影位置Ｐｐにおける寸法に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する。
【００６８】
図１２は、情報抽出部が抽出したオブジェクトが第２の画像情報に占める割合に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。図１２は、図１に示す情報抽出部２ｃが抽出したオブジェクトｏｊが第２の画像情報Ｐｄ２に占める割合を示している。投影位置における投影画像Ｐｉに占めるオブジェクトｏｊの寸法が小さくなると、第２の画像情報Ｐｄ２に占めるオブジェクトｏｊの割合（以下、オブジェクト比率という）が小さくなるといえる。投影位置における投影画像Ｐｉに占めるオブジェクトｏｊの寸法が小さくなると、手ブレの影響により、指示Ｐｏが図６、図７に示す領域Ａｐ外へ出る確率は高くなる。したがって、オブジェクト比率が小さくなるにしたがって、第２の時間（Ｔ２）を大きくし、第１の時間（Ｔ１）を小さくすることが好ましい。これによって、手ブレの影響をより確実に取り除くことができる。その結果、投影画像の寸法等によって、オブジェクトに指示指標を付与できない状況を回避できる。
【００６９】
オブジェクト比率は、例えば、第２の画像情報Ｐｄ２の全面積（あるいは全画素数）Ｓ２に占めるオブジェクトｏｊの面積（あるいは画素数）Ｓｏｊの割合であり、Ｓｏｊ／Ｓ２となる。例えば、本実施形態に係る投影制御を実行する際に、図１に示す投影制御装置１の主制御部２ＭＣが、オブジェクト比率を求めるタスクを実行する。そして、主制御部２ＭＣは、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更するタスクを実行して、得られたオブジェクト比率に基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する。
【００７０】
図１３は、指示者と投影位置との距離に基づいて、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する例を説明するための図である。図１３に示す指示者Ｈとプロジェクタ５が投影した投影画像Ｐｉとの距離Ｌｈｐが大きくなる程、手ブレの影響により、オブジェクトｏｊに対する指示Ｐｏが図６、図７に示す領域Ａｐの外へ出る確率は高くなる傾向がある。このため、指示者Ｈと投影位置との距離Ｌｈｐが大きくなるにしたがって、第２の時間（Ｔ２）を大きくし、第１の時間（Ｔ１）を小さくすることが好ましい。これによって、手ブレの影響をより確実に取り除くことができるので、投影画像の寸法等によって、オブジェクトに指示指標を付与できない状況を回避できる。
【００７１】
投影制御装置１に距離センサ９を接続し、距離センサ９から投影画像Ｐｉの投影位置Ｐｐまでの距離をＬ、及び距離センサ９から指示者Ｈまでの距離Ｌｈを測定する。指示者Ｈと投影画像Ｐｉとの距離Ｌｈｐは、Ｌ−Ｌｈで求めることができる。例えば、本実施形態に係る投影制御を実行する際に、図１に示す投影制御装置１の主制御部２ＭＣが、指示者Ｈと投影画像Ｐｉとの距離Ｌｈｐを求めるタスクを実行する。そして、主制御部２ＭＣは、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更するタスクを実行して、得られた指示者Ｈと投影画像Ｐｉとの距離Ｌｈｐに基づき、第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更する。
【００７２】
本実施形態に係る投影方法においては、上述した３手法のうち少なくとも一つによって第１の時間（Ｔ１）及び第２の時間（Ｔ２）を変更することが好ましい。なお、上述した３手法のうち２以上を組み合わせることにより、手ブレの影響をより正確に見積もることができる。その結果、ステップＳ１０４、ステップＳ１１１において、指示者の意思をより精度よく判断できる。
【００７３】
また、上述した３手法のうち少なくとも一つを用いて、図６、図７に示す領域Ａｐの寸法を変更してもよい。例えば、投影位置における投影画像Ｐｉの寸法が小さくなるにしたがって手ブレの影響が顕著になるので、領域Ａｐの寸法を大きくすることが好ましい。また、オブジェクト比率が小さくなるにしたがって手ブレの影響が顕著になるので、領域Ａｐの寸法を大きくすることが好ましい。さらに、指示者Ｈと投影位置Ｐｐとの距離Ｌｈｐが大きくなるにしたがって手ブレの影響が顕著になるので、領域Ａｐの寸法を大きくすることが好ましい。このようにすることで、手ブレの影響をより確実に取り除くことができる。なお、上述した３手法のうち２以上を組み合わせてもよいことは、すでに述べた通りである。
【００７４】
図１４は、付与対象が文字列である場合に、名詞を抽出して指示指標を付与する工程を示すフローチャートである。図１５は、付与対象が文字である場合に、名詞を抽出して指示指標を付与する工程を示す説明図である。図６、図７に示す指示指標Ｉを付与したいオブジェクトが文字列である場合、名詞を強調したい場合が多い。このため、図５に示すステップＳ１０５において付与対象を決定する場合には、文字列から名詞を抽出して付与対象としてもよい。次に、図１４、図１５を用いてこの手法を説明する。
【００７５】
本実施形態に係る投影方法のステップＳ１０５において、付与対象を決定するにあたり、ステップＳ２０１において、判定部２ｅは、図１５に示す領域Ａｐ内のオブジェクトが文字であるか否かを判定する。例えば、判定部２ｅは、領域Ａｐ内のオブジェクトの属性情報から、当該オブジェクトが文字であるか否かを判定する。領域Ａｐ内のオブジェクトが文字であった場合（ステップＳ２０１、Ｙｅｓ）、ステップＳ２０２へ進み、情報抽出部２ｃは、領域Ａｐ内のオブジェクトから名詞を抽出する。例えば、図１５に示すように、領域Ａｐ内のオブジェクトが「あんたは、えらい。」という文字列オブジェクトｏｊｃである場合、情報抽出部２ｃは、ステップＳ２０２においてはこの文字列オブジェクトｏｊｃから名詞を抽出する。
【００７６】
文字列オブジェクトｏｊｃから名詞を抽出する場合、例えば、形態素解析を用いる。形態素解析とは、コンピュータによる自然言語処理技術の一つであり、文章を意味のある単語に区切り、辞書を利用して品詞や内容を判別することである。形態素解析は、いわゆるかな漢字変換や、機械翻訳等に用いられる。形態素とは、文章の要素のうち、意味を持つ最小の単位である。
【００７７】
ステップＳ２０２において、情報抽出部２ｃは、文字列オブジェクトｏｊｃに対して形態素解析を実行し、名詞を抽出する。図１５に示す例では、「あんた」が名詞であるので、情報抽出部２ｃは、「あんた」を名詞として抽出する。そして、ステップＳ２０３に進み、判定部２ｅは、付与対象ｏｊａを名詞、より具体的には文字列オブジェクトｏｊｃを構成する「あんた」という名詞とする。そして、図５に示すステップＳ１０６に進み、画像編集部２ｆは、付与対象ｏｊａである「あんた」という名詞に指示指標Ｉを付与した画像情報（第１の画像情報）を生成する。ステップＳ２０１において、領域Ａｐ内のオブジェクトが文字でなかった場合（ステップＳ２０１、Ｎｏ）、ステップＳ２０４に進み、判定部２ｅは、付与対象を図とする。その後、図５に示すステップＳ１０６に進み、画像編集部２ｆは、付与対象である図に指示指標を付与した画像情報（第１の画像情報）を生成する。
【００７８】
この手法によれば、指示指標Ｉを付与したいオブジェクトが文字列である場合、強調したい名詞に対して優先的に指示指標Ｉを付与することができるので、操作性が向上する。本実施形態では、指示指標Ｉを付与したいオブジェクトが文字列である場合、付与対象を名詞としたが、名詞と助詞とで構成される文節を付与対象としてもよい。例えば、図１５に示す例では、名詞である「あんた」と、これの直後に付く助詞「は」とを一つの文節として付与対象としてもよい。この場合、「あんたは」という文節に、指示指標Ｉが付与される。また、文節には、句読点を含めてもよい。
【００７９】
図１６−１〜図１６−４は、指示指標が付与されたオブジェクトに隣接するオブジェクトに対して、指示指標を付与する手法を示す図である。例えば、図１６−１に示す文字列オブジェクトｏｊｃが図１に示すプロジェクタ５によって投影されている場合を考える。この文字列オブジェクトｏｊｃは、オブジェクトｏｊ０、ｏｊ１、ｏｊ２の３個に分けることができ、オブジェクトｏｊ１に対して領域Ａｐ１が生成されるとともに、指示指標Ｉ１が付与されている。すなわち、図１に示す投影制御装置１の投影部２ａは、指示指標Ｉ１の付されたオブジェクトｏｊｃ１と、指示指標が付されていないオブジェクトｏｊｃ０、ｏｊｃ２とをプロジェクタ５に投影させている。
【００８０】
指示指標Ｉ１が加えられたオブジェクトｏｊ１を第１のオブジェクトとし、第１のオブジェクトに隣接するオブジェクトを第２のオブジェクトとすると、第２のオブジェクトはオブジェクトｏｊ２、ｏｊ０になる。このとき、領域生成部２ｄは、図１６−２に示すように、オブジェクトｏｊ２に対応する領域である第２の領域Ａｐ２を生成する。
【００８１】
この状態で、図１６−３に示すように、情報抽出部２ｃが、オブジェクトｏｊ１に対応する領域Ａｐ１からオブジェクトｏｊ２に対応する領域Ａｐ２への指示Ｐｏの移動を検出すると、画像編集部２ｆは、オブジェクトｏｊ２に指示指標Ｉ２を加えた画像を第１の画像情報として生成し、投影部２ａは、この第１の画像情報に基づいた画像をプロジェクタ５に投影させる。これにより、図１６−４に示すように、指示指標Ｉ２が付与されたオブジェクトｏｊ２が、指示指標Ｉ１が付与されたオブジェクトｏｊ１とともに、プロジェクタ５によって投影される。
【００８２】
指示指標Ｉ１が付与されたオブジェクトｏｊ１に隣接するオブジェクトｏｊ２は、次に指示指標が付与される可能性が高い。上記手法によれば、指示指標が付与される可能性の高いオブジェクトｏｊ２の周りに予め領域Ａｐ２を生成しておき、指示Ｐｏが領域Ａｐ２へ移動したことをトリガーとして、領域Ａｐ２内のオブジェクトｏｊ２に指示指標Ｉ２を付与する。このように、上記手法は、指示指標が付与される可能性が高いオブジェクトｏｊ２に対して指示指標Ｉ２を付与する準備を予めすることができる。その結果、迅速に指示指標Ｉ２をオブジェクトｏｊ２に付与することができるので、操作性及び使用感を向上させることができる。また、指示者が次に指示指標を付与したい可能性が高いオブジェクトに対して指示指標を付与するので、指示者が意図しないオブジェクトに指示指標が付与される状況を回避しやすくなる。
【００８３】
指示指標Ｉ１が付与されたオブジェクトｏｊ１に隣接するオブジェクトは、オブジェクトｏｊ０、ｏｊ２の二つがある。このうち、指示指標Ｉ１が付与されたオブジェクトｏｊ１に対して所定の方向に隣接するオブジェクトのみに対応する領域を生成することが好ましい。所定の方向は、文字列が記述される方向が好ましく、通常は右から左であり、上記手法でも同様である。このように、文字列が記述される方向に隣接するオブジェクト（上記例ではオブジェクトｏｊ２）のみに対応する領域Ａｐ２を生成することで、次に指示指標を付与したいオブジェクトに対して確実に指示指標を付与することができる。
【００８４】
また、オブジェクトｏｊ２に付与される指示指標Ｉ２は、オブジェクトｏｊ１に付与された指示指標Ｉ１と同様のものであることが好ましい。このようにすれば、隣接するオブジェクトｏｊ１、ｏｊ２に付与される指示指標が異なることによる違和感を低減できるとともに、両方のオブジェクトに付与される指示指標に統一感が生まれるので、美観が向上する。なお、隣接するオブジェクトｏｊ１、ｏｊ２に付与される指示指標を異ならせることが除外されるものではない。次に、指示指標を削除する手法を説明する。
【００８５】
図１７は、指示指標を削除する第１の手法のフローチャートである。図１８は、指示指標を削除する手法を説明する図である。本実施形態において、オブジェクトに付与された指示指標は、所定の動作によって削除される。指示指標を削除する第１の手法を実行する場合、ステップＳ３０１において、図１に示す投影制御装置１の判定部２ｅは、投影画像記憶部３ｂに記憶されている第１の画像情報に基づき、現在プロジェクタ５に投影されている投影画像中に指示指標があるか否かを判定する。
【００８６】
判定部２ｅが、指示指標はないと判定した場合（ステップＳ３０１、Ｎｏ）、第１の手法は終了する。判定部２ｅが、指示指標はあると判定した場合（ステップＳ３０１、Ｙｅｓ）、ステップＳ３０２へ進む。ステップＳ３０２において、判定部２ｅは、図１８に示すように、指示指標Ｉが存在する領域Ａｐ内に、予め定めた所定の第４の時間（Ｔ４）、情報抽出部２ｃが指示Ｐｏを検出したか否かを判定する。Ｔ４は、例えば、Ｔ３よりも長くすることができる。判定部２ｅが、第４の時間（Ｔ４）、指示Ｐｏは検出されていないと判定した場合（ステップＳ３０２、Ｎｏ）、第１の手法は終了する。
【００８７】
判定部２ｅが、第４の時間（Ｔ４）、指示Ｐｏが検出されたと判定した場合（ステップＳ３０２、Ｙｅｓ）、ステップＳ３０３へ進む。ステップＳ３０３において、画像編集部２ｆは、図１８の下段に示すように、オブジェクトｏｊに付与された指示指標Ｉを削除した画像を生成し、これを第１の画像情報として投影画像記憶部３ｂへ記憶させる。投影部２ａは、投影画像記憶部３ｂへ記憶された前記第１の画像情報をプロジェクタ５に投影させる。すると、図１８に示すように、領域Ａｐ内のオブジェクトｏｊに付された指示指標Ｉが削除された画像が投影されることになる。
【００８８】
第１の手法は、指示指標Ｉが存在する領域Ａｐ内で、ポインタ８の指示Ｐｏが第４の時間（Ｔ４）、継続して検出された場合には、指示者は指示指標Ｉを削除する意思があると判断し、指示指標Ｉを削除する。これによって、簡単な操作で指示指標Ｉを削除できるので、操作性、利便性が向上する。
【００８９】
図１９は、指示指標を削除する第２の手法のフローチャートである。第２の手法は、指示者の所定の音声によって指示指標を削除するものである。第２の手法を実行するにあたり、ステップＳ４０１において、判定部２ｅは、投影画像記憶部３ｂに記憶されている第１の画像情報に基づき、現在プロジェクタ５に投影されている投影画像中に指示指標があるか否かを判定する。
【００９０】
判定部２ｅが、指示指標はないと判定した場合（ステップＳ４０１、Ｎｏ）、第２の手法は終了する。判定部２ｅが、指示指標はあると判定した場合（ステップＳ４０１、Ｙｅｓ）、ステップＳ４０２へ進む。ステップＳ４０２において、判定部２ｅは、図１８に示すように、指示指標Ｉが存在する領域Ａｐ内に、情報抽出部２ｃが指示Ｐｏを検出したか否かを判定する。判定部２ｅが、指示Ｐｏは検出されたと判定した場合（ステップＳ４０２、Ｙｅｓ）、第２の手法は終了する。
【００９１】
判定部２ｅが、指示Ｐｏが検出されていないと判定した場合（ステップＳ４０２、Ｎｏ）、ステップＳ４０３へ進む。ステップＳ４０３において、判定部２ｅは、音声入力があったか否か、すなわち、図１に示す音声検出部２ｇが、マイク７が取得した音声を検出したか否かを判定する。判定部２ｅが音声入力はないと判定した場合（ステップＳ４０３、Ｎｏ）、第２の手法は終了する。判定部２ｅが音声入力はあったと判定した場合（ステップＳ４０３、Ｙｅｓ）、ステップＳ４０４へ進む。
【００９２】
ステップＳ４０４において、判定部２ｅは、所定の音声であるか否か、すなわち、図１に示す音声検出部２ｇによって検出された音声が、特定の音声であるか否かを判定する。特定の音声とは、例えば、指示者の発する「削除」、「消去」等といった指示指標の削除を要求する音声である。判定部２ｅが所定の音声でないと判定した場合（ステップＳ４０４、Ｎｏ）、第２の手法は終了する。判定部２ｅが所定の音声であると判定した場合（ステップＳ４０４、Ｙｅｓ）、指示者が指示指標を削除する意思があると判断できるので、ステップＳ４０５へ進む。
【００９３】
ステップＳ４０５において、画像編集部２ｆは、図１８の下段に示すように、オブジェクトｏｊに付与された指示指標Ｉを削除した画像を生成し、これを第１の画像情報として投影画像記憶部３ｂへ記憶させる。指示指標Ｉが付与されたオブジェクトｏｊが複数存在する場合、画像編集部２ｆは、すべてのオブジェクトｏｊに付与された指示指標Ｉを削除した画像を生成し、これを第１の画像情報として投影画像記憶部３ｂへ記憶させる。投影部２ａは、投影画像記憶部３ｂへ記憶された前記第１の画像情報をプロジェクタ５に投影させる。すると、図１８に示すように、領域Ａｐ内のオブジェクトｏｊに付された指示指標Ｉが削除された画像が投影されることになる。指示指標Ｉが付与されたオブジェクトｏｊが複数存在する場合、すべての指示指標Ｉが削除された画像が投影される。
【００９４】
第２の手法では、指示者の特定の音声に基づいて、指示指標Ｉを削除する。これによって、簡単な操作で指示指標Ｉを削除できるので、操作性、利便性が向上する。また、指示者の両手が塞がっている場合でも、音声によって指示指標Ｉを削除できるので、利便性がさらに向上する。
【００９５】
図２０は、指示指標を削除する第３の手法のフローチャートである。図２１は、指示指標を削除する第３の手法の説明図である。第３の手法は、投影されている投影画像中において指示指標が付与されているオブジェクト上で、指示の所定の動作を検出した場合には、指示指標を削除するものである。第３の手法を実行するにあたり、ステップＳ５０１、ステップＳ５０２は、第２の手法におけるステップＳ４０１、ステップＳ４０２（図１９参照）と同様なので、説明を省略する。
【００９６】
ステップＳ５０２において、判定部２ｅが、指示Ｐｏが検出されていないと判定した場合（ステップＳ５０２、Ｎｏ）、第３の手法は終了する。ステップＳ５０２において、判定部２ｅが、指示Ｐｏが検出されたと判定した場合（ステップＳ５０２、Ｙｅｓ）、ステップＳ５０３へ進む。
【００９７】
ステップＳ５０３において、判定部２ｅは、情報抽出部２ｃが、指示Ｐｏの所定の動作を抽出したか否かを判定する。指示Ｐｏの所定の動作とは、例えば、指示指標Ｉが加えられているオブジェクトｏｊ上で、×を描くような動作である。この動作は、図２１に示すように、指示がＰｏ１、Ｐｏ２、Ｐｏ３、Ｐｏ４の順に動き、その軌跡は、ｔｒ１、ｔｒ２、ｔｒ３のようになる。そして、軌跡ｔｒ１とｔｒ３とが交差するようになる。このような指示Ｐｏの動作を情報抽出部２ｃは抽出していないと判定部２ｅが判定した場合（ステップＳ５０３、Ｎｏ）、第３の手法は終了する。
【００９８】
指示Ｐｏの所定の動作を情報抽出部２ｃが抽出したと判定部２ｅが判定した場合（ステップＳ５０３、Ｙｅｓ）、指示者が指示指標を削除する意思があると判断できるので、ステップＳ５０４へ進む。ステップＳ５０４において、画像編集部２ｆは、オブジェクト上で指示Ｐｏの所定の動作が検出されたものに対応する指示指標Ｉを削除した画像を生成し、これを第１の画像情報として投影画像記憶部３ｂへ記憶させる。投影部２ａは、投影画像記憶部３ｂへ記憶された前記第１の画像情報をプロジェクタ５に投影させる。すると、領域内のオブジェクトに付された指示指標Ｉが削除された画像が投影されることになる。第３の手法では、指示者による指示の所定の動作に基づいて、指示指標を削除する。これによって、簡単な操作で指示指標を削除できるので、操作性、利便性が向上する。
【００９９】
図２２は、指示指標を削除する第４の手法の説明図である。第４の手法は、図２２に示すように、図１に示すプロジェクタ５の投影画像Ｐｉに、指示指標を削除するために指定する領域（削除指示領域）ＤＲを含ませて投影させる。そして、削除指示領域ＤＲ上に指示Ｐｏが所定時間存在することを情報抽出部２ｃが抽出したら、画像編集部２ｆは、指示指標Ｉが付与されているオブジェクトの指示指標Ｉを削除した画像を生成し、これを第１の画像情報として投影画像記憶部３ｂへ記憶させる。投影部２ａは、投影画像記憶部３ｂへ記憶された前記第１の画像情報をプロジェクタ５に投影させる。すると、オブジェクトに付された指示指標Ｉが削除された画像が投影されることになる。第４の手法において、指示指標Ｉを削除するための動作は、削除指示領域ＤＲを指示Ｐｏで指定するだけである。これによって、指示指標を削除する操作が理解しやすく、かつ簡単な操作で指示指標を削除できるので、操作性、利便性がさらに向上する。
【産業上の利用可能性】
【０１００】
以上のように、本発明に係る投影制御装置及び投影方法、並びに投影制御用コンピュータプログラムは、プロジェクタ等の画像投影手段によって投影された画像内に存在する所定のオブジェクトを、ポインタ等の指示によって強調させて表示させることに有用である。
【符号の説明】
【０１０１】
１  投影制御装置
２  処理部
２ＭＣ  主制御部
２ａ  投影部
２ｂ  投影画像取得部
２ｃ  情報抽出部
２ｄ  領域生成部
２ｅ  判定部
２ｆ  画像編集部
２ｇ  音声検出部
３  記憶部
３ａ  ドキュメント記憶部
３ｂ  投影画像記憶部
３ｃ  領域記憶部
４  入出力部
５  プロジェクタ
６  カメラ
７  マイク
８  ポインタ
９  距離センサ
１０  投影装置
１１  携帯端末装置
１２  アンテナ
１３  通信部
【図１】
2011150609.tif 000003
【図２】
2011150609.tif 000004
【図３】
2011150609.tif 000005
【図４】
2011150609.tif 000006
【図５】
2011150609.tif 000007
【図６】
2011150609.tif 000008
【図７】
2011150609.tif 000009
【図８】
2011150609.tif 000010
【図９】
2011150609.tif 000011
【図１０】
2011150609.tif 000012
【図１１】
2011150609.tif 000013
【図１２】
2011150609.tif 000014
【図１３】
2011150609.tif 000015
【図１４】
2011150609.tif 000016
【図１５】
2011150609.tif 000017
【図１６−１】
2011150609.tif 000018
【図１６−２】
2011150609.tif 000019
【図１６−３】
2011150609.tif 000020
【図１６−４】
2011150609.tif 000021
【図１７】
2011150609.tif 000022
【図１８】
2011150609.tif 000023
【図１９】
2011150609.tif 000024
【図２０】
2011150609.tif 000025
【図２１】
2011150609.tif 000026
【図２２】
2011150609.tif 000027