(57)【要約】【課題】コンピュータ制御を利用したプレゼンテーション制御において、多数のコマンドを設定することができ、また、コマンドの誤選出を防ぐ。【解決手段】照射点が形成する表示パターンによってコマンドを設定するものであって、少なくとも２つの表示パターンの組み合わせに相関付けてコマンドを設定するものであり、表示パターンを組み合わせることによって、設定することができるコマンドの個数を増加させることができ、また、異なるコマンドを誤って選出することを防ぐことができる。【選択図】図１
2011008667.tif 000002
【特許請求の範囲】
【請求項１】
コンピュータから出力される電子画像に基づく画像をプロジェクタで投影するプレゼンテーション装置を制御する制御方法であって、
プロジェクタによってコンピュータから出力される電子画像に基づいてスクリーン上に画像を投影する投影工程と、
レーザポインタにより前記スクリーン上に照射点を照射する照射工程と
前記スクリーン上に表示された少なくとも照射点を撮像する撮像工程と、
前記撮像工程による撮像で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出工程と、
前記抽出工程で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出工程と、
前記選出工程で選出したコマンドによってコンピュータを制御する制御工程と
を備えることを特徴とする、プレゼンテーション制御方法。
【請求項２】
前記表示パターンは、連続する照射点が形成する方向性を有する線状パターンであり、前記表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせであり、
前記コマンドは、前記線状パターンの方向の組み合わせに相関付けられ、
前記抽出工程は、前記連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定工程と、前記線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出工程とを有し、
前記選出工程は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、前記検出工程で検出した線状パターンの方向の組み合わせに対応するコマンドを選出することを特徴とする、請求項１に記載のプレゼンテーション制御方法。
【請求項３】
前記線状パターンの方向の組み合わせは、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせであることを特徴とする、請求項２に記載のプレゼンテーション制御方法。
【請求項４】
前記表示パターンは、照射点の継続時間パターンであり、
前記表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせであり、
前記コマンドは、前記継続時間パターンの時間幅の組み合わせに相関付けられ、
前記抽出工程は、前記照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定工程と、前記判定による継続時間パターンの時間幅を検出する検出工程とを有し、
前記選出工程は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、前記検出工程で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出することを特徴とする、請求項１に記載のプレゼンテーション制御方法。
【請求項５】
前記照射点は、赤外線照射による照射点であり、
前記撮像工程は、スクリーン上に照射された赤外線の照射点を撮像することを特徴とする、請求項１から４の何れか一つに記載のプレゼンテーション制御方法。
【請求項６】
前記レーザポインタは赤外線を照射し、
前記照射工程は、前記赤外線照射によりスクリーン上に赤外線の照射点を照射し、
前記撮像工程は、前記照射工程による赤外線の照射点を撮像し、
前記投影工程は、前記電子画像に前記赤外線の照射点を重ね、当該重ねた画像をスクリーン上に投影することを特徴とする、請求項１から５の何れか一つに記載のプレゼンテーション制御方法。
【請求項７】
コンピュータから出力される電子画像に基づく画像をプロジェクタで投影するプレゼンテーション装置を制御する制御装置であって、
コンピュータから出力される電子画像に基づいてスクリーン上に画像を投影するプロジェクタと、
前記スクリーン上に表示された少なくとも照射点を撮像する撮像手段とを含む、プレゼンテーション装置を制御する制御装置であって、
前記撮像手段で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出手段と、
前記抽出手段で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出手段とを備え、
前記選出手段で選出したコマンドによってコンピュータを制御することによって、プレゼンテーション装置を制御することを特徴とする、プレゼンテーション制御装置。
【請求項８】
前記表示パターンは、連続する照射点が形成する方向性を有する線状パターンであり、前記表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせであり、
前記コマンドは、前記線状パターンの方向の組み合わせに相関付けられ、
前記抽出手段は、前記連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定手段と、前記線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出手段とを有し、
前記選出手段は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、前記検出手段で検出した線状パターンの方向の組み合わせに対応するコマンドを選出することを特徴とする、請求項７に記載のプレゼンテーション制御装置。
【請求項９】
前記線状パターンの方向の組み合わせは、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせであることを特徴とする、請求項８に記載のプレゼンテーション制御装置。
【請求項１０】
前記表示パターンは、照射点の継続時間パターンであり、
前記表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせであり、
前記コマンドは、前記継続時間パターンの時間幅の組み合わせに相関付けられ、
前記抽出手段は、前記照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定手段と、前記判定による継続時間パターンの時間幅を検出する検出手段とを有し、
前記選出手段は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、前記検出手段で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出することを特徴とする、請求項７に記載のプレゼンテーション制御装置。
【請求項１１】
前記照射点は、赤外線照射による照射点であり、
前記撮像手段は、スクリーン上に照射された赤外線の照射点を撮像することを特徴とする、請求項７から１０の何れか一つに記載のプレゼンテーション制御装置。
【請求項１２】
前記レーザポインタは赤外線を照射し、
前記照射手段は、前記赤外線照射によりスクリーン上に赤外線の照射点を照射し、
前記撮像手段は、前記照射手段による赤外線の照射点を撮像し、
前記投影手段は、前記電子画像に前記赤外線の照射点を重ね、当該重ねた画像をスクリーン上に投影することを特徴とする、請求項７から１１の何れか一つに記載のプレゼンテーション制御装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータの画像情報をスクリーン上に画像投影するプレゼンテーション制御方法およびプレゼンテーション制御装置に関する。
【背景技術】
【０００２】
コンピュータの制御において、ＧＵＩ（グラフィカル・ユーザー・インターフェース）を用いて制御する手法が多く採用されている。このＧＵＩでは、コンピュータの操作画面上にファイルやアプリケーションを表すアイコンを表示し、このアイコンに対してポインタをマウス等の指示手段で移動させて重ね、マウスのクリック動作やドラック動作によって制御の指示を行う。
【０００３】
一方、コンピュータを用いたプレゼンテーションや講演が行われている。このプレゼンテーションでは、コンピュータの画像情報をスクリーン上にプロジェクタによって投影し、投影画像を用いて説明を行っている。このスクリーン上に投影した投影画像を用いたプレゼンテーションにおいて、スクリーン上に表示されたアイコンを指示棒で指示し、このアイコンと指示棒とをカメラで撮像し、画像認識することによってアイコンの位置に対応して設定されたコマンドを選出することが記載される（特許文献１参照）。
【０００４】
投影画像上の指示を指示棒等で行う場合には、操作者がスクリーンの近くに移動する必要があり、一方、コンピュータを制御するにはコンピュータに戻る必要がある。このようなコンピュータとスクリーンとの間の行き来を不要として、コンピュータから離れた位置からコンピュータを制御することが求められる。このような要求に対して、種々の技術（特許文献２〜特許文献６）が提案されている。
【０００５】
特許文献２〜特許文献６には、指示棒に代えてレーザビーム等の光を用いたビームポインタによってスクリーン上の位置を指示するものが示されている。
【０００６】
特許文献２には、ビームポインタに遮光手段を設けることによって、スクリーン上に投影されるマークの形状を異ならせ、このマークの形状をカメラで撮像し、マークの形状にに対応したコマンドを選出することが記載されている。
【０００７】
特許文献３には、スクリーンの一部に操作領域を設定し、この操作領域上のビームポインタの光の通過をカメラで捉え、通過した操作領域に対応したコマンドを選出することが記載されている。
【０００８】
特許文献４には、レーザポインタによってスクリーン上に形成される空間パターンをカメラで捕捉し、空間パターンに対応したコマンドを選出することが記載されている。
【０００９】
特許文献５には、スクリーン上のポインタ光の軌跡パターンを抽出し、軌跡パターンに対応したコマンドを選出することが記載されている。
【００１０】
特許文献６には、スクリーン上でレーザポインタによる指示位置座標を検出し、レーザ光の変調パターンに対応したコマンドを選出することが記載されている。
【先行技術文献】
【特許文献】
【００１１】
【特許文献１】特開平７−４９７４８号公報
【特許文献２】特開２００６−１６３９２２号公報
【特許文献３】特開平１１−２１２７２４号公報
【特許文献４】特許第３９０９５５４号
【特許文献５】特開２００６−２８４８７４号公報
【特許文献６】特開２００７−９４６６１号公報
【発明の概要】
【発明が解決しようとする課題】
【００１２】
特許文献２〜特許文献６で示される技術によれば、操作者がコンピュータとスクリーンとの間の行き来することなく、コンピュータから離れた位置からコンピュータを制御することができるという効果を奏することができるものの、各コマンドはビームポインタによるマークの形状（特許文献２）、スクリーン上に設定した操作領域（特許文献３）、スクリーン上に表示される空間パターンや軌跡パターン（特許文献４，５）、レーザ光の変調パターン（特許文献６）に対応して設定されるため、設定されるコマンドの個数が制限され、多数のコマンドを設定する際に支障が生じるという問題がある。
【００１３】
また、空間パターンや軌跡パターンに対応してコマンドを設定する場合には、空間パターンや軌跡パターンの認識精度によっては誤認識するおそれがあるという問題がある。この空間パターンや軌跡パターンは、スクリーン上に照射されるレーザビームの照射位置によって形成されるが、通常、レーザビームは操作者がレーザポインタ装置を手で持って操作するものであるため、レーザビームの照射位置はスクリーン上で振られることになり、操作者が意図する形状と異なる形状として認識され、誤ったコマンドが選出されたり、コマンドの設定が困難となるおそれがあるという問題がある。
【００１４】
空間パターンや軌跡パターンの認識精度を高めるには、複雑な演算処理を要することになり、演算時間の長時間化やコストの上昇化を招くことになる。
【００１５】
そこで、本願発明は上記した課題を解決し、コンピュータ制御、およびコンピュータ制御を利用したプレゼンテーション制御、コンピュータ制御でのコマンド選出において、多数のコマンドを設定することができることを目的とする。また、コマンドの誤選出を防ぐことを目的とする。
【課題を解決するための手段】
【００１６】
本発明は、照射点が形成する表示パターンによってコマンドを設定するものであって、少なくとも２つの表示パターンの組み合わせに相関付けてコマンドを設定するものであり、表示パターンを組み合わせることによって、設定することができるコマンドの個数を増加させることができ、また、異なるコマンドを誤って選出することを防ぐことができる。組み合わせる表示パターンの個数は２個に限らず、３個以上とすることができる。
【００１７】
本発明は、プレゼンテーションの制御方法およびプレゼンテーションの制御装置の態様を含むものであり、両態様は、上記した少なくとも２つの表示パターンの組み合わせに相関付けてコマンドを設定するという技術事項を共通に備え、設定することができるコマンドの個数を増加させることができ、また、異なるコマンドを誤って選出することを防ぐことができるという効果を奏するものである。
【００１８】
また、本発明は、プレゼンテーションの制御方法およびプレゼンテーションの制御装置の態様に限らず、コンピュータの制御およびコマンド選出の方法並びに装置の各態様につても適用することができ、プレゼンテーションの制御態様と同様に、少なくとも２つの表示パターンの組み合わせに相関付けてコマンドを設定するという技術事項を共通に備える構成とすることで、設定することができるコマンドの個数の増加、コマンドの誤選出の回避等の効果を同様に奏することができる。
【００１９】
（プレゼンテーションの制御方法の態様）
本発明のプレゼンテーションの制御方法の態様は、コンピュータから出力される電子画像に基づく画像をプロジェクタで投影するプレゼンテーション装置を制御する制御方法であり、プロジェクタによってコンピュータから出力される電子画像に基づいてスクリーン上に画像を投影する投影工程と、レーザポインタにより前記スクリーン上に照射点を照射する照射工程と、スクリーン上に表示された少なくとも照射点を撮像する撮像工程と、撮像工程による撮像で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出工程と、抽出工程で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出工程と、選出工程で選出したコマンドによってコンピュータを制御する制御工程の各工程を備える。
【００２０】
このプレゼンテーションの制御方法によれば、コンピュータを遠隔制御することによって、コンピュータから離れた位置でプレゼンテーションを行うことができる。
【００２１】
表示パターンは、複数の形態とすることができる。
表示パターンの第１の形態は、連続する照射点が形成する方向性を有する線状パターンである。表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせとすることができる。コマンドは、線状パターンの方向の組み合わせに相関付けられる。
【００２２】
抽出工程は、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定工程と、線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出工程とを有する。
【００２３】
選出工程は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、検出工程で検出した線状パターンの方向の組み合わせに対応するコマンドを選出する。
【００２４】
また、線状パターンの方向の組み合わせは、例えば、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせとすることができる。
【００２５】
表示パターンの第２の形態は、照射点の継続時間パターンである。表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせとすることができる。コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【００２６】
抽出工程は、照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定工程と、判定による継続時間パターンの時間幅を検出する検出工程とを有する。
【００２７】
選出工程は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、検出工程で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出する。
【００２８】
照射点は、赤外線照射による照射点とすることができる。撮像工程は、スクリーン上に照射された赤外線の照射点を撮像し、この撮像画像に基づいて表示パターンを抽出し、抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する。赤外線を用いることによって、コマンドを選出するための表示パターンは目視で識別することができないため、制御動作を第３者に隠した状態でプレゼンテーション制御を行うことができる。
【００２９】
赤外線を用いたプレゼンテーション制御において、照射工程において、レーザポインタによる赤外線照射によってスクリーン上に赤外線の照射点を照射し、撮像工程において、照射工程による赤外線の照射点を撮像し、投影工程において、電子画像に赤外線の照射点を重ね、重ねた画像をスクリーン上に投影する。
【００３０】
電子画像に赤外線の照射点を重ねた画像をスクリーン上に投影することによって、赤外線で確認することができない照射点および表示パターンをスクリーン上で確認することができる。
【００３１】
（プレゼンテーション制御装置）
本発明のプレゼンテーションの制御装置の態様は、コンピュータから出力される電子画像に基づく画像をプロジェクタで投影するプレゼンテーション装置を制御する制御装置であり、コンピュータから出力される電子画像に基づいてスクリーン上に画像を投影するプロジェクタと、スクリーン上に表示された少なくとも照射点を撮像する撮像手段とを含むプレゼンテーション装置を制御する制御装置である。
【００３２】
プレゼンテーション制御装置は、撮像手段で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出手段と、抽出手段で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出手段とを備え、選出手段で選出したコマンドによってコンピュータを制御する。
【００３３】
表示パターンは、複数の形態とすることができる。
表示パターンの第１の形態は、連続する照射点が形成する方向性を有する線状パターンであり、表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせであり、コマンドは、線状パターンの方向の組み合わせに相関付けられる。
【００３４】
この形態でのプレゼンテーションの制御装置において、抽出手段は、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定手段と、線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出手段とを有する。選出手段は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、検出手段で検出した線状パターンの方向の組み合わせに対応するコマンドを選出する。
【００３５】
線状パターンの方向の組み合わせは、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせとすることができる。
【００３６】
表示パターンの第２の形態は、照射点の継続時間パターンであり、表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせであり、コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【００３７】
この形態でのプレゼンテーションの制御装置において、抽出手段は、照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定手段と、判定による継続時間パターンの時間幅を検出する検出手段とを有する。選出手段は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、検出手段で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出する。
【００３８】
照射点は、赤外線照射による照射点とすることができる。撮像手段は、スクリーン上に照射された赤外線の照射点を撮像し、この撮像画像に基づいて表示パターンを抽出し、抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する。
【００３９】
赤外線を用いることによって、コマンドを選出するための表示パターンは目視で識別することができないため、制御動作を第３者に隠した状態でプレゼンテーション制御を行うことができる。
【００４０】
赤外線を用いたプレゼンテーション制御装置において、レーザポインタによる赤外線照射によってスクリーン上に赤外線の照射点を照射し、撮像手段によって赤外線の照射点を撮像し、投影手段によって電子画像に赤外線の照射点を重ね、重ねた画像をスクリーン上に投影する。
【００４１】
電子画像に赤外線の照射点を重ねた画像をスクリーン上に投影することによって、赤外線で確認することができない照射点および表示パターンをスクリーン上で確認することができる。
【００４２】
本発明は、プレゼンテーション制御方法やプレゼンテーション制御装置の態様の他に、コンピュータの制御に関する方法および装置の態様、コマンド選出に関する方法および装置の態様に適用することができる。
【００４３】
（コンピュータの制御方法の態様）
本発明のコンピュータの制御方法の態様は、面上を撮像して撮像画像を取得する撮像工程と、撮像工程で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出工程と、抽出工程で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出工程とを備え、選出工程で選出したコマンドによってコンピュータを制御する。このコンピュータの制御方法によれば、コンピュータを遠隔制御することができる。
【００４４】
表示パターンは、複数の形態とすることができる。
表示パターンの第１の形態は、連続する照射点が形成する方向性を有する線状パターンである。表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせとすることができる。コマンドは、線状パターンの方向の組み合わせに相関付けられる。
【００４５】
抽出工程は、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定工程と、線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出工程とを有する。
【００４６】
選出工程は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、検出工程で検出した線状パターンの方向の組み合わせに対応するコマンドを選出する。
【００４７】
また、線状パターンの方向の組み合わせは、例えば、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせとすることができる。
【００４８】
表示パターンの第２の形態は、照射点の継続時間パターンである。表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせとすることができる。コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【００４９】
抽出工程は、照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定工程と、判定による継続時間パターンの時間幅を検出する検出工程とを有する。
【００５０】
選出工程は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、検出工程で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出する。
【００５１】
照射点は、赤外線照射による照射点とすることができる。撮像工程は、スクリーン上に照射された赤外線の照射点を撮像し、この撮像画像に基づいて表示パターンを抽出し、抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する。
【００５２】
赤外線を用いることによって、コマンドを選出するための表示パターンは目視で識別すことができないため、制御動作を第３者に隠した状態でコンピュータ制御を行うことができる。
【００５３】
（コンピュータの制御装置の態様）
本発明のコンピュータの制御装置の態様は、面上を撮像して撮像画像を取得する撮像手段と、撮像手段で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出手段と、抽出手段で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出手段とを備え、選出手段で選出したコマンドによってコンピュータを制御する。このコンピュータの制御装置によれば、コンピュータを遠隔制御することができる。
【００５４】
表示パターンは、複数の形態とすることができる。
表示パターンの第１の形態は、連続する照射点が形成する方向性を有する線状パターンであり、表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせであり、コマンドは、線状パターンの方向の組み合わせに相関付けられる。
【００５５】
この形態でのコンピュータの制御装置において、抽出手段は、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定手段と、線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出手段とを有する。選出手段は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、検出手段で検出した線状パターンの方向の組み合わせに対応するコマンドを選出する。
【００５６】
線状パターンの方向の組み合わせは、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせとすることができる。
【００５７】
表示パターンの第２の形態は、照射点の継続時間パターンであり、表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせであり、コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【００５８】
この形態でのコンピュータの制御装置において、抽出手段は、照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定手段と、判定による継続時間パターンの時間幅を検出する検出手段とを有する。選出手段は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、検出手段で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出する。
【００５９】
照射点は、赤外線照射による照射点とすることができる。撮像手段は、スクリーン上に照射された赤外線の照射点を撮像し、この撮像画像に基づいて表示パターンを抽出し、抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する。
【００６０】
赤外線を用いることによって、コマンドを選出するための表示パターンは目視で識別することができないため、制御動作を第３者に隠した状態でコンピュータ制御を行うことができる。
【００６１】
（コマンド選出方法）
本発明のコマンドに選出方法の態様は、コンピュータ上で動作させるコマンドを選出する方法であり、面上を撮像して撮像画像を取得する撮像工程と、撮像工程で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出工程と、抽出工程で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出工程とを備える。
【００６２】
このコマンド選出方法によれば、コンピュータを遠隔制御することによって、コンピュータから離れた位置でコマンドを選出することができる。
【００６３】
表示パターンは、複数の形態とすることができる。
表示パターンの第１の形態は、連続する照射点が形成する方向性を有する線状パターンであり、表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせであり、コマンドは、線状パターンの方向の組み合わせに相関付けられる。
【００６４】
抽出工程は、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定工程と、線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出工程とを有する。選出工程は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、検出工程で検出した線状パターンの方向の組み合わせに対応するコマンドを選出する。
【００６５】
また、線状パターンの方向の組み合わせは、例えば、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせとすることができる。
【００６６】
表示パターンの第２の形態は、照射点の継続時間パターンである。表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせとすることができる。コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【００６７】
抽出工程は、照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定工程と、判定による継続時間パターンの時間幅を検出する検出工程とを有する。
【００６８】
選出工程は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、検出工程で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出する。
【００６９】
照射点は、赤外線照射による照射点とすることができる。撮像工程は、スクリーン上に照射された赤外線の照射点を撮像し、この撮像画像に基づいて表示パターンを抽出し、抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する。赤外線を用いることによって、コマンドを選出するための表示パターンは目視で識別することができないため、制御動作を第３者に隠した状態でコマンドを選出することができる。
【００７０】
（コマンド選出装置）
本発明のコマンドに選出装置の態様は、コンピュータ上で動作させるコマンドを選出する装置であり、面上を撮像して撮像画像を取得する撮像手段と、撮像手段で取得した複数の撮像画像から、面上に照射された複数の照射点が形成する少なくとも２つの表示パターンを抽出する抽出手段と、抽出手段で抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する選出手段とを備える。
【００７１】
表示パターンは、複数の形態とすることができる。
表示パターンの第１の形態は、連続する照射点が形成する方向性を有する線状パターンであり、表示パターンの組み合わせは、少なくとも２つの線状パターンの方向の組み合わせであり、コマンドは、線状パターンの方向の組み合わせに相関付けられる。
【００７２】
この形態でのコマンド選出装置において、抽出手段は、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する判定手段と、線状パターンの始点から終点に向かう方向から線状パターンの方向を検出する検出手段とを有する。選出手段は、線状パターンの方向の組み合わせに相関付けられた複数のコマンドの中から、検出手段で検出した線状パターンの方向の組み合わせに対応するコマンドを選出する。
【００７３】
線状パターンの方向の組み合わせは、上下方向の組み合わせ、左右方向の組み合わせ、上下方向と左右方向の組み合わせとすることができる。
【００７４】
表示パターンの第２の形態は、照射点の継続時間パターンであり、表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせであり、コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【００７５】
この形態でのコマンド選出装置において、抽出手段は、照射点の連続撮像の有無によって継続時間パターンの有無を判定する判定手段と、判定による継続時間パターンの時間幅を検出する検出手段とを有する。選出手段は、継続時間パターンの時間幅の組み合わせに相関付けられた複数のコマンドの中から、検出手段で検出した継続時間パターンの時間幅の組み合わせに対応するコマンドを選出する。
【００７６】
照射点は、赤外線照射による照射点とすることができる。撮像手段は、スクリーン上に照射された赤外線の照射点を撮像し、この撮像画像に基づいて表示パターンを抽出し、抽出した表示パターンの組み合わせに相関付けられたコマンドを選出する。
【００７７】
赤外線を用いることによって、コマンドを選出するための表示パターンは目視で識別することができないため、制御動作を第３者に隠した状態でコンピュータ制御を行うことができる。
【発明の効果】
【００７８】
以上説明したように、本発明によれば、コンピュータ制御を利用したプレゼンテーション制御において、多数のコマンドを設定することができ、また、コマンドの誤選出を防ぐことができる。
【図面の簡単な説明】
【００７９】
【図１】本発明のプレゼンテーション制御装置の例を説明するための図である。
【図２】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するためのフローチャートである。
【図３】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するためのフローチャートである。
【図４】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図５】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図６】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図７】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図８】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図９】本発明の線状パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図１０】本発明の照射点の継続時間パターンの組み合わせからコマンドを選出する例を説明するためのフローチャートである。
【図１１】本発明の照射点の継続時間パターンの組み合わせからコマンドを選出する例を説明するためのフローチャートである。
【図１２】本発明の照射点の継続時間パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図１３】本発明の照射点の継続時間パターンの組み合わせからコマンドを選出する例を説明するための図である。
【図１４】本発明のコンピュータ制御装置の例を説明するための図である。
【図１５】本発明のプレゼンテーション制御装置の別の例を説明するための図である。
【発明を実施するための形態】
【００８０】
以下、本発明の実施の形態について、図を参照しながら詳細に説明する。
【００８１】
以下、本発明のプレゼンテーション制御装置、およびコンピュータ制御装置の構成例および動作例について図１〜図１５を用いて説明する。以下では、主にプレゼンテーション制御装置について図１〜図１３、図１５を用いて説明し、コンピュータ制御装置について図１４を用いて説明する。
【００８２】
［プレゼンテーション制御装置］
はじめにプレゼンテーション制御装置の例について説明する。図１において、プレゼンテーション制御装置１Ａは、プロジェクタ２とレーザポインタ３とスクリーン４と撮像手段５と制御装置１０を備える。プレゼンテーションは、プロジェクタ２によってスクリーン４上に画像を投影し、レーザポインタ３によってスクリーン４上に照射点を表示することで行われる。レーザポインタ３から照射される照射点は、スクリーン４上の位置を指示する機能の他に、コンピュータを制御する操作手段としての機能を有する。例えば、マウスが行うクリック操作やドラック操作をエミュレートして、コンピュータ２０側で制御操作を行う代わりに、レーザポインタ３によるスクリーン４上の照射点１１０の動作によってコンピュータ２０を制御し、プレゼンテーションの操作を制御する。
【００８３】
このプレゼンテーション制御は、スクリーン４上に表示された照射点１１０を撮像手段５で撮像し、撮像手段５で取得された撮像画像に基づいて制御装置１０によって行われる。
【００８４】
プロジェクタ２は、コンピュータ２０から入力した電子画像に基づいて、スクリーン４上に画像を投影する。電子画像は、コンピュータ２０内で形成する他、コンピュータ２０内あるいは外部周辺機器（図示していない）に格納されたデータ、あるいは、外部機器（図示していない）やインターネットやイントラネット等の通信経路（図示していない）を介して取得してデータを用いることができる。
【００８５】
また、プロジェクタ２は、上記したコンピュータ２０や外部（図示していない）から得られる電子画像を表示する他、スクリーン４上に照射された照射点１１０の位置データに基づいて、照射点や照射点の軌跡によって形成される表示パターンを表示することができる。
【００８６】
レーザポインタ３から照射される照射光が可視光である場合には、スクリーン４に照射される照射点１１０は目視で確認することができる。これに対して、レーザポインタ３から照射される照射光として赤外線を用いる場合には、スクリーン４に照射される照射点１１０は目視で確認することができない。
【００８７】
この赤外線を照射する場合には、撮像手段５として赤外線カメラを用いてスクリーン４上の照射点１１０を撮像し、この撮像画像からスクリーン４上の照射点１１０の位置を検出し、この照射点１１０の位置データに基づいて照射点や照射点の軌跡によって形成される表示パターンの電子画像を形成し、前記したコンピュータ２０側で用意した電子画像と画像合成し、この画像合成した電子画像を用いてプロジェクタ２からスクリーン４上に投影する。
【００８８】
これによって、スクリーン４には、コンピュータ２０側で用意した電子画像の画像と共に、レーザポインタ３で照射した照射点１１０や表示パターンが投影されることになる。なお、コンピュータ２０側で用意した電子画像と撮像手段５によって得られた照射点１１０の位置データによる画像との合成は、コンピュータ２０側で行う他、プロジェクタ２側で行ってもよい。
【００８９】
レーザポインタ３から赤外線を照射する構成によれば、スクリーン４上において、赤外線自体による照射点１１０は目視されず、照射点１１０の位置に基づいて形成された画像の表示像を目視することになるため、照射点１１０のブレを低減することができる他、表示パターン等の任意の形状に変換した像を表示することができる。
【００９０】
撮像手段５は、スクリーン４上に表示された少なくとも照射点１１０を撮像して撮像画像を制御装置１０に送る。レーザポインタ３から可視光が照射され、スクリーン上４に照射される照射点１１０が可視光像である場合には、撮像手段５はこの可視光像を撮像する。また、レーザポインタ３から赤外線が照射され、スクリーン上４に照射される照射点１１０が赤外線像である場合には、撮像手段５はこの赤外線像を撮像する。
【００９１】
制御装置１０は、撮像手段５で撮像された撮像画像のデータを入力し、この撮像画像に基づいてコンピュータを制御するコマンドを生成する。制御装置１０は、生成したコマンドをコンピュータ２０に送り、コンピュータ２０はこのコマンドに基づいて制御を行ってプレゼンテーションの制御を行う。
【００９２】
なお、プレゼンテーション制御としては、例えば、スクリーン４上に表示される画像の切り換え、画像の拡大・縮小、画像の移動、スクリーン上への文字や図形等のコンピュータ２０上で行う種々の制御によって行うことができる。
【００９３】
以下、図１に基づいて制御装置１０の構成例について説明する。図１に示す制御装置１０の構成例は、制御装置が行う機能をブロックで示すものであって、必ずしもハードウエアの構成に対応するものではない。また、各機能ブロックは、ＣＰＵをメモリが記憶するプログラムに基づいて動作させる他に、ハードウエアで構成することもできる。また、図示する構成例は一例であってこの構成に限定されるものではない、
【００９４】
制御装置１０は、画像処理部１１，位置検出部１２，表示パターン抽出部１３，コマンド選出部１４，記憶部１５，インタフェース１６等を備える。
【００９５】
記憶部１５は、撮像画像の位置をスクリーン４上の位置に校正するためのキャリブレーションデータ１５ａ、撮像画像をフレームデータを一時的に格納するフレームデータバッファ１５ｂ，撮像画像から検出した照射点の位置を一時的に格納する位置データバッファ１５ｃ，抽出した表示パターンを一時的に格納する表示パターンデータバッファ１５ｄ，コマンドを表示パターンの組み合わせと相関付けて記憶するコマンドデータベース１５ｅを有している。
【００９６】
画像処理部１１は、撮像手段５から撮像画像を入力し、入力した撮像画像の位置をキャリブレーションしてスクリーン４の位置に校正する。これは、通常、撮像手段５はスクリーン４に対して常に一定の位置関係で設定されることはなく、撮像範囲とスクリーンとの関係や、スクリーンに対する撮像手段５の設置角度の関係は一定とならない。そのため、キャリブレーション処理を行って、撮像手段５の撮像画像上の位置とスクリーン４の位置とを定める。
【００９７】
ここでは、キャリブレーションを予め求めて記憶部１５のキャリブレーションデータ１５ａに格納しておき、画像処理部１１においてキャリブレーションデータを用いて撮像画像のキャリブレーション処理を行う。キャリブレーション処理を行うことによって、撮像画像からスクリーン４上の位置を求めることが可能となる。
【００９８】
画像処理部１１は、撮像手段５からフレーム単位で撮像画像を取得し、キャリブレーション処理したフレームデータをフレームデータバッファ１５ｂに一時的に格納する。
【００９９】
位置検出部１２は、フレームデータバッファ１５ｂからフレームデータを読み出して照射点の位置を検出する。
【０１００】
撮像手段５が可視光によってスクリーン４を撮像する場合には、撮像されたフレームデータには、スクリーン４上に投影された画像とレーザポインタ３によって照射された照射点１１０の画像が含まれている。位置検出部１２は、この画像の中から投影画像を除いて照射点のみを抽出して照射点の位置を検出する。このために、位置検出部１２は、例えば、撮像で得られたフレームデータと、プロジェクタからの投影に用いた電子画像との差分を求める。この差分処理によって、照射点のみの画像データを抽出することができる。
【０１０１】
レーザポインタ３は赤外線を照射し、撮像手段５はスクリーン４から赤外域の波長を撮像する場合には、撮像されたフレームデータには、スクリーン４上にレーザポインタ３によって照射された赤外線の照射点１１０の画像が含まれている。位置検出部１２は、この照射点を抽出して照射点の位置を検出する。このように赤外線を用いる場合には、可視光の場合のように、撮像で得られたフレームデータと、プロジェクタからの投影に用いた電子画像との差分を求める差分処理は不要でなる。
【０１０２】
位置検出部１２は、検出した照射点の位置データを位置データバッファ１５ｃに一時的に格納する。位置検出部１２は、連続する複数のフレームデータについて照射点の位置データを検出して、位置データバッファ１５ｃに格納する。
【０１０３】
表示パターン抽出部１３は、位置検出部１２で検出して位置データバッファ１５ｃに格納した複数の照射点の位置データから照射点の軌跡を求め、この軌跡から表示パターンを抽出する。表示パターンは、予め設定しておいた形状や照射点の継続時間と比較することによって抽出する。
【０１０４】
例えば、表示パターンとして線状パターンを設定した場合には、連続する照射点の軌跡が形成するパターンが線状パターンであるか否かを判定する。この判定は、例えば、予め設定した許容ずれに基づいて、複数の照射点の位置から最小二乗法によって直線が形成できるか否かによって行う他、隣接する照射点間でベクトルを形成し、このベクトルの偏差量のずれに基づいて行うことができる。
【０１０５】
また、線状パターンを判定した際、その線状パターンの始点から終点に向かう方向を求めることで線状パターンの方向を検出することができる。
【０１０６】
また、表示パターンを照射点の継続時間によって設定する場合には、一定の領域内の所定時間の間連続して照射点を検出したり、あるいは所定時間の間に照射点の消失が検出することによって、表示パターンを設定することができる。この表示パターンは、例えば、マウスにおけるファイル等を選択するクリック操作に対応させることができる。
【０１０７】
表示パターン抽出部１３は、抽出した表示パターンを表示パターンデータバッファ１５ｄに一時的に格納する。表示パターン抽出部１３は、少なくとも連続する２つの表示パターンを抽出して、表示パターンデータバッファ１５ｄに格納する。
【０１０８】
コマンド選出１４は、表示パターンデータバッファ１５ｄに格納された少なくとも２つの表示パターンの組み合わせに基づいて、この表示パターンの組み合わせに相関付けられたコマンドをコマンドデータベース１５ｅから選出し、選出したコマンドをインタフェース１６を介してコンピュータ２０に送る。
【０１０９】
コマンドの選出において、表示パターンが線状パターンである場合には、コマンドを線状パターンの方向とその順序の組み合わせに相関付けて設定することができる。また、表示パターンの形状は、線状パターンに限らず任意の形状とすることができる。
【０１１０】
コンピュータ２０は、制御装置１０から送られたコマンドに基づいて所定の制御を行う、コマンドによる制御がプレゼンテーションに関連する制御である場合には、スクリーン４上の表示を制御する。コンピュータ２０からプロジェクタ２への指令は、コンピュータ２０とプロジェクタ２とを接続して行う構成とする他、コンピュータ２０とプロジェクタ２との間に制御装置１０を介して行う構成としてもよい。
【０１１１】
また、制御装置１０は、単独装置とする構成に限らず、プロジェクタ２内に組み込む構成としてもよい。
【０１１２】
［線状パターンの組み合わせからコマンドを選出する例］
次に、線状パターンの組み合わせからコマンドを選出する例について、図２，図３のフローチャート、および図４〜図９の説明図に基づいて説明する。
【０１１３】
ここでは、線状パターンの組み合わせからコマンドを選出する処理については、２つの線状パターンを組み合わせる場合について説明する。
【０１１４】
コマンド選出の概略は、図２のフローチャートに示すように、はじめに、第１の表示パターンを検出し（S1）、次に第２の表示パターンを検出する（S2）。検出した２つの表示パターンのベクトル方向の組み合わせを求め、この組み合わせに対応して設定されているコマンドを選出する（S3）。
【０１１５】
図３は、より詳細な手順を説明するためのフローチャートである。
ステップ（S1）の第１の表示パターンの検出は、連続するフレームデータについて照射点を検出して、連続する照射点の有無を判定し（S1a,S1b）、連続する照射点の個数が設定した個数以上であるかを判定する。設定した個数に満たない場合には、表示パターンでないと判定する（S1c）。設定個数以上で連続する照射点について第１の表示パターンとして設定する(S1d)。
【０１１６】
図４は、第１の表示パターンの設定例を模式的に示している。図４（ａ）〜図４（ｆ）は連続するフレーム画像２００ａ〜２００ｆを表している。各フレーム２００ａ〜２００ｅには照射点像１１０ａ〜１１０ｅが検出され、フレーム２００ｆには照射点像は検出されてない。
【０１１７】
図４（ｇ）は、フレーム画像２００ａ〜２００ｅを重ねて表示した場合を示している。連続する照射点像１１０ａ〜１１０ｅは表示パターン３００Ｄを形成する。この例では、照射点像１１０ａ〜１１０ｅはスクリーン上において下方向に向かって軌跡を形成している。したがって、この表示パターン３００Ｄの方向ベクトル４００Ｄは下方向に向かうベクトルである。
【０１１８】
次に、ステップ（S2）の第２の表示パターンの検出は、連続するフレームデータについて照射点を検出して、連続する照射点の有無を判定し（S2a,S2b）、連続する照射点の個数が設定した個数以上であるかを判定する。設定した個数に満たない場合には、表示パターンでないと判定する（S2c）。設定個数以上で連続する照射点について第２の表示パターンとして設定する(S2d)。
【０１１９】
図５は、第２の表示パターンの設定例を模式的に示している。図５（ａ）〜図５（ｆ）は連続するフレーム画像２００ａ〜２００ｆを表している。各フレーム２００ａ〜２００ｅには照射点像１１０ａ〜１１０ｅが検出され、フレーム２００ｆには照射点像は検出されてない。
【０１２０】
図５（ｇ）は、フレーム画像２００ａ〜２００ｅを重ねて表示した場合を示している。連続する照射点像１１０ａ〜１１０ｅは表示パターン３００Ｕを形成する。この例では、照射点像１１０ａ〜１１０ｅはスクリーン上において上方向に向かって軌跡を形成している。したがって、この表示パターン３００Ｕの方向ベクトル４００Ｕは上方向に向かうベクトルである。
【０１２１】
次に、ステップ(S3)のベクトル方向の組み合わせに対応して設定されているコマンドを選出する工程において、はじめに、第１の表示パターンと第２の表示パターンのベクトル方向を求め(S3a)、求めたベクトル方向の組み合わせを求め（S3b）、求めたベクトル方法の組み合わせに対応して設定されているコマンドを選出し（S3c）、選出したコマンドをコンピュータに出力する(S3d)。
【０１２２】
図６、図７は、表示パターンのベクトル方向の組み合わせによるコマンドの選出を説明するための図である。
【０１２３】
図６（ａ）〜図６（ｄ）は表示パターンの線状パターンが上下方向である場合を示している。
【０１２４】
図６（ａ）、（ｂ）は第１と第２の線状パターンは共に同じ方向を向いている場合であり、図６（ｃ）、（ｄ）は第１と第２の線状パターンは互いに異なる方向を向いている場合である。図６（ａ）〜図６（ｄ）の線状パターンの組み合わせに対して、例えば、コマンドＡ〜Ｄを設定する。
【０１２５】
図６（ａ）に示す例は、第１の線状パターンの方向ベクトル４００Ｄ１および第２の線状パターンの方向ベクトル４００Ｄ２は共に下向きである場合を示し、図６（ｂ）に示す例は、第１の線状パターンの方向ベクトル４００Ｕ１および第２の線状パターンの方向ベクトル４００Ｕ２は共に上向きである場合を示している。
【０１２６】
図６（ｃ）に示す例は、第１の線状パターンの方向ベクトル４００Ｄ１は下向き、第２の線状パターンの方向ベクトル４００Ｕ２は上向きである場合を示し、図６（ｄ）に示す例は、第１の線状パターンの方向ベクトル４００Ｕ１は上向き、第２の線状パターンの方向ベクトル４００Ｄ２は下向きである場合を示している。
【０１２７】
図６（ｅ）〜図６（ｈ）は表示パターンの線状パターンが左右方向である場合を示している。
【０１２８】
図６（ｅ）、（ｆ）は第１と第２の線状パターンは共に同じ方向を向いている場合であり、図６（ｇ）、（ｈ）は第１と第２の線状パターンは互いに異なる方向を向いている場合である。図６（ｅ）〜図６（ｈ）の線状パターンの組み合わせに対して、例えば、コマンドＥ〜Ｈを設定する。
【０１２９】
図６（ｅ）に示す例は、第１の線状パターンの方向ベクトル４００Ｒ１および第２の線状パターンの方向ベクトル４００Ｒ２は共に右向きである場合を示し、図６（ｆ）に示す例は、第１の線状パターンの方向ベクトル４００Ｌ１および第２の線状パターンの方向ベクトル４００Ｌ２は共に左向きである場合を示している。
【０１３０】
図６（ｆ）に示す例は、第１の線状パターンの方向ベクトル４００Ｌ１は左向き、第２の線状パターンの方向ベクトル４００Ｒ２は右向きである場合を示し、図６（ｈ）に示す例は、第１の線状パターンの方向ベクトル４００Ｒ１は右向き、第２の線状パターンの方向ベクトル４００Ｌ２は左向きである場合を示している。
【０１３１】
図７（ａ）〜図７（ｂ）は表示パターンの線状パターンが斜め方向である場合を示している。
【０１３２】
図７（ａ）、（ｂ）は第１と第２の線状パターンは上下方向で共に同じ方向を向いている場合であり、図７（ｃ）、（ｄ）は第１と第２の線状パターンは上下方向で互いに異なる方向を向いている場合である。図７（ａ）〜図７（ｂ）の線状パターンの組み合わせに対して、例えば、コマンドＩ〜Ｌを設定する。
【０１３３】
図７（ａ）に示す例は、第１の線状パターンの方向ベクトル４００ＤＲ１は下方向および右方向、第２の線状パターンの方向ベクトル４００ＤＬ２は下方向および左方向である場合を示し、図７（ｂ）に示す例は、第１の線状パターンの方向ベクトル４００ＵＬ１は上方向および左方向、第２の線状パターンの方向ベクトル４００ＵＲ２は上方向および右方向である場合を示し、図７（ｃ）に示す例は、第１の線状パターンの方向ベクトル４００ＤＲ１は下方向および右方向、第２の線状パターンの方向ベクトル４００ＵＲ２は上方向および右方向である場合を示し、図７（ｄ）に示す例は、第１の線状パターンの方向ベクトル４００ＤＵ１は上方向および左方向、第２の線状パターンの方向ベクトル４００ＤＬ２は下方向および左方向である場合を示している。
【０１３４】
図８および図９は、第１と第２の線状パターンの組み合わせとコマンドとの対応関係例を示している。図８（ａ）、（ｂ）は図６に示した例であり、図８（ｃ）は図７に示した例である。また、図８（ｄ）は表示パターンの線状パターンが斜め方向である場合の別の例を示している。
【０１３５】
図９（ａ）は、第１の線状パターンが上下方向、第２の線状パターンが左右方向の組み合わせであり、図９（ｂ）は、第１の線状パターンが左右方向、第２の線状パターンが上下方向の組み合わせを示している。
【０１３６】
［照射点の継続時間パターンの組み合わせからコマンドを選出する例］
次に、照射点の継続時間パターンの組み合わせからコマンドを選出する例について、図１０，図１１のフローチャート、および図１２,図１３の説明図に基づいて説明する。
【０１３７】
ここで、表示パターンの組み合わせは、少なくとも２つの継続時間パターンの時間幅の組み合わせであり、コマンドは、継続時間パターンの時間幅の組み合わせに相関付けられる。
【０１３８】
コマンド選出は、図１０のフローチャートに示すように、はじめに、スクリーン上の所定領域内に照射点が有るか否かを検出する。図１２（ａ）は、スクリーンに対応するフレーム２００の画像例を示している。ここでは、所定領域としてアイコン２１０ａ〜２１０ｃを示し、スクリーン上でこのアイコンに対応する位置に照射点が照射された場合に、このアイコンが選択されたことを検出するものとして検出する。図１２（ｂ）、（ｃ）は、アイコンに対応する位置に照射点が照射された状態の画像表示を示している。
【０１３９】
所定領域内に照射点を検出した場合には（S11）、その照射点の位置を画像上においてマークで表示する。図１２（ｄ）に示す画像例は、スクリーン上においてアイコン２１０ａの領域に対応する位置に照射点がある場合を示しており、照射点に対応する位置に位置マーク２２０を表示する。この位置マーク２２０は、所定領域を指示していることを表している。操作者は、スクリーン上に表示された位置マーク２２０とアイコン２１０ａと関係を確認し、アイコン２１０ａが所望とするアイコンである場合には、レーザポインタによる照射を継続する。なお、ここでは、位置マーク２２０として十字マークを用いているが、このマーク形状の限られるものではない(S12)。
【０１４０】
所定領域で照射点を検出してから所定時間経過した後（S13）、画像上でその照射点の位置に位置マークと共に認識マーク２３０を表示する。この認識マーク２３０は、アイコンの選択を確認したことを表すものである。図１２（ｅ）は、照射像１１１に位置マーク２２０と認識マーク２３０を表示した状態を示している。なお、ここでは、認識マーク２３０として一部を切り欠いた矩形マークを用いているが、このマーク形状の限られるものではない（S14）。
【０１４１】
操作者は、認識マーク２３０が表示されたことによって、アイコンの動作の準備ができたことを確認し、そのアイコンを選択する場合には、レーザポインタを操作して照射点を消失させる。この照射点の消失が認識マークを表示してから所定時間内である場合には（S15）、アイコンを選択したものとする。このアイコンの選択はコマンドの選出に対応するものである(S16)。
【０１４２】
図１２（ｆ）に示すように、照射点を消失させてコマンドを選出した後、画像上に表示していた位置マーク２２０および認識マーク２３０のマーク表示を停止し(S17)、リセット状態とする(S18)。
【０１４３】
図１１のフローチャートは、別のコマンドを選出する場合であり、図１０のステップS15をステップS15aの処理を行うものである。ステップS15以外の工程は図１０のフローチャートと同様であるので、ここではステップS15aのみについて説明する。
【０１４４】
ステップS15aでは、照射点が所定時間内に点滅した場合にコマンドを選出する。このとき選出するコマンドは、図１０のフローチャートで選出したコマンドと異なるコマンドとする。このように、継続時間パターンの時間幅を異ならせることで選出するコマンドを変えることができる。
【０１４５】
図１３は継続時間パターンを説明するための図である。図１３（ａ）はコマンドを選出する例であり、図１３（ｂ），（ｃ）はコマンドを選出しない例である。
【０１４６】
図１３（ａ）において、第１の表示パターンは照射点による所定領域の選択を認識するものであり、第２の表示パターンは認識した所定領域を選択してコマンドを選出するものである。例えば、このコマンドによってアイコンやファイル等に対してコマンドに対応する操作を制御する。
【０１４７】
ここで、第１の表示パターンの時間幅をt1とし、第２の表示パターンの時間幅をt2とする。また、第１の表示パターンにおいて、照射点の表示を検出してから位置マークを表示するまでの時間幅をｔ1aとし、位置マークを表示してから認識マークを表示するまでの時間幅をｔ1bとしている。
【０１４８】
画像上において照射点の表示を検出してから照射点の表示が継続し、時間幅t1aが経過した時点で位置マークを表示し、さらに時間幅t1bが経過した時点で認識マークを表示する。さらに、認識マークを表示してから第２の表示パターンの時間幅t2内に照射点の表示の消失を検出した場合には、コマンドを選出する。
【０１４９】
図１３（ｂ）は、位置マークを表示してから時間幅t1bが経過する前に、照射点の消失を検出した場合である。この場合には、所定領域の選択を途中で解除したものと判断して、リセットする。
【０１５０】
また、図１３（ｃ）は、第２の表示パターンの継続時間t2を経過しても照射点が消失されずに継続して検出される場合である。この場合には、所定領域の選択を行わないものと判断して、リセットする。
【０１５１】
上記した表示パターンの継続時間および組み合わせは一例であって上記例に限定されるものではなく、種々の組み合わせとすることができる。
【０１５２】
［コンピュータ制御装置］
次に、コンピュータ制御装置の例について説明する。
図１４において、コンピュータ制御装置１Ｂは、レーザポインタ３とスクリーン４と撮像手段５と制御装置１０を備える。コンピュータ制御は、レーザポインタ３によってスクリーン４Ｂあるいは任意の面上に照射点を表示することで行われる。レーザポインタ３から照射される照射点は、スクリーン４Ｂ上あるいは任意の面上において、コンピュータを制御する操作手段としての機能を有する。例えば、マウスが行うクリック操作やドラック操作をエミュレートして、コンピュータ２０側で制御操作を行う代わりに、レーザポインタ３によるスクリーン４Ｂ上あるいは任意の面上の照射点１１０の動作によってコンピュータ２０を制御する。これによれば、コンピュータ２０を遠隔制御することができる。
【０１５３】
コンピュータ制御装置１０は、図１に示したプレゼンテーション制御装置１において、プレゼンテーションの構成を省いた構成と同様とすることができ、制御装置１０も同様の構成とすることができるため、ここでの詳細な説明は省略する。
【０１５４】
［複数のスクリーンのプレゼンテーション制御装置］
次に、プレゼンテーション制御装置において、複数のスクリーンを用いた構成例について、図１５を用いて説明する。
【０１５５】
このプレゼンテーション制御装置の構成例は、図１で示したプレゼンテーション制御装置において複数のスクリーンを用いた構成であり、照射点が形成する表示パターンの組み合わせに基づいてコマンドを選出してプレゼンテーション制御を行う点は共通である。
【０１５６】
以下では、複数のスクリーン構成について説明し、プレゼンテーション制御の説明は省略する。
【０１５７】
図１５は複数のスクリーンとして４つのスクリーンを縦方向および横方向に配置する例について示している。複数のスクリーンの数および配置はこの例に限らず任意とすることができ、縦方向、横方向、斜め方向に連続して配置する他、離散的な配置とすることもできる。照射点の位置検出は、撮像手段による撮像画像とスクリーンの配置との間のキャリブレーションによって行うことができる。
【０１５８】
プレゼンテーション制御装置１Ｃは、４つのスクリーン４Ｃa〜４Ｃｄを配置してなるスクリーン４Ｃを備え、プロジェクタ２ａ〜２ｄによって投影像１００ａ〜１００ｄが投影される。レーザポインタ３は、スクリーン４Ｃa〜４Ｃｄの任意の位置に照射することができる。撮像手段５は、スクリーン４Ｃa〜４Ｃｄ上に照射される照射点を撮像する。制御装置１０は、図１で示したプレゼンテーション制御装置１Ａと同様にして表示パターンからコマンドを選出してプレゼンテーションを制御する。
【０１５９】
なお、図１５では、複数のプロジェクタ２ａ〜２ｄによって投影像１００ａ〜１００ｄを投影しているが、一つのプロジェクタから複数の投影像を投影する構成とすることもできる。
【産業上の利用可能性】
【０１６０】
本発明は、コンピュータ制御、プレゼンテーション制御に適用することができる。
【符号の説明】
【０１６１】
１    プレゼンテーション制御装置
１Ａ    プレゼンテーション制御装置
１Ｂ    コンピュータ制御装置
１Ｃ    プレゼンテーション制御装置
２，２ａ-２ｄ    プロジェクタ
３    レーザポインタ
４    スクリーン
４Ｂ    スクリーン
４Ｃ，４Ｃa-４Ｃｄ  スクリーン
５    撮像手段
１０    コンピュータ制御装置
１１    画像処理部
１２    位置検出部
１３    表示パターン抽出部
１４    コマンド選出
１５    記憶部
１５ａ    キャリブレーションデータ
１５ｂ    フレームデータバッファ
１５ｃ    位置データバッファ
１５ｄ    表示パターンデータバッファ
１５ｅ    コマンドデータベース
１６    インタフェース
２０    コンピュータ
１００ａ-１００ｄ    投影像
１１０，１１０ａ-１１０ｅ    照射点像
１１１    照射像
２００    フレーム
２００ａ-２００ｅ    フレーム画像
２１０ａ-２１０ｃ    アイコン
２２０    位置マーク
２３０    認識マーク
３００Ｄ    表示パターン
３００Ｕ    表示パターン
４００Ｄ    方向ベクトル
４００Ｄ１    方向ベクトル
４００Ｄ２    方向ベクトル
４００ＤＬ２    方向ベクトル
４００ＤＲ１    方向ベクトル
４００ＤＵ１    方向ベクトル
４００Ｌ１    方向ベクトル
４００Ｌ２    方向ベクトル
４００Ｒ１    方向ベクトル
４００Ｒ２    方向ベクトル
４００Ｕ    方向ベクトル
４００Ｕ１    方向ベクトル
４００Ｕ２    方向ベクトル
４００ＵＬ１    方向ベクトル
４００ＵＲ２    方向ベクトル
【図１】
2011008667.tif 000003
【図２】
2011008667.tif 000004
【図３】
2011008667.tif 000005
【図４】
2011008667.tif 000006
【図５】
2011008667.tif 000007
【図８】
2011008667.tif 000008
【図９】
2011008667.tif 000009
【図１０】
2011008667.tif 000010
【図１１】
2011008667.tif 000011
【図１３】
2011008667.tif 000012
【図１４】
2011008667.tif 000013
【図１５】
2011008667.tif 000014
【図６】
2011008667.tif 000015
【図７】
2011008667.tif 000016
【図１２】
2011008667.tif 000017