(57)【特許請求の範囲】
【請求項１】
制御端末であって、
撮像範囲を撮像し、第１の画像を生成する撮像部と、
前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出部と、
前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出部と、
前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力部と、
を有する制御端末。
【請求項２】
前記遮蔽物検出部は、前記第１の画像に基づいて前記遮蔽物を検出する請求項１に記載の制御端末。
【請求項３】
前記遮蔽物は、前記制御対象端末である請求項１または請求項２に記載の制御端末。
【請求項４】
前記制御対象端末は、無線通信機能を有する撮像端末であり、
前記出力部は、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、撮像に関する前記制御信号を前記撮像端末に無線送信する
請求項１から請求項３のいずれか１つに記載の制御端末。
【請求項５】
前記撮像部は、フォーカスまたは露出の設定が可能であり、
前記遮蔽物検出部が前記遮蔽物を検出している間、前記撮像部に設定されている前記フォーカスまたは前記露出は固定される
請求項２に記載の制御端末。
【請求項６】
前記操作検出部は、前記遮蔽物が検出された後、前記遮蔽物が検出されなかった場合、前記物体の前記所定の状態または前記物体の前記所定の動きの検出を停止する請求項１に記載の制御端末。
【請求項７】
前記第１の画像を表示する表示部をさらに有し、
前記表示部は、前記遮蔽物が検出された後、前記遮蔽物が検出されなかった場合、前記第１の画像の表示を停止する請求項１に記載の制御端末。
【請求項８】
前記撮像部は、前記遮蔽物が検出された後、前記遮蔽物が検出されなかった場合、前記第１の画像の生成を停止する請求項１に記載の制御端末。
【請求項９】
前記操作検出部は、前記遮蔽物が検出された後、第２の画像に基づいて、前記物体の場所と前記物体の前記所定の状態とを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像であり、
前記出力部は、前記物体の前記所定の状態が検出された場合、前記物体の前記場所に応じた前記制御信号を前記制御対象端末に出力する
請求項１に記載の制御端末。
【請求項１０】
前記制御対象端末は、撮像端末に接続されるレンズモジュールであり、
前記出力部は、前記物体の場所が前記レンズモジュールを基準とする領域であり、かつ、前記物体の前記所定の状態が検出された場合、前記制御信号を前記レンズモジュールに出力する
請求項９に記載の制御端末。
【請求項１１】
前記操作検出部は、前記遮蔽物が検出された後、第２の画像に基づいて、前記物体の前記所定の状態または前記物体の前記所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像がある第１の領域に含まれる第２の領域の画像である
請求項１に記載の制御端末。
【請求項１２】
前記制御対象端末から情報を入力する入力部をさらに有し、
前記操作検出部はさらに、前記入力部を介して入力された前記情報に基づいて前記第２の領域を検出する
請求項１１に記載の制御端末。
【請求項１３】
前記制御対象端末は撮像端末であり、レンズモジュールが前記撮像端末に接続され、
前記入力部は、前記撮像端末から前記レンズモジュールの情報を入力し、
前記第２の領域は、前記撮像端末の像を含む領域である
請求項１２に記載の制御端末。
【請求項１４】
前記制御端末に対する第１のマニュアル操作を検出するマニュアル操作検出部をさらに有し、
前記操作検出部は、前記遮蔽物が検出された後、前記第１のマニュアル操作が検出された場合、前記物体の前記所定の状態または前記物体の前記所定の動きの検出を停止する
請求項１に記載の制御端末。
【請求項１５】
前記制御対象端末は撮像端末であり、
前記撮像端末に接続されるレンズモジュールに対する第２のマニュアル操作を検出するマニュアル操作検出部をさらに有し、
前記操作検出部は、前記遮蔽物が検出された後、前記第２のマニュアル操作が検出された場合、前記物体の前記所定の状態または前記物体の前記所定の動きの検出を停止する
請求項１に記載の制御端末。
【請求項１６】
制御端末と、撮像端末とを有する撮像システムであって、
前記制御端末は、
撮像範囲を撮像し、第１の画像を生成する第１の撮像部と、
前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出部と、
前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出部と、
前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を前記撮像端末に出力する出力部と、
を有し、
前記撮像端末は、
前記制御信号に基づいて撮像を行い、第３の画像を生成する第２の撮像部と、
前記制御信号を前記制御端末から入力する入力部と、
を有する撮像システム。
【請求項１７】
制御端末が有する撮像部によって、撮像範囲を撮像し、第１の画像を生成する撮像ステップと、
前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出ステップと、
前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出ステップと、
前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力ステップと、
を有する制御方法。
【請求項１８】
制御端末が有する撮像部によって、撮像範囲を撮像し、第１の画像を生成する撮像ステップと、
前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出ステップと、
前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出ステップと、
前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力ステップと、
をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、制御端末、撮像システム、制御方法、およびプログラムに関する。
【背景技術】
【０００２】
カメラで取得された画像から人の手の動きを検出し、検出された手の動きすなわちジェスチャーに応じて機器を制御する技術がある。例えば、特許文献１には、仮想的な入力機器に対するユーザの指の動きを画像から検出し、検出された指の動きに応じて入力を行う技術が開示されている。この技術では、机の面等の所定の領域が仮想的な入力機器（例えば、キーボード）として使用される。この領域において、ユーザの指による押下操作が検出される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】日本国特開２０１２−５３５３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に開示された技術では、仮想的な入力機器の領域を机の面等に表示するための画像を投影する手段が必要である。このため、機器が大型になる。また、コストが増加する。【０００５】
本発明は、操作検出のための構成を簡易にすることができる制御端末、撮像システム、制御方法、およびプログラムを提供する。
【課題を解決するための手段】
【０００６】
本発明の第１の態様によれば、制御端末は、撮像範囲を撮像し、第１の画像を生成する撮像部と、前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出部と、前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出部と、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力部と、を有する。【０００７】
本発明の第２の態様によれば、第１の態様において、前記遮蔽物検出部は、前記第１の画像に基づいて前記遮蔽物を検出してもよい。【０００８】
本発明の第３の態様によれば、第１または第２の態様において、前記遮蔽物は、前記制御対象端末であってもよい。【０００９】
本発明の第４の態様によれば、第１から第３のいずれか１つの態様において、前記制御対象端末は、無線通信機能を有する撮像端末であってもよい。前記出力部は、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、撮像に関する前記制御信号を前記撮像端末に無線送信してもよい。【００１０】
本発明の第５の態様によれば、第２の態様において、前記撮像部は、フォーカスまたは露出の設定が可能であってもよい。前記遮蔽物検出部が前記遮蔽物を検出している間、前記撮像部に設定されている前記フォーカスまたは前記露出は固定されてもよい。【００１１】
本発明の第６の態様によれば、第１の態様において、前記操作検出部は、前記遮蔽物が検出された後、前記遮蔽物が検出されなかった場合、前記物体の前記所定の状態または前記物体の前記所定の動きの検出を停止してもよい。【００１２】
本発明の第７の態様によれば、第１の態様において、前記制御端末は、前記第１の画像を表示する表示部をさらに有してもよい。前記表示部は、前記遮蔽物が検出された後、前記遮蔽物が検出されなかった場合、前記第１の画像の表示を停止してもよい。【００１３】
本発明の第８の態様によれば、第１の態様において、前記撮像部は、前記遮蔽物が検出された後、前記遮蔽物が検出されなかった場合、前記第１の画像の生成を停止してもよい。【００１４】
本発明の第９の態様によれば、第１の態様において、前記操作検出部は、前記遮蔽物が検出された後、第２の画像に基づいて、前記物体の場所と前記物体の前記所定の状態とを検出してもよい。前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像であってもよい。前記出力部は、前記物体の前記所定の状態が検出された場合、前記物体の前記場所に応じた前記制御信号を前記制御対象端末に出力してもよい。【００１５】
本発明の第１０の態様によれば、第９の態様において、前記制御対象端末は、撮像端末に接続されるレンズモジュールであってもよい。前記出力部は、前記物体の場所が前記レンズモジュールを基準とする領域であり、かつ、前記物体の前記所定の状態が検出された場合、前記制御信号を前記レンズモジュールに出力してもよい。【００１６】
本発明の第１１の態様によれば、第１の態様において、前記操作検出部は、第２の画像に基づいて、前記物体の前記所定の状態または前記物体の前記所定の動きを検出してもよい。前記第２の画像は前記第１の画像において前記遮蔽物の像がある第１の領域に含まれる第２の領域の画像であってもよい。【００１７】
本発明の第１２の態様によれば、第１１の態様において、前記制御端末は、前記制御対象端末から情報を入力する入力部をさらに有してもよい。前記操作検出部はさらに、前記入力部を介して入力された前記情報に基づいて前記第２の領域を検出してもよい。【００１８】
本発明の第１３の態様によれば、第１２の態様において、前記制御対象端末は撮像端末であってもよい。レンズモジュールが前記撮像端末に接続されてもよい。前記入力部は、前記撮像端末から前記レンズモジュールの情報を入力してもよい。前記第２の領域は、前記撮像端末の像を含む領域であってもよい。【００１９】
本発明の第１４の態様によれば、第１の態様において、前記制御端末は、前記制御端末に対する第１のマニュアル操作を検出するマニュアル操作検出部をさらに有してもよい。前記操作検出部は、前記遮蔽物が検出された後、前記第１のマニュアル操作が検出された場合、前記物体の前記所定の状態または前記物体の前記所定の動きの検出を停止してもよい。【００２０】
本発明の第１５の態様によれば、第１の態様において、前記制御対象端末は撮像端末であってもよい。前記制御端末は、前記撮像端末に接続されるレンズモジュールに対する第２のマニュアル操作を検出するマニュアル操作検出部をさらに有してもよい。前記操作検出部は、前記遮蔽物が検出された後、前記第２のマニュアル操作が検出された場合、前記物体の前記所定の状態または前記物体の前記所定の動きの検出を停止してもよい。【００２１】
本発明の第１６の態様によれば、撮像システムは、制御端末と、撮像端末とを有する。前記制御端末は、撮像範囲を撮像し、第１の画像を生成する第１の撮像部と、前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出部と、前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出部と、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を前記撮像端末に出力する出力部と、を有する。前記撮像端末は、前記制御信号に基づいて撮像を行い、第３の画像を生成する第２の撮像部と、前記制御信号を前記制御端末から入力する入力部と、を有する。【００２２】
本発明の第１７の態様によれば、制御方法は、制御端末が有する撮像部によって、撮像範囲を撮像し、第１の画像を生成する撮像ステップと、前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出ステップと、前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出ステップと、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力ステップと、を有する。【００２３】
本発明の第１８の態様によれば、プログラムは、制御端末が有する撮像部によって、撮像範囲を撮像し、第１の画像を生成する撮像ステップと、前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出ステップと、前記遮蔽物が検出された後、第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出し、前記第２の画像は前記第１の画像において前記遮蔽物の像を基準とする領域の画像である操作検出ステップと、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力ステップと、をコンピュータに実行させる。
【発明の効果】
【００２４】
上記の各態様によれば、画像を投影する手段が必要ではないので、操作検出のための構成を簡易にすることができる。
【図面の簡単な説明】
【００２５】
【図１】本発明の実施形態の制御端末の構成を示すブロック図である。
【図２】本発明の実施形態の制御端末の構成を示すブロック図である。
【図３】本発明の実施形態の撮像端末の構成を示すブロック図である。
【図４】本発明の実施形態の撮像システムを示す斜視図である。
【図５】本発明の実施形態の撮像システムを示す斜視図である。
【図６】本発明の実施形態の制御端末が有する撮像部によって生成された画像を示す参考図である。
【図７】本発明の実施形態の制御端末の動作の手順を示すフローチャートである。
【図８】本発明の実施形態の制御端末の動作の手順を示すフローチャートである。
【図９】本発明の実施形態の制御端末の動作の手順を示すフローチャートである。
【図１０】本発明の実施形態の制御端末の動作の手順を示すフローチャートである。
【図１１】本発明の実施形態における遮蔽物領域を示す参考図である。
【図１２】本発明の実施形態における検出領域を示す参考図である。
【図１３】本発明の実施形態における遮蔽物領域を示す参考図である。
【図１４】本発明の実施形態における検出領域を示す参考図である。
【図１５】本発明の実施形態における遮蔽物領域を示す参考図である。
【図１６】本発明の実施形態における検出領域を示す参考図である。
【図１７】本発明の実施形態の制御端末の動作の手順を示すフローチャートである。
【図１８】本発明の実施形態において検出されるユーザの指または手の動きを示す参考図である。
【図１９】本発明の実施形態において検出されるユーザの指または手の動きを示す参考図である。
【図２０】本発明の実施形態において検出されるユーザの指または手の動きを示す参考図である。
【図２１】本発明の実施形態における第１の変形例の制御端末の動作の手順を示すフローチャートである。
【図２２】本発明の実施形態における第１の変形例の制御端末の動作の手順を示すフローチャートである。
【図２３】本発明の実施形態における第１の変形例の制御端末の動作の手順を示すフローチャートである。
【図２４】本発明の実施形態における第１の変形例の制御端末の動作の手順を示すフローチャートである。
【図２５】本発明の実施形態における第１の変形例の制御端末の動作の手順を示すフローチャートである。
【図２６】本発明の実施形態における第２の変形例の制御端末の動作の手順を示すフローチャートである。
【図２７】本発明の実施形態における第２の変形例の制御端末の動作の手順を示すフローチャートである。
【図２８】本発明の実施形態における第２の変形例の制御端末の動作の手順を示すフローチャートである。
【図２９】本発明の実施形態における第３の変形例の遮蔽物領域を示す参考図である。
【図３０】本発明の実施形態における第３の変形例の遮蔽物領域を示す参考図である。
【図３１】本発明の実施形態における第３の変形例の検出領域を示す参考図である。
【図３２】本発明の実施形態における第３の変形例の遮蔽物領域を示す参考図である。
【図３３】本発明の実施形態における第３の変形例の遮蔽物領域を示す参考図である。
【図３４】本発明の実施形態における第３の変形例の検出領域を示す参考図である。
【図３５】本発明の実施形態における第３の変形例の制御端末の動作の手順を示すフローチャートである。
【図３６】本発明の実施形態における第３の変形例の制御端末の動作の手順を示すフローチャートである。
【図３７】本発明の実施形態における第４の変形例の制御端末の動作の手順を示すフローチャートである。
【図３８】本発明の実施形態における第４の変形例の遮蔽物領域を示す参考図である。
【図３９】本発明の実施形態における第４の変形例の検出領域を示す参考図である。
【図４０】本発明の実施形態における第５の変形例の制御端末の動作の手順を示すフローチャートである。
【図４１】本発明の実施形態における第５の変形例の制御端末の動作の手順を示すフローチャートである。
【図４２】本発明の実施形態における第６の変形例の制御端末の動作の手順を示すフローチャートである。
【図４３】本発明の実施形態における第６の変形例の制御端末の動作の手順を示すフローチャートである。
【図４４】本発明の実施形態における第６の変形例の制御端末の動作の手順を示すフローチャートである。
【図４５】本発明の実施形態における第７の変形例の制御端末の構成を示すブロック図である。
【図４６】本発明の実施形態における第７の変形例の制御端末の動作の手順を示すフローチャートである。
【図４７】本発明の実施形態における第７の変形例の表示部の画面を示す参考図である。
【発明を実施するための形態】
【００２６】
図面を参照し、本発明の実施形態を説明する。図１は、本発明の実施形態の制御端末１０の構成を示している。図１に示すように、制御端末１０は、撮像部１００（第１の撮像部）と、遮蔽物検出部１０１と、操作検出部１０２と、出力部１０３とを有する。
【００２７】
撮像部１００は、撮像範囲を撮像し、第１の画像を生成する。遮蔽物検出部１０１は、制御端末１０に固定されている遮蔽物を検出する。遮蔽物は撮像範囲の一部を遮蔽する。操作検出部１０２は、遮蔽物が検出された後、第２の画像に基づいて、遮蔽物と異なる物体の所定の状態または物体の所定の動きを検出する。第２の画像は第１の画像に含まれる。第２の画像は第１の画像において遮蔽物を基準とする領域の画像である。出力部１０３は、物体の所定の状態または物体の所定の動きが検出された場合、制御信号を制御対象端末２０に出力する。
【００２８】
上記の構成によれば、画像から検出された物体の状態または物体の動きに基づいて制御対象端末２０を制御することが可能である。例えば、遮蔽物と異なる物体は人の指または手である。つまり、ユーザのジェスチャーに応じて制御対象端末２０を制御することが可能である。
【００２９】
例えば、遮蔽物検出部１０１は、撮像部１００によって生成された第１の画像に基づいて遮蔽物を検出する。例えば、遮蔽物は、制御対象端末２０である。例えば、制御対象端末２０は、無線通信機能を有する撮像端末である。出力部１０３は、物体の所定の状態または物体の所定の動きが検出された場合、撮像に関する制御信号を撮像端末に無線送信してもよい。制御対象端末２０は、レンズモジュールであってもよい。
【００３０】
遮蔽物検出部１０１は、遮蔽物が制御端末１０に固定されていることを機械的または電気的に検出するスイッチであってもよい。これによって、制御端末１０の画像処理の負荷が減る。
【００３１】
出力部１０３は、有線または無線による通信を行ってもよい。出力部１０３は、制御信号を中継する中継端末を介して制御信号を制御対象端末２０に出力してもよい。制御対象端末２０がレンズモジュールである場合、撮像端末が中継端末であってもよい。
【００３２】
例えば、制御対象端末２０が撮像端末である場合、出力部１０３は、撮像の実行を指示するための制御信号を撮像端末に出力する。制御対象端末２０が撮像端末である場合、出力部１０３は、撮像に関するパラメータすなわち撮像パラメータを指示するための制御信号を撮像端末に出力してもよい。例えば、撮像端末において制御される撮像パラメータは、シャッタースピードである。制御対象端末２０がレンズモジュールである場合、出力部１０３は、撮像パラメータを指示するための制御信号をレンズモジュールに出力してもよい。例えば、レンズモジュールにおいて制御される撮像パラメータは、フォーカスと、ズームと、絞りとの少なくとも１つである。
【００３３】
制御端末１０のコンピュータが、制御端末１０の動作を規定する命令を含むプログラムを読み込み、読み込まれたプログラムを実行してもよい。つまり、制御端末１０の機能はソフトウェアにより実現されてもよい。このプログラムは、例えばフラッシュメモリのような「コンピュータ読み取り可能な記録媒体」により提供されてもよい。また、上述したプログラムは、このプログラムが保存された記憶装置等を有するコンピュータから、伝送媒体を介して、あるいは伝送媒体中の伝送波により制御端末１０に伝送されてもよい。プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように、情報を伝送する機能を有する媒体である。また、上述したプログラムは、前述した機能の一部を実現してもよい。さらに、上述したプログラムは、前述した機能をコンピュータに既に記録されているプログラムとの組合せで実現できる、いわゆる差分ファイル（差分プログラム）であってもよい。
【００３４】
図２は、制御端末１０の具体例である制御端末１０ａの構成を示している。図２に示すように、制御端末１０ａは、撮像部１００と、遮蔽物検出部１０１と、操作検出部１０２と、通信部１０３ａと、表示部１０４とを有する。
【００３５】
図２において、図１と同一の符号が付与されている構成は、図１に示す構成と同一である。このため、撮像部１００と、遮蔽物検出部１０１と、操作検出部１０２とについての説明を省略する。通信部１０３ａは図１に示す出力部１０３の具体例である。通信部１０３ａは撮像端末２０ａと無線通信を行う。これによって、通信部１０３ａは、制御信号を撮像端末２０ａに無線送信する。また、通信部１０３ａは、撮像端末２０ａから無線送信された画像を無線受信する。表示部１０４は、撮像端末２０ａから受信された画像を表示する。また、表示部１０４は、操作検出部１０２による検出が有効であるか否かを示す情報（例えば警告）を表示する。撮像端末２０ａは、制御対象端末２０の例である。
【００３６】
図３は、撮像端末２０ａの構成を示している。図３に示すように、撮像端末２０ａは、撮像部２００（第２の撮像部）と、通信部２０１（入力部）とを有する。また、撮像端末２０ａは、電源スイッチ２０２を有する。
【００３７】
撮像部２００は、制御信号に基づいて撮像を行い、画像（第３の画像）を生成する。通信部２０１は、制御端末１０ａと無線通信を行う。これによって、通信部２０１は、制御信号を制御端末１０ａから入力する。通信部２０１を介して入力された制御信号は撮像部２００に出力される。また、通信部２０１は、レンズモジュール２０ｂと通信を行う。これによって、通信部２０１は、制御端末１０ａからの制御信号をレンズモジュール２０ｂに出力する。通信部２０１は、撮像部２００によって生成された画像を制御端末１０ａに無線送信してもよい。電源スイッチ２０２は、撮像端末２０ａの電源をオンにする操作を受け付ける。撮像端末２０ａの電源をオンにする操作が受け付けられた場合、撮像端末２０ａの電源がオンになり、撮像部２００が起動する。
【００３８】
図４と図５とは、制御端末１０ａと撮像端末２０ａとを有する撮像システム１を示している。図４と図５とに示すように、撮像システム１は、制御端末１０ａと、撮像端末２０ａと、レンズモジュール２０ｂと、ケース４０とを有する。
【００３９】
レンズモジュール２０ｂは、レンズすなわちフォーカスレンズまたはズームレンズ等を有する。レンズモジュール２０ｂは撮像端末２０ａに装着されている。レンズモジュール２０ｂは、撮像端末２０ａから取り外すことが可能である。撮像端末２０ａの表面に電源スイッチ２０２が配置されている。本発明の実施形態では撮像端末２０ａとレンズモジュール２０ｂとが分かれている。しかし、撮像端末２０ａとレンズモジュール２０ｂとが一体であってもよい。
【００４０】
ケース４０は、制御端末１０ａに装着することが可能である。ケース４０は、撮像端末２０ａが装着される装着部４００を有する。撮像端末２０ａは、装着部４００に装着されることにより、ケース４０に対して固定される。また、ケース４０が制御端末１０ａに装着されたとき、撮像端末２０ａは、制御端末１０ａに対して固定される。ケース４０において、制御端末１０ａの撮像部１００の位置に対応する位置に窓４０１が形成されている。
【００４１】
撮像部１００は、制御端末１０ａの表面において、端部に近い位置に配置されている。撮像部１００は、窓４０１を介して、撮像範囲の光を取り込む。撮像端末２０ａとレンズモジュール２０ｂとの少なくとも一方の少なくとも一部が撮像部１００の撮像範囲に含まれるように撮像部１００は配置されている。
【００４２】
ユーザは、撮像部１００の撮像範囲で指５０を移動させることにより、撮像端末２０ａを操作することが可能である。例えば、ユーザは、撮像端末２０ａの近傍で指５０を移動させることにより、撮像端末２０ａを操作することが可能である。
【００４３】
図６は、撮像部１００によって生成された画像Ｇ１００を示している。撮像端末２０ａと、レンズモジュール２０ｂと、指５０との像が画像Ｇ１００に含まれる。撮像端末２０ａとレンズモジュール２０ｂとが撮像部１００の撮像範囲を遮蔽する。遮蔽物検出部１０１は、撮像端末２０ａを遮蔽物として検出する。ユーザは、撮像端末２０ａの表面に沿って指５０を移動させる。操作検出部１０２は、指５０の動きを検出する。出力部１０３は、指５０の動きに応じた制御信号を撮像端末２０ａに出力する。
【００４４】
レンズモジュール２０ｂが遮蔽物として検出されてもよい。ユーザは、レンズモジュール２０ｂの近傍で指５０を移動させることにより、レンズモジュール２０ｂを操作することが可能であってもよい。操作検出部１０２は、指５０の状態を検出してもよい。例えば、指５０の状態は指５０の位置である。本発明の実施形態では、遮蔽物が撮像端末２０ａでありユーザの指の動きに応じて制御信号が生成される例を説明する。
【００４５】
図７は、制御端末１０ａの動作の手順を示している。図７を参照し、制御端末１０ａの動作を説明する。
【００４６】
制御端末１０ａのアプリケーションが起動することにより、撮像端末２０ａの制御が開始される。撮像部１００は、スルー画の撮像を開始する（ステップＳ１００）。これによって、撮像部１００は、撮像範囲を撮像し、画像を生成する。スルー画は、連続的に生成される画像である。図７に示す動作と並行して撮像が行われる。生成された画像は遮蔽物検出部１０１と操作検出部１０２とによって使用される。
【００４７】
スルー画の撮像が開始された後、出力部１０３は、撮像端末２０ａの電源をオンにするための制御信号を撮像端末２０ａに出力し、撮像端末２０ａとの通信接続を開始する（ステップＳ１０５）。
【００４８】
撮像端末２０ａとの通信接続が開始された後、遮蔽物検出部１０１は遮蔽物の検出処理を行い、遮蔽物領域を算出する（ステップＳ１１０）。遮蔽物領域は、撮像部１００によって生成された画像において遮蔽物が占める領域である。
【００４９】
遮蔽物の検出処理が行われ、遮蔽物領域が算出された後、操作検出部１０２は、ステップＳ１１０の結果に基づいて、遮蔽物があるか否かを判断する（ステップＳ１１５）。
【００５０】
遮蔽物がない場合、撮像端末２０ａが装着されていない。この場合、表示部１０４は警告を表示する（ステップＳ１２０）。例えば、表示部１０４は、撮像端末２０ａの装着を促すメッセージを表示する。警告が表示された後、撮像端末２０ａが装着されるまで、ステップＳ１１５とステップＳ１２０とが繰り返される。
【００５１】
遮蔽物がある場合、撮像端末２０ａが装着されている。この場合、表示部１０４は、操作検出の開始を表示する（ステップＳ１２５）。例えば、表示部１０４は、ユーザの指の動きに応じた操作による制御が可能になったことを示すメッセージを表示する。
【００５２】
操作検出の開始が表示された後、操作検出部１０２は検出領域を算出する（ステップＳ１３０）。検出領域は、撮像部１００によって生成された画像においてユーザの指の動きを検出するための領域である。
【００５３】
検出領域が算出された後、操作検出部１０２は検出領域の状態を検出する（ステップＳ１３５）。例えば、ステップＳ１３５では、操作検出部１０２は、所定時間に生成された複数の画像について検出領域の変化量すなわち画像の変化量を算出する。
【００５４】
検出領域の状態が検出された後、操作検出部１０２は、ステップＳ１３５の結果に基づいて、検出領域が変化したか否かを判断する（ステップＳ１４０）。例えば、検出領域の変化量が所定量以上であった場合、検出領域が変化したと判断される。また、検出領域の変化量が所定量未満であった場合、検出領域が変化していないと判断される。
【００５５】
検出領域が変化している場合、操作に基づく制御が行われる（ステップＳ１４５）。検出領域が変化していない場合、操作が行われていないため、ステップＳ１４５は実行されない。
【００５６】
操作に基づく制御が行われた後、遮蔽物検出部１０１は遮蔽物の状態を検出する（ステップＳ１５０）。例えば、ステップＳ１５０では、操作検出部１０２は、撮像部１００から画像を取得し、ステップＳ１１０で算出された遮蔽物領域の画像を、遮蔽物があるときの画像と比較する。
【００５７】
遮蔽物の状態が検出された後、操作検出部１０２は、ステップＳ１５０の結果に基づいて、遮蔽物の状態の変化があるか否かを判断する（ステップＳ１５５）。遮蔽物の状態の変化がある場合、ステップＳ１１０が実行される。
【００５８】
遮蔽物の状態の変化がない場合、制御端末１０ａは、アプリケーションの終了操作が行われたか否かを判断する（ステップＳ１６０）。アプリケーションの終了操作が行われていない場合、ステップＳ１３５が実行される。
【００５９】
アプリケーションの終了操作が行われた場合、通信部１０３ａは、撮像端末２０ａの電源をオフにするための制御信号を撮像端末２０ａに無線送信する（ステップＳ１６５）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。この制御信号に基づいて、撮像端末２０ａの電源がオフになる。
【００６０】
撮像端末２０ａの電源をオフにするための制御信号が撮像端末２０ａに出力された後、撮像部１００は、スルー画の撮像を停止する（ステップＳ１７０）。スルー画の撮像が停止された後、アプリケーションが終了する。
【００６１】
図８は、ステップＳ１０５における制御端末１０ａの動作の手順を示している。図８を参照し、ステップＳ１０５における制御端末１０ａの動作を説明する。
【００６２】
制御端末１０ａは、撮像端末２０ａの電源状態を検出する（ステップＳ１０５０）。制御端末１０ａは、ステップＳ１０５０の結果に基づいて、撮像端末２０ａの電源がオンであるか否かを判断する（ステップＳ１０５１）。撮像端末２０ａの電源がオフである場合、通信部１０３ａは、撮像端末２０ａの電源をオンにするための制御信号を撮像端末２０ａに無線送信する（ステップＳ１０５２）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。この制御信号に基づいて、撮像端末２０ａの電源がオンになる。撮像端末２０ａの電源がオンである場合、ステップＳ１０５２は実行されない。
【００６３】
撮像端末２０ａの電源がオンになった後、制御端末１０ａは、撮像端末２０ａの通信状態を検出する（ステップＳ１０５３）。制御端末１０ａは、ステップＳ１０５３の結果に基づいて、撮像端末２０ａが通信中であるか否かを判断する（ステップＳ１０５４）。ステップＳ１０５４で判断される通信は、制御信号を除くデータ（画像等）の通信である。撮像端末２０ａが通信を停止している場合、通信部１０３ａは、撮像端末２０ａとの通信を開始する（ステップＳ１０５５）。撮像端末２０ａが通信中である場合、ステップＳ１０５５は実行されない。
【００６４】
撮像端末２０ａとの通信が開始された後、制御端末１０ａは、撮像端末２０ａからのスルー画の通信状態を検出する（ステップＳ１０５６）。制御端末１０ａは、ステップＳ１０５６の結果に基づいて、撮像端末２０ａがスルー画の通信中であるか否かを判断する（ステップＳ１０５７）。撮像端末２０ａがスルー画の通信を停止している場合、通信部１０３ａはスルー画の通信を開始し、表示部１０４はスルー画の表示を開始する（ステップＳ１０５８）。
【００６５】
ステップＳ１０５８では以下の処理が行われる。通信部１０３ａは、スルー画の通信が開始されるための制御信号を撮像端末２０ａに無線送信する。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。この制御信号に基づいて、通信部２０１はスルー画の通信を開始する。つまり、通信部２０１は、撮像部２００によって生成された画像を制御端末１０ａに無線送信する。制御端末１０ａの通信部１０３ａはスルー画の通信を開始する。つまり、通信部１０３ａは、画像を撮像端末２０ａから無線受信する。表示部１０４は、通信部１０３ａによって受信された画像を表示する。撮像端末２０ａがスルー画の通信中である場合、ステップＳ１０５８は実行されない。
【００６６】
スルー画の通信とスルー画の表示とが開始されることにより、ステップＳ１０５が終了する。
【００６７】
図９は、ステップＳ１１０における制御端末１０ａの動作の手順を示している。図９を参照し、ステップＳ１１０における制御端末１０ａの動作を説明する。
【００６８】
遮蔽物検出部１０１は、過去に撮像部１００から取得された複数の画像を比較する（ステップＳ１１００）。ステップＳ１１００で比較される画像は、最新の画像を含み、撮像部１００によって連続的に生成された複数の画像である。例えば、ステップＳ１１００では、遮蔽物検出部１０１は５つの画像を比較する。
【００６９】
画像が比較された後、遮蔽物検出部１０１は、ステップＳ１１００の結果に基づいて、画像における各領域の状態を検出する（ステップＳ１１０１）。さらに、遮蔽物検出部１０１は、ステップＳ１１０１の結果に基づいて、無変化領域があるか否かを判断する（ステップＳ１１０２）。無変化領域は、複数の画像の全てから検出される同一の領域、すなわち変化がない領域である。
【００７０】
無変化領域がない場合、遮蔽物検出部１０１は遮蔽物がないと判断する（ステップＳ１１０６）。無変化領域がある場合、遮蔽物検出部１０１は、無変化領域の画像に基づいて、無変化領域の色を検出する（ステップＳ１１０３）。
【００７１】
無変化領域の色が検出された後、遮蔽物検出部１０１は、ステップＳ１１０３の結果に基づいて、無変化領域の色が黒であるか否かを判断する（ステップＳ１１０４）。ステップＳ１１０４は、遮蔽物である撮像端末２０ａを検出するための処理である。この例では、撮像端末２０ａの色は黒である。撮像端末２０ａの色は黒以外の色であってもよい。ステップＳ１１０４では、遮蔽物検出部１０１は、無変化領域の少なくとも一部の色が黒であるか否かを判断してもよい。無変化領域の色が黒でない場合、遮蔽物検出部１０１は遮蔽物がないと判断する（ステップＳ１１０６）。
【００７２】
無変化領域の色が黒である場合、遮蔽物検出部１０１は遮蔽物があると判断する（ステップＳ１１０５）。さらに、遮蔽物検出部１０１は、無変化領域を遮蔽物領域として記憶する（ステップＳ１１０７）。ステップＳ１１０７では、画像における無変化領域の位置が記憶される。
【００７３】
ステップＳ１１０６またはステップＳ１１０７が実行されることにより、ステップＳ１１０が終了する。
【００７４】
図１０は、ステップＳ１３０における制御端末１０ａの動作の手順を示している。図１０を参照し、ステップＳ１３０における制御端末１０ａの動作を説明する。
【００７５】
遮蔽物検出部１０１は、ステップＳ１１０７で記憶された遮蔽物領域を画像に設定する（ステップＳ１３００）。ステップＳ１３００で使用される画像は、ステップＳ１１００で使用された複数の画像のいずれか１つであってよい。
【００７６】
遮蔽物領域が画像に設定された後、遮蔽物検出部１０１は、画像において、遮蔽物領域に基づいて検出領域を抽出する（ステップＳ１３０１）。これによって、遮蔽物検出部１０１は、遮蔽物を基準とする領域を検出する。
【００７７】
ステップＳ１３０１が実行されることにより、ステップＳ１３０が終了する。
【００７８】
図１１から図１６は、撮像部１００によって生成された画像を示している。図１１から図１６を参照し、遮蔽物領域と検出領域とを説明する。
【００７９】
図１１と図１２とは、遮蔽物領域と検出領域との第１の例を示している。図１１に示す画像Ｇ１１０において、撮像端末２０ａとレンズモジュール２０ｂとの像を含む遮蔽物領域Ｒ１１０が検出される。図１２に示す画像Ｇ１１１において、遮蔽物領域Ｒ１１０と同じ位置の検出領域Ｒ１１１が算出される。
【００８０】
図１３と図１４とは、遮蔽物領域と検出領域との第２の例を示している。図１３に示す画像Ｇ１２０において、撮像端末２０ａとレンズモジュール２０ｂとの像を含む遮蔽物領域Ｒ１２０が検出される。図１４に示す画像Ｇ１２１において、撮像端末２０ａの像が含まれる検出領域Ｒ１２１が遮蔽物領域Ｒ１１０から算出される。例えば、検出領域Ｒ１２１は所定の色の領域である。検出領域Ｒ１２１は画像の所定領域であってもよい。検出領域Ｒ１２１は図１２の検出領域Ｒ１１１よりも小さいため、ステップＳ１３５における画像処理の負荷が減る。また、レンズモジュール２０ｂの種類に応じた形状の違いによらず同一の検出領域Ｒ１２１の設定が可能である。
【００８１】
図１５と図１６とは、遮蔽物領域と検出領域との第３の例を示している。図１５に示す画像Ｇ１３０において、撮像端末２０ａとレンズモジュール２０ｂとの像を含む遮蔽物領域Ｒ１３０が検出される。図１６に示す画像Ｇ１３１において、撮像端末２０ａの一部の像が含まれる検出領域Ｒ１３１ａが遮蔽物領域Ｒ１３０から算出される。また、図１６に示す画像Ｇ１３１において、レンズモジュール２０ｂの像が含まれる遮蔽物領域Ｒ１３０の近傍の検出領域Ｒ１３１ｂが算出される。検出領域Ｒ１３１ａと検出領域Ｒ１３１ｂとは図１２の検出領域Ｒ１１１よりも小さいため、ステップＳ１３５における画像処理の負荷が減る。
【００８２】
遮蔽物検出部１０１がスイッチとして構成されている場合、遮蔽物領域は画像の所定領域である。この場合、遮蔽物検出部１０１は遮蔽物領域の情報を予め記憶している。
【００８３】
図１７は、ステップＳ１４５における制御端末１０ａの動作の手順を示している。図１７を参照し、ステップＳ１４５における制御端末１０ａの動作を説明する。
【００８４】
操作検出部１０２は、検出領域の画像に基づいてユーザの指または手の像の検出処理を行う（ステップＳ１４５０）。ステップＳ１４５０で使用される画像は、ステップＳ１３５で使用された画像である。例えば、ステップＳ１４５０では、操作検出部１０２は、肌色の領域を検出することによりユーザの指または手の像を検出する。あるいは、ステップＳ１４５０では、操作検出部１０２は、予め登録されたユーザの指または手の像の形状と一致する形状を検出することによりユーザの指または手の像を検出する。
【００８５】
さらに、操作検出部１０２は、ステップＳ１４５０の結果に基づいて、ユーザの指または手の像が検出領域の画像にあるか否かを判断する（ステップＳ１４５１）。ユーザの指または手の像が検出領域の画像にない場合、ステップＳ１４５が終了する。ユーザの指または手の像が検出領域の画像にある場合、操作検出部１０２は、検出領域の画像に基づいてユーザの指または手の動きの種類を検出する（ステップＳ１４５２）。ステップＳ１４５２では、ステップＳ１３５で使用された複数の画像が使用される。
【００８６】
ユーザの指または手の動きの種類が検出された後、操作検出部１０２は、ステップＳ１４５２の結果に基づいて、検出された動きが遮蔽物のタップであるか否かを判断する（ステップＳ１４５３）。検出された動きが遮蔽物のタップである場合、通信部１０３ａは、撮像端末２０ａの静止画撮像を制御するための制御信号を撮像端末２０ａに無線送信する（ステップＳ１４５４）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。この制御信号に基づいて、撮像部２００は静止画の撮像を行う。ステップＳ１４５４が実行されることにより、ステップＳ１４５が終了する。
【００８７】
検出された動きが遮蔽物のタップでない場合、操作検出部１０２は、検出された動きが遮蔽物に沿った回転であるか否かを判断する（ステップＳ１４５５）。検出された動きが遮蔽物に沿った回転である場合、通信部１０３ａは、レンズのフォーカスを制御するための制御信号を撮像端末２０ａに無線送信する（ステップＳ１４５６）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。通信部２０１は、受信された制御信号をレンズモジュール２０ｂに送信する。この制御信号に基づいて、レンズモジュール２０ｂはフォーカスを調整する。ステップＳ１４５６が実行されることにより、ステップＳ１４５が終了する。
【００８８】
検出された動きが遮蔽物に沿った回転でない場合、操作検出部１０２は、検出された動きが奥行き方向のスライドであるか否かを判断する（ステップＳ１４５７）。検出された動きが奥行き方向のスライドである場合、通信部１０３ａは、レンズのズームを制御するための制御信号を撮像端末２０ａに無線送信する（ステップＳ１４５８）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。通信部２０１は、受信された制御信号をレンズモジュール２０ｂに送信する。この制御信号に基づいて、レンズモジュール２０ｂはズームを調整する。ステップＳ１４５８が実行されることにより、ステップＳ１４５が終了する。
【００８９】
検出された動きが奥行き方向のスライドでない場合、操作検出部１０２は、検出された動きが上方向または下方向のスライドであるか否かを判断する（ステップＳ１４５９）。検出された動きが上方向または下方向のスライドである場合、通信部１０３ａは、レンズの絞りを制御するための制御信号を撮像端末２０ａに無線送信する（ステップＳ１４６０）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。通信部２０１は、受信された制御信号をレンズモジュール２０ｂに送信する。この制御信号に基づいて、レンズモジュール２０ｂは絞りを調整する。ステップＳ１４６０が実行されることにより、ステップＳ１４５が終了する。検出された動きが上方向または下方向のスライドでない場合、ステップＳ１４５が終了する。
【００９０】
図１８から図２０は、撮像部１００によって生成された画像を示している。図１８から図２０を参照し、ステップＳ１４５２で検出されるユーザの指または手の動きを説明する。
【００９１】
図１８は、フォーカス制御に対応する動きの例を示している。図１８に示す画像Ｇ１４０の検出領域Ｒ１４０において、ユーザの指５０の動きが検出される。具体的には、検出領域Ｒ１４０の輪郭線を構成する曲線に沿った指５０の曲線状の動きが検出される。例えば、指５０が矢印Ａ１４０の方向に動く場合、フォーカスが近距離側の値に変更される。また、指５０が矢印Ａ１４１の方向に動く場合、フォーカスが遠距離側の値に変更される。指５０が移動した距離に応じてフォーカスの制御量が変化する。
【００９２】
図１９は、ズーム（焦点距離）制御に対応する動きの例を示している。図１９に示す画像Ｇ１５０の検出領域Ｒ１５０において、ユーザの指５０の動きが検出される。具体的には、検出領域Ｒ１５０の輪郭線を構成する曲線の内側に向かう方向または曲線の外側に向かう方向の指５０の動きが検出される。例えば、指５０が矢印Ａ１５０の方向に動く場合、ズーム（焦点距離）が広角側の値に変更される。また、指５０が矢印Ａ１５１の方向に動く場合、ズーム（焦点距離）が望遠側の値に変更される。指５０が移動した距離に応じてズーム（焦点距離）の制御量が変化する。
【００９３】
図２０は、絞り制御に対応する動きの例を示している。図２０に示す画像Ｇ１６０の検出領域Ｒ１６０において、ユーザの指５０の動きが検出される。具体的には、検出領域Ｒ１６０における上方向または下方向の指５０の動きが検出される。例えば、指５０が矢印Ａ１６０の方向すなわち上方向に動く場合、絞りが、より開放された値に変更される。また、指５０が矢印Ａ１６１の方向すなわち下方向に動く場合、絞りが、より絞られた値に変更される。指５０が移動した距離に応じて絞りの制御量が変化する。
【００９４】
ユーザの指または手の動きに応じて撮像端末２０ａの撮像部２００のシャッタースピードが制御されてもよい。シャッタースピードの制御は、絞りの制御と同様の方法で行われてもよい。例えば、１本の指が検出された場合、上方向または下方向の指の動きに応じて絞りが制御され、２本の指が検出された場合、上方向または下方向の指の動きに応じてシャッタースピードが制御されてもよい。
【００９５】
特定の領域を指示する線等が撮像端末２０ａの表面に予め記載されていてもよい。あるいは、周囲の領域と色が異なる領域が撮像端末２０ａの表面にあってもよい。ユーザの指または手が上記の線または領域を横切るか否かが検出されてもよい。この場合、予め撮像端末２０ａに記載されている線または領域の色を指標にすることにより、指または手による操作を行う領域がユーザーにより分かりやすい。また、誤検出がより少ない。
【００９６】
本発明の実施形態によれば、撮像部１００と、遮蔽物検出部１０１と、操作検出部１０２と、出力部１０３とを有する制御端末１０，１０ａが構成される。
【００９７】
また、本発明の実施形態によれば、制御端末１０ａと、撮像端末２０ａとを有する撮像システム１が構成される。制御端末１０ａは、撮像部１００（第１の撮像部）と、遮蔽物検出部１０１と、操作検出部１０２と、出力部１０３とを有する。撮像端末２０ａは、撮像部２００（第２の撮像部）と、通信部２０１（入力部）とを有する。
【００９８】
また、本発明の実施形態によれば、撮像ステップ（ステップＳ１００）と、遮蔽物検出ステップ（ステップＳ１１０）と、操作検出ステップ（ステップＳ１４５２）と、出力ステップ（ステップＳ１４５４，Ｓ１４５６，Ｓ１４５８，Ｓ１４６０）と、を有する制御方法が構成される。撮像ステップでは、撮像部１００によって、撮像範囲が撮像され、第１の画像が生成される。遮蔽物検出ステップでは、制御端末１０，１０ａに固定されている遮蔽物が検出される。遮蔽物は撮像範囲の一部を遮蔽する。操作検出ステップでは、遮蔽物が検出された後、第２の画像に基づいて、遮蔽物と異なる物体の所定の状態または物体の所定の動きが検出される。第２の画像は第１の画像において遮蔽物を基準とする領域の画像である。出力ステップでは、物体の所定の状態または物体の所定の動きが検出された場合、制御信号が制御対象端末２０に出力される。
【００９９】
また、本発明の実施形態によれば、撮像ステップ（ステップＳ１００）と、遮蔽物検出ステップ（ステップＳ１１０）と、操作検出ステップ（ステップＳ１４５２）と、出力ステップ（ステップＳ１４５４，Ｓ１４５６，Ｓ１４５８，Ｓ１４６０）と、をコンピュータに実行させるためのプログラムが構成される。
【０１００】
本発明の実施形態では、画像を投影する手段が必要ではないので、操作検出のための構成を簡易にすることができる。
【０１０１】
物体の所定の状態または物体の所定の動きが検出される領域は遮蔽物の表面の領域または遮蔽物の近傍の領域である。このため、指または手による操作を行う領域がユーザに分かりやすい。また、検出領域が限られているため、操作が高精度に検出されやすく、誤検出がより少ない。
【０１０２】
（第１の変形例）
本発明の実施形態における第１の変形例では、制御端末１０ａの撮像部１００は、フォーカスまたは露出の設定が可能である。遮蔽物検出部１０１が遮蔽物を検出している間、撮像部１００に設定されているフォーカスまたは露出は固定される。
【０１０３】
言い換えると、撮像部１００の撮像範囲に遮蔽物がある間、撮像部１００に設定されているフォーカスまたは露出は固定される。つまり、遮蔽物検出部１０１が遮蔽物を検出した場合（撮像部１００の撮像範囲に遮蔽物がある場合）、撮像部１００に設定されているフォーカスまたは露出は固定される。その後、遮蔽物が検出されない場合のみ、撮像部１００に設定されているフォーカスまたは露出が変更される。
【０１０４】
さらに言い換えると、遮蔽物が検出された後、操作検出部１０２が物体の所定の状態または物体の所定の動きの検出のための動作を行っている間、撮像部１００に設定されているフォーカスまたは露出は固定される。
【０１０５】
黒い遮蔽物が撮像範囲の大部分を占める場合、遮蔽物に依存して露出が設定されやすい。また、近距離にある遮蔽物が撮像範囲の大部分を占める場合、フォーカスポイントが遮蔽物上に設定されやすい。このため、遮蔽物に依存してフォーカスが設定されやすい。以上により、撮像部１００によって生成された画像が、ユーザの指または手による操作の検出に適していない場合がある。第１の変形例では、ユーザの指または手による操作の検出時にフォーカスまたは露出が固定される。このため、操作検出部１０２は操作の検出を高精度に行うことができる。
【０１０６】
また、遮蔽物検出部１０１が遮蔽物の検出のための動作を開始した後、遮蔽物検出部１０１が遮蔽物を検出するまで、撮像部１００に設定されているフォーカスまたは露出は固定される。遮蔽物検出部１０１が遮蔽物を検出するまでに固定されるフォーカスまたは露出の値は、遮蔽物検出部１０１が遮蔽物を検出した後に固定されるフォーカスまたは露出の値と異なる。第１の変形例では、遮蔽物の検出時にフォーカスまたは露出が固定される。このため、遮蔽物検出部１０１は遮蔽物の検出を高精度に行うことができる。
【０１０７】
図２１は、第１の変形例の制御端末１０ａの動作の手順を示している。図２１を参照し、第１の変形例の制御端末１０ａの動作を説明する。図２１に示す処理について、図７に示す処理と異なる点を説明する。
【０１０８】
ステップＳ１００でスルー画の撮像が開始された後、制御端末１０ａは、撮像部１００の撮像条件を遮蔽物検出のための条件に設定する（ステップＳ２００）。撮像条件が設定された後、ステップＳ１０５が実行される。
【０１０９】
ステップＳ１１５において遮蔽物がある場合、制御端末１０ａは、撮像部１００の撮像条件を操作検出のための条件に設定する（ステップＳ２０５）。撮像条件が設定された後、ステップＳ１２５が実行される。
【０１１０】
ステップＳ１６５が実行された後、制御端末１０ａは、ステップＳ２０５で撮像部１００に設定された撮像条件を解除する（ステップＳ２１０）。撮像条件が解除された後、ステップＳ１７０が実行される。
【０１１１】
上記以外の点については、図２１に示す処理は図７に示す処理と同様である。図２１に示す処理では、ステップＳ２００でフォーカスまたは露出が設定された後、遮蔽物が検出されるまでフォーカスまたは露出は固定される。遮蔽物が検出された場合、ステップＳ２０５でフォーカスまたは露出が変更される。
【０１１２】
図２２は、ステップＳ２００における制御端末１０ａの動作の手順の第１の例を示している。図２２を参照し、ステップＳ２００における制御端末１０ａの動作の第１の例を説明する。
【０１１３】
制御端末１０ａは、撮像部１００の露光モードをオートモードに設定する（ステップＳ２０００）。さらに、制御端末１０ａは、撮像部１００のオート露光に関する露光補正量を−１．５ＥＶに設定する（ステップＳ２００１）。さらに、制御端末１０ａは、撮像部１００のフォーカスポイントを撮像範囲内の左側の位置に設定する（ステップＳ２００２）。ステップＳ２００２が実行されることにより、ステップＳ２００が終了する。
【０１１４】
上記のように撮像条件が設定された場合、黒い遮蔽物が撮像範囲の大部分を占めたときに露出が遮蔽物に依存しにくい。つまり、露出がオーバーになりにくい。このため、遮蔽物検出部１０１は遮蔽物を安定的に検出することができる。また、撮像範囲の左側にあることが想定される遮蔽物にピントが合うように、フォーカスポイントが設定される。このため、遮蔽物がボケにくい。
【０１１５】
図２３は、ステップＳ２０５における制御端末１０ａの動作の手順の第１の例を示している。図２３を参照し、ステップＳ２０５における制御端末１０ａの動作の第１の例を説明する。
【０１１６】
制御端末１０ａは、撮像部１００の露光モードをオートモードに設定する（ステップＳ２０５０）。さらに、制御端末１０ａは、撮像部１００のオート露光に関する露光補正量を−２ＥＶに設定する（ステップＳ２０５１）。さらに、制御端末１０ａは、撮像部１００のフォーカスポイントを遮蔽物の検出時の位置よりも中央側の位置に設定する（ステップＳ２０５２）。ステップＳ２０５２が実行されることにより、ステップＳ２０５が終了する。上記のように撮像条件が設定された場合、黒い遮蔽物が撮像範囲の大部分を占めたときに露出が遮蔽物に依存しにくい。つまり、露出がオーバーになりにくい。さらに、ユーザの指または手が検出されやすい。このため、操作検出部１０２は、ユーザの指または手による操作を安定的に検出することができる。また、検出領域にピントが合うように、フォーカスポイントが遮蔽物の検出時の位置よりも中央側の位置に設定される。このため、ユーザの指または手による操作が行われる領域がボケにくい。この例ではフォーカスポイントが中央側の位置に固定される。しかし、検出領域等にフォーカスポイントが設定されてもよい。
【０１１７】
ステップＳ２０５が実行されなくてもよい。ステップＳ２０５では、遮蔽物すなわち撮像端末２０ａまたはレンズモジュール２０ｂに応じた撮像条件が設定されてもよい。これによって、操作検出部１０２は、撮像端末２０ａまたはレンズモジュール２０ｂの色または形状に応じて安定的に操作検出を行うことができる。
【０１１８】
ステップＳ２０００とステップＳ２０５０とにおいて、撮像部１００の露光モードが絞り優先モードに設定されてもよい。絞り優先モードでは、ユーザによって指定された絞り値を基準に、露出が適正になるようにシャッタースピード値が設定される。絞り優先モードでは、絞りが絞られている場合であっても比較的ピントの合った画像が得られやすい。このため、遮蔽物検出部１０１は遮蔽物を検出しやすい。また、操作検出部１０２はユーザの指または手による操作を検出しやすい。
【０１１９】
図２４は、ステップＳ２００における制御端末１０ａの動作の手順の第２の例を示している。図２４を参照し、ステップＳ２００における制御端末１０ａの動作の第２の例を説明する。
【０１２０】
制御端末１０ａは、撮像部１００の露光モードをマニュアルモードに設定する（ステップＳ２００５）。さらに、制御端末１０ａは、明るさが適正露光に対して−１ＥＶとなるように、現在の明るさに基づいて撮像部１００の絞りと、シャッタースピードと、感度とを設定する（ステップＳ２００６）。さらに、制御端末１０ａは、撮像部１００のフォーカス位置を７ｃｍに設定する（ステップＳ２００７）。さらに、制御端末１０ａは、ホワイトバランスを太陽光に適した状態に設定する（ステップＳ２００８）。ステップＳ２００８が実行されることにより、ステップＳ２００が終了する。
【０１２１】
ステップＳ２００６では、撮像部１００の絞りと、シャッタースピードと、感度とがそれぞれ所定値に設定されてもよい。例えば、絞りがＦ８に設定され、シャッタースピードが１／１２５秒に設定され、感度がＩＳＯ４００に設定されてもよい。ステップＳ２００６では、明るさが適正露光に対して−１ＥＶとなるように設定される。適正露光は、撮像部１００のＡＥ機能の値を基準に設定されてもよい。あるいは、制御端末１０ａまたは撮像端末２０ａなどが外部照度センサを持っている場合、適正露光は、外部照度センサの値を基準に設定されてもよい。ノイズが多い場合、遮蔽物の検出精度が下がるので、ステップＳ２００６では感度が低い値に設定されてもよい。シャッタースピードが遅い場合、操作検出の精度が下がるので、ステップＳ２００６ではシャッタースピードが高速に設定されてもよい。ステップＳ２００６で設定される条件は、遮蔽物検出部１０１によって遮蔽物の検出が行われている間、定期的に変更されてもよい。例えば、ステップＳ２００６で設定される条件は５分毎に変更されてもよい。
【０１２２】
図２５は、ステップＳ２０５における制御端末１０ａの動作の手順の第２の例を示している。図２５を参照し、ステップＳ２０５における制御端末１０ａの動作の第２の例を説明する。
【０１２３】
制御端末１０ａは、撮像部１００の露光モードをマニュアルモードに設定する（ステップＳ２０５５）。さらに、制御端末１０ａは、明るさが適正露光に対して−１ＥＶとなるように、現在の明るさに基づいて撮像部１００の絞りと、シャッタースピードと、感度とを設定する（ステップＳ２０５６）。さらに、制御端末１０ａは、撮像部１００のフォーカス位置を５ｃｍに設定する（ステップＳ２０５７）。さらに、制御端末１０ａは、色温度を再度検出し、検出された色温度に適した状態にホワイトバランスを設定する（ステップＳ２０５８）。ステップＳ２０５８が実行されることにより、ステップＳ２０５が終了する。
【０１２４】
第２の例のステップＳ２００とステップＳ２０５とでは、全ての撮像条件が固定される。このため、画像の明るさ、ピント位置、および色などの変動がない。この結果、遮蔽物検出部１０１は遮蔽物を安定的に検出することができる。また、操作検出部１０２はユーザの指または手による操作を安定的に検出することができる。
【０１２５】
（第２の変形例）
本発明の実施形態における第２の変形例では、操作検出部１０２は、遮蔽物が検出された後、第２の画像に基づいて、物体の所定の状態または物体の所定の動きを検出する。第２の画像は、撮像部１００によって生成された第１の画像において、遮蔽物の像がある第１の領域に含まれる第２の領域の画像である。例えば、第１の領域は、撮像端末２０ａとレンズモジュール２０ｂとの像を含む領域である。例えば、第２の領域は、撮像端末２０ａとレンズモジュール２０ｂとのいずれか１つの像を含む領域である。第２の領域は第１の領域よりも小さい。
【０１２６】
制御端末１０は、制御対象端末２０から情報を入力する入力部を有する。例えば、入力部は図２の通信部１０３ａである。操作検出部１０２は、入力部を介して入力された情報に基づいて第２の領域を検出する。
【０１２７】
例えば、制御対象端末２０は撮像端末２０ａであり、レンズモジュール２０ｂが撮像端末２０ａに接続される。通信部１０３ａは、撮像端末２０ａからレンズモジュール２０ｂの情報を入力する。例えば、第２の領域は、撮像端末２０ａの像を含む領域である。レンズモジュール２０ｂの情報は、レンズモジュール２０ｂを識別する情報である。
【０１２８】
図２６と図２７とは、第２の変形例の制御端末１０ａの動作の手順を示している。図２６と図２７とを参照し、第２の変形例の制御端末１０ａの動作を説明する。図２６と図２７とに示す処理について、図７に示す処理と異なる点を説明する。
【０１２９】
ステップＳ１２５が実行された後、撮像端末２０ａの通信部２０１はレンズモジュール２０ｂの情報をレンズモジュール２０ｂから受信する。通信部２０１は、受信された情報を制御端末１０ａに無線送信する。制御端末１０ａの通信部１０３ａは、レンズモジュール２０ｂの情報を撮像端末２０ａから無線受信する（ステップＳ３００）。これによって、レンズモジュール２０ｂの情報が取得される。
【０１３０】
レンズモジュール２０ｂの情報が取得された後、操作検出部１０２は画像の検出領域を算出する（ステップＳ３０５）。検出領域は、ユーザの指の動きを検出するための領域である。検出領域が算出された後、ステップＳ１３５が実行される。
【０１３１】
ステップＳ１４５が実行された後、レンズモジュール２０ｂの情報が取得される（ステップＳ３１０）。ステップＳ３１０ではステップＳ３００で行われる処理と同様の処理が行われる。
【０１３２】
レンズモジュール２０ｂの情報が取得された後、操作検出部１０２は、ステップＳ３１０の結果に基づいて、レンズモジュール２０ｂが変化したか否かを判断する（ステップＳ３１５）。撮像端末２０ａに装着されているレンズモジュール２０ｂが交換されることによってレンズモジュール２０ｂが変化した場合、ステップＳ１５０が実行される。レンズモジュール２０ｂが変化していない場合、ステップＳ３０５が実行される。
【０１３３】
ステップＳ３００とステップＳ３１０とでは、制御端末１０ａは、撮像部１００によって生成された画像に基づいてレンズモジュール２０ｂの情報を取得してもよい。
【０１３４】
上記以外の点については、図２６と図２７とに示す処理は図７に示す処理と同様である。
【０１３５】
図２８は、ステップＳ３０５における制御端末１０ａの動作の手順を示している。図２８を参照し、ステップＳ３０５における制御端末１０ａの動作を説明する。
【０１３６】
遮蔽物検出部１０１は、ステップＳ１１０７で記憶された遮蔽物領域を画像に設定する（ステップＳ３０５０）。ステップＳ３０５０で使用される画像は、ステップＳ１１００で使用された複数の画像のいずれか１つであってよい。
【０１３７】
遮蔽物領域が画像に設定された後、遮蔽物検出部１０１は、画像において、遮蔽物領域とレンズモジュール２０ｂの情報とに基づいて検出領域を抽出する（ステップＳ３０５１）。これによって、遮蔽物検出部１０１は、遮蔽物を基準とする領域を検出する。このとき、遮蔽物検出部１０１は、遮蔽物のうち撮像端末２０ａを基準とする第１の領域と、遮蔽物のうちレンズモジュール２０ｂを基準とする第２の領域とを検出する。
【０１３８】
ステップＳ３０５１が実行されることにより、ステップＳ３０５が終了する。
【０１３９】
図２９から図３４は、撮像部１００によって生成された画像を示している。図２９から図３４を参照し、第２の変形例における遮蔽物領域と検出領域とを説明する。
【０１４０】
図２９に示す画像Ｇ１７０において、撮像端末２０ａとレンズモジュール２０ｂとの像を含む遮蔽物領域Ｒ１７０が検出される。図３０に示す画像Ｇ１７１において、図２９における遮蔽物領域Ｒ１７０から遮蔽物領域Ｒ１７１と遮蔽物領域Ｒ１７２とが算出される。遮蔽物領域Ｒ１７１は、撮像端末２０ａの像を含む領域である。遮蔽物領域Ｒ１７２は、レンズモジュール２０ｂの像を含む領域である。
【０１４１】
例えば、遮蔽物検出部１０１は、画像Ｇ１７１における領域の色または形状に基づいて遮蔽物領域Ｒ１７１と遮蔽物領域Ｒ１７２とを検出する。例えば、遮蔽物検出部１０１は、黒の領域を遮蔽物領域Ｒ１７１として検出する。また、遮蔽物検出部１０１は、シルバーの領域を遮蔽物領域Ｒ１７２として検出する。あるいは、遮蔽物検出部１０１は、丸い部分を含む領域を遮蔽物領域Ｒ１７１として検出する。また、遮蔽物検出部１０１は、筒状の領域を遮蔽物領域Ｒ１７２として検出する。
【０１４２】
遮蔽物検出部１０１は、撮像端末２０ａの形状の情報とレンズモジュール２０ｂの形状の情報とに基づいて遮蔽物領域Ｒ１７１と遮蔽物領域Ｒ１７２とを検出してもよい。撮像端末２０ａの形状の情報とレンズモジュール２０ｂの形状の情報とは制御端末１０ａに予め記憶される。遮蔽物検出部１０１は、撮像端末２０ａの形状と一致する形状を有する領域を遮蔽物領域Ｒ１７１として検出する。また、遮蔽物検出部１０１は、レンズモジュール２０ｂの形状と一致する形状を有する領域を遮蔽物領域Ｒ１７２として検出する。
【０１４３】
図３１に示す画像Ｇ１７２において、遮蔽物検出部１０１は、遮蔽物領域Ｒ１７１を基準とする検出領域Ｒ１７３と、遮蔽物領域Ｒ１７２を基準とする検出領域Ｒ１７４，Ｒ１７５とを算出する。検出領域Ｒ１７３は遮蔽物領域Ｒ１７１と重なる。検出領域Ｒ１７３は、撮像端末２０ａに対する操作が検出される領域である。例えば、シャッタースピードの操作が検出領域Ｒ１７３から検出される。検出領域Ｒ１７４は遮蔽物領域Ｒ１７２と重なる。検出領域Ｒ１７５は遮蔽物領域Ｒ１７２の近傍にある。検出領域Ｒ１７４と検出領域Ｒ１７５とは、レンズモジュール２０ｂに対する操作が検出される領域である。例えば、フォーカスの操作が検出領域Ｒ１７４から検出される。また、ズームの操作が検出領域Ｒ１７５から検出される。
【０１４４】
例えば、感度の操作または撮像端末２０ａの電源オンの操作が検出領域Ｒ１７３から検出されてもよい。また、絞りの操作が検出領域Ｒ１７４または検出領域Ｒ１７５から検出されてもよい。
【０１４５】
撮像端末２０ａの像を基準とする第１の領域（検出領域Ｒ１７３）から撮像端末２０ａに対する操作が検出される。また、レンズモジュール２０ｂの像を基準とする第２の領域（検出領域Ｒ１７４，Ｒ１７５）からレンズモジュール２０ｂに対する操作が検出される。このため、指または手による操作を行う領域がユーザに分かりやすい。
【０１４６】
図３２は、図２９に示す状態からレンズモジュール２０ｂが交換された後の状態を示している。交換とは、異なるレンズモジュール２０ｂが装着されたことを意味する。図３２に示す画像Ｇ１８０において、撮像端末２０ａとレンズモジュール２０ｂとの像を含む遮蔽物領域Ｒ１８０が検出される。レンズモジュール２０ｂが交換された場合、遮蔽物領域Ｒ１８０は図２９の遮蔽物領域Ｒ１７０とは異なることが想定される。もちろん、遮蔽物領域Ｒ１８０が遮蔽物領域Ｒ１７０と同一であってもよい。ズーム状態等の変化によってレンズモジュール２０ｂの形状が変化する場合、レンズモジュール２０ｂの形状に応じて異なる遮蔽物領域が検出されてもよい。あるいは、レンズモジュール２０ｂの形状によらず同一の遮蔽物領域が検出されてもよい。例えば、レンズモジュール２０ｂによらず撮像端末２０ａの像を含む遮蔽物領域が検出される。あるいは、レンズモジュール２０ｂの一部と撮像端末２０ａとの像を含む遮蔽物領域が検出されてもよい。
【０１４７】
図３３に示す画像Ｇ１８１において、図３２における遮蔽物領域Ｒ１８０から遮蔽物領域Ｒ１８１と遮蔽物領域Ｒ１８２とが算出される。遮蔽物領域Ｒ１８１は、撮像端末２０ａの像を含む領域である。遮蔽物領域Ｒ１８２は、レンズモジュール２０ｂの像を含む領域である。遮蔽物領域Ｒ１８１と遮蔽物領域Ｒ１８２との算出方法は、図３０における遮蔽物領域Ｒ１７１と遮蔽物領域Ｒ１７２との算出方法と同様である。
【０１４８】
図３４に示す画像Ｇ１８２において、遮蔽物検出部１０１は、遮蔽物領域Ｒ１８１を基準とする検出領域Ｒ１８３と、遮蔽物領域Ｒ１８２を基準とする検出領域Ｒ１８４，Ｒ１８５とを算出する。検出領域Ｒ１８３は遮蔽物領域Ｒ１８１と重なる。検出領域Ｒ１８３は、撮像端末２０ａに対する操作が検出される領域である。検出領域Ｒ１８４は遮蔽物領域Ｒ１８２と重なる。検出領域Ｒ１８５は遮蔽物領域Ｒ１８２の近傍にある。検出領域Ｒ１８４と検出領域Ｒ１８５とは、レンズモジュール２０ｂに対する操作が検出される領域である。検出領域Ｒ１８３，Ｒ１８４，Ｒ１８５の算出方法は、図３１における検出領域Ｒ１７３，Ｒ１７４，Ｒ１７５の算出方法と同様である。
【０１４９】
検出領域Ｒ１８４は、図３１における検出領域Ｒ１７４と異なる。また、検出領域Ｒ１８５は、図３１における検出領域Ｒ１７５と異なる。レンズモジュール２０ｂに応じて検出領域を変えることにより、レンズモジュール２０ｂ毎にユーザが使いやすい検出領域を設定することができる。
【０１５０】
（第３の変形例）
本発明の実施形態における第３の変形例では、操作検出部１０２は、遮蔽物が検出された後、第２の画像に基づいて、遮蔽物と異なる物体の所定の動きを検出する。第２の画像は、撮像部１００によって生成された第１の画像において遮蔽物を基準とする領域の画像である。物体の所定の動きは、物体による遮蔽物へのタップである。
【０１５１】
図３５は、第４の変形例の制御端末１０ａの動作の手順を示している。図３５を参照し、第４の変形例の制御端末１０ａの動作を説明する。図３５に示す処理について、図７に示す処理と異なる点を説明する。
【０１５２】
ステップＳ１００が実行された後、ステップＳ１１０が実行される。ステップＳ１４０で検出領域が変化している場合、制御端末１０ａは、撮像端末２０ａの電源状態を検出する（ステップＳ４００）。制御端末１０ａは、ステップＳ４００の結果に基づいて、撮像端末２０ａの電源がオンであるか否かを判断する（ステップＳ４０５）。撮像端末２０ａの電源がオンである場合、ステップＳ１４５が実行される。撮像端末２０ａの電源がオフである場合、制御端末１０ａは、ユーザの指または手による操作に基づいて撮像端末２０ａの電源をオンにする制御を行う（ステップＳ４１０）。ステップＳ４１０が実行された後、ステップＳ１５０が実行される。
【０１５３】
上記以外の点については、図３５に示す処理は図７に示す処理と同様である。
【０１５４】
図３６は、ステップＳ４１０における制御端末１０ａの動作の手順を示している。図３６を参照し、ステップＳ４１０における制御端末１０ａの動作を説明する。
【０１５５】
操作検出部１０２は、検出領域の画像に基づいてユーザの指または手の像の検出処理を行う（ステップＳ４１００）。ステップＳ４１００は、ステップＳ１４５０と同様である。さらに、操作検出部１０２は、ステップＳ４１００の結果に基づいて、ユーザの指または手の像が検出領域の画像にあるか否かを判断する（ステップＳ４１０１）。
【０１５６】
ユーザの指または手の像が検出領域の画像にない場合、ステップＳ４１０が終了する。ユーザの指または手の像が検出領域の画像にある場合、操作検出部１０２は、検出領域の画像に基づいてユーザの指または手の動きの種類を検出する（ステップＳ４１０２）。ステップＳ４１０２は、ステップＳ１４５２と同様である。
【０１５７】
ユーザの指または手の動きの種類が検出された後、操作検出部１０２は、ステップＳ４１０２の結果に基づいて、検出された動きが遮蔽物のタップであるか否かを判断する（ステップＳ４１０３）。検出された動きが遮蔽物のタップでない場合、ステップＳ４１０が終了する。検出された動きが遮蔽物のタップである場合、通信部１０３ａは、撮像端末２０ａの電源をオンにするための制御信号を撮像端末２０ａに無線送信する（ステップＳ４１０４）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。この制御信号に基づいて、撮像端末２０ａの電源がオンになる。
【０１５８】
撮像端末２０ａの電源がオンになった後、通信部１０３ａは、撮像端末２０ａとの通信を開始する（ステップＳ４１０５）。撮像端末２０ａとの通信が開始された後、通信部１０３ａはスルー画の通信を開始し、表示部１０４はスルー画の表示を開始する（ステップＳ４１０６）。ステップＳ４１０６は、ステップＳ１０５８と同様である。
【０１５９】
スルー画の通信とスルー画の表示とが開始されることにより、ステップＳ４１０が終了する。
【０１６０】
（第４の変形例）
本発明の実施形態における第４の変形例では、操作検出部１０２は、遮蔽物が検出された後、第２の画像に基づいて、物体の場所と物体の所定の状態とを検出する。第２の画像は、撮像部１００によって生成された第１の画像において遮蔽物を基準とする領域の画像である。出力部１０３は、物体の所定の状態が検出された場合、物体の場所に応じた制御信号を制御対象端末２０に出力する。
【０１６１】
例えば、制御対象端末２０は、撮像端末２０ａに接続されるレンズモジュール２０ｂである。通信部１０３ａ（出力部）は、物体の場所がレンズモジュール２０ｂを基準とする領域であり、かつ、物体の所定の状態が検出された場合、物体の場所に応じた制御信号をレンズモジュール２０ｂに出力する。
【０１６２】
例えば、操作検出部１０２によって検出される物体の場所は、レンズモジュール２０ｂの表面またはその近傍である。画像において物体の像がレンズモジュール２０ｂの像と重なる場合、または画像において物体の像がレンズモジュール２０ｂの像の近傍にある場合、物体はレンズモジュール２０ｂの表面またはその近傍にある。例えば、物体の所定の状態は、画像において物体の像がレンズモジュール２０ｂの像を基準とする領域にある状態である。
【０１６３】
第４の変形例の制御端末１０ａの動作は、図２６と図３７とに従う。図２６のステップＳ３０５は図７のステップＳ１３０に変更される。図３７を参照し、第４の変形例の制御端末１０ａの動作を説明する。図３７に示す処理について、図７に示す処理と異なる点を説明する。
【０１６４】
ステップＳ１３０が実行された後、操作検出部１０２は、検出領域の画像に基づいてユーザの指または手の像の検出処理を行う（ステップＳ５００）。ステップＳ５００は、ステップＳ１４５０と同様である。さらに、操作検出部１０２は、ステップＳ５００の結果に基づいて、ユーザの指または手の像が検出領域の画像にあるか否かを判断する（ステップＳ５０５）。
【０１６５】
第４の変形例における検出領域は、複数の検出領域すなわち第１の検出領域と第２の検出領域とを含む。第１の検出領域と第２の検出領域とは、レンズモジュール２０ｂの像を基準とする領域である。第２の検出領域は第１の検出領域と異なる。
【０１６６】
ユーザの指または手の像が検出領域の画像にない場合、ステップＳ５４０が実行される。ユーザの指または手の像が検出領域の画像にある場合、操作検出部１０２は、ユーザの指または手の像が第１の検出領域にあるか否かを判断する（ステップＳ５１０）。
【０１６７】
ユーザの指または手の像が第１の検出領域にある場合、通信部１０３ａは、ズームをワイド側に駆動するための制御信号を撮像端末２０ａに無線送信する（ステップＳ５１５）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。通信部２０１は、受信された制御信号をレンズモジュール２０ｂに送信する。この制御信号に基づいて、レンズモジュール２０ｂはズームをワイド側に駆動する。
【０１６８】
ユーザの指または手の像が第１の検出領域にない場合、操作検出部１０２は、ユーザの指または手の像が第２の検出領域にあるか否かを判断する（ステップＳ５２０）。ユーザの指または手の像が第２の検出領域にない場合、ステップＳ５４０が実行される。
【０１６９】
ユーザの指または手の像が第２の検出領域にある場合、通信部１０３ａは、ズームをテレ側に駆動するための制御信号を撮像端末２０ａに無線送信する（ステップＳ５２５）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。通信部２０１は、受信された制御信号をレンズモジュール２０ｂに送信する。この制御信号に基づいて、レンズモジュール２０ｂはズームをテレ側に駆動する。
【０１７０】
ステップＳ５１５またはステップＳ５２５が実行された後、撮像端末２０ａの通信部２０１は、レンズモジュール２０ｂのズームに関する情報をレンズモジュール２０ｂから受信する。通信部２０１は、受信された情報を制御端末１０ａに無線送信する。制御端末１０ａの通信部１０３ａは、レンズモジュール２０ｂのズームに関する情報を撮像端末２０ａから無線受信する。制御端末１０ａは、レンズモジュール２０ｂのズームに関する情報に基づいてズームの状態を検出する（ステップＳ５３０）。制御端末１０ａは、ステップＳ５３０の結果に基づいて、ズームがズーム端、すなわちワイド端またはテレ端にあるか否かを判断する（ステップＳ５３５）。
【０１７１】
ズームがズーム端にない場合、ステップＳ１３０が実行される。ズームがズーム端にある場合、通信部１０３ａは、ズームの駆動を停止するための制御信号を撮像端末２０ａに無線送信する（ステップＳ５４０）。撮像端末２０ａの通信部２０１は制御信号を制御端末１０ａから無線受信する。通信部２０１は、受信された制御信号をレンズモジュール２０ｂに送信する。この制御信号に基づいて、レンズモジュール２０ｂはズームの駆動を停止する。ズームの駆動が停止した後、ステップＳ１５０が実行される。
【０１７２】
上記以外の点については、図３７に示す処理は図７に示す処理と同様である。
【０１７３】
図３８と図３９とは、撮像部１００によって生成された画像を示している。図３８と図３９とを参照し、第４の変形例における遮蔽物領域と検出領域とを説明する。
【０１７４】
図３８に示す画像Ｇ１９０において、撮像端末２０ａとレンズモジュール２０ｂとの像を含む遮蔽物領域Ｒ１９０が検出される。図３９に示す画像Ｇ１９１において、撮像端末２０ａの一部の像が含まれる第１の検出領域Ｒ１９１ａと第２の検出領域Ｒ１９１ｂとが遮蔽物領域Ｒ１９０から算出される。ユーザの指または手の像が第１の検出領域Ｒ１９１ａにある場合、ズームがワイド側に駆動される。ユーザの指または手の像が第２の検出領域Ｒ１９１ｂにある場合、ズームがテレ側に駆動される。
【０１７５】
上記のように、物体の所定の状態が検出された場合、制御端末１０ａは、物体の場所に応じた制御を行うことができる。
【０１７６】
（第５の変形例）
本発明の実施形態における第５の変形例では、操作検出部１０２は、遮蔽物が検出された後、遮蔽物が検出されなかった場合、物体の所定の状態または物体の所定の動きの検出を停止する。つまり、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を繰り返し行う。その後、操作検出部１０２は、遮蔽物が検出されなかった場合、物体の所定の状態または物体の所定の動きの検出を停止する。操作検出部１０２が物体の所定の状態または物体の所定の動きの検出を停止した後、遮蔽物が検出されるまで、操作検出部１０２はその検出を停止し続ける。つまり、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間のみ、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を行う。
【０１７７】
制御端末１０ａは、撮像部１００によって生成された第１の画像を表示する表示部１０４を有する。表示部１０４は、遮蔽物が検出された後、遮蔽物が検出されなかった場合、第１の画像の表示を停止する。つまり、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間、表示部１０４は、第１の画像の表示を繰り返し行う。その後、表示部１０４は、遮蔽物が検出されなかった場合、第１の画像の表示を停止する。表示部１０４が第１の画像の表示を停止した後、遮蔽物が検出されるまで、表示部１０４は第１の画像の表示を停止し続ける。つまり、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間のみ、表示部１０４は、第１の画像の表示を行う。
【０１７８】
撮像部１００は、遮蔽物が検出された後、遮蔽物が検出されなかった場合、第１の画像の生成を停止する。つまり、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間、撮像部１００は、第１の画像の生成を繰り返し行う。その後、撮像部１００は、遮蔽物が検出されなかった場合、第１の画像の生成を停止する。撮像部１００が第１の画像の生成を停止した後、遮蔽物の検出が指示されるまで、撮像部１００は第１の画像の生成を停止し続ける。つまり、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間のみ、撮像部１００は、第１の画像の生成を行う。
【０１７９】
図４０と図４１とは、第５の変形例の制御端末１０ａの動作の手順を示している。図４０と図４１とを参照し、第５の変形例の制御端末１０ａの動作を説明する。図４０と図４１とに示す処理について、図７に示す処理と異なる点を説明する。
【０１８０】
制御端末１０ａのアプリケーションが起動することにより、撮像端末２０ａの制御が開始される。制御端末１０ａは、制御端末１０ａの制御モードを判断する（ステップＳ６００）。制御端末１０ａの制御モードは、第１のモードと第２のモードとで切り替え可能である。第１のモードは、撮像部１００によって生成された画像に基づいてユーザの指または手による操作を検出するモードである。第２のモードは、制御端末１０ａが、制御端末１０ａに対するマニュアル操作を受け付けるモードである。例えば、表示部１０４はタッチパネルであり、タッチパネルがマニュアル操作を受け付ける。例えば、制御端末１０ａに対するマニュアル操作は、第１のモードと第２のモードとを切り替える操作である。あるいは、制御端末１０ａに対するマニュアル操作は、撮像端末２０ａの制御に関する操作である。
【０１８１】
制御端末１０ａの制御モードが第２のモードである場合、制御端末１０ａは第２のモードによる制御を行う。制御端末１０ａの制御モードが第１のモードである場合、制御端末１０ａは第１のモードによる制御を開始する（ステップＳ６０５）。第１のモードによる制御が開始された後、ステップＳ１００が実行される。
【０１８２】
ステップＳ１２５が実行された後、表示部１０４は、撮像部１００によって生成されたスルー画の表示を開始する（ステップＳ６１０）。スルー画の表示が開始された後、表示部１０４は、撮像部１００によるスルー画の撮像と同期してスルー画を表示する。スルー画の表示が開始された後、ステップＳ１３０が実行される。
【０１８３】
ステップＳ１１５で遮蔽物がない場合、表示部１０４は警告を表示する（ステップＳ６１５）。例えば、表示部１０４は、撮像端末２０ａが制御端末１０ａに装着されてないこと、および第２のモードによる制御を開始することを示すメッセージを表示する。
【０１８４】
警告が表示された後、制御端末１０ａは、第２のモードによる制御を開始するか否かを判断する（ステップＳ６２０）。第２のモードによる制御を開始しない場合、ステップＳ１６５が実行される。第２のモードによる制御を開始する場合、表示部１０４は、撮像部１００によって生成されたスルー画の表示を停止する（ステップＳ６２５）。
【０１８５】
スルー画の表示が停止された後、撮像部１００は、スルー画の撮像を停止する（ステップＳ６３０）。スルー画の撮像が停止された後、制御端末１０ａは第２のモードによる制御を行う。
【０１８６】
上記以外の点については、図４０と図４１とに示す処理は図７に示す処理と同様である。
【０１８７】
上記の動作では、遮蔽物が検出されなかった場合、第２のモードによる制御が行われる。あるいは、遮蔽物が検出されなかった場合、ステップＳ１６５とステップＳ１７０とが実行された後、アプリケーションが終了する。これによって、ユーザの指または手による操作の検出と画像の表示および生成とが停止する。このため、制御端末１０ａの電力の消費が低減される。
【０１８８】
（第６の変形例）
本発明の実施形態における第６の変形例では、操作検出部１０２は、撮像端末２０ａの電源がオンからオフに変化した場合、物体の所定の状態または物体の所定の動きの検出を停止する。つまり、撮像端末２０ａの電源がオンである間、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を繰り返し行う。その後、操作検出部１０２は、撮像端末２０ａの電源がオンからオフに変化した場合、物体の所定の状態または物体の所定の動きの検出を停止する。操作検出部１０２が物体の所定の状態または物体の所定の動きの検出を停止した後、撮像端末２０ａの電源がオンになるまで、操作検出部１０２はその検出を停止し続ける。つまり、撮像端末２０ａの電源がオンである間のみ、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を行う。
【０１８９】
制御端末１０ａは、撮像部１００によって生成された第１の画像を表示する表示部１０４を有する。表示部１０４は、撮像端末２０ａの電源がオンからオフに変化した場合、第１の画像の表示を停止する。つまり、撮像端末２０ａの電源がオンである間、表示部１０４は、第１の画像の表示を繰り返し行う。その後、表示部１０４は、撮像端末２０ａの電源がオンからオフに変化した場合、第１の画像の表示を停止する。表示部１０４が第１の画像の表示を停止した後、撮像端末２０ａの電源がオンになるまで、表示部１０４は第１の画像の表示を停止し続ける。つまり、撮像端末２０ａの電源がオンである間のみ、表示部１０４は、第１の画像の表示を行う。
【０１９０】
撮像部１００は、撮像端末２０ａの電源がオンからオフに変化した場合、第１の画像の生成を停止する。つまり、撮像端末２０ａの電源がオンである間、撮像部１００は、第１の画像の生成を繰り返し行う。その後、撮像部１００は、撮像端末２０ａの電源がオンからオフに変化した場合、第１の画像の生成を停止する。撮像部１００が第１の画像の生成を停止した後、撮像端末２０ａの電源がオンになるまで、撮像部１００は第１の画像の生成を停止し続ける。つまり、撮像端末２０ａの電源がオンである間のみ、撮像部１００は、第１の画像の生成を行う。
【０１９１】
操作検出部１０２は、制御端末１０ａと撮像端末２０ａとの通信が開始された後、制御端末１０ａと撮像端末２０ａとの通信が終了した場合、物体の所定の状態または物体の所定の動きの検出を停止する。つまり、制御端末１０ａと撮像端末２０ａとが通信を行っている間、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を繰り返し行う。その後、操作検出部１０２は、制御端末１０ａと撮像端末２０ａとの通信が終了した場合、物体の所定の状態または物体の所定の動きの検出を停止する。操作検出部１０２が物体の所定の状態または物体の所定の動きの検出を停止した後、制御端末１０ａと撮像端末２０ａとの通信が開始されるまで、操作検出部１０２はその検出を停止し続ける。つまり、制御端末１０ａと撮像端末２０ａとが通信を行っている間のみ、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を行う。例えば、制御端末１０ａと撮像端末２０ａとの通信は、撮像端末２０ａの撮像部２００によって生成された画像の通信である。
【０１９２】
表示部１０４は、制御端末１０ａと撮像端末２０ａとの通信が開始された後、制御端末１０ａと撮像端末２０ａとの通信が終了した場合、第１の画像の表示を停止する。つまり、制御端末１０ａと撮像端末２０ａとが通信を行っている間、表示部１０４は、第１の画像の表示を繰り返し行う。その後、表示部１０４は、制御端末１０ａと撮像端末２０ａとの通信が終了した場合、第１の画像の表示を停止する。表示部１０４が第１の画像の表示を停止した後、制御端末１０ａと撮像端末２０ａとの通信が開始されるまで、表示部１０４は第１の画像の表示を停止し続ける。つまり、制御端末１０ａと撮像端末２０ａとが通信を行っている間のみ、表示部１０４は、第１の画像の表示を行う。
【０１９３】
撮像部１００は、制御端末１０ａと撮像端末２０ａとの通信が開始された後、制御端末１０ａと撮像端末２０ａとの通信が終了した場合、第１の画像の生成を停止する。つまり、制御端末１０ａと撮像端末２０ａとが通信を行っている間、撮像部１００は、第１の画像の生成を繰り返し行う。その後、撮像部１００は、制御端末１０ａと撮像端末２０ａとの通信が終了した場合、第１の画像の生成を停止する。撮像部１００が第１の画像の生成を停止した後、制御端末１０ａと撮像端末２０ａとの通信が開始されるまで、撮像部１００は第１の画像の生成を停止し続ける。つまり、制御端末１０ａと撮像端末２０ａとが通信を行っている間のみ、撮像部１００は、第１の画像の生成を行う。
【０１９４】
図４２と図４３と図４４とは、第６の変形例の制御端末１０ａの動作の手順を示している。図４２と図４３と図４４とを参照し、第６の変形例の制御端末１０ａの動作を説明する。図４２と図４３と図４４とに示す処理について、図７に示す処理と異なる点を説明する。
【０１９５】
ステップＳ７００と、ステップＳ７０５と、ステップＳ７１０とはそれぞれ、図４０のステップＳ６００と、ステップＳ６０５と、ステップＳ６１０と同一である。
【０１９６】
ステップＳ１５５で遮蔽物の状態の変化がない場合、制御端末１０ａは、撮像端末２０ａの通信状態と電源状態とを検出する（ステップＳ７１５）。制御端末１０ａは、ステップＳ７１５の結果に基づいて、撮像端末２０ａの電源がオンであるか否かを判断する（ステップＳ７２０）。
【０１９７】
撮像端末２０ａの電源がオンである場合、制御端末１０ａは、ステップＳ７１５の結果に基づいて、撮像端末２０ａが通信中であるか否かを判断する（ステップＳ７２５）。撮像端末２０ａが通信中である場合、ステップＳ１６０が実行される。ステップＳ７２５とステップＳ７２０との順番は逆であってもよい。
【０１９８】
撮像端末２０ａの電源がオンでない場合、または撮像端末２０ａが通信中でない場合、制御端末１０ａは第２のモードによる制御を開始する（ステップＳ７３０）。第２のモードによる制御が開始された後、表示部１０４は、撮像部１００によって生成されたスルー画の表示を停止する（ステップＳ７３５）。
【０１９９】
スルー画の表示が停止された後、撮像部１００は、スルー画の撮像を停止する（ステップＳ７４０）。スルー画の撮像が停止された後、表示部１０４は警告を表示する（ステップＳ７４５）。例えば、表示部１０４は、撮像端末２０ａの電源がオフであること、または撮像端末２０ａとの通信が可能でないことを示すメッセージを表示する。
【０２００】
警告が表示された後、制御端末１０ａは、撮像端末２０ａの通信状態と電源状態とを検出する（ステップＳ７５０）。制御端末１０ａは、ステップＳ７５０の結果に基づいて、撮像端末２０ａの電源状態または通信状態が変化したか否かを判断する（ステップＳ７５５）。
【０２０１】
撮像端末２０ａの電源状態または通信状態が変化している場合、ステップＳ７０５が実行される。撮像端末２０ａの電源状態と通信状態とが変化していない場合、ステップＳ７５０が実行される。
【０２０２】
上記以外の点については、図４２と図４３と図４４とに示す処理は図７に示す処理と同様である。
【０２０３】
上記の動作では、撮像端末２０ａの電源がオフである場合、または撮像端末２０ａが通信中でない場合、第２のモードによる制御が行われる。これによって、ユーザの指または手による操作の検出と画像の表示および生成とが停止し、制御端末１０ａは第２の制御モードで動作する。このため、制御端末１０ａの電力の消費が低減される。
【０２０４】
（第７の変形例）
図４５は、本発明の実施形態における第７の変形例の制御端末１０ｂの構成を示している。図４５に示すように、制御端末１０ｂは、撮像部１００（第１の撮像部）と、遮蔽物検出部１０１と、操作検出部１０２と、出力部１０３と、表示部１０４と、マニュアル操作検出部１０５とを有する。
【０２０５】
図４５に示す構成について、図２に示す構成と異なる点を説明する。マニュアル操作検出部１０５は、制御端末１０ｂに対する第１のマニュアル操作を検出する。操作検出部１０２は、遮蔽物が検出された後、第１のマニュアル操作が検出された場合、物体の所定の状態または物体の所定の動きの検出を停止する。
【０２０６】
制御対象端末２０は撮像端末２０ａである。マニュアル操作検出部１０５は、撮像端末２０ａに接続されるレンズモジュール２０ｂに対する第２のマニュアル操作を検出する。操作検出部１０２は、遮蔽物が検出された後、第２のマニュアル操作が検出された場合、物体の所定の状態または物体の所定の動きの検出を停止する。
【０２０７】
第１のマニュアル操作と第２のマニュアル操作とは、撮像に関するマニュアル操作である。例えば、表示部１０４がタッチパネルである場合、マニュアル操作検出部１０５はタッチパネル上の操作領域を含む。例えば、マニュアル操作検出部１０５はタッチパネル上のシャッターボタンを含む。マニュアル操作検出部１０５は、撮像端末２０ａの撮像部２００に対する静止画撮像の指示を受け付けることにより、第１のマニュアル操作を検出する。マニュアル操作検出部１０５は、撮像に関する制御モードの切替の指示を受け付けることにより、第１のマニュアル操作を検出してもよい。あるいは、マニュアル操作検出部１０５は、撮像に関する撮像パラメータの設定の指示を受け付けることにより、第１のマニュアル操作を検出してもよい。
【０２０８】
マニュアル操作検出部１０５は、撮像端末２０ａからの情報に基づいて第２のマニュアル操作を検出する。レンズモジュール２０ｂがユーザによって手動で操作された場合、レンズモジュール２０ｂは、第２のマニュアル操作が行われたことを示す情報を出力する。第２のマニュアル操作は、絞り、フォーカス、およびズーム等の操作である。レンズモジュール２０ｂの操作部材を介して上記の操作が行われた場合に撮像端末２０ａの通信部２０１は、レンズモジュール２０ｂから入力された情報を制御端末１０ｂに無線送信する。制御端末１０ｂの通信部１０３ａはこの情報を受信し、マニュアル操作検出部１０５に出力する。これによって、マニュアル操作検出部１０５は第２のマニュアル操作を受け付ける。
【０２０９】
操作検出部１０２は、第１のマニュアル操作と第２のマニュアル操作とのいずれか１つが検出された場合、物体の所定の状態または物体の所定の動きの検出を停止する。つまり、２つのマニュアル操作のいずれも検出されていない間、操作検出部１０２は、物体の所定の状態または物体の所定の動きの検出を繰り返し行う。その後、操作検出部１０２は、２つのマニュアル操作のいずれか１つが検出された場合、物体の所定の状態または物体の所定の動きの検出を停止する。
【０２１０】
制御端末１０ｂは、撮像部１００によって生成された第１の画像を表示する表示部１０４を有する。表示部１０４は、第１のマニュアル操作と第２のマニュアル操作とのいずれか１つが検出された場合、第１の画像の表示を停止する。つまり、２つのマニュアル操作のいずれも検出されていない間、表示部１０４は、第１の画像の表示を繰り返し行う。その後、表示部１０４は、２つのマニュアル操作のいずれか１つが検出された場合、第１の画像の表示を停止する。
【０２１１】
撮像部１００は、第１のマニュアル操作と第２のマニュアル操作とのいずれか１つが検出された場合、第１の画像の生成を停止する。つまり、２つのマニュアル操作のいずれも検出されていない間、撮像部１００は、第１の画像の生成を繰り返し行う。その後、撮像部１００は、２つのマニュアル操作のいずれか１つが検出された場合、第１の画像の生成を停止する。
【０２１２】
表示部１０４は、撮像部１００によって生成された第１の画像において、遮蔽物の像を基準とする領域すなわち検出領域を表示する。表示部１０４は、遮蔽物検出部１０１が遮蔽物を繰り返し検出し続けている間、検出領域を表示してもよい。
【０２１３】
上記以外の点については、図４５に示す構成は図２に示す構成と同様である。
【０２１４】
第７の変形例の制御端末１０ｂの動作は、図４２と図４６とに従う。図４６を参照し、制御端末１０ｂの動作を説明する。図４６に示す処理について、図７に示す処理と異なる点を説明する。
【０２１５】
ステップＳ１４５が実行された後、撮像端末２０ａの通信部２０１はレンズモジュール２０ｂの状態に関する情報をレンズモジュール２０ｂから受信する。通信部２０１は、受信された情報を制御端末１０ｂに無線送信する。制御端末１０ｂの通信部１０３ａは、レンズモジュール２０ｂの状態に関する情報を撮像端末２０ａから無線受信する。マニュアル操作検出部１０５は、受信された情報に基づいて、レンズモジュール２０ｂの状態を検出する（ステップＳ８００）。
【０２１６】
マニュアル操作検出部１０５は、ステップＳ８００の結果に基づいて、レンズモジュール２０ｂに対する第２のマニュアル操作が行われたか否かを判断する（ステップＳ８０５）。第２のマニュアル操作が行われていない場合、ステップＳ１５０が実行される。第２のマニュアル操作が行われた場合、表示部１０４は、撮像部１００によって生成されたスルー画の表示を停止する（ステップＳ８２５）。
【０２１７】
スルー画の表示が停止された後、撮像部１００は、スルー画の撮像を停止する（ステップＳ８３０）。スルー画の撮像が停止された後、制御端末１０ｂは第２のモードによる制御を行う。
【０２１８】
ステップＳ１５５で遮蔽物の状態の変化がない場合、マニュアル操作検出部１０５は、制御端末１０ｂのタッチパネルの状態を検出する（ステップＳ８１０）。マニュアル操作検出部１０５は、ステップＳ８１０の結果に基づいて、制御端末１０ｂに対する第１のマニュアル操作が行われたか否かを判断する（ステップＳ８１５）。第１のマニュアル操作が行われた場合、ステップＳ８２５が実行される。第１のマニュアル操作が行われていない場合、ステップＳ１６０が実行される。
【０２１９】
上記以外の点については、図４６に示す処理は図７に示す処理と同様である。
【０２２０】
図４７は、表示部１０４の画面の例を示している。表示部１０４はタッチパネルとして構成されている。表示部１０４は、撮像端末２０ａの撮像部２００によって生成された画像５００を表示する。また、表示部１０４は、制御端末１０ｂの撮像部１００によって生成された画像５１０を表示する。例えば、画像５１０は画像５００に重畳されている。撮像部２００の一部が非表示とされ、その部分に画像５１０が表示されてもよい。あるいは、画像５００と画像５１０とが横に並べられてもよい。さらに、表示部１０４は、画像５１０において、ユーザの指または手による検出が行われる検出領域５２０と検出領域５３０とを表示する。検出領域５２０と検出領域５３０とが表示されるため、指または手による操作を行う領域がユーザに分かりやすい。
【０２２１】
表示部１０４は、画像５００において、モード変更ボタン５４０と終了ボタン５５０とを表示する。モード変更ボタン５４０は、制御モードの変更操作を受け付けるボタンである。第１のモードによる制御が行われているときにモード変更ボタン５４０が操作された場合、第２のモードによる制御が行われる。また、第２のモードによる制御が行われているときにモード変更ボタン５４０が操作された場合、第１のモードによる制御が行われる。図４７には記載されていないが、現在の制御モードが第１の制御モードと第２の制御モードとのどちらのモードであるのかが分かるように、制御モードが表示されてもよい。例えば、モード変更ボタン５４０またはその周辺に現在の制御モードが表示される。あるいは、現在の制御モードが色等で明示されてもよい。終了ボタン５５０は、アプリケーションの終了操作を受け付けるボタンである。
【０２２２】
表示部１０４は、画像５００において、撮像パラメータの値を視覚的に示すインジケータ５６０と、撮像パラメータの値５７０とを表示する。例えば、撮像パラメータの値は絞り値である。撮像パラメータの値はシャッタースピード値であってもよい。ユーザが第１の制御モードで指または手による操作を行った場合に、ユーザは、撮像パラメータ（絞りまたはシャッタースピードなどのパラメータ）がどの程度変化したのかを画像５００の状態から確認することが難しい。インジケータ５６０と撮像パラメータの値５７０とが表示されるため、ユーザは、指または手による操作を行う場合に撮像パラメータの値を容易に知ることができる。
【０２２３】
表示部１０４は、画像５００の隣にシャッターボタン５８０を表示する。シャッターボタン５８０は、撮像端末２０ａの撮像部２００に対する撮像の指示を受け付けるボタンである。
【０２２４】
例えば、ステップＳ８１０では、モード変更ボタン５４０とシャッターボタン５８０との状態が検出される。モード変更ボタン５４０とシャッターボタン５８０とのいずれか１つに対する操作がステップＳ８１５で検出された場合、ステップＳ８２５とステップＳ８３５とが実行される。
【０２２５】
上記の動作では、第１のマニュアル操作と第２のマニュアル操作との少なくとも１つが検出された場合、ステップＳ８２５とステップＳ８３０とが実行された後、第２のモードによる制御が行われる。これによって、ユーザの指または手による操作の検出と画像の表示および生成とが停止し、制御端末１０ｂは第２の制御モードで動作する。このため、制御端末１０ｂの電力の消費が低減される。
【０２２６】
本発明の実施形態の第１から第７の変形例の複数における特徴的な要素が組み合わされてもよい。
【０２２７】
以上、図面を参照して本発明の実施形態について詳述してきたが、具体的な構成は上記の実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
【産業上の利用可能性】
【０２２８】
本発明の実施形態によれば、操作検出のための構成を簡易にすることができる。
【符号の説明】
【０２２９】
１０，１０ａ，１０ｂ  制御端末
２０  制御対象端末
２０ａ  撮像端末
２０ｂ  レンズモジュール
４０  ケース
１００  撮像部
１０１  遮蔽物検出部
１０２  操作検出部
１０３  出力部
１０３ａ  通信部
１０４  表示部
１０５  マニュアル操作検出部
２００  撮像部
２０１  通信部
２０２  電源スイッチ
４００  装着部
４０１  窓
【要約】
制御端末は、撮像範囲を撮像し、第１の画像を生成する撮像部と、前記制御端末に固定されている遮蔽物を検出し、前記遮蔽物は前記撮像範囲の一部を遮蔽する遮蔽物検出部と、前記遮蔽物が検出された後、前記第１の画像において前記遮蔽物の像を基準とする領域の第２の画像に基づいて、前記遮蔽物と異なる物体の所定の状態または前記物体の所定の動きを検出する操作検出部と、前記物体の前記所定の状態または前記物体の前記所定の動きが検出された場合、制御信号を制御対象端末に出力する出力部と、を有する。【図１】
0005781253.tif 000002
【図２】
0005781253.tif 000003
【図３】
0005781253.tif 000004
【図４】
0005781253.tif 000005
【図５】
0005781253.tif 000006
【図６】
0005781253.tif 000007
【図７】
0005781253.tif 000008
【図８】
0005781253.tif 000009
【図９】
0005781253.tif 000010
【図１０】
0005781253.tif 000011
【図１１】
0005781253.tif 000012
【図１２】
0005781253.tif 000013
【図１３】
0005781253.tif 000014
【図１４】
0005781253.tif 000015
【図１５】
0005781253.tif 000016
【図１６】
0005781253.tif 000017
【図１７】
0005781253.tif 000018
【図１８】
0005781253.tif 000019
【図１９】
0005781253.tif 000020
【図２０】
0005781253.tif 000021
【図２１】
0005781253.tif 000022
【図２２】
0005781253.tif 000023
【図２３】
0005781253.tif 000024
【図２４】
0005781253.tif 000025
【図２５】
0005781253.tif 000026
【図２６】
0005781253.tif 000027
【図２７】
0005781253.tif 000028
【図２８】
0005781253.tif 000029
【図２９】
0005781253.tif 000030
【図３０】
0005781253.tif 000031
【図３１】
0005781253.tif 000032
【図３２】
0005781253.tif 000033
【図３３】
0005781253.tif 000034
【図３４】
0005781253.tif 000035
【図３５】
0005781253.tif 000036
【図３６】
0005781253.tif 000037
【図３７】
0005781253.tif 000038
【図３８】
0005781253.tif 000039
【図３９】
0005781253.tif 000040
【図４０】
0005781253.tif 000041
【図４１】
0005781253.tif 000042
【図４２】
0005781253.tif 000043
【図４３】
0005781253.tif 000044
【図４４】
0005781253.tif 000045
【図４５】
0005781253.tif 000046
【図４６】
0005781253.tif 000047
【図４７】
0005781253.tif 000048