(57)【要約】【課題】所望の被写体を容易かつ良好に撮像できるようにする。【解決手段】撮像装置２０の通信部２０１は、端末装置３０からの撮像補助情報を受信する。撮像補助部２０４は、受信した撮像補助情報に基づき、端末装置３０を所持した被写体を撮像するための撮像補助動作を行う。例えば、撮像補助情報に端末装置３０の位置情報を含が含まれており、撮像装置２０は現在位置と撮像方向の計測結果と端末装置の位置情報に基づき、表示部２０５で被写体の位置を示す撮像補助表示を行う。端末装置３０は、情報生成部３１０で撮像補助情報例えば現在位置を示す位置情報を生成する。通信部３０１は情報生成部３１０で生成された撮像補助情報を送信する。【選択図】        図２
2013157797.tif 000002
【特許請求の範囲】
【請求項１】
端末装置からの撮像補助情報を受信する通信部と、
前記受信した撮像補助情報に基づき、前記端末装置を所持した被写体を撮像するための撮像補助動作を行う撮像補助部と
を備える撮像装置。
【請求項２】
現在位置と撮像方向を計測する計測部と、
画像表示を行う表示部を有し、
前記撮像補助情報は、前記端末装置の位置情報を含み、
前記撮像補助部は、前記端末装置の位置情報と前記計測部で計測された現在位置および撮像方向に基づき、前記撮像補助動作として前記表示部で前記被写体の位置を示す撮像補助表示を行う請求項１記載の撮像装置。
【請求項３】
前記撮像補助情報は、前記端末装置を所持している被写体の状態を示す状態情報を含み、
前記撮像補助部は、前記状態情報に基づいて前記撮像補助表示を切り替える請求項２記載の撮像装置。
【請求項４】
前記状態情報は、前記被写体の動きを示す動き情報または前記被写体の生体情報を含む請求項３記載の端末装置。
【請求項５】
前記撮像補助情報は、前記端末装置の位置情報を含み、
前記撮像補助部は、前記端末装置の位置情報と前記計測部で計測された現在位置に基づいて算出した前記被写体までの距離に応じて前記撮像補助動作としてフォーカス調整を行う請求項１記載の撮像装置。
【請求項６】
前記撮像補助情報は、前記端末装置を所持している被写体の撮像環境を示す環境情報または前記端末装置を所持している被写体の状態を示す状態情報を含み、
前記撮像補助部は、前記環境情報または前記状態情報に基づいて前記撮像補助動作を行う請求項１記載の撮像装置。
【請求項７】
撮像画像の現像処理を行う現像処理部を有し、
前記撮像補助部は、前記環境情報に基づき前記撮像補助動作として前記現像処理部の現像処理設定を行う請求項６記載の撮像装置。
【請求項８】
前記被写体の撮像環境を示す環境情報は、光源色または前記被写体の明るさを示す情報を含む請求項６記載の端末装置。
【請求項９】
撮像画像を記録する記録部を有し、
前記撮像補助情報は、前記端末装置で集音された音声を示す音声情報を含み、
前記撮像補助部は、前記受信した撮像補助情報に含まれている音声情報を前記記録部で記録させる請求項１記載の撮像装置。
【請求項１０】
端末装置からの撮像補助情報を受信する工程と、
前記受信した撮像補助情報に基づき前記端末装置を所持した被写体を撮像するための撮像補助動作を行う工程と
を含む撮像方法。
【請求項１１】
撮像装置の動作制御をコンピュータで実行させるプログラムであって、
端末装置からの撮像補助情報を通信部で受信する手順と、
前記受信した撮像補助情報に基づき前記端末装置を所持した被写体を撮像するための撮像補助動作を行う手順と
を前記コンピュータで実行させるプログラム。
【請求項１２】
撮像補助情報を生成する情報生成部と、
前記情報生成部で生成された撮像補助情報を送信する通信部と
を備える端末装置。
【請求項１３】
前記情報生成部は、当該端末装置の位置を示す位置情報を含む撮像補助情報を生成する請求項１２記載の端末装置。
【請求項１４】
前記情報生成部は、当該端末装置を所持している被写体の撮像環境を示す環境情報を含む撮像補助情報を生成する請求項１２記載の端末装置。
【請求項１５】
前記情報生成部は、当該端末装置を所持している被写体の状態を示す情報を含む撮像補助情報を生成する請求項１２記載の端末装置。
【請求項１６】
端末装置から順次供給される撮像補助情報を記憶する情報記憶部と、
前記情報記憶部に記憶されている撮像補助情報に基づいて前記端末装置で現在生成されるであろう撮像補助情報を予測する予測部と、
前記予測部で生成された前記予測情報を記憶する予測情報記憶部と、
前記撮像補助情報の要求がなされたとき、過去所定期間内の撮像補助情報が前記情報記憶部に記憶されている場合には最も新しい撮像補助情報を前記撮像補助情報の要求元に送信し、過去所定期間内の撮像補助情報が前記情報記憶部に記憶されていない場合には、前記予測情報記憶部に記憶されている予測情報を前記撮像補助情報の要求元に送信する応答処理部と
を備える情報処理装置。
【請求項１７】
前記撮像補助情報は、前記端末装置の位置情報を含み、
前記情報記憶部は、所定期間分の最新の撮像補助情報を記憶し、
前記予測部は、前記情報記憶部に記憶されている位置情報で示された前記端末装置の位置の変化から前記現在位置を予測する請求項１６記載の情報処理装置。
【請求項１８】
端末装置から順次供給される撮像補助情報を記憶する工程と、
前記記憶されている撮像補助情報に基づいて前記端末装置で現在生成されるであろう撮像補助情報を予測する工程と、
前記生成された予測情報を記憶する工程と、
前記撮像補助情報の要求がなされたとき、過去所定期間内の撮像補助情報が記憶されている場合には最も新しい撮像補助情報を前記撮像補助情報の要求元に送信し、過去所定期間内の撮像補助情報が記憶されていない場合には、前記記憶されている予測情報を前記撮像補助情報の要求元に送信する工程と
を含む情報処理方法。
【請求項１９】
情報処理装置の動作制御をコンピュータで実行させるプログラムであって、
端末装置から順次供給される撮像補助情報を記憶する手順と、
前記記憶されている撮像補助情報に基づいて前記端末装置で現在生成されるであろう撮像補助情報を予測する手順と、
前記生成された予測情報を記憶する手順と、
前記撮像補助情報の要求がなされたとき、過去所定期間内の撮像補助情報が記憶されている場合には最も新しい撮像補助情報を前記撮像補助情報の要求元に送信し、過去所定期間内の撮像補助情報が記憶されていない場合には、前記記憶されている予測情報を前記撮像補助情報の要求元に送信する手順と
を前記コンピュータで実行させるプログラム。
【請求項２０】
端末装置と撮像装置を用いて構成される撮像システムにおいて、
前記端末装置は、
撮像補助情報を生成する情報生成部と、
前記情報生成部で生成された撮像補助情報を送信する通信部を備え、
前記撮像装置は、
前記前記撮像補助情報を受信する通信部と、
前記受信した撮像補助情報に基づき前記端末装置を所持した被写体を撮像するための撮像補助動作を行う撮像補助部と
を備える撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この技術は、撮像装置、端末装置、情報処理装置、撮像システムおよび方法とプログラムに関する。詳しくは、所望の被写体を容易かつ良好に撮像できるようにする。
【背景技術】
【０００２】
従来、撮像装置では撮像素子で生成された被写体光学像に応じた画像信号や、撮像装置に設けられたセンサからのセンサ信号に基づき、所望の被写体にピントが合うようにフォーカス調整が行われている。また、生成された画像信号やセンサ信号に基づき被写体の照度を推定して、被写体画像が所望の明るさとなるように絞りやシャッタースピード，現像処理のゲイン等を調整することが行われている。さらに、画像信号やセンサ信号に基づき光源色を推定して、推定結果に基づき現像処理のホワイトバランス調整値の設定も行われている。また、撮像装置では、被写体検出を行い、検出した被写体に対してフォーカス調整や明るさ調整、ホワイトバランス調整等が行われている。例えば、撮像装置は、顔検出を行い検出した顔を撮影対象の被写体だと推定して、フォーカス調整や明るさ調整、ホワイトバランス調整等が行われている。
【０００３】
また、撮像装置では、測位信号を受信して撮像動作を制御することが行われている。例えば特許文献１では、移動体に搭載される録画装置において、測位信号を受信することで移動体の位置を判別している。この判別した移動体の位置と予め設定された位置との距離が基準値以下となった場合、撮像装置から得られる映像信号を記録メディアに記録することが行われている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１１−１３７４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、撮像装置で被写体検出を行う場合、被写体が暗い場合や遠方の場合、正しく被写体検出を行うことができない。したがって、所望の被写体を容易かつ良好に撮像することが困難である。
【０００６】
また、所望の被写体が遠方である場合や所望の被写体が判別しにくい場合、撮像装置に設けられた表示部の表示画像、例えばファインダーに表示されたカメラスルー画像から所望の被写体を判別することは困難である。また、所望の被写体が遠方である場合や所望の被写体が判別しにくい場合に所望の被写体を見失ってしまうと、再度所望の被写体を捉えることも困難である。例えば、運動会など人の多い状況で特定の人を撮像する場合、ズーム倍率が低いと多くの人の中から特定の人を判別することが困難である。また、ズーム倍率を高くすると、人の判別を容易に行うことができる。しかし、ズーム倍率を高くしたことにより画角が狭くなるため特定の人を発見するのに時間を要してしまうおそれがある。
【０００７】
また、予め設定された位置と測位信号を受信して判別した位置との距離に基づいて撮像を行う場合、撮像装置で測位信号を受信して位置を判別しても、被写体が予め設定された位置から移動してしまうと、被写体と撮像装置間の距離を正しく計測することができない。
【０００８】
そこで、この技術では所望の被写体を容易かつ良好に撮像できるようにすることを目的とする。
【課題を解決するための手段】
【０００９】
この技術の第１の側面は、端末装置からの撮像補助情報を受信する通信部と、前記受信した撮像補助情報に基づき、前記端末装置を所持した被写体を撮像するための撮像補助動作を行う撮像補助部とを備える撮像装置にある。
【００１０】
この技術においては、撮像装置の通信部で端末装置からの撮像補助情報を受信する。また、受信した撮像補助情報に基づき、撮像補助部で端末装置を所持した被写体を撮像するための撮像補助動作を行う。撮像装置は、計測部で現在位置と撮像方向を計測して、撮像補助情報に含まれている端末装置の位置情報と計測部で計測された現在位置および撮像方向に基づき表示部で被写体の位置を示す撮像補助表示を行う。また、撮像補助部は、端末装置を所持している被写体の状態を示す状態情報が撮像補助情報に含まれている場合、この状態情報に応じて撮像補助表示を切り替える。さらに、撮像補助部は、端末装置の位置情報と計測部で計測された現在位置に基づいて算出した被写体までの距離に応じたフォーカス調整を行う。また、撮像補助部は、撮像補助情報に含まれている環境情報または状態情報、例えば光源色や被写体の明るさを示す環境情報または被写体の動きを示す動き情報や被写体の生体情報等の状態情報に基づき、撮像補助動作を行う。撮像補助部は、例えば、撮像補助情報に含まれている環境情報に基づき現像処理設定を行う。また、撮像補助部は、受信した撮像補助情報に含まれている音声情報を記録媒体に記録する。
【００１１】
この技術の第２の側面は、端末装置からの撮像補助情報を受信する工程と、前記受信した撮像補助情報に基づき前記端末装置を所持した被写体を撮像するための撮像補助動作を行う工程とを含む撮像方法にある。
【００１２】
この技術の第３の側面は、撮像装置の動作制御をコンピュータで実行させるプログラムであって、端末装置からの撮像補助情報を通信部で受信する手順と、前記受信した撮像補助情報に基づき前記端末装置を所持した被写体を撮像するための撮像補助動作を行う手順とを前記コンピュータで実行させるプログラムにある。
【００１３】
この技術の第４の側面は、撮像補助情報を生成する情報生成部と、前記情報生成部で生成された撮像補助情報を送信する通信部とを備える端末装置にある。
【００１４】
この技術においては、情報生成部で撮像補助情報すなわち当該端末装置を所持した被写体を撮像するための撮像補助動作に用いられる情報、例えば端末装置の位置を示す位置情報や端末装置を所持している被写体の撮像環境を示す環境情報、端末装置を所持している被写体の状態を示す状態情報等が撮像補助情報として生成されて通信部から送信される。環境情報としては、例えば光源色や被写体の明るさを示す情報等が用いられる。また、状態情報としては、例えば被写体の動きを示す動き情報や被写体の生体情報等が用いられる。
【００１５】
この技術の第５の側面は、端末装置から順次供給される撮像補助情報を記憶する情報記憶部と、前記情報記憶部に記憶されている撮像補助情報に基づいて前記端末装置で現在生成されるであろう撮像補助情報を予測する予測部と、前記予測部で生成された前記予測情報を記憶する予測情報記憶部と、前記撮像補助情報の要求がなされたとき、過去所定期間内の撮像補助情報が前記情報記憶部に記憶されている場合には最も新しい撮像補助情報を前記撮像補助情報の要求元に送信し、過去所定期間内の撮像補助情報が前記情報記憶部に記憶されていない場合には、前記予測情報記憶部に記憶されている予測情報を前記撮像補助情報の要求元に送信する応答処理部とを備える情報処理装置にある。
【００１６】
この技術の第６の側面は、端末装置から順次供給される撮像補助情報を記憶する工程と、前記記憶されている撮像補助情報に基づいて前記端末装置で現在生成されるであろう撮像補助情報を予測する工程と、前記生成された予測情報を記憶する工程と、前記撮像補助情報の要求がなされたとき、過去所定期間内の撮像補助情報が記憶されている場合には最も新しい撮像補助情報を前記撮像補助情報の要求元に送信し、過去所定期間内の撮像補助情報が記憶されていない場合には、前記記憶されている予測情報を前記撮像補助情報の要求元に送信する工程とを含む情報処理方法にある。
【００１７】
この技術の第７の側面は、情報処理装置の動作制御をコンピュータで実行させるプログラムであって、端末装置から順次供給される撮像補助情報を記憶する手順と、前記記憶されている撮像補助情報に基づいて前記端末装置で現在生成されるであろう撮像補助情報を予測する手順と、前記生成された予測情報を記憶する手順と、前記撮像補助情報の要求がなされたとき、過去所定期間内の撮像補助情報が記憶されている場合には最も新しい撮像補助情報を前記撮像補助情報の要求元に送信し、過去所定期間内の撮像補助情報が記憶されていない場合には、前記記憶されている予測情報を前記撮像補助情報の要求元に送信する手順とを前記コンピュータで実行させるプログラムにある。
【００１８】
この技術の第８の側面は、端末装置と撮像装置を用いて構成される撮像システムにおいて、前記端末装置は、撮像補助情報を生成する情報生成部と、前記情報生成部で生成された撮像補助情報を送信する通信部を備え、前記撮像装置は、前記前記撮像補助情報を受信する通信部と、前記受信した撮像補助情報に基づき前記端末装置を所持した被写体を撮像するための撮像補助動作を行う撮像補助部とを備える撮像システムにある。
【００１９】
なお、本技術のプログラムは、例えば、様々なプログラム・コードを実行可能な汎用コンピュータに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体、例えば、光ディスクや磁気ディスク、半導体メモリなどの記憶媒体、あるいは、ネットワークなどの通信媒体によって提供可能なプログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、コンピュータ上でプログラムに応じた処理が実現される。
【発明の効果】
【００２０】
この技術によれば、端末装置で生成された撮像補助情報が送信されて、撮像装置では、受信した撮像補助情報に基づき、端末装置を所持した被写体を撮像するための撮像補助動作が行われる。このため、所望の被写体を容易に良好に撮像できる。
【図面の簡単な説明】
【００２１】
【図１】撮像システムの構成を例示した図である。
【図２】第１の実施の形態における撮像装置と端末装置の構成を例示した図である。
【図３】第１の実施の形態における撮像装置の動作を例示したフローチャートである。
【図４】第１の実施の形態における端末装置の動作を例示したフローチャートである。
【図５】撮像補助表示を例示した図である。
【図６】撮像補助表示を例示した図である。
【図７】撮像補助表示を例示した図である。
【図８】撮像補助表示を例示した図である。
【図９】第２の実施の形態における撮像装置と端末装置およびネットワークサーバの構成を例示した図である。
【図１０】第２の実施の形態におけるネットワークサーバの動作を例示したフローチャートである。
【図１１】第３の実施の形態における撮像装置と端末装置の構成を例示している。
【図１２】第４の実施の形態における撮像装置と端末装置の構成を例示した図である。
【図１３】被写体の生体情報に基づいた撮像補助表示を例示した図である。
【図１４】第５の実施の形態の構成を例示した図である。
【図１５】第５の実施の形態における撮像装置の動作を例示したフローチャートである。
【図１６】第５の実施の形態における端末装置の動作を例示したフローチャートである。
【発明を実施するための形態】
【００２２】
以下、本技術を実施するための形態について説明する。なお、説明は以下の順序で行う。
１．撮像システムの構成と動作
２．第１の実施の形態
３．第２の実施の形態
４．第３の実施の形態
５．第４の実施の形態
６．第５の実施の形態
【００２３】
＜１．撮像システムの構成と動作＞
図１は、撮像システムの構成を例示している。撮像システム１０は、撮像装置２０と端末装置３０がネットワーク等を介して接続可能とされている。なお、図１では、情報処理装置であるネットワークサーバ５０を介して接続されている場合を例示している。
【００２４】
撮像装置２０は、所望の被写体を容易かつ良好に撮像するための撮像補助動作に用いられる情報（以下「撮像補助情報」という）の要求を端末装置３０に対して行う。また、撮像装置２０は、取得した撮像補助情報に基づき撮像補助動作例えば撮像補助表示や撮像装置２０の設定等を行い、所望の被写体を容易かつ良好に撮像できるようにする。撮像補助情報の要求は、ユーザの操作に応じて行うようにしてもよく、撮像装置２０の動作モードに応じて自動的に行うようにしてもよい。例えば撮像補助動作を行う動作モードに設定されているとき自動的に行うようにしてもよい。
【００２５】
端末装置３０は、所望の被写体が所持しており、撮像補助情報の生成を行う。例えば、端末装置３０は、撮像補助情報として、端末装置３０の位置を示す位置情報、端末装置を所持している被写体の撮像環境を示す環境情報、端末装置を所持している被写体の状態を示す状態情報等を生成する。端末装置３０は、生成した撮像補助情報を撮像装置２０に対して供給できるようにする。
【００２６】
ネットワークサーバ５０は、撮像装置２０と端末装置３０の認証や、認証された撮像装置２０と端末装置３０との間で行われる通信を中継する。また、ネットワークサーバ５０は、端末装置３０との通信が中断されても撮像装置２０からの要求に対して撮像補助情報を応答できるように、端末装置３０の処理を代行してもよい。
【００２７】
このように、撮像システム１０は、被写体側の端末装置３０から撮像補助情報を撮像装置２０に提供することで、撮像装置２０だけでは所望の被写体を容易かつ良好に撮像するための取得することが困難な種々の情報を、撮像補助情報として収集できるようにする。また、撮像装置２０は、取得した撮像補助情報を利用して撮像補助動作を行い、所望の被写体を容易かつ良好に撮像できるようにする。
【００２８】
＜２．第１の実施の形態＞
第１の実施の形態は、撮像装置２０からの撮像補助情報の要求を、ネットワークサーバ５０を介して端末装置３０に送信して、要求された撮像補助情報を端末装置３０からネットワークサーバ５０を介して撮像装置２０に送信する場合を例示している。また、例えば、撮像補助情報として端末装置３０の位置を示す位置情報を用いて、この撮像補助情報に基づき撮像装置２０で撮像補助表示を行う場合について説明する。
【００２９】
［第１の実施の形態の構成］
図２は、第１の実施の形態における撮像装置と端末装置の構成を例示している。撮像装置２０は、通信部２０１、位置計測部２０２、撮像方向計測部２０３、撮像補助部２０４、表示部２０５、カメラ部２１０、ユーザインタフェース（Ｉ／Ｆ）部２２１、制御部２２５を有している。
【００３０】
通信部２０１は、無線通信によって撮像装置２０をネットワークに接続する。また、通信部２０１は、制御部２２５からの制御信号に基づき動作が制御されて、撮像補助情報の要求を端末装置３０に対して行う。また、通信部２０１は、受信した撮像補助情報を撮像補助部２０４に出力する。
【００３１】
位置計測部２０２は、例えば測位衛星からの測位信号を受信して、撮像装置２０の現在位置を算出する。位置計測部２０２は、算出した現在位置を示す位置情報を生成して撮像補助部２０４に出力する。
【００３２】
撮像方向計測部２０３は、地磁気を検知して方位を判別する方位センサや重力加速度を利用して撮像装置の姿勢を判別する姿勢センサ等を用いて構成されている。撮像方向計測部２０３は、方位センサと姿勢センサで生成されたセンサ信号に基づき、撮像装置２０の撮像方向がいずれの方向であるか判別して、判別結果を示す撮像方向情報を撮像補助部２０４に出力する。
【００３３】
撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。また、撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向、および撮像装置２０の撮像画角範囲に基づいて撮像補助画像を生成する。さらに、撮像補助部２０４は、例えばカメラ部２１０から供給された画像信号に撮像補助画像の画像信号を重畳させて、カメラスルー画の画像上に端末装置３０を所持した所望の被写体を容易に判別可能とするための撮像補助表示を行う。
【００３４】
表示部２０５は、液晶表示素子や有機ＥＬ表示等を用いて構成されている。表示部２０５は、撮像補助部２０４から供給された画像信号に基づき表示素子を駆動して、カメラスルー画や記録媒体に記録されている撮像画像の表示や撮像補助表示を行う。また、表示部２０５は、撮像装置２０の動作設定等行うためのメニュー表示、撮像装置２０の設定状態や動作状態等の表示を行う。
【００３５】
カメラ部２１０は、撮像光学系や撮像素子、現像処理部、記録再生部等で構成されており、撮像画像を記録媒体等に記録する。また、カメラ部２１０は、カメラスルー画の画像信号や、記録媒体に記録されている撮像画像の画像信号を撮像補助部２０４に供給する。
【００３６】
ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等を用いて構成されている。ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等に対して行われたユーザ操作に応じて操作信号を生成して制御部２２５に出力する。
【００３７】
制御部２２５は、ＣＰＵ(Central Processing Unit)やＲＯＭ(Read Only Memory)，ＲＡＭ(Random Access Memory)等を用いて構成されている。制御部２２５は、ＲＯＭ等に記憶されているプログラムを読み出してＣＰＵで実行して、ユーザインタフェース部２２１からの操作信号に基づき、撮像装置２０の動作がユーザ操作に応じた動作となるように各部の動作を制御する。また、制御部２２５は、ユーザの操作や動作モードに応じて撮像補助情報の要求を通信部２０１から行うように制御する。また、制御部２２５は、通信部２０１で受信した撮像補助情報に基づき、端末装置３０を所持した被写体を撮像するための撮像補助動作を撮像補助部で行うように制御する。
【００３８】
なお、制御部２２５は、事前に記憶されているプログラムに代えて、通信部２０１を介して供給されたプログラムをインストールして実行するようにしてもよい。さらに、メモリカード、光ディスク、磁気ディスク等の各種記録媒体により提供されたプログラムをインストールして実行するようにしてもよい。
【００３９】
端末装置３０は、通信部３０１と情報生成部３１０を有している。通信部３０１は、無線通信によって端末装置３０をネットワークに接続する。また、通信部３０１は、情報生成部３１０で生成された撮像補助情報をネットワークに送信する。
【００４０】
情報生成部３１０は、例えば位置情報生成部３１１を有している。位置情報生成部３１１は、例えば測位衛星からの測位信号を受信して、端末装置３０の現在位置を算出する。位置情報生成部３１１は、算出した現在位置を示す位置情報を生成して通信部３０１に出力する。
【００４１】
［第１の実施の形態の動作］
図３は、第１の実施の形態における撮像装置の動作を例示したフローチャートである。ステップＳＴ１で撮像装置２０は、撮像補助情報の要求を端末装置へ送信する。撮像装置２０は、通信部２０１から端末装置３０を送信先として撮像補助情報の要求を送信してステップＳＴ２に進む。
【００４２】
ステップＳＴ２で撮像装置２０は、撮像補助情報を受信する。撮像装置２０は、ステップＳＴ１で送信した要求に応じて供給された撮像補助情報を通信部２０１で受信してステップＳＴ３に進む。
【００４３】
ステップＳＴ３で撮像装置２０は、現在位置の判別を行う。撮像装置２０は、位置計測部２０２において測位信号を受信して撮像装置２０の現在位置を判別してステップＳＴ４に進む。
【００４４】
ステップＳＴ４で撮像装置２０は、撮像方向の判別を行う。撮像装置２０は、撮像方向計測部２０３によって、方位センサと姿勢センサのセンサ信号に基づき撮像装置２０の撮像方向がいずれの方向であるか判別する。すなわち、撮像装置２０は、撮像方向がいずれの方位であるか、および撮像方向が水平方向であるか上向きまたは下向きの方向であるかを判別してステップＳＴ５に進む。
【００４５】
ステップＳＴ５で撮像装置２０は、撮像補助画像の生成を行う。撮像装置２０は、撮像補助部２０４によって、端末装置３０を保持している所望の被写体の位置と方向を識別可能とする撮像補助画像を生成する。例えば撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている位置情報で示された端末装置３０の位置と、位置計測部２０２で判別した撮像装置２０の現在位置から、撮像装置２０と所望の被写体との距離および所望の被写体の方向を判別する。また、撮像補助部２０４は、撮像方向計測部２０３で計測された撮像方向とカメラ部２１０から供給されたズームレンズ位置情報に基づき、撮像装置２０の撮像範囲を判別する。さらに、撮像補助部２０４は、撮像範囲に所望の被写体が含まれている場合、撮像範囲内における所望の被写体の位置を示す撮像補助画像を生成する。また、撮像補助部２０４は、撮像範囲に所望の被写体が含まれていない場合、撮像範囲に対する所望の被写体の位置を示す撮像補助画像を生成してステップＳＴ６に進む。
【００４６】
ステップＳＴ６で撮像装置２０は、撮像補助表示を行う。撮像装置２０は、撮像補助部２０４によって、カメラ部２１０から供給された画像信号に生成した撮像補助画像の画像信号を重畳させて表示部２０５に出力する。
【００４７】
なお、上述のステップＳＴ３とステップＳＴ４の処理は、図３に示す順序に限られない。例えば、ステップＳＴ３とステップＳＴ４の処理を逆の順序としてもよい。また、ステップＳＴ３とステップＳＴ４の少なくともいずれかの処理をステップＳＴ１の処理の前に行うようにしてもよい。
【００４８】
図４は、第１の実施の形態における端末装置の動作を例示したフローチャートである。ステップＳＴ１１で端末装置３０は、撮像補助情報の生成を行う。端末装置３０は、位置情報生成部３１１において測位信号を受信して端末装置３０の現在位置を算出する。位置情報生成部３１１は、算出した現在位置を示す位置情報を撮像補助情報として通信部３０１に出力してステップＳＴ１２に進む。
【００４９】
ステップＳＴ１２で端末装置３０は、撮像補助情報の要求があるか判別する。端末装置３０は、通信部３０１で撮像補助情報の要求を受信していない場合にステップＳＴ１１に戻り、撮像補助情報の要求を受信した場合にステップＳＴ１３に進む。
【００５０】
ステップＳＴ１３で端末装置３０は、撮像補助情報の送信を行う。端末装置３０は、撮像補助情報を、通信部３０１から撮像補助情報の要求元である撮像装置２０に送信してステップＳＴ１１に戻る。
【００５１】
図５乃至図８は、撮像補助表示を例示している。図５と図６は、撮像補助表示として、撮像範囲内に含まれている所望の被写体の位置を示すマーカ画像を撮像補助画像として表示する場合を例示している。
【００５２】
例えば、図５の（Ａ）は、所望の被写体の位置を中心とした矩形状の枠表示をマーカ画像として用いた撮像補助表示を例示している。また、図５の（Ｂ）は、矢印先端が所望の被写体を示している矢印をマーカ画像として用いた撮像補助表示を例示している。
【００５３】
図６の（Ａ）は、所望の被写体の位置を中心とした矩形状領域を設けて、矩形状領域以外は輝度や色相、彩度等を変更することで、所望の被写体の位置を示す矩形状領域をマーカ画像とした撮像補助表示を例示している。図６の（Ｂ）は、所望の被写体の方向および距離を示す平面図をマーカ画像として用いた撮像補助表示を例示している。
【００５４】
図７は、撮像補助表示として、撮像範囲内に含まれていない所望の被写体の位置を示すい画角外位置画像を撮像補助画像として表示する場合を例示している。図７の（Ａ）は、所望の被写体が位置する方向を示す矢印を画角外位置画像として用いた撮像補助表示を例示している。図７の（Ｂ）は、撮像範囲に対する所望の被写体の位置に対応させて、縮小した撮像画像と所望の被写体の位置を示す位置画像を配置した画角外位置画像を表示する場合を例示している。
【００５５】
また、撮像装置２０の撮像補助部２０４は、撮像補助情報が順次更新される場合、端末装置３０の動き、すなわち所望の被写体の動きを判別できる。したがって、所望の被写体の動きに応じた撮像補助表示を行うようにしてもよい。図８は、所望の被写体の動きに応じた撮像補助表示を例示している。図８の（Ａ）は、所望の被写体の動きが少ない場合を例示している。所望の被写体の動きが少ない場合、例えば所望の被写体の位置に矩形状の枠表示が収束するズームイン指示画像を撮像補助画像として撮像補助表示を行う。このような表示を行えば、所望の被写体に容易にズームインすることができる。また、図８の（Ｂ）は、所望の被写体の動きが大きい場合を例示している。所望の被写体の動きが大きい場合、撮像範囲から所望の被写体が外れやすくなってしまう。したがって、例えば所望の被写体の位置から矩形状の枠表示を発散させるズームアウト指示画像を撮像補助画像として撮像補助表示を行う。このように撮像補助表示によって、所望の被写体の動きが大きい場合にズームアウトを促すことで、所望の被写体が撮像範囲から外れやすくなってしまうことを防止できる。
【００５６】
このように、第１の実施の形態では、端末装置で生成された撮像補助情報が送信されて、撮像装置では、受信した撮像補助情報に基づき、例えば端末装置を所持した被写体を撮像するための撮像補助表示が行われる。このため、撮像装置のユーザは、撮像補助表示を利用して、所望の被写体を容易かつ良好に撮像できる。
【００５７】
＜３．第２の実施の形態＞
第２の実施の形態は、端末装置３０との通信が中断された場合、撮像装置２０からの要求に対してネットワークサーバ５０が端末装置３０に代わって撮像補助情報を送信する場合を示している。
【００５８】
［第２の実施の形態の構成］
図９は、第２の実施の形態における撮像装置と端末装置およびネットワークサーバの構成を例示している。撮像装置２０は、通信部２０１、位置計測部２０２、撮像方向計測部２０３、撮像補助部２０４、表示部２０５、カメラ部２１０、ユーザインタフェース部２２１、制御部２２５を有している。
【００５９】
通信部２０１は、無線通信によって撮像装置２０をネットワークに接続する。また、通信部２０１は、制御部２２５からの制御信号に基づき動作が制御されて、撮像補助情報の要求を端末装置３０に対して行う。また、通信部２０１は、受信した撮像補助情報を撮像補助部２０４に出力する。
【００６０】
位置計測部２０２は、例えば測位衛星からの測位信号を受信して、撮像装置２０の現在位置を算出する。位置計測部２０２は、算出した現在位置を示す位置情報を生成して撮像補助部２０４に出力する。
【００６１】
撮像方向計測部２０３は、地磁気を検知して方位を判別する方位センサや重力加速度を利用して撮像装置の姿勢を判別する姿勢センサ等を用いて構成されている。撮像方向計測部２０３は、方位センサと姿勢センサで生成されたセンサ信号に基づき、撮像装置２０の撮像方向がいずれの方向であるか判別して、判別結果を示す撮像方向情報を撮像補助部２０４に出力する。
【００６２】
撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。また、撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向、および撮像装置２０の撮像画角範囲に基づいて撮像補助画像を生成する。さらに、撮像補助部２０４は、カメラ部２１０から供給された画像信号に撮像補助画像の画像信号を重畳させて、カメラスルー画の画像上に端末装置３０を所持した所望の被写体を容易に判別可能とするための撮像補助表示等を行う。
【００６３】
表示部２０５は、液晶表示素子や有機ＥＬ表示等を用いて構成されている。表示部２０５は、撮像補助部２０４から供給された画像信号に基づき表示素子を駆動して、カメラスルー画や記録媒体に記録されている撮像画像の表示や撮像補助表示を行う。また、表示部２０５は、撮像装置２０の動作設定等行うためのメニュー表示、撮像装置２０の設定状態や動作状態等の表示を行う。
【００６４】
カメラ部２１０は、撮像光学系や撮像素子、現像処理部、記録再生部等で構成されており、撮像画像を記録媒体等に記録する。また、カメラ部２１０は、カメラスルー画の画像信号や、記録媒体に記録されている撮像画像の画像信号を撮像補助部２０４に供給する。
【００６５】
ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等を用いて構成されている。ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等に対して行われたユーザ操作に応じて操作信号を生成して制御部２２５に出力する。
【００６６】
制御部２２５は、ＣＰＵやＲＯＭ，ＲＡＭ等を用いて構成されている。制御部２２５は、ＲＯＭ等に記憶されているプログラムを読み出してＣＰＵで実行して、ユーザインタフェース部２２１からの操作信号に基づき、撮像装置２０の動作がユーザ操作に応じた動作となるように各部の動作を制御する。また、制御部２２５は、ユーザの操作や動作モードに応じて撮像補助情報の要求を通信部２０１から行うように制御する。また、制御部２２５は、通信部２０１で受信した撮像補助情報に基づき、端末装置３０を所持した被写体を撮像するための撮像補助動作を撮像補助部で行うように制御する。
【００６７】
端末装置３０は、通信部３０１と情報生成部３１０を有している。通信部３０１は、無線通信によって端末装置３０をネットワークに接続する。また、通信部３０１は、情報生成部３１０で生成された撮像補助情報をネットワークサーバ５０に送信する。
【００６８】
情報生成部３１０は、例えば位置情報生成部３１１を有している。位置情報生成部３１１は、例えば測位衛星からの測位信号を受信して、端末装置３０の現在位置を算出する。位置情報生成部３１１は、算出した現在位置を示す位置情報を生成して通信部３０１に出力する。
【００６９】
ネットワークサーバ５０は、撮像補助情報記憶部５０１、予測部５０２、予測情報記憶部５０３、応答処理部５０４を有している。
【００７０】
撮像補助情報記憶部５０１は、端末装置３０から供給された撮像補助情報を記憶する。また、撮像補助情報記憶部５０１は、撮像補助情報が所定期間分記憶された場合、古い撮像補助情報から順に破棄して新たな撮像補助情報を記憶する。
【００７１】
予測部５０２は、撮像補助情報記憶部５０１に記憶されている撮像補助情報に基づき、端末装置３０との通信が途切れているとき、端末装置３０から供給されるであろう撮像補助情報を予測する。例えば、端末装置３０の所定期間分の位置情報から、端末装置３０との通信が途切れていても、端末装置３０の位置を示す撮像補助情報を撮像装置２０に送信できるように、端末装置３０の現在位置を予測する。予測部５０２は、予測結果を示す予測情報を予測情報記憶部５０３に出力する。
【００７２】
予測情報記憶部５０３は、予測部５０２から供給された予測情報を記憶する。また、予測情報記憶部５０３は、記憶している予測情報を新たに予測部５０２から供給された予測情報で更新する。
【００７３】
応答処理部５０４は、撮像装置２０から撮像補助情報の要求が行われたとき、過去所定期間内に撮像補助情報記憶部５０１で記憶された撮像補助情報が存在するか判別する。応答処理部５０４は、過去所定期間内に記憶された撮像補助情報が存在する場合、最後に記憶された撮像補助情報を撮像補助情報記憶部５０１から読み出して撮像装置２０に送信する。また、応答処理部５０４は、過去所定期間内に記憶された撮像補助情報が存在しない場合、予測情報記憶部５０３から予測情報を読み出して、撮像補助情報として撮像装置２０に送信する。
【００７４】
［第２の実施の形態の動作］
撮像装置２０は、図３に示すフローチャートと同様な処理を行い、撮像補助表示を行う。また、端末装置３０は、図４に示すフローチャートにおいて、撮像補助情報の要求があるか否かに係らずステップＳＴ１３の処理を行い、ステップＳＴ１１とステップＳＴ１３の処理を繰り返すことで、ネットワークサーバ５０に対して順次撮像補助情報を出力する。
【００７５】
図１０は、第２の実施の形態におけるネットワークサーバの動作を例示したフローチャートである。ステップＳＴ２１でネットワークサーバ５０は、撮像補助情報例えば端末装置３０の現在位置を示す位置情報を受信する。ネットワークサーバ５０は、端末装置３０から送信された撮像補助情報を受信してステップＳＴ２２に進む。
【００７６】
ステップＳＴ２２でネットワークサーバ５０は、撮像補助情報を格納する。ネットワークサーバ５０は、受信した撮像補助情報を撮像補助情報記憶部５０１に記憶してステップＳＴ２３に進む。なお、ネットワークサーバ５０は、撮像補助情報記憶部５０１に撮像補助情報が所定期間分記憶された場合、古い撮像補助情報から順に破棄して新たな撮像補助情報を記憶する。
【００７７】
ステップＳＴ２３でネットワークサーバ５０は、予測情報の生成を行う。ネットワークサーバ５０は、撮像補助情報記憶部５０１に記憶されている撮像補助情報に基づき、端末装置３０との通信が途切れているとき、端末装置３０から供給されるであろう撮像補助情報の予測を予測部５０２で行い、予測結果を示す予測情報を生成してステップＳＴ２４に進む。
【００７８】
ステップＳＴ２４でネットワークサーバ５０は、予測情報を格納する。ネットワークサーバ５０は、生成した予測情報を予測情報記憶部５０３に記憶してステップＳＴ２５に進む。なお、ネットワークサーバ５０は、予測情報記憶部５０３に最新の予測情報を記憶する。
【００７９】
ステップＳＴ２５でネットワークサーバ５０は、撮像補助情報の要求を受信したか判別する。ネットワークサーバ５０は、撮像装置２０からの撮像補助情報の要求を受信した場合にステップＳＴ２６に進み、受信していない場合にステップＳＴ２１に戻る。
【００８０】
ステップＳＴ２６でネットワークサーバ５０は、過去所定期間内に格納された撮像補助情報があるか判別する。ネットワークサーバ５０は、撮像補助情報記憶部５０１に過去所定期間内に格納された撮像補助情報があるか応答処理部５０４によって判別する。ネットワークサーバ５０は、過去所定期間内に格納された撮像補助情報がある場合はステップＳＴ２７に進み、過去所定期間内に格納された撮像補助情報がない場合にはステップＳＴ２８に進む。
【００８１】
ステップＳＴ２７でネットワークサーバ５０は、最新の撮像補助情報の送信を行う。ネットワークサーバ５０は、撮像補助情報記憶部５０１に格納されている最新の撮像補助情報を応答処理部５０４によって読み出して、撮像補助情報の要求を行った撮像装置２０に送信してステップＳＴ２１に戻る。
【００８２】
ステップＳＴ２８でネットワークサーバ５０は、予測情報を撮像補助情報として送信する。ネットワークサーバ５０は、予測情報記憶部５０３に格納されている予測情報を応答処理部５０４によって読み出して、撮像補助情報の要求を行った撮像装置２０に、撮像補助情報として送信してステップＳＴ２１に戻る。
【００８３】
このように、ネットワークサーバ５０は、過去の撮像補助情報に含まれている位置情報から現在の端末装置３０の位置を予測する。また、ネットワークサーバ５０は、端末装置３０との通信が途切れた場合、端末装置３０の現在位置の予測結果である予測情報を、撮像補助情報の要求を行った撮像装置２０に送信する。したがって、端末装置３０との通信が途切れた場合でも、撮像装置２０は撮像補助情報を取得することができるので、撮像補助動作を正しく継続して行うことができる。
【００８４】
＜４．第３の実施の形態＞
上述の第１の実施の形態と第２の実施の形態は、ネットワークサーバ５０を介して撮像装置２０と端末装置３０で通信を行う場合に説明した。しかし、撮像装置２０と端末装置３０は、ネットワークサーバ５０を介することなく直接通信を行うようにしてもよい。第３の実施の形態では、撮像装置２０と端末装置３０が直接通信を行う場合について説明する。
【００８５】
［第３の実施の形態の構成と動作］
図１１は、第３の実施の形態における撮像装置と端末装置の構成を例示している。撮像装置２０は、通信部２０１、位置計測部２０２、撮像方向計測部２０３、撮像補助部２０４、表示部２０５、カメラ部２１０、ユーザインタフェース部２２１、制御部２２５を有している。
【００８６】
通信部２０１は、無線通信によって撮像装置２０を端末装置３０と接続する。通信部２０１は、制御部２２５からの制御信号に基づき動作が制御されて、端末装置３０と認証等を行い、所望の被写体が所持している端末装置３０であることの確認や、所望の被写体が所持している端末装置３０に対して撮像補助情報の要求を行う。また、通信部２０１は、端末装置３０からの撮像補助情報を受信して撮像補助部２０４に出力する。
【００８７】
位置計測部２０２は、例えば測位衛星からの測位信号を受信して、撮像装置２０の現在位置を算出する。位置計測部２０２は、算出した現在位置を示す位置情報を生成して撮像補助部２０４に出力する。
【００８８】
撮像方向計測部２０３は、地磁気を検知して方位を判別する方位センサや重力加速度を利用して撮像装置の姿勢を判別する姿勢センサ等を用いて構成されている。撮像方向計測部２０３は、方位センサと姿勢センサで生成されたセンサ信号に基づき、撮像装置２０の撮像方向がいずれの方向であるか判別して、判別結果を示す撮像方向情報を撮像補助部２０４に出力する。
【００８９】
撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。また、撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向、および撮像装置２０の撮像画角範囲に基づいて撮像補助画像を生成する。さらに、撮像補助部２０４は、カメラ部２１０から供給された画像信号に撮像補助画像の画像信号を重畳させて、カメラスルー画の画像上に端末装置３０を所持した所望の被写体を容易に判別可能とするための撮像補助表示等を行う。
【００９０】
表示部２０５は、液晶表示素子や有機ＥＬ表示等を用いて構成されている。表示部２０５は、撮像補助部２０４から供給された画像信号に基づき表示素子を駆動して、カメラスルー画や記録媒体に記録されている撮像画像の表示や撮像補助表示を行う。また、表示部２０５は、撮像装置２０の動作設定等行うためのメニュー表示、撮像装置２０の設定状態や動作状態等の表示を行う。
【００９１】
カメラ部２１０は、撮像光学系や撮像素子、現像処理部、記録再生部等で構成されており、撮像画像を記録媒体等に記録する。また、カメラ部２１０は、カメラスルー画の画像信号や、記録媒体に記録されている撮像画像の画像信号を撮像補助部２０４に供給する。
【００９２】
ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等を用いて構成されている。ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等に対して行われたユーザ操作に応じて操作信号を生成して制御部２２５に出力する。
【００９３】
制御部２２５は、ＣＰＵやＲＯＭ，ＲＡＭ等を用いて構成されている。制御部２２５は、ＲＯＭ等に記憶されているプログラムを読み出してＣＰＵで実行して、ユーザインタフェース部２２１からの操作信号に基づき、撮像装置２０の動作がユーザ操作に応じた動作となるように各部の動作を制御する。また、制御部２２５は、ユーザの操作や動作モードに応じて撮像補助情報の要求を通信部２０１から行うように制御する。また、制御部２２５は、通信部２０１で受信した撮像補助情報に基づき、端末装置３０を所持した被写体を撮像するための撮像補助動作を撮像補助部で行うように制御する。
【００９４】
端末装置３０は、通信部３０１と情報生成部３１０を有している。通信部３０１は、無線通信によって端末装置３０を撮像装置２０と接続する。通信部３０１は、撮像装置２０と認証等を行い、正しい撮像装置２０であることの確認や、撮像装置２０からの要求に応じて撮像補助情報を送信する処理を行う。
【００９５】
情報生成部３１０は、例えば位置情報生成部３１１を有している。位置情報生成部３１１は、例えば測位衛星からの測位信号を受信して、端末装置３０の現在位置を算出する。位置情報生成部３１１は、算出した現在位置を示す位置情報を生成して通信部３０１に出力する。
【００９６】
このように、撮像装置２０と端末装置３０との間で無線通信を行い、撮像装置２０からの要求に応じて端末装置３０から撮像補助情報を送信すれば、ネットワークを利用することなく撮像補助表示を行うことができる。したがって、通信事業者等と契約して公衆ネットワークを利用可能とする必要がないので、安価に撮像補助動作を行える。
【００９７】
＜５．第４の実施の形態＞
上述の第１乃至第３の実施の形態では、撮像補助情報が端末装置３０の位置情報である場合について説明したが、撮像補助情報は、端末装置３０の位置を示す位置情報に限られない。例えば、端末装置３０を所持している被写体の状態を示す状態情報を撮像補助情報に含めるようにしてもよい。状態情報は、被写体の動きを示す動き情報または被写体の生体情報の少なくとも一方を含む。第４の実施の形態では、撮像補助情報に状態情報例えば生体情報を含めた場合について説明する。
【００９８】
［第４の実施の形態の構成と動作］
図１２は、第４の実施の形態における撮像装置と端末装置の構成を例示している。撮像装置２０は、通信部２０１、位置計測部２０２、撮像方向計測部２０３、撮像補助部２０４、表示部２０５、カメラ部２１０、ユーザインタフェース部２２１、制御部２２５を有している。
【００９９】
通信部２０１は、無線通信によって撮像装置２０をネットワークに接続する。また、通信部２０１は、制御部２２５からの制御信号に基づき動作が制御されて、撮像補助情報の要求を端末装置３０に対して行う。また、通信部２０１は、受信した撮像補助情報を撮像補助部２０４に出力する。
【０１００】
位置計測部２０２は、例えば測位衛星からの測位信号を受信して、撮像装置２０の現在位置を算出する。位置計測部２０２は、算出した現在位置を示す位置情報を生成して撮像補助部２０４に出力する。
【０１０１】
撮像方向計測部２０３は、地磁気を検知して方位を判別する方位センサや重力加速度を利用して撮像装置の姿勢を判別する姿勢センサ等を用いて構成されている。撮像方向計測部２０３は、方位センサと姿勢センサで生成されたセンサ信号に基づき、撮像装置２０の撮像方向がいずれの方向であるか判別して、判別結果を示す撮像方向情報を撮像補助部２０４に出力する。
【０１０２】
撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。また、撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向、および撮像装置２０の撮像画角範囲に基づいて撮像補助画像を生成する。さらに、撮像補助部２０４は、カメラ部２１０から供給された画像信号に撮像補助画像の画像信号を重畳させて、カメラスルー画の画像上に端末装置３０を所持した所望の被写体を容易に判別可能とするための撮像補助表示等を行う。また、撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている状態情報に基づき、撮像補助表示を切り替える。例えば被写体の心拍数が高くなったことが状態情報で示された場合、撮像補助表示を切り替えてハイライトシーンである旨の表示を行うようにする。
【０１０３】
表示部２０５は、液晶表示素子や有機ＥＬ表示等を用いて構成されている。表示部２０５は、撮像補助部２０４から供給された画像信号に基づき表示素子を駆動して、カメラスルー画や記録媒体に記録されている撮像画像の表示や撮像補助表示を行う。また、表示部２０５は、撮像装置２０の動作設定等行うためのメニュー表示、撮像装置２０の設定状態や動作状態等の表示を行う。
【０１０４】
カメラ部２１０は、撮像光学系や撮像素子、現像処理部、記録再生部等で構成されており、撮像画像を記録媒体等に記録する。また、カメラ部２１０は、カメラスルー画の画像信号や、記録媒体に記録されている撮像画像の画像信号を撮像補助部２０４に供給する。
【０１０５】
ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等を用いて構成されている。ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等に対して行われたユーザ操作に応じて操作信号を生成して制御部２２５に出力する。
【０１０６】
制御部２２５は、ＣＰＵやＲＯＭ，ＲＡＭ等を用いて構成されている。制御部２２５は、ＲＯＭ等に記憶されているプログラムを読み出してＣＰＵで実行して、ユーザインタフェース部２２１からの操作信号に基づき、撮像装置２０の動作がユーザ操作に応じた動作となるように各部の動作を制御する。また、制御部２２５は、ユーザの操作や動作モードに応じて撮像補助情報の要求を通信部２０１から行うように制御する。また、制御部２２５は、通信部２０１で受信した撮像補助情報に基づき、端末装置３０を所持した被写体を撮像するための撮像補助動作を撮像補助部で行うように制御する。
【０１０７】
端末装置３０は、通信部３０１と情報生成部３１０を有している。通信部３０１は、無線通信によって端末装置３０をネットワークに接続する。また、通信部３０１は、情報生成部３１０で生成された撮像補助情報をネットワークサーバ５０に送信する。
【０１０８】
情報生成部３１０は、例えば位置情報生成部３１１と生体情報生成部３１２を有している。位置情報生成部３１１は、例えば測位衛星からの測位信号を受信して、端末装置３０の現在位置を算出する。位置情報生成部３１１は、算出した現在位置を示す位置情報を生成して通信部３０１に出力する。
【０１０９】
生体情報生成部３１２は、例えば心拍数や呼吸、血圧、体温等を計測する生体センサを用いて構成されている。生体情報生成部３１２は、生体センサで生成された計測結果を生体情報として通信部３０１に出力する。
【０１１０】
このように端末装置３０は、位置情報だけでなく被写体の状態を示す状態情報を取得して、位置情報や状態情報を含む撮像補助情報を撮像装置２０に送信する。撮像装置２０は、端末装置３０の位置だけでなく、端末装置３０を所持している被写体の状態情報に基づいた撮像補助表示を行う。例えば、図１３の（Ａ）に示すように、撮像補助情報で示された心拍数が所定値を超えた場合にハートマーク等の心拍表示を行う。また、心拍数が所定値を超えて高くなるに伴い、図１３の（Ｂ）に示すように心拍表示のサイズを大きくする。このような表示を行えば、撮像装置２０を使用しているユーザは、離れた位置から所望の被写体がどのような状態であるかを観察できる。したがって、例えば、運動会等で被写体が興奮状態であり心拍数が高くなると心拍表示行われて、被写体が興奮状態であるハイライトシーンを撮り逃してしまうことを防止できるようになる。
【０１１１】
＜６．第５の実施の形態＞
上述の第１乃至第４の実施の形態では、撮像補助情報に基づいた撮像補助動作として、撮像装置２０で撮像補助表示を行う場合について説明した。しかし、撮像装置２０は、撮像補助動作として種々の調整や設定等を行い、所望の被写体を容易に良好な画質で撮像できるようにしてもよい。第５の実施の形態では、撮像補助動作として撮像補助情報に基づき撮像装置２０の調整や設定等の動作制御を行う場合について説明する。
【０１１２】
［第５の実施の形態の構成］
図１４は、第５の実施の形態における撮像装置と端末装置の構成を例示している。撮像装置２０は、通信部２０１、位置計測部２０２、撮像方向計測部２０３、撮像補助部２０４、表示部２０５、カメラ部２１０、ユーザインタフェース部２２１、制御部２２５を有している。
【０１１３】
通信部２０１は、無線通信によって撮像装置２０をネットワークに接続する。また、通信部２０１は、制御部２２５からの制御信号に基づき動作が制御されて、撮像補助情報の要求を端末装置３０に対して行う。また、通信部２０１は、受信した撮像補助情報を撮像補助部２０４に出力する。
【０１１４】
位置計測部２０２は、例えば測位衛星からの測位信号を受信して、撮像装置２０の現在位置を算出する。位置計測部２０２は、算出した現在位置を示す位置情報を生成して撮像補助部２０４に出力する。
【０１１５】
撮像方向計測部２０３は、地磁気を検知して方位を判別する方位センサや重力加速度を利用して撮像装置の姿勢を判別する姿勢センサ等を用いて構成されている。撮像方向計測部２０３は、方位センサと姿勢センサで生成されたセンサ信号に基づき、撮像装置２０の撮像方向がいずれの方向であるか判別して、判別結果を示す撮像方向情報を撮像補助部２０４に出力する。
【０１１６】
撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。また、撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向、および撮像装置２０の撮像画角範囲に基づいて撮像補助画像を生成する。さらに、撮像補助部２０４は、カメラ部２１０から供給された画像信号に撮像補助画像の画像信号を重畳させて、カメラスルー画の画像上に端末装置３０を所持した所望の被写体を容易に判別可能とするための撮像補助表示等を行う。
【０１１７】
撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向、および撮像装置２０の撮像画角範囲に基づいて撮像補助画像を生成する。また、撮像補助部２０４は、カメラ部２１０から供給された画像信号に撮像補助画像の画像信号を重畳させて、カメラスルー画の画像上に端末装置３０を所持した所望の被写体を容易に判別可能とするための撮像補助表示等を行う。また、撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている状態情報に基づき、撮像補助表示を切り替える。さらに、撮像補助部２０４は、撮像補助動作として、通信部２０１で受信した撮像補助情報に含まれている位置情報や被写体の状態を示す状態情報、被写体の撮像環境を示す環境情報をカメラ部２１０に出力する。撮像補助部２０４は、このような情報をカメラ部２１０に出力することで、カメラ部２１０の調整や設定等の制御を撮像補助情報に基づいて行わせる。また、撮像補助部２０４は、撮像補助動作を行うための補助動作信号を生成して、外部機器例えばパン・チルト機構等に出力してもよい。
【０１１８】
表示部２０５は、液晶表示素子や有機ＥＬ表示等を用いて構成されている。表示部２０５は、撮像補助部２０４から供給された画像信号に基づき表示素子を駆動して、カメラスルー画や記録媒体に記録されている撮像画像の表示や撮像補助表示を行う。また、表示部２０５は、撮像装置２０の動作設定等行うためのメニュー表示、撮像装置２０の設定状態や動作状態等の表示を行う。
【０１１９】
カメラ部２１０は、撮像光学系２１１、撮像部２１２、現像処理部２１３、コーデック処理部２１４、記録再生部２１５、光学系制御部２１６、明るさ制御部２１７、音声出力部２１８を有している。
【０１２０】
撮像光学系２１１は、撮像部２１２に設けられている撮像素子の撮像面上に結像される光学像の焦点調節を行うためのフォーカスレンズや、光学像の変倍を行うためのズームレンズ、光学像の明るさを調整する絞り等を有している。
【０１２１】
撮像部２１２は、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）やＣＣＤ(Charge Coupled Device）等の撮像素子を用いて構成されている。撮像素子は、撮像光学系２１１によって受光面に結像された光学像に応じた撮像信号を生成する。また、撮像部２１２は、撮像素子で生成された撮像信号のノイズ除去やゲイン調整、Ａ／Ｄ変換処理等を行い画像データを生成する。撮像部２１２は、生成した画像データを現像処理部２１３に出力する。
【０１２２】
現像処理部２１３は、撮像部２１２から供給される画像データに対してホワイトバランス調整処理、ガンマ補正処理、色調整処理等の現像処理を行う。また、現像処理部２１３は、通信部２０１で受信した撮像補助情報に含まれている光源色情報に基づき、ホワイトバランス調整処理や色調整処理等を行う。現像処理部２１３は、現像処理後の画像データをコーデック処理部２１４や撮像補助部２０４に出力する。
【０１２３】
コーデック処理部２１４は、現像処理部２１３から出力された画像データのデータ圧縮処理を行い、得られた符号化データを記録再生部２１５に出力する。また、コーデック処理部２１４は、記録再生部２１５から出力された符号化データのデータ伸長処理を行い、得られた画像データを撮像補助部２０４に出力する。なお、データ圧縮伸長では、例えばＪＰＥＧ（Joint Photographic Coding Experts Group）等の手法が適用される。また、コーデック処理部２１４は、撮像補助部２０４から出力された音声情報のデータ圧縮処理を行い、得られた符号化データを記録再生部２１５に出力する。また、コーデック処理部２１４は、記録再生部２１５から供給された音声符号化データのデータ伸長処理を行い、得られた音声データを音声出力部２１８に出力する。
【０１２４】
記録再生部２１５は、コーデック処理部２１４でデータ圧縮処理を行うことにより得られた符号化データ等を記録媒体に記録する。また、記録再生部２１５は、記録媒体に記録されている符号化データを読み出してコーデック処理部２１４に出力する。なお、記録再生部２１５では、データ圧縮処理前の画像データや音声情報等を記録媒体に記録するようにしてもよい。
【０１２５】
光学系制御部２１６は、撮像補助部２０４から出力された撮像装置２０と端末装置３０との距離に基づき、所望の被写体にピントが合うように撮像光学系２１１におけるフォーカスレンズの位置を制御する。また、光学系制御部２１６は、撮像補助部２０４から出力された情報に基づき、撮像光学系２１１におけるズームレンズの位置を制御するようにしてもよい。
【０１２６】
明るさ制御部２１７は、撮像補助部２０４から出力された環境情報に基づき、端末装置３０を保持している所望の被写体が適正な明るさで撮像されるように制御する。例えば、明るさ制御部２１７は、撮像光学系２１１における絞りや撮像部２１２で生成された撮像信号のゲイン、撮像装置２０のシャッター速度等を制御する。また、明るさ制御部２１７は、撮像補助部２０４から出力された状態情報に基づき、被写体の動きがはやい場合には、被写体の動きボケを生じないようにシャッター速度をはやくしてゲインを高くする。被写体が静止している場合には、ゲインを高くすることなくシャッター速度をおそくして、ノイズの少ない撮像画像を得られるように制御する。
【０１２７】
音声出力部２１８は、コーデック処理部２１４から供給された音声データや撮像補助部２０４から出力された音声情報に基づき音声出力を行う。
【０１２８】
ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等を用いて構成されている。ユーザインタフェース部２２１は、操作スイッチや操作ボタン、タッチパネル等に対して行われたユーザ操作に応じて操作信号を生成して制御部２２５に出力する。
【０１２９】
制御部２２５は、ＣＰＵやＲＯＭ，ＲＡＭ等を用いて構成されている。制御部２２５は、ＲＯＭ等に記憶されているプログラムを読み出してＣＰＵで実行して、ユーザインタフェース部２２１からの操作信号に基づき、撮像装置２０の動作がユーザ操作に応じた動作となるように各部の動作を制御する。また、制御部２２５は、ユーザの操作や動作モードに応じて撮像補助情報の要求を通信部２０１から行うように制御する。また、制御部２２５は、通信部２０１で受信した撮像補助情報に基づき、端末装置３０を所持した被写体を撮像するための撮像補助動作を撮像補助部で行うように制御する。
【０１３０】
端末装置３０は、通信部３０１と情報生成部３１０を有している。通信部３０１は、無線通信によって端末装置３０をネットワークに接続する。また、通信部３０１は、情報生成部３１０で生成された撮像補助情報をネットワークサーバ５０に送信する。
【０１３１】
情報生成部３１０は、位置情報生成部３１１、生体情報生成部３１２、動き情報生成部３１３、照度情報生成部３１４、光源色情報生成部３１５、音声情報生成部３１６を有している。
【０１３２】
位置情報生成部３１１は、例えば測位衛星からの測位信号を受信して、端末装置３０の現在位置を算出する。位置情報生成部３１１は、算出した現在位置を示す位置情報を生成する。位置情報生成部３１１は、生成した位置情報を撮像補助情報として通信部３０１に出力する。
【０１３３】
生体情報生成部３１２は、例えば心拍数や呼吸、血圧、体温等を計測する生体センサを用いて構成されている。生体情報生成部３１２は、生体センサで生成された計測結果を示す生体情報を生成する。生体情報生成部３１２は、生体情報を撮像補助情報として通信部３０１に出力する。
【０１３４】
動き情報生成部３１３は、加速度センサ等を用いて構成されている。動き情報生成部３１３は、加速度センサ等によって端末装置３０を所持している被写体の動きを検出して、動き検出結果を示す動き情報を生成する。動き情報生成部３１３は、被写体の状態を示す動き情報を撮像補助情報として通信部３０１に出力する。
【０１３５】
照度情報生成部３１４は、照度センタ等を用いて構成されている。照度情報生成部３１４は、照度センサ等によって端末装置３０を所持した被写体回りの明るさを検出して、明るさ検出結果を示す照度情報を生成する。照度情報生成部３１４は、被写体の撮像環境を示す照度情報を撮像補助情報として通信部３０１に出力する。
【０１３６】
光源色情報生成部３１５は、ＲＧＢセンサ等を用いて構成されている。光源色情報生成部３１５は、色や輝度を特徴量としてＲＧＢセンサ等で取得して、この特徴量と色の分布等から光源色の検出を行い、光源色の検出結果を示す光源色情報を生成する。光源色情報生成部３１５は、被写体の撮像環境を示す光源色情報を撮像補助情報として通信部３０１に出力する。
【０１３７】
音声情報生成部３１６は、マイクロフォンやＡ／Ｄ変換器等を用いて構成されている。音声情報生成部３１６は、マイクロフォンで集音した音声を示す音声情報（音声データ）を生成する。音声情報生成部３１６は、生成した音声情報を撮像補助情報として通信部３０１に出力する。
【０１３８】
［第５の実施の形態の動作］
図１５は、第５の実施の形態における撮像装置２０の動作を例示したフローチャートである。ステップＳＴ３１で撮像装置２０は、撮像補助情報の要求を端末装置へ送信する。撮像装置２０は、通信部２０１から端末装置３０を送信先として撮像補助情報の要求を送信してステップＳＴ３２に進む。
【０１３９】
ステップＳＴ３２で撮像装置２０は、撮像補助情報を受信する。撮像装置２０は、ステップＳＴ３１で送信した要求に応じて供給された撮像補助情報を通信部２０１で受信してステップＳＴ３３に進む。
【０１４０】
ステップＳＴ３３で撮像装置２０は、現在位置の判別を行う。撮像装置２０は、位置計測部２０２において測位信号を受信して撮像装置２０の現在位置を判別してステップＳＴ３４に進む。
【０１４１】
ステップＳＴ３４で撮像装置２０は、被写体までの距離を算出する。撮像装置２０は、撮像補助部２０４において、撮像補助情報に含まれている位置情報と、位置計測部２０２で算出した現在位置を示す位置情報に基づき、撮像装置２０から端末装置３０までの距離を算出してステップＳＴ３５に進む。
【０１４２】
ステップＳＴ３５で撮像装置２０は、フォーカスレンズを移動させる。撮像装置２０は、撮像補助部２０４においてフォーカス調整を行い、撮像光学系２１１のフォーカスレンズを被写体までの距離に応じたレンズ位置に光学系制御部２６１によって移動させてステップＳＴ３６に進む。
【０１４３】
ステップＳＴ３６で撮像装置２０は、フォーカス制御を行う。撮像装置２０は、光学系制御部２１６でフォーカス制御を開始して、所望の被写体にピントがあった撮像画像を得ることができるようにフォーカスレンズの位置を制御する。
【０１４４】
ステップＳＴ３７で撮像装置２０は、明るさ制御量を算出する。撮像装置２０は、撮像補助情報に含まれている環境情報（照度情報）や状態情報（動き情報）を撮像補助部２０４から明るさ制御部２１７に出力することで、環境情報や状態情報に基づき、端末装置３０を保持している所望の被写体を適正な明るさとする明るさ制御量を明るさ制御部２１７で算出してステップＳＴ３８に進む。
【０１４５】
ステップＳＴ３８で撮像装置２０は、明るさ制御を行う。撮像装置２０は、明るさ制御部２１７によって、明るさ制御量に基づき、撮像光学系２１１の絞りの調整や、シャッター速度の調整、撮像部２１２で生成された撮像信号のゲイン調整等を行う。
【０１４６】
ステップＳＴ３９で撮像装置２０は、ホワイトバランス調整値を算出する。撮像装置２０は、撮像補助情報に含まれている環境情報（光源色情報）を撮像補助部２０４から現像処理部２１３に出力して、環境情報（光源色情報）に基づき、撮像画像で色を正しく再現できるようにホワイトバランス調整値を現像処理部２１３で算出してステップＳＴ４０に進む。
【０１４７】
ステップＳＴ４０で撮像装置２０は、ホワイトバランス制御を行う。撮像装置２０は、現像処理部２１３によって、ホワイトバランス調整値に基づき撮像画像が正しい色となるようにホワイトバランス制御を行う。
【０１４８】
ステップＳＴ４１で撮像装置２０は、音声情報記録処理を行う。撮像装置２０は、撮像補助情報に含まれている音声情報を撮像補助部２０４からコーデック処理部２１４に出力して音声情報ののデータ圧縮処理を行う。また、撮像装置２０は、コーデック処理部２１４で生成した符号化データを記録再生部２１５に出力して記録媒体に記録させる。なお、データ圧縮処理前の音声情報を記録媒体に記録する場合には、撮像補助情報に含まれている音声情報を撮像補助部２０４から記録再生部２１５に出力する。
【０１４９】
図１６は、第５の実施の形態における端末装置３０の動作を例示したフローチャートである。ステップＳＴ５１で端末装置３０は、位置情報を生成する。端末装置３０は、位置情報生成部３１１において測位信号を受信して端末装置３０の現在位置を算出して、算出した現在位置を示す位置情報を生成してステップＳＴ５２に進む。
【０１５０】
ステップＳＴ５２で端末装置３０は、状態情報や環境情報および音声情報の生成を行う。端末装置３０は、生体情報生成部３１２で生体情報、動き情報生成部３１３で動き情報を生成して状態情報とする。また、照度情報生成部３１４で明るさ情報、光源色情報生成部３１５で光源色情報を生成して環境情報とする。また、端末装置３０は、音声情報生成部３１６で音声情報を生成してステップＳＴ５３に進む。
【０１５１】
ステップＳＴ５３で端末装置３０は、撮像補助情報の要求があるか判別する。端末装置３０は、通信部３０１で撮像補助情報の要求を受信していない場合にステップＳＴ５１に戻り、撮像補助情報の要求を受信した場合にステップＳＴ５４に進む。
【０１５２】
ステップＳＴ５４で端末装置３０は、撮像補助情報の送信を行う。端末装置３０は、通信部３０１から撮像補助情報を、撮像補助情報の要求の送信元である撮像装置２０に送信する。端末装置３０は、例えば位置情報と状態情報、環境情報、音声情報を撮像補助情報として、撮像装置２０に送信してステップＳＴ５１に戻る。
【０１５３】
このように、第５の実施の形態では、端末装置３０で生成された位置情報を利用して撮像装置２０のフォーカス調整範囲が限定される。したがって、被写体までの距離が大まかにしかわからないような状況でも、端末装置３０を所持した所望の被写体にフォーカスを合わせることが可能となる。
【０１５４】
また、撮像装置２０でシャッター速度をおそくすると、低照度でもノイズの少ない撮像画像を得ることが可能だが、動きに弱く動被写体には動きボケが発生することが多い。また、シャッター速度をはやくした場合には、所望の明るさの撮像画像を得ることができるようにゲインが高く設定されるため、動きボケは発生しづらいが、ノイズの目立つ画像となってしまう。さらに、一般的な撮像装置では、照度に基づきゲインとシャッター速度をバランスのとれた状態に設定している。しかし、第５の実施の形態では、環境情報（端末装置３０を所持した所望の被写体の明るさ情報）と状態情報（被写体の動き情報）に基づき、ゲインやシャッター速度が設定されるので、所望の被写体の明るさや動きに応じてゲインやシャッター速度を最適化できる。
【０１５５】
また、第５の実施の形態では、端末装置３０で生成された光源色情報を利用して撮像装置２０の現像処理が行われるので、適切に色補正等を行うことが可能となる。
【０１５６】
また、第５の実施の形態では、端末装置３０で集音された音声を示す音声情報を記録できるので、遠方に位置する所望の被写体の音声も明瞭に記録することが可能となる。
【０１５７】
さらに、撮像装置２０にパン・チルト機構部が設けられている場合、または撮像装置２０が雲台に取り付けられている場合、撮像補助部２０４は、撮像補助動作として撮像補助情報に基づきパン・チルト動作を行うようにしてもよい。
【０１５８】
この場合、 撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報と、位置計測部２０２から出力された位置情報に基づき、撮像装置２０と端末装置３０との距離を算出する。また、撮像補助部２０４は、撮像方向計測部２０３から出力された撮像方向情報と端末装置３０の位置情報に基づき、撮像装置２０の撮像方向に対して端末装置３０がいずれの方向に位置するか判別する。撮像補助部２０４は、算出した距離と判別した端末装置３０の方向に基づいて、端末装置３０が撮像画角範囲の例えば中央位置となるようにパン・チルト動作制御を行うための補助動作信号を生成して、パン・チルト機構部や雲台に出力する。
【０１５９】
このように撮像装置２０は、撮像補助情報に基づいた撮像補助動作としてパン・チルト制御動作を行うことで、端末装置３０を所持した被写体を自動的に追従して撮像動作を行うことが可能となる。例えば、ユーザが端末装置３０を所持して、ユーザ自身を離れた位置から撮像装置２０で追従しながら撮像を行うことができる。
【０１６０】
また、撮像補助部２０４は、通信部２０１で受信した撮像補助情報に含まれている端末装置３０の位置情報、または端末装置３０の位置情報と状態情報（動き情報）に基づきズームレンズ制御動作を行うようにしてもよい。例えば、端末装置３０の位置情報や状態情報（動き情報）に基づき、所望の被写体の動きが大きいと判別した場合、撮像補助部２０４は、所望の被写体が撮像画角範囲から外れないようにズームアウト動作を行う。また、撮像補助部２０４は、、所望の被写体が静止している場合にズームイン動作を行う。
【０１６１】
さらに、撮像補助部２０４は、撮像補助情報に基づいた撮像補助動作としてパン・チルト制御動作とズームレンズ制御動作を組み合わせて行うようにすれば、端末装置３０を所持した被写体を自動的に追従して、被写体の動きに応じたズーム比で撮像できる。例えば、端末装置３０までの距離に応じてズームレンズ位置を設定する。その後、所望の被写体の動きを生じた場合、パン・チルト制御動作を行い所望の被写体を追従する。また、所望の被写体の動きが大きい場合、ズームアウト動作を行い所望の被写体が確実に撮像画角範囲内となるように制御する。所望の被写体が動きを生じていない場合は、ズームイン動作を行うことで、被写体を詳細に示す撮像画像を得られるようにする。このように撮像補助動作を行えば、より高度な撮像動作を自動的に行うことも可能となる。
【０１６２】
なお、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させる。または、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。
【０１６３】
例えば、プログラムは記録媒体としてのハードディスクやＲＯＭ（Read Only Memory）に予め記録しておくことができる。あるいは、プログラムはフレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory），ＭＯ（Magneto optical）ディスク，ＤＶＤ（Digital Versatile Disc）、磁気ディスク、半導体メモリカード等のリムーバブル記録媒体に、一時的または永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
【０１６４】
また、プログラムは、リムーバブル記録媒体からコンピュータにインストールする他、ダウンロードサイトからＬＡＮ（Local Area Network）やインターネット等のネットワークを介して、コンピュータに無線または有線で転送してもよい。コンピュータでは、そのようにして転送されてくるプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。
【０１６５】
さらに、本技術は、上述した実施の形態に限定して解釈されるべきではない。この実施の形態は、例示という形態で本技術を開示しており、本技術の要旨を逸脱しない範囲で当業者が実施の形態の修正や代用をなし得ることは自明である。すなわち、本技術の要旨を判断するためには、特許請求の範囲を参酌すべきである。
【０１６６】
なお、本技術の撮像装置と端末装置は以下のような構成もとることができる。
（１）  端末装置からの撮像補助情報を受信する通信部と、
前記受信した撮像補助情報に基づき、前記端末装置を所持した被写体を撮像するための撮像補助動作を行う撮像補助部と
を備える撮像装置。
（２）  現在位置と撮像方向を計測する計測部と、
画像表示を行う表示部を有し、
前記撮像補助情報は、前記端末装置の位置情報を含み、
前記撮像補助部は、前記端末装置の位置情報と前記計測部で計測された現在位置および撮像方向に基づき、前記撮像補助動作として前記表示部で前記被写体の位置を示す撮像補助表示を行う（１）に記載の撮像装置。
（３）  前記撮像補助情報は、前記端末装置を所持している被写体の状態を示す状態情報を含み、
前記撮像補助部は、前記状態情報に基づいて前記撮像補助表示を切り替える（１）または（２）に記載の撮像装置。
（４）  前記状態情報は、前記被写体の動きを示す動き情報または前記被写体の生体情報を含む（３）に記載の端末装置。
（５）  前記撮像補助情報は、前記端末装置の位置情報を含み、
前記撮像補助部は、前記端末装置の位置情報と前記計測部で計測された現在位置に基づいて算出した前記被写体までの距離に応じて前記撮像補助動作としてフォーカス調整を行う（１）乃至（４）のいずれかに記載の撮像装置。
（６）  前記撮像補助情報は、前記端末装置を所持している被写体の撮像環境を示す環境情報または前記端末装置を所持している被写体の状態を示す状態情報を含み、
前記撮像補助部は、前記環境情報または前記状態情報に基づいて前記撮像補助動作を行う（１）乃至（５）のいずれかに記載の撮像装置。
（７）  撮像画像の現像処理を行う現像処理部を有し、
前記撮像補助部は、前記環境情報に基づき前記撮像補助動作として前記現像処理部の現像処理設定を行う（１）乃至（６）のいずれかに記載の撮像装置。
（８）  前記被写体の撮像環境を示す環境情報は、光源色または前記被写体の明るさを示す情報を含む（６）に記載の端末装置。
（９）  撮像画像を記録する記録部を有し、
前記撮像補助情報は、前記端末装置で集音された音声を示す音声情報を含み、
前記撮像補助部は、前記受信した撮像補助情報に含まれている音声情報を前記記録部で記録させる（１）乃至（８）のいずれかに記載の撮像装置。
（１０）  撮像補助情報を生成する情報生成部と、
前記情報生成部で生成された撮像補助情報を送信する通信部と
を備える端末装置。
（１１）  前記情報生成部は、当該端末装置の位置を示す位置情報を含む撮像補助情報を生成する（１０）に記載の端末装置。
（１２）  前記情報生成部は、当該端末装置を所持している被写体の撮像環境を示す環境情報を含む撮像補助情報を生成する（１０）または（１１）に記載の端末装置。
（１３）  前記情報生成部は、当該端末装置を所持している被写体の状態を示す情報を含む撮像補助情報を生成する（１０）乃至（１２）のいずれかに記載の端末装置。
【産業上の利用可能性】
【０１６７】
この技術の撮像装置、端末装置、情報処理装置、撮像システムおよび方法とプログラムによれば、端末装置で生成された撮像補助情報が送信されて、撮像装置では、受信した撮像補助情報に基づき、端末装置を所持した被写体を撮像するための撮像補助動作が行われる。また、情報処理装置では、端末装置で生成された撮像補助情報を受信できない場合に、予測を行うことにより生成した撮像補助情報が撮像装置に送信される。このため、所望の被写体を容易かつ良好に撮像できる。したがって、デジタルカメラやビデオカメラ等の撮像装置を用いて所望の被写体の撮像を行う場合に適している。
【符号の説明】
【０１６８】
１０・・・撮像システム、２０・・・撮像装置、３０・・・端末装置、５０・・・ネットワークサーバ、２０１，３０１・・・通信部、２０２・・・位置計測部、２０３・・・撮像方向計測部、２０４・・・撮像補助部、２０５・・・表示部、２１０・・・カメラ部、２１１・・・撮像光学系、２１２・・・撮像部、２１３・・・現像処理部、２１４・・・コーデック処理部、２１５・・・記録再生部、２１６・・・光学系制御部、２１７・・・明るさ制御部、２１８・・・音声出力部、２２１・・・ユーザインタフェース部、２２５・・・制御部、３１０・・・情報生成部、３１１・・・位置情報生成部、３１２・・・生体情報生成部、３１３・・・動き情報生成部、３１４・・・照度情報生成部、３１５・・・光源色情報生成部、３１６・・・音声情報生成部、５０１・・・撮像補助情報記憶部、５０２・・・予測部、５０３・・・予測情報記憶部、５０４・・・応答処理部
【図１】
2013157797.tif 000003
【図２】
2013157797.tif 000004
【図３】
2013157797.tif 000005
【図４】
2013157797.tif 000006
【図９】
2013157797.tif 000007
【図１０】
2013157797.tif 000008
【図１１】
2013157797.tif 000009
【図１２】
2013157797.tif 000010
【図１４】
2013157797.tif 000011
【図１５】
2013157797.tif 000012
【図１６】
2013157797.tif 000013
【図５】
2013157797.tif 000014
【図６】
2013157797.tif 000015
【図７】
2013157797.tif 000016
【図８】
2013157797.tif 000017
【図１３】
2013157797.tif 000018