(57)【要約】  本技術は、より簡単に撮影状況を把握することができるようにする撮影システム、警告発生装置および方法、撮像装置および方法、並びにプログラムに関する。撮像装置のカメラ制御用検波処理部は、撮影画像に基づいて各種の制御のための検波処理を行い、画質制御処理部は、検波処理の結果に基づいて各要因の異常の発生を検出する。警告判定処理部は、画質制御処理部による検出結果に基づいて、異常が発生しているか否かを示す警告フラグを生成し、無線送信部は、警告フラグを警告発生装置に送信する。警告発生装置の無線受信部は、警告フラグを受信し、警告手段制御処理部は、警告フラグに応じて警告を指示する。表示用処理部は、警告手段制御処理部の指示に応じて、警告アイコンを表示部に表示させる。本技術は、アクションカメラに適用することができる。
2015107928.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置と警告発生装置とからなる撮影システムであって、
前記撮像装置は、
撮影画像を撮影する撮影部と、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出部と、
前記異常の検出結果を示す情報を前記警告発生装置に送信する送信部と
を備え、
前記警告発生装置は、
前記送信部により送信された、前記異常の検出結果を示す情報を受信する受信部と、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理部と、
前記警告手段制御処理部による警告の指示に応じて、警告を発する警告部と
を備える
撮影システム。
【請求項２】
撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信部と、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理部と、
前記警告手段制御処理部による警告の指示に応じて、警告を発する警告部と
を備える警告発生装置。
【請求項３】
前記警告部は、前記異常の種別ごとに異なる前記警告を発する
請求項２に記載の警告発生装置。
【請求項４】
前記撮影状況に関する前記異常は、露出制御に関する異常、ホワイトバランス制御に関する異常、フォーカス制御に関する異常、手ぶれ補正に関する異常、撮影方向に関する異常、顔検出に関する異常、またはバッテリに関する異常の少なくとも何れかである
請求項２に記載の警告発生装置。
【請求項５】
前記警告部は、警告表示をすることで前記警告を発する
請求項２に記載の警告発生装置。
【請求項６】
前記警告部は、音声を出力することで前記警告を発する
請求項２に記載の警告発生装置。
【請求項７】
前記警告部は、振動することで前記警告を発する
請求項２に記載の警告発生装置。
【請求項８】
前記警告部は、発光することで前記警告を発する
請求項２に記載の警告発生装置。
【請求項９】
前記受信部は、前記撮像装置から前記撮影画像をさらに受信し、
前記撮影画像を表示する表示部をさらに備える
請求項２に記載の警告発生装置。
【請求項１０】
前記受信部は、無線により前記異常の検出結果を示す情報を受信する
請求項２に記載の警告発生装置。
【請求項１１】
撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信ステップと、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理ステップと、
前記警告手段制御処理ステップによる警告の指示に応じて、警告を発する警告ステップと
を含む警告発生方法。
【請求項１２】
撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信ステップと、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理ステップと、
前記警告手段制御処理ステップによる警告の指示に応じて、警告を発する警告ステップと
を含む処理をコンピュータに実行させるプログラム。
【請求項１３】
撮影画像を撮影する撮影部と、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出部と、
前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信部と
を備える撮像装置。
【請求項１４】
撮影画像を撮影する撮影ステップと、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出ステップと、
前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信ステップと
を含む撮影方法。
【請求項１５】
撮影画像を撮影する撮影ステップと、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出ステップと、
前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信ステップと
を含む処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は撮影システム、警告発生装置および方法、撮像装置および方法、並びにプログラムに関し、特に、より簡単に撮影状況を把握することができるようにした撮影システム、警告発生装置および方法、撮像装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
近年、デジタルビデオカメラの中で、耐衝撃性や耐水性を有するアクションカメラと呼ばれるカメラが登場している。このようなカメラは、その特徴からウェアラブルカメラなどとも呼ばれ、マウントを介してユーザの身にカメラを装着し、撮影を行うことで旧来のカメラでは撮影できなかったアングルや状況での撮影が可能となる。【０００３】
このようなアクションカメラの多くは、耐衝撃性や耐水性などを保つために、超小型で、かつハウジングに格納された状態で使う前提であったり、ユーザの身に着けて、あるいは他のものにつけて撮影するために、そもそも撮影画像の表示装置が搭載されていないものが殆どである。【０００４】
なかには、表示装置が搭載されているアクションカメラもあるが、アクションカメラのサイズ維持のため、記録画質と比較して相当低い解像度やサイズ、品位の表示装置が用いられている。その結果、アクションカメラに搭載されている表示装置に撮影画像を表示させても、ユーザは、どの辺りが撮影されているかを確認することができる程度であった。【０００５】
このように、アクションカメラには、表示装置が搭載されていなかったり、あるいは十分とはいえない品位の表示装置しか搭載されていなかった。そのため、撮影者はタリーランプ等で記録中か否かを把握することができても、所望の画角や露光、焦点位置、ホワイトバランス等の撮影状況で撮影が行われているかを一切確認することができなかった。【０００６】
そこで、近年では、撮影画像を近距離での無線通信により、スマートフォン等の別体表示装置まで伝送し、外部表示装置にて画角を確認する方法が提案および実用化されている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００６−３２５１５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、アクションカメラのユースケースでは、撮影中、継続して状況を外部表示装置で確認し続けることは事実上困難である。【０００９】
そのため、記録開始前には適切な撮影状況で安心して記録を開始したにもかかわらず、途中でアクションカメラ自体の向きが大きく変わったり、被写体状況が大きく変わったりして、もはやフォーカスや露出、ホワイトバランスや手ぶれ補正が自動追従できなくなった状態となっても、撮影者が撮影画像を改めて確認するまで、そのことに気付かないことがある。そうすると、撮影機会の損失や撮影者のストレスが生じることになってしまう。【００１０】
以上のように、アクションカメラ等の小型な撮像装置での撮影時には、より簡単にユーザが撮影状況を把握することができるようにすることが望まれている。【００１１】
本技術は、このような状況に鑑みてなされたものであり、より簡単に撮影状況を把握することができるようにするものである。
【課題を解決するための手段】
【００１２】
本技術の第１の側面の撮影システムは、撮像装置と警告発生装置とからなる撮影システムであって、前記撮像装置は、撮影画像を撮影する撮影部と、前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出部と、前記異常の検出結果を示す情報を前記警告発生装置に送信する送信部とを備え、前記警告発生装置は、前記送信部により送信された、前記異常の検出結果を示す情報を受信する受信部と、前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理部と、前記警告手段制御処理部による警告の指示に応じて、警告を発する警告部とを備える。【００１３】
本技術の第１の側面の撮影システムにおいては、撮像装置と警告発生装置とからなる撮影システムにおいて、前記撮像装置により撮影画像が撮影され、前記撮影画像の撮影状況が監視されて、前記撮影状況に関する異常が検出され、前記異常の検出結果を示す情報が前記警告発生装置に送信される。そして、前記警告発生装置により、前記異常の検出結果を示す情報が受信され、前記異常の検出結果を示す情報に基づいて、警告が指示され、その警告の指示に応じて、警告が発せられる。【００１４】
本技術の第２の側面の警告発生装置は、撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信部と、前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理部と、前記警告手段制御処理部による警告の指示に応じて、警告を発する警告部とを備える。【００１５】
前記警告部が、前記異常の種別ごとに異なる前記警告を発するようにすることができる。【００１６】
前記撮影状況に関する前記異常は、露出制御に関する異常、ホワイトバランス制御に関する異常、フォーカス制御に関する異常、手ぶれ補正に関する異常、撮影方向に関する異常、顔検出に関する異常、またはバッテリに関する異常の少なくとも何れかとすることができる。【００１７】
前記警告部が、警告表示をすることで前記警告を発するようにすることができる。【００１８】
前記警告部が、音声を出力することで前記警告を発するようにすることができる。【００１９】
前記警告部が、振動することで前記警告を発するようにすることができる。【００２０】
前記警告部が、発光することで前記警告を発するようにすることができる。【００２１】
前記受信部には、前記撮像装置から前記撮影画像をさらに受信させ、前記撮影画像を表示する表示部をさらに設けることができる。【００２２】
前記受信部には、無線により前記異常の検出結果を示す情報を受信させることができる。【００２３】
本技術の第２の側面の警告発生方法またはプログラムは、撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信ステップと、前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理ステップと、前記警告手段制御処理ステップによる警告の指示に応じて、警告を発する警告ステップとを含む。【００２４】
本技術の第２の側面においては、撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報が受信され、前記異常の検出結果を示す情報に基づいて、警告が指示され、その警告の指示に応じて、警告が発せられる。【００２５】
本技術の第３の側面の撮像装置は、撮影画像を撮影する撮影部と、前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出部と、前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信部とを備える。【００２６】
本技術の第３の側面の撮影方法またはプログラムは、撮影画像を撮影する撮影ステップと、前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出ステップと、前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信ステップとを含む。【００２７】
本技術の第３の側面においては、撮影画像が撮影され、前記撮影画像の撮影状況が監視されて、前記撮影状況に関する異常が検出され、前記異常の検出結果を示す情報が、前記異常の発生に対する警告を発する警告発生装置に送信される。
【発明の効果】
【００２８】
本技術の第１の側面乃至第３の側面によれば、より簡単に撮影状況を把握することができる。【００２９】
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載された何れかの効果であってもよい。
【図面の簡単な説明】
【００３０】
【図１】撮影システムの外観の構成例を示す図である。
【図２】撮像装置および警告発生装置の機能の構成例を示す図である。
【図３】撮影システムの処理の概要について説明する図である。
【図４】異常発生の要因について説明する図である。
【図５】異常発生の要因について説明する図である。
【図６】撮影処理を説明するフローチャートである。
【図７】表示処理を説明するフローチャートである。
【図８】光源条件による異常発生の検出処理を説明するフローチャートである。
【図９】照明条件による異常発生の検出処理を説明するフローチャートである。
【図１０】撮影距離による異常発生の検出処理を説明するフローチャートである。
【図１１】手ぶれによる異常発生の検出処理を説明するフローチャートである。
【図１２】撮影方向による異常発生の検出処理を説明するフローチャートである。
【図１３】顔消失による異常発生の検出処理を説明するフローチャートである。
【図１４】バッテリによる異常発生の検出処理を説明するフローチャートである。
【図１５】警告判定処理を説明するフローチャートである。
【図１６】警告処理を説明するフローチャートである。
【図１７】警告処理を説明するフローチャートである。
【図１８】警告処理を説明するフローチャートである。
【図１９】警告処理を説明するフローチャートである。
【図２０】警告発生装置の機能の構成例を示す図である。
【図２１】表示処理を説明するフローチャートである。
【図２２】光源条件による異常発生の検出処理を説明するフローチャートである。
【図２３】照明条件による異常発生の検出処理を説明するフローチャートである。
【図２４】撮影距離による異常発生の検出処理を説明するフローチャートである。
【図２５】撮影方向による異常発生の検出処理を説明するフローチャートである。
【図２６】顔消失による異常発生の検出処理を説明するフローチャートである。
【図２７】警告判定処理を説明するフローチャートである。
【図２８】警告処理を説明するフローチャートである。
【図２９】警告処理を説明するフローチャートである。
【図３０】警告処理を説明するフローチャートである。
【図３１】警告処理を説明するフローチャートである。
【図３２】警告発生装置の外観の構成例を示す図である。
【図３３】警告発生装置の外観の構成例を示す図である。
【図３４】コンピュータの構成例を示す図である。
【発明を実施するための形態】
【００３１】
以下、図面を参照して、本技術を適用した実施の形態について説明する。
【００３２】
〈第１の実施の形態〉
〈撮影システムの外観の構成例〉
まず、本技術の概要について説明する。
【００３３】
本技術は、撮像装置の撮影状況を常時監視し、予め定められた所定の撮影状況を逸した場合には、撮像装置本体または別体に搭載されたデバイスを利用して警告を発することで、撮影者であるユーザに対して撮影状況の変化、つまり異常の発生を通知するものである。これにより、ユーザは、撮影画像を常に注視することなく、より簡単に撮影状況を把握することができ、ユーザのストレスを軽減させたり、撮影機会の損失を低減させたりすることができる。
【００３４】
本技術は、アクションカメラと呼ばれている小型なデジタルビデオカメラなど、画像を撮影可能であり、表示装置が搭載されていない、または十分とはいえない品位の表示装置しか搭載されていない機器全般に適用可能である。以下においては、本技術をアクションカメラ等の撮像装置と、多機能型携帯電話機等の警告発生装置とからなる撮影システムに適用した例について説明する。
【００３５】
図１は、本技術を適用した撮影システムの外観の構成例を示す図である。
【００３６】
この撮影システムは、アクションカメラ等の小型なデジタルカメラからなる撮像装置１１と、多機能型携帯電話機からなる警告発生装置１２とから構成される。これらの撮像装置１１と警告発生装置１２とは、無線通信により画像や各種の情報を授受できるようになされており、撮像装置１１で撮影された撮影画像が警告発生装置１２で表示される。
【００３７】
撮像装置１１は、マウント等を介してユーザの頭部等に装着可能となっており、例えばユーザは、撮影時に撮像装置１１を自身の所望の部位に装着する。
【００３８】
撮像装置１１の正面には、被写体から入射してくる光を図示せぬイメージャへと導く光学系２１が設けられており、ユーザは光学系２１を所望の被写体に向けて撮影を行う。
【００３９】
また、撮像装置１１の背面には、図示せぬ録画ボタン等の各種のボタンが設けられており、ユーザはそれらのボタンを操作して、撮影や再生を指示する。
【００４０】
警告発生装置１２は、表示機能を有する携帯型電話機からなり、警告発生装置１２には、液晶パネル等からなる表示部３１が設けられており、表示部３１には図示せぬタッチパネルが重畳して設けられている。例えばユーザは、表示部３１に表示される画像等を見たり、表示部３１に表示されるアイコン等を操作したりする。
【００４１】
また、警告発生装置１２の側面には、カメラ機能による撮影時にシャッタボタンとして機能するシャッタボタン３２や、音量調整などのためのボタン３３等の各種のボタンが設けられている。
【００４２】
このような撮影システムでは、撮影時には、例えばユーザは撮像装置１１を頭部等に装着して撮影を行い、撮像装置１１は、撮影により得られた撮影画像や、撮影状況に関する情報を、無線通信により警告発生装置１２に送信する。
【００４３】
そして、警告発生装置１２は、無線通信により撮像装置１１から撮影画像や各種の情報を受信して、表示部３１に撮影画像を表示させたり、撮像装置１１から受信した情報に基づいて、ユーザに撮影状況に異常が発生した旨の警告を発したりする。
【００４４】
ユーザは、警告発生装置１２を所持し、必要に応じて警告発生装置１２に表示される撮影画像を見たり、発せられた警告を参考にしたりして、撮影方向や撮影設定等を適宜修正しながら撮影作業を行う。
【００４５】
〈撮像装置および警告発生装置の機能の構成例〉
また、図１に示した撮像装置１１および警告発生装置１２の機能の構成は、例えば図２に示す構成とされる。なお、図２において、図１における場合と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【００４６】
図２の撮像装置１１は、光学系２１、イメージャ６１、デジタル信号処理LSI（Large Scale Integration）６２、ユーザインターフェース６３、制御部６４、レンズ駆動用ドライバIC（Integrated Circuit）６５、手ぶれセンサ６６、バッテリ６７、記録部６８、および無線送信部６９を有している。
【００４７】
光学系２１は、ズームレンズやフォーカスレンズ、シフトレンズ等の複数のレンズや絞り機構、シャッタ機構などからなり、被写体から入射した光をイメージャ６１の受光面に集光する。
【００４８】
イメージャ６１は、例えばCCD（Charge Coupled Devices）やCMOS（Complementary Metal Oxide Semiconductor）などの撮像素子からなる。イメージャ６１は、光学系２１から入射した光を受光して光電変換し、その結果得られた撮影画像、より詳細には撮影画像の画像データをデジタル信号処理LSI６２に供給する。
【００４９】
デジタル信号処理LSI６２は、イメージャ６１から供給された撮影画像に各種の信号処理を施す。デジタル信号処理LSI６２は、プリ処理部７１、同時化部７２、YC生成部７３、解像度変換部７４、CODEC７５、カメラ制御用検波処理部７６、および顔検出処理部７７を備えている。
【００５０】
プリ処理部７１は、撮影画像に対してクランプ処理や欠陥画素補正処理などを施す。同時化部７２は、欠陥画素補正処理等が施された撮影画像の各画素がR，G，Bの各色成分を有するように撮影画像に対するデモザイク処理を行う。
【００５１】
YC生成部７３は、デモザイク処理された撮影画像から、輝度信号と色信号を生成する。解像度変換部７４は、撮影画像に対する解像度変換を行う。CODEC７５は、解像度変換された撮影画像に対して符号化処理を行ったり、符号化された撮影画像を復号したりする。
【００５２】
カメラ制御用検波処理部７６は、露出制御やオートホワイトバランス制御、オートフォーカス制御を行うときに、必要に応じて撮影画像等を用いて検波処理を行い、その検波処理の結果を制御部６４に供給する。顔検出処理部７７は、撮影画像から人の顔を検出する。
【００５３】
ユーザインターフェース６３は、録画ボタン等の各種の操作ボタンなどからなり、ユーザの操作に応じた信号を制御部６４に供給する。
【００５４】
制御部６４は、撮像装置１１全体の動作を制御する。例えば制御部６４は、イメージャ６１による撮影画像の撮影を制御する。また、制御部６４は、手ぶれセンサ６６の出力に基づいて、レンズ駆動用ドライバIC６５を制御し、光学系２１のシフトレンズを移動させて光学的な手ぶれ補正を行ったり、レンズ駆動用ドライバIC６５を制御して光学系２１の絞り機構やフォーカスレンズを駆動させたりする。
【００５５】
制御部６４は、画質制御処理部７８および警告判定処理部７９を備えている。
【００５６】
画質制御処理部７８は、カメラ制御用検波処理部７６から供給された検波処理の結果に基づいて、露出やフォーカス、ホワイトバランスの制御を行う。また、画質制御処理部７８は、検波処理の結果や手ぶれセンサ６６の出力、バッテリ６７の残量を監視することで、撮影状況の異常を検出する。
【００５７】
警告判定処理部７９は、画質制御処理部７８による撮影状況の異常の検出結果に基づいて、警告が必要であるかを判定し、その判定結果に応じて警告の指示を行う。
【００５８】
レンズ駆動用ドライバIC６５は、制御部６４の制御に従って光学系２１を構成するフォーカスレンズ等を移動させてフォーカス動作を実行したり、絞り機構の駆動や光学手ぶれ補正を行ったりする。手ぶれセンサ６６は、例えばジャイロセンサからなり、撮像装置１１の動きを検出して制御部６４に供給する。
【００５９】
バッテリ６７は、制御部６４の制御に従って、撮像装置１１の各部に電力を供給したり、バッテリの残容量を示す情報を制御部６４に供給したりする。記録部６８は、例えば撮像装置１１に着脱可能なリムーバブルメディアからなり、デジタル信号処理LSI６２から供給された撮影画像等のデータを記録したり、記録しているデータをデジタル信号処理LSI６２に供給したりする。
【００６０】
無線送信部６９は、例えばWi-Fi（登録商標）等の無線通信により、デジタル信号処理LSI６２から供給された撮影画像等の各種の画像や各種の情報を警告発生装置１２に送信する。
【００６１】
また、警告発生装置１２は、無線受信部９１、デジタル信号処理部９２、制御部９３、表示部３１、振動部９４、スピーカ９５、および発光素子９６を有している。
【００６２】
無線受信部９１は、制御部９３の制御に従って、撮像装置１１から送信された撮影画像や各種の情報等を受信してデジタル信号処理部９２に供給する。
【００６３】
デジタル信号処理部９２は、無線受信部９１から供給された情報等を制御部９３に供給したり、制御部９３の指示に従って表示部３１、および振動部９４乃至発光素子９６を駆動したりする。デジタル信号処理部９２は、表示用処理部１０１、振動駆動処理部１０２、スピーカ駆動処理部１０３、および発光素子駆動処理部１０４を備えている。
【００６４】
表示用処理部１０１は、例えば撮影画像を表示部３１に表示可能なフォーマットに変換し、表示部３１に供給して表示させる。振動駆動処理部１０２は、振動部９４を駆動して振動させる。スピーカ駆動処理部１０３は、音声信号をスピーカ９５に供給して音声を再生させる。発光素子駆動処理部１０４は、発光素子９６を駆動して発光させる。
【００６５】
制御部９３は、警告発生装置１２全体の動作を制御する。また、制御部９３は、警告手段制御処理部１０５を備えている。警告手段制御処理部１０５は、撮像装置１１から受信した警告に関する情報に基づいて、表示用処理部１０１乃至発光素子駆動処理部１０４に警告を指示する。
【００６６】
振動部９４は、振動駆動処理部１０２の制御に従って、所定パターンで振動することで警告発生装置１２を振動させる。スピーカ９５は、スピーカ駆動処理部１０３から供給された音声信号に基づいて、音声を再生する。発光素子９６は、例えばLED（Light Emitting Diode）などからなり、発光素子駆動処理部１０４の制御に従って所定パターンで発光する。
【００６７】
〈撮影システムの処理の概要〉
続いて、図３乃至図５を参照して、撮影システムの処理の概要について説明する。
【００６８】
例えば図３の矢印Ｑ１１に示すように、ユーザにより録画ボタンが操作されて動画像の撮影が開始されると、イメージャ６１は、光学系２１を介して入射する光を受光して光電変換する。これにより各時刻、すなわち各フレームの撮影画像Ｆ１１乃至撮影画像Ｆ２３が得られる。
【００６９】
ここで、撮影画像Ｆ１１乃至撮影画像Ｆ２３のうち、図中、手前側にあるものほど後の時刻、つまり現在時刻により近い時刻に撮影された撮影画像となっている。したがって、この例では、最初に撮影されたものが撮影画像Ｆ１１であり、最後に撮影されたものが撮影画像Ｆ２３となっている。
【００７０】
このような動画像を構成する各フレームの撮影画像の撮影時には、カメラ制御用検波処理部７６は、各フレームの撮影画像に基づいて検波処理を行う。画質制御処理部７８は、カメラ制御用検波処理部７６での検波処理の結果に基づいて、露出やフォーカス、ホワイトバランスなどの制御を行う。例えば画質制御処理部７８は、レンズ駆動用ドライバIC６５を制御して、光学系２１のフォーカスレンズや絞り機構を駆動させる。これにより、フォーカスや露出が制御される。
【００７１】
また、各フレームの撮影画像Ｆ１１乃至撮影画像Ｆ２３が得られると、順次、これらの撮影画像に対して現像処理が行われ、その結果得られた撮影画像Ｒ１１乃至撮影画像Ｒ２３が、撮影された動画像として得られる。
【００７２】
撮像装置１１は、このようにして得られた撮影画像を記録部６８に供給して記録させるとともに、必要に応じて無線により警告発生装置１２に送信する。そして、警告発生装置１２は、撮像装置１１から送信されてきた撮影画像を受信して、矢印Ｑ１２に示すように、表示部３１に撮影画像を表示させる。
【００７３】
ユーザは、警告発生装置１２の表示部３１に表示された撮影画像を見ることで、撮影画像の露出やピント具合、被写体がどのように写っているかなどの撮影状況を確認することができる。ユーザは、このようにして表示された撮影画像を適宜、確認しながら、撮影を行う。
【００７４】
この例では撮像装置１１には画像を表示する機能は備えられていないので、ユーザは撮像装置１１とは別体の警告発生装置１２の表示部３１を見て、撮影画像の撮影状況を確認する。なお、特に必要のない場合には、表示部３１に撮影画像が表示されなくてもよい。
【００７５】
ところで、図中、左側に示すように、撮影開始直後の所定の期間、例えば撮影画像Ｆ１１乃至撮影画像Ｆ１３を含む、撮影画像Ｆ２１の直前までの期間においては、適切な露出で撮影が行われていたとする。しかし、その後、矢印Ｑ１３に示すように急に光源条件が大きく変化し、適切な露出制御ができなくなってしまったとする。
【００７６】
この例では、撮影対象の空間が過度に明るくなってしまったため、画質制御処理部７８が露出制御として、光学系２１の絞りの絞り値、イメージャ６１でのゲイン値、およびシャッタスピードの組み合わせをどのようにしても、露出オーバーとなってしまう撮影状況となっている。つまり、撮影環境の明るさが、絞り値、ゲイン値、およびシャッタスピードで、撮影画像を最適な明るさに調整できる範囲を超えてしまっている。
【００７７】
そのため、撮影画像Ｆ２１以降の撮影画像Ｆ２１乃至撮影画像Ｆ２３は、不適切な明るさとなっている。そのため、これらの撮影画像Ｆ２１乃至撮影画像Ｆ２３を現像して得られた撮影画像Ｒ２１乃至撮影画像Ｒ２３も露出オーバーとなっている。
【００７８】
上述したように、ユーザは、撮像装置１１を装着したりして動きながら撮影を行うことが多いため、ユーザは常に表示部３１を注視して撮影画像を確認している訳ではない。したがって、ユーザが表示部３１を一瞥したときに表示部３１に被写体が写っていれば、ユーザはこのような光源条件の変化、すなわち撮影状況の異常に気付かないこともある。
【００７９】
そこで、撮像装置１１の画質制御処理部７８は、カメラ制御用検波処理部７６による検波処理の結果や、手ぶれセンサ６６による検波結果、バッテリ６７の残量等に基づいて、撮影空間の明るさなどの撮影状況を監視する。そして、撮像装置１１は、例えば図中、右側の期間Ｔ１１のように、所定時間だけ撮影状況の異常が継続した場合には、警告が発せられるように制御する。
【００８０】
具体的には、例えば撮像装置１１の警告判定処理部７９は、撮影状況の監視結果に基づいて、警告の要否を示す警告フラグを生成し、無線送信部６９は警告フラグを警告発生装置１２に送信する。また、警告発生装置１２の無線受信部９１は、撮像装置１１から警告フラグを受信し、警告発生装置１２は、受信した警告フラグに応じて警告を発する。
【００８１】
この例では、矢印Ｑ１４に示すように撮影状況の異常として、露出に関する異常が発生したことを示す警告アイコンＡＣ１１と、警告メッセージ「露出がずれています」とが表示部３１に表示されている。このように警告アイコンＡＣ１１等の画像や、警告メッセージを表示させて異常発生の警告を発することにより、ユーザはより簡単に異常発生、すなわち現在の撮影状況を把握することができる。
【００８２】
例えば周囲の環境が明るい場合、表示部３１に被写体が表示されていれば、ユーザが表示部３１を一瞥しただけでは、その被写体の明るさ等に異常があったとしても、ユーザがそのことに気付かないこともある。これに対して、警告発生装置１２では、警告アイコンＡＣ１１等の警告表示がされるので、ユーザは、その警告表示を見ることで、容易に異常発生を知ることができる。
【００８３】
特に、警告として表示される警告アイコンＡＣ１１を、光源条件の変化など、異常要因に特化した画像、つまり異常要因ごとの画像とすれば、ユーザは、異常発生の要因が何であるかも容易に把握することができる。
【００８４】
以上のように撮影状況に異常が発生したときに警告を発する場合、その異常要因として、上述した光源条件の急激な変化やバッテリ６７の残容量の減少など、様々な要因が考えられる。以下では、異常発生の各要因の例、すなわち異常の種別について説明する。
【００８５】
まず、図４の左上の矢印Ａ１１に示すように、上述した光源条件の大幅な変化が異常発生の１つの要因として考えられる。なお、図４において、図３における場合と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【００８６】
この例では、矢印Ｑ１３に示すように撮影画像Ｆ２１の撮影時点から、光源条件が大幅に変化し、適切な露出制御ができなくなってしまった状態となっている。そして、適切な露出制御ができない、つまり光源の明るさが最適な露出に調整可能な範囲を超えた状態が所定時間Ｔ２１だけ継続している。
【００８７】
以下では、このように光源条件の大幅な変化により適切な露出制御ができなくなってしまったという異常状態を、光源条件による異常とも称することとする。光源条件による異常は、露出制御に関する異常である。
【００８８】
また、例えば図中、右上の矢印Ａ１２に示すように、最適なホワイトバランス制御ができなくなってしまうという異常も考えられる。
【００８９】
すなわち、矢印Ｑ２１に示すように録画ボタンが操作されて撮影が開始され、各フレームの撮影画像Ｆ４１乃至撮影画像Ｆ４３が撮影されたとする。そして、その後、各フレームの撮影画像Ｆ５１乃至撮影画像Ｆ５３が撮影されたが、矢印Ｑ２２に示すように、撮影画像Ｆ５１の撮影時点において、照明条件が大きく変化したとする。例えば、今まで存在していなかった光源により被写体が照明され、撮影空間を照明する光の色温度が大幅に変化したとする。
【００９０】
この例では、このような照明条件の変化によって、撮影画像のＲ（赤），Ｇ（緑），Ｂ（青）のゲインのバランスが、撮影画像上の被写体の色が適切なホワイトバランスとなるように調整可能な範囲を超えた状態が所定時間Ｔ２１だけ継続している。
【００９１】
したがって、照明条件が大幅に変化した後に撮影された撮影画像Ｆ５１乃至撮影画像Ｆ５３は、不適切なホワイトバランスの画像となってしまっている。
【００９２】
以下では、照明条件の大幅な変化によって適切なホワイトバランス制御ができなくなってしまったという異常状態を、照明条件による異常とも称することとする。照明条件による異常は、ホワイトバランス制御に関する異常である。
【００９３】
さらに、例えば図中、左下の矢印Ａ１３に示すように、被写体までの撮影距離が近くなり過ぎてしまったために、適切なオートフォーカス制御ができなくなってしまうという異常も考えられる。
【００９４】
例えば、録画ボタンが操作されて撮影が開始され、各フレームの撮影画像Ｆ７１乃至撮影画像Ｆ７３が撮影されたとする。そして、その後、各フレームの撮影画像Ｆ８１乃至撮影画像Ｆ８３が撮影されたが、撮影画像Ｆ８１を撮影する時点において、撮像装置１１が被写体に近づき過ぎてしまった状態となり、被写体にピントを合わせることができなくなってしまっている。
【００９５】
すなわち、光学系２１を構成する、ピント調整のためのフォーカスレンズの位置が、いわゆるニア側（ワイド）の端に位置し続けており、これ以上フォーカスレンズをニア側に移動させることができないために被写体にピントを合わせることができない状態となっている。
【００９６】
この例では、目標とすべきフォーカスレンズの位置がオートフォーカス可能な範囲、つまり移動可能な範囲を超え続けている状態が所定時間Ｔ２１だけ継続している。このことは、例えば画質制御処理部７８がコントラスト方式でフォーカス制御を行うときには、フォーカスレンズを移動させても撮影画像の目的とする被写体のコントラストが十分に高くならない状態が継続している状態であるということができる。
【００９７】
このように撮影画像Ｆ８１乃至撮影画像Ｆ８３の撮影時には、目標とすべきフォーカスレンズの位置が、移動可能な範囲外の位置となっているため、これらの撮影画像は、被写体がぼけた画像となっている。
【００９８】
以下では、被写体までの撮影距離が近くなり過ぎてしまったために、適切なオートフォーカス制御ができなくなってしまったという異常状態を、撮影距離による異常とも称することとする。撮影距離による異常は、フォーカス制御に関する異常である。
【００９９】
また、例えば図中、右下の矢印Ａ１４に示すように、何らかの要因により撮像装置１１が大きくずれる、つまり大きく揺れる状態が続いているために、手ぶれ補正では、その揺れによる被写体のぶれを補正しきれなくなってしまうという異常も考えられる。
【０１００】
例えば、録画ボタンが操作されて撮影が開始され、各フレームの撮影画像Ｆ１０１乃至撮影画像Ｆ１０３が撮影されたとする。そして、その後、各フレームの撮影画像Ｆ１１１乃至撮影画像Ｆ１１３が撮影されたが、撮影画像Ｆ１１１を撮影する時点において、撮像装置１１が大きく動いた状態となり、手ぶれ補正では被写体のぶれ（ぼけ）を補正することができなくなってしまっている。
【０１０１】
すなわち、光学系２１を構成する、手ぶれ補正のためのシフトレンズの位置が、移動可能な範囲の端に位置し続けており、これ以上シフトレンズを光軸中心から遠ざかる側に移動させることができないために、手ぶれにより撮影画像上の被写体がぼけてしまう状態となっている。
【０１０２】
この例では、目標とすべきシフトレンズの位置が移動可能な範囲を超え続けている状態が所定時間Ｔ２１だけ継続している。
【０１０３】
このように撮影画像Ｆ１１１乃至撮影画像Ｆ１１３の撮影時には、目標とすべき手ぶれ補正用のシフトレンズの位置が移動可能な範囲外の位置となっているため、これらの撮影画像は、被写体がぶれ（ぼけ）て写っている画像となっている。
【０１０４】
以下では、手ぶれが大きすぎるために、適切な手ぶれ補正ができなくなってしまったという異常状態を、手ぶれによる異常とも称することとする。
【０１０５】
また、図５の左上の矢印Ａ２１に示すように、何らかの要因により撮像装置１１の撮影方向が大きくずれてしまい、ユーザがそのことに気付かずに、ユーザが意図しない方向を撮影し続けてしまっているという異常も考えられる。
【０１０６】
すなわち、矢印Ｑ３１に示すように録画ボタンが操作されて撮影が開始され、各フレームの撮影画像Ｆ１３１乃至撮影画像Ｆ１３３が撮影されたとする。そして、その後、各フレームの撮影画像Ｆ１４１乃至撮影画像Ｆ１４３が撮影されたが、矢印Ｑ３２に示すように、例えば撮像装置１１が衝撃を受けたなどの理由によって、撮影画像Ｆ１４１の撮影時点において撮像装置１１の撮影方向が大きくずれたとする。
【０１０７】
この例では、このような撮影方向の変化によって、ユーザが意図しない方向が撮影されている状態が所定時間Ｔ２１だけ継続している。したがって、撮影方向が大幅に変化した後に撮影された撮影画像Ｆ１４１乃至撮影画像Ｆ１４３は、ユーザにとって記録しておく意味のない画像となってしまっている。
【０１０８】
なお、撮影方向の大幅な変化はシーンチェンジにより検出することができる。具体的には、例えばこれまで安定していた最適露光バランスやホワイトバランスが大きく変化した後、再び安定し続けた場合に撮影方向が大幅に変化したとすることができる。
【０１０９】
以下では、撮影方向の大幅な変化により、本来意図していない方向を撮影してしまっているという異常状態を、撮影方向による異常とも称することとする。
【０１１０】
さらに、図中、右上の矢印Ａ２２に示すように、顔検出機能を利用してオートフォーカスを行っていたが、被写体である人が画角外に移動してしまったために顔が検出されず、顔検出機能を利用したオートフォーカス制御ができなくなってしまっているという異常も考えられる。
【０１１１】
すなわち、録画ボタンが操作されて撮影が開始され、各フレームの撮影画像Ｆ１６１乃至撮影画像Ｆ１６３が撮影されたとする。この例では、それらの撮影画像からは目的とする人の顔が検出され、その顔の領域を囲む顔検出枠ＦＡ１１が表示されている。
【０１１２】
その後、各フレームの撮影画像Ｆ１７１乃至撮影画像Ｆ１７３が撮影されたが、被写体となる人が大きく移動してしまったなどの理由によって、撮影画像Ｆ１７１の撮影時点において撮影画像Ｆ１７１から人の顔が検出されなくなってしまったとする。
【０１１３】
この例では、これまで検出されていた人の顔が、撮影画像Ｆ１７１乃至撮影画像Ｆ１７３からは検出されず、顔が検出されない状態が所定時間Ｔ２１だけ継続している。そのため、撮像装置１１では、フォーカス（ピント）を合わせる対象がない状態となってしまっている。
【０１１４】
以下では、撮影画像から顔が検出されなくなってしまったという異常状態を、顔消失による異常とも称することとする。
【０１１５】
また、図中、下側の矢印Ａ２３に示すように、撮影開始後にバッテリ６７の残容量が減ってきたために、このままでは電力供給ができずに撮影ができなくなってしまうという異常も考えられる。
【０１１６】
すなわち、矢印Ｑ４１に示すように録画ボタンが操作されて撮影が開始され、各フレームの撮影画像Ｆ１９１乃至撮影画像Ｆ１９３が撮影されたとする。そして、その後、各フレームの撮影画像Ｆ２０１乃至撮影画像Ｆ２０３が撮影されたが、撮影画像Ｆ２０１の撮影時点においてバッテリ６７の残容量が所定量よりも少なくなってしまったとする。
【０１１７】
この例では、このような残容量不足の状態が所定時間Ｔ２１だけ継続している。そのため、ユーザは、適切なタイミングで撮像装置１１のバッテリ６７を交換する必要がある。
【０１１８】
以下では、バッテリ６７の残容量が不足しているという異常状態を、バッテリによる異常とも称することとする。
【０１１９】
撮像装置１１では、カメラ制御用検波処理部７６による検波処理の結果等に基づいて、撮影状況を監視することで、以上において説明した各異常の発生を検出し、その検出結果に応じて、警告発生装置１２に対して警告を発するように指示する。すなわち、警告フラグが生成され、警告発生装置１２へと送信される。
【０１２０】
〈撮影処理の説明〉
次に、撮像装置１１および警告発生装置１２の具体的な動作について説明する。
【０１２１】
まず、図６のフローチャートを参照して、撮像装置１１による撮影処理について説明する。
【０１２２】
ステップＳ１１において、イメージャ６１は、撮影画像を撮影する。
【０１２３】
具体的には、イメージャ６１は、光学系２１を介して被写体から入射した光を受光して光電変換し、その結果得られた１フレーム分の撮影画像をデジタル信号処理LSI６２に供給する。プリ処理部７１や同時化部７２等のデジタル信号処理LSI６２を構成する各部は、イメージャ６１から供給された撮影画像に対して各種の処理を施して撮影画像の現像を行う。
【０１２４】
ステップＳ１２において、顔検出処理部７７は、撮影により得られた撮影画像に対して顔検出を行い、人の顔の領域を検出する。例えば顔検出では、撮影画像から抽出された特徴量に基づいて、顔領域が検出される。顔検出処理部７７は、顔領域の検出結果を制御部６４に供給する。
【０１２５】
ステップＳ１３において、カメラ制御用検波処理部７６は、撮影により得られた撮影画像に基づいて、撮影画像の撮影制御のための検波処理を行う。
【０１２６】
例えば、カメラ制御用検波処理部７６は、撮影画像をＭ×Ｎ個の領域に分割し、分割された各領域を分割領域として、それらの分割領域ごとに、分割領域内の各画素の輝度信号を生成する。例えば輝度信号はYC生成部７３が生成するようにしてもよい。
【０１２７】
また、カメラ制御用検波処理部７６は、分割領域内の各画素の輝度信号に対してハイパスフィルタ等を用いたフィルタ処理を施して高域成分を抽出し、得られた高域成分を絶対値化する。さらに、カメラ制御用検波処理部７６は、分割領域内の各画素について得られた高域成分の絶対値に対して高域成分ノイズ除去とリミッタ処理を行った後、分割領域内の各画素の高域成分の絶対値を積分することで、分割領域の合焦評価値を算出する。すなわち、分割領域の各画素の高域成分の絶対値の総和が、その分割領域の合焦評価値とされる。
【０１２８】
撮影画像では、ピントが合っている領域、つまり合焦の度合いの高い領域ではエッジ成分が顕著に表れることから、ピントが合っている領域ほど、高域成分の積算値である合焦評価値が大きい値となる。
【０１２９】
カメラ制御用検波処理部７６は、このようにして得られた各分割領域の合焦評価値を、フォーカス制御のための検波処理の結果として制御部６４に供給する。
【０１３０】
また、カメラ制御用検波処理部７６は分割領域ごとに、分割領域内の各画素の輝度値の積分値、すなわち輝度値の総和を算出し、露出制御のための検波処理の結果として制御部６４に供給する。
【０１３１】
さらに、カメラ制御用検波処理部７６は分割領域ごとに、Ｒ，Ｇ，Ｂの各色について分割領域内の各色の画素の画素値の積分値、すなわち画素値の総和を算出し、ホワイトバランス制御のための検波処理の結果として制御部６４に供給する。この検波処理では、各分割領域について、Ｒ成分の積分値、Ｇ成分の積分値、およびＢ成分の積分値が得られることになる。
【０１３２】
また、手ぶれセンサ６６は、検波処理として撮像装置１１の動きを検出し、制御部６４に供給する。
【０１３３】
ステップＳ１４において、画質制御処理部７８は、ステップＳ１３で行われた検波処理の結果に基づいて画質制御処理を行う。
【０１３４】
具体的には画質制御処理部７８は、カメラ制御用検波処理部７６から供給されたホワイトバランス制御のための検波処理の結果、すなわち各分割領域の色成分ごとの積分値と、顔検出処理部７７から供給された顔検出処理の結果とに基づいて、ホワイトバランス制御のための制御指示値を算出する。
【０１３５】
例えば、画質制御処理部７８は、撮影画像から検出された顔領域全体において、Ｒ成分の積分値、Ｇ成分の積分値、およびＢ成分の積分値の比が等しくなるように各色成分のゲイン値を求め、それらのゲイン値を制御指示値としてデジタル信号処理LSI６２に供給する。デジタル信号処理LSI６２は、画質制御処理部７８から供給された制御指示値としての各色成分のゲイン値を撮影画像の各色成分の画素に乗算することで、撮影画像のホワイトバランス調整を行う。
【０１３６】
また、画質制御処理部７８は、手ぶれセンサ６６から供給された動きの検出結果に基づいて、撮像装置１１の動きが打ち消されるように光学系２１のシフトレンズを移動させるときのレンズ移動量を、手ぶれ補正の制御指示値として算出する。そして、画質制御処理部７８は、算出した手ぶれ補正の制御指示値に基づいて、レンズ駆動用ドライバIC６５を制御し、光学系２１のシフトレンズを移動させて光学的な手ぶれ補正を行う。
【０１３７】
さらに、画質制御処理部７８は、カメラ制御用検波処理部７６から供給された露出制御のための検波処理の結果、すなわち各分割領域の輝度値の積分値と、顔検出処理部７７から供給された顔検出処理の結果とに基づいて、露出制御のための制御指示値を算出する。
【０１３８】
例えば、画質制御処理部７８は、露出制御のための絞り、シャッタ、およびゲインの制御指示値として、光学系２１の絞りの絞り値、シャッタスピード、およびイメージャ６１でのゲイン値（ISO感度）を算出する。これらの絞り値、シャッタスピード、およびゲイン値は、例えば撮影画像における顔領域が最適な明るさとなるように定められる。
【０１３９】
画質制御処理部７８は、絞りの制御指示値に基づいてレンズ駆動用ドライバIC６５を制御し、光学系２１の絞りを調整させるとともに、ゲインの制御指示値に基づいてイメージャ６１を制御し、所定のISO感度で撮影を行わせる。
【０１４０】
また、画質制御処理部７８は、シャッタの制御指示値に基づいてレンズ駆動用ドライバIC６５を制御し、制御指示値により定まるシャッタスピードで光学系２１に設けられたシャッタが動作するように、シャッタ制御が行われる。これにより、次回に行われるステップＳ１１の処理において、制御指示値により定まるシャッタスピードで撮影が行われることになる。
【０１４１】
さらに、画質制御処理部７８は、カメラ制御用検波処理部７６から供給されたフォーカス制御のための検波処理の結果、すなわち各分割領域の合焦評価値と、顔検出処理部７７から供給された顔検出処理の結果とに基づいて、所定の被写体にピントが合うような光学系２１のフォーカスレンズの位置を、フォーカスの制御指示値として算出する。
【０１４２】
例えば、フォーカスレンズを移動させたときに、顔領域などの所定の領域の合焦評価値が最も高くなるフォーカスレンズの位置が、フォーカスの制御指示値として算出される。
【０１４３】
ステップＳ１５において、画質制御処理部７８は、算出したフォーカスの制御指示値に基づいてレンズ駆動用ドライバIC６５を制御し、光学系２１のフォーカスレンズを移動させることで、フォーカス動作を実行させる。
【０１４４】
ステップＳ１６において、デジタル信号処理LSI６２は、ホワイトバランス調整が行われた撮影画像を記録部６８に供給し、記録させる。
【０１４５】
また、デジタル信号処理LSI６２は、ホワイトバランス調整が行われ、適宜、解像度変換部７４による解像度変換によって縮小された撮影画像を、無線送信部６９に供給する。
【０１４６】
ステップＳ１７において、無線送信部６９は、デジタル信号処理LSI６２から供給された撮影画像を、無線により警告発生装置１２に送信する。
【０１４７】
ステップＳ１８において、制御部６４は、処理を終了するか否かを判定する。例えば、ユーザによりユーザインターフェース６３が操作され記録停止が指示された場合、処理を終了すると判定される。
【０１４８】
ステップＳ１８において終了しないと判定された場合、処理はステップＳ１１に戻り、上述した処理が繰り返される。
【０１４９】
これに対して、ステップＳ１８において、終了すると判定された場合、撮影処理は終了する。
【０１５０】
以上のようにして撮像装置１１は、撮影により得られた撮影画像を記録するとともに、警告発生装置１２に送信する。
【０１５１】
〈表示処理の説明〉
このようにして撮影画像が警告発生装置１２に送信されると、警告発生装置１２は、撮影画像を受信して表示する表示処理を行う。以下、図７のフローチャートを参照して、警告発生装置１２による表示処理について説明する。
【０１５２】
ステップＳ４１において、無線受信部９１は、無線により撮像装置１１の無線送信部６９から送信されてきた撮影画像を受信してデジタル信号処理部９２に供給する。すなわち、動画像である撮影画像の１フレーム分の画像が受信される。
【０１５３】
ステップＳ４２において、デジタル信号処理部９２の表示用処理部１０１は、無線受信部９１から供給された撮影画像を表示部３１に供給し、表示させる。
【０１５４】
これにより、ユーザは、表示部３１に表示された撮影画像を見て、撮影画像の撮影状況を確認することができる。
【０１５５】
ステップＳ４３において、制御部９３は、処理を終了するか否かを判定する。例えば撮像装置１１から新たな撮影画像のフレームが送信されてこなくなった場合、処理を終了すると判定される。
【０１５６】
ステップＳ４３において、終了しないと判定された場合、処理はステップＳ４１に戻り、上述した処理が繰り返される。
【０１５７】
これに対して、ステップＳ４３において、終了すると判定された場合、表示処理は終了する。
【０１５８】
以上のようにして、警告発生装置１２は、撮影画像を受信して表示する。これにより、ユーザは、撮像装置１１とは別体の警告発生装置１２に表示される撮影画像を見て、画角等を確認することができる。
【０１５９】
〈光源条件による異常発生の検出処理の説明〉
また、撮影画像の撮影が開始されると、撮像装置１１は、図６を参照して説明した撮影処理を行いながら、同時に撮影状況に関する異常の発生を検出する処理を行う。以下、図８乃至図１４を参照して、各要因、すなわち異常の種別ごとに異常発生を検出する処理について具体的に説明する。
【０１６０】
まず、図８のフローチャートを参照して、撮像装置１１により行われる、光源条件による異常発生の検出処理について説明する。
【０１６１】
ステップＳ７１において、画質制御処理部７８は、図６のステップＳ１３で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、露出制御のための検波処理の結果として算出された、各分割領域の輝度値の積分値が取得される。
【０１６２】
ステップＳ７２において、画質制御処理部７８は取得した検波処理の結果に基づいて、撮影画像全体の輝度値の積分値を算出する。すなわち、画質制御処理部７８は、各分割領域の輝度値の積分値の総和を、撮影画像全体の輝度値の積分値として求める。以下、撮影画像全体の輝度値の積分値を、全体輝度積分値とも称する。
【０１６３】
なお、ここでは撮影画像全体が処理対象とされて全体輝度積分値が求められる例について説明するが、例えば顔検出により顔が検出された場合には、顔領域の輝度値の積分値が算出され、全体輝度積分値とされるようにしてもよい。また、顔領域に重みが付けられて全体輝度積分値が算出されてもよい。
【０１６４】
ステップＳ７３において、画質制御処理部７８は、撮影画像全体の輝度値の積分値、すなわち全体輝度積分値が、予め定められた閾値以上であるか否かを判定する。
【０１６５】
ここで、全体輝度積分値と比較される閾値は、全体輝度積分値が、それ以上の値となると、光学系２１の絞りの絞り値、シャッタスピード、およびイメージャ６１でのゲイン値をどのような値としても、適切な明るさの撮影画像が得られなくなる値とされる。つまり、露出オーバーとなってしまう値とされる。
【０１６６】
したがって、全体輝度積分値が閾値以上である場合には、適切な露出の撮影画像が得られず、光源条件による異常が検出された状態となっていることになる。
【０１６７】
ステップＳ７３において、全体輝度積分値が閾値以上であると判定された場合、ステップＳ７４において、画質制御処理部７８は、予め保持している露出異常カウンタを１だけインクリメントする。
【０１６８】
ここで、露出異常カウンタは、連続して全体輝度積分値が閾値以上であると判定された回数、つまり連続して光源条件による異常が検出された時間（フレーム数）を示している。
【０１６９】
また、画質制御処理部７８は、露出異常カウンタが所定値以上となったときにセット（オン）される露出異常フラグも保持している。画質制御処理部７８では、所定回数以上、連続して全体輝度積分値が閾値以上であると判定され続けた場合、つまり光源条件による異常が所定フレーム以上連続して検出され続けた場合、光源条件による異常が発生したとされ、露出異常フラグがセットされる。
【０１７０】
したがって、露出異常フラグがセット（オン）されている場合、光源条件による異常が発生していることを示しており、露出異常フラグがリセット（オフ）されている場合、光源条件による異常が発生していないことを示している。
【０１７１】
ステップＳ７４において露出異常カウンタがインクリメントされると、その後、処理はステップＳ７７に進む。
【０１７２】
一方、ステップＳ７３において、全体輝度積分値が閾値以上でないと判定された場合、ステップＳ７５において、画質制御処理部７８は、露出異常カウンタをリセットする。
【０１７３】
ステップＳ７６において、画質制御処理部７８は、露出異常フラグをリセット（オフ）する。
【０１７４】
すなわち、全体輝度積分値が閾値未満である場合、適切な露出制御が可能であり、光源条件による異常が発生していないので、露出異常カウンタが０にリセットされるとともに、露出異常フラグもリセットされる。このようにして露出異常フラグがリセットされると、処理はステップＳ７７に進む。
【０１７５】
ステップＳ７４において露出異常カウンタがインクリメントされたか、またはステップＳ７６において露出異常フラグがリセットされると、ステップＳ７７において、画質制御処理部７８は露出異常カウンタが所定値以上であるか否かを判定する。
【０１７６】
ステップＳ７７において、露出異常カウンタが所定値以上であると判定された場合、ステップＳ７８において、画質制御処理部７８は露出異常フラグをセット（オン）する。
【０１７７】
すなわち、露出異常カウンタが所定値以上であると判定された場合、適切な露出制御が不可能である状態が一定時間以上続いたことになるので、光源条件による異常が発生したとされ、露出異常フラグがセットされる。露出異常フラグがセットされると、その後、処理はステップＳ７９に進む。
【０１７８】
また、ステップＳ７７において、露出異常カウンタが所定値以上でないと判定された場合、光源条件による異常は発生していないとされ、処理はステップＳ７９に進む。
【０１７９】
ステップＳ７８において露出異常フラグがセットされたか、またはステップＳ７７において露出異常カウンタが所定値以上でないと判定されると、ステップＳ７９において、画質制御処理部７８は処理を終了するか否かを判定する。
【０１８０】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０１８１】
ステップＳ７９において、終了しないと判定された場合、処理はステップＳ７１に戻り、上述した処理が繰り返される。
【０１８２】
これに対して、ステップＳ７９において終了すると判定された場合、光源条件による異常発生の検出処理は終了する。
【０１８３】
以上のようにして、撮像装置１１は、輝度に関する検波結果に基づいて、光源条件による異常の発生を検出する。このように、光源条件による異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、光源条件による異常が発生したかなど、より簡単に撮影状況を把握することができるようになる。
【０１８４】
なお、ここでは、適切な露出制御が可能であるかを判定するために全体輝度積分値を用いる例について説明したが、撮影画像の輝度に関する情報であれば、どのような情報が用いられるようにしてもよい。
【０１８５】
例えば直近数フレームの全体輝度積分値の平均値と閾値とが比較されるようにしてもよい。また、各分割領域の輝度値の積分値に基づいて、絞り値やゲイン値、シャッタスピードの目標となる値を算出し、算出されたそれらの値に基づいて、光源条件による異常を検出するようにしてもよい。
【０１８６】
〈照明条件による異常発生の検出処理の説明〉
次に、図９のフローチャートを参照して、撮像装置１１により行われる、照明条件による異常発生の検出処理について説明する。
【０１８７】
ステップＳ１１１において、画質制御処理部７８は、図６のステップＳ１３で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、ホワイトバランス制御のための検波処理の結果として算出された、分割領域ごとに求められたＲ，Ｇ，Ｂの各色成分の積分値が取得される。
【０１８８】
ステップＳ１１２において、画質制御処理部７８は取得した検波処理の結果に基づいて、撮影画像全体の各色成分の積分値の比を算出する。
【０１８９】
すなわち、画質制御処理部７８は、各分割領域のＲ成分の積分値の総和を求めることで、撮影画像全体のＲ成分の積分値を求める。同様にして、画質制御処理部７８は、各分割領域のＧ成分の積分値の総和を撮影画像全体のＧ成分の積分値として求めるとともに、各分割領域のＢ成分の積分値の総和を撮影画像全体のＢ成分の積分値として求める。
【０１９０】
そして、画質制御処理部７８は、Ｒ，Ｇ，Ｂの各色成分のうちの任意の２つの色成分を選択し、それらの２つの色成分について求めた撮影画像全体の積分値の比を算出する。例えば、撮影画像全体のＲ成分の積分値と、撮影画像全体のＧ成分の積分値との比が求められる。このとき、例えばより小さい方の積分値が分母となるように比が求められる。
【０１９１】
画質制御処理部７８は、色成分の組み合わせごとに撮影画像全体の色成分の積分値の比を算出する。
【０１９２】
なお、ここでは、撮影画像の全体が処理対象とされて各色成分の積分値の比が算出される例について説明するが、顔検出により顔が検出された場合には、顔領域が処理対象とされて、その顔領域について、各色成分の積分値の比が算出されるようにしてもよい。また、顔領域に重みを付けて撮影画像全体の各色成分の積分値を求めるようにしてもよい。
【０１９３】
ステップＳ１１３において、画質制御処理部７８は、撮影画像全体の色成分の積分値の比について、１との差分絶対値を算出する。すなわち、ステップＳ１１２で算出された各積分値の比ごとに、１と積分値の比との差の絶対値が算出される。
【０１９４】
ステップＳ１１４において、画質制御処理部７８は、ステップＳ１１３で算出した差分絶対値が閾値以上であるか否かを判定する。
【０１９５】
例えば、色成分の組み合わせごとに求められた複数の差分絶対値について、１つでも閾値以上となる差分絶対値がある場合に、ステップＳ１１４において差分絶対値が閾値以上であると判定される。
【０１９６】
ここで、差分絶対値と比較される閾値は、差分絶対値が、それ以上の値となると、撮影画像の各色成分の画素値にゲイン値を乗算してホワイトバランスを調整しても、適切なホワイトバランスの撮影画像が得られなくなる値とされる。
【０１９７】
したがって、差分絶対値が閾値以上である場合には、適切なホワイトバランスの撮影画像が得られず、照明条件による異常が検出された状態となっていることになる。
【０１９８】
ステップＳ１１４において、差分絶対値が閾値以上であると判定された場合、ステップＳ１１５において、画質制御処理部７８は、予め保持しているホワイトバランス異常カウンタを１だけインクリメントする。
【０１９９】
ここでホワイトバランス異常カウンタは、露出異常カウンタと同様のものであり、連続して差分絶対値が閾値以上であると判定された回数、つまり連続して照明条件による異常が検出された時間（フレーム数）を示している。
【０２００】
また、画質制御処理部７８は、ホワイトバランス異常カウンタが所定値以上となったときにセット（オン）されるホワイトバランス異常フラグも保持している。ホワイトバランス異常フラグがセット（オン）されている場合、照明条件による異常が発生していることを示しており、ホワイトバランス異常フラグがリセット（オフ）されている場合、照明条件による異常が発生していないことを示している。
【０２０１】
ステップＳ１１５においてホワイトバランス異常カウンタがインクリメントされると、その後、処理はステップＳ１１８に進む。
【０２０２】
一方、ステップＳ１１４において、差分絶対値が閾値以上でないと判定された場合、ステップＳ１１６において、画質制御処理部７８は、ホワイトバランス異常カウンタをリセットする。
【０２０３】
ステップＳ１１７において、画質制御処理部７８は、ホワイトバランス異常フラグをリセット（オフ）する。
【０２０４】
すなわち、差分絶対値が閾値未満である場合、適切なホワイトバランス制御が可能であり、照明条件による異常が発生していないので、ホワイトバランス異常カウンタが０にリセットされるとともに、ホワイトバランス異常フラグもリセットされる。このようにしてホワイトバランス異常フラグがリセットされると、処理はステップＳ１１８に進む。
【０２０５】
ステップＳ１１５においてホワイトバランス異常カウンタがインクリメントされたか、またはステップＳ１１７においてホワイトバランス異常フラグがリセットされると、ステップＳ１１８において、画質制御処理部７８はホワイトバランス異常カウンタが所定値以上であるか否かを判定する。
【０２０６】
ステップＳ１１８において、ホワイトバランス異常カウンタが所定値以上であると判定された場合、ステップＳ１１９において、画質制御処理部７８はホワイトバランス異常フラグをセット（オン）する。
【０２０７】
この場合、適切なホワイトバランス制御が不可能である状態が一定時間以上続いたことになるので、照明条件による異常が発生したとされ、ホワイトバランス異常フラグがセットされる。ホワイトバランス異常フラグがセットされると、その後、処理はステップＳ１２０に進む。
【０２０８】
また、ステップＳ１１８において、ホワイトバランス異常カウンタが所定値以上でないと判定された場合、照明条件による異常は発生していないとされ、処理はステップＳ１２０に進む。
【０２０９】
ステップＳ１１９においてホワイトバランス異常フラグがセットされたか、またはステップＳ１１８においてホワイトバランス異常カウンタが所定値以上でないと判定されると、ステップＳ１２０において、画質制御処理部７８は処理を終了するか否かを判定する。
【０２１０】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０２１１】
ステップＳ１２０において、終了しないと判定された場合、処理はステップＳ１１１に戻り、上述した処理が繰り返される。
【０２１２】
これに対して、ステップＳ１２０において終了すると判定された場合、照明条件による異常発生の検出処理は終了する。
【０２１３】
以上のようにして、撮像装置１１は、各色成分に関する検波結果に基づいて、照明条件による異常の発生を検出する。このように、照明条件による異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、照明条件による異常が発生したかなど、より簡単に撮影状況を把握することができるようになる。
【０２１４】
なお、ここでは、適切なホワイトバランス制御が可能であるかを判定するために色成分の積分値の比についての差分絶対値を用いる例について説明したが、撮影画像の各色成分に関する情報であれば、どのような情報が用いられるようにしてもよい。
【０２１５】
例えば直近数フレームの色成分の積分値の比の平均値と１との差分絶対値が閾値と比較されるようにしてもよい。また、ホワイトバランス制御のための各色成分のゲイン値に基づいて、照明条件の異常が検出されるようにしてもよい。
【０２１６】
〈撮影距離による異常発生の検出処理の説明〉
次に、図１０のフローチャートを参照して、撮像装置１１により行われる、撮影距離による異常発生の検出処理について説明する。
【０２１７】
ステップＳ１５１において、画質制御処理部７８は、図６のステップＳ１３で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、フォーカス制御のための検波処理の結果として算出された、各分割領域の合焦評価値が取得される。
【０２１８】
ステップＳ１５２において、画質制御処理部７８は取得した検波処理の結果に基づいて、光学系２１のフォーカスレンズの位置の制御目標値と、合焦評価値のピーク値とを算出する。
【０２１９】
すなわち、画質制御処理部７８はフォーカスレンズが各位置にあるときに得られた、顔領域などの所定の領域の合焦評価値に基づいて、合焦評価値がより高くなる方向にフォーカスレンズが移動するように、フォーカスレンズの移動先の位置を示す制御目標値を算出する。また、画質制御処理部７８は、フォーカスレンズが各位置にあるときに得られた、顔領域などの所定の領域の合焦評価値の最大値を、合焦評価値のピーク値として求める。
【０２２０】
ステップＳ１５３において、画質制御処理部７８は、フォーカスレンズの制御目標値に基づいて、制御指示値を定める。
【０２２１】
例えば、フォーカスレンズを制御目標値により示される位置に移動させれば、合焦評価値がより高くなり、撮影画像の注目する被写体によりピントが合うようにすることができる。しかし、制御目標値により示される位置が、フォーカスレンズが移動可能な範囲外の位置となってしまう場合がある。
【０２２２】
そのような場合、実際には制御目標値に示される位置にフォーカスレンズを移動させることができないので、制御目標値に対するリミッタ処理が行われ、移動量が制限されて制御指示値とされる。したがって、リミッタ処理が行われた場合には、制御指示値に基づいてフォーカスレンズが移動されると、フォーカスレンズは、そのフォーカスレンズの移動可能範囲の端に位置することになる。
【０２２３】
なお、フォーカスレンズの移動先の位置を示す制御指示値を算出する処理は、図６のステップＳ１４における画質制御処理と同じ処理である。つまり、制御指示値を算出する処理を行うことは、画質制御処理を行うことでもあり、ステップＳ１５２およびステップＳ１５３の処理を行うことでもある。
【０２２４】
ステップＳ１５４において、画質制御処理部７８は、合焦評価値のピーク値が閾値以下であるか否かを判定する。
【０２２５】
例えば、合焦評価値のピーク値が閾値以下である場合、フォーカスレンズの位置をどこに移動させても、十分なコントラストの撮影画像が得られない状態、つまり被写体に対して十分にピントを合わせることができない状態となっている。
【０２２６】
このように、適切なフォーカス制御ができない状態となっている場合、フォーカスレンズがニア側の端に位置していることが多い。したがって、合焦評価値のピーク値が閾値以下である状態は、被写体までの撮影距離が近くなり過ぎてしまったために、適切なオートフォーカス制御ができなくなってしまっている状態であるということができる。なお、制御目標値に対するリミッタ処理が行われた場合に、適切なフォーカス制御ができない状態となっている、つまり撮影距離による異常が検出されたと判定されるようにしてもよい。
【０２２７】
ステップＳ１５４において、ピーク値が閾値以下であると判定された場合、ステップＳ１５５において、画質制御処理部７８は、予め保持しているフォーカス異常カウンタを１だけインクリメントする。
【０２２８】
ここでフォーカス異常カウンタは、露出異常カウンタと同様のものであり、連続してピーク値が閾値以下であると判定された回数、つまり連続して撮影距離による異常が検出された時間（フレーム数）を示している。
【０２２９】
また、画質制御処理部７８は、フォーカス異常カウンタが所定値以上となったときにセット（オン）されるフォーカス異常フラグも保持している。フォーカス異常フラグがセット（オン）されている場合、撮影距離による異常が発生していることを示しており、フォーカス異常フラグがリセット（オフ）されている場合、撮影距離による異常が発生していないことを示している。
【０２３０】
ステップＳ１５５においてフォーカス異常カウンタがインクリメントされると、その後、処理はステップＳ１５８に進む。
【０２３１】
一方、ステップＳ１５４において、ピーク値が閾値以下でないと判定された場合、ステップＳ１５６において、画質制御処理部７８は、フォーカス異常カウンタをリセットする。
【０２３２】
ステップＳ１５７において、画質制御処理部７８は、フォーカス異常フラグをリセット（オフ）する。
【０２３３】
すなわち、ピーク値が閾値より大きい場合、適切なフォーカス制御が可能であり、撮影距離による異常が発生していないので、フォーカス異常カウンタが０にリセットされるとともに、フォーカス異常フラグもリセットされる。このようにしてフォーカス異常フラグがリセットされると、処理はステップＳ１５８に進む。
【０２３４】
ステップＳ１５５においてフォーカス異常カウンタがインクリメントされたか、またはステップＳ１５７においてフォーカス異常フラグがリセットされると、ステップＳ１５８において、画質制御処理部７８はフォーカス異常カウンタが所定値以上であるか否かを判定する。
【０２３５】
ステップＳ１５８において、フォーカス異常カウンタが所定値以上であると判定された場合、ステップＳ１５９において、画質制御処理部７８はフォーカス異常フラグをセット（オン）する。
【０２３６】
この場合、適切なフォーカス制御が不可能である状態が一定時間以上続いたことになるので、撮影距離による異常が発生したとされ、フォーカス異常フラグがセットされる。フォーカス異常フラグがセットされると、その後、処理はステップＳ１６０に進む。
【０２３７】
また、ステップＳ１５８において、フォーカス異常カウンタが所定値以上でないと判定された場合、撮影距離による異常は発生していないとされ、処理はステップＳ１６０に進む。
【０２３８】
ステップＳ１５９においてフォーカス異常フラグがセットされたか、またはステップＳ１５８においてフォーカス異常カウンタが所定値以上でないと判定されると、ステップＳ１６０において、画質制御処理部７８は処理を終了するか否かを判定する。
【０２３９】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０２４０】
ステップＳ１６０において、終了しないと判定された場合、処理はステップＳ１５１に戻り、上述した処理が繰り返される。
【０２４１】
これに対して、ステップＳ１６０において終了すると判定された場合、撮影距離による異常発生の検出処理は終了する。
【０２４２】
以上のようにして、撮像装置１１は、フォーカス制御のための検波結果に基づいて、撮影距離による異常の発生を検出する。このように、撮影距離による異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、より簡単に撮影状況を把握することができるようになる。
【０２４３】
〈手ぶれによる異常発生の検出処理の説明〉
次に、図１１のフローチャートを参照して、撮像装置１１により行われる、手ぶれによる異常発生の検出処理について説明する。
【０２４４】
ステップＳ１９１において、画質制御処理部７８は、図６のステップＳ１３で行われた検波処理の結果を手ぶれセンサ６６から取得する。具体的には、手ぶれ補正のための検波処理の結果として得られた、撮像装置１１の動きの検出結果が取得される。
【０２４５】
ステップＳ１９２において、画質制御処理部７８は取得した検波処理の結果に基づいて、手ぶれ補正の制御目標値を算出する。
【０２４６】
すなわち、画質制御処理部７８は、撮像装置１１の動きが打ち消されるように光学系２１のシフトレンズを移動させるときのレンズ移動量を、手ぶれ補正の制御目標値として算出する。
【０２４７】
ステップＳ１９３において、画質制御処理部７８は、求めた手ぶれ補正の制御目標値から、制御指示値を定める。
【０２４８】
具体的には、手ぶれ補正の制御目標値に示される移動量だけ光学系２１のシフトレンズを移動させれば、撮像装置１１のぶれにより生じる撮影画像上の被写体のぼけを打ち消すことができる。しかし、制御目標値に従ってシフトレンズを移動させると、シフトレンズが移動可能範囲外に位置してしまう場合がある。
【０２４９】
そのような場合、実際には制御目標値に示される移動量だけシフトレンズを移動させることができないので、制御目標値に対するリミッタ処理が行われ、移動量が制限されて制御指示値とされる。したがって、リミッタ処理が行われた場合には、制御指示値に基づいてシフトレンズが移動されると、シフトレンズは、そのシフトレンズの移動可能範囲の端に位置することになる。
【０２５０】
ここで、手ぶれ補正の制御指示値を算出する処理は、図６のステップＳ１４における画質制御処理と同じ処理である。つまり、手ぶれ補正の制御指示値を算出する処理を行うことは、画質制御処理を行うことでもあり、ステップＳ１９２およびステップＳ１９３の処理を行うことでもある。
【０２５１】
ステップＳ１９４において、画質制御処理部７８は、ステップＳ１９３で制御指示値を定めるときに、リミッタ処理が行われたか否かを判定する。
【０２５２】
例えば、制御目標値に対してリミッタ処理が施されて制御指示値とされる場合、光学系２１のシフトレンズが移動可能な範囲の端に位置することになり、適切な手ぶれ補正ができなくなっている状態である。
【０２５３】
ステップＳ１９４において、リミッタ処理が行われたと判定された場合、ステップＳ１９５において、画質制御処理部７８は、予め保持している手ぶれ異常カウンタを１だけインクリメントする。
【０２５４】
ここで手ぶれ異常カウンタは、露出異常カウンタと同様のものであり、連続してリミッタ処理が行われた回数、つまり連続して手ぶれによる異常が検出された時間（フレーム数）を示している。
【０２５５】
また、画質制御処理部７８は、手ぶれ異常カウンタが所定値以上となったときにセット（オン）される手ぶれ異常フラグも保持している。手ぶれ異常フラグがセット（オン）されている場合、手ぶれによる異常が発生していることを示しており、手ぶれ異常フラグがリセット（オフ）されている場合、手ぶれによる異常が発生していないことを示している。
【０２５６】
ステップＳ１９５において手ぶれ異常カウンタがインクリメントされると、その後、処理はステップＳ１９８に進む。
【０２５７】
一方、ステップＳ１９４において、リミッタ処理が行われていないと判定された場合、ステップＳ１９６において、画質制御処理部７８は、手ぶれ異常カウンタをリセットする。
【０２５８】
ステップＳ１９７において、画質制御処理部７８は、手ぶれ異常フラグをリセット（オフ）する。
【０２５９】
すなわち、リミッタ処理が行われていない場合、適切な手ぶれ補正が可能であり、手ぶれによる異常が発生していないので、手ぶれ異常カウンタが０にリセットされるとともに、手ぶれ異常フラグもリセットされる。このようにして手ぶれ異常フラグがリセットされると、処理はステップＳ１９８に進む。
【０２６０】
ステップＳ１９５において手ぶれ異常カウンタがインクリメントされたか、またはステップＳ１９７において手ぶれ異常フラグがリセットされると、ステップＳ１９８において、画質制御処理部７８は手ぶれ異常カウンタが所定値以上であるか否かを判定する。
【０２６１】
ステップＳ１９８において、手ぶれ異常カウンタが所定値以上であると判定された場合、ステップＳ１９９において、画質制御処理部７８は手ぶれ異常フラグをセット（オン）する。
【０２６２】
この場合、適切な手ぶれ補正が不可能である状態が一定時間以上続いたことになるので、手ぶれによる異常が発生したとされ、手ぶれ異常フラグがセットされる。手ぶれ異常フラグがセットされると、その後、処理はステップＳ２００に進む。
【０２６３】
また、ステップＳ１９８において、手ぶれ異常カウンタが所定値以上でないと判定された場合、手ぶれによる異常は発生していないとされ、処理はステップＳ２００に進む。
【０２６４】
ステップＳ１９９において手ぶれ異常フラグがセットされたか、またはステップＳ１９８において手ぶれ異常カウンタが所定値以上でないと判定されると、ステップＳ２００において、画質制御処理部７８は処理を終了するか否かを判定する。
【０２６５】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０２６６】
ステップＳ２００において、終了しないと判定された場合、処理はステップＳ１９１に戻り、上述した処理が繰り返される。
【０２６７】
これに対して、ステップＳ２００において終了すると判定された場合、手ぶれによる異常発生の検出処理は終了する。
【０２６８】
以上のようにして、撮像装置１１は、手ぶれセンサ６６による検波結果に基づいて、手ぶれによる異常の発生を検出する。このように、手ぶれによる異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、より簡単に撮影状況を把握することができるようになる。
【０２６９】
〈撮影方向による異常発生の検出処理の説明〉
続いて、図１２のフローチャートを参照して、撮像装置１１により行われる、撮影方向による異常発生の検出処理について説明する。
【０２７０】
ステップＳ２３１において、画質制御処理部７８は、図６のステップＳ１３で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、露出制御のための検波処理の結果として算出された各分割領域の輝度値の積分値と、ホワイトバランス制御のための検波処理の結果として算出された、各分割領域の色成分ごとの積分値とが取得される。
【０２７１】
ステップＳ２３２において、画質制御処理部７８は取得した検波処理の結果に基づいて、露出制御のための制御目標値と、ホワイトバランス制御のための制御目標値とを算出する。
【０２７２】
具体的には、画質制御処理部７８は、各分割領域の輝度値の積分値と、顔検出処理部７７から供給された顔検出処理の結果とに基づいて、撮影画像の明るさが最適な明るさとなる光学系２１の絞りの絞り値、シャッタスピード、およびイメージャ６１でのゲイン値の各値を制御目標値として算出する。
【０２７３】
また、画質制御処理部７８は、各分割領域の色成分ごとの積分値と、顔検出処理部７７から供給された顔検出処理の結果とに基づいて、撮影画像が最適なホワイトバランスとなる各色成分のゲイン値を、各色成分の制御目標値として算出する。
【０２７４】
但し、絞りや、シャッタスピード、イメージャ６１でのゲインなどの各制御目標値や、ホワイトバランス制御のための各色成分のゲインの制御目標値は、あくまで目標とする値であるため、それらの制御目標値が、実際に設定可能な範囲の値を超えてしまっていることもある。
【０２７５】
そこで、ステップＳ２３３において、画質制御処理部７８は、ステップＳ２３２の処理で求めた各制御目標値に対して必要に応じてリミッタ処理を施して、制御指示値を定める。すなわち、制御目標値が設定可能な範囲の値を超えている場合には、その制御目標値が設定可能な範囲内の値に修正されて、制御指示値とされる。
【０２７６】
ここで、露出制御やホワイトバランス制御の制御指示値を算出する処理は、図６のステップＳ１４における画質制御処理と同じ処理である。つまり、露出制御やホワイトバランス制御の制御指示値を算出する処理を行うことは、画質制御処理を行うことでもあり、ステップＳ２３２およびステップＳ２３３の処理を行うことでもある。
【０２７７】
ステップＳ２３４において、画質制御処理部７８は、過去の制御目標値の履歴から、制御目標値の平均値を算出する。
【０２７８】
具体的には、画質制御処理部７８は、撮影方向による異常が検出されなかった過去のフレームにおいて算出された、露出制御やホワイトバランス制御の制御目標値を、制御目標値の履歴リストとして保持している。例えば、制御目標値の履歴リストとして、予め定められた所定数の制御目標値が、絞り、シャッタスピード、イメージャ６１のゲイン、および色成分のゲインごとに保持されている。
【０２７９】
画質制御処理部７８は、絞り、シャッタスピード、イメージャ６１のゲイン、および色成分のゲインごとに、履歴リストに保持されている制御目標値の平均値を算出する。
【０２８０】
ステップＳ２３５において、画質制御処理部７８は、ステップＳ２３４で算出した制御目標値の平均値と、ステップＳ２３２で算出した制御目標値との差分が閾値以上であるか否かを判定する。
【０２８１】
例えば絞り、シャッタスピード、イメージャ６１のゲイン、および色成分のゲインごとに制御目標値の平均値と、制御目標値との差分が閾値と比較され、１つでも閾値以上となるものがある場合、差分が閾値以上であると判定される。
【０２８２】
例えば、制御目標値の平均値と、制御目標値との差分が閾値以上である場合、これまでの平均的な制御目標値と、現フレームの制御目標値との差が大きいので、急激に撮影状況が変化したということができる。ここでいう撮影状況とは、例えば撮影空間の明るさや、撮影空間の色バランスである。
【０２８３】
したがって、制御目標値の平均値と、制御目標値との差分が閾値以上となった場合、シーンチェンジ、すなわち撮影方向の大幅な変化が生じた状態となっているということができる。そのため、制御目標値の平均値と、制御目標値との差分が閾値以上であると判定されたフレームが所定フレーム数だけ続いた場合、撮影方向の異常が発生したために、これまで安定していた最適露光バランスやホワイトバランスが大きく変化した後、再び安定し続けている状態であるということができる。
【０２８４】
ステップＳ２３５において、差分が閾値以上であると判定された場合、ステップＳ２３６において、画質制御処理部７８は、予め保持している撮影方向異常カウンタを１だけインクリメントする。
【０２８５】
ここで撮影方向異常カウンタは、露出異常カウンタと同様のものであり、連続して制御目標値の平均値と、制御目標値との差分が閾値以上であると判定された回数、つまり連続して撮影方向による異常が検出された時間（フレーム数）を示している。
【０２８６】
また、画質制御処理部７８は、撮影方向異常カウンタが所定値以上となったときにセット（オン）される撮影方向異常フラグも保持している。撮影方向異常フラグがセット（オン）されている場合、撮影方向による異常が発生していることを示しており、撮影方向異常フラグがリセット（オフ）されている場合、撮影方向による異常が発生していないことを示している。
【０２８７】
ステップＳ２３６において撮影方向異常カウンタがインクリメントされると、その後、処理はステップＳ２４０に進む。
【０２８８】
一方、ステップＳ２３５において、差分が閾値以上でないと判定された場合、ステップＳ２３７において、画質制御処理部７８は、撮影方向異常カウンタをリセットする。
【０２８９】
ステップＳ２３８において、画質制御処理部７８は、ステップＳ２３２で算出された、現フレームの各制御目標値を履歴リストに追加する。このとき、必要に応じて、これまで履歴リストに含まれていた最も古い時刻のフレームの制御目標値が削除される。
【０２９０】
ステップＳ２３９において、画質制御処理部７８は、撮影方向異常フラグをリセット（オフ）する。
【０２９１】
すなわち、差分が閾値以上でない場合、露出やホワイトバランスが安定しており、撮影方向による異常が検出されていないので、撮影方向異常カウンタが０にリセットされるとともに、撮影方向異常フラグもリセットされる。
【０２９２】
また、撮影方向による異常が検出されていないので、履歴リストの更新も行われる。なお、撮影方向による異常が検出されなかったフレームについてのみ制御目標値が履歴リストに追加されるのは、例えば人が撮像装置１１の前を横切ったなど、例外的なフレームの制御目標値が履歴リストに追加されないようにするためである。
【０２９３】
このようにして撮影方向異常フラグがリセットされると、処理はステップＳ２４０に進む。
【０２９４】
ステップＳ２３６において撮影方向異常カウンタがインクリメントされたか、またはステップＳ２３９において撮影方向異常フラグがリセットされると、ステップＳ２４０において、画質制御処理部７８は撮影方向異常カウンタが所定値以上であるか否かを判定する。
【０２９５】
ステップＳ２４０において、撮影方向異常カウンタが所定値以上であると判定された場合、ステップＳ２４１において、画質制御処理部７８は撮影方向異常フラグをセット（オン）する。
【０２９６】
この場合、これまで安定していた最適露光バランスやホワイトバランスが大きく変化した後、再び安定し続けたことになるので、撮影方向による異常が発生したとされ、撮影方向異常フラグがセットされる。撮影方向異常フラグがセットされると、その後、処理はステップＳ２４２に進む。
【０２９７】
また、ステップＳ２４０において、撮影方向異常カウンタが所定値以上でないと判定された場合、撮影方向による異常は発生していないとされ、処理はステップＳ２４２に進む。
【０２９８】
ステップＳ２４１において撮影方向異常フラグがセットされたか、またはステップＳ２４０において撮影方向異常カウンタが所定値以上でないと判定されると、ステップＳ２４２において、画質制御処理部７８は処理を終了するか否かを判定する。
【０２９９】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０３００】
ステップＳ２４２において、終了しないと判定された場合、処理はステップＳ２３１に戻り、上述した処理が繰り返される。
【０３０１】
これに対して、ステップＳ２４２において終了すると判定された場合、撮影方向による異常発生の検出処理は終了する。
【０３０２】
以上のようにして、撮像装置１１は、露出制御やホワイトバランス制御のための検波結果に基づいて、撮影方向による異常の発生を検出する。このように、撮影方向による異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、より簡単に撮影状況を把握することができるようになる。
【０３０３】
〈顔消失による異常発生の検出処理の説明〉
さらに、図１３のフローチャートを参照して、撮像装置１１により行われる、顔消失による異常発生の検出処理について説明する。
【０３０４】
ステップＳ２７１において、画質制御処理部７８は、図６のステップＳ１２で行われた顔検出の結果を顔検出処理部７７から取得する。
【０３０５】
ステップＳ２７２において、画質制御処理部７８は取得した顔検出の結果に基づいて、顔の紐付け処理を行う。
【０３０６】
すなわち、現フレームの撮影画像から検出された顔のなかに、追尾対象となっている顔があるか否かが特定される。そして、追尾対象となっている顔があると特定された場合には、その特定された顔の領域が、追尾対象とされている顔領域として、過去のフレームで追尾対象とされた各顔領域と対応付けられる。
【０３０７】
ここで、追尾対象とされる顔は、最初のフレームの撮影画像においてユーザがユーザインターフェース６３を操作することで指定した顔とされてもよいし、予め登録されている顔とされてもよい。各個人の顔が予め登録されている場合には、それらの各顔の特徴量が記録部６８等に予め記録されているようにすればよい。また、最初のフレームの撮影画像から顔が１つだけ検出された場合には、その顔が追尾対象とされてもよい。
【０３０８】
例えば、顔の紐付け処理では、現フレームの撮影画像から検出された顔が、現フレームの直前のフレームの撮影画像における追尾対象の顔の位置から、予め定められた距離内にある場合、その現フレームの撮影画像の顔は、追尾対象の顔であるとされる。
【０３０９】
また、追尾対象の顔について算出された特徴量と、現フレームの撮影画像上の顔の領域から抽出された特徴量とが比較されて、現フレームの撮影画像上の顔が、追尾対象の顔であるかが特定されるようにしてもよい。
【０３１０】
ステップＳ２７３において、画質制御処理部７８は、ステップＳ２７２の処理で特定された、追尾対象の顔の領域の画質が最適な画質となるように、検波処理の結果に対する重みを設定する。
【０３１１】
このようにして設定された重みに基づいて、上述した各制御指示値（制御目標値）の算出、すなわち図６のステップＳ１４、図１０のステップＳ１５２およびステップＳ１５３、並びに図１２のステップＳ２３２およびステップＳ２３３の処理が行われる。
【０３１２】
これにより、例えば図１０のステップＳ１５２では、顔領域にピントが合うようにフォーカスレンズの制御目標値が算出される。また、例えば図１２のステップＳ２３２では、顔領域に重きが置かれて露出制御やホワイトバランス制御の制御目標値が算出される。
【０３１３】
ステップＳ２７４において、画質制御処理部７８は現フレームの撮影画像上に追尾対象とされている顔が存在するか否かを判定する。
【０３１４】
例えばステップＳ２７２の紐付け処理において、追尾対象となっている顔があると特定された場合、追尾対象の顔が存在すると判定される。
【０３１５】
ここで、現フレームの撮影画像上に、これまでは存在していた追尾対象の顔が存在しないということは、追尾対象となっている人が撮像装置１１の撮影視野（フレーム）から外に出てしまった状態となっている。したがって、そのような場合、顔消失による異常が検出された状態となっていることになる。
【０３１６】
ステップＳ２７４において、顔が存在しないと判定された場合、ステップＳ２７５において、画質制御処理部７８は、予め保持している顔消失異常カウンタを１だけインクリメントする。
【０３１７】
ここで顔消失異常カウンタは、露出異常カウンタと同様のものであり、連続して追尾対象の顔が存在しないと判定された回数、つまり連続して顔消失による異常が検出された時間（フレーム数）を示している。
【０３１８】
また、画質制御処理部７８は、顔消失異常カウンタが所定値以上となったときにセット（オン）される顔消失異常フラグも保持している。顔消失異常フラグがセット（オン）されている場合、顔消失による異常が発生していることを示しており、顔消失異常フラグがリセット（オフ）されている場合、顔消失による異常が発生していないことを示している。
【０３１９】
ステップＳ２７５において顔消失異常カウンタがインクリメントされると、その後、処理はステップＳ２７８に進む。
【０３２０】
一方、ステップＳ２７４において、顔が存在すると判定された場合、ステップＳ２７６において、画質制御処理部７８は、顔消失異常カウンタをリセットする。
【０３２１】
ステップＳ２７７において、画質制御処理部７８は、顔消失異常フラグをリセット（オフ）する。
【０３２２】
すなわち、追尾対象の顔が存在する場合、所望の顔の追尾に成功している状態であり、顔消失による異常が検出されていないので、顔消失異常カウンタが０にリセットされるとともに、顔消失異常フラグもリセットされる。このようにして顔消失異常フラグがリセットされると、処理はステップＳ２７８に進む。
【０３２３】
ステップＳ２７５において顔消失異常カウンタがインクリメントされたか、またはステップＳ２７７において顔消失異常フラグがリセットされると、ステップＳ２７８において、画質制御処理部７８は顔消失異常カウンタが所定値以上であるか否かを判定する。
【０３２４】
ステップＳ２７８において、顔消失異常カウンタが所定値以上であると判定された場合、ステップＳ２７９において、画質制御処理部７８は顔消失異常フラグをセット（オン）する。
【０３２５】
この場合、所定時間以上、顔消失による異常が検出され続けたことになるので、顔消失による異常が発生したとされ、顔消失異常フラグがセットされる。顔消失異常フラグがセットされると、その後、処理はステップＳ２８０に進む。
【０３２６】
また、ステップＳ２７８において、顔消失異常カウンタが所定値以上でないと判定された場合、顔消失による異常は発生していないとされ、処理はステップＳ２８０に進む。
【０３２７】
ステップＳ２７９において顔消失異常フラグがセットされたか、またはステップＳ２７８において顔消失異常カウンタが所定値以上でないと判定されると、ステップＳ２８０において、画質制御処理部７８は処理を終了するか否かを判定する。
【０３２８】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０３２９】
ステップＳ２８０において、終了しないと判定された場合、処理はステップＳ２７１に戻り、上述した処理が繰り返される。
【０３３０】
これに対して、ステップＳ２８０において終了すると判定された場合、顔消失による異常発生の検出処理は終了する。
【０３３１】
以上のようにして、撮像装置１１は、顔検出の結果に基づいて、追尾対象の顔が存在するかを特定し、顔消失による異常の発生を検出する。このように、顔消失による異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、より簡単に撮影状況を把握することができるようになる。
【０３３２】
〈バッテリによる異常発生の検出処理の説明〉
また、図１４のフローチャートを参照して、撮像装置１１により行われる、バッテリによる異常発生の検出処理について説明する。
【０３３３】
ステップＳ３１１において、画質制御処理部７８は、バッテリ６７から、バッテリ６７の残容量を取得する。
【０３３４】
ステップＳ３１２において、画質制御処理部７８は、バッテリ６７の残容量が閾値以下であるか否かを判定する。
【０３３５】
ステップＳ３１２において、残容量が閾値以下であると判定された場合、ステップＳ３１３において、画質制御処理部７８は、バッテリ異常フラグをセット（オン）する。バッテリ異常フラグがセットされると、その後、処理はステップＳ３１４へと進む。
【０３３６】
画質制御処理部７８は、バッテリ６７の残容量が所定値以下となったときにセット（オン）されるバッテリ異常フラグを保持している。バッテリ異常フラグがセット（オン）されている場合、バッテリによる異常が発生していることを示しており、バッテリ異常フラグがリセット（オフ）されている場合、バッテリによる異常が発生していないことを示している。
【０３３７】
また、ステップＳ３１２において、残容量が閾値以下でないと判定された場合、処理はステップＳ３１４へと進む。
【０３３８】
ステップＳ３１３においてバッテリ異常フラグがセットされたか、またはステップＳ３１２において残容量が閾値以下でないと判定されると、ステップＳ３１４において、画質制御処理部７８は処理を終了するか否かを判定する。
【０３３９】
例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０３４０】
ステップＳ３１４において、終了しないと判定された場合、処理はステップＳ３１１に戻り、上述した処理が繰り返される。
【０３４１】
これに対して、ステップＳ３１４において終了すると判定された場合、バッテリによる異常発生の検出処理は終了する。
【０３４２】
以上のようにして、撮像装置１１は、バッテリ６７の残容量に基づいてバッテリによる異常の発生を検出する。このように、バッテリによる異常の発生を検出することで、必要に応じて、ユーザに対して警告を発することができる。これにより、ユーザは、より簡単に撮影状況を把握することができるようになる。
【０３４３】
〈警告判定処理の説明〉
また、撮像装置１１は、撮影中に以上において説明した各要因の異常の発生を検出する処理を行いながら、同時に警告判定処理を行って、異常発生の検出結果に応じた警告フラグを生成し、警告発生装置１２に送信する。
【０３４４】
例えば、警告フラグは、上述した異常の要因ごと、すなわち各要因について得られた異常の有無を示すフラグごとに生成される。なお、以下、露出異常フラグ、ホワイトバランス異常フラグ、フォーカス異常フラグ、手ぶれ異常フラグ、撮影方向異常フラグ、顔消失異常フラグ、およびバッテリ異常フラグを特に区別する必要のない場合、単に異常フラグとも称することとする。
【０３４５】
撮像装置１１は、これらの異常フラグごとに警告フラグを生成し、警告発生装置１２に送信する。以下、図１５のフローチャートを参照して、撮像装置１１による警告判定処理について説明する。なお、警告判定処理は、異常フラグごとに行われる。
【０３４６】
ステップＳ３４１において、警告判定処理部７９は、画質制御処理部７８に保持されている異常フラグを参照して、その異常フラグがセットされているか否か、つまり異常フラグがオンであるか否かを判定する。
【０３４７】
ステップＳ３４１において、異常フラグがセットされていると判定された場合、ステップＳ３４２において、警告判定処理部７９は、警告フラグをセット（オン）し、処理はステップＳ３４４へと進む。
【０３４８】
例えば、この警告判定処理において、露出異常フラグが処理対象となっている場合、露出に関する警告フラグがセットされる。
【０３４９】
これに対して、ステップＳ３４１において異常フラグがセットされていないと判定された場合、ステップＳ３４３において、警告判定処理部７９は、警告フラグをリセット（オフ）し、処理はステップＳ３４４へと進む。
【０３５０】
ステップＳ３４２において警告フラグがセットされたか、またはステップＳ３４３において警告フラグがリセットされると、ステップＳ３４４の処理が行われる。
【０３５１】
すなわち、ステップＳ３４４において、警告判定処理部７９は、デジタル信号処理LSI６２を介して無線送信部６９に警告フラグを供給し、警告フラグの送信を指示する。
【０３５２】
ステップＳ３４５において、無線送信部６９は、警告判定処理部７９から供給された警告フラグを無線により警告発生装置１２に送信する。
【０３５３】
ステップＳ３４６において、警告判定処理部７９は、処理を終了するか否かを判定する。例えば、図６を参照して説明した撮影処理が終了する場合、つまり撮影を終了する場合、処理を終了すると判定される。
【０３５４】
ステップＳ３４６において、終了しないと判定された場合、処理はステップＳ３４１に戻り、上述した処理が繰り返される。すなわち、所定の時間間隔で警告フラグが送信され続ける。
【０３５５】
これに対して、ステップＳ３４６において、終了すると判定された場合、警告判定処理は終了する。
【０３５６】
以上のようにして、撮像装置１１は、異常フラグを監視して警告フラグを生成し、警告発生装置１２に送信する。これにより、異常発生の要因ごとにユーザに対して警告を発することができ、ユーザは、撮像装置１１とは別体の警告発生装置１２により、簡単に撮影状況を把握することができる。なお、常に警告フラグが警告発生装置１２に送信されるのではなく、異常が発生したときにだけ警告フラグが送信されるようにしてもよい。
【０３５７】
〈警告処理の説明〉
上述したように、撮像装置１１で図６の撮影処理が行われている間、警告発生装置１２では、図７の表示処理が行われる。
【０３５８】
さらに、撮影処理が行われている間、警告発生装置１２は、表示処理と同時に、警告処理を行って、警告フラグに応じた警告を発する。以下、図１６のフローチャートを参照して、警告発生装置１２による警告処理について説明する。
【０３５９】
なお、この警告処理は、異常発生の要因ごと、すなわち光源条件による異常、照明条件による異常、撮影距離による異常、手ぶれによる異常、撮影方向による異常、顔消失による異常、およびバッテリによる異常ごとに行われる。
【０３６０】
ステップＳ３７１において、無線受信部９１は、撮像装置１１の無線送信部６９から送信されてきた警告フラグを受信して、デジタル信号処理部９２に供給する。また、デジタル信号処理部９２は、無線受信部９１から供給された警告フラグを制御部９３に供給する。
【０３６１】
ステップＳ３７２において、制御部９３の警告手段制御処理部１０５は、デジタル信号処理部９２から供給された警告フラグがオンであるか否か、すなわちセットされているか否かを判定する。
【０３６２】
ステップＳ３７２において、警告フラグがオンでない、つまりオフであると判定された場合、処理はステップＳ３７６に進む。
【０３６３】
これに対して、ステップＳ３７２において、警告フラグがオンであると判定された場合、ステップＳ３７３において、警告手段制御処理部１０５は、異常要因に応じた警告アイコンを選択する。
【０３６４】
例えば、処理対象となっている警告フラグが、光源条件による異常についての警告フラグである場合、警告手段制御処理部１０５は、光源条件による異常に対して予め定められた警告アイコンを選択する。すなわち、異常の要因（種別）ごとに異なる警告アイコンが選択される。
【０３６５】
ステップＳ３７４において、警告手段制御処理部１０５は、選択した警告アイコンをデジタル信号処理部９２の表示用処理部１０１に供給し、表示用処理部１０１に警告アイコンの表示を指示する。表示用処理部１０１は、警告手段制御処理部１０５の指示に従って、警告手段制御処理部１０５から供給された警告アイコンを表示部３１に供給し、警告アイコンの表示を制御する。
【０３６６】
ステップＳ３７５において、表示部３１は、表示用処理部１０１から供給された警告アイコンを表示する。すなわち、表示部３１は撮像装置１１から受信された撮影画像に重畳させて警告アイコンを表示する。これにより、例えば図３に示した警告アイコンＡＣ１１が表示される。なお、警告アイコンとともに文字メッセージなどの情報も表示されるようにしてもよい。
【０３６７】
ステップＳ３７５において警告アイコンが表示されたか、またはステップＳ３７２において警告フラグがオフであると判定されると、ステップＳ３７６の処理が行われる。
【０３６８】
ステップＳ３７６において、警告手段制御処理部１０５は、処理を終了するか否かを判定する。例えば、図７を参照して説明した表示処理が終了する場合、処理を終了すると判定される。
【０３６９】
ステップＳ３７６において、終了しないと判定された場合、処理はステップＳ３７１に戻り、上述した処理が繰り返される。すなわち、新たな警告フラグが受信され、その警告フラグに応じて警告アイコンの表示が更新される。
【０３７０】
これに対して、ステップＳ３７６において、終了すると判定された場合、警告処理は終了する。
【０３７１】
以上のようにして、警告発生装置１２は警告フラグを受信して、その警告フラグに応じた警告を発する。このように、警告フラグに応じて警告を発することで、ユーザは、撮像装置１１とは別体の警告発生装置１２により、簡単に撮影状況を把握することができる。しかも、異常の要因ごとに警告が発せられるので、ユーザは、どのような異常が発生しているかを簡単かつ瞬時に把握することができる。
【０３７２】
〈第１の実施の形態の変形例１〉
〈警告処理の説明〉
なお、以上においては、ユーザに対する警告を発する方法として表示による警告を例として説明したが、ユーザに対する警告を発する他の方法として、振動による警告を行うようにしてもよい。
【０３７３】
そのような場合、図１６を参照して説明した警告処理に対応する処理として、例えば図１７に示す処理が行われる。以下、図１７のフローチャートを参照して、警告発生装置１２により行われる、振動による警告処理について説明する。
【０３７４】
なお、この警告処理も異常発生の要因ごとに行われる。また、ステップＳ４０１およびステップＳ４０２の処理は、図１６のステップＳ３７１およびステップＳ３７２の処理と同様であるので、その説明は省略する。
【０３７５】
ステップＳ４０２において警告フラグがオンであると判定された場合、ステップＳ４０３において、警告手段制御処理部１０５は、異常要因に応じた振動パターンを選択する。
【０３７６】
例えば、処理対象となっている警告フラグが、光源条件による異常についての警告フラグである場合、警告手段制御処理部１０５は、光源条件による異常に対して予め定められた振動パターンを選択する。すなわち、異常の要因ごとに異なる振動パターンが選択される。
【０３７７】
ステップＳ４０４において、警告手段制御処理部１０５は、デジタル信号処理部９２の振動駆動処理部１０２に対して、選択した振動パターンでの振動による警告を指示する。
【０３７８】
ステップＳ４０５において、振動駆動処理部１０２は、警告手段制御処理部１０５の指示に応じて振動部９４を駆動し、振動させる。振動部９４は、振動駆動処理部１０２により駆動されると、所定の振動パターンで振動することで警告を発する。
【０３７９】
振動による警告が発せられると、その後、ステップＳ４０６の処理が行われて警告処理は終了するが、この処理は図１６のステップＳ３７６の処理と同様であるので、その説明は省略する。
【０３８０】
以上のようにして、警告発生装置１２は警告フラグを受信して、その警告フラグに応じて振動により警告を発する。このように、警告フラグに応じて警告を発することで、ユーザは、警告発生装置１２の表示部３１を見ていなくても、簡単に撮影状況を把握することができる。しかも、異常の要因ごとに警告が発せられるので、ユーザは、どのような異常が発生しているかを簡単かつ瞬時に把握することができる。
【０３８１】
〈第１の実施の形態の変形例２〉
〈警告処理の説明〉
また、ユーザに対する警告を発する他の方法として、音声による警告を行うようにしてもよい。
【０３８２】
そのような場合、図１６を参照して説明した警告処理に対応する処理として、例えば図１８に示す処理が行われる。以下、図１８のフローチャートを参照して、警告発生装置１２により行われる、音声による警告処理について説明する。
【０３８３】
なお、この警告処理も異常発生の要因ごとに行われる。また、ステップＳ４３１およびステップＳ４３２の処理は、図１６のステップＳ３７１およびステップＳ３７２の処理と同様であるので、その説明は省略する。
【０３８４】
ステップＳ４３２において警告フラグがオンであると判定された場合、ステップＳ４３３において、警告手段制御処理部１０５は、異常要因に応じた音声パターンを選択する。
【０３８５】
例えば、処理対象となっている警告フラグが、光源条件による異常についての警告フラグである場合、警告手段制御処理部１０５は、光源条件による異常に対して予め定められた音声パターンを選択する。すなわち、異常の要因ごとに異なる音声パターンが選択される。
【０３８６】
ステップＳ４３４において、警告手段制御処理部１０５は、デジタル信号処理部９２のスピーカ駆動処理部１０３に対して、選択した音声パターンでの音声出力による警告を指示する。
【０３８７】
ステップＳ４３５において、スピーカ駆動処理部１０３は、警告手段制御処理部１０５の指示に応じて、指定された音声パターンの音声信号をスピーカ９５に供給し、音声を出力させる。スピーカ９５は、スピーカ駆動処理部１０３から供給された音声信号に基づいて、所定の音声パターンの警告音声を再生することで警告を発する。
【０３８８】
音声による警告が発せられると、その後、ステップＳ４３６の処理が行われて警告処理は終了するが、この処理は図１６のステップＳ３７６の処理と同様であるので、その説明は省略する。
【０３８９】
以上のようにして、警告発生装置１２は警告フラグを受信して、その警告フラグに応じて音声により警告を発する。このように、警告フラグに応じて警告を発することで、ユーザは、警告発生装置１２の表示部３１を見ていなくても、簡単に撮影状況を把握することができる。しかも、異常の要因ごとに警告が発せられるので、ユーザは、どのような異常が発生しているかを簡単かつ瞬時に把握することができる。
【０３９０】
〈第１の実施の形態の変形例３〉
〈警告処理の説明〉
また、ユーザに対する警告を発する他の方法として、光による警告を行うようにしてもよい。
【０３９１】
そのような場合、図１６を参照して説明した警告処理に対応する処理として、例えば図１９に示す処理が行われる。以下、図１９のフローチャートを参照して、警告発生装置１２により行われる、発光による警告処理について説明する。
【０３９２】
なお、この警告処理も異常発生の要因ごとに行われる。また、ステップＳ４６１およびステップＳ４６２の処理は、図１６のステップＳ３７１およびステップＳ３７２の処理と同様であるので、その説明は省略する。
【０３９３】
ステップＳ４６２において警告フラグがオンであると判定された場合、ステップＳ４６３において、警告手段制御処理部１０５は、異常要因に応じた点灯パターンを選択する。
【０３９４】
例えば、処理対象となっている警告フラグが、光源条件による異常についての警告フラグである場合、警告手段制御処理部１０５は、光源条件による異常に対して予め定められた点灯パターンを選択する。すなわち、異常の要因ごとに異なる点灯パターンが選択される。
【０３９５】
ステップＳ４６４において、警告手段制御処理部１０５は、デジタル信号処理部９２の発光素子駆動処理部１０４に対して、選択した点灯パターンでの発光（点灯）による警告を指示する。
【０３９６】
ステップＳ４６５において、発光素子駆動処理部１０４は、警告手段制御処理部１０５の指示に応じて発光素子９６を駆動し、指定された点灯パターンで発光素子９６を発光させる。発光素子９６は、発光素子駆動処理部１０４により駆動されると所定の点灯パターンで発光（点灯）することで警告を発する。
【０３９７】
光による警告が発せられると、その後、ステップＳ４６６の処理が行われて警告処理は終了するが、この処理は図１６のステップＳ３７６の処理と同様であるので、その説明は省略する。
【０３９８】
以上のようにして、警告発生装置１２は警告フラグを受信して、その警告フラグに応じて光により警告を発する。このように、警告フラグに応じて警告を発することで、ユーザは、警告発生装置１２の表示部３１を見ていなくても、簡単に撮影状況を把握することができる。しかも、異常の要因ごとに警告が発せられるので、ユーザは、どのような異常が発生しているかを簡単かつ瞬時に把握することができる。
【０３９９】
なお、以上においては画像表示、音声出力、振動、および発光により警告を発する例について説明したが、これらを組み合わせて警告を発するようにしてもよいし、異常の要因ごとに異なる方法により警告を発するようにしてもよい。例えば、異常の要因ごとに異なる方法で警告を発する場合、光源条件による異常では画像が表示されるようにし、照明条件による異常では音声により警告が発せられるようにするなどとすることができる。
【０４００】
また、以上においては、警告発生装置１２が警告を発する例について説明したが、撮像装置１１が警告フラグに基づいて、警告を発するようにしてもよい。
【０４０１】
〈第２の実施の形態〉
〈警告発生装置の構成例〉
さらに、以上においては撮像装置１１側で撮影状況を監視して警告フラグを生成する例について説明したが、警告発生装置側で警告フラグを生成するようにしてもよい。そのような場合、警告発生装置は、例えば図２０に示す構成とされる。なお、図２０において、図２における場合と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【０４０２】
図２０に示す警告発生装置２０１は、無線受信部９１、異常検出処理部２１１、デジタル信号処理部９２、制御部９３、表示部３１、振動部９４、スピーカ９５、および発光素子９６を有している。
【０４０３】
図２０の警告発生装置２０１の構成は、新たに異常検出処理部２１１が設けられている点で図２の警告発生装置１２の構成と異なり、その他の構成は警告発生装置１２と同じ構成となっている。
【０４０４】
異常検出処理部２１１は、制御部９３の制御に従って、無線受信部９１から供給された撮影画像に基づいて撮影状況を監視し、警告フラグを生成する。
【０４０５】
異常検出処理部２１１は、カメラ制御用検波処理部７６、顔検出処理部７７、画質制御処理部７８、および警告判定処理部７９を備えている。異常検出処理部２１１は、第１の実施の形態において撮像装置１１により行われていた処理の一部を行う。
【０４０６】
異常検出処理部２１１は、適宜、解像度変換部７４により縮小された撮影画像を処理対象として扱って異常の発生を検出するので、撮像装置１１が異常の発生を検出する場合よりも、より少ない処理量で同じ処理を行うことができる。
【０４０７】
〈表示処理の説明〉
次に、警告発生装置２０１の具体的な動作について説明する。まず、図２１のフローチャートを参照して、警告発生装置２０１による表示処理について説明する。
【０４０８】
なお、この表示処理は、撮像装置１１から撮影された撮影画像が送信されてくると開始される。また、ステップＳ４９１およびステップＳ４９２の処理は、図７のステップＳ４１およびステップＳ４２の処理と同様であるので、その説明は省略する。これらのステップＳ４９１およびステップＳ４９２では、無線受信部９１により撮影画像が受信され、その撮影画像が表示部３１に表示される。
【０４０９】
ステップＳ４９３において、顔検出処理部７７は、無線受信部９１から供給された撮影画像に対して顔検出を行い、撮影画像から人の顔の領域を検出する。
【０４１０】
ステップＳ４９４において、カメラ制御用検波処理部７６は、撮影画像に基づいて検波処理を行う。
【０４１１】
なお、これらのステップＳ４９３およびステップＳ４９４の処理は、図６のステップＳ１２およびステップＳ１３の処理と同様であるので、その説明は省略する。
【０４１２】
ステップＳ４９５において、制御部９３は、処理を終了するか否かを判定する。例えば撮像装置１１から新たな撮影画像のフレームが送信されてこなくなった場合、処理を終了すると判定される。
【０４１３】
ステップＳ４９５において、終了しないと判定された場合、処理はステップＳ４９１に戻り、上述した処理が繰り返される。
【０４１４】
これに対して、ステップＳ４９５において、終了すると判定された場合、表示処理は終了する。
【０４１５】
以上のようにして、警告発生装置２０１は、撮影画像を受信して表示するとともに、撮影画像から顔を検出したり検波処理を行ったりする。これにより、ユーザは、撮像装置１１とは別体の警告発生装置２０１に表示される撮影画像を見て、画角等を確認することができる。また、警告発生装置２０１側において異常を検出することができるようになる。
【０４１６】
〈光源条件による異常発生の検出処理の説明〉
また、警告発生装置２０１は、図２１を参照して説明した表示処理を行いながら、同時に異常の発生を検出する処理を行う。以下、図２２乃至図２６を参照して、各要因について異常発生を検出する処理について具体的に説明する。
【０４１７】
まず、図２２のフローチャートを参照して、警告発生装置２０１により行われる、光源条件による異常発生の検出処理について説明する。
【０４１８】
ステップＳ５２１において、画質制御処理部７８は、図２１のステップＳ４９４で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、撮影画像の各分割領域の輝度値の積分値が取得される。
【０４１９】
検波処理の結果が取得されると、その後、ステップＳ５２２乃至ステップＳ５２９の処理が行われて光源条件による異常発生の検出処理は終了するが、これらの処理は図８のステップＳ７２乃至ステップＳ７９の処理と同様であるので、その説明は省略する。
【０４２０】
以上のようにして、警告発生装置２０１は、輝度に関する検波結果に基づいて、光源条件による異常の発生を検出し、露出異常フラグをセットまたはリセットする。
【０４２１】
〈照明条件による異常発生の検出処理の説明〉
次に、図２３のフローチャートを参照して、警告発生装置２０１により行われる、照明条件による異常発生の検出処理について説明する。
【０４２２】
ステップＳ５６１において、画質制御処理部７８は、図２１のステップＳ４９４で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、撮影画像の分割領域ごとに求められたＲ，Ｇ，Ｂの各色成分の積分値が取得される。
【０４２３】
検波処理の結果が取得されると、その後、ステップＳ５６２乃至ステップＳ５７０の処理が行われて照明条件による異常発生の検出処理は終了するが、これらの処理は図９のステップＳ１１２乃至ステップＳ１２０の処理と同様であるので、その説明は省略する。
【０４２４】
以上のようにして、警告発生装置２０１は、色成分に関する検波結果に基づいて、照明条件による異常の発生を検出し、ホワイトバランス異常フラグをセットまたはリセットする。
【０４２５】
〈撮影距離による異常発生の検出処理の説明〉
次に、図２４のフローチャートを参照して、警告発生装置２０１により行われる、撮影距離による異常発生の検出処理について説明する。
【０４２６】
ステップＳ６０１において、画質制御処理部７８は、図２１のステップＳ４９４で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、撮影画像の各分割領域の合焦評価値が取得される。
【０４２７】
ステップＳ６０２において、画質制御処理部７８は取得した検波処理の結果に基づいて、合焦評価値のピーク値を算出する。すなわち、画質制御処理部７８は、例えば撮影画像の直近数フレームで得られた、顔領域などの所定の領域の合焦評価値の最大値を、合焦評価値のピーク値として求める。
【０４２８】
合焦評価値のピーク値が得られると、その後、ステップＳ６０３乃至ステップＳ６０９の処理が行われて撮影距離による異常発生の検出処理は終了するが、これらの処理は図１０のステップＳ１５４乃至ステップＳ１６０の処理と同様であるので、その説明は省略する。
【０４２９】
以上のようにして、警告発生装置２０１は、フォーカスに関する検波結果に基づいて、撮影距離による異常の発生を検出し、フォーカス異常フラグをセットまたはリセットする。
【０４３０】
〈撮影方向による異常発生の検出処理の説明〉
次に、図２５のフローチャートを参照して、警告発生装置２０１により行われる、撮影方向による異常発生の検出処理について説明する。
【０４３１】
ステップＳ６３１において、画質制御処理部７８は、図２１のステップＳ４９４で行われた検波処理の結果をカメラ制御用検波処理部７６から取得する。具体的には、撮影画像の各分割領域の輝度値の積分値と、各分割領域の色成分ごとの積分値とが取得される。
【０４３２】
ステップＳ６３２において、画質制御処理部７８は取得した検波処理の結果に基づいて、露出制御のための制御目標値と、ホワイトバランス制御のための制御目標値とを算出する。すなわち、図１２のステップＳ２３２と同様の処理が行われる。
【０４３３】
制御目標値が算出されると、その後、ステップＳ６３３乃至ステップＳ６４１の処理が行われて撮影方向による異常発生の検出処理は終了するが、これらの処理は図１２のステップＳ２３４乃至ステップＳ２４２の処理と同様であるので、その説明は省略する。
【０４３４】
以上のようにして、警告発生装置２０１は、検波結果に基づいて、撮影方向による異常の発生を検出し、撮影方向異常フラグをセットまたはリセットする。
【０４３５】
〈顔消失による異常発生の検出処理の説明〉
次に、図２６のフローチャートを参照して、警告発生装置２０１により行われる、顔消失による異常発生の検出処理について説明する。
【０４３６】
ステップＳ６７１において、画質制御処理部７８は、図２１のステップＳ４９３で行われた顔検出の結果を顔検出処理部７７から取得する。
【０４３７】
顔検出の結果が取得されると、その後、ステップＳ６７２乃至ステップＳ６７９の処理が行われて顔消失による異常発生の検出処理は終了するが、これらの処理は図１３のステップＳ２７２、およびステップＳ２７４乃至ステップＳ２８０の処理と同様であるので、その説明は省略する。なお、検出された追尾対象の顔の領域に基づいて重みが設定され、その重みに基づいて、露出制御やホワイトバランス制御の制御目標値の算出が行わるようにしてもよい。
【０４３８】
以上のようにして、警告発生装置２０１は、顔検出の結果に基づいて、顔消失による異常の発生を検出し、顔消失異常フラグをセットまたはリセットする。
【０４３９】
〈警告判定処理の説明〉
また、警告発生装置２０１は、撮像装置１１が撮影処理を行っている間、以上において説明した各要因の異常の発生を検出する処理を行いながら、同時に警告判定処理を行って、異常発生の検出結果に応じた警告フラグを生成する。
【０４４０】
以下、図２７のフローチャートを参照して、警告発生装置２０１による警告判定処理について説明する。なお、警告判定処理は、異常フラグごとに行われる。
【０４４１】
また、ステップＳ７１１乃至ステップＳ７１３の処理は、図１５のステップＳ３４１乃至ステップＳ３４３の処理と同様であるので、その説明は省略する。これらの処理により、警告フラグがセットまたはリセットされる。
【０４４２】
警告フラグがセットまたはリセットされると、その後、ステップＳ７１４の処理が行われて警告判定処理は終了するが、ステップＳ７１４の処理は図１５のステップＳ３４６の処理と同様であるので、その説明は省略する。
【０４４３】
以上のようにして、警告発生装置２０１は、各要因の異常ごとに異常フラグに基づいて、警告フラグを更新する。
【０４４４】
〈警告処理の説明〉
次に、図２８のフローチャートを参照して、警告発生装置２０１による警告処理について説明する。なお、この警告処理は、異常発生の要因ごとに行われる。
【０４４５】
ステップＳ７４１において、警告手段制御処理部１０５は、異常検出処理部２１１の警告判定処理部７９から警告フラグを取得する。
【０４４６】
警告フラグが取得されると、その後、ステップＳ７４２乃至ステップＳ７４６の処理が行われて警告処理は終了するが、これらの処理は図１６のステップＳ３７２乃至ステップＳ３７６の処理と同様であるので、その説明は省略する。
【０４４７】
以上のようにして、警告発生装置２０１は、警告フラグに応じて警告を発する。これにより、ユーザは、より簡単に撮影状況を把握することができる。
【０４４８】
〈第２の実施の形態の変形例１〉
〈警告処理の説明〉
なお、ユーザに対する警告を発する他の方法として、振動による警告を行うようにしてもよい。そのような場合、例えば図２９に示す処理が行われる。以下、図２９のフローチャートを参照して、警告発生装置２０１により行われる、振動による警告処理について説明する。
【０４４９】
ステップＳ７７１において、警告手段制御処理部１０５は、異常検出処理部２１１の警告判定処理部７９から警告フラグを取得する。
【０４５０】
警告フラグが取得されると、その後、ステップＳ７７２乃至ステップＳ７７６の処理が行われて警告処理は終了するが、これらの処理は図１７のステップＳ４０２乃至ステップＳ４０６の処理と同様であるので、その説明は省略する。
【０４５１】
以上のようにして、警告発生装置２０１は、警告フラグに応じて振動により警告を発する。これにより、ユーザは、より簡単に撮影状況を把握することができる。
【０４５２】
〈第２の実施の形態の変形例２〉
〈警告処理の説明〉
また、ユーザに対する警告を発する他の方法として、音声による警告を行うようにしてもよい。そのような場合、例えば図３０に示す処理が行われる。以下、図３０のフローチャートを参照して、警告発生装置２０１により行われる、音声による警告処理について説明する。
【０４５３】
ステップＳ８０１において、警告手段制御処理部１０５は、異常検出処理部２１１の警告判定処理部７９から警告フラグを取得する。
【０４５４】
警告フラグが取得されると、その後、ステップＳ８０２乃至ステップＳ８０６の処理が行われて警告処理は終了するが、これらの処理は図１８のステップＳ４３２乃至ステップＳ４３６の処理と同様であるので、その説明は省略する。
【０４５５】
以上のようにして、警告発生装置２０１は、警告フラグに応じて音声により警告を発する。これにより、ユーザは、より簡単に撮影状況を把握することができる。
【０４５６】
〈第２の実施の形態の変形例３〉
〈警告処理の説明〉
また、ユーザに対する警告を発する他の方法として、光による警告を行うようにしてもよい。そのような場合、例えば図３１に示す処理が行われる。以下、図３１のフローチャートを参照して、警告発生装置２０１により行われる、発光による警告処理について説明する。
【０４５７】
ステップＳ８３１において、警告手段制御処理部１０５は、異常検出処理部２１１の警告判定処理部７９から警告フラグを取得する。
【０４５８】
警告フラグが取得されると、その後、ステップＳ８３２乃至ステップＳ８３６の処理が行われて警告処理は終了するが、これらの処理は図１９のステップＳ４６２乃至ステップＳ４６６の処理と同様であるので、その説明は省略する。
【０４５９】
以上のようにして、警告発生装置２０１は、警告フラグに応じて光により警告を発する。これにより、ユーザは、より簡単に撮影状況を把握することができる。
【０４６０】
〈第３の実施の形態〉
〈警告発生装置の外観の構成例〉
なお、以上においては、警告発生装置１２や警告発生装置２０１が、携帯型電話機からなる例について説明したが、警告発生装置は、表示機能を有する機器であれば、どのような機器であってもよい。
【０４６１】
例えば図３２に示すように、警告発生装置１２や警告発生装置２０１が、表示機能や通信機能を有する多機能型ウォッチ３０１からなるようにしてもよい。
【０４６２】
この例では、多機能型ウォッチ３０１には、液晶パネル等からなる表示部３１１が設けられており、その表示部３１１の図中、下側には各種の操作を行うときに操作されるボタン群３１２が設けられている。この場合、例えば多機能型ウォッチ３０１は、撮像装置１１から撮影画像を受信して表示部３１１に表示させたり、撮像装置１１から警告フラグを受信して警告アイコンを表示部３１１に表示させたりする。なお、多機能型ウォッチ３０１は振動、音声、光等により警告を発することもできる。
【０４６３】
〈第４の実施の形態〉
〈警告発生装置の外観の構成例〉
さらに、例えば図３３に示すように、警告発生装置１２や警告発生装置２０１が、表示機能や通信機能を有するグラス型のヘッドマウントディスプレイ３４１からなるようにしてもよい。
【０４６４】
この例では、ユーザがヘッドマウントディスプレイ３４１を装着したときに、ユーザの左右の目と対向する位置に配置される表示部３５１および表示部３５２に撮影画像や警告アイコンが表示される。また、ヘッドマウントディスプレイ３４１のつる（フレーム）の部分には、図示せぬボタンが設けられており、それらのボタンがユーザにより操作される。なお、ヘッドマウントディスプレイ３４１は振動、音声、光等により警告を発することもできる。
【０４６５】
ところで、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウェアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のコンピュータなどが含まれる。
【０４６６】
図３４は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
【０４６７】
コンピュータにおいて、ＣＰＵ（Central Processing Unit）５０１，ＲＯＭ（Read Only Me mory）５０２，ＲＡＭ（Random Access Memory）５０３は、バス５０４により相互に接続されている。
【０４６８】
バス５０４には、さらに、入出力インターフェース５０５が接続されている。入出力インターフェース５０５には、入力部５０６、出力部５０７、記録部５０８、通信部５０９、及びドライブ５１０が接続されている。
【０４６９】
入力部５０６は、キーボード、マウス、マイクロホン、撮像素子などよりなる。出力部５０７は、ディスプレイ、スピーカなどよりなる。記録部５０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部５０９は、ネットワークインターフェースなどよりなる。ドライブ５１０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア５１１を駆動する。
【０４７０】
以上のように構成されるコンピュータでは、ＣＰＵ５０１が、例えば、記録部５０８に記録されているプログラムを、入出力インターフェース５０５及びバス５０４を介して、ＲＡＭ５０３にロードして実行することにより、上述した一連の処理が行われる。
【０４７１】
コンピュータ（ＣＰＵ５０１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア５１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
【０４７２】
コンピュータでは、プログラムは、リムーバブルメディア５１１をドライブ５１０に装着することにより、入出力インターフェース５０５を介して、記録部５０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部５０９で受信し、記録部５０８にインストールすることができる。その他、プログラムは、ＲＯＭ５０２や記録部５０８に、あらかじめインストールしておくことができる。
【０４７３】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０４７４】
また、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【０４７５】
例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
【０４７６】
また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０４７７】
さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０４７８】
また、本明細書中に記載された効果はあくまで例示であって限定されるものではなく、他の効果があってもよい。
【０４７９】
さらに、本技術は、以下の構成とすることも可能である。
【０４８０】
（１）
撮像装置と警告発生装置とからなる撮影システムであって、
前記撮像装置は、
撮影画像を撮影する撮影部と、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出部と、
前記異常の検出結果を示す情報を前記警告発生装置に送信する送信部と
を備え、
前記警告発生装置は、
前記送信部により送信された、前記異常の検出結果を示す情報を受信する受信部と、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理部と、
前記警告手段制御処理部による警告の指示に応じて、警告を発する警告部と
を備える
撮影システム。
（２）
撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信部と、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理部と、
前記警告手段制御処理部による警告の指示に応じて、警告を発する警告部と
を備える警告発生装置。
（３）
前記警告部は、前記異常の種別ごとに異なる前記警告を発する
（２）に記載の警告発生装置。
（４）
前記撮影状況に関する前記異常は、露出制御に関する異常、ホワイトバランス制御に関する異常、フォーカス制御に関する異常、手ぶれ補正に関する異常、撮影方向に関する異常、顔検出に関する異常、またはバッテリに関する異常の少なくとも何れかである
（２）または（３）に記載の警告発生装置。
（５）
前記警告部は、警告表示をすることで前記警告を発する
（２）乃至（４）の何れか一項に記載の警告発生装置。
（６）
前記警告部は、音声を出力することで前記警告を発する
（２）乃至（４）の何れか一項に記載の警告発生装置。
（７）
前記警告部は、振動することで前記警告を発する
（２）乃至（４）の何れか一項に記載の警告発生装置。
（８）
前記警告部は、発光することで前記警告を発する
（２）乃至（４）の何れか一項に記載の警告発生装置。
（９）
前記受信部は、前記撮像装置から前記撮影画像をさらに受信し、
前記撮影画像を表示する表示部をさらに備える
（２）乃至（８）の何れか一項に記載の警告発生装置。
（１０）
前記受信部は、無線により前記異常の検出結果を示す情報を受信する
（２）乃至（９）の何れか一項に記載の警告発生装置。
（１１）
撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信ステップと、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理ステップと、
前記警告手段制御処理ステップによる警告の指示に応じて、警告を発する警告ステップと
を含む警告発生方法。
（１２）
撮影画像を撮影する撮像装置から送信されてきた、前記撮影画像の撮影状況に関する異常の検出結果を示す情報を受信する受信ステップと、
前記異常の検出結果を示す情報に基づいて、警告を指示する警告手段制御処理ステップと、
前記警告手段制御処理ステップによる警告の指示に応じて、警告を発する警告ステップと
を含む処理をコンピュータに実行させるプログラム。
（１３）
撮影画像を撮影する撮影部と、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出部と、
前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信部と
を備える撮像装置。
（１４）
撮影画像を撮影する撮影ステップと、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出ステップと、
前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信ステップと
を含む撮影方法。
（１５）
撮影画像を撮影する撮影ステップと、
前記撮影画像の撮影状況を監視して、前記撮影状況に関する異常を検出する検出ステップと、
前記異常の検出結果を示す情報を、前記異常の発生に対する警告を発する警告発生装置に送信する送信ステップと
を含む処理をコンピュータに実行させるプログラム。
【符号の説明】
【０４８１】
１１  撮像装置，  １２  警告発生装置，  ３１  表示部，  ６３  ユーザインターフェース，  ６９  無線送信部，  ７６  カメラ制御用検波処理部，  ７７  顔検出処理部，  ７８  画質制御処理部，  ７９  警告判定処理部，  ９１  無線受信部，  ９４  振動部，  ９５  スピーカ，  ９６  発光素子，  １０１  表示用処理部，  １０２  振動駆動処理部，  １０３  スピーカ駆動処理部，  １０４  発光素子駆動処理部，  １０５  警告手段制御処理部
【図１】
2015107928.tif 000003
【図２】
2015107928.tif 000004
【図３】
2015107928.tif 000005
【図４】
2015107928.tif 000006
【図５】
2015107928.tif 000007
【図６】
2015107928.tif 000008
【図７】
2015107928.tif 000009
【図８】
2015107928.tif 000010
【図９】
2015107928.tif 000011
【図１０】
2015107928.tif 000012
【図１１】
2015107928.tif 000013
【図１２】
2015107928.tif 000014
【図１３】
2015107928.tif 000015
【図１４】
2015107928.tif 000016
【図１５】
2015107928.tif 000017
【図１６】
2015107928.tif 000018
【図１７】
2015107928.tif 000019
【図１８】
2015107928.tif 000020
【図１９】
2015107928.tif 000021
【図２０】
2015107928.tif 000022
【図２１】
2015107928.tif 000023
【図２２】
2015107928.tif 000024
【図２３】
2015107928.tif 000025
【図２４】
2015107928.tif 000026
【図２５】
2015107928.tif 000027
【図２６】
2015107928.tif 000028
【図２７】
2015107928.tif 000029
【図２８】
2015107928.tif 000030
【図２９】
2015107928.tif 000031
【図３０】
2015107928.tif 000032
【図３１】
2015107928.tif 000033
【図３２】
2015107928.tif 000034
【図３３】
2015107928.tif 000035
【図３４】
2015107928.tif 000036
【国際調査報告】
2015107928.tif 000037
2015107928.tif 000038
2015107928.tif 000039
2015107928.tif 000040