(57)【要約】【課題】画像を撮影した後に撮影状態を示す情報を画像と関連つけて記録し、その情報を信号処理に用いる。【解決手段】レンズと、光電変換部と、光電変換部の出力に信号処理を施す信号処理部と信号処理部の出力を記録する記録部を有する撮像装置において、撮影を行っているときの状態を示すデータを抽出する状態抽出部を新たに儲け、信号処理部の出力を記録する記録部は、前記状態抽出部の結果を信号処理部の出力と関連付けて保存する撮影状態データ保存部を有する。また、撮影した画像データのファイル内に撮影を行っているときの状態を示すデータを保存するファイル内保存部を有する。さらに、保存した映像信号と撮影を行っているときの状態を示すデータを用いて、新たなぼかし効果をはじめとする信号処理を施す。【選択図】図１
2013009182.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して記録するための信号処理装置であって、
前記被写体からの光を集光するレンズと、
該レンズが集光した光が照射され該光を電気的な映像信号に変換する光電変換部と、
前記被写体が撮像された際の撮影状態に係るデータを抽出するデータ抽出部と、
該データ抽出部が抽出したデータを含めながら前記光電変換部で変換して得た映像信号に基づく所定の画像ファイルを生成する画像ファイル生成部と、
該画像ファイル生成部が生成した前記画像ファイルを記録する画像記録部
を有することを特徴とする信号処理装置。
【請求項２】
被写体を撮像して記録するための信号処理装置であって、
前記被写体からの光を集光するレンズと、
該レンズが集光した光が照射され該光を電気的な映像信号に変換する光電変換部と、
該光電変換部が変換して得た映像信号を画像ファイルとして記録する画像記録部と、
前記被写体が撮像された際の撮影状態に係るデータを抽出するデータ抽出部と、
該データ抽出部が抽出したデータを記録する状態データ記録部
を有することを特徴とする信号処理装置。
【請求項３】
請求項１または請求項２に記載の信号処理装置において、
前記データ抽出部は、前記被写体が撮像された際の前記レンズの視野角を示すデータを前記撮影状態に係るデータとして抽出することを特徴とする信号処理装置。
【請求項４】
請求項３に記載の信号処理装置において、
該信号処理装置は、前記画像記録部に記録された前記被写体を含む画像ファイルを再生して画像処理する信号処理部を有し、
該信号処理部は、前記被写体から所定の被写体を抽出して該所定の被写体の前記画像上における大きさに基づき、撮像時の前記信号処理装置と前記所定の被写体との間の距離を算出する距離算出部を有することを特徴とする信号処理装置。
【請求項５】
請求項４に記載の信号処理装置おいて、
前記信号処理部は、前記距離算出部が算出した前記距離に基づき、前記所定の被写体を明確にするための画像処理を行うことを特徴とする信号処理装置。
【請求項６】
請求項４に記載の信号処理装置おいて、
前記所定の被写体が複数抽出された際にいずれかの被写体をユーザーが選択するための基準決定部を有し、
前記距離算出部は、撮像時の前記信号処理装置と前記基準決定部で選択された前記所定の被写体との間の距離Ａを算出し、撮像時の前記信号処理装置と他の被写体との間の距離Ｂを算出して前記距離Ａとの差分を算出し、
前記信号処理部は、前記距離Ａと前記距離の差分に基づき、前記基準決定部で選択された前記所定の被写体を明確にするための画像処理を行うことを特徴とする信号処理装置。
【請求項７】
請求項５または請求項６に記載の信号処理装置において、前記所定の被写体を明確にするための画像処理は、前記所定の被写体以外の被写体に与えるソフトフォーカス処理であることを特徴とする信号処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は信号処理装置に係り、特に画像を撮像して処理する信号処理装置に関するものである。
【背景技術】
【０００２】
静止画を撮影する方法のひとつとして、デジタルカメラを使用する機会が飛躍的に増え、それに伴ってデジタルカメラの小型化、軽量化、高機能化が進み、高画質な画像を手軽に得ることができるようになった。
特に高機能化に対する需要は高くなる一方であり、最近では高級なレンズを搭載するカメラに対して高度な機能を期待している傾向がある。例えば、被写界深度を浅くする、あるいは、深くするといった高度の撮影テクニックに対応する機能や、合焦としている範囲の画像がより鮮明に撮影できる機能などである。そのためには、絞り機構を備えたレンズユニット、また、空間周波数特性が良いレンズを採用することとなり、それに伴いレンズが大型化し上記で述べたデジタルカメラの小型化を進める際の足かせになっている。
現在では、特許文献１に記載の信号処理のように画像の鮮明度を算出しその結果の数値からレンズの焦点が合っている範囲を選定し、その範囲以外の領域にソフトフォーカス処理を施すことで、被写界深度を浅くした画像と同様の効果を得る技術が知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２７９０５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記特許文献１の課題のひとつに、撮影した映像信号から得られる情報には限りがあり、例えば撮影者と被写体までの距離が分らないことがある。そのため、被写界深度を変えるような処理を行う際に、例えば画像の中央部に固定された焦点を中心として、周辺のピントがぼける程度の処理をすることとなる。そのため焦点を中央部以外に置いて被写体深度を変えるといった処理はできないため効果的が少ない。
本発明の目的は上記した課題に鑑み、画像処理を高度化した信号処理装置を提供することにある。
【課題を解決するための手段】
【０００５】
前記目的を達成するため本発明は、被写体を撮像して記録するための信号処理装置であって、前記被写体からの光を集光するレンズと、該レンズが集光した光が照射され該光を電気的な映像信号に変換する光電変換部と、前記被写体が撮像された際の撮影状態に係るデータを抽出するデータ抽出部と、該データ抽出部が抽出したデータを含めながら前記光電変換部で変換して得た映像信号に基づく所定の画像ファイルを生成する画像ファイル生成部と、該画像ファイル生成部が生成した前記画像ファイルを記録する画像記録部を有することを特徴としている。
【０００６】
また本発明は、被写体を撮像して記録するための信号処理装置であって、前記被写体からの光を集光するレンズと、該レンズが集光した光が照射され該光を電気的な映像信号に変換する光電変換部と、該光電変換部が変換して得た映像信号を画像ファイルとして記録する画像記録部と、前記被写体が撮像された際の撮影状態に係るデータを抽出するデータ抽出部と、該データ抽出部が抽出したデータを記録する状態データ記録部を有することを特徴としている。
【０００７】
また本発明は、前記信号処理装置において、前記データ抽出部は、前記被写体が撮像された際の前記レンズの視野角を示すデータを前記撮影状態に係るデータとして抽出することを特徴としている。
また本発明は、前記信号処理装置において、該信号処理装置は、前記画像記録部に記録された前記被写体を含む画像ファイルを再生して画像処理する信号処理部を有し、該信号処理部は、前記被写体から所定の被写体を抽出して該所定の被写体の前記画像上における大きさに基づき、撮像時の前記信号処理装置と前記所定の被写体との間の距離を算出する距離算出部を有することを特徴としている。
【０００８】
また本発明は、前記信号処理装置おいて、前記信号処理部は、前記距離算出部が算出した前記距離に基づき、前記所定の被写体を明確にするための画像処理を行うことを特徴としている。
また本発明は、前記信号処理装置おいて、前記所定の被写体が複数抽出された際にいずれかの被写体をユーザーが選択するための基準決定部を有し、前記距離算出部は、撮像時の前記信号処理装置と前記基準決定部で選択された前記所定の被写体との間の距離Ａを算出し、撮像時の前記信号処理装置と他の被写体との間の距離Ｂを算出して前記距離Ａとの差分を算出し、前記信号処理部は、前記距離Ａと前記距離の差分に基づき、前記基準決定部で選択された前記所定の被写体を明確にするための画像処理を行うことを特徴としている。
また本発明は、前記信号処理装置において、前記所定の被写体を明確にするための画像処理は、前記所定の被写体以外の被写体に与えるソフトフォーカス処理であることを特徴としている。
【発明の効果】
【０００９】
本発明によれば、画像処理を高度化した信号処理装置を提供することができ、例えば撮像装置の高機能化に寄与することができる。
【図面の簡単な説明】
【００１０】
【図１】第一の実施例における撮像装置のブロック図である。
【図２】第一の実施例における画像ファイル生成部１１１のブロック図である。
【図３】第二の実施例における撮像装置のブロック図である。
【図４】第二の実施例における第三信号処理部３０３のブロック図である。
【図５】第二の実施例における距離算出部４０５の距離算出方法を説明する図である。
【図６】第三の実施例における撮像装置のブロック図である。
【発明を実施するための形態】
【００１１】
図１、図２を用いて第一の実施例を説明する。
図１は、本実施例の撮像装置のブロック図である。
図２は、図１における画像ファイル生成部１１１のブロック図を示す。
１０１はレンズ、１０２は光電変換するセンサ、１０３はセンサ１０２の出力に第一の信号処理を施す第一信号処理部、１０４は撮像装置全体の制御を行うシステムコントロール部、１０５はシステムコントロール部１０４の命令を受けてレンズ１０１の焦点位置を変える制御をするレンズ制御部、１０６は測距用の赤外線を発光する発光部、１０７は被写体から反射してきた赤外線を受光する受光部、１０８は発光部１０６と受光部１０７を具備する赤外線受発光部、１０９は画像ファイル生成部１１１の出力を記録する画像記録部、１１１は第一信号処理部１０３の出力に第二の信号処理を施し画像ファイルを生成する画像ファイル生成部（第二信号処理部に相当する）、１１２は第一信号処理部１０３の出力である。１１３はセンサ１０２の受光面に当たる光の量を調節する絞り、１１４は絞り１１３の開け閉めをシステムコントロール部１０４の制御に従い行う絞り制御部である。
【００１２】
接続について説明する。レンズ１０１はセンサ１０２の受光面に絞り１１３を通して被写体の光学画像を結像する。センサ１０２の出力は第一信号処理部１０３の入力に接続され、第一信号処理部１０３の出力は画像ファイル生成部１１１の入力に接続され、画像ファイル生成部１１１の出力は画像記録部１０９の入力に接続され、システムコントロール部１０４のそれぞれの出力はセンサ１０２、レンズ制御部１０５、絞り制御部１１４、第一信号処理部１０３、画像記録部１０９、画像ファイル生成部１１１、発光部１０６に接続され、システムコントロール部１０４の入力には受光部１０７の出力、レンズ制御部１０５の出力、第一信号処理部１０３のカメラ自動制御用出力が接続されている。
【００１３】
動作について説明する。システムコントロール部１０４は、発光部１０７に発光を行う命令を出し、さらに発光された光の反射光の受光結果を受光部１０６から受け取り、発光部１０６に信号を送ってから、受光部１０７より受光結果が届くまでの時間差から距離を求める。次にシステムコントロール部１０４は、レンズ制御部１０５に命令を出して測距した距離に合焦するようにレンズの位置を変える等の制御を行い、また、絞り制御部１１４に命令を出して、絞り１１３を開ける、あるいは閉める制御を行って被写界深度を調節する。レンズ制御部１０５は、レンズ１０１の視野角の情報をシステムコントロール部１０４に送る。そのためレンズ制御部１０５は視野角抽出部を兼ねている。周知のとおり、視野角はレンズ１０１の焦点距離に応じて定まる。センサ１０２は、このように調節された光学系がセンサ１０２の受光面に作った像に対応した電気信号を出力する。
【００１４】
第一信号処理部１０３は、この電気信号にシステムコントロール部１０４の制御を受けてカメラ用の信号処理を施す。この際、明るさを一定にする、または、ホワイトバランスを一定に保つといったカメラ自動制御を行うための情報を第一信号処理部１０３からシステムコントロール部１０４に送り、この情報をもとにシステムコントロール部１０４は新たに第一信号処理部１０３の各処理を制御する。このようにして自動制御ループを形成している。画像ファイル生成部１１１は、生成した映像信号に画像圧縮等の信号処理を施し、その際にレンズ制御部１０５から送られたレンズの視野角などの撮影状態を示すデータを取込む動作も行う。画像ファイル生成部１１１の出力は画像記録部１０９にて記録される。
ここで画像ファイル生成部１１１に入力される撮影状態を示すデータについて説明する。記録するデータは、撮影した画像からでは分析することが困難な情報を含んでいる。たとえば前記のようにレンズ１０１の視野角を示すデータである。よってシステムコントロール部１０４は、視野角を示すデータを画像ファイル生成部１１１に出力する。
【００１５】
次に図２を用いて画像ファイル生成部１１１の動作について説明する。
図２は、ＪＰＥＧ画像圧縮を行う場合の画像ファイル生成部１１１のブロック図である。
２０１は映像データ１１２をＪＰＥＧ基本処理単位である縦８ライン横８画素のブロックに分割するブロック分割部、２０２は分割された縦８ライン横８画素のブロックのデータをＪＰＥＧデータフォーマットであるＹＣｒＣｂに変換するＹＣｒＣｂ変換部、２０３は２次元離散コサイン変換により画像信号を空間周波数へ変換するＤＣＴ部、２０４は量子化テーブルを用いてＤＣＴ係数に対し１次元一様量子化を行う一様量子化部、２０５は１次元ＤＣ予測値を計算する１次元ＤＣ予測部、２０６は１次元ＤＣ予測値および量子化ＡＣ係数を可変長符号を用いてエントロピー符号化を行うエントロピー符号化部、２０７はシステムコントロール部１０４が出力した例えば視野角を示すデータである。
【００１６】
動作を説明する。ＪＰＥＧ画像圧縮の動作は、本発明の本質的な動作ではないため詳細説明は割愛し、本質的であるデータの挿入について説明する。エントロピー符号化部２０６は、撮影状態を示すデータをＪＰＥＧ画像ファイルのヘッダー部分に挿入する。例えば一般的なＪＰＥＧファイルのフォーマット規格であるExif規格を例に説明する。Exif規格にはユーザーがコメントを書き込むことができるタグがあり２バイト分の情報を書き込むことができる。このタグに視野角を示すデータ２０７の情報を書き込むことでエントロピー符号化部２０６はファイル内保存部を兼ねることとなる。これにより撮影した画像からでは分析することが困難な情報を画像ファイル内に記録することができる。また、２バイトの各ビットに識別子などの意味を持たせることでどのような状態データであるかを認識できる。
以上の動作により撮影した画像からでは分析することが困難な撮影状態の情報を画像ファイル内に納めることができる。これにより画像を撮影した後に撮影を行った瞬間の状態を確認することができる。
【００１７】
次に、図３、図４を用いて第二の実施例を説明する。
図３は、本実施例の撮像装置のブロック図である。
図４は、図３における第三信号処理部３０３のブロック図である。
３０１は第一信号処理部１０３の出力画像を記録する画像記録部、３０２はシステムコントロール部１０４が出力する撮影状態を示すデータを記録する状態データ記録部、３０３は画像記録部３０１と状態データ記録部３０２の出力をもとに新たな効果をもたらす信号処理を施す第三信号処理部、３０４は第一信号処理部１０３の出力と第三信号処理部３０３の出力を選択して出力する画像出力部である。画像記録部３０１と状態データ記録部３０２は、例えば記録媒体としてハードディスクを用いた記録ユニットである。双方が個別に記録媒体を備えても良く、同じ記録媒体上の異なる記録領域を使用しても良い。
【００１８】
接続について説明する。第一信号処理部１０３の出力とシステムコントロール部１０４の出力は画像記録部３０１のそれぞれ対応する入力に接続され、システムコントロール部１０４の別の出力は状態データ記録部３０２の入力に接続され、画像記録部３０１の出力と状態データ記録部３０２の出力とシステムコントロール部１０４の別の出力は第三信号処理部３０３のそれぞれ対応する入力に接続され、第一信号処理部１０３の出力と第三信号処理部３０３の出力とシステムコントロール部１０４の別の出力は画像出力部３０４のそれぞれの入力に接続される。ほかの接続と各部の働きは図１の実施例と同様である。
【００１９】
動作を説明する。図１の実施例と同様の動作は割愛する。第一信号処理部１０３で生成された映像信号は、画像記録部３０１で記録され、また、撮影状態を示すデータは、状態データ記録部３０２にて記録される。この際撮影状態を示すデータは、映像信号の同期信号と同じタイミングで記録されるため、映像信号と撮影状態を示すデータは時間的なずれを持つことなく記録できる。
【００２０】
このようにして記録された映像信号と撮影状態を示すデータは、システムコントロール部１０４によって時間的なずれのない関係を維持したまま読み出され、第三信号処理部３０３にて所定の信号処理を施される。この信号処理は撮影状態を示すデータがあることで実施できる、あるいは効果が向上する信号処理である。第一信号処理部１０３と第三信号処理部３０３のそれぞれの出力は、システムコントロール部１０４の制御に従い画像出力部３０４を通して、ユーザーの指示に応じてどちらか一方が選択されて出力される。
以上の動作により撮影した画像からでは分析することが困難な情報を映像信号と関連つけて記録することができるようになる。また、その関係を保持したまま読み出すことで新たな効果を期待できる信号処理を施すことが可能となる。
【００２１】
次に図４を用いて、第三信号処理部３０３の処理の一例を挙げて説明する。
４０１は信号記録部３０１が出力する映像信号、４０９は状態データ記録部３０２が出力する状態データ、４１０はシステムコントロール４１０が出力する制御信号である。４０２は映像信号４０１に二値化処理を施す二値化部、４０３は人の顔と認識するための条件をデータ化したデータベース、４０４はデータベース４０３のデータと二値化部４０２の結果とが一致する項目数から人の顔であるか否かを判定する顔判定部、４０５は状態データ４０９を参照しながら顔判定部４０４が顔と判定した被写体までの距離を演算により算出する距離算出部、４０６は顔判定部４０４が顔と判定した被写体を囲む最小の領域を算出する顔領域算出部、４０７は入力された映像信号のうち顔領域算出部４０６が出力した領域内だけに所定の信号処理を施す信号処理部、４１１は映像信号４０１を遅延させる遅延部である。
【００２２】
接続について説明する。映像信号４０１は二値化部４０２と遅延部４１１と距離算出部４０５と顔領域算出部４０６のそれぞれの入力に接続し、二値化部４０２の出力とデータベース４０３の出力は、顔判定部４０４のそれぞれの入力に接続され、顔判定部４０４の出力は距離算出部４０５の別の入力と顔領域算出部４０６に接続され、距離算出部４０５の出力と顔領域算出部４０６の出力と遅延部４１１の出力は信号処理部４０７のそれぞれの入力に接続され、状態データ４０９は距離算出部４０５の別の入力に接続され、制御信号４１０は信号処理部４０７と顔領域算出部４０６の入力に接続される。
【００２３】
動作について説明する。二値化部４０２は、映像信号４０１の輝度レベルを参照し、所定の値を閾値として閾値以上の輝度レベルである場合と閾値未満である場合の二値に分別する。これにより映像信号４０１に撮影されている物体の特徴が強調される。顔判定部４０４は、データベース４０３から人の顔として認識するためのいくつかの二値化パターンを読み出し二値化部４０２の出力と比較して一致するパターンが所定数より多い場合に人の顔であると判定する。この結果を受けて距離算出部４０５と顔領域算出部４０６は動作状態になる。
【００２４】
距離算出部４０５は、状態データ４０９を参照しながら映像信号４０１から人の顔と判定された被写体までの距離を算出する。また、顔領域算出部４０６は、人の顔と判定された被写体の輪郭を背景との信号量の違い等から算出して信号処理部４０７に出力する。ここまでの動作は映像信号４０１を画像記録部３０１から読み込んだときに開始される。次に信号処理部４０７は、遅延部４１１から読み出された映像信号に距離算出部４０５の出力結果を用い、また信号処理を施す際の有効範囲として顔領域算出部４０６の算出結果を用いることで、人の顔と判定された被写体のみに重点を置いた信号処理を施すことができる。このように人の顔と判定された被写体別に撮像装置までの距離を算出して距離に応じた信号処理を施すことができる。なお、遅延部４１１は、映像信号４０１を読み込んだ後、距離算出部４０５や顔領域算出部４０６での算出が完了するまでの時間遅延を補償している。
【００２５】
次に、図５を用いて距離算出部４０５の動作について、状態データ４０９として与えられた情報がレンズの視野角θであった場合について説明する。
図５は、図４における距離算出部４０５の距離算出方法を説明する図である。
５０１は撮影に用いる撮像装置、５０２は撮影した被写体、５０３は状態データ４０９として与えられた視野角θ、５０４は撮像装置５０１が撮影した静止画である。
動作について説明する。被写体５０２は、顔判定部４０４で想定している“（例えば人の）顔”と判定されている被写体である。そのため顔の実際の横幅サイズ（図中のＷ）はデータベース４０３を見れば予想することが容易な数値であり、ここでは一般的な人の顔の横幅平均値とする。この際、Ｗの値が推測できると静止画５０４の全幅の１／２に相当する実際のシーン中の撮影されている横幅（図中のＷＡ）が下記数式（１）より推測できる。人の顔の横幅を構成する画素数をＰピクセル、静止画５０４の全幅の１／２の長さを構成する画素数をＱピクセルと表すと、
ＷＡ  ＝  Ｗ  ×  Ｑ  ／  Ｐ  ・・・・・・数式（１）
で表すことができる。
【００２６】
よって視野角θとＷＡの幅にて、撮像装置５０１と被写体５０２間の距離（図中のＬ）が下記数式で表すことができる。
【００２７】
Ｌ  ＝  ＷＡ／tanθ            ・・・・・・数式（２）
このようにして被写体５０２までの距離を算出する。静止画５０４内に人の顔と判定された被写体が複数個あったとしても同様に視野角θとＷＡの幅が分れば上記式によって被写体別に距離を求めることができる。
【００２８】
以上の動作により、撮影した画像からでは分析することが困難な撮影状態の情報を画像ファイル内に納めることができ、またこの情報を読み出すことで撮影した後に撮影を行った瞬間の状態を確認し、撮影状態の情報を用いて新たな効果を期待できる信号処理システムを構築することができる。具体的には静止画上に存在する各被写体と撮影装置までのそれぞれの距離が分ることから被写界深度を浅くする、または、深くするといったぼかしの演出を行うことができる。
【００２９】
例えば前記した距離が短い場合、被写界深度を浅くすれば目的とした被写体を明確にする効果がある。また、被写体ごとの距離を参照してぼかし具合を決定することで画面一様の処理とは異なり演出の幅を広げることができる。例えば目的とした被写体が複数あって前記した距離が互いに異なる場合、被写界深度を深くすれば複数の被写体の多くを明確にする効果がある。
処理を行う以前の原画像は画像記録部３０１に保存されている。このためユーザーはこれらの処理を、異なる演出効果のもとで被写体を撮像した後に繰返し行うことができる。
また、第三信号処理部３０３は、図１における画像記録部１０９の後段につけても、静止画再生時に同様の効果が得られることは言うまでも無い。
【００３０】
次に、図６を用いて第三の実施例を説明する。
図６は、第三の実施例における撮像装置のブロック図であって、図４のブロック図に基準としたい被写体を決定する基準決定部６０１を新たに追加したものである。基準決定部６０１の出力はシステムコントロール部１０４の入力に接続されている。なお、基準決定部６０１は例えば、撮像装置のタッチパネル式の表示部（図示せず）に表示されたモニター画面上で、ユーザーが基準としたい被写体に触れることにより基準を決定すると良い。
【００３１】
第三信号処理部３０３内の顔領域算出部４０６に与えるシステムコントロール部１０４の出力４１０には、基準決定部６０１が出力した縦軸、横軸の座標を示す情報も与えられる。この情報は、映像信号４０１内に複数個存在する被写体の中で基準としたい被写体を選ぶために、映像信号中の該被写体の位置を示した情報である。顔領域算出部４０６は、算出した領域の中から基準決定部６０１が出力した縦軸、横軸の座標が含まれる領域を検索して、該当した算出領域には識別信号を印加して信号処理部４０７に出力する。信号処理部４０７は識別信号が印加された領域に対応して距離算出部４０５が出力する距離情報を基準として、被写体ごとに基準とした被写体との差分距離を算出する。この差分を用いて信号処理を施す。
【００３２】
以上の動作により撮影した装置から基準とした被写体までの距離と、他の被写体までの距離との差分を用いて差分値が大きくなるに従いソフトフォーカス効果を強くする信号処理を第三信号処理部３０３が施すことができ、たとえば選択した被写体を中心に被写界深度を浅くするといった効果のある信号処理を行うことができる。第三信号処理部３０３は、図１における画像記録部１０９の後段につけても同様の効果が得られることは言うまでも無い。
また、上記ではＪＰＥＧのＥxifファイルに記録する例を示したが、動画像の圧縮方式であるＭＰＥＧフォーマットを用いた動画ファイル等にも、状態情報を記録し、動画再生時に上記第三信号処理３０３にてリアルタイムで画像演出を施してもよい。このように前記した実施例に対して変更を加えた実施例を考えることができるが、いずれも本発明の範疇にある。
【符号の説明】
【００３３】
１０１：レンズ、１０２：センサ、１０３：第一信号処理部、１０４：システムコントロール部、１０５：レンズ制御部、１０６：発光部、１０７：受光部、１０８：赤外線受発光部、１０９：画像記録部、１１１：画像ファイル生成部、１１３：絞り、１１４：絞り制御部、２０１：ブロック分割部、２０２：ＹＣｒＣｂ変換部、２０３：ＤＣＴ部、２０４：一様量子化部、２０５：１次元ＤＣ予測部、２０６：エントロピー符号化部、３０１：画像記録部、３０２：状態データ記録部、３０３：第三信号処理部、３０４：画像出力部、４０２：二値化部、４０３：データベース、４０４：顔判定部、４０５：距離算出部、４０６：顔領域算出部、４０７：信号処理部、４１１：遅延部、５０１：撮像装置、５０２：被写体、６０１：基準決定部。
【図１】
2013009182.tif 000003
【図２】
2013009182.tif 000004
【図３】
2013009182.tif 000005
【図４】
2013009182.tif 000006
【図５】
2013009182.tif 000007
【図６】
2013009182.tif 000008