(57)【要約】【課題】  静止画同時記録時、所定時間内に被写体検出結果を得られない場合、処理を打ち切る。この際、静止画に対し、所望のパラメータにて画像処理を行うことができない。そこで静止画に対する被写体検出処理を継続し、毎Ｖ検出結果を取得し、静止画の記録画像の品質向上を図ることができるシステムを提供することを目的とする。【解決手段】  複数の被写体検出回路を有し、動画静止画同時記録時に複数の被写体検出回路のうち、何れか一つを静止画用の被写体検出に使用し、それ以外を動画用の被写体検出処理用とする。動画に対する被写体検出手段の設定を換え、動画用の被写体検出処理のシーケンスを変更する。【選択図】  図１
2012124770.tif 000002
【特許請求の範囲】
【請求項１】
デジタルカメラ、デジタルビデオカメラのように撮像手段から入力された映像、あるいは音声入力手段から入力された音声情報を該デジタルカメラ、デジタルビデオカメラの有する記録媒体に記録し、該記録媒体に記録された映像、音声情報を記録媒体から読み出し、再生することができ、更に複数の被写体を検出する手段を有し、すべての被写体検出回路に同じ画像を入力する撮像装置において、通常動画記録時には、該複数の被写体検出回路のうち、全部を動画用に割り当て、動画静止画同時記録時には、該複数の被写体検出回路のうち、何れか一つを静止画用の被写体検出に使用し、それ以外を動画用の被写体検出処理用とすることを特徴とする複数の被写体検出手段を有する撮像装置。
【請求項２】
動画静止画同時記録時において、複数ある被写体検出回路の割り当ては、静止画トリガの押されたタイミング時に処理が開始される被写体検出回路を静止画用に割り当てることを特徴とする請求項１に記載の複数の被写体検出手段を有する撮像装置。
【請求項３】
動画静止画同時記録時において、動画用の被写体検出処手段の設定を変え、該被写体検出処手段の被写体処理のシーケンスを変更する手段を有することを特徴とする請求項１又は請求項２に記載の複数の被写体検出手段を有する撮像装置。
【請求項４】
被写体検出結果の履歴を監視する手段し、動画記録中に静止画トリガが押された直前のタイミングにおける該履歴情報に基づいて、動画用に割り当てた被写体検出処手段のパラメータを設定することを特徴とする請求項１乃至請求項３の何れか１項に記載の複数の被写体検出手段を有する撮像装置。
【請求項５】
撮影画角中に存在する被写体の数に応じて動画用に割り当てた被写体検出処手段のパラメータを設定することを特徴とする請求項４に記載の複数の被写体検出手段を有する撮像装置。
【請求項６】
撮影画角中に存在する被写体の位置に応じて動画用に割り当てた被写体検出処手段のパラメータを設定することを特徴とする請求項４に記載の複数の被写体検出手段を有する撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラ、デジタルビデオカメラのように撮像手段（センサ）から入力された映像、あるいは音声入力手段から入力された音声情報を該デジタルカメラ、デジタルビデオカメラの有する記録媒体に記録し、該記録媒体に記録された映像、音声情報を記録媒体から読み出し、再生することができる撮像装置における被写体検出手段の制御手法に関する。
【背景技術】
【０００２】
撮像装置における被写体検出手段において、被写体検出処理の応答性を高めるため、動画静止画同時記録時においては、検出結果を得られない場合、被写体検出処理を打ち切っている。
【０００３】
また、予め動画用、静止画用とで機能ブロックを分け、撮像装置の処理負荷を軽減させ、動画、静止画に対し、最適な処理を施していた。（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−６０１６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、撮像装置の処理負荷を軽減させるため、予め動画用、静止画用とで機能ブロックを分けると、撮像装置のシステムが冗長になり、その結果、コストアップにつながる。
【０００６】
また、被写体検出処理を打ち切ってしまうと検出結果が得られなくなり、撮影した静止画、あるいは動画に対し、所望のパラメータにて最適な画像処理を行うことができなくなってしまう。
【０００７】
図２（１）は、複数の被写体検出回路を有する撮像装置における動画静止画同時記録時のタイミングチャートである。
【０００８】
図中、VDは垂直同期信号であり、撮像装置における被写体検出処理を含む信号処理は該垂直同期信号に同期して実行される。被写体検出部が４つある場合（図中、Ａ〜D）、各々被写体検出処理によって得られる検出結果は、被写体検出の際に使用される検出用画像（X_０〜X_１５）を取得してから４VD後に該被写体検出結果（図中、網点部X_０〜X_１４）が得られるとする。
【０００９】
しかし、動画記録中に静止画を記録する場合、被写体検出結果を得るタイミングは更に遅延する。図中、VD３のタイミング（Ｔｒｉｇ．）で撮影者が静止画ボタンを押印したとする。
【００１０】
この場合、４つある被写体検出部のうち、被写体検出部Ｄにおける被写体検出結果（網点部X_３）が４VD後に得られない場合、該被写体検出処理を打ち切ってしまう。その結果、被写体検出結果は、検出用画像X_３に対する検出結果のみ得られない（図中、検出結果の点線部）。
【００１１】
すなわち、動画記録中の静止画記録した画像に対する被写体検出結果のみ得られない。
【００１２】
また、被写体検出処理を打ち切らずに継続させた場合、図２（２）に示すように、例えば８ＶＤ後に被写体検出結果が得られた場合、検出用画像X_３に対する検出結果は遅延して得られるので（図中、網点部Ｘ_３）、被写体検出部Ｄの処理中は、被写体検出結果Ｘ_３は本来検出すべきタイミングで、被写体検出結果を取得できない（図中、検出結果の点線部１）。
【００１３】
更に、検出処理を継続しているため、被写体検出結果Ｘ_７に対する検出処理が行われなくなる。その結果、被写体検出結果Ｘ_７が取得できなくなる（図中、検出結果の点線部２）。
【００１４】
そこで、本発明は、動画静止画同時記録時における静止画に対する被写体検出処理を打ち切らずに継続し、動画、静止画ともに毎ＶＤ被写体検出結果を取得し、動画に対する被写体検出処理を損なうことなく、撮影した静止画に対し、所望のパラメータにて最適な画像処理を行い、静止画の記録画像の品質向上を図ることができるシステムを提供することを目的とする。
【課題を解決するための手段】
【００１５】
上記目的を達成するために、本発明の被写体検出手段を有する撮像装置は、複数の被写体検出回路を有し、すべての被写体検出回路に同じ画像を入力する撮像システムにおいて、通常動画記録時には、すべての被写体検出回路を動画用に割り当て、動画静止画同時記録時には、複数の被写体検出回路のうち、何れか一つを静止画用の被写体検出に使用し、それ以外を動画用の被写体検出処理用とし、動画に対する被写体検出手段の設定を換え、動画用の被写体検出処理のシーケンスを変更し、毎ＶＤ検出結果を得られるようにする。
【発明の効果】
【００１６】
本発明によれば、動画静止画同時記録時における静止画に対する被写体検出処理を打ち切らずに継続し、動画、静止画ともに毎ＶＤ被写体検出結果を取得し、動画に対する被写体検出処理を損なうことなく、撮影した静止画に対し、所望のパラメータにて最適な画像処理を行い、静止画の記録画像の品質向上を図ることができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の第１、２の実施の形態に係るデジタルカメラ、デジタルビデオカメラ等の撮像装置の概略構成を示すブロック図である。
【図２（１）】従来の撮像装置における被写体検出処理のタイミングチャート
【図２（２）】従来の撮像装置における被写体検出処理のタイミングチャート
【図３】本発明の第１、２の実施の形態に係る撮像装置における被写体検出処理のタイミングチャート
【図４】従来の撮像装置における被写体検出の検出枠の一例
【図５】本発明の第１の実施の形態に係る被写体検出の検出枠の一例
【図６】本発明の第２の実施の形態に係る被写体検出の検出枠の一例
【発明を実施するための形態】
【００１８】
以下、図面を参照しながら、本発明の実施の形態を詳細に説明する。
【００１９】
（第１の実施の形態）
図１は、本発明の第１の実施の形態に係る複数の被写体検出部を有するデジタルカメラ、デジタルビデオカメラ等の撮像装置のブロック図である。
【００２０】
［実施例１］
以下に、本発明の好適な実施形態を用いる撮像装置の構成について図１のブロック図を参照しながら説明する。
【００２１】
図中、１０１はフォーカスレンズ、１０２はＣＭＯＳ等の固体撮像素子、１０３は該ＣＭＯＳ等の固体撮像素子１０２から読み出された信号をディジタル信号に変換するＡ／Ｄ変換処理を実行するセンサインターフェース（センサＩ／Ｆ）部、１０４はディジタル信号に変換された固体撮像素子からの信号を処理し、画像データを生成するカメラ信号処理部、１０５は画像データを高精細な静止画生成のためにインターレース方式の信号からプログレッシブ方式の信号に変換するＩＰ変換部、１０６は画像データを動画像記録の画角にするための動画リサイズ部、１０８は動画リサイズ部１０７にてリサイズした画像に対するＮＲ（Ｎｏｉｓｅ  Ｒｅｄｕｃｔｉｏｎ）処理部、１０８は、動画像の画角にリサイズされた画像データを符号化する動画符号化部、１０９は、映像信号と音声情報入力手段であるマイクロフォン（不図示）からの音声情報信号を記録するフォーマットに変換する記録信号処理部であり、更に、音声データを復号処理し、音声信号としてスピーカー（不図示）に送る。１１０は、映像情報、音声情報を記録する記録媒体である。
【００２２】
１１１は、ＪＰＥＧ等の符号化処理を行う静止画符号化部、１１２は、ＪＰＥＧ等の静止画符号化手段にて符号化された静止画像データを格納するＳＤカード等の静止画記録媒体、１１３は、各種信号処理部と符号化手段等の機能ブロックにて処理されたデータを一旦、格納するＳＤＲＡＭ等のメインメモリであり、該各機能ブロックは、該メインメモリ１１３をシェアして使用しており、該メインメモリ１１３を介して信号処理データ、画像データの受け渡しを行っている。１１４は、該メインメモリ１１３に対する各機能ブロックからのアクセス要求を制御し、アクセスを調停するアービター部、１１５〜１１８は、ＣＭＯＳ等の固体撮像素子１０２から読み出した画素データをディジタル信号に変換された画素データにおいて撮影している被写体を検出する被写体検出部、１１９は、被写体検出部１１５〜１１８において検出された被写体検出結果を一旦格納するバッファ部、１２０は、本撮像装置を制御するシステム制御部である。
【００２３】
尚、本実施形態では、被写体検出部Ａ〜Ｄ（１１５〜１１８）にて検出するものは、例えば被写体における「顔」あるいは、他の部位でもよい。
【００２４】
本撮像装置において、動画静止画同時記録時におけるタイミングチャートを図３に示す。
【００２５】
図中、VDは垂直同期信号（以後、ＶＤ）であり、撮像装置における被写体検出処理を含む信号処理は該ＶＤに同期して実行される。図中、Ｔｒｉｇ．は撮影者が動画記録中に静止画を記録する際、静止画ボタンを押印したタイミングである。
【００２６】
該Ｔｒｉｇ．より以前（ＶＤ０〜３期間）の時間、すなわち、動画記録中は、被写体検出用画像X０〜X２に対する被写体検出結果は、該被写体検出用画像X０〜X２に基づいて検出処理を実行してから４ＶＤ後（ＶＤ４〜６期間）に該被写体検出用画像に対する検出結果（網点Ｘ_０〜Ｘ_２）を取得する。
【００２７】
撮影者が静止画を記録しようとして静止画ボタンを押印した場合、すなわち図中、Ｔｒｉｇ．のタイミングにおいてシステム制御部１２０からの指示により、被写体検出部Ｄ（１１８）を静止画に対する被写体検出専用とする。その他の被写体検出部Ａ〜Ｃ（１１５〜１１７）は動画用の被写体検出部とする。
【００２８】
また、システム制御部１２０からの指示により、Ｔｒｉｇ．のタイミング以降、動画用の被写体検出部Ａ〜Ｃ（１１５〜１１７）に対し、短周期で検出結果を得られるように該被写体検出部Ａ〜Ｃ（１１５〜１１７）における検出シーケンスを変更する。
【００２９】
ここでは、被写体検出用画像に基づいて検出処理を実行してから３ＶＤ後に該被写体検出用画像に対する検出結果を取得できるようにシーケンスを変える。
【００３０】
被写体検出処理は、図４に示すように被写体検出に使用する画像において、例えば２０画素×２０画素の検出枠を用いて、検出に使用する画像全体に渡り、該被写体を判別する。
【００３１】
短周期で被写体検出結果を得られるようにするには、該検出枠のサイズを大きくする。
【００３２】
例えば、図５に示すように４０画素×４０画素の検出枠とし、検出枠を大きくして、検出に使用する画像全体に渡り、該被写体を判別することにより、検出枠のサイズ変更前よりも短周期で該被写体を判別できる。
【００３３】
該シーケンスの変更は、静止画に対する被写体検出の結果が得られるまで、継続させる。
【００３４】
本実施例では、静止画に対する被写体検出用画像Ｘ_３に基づいて検出処理を実行してから８ＶＤ後（ＶＤ１１）に該被写体検出用画像に対する検出結果（網点Ｘ_３）を取得したＶＤ（ＶＤ１１）まで継続し、それ以降（ＶＤ１２以降）は検出シーケンスを元に戻す。
【００３５】
すなわち、ＶＤ１１まで短周期で検出結果を得られるように検出シーケンスを変更する。
【００３６】
また、検出シーケンスを変更している間は、バッファ１１９に検出結果（Ｘ_４〜Ｘ_１０）を格納する（図中、灰色部）。
【００３７】
静止画に対する被写体検出結果に対しては、その直前の画像に対する検出結果（図中、Ｘ_２）で補間し、それ以外の検出シーケンスを変更している間は、該バッファ１１９に格納された検出結果を１ＶＤ遅延させて、補間する（図中、Ｘ_７）。
【００３８】
こうすることにより、被写体検出における打ち切り処理を行う必要がなくなり、静止画に対する被写体検出結果を取得でき、該検出結果に基づき、カメラ信号処理部１０４にて最適なホワイトバランス等、静止画に対する最適な画像処理を施すことが可能となり、静止画の記録画像の品質向上を図ることができる。
【００３９】
また、静止画に対する被写体検出処理中、取得できない検出結果も取得できるようになり、動画記録中の静止画記録においても毎ＶＤ期間、被写体検出結果を取得することができる。
【００４０】
［実施例２］
実施例１では、動画用に割り当てた被写体検出部における検出処理のシーケンスを変更する手段として、被写体検出用画像における検出枠のサイズを変更させ、動画静止画同時記録時に短周期で検出結果を得る構成を説明したが、ここでは他の方法を用いて短周期で検出結果を得る構成を説明する。
【００４１】
図１のブロック図において、システム制御部１２０にて、撮影者が動画記録中に静止画を記録する際、静止画ボタンを押印するタイミングを検出し、該タイミングまでの被写体検出部Ａ〜Ｄ（１１５〜１１８）にて検出された検出結果の履歴情報に基づき、動画用に割り当てた被写体検出部に対し、最適なパラメータの変更を行う。
【００４２】
例えば、撮影者が動画記録中に静止画を記録する際、静止画ボタンを押印するタイミング（図３中、Ｔｒｉｇ．）までに被写体検出部Ａ〜Ｄ（１１５〜１１８）により取得した被写体検出結果（ＶＤ０〜３期間の履歴）において、被写体が撮影画角の中央付近に集中していた場合、図６に示すように動画用に割り当てた被写体検出部に対する検出枠の位置を中央付近に集中させる。
【００４３】
すなわち、被写体検出用の画像において、画像全体に渡り、該被写体を判別することなく、被写体が存在する付近に対してのみ被写体検出処理を行うことにより、短周期で該被写体を判別できる。
【００４４】
以上のように、本実施の形態の複数の被写体検出手段を有する撮像装置によれば、動画静止画同時記録時において、複数ある被写体検出回路に対し、静止画トリガの押されたタイミング時に処理が開始される被写体検出回路を静止画用に割り当て、それ以外を動画用と割り当て、該動画用の被写体検出処手段の設定を変え、静止画に対する被写体検出結果が得られるまで、動画に対する被写体検出処理のシーケンスを変更することにより、被写体検出処理の打ち切り処理を行わないので、静止画に対する被写体の検出結果を取得でき、静止画用の被写体検出部の駆動時に取得できない被写体検出結果の欠落も抑制でき、静止画に対する被写体検出処理中、動画に対する被写体検出精度の低下を最小限に抑えることができる。
【符号の説明】
【００４５】
１０１： フォーカスレンズ
１０２： 撮像素子
１０３： センサＩ／Ｆ部
１０４：カメラ信号処理部
１０５： ＩＰ変換部
１０６： 動画像リサイズ部
１０７： ＮＲ処理部
１０８： 動画符号化部
１０９： 記録信号処理部
１１０： 記録媒体
１１１： 静止画符号化部
１１２： 静止画記録媒体
１１３： メインメモリ
１１４： メモリ制御部（アクセス調停部）
１１５〜１１８：被写体検出部
１１９：バッファ部
１２０：システム制御部
【図１】
2012124770.tif 000003
【図２（１）】
2012124770.tif 000004
【図２（２）】
2012124770.tif 000005
【図３】
2012124770.tif 000006
【図４】
2012124770.tif 000007
【図５】
2012124770.tif 000008
【図６】
2012124770.tif 000009