(57)【要約】【課題】撮影シーンのブラケット撮影を実施し、動画撮影においても撮影シーンのブラケット撮影を実施し、高確率でユーザに所望の形態として提供すること。【解決手段】撮影待機中に撮影シーンを解析する解析手段と、互いに異なるパラメータを変更する複数のブラケット撮影手段と、撮影シーンの解析結果に基づいて、複数のブラケット撮影手段からブラケット撮影を選択するブラケット選択手段を持ち、複数の動画が記録可能であればＡＦ／ＡＥの追従範囲を広げると共に、ブラケット選択手段の選択結果に応じて、パラメータのうち一つを変更して複数の動画撮影を行う手段を設け、解析結果に基づいて再生の順番を決定し、記録された動画を連続して再生することを特徴とする。【選択図】図２
2016082263.tif 000002
【特許請求の範囲】
【請求項１】
撮影待機中に撮影シーンを解析する解析手段と、
互いに異なるパラメータを変更する複数のブラケット撮影手段と、
前記撮影シーンの解析結果に基づいて、前記複数のブラケット撮影手段からブラケット撮影を選択するブラケット選択手段を持ち、
複数の動画が記録可能であればＡＦ／ＡＥの追従範囲を広げると共に、
前記ブラケット選択手段の選択結果に応じて、前記パラメータのうち一つを変更して複数の動画撮影を行う手段を設け、
前記解析結果に基づいて再生の順番を決定し、
記録された動画を連続して再生する事を特徴とすることを特徴とする動画撮像装置。
【請求項２】
ブラケット選択手段において、
撮影シーンに含まれる被写体に距離差がある場合はフォーカスブラケット撮影、
撮影シーンのコントラストが高い場合は露出ブラケット撮影、
撮影シーンに複数の色が存在する場合はＷＢブラケット撮影、
被写体もしくは撮像装置が動いている場合は被写体拡大撮影、
を選択することを特徴とする請求項１に記載の動画撮像装置。
【請求項３】
前記撮影シーン解析結果によって、
前記ブラケット選択の撮影順位もしくは、再生順位が変化することを特徴とする請求項１又は請求項２に記載の動画撮像装置。
【請求項４】
前記撮影シーン解析には、
複数のＡＦ枠から得られた被写体距離情報と、複数の領域分割によって得られた色、輝度情報を用いることを特徴とする請求項１乃至請求項３の何れか一項に記載の動画撮像装置。
【請求項５】
撮影された複数の動画の再生順位を任意に変更できる手段を持つ事を特徴とする請求項１乃至請求項４の何れか一項に記載の動画撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体に応じたブラケット撮影を行う撮像装置における画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
同じ撮影シーンであっても撮像装置の撮影条件設定（露出・ピント位置・WB等）によって写真の表現は様々に変化し、そのため撮影シーンの撮影条件をユーザが選択することは簡単ではない。よって撮影に失敗しないため、あるいは異なる写真表現を楽しむ目的で、複数の被写体が混在するシーンやコントラストの高いシーンなど、撮影条件設定が難しいシーンをユーザが撮影する場合において、予め設定された露出・ピント位置・WB設定などを変更した複数の条件で撮影を行うブラケット撮影機能を有するデジタルカメラが数多く開発されている。
【０００３】
特許文献１には、ブラケット撮影が可能なデジタルカメラが開示されている。特許文献１のデジタルカメラは、複数のパラメータに基づいて同一の被写体を撮影して複数の画像を生成し、複数の画像をパラメータの段階ごとに異なるタイミングで表示する。
【０００４】
しかしながら、上記機能を使いこなすには、少なくともどういったシーンでどのような撮影条件をブラケットすることが効果的であるかどうかを判断することができる知識レベルがユーザに求められており、誰でも簡単に効果的なブラケット撮影を実施するということが困難であった。さらに動画撮影に至っては適切な効果を付帯して適切な形態でユーザに提供する事が困難であった。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−６７４６４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は上記の様な課題を鑑みてなされたものであり、撮影シーンのブラケット撮影を実施し、動画撮影においても撮影シーンのブラケット撮影を実施し、高確率でユーザに所望の形態として提供できる撮像装置を提供することにある。
【課題を解決するための手段】
【０００７】
上記課題を解決するため、本発明における撮像装置は、撮影待機中に撮影シーンを解析する解析手段と、互いに異なるパラメータを変更する複数のブラケット撮影手段と、前記撮影シーンの解析結果に基づいて、前記複数のブラケット撮影手段からブラケット撮影を選択するブラケット選択手段を持ち、複数の動画が記録可能であればＡＦ／ＡＥの追従範囲を広げると共に、前記ブラケット選択手段の選択結果に応じて、前記パラメータのうち一つを変更して複数の動画撮影を行う手段を備え、前記解析結果に基づいて再生の順番を決定し、記録された動画を連続して再生することを特徴とする。
【発明の効果】
【０００８】
本発明の撮像装置によれば、ユーザは煩雑な設定やカメラに関する高度な知識を必要とすることなく、適切なブラケット撮影により、異なる複数の表現を持つ動画を提供することができる。
【図面の簡単な説明】
【０００９】
【図１】実施形態に係る撮像装置の構成例を示すブロック図である。
【図２】本発明の実施の形態における、ブラケット撮影処理フロー図である。
【図３】ブラケット種類の選択アルゴリズムの一例を示したフローチャートである。
【図４ａ】本発明により生成される動画ファイル群の一例である。
【図４ｂ】本発明により生成される動画ファイル群の一例である。
【発明を実施するための形態】
【００１０】
以下に、本発明の好ましい画像処理装置の実施形態について、添付の図面に基づいて詳細に説明する。
［実施例１］
図１は本実施形態に係る撮像装置の構成の一例を示すブロック図である。図１において、１は複数のレンズ群と絞り機構からなる撮影光学系であり、測距用レンズ（FocusLens）、ズーム用レンズ（ZoomLens）、及び絞り機構を含む。２はＣＣＤやＣＭＯＳ等からなる撮像素子であり、アナログ信号をデジタル信号に変換するＡ／Ｄ変換器を含む。表面は例えばベイヤー配列のようなＲＧＢカラーフィルタにより覆われ、カラー撮影が可能な構成となっている。被写体像が撮像素子２上で結像されると、画像データ（画像信号）を生成して、メモリ３に記憶される。
【００１１】
３はメモリであり、撮像素子２によって変換された画像信号や画像処理装置全般の処理に必要なデータを保持することができる。４はメモリ３に保持された画像信号に対して所定の画素補間処理や色変換処理等を行う画像処理回路である。画像処理回路４においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいて撮影条件を決定し、システム制御部５に撮影条件を通知する。また、画像処理回路４は画像の解析、フィルタ処理、合成処理などの機能を有し、後述するアルゴリズムに従って撮影シーンのブラケット撮影処理を選択するブラケット処理選択部を含む。
【００１２】
５は撮影系全体を制御するシステム制御部である。前記画像処理回路４が決定した撮影条件で撮影を行うためにシャッター速度、絞り機構、フォーカスレンズ及びズームレンズの制御を統括し、それぞれ、露光量制御部６、フォーカスレンズ制御部７、焦点距離制御部８に対して指示を行う。６は光学系１の絞り機構、撮像素子２の露光時間、及び撮影感度を調整し、適切な露光量制御を行う露光量制御手段である。７は光学系１のフォーカスレンズを制御するフォーカスレンズ制御部である。
【００１３】
８は光学系１のズーム用レンズを制御する焦点距離制御部であり、システム制御部の指示に従って焦点距離を変更する。９は画像をＪＰＥG等に圧縮する圧縮回路であり、生成された画像は記録媒体１０に記録される。１１は画像処理回路４によって生成された撮影画像をメモリから読み出し、撮像装置上のＬＣＤや外部モニタなどに表示する表示部である。
【００１４】
次に本発明の実施の形態に係るブラケット選択処理のアルゴリズムについて以下に説明する。図２は本発明におけるブラケット撮影処理フロー図である。まずステップＳ１００において、ＥＶＦ中に撮影シーンの解析を行う。撮影シーンの解析には、顔検出による人物検出や主要被写体検出などの被写体検出結果（ステップＳ１０１）、カメラ及び被写体の動き検出結果（ステップＳ１０２）、電子ビューファインダー（以下EVF）表示画像のヒスト解析結果（ステップＳ１０３）、及びフォーカススキャン結果（ステップＳ１０４）などを使用する。ステップＳ１１０では、前記シーン解析結果に応じて、ブラケット撮影の種類をカメラが自動的に判別する。
【００１５】
ここで、ブラケット種類は、露出量を変更する露出ブラケット、フォーカス位置を変更するフォーカスブラケット、ホワイトバランス係数を変更するＷＢブラケットなど、様々な種類のブラケットが選択可能であり、本発明に関わる撮像装置はそれらのブラケット撮影のうち少なくとも二つ以上のブラケット撮影手段を持つものとする。
【００１６】
以下、一例として、露出ブラケット、フォーカスブラケット、画像処理フィルターブラケットの機能を有するカメラを例に挙げて、ブラケット種類選択に関わるアルゴリズムについて図３を用いて説明する。
【００１７】
図３はステップＳ１１０におけるブラケット種類の選択アルゴリズムの一例を示したフローチャートである。以下にその詳細を説明する。図３のＳ２００では、図２のＳ１０１の被写体検出結果に応じた被写体判定を実施し、被写体が人・モノ・あるいは風景シーンなど特定の被写体が存在しないシーンの３種類に分岐する。
【００１８】
次に、Ｓ２０１において、図２のＳ１０２の動き検出結果に基づく動き判定を実施する。撮影画角内に少なくとも一つ以上の被写体が存在し、被写体動きが発生していると判断された場合、被写体拡大を選択する。被写体拡大は、スポーツや運動会などメインとなる被写体を強調して表情などを確認しやすくする事を目的としている。尚、被写体の動き検出を行う手段としては、ＥＶＦ表示画像中の被写体についてパターンマッチング等を用いて追尾し、その移動量を検知する方法などを採用すれば良い。
【００１９】
次に、Ｓ２０２において、図２のＳ１０４のフォーカススキャン結果に基づくフォーカス判定を実施する。ここでは、撮影画角内に含まれる被写体それぞれに関して、カメラから被写体までの距離、及び被写体から背景までの距離を推定する。被写体が複数存在し、かつそれらの距離が異なる位置関係にある場合、遠側、もしくは近側からフォーカスレンズを駆動して、近側、もしくは遠側まで駆動する事によって最初はわざと被写体をボケさせる動画を撮影する。これによって動画を鑑賞しているユーザは、最初にどのような被写体が映っているかを想像するので、常に被写体がはっきりしている動画に比べ想像性を膨らませる効果が得られる。
【００２０】
次に、Ｓ２０３において、図２のＳ１０３のヒスト解析結果に基づくヒスト判定を実施する。ここでは、ＥＶＦ表示画像中の輝度のヒストグラムを生成し、そのヒストグラムの分布からコントラスト判定を行う。コントラスト差が大きく、露出設定が難しいシーンであると判断した場合、露出を変更して動画撮影を行う露出ブラケット撮影を優先する。この場合も露出がオーバー、もしくはアンダー状態から記録を始める。これによってフォーカスブラケット同様に動画を鑑賞しているユーザは、最初にどのような被写体が映っているかを想像するので、常に被写体がはっきりしている動画に比べ想像性を膨らませる効果が得られる。
【００２１】
尚、Ｓ２０１〜Ｓ２０３の判定結果によっては、どのブラケット撮影も効果的でないと判断される場合が起こりえるが、この場合は特にブラケット撮影を必要とするシーンではないと判断し、通常の動画撮影を行う。
【００２２】
次に、前述のフォーカスブラケット撮影、及び露出ブラケット撮影のどちらの撮影も実施可能なシーンであると判断した場合について説明する。この時、図３のように被写体が人の場合はヒスト判定の結果に応じて露出ブラケット撮影を優先し、被写体がモノの場合はフォーカスブラケット撮影を優先する。
【００２３】
以上に述べたアルゴリズムに従って、撮影待機中に求めた撮影シーン情報に応じて、適切なブラケット種類をカメラが自動的に判別することが可能である。尚、本発明の他の実施形態として、ブラケット撮影種類の組み合わせや判定条件を変更して、上述したブラケット選択のアルゴリズムとは異なる構成で実現することも可能である。
【００２４】
次に、図２のステップＳ１２０において、上記ステップＳ１１０で選択されたブラケット種類に応じたブラケット撮影を実施する。複数枚撮影された画像データは図１のメモリ０３に格納される。
【００２５】
図２のステップＳ１３０において、図１の画像処理回路０４を用いた各種画像処理が実施される。ここでは、ステップＳ１３１の色変換処理によって特殊な色効果を付加、ステップＳ１３３のコントラスト変換処理によってガンマ変換を実施、ステップＳ１３４の画像切り出し処理により、被写体の拡大処理等の画像処理を行って、撮影した複数の動画から更に多くの動画のバリエーションを作り出すブラケット処理が可能である。図４にブラケット撮影画像に対し、ステップＳ１３０の画像処理によるブラケット処理を実施することで様々な効果を付加した画像を生成する場合の一例を示す。
【００２６】
図４において、ブラケット１とは前記図２のＳ１１０のブラケット選択によって選択されたブラケット撮影種類を示す。ブラケット１は前記選択された１種類のパラメータに関してブラケット撮影を実施し、Ｎファイル（例では露出ブラケット、Ｎ＝３）の動画を撮影する。図４aではフォーカスブラケット、図４bでは露出ブラケットの例となっている。
【００２７】
ブラケット２はブラケット１が合焦ピント位置、もしくは適正露出時の際、前記図２のＳ１３０の画像処理によって処理されるブラケット処理であり、図４においては色味を変換する処理を設定し、それぞれ複数のバリエーションを生成している。よって、最終的に、１回の撮影に対して、フォーカス、露出設定、色味の異なる複数の動画が生成される。これらの動画を連続して再生する事により大きなシーン変化が無くとも様々な効果が付帯された動画を撮影する事ができ、ユーザに異なる画像表現を提示することができる。また、効果の異なる動画の記録時間は所定時間固定としても良いし、ユーザが選択できる機構を設けても良い。さらにはフォーカスが遠側から合焦ピント位置へ移動するまでに要した時間で設定しても良い。
【００２８】
ステップＳ１４０では、Ｓ１２０でフォーカスブラケットを採用した場合、合焦ピント位置からさらにＳ１２０と同一方向にフォーカスレンズを駆動する事によって動画終了付近もわざと被写体をボケさせる動画を撮影する。これによって動画を鑑賞しているユーザは、動画が終了する際、結末の状態を想像するので、最後まで被写体がはっきりしている動画に比べ想像性を膨らませる効果が得られる。
【００２９】
また、Ｓ１２０で露出ブラケット撮影を採用した場合、露出を徐々にオーバー、もしくはアンダー状態な状態へ設定して記録を終了する。これによってフォーカスブラケット同様に動画を鑑賞しているユーザは、動画が終了する際、結末の状態を想像するので、最後まで被写体がはっきりしている動画に比べ想像性を膨らませる効果が得られる。
【００３０】
今回の実施例ではフォーカス、露出設定を変更した後、色味を変更し、その後フォーカス、露出設定を変更して終了している。前述したようにこれらの複数の効果が得られた動画はそれぞれ記録データとして残しているのでユーザにこの順番を変更できるような手段を提供しても良い。
【００３１】
以上に述べたように、本実施例に基づく発明は、撮影シーン解析結果に応じた適切なブラケット撮影を自動的に選択することにより、撮影失敗の確率を大きく低減し、高確率でユーザに所望の動画を提供することができる。また、撮影画像に対して色効果や画像切り出し等の複数の画像処理を組み合わせることにより、異なる複数の表現を持つ動画をユーザは簡単に取得することができる。
【符号の説明】
【００３２】
１  光学系、２  撮像素子、３  メモリ、４  画像処理回路、５  システム制御部、
６  露光量制御部、７  フォーカスレンズ制御部、８  焦点距離制御部、９  圧縮回路、
１０  記録媒体、１１  表示部
【図１】
2016082263.tif 000003
【図２】
2016082263.tif 000004
【図３】
2016082263.tif 000005
【図４ａ】
2016082263.tif 000006
【図４ｂ】
2016082263.tif 000007