(57)【特許請求の範囲】
【請求項１】
対象物を撮像して得られる撮像画像を取得する画像取得部と、
上記撮像画像に対する色調整を含まない第１の画像処理によって視認性優先画像を生成する第１の画像処理部と、
上記撮像画像に対する所定の第２の画像処理によって画像効果が付与された効果処理画像を生成する第２の画像処理部と、
上記視認性優先画像を電子ビューファインダに表示すると共に、上記第２の画像処理の設定を変更するユーザ操作に基づいて第１の期間を設定し、設定した上記第１の期間に上記第２の画像処理の設定の変更に応じて変化する上記効果処理画像を背面表示パネルに表示し、上記電子ビューファインダに対する接眼状態を検出するアイセンサの出力によって上記撮像画像を出力する撮像部の撮影開始のための操作を検出すると上記第１の期間を終了させて上記効果処理画像の表示を終了させる表示制御部とを具備したことを特徴とする画像表示装置。
【請求項２】
上記表示制御部は、上記第１の期間以外の第２の期間に上記視認性優先画像のみを表示させ、上記第１の期間に上記効果処理画像のみを表示させることを特徴とする請求項１に記載の画像表示装置。
【請求項３】
上記表示制御部は、上記第１の期間以外の第２の期間に上記視認性優先画像のみを表示させ、上記第１の期間に上記視認性優先画像及び上記効果処理画像を同時に表示させることを特徴とする請求項１に記載の画像表示装置。
【請求項４】
上記第１の画像処理は、ハイダイナミックレンジ処理であり、
上記第２の画像処理は、ユーザの操作に基づく処理であることを特徴とする請求項１乃至３のいずれか１つに記載の画像表示装置。
【請求項５】
対象物を撮像して得られる撮像画像を取得し、
上記撮像画像に対する色調整を含まない第１の画像処理によって視認性優先画像を生成し、
上記撮像画像に対する所定の第２の画像処理によって画像効果が付与された効果処理画像を生成し、
上記視認性優先画像を電子ビューファインダに表示すると共に、上記第２の画像処理の設定を変更するユーザ操作に基づいて第１の期間を設定し、設定した上記第１の期間に上記第２の画像処理の設定の変更に応じて変化する上記効果処理画像を背面表示パネルに表示し、上記電子ビューファインダに対する接眼状態を検出するアイセンサの出力によって上記撮像画像を出力する撮像部の撮影開始のための操作を検出すると上記第１の期間を終了させて上記効果処理画像の表示を終了させることを特徴とする画像表示方法。
【請求項６】
コンピュータに、
対象物を撮像して得られる撮像画像を取得する手順と、
上記撮像画像に対する色調整を含まない第１の画像処理によって視認性優先画像を生成する手順と、
上記撮像画像に対する所定の第２の画像処理によって画像効果が付与された効果処理画像を生成する手順と、
上記視認性優先画像を電子ビューファインダに表示すると共に、上記第２の画像処理の設定を変更するユーザ操作に基づいて第１の期間を設定し、設定した上記第１の期間に上記第２の画像処理の設定の変更に応じて変化する上記効果処理画像を背面表示パネルに表示し、上記電子ビューファインダに対する接眼状態を検出するアイセンサの出力によって上記撮像画像を出力する撮像部の撮影開始のための操作を検出すると上記第１の期間を終了させて上記効果処理画像の表示を終了させる手順とを実行させるための画像表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置のビューファインダとして好適な画像表示装置、画像表示方法及び画像表示プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラなどの撮影機能付き携帯機器（撮影機器）が普及している。この種の撮影機器においては表示部を有して、撮影画像を表示する機能を有するものもある。また、表示部にメニュー画面を表示して、撮影機器の操作を容易にしたものもある。ユーザは撮影時に、この表示部に表示されたスルー画を確認しながら撮影、観察操作をすることも可能である。このような表示部は、携帯機器本体の背面に設けられることが多く、ユーザは撮影時に、背面の表示部に表示されたスルー画を確認しながら撮影操作をすることも可能である。
【０００３】
また、撮影機器においては、例えば撮影機器本体の上面にビューファインダ（接眼部）が設けられることもある。一眼デジタルカメラ、デジタルビデオカメラなどにおいては、画像の構図や撮影のタイミングを確認するためにビューファインダが設けられており、ビューファインダを覗きながら撮影するユーザも少なくない。特に周りが明るく、背面の表示部の視認性が悪化している場合には、ビューファインダを覗いての撮影が有効である。また、特に大型のレンズが装着された場合等、安定した構えでカメラを支持しながら撮影を行う場合も、ビューファインダを覗きながら撮影した方が有利であることが多い。
【０００４】
ところで、撮像画像に例えば、色合いの変化や明るさの調整等、所定の効果処理を施して撮影を行いたい場合がある。通常、背面液晶パネルにはこのような効果処理後の画像の表示が可能であり、ユーザはスルー画によって所定の効果が施された画像を確認することができる。
【０００５】
なお、特許文献１においては、ライブビューの表示モードが静止画の露出をシミュレーションする表示モードである場合において、露出補正量の制限に伴い露出のシミュレーションができていないことをユーザに報知する技術が開示されている。
【先行技術文献】
【特許文献】
【０００６】
特開２０１１−４９６４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、背面液晶パネルでは、光の具合によってライブビュー表示が見にくい場合があり、また、ビューファインダから目を離さずに撮影を行いたいユーザもいる。このような場合を考慮すると、ビューファインダとしてＬＣＤ等を用いた電子ビューファインダ（以下、ＥＶＦともいう）を用いた方がよく、ＥＶＦによって所定の効果処理を施した画像をライブビュー表示によって確認することが可能である。ところが、レンズを介して入射する被写体の光学像を直接見る光学ビューファインダ（以下、ＯＶＦともいう）によって、撮影される画像を確認したいと考えるユーザもいる。このようなＯＶＦを採用するユーザにとっては、所定の効果処理を施す撮影を行う場合でも、ビューファインダから目を背面液晶パネルに移さない限り、事前に所定の効果処理による画像効果を撮影前に確認することはできない。例えば、撮影直前の画像をビューファインダによって確認したいユーザにとっては、シャッタチャンスを考慮すると、ビューファインダから背面液晶パネルに目を移すことができず、所定の効果処理の効果については具体的な確認は困難であった。
【０００８】
本発明は、同一画面上に、所定の効果処理を施した撮像画像及び視認性を優先させた撮像画像を表示可能にして、ユーザが希望する画像の撮影を行うための操作性を向上させることができる画像表示装置、画像表示方法及び画像表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一態様による画像表示装置は、対象物を撮像して得られる撮像画像を取得する画像取得部と、上記撮像画像に対する色調整を含まない第１の画像処理によって視認性優先画像を生成する第１の画像処理部と、上記撮像画像に対する所定の第２の画像処理によって画像効果が付与された効果処理画像を生成する第２の画像処理部と、上記視認性優先画像を電子ビューファインダに表示すると共に、上記第２の画像処理の設定を変更するユーザ操作に基づいて第１の期間を設定し、設定した上記第１の期間に上記第２の画像処理の設定の変更に応じて変化する上記効果処理画像を背面表示パネルに表示し、上記電子ビューファインダに対する接眼状態を検出するアイセンサの出力によって上記撮像画像を出力する撮像部の撮影開始のための操作を検出すると上記第１の期間を終了させて上記効果処理画像の表示を終了させる表示制御部とを具備する。
【００１０】
また、本発明の一態様による画像表示方法は、対象物を撮像して得られる撮像画像を取得し、上記撮像画像に対する色調整を含まない第１の画像処理によって視認性優先画像を生成し、上記撮像画像に対する所定の第２の画像処理によって画像効果が付与された効果処理画像を生成し、上記視認性優先画像を電子ビューファインダに表示すると共に、上記第２の画像処理の設定を変更するユーザ操作に基づいて第１の期間を設定し、設定した上記第１の期間に上記第２の画像処理の設定の変更に応じて変化する上記効果処理画像を背面表示パネルに表示し、上記電子ビューファインダに対する接眼状態を検出するアイセンサの出力によって上記撮像画像を出力する撮像部の撮影開始のための操作を検出すると上記第１の期間を終了させて上記効果処理画像の表示を終了させる。
【００１１】
また、本発明の一態様による画像表示プログラムは、コンピュータに、対象物を撮像して得られる撮像画像を取得する手順と、上記撮像画像に対する色調整を含まない第１の画像処理によって視認性優先画像を生成する手順と、上記撮像画像に対する所定の第２の画像処理によって画像効果が付与された効果処理画像を生成する手順と、上記視認性優先画像を電子ビューファインダに表示すると共に、上記第２の画像処理の設定を変更するユーザ操作に基づいて第１の期間を設定し、設定した上記第１の期間に上記第２の画像処理の設定の変更に応じて変化する上記効果処理画像を背面表示パネルに表示し、上記電子ビューファインダに対する接眼状態を検出するアイセンサの出力によって上記撮像画像を出力する撮像部の撮影開始のための操作を検出すると上記第１の期間を終了させて上記効果処理画像の表示を終了させる手順とを実行させる。
【発明の効果】
【００１２】
本発明によれば、同一画面上に、所定の効果処理を施した撮像画像及び視認性を優先させた撮像画像を表示可能にして、ユーザが希望する画像の撮影を行うための操作性を向上させることができるという効果を有する。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施の形態に係る画像表示装置が組み込まれた撮影機器を示すブロック図。
【図２Ａ】効果処理画像を説明するための説明図。
【図２Ｂ】効果処理画像を説明するための説明図。
【図３】視認性優先画像を説明するための説明図。
【図４Ａ】撮影機器１０の外観を示す説明図。
【図４Ｂ】撮影機器１０の外観を示す説明図。
【図５】カメラ制御を示すフローチャート。
【図６】効果処理画像表示期間における画像表示の一例を示す説明図。
【図７】本発明の第２の実施の形態において採用されるカメラ制御を示すフローチャート。
【図８Ａ】第２の実施の形態に係る画像表示装置が組み込まれた撮影機器の外観を示す斜視図。
【図８Ｂ】第２の実施の形態に係る画像表示装置が組み込まれた撮影機器の外観を示す斜視図。
【図９】図７中のステップＳ３４におけるライブビュー表示の具体的な動作フローの一例を示すフローチャート。
【図１０Ａ】ライブビュー表示の処理タイミングを説明するための説明図。
【図１０Ｂ】ライブビュー表示の処理タイミングを説明するための説明図。
【図１１Ａ】第２の実施の形態を説明するための説明図。
【図１１Ｂ】第２の実施の形態を説明するための説明図。
【図１１Ｃ】第２の実施の形態を説明するための説明図。
【図１１Ｄ】第２の実施の形態を説明するための説明図。
【図１１Ｅ】第２の実施の形態を説明するための説明図。
【図１２Ａ】第２の実施の形態を説明するためのフローチャート。
【図１２Ｂ】第２の実施の形態を説明するためのフローチャート。
【図１２Ｃ】第２の実施の形態を説明するためのフローチャート。
【図１２Ｄ】第２の実施の形態を説明するためのフローチャート。
【発明を実施するための形態】
【００１４】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【００１５】
（第１の実施の形態）
図１は本発明の第１の実施の形態に係る画像表示装置が組み込まれた撮影機器を示すブロック図である。
【００１６】
本実施の形態は、撮像画像に画像効果を付与する特殊効果等の所定の効果処理（以下、単に画像効果処理という）を施した画像（以下、効果処理画像という）と被写体を肉眼で見ているときと同様の画像表示を可能にする画像処理（以下、視認性優先画像処理という）を撮像素子の出力に対して施すことによって得られる画像（以下、視認性優先画像という）とを同一の表示画面上に表示可能にすると共に、ユーザの操作に応じて効果処理画像と視認性優先画像との表示を制御するものである。これにより、ユーザは、画像効果処理を施した場合の画像効果を確認しつつ、ＯＶＦを利用した場合と同様の視認性で被写体を捉えながら撮影を行うことを可能にする。
【００１７】
なお、効果処理画像を得る画像効果処理とは、色やコントラストや明るさや画像の粒状性等を変えてユーザの主観により作品的、レポート的、説明的な絵作りを行うときの画像処理である。効果処理画像は、肉眼で見たときと色や描写が変わるため、視認性が悪くなることがある。また、露出等は数値化し表示すれば撮影参考になるが、色や描写等は目で見て確認した方が分かりやすい 。外光などによる影響を受けるので、ＥＶＦでの観察が好ましい。
【００１８】
また、視認性優先画像処理とは、被写体の色や明暗を目で見た状態に合わせてカメラで見ているときと肉眼でダイレクトに見ているときを合わせるような画像処理をいう。例えば、ＨＤＲ処理、フレームレート 等、で肉眼の見え方に合わせている。暗いときなどは、被写体が見えるように明るく見せるための処理を行ってもよい が、基本的には光学ファインダを覗いたときと同様の画像にするための処理である。ＥＶＦにより撮影を行う場合には、被写体を追いながら集中して撮影することができるので、ＥＶＦによって視認性優先画像を表示することで、撮影の操作性を向上させることができる。なお、撮影の直前は、被写体の表情や姿勢や構図を確認するために、視認性優先画像を表示させた方が好ましい場合がある。状況に応じて、制御部負荷の重い画像処理をしないで、フレームレートを上げることを視認性優先としても良い。効果処理も制御部負荷で画像処理時間が増加する方向なので（フレームレートが落ちる方向なので）、被写体の動きや撮影者のパンニング動作などで画像が追いつかない場合などは、通常の画像処理で処理時間をかけず、フレームレートを上げることで視認性を優先させる。つまり、状況や被写体に応じて、スピード優先の処理や自然に見える画像処理などを適用して、視認性の考え方を変えてもよい。負荷の軽い画像処理でフレームレートを上げることで、視認性を向上させる例を示したが、逆にフレームレートを落として（撮像時間をかけて）暗いシーンの視認性を向上させることも視認性向上（優先）処理と言える。人間が見て、状況を把握できるように、自然に観察しやすくした画像表示を視認性優先処理と呼んでいる。つまり、ユーザが意図的に画像効果を付与して、そのままでは表現できないような画像処理を選んだ場合（効果処理）以外の画像は、視認性を優先したものとする。状況に応じて、視認性の効果を変えても良いし、対象物が良く確認できるようにユーザが選んでも良い。視認性には優先度があり、一般にはフレームレートが速く、表示装置上の画像があたかも、表示装置がない時と同じに見えるような画像処理を行った画像の方が、装置を使用して観察した時と装置を使用しないで観察した時の差異や違和感がなく視認性が高いと言える。特に、色などは強調しすぎると、直接見た時との整合性がなくなり見失いやすくなる。
【００１９】
図２Ａ及び図２Ｂは効果処理画像を説明するための説明図である。図２Ａ及び図２Ｂに示す効果処理画像２１，２２は同一被写体について撮像した１枚の撮像画像に対して相互に異なる所定の画像効果処理を施して得られた画像である。効果処理画像２１は比較的暗い背景の画像部分２１ａと雲等の比較的明るい背景の画像部分２１ｂと人物の画像部分２１ｃとを含む。また、効果処理画像２２は比較的暗い背景の画像部分２２ａと雲等の比較的明るい背景の画像部分２２ｂと人物の画像部分２２ｃとを含む。
【００２０】
図２Ａ及び図２Ｂでは、ハッチングによって、各画像部分２１ａと２２ａに対して、画像部分２１ｂと２２ｂに対して、画像部分２１ｃと２２ｃに対して相互に異なる画像処理が施された結果、例えば色や明るさ等が相互に異なることを示している。
【００２１】
図３は視認性優先画像を説明するための説明図である。図３は図２Ａ及び図２Ｂの効果処理画像の処理前の撮像画像に対して、視認性優先画像処理を施すことによって得られる視認性優先画像２３を示している。この視認性優先画像２３は、撮像画像に対して、例えばＨＤＲ処理を施すことによって得られる。視認性優先画像２３は比較的暗い背景の画像部分２３ａと雲等の比較的明るい背景の画像部分２３ｂと人物の画像部分２３ｃとを含む。各画像部分２３ａ〜２３ｃは、ハッチングを変えて、図２Ａ及び図２Ｂの各画像部分２１ａ〜２１ｃ，２２ａ〜２２ｃよりも高いダイナミックレンジの画像部分であることを示している。視認性優先画像２３は、撮像画像に対して色調整等の処理を施しておらず、ＨＤＲ処理によってダイナミックレンジのみを拡大させた処理を施しており、ＯＶＦによって得られる画像表示と同様の画像表示をＥＶＦによって実現するものである。これにより、視認性優先画像２３の各画像部分２３ａ〜２３ｃは、肉眼で被写体を観察した場合と同様に、視認性に優れている。
【００２２】
図１において、撮影機器１０には、前面に撮像部１２が設けられている。撮像部１２は、ＣＣＤやＣＭＯＳセンサ等の撮像素子によって構成された図示しない撮像素子を有している。また、撮像部１２は、撮像素子に被写体光学像を導く図示しないレンズ部を有している。レンズ部は、ズームやフォーカシングのための図示しないレンズ等を備えており、これらのレンズは制御部１１の撮影制御部１１ａによって駆動制御されるようになっている。撮像部１２は、撮影制御部１１ａによって、ピント位置、ズーム位置及び絞り等が制御される。撮像素子は、レンズ部からの被写体光学像を光電変換して撮影画像を得る。
【００２３】
制御部１１は、例えば、図示しないＣＰＵ等のプロセッサによって構成されて、メモリに記憶されたプログラムに従ってカメラ制御を行うものであってもよい。撮影制御部１１ａは、撮像部１２に撮像素子の駆動信号を出力してシャッタースピード、露光時間等を制御すると共に、撮像部１２からの撮影画像を読み出す。画像取得部としての制御部１１は、読み出した撮影画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。
【００２４】
図４Ａ及び図４Ｂは撮影機器１０の外観を示す説明図である。図４Ａに示すように、撮影機器１０の筐体１０ａは、前面にレンズ鏡筒１２ａが設けられ、上面にファインダ部１８ａが設けられている。レンズ鏡筒１２ａ内に、撮像部１２のレンズ部が収納される。また、筐体１０ａの上面にはシャッタボタン３２及び２つのダイヤル操作部３３ａ，３３ｂが配設されている。ユーザは例えば左手３５の指でリング操作部３１の部分を挟み、左右の手３５，３６で筐体１０ａを支持しながらレンズ鏡筒１２ａを被写体に向けて構える。
【００２５】
なお、ユーザは、撮影機器１０を構えた状態で、例えば、ファインダ部１８ａを覗きながら、シャッタボタン３２を人差し指３６ｂで押圧操作することができるだけでなく、図４Ｂに示すように、右手の親指３６ａによってダイヤル操作部３３ａを、人差し指３６ｂによってダイヤル操作部３３ｂを簡単に操作することができる。
【００２６】
図１において、操作部１３は、これらのリング操作部３１、シャッタボタン３２及びダイヤル操作部３３ａ，３３ｂや図示しないファンクションボタンや撮影モード設定等の各種スイッチ等を含む。制御部１１中の操作判定部１１ｅは、これらの操作部１３からユーザ操作に基づく操作信号が与えられて、ユーザ操作の内容を判定するようになっている。制御部１１は、操作判定結果に基づいて、各部を制御する。
【００２７】
制御部１１は、撮像画像の記録及び再生に関する処理を行うことができる。例えば、制御部１１は、信号処理後の撮影画像を圧縮処理し、圧縮後の画像を記録部１５に与えて記録させることができる。記録部１５としては、例えばカードインターフェースを採用することができ、記録部１５はメモリカード等の記録媒体に画像情報及び音声情報等を記録可能である。
【００２８】
また、撮影機器１０には時計部１４が設けられている。時計部１４は時間情報を生成して制御部１１に出力する。 計時部として、露出時間の計時や後述の「操作終了後の所定期間」計時等に使用する。
【００２９】
制御部１１の表示制御部１１ｂは表示に関する各種処理を実行する。表示制御部１１ｂは、信号処理後の撮影画像を背面に設けられた表示部１７及びファインダ表示部（Ｆ表示部）１８に与えることができる。表示部１７，１８は、ＬＣＤ等の表示画面を有しており、表示制御部１１ｂから与えられた画像を表示する。また、表示制御部１１ｂは、各種メニュー表示等を表示部１７，１８の表示画面に表示させることもできるようになっている。
【００３０】
制御部１１は、記録部１５に記録されている撮像画像を読み出して伸張処理することができる。表示制御部１１ｂは伸張処理された撮像画像を表示部１７，１８に与えることで、記録画像の再生が可能である。
【００３１】
例えば筐体１０ａの背面に設けられた表示部１７は、後述するように、撮像画像を表示する表示画面１７ａを有している。また、表示画面１７ａ上には、タッチパネル１７ｂが設けられている。タッチパネル１７ｂは、ユーザが指で指し示した表示画面１７ａ上の位置に応じた操作信号を発生することができる。この操作信号は、制御部１１に供給される。これにより、制御部１１の操作判定部１１ｅは、ユーザが表示画面１７ａ上をタッチしたりスライドさせたりした場合には、ユーザのタッチ位置、指を閉じ離間させる操作（ピンチ操作）、スライド操作やスライド操作によって到達した位置、スライド方向、タッチしている期間等の各種操作を検出することができる。これにより、制御部１１はユーザのタッチパネル操作に対応した処理を実行することができるようになっている。
【００３２】
なお、背面の表示部１７は、図４Ｂに示すように、撮影機器１０の筐体１０ａの例えば背面の略全域を占めるように配設されており、撮影者は、撮影時に背面の表示部１７の表示画面１７ａ上に表示されたスルー画を確認することができ、スルー画を確認しながら撮影操作を行うこともできる。
【００３３】
図４Ｂに示すように、Ｆ表示部１８は、筐体１０ａの上面に設けたファインダ部１８ａに収納されている。ファインダ部１８ａの近傍にはアイセンサ１９が設けられており、アイセンサ１９は、ユーザが目をファインダ部１８ａに近接させたことを検出し、検出結果を制御部１１に出力するようになっている。表示制御部１１ｂは、アイセンサ１９の検出結果によって、画像の出力先を背面の表示部１７とＦ表示部１８とで切換えることができるようになっていてもよい。
【００３４】
制御部１１には画像効果処理部１１ｄが設けられている。第２の画像処理部としての画像効果処理部１１ｄは、撮像画像に所定の画像効果処理を施すことができるようになっている。例えば、画像効果処理部１１ｄは、撮像画像の色、コントラスト、明るさ、画像の粒状性等を変化させる所定の効果処理を施すことができる。制御部１１は、画像効果処理を施した撮像画像を記録部１５に与えて記録するだけでなく、画像効果処理を施した後の撮像画像をスルー画として表示制御部１１ｂに与えて表示させることができるようになっている。
【００３５】
本実施の形態においては、制御部１１には視認性優先処理部１１ｃが設けられている。第１の画像処理部としての視認性優先処理部１１ｃは、撮像画像に視認性優先画像処理を施すことができるようになっている。例えば、視認性優先処理部１１ｃは、異なる露出で撮影された複数の画像に対するＨＤＲ合成処理によって、高いダイナミックレンジの視認性優先画像を生成することができる。制御部１１は、視認性優先画像をスルー画として表示制御部１１ｂに与えて表示させることができるようになっている。
【００３６】
また、本実施の形態においては、撮影制御部１１ａは、操作判定部１１ｅの操作判定結果に基づいて、視認性優先処理部１１ｃ、画像効果処理部１１ｄ及び表示制御部１１ｂを制御して、視認性優先画像及び効果処理画像の表示先、表示タイミング及び表示方法を変更することができるようになっている。例えば、撮影制御部１１ａは、視認性優先画像をＦ表示部１８に表示させ、効果処理画像を表示部１７に表示させるようにしてもよい。また、撮影制御部１１ａは、表示制御部１１ｂを制御して、通常時は視認性優先画像を表示させ、画像効果処理のための操作期間またはこの操作の開始から操作終了後の所定期間までの期間（以下、効果処理画像表示期間）に、効果処理画像を表示させるようにしてもよい。また、撮影制御部１１ａは、通常時と効果処理画像表示期間とで、視認性優先画像と効果処理画像とを切換えて表示させるようにしてもよく、また、通常時には視認性優先画像を表示させ、効果処理画像表示期間には、視認性優先画像と効果処理画像との両方を表示するようにしてもよい。例えば、視認性優先画像中の子画面に効果処理画像を子画面表示するようにしてもよい。
【００３７】
なお、撮影制御部１１ａは、ユーザによる撮影のための操作が行われる前の時点 で、効果処理画像表示期間を終了させるようになっていてもよい。つまり、具体的には、シャッタボタンの半押し（撮影に移行する操作）や、表示部17に効果処理画像を表示している場合には、ファインダを覗いたとき（アイセンサが反応したとき）、即ち撮影に移行する動作に応じて、効果処理表示を終了させてもよい。
【００３８】
次に、このように構成された実施の形態の動作について図５及び図６を参照して説明する。図５はカメラ制御を示すフローチャートであり、図６は効果処理画像表示期間における画像表示の一例を示す説明図である。
【００３９】
制御部１１の撮影制御部１１ａは、ステップＳ１において、画像効果処理を行う撮影モード（以下、効果処理撮影モードという）が指定されているか否かを判定する。効果処理撮影モードが指定されていない場合には、撮影制御部１１ａは、処理をステップＳ２に移行してその他の撮影モードが指定されているか否かを判定する。撮影制御部１１ａは、その他の撮影モードが指定されている場合には、処理をステップＳ３に移行してその他の撮影モードを実行する。
【００４０】
制御部１１は、ステップＳ２においてその他の撮影モードが指定されていないと判定した場合には、処理をステップＳ５に移行して再生が指示されているか否かを判定する。再生が指示されている場合には、制御部１１はステップＳ６において画像の再生を行う。ユーザが再生画像の変更を指示すると、制御部１１は、ステップＳ７から処理をステップＳ８に移行して画像の変更を行う。なお、制御部１１は、ステップＳ５において再生モードが指定されていない場合には、ステップＳ９において画像ファイルを取得するモードに移行する。
【００４１】
撮影制御部１１ａは、ステップＳ１において効果処理撮影モードが指定されているものと判定した場合には、ステップＳ１１において、画像効果処理部１１ｄを制御して、撮像画像に対して設定された条件で画像効果処理を施す。画像効果処理部１１ｄは、画像効果処理を施した効果処理画像を表示制御部１１ｂに与え、表示制御部１１ｂは、効果処理画像を表示部１７及びＦ表示部１８に出力する。
【００４２】
撮影制御部１１ａは、ステップＳ１２において、ユーザがファインダ部１８ａに接眼しているか否かをアイセンサ１９の出力によって確認する。撮影制御部１１ａは、ユーザがファインダ部１８ａに接眼している場合にはステップＳ１３において表示部１７の表示をオフにし、接眼していない場合にはステップＳ２１においてＦ表示部１８の表示をオフにする。
【００４３】
ユーザがファインダ部１８ａに接眼している場合には、撮影制御部１１ａは、ステップＳ１４において、視認性優先画像を表示させる視認性優先モードが指定されているか否かを判定する。視認性優先モードが指定されていない場合には、撮影制御部１１ａは、ステップＳ１５において、表示制御部１１ｂを制御して、画像効果処理部１１ｄからの効果処理画像をＦ表示部１８に表示させる。視認性優先モードが指定されている場合には、撮影制御部１１ａは、ステップＳ１６において視認性優先処理部１１ｃを制御して、撮像画像に対して、視認性優先画像処理を実行させる。
【００４４】
視認性優先処理部１１ｃは、例えば、露出を変えながら複数回の撮像を行った複数枚の撮像画像のＨＤＲ合成処理によって、ダイナミックレンジが拡大された視認性優先画像を得る。視認性優先処理部１１ｃによって得られる視認性優先画像は、肉眼で被写体を観察する場合のＯＶＦによる画像表示に近似した広いダイナミックレンジの画像表示を可能にするものである。撮影制御部１１ａは、表示制御部１１ｂを制御して、視認性優先画像をＦ表示部１８に表示させる。
【００４５】
ユーザはファインダ部１８ａを覗き込むことによって、Ｆ表示部１８の表示画面に表示された視認性優先画像を見ることができる。即ち、ユーザは、ＥＶＦの表示画面上で、ＯＶＦに表示される画像に近似した画像を見ながら、撮影操作を行うことができる。
【００４６】
ここで、ユーザは、画像効果処理の設定を変更する操作、即ち、画像効果の種類や強さ等を変更する操作等を行うものとする。例えば、画像効果処理が画像の粒状感を変化させるものである場合には、粒状感を与える粒のサイズを変化させる操作を行うものとする。ユーザは、例えばダイヤル操作部３３ａ，３３ｂを用いることで、ファインダ部１８ａから目を離すことなく、画像効果処理の設定の変更操作等の各種操作を行うことが可能である。撮影制御部１１ａは、ステップＳ１７において画像効果処理の設定を変更する操作が行われているか否かを判定する。
【００４７】
本実施の形態においては、撮影制御部１１ａは、画像効果処理の設定操作が行われると、少なくとも設定操作の期間を効果処理画像表示期間に設定して、この期間には、画像効果処理に対応した効果処理画像をＦ表示部１８に表示させるようになっている。図５の例では、表示制御部１１ｂは、ステップＳ１８において、視認性優先画像に加えて効果処理画像を確認可能なガイド表示 を表示させる。ガイド表示は図６の子画面に限らず、操作中のみ全面に効果処理画像を表示させてもよい（より効果を確認しやすくなる）。また、図９で説明するように設定のためのＧＵＩを表示することも含めるものとする。
【００４８】
図６はこの場合に表示される画像を示している。効果処理画像表示期間においては、Ｆ表示部１８の表示画面には、例えば図６に示す画像５１が表示される。画像５１は、図３の視認性優先画像２３に対応するものであり、視認性に優れた画像部分５１ａ，５１ｂ，５１ｃを含む。更に、画像５１にはガイド表示４１ａが表示されている。ガイド表示４１ａは、画像効果処理によって得られる効果処理画像を子画面表示したものである。ユーザが画像効果処理の設定を変更する操作を行うことにより効果処理画像は変化し、ガイド表示４１ａ内の画像も変化する。
【００４９】
ユーザはＦ表示部１８の表示画面上に表示されたガイド表示４１ａによって、現在の画像効果処理によって得られる画像を確認することができる。即ち、本実施の形態においては、Ｆ表示部１８において、ＯＶＦを用いた場合と同様の視認性優先画像を表示させると共に、画像効果処理が反映された効果処理画像を表示させることができる。ＯＶＦを用いた場合でも、画像効果処理における設定の設定値（画像パラメータ）を文字表示等によって表示させることは可能である。しかしながら、数値では画像効果の確認は困難である場合がある。例えば、露出等については数値化によって画像効果処理の効果を予測することは可能な場合があるが、色を数値化したとしても、一般的には画像効果処理によって付与された色を認識することは極めて困難である。本実施の形態においては、撮影する被写体を視認性優先画像によって良好な視認性で確認することができると共に、各種画像効果処理による色、明るさ、粒状感等の画像効果を、効果処理画像によって確認することが可能であり、ユーザは自分が希望する画像を比較的容易に撮影することが可能である。
【００５０】
設定操作が終了して、効果処理画像表示期間が経過すると、撮影制御部１１ａは、ステップＳ１９においてガイド表示をオフにする。これにより、ユーザは、例えば撮影操作の直前のタイミングでは、Ｆ表示部１８において視認性優先画像によって被写体を良好な視認性で確認することができる。
【００５１】
なお、図５及び図６の例では、効果処理画像表示期間において、視認性優先画像と効果処理画像の両方を表示する例を説明したが、視認性優先画像に代えて効果処理画像のみを表示するようにしてもよい。
【００５２】
また、ユーザがファインダ部１８ａに接眼していない場合には、撮影制御部１１ａは、ステップＳ１２からステップＳ２１に処理を移行してＦ表示部１８をオフにし、ステップＳ２２において背面パネルである表示部１７に、画像効果処理の設定操作を反映させた効果処理画像を表示する。
【００５３】
図４Ｂは背面パネルである表示部１７の表示画面１７ａ上に、効果処理画像４１が表示されている様子を示している。効果処理画像４１は、図２Ａ，図２Ｂに対応した効果処理画像であり、画像部分４１ａ〜４１ｃを含む。更に、画像４１には、画像効果処理の設定を変更するための表示４３も表示されている。例えば、ユーザが表示４３の左右矢印をタッチ操作することで設定が変更され、中央枠をタッチ操作することで設定を反映させることができる。
【００５４】
撮影制御部１１ａは、ステップＳ２３において、ユーザによる撮影操作が行われたか否かを判定する。撮影操作が行われると、撮影制御部１１ａは、撮影により取得した画像を記録部１５に記録させる。
【００５５】
なお、図５及び図６の例では、視認性優先画像をＦ表示部１８のみに表示し、表示部１７には効果処理画像のみを表示する例を説明したが、両方の表示部に視認性優先画像及び効果処理画像を表示するようにしてもよい。
【００５６】
このように本実施の形態においては、同一画面上に、所定の効果処理を施した撮像画像だけでなく、視認性を優先させた撮像画像を表示可能である。そして、例えばファインダ部のファインダ表示部に視認性優先画像を表示させることで、ユーザは被写体を肉眼で観察する場合に近い感覚で、被写体を確認しながら撮影操作を行うことができる。また、撮像画像に画像効果処理を施す場合には、その設定操作に基づく効果処理画像表示期間において、Ｆ表示部の表示画面上で画像処理を反映させた効果処理画像を確認することができ、ユーザはファインダ部から目を離すことなく画像効果を確認しながら設定操作を行うことができる。これにより、ユーザが希望する画像効果処理を付与した撮影を行うための操作性を著しく向上させることができる。
【００５７】
（第２の実施の形態）
図７は本発明の第２の実施の形態において採用されるカメラ制御を示すフローチャートである。本実施の形態における回路構成は、図１の第１の実施の形態と同様である。また、図８Ａ及び図８Ｂは本実施の形態に係る画像表示装置が組み込まれた撮影機器の外観の一例を示す斜視図である。
【００５８】
従来、色フィルタや偏光フィルタ等のレンズフィルタを用いた撮影が行われることがある。本実施の形態においては、このようなフィルタを用いた特殊効果撮影によって得られる画像を、画像処理によって実現する撮影機器に適用した例である。
【００５９】
先ず、図８Ａ及び図８Ｂを参照して、撮影機器の外観の概略構成について説明をする。図８Ａ及び図８Ｂに示すように、撮影機器６１は、筐体６２内に、例えば制御回路等が実装されたメイン基板、バッテリを含む電源回路等が実装された電源基板等、各種の電気基板が収納されており、これらの電気基板上に図１と同様の回路が構成されている。
【００６０】
筐体６２の前面６２ａの略中央部分には、レンズ鏡筒６３が図示しないレンズマウント部に着脱自在に取り付けられている。また、筐体６２の背面６２ｂには、略全域に表示部１７（図１参照）が配設されており、表示部１７の表示画面１７ａには、タッチパネル１７ｂが配設されている。更に、背面６２ｂの上端の一部には、Ｆ表示部１８を構成するファインダ部６４が配設されている。
【００６１】
撮影機器６１は、筐体６２の前面６２ａ，背面６２ｂ及び上面６２ｃに各種の操作部１３が配設されている。例えば、操作部１３として、上面６２ｃには、電源ボタン７１、シャッタボタン７２、フロントダイヤル７３ａ及びリアダイヤル７３ｂ等が設けられている。また、背面６２ｂには、操作部１３として、ＩＮＦＯボタン７４、モードボタン７５、ＰＩＣＴボタン７６、十字キー及びＯＫボタン７７、再生ボタン７８、メニューボタン７９等が設けられている。また、前面６２ａには、操作部１３として、ピクチャモードダイヤル８０が設けられている。
【００６２】
フロントダイヤル７３ａ、リアダイヤル７３ｂ及びピクチャモードダイヤル８０は、筐体６２の固定部分に対して回動自在に軸支されるダイヤル形状の操作部材である。
【００６３】
これらの操作部１３の操作は操作判定部１１ｅによって検出される。撮影制御部１１ａは、操作判定部１１ｅの判定結果によってユーザの指示を認識する。例えば、撮影制御部１１ａは、視認性優先モードにおいて、ＰＩＣＴボタン７６が操作された場合には、ユーザによって画像効果処理の設定を変更する操作が行われること、即ち、画像パラメータ設定中であるものと判定して、効果処理画像表示期間を設定するようになっている。また、撮影制御部１１ａは、効果処理画像表示期間においてＰＩＣＴボタン７６が操作された場合には、効果処理画像表示期間を終了させて視認性優先画像のみを表示させるようになっていてもよい。
【００６４】
ところで、色フィルタ等のレンズフィルタは、レンズ前面に装着される。装着するレンズフィルタを取り替えることで、特殊効果撮影の種類を変更することができる。本実施の形態においては、このような特殊効果撮影の種類の変更作業を、レンズフィルタの取付け時と同様の感覚で行えるように、カメラの前面に設けたピクチャモードダイヤル８０によって行う。撮影制御部１１ａは、操作判定部１１ｅの出力によってピクチャモードダイヤル８０の状態を認識する。撮影制御部１１ａは、ピクチャモードダイヤル８０を回転させることによって、フィルタの種類を変えた場合と同様に、画像効果処理部１１ｄを制御して、画像効果処理の種類を変更することができるようになっている。
【００６５】
次に、このように構成された実施の形態の動作について説明する。図９は図７中のステップＳ３４におけるライブビュー表示の具体的な動作フローの一例を示すフローチャートである。なお、図９には各処理よって得られる画像の例も示している。また、図１０Ａ及び図１０Ｂはライブビュー表示の処理タイミングを説明するための説明図である。
【００６６】
電源が投入されることで、制御部１１は動作を開始し、図７のステップＳ３１において、各部に電力を供給する。撮影制御部１１ａは、ステップＳ３２において、前回の電源オフ時に記録部１５又は図示しないメモリに記録した各種モードデータ及び画像効果処理の処理を決定する画像パラメータを読出し、モード設定 や、パラメータ設定中フラグのクリアを行う。撮影制御部１１ａは、ステップＳ３３において撮像部や図示しない測光部 によって測光を行い、測光値を用いてステップＳ３４において適正な明るさでライブビュー表示を行う。なお、ステップＳ３４のライブビュー表示については後述する。撮影制御部１１ａは、ステップＳ３５においてカメラ操作が発生したか否かを判定し、カメラ操作が行われていない場合には、処理をステップＳ３３に戻して測光及びライブビュー表示を繰り返す。
【００６７】
カメラ操作が行われた場合には、撮影制御部１１ａは、このカメラ操作がシャッタボタン７２の１段目の押下操作であるか否かを判定する（ステップＳ３６）。撮影制御部１１ａは、シャッタボタン７２の操作でない（ＯＦＦ）ものと判定した場合には、次のステップＳ３７において、操作が画像パラメータの設定操作であるか否かを判定する。
【００６８】
例えば、撮影制御部１１ａは、ＰＩＣＴボタン７６が押下されると、画像パラメータの設定操作及び設定解除が行われるものと判定する 。撮影制御部１１ａは、パラメータの設定操作が行われると、パラメータ設定中フラグを設定中を示す値に切換える （ステップＳ３８）。つまり、Ｓ３７でPICTボタンの操作の有無を判定し、PICTボタンが押される度に、［設定モード］⇔［非設定モード］のトグル切り換えを想定しているので、最初にＳ３２でクリアしたフラグを 、［クリア］⇒［セット］、［セット］⇒［クリア］する。このように、パラメータ設定中フラグのセット/クリアを切り換える。パラメータ設定中フラグがパラメータ設定中である場合 （フラグがセットされている場合）に効果処理画像表示期間が設定される。なお、設定された画像パラメータは、ステップＳ３４のライブビュー表示に反映させるために図示しないメモリ等に記憶されると共に、後述するステップＳ５１において記録部１５又は図示しない不揮発性のメモリに記録される。
【００６９】
撮影制御部１１ａは、ステップＳ３９においてモード変更操作があったか否かを判定する。画像効果処理のモードの変更操作があった場合には、画像効果処理部１１ｄは画像効果処理モードを指定されたモードに変更する（ステップＳ４０）。撮影制御部１１ａは、ステップＳ４１において電源スイッチの状態がオン状態であるかオフ状態であるかを判定し、オン状態の場合には、処理をステップＳ３３に戻す。
【００７０】
撮影制御部１１ａは、ステップＳ３６においてシャッタボタン７２の１段目が押下されたものと判定した場合には、処理をステップＳ４５に移行して、オートフォーカス処理（ＡＦ）及び測光処理を行う。次に、撮影制御部１１ａは、ステップＳ４６においてパラメータ設定中フラグをクリアし、シャッタボタンの２段目が押下されたか否かを判定する（ステップＳ４７）。
【００７１】
パラメータ設定中フラグのクリアによって効果処理画像表示期間が終了し、ステップＳ４７，Ｓ３３を経由してステップＳ３４おけるライブビュー表示が行われて、ファインダ部６４のＦ表示部１８の表示画面には、後述のように視認性優先画像が表示される。こうして、ユーザは、シャッタボタン７２の１段目を押下した後の撮影直前の状態では、肉眼で被写体を観察した場合と同様に、例えば広いダイナミックレンジの視認性優先画像によるライブビュー画像を見ながら撮影操作を行うことができる。
【００７２】
撮影制御部１１ａは、ステップＳ４７において、シャッタボタン７２の２段目が押下されていないと判定した場合には、上述したように、ステップＳ３３に処理を戻して、ライブビュー表示を行う。一方、シャッタボタン７２の２段目が押下された場合には、撮影制御部１１ａは撮影を行う。画像効果処理部１１ｄによって画像効果処理が施された撮像画像は、記録部１５に与えられて記録される。
【００７３】
なお、ＰＩＣＴボタン７６の押下から極めて短時間にシャッタボタン７２の１段目の押下が行われた場合には、効果処理画像の表示後の短時間に効果処理画像表示期間が終了して、ユーザは効果処理画像を十分に確認することができないことが考えられる。そこで、このような場合には、ＰＩＣＴボタン７６の押下操作から所定時間後まで、効果処理画像表示期間を継続させるようになっていてもよい。また、図７の例では、シャッタボタン７２の１段目の押下操作によって、効果処理画像表示期間が終了する例を示しているが、効果処理画像表示期間中にＰＩＣＴボタン７６を押下操作することで、効果処理画像表示期間を終了させるようになっていてもよい。
【００７４】
撮影制御部１１ａは、ステップＳ４１において電源スイッチがオフになっているものと判定すると、ステップＳ５１において画像効果処理のモードを含む各種モード及び画像パラメータを記録部１５又は図示しない不揮発性メモリに記録させる。制御部１１は、ステップＳ５２において、各部への電源の供給を停止させて処理を終了する。
【００７５】
（ライブビュー表示）
図９のステップＳ６０において、撮影制御部１１ａは、ファインダ表示モードであるか否かを判定する。ファインダ表示モードでないと判定した場合には、撮影制御部１１ａは、背面の表示部１７にライブビュー表示を行う。即ち、この場合には、撮影制御部１１ａは、ステップＳ７１において撮像部１２に対して撮像を指示する。撮像部１２は被写体を撮像し、撮像画像を制御部１１に出力する。画像効果処理部１１ｄはステップＳ７２において、指定された画像効果処理モードで、ユーザ操作に基づく画像効果パラメータを反映させた画像効果処理を行い、効果処理画像を生成する。この効果処理画像は、表示制御部１１ｂによって表示部１７に表示される（ステップＳ７３）。
【００７６】
撮影制御部１１ａは、ステップＳ７４において画像処理の画像パラメータの設定中であるか否かをパラメータ設定中フラグによって判定する。撮影制御部１１ａは、画像パラメータの設定中でない場合には処理を終了する。例えば、この場合には、表示部１７の表示画面１７ａ上には、効果処理画像１３１が表示される。また、撮影制御部１１ａは、画像パラメータの設定中である場合には、ステップＳ７５において、後述する図１２Ａのカラーフィルタ選択ＧＵＩ８３等の設定ＧＵＩ１３１ａを表示部１７の表示画面１７ａに表示させる。例えば、この場合には、表示部１７の表示画面１７ａ上には、効果処理画像１３１に設定ＧＵＩ１３１ａが重ねて表示される。
【００７７】
図１０Ａはこの場合における制御部１１の処理を示している。図１０Ａに示すように、撮像、画像処理及びライブビュー表示が順次繰り返される。
【００７８】
撮影制御部１１ａは、ステップＳ６０においてファインダ表示モードが設定されていると判定した場合には、処理をステップＳ６１に移行して、画像パラメータの設定中であるか否かをパラメータ設定中フラグによって判定する。本実施の形態においても、画像パラメータの設定中でない場合には、視認性優先画像の表示が行われ、画像パラメータの設定中の場合には、効果処理画像の表示が行われる。
【００７９】
即ち、撮影制御部１１ａは、ステップＳ６１において画像パラメータの設定中でないと判定した場合には、ステップＳ６２において、撮像部１２にＨＤＲ合成処理のための２回の撮像を指示する。撮像部１２は異なる露出で被写体を２回撮像し、２枚の撮像画像を制御部１１に出力する。視認性優先処理部１１ｃは、ステップＳ６５において、２枚の撮像画像を用いたＨＤＲ合成処理によってダイナミンクレンジが拡張された画像、即ち、視認性優先画像１３２を生成する。図１０Ｂは制御部１１のこのような処理を示している。図１０に示すように、２回の撮像、ＨＤＲ合成処理及びライブビュー表示が順次繰り返される。
なお、図１０は一例であり、１回撮像で画像処理によるダイナミックレンジの拡張をしても良いし、前述のように通常ライブビューや、暗所でのフレームレートを落としてのライブビューでもよい。要するに、視認性を向上させられればよい。さらに、負荷の大きい効果処理を行わないで、フレームレートを確保する通常のスルー画を持って視認性（被写体の変化、動きにスルー画を追従させることを優先）優先としてもよい。
【００８０】
なお、図９の例では、視認性優先画像１３２だけでなく、効果処理画像の縮小画像８３をＦ表示部１８の表示画面に同時に表示させる例を示している。即ち、画像効果処理部１１ｄは、ステップＳ６３において、撮像画像に対して指定されている画像効果処理モードでユーザ操作に基づく画像パラメータを反映させた画像効果処理を施す。なお、ステップＳ６２におけるＨＤＲ合成のための撮像では、一般的に露出オーバー及び露出アンダーで撮影が行われ、適正露出での撮影が行われていない可能性がある。そこで、画像効果処理部１１ｄは、ステップＳ６３の画像効果処理に際して、撮像画像をゲインアップ又はゲインダウンした後、画像効果処理を施すようにしてもよい。表示制御部１１ｂは、画像効果処理部１１ｄからの効果処理画像を縮小画像に変換して、Ｆ表示部１８の表示画面に表示させる。なお、この縮小画像８３の表示はオプションであり、必ずしも表示する必要はない。
【００８１】
表示制御部１１ｂは、ステップＳ６６において、Ｆ表示部１８の表示画面上に、視認性優先画像１３２を表示すると共に、この視認性優先画像１３２の一部の領域（ファインダ補助画面）に効果処理画像に基づく縮小画像１３３を表示する。こうして、ユーザはＦ表示部１８の表示画面上において、視認性優先画像１３２を確認しながら撮影を行うことができる。
【００８２】
ここで、ユーザが画像効果処理の画像パラメータの変更操作を行うものとする。そうすると、処理はステップＳ６１からステップＳ６７に移行して、撮影制御部１１ａは、撮像部１２に対して１回の撮像を指示する。撮像部１２は被写体を撮像し、撮像画像を制御部１１に出力する。画像効果処理部１１ｄはステップＳ６８において、指定された画像効果処理モードでユーザが設定した画像パラメータを用いて画像効果処理を行い、効果処理画像を生成する。この効果処理画像１３１は、表示制御部１１ｂによってＦ表示部１８に表示される（ステップＳ６９）。また、撮影制御部１１ａは、ステップＳ７０において、設定ＧＵＩ１３１ａをＦ表示部１８の表示画面に効果処理画像１３１に重ねて表示させる。この場合においても、図１０Ａに示すように、撮像、画像処理及びライブビュー表示が順次繰り返される。
【００８３】
このように、画像パラメータを設定していない期間には視認性優先画像がＦ表示部１８に表示されるので、ユーザはダイナミックレンジが拡張された見やすい画像を見ながら、撮影操作を行うことができる。ダイナミックレンジ拡張は、光学ファインダに慣れた人には見慣れた像に近く、被逆光等の輝度差の大きなシーンでも見易くなる例であるが、前述のように、ダイナミックレンジの拡張に限定されることはなく、視認性優先画像としては要するに見易すい画像であればよい。
また、画像パラメータの設定中は、画像効果処理部において設定された画像パラメータを反映させた画像効果処理が行われて、ユーザの画像パラメータの変更操作が効果処理画像及び設定ＧＵＩに逐次反映される。これにより、ユーザは自分の設定操作による画像の変化をＦ表示部１８において確認しながら、画像パラメータの設定が可能である。即ち、ユーザはファインダ部６４から目を離すことなく、見やすい画像による被写体の確認及び画像効果処理の効果の確認が可能である。
【００８４】
次に、図１１Ａ乃至図１１Ｅの説明図及び図１２Ａ乃至図１２Ｄのフローチャートを参照して本実施の形態において採用可能な具体的な画像効果処理の例について説明する。なお、図１２Ａ乃至図１２Ｄはそれぞれ図１１Ａ乃至図１１Ｄに対応しており、図９のステップＳ６３，Ｓ６８，Ｓ７２における画像効果処理部１１ｄの各処理フローを示している。また、図１１Ａ〜図１１Ｅでは、色が異なることをハッチングの種類や濃淡を変えて示している。
【００８５】
撮影機器６１においては、ピクチャモードダイヤル８０によって、画像効果処理モードを切換える。図１１Ａ〜図１１Ｅの例では、画像効果処理として５つの処理が可能な例を示している。図１１Ａ〜図１１Ｅは、同一の被写体について異なる画像効果処理を施した場合における視認性優先画像及び効果処理画像の例を示している。
【００８６】
視認性優先モードにおいては、効果処理の設定を変更する操作である画像パラメータの設定操作が行われない場合には、Ｆ表示部１８には視認性優先画像が表示される。図１１Ａの左の画像８１はファインダ部６４のＦ表示部１８に表示されている視認性優先画像を示している。視認性優先画像８１は、チューリップの赤い花びらの画像部分８５、チューリップの緑の葉の画像部分８６、草木等の緑色っぽいの背景の画像部分８７及び空等の青色っぽい背景の画像部分８８を含む。
【００８７】
図１１Ａは画像効果処理のモードがモノクローム（モノクロ）モードの例を示している。図１１Ａの中央及び右側の画像８２ａ，８２ｂは、ピクチャモードダイヤル８０がＭ（モノクローム）モードの場合において、視認性優先画像８１が表示されている状態でＰＩＣＴボタン７６が押されたときに、ファインダ部６４のＦ表示部１８の表示画面に表示される効果処理画像を示している。モノクロームモードは、カラーフィルタを配置してモノクロでの撮影を行った場合と同様の画像効果を得るものである。モノクロームモードにおいて、ＰＩＣＴボタン７６が押下されると、撮影制御部１１ａは、画像効果処理部１１ｄ及び表示制御部１１ｂを制御して、モノクローム撮影用のカラーフィルタ選択ＧＵＩ８３を表示させる。
【００８８】
モノクロームモードは、レンズ前に装着した色付きフィルタによって得られる画像と略等価な画像を画像処理によって得るもので、フロントダイヤル７３ａを回すことで、１２色の中から選択するフィルタの色を指定することができる。また、リアダイヤル７３ｂの操作によって、選択している色フィルタの強度（濃度）を例えば３段階から選択することができるようになっている。
【００８９】
画像効果処理部１１ｄはユーザの選択操作に従って、図１２ＡのステップＳ８１において上記フロントダイヤル７３ａ、リアダイヤル７３ｂにて設定された色フィルタの設定情報等を取得し、ステップＳ８２においてモノクロ係数を算出する。画像効果処理部１１ｄは、ステップＳ８３において、撮像画像に対して標準の画像処理を施した後、モノクロ係数を用いてモノクローム画像を生成する（ステップＳ８５）。また、画像効果処理部１１ｄは、表示制御部１１ｂを制御して、ユーザの選択操作に応じたカラーフィルタ選択ＧＵＩ８３を表示させる。ユーザは、カラーフィルタ選択ＧＵＩ８３によって、色及び強度の選択の状態を確認することができる。なお、カラーフィルタ選択ＧＵＩ８３は、例えば円周方向に色の変化を示し、径方向に強度を示すものである。
【００９０】
撮影制御部１１ａは、フィルタ設定中において、撮像中の被写体に基づく効果処理画像をライブビュー画像としてＦ表示部１８に表示するために出力する（ステップＳ８５）。図１１Ａの例では、赤系フィルタの選択中は、赤い花の部分の透過光が多いので、効果処理画像８２ａについては花の画像部分８５ａは高輝度となり、白っぽくなる。また、背景の空（青）や葉（緑）の部分は、フィルタを透過する光量が減少するので、低輝度となり黒っぽくなる。逆に、緑系フィルタを選択した場合には、効果処理画像８２ｂのように、花の画像部分８５ｂは黒くなり、空や葉の画像部分は白くなる。
【００９１】
図１１Ｂは画像効果処理のモードがカラープロファイルモードの例を示している。図１１Ｂの中央及び右側の画像９２ａ，９２ｂは、ピクチャモードダイヤル８０がＣ（カラープロファイル）モードの場合において、視認性優先画像８１が表示されている状態でＰＩＣＴボタン７６が押されたときに、ファインダ部６４のＦ表示部１８の表示画面に表示される効果処理画像を示している。カラープロファイルモードは、色の彩度を自在に調整するものである。カラープロファイルモードにおいて、ＰＩＣＴボタン７６が押下されると、撮影制御部１１ａは、画像効果処理部１１ｄ及び表示制御部１１ｂを制御して、カラープロファイル撮影用の各色の彩度設定ＧＵＩ９３を表示させる。
【００９２】
画像効果処理部１１ｄによって、カラープロファイルモードでは、例えば１２色の各色をそれぞれ１１段階（彩度アップ５段階、彩度ダウン５段階）で調整することができるようになっている。例えば、フロントダイヤル７３ａを回して彩度を調整する色を選択し、リアダイヤル７３ｂで彩度を調整することができるようになっている。
【００９３】
画像効果処理部１１ｄは、図１２ＢのステップＳ９１において、撮像画像に対して標準の画像処理を施す。画像効果処理部１１ｄは、色を指定する変数ｎに１２を代入し（ステップＳ９２）、ｎで指定した色の設定値をユーザ操作に基づいて取得し（ステップＳ９３）、設定値を用いて指定された色ＣＯＬＯＲ（ｎ）の色補正処理を行う（ステップＳ９４）。画像効果処理部１１ｄは、変数ｎをデクリメントし（ステップＳ９５）、ｎがｎ＞０を満足しなくなるまでステップＳ９３〜Ｓ９５の処理を繰り返して、撮像画像の各色を補正する。１２色の全ての補正が終了すると、撮影制御部１１ａは、ステップＳ９６からステップＳ９７に処理を移行して、撮像中の被写体に基づく効果処理画像をライブビュー画像としてＦ表示部１８に表示するために出力する。
【００９４】
図１１Ｂの効果処理画像９２ａは、赤と緑の彩度を下げて、花と葉の画像部分９５ａ，９６ａを落ち着いた雰囲気に仕上げたことを示している。また、図１１Ｂの効果処理画像９２ｂは、緑、青の彩度を上げて、空と葉の画像部分９５ｂ，９６ｂを鮮やかに表現することを示している。このように、カラープロファイルモードでは、自由自在に色を表現することができるようになっている。
【００９５】
図１１Ｃは画像効果処理のモードがホワイトバランスモードの例を示している。図１１Ｃの中央及び右側の画像１０２ａ，１０２ｂは、ピクチャモードダイヤル８０がＷＢ（ホワイトバランス）モードの場合において、視認性優先画像８１が表示されている状態でＰＩＣＴボタン７６が押されたときに、ファインダ部６４のＦ表示部１８の表示画面に表示される効果処理画像を示している。図１１Ｃに示すホワイトバランスモードは、一般的なホワイトバランス処理を各色に対して行うもので、特定の色方向に画像全体の色をシフトさせるものである。ホワイトバランスモードにおいて、ＰＩＣＴボタン７６が押下されると、撮影制御部１１ａは、画像効果処理部１１ｄ及び表示制御部１１ｂを制御して、ＷＢ調整用の選択ＧＵＩ１０３を表示させる。
【００９６】
ホワイトバランスモードでは、画像効果処理部１１ｄによって、ホワイトバランス調整を自動で行って得た画像が特定の色方向にシフトされる。フロントダイヤル７３ａを回して、例えば１２色から色を選択し、選択した色に対してリアダイヤル７３ｂを回すことで、７段階（０±３段階）で調整量を調整することができるようになっている。
【００９７】
画像効果処理部１１ｄはユーザの選択操作に従って、図１２ＣのステップＳ１０１において設定値を取得し、ステップＳ１０２において、撮像画像に対して標準の画像処理を施した後、取得した設定値を用いて色味補正処理を行う（ステップＳ１０３）。撮影制御部１１ａは、パラメータ設定中において、撮像中の被写体に基づく効果処理画像をライブビュー画像としてＦ表示部１８に表示するために出力する（ステップＳ１０４）。
【００９８】
図１１Ｃの効果処理画像１０２ａは、青を＋方向に調整して全体を寒色系にシフトしたことを示している。また、図１１Ｃの効果処理画像１０２ｂは、黄緑を＋方向に調整して葉を鮮やかに仕上げたことを示している。
【００９９】
図１１Ｄは画像効果処理のモードがＡＲＴ（アート）モードの例を示している。図１１Ｄの中央及び右側の画像１１２ａ，１１２ｂは、ピクチャモードダイヤル８０がＡＲＴ（アート）モードの場合において、視認性優先画像８１が表示されている状態でＰＩＣＴボタン７６が押されたときに、ファインダ部６４のＦ表示部１８の表示画面に表示される効果処理画像を示している。図１１Ｄに示すアートモードは、選択された特定の色成分以外の彩度を低下させる処理を行うものである。アートモードにおいて、ＰＩＣＴボタン７６が押下されると、撮影制御部１１ａは、画像効果処理部１１ｄ及び表示制御部１１ｂを制御して、パートカラー用の選択ＧＵＩ１１３を表示させる。
【０１００】
画像効果処理部１１ｄによって、アートモードでは、選択された特定の色成分以外の彩度が低下される。フロントダイヤル７３ａ又はリアダイヤル７３ｂを回して、例えば１２色から特定色を選択し、選択した色以外の色の彩度を低下させることができるようになっている。
【０１０１】
画像効果処理部１１ｄはユーザの選択操作に従って、図１２ＤのステップＳ１０５において設定値を取得し、ステップＳ１０６において、撮像画像に対して標準の画像処理を施した後、取得した設定値を用いてパートカラー処理を行う（ステップＳ１０７）。撮影制御部１１ａは、パラメータ設定中において、撮像中の被写体に基づく効果処理画像をライブビュー画像としてＦ表示部１８に表示するために出力する（ステップＳ１０８）。
【０１０２】
図１１Ｄの効果処理画像１１２ａは、赤を選択することにより、赤い花の画像部分１１５ａ以外の部分がモノクロになったことを示している。図１１Ｄの効果処理画像１１２ｂは、緑を選択することにより、緑の葉の画像部分１１６ｂ以外の部分がモノクロになったことを示している。
【０１０３】
図１１Ｅは画像効果処理のモードがＮ（露出補正）モードの例を示している。このＮモードは、特殊な処理を施さない通常の撮影モードであり、Ｎモードでは、撮像画像に露出補正のみが反映される。言い換えると、露出補正は画像効果処理の１つのモードで実行されるようになっており、視認性優先画像では、露出補正さえも撮像画像に反映させないようになっている。
図１１Ｅの中央及び右側の画像１２２ａ，１２２ｂは、ピクチャモードダイヤル８０がＮ（露出補正）モードの場合において、視認性優先画像８１が表示されている状態でフロントダイヤル７３ａが回転されたときに、ファインダ部６４のＦ表示部１８の表示画面に表示される効果処理画像を示している。なお、撮影制御部１１ａは、ピクチャモードダイヤル８０の選択に拘わらず、フロントダイヤル７３ａの回転によって露出補正を行うように制御してもよい。露出補正モードにおいて、フロントダイヤル７３ａが回転されると、撮影制御部１１ａは、画像効果処理部１１ｄ及び表示制御部１１ｂを制御して、露出値表示１２７及び露出バー１２８を表示させる。
【０１０４】
図１１Ｅの効果処理画像１２２ａは、−１．３ＥＶ補正により、明るく白飛びしがちな空の画像部分が適正となり、雲の画像１２９ａの細部が観察できるようになったことを示している。また、図１１Ｅの効果処理画像１２２ｂは、＋２．３ＥＶ補正によって、逆光によって暗くなった花の画像部分１２５ｂが適正となり、花弁の細部を観察できるようになったことを示している。
【０１０５】
このように本実施の形態においても、第１の実施の形態と同様の効果を得ることができる。
【０１０６】
上記各実施の形態においては、視認性優先モードにおいて、ファインダ表示部に、視認性優先画像のみを表示するか又は一部に効果処理画像を含む視認性優先画像を表示し、画像効果処理の設定中等の効果処理画像表示期間においては、ファインダ表示部に、効果処理画像のみを表示するか又は一部に効果処理画像を含む視認性優先画像を表示する例について説明した。しかし、通常時に視認性優先画像を表示し、効果処理画像表示期間に効果処理画像を表示することができれば、どのような表示の仕方でもよい。例えば、画像効果の確認のために、効果処理画像を背面表示部に表示させるようにしてもよく、また、背面表示部において、視認性優先画像と効果処理画像とを切換えて表示するようにしてもよい。
【０１０７】
なお、上記各実施の形態においては、視認性優先画像として、ＨＤＲ合成処理によってダイナミックレンジを拡大した画像を採用する例について説明したが、これに限定されるものではなく、色調整をしなければＨＤＲ合成処理を行っていない撮像画像を用いてもよい。また、暗いシーンであっても、視認性優先モードでは、フレームレートを調整して明るく見やすい表示にするようにしてもよい。
【０１０８】
また、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。また、内視鏡、顕微鏡のような産業用、医療用の光学機器でもよい。表示機器でなくとも、このような工夫によって、ユーザが希望する画像を撮影するための表示が可能な観察装置、表示装置を提供することが可能となる。視認性優先画像と効果処理画像とを切換えて表示することができることから、対象物を詳細に観察し、診断に有効利用できることは言うまでもない。
【０１０９】
本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【０１１０】
なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。
【０１１１】
また、ここで説明した技術のうち、主にフローチャートで説明した制御や機能は、多くがプログラムにより設定可能であり、そのプログラムをコンピュータが読み取り実行することで上述した制御や機能を実現することができる。そのプログラムは、コンピュータプログラム製品として、フレキシブルディスク、ＣＤ−ＲＯＭ等、不揮発性メモリ等の可搬媒体や、ハードディスク、揮発性メモリ等の記憶媒体に、その全体あるいは一部を記録又は記憶することができ、製品出荷時又は可搬媒体或いは通信回線を介して流通又は提供可能である。利用者は、通信ネットワークを介してそのプログラムをダウンロードしてコンピュータにインストールしたり、あるいは記録媒体からコンピュータにインストールすることで、容易に本実施の形態の画像表示装置を実現することができる。
【符号の説明】
【０１１２】
１０…撮影機器、１１…制御部、１１ａ…撮影制御部、１１ｂ…表示制御部、１１ｃ…視認性優先処理部、１１ｄ…画像効果処理部、１１ｅ…操作判定部、１２…撮像部、１３…操作部、１４…時計部、１５…記録部、１７…表示部、１７ａ…タッチパネル、１８…Ｆ表示部。
【図１】
0006602679.tif 000002
【図２Ａ】
0006602679.tif 000003
【図２Ｂ】
0006602679.tif 000004
【図３】
0006602679.tif 000005
【図４Ａ】
0006602679.tif 000006
【図４Ｂ】
0006602679.tif 000007
【図５】
0006602679.tif 000008
【図６】
0006602679.tif 000009
【図７】
0006602679.tif 000010
【図８Ａ】
0006602679.tif 000011
【図８Ｂ】
0006602679.tif 000012
【図９】
0006602679.tif 000013
【図１０Ａ】
0006602679.tif 000014
【図１０Ｂ】
0006602679.tif 000015
【図１１Ａ】
0006602679.tif 000016
【図１１Ｂ】
0006602679.tif 000017
【図１１Ｃ】
0006602679.tif 000018
【図１１Ｄ】
0006602679.tif 000019
【図１１Ｅ】
0006602679.tif 000020
【図１２Ａ】
0006602679.tif 000021
【図１２Ｂ】
0006602679.tif 000022
【図１２Ｃ】
0006602679.tif 000023
【図１２Ｄ】
0006602679.tif 000024