(57)【要約】【課題】利用者が表示部における遅延の程度を把握できるようにする。【解決手段】被写体を撮影する撮影センサーの出力データから生成された前記被写体の像を示す画像データに基づいて前記被写体の像を表示部に表示させ、前記撮影センサーによる前記被写体の撮影に応じたタイミングから前記表示部による前記被写体の像の表示に応じたタイミングまでの遅延に対応する指標を指標表示部に表示させる。【選択図】図１
2011254416.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影する撮影センサーの出力データから生成された前記被写体の像を示す画像データに基づいて前記被写体の像を表示部に表示させる表示制御部と、
前記撮影センサーによる前記被写体の撮影に応じたタイミングから前記表示部による前記被写体の像の表示に応じたタイミングまでの遅延に対応する指標を指標表示部に表示させる指標表示制御部と、
を備える撮影装置。
【請求項２】
前記指標表示制御部は、前記撮影センサーによる前記被写体の撮影に応じたタイミングから前記表示部による前記被写体の像の表示に応じたタイミングまでの遅延の時間を前記指標として表示する、
請求項１に記載の撮影装置。
【請求項３】
前記表示制御部は、異なるフレームレートで前記被写体の像を前記表示部に表示させることが可能であり、
前記指標表示制御部は、前記表示部における現在の前記フレームレートを前記指標として表示する、
請求項１または請求項２のいずれかに記載の撮影装置。
【請求項４】
前記表示制御部は、操作部に対する利用者の操作に応じて前記表示部において単位期間に表示される画像の量を変更し、
前記指標表示制御部は、前記単位期間に表示される画像の量が第１の量である場合に、前記単位期間に表示される画像の量が前記第１の量よりも多い第２の量である場合よりも前記遅延が大きいことを示す前記指標を前記指標表示部に表示させる、
請求項１〜請求項３のいずれかに記載の撮影装置。
【請求項５】
前記撮影センサーは、前記撮影センサーの受光量に応じた時間の露光を行って前記出力データを出力し、
前記指標表示制御部は、前記露光の時間が第１の時間である場合に、前記露光の時間が前記第１の時間よりも短い第２の時間である場合よりも前記遅延が大きいことを示す前記指標を前記指標表示部に表示させる、
請求項１〜請求項４のいずれかに記載の撮影装置。
【請求項６】
前記表示制御部は、前記撮影装置を駆動するためのバッテリーの残電力量に応じて前記表示部において単位期間に表示される画像の量を変更し、
前記指標表示制御部は、前記バッテリーの残電力量が第１の電力量である場合に、前記バッテリーの残電力量が前記第１の電力量よりも多い第２の電力量である場合よりも前記遅延が大きいことを示す前記指標を前記指標表示部に表示させる、
請求項１〜請求項５のいずれかに記載の撮影装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示部に被写体の像を表示する撮影装置に関する。
【背景技術】
【０００２】
従来、撮影センサーで撮影した画像を液晶ディスプレイで表示する撮影装置が知られており、液晶ディスプレイにおいて被写体の像が被写体から遅延して表示されることを防止するために各種の技術が開発されている。例えば、特許文献１には、１フレーム分の画像信号を記録するＶＲＡＭを備える撮影装置において、ＶＲＡＭに対して１フレーム分の画像信号の書き込みが完了する前に画像信号を読み出して液晶ディスプレイで表示させる技術が開示されている。具体的には、撮影センサーの駆動タイミングからΔＴだけ遅延した再生タイミングで液晶ディスプレイでの画像表示を開始する構成が記述されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２４３６１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
利用者が撮影前に被写体を確認できるように撮影装置の表示部に撮影センサーで撮影した被写体の像を表示する構成において、被写体の像が被写体から遅延して表示されているとレリーズのタイミングにおける被写体の像と実際の被写体の様子とにずれが生じる。このため、上述のような遅延は、利用者が意図通りの像を撮影する際の障害となり得る。しかし、特許文献１の技術においては、利用者が当該遅延の様子を把握することができず、遅延を考慮した上で構図やレリーズタイミングの決定をすることができなかった。すなわち、特許文献１の技術においては、通常撮影モード、電子ズームモードなどのモード毎に位相差ΔＴを決定しており、撮影センサーによる撮影後、モード毎に異なる位相差ΔＴだけ遅延したタイミングで再生が開始される。しかし、このようなモード毎に異なる遅延量を利用者が認識することはできない。
本発明は上記課題にかんがみてなされたもので、利用者が表示部における遅延の程度を把握可能にすることを目的の１つとする。
【課題を解決するための手段】
【０００５】
上記目的を達成するため、本発明においては、撮影センサーによる被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの遅延に対応する指標を指標表示部に表示する構成とする。すなわち、撮影センサーの出力データから画像データを生成することによって表示部に被写体の像を表示可能になる構成においては、被写体を撮影した後、即座に表示部に被写体の像を表示可能になるわけではない。具体的には、撮影センサーにおける撮影開始から所定の所要期間を要して出力データを出力し、出力データが出力された後、さらに、所定の所要時間を要する画像データの生成処理を行い、当該生成処理が終了した後に表示部に被写体の像を表示することが可能になる。従って、撮影センサーによる被写体の撮影に応じたタイミングから表示部による被写体の像の表示に対応したタイミングまでの間に遅延が生じる。そこで、指標表示部に当該遅延に対応する指標を表示することにより、当該指標を視認する利用者が表示部における遅延の程度を把握することが可能になる。
【０００６】
表示制御部は、画像データに基づいて被写体の像を表示部に表示させることができればよい。一般的に、被写体の像はエリアセンサーによって撮影され、ライン毎に出力データが生成されるため、ライン毎の出力データから生成されたライン毎の画像データに基づいて表示部の各ラインの表示を行うことができればよい。
【０００７】
指標表示制御部は、指標表示部に指標を表示させることができればよい。ここで、指標は、被写体の撮影に応じたタイミングから表示部による被写体の像の表示に対応したタイミングまでの間の遅延に対応した情報であり、当該遅延を利用者に直接的あるいは間接的に認識させるための情報であればよい。前者としては、例えば、撮影センサーによって被写体の撮影が開始されたタイミングから表示部に被写体の像が表示され始めたタイミングまでの遅延の時間を示す情報が挙げられる。むろん、指標は遅延に対応していれば良く、撮影開始から表示開始までの遅延の他、撮影完了から表示完了までの遅延など、種々の遅延を想定可能である。
【０００８】
後者としては、例えば、表示部における現在の前記フレームレートを示す情報が挙げられる。すなわち、異なるフレームレートで被写体の像を表示部に表示させることが可能である場合、フレームレートが速いほど遅延量が短くなる可能性が高い。そこで、フレームレートを示す情報を上述の指標として表示すれば、表示部における遅延の程度を利用者に把握させることが可能である。むろん、指標は、遅延の大きさやフレームレートを示す数値に限定されず、その量を示すアイコン、例えば、色や図形、記号等によって遅延の大きさやフレームレートを示す情報であってもよい。
【０００９】
なお、指標表示部は指標を表示する部分として撮影装置に備えられていれば良く、被写体の像を表示する表示部の一部によって構成されていてもよいし、表示部と異なる任意の表示デバイスであっても良い。むろん、表示デバイスは液晶ディスプレイ等の各種ディスプレイの他、ＬＥＤ等であってもよい。
【００１０】
さらに、被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの間の遅延に対応した指標を指標表示部に表示させる際に好適な構成例として、利用者の操作によって撮影装置の動作が変更され、変更後の動作状態に対応した指標が表示されるように構成してもよい。例えば、撮影装置に備えられた操作部に対する利用者の操作に応じて表示部において単位期間に表示される画像の量を変更する構成において、変更後の単位期間に表示される画像の量に対応する指標を指標表示部に表示させる構成としてもよい。
【００１１】
すなわち、表示部において単位期間に表示される画像の量の変更は、表示部の更新頻度の変更であり、当該変更により被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの間の遅延は変動しえる。そこで、単位期間に表示される画像の量に対応する指標を、上述の遅延に対応した指標として表示することにより、操作部の操作による遅延の変動を利用者に把握させることが可能になる。
【００１２】
単位期間に表示される画像の量は、所定の単位期間において表示部にて表示内容が更新され得るライン数やフレーム数等である。例えば、垂直同期信号および水平同期信号によって表示部における１フレームの表示および１ラインの表示タイミングを制御する構成において、垂直同期期間や水平同期期間を変更すると、単位期間において表示部に表示される被写体の像のフレーム数やライン数が変化する。そこで、操作部に対する利用者の操作に応じて垂直同期期間や水平同期期間が変更される構成において、当該垂直同期期間や水平同期期間の変更に応じて変化する指標を表示する構成としても良い。例えば、単位期間に表示される画像の量が第１の量である場合に、単位期間に表示される画像の量が第１の量よりも多い第２の量である場合よりも遅延が大きいことを示す指標を指標表示部に表示させる構成とすれば、指標を視認する利用者に表示部における遅延の程度を把握させることが可能になる。
【００１３】
なお、操作部は、撮影装置における各種の機能を実行するために利用される操作部であれば良く、例えば、ダイヤルやボタン等によって構成される。さらに、当該操作部は、任意の機能の実行指示を受け付ける操作部であってよい。例えば、単位期間に表示される画像の量を変更するための操作部であっても良いし、他の機能を実行するための操作部であっても良い。後者としては、操作部における操作指示の結果実行される機能と、指標とに概念的な対応がない場合や、両者が一対一に対応していない場合等が挙げられる。
【００１４】
すなわち、前者としては、操作部で実行指示を行う機能と単位期間に表示される画像の量とが直接的に対応しないため、操作部の操作によって単位期間に表示される画像の量が変化することが利用者にとって自明でない場合が挙げられる。さらに、後者としては、スポーツ撮影モードと節電モードとを組み合わせるなど、操作部によって複数の選択肢を選択して実行する状態において、モードの組み合わせの結果、単位期間に表示される画像の量が変化することが利用者にとって自明でない場合が挙げられる。これらの場合において、操作部の操作に応じて指標が変化する構成とすることで利用者に対して表示部における遅延の程度を明示することが可能になる。
【００１５】
さらに、撮影センサーによる被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの遅延が生じる例として、撮影センサーにおいて、受光量に応じた長さの露光を行い、適切な時間露光を行った後に出力データを出力する構成を想定可能である。すなわち、撮影センサーにおいて、受光量に応じた長さの露光を行う場合、露光時間の長さに応じて撮影センサーによる被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの遅延が変動し得る。そこで、露光の時間が第１の時間である場合に、露光の時間が第１の時間よりも短い第２の時間である場合よりも遅延が大きいことを示す指標を表示する構成とすることで、露光時間の長さに応じて変動する表示部における遅延の程度を利用者に対して明示することが可能になる。なお、被写体を撮影してから表示部に被写体の像が表示されるまでの遅延量を変動させる要因は露光の時間以外にも各種の要因が想定し得る。例えば、撮影センサーによる撮影の後に表示対象となる被写体の像を示す画像データを生成する処理が複数の工程にて構成され、各工程の処理に要する期間が変動し得る場合、処理期間が長いほど遅延が大きいことを示す指標を指標表示部に表示させる構成としても良い。
【００１６】
さらに、撮影センサーによる被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの遅延が生じる例として、撮影装置を駆動するためのバッテリーの残電力量に応じて表示部において単位期間に表示される画像の量を変更する構成を想定可能である。すなわち、バッテリーの残電力量が所定の基準以下となった場合に電力消費量を抑制するため、撮影装置で節電モードが実行されることを想定する。さらに、電力消費量を抑制する一手法として、バッテリーの残電力量が所定の基準以下となった場合に、表示部において単位期間に表示される画像の量を抑制する（例えば、節電モードにおいて非節電モードよりもフレームレートを小さくする）構成を想定する。この構成において、バッテリーの残電力量に対応する指標を指標表示部に表示させることにより、バッテリーの残電力量に応じて変動する表示部における遅延の程度を利用者に対して明示することが可能になる。例えば、バッテリーの残電力量が第１の電力量である場合に、バッテリーの残電力量が第１の電力量よりも多い第２の電力量である場合よりも遅延が大きいことを示す指標を指標表示部に表示させることにより、電力量に応じて単位期間に表示される画像の量が変動することに伴って遅延時間が変動した場合に、その変動を利用者に把握させることができる。
【００１７】
さらに、本発明のように、撮影センサーによる被写体の撮影に応じたタイミングから表示部による被写体の像の表示に応じたタイミングまでの遅延に対応する指標を指標表示部に表示させる手法は、プログラムや方法としても適用可能である。また、以上のような装置、プログラム、方法は、単独の装置として実現される場合もあれば、複合的な機能を有する装置において共有の部品を利用して実現される場合もあり、各種の態様を含むものである。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施形態にかかるブロック図である。
【図２】エリアイメージセンサーと液晶パネルの画素数を示す図である。
【図３】エリアイメージセンサーの出力データの出力法を例示する図である。
【図４】本実施形態にかかる表示部に印加される信号のタイミングチャートである。
【図５】本実施形態にかかるエリアイメージセンサー、画像データ生成、表示部におけるフレームレートを示す図である。
【図６】本発明の他の実施形態にかかるタイミングチャートである。
【図７】本発明の他の実施形態にかかるブロック図である。
【発明を実施するための形態】
【００１９】
ここでは、下記の順序に従って本発明の実施の形態について説明する。
（１）撮影装置の構成：
（２）水平同期信号の制御：
（２−１）指標の表示：
（３）他の実施形態：
【００２０】
（１）撮影装置の構成：
図１は本発明の一実施形態にかかる撮影装置１には、光学系１０、エリアイメージセンサー１５、ＡＳＩＣ２００、タイミングジェネレーター３０、表示部４０、ＣＰＵ５０、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＯＭ５３、ＲＡＭ５４、操作部５５が備えられている。このＡＳＩＣ２００は、画像処理用ＤＳＰ（Digital Signal Processor）であっても良い。ＣＰＵ５０は、ＶＲＡＭ５１、ＳＤ−ＲＡＭ５２、ＲＡＭ５４を適宜利用してＲＯＭ５３に記録されたプログラムを実行可能であり、当該プログラムによりＣＰＵ５０は、操作部５５に対する操作に応じてエリアイメージセンサー１５にて撮影された被写体を示す画像データを生成する機能を実行する。なお、操作部５５はシャッターボタンと、モードを切り換えるためのモード切換手段としてのダイヤルスイッチと、絞りとシャッター速度を切り換えるためのダイヤルスイッチと、各種の設定メニューを操作するためのプッシュボタンと、節電モードと非節電モードからなる電力モードの切替スイッチとを備えており、利用者は当該操作部５５に対する操作によって撮影装置１に対して各種の指示を与えることができる。なお、節電モードは撮影装置１を駆動するためのバッテリーの消費電力を規定の消費電力より抑制するモードであり、非節電モードは規定の消費電力で撮影装置１を駆動するモードである。
【００２１】
表示部４０は、撮影対象となる被写体を示す画像を表示して利用者に撮影前の被写体の様子および撮影条件等の情報を把握させるＥＶＦ（Electronic View Finder）であり、本実施形態にかかる撮影装置１はＥＶＦを備えたミラーレスデジタルカメラである。表示部４０は、図示しないインターフェース回路、液晶パネルドライバー４１、液晶パネル４２、図示しない接眼レンズ等を備えている。本実施形態において液晶パネル４２は、画素ごとに３色のカラーフィルターに対応する３つのサブピクセルを備える高温ポリシリコンＴＦＴ（Thin Film Transistor）であり、画素の位置は直交座標系における座標で規定される。また、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼び、液晶パネル４２の全画素によって構成される１画面を１フレームと呼ぶ。
【００２２】
液晶パネルドライバー４１は、各サブピクセルに電圧を印加して液晶を駆動するための信号を液晶パネル４２に対して出力する。液晶パネル４２は、図示しないゲートドライバーおよびソースドライバーを備えており、液晶パネルドライバー４１から出力される信号に応じてゲートドライバーが各ラインの各画素における表示タイミングを制御し、ソースドライバーが表示タイミングとされているラインの各画素に対して各画素の画像データに対応した電圧を印加することによって表示を行う。すなわち、液晶パネルドライバー４１は、液晶パネル４２における表示を行うための各種信号、例えば、１フレーム分の表示を行うための期間を規定する垂直同期信号（DVsync）、１ライン分の表示を行うための期間を規定する水平同期信号（DHsync）、各ライン内での画像データの取り込み期間を規定するデータアクティブ信号（DDactive）、各画素の画像データの取り込みタイミング等を規定するデータクロック信号（DDotclock）、各画素の画像データ（Data）を出力するように構成されている。
【００２３】
なお、本実施形態にかかる撮影装置１は、タイミングジェネレーター３０を備えており、上述の垂直同期信号DVsync、水平同期信号DHsync、データアクティブ信号DDactive、データクロック信号DDotclockは当該タイミングジェネレーター３０によって生成される。すなわち、タイミングジェネレーター３０は、クロック信号発生手段から出力される所定周期のクロック信号の変化タイミングに同期して信号レベルが変化する信号を生成する分周回路等を備えた表示制御部３０ｂを備えている。そして、タイミングジェネレーター３０は、表示制御部３０ｂの制御により、予め決められたタイミングで信号レベルが変化する垂直同期信号DVsync、データアクティブ信号DDactive、データクロック信号DDotclockを生成する。なお、本実施形態において水平同期信号DHsyncの出力タイミングは可変であり、後述するようにリサイズ処理部２０ｅの処理結果に依存して出力タイミングが決定される。
【００２４】
また、本実施形態における液晶パネル４２は、水平方向に１０２４個、垂直方向に７６８個の有効画素を備えた画素数がＸＧＡサイズのパネルであり、液晶パネルドライバー４１が出力する画像データDataの内容および出力タイミングを調整することによって、任意の位置にDataに対応した階調の表示を行うことができる。本実施形態においては、液晶パネル４２の予め決められた被写体像表示領域にエリアイメージセンサー１５の出力データに基づいて被写体の画像を表示し、また、当該被写体像表示領域以外の情報表示領域に撮影条件等の情報を示す文字を表示する構成となっている。すなわち、液晶パネル４２には、被写体の画像とともに撮影条件等の情報を示す文字がＯＳＤ（On Screen Display）表示される。なお、液晶パネル４２は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。
【００２５】
光学系１０は、エリアイメージセンサー１５に被写体画像を結像させるレンズ１１、絞り１２、シャッター１３およびローパスフィルター１４を備える。このうち、レンズ１１と絞り１２とは図示しない筐体に交換可能に取り付けられる。エリアイメージセンサー１５としては、ベイヤー配列されたカラーフィルターと、光量に応じた電荷を光電変換によって画素ごとに蓄積する複数のフォトダイオードとを備えるＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサー、ＣＣＤ（Charge Coupled Device）イメージセンサー等の固体撮像素子が用いられる。エリアイメージセンサー１５の画素の位置は直交座標系における座標で規定され、一方の座標軸に平行な方向に並ぶ複数の画素によってラインが構成され、複数のラインが他方の座標軸に平行な方向に並ぶように構成されている。本明細書では、ラインに平行な方向を水平方向、ラインに垂直な方向を垂直方向と呼ぶ。エリアイメージセンサー１５の全画素によって構成される１画面を１フレームと呼ぶ。
【００２６】
本実施形態においては、エリアイメージセンサー１５もタイミングジェネレーター３０が出力する各種信号に同期した動作を行う。すなわち、タイミングジェネレーター３０は、１フレーム分のフォトダイオードの検出結果を読み出すための期間を規定する垂直同期信号（SVsync）、１ライン分のフォトダイオードの検出結果を読み出すための期間を規定する水平同期信号（SHsync）、各画素の画像データの読み出しタイミング等を規定するデータクロック信号（SDotclock）を出力する。エリアイメージセンサー１５は、垂直同期信号SVsyncに応じて１フレーム分の出力データの出力を開始し、水平同期信号SHsyncにて規定される期間内にデータクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の一部の画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。
【００２７】
ＡＳＩＣ２００は、ＳＤ−ＲＡＭ５２に予め確保された複数ライン分のラインバッファー５２ａ〜５２ｄを利用し、表示部４０にて被写体の像を表示するための画像データをパイプライン処理によって生成する処理を行う回路によって構成される画像データ生成部２０を備えている。また、複数ライン分のラインバッファー５２ａ〜５２ｄは画像データ生成部２０などに設けられていても良い。表示部４０は生成された画像データに基づいて被写体を液晶パネル４２に対して表示する。すなわち、利用者は、表示部４０をＥＶＦとして利用しながら被写体を確認することが可能である。
【００２８】
以上のように、本実施形態においては、エリアイメージセンサー１５と表示パネル４２との双方がタイミングジェネレーター３０から出力される各種信号によって駆動されるが、本実施形態においては、表示部４０がＥＶＦとして利用されている状態において、垂直同期信号SVsync，DVsyncの周期は同一かつ一定となるように制御される。すなわち、この構成によって、エリアイメージセンサー１５にて撮影された被写体が１フレーム期間以上遅れて液晶パネル４２に表示されることはなく、また、同一タイミングで撮影された被写体の像が複数フレーム期間に渡って液晶パネル４２に表示されないように構成されている。
【００２９】
本実施形態においては、さらに、電力モードに応じて垂直同期信号SVsync，DVsyncの周期を変更するように構成されている。すなわち、利用者が操作部５５によって電力モードを非節電モードとした場合、ＣＰＵ５０は当該操作部５５に対する操作指示に基づいて電力モードが非節電モードであることを特定し、タイミングジェネレーター３０に対して電力モードが非節電モードであることを示す情報を出力する。当該電力モードが非節電モードであることを示す情報をタイミングジェネレーター３０が受け取ると、タイミングジェネレーター３０は、予め決められた第１の周期（本実施形態においては６０ｆｐｓ相当）となるように垂直同期信号SVsync，DVsyncの周期を決定し、各垂直同期信号SVsync，DVsyncを出力する。
【００３０】
一方、利用者が操作部５５によって電力モードを節電モードとした場合、ＣＰＵ５０は当該操作部５５に対する操作指示に基づいて電力モードが節電モードであることを特定し、タイミングジェネレーター３０に対して電力モードが節電モードであることを示す情報を出力する。当該電力モードが節電モードであることを示す情報をタイミングジェネレーター３０が受け取ると、タイミングジェネレーター３０は、予め決められた第１の周期よりも長い第２の周期（本実施形態においては３０ｆｐｓ相当）となるように垂直同期信号SVsync，DVsyncの周期を決定し、各垂直同期信号SVsync，DVsyncを出力する。なお、ここで、タイミングジェネレーター３０は、エリアイメージセンサー１５の垂直同期信号SVsyncを出力したタイミングから所定の期間後に表示部４０の垂直同期信号DVsyncを出力することで、垂直同期信号SVsync，DVsyncの位相差が一定となるように制御する。
【００３１】
さらに、撮影装置１は、操作部５５の操作に応じて各種の機能を実行する。例えば、利用者が操作部５５を操作して撮影指示を行った場合、撮影指示に応じてエリアイメージセンサー１５は、垂直同期信号SVsyncに応じて１フレーム分の出力データの出力を開始し、水平同期信号SHsyncにて規定される期間内にデータクロック信号SDotclockに応じたタイミングでエリアイメージセンサー１５の全有効画素に対応するフォトダイオードの検出結果を示す出力データを逐次読み出す。そして画像データ生成部２０は、ＳＤ−ＲＡＭ５２等を利用しＪＰＥＧ等の形式の画像データを生成して図示しないリムーバブルメモリ等に記録される。すなわち、利用者は、被写体を示す画像データを生成することが可能である。
【００３２】
（２）水平同期信号の制御：
被写体を示す画像データをリムーバブルメモリ等に記録し、印刷すること等を考慮した場合、高品質の画像データを得るためにはエリアイメージセンサー１５の画素数が所定数より多いことが望まれる。そこで、本実施形態におけるエリアイメージセンサー１５の有効画素数は図２に示すように、水平方向に５４００画素、垂直方向に３６００画素となっている。エリアイメージセンサー１５は水平方向および垂直方向に有効画素よりも多数の画素を備えているが、本明細書では簡単のため有効画素以外の画素に関する処理は省略して説明する。
【００３３】
一方、上述のように、液晶パネル４２は水平方向に１０２４個、垂直方向に７６８個の画素を備え、被写体像表示領域（図２に示すＲ1）に被写体の画像を表示する構成となっている。本実施形態においては、エリアイメージセンサー１５の縦横比（２：３）を維持したままできるだけ大きく被写体の画像を表示するため、液晶パネル４２の上辺および左右の辺に対して上辺及び左右の辺が接する縦横比２：３の矩形領域を被写体の画像を表示する被写体像表示領域Ｒ1としている。また、残りの領域が撮影条件等の情報を示す文字を表示する情報表示領域（図２に示す領域）である。従って、液晶パネル４２における被写体像表示領域Ｒ1は、水平方向に１０２４個、垂直方向に６８２個の画素にて構成される。以上のように、本実施形態においては、エリアイメージセンサー１５の画素数と液晶パネル４２の画素数とは一致していない。
【００３４】
さらに、表示部４０における表示は利用者による被写体の確認に利用されるため、エリアイメージセンサー１５による被写体の撮影に応じたタイミングから表示部４０による被写体の像の表示に応じたタイミングまでの遅延が利用者によって認識可能な程度の長さであると、ＥＶＦで視認した被写体と記録される被写体の像とがずれるなど、極めて使いづらいＥＶＦとなってしまう。従って、表示部４０がＥＶＦとして利用される際には、遅延が少ないことが要求される。
【００３５】
そこで、エリアイメージセンサー１５にて撮影した画像を人間が視認しづらい極めて短い遅延にて表示部４０に表示させるため、本実施形態においては、エリアイメージセンサー１５および画像データ生成部２０で各種の処理を行い、表示部４０は、この処理の結果生成された画像データを高速に表示させるための構成を備えている。
【００３６】
すなわち、本実施形態にかかるエリアイメージセンサー１５は、垂直方向に並ぶラインのうちｎ個（ｎは奇数）に１個の割合でフォトダイオードの検出結果を読み出す飛び越し走査を実行可能な回路が設けられている。また、同色のカラーフィルターを介して光電変換を行うフォトダイオードのうち水平方向に並ぶｍ個（ｍは自然数）の検出結果を加算してその和をｍ分の１にして（すなわちｍ個の検出結果の相加平均を）出力するための加算器が設けられている。本実施形態において、表示部４０をＥＶＦとして機能させる際、エリアイメージセンサー１５においては、飛び越し走査および加算器による処理を実行することにより、水平方向および垂直方向の画素を間引き、エリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力することで、高速に被写体を撮影する構成としている。
【００３７】
すなわち、エリアイメージセンサー１５は、表示部４０をＥＶＦとして機能させるライブビューモードにおいて、ｎ個に１個の割合で垂直方向のラインを読み出し対象とした読み出しを水平同期信号SHsyncに応じて行う。また、ｍ個のフォトダイオードの検出結果を加算器で加算した結果を出力データとして出力する処理をデータクロック信号SDotclockに応じて行う。図３は、本実施形態においてエリアイメージセンサー１５が備える画素数よりも少ない画素数の出力データを出力する方法の一例を示している。同図３において、Ｒが付された矩形は赤の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｇが付された矩形は緑の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示し、Ｂが付された矩形は青の帯域の光を透過するカラーフィルターに対応するフォトダイオードを示している。
【００３８】
同図３に示すように、矩形で示す各画素のカラーフィルターがベイヤー配列である場合、各画素に１色のカラーフィルターのみが対応しているため、各画素の色は周囲の画素を利用して補間する必要がある。このため、ラインを間引いて出力データを取得する際に、間引き後に隣接するラインのカラーフィルターが異なる色となるように間引きを行う必要がある。このため、本実施形態においては、ｎを奇数とし、ｎラインに１ラインの割合で各ラインのフォトダイオードでの検出値を出力データとして取得すれば、補間によって各画素の色を特定可能な出力データを取得することができる。本実施形態においては、エリアイメージセンサー１５の垂直方向のライン数をできるだけ液晶パネル４２の被写体像表示領域Ｒ1の垂直方向のライン数に近づけるため、５ラインに１ラインの割合で出力データを取得する構成としている。図３においては、５ラインに１ラインの割合で出力データを取得することを左向きの矢印で示しており、この例においては垂直方向のライン数が１／５、すなわち、７２０となる。
【００３９】
さらに、カラーフィルターがベイヤー配列である場合、水平方向に隣接する画素の色は異なるとともに、１個おきに同色のカラーフィルターが並ぶことになる。このため、水平方向に並ぶ画素について１個おきにｍ個加算しその和をｍ分の１にすることで（すなわちｍ個の検出結果の相加平均を求めることで）実質的に間引き処理を行うことができる。本実施形態においては、加算器による加算を行った場合の画質上の制約等により、ｍを３と設定している。図３においては、最も下に記したラインのうち、緑色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオード検出結果を加算器Ｓ1によって加算して１／３にし、赤色のカラーフィルターを介して光電変換を行うフォトダイオードであって水平方向に並ぶ３個のフォトダイオードの検出結果を加算器Ｓ2によって加算して１／３にする構成を示している。この例においては水平方向の画素数が１／３、すなわち、１８００画素となる。図２には、エリアイメージセンサー１５における間引き後のデータサイズを破線の矩形１５ａによって示している。
【００４０】
以上のように、エリアイメージセンサー１５においては、垂直方向のライン数を７２０ライン、水平方向の画素数を１８００画素とすることができる。しかし、このような間引きにおいては、垂直方向においてｎが奇数であり、水平方向においてｍが自然数である等画質上の制約があるため、間引き後の画素数と液晶パネル４２の被写体像表示領域Ｒ1の画素数とを一致させることは困難である。また、上述のようにｎとｍとが異なる場合には縦横比が被写体と液晶パネル４２の被写体像とで異なるものになってしまう。
【００４１】
そこで、本実施形態においては、画像データ生成部２０において、間引き後の出力データに対してさらにリサイズを行って液晶パネル４２の被写体像表示領域Ｒ1に表示させるための画像データを生成する構成としている。すなわち、画像データ生成部２０は、画素補間部２０ａ、色再現処理部２０ｂ、フィルター処理部２０ｃ、ガンマ補正部２０ｄ、リサイズ処理部２０ｅを備えている。そして、画像データを生成する過程でリサイズ処理部２０ｅによって垂直方向および水平方向の画素数を変更することにより、液晶パネル４２の被写体像表示領域Ｒ1の画素数と等しい画像データを生成する構成としている。
【００４２】
ラインバッファー５２ａは、エリアイメージセンサー１５から出力される間引き後の出力データを一時記録するバッファーメモリであり、エリアイメージセンサー１５から間引き後の出力データが出力されると画像データ生成部２０の処理によって当該出力データがラインバッファー５２ａに一時記録される。画素補間部２０ａは、ラインバッファー５２ａからベイヤー配列において各画素で欠落している２チャネルの色を生成するために必要な画素数のデータを取り込みながら補間処理によって当該２チャネルの色を生成する。この結果、各画素において３チャネルのデータが生成される。次に、色再現処理部２０ｂは、生成されたデータに基づいて３×３の行列演算を行うことによってカラーマッチングのための色変換処理を行う。色変換処理によって生成されたデータはラインバッファー５２ｂに一時記録される。次にフィルター処理部２０ｃは、シャープネス調整やノイズ除去処理などをフィルター処理によって実行する。次にガンマ補正部２０ｄはエリアイメージセンサー１５の出力データの階調値が示す色と表示部４０で扱う画像データの階調値が示す色との特性差を補償するガンマ補正を実行する。ガンマ補正によって生成されたデータはラインバッファー５２ｃに一時記録される。
【００４３】
当該ラインバッファー５２ｃに線順次で記録されていくデータはエリアイメージセンサー１５において間引きが行われた画素数である。すなわち、垂直方向に７２０ライン、水平方向に１８００画素のデータが線順次で記録されていくことになる。リサイズ処理部２０ｅは当該ラインバッファー５２ｃに記録されていくデータを逐次参照して補間演算処理を行い、画素の間の位置における各チャネルの階調値を特定することによってリサイズを行う。本実施形態において、上述のエリアイメージセンサー１５における間引きは垂直方向に１／５，水平方向に１／３であるため、図２の矩形１５ａにて示すように間引き後のデータの縦横比はエリアイメージセンサー１５の出力データの縦横比と異なっている。そこで、リサイズ処理部２０ｅは、まず、ラインバッファー５２ｃに記録されたデータに基づいて水平方向に約５７％のサイズに縮小する縮小処理を行う。この結果、水平方向の画素数を１０２４画素とする。さらに、リサイズ処理部２０ｅは、垂直方向に約９５％に縮小する縮小処理を行う。この結果、水平方向に１０２４画素、垂直方向に６８２ラインの画像データを生成する。生成された画像データはラインバッファー５２ｄに線順次で記録される。
【００４４】
本実施形態においては、以上の処理によってエリアイメージセンサー１５の出力データに基づいて液晶パネル４２の被写体像表示領域Ｒ1に表示可能な画像データを生成する生成処理を行うが、エリアイメージセンサー１５の出力データは垂直方向に７２０ラインであり、画像データの垂直方向のライン数である６８２ラインや液晶パネル４２の垂直方向のライン数である７６８ラインとは異なっている。すなわち、１フレーム分の撮影及び表示を行うために必要なライン数が異なっている。
【００４５】
そこで、本実施形態においては、エリアイメージセンサー１５と液晶パネル４２とにおいて、水平同期信号SHsync，DHsyncはそれぞれ独立に設定される。同様に、データアクティブ信号SDactive，DDactiveおよびデータクロック信号SDotclock，DDotclockはそれぞれ独立に設定される。すなわち、垂直同期信号SVsync，DVsyncに規定される垂直同期期間はエリアイメージセンサー１５と液晶パネル４２とにおいて共通の長さとなる。しかし、エリアイメージセンサー１５と液晶パネル４２とでは上述のように撮影ライン数と表示ライン数が異なる。そこで、水平同期信号やデータアクティブ信号、データクロック信号は、エリアイメージセンサー１５におけるライン数、液晶パネル４２におけるライン数に合わせてそれぞれ独立に適切な撮影及び表示ができるように周期が設定される。
【００４６】
すなわち、タイミングジェネレーター３０は、エリアイメージセンサー１５において上述のような垂直方向の間引きを行って垂直同期信号SVsyncで規定される期間内に１フレーム分のライン数の出力データを取得できるようなタイミングおよび出力回数で水平同期信号SHsyncを出力する。また、タイミングジェネレーター３０は、以上のような水平方向の間引きを行って水平同期信号SHsyncで規定される期間内に１ライン分の画素数の出力データを取得できるようなタイミングおよび出力回数でデータクロック信号SDotclockを出力する。
【００４７】
一方、当該エリアイメージセンサー１５から線順次に出力される出力データに基づいて遅延時間を最小化して液晶パネル４２における表示を行うため、本実施形態においては、液晶パネル４２の各ラインに対して表示を行うための画像データが準備された時点で水平同期信号DHsyncが出力されるように構成されている。すなわち、本実施形態において液晶パネル４２は、リサイズ処理部２０ｅによる処理が終了したラインの表示を行うことが可能である。そこで、タイミングジェネレーター３０は、液晶パネル４２の垂直方向のＮライン目（Ｎは自然数）の画像データの生成処理が終了した時点でＮライン目の表示を行うための水平同期信号DHsyncを出力する。
【００４８】
具体的には、タイミングジェネレーター３０は、進捗情報取得部３０ａを備えており、当該進捗情報取得部３０ａは、リサイズ処理部２０ｅから当該リサイズ処理部２０ｅにおける画像データの生成処理が終了したラインを示す進捗情報を取得することが可能である。従って、当該進捗情報によれば、画像データに基づいて液晶パネル４２における表示が可能になったラインを特定することが可能である。そこで、タイミングジェネレーター３０が、各ラインの画像データの生成処理が終了したタイミングに同期して水平同期信号DHsyncを出力することにより、液晶パネル４２において当該画像データの生成処理が終了したラインの表示を開始させる構成とする。この構成によれば、画像データの準備が整う前に各ラインの表示を開始することはなく、各ラインの表示準備が整うと即座に各ラインの表示をすることが可能になる。
【００４９】
なお、液晶パネル４２においては、水平同期信号DHsyncの出力タイミングで規定される水平同期期間内に液晶パネル４２の各ラインの画素表示を行うことができればよいため、タイミングジェネレーター３０は、水平同期信号DHsyncの出力タイミングで規定される水平同期期間が最短となる期間として想定される期間内に１ライン分の画素表示を行うことができるようにデータアクティブ信号DDactiveおよびデータクロック信号DDotclockを出力する。
【００５０】
以上のような構成によれば、リサイズ処理部２０ｅによる処理に時間がかかった場合に水平同期信号DHsyncの出力タイミングが遅れ得ることになるため、一定の周期の垂直同期信号DVsyncとするためには当該遅れを相殺する必要がある。そこで、タイミングジェネレーター３０は、予め決められた基準の期間THに対して水平同期期間を長期化あるいは短期化することによって基準の期間THからの時間変動を相殺することによって、液晶パネル４２にて１フレームを表示するための垂直同期期間が一定となるように出力信号を制御している。より具体的には、本実施形態においては、被写体表示領域Ｒ1において、各ラインの画像データの生成処理が終了するまで水平同期信号DHsyncの出力を待機することで水平同期期間が長期化され得る状態とする。さらに、撮影条件等の情報を示す文字を表示する液晶パネル４２の情報表示領域Ｒ2において、被写体表示領域Ｒ1で長期化された水平同期期間と基準の期間THとの差分の累計を相殺するように基準の期間THよりも水平同期期間を短期化する。なお、基準の期間THは、例えば、垂直同期期間内に液晶パネル４２の全ライン数について均等な期間で各ラインの表示を行う場合の水平同期期間によって構成される。
【００５１】
図４はこのように構成されたタイミングジェネレーター３０から出力される水平同期信号DHsyncを示しており、データアクティブ信号DDactiveおよびデータクロック信号DDotclock、進捗情報を合わせて示している。なお、本実施形態においてリサイズ処理部２０ｅから出力される進捗情報は、１ライン分の画像データの生成処理を実行している過程においてローレベルの出力が維持され、１ライン分の画像データの生成処理を終了した時点で所定期間ハイレベルとなる１回のパルスによって構成される。
【００５２】
タイミングジェネレーター３０が進捗情報取得部３０ａによって当該進捗情報を取得すると、表示制御部３０ｂの処理により、当該進捗情報のパルスに同期して水平同期信号DHsyncを出力する。このため、仮に、基準の期間TH内に、あるラインの画像データの生成処理が間に合わなかった場合には、生成処理が終了するまで水平同期信号DHsyncが出力されず、水平同期期間TDHは基準の期間THより長くなる。従って、基準の期間TH内に、あるラインの画像データの生成処理が間に合わなかった場合、生成処理が終了するまで液晶パネル４２にて当該ラインの表示は開始されない。また、各ラインの画像データの準備が終了する前に表示がなされることはない。さらに、あるラインの画像データの生成処理が終了すると水平同期信号DHsyncが出力されるため、各ラインの画像データの準備が終了すると遅滞なく表示がなされる。以上のように、本実施形態は、水平同期期間TDHが基準の期間THよりも長くなり得る状態で液晶パネル４２を駆動するため、液晶パネル４２で表示すべき１ライン分の画像データの生成期間がラインごとに変動しても、ライン毎の遅延を最小化した状態で液晶パネル４２における表示を行うことができる。従って、本実施形態のように、電力モードが変更されることによってエリアイメージセンサー１５および液晶パネル４２の垂直同期期間が変動し、この結果、ライン毎の画像データの生成期間が変動する構成において、いずれの電力モードであってもライン毎の遅延を最小化した状態で液晶パネル４２における表示を行うことができる。
【００５３】
なお、エリアイメージセンサー１５のデータ出力処理や画像データ生成部２０による画像データの生成処理の速度がラインごとに相違し得る態様としては、他にも種々の態様を想定し得る。例えば、撮影条件や撮影に利用するハードウェアに依存して処理速度がラインごとに相違し得る態様を想定可能である。さらに、着脱式ＥＶＦや着脱式レンズを変更することによってエリアイメージセンサー１５の垂直同期期間や水平同期期間が変動し、あるいは画像データの生成処理に要する期間が変動する構成に対して本発明を適用することが可能である。
【００５４】
以上のように、本実施形態では被写体表示領域Ｒ1において、リサイズ処理部２０ｅから出力される進捗情報に応じてタイミングジェネレーター３０が水平同期期間TDHを調整する。このため、被写体表示領域Ｒ1に表示すべき画像データの生成処理の進捗に応じて水平同期信号DHsyncが長期化され得ることとなり、液晶パネル４２の水平同期信号DHsyncで規定される水平同期期間TDHが一定になるとは限らない。一方、上述のように、本実施形態においては垂直同期信号DVsyncで規定される垂直同期期間が一定であるため、被写体表示領域Ｒ1において水平同期期間TDHが長期化された場合であっても、液晶パネル４２の全ラインの表示が垂直同期期間内に終了するように、タイミングジェネレーター３０は情報表示領域Ｒ2において上述の基準の期間THよりも短い水平同期期間TDH2となるように水平同期信号DHsyncの出力タイミングを設定する。
【００５５】
すなわち、撮影条件等の情報を示す文字のデータ（ＯＳＤデータと呼ぶ）は、エリアイメージセンサー１５の動作によらず予め作成しＶＲＡＭ５１に記録しておくことが可能であるため、ＯＳＤデータに基づく表示を短い水平同期期間によって実行したとしても、データ読み出しの追い越しを発生させることなく適正な表示を行うことが可能である。そこで、本実施形態においては、エリアイメージセンサー１５の出力データに基づく表示を行うための被写体像表示領域Ｒ1よりも、撮影条件等の情報を示す文字を表示する情報表示領域Ｒ2における水平同期期間が短くなるように設定する。
【００５６】
具体的には、タイミングジェネレーター３０が水平同期信号DHsyncの出力タイミングを調整することにより、被写体像表示領域Ｒ1において長期化された水平同期期間TDHと基準の期間THとの差分の総和と情報表示領域Ｒ2において短期化された水平同期期間TDH2と基準の期間THとの差分の総和とが一致するように水平同期期間TDH2を短期化する。この結果、水平同期期間TDH2＜基準の期間≦水平同期期間TDHとなる。ここで、情報表示領域Ｒ2において、上述の水平同期期間THよりも短い水平同期期間TDH2となるように水平同期信号DHsyncを出力するための構成としては、種々の構成を採用可能である。例えば、図４に示すように、被写体像表示領域Ｒ1にて発生した水平同期期間THに対する遅延ΔT1の総和（ΣΔT1）を情報表示領域Ｒ2のライン数L2で除した値ΔT2を各ラインで短縮すべき期間とする構成等を採用可能である。すなわち、水平同期期間TH−ΔT2が情報表示領域Ｒ2における水平同期期間TDH2であるとする構成等を採用可能である。
【００５７】
以上のように、本実施形態においては、液晶パネル４２の領域毎に調整された水平同期信号に基づいて各領域にて適切な表示を行わせるため、液晶パネル４２の被写体像表示領域Ｒ1および情報表示領域Ｒ2に相当する部分のライン番号が予め決められている。例えば、図２に示す例においては、１〜６８２ラインが被写体像表示領域Ｒ1、６８３ライン〜７６８ラインが情報表示領域Ｒ2である。そこで、タイミングジェネレーター３０は、１〜６８２ラインに相当する被写体表示領域Ｒ1に対して表示を行う際に、上述の進捗情報に応じたタイミングで水平同期信号DHsyncを出力しつつ、６８３ライン〜７６８ラインに相当する情報表示領域Ｒ2に対して表示を行う際に、上述の基準の期間THよりも短い水平同期期間TDH2となるように水平同期信号DHsyncを出力する。
【００５８】
また、ＡＳＩＣ２００は画像データ出力部２０１を備えており、画像データ出力部２０１は、液晶パネル４２の１〜６８２ラインの表示を行う際に、ラインバッファー５２ｄに記録された画像データ（Data）を表示部４０に対して線順次に出力する。この結果、エリアイメージセンサー１５で撮影された被写体の像が被写体像表示領域Ｒ1に表示される。また、ＣＰＵ５０は、少なくとも情報表示領域Ｒ2での表示を行う以前においてＶＲＡＭ５１に対してＯＳＤデータを記録しておく。そして、画像データ出力部２０１は、液晶パネル４２の６８３ライン〜７６８ラインの表示を行う際に、ＶＲＡＭ５１に記録されたＯＳＤデータを画像データ（Data）として表示部４０に対して線順次に出力する。この結果、撮影条件等の文字が情報表示領域Ｒ2に表示される。
【００５９】
この構成によれば、被写体像表示領域Ｒ1においては遅延を最小化した状態でエリアイメージセンサー１５にて撮影した被写体を表示しつつ、情報表示領域Ｒ2において短い水平同期期間内でＯＳＤデータによる撮影条件等の情報の表示が行われる状態となる。そして、上述のように、被写体像表示領域Ｒ1において長期化された水平同期期間TDHと基準の期間THとの差分の総和と情報表示領域Ｒ2において短期化された水平同期期間TDH2と基準の期間THとの差分の総和とが一致するように水平同期期間が制御されるため、垂直同期信号SVsync，DVsyncの周期が同一かつ一定の状態で表示部４０による表示を行うことができる。従って、エリアイメージセンサー１５にて撮影された被写体が１フレーム期間以上遅れて液晶パネル４２に表示されることはなく、また、複数フレーム期間に渡って同じ画像が液晶パネル４２に表示されることもない。
【００６０】
（２−１）指標の表示：
以上の構成においては、上述のように電力モードに応じて垂直同期期間が変動するため、当該垂直同期期間の変動に応じて、エリアイメージセンサー１５による被写体の撮影タイミングから液晶パネル４２による被写体像の表示タイミングまでの間の遅延の大きさが変動する。ここで、当該遅延は、利用者が意図通りの像を撮影する際の障害となり得るため、本実施形態においては、当該遅延に対応した指標を指標表示部に表示させる構成となっている。当該指標表示部は、当該指標を利用者に認識させる任意の表示部、例えば表示部４０とは別に設けた液晶パネルに表示させたり、ＬＥＤに表示させたりすることによって構成することが可能であるが、本実施形態においては、当該指標を情報表示領域Ｒ2に表示する構成としている。すなわち、本実施形態においては、表示部４０の表示パネル４２の一部が指標表示部を構成する。
【００６１】
ＣＰＵ５０は、当該指標を示す情報を含めた状態で上述のＯＳＤデータを生成する。すなわち、本実施形態においては、電力モード毎の遅延の大きさが予め特定される。図５Ａ，５Ｂは、当該遅延の大きさの例を示す図である。同図５Ａは、横軸を時間軸として、非節電モードにおけるエリアイメージセンサー１５，画像データ生成部における画像データの生成処理，液晶パネル４２のフレームレートを示している。同図５Ｂは、横軸を時間軸として、節電モードにおけるエリアイメージセンサー１５，画像データ生成部における画像データの生成処理，液晶パネル４２のフレームレートを示している。また、これらの図においては、横軸に沿って並ぶ複数の矩形のそれぞれは１フレーム分の処理に要する期間を示し、各矩形内に示すＮ等の文字はフレーム番号を示している（Ｎは自然数）。
【００６２】
これらの例において、画像データ生成部２０の処理は電力モードによらず一定期間で実行される例を想定しており、フレームレートは４８ｆｐｓである。一方、図５Ａに示す非節電モードでは、上述のようにエリアイメージセンサー１５および液晶パネル４２のフレームレートが６０ｆｐｓであり、図５Ｂに示す節電モードでは、上述のようにエリアイメージセンサー１５および液晶パネル４２のフレームレートが３０ｆｐｓである。従って、非節電モードにおいて、エリアイメージセンサー１５の垂直同期期間は節電モードよりも短く、非節電モードにおいては節電モードよりも早いタイミングで画像データ生成部２０における画像データの生成処理を開始することができる。この結果、非節電モードにおいては節電モードよりも早いタイミングで液晶パネル４２における表示も開始することができる。なお、この例においてはフレームレートが小さいほど液晶パネル４２にて単位期間に表示される画像の量が少なくなるため、フレームレートが６０ｆｐｓの場合にはフレームレートが３０ｆｐｓの場合よりも単位期間に表示される画像の量が多い。
【００６３】
以上のような関係でエリアイメージセンサー１５，画像データ生成部２０，液晶パネル４２が処理を行うことにより、図５Ａ，５Ｂに示す例では、被写体が撮影を開始された（フレームの露光が開始された）タイミングから液晶パネル４２に被写体の像が表示され始めた（対応するフレームの１ライン目の表示が開始された）タイミングまでの間の遅延の時間が、非節電モードで１４．６ｍｓ、節電モードで２７．１ｍｓとなる。このような遅延は、予め特定可能であり、本実施形態においては、このような電力モード毎の遅延の大きさが予め特定され、各モードにおける遅延を示すアイコンが予め作成され、当該アイコンを示す情報がＲＯＭ５３等に記録される。ＣＰＵ５０は、ＯＳＤデータを生成する際に操作部５５にて指示された電力モードを特定し、特定された電力モードに応じたアイコンをＲＯＭ５３等から抽出する。そして、ＣＰＵ５０は当該アイコンと撮影条件等を示す情報を重畳してＯＳＤデータを生成し、ＶＲＡＭ５１に記録する。
【００６４】
従って、情報表示領域Ｒ2に表示を行う際に画像データ出力部２０１がＶＲＡＭ５１に記録された画像データを表示部４０に対して出力することにより、電力モードに応じた指標であって、被写体の撮影が開始されたタイミングから液晶パネル４２に被写体の像が表示され始めたタイミングまでの間の遅延に対応した指標が情報表示領域Ｒ2に表示される。この結果、当該指標を視認する利用者に、表示部４０における遅延の程度を把握させることが可能になる。なお、ここで、指標としてのアイコンは、色や図形、記号等によって遅延の大きさを示すが、当該指標は遅延に対応した情報であれば良く、他の態様であっても良い。例えば、遅延の大きさを１４．６ｍｓや２７．１ｍｓといった遅延秒数などの数値等によって直接的に示す情報であっても良いし、フレームレートを直接的、間接的に示す情報であっても良い。なお、遅延の大きさは上述の被写体が撮影を開始されたタイミングから被写体の像が表示され始めたタイミングまでで定義する構成の他、フレームの露光を完了したタイミングからそのフレームの表示が完了したタイミングまでやフレームの露光を開始したタイミングからそのフレームの表示が完了したタイミングまで等、他のタイミングに基づいて定義しても良い。
【００６５】
（３）他の実施形態：
以上の実施形態は本発明を実施するための一例であり、撮影センサーによる被写体の撮影に応じたタイミングから液晶パネル４２による被写体の像の表示に応じたタイミングまでの遅延に対応する指標を指標表示部に表示する限りにおいて、他にも種々の実施形態を採用可能である。
【００６６】
例えば、水平同期期間TDHを基準の期間THよりも長期化する際には、水平同期信号DHsyncのバックポーチを長期化しても良い。この構成は、例えば、図１に示す構成にて、進捗情報取得部３０ａにおいてリサイズ処理部２０ｅからの進捗情報の出力期間を検出する構成とする。すなわち、Ｎ−１ライン目の画像データの生成処理が終了した時点で出力される進捗情報からＮライン目の画像データの生成処理が終了した時点で出力される進捗情報までの期間TS(N-1)を検出する。そして、タイミングジェネレーター３０は、当該期間TS(N-1)に基づいてＮライン目の水平同期信号DHsyncのバックポーチの長さを決定して各種の信号を出力する。
【００６７】
すなわち、タイミングジェネレーター３０は、表示制御部３０ｂの処理により、図６に示すように、Ｎライン目の水平同期信号DHsyncを出力した後、期間TS(N-1)の長さから基準の期間THの長さを減じて得られる期間ΔT1が経過した時点でプリチャージ期間を示す信号DHsync2を出力する。さらに、タイミングジェネレーター３０は、表示制御部３００ｂの処理により、当該信号DHsync2を出力した後、所定のプリチャージ期間が経過した時点でDDactiveを出力し、１ライン分の画素数のデータクロック信号DDotclockが出力されるまでDDactiveのレベルを維持した後に所定期間のフロントポーチを設けてＮ＋１ライン目の水平同期信号DHsyncを出力する。ここで、プリチャージ期間の開始時点からフロントポーチの終了時点までの期間は基準の期間THと一致する。従って、Ｎライン目の水平同期信号DHsyncとＮ＋１ライン目の水平同期信号DHsyncとの間の期間である水平同期期間TDHが基準の期間THとΔT1との和となる。この結果、液晶パネル４２にて信号DHsync2に同期してプリチャージや極性反転等を行ってＮラインの表示が可能になるとともに、水平同期期間TDHを基準の期間THよりも長期化することが可能になる。なお、上述の第１実施形態においては、水平同期信号DHsyncのフロントポーチを長期化していたため、バックポーチ期間は一定の期間とすることができ、通常の規定通りにプリチャージや極性反転等を行う期間を設けることができる。
【００６８】
さらに、上述の実施形態においては、エリアイメージセンサー１５の垂直同期信号SVsyncの周期と液晶パネル４２の垂直同期信号DVsyncの周期とを一致させるため、液晶パネル４２の情報表示領域Ｒ2において被写体像表示領域Ｒ1よりも短い水平同期期間となるように水平同期信号SHsyncを出力したが、他の手法によって垂直同期信号SVsyncの周期と液晶パネル４２の垂直同期信号DVsyncの周期とを一致させても良い。例えば、通常の撮影装置において、エリアイメージセンサー１５のライン数は液晶パネル４２のライン数よりも多いため、特定の垂直同期期間内に確保すべき水平同期期間が均等であると仮定した場合、エリアイメージセンサー１５の水平同期信号SHsyncよりも液晶パネル４２の水平同期信号DHsyncの方が短くなる。従って、液晶パネル４２の水平同期信号DHsyncを長期化した場合であっても、当該長期化によって液晶パネル４２の垂直同期期間を長くする必要が生じることは少ない。なお、水平同期信号DHsyncを長期化することによって液晶パネル４２の垂直同期信号DVsyncがエリアイメージセンサー１５の垂直同期信号SVsyncより長くなる場合、エリアイメージセンサー１５の垂直同期信号SVsyncを長期化して垂直同期信号DVsyncと垂直同期信号SVsyncとを同期させても良い。
【００６９】
さらに、上述の実施形態においては、画像データの生成処理の中のリサイズ処理が終了したか否かをラインごとに示す進捗情報を取得する構成であったが、画像データの生成処理の最終工程がリサイズ処理でない場合でも、最終工程となる処理についての進捗情報を取得するようにすれば良い。また、画像データの生成処理の最終工程の処理時間が無視できるほど高速に処理できたり、一定時間で処理できたりして、最終工程の終了を予測できるのならば、最終工程の前の工程（例えば、処理時間が変動し得る工程）となる処理についての進捗情報を取得するようにすれば良い。さらに、画像データの生成処理において、複数のラインのデータを参照して１ライン分のデータを生成する画像処理工程が含まれる場合に当該工程について進捗情報を取得する構成としても良い。
【００７０】
図７は、複数のラインのデータを参照して１ライン分のデータを生成する複数の画像処理工程について進捗情報を取得する構成を備えた撮影装置１を示す図である。図７において、図１と同様の構成は同様の符号で示している。図７に示す撮影装置１のタイミングジェネレーター３００は、エリアイメージセンサー１５からの出力データの出力が完了したラインおよび画像データ生成部２０の色再現処理部２０ｂ、ガンマ補正部２０ｄ、リサイズ処理部２０ｅのそれぞれにおけるデータの生成処理が終了したラインを示す進捗情報を取得することが可能である。また、タイミングジェネレーター３００は、表示制御部３００ｂの処理により、画素補間部２０ａ、フィルター処理部２０ｃ、リサイズ処理部２０ｅのそれぞれに対して１ライン分のデータの生成処理を開始させるためのトリガー信号（例えば、水平同期信号）を出力することが可能である。
【００７１】
すなわち、図７に示す実施形態においては、エリアイメージセンサー１５からＫライン目の出力データが出力されると画素補間部２０ａにおいてＬライン目のデータの処理を実行可能になり、画素補間部２０ａおよび色再現処理部２０ｂによる線順次の処理の結果、Ｌライン目のデータの処理が終了するとフィルター処理部２０ｃにおいてＭライン目のデータの処理を実行可能になることが予め特定される。また、フィルター処理部２０ｃおよびガンマ補正部２０ｄによる線順次の処理の結果、Ｍライン目のデータの処理が終了するとリサイズ処理部２０ｅにおいてＮライン目の画像データの生成処理が開始可能になることが予め特定される。
【００７２】
そして、タイミングジェネレーター３００は、タイミングジェネレーター３００が出力する規定の周期の水平同期信号SHsyncに基づいてエリアイメージセンサー１５からＫライン目の出力データが出力されたことを特定する。エリアイメージセンサー１５からＫライン目の出力データが出力されたことが特定された場合、タイミングジェネレーター３００は、画素補間部２０ａに対してトリガー信号を出力してＬライン目のデータ処理を開始させる。さらに、進捗情報取得部３００ａによって色再現処理部２０ｂにおいてＬライン目のデータの処理が終了したことが特定された場合に、タイミングジェネレーター３００は、フィルター処理部２０ｃに対してトリガー信号を出力してＭライン目のデータ処理を開始させる。さらに、進捗情報取得部３００ａによってガンマ補正部２０ｄにおいてＭライン目のデータの処理が終了したことが特定された場合に、タイミングジェネレーター３００は、リサイズ処理部２０ｅに対してトリガー信号を出力してＮライン目の画像データの生成処理を開始させる。
【００７３】
そして、リサイズ処理部２０ｅによってＮライン目の画像データの生成処理が終了したことが特定されると、タイミングジェネレーター３００は、上述の実施形態と同様にＮライン目の表示を行うための水平同期信号DHsyncを出力する。すなわち、画像データ生成部２０において、２以上のラインのデータをラインバッファーに対して記録した後にあるラインのデータの生成が開始可能な画像処理工程においては、最低限必要なライン数のデータの生成処理が終了したか否かを判定し、当該生成処理が終了した時点で次の画像処理工程を開始する。この構成により、各工程を実行するために必要なデータの準備が整う前に各ラインについての処理を開始することはなく、各ラインのデータが整うと即座に各ラインについて処理を開始することが可能になる。この結果、各画像処理工程を実行する際の待ち時間が最小化される。なお、本実施形態においては、最低限必要なライン数のデータをラインバッファー５２ａ〜５２ｄに一時記録すればよいため、ラインバッファー５２ａ〜５２ｄの容量を最小化することが可能である。
【００７４】
以上説明したような構成においては、各種の手法によって垂直同期信号DVsyncと垂直同期信号SVsyncとを同期させることができるが、いずれの手法によって同期を行う場合であっても、電力モード等に応じて垂直同期期間が変動すれば、当該垂直同期期間の変動に伴って画像データ生成処理の終了タイミングがライン毎に変動し得る。従って、イメージセンサー１５による被写体の撮影に応じたタイミングから液晶パネル４２による被写体の像の表示に応じたタイミングまでの間の遅延の大きさが変動し得る。そこで、当該遅延に対応する指標を指標表示部に表示することにより、表示部４０における遅延の程度を利用者に把握させることが可能である。
【００７５】
さらに、エリアイメージセンサー１５による被写体の撮影に応じたタイミングから液晶パネル４２による被写体の像の表示に応じたタイミングまでの遅延の大きさやフレームレートが変動し得る構成としては、上述の実施形態の他にも種々の形態を想定し得る。例えば、表示部４０の液晶パネル４２において、被写体像表示領域Ｒ1および情報表示領域Ｒ2の大きさを変更可能な構成において、当該領域の大きさの変動に伴って垂直同期期間や水平同期期間が変動すると、エリアイメージセンサー１５による被写体の撮影に応じたタイミングから液晶パネル４２による被写体の像の表示に応じたタイミングまでの遅延の大きさやフレームレートが変動し得る。そこで、被写体像表示領域Ｒ1および情報表示領域Ｒ2の大きさの変動に応じた指標を指標表示部に表示させる構成としても良い。なお、被写体像表示領域Ｒ1および情報表示領域Ｒ2の大きさは任意であり、いずれか一方の大きさが０である場合も含む。
【００７６】
さらに、上述の実施形態においては、指標を変動させるモードが１種類であり、モードと指標とが一対一に対応していたが、複数のモードの組み合わせの結果指標が決定される構成であっても良い。例えば、スポーツ撮影モードと節電モードとの組み合わせによってフレームレートが切り替わる構成を想定可能である。すなわち、スポーツ撮影モードのＯＮ／ＯＦＦと節電モードのＯＮ／ＯＦＦとが切替可能であり、節電モードがＯＮの場合はフレームレートが小さく、節電モードがＯＦＦ（非節電モード）の場合フレームレートが大きくなる構成としつつも、スポーツ撮影モードがＯＮである場合には高速での表示更新を可能にするために節電モードがＯＮであってもフレームレートを小さくしない場合を想定する。この場合、スポーツ撮影モードと節電モードとの組み合わせによってフレームレートが決定され、決定されたフレームレートに応じて指標が特定されて指標表示部に表示される。この構成において、モードの組み合わせ数が多くなるほど、利用者はモードの切替から遅延の大きさを直感的に推測することが困難になるため、指標によって遅延を明示することによって利用者の利便性がより高まることになる。
【００７７】
さらに、上述の実施形態においては、エリアイメージセンサー１５の垂直同期信号SVsyncと液晶パネル４２の垂直同期信号DVsyncの周期が同一かつ一定であったが、垂直同期信号SVsyncと垂直同期信号DVsyncとが同期していない構成に本発明を適用しても良い。このような構成において、エリアイメージセンサー１５による被写体の撮影に応じたタイミングから液晶パネル４２による被写体の像の表示に応じたタイミングまでの遅延の大きさがモード等に応じて変動する場合には、モード等に応じた指標を表示する構成とする。また、垂直同期信号SVsync，DVsyncが非同期となることにより、遅延の大きさが動的に変動するのであれば、各フレーム毎に遅延に対応する指標を動的に表示してもよいし、数フレーム毎に指標が更新される構成であっても良い。
【００７８】
なお、遅延の大きさが動的に変動してもよく、このように動的に変動する例としては、被写体の明暗に応じて露光時間を調整する必要に応じてエリアイメージセンサー１５の垂直同期期間が変動する構成等を想定可能である。すなわち、エリアイメージセンサー１５において、受光量に応じた長さの露光を行う場合、露光時間の長さが長くなるほど遅延が大きくなるように当該遅延の大きさが変動し得る。そこで、露光の時間が第１の時間である場合に、露光の時間が第１の時間よりも短い第２の時間である場合よりも遅延が大きいことを示すように指標を予め定義しておき、露光時間の長さによってエリアイメージセンサー１５の垂直同期期間が変動した場合にＣＰＵ５０にて当該変動を検出する構成とする。そして、ＣＰＵ５０は、当該垂直同期期間の変動に応じて遅延時間を計算し、計算した遅延時間に基づいて表示対象となる指標を特定し、ＯＳＤデータを生成してＶＲＡＭ５１に記録する構成とする。この構成によれば、露光時間の長さに応じた指標が表示部４０の液晶パネル４２に表示されることになる。
【００７９】
さらに、上述の実施形態においては、操作部５５の操作によって切り替えられたモードに応じて遅延の大きさが特定されたが、むろん、他の要因によって指標が特定される構成であっても良い。例えば、撮影装置を駆動するためのバッテリーの残電力量に応じて表示部において垂直同期期間や水平同期期間を変更する構成を想定可能である。すなわち、バッテリーの残電力に応じて電力モードを切り替える構成を採用可能である。この構成は、ＣＰＵ５０によってバッテリーの残電力量を検出し、ＣＰＵ５０が検出したバッテリーの残電力量に応じて電力モードを切り替えることによって実現される。そして、ＣＰＵ５０が、当該電力モードに応じた遅延を特定し、当該遅延に対応した指標を特定し、当該指標を含むＯＳＤデータを生成してＶＲＡＭ５１に記録する構成とする。また、バッテリーの残電力量が第１の電力量である場合に、バッテリーの残電力量が第１の電力量よりも多い第２の電力量である場合よりも遅延が大きいことを示すように指標を定義しておき、バッテリーの残電力量に応じた指標を含むＯＳＤデータを生成してＶＲＡＭ５１に記録する構成としてもよい。以上のような構成によれば、バッテリーの残電力量に応じた指標が表示部４０の液晶パネル４２に表示されることになる。
【００８０】
さらに、上述の実施形態において表示部４０は液晶パネルを用いたＥＶＦであったが、表示部４０はＥＶＦ以外の表示部、例えば、撮影装置１の背面に取り付けられる液晶パネルを用いた表示部であっても良いし、液晶パネル以外の方式を用いたものであっても良い。また、撮影装置１はミラーを備えた一眼レフカメラでも良く、さらにムービーカメラであっても良いし、撮影機能を備えた携帯電話等の装置であっても良い。さらに、上述のエリアイメージセンサー１５において、カラーフィルターはベイヤー配列であったが、ベイヤー配列以外の配列で構成されたセンサーを利用した撮影装置に本発明を適用しても良い。さらに、ラインバッファー５２ｄはラインバッファーでも良いが、１フレーム分の画像データを記録するための記録容量を備えるＶＲＡＭであってもよい。この構成によれば、表示対象となる画像データに基づく各種処理を行うことが可能になる。さらに、水平同期期間は基準の期間に対して長期化されれば良く、当該基準の期間としては、各種の期間を想定可能である。例えば、エリアイメージセンサー１５の水平同期信号SHsyncの周期、画像データの生成周期などを基準の期間としてもよい。さらに、タイミングジェネレーター３０から表示部４０への各種信号の転送形態は種々の形態を採用可能であり、HDMI（High-Definition Multimedia Interface）等によって転送しても良い。また、上述の実施形態における方向を逆にしてもよく、例えば水平方向において、左から右に表示しても、右から左に表示しても良い。
【００８１】
さらに、ＯＳＤデータは表示部の情報表示領域において表示対象となる所定の情報を示した画像データであれば良く、撮影条件以外の各種情報、例えば、撮影装置１に搭載されたバッテリーの残量を示す情報等を表示対象となる所定の情報とする構成としても良い。さらに、垂直同期信号SVsync，DVsyncの周期が同一かつ一定の状態とするための構成は、上述の構成以外にも種々の構成を採用可能である。例えば、被写体表示領域Ｒ1における表示を行った後、情報表示領域Ｒ2でＯＳＤデータを表示するために設定可能な最小の期間を情報表示領域Ｒ2における水平同期期間とすることによって垂直同期信号DVsyncの出力タイミング以前に液晶パネル４２の全ラインの表示を終了し、残余の期間待機した後に規定の出力タイミングで垂直同期信号DVsyncが出力されるように構成してもよい。
さらに、上述の実施形態においては、エリアイメージセンサー１５にて撮影した被写体の像を液晶パネル４２に表示する構成であったが、他の構成において上述の指標に類する情報を表示させる構成を採用することも可能である。例えば、撮影装置１において、リムーバブルメモリ等に記録された撮影済みの画像を液晶パネル４２に表示させる構成において、当該表示の際のフレームレートが可変である場合に当該フレームレートに対応した指標を表示させる構成であっても良い。
【符号の説明】
【００８２】
１…撮影装置、１０…光学系、１１…レンズ、１２…絞り、１３…シャッター、１４…ローパスフィルター、１５…エリアイメージセンサー、２０…画像データ生成部、２０ａ…画素補間部、２０ｂ…色再現処理部、２０ｃ…フィルター処理部、２０ｄ…ガンマ補正部、２０ｅ…リサイズ処理部、２０１…画像データ出力部、３０…タイミングジェネレーター、３０ａ…進捗情報取得部、３０ｂ…表示制御部、４０…表示部、４１…液晶パネルドライバー、４２…液晶パネル、５２ａ…ラインバッファー、５２ｂ…ラインバッファー、５２ｃ…ラインバッファー、５２ｄ…ラインバッファー、５５…操作部
【図１】
2011254416.tif 000003
【図２】
2011254416.tif 000004
【図３】
2011254416.tif 000005
【図４】
2011254416.tif 000006
【図５】
2011254416.tif 000007
【図６】
2011254416.tif 000008
【図７】
2011254416.tif 000009