(57)【要約】【課題】  互いに異なる解像度で取得された画像に対応する複数の画像を切り替えて連続して表示する際に、ユーザに与える違和感を軽減すること。【解決手段】  第１の画像と第１の画像よりも解像度が低い第２の画像とを取得し、第１の画像に対応する第１の表示画像と第２の画像に対応する第２の表示画像を表示可能な表示手段と、連続撮影の際に、第１の表示画像と第２の表示画像とを切り替えて表示手段へ連続して表示する、第１の表示モードおよび当該第１の表示モードとは異なる第２の表示モードとを設定する表示制御手段と、を有し、第１の表示モードは、第２の表示モードに対して、第１の表示画像が表示されてから次に第２の表示画像が表示されるまでの時間が短く、表示制御手段は、連続撮影時の被写体の動きに関する情報に基づいて、第１の表示モードと第２の表示モードを切り替えることを特徴とする構成とした。【選択図】  図１
2019134335.tif 000002
【特許請求の範囲】
【請求項１】
撮像素子を備え、当該撮像素子を用いて被写体を連続して撮像する連続撮影が可能な撮像装置であって、
前記撮像素子を用いて第１の画像と前記第１の画像よりも解像度が低い第２の画像とを取得し、前記第１の画像に対応する第１の表示画像と前記第２の画像に対応する第２の表示画像を表示可能な表示手段と、
連続撮影時に、前記第１の表示画像と前記第２の表示画像とを切り替えて前記表示手段へ連続して表示する、第１の表示モードおよび当該第１の表示モードとは異なる第２の表示モードとを設定する表示制御手段と、
を有し、
前記第１の表示モードは、前記第２の表示モードに対して、前記第１の表示画像が表示されてから次に前記第２の表示画像が表示されるまでの時間が短く、
前記表示制御手段は、前記連続撮影時の被写体の動きに関する情報に基づいて、前記第１の表示モードと前記第２の表示モードを切り替えることを特徴とする撮像装置。
【請求項２】
前記第１の表示モードは、前記第２の表示モードに対して、所定時間において、前記第２の表示画像が表示されている時間が前記第１の表示画像が表示されている時間よりも長いことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記第２の表示モードは、前記第１の表示モードに対して、前記第１の表示画像が表示されてから次に前記第１の表示画像の表示が開始されるまでの間隔と、前記第２の表示画像が表示されてから次に前記第２の表示画像の表示が開始されるまでの間隔との差が小さいことを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記第２の表示モードは、前記第１の表示モードに対して、前記第２の画像に対応した前記撮像素子での電荷蓄積の開始から、当該第２の画像に対応した前記第２の表示画像を前記表示手段に表示するまでの時間が長いことを特徴とする請求項１乃至３の何れか一項に記載の撮像装置。
【請求項５】
前記第１の表示モードおよび前記第２の表示モードは、前記第２の表示画像が表示されてから次に前記第２の表示画像が表示されるまでの間に、少なくとも１つ以上の前記第１の表示画像が表示されることを特徴とする請求項１乃至４の何れか一項に記載の撮像装置。
【請求項６】
前記第１の表示モードおよび前記第２の表示モードは、前記第１の表示画像が表示されてから次に前記第１の表示画像が表示されるまでの間に、少なくとも１つ以上の前記第２の表示画像が表示されることを特徴とする請求項１乃至４の何れか一項に記載の撮像装置。
【請求項７】
前記第１の表示モードおよび前記第２の表示モードは、少なくとも１つ以上の前記第１の表示画像と少なくとも１つ以上の前記第２の表示画像とが交互に表示されることを特徴とする請求項５又は６に記載の撮像装置。
【請求項８】
前記連続撮影の開始を指示する指示手段を更に有し、
前記表示制御手段は、前記表示手段に前記第２の表示画像を逐次表示している際に前記指示手段により前記連続撮影の開始が指示されたことに応じて、前記表示モードを前記第１の表示モードまたは前記第２の表示モードを設定することを特徴とする請求項１乃至７の何れか一項に記載の撮像装置。
【請求項９】
前記被写体の動きに関する情報は、連続する画像における被写体の動きを追跡した結果に関する情報であることを特徴とする請求項１乃至８の何れか一項に記載の撮像装置。
【請求項１０】
前記被写体の動きに関する情報は、前記撮像装置の姿勢の変化に関する情報であることを特徴とする請求項１乃至８の何れか一項に記載の撮像装置。
【請求項１１】
前記被写体の動きに関する情報は、連続する画像における被写体の移動量に関する情報であることを特徴とする請求項１乃至８の何れか一項に記載の撮像装置。
【請求項１２】
前記第１の画像は、前記撮像素子の画素部のうち、第１の画素数の画素部に対応する画像であって、
前記第２の画像は、前記撮像素子の前記画素部のうち、前記第１の画素数よりも少ない第２の画素数の画素部に対応する画像であることを特徴とする請求項１乃至１１の何れか一項に記載の撮像装置。
【請求項１３】
前記第１の画像は、記録用の静止画像であって、
前記第２の画像は、前記表示手段に前記第２の表示画像を逐次表示するためのライブビュー画像であって、
前記第２の画像は、前記撮像素子の前記画素部のうち、前記第２の画素数となるように、前記画素部から画素を間引き又は加算して蓄積された電荷を読み出すことで得られることを特徴とする請求項１２に記載の撮像装置。
【請求項１４】
撮像素子を備え、当該撮像素子を用いて被写体を連続して撮像する連続撮影が可能な撮像装置の制御方法であって、
前記連続撮影の際に、前記撮像素子を用いて第１の画像と前記第１の画像よりも解像度が低い第２の画像とを取得し、前記第１の画像に対応する第１の表示画像と前記第２の画像に対応する第２の表示画像とを切り替えて表示手段へ連続して表示する、第１の表示モードおよび当該第１の表示モードとは異なる第２の表示モードとを設定する表示制御工程を有し、
前記第１の表示モードは、前記第２の表示モードに対して、前記第１の表示画像が表示されてから次に前記第２の表示画像が表示されるまでの時間が短く、
前記表示制御工程では、前記連続撮影時の被写体の動きに関する情報に基づいて、前記第１の表示モードと前記第２の表示モードを切り替えることを特徴とする撮像装置の制御方法。
【請求項１５】
請求項１４に記載の撮像装置の制御方法をコンピュータで実行させるためのコンピュータで読み取り可能なプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、異なる解像度の画像を表示できる撮像装置とその制御方法、及びプログラムに関する。
【背景技術】
【０００２】
一般的に、デジタルカメラ等の撮像装置には、静止画像を連続的に取得するための所謂連続撮影（連写）機能が備えられている。この連続撮影の際に、撮像装置に設けられた背面モニタ等の表示部に、ライブビュー（ＬＶ）用のライブビュー画像と、記録用の静止画像（記録画像）という種類が異なる画像を各々読み出して、リアルタイムに表示と記録を行うことが知られている。
【０００３】
例えは、連続撮影時に焦点検出を行いながら撮像素子から取得したライブビュー画像（ＬＶ画像）を表示装置に表示させることで、焦点検出時の主被写体への追従性を向上させる技術が知られている。特許文献１では、表示装置に解像度の異なる画像を逐次表示するか高解像度画像のみを表示するかを切り替える技術が提案されている。特許文献１によれば、フレームレートが低い連写においても、ＬＶ画像の表示時間間隔を短縮してフレーミング時の主被写体への追従性を向上させることができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１５−１４４３４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで、取得する画像データの解像度に応じて、画像データを取得するのに必要な時間は異なる。一般的に、表示部への逐次表示が主たる目的であるライブビュー画像は、撮像素子の有効画素に対して所定の行を間引く、あるいは、加算して画素信号を読み出すため、記録用の静止画像よりも解像度が低い。
【０００６】
特許文献１では、解像度の異なる画像データを逐次表示させる際に、画像データを取得するために必要な時間の違いについては考慮していない。したがって、特許文献１で提案されている技術では、撮像（露光）開始から表示部への表示までにかかる時間が不均等となり、ユーザに違和感を与えてしまう場合がある。
【０００７】
本発明の目的は、互いに異なる解像度で取得された画像に対応する複数の画像を切り替えて連続して表示する際に、ユーザに与える違和感を軽減することである。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明の撮像装置は、撮像素子を備え、当該撮像素子を用いて被写体を連続して撮像する連続撮影が可能な撮像装置であって、前記撮像素子を用いて第１の画像と前記第１の画像よりも解像度が低い第２の画像とを取得し、前記第１の画像に対応する第１の表示画像と前記第２の画像に対応する第２の表示画像を表示可能な表示手段と、前記連続撮影の際に、前記第１の表示画像と前記第２の表示画像とを切り替えて前記表示手段へ連続して表示する、第１の表示モードおよび当該第１の表示モードとは異なる第２の表示モードとを設定する表示制御手段と、を有し、前記第１の表示モードは、前記第２の表示モードに対して、前記第１の表示画像が表示されてから次に前記第２の表示画像が表示されるまでの時間が短く、前記表示制御手段は、前記連続撮影時の被写体の動きに関する情報に基づいて、前記第１の表示モードと前記第２の表示モードを切り替えることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、互いに異なる解像度で取得された画像に対応する複数の画像を切り替えて連続して表示する際に、ユーザに与える違和感を軽減することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係る撮像装置１００の概略構成を示すブロック図である。
【図２】本発明の実施形態に係る撮像装置１００における表示遅延低減モードでの連続撮影時の動作について例示的に説明する図である。
【図３】本発明の実施形態に係る撮像装置１００における表示遅延調整モードでの連続撮影時の動作について例示的に説明する図である。
【図４】本発明の実施形態に係る撮像装置１００の表示遅延低減モードと表示遅延調整モードにおける表示遅延の違いを例示的に説明する図である。
【図５】本発明の第１実施形態に係る、ライブビュー表示中に連続撮影を行う場合の、表示モードの切り替えに関するフローチャートである。
【図６】本発明の第２実施形態に係る、ライブビュー表示中に連続撮影を行う場合の、表示モードの切り替えについて説明する図である。
【図７】本発明の第３実施形態に係る、ライブビュー表示中に連続撮影を行う場合の、表示モードの切り替えについて説明する図である。
【発明を実施するための形態】
【００１１】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。図１は、本発明の実施形態に係る撮像装置１００の概略構成を示すブロック図である。撮像装置１００は、デジタルカメラ、デジタルビデオカメラのようなカメラ、および、スマートフォンなどのカメラ機能付きの可搬機器を含む。
【００１２】
（撮像装置１００の基本構成）
以下、図１を参照して撮像装置１００の各構成要素について説明する。撮像素子１０１は、電荷蓄積型の固体撮像素子であって、例えば、ＣＣＤ（Ｃｈａｒｇｅ−Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（ｃｏｍｐｌｅｍｅｎｔａｒｙ  ｍｅｔａｌ−ｏｘｉｄｅ  ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサなどを採用する。種々の撮像レンズ群を含む光学系１０２を通って結像した被写体の光束は、撮像素子１０１に結像することで光電変換を実行し、画像信号を生成する。
【００１３】
なお、以降の説明では、撮像素子１０１を用いて取得する画像として、第１の解像度で構成される静止画像（第１の画像）と、第１の解像度よりも低い第２の解像度で構成されるライブビュー画像（第２の画像）を用いた表示モードについて説明する。ここで、上述した解像度は、取得される画像の解像度を示すものであって、表示部１０８に表示される際の表示画像の解像度と同義ではない。具体的に、記録用の静止画像（第１の画像）の解像度に対して、ライブビュー画像（第２の画像）の解像度は低く設定されている。これに対して、表示部１０８に表示する際の静止画像（第１の表示画像）とライブビュー画像（第２の表示画像）の解像度は必ずしも異なるものではなく、表示部１０８が表示可能な解像度に合わせて調整され得るものである。本実施形態では、静止画像を取得する際に用いられる撮像素子１０１の画素部の有効画素数（第１の画素数）に対して、ライブビュー画像を取得する際に用いられる撮像素子１０１の画素数（第２の画素数）が少ない。具体的に、ライブビュー画像は、撮像素子１０１を構成する画素部の内、所定の画素を間引き又は加算して対応する画素に蓄積された電荷を読み出すことで取得される。本実施形態では、撮像素子１０１を所定行毎に間引いて読み出すことでライブビュー画像を取得する。
【００１４】
光学系１０２は、前述した撮像レンズ群、絞りなどを含み、後述するＣＰＵ１０３によって制御される。なお、本実施形態では、互いに対応するマウント部を備えた光学系１０２と撮像装置１００であって、撮像装置１００に光学系１０２を着脱可能な所謂レンズ交換型の撮像装置について説明するが、これに限定されるものではない。例えば、撮像装置１００としては、光学系１０２を内蔵する、所謂レンズ一体型の撮像装置であってもよい。
【００１５】
ＣＰＵ１０３は、撮像装置１００を統括的に制御するためのマイクロプロセッサなどに代表される制御手段であって、入力された信号や予め記憶されたプログラムに従い、撮像装置１００を構成する各部を制御する。特に、後述する各実施形態において、ＣＰＵ１０３は、連続撮影時に表示部１０８に静止画像とライブビュー画像とを切り替えて連続して表示する表示モードを設定可能な表示制御手段として動作する。
【００１６】
一次記憶装置１０４は、例えばＲＡＭのような揮発性メモリであり、一時的なデータを記憶し、ＣＰＵ１０３の作業用に使われる。また、一次記憶装置１０４に記憶されている情報は、画像処理部１０５で利用される、あるいは、記録媒体１０６へ記録される。二次記憶装置１０７は、例えばＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）のような不揮発性メモリである。二次記憶装置１０７は、撮像装置１００を制御するためのプログラム（ファームウェア）や各種の設定情報を記憶し、ＣＰＵ１０３によって利用される。記録媒体１０６は、撮影により得られた一次記憶装置１０４に記憶された画像データなどを記録可能な記録媒体である。なお、記録媒体１０６は、例えば、半導体メモリカードのように撮像装置１００から取り外し可能であり、記録媒体１０６をパーソナルコンピュータなどに装着することで記録されたデータを読み出すことが可能である。つまり、撮像装置１００は、記録媒体１０６の着脱機構及び読み書き機能を有する。
【００１７】
角速度センサ１１１は、例えばジャイロセンサなどであって、角速度センサ１１１が搭載された撮像装置１００の移動量を表す角速度を周期的に検出し、電気信号に変換してＣＰＵ１０３へ伝達する。
【００１８】
本実施形態の撮像装置１００では、画像処理部１０５が撮像画像に適用する画像処理のパターンを複数有し、これら複数のパターンを複数の撮像モードとして、操作部１０９からいずれかを選択的に設定可能なように構成されている。画像処理部１０５は、いわゆる現像処理と呼ばれる画像処理をはじめ、後述する被写体追跡部１１０から供給される画像中の被写体領域に関する情報を用いた画像処理を行う機能も有する。また、画像処理部１０５は、撮像素子１０１から時系列的に逐次供給される画像信号の個々の画像データ間の移動ベクトルを検出する機能も有している。
【００１９】
表示部１０８は、電子ビューファインダとしての機能を有し、被写体を撮像することで得た静止画像および動画像の表示や、操作用のＧＵＩ表示が可能である。また、表示部１０８では、後述する被写体追跡部１１０によって特定された追跡被写体を含む被写体領域を所定の形態（例えば、矩形の枠表示）で表示可能である。なお、表示部１０８に表示可能な動画像としては、時間的に連続して画像信号を取得し、これらの画像信号に基づく表示画像を逐次表示する所謂ライブビュー表示を含む。本実施形態では、ライブビュー表示中にユーザによる撮像準備の開始または撮像の開始が指示されたことで静止画像の取得動作が実行される。
【００２０】
操作部１０９は、ユーザの操作を受け付けてＣＰＵ１０３へ入力情報を伝達する入力デバイス群であり、例えばボタン、レバー、タッチパネル等や、音声や視線などを用いた入力機器である。また、操作部１０９は、レリーズボタンを含み、レリーズボタンの半押し操作で不図示のスイッチＳＷ１がＯＮし、レリーズボタンの全押し操作で不図示のスイッチＳＷ２がＯＮする指示手段であって、所謂２段スイッチ構成を採用する。本実施形態の撮像装置１００では、スイッチＳＷ１のＯＮにより焦点検出動作や測光動作を含む撮影準備動作の開始が指示され、スイッチＳＷ２のＯＮにより被写体の撮像動作の開始が指示される。
【００２１】
被写体追跡部１１０は、（例えば、順に被写体を撮像することで）画像処理部１０５から時系列に逐次供給される連続する画像信号に含まれる被写体を検出および追跡する。具体的に、被写体追跡部１１０は、画像処理部１０５から供給される時間的に連続した画像信号を比較し、例えば、画像信号間の画素パターンやヒストグラムが類似する部分領域を追跡することで、所定の被写体を追跡する。所定の被写体としては、ユーザの手動操作により指定された被写体や、人物の顔領域など、予め定められた所定の被写体領域を撮像条件や撮影モードなどに応じて自動的に検出された被写体であればよい。なお、所定の被写体領域の検出方法としてはどのような方法を採用してもよい。例えば、撮像装置１００において、画像内における所定の被写体を検出するためのエッジパターンを記録しておき、当該エッジパターンと画像信号とのパターンマッチングにより、所定の被写体を検出する構成であればよい。
【００２２】
移動ベクトル算出部１１２は、画像処理部１０５から時系列に逐次供給される画像信号に基づいて、所定の分割領域ごとの移動ベクトルを算出する。なお、移動ベクトルを算出する際に用いる時間的に連続した画像としては、ライブビュー画像と静止画像を比較する構成であってもよいし、ライブビュー画像同士または静止画像同士を比較する構成であってもよい。
【００２３】
なお、本実施形態の撮像装置１００は、被写体追跡部１１０での追跡結果、角速度センサ１１１の出力、移動ベクトル算出部１１２の算出結果など、被写体の動きに関する情報に基づいて、後述する表示モードの切り替えが可能である。この詳細については後述する。
【００２４】
（表示モードの詳細）
以下、連続撮影時の表示モードの詳細について図２、図３を参照して説明する。なお、以降の説明では、撮像装置１００の表示モードとして、連続撮影を実行している間に、ライブビュー画像と静止画像を一定のタイミングで交互に表示する構成を前提とする。
【００２５】
例えば、操作部１０９の操作や撮像装置１００の電源がオンされたことに応じてライブビュー表示の開始が指示されると、ＣＰＵ１０３は光学系１０２および撮像素子１０１の動作を制御して露光処理を行う。露光処理を所定時間行った後、ＣＰＵ１０３は、撮像素子１０１から画像信号の読出を行い、画像信号を一次記憶装置１０４に記憶する。一次記憶装置１０４に記憶された画像信号は、画像処理部１０５によって画像処理が実行され、処理された画像信号（画像データ）は再び一次記憶装置１０４に記憶される。なお、ライブビュー画像は撮像素子１０１の所定領域（例えば、所定の間隔を空けた各行）の蓄積電荷を読み出すことで取得される。これに対して、静止画像は撮像素子１０１の有効画素の全画素について蓄積電荷の読み出しにより取得される。なお、静止画像としては、少なくともライブビュー画像よりも読み出し画素領域が多い構成であればよい。
【００２６】
次に、ＣＰＵ１０３は、画像データの生成が完了した後に、表示部１０８にライブビュー画像を表示する。また、画像データは被写体追跡部１１０に送られ、被写体の追跡処理が実行される。以降、操作部１０９からの指示がない場合は、上述した処理を繰り返す（ライブビュー撮影状態と称す）。
【００２７】
ここで、ライブビュー画像０の表示遅延ｌｖ＿ｄ０は、ｌｖ＿ｄ０＝ｌｖ＿ｅ０―ｌｖ＿ａ０で表現される。ただし、ｌｖ＿ａ０は、ライブビュー画像０の露光開始から露光終了までの時間的な重心（露光重心）、ｌｖ＿ｅ０は、表示部１０８にライブビュー画像０に対応した画像データを表示する時刻を表すものとする。
【００２８】
ライブビュー撮影状態において、スイッチＳＷ２がＯＮされると静止画像の撮像動作が開始される。静止画用撮像は、ライブビュー用撮像と同様に、ＣＰＵ１０３の制御によって、露光、読出、画像処理、被写体追跡の一連の処理が行われ、表示部１０８に画像データが表示される。静止画像１の表示遅延ｓｔ＿ｄ１も、ライブビュー撮影と同様に、ｓｔ＿ｄ１＝ｓｔ＿ｅ１―ｓｔ＿ａ１で表現される。ただし、ｓｔ＿ａ１は、静止画像１の露光開始から露光終了までの時間的な重心（露光重心）、ｓｔ＿ｅ１は、表示部１０８に静止画像１に対応した画像データを表示する時刻を表すものとする。以降、スイッチＳＷ２がＯＮされていると、図２に示すように同様の処理が繰り返される。
【００２９】
図２は、本発明の実施形態に係る撮像装置１００における表示遅延低減モードでの連続撮影時の動作について例示的に説明する図である。図２に図示するように、静止画の画像データとライブビューの画像データは画像処理が完了した後に直ちに表示される。図２に図示する動作に対応する撮像装置１００の表示モードを表示遅延低減モードと称する。ｎ番目（ｎは０以上の自然数）のライブビュー画像の表示遅延ｌｖ＿ｄｎと、ｎ番目の静止画像の表示遅延ｓｔ＿ｄｎとすると、表示遅延低減モードではライブビュー画像よりも静止画像の方が処理するデータ量が多いため、ｌｖ＿ｄｎ＜ｓｔ＿ｄｎとなる。
【００３０】
表示遅延低減モードでは、ライブビュー画像と静止画像のそれぞれについて、画像データの取得（または露光・読み出し）から表示までの遅延が最も小さくなるように、表示部１０８への表示タイミングがＣＰＵ１０３によって制御される。
【００３１】
したがって、表示遅延低減モードでは、表示遅延が小さいことにより動きが大きい被写体や撮像装置１００のパンニング量が大きい場合に、撮像対象の被写体を画角（画面）内に収めやすいという利点がある。しかしながら、表示遅延が異なるライブビュー画像と静止画像を交互に表示する場合、表示タイミングの違いによりユーザが受ける違和感が大きくなってしまう。
【００３２】
次に、図３を参照して表示遅延調整モードについて説明する。図３は、本発明の実施形態に係る撮像装置１００における表示遅延調整モードでの連続撮影時の動作について例示的に説明する図である。表示遅延調整モードと前述した表示遅延低減モードとの違いは、静止画像用の撮像の間におけるライブビュー画像を表示するタイミングである。
【００３３】
表示遅延調整モードでは、ライブビュー画像の表示遅延ｌｖ＿ｄｎ＝静止画像の表示遅延ｓｔ＿ｄｎとなるように、ＣＰＵ１０３が表示部１０８へのライブビュー画像の表示を制御する。すなわち、表示遅延調整モードでは、ライブビュー画像と静止画像の表示遅延が略等しなるように、表示部１０８への表示が制御される。しがって、表示遅延調整モードでは、ライブビュー画像と静止画像の表示タイミングの違いによりユーザに与える違和感を低減することが出来る。しかしながら、表示遅延調整モードでは、撮像（露光）開始から実際に表示部１０８にライブビュー画像が表示されるまでの時間が長くなるため、表示遅延低減モードよりも、動きが大きく不規則な動きをする被写体を画角内に収めにくい。
【００３４】
例えば、移動量が略一定の被写体を画角内にフレーミングした状態で連続撮影を行う場合は、表示遅延調整モードを実行することで、被写体を画角内の略一定位置にフレーミングした状態で安定した連続撮影を行うことが出来る。これに対して、例えば、移動量が大きい、あるいは不規則な移動をする被写体を撮像する場合は、表示遅延調整モードを実行することで、撮像から表示までの時間が短いため、画角から外れた被写体の探索から画角内への復帰を早めるのに有利である。すなわち、表示遅延低減モードにおいては、画角内に狙った被写体がフレーミングされていない失敗画像が取得されてしまう確率を低減した連続撮影を行うことができる。
【００３５】
以上説明したように、表示遅延低減モードでは、ライブビュー画像および静止画像を表示する際の表示遅延が極力小さくなるように制御される。この結果、表示遅延低減モードでは、静止画像が表示部１０８に表示されてから、次にライブビュー画像が表示部１０８に表示されるまでの時間が短くなる。換言すると、表示遅延低減モードでは、所定時間において、ライブビュー画像が表示されている時間の方が、静止画像が表示されている時間よりも長くなる。また、表示遅延調整モードでは、ライブビュー画像と静止画像の表示遅延が略等しくなるように制御される。この結果、表示遅延調整モードでは、静止画像が表示部１０８に表示されてから次に静止画像の表示が開始されるまでの間隔と、ライブビュー画像が表示部１０８に表示されてから次にライブビュー画像の表示が開始されるまでの間隔との差が小さくなる。
【００３６】
図４は、本発明の実施形態に係る撮像装置１００の表示遅延低減モードと表示遅延調整モードにおける表示遅延の違いを例示的に説明する図である。図４において、横軸は時間の経過を示し、縦軸は表示遅延の度合（大きさ）を示している。なお、表示遅延の度合は、表示部１０８への画像の表示から次の画像の表示までに必要な時間が長いほど大きくなる。換言すると、表示部１０８への画像表示が更新されるごとに表示遅延の度合は小さくなる。
【００３７】
図４に図示するように、表示遅延調整モードでは、ライブビュー画像から静止画像への表示切替えと、静止画像からライブビュー画像への表示切替えとで、表示遅延の度合のバラつきが、表示遅延低減モードよりも小さくなる。
【００３８】
（第１実施形態）
以下、図５を参照して、本発明に係る撮像装置の第１実施形態における表示遅延低減モードと表示遅延調整モードの切り替え動作について説明する。図５は、本発明の第１実施形態に係る、ライブビュー表示中に連続撮影を行う場合の、表示モードの切り替えに関するフローチャートである。
【００３９】
図５に図示するように、ライブビュー表示の開始が指示されると、ステップＳ１０１でＣＰＵ１０３は、表示モードを表示遅延低減モードに設定する。次に、ステップＳ１０２でＣＰＵ１０３は、現在設定されている表示モードでライブビュー表示用の撮像を開始し、表示部１０８へのライブビュー表示を開始する。
【００４０】
次に、ステップＳ１０３でＣＰＵ１０３は、スイッチＳＷ２がオンされているか否かを判定し、スイッチＳＷ２がオンされていない場合はステップＳ１１０に移行する。ステップＳ１０３でスイッチＳＷ２がＯＮされていると判定された場合、ＣＰＵ１０３は、ステップＳ１０４で記録用の静止画像を取得するための撮像を実行し、ステップＳ１０５で当該撮像により取得された画像データを表示部１０８に表示する。
【００４１】
次に、ＣＰＵ１０３は、ステップＳ１０６で静止画像の取得動作からライブビュー画像の取得動作を再開し、ステップＳ１０７でスイッチＳＷ２がオンされた状態である否かを再度判定する。例えば、ＳＷ２のオン状態が維持されていればステップＳ１０７の判定はＹＥＳとなり、ユーザによって連続撮影が指示されていると判断することが出来る。ステップＳ１０７の判定でＣＰＵ１０３が、スイッチＳＷ２がオンされていないと判定した場合はステップＳ１１０の処理に進む。
【００４２】
ステップＳ１０７でスイッチＳＷ２がオンされていると判定された場合、ＣＰＵ１０３は、ステップＳ１０８で被写体追跡部１１０の処理結果に基づいて被写体追跡中か否かを判定する。具体的に、被写体追跡部１１０は、ステップＳ１０２で得られたライブビュー画像とステップＳ１０４で得られた静止画像とを比較することで被写体の追跡処理を実行する。そして、ＣＰＵ１０３は、ステップＳ１０８で被写体追跡中であると判定された場合、ステップＳ１０９で表示モードを表示遅延調整モードに設定する。また、ＣＰＵ１０３は、ステップＳ１０８で被写体追跡中ではないと判定された場合、ステップＳ１１０で表示モードを表示遅延低減モードに設定する。なお、ステップＳ１０９、Ｓ１１０で設定すべき表示モードが既に設定されている場合は、現状の表示モードを維持する。なお、図５に図示するフローチャートの各処理を実行中に、ライブビュー表示の終了（または停止・中断）が指示された場合は、図５に示すフローチャートに従う各処理を終了する。
【００４３】
例えば、ライブビュー画像とその次に得られた静止画像とで、同一の被写体を検出して追跡できる場合は、画角内の所定位置において安定した被写体のフレーミングを維持するために、表示モードを表示遅延調整モードに設定するのが好ましい。これに対して、ライブビュー画像と静止画像との間で、同一の被写体を検出できず追跡が出来ない場合は、消失した（見つけられない）被写体の画角内への再フレーミングを早期に実現するために、表示モードを表示遅延低減モードに設定するのが好ましい。
【００４４】
以上説明したように、本実施形態の撮像装置１００は、被写体を追跡できる場合は、ユーザに与える違和感を低減した表示を優先し、被写体を追跡できない場合は、被写体の動きに応じた機敏な表示を実現するために遅延を低減した表示を優先する構成である。この構成により、本実施形態に係る撮像装置１００は、露光開始から取得完了までに要する時間が異なる画像（例えば、連続撮影中にライブビュー画像と静止画像）を表示部１０８に順次表示する際に、ユーザに与える違和感を軽減することができる。
【００４５】
（第２実施形態）
以下、図６を参照して、本発明に係る撮像装置の第２実施形態における表示遅延低減モードと表示遅延調整モードの切り替え動作について説明する。前述した第１実施形態では、被写体追跡部１１０による被写体追跡に係る処理結果に応じて表示モードを切り替える場合について説明した。これに対して、本実施形態では、角速度センサ１１１の出力に基づく撮像装置１００の姿勢の変化に応じて表示モードを切り替える構成を採用した撮像装置１００について説明する。なお、撮像装置１００の各構成要素は前述した第１実施形態と同一なので説明は省略する。また、表示モードの切り替えを動作についても、表示モードを切り替えるための所定の情報が異なる点以外は略同一なので説明は省略する。
【００４６】
図６は、本発明の第２実施形態に係る、ライブビュー表示中に連続撮影を行う場合の、表示モードの切り替えについて説明する図であって、時間ごとの角速度の変化を示している。図６（ａ）は、角速度の度合が小さく、且つ、時間変化に対する角速度の変化が小さい場合を示している。図６（ｂ）は、角速度の度合が大きく、且つ、時間変化に対する角速度の変化が大きい場合を示している。
【００４７】
図６（ａ）に図示するように、時間変化に対する角速度の変化が小さい場合は、撮像装置１００の姿勢の変化が小さいと推測できるため、ユーザが被写体を見失うことなく画角内に被写体が安定してフレーミングされている可能性が高い。対して、図６（ｂ）に図示するように、時間変化に対する角速度の変化が大きい場合は、撮像装置１００の姿勢の変化が大きく、ユーザが被写体を見失い、画角内に撮像を意図する被写体が存在していない可能性が高い。
【００４８】
そこで、本実施形態の撮像装置１００は、時間変化に対する角速度の変化が小さいと判断できる場合は、表示モードを表示遅延調整モードに設定し、時間変化に対する角速度の変化が大きいと判断できる場合は、表示モードを表示遅延低減モードに設定する。具体的に、ＣＰＵ１０３は、所定期間において、角速度センサ１１１からの出力が所定の閾値（上限値または下限値）を超えた回数が所定回数以上となる場合に表示モードを表示遅延低減モードに設定し、それ以外は表示遅延調整モードに設定する。
【００４９】
以上説明したように、本実施形態の撮像装置１００は、撮像装置１００の角速度の変化が小さく被写体を安定してフレーミングしていると判断できる場合は、ユーザに与える違和感を低減した表示を優先する。また、本実施形態の撮像装置１００は、撮像装置１００の角速度の変化が大きく被写体を安定してフレーミングできていないと判断できる場合は、被写体の動きに応じた機敏な表示を実現するために遅延を低減した表示を優先する。この構成により、本実施形態に係る撮像装置１００は、露光開始から取得完了までに要する時間が異なる画像（例えば、連続撮影中にライブビュー画像と静止画像）を表示部１０８に順次表示する際に、ユーザに与える違和感を軽減することができる。
【００５０】
（第３実施形態）
以下、図７を参照して、本発明に係る撮像装置の第３実施形態における表示遅延低減モードと表示遅延調整モードの切り替え動作について説明する。前述した第１実施形態では、被写体追跡部１１０による被写体追跡に係る処理結果に応じて表示モードを切り替える場合について説明した。これに対して、本実施形態では、取得した画像における移動ベクトルの変化に基づく被写体の移動量に応じて表示モードを切り替える構成を採用した撮像装置１００について説明する。なお、撮像装置１００の各構成要素は前述した第１実施形態と同一なので説明は省略する。また、表示モードの切り替えを動作についても、表示モードを切り替えるための所定の情報が異なる点以外は略同一なので説明は省略する。
【００５１】
図７は、本発明の第３実施形態に係る、ライブビュー表示中に連続撮影を行う場合の、表示モードの切り替えについて説明する図であって、画角内に存在する被写体に応じた移動ベクトルの違いを示している。図７（ａ）は、画角内の所定ブロックにおける移動ベクトルが小さい場合を示し、図７（ｂ）は、画角内の所定ブロックにおける移動ベクトルが大きい場合を示している。
【００５２】
図７（ａ）に図示するように、画角内の複数ブロックにおいて検出された移動ベクトルが小さい場合は、画角内の所定領域における被写体の動きが小さく、被写体が安定してフレーミングされている可能性が高い。対して、図７（ｂ）に図示するように、画角内の複数ブロックにおいて検出された移動ベクトルが大きい場合は、画角内に動きの小さい被写体が存在しない、あるいは、ユーザが被写体を見失っている確率が高い。
【００５３】
そこで、本実施形態の撮像装置１００は、移動ベクトルが小さいと判断できる場合は、表示モードを表示遅延調整モードに設定し、移動ベクトルが大きいと判断できる場合は、表示モードを表示遅延低減モードに設定する。具体的に、移動ベクトル算出部１１２は、連続して取得した画像のそれぞれを複数の領域に分割したブロックごとに移動ベクトルを算出する。そして、ＣＰＵ１０３は、算出された移動ベクトルに基づいて、所定の数以上（または所定の割合以上）のブロックの移動ベクトルが小さい場合に表示モードを表示遅延調整モードに設定し、それ以外は表示遅延低減モードに設定する。
【００５４】
以上説明したように、本実施形態の撮像装置１００は、画角内における所定領域の移動ベクトルが小さく被写体を安定してフレーミングしていると判断できる場合は、ユーザに与える違和感を低減した表示を優先する。また、本実施形態の撮像装置１００は、画角内における所定領域の移動ベクトルが大きく被写体を安定してフレーミングできていないと判断できる場合は、被写体の動きに応じた機敏な表示を実現するために遅延を低減した表示を優先する。この構成により、本実施形態に係る撮像装置１００は、露光開始から取得完了までに要する時間が異なる画像（例えば、連続撮影中にライブビュー画像と静止画像）を表示部１０８に順次表示する際に、ユーザに与える違和感を軽減することができる。
【００５５】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、前述した実施形態では、表示遅延調整モードにおいて、ライブビュー画像と静止画像の表示遅延を略等しくする構成について説明したがこれに限定されるものではない。例えば、表示遅延調整モードとしては、少なくとも、表示遅延低減モードよりもライブビュー画像と静止画像の表示遅延の差が小さいモードであればよい。
【００５６】
また、前述した実施形態では、ライブビュー表示中に連続撮影を実行する場合に、ライブビュー画像と静止画像とを、表示部１０８に交互に表示する構成について説明したが、これに限定されるものではない。例えば、ライブビュー表示を行っていない状態（例えば表示部１０８がオフされている状態）で連続撮影を行う場合に、ライブビュー画像と静止画像を交互に表示する構成であってもよい。この場合、表示部１０８への表示を伴わずに、ライブビュー画像の取得を行う構成であればよい。
【００５７】
また、前述した実施形態では、各表示モードにおいて、ライブビュー画像と静止画像を１つずつ交互に表示する構成について説明したが、これに限定されるものではない。例えば、連続撮影時に、所定数のライブビュー画像を表示した後に静止画像を表示する構成であってもよい、または、所定数の静止画像を表示した後にライブビュー画像を表示する構成であってもよい。さらに、少なくとも１つ以上の静止画像と少なくとも１つ以上のライブビュー画像とを、表示部１０８に交互に表示する構成であってもよい。すなわち、表示遅延低減モードと表示遅延調整モードにおいては、静止画像とライブビュー画像とを切り替えての表示部１０８に表示でき、この際のライブビュー画像および静止画像の表示数は限定されるものではない。
【００５８】
なお、前述した実施形態では、表示モードを自動的に切り替え可能な構成について説明したが、例えば、撮像装置１００の設定メニューに基づいて、ユーザが表示モードを手動設定できる構成であってもよい。この場合、ユーザによって事前に（優先すべき）表示モードが設定されている場合は、上述した各実施形態で説明した所定の情報（被写体追跡、角速度、移動ベクトル）に基づく表示モードの切り替えを行わなければよい。
【００５９】
［その他の実施形態］
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００６０】
１００  撮像装置
１０１  撮像素子
１０３  ＣＰＵ
１０８  表示部
１１０  被写体追跡部
１１１  角速度センサ
１１２  移動ベクトル算出部
【図１】
2019134335.tif 000003
【図２】
2019134335.tif 000004
【図３】
2019134335.tif 000005
【図４】
2019134335.tif 000006
【図５】
2019134335.tif 000007
【図６】
2019134335.tif 000008
【図７】
2019134335.tif 000009