(57)【特許請求の範囲】
【請求項１】
複数の画素を有するＭＯＳ型の撮像素子と、
前記撮像素子の前方に配置されるメカニカルシャッタと、
前記撮像素子を駆動する駆動部と、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御と、前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御と、前記露光の終了後に、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御と、を行う撮像制御部と、
前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御部と、
前記第一の読み出し制御と前記第二の読み出し制御のうちの少なくとも前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して記憶し、前記第二の読み出し制御によって前記第二の画素から読み出された前記第二の撮像画像信号を記憶する第一の記憶部と、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理部と、を備え、
前記撮像制御部は、前記露光の終了の直前において前記第一の撮像画像信号の読み出しが完了した第一タイミングと、前記メカニカルシャッタの閉じた第二タイミングとが不一致の場合には、前記第二の読み出し制御として、前記第一の画素から第一の撮像画像信号を読み出し、かつ、前記第二の画素から第二の撮像画像信号を読み出す制御を行い、前記第一タイミングと前記第二タイミングが一致する場合には、前記第二の読み出し制御として、前記第二の画素のみから第二の撮像画像信号を読み出す制御を行う撮像装置。
【請求項２】
複数の画素を有するＭＯＳ型の撮像素子と、
前記撮像素子の前方に配置されるメカニカルシャッタと、
前記撮像素子を駆動する駆動部と、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御と、前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御と、前記露光の終了後に、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御と、を行う撮像制御部と、
前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御部と、
前記第一の読み出し制御と前記第二の読み出し制御のうちの少なくとも前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して記憶し、前記第二の読み出し制御によって前記第二の画素から読み出された前記第二の撮像画像信号を記憶する第一の記憶部と、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理部と、を備え、
前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号を上書きしながら記憶する第二の記憶部を前記撮像素子の外部に更に備え、
前記表示制御部は、前記第二の記憶部に記憶された前記第一の撮像画像信号を処理して前記ライブビュー画像データを生成する撮像装置。
【請求項３】
複数の画素を有するＭＯＳ型の撮像素子と、
前記撮像素子の前方に配置されるメカニカルシャッタと、
前記撮像素子を駆動する駆動部と、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御と、前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御と、前記露光の終了後に、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御と、を行う撮像制御部と、
前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御部と、
前記第一の読み出し制御と前記第二の読み出し制御のうちの少なくとも前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して記憶し、前記第二の読み出し制御によって前記第二の画素から読み出された前記第二の撮像画像信号を記憶する第一の記憶部と、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理部と、を備え、
前記撮像素子は、前記第一の読み出し制御によって前記第一の画素から順次読み出される前記第一の撮像画像信号を上書きしながら記憶する第二の記憶部と、前記第二の記憶部に記憶されている前記第一の撮像画像信号を前記表示制御部に転送する転送部と、を備える撮像装置。
【請求項４】
請求項１〜３のいずれか１項記載の撮像装置であって、
前記第一の記憶部は、前記撮像素子に内蔵される撮像装置。
【請求項５】
複数の画素を有するＭＯＳ型の撮像素子と、前記撮像素子の前方に配置されるメカニカルシャッタと、前記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置の静止画撮像方法であって、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御ステップと、
前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、
前記露光の終了後に前記駆動部を制御して、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、
前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、
前記第一の読み出し制御ステップと前記第二の読み出し制御ステップのうちの少なくとも前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して第一の記憶部に記憶し、前記第二の読み出し制御ステップによって前記第二の画素から読み出された前記第二の撮像画像信号を前記第一の記憶部に記憶するステップと、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を備え、
前記第二の読み出し制御ステップでは、前記露光の終了の直前において前記第一の撮像画像信号の読み出しが完了した第一タイミングと、前記メカニカルシャッタの閉じた第二タイミングとが不一致の場合には、前記露光の終了後に、前記第一の画素から第一の撮像画像信号を読み出し、かつ、前記第二の画素から第二の撮像画像信号を読み出し、前記第一タイミングと前記第二タイミングが一致する場合には、前記露光の終了後に、前記第二の画素のみから第二の撮像画像信号を読み出す静止画撮像方法。
【請求項６】
複数の画素を有するＭＯＳ型の撮像素子と、前記撮像素子の前方に配置されるメカニカルシャッタと、前記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置の静止画撮像方法であって、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御ステップと、
前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、
前記露光の終了後に前記駆動部を制御して、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、
前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、
前記第一の読み出し制御ステップと前記第二の読み出し制御ステップのうちの少なくとも前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して第一の記憶部に記憶し、前記第二の読み出し制御ステップによって前記第二の画素から読み出された前記第二の撮像画像信号を前記第一の記憶部に記憶するステップと、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を備え、
前記撮像装置は、前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を上書きしながら記憶する第二の記憶部を前記撮像素子の外部に更に備え、
前記表示制御ステップでは、前記第二の記憶部に記憶された前記第一の撮像画像信号を処理して前記ライブビュー画像データを生成する静止画撮像方法。
【請求項７】
複数の画素を有するＭＯＳ型の撮像素子と、前記撮像素子の前方に配置されるメカニカルシャッタと、前記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置の静止画撮像方法であって、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御ステップと、
前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、
前記露光の終了後に前記駆動部を制御して、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、
前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、
前記第一の読み出し制御ステップと前記第二の読み出し制御ステップのうちの少なくとも前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して第一の記憶部に記憶し、前記第二の読み出し制御ステップによって前記第二の画素から読み出された前記第二の撮像画像信号を前記第一の記憶部に記憶するステップと、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を備え、
前記撮像素子は、前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を上書きしながら記憶する第二の記憶部と、前記第二の記憶部に記憶されている前記第一の撮像画像信号を出力する転送部と、を備える静止画撮像方法。
【請求項８】
請求項５〜７のいずれか１項記載の静止画撮像方法であって、
前記第一の記憶部は、前記撮像素子に内蔵される静止画撮像方法。
【請求項９】
複数の画素を有するＭＯＳ型の撮像素子と、前記撮像素子の前方に配置されるメカニカルシャッタと、前記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置に、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御ステップと、
前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、
前記露光の終了後に前記駆動部を制御して、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、
前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、
前記第一の読み出し制御ステップと前記第二の読み出し制御ステップのうちの少なくとも前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して第一の記憶部に記憶し、前記第二の読み出し制御ステップによって前記第二の画素から読み出された前記第二の撮像画像信号を前記第一の記憶部に記憶するステップと、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を実行させ、
前記第二の読み出し制御ステップでは、前記露光の終了の直前において前記第一の撮像画像信号の読み出しが完了した第一タイミングと、前記メカニカルシャッタの閉じた第二タイミングとが不一致の場合には、前記露光の終了後に、前記第一の画素から第一の撮像画像信号を読み出し、かつ、前記第二の画素から第二の撮像画像信号を読み出し、前記第一タイミングと前記第二タイミングが一致する場合には、前記露光の終了後に、前記第二の画素のみから第二の撮像画像信号を読み出すことを実行させるための静止画撮像プログラム。
【請求項１０】
複数の画素を有するＭＯＳ型の撮像素子と、前記撮像素子の前方に配置されるメカニカルシャッタと、前記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置に、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御ステップと、
前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、
前記露光の終了後に前記駆動部を制御して、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、
前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、
前記第一の読み出し制御ステップと前記第二の読み出し制御ステップのうちの少なくとも前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して第一の記憶部に記憶し、前記第二の読み出し制御ステップによって前記第二の画素から読み出された前記第二の撮像画像信号を前記第一の記憶部に記憶するステップと、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を実行させ、
前記撮像装置は、前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を上書きしながら記憶する第二の記憶部を前記撮像素子の外部に更に備え、
前記表示制御ステップでは、前記第二の記憶部に記憶された前記第一の撮像画像信号を処理して前記ライブビュー画像データを生成することを実行させるための静止画撮像プログラム。
【請求項１１】
複数の画素を有するＭＯＳ型の撮像素子と、前記撮像素子の前方に配置されるメカニカルシャッタと、前記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置に、
前記メカニカルシャッタを開けた状態で前記駆動部を制御して前記複数の画素の露光を同時に開始し、前記メカニカルシャッタを閉じて前記複数の画素の前記露光を同時に終了する静止画露光制御ステップと、
前記露光中に前記駆動部を制御して、前記露光中の複数のタイミングの各々において前記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、
前記露光の終了後に前記駆動部を制御して、前記複数の画素の前記第一の画素以外の第二の画素と前記第一の画素とのうち少なくとも前記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、
前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号に基づいてライブビュー画像データを生成し前記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、
前記第一の読み出し制御ステップと前記第二の読み出し制御ステップのうちの少なくとも前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を積算して第一の記憶部に記憶し、前記第二の読み出し制御ステップによって前記第二の画素から読み出された前記第二の撮像画像信号を前記第一の記憶部に記憶するステップと、
前記第一の記憶部に記憶された前記第一の撮像画像信号と前記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を実行させるためのものであって、
前記撮像素子は、前記第一の読み出し制御ステップによって前記第一の画素から順次読み出される前記第一の撮像画像信号を上書きしながら記憶する第二の記憶部と、前記第二の記憶部に記憶されている前記第一の撮像画像信号を出力する転送部と、を備える静止画撮像プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、静止画撮像方法、及び、静止画撮像プログラムに関する。
【背景技術】
【０００２】
近年、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）イメージセンサ、又は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等の撮像素子の高解像度化に伴い、電子内視鏡、デジタルスチルカメラ、デジタルビデオカメラ、又は、カメラ付きの携帯電話機等の撮像機能を有する情報機器の需要が急増している。なお、以上のような撮像機能を有する情報機器を撮像装置と称する。【０００３】
これら撮像装置において、例えば長時間露光による静止画撮像時には、撮像装置の表示部においてライブビュー画像を表示できなくなる。【０００４】
特許文献１には、撮像素子の露光期間中に、奇数行の画素と偶数行の画素で交互に信号の読み出しを行い、奇数行の画素で読み出した信号をメモリで積算し、偶数行の画素で読み出した信号をメモリで積算し、積算した奇数行の画素の信号と偶数行の画素の信号を合成して静止画像データ生成用の撮像画像信号を得る撮像装置が記載されている。【０００５】
この撮像装置では、メモリに順次積算されていく奇数行又は偶数行の信号に基づいてライブビュー表示を行うことで、静止画撮像中におけるライブビュー画像の表示継続を可能としている。【０００６】
特許文献２には、第１領域とモニタリング領域を有する撮像素子を搭載した撮像装置が記載されている。この撮像装置は、静止画撮像時には、モニタリング領域から順次読み出す信号に基づいてライブビュー画像の表示を行うことで、静止画撮像中におけるライブビュー画像の表示継続を可能としている。【０００７】
また、この撮像装置は、モニタリング領域に対応する画素信号を、第１領域から読み出した信号を用いて補間生成することで、画素欠損のない静止画像データを生成している。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】日本国特開２０１２−０８０４５７号公報
【特許文献２】日本国特開２０１５−１３８９９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
特許文献１に記載の撮像装置は、奇数行の画素又は偶数行の画素から順次読み出されて積算される信号に基づいてライブビュー画像を生成している。このため、ライブビュー画像の明るさが一定にならず、表示品質が低下する。【００１０】
この表示品質を確保するためには、各ライブビュー画像の輝度補正等が必要となり、処理が複雑となる。また、撮像している被写体に動体が含まれる場合には、ライブビュー画像に残像が現れることになり、表示品質が低下する。【００１１】
特許文献２に記載の撮像装置は、モニタリング領域に対応する画素信号が補間によって生成される。このため、高品質の静止画像データを生成することができない。【００１２】
本発明は、上記事情に鑑みてなされたものであり、静止画撮像中におけるライブビュー画像の表示継続を可能としながら、高品質の静止画像データを記録することのできる撮像装置、静止画撮像方法、及び、静止画撮像プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１３】
本発明の撮像装置は、複数の画素を有するＭＯＳ型の撮像素子と、上記撮像素子の前方に配置されるメカニカルシャッタと、上記撮像素子を駆動する駆動部と、上記メカニカルシャッタを開けた状態で上記駆動部を制御して上記複数の画素の露光を同時に開始し、上記メカニカルシャッタを閉じて上記複数の画素の上記露光を同時に終了する静止画露光制御と、上記露光中に上記駆動部を制御して、上記露光中の複数のタイミングの各々において上記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御と、上記露光の終了後に、上記複数の画素の上記第一の画素以外の第二の画素と上記第一の画素とのうち少なくとも上記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御と、を行う撮像制御部と、上記第一の読み出し制御によって上記第一の画素から順次読み出される上記第一の撮像画像信号に基づいてライブビュー画像データを生成し上記ライブビュー画像データに基づく画像を表示部に表示させる表示制御部と、上記第一の読み出し制御と上記第二の読み出し制御のうちの少なくとも上記第一の読み出し制御によって上記第一の画素から順次読み出される上記第一の撮像画像信号を積算して記憶し、上記第二の読み出し制御によって上記第二の画素から読み出された上記第二の撮像画像信号を記憶する第一の記憶部と、上記第一の記憶部に記憶された上記第一の撮像画像信号と上記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理部と、を備えるものである。【００１４】
本発明の静止画撮像方法は、複数の画素を有するＭＯＳ型の撮像素子と、上記撮像素子の前方に配置されるメカニカルシャッタと、上記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置の静止画撮像方法であって、上記メカニカルシャッタを開けた状態で上記駆動部を制御して上記複数の画素の露光を同時に開始し、上記メカニカルシャッタを閉じて上記複数の画素の上記露光を同時に終了する静止画露光制御ステップと、上記露光中に上記駆動部を制御して、上記露光中の複数のタイミングの各々において上記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、上記露光の終了後に上記駆動部を制御して、上記複数の画素の上記第一の画素以外の第二の画素と上記第一の画素とのうち少なくとも上記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号に基づいてライブビュー画像データを生成し上記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、上記第一の読み出し制御ステップと上記第二の読み出し制御ステップのうちの少なくとも上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号を積算して第一の記憶部に記憶し、上記第二の読み出し制御ステップによって上記第二の画素から読み出された上記第二の撮像画像信号を上記第一の記憶部に記憶するステップと、上記第一の記憶部に記憶された上記第一の撮像画像信号と上記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を備えるものである。【００１５】
本発明の静止画撮像プログラムは、複数の画素を有するＭＯＳ型の撮像素子と、上記撮像素子の前方に配置されるメカニカルシャッタと、上記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置に、上記メカニカルシャッタを開けた状態で上記駆動部を制御して上記複数の画素の露光を同時に開始し、上記メカニカルシャッタを閉じて上記複数の画素の上記露光を同時に終了する静止画露光制御ステップと、上記露光中に上記駆動部を制御して、上記露光中の複数のタイミングの各々において上記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、上記露光の終了後に上記駆動部を制御して、上記複数の画素の上記第一の画素以外の第二の画素と上記第一の画素とのうち少なくとも上記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号に基づいてライブビュー画像データを生成し上記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、上記第一の読み出し制御ステップと上記第二の読み出し制御ステップのうちの少なくとも上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号を積算して第一の記憶部に記憶し、上記第二の読み出し制御ステップによって上記第二の画素から読み出された上記第二の撮像画像信号を上記第一の記憶部に記憶するステップと、上記第一の記憶部に記憶された上記第一の撮像画像信号と上記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を実行させるためのものである。
【発明の効果】
【００１６】
本発明によれば、静止画撮像中におけるライブビュー画像の表示継続を可能としながら、高品質の静止画像データを記録することのできる撮像装置、静止画撮像方法、及び、静止画撮像プログラムを提供することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施形態を説明するための撮像装置の一例としてのデジタルカメラ１００の概略構成を示す図である。
【図２】図１に示すデジタルカメラ１００に搭載される撮像素子５の概略構成を示す模式図である。
【図３】図２に示す撮像素子５のセンサ部５１の構成を示す平面模式図である。
【図４】図１に示すデジタルカメラ１００の静止画撮像時の動作を模式的に示すタイミングチャートである。
【図５】図１に示すデジタルカメラ１００の静止画撮像時の動作の変形例を模式的に示すタイミングチャートである。
【図６】図５に示すタイミングチャートにおける時刻ｔ５から時刻ｔ５ａの間のメカニカルシャッタ３とセンサ部５１の動作状態を示す図である。
【図７】図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ａの要部構成を示す図である。
【図８】図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ｂの要部構成を示す図である。
【図９】図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ｃの要部構成を示す図である。
【図１０】図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ｄの要部構成を示す図である。
【図１１】本発明の撮影装置の一実施形態であるスマートフォン２００の外観を示すものである。
【図１２】図１１に示すスマートフォン２００の構成を示すブロック図である。
【発明を実施するための形態】
【００１８】
以下、本発明の実施形態について図面を参照して説明する。
【００１９】
図１は、本発明の一実施形態を説明するための撮像装置の一例としてのデジタルカメラ１００の概略構成を示す図である。
【００２０】
デジタルカメラ１００は、撮像レンズ１と、絞り２と、メカニカルシャッタ３と、レンズ制御部４と、シャッタ駆動部６と、レンズ駆動部８と、絞り駆動部９と、を有するレンズ装置４０を備える。
【００２１】
本実施形態において、レンズ装置４０はデジタルカメラ１００本体に着脱可能なものとして説明するが、デジタルカメラ１００本体に固定されるものであってもよい。
【００２２】
撮像レンズ１と絞り２は撮像光学系を構成し、撮像光学系は例えばフォーカスレンズ等を含む。
【００２３】
メカニカルシャッタ３は、撮像光学系に光が入射する状態と、撮像光学系に光を入射させない状態とを機械的に切り替えるシャッタ機構であり、図１の例では、撮像光学系よりも被写体側に配置されている。
【００２４】
メカニカルシャッタ３は、撮像素子５の前方（被写体側）に配置されていればよく、例えば撮像素子５と撮像光学系との間に配置されていてもよい。
【００２５】
レンズ装置４０のレンズ制御部４は、デジタルカメラ１００本体のシステム制御部１１と有線又は無線によって通信可能に構成される。
【００２６】
レンズ制御部４は、システム制御部１１からの指令にしたがい、シャッタ駆動部６を介してメカニカルシャッタ３を開閉したり、レンズ駆動部８を介して撮像レンズ１に含まれるフォーカスレンズを駆動したり、絞り駆動部９を介して絞り２を駆動したりする。
【００２７】
デジタルカメラ１００本体は、撮像光学系を通して被写体を撮像するＣＭＯＳイメージセンサ等のＭＯＳ型の撮像素子５と、撮像素子５を駆動する駆動部として機能するセンサ駆動部１０と、デジタルカメラ１００の電気制御系全体を統括制御するシステム制御部１１と、操作部１４と、を備える。
【００２８】
システム制御部１１は、各種のプロセッサとＲＡＭ（Ｒａｍｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）とＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）と含んで構成され、デジタルカメラ１００全体を統括制御する。このＲＯＭには、静止画撮像プログラムを含むプログラムが格納されている。
【００２９】
さらに、このデジタルカメラ１００の電気制御系は、撮像素子５からデータバス２５に出力される撮像信号群に対し、補間演算、ガンマ補正演算、及び、ＲＧＢ／ＹＣ変換処理等を行って記録用の撮像画像データとライブビュー画像データとを生成するデジタル信号処理部１７と、着脱自在の記憶媒体２１が接続される外部メモリ制御部２０と、デジタルカメラ１００の背面等に搭載された表示部２３を駆動する表示ドライバ２２と、を備える。
【００３０】
デジタル信号処理部１７は、各種のプロセッサとＲＡＭとＲＯＭを含み、このＲＯＭに格納されたプログラムをこのプロセッサが実行することで各種処理を行う。このプログラムは静止画撮像プログラムを含む。
【００３１】
各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｓｅｓｓｉｎｇ  Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ  Ｌｏｇｉｃ  Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
【００３２】
これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
【００３３】
システム制御部１１とデジタル信号処理部１７の各々のプロセッサは、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。
【００３４】
デジタル信号処理部１７、外部メモリ制御部２０、及び、表示ドライバ２２は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令に基づいて動作する。
【００３５】
図２は、図１に示すデジタルカメラ１００に搭載される撮像素子５の概略構成を示す模式図である。
【００３６】
撮像素子５は、センサ部５１と、記憶部５２と、転送インタフェース（Ｉ／Ｆ）５３と、を備える。
【００３７】
センサ部５１は、被写体を撮像して撮像画像信号を出力する。センサ部５１はセンサ駆動部１０によって駆動される。
【００３８】
記憶部５２は、センサ部５１から出力された撮像信号を記憶するものであり、第一の記憶部５２Ａと、第二の記憶部５２Ｂとによって構成される。
【００３９】
第一の記憶部５２Ａと第二の記憶部５２Ｂは、それぞれ、データを記憶するためのコンデンサ又はフリップフロップ等の多数の記憶素子と、この多数の記憶素子のデータの記憶及び読み出しを制御する図示省略の制御回路とを含む。これらの制御回路は、システム制御部１１によって制御される。
【００４０】
第一の記憶部５２Ａと第二の記憶部５２Ｂの各々は、書き換え可能な記憶素子を含むものであれば何でも良く、半導体メモリ又は強誘電体メモリ等を用いることができる。
【００４１】
第一の記憶部５２Ａと第二の記憶部５２Ｂの各々には、例えば、ＳＲＡＭ（Ｓｔａｔｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＤＲＡＭ（Ｄｙｎａｍｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＦＲＡＭ（登録商標）（Ｆｅｒｒｏｅｌｅｃｔｒｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、又は、フラッシュメモリ等を用いることができる。
【００４２】
第一の記憶部５２Ａには、センサ部５１に含まれる画素の総数と同じ数の撮像信号を記憶可能となっている。
【００４３】
第二の記憶部５２Ｂには、センサ部５１に含まれる画素の総数よりも少ない数の撮像信号を記憶可能となっている。
【００４４】
転送インタフェース５３は、撮像素子５からデータバス２５に撮像信号を転送するためのインタフェースであり、システム制御部１１によって制御される。
【００４５】
転送インタフェース５３は、例えば、ＳＬＶＳ（Ｓｃａｌａｂｌｅ  Ｌｏｗ  Ｖｏｌｔａｇｅ  Ｓｉｇｎａｌｉｎｇ）等の規格に準拠するインタフェースによって構成される。
【００４６】
第一の記憶部５２Ａと第二の記憶部５２Ｂに記憶された撮像信号は、転送インタフェース５３によってデータバス２５に出力される。転送インタフェース５３は転送部として機能する。
【００４７】
撮像素子５の構成としては、例えば以下の４つが挙げられるが、これらに限定されるものではない。
【００４８】
［１］センサ部５１と記憶部５２が１チップ化された構成
【００４９】
［２］センサ部５１が形成されたチップと、記憶部５２が形成されたチップとが積層され、２つのチップがスタッドバンプで電気的に接続されている構成
【００５０】
［３］センサ部５１と記憶部５２が１つのパッケージに収容され、センサ部５１のパッドと記憶部５２のパッドがワイヤボンドによって接続されている構成
【００５１】
［４］センサ部５１と記憶部５２が別のパッケージに収容され、これら２つのパッケージがリードフレームによって接続される構成
【００５２】
撮像素子５の消費電力低減、高速性、小型化の観点からは、［１］の構成が最も望ましく、［２］の構成が［１］の次に望ましく、［３］の構成が［２］の次に望ましく、［４］の構成が［３］の次に望ましい。［３］と［４］の構成によれば、高度な技術を用いることなく製造することができる。
【００５３】
図３は、図２に示す撮像素子５のセンサ部５１の構成を示す平面模式図である。
【００５４】
センサ部５１は、一方向である行方向Ｘに配列された複数の画素６１からなる画素行６２が、行方向Ｘと直交する列方向Ｙに複数配列された受光面６０と、受光面６０に配列された画素を駆動する駆動回路６３と、受光面６０に配列された画素行６２の各画素６１から読み出される撮像信号を処理する信号処理回路６４と、を備える。
【００５５】
以下では、図３において受光面６０の列方向Ｙの上方向の端部を上端といい、受光面６０の列方向Ｙの下方向の端部を下端という。
【００５６】
画素６１は、レンズ装置４０の撮像光学系を通った光を受光し受光量に応じた電荷を発生して蓄積する光電変換部と、この光電変換部に蓄積された電荷を電圧信号に変換して撮像信号として信号線に読み出す読み出し回路と、を含む。読み出し回路は、周知の構成を採用可能である。
【００５７】
読み出し回路は、例えば、光電変換部に蓄積された電荷をフローティングディフュージョンに転送するための転送トランジスタと、フローティングディフュージョンの電位をリセットするためのリセットトランジスタと、フローティングディフュージョンの電位に応じた電圧信号を出力する出力トランジスタと、出力トランジスタから出力される電圧信号を選択的に信号線に読み出すための選択トランジスタと、を含む。なお、読み出し回路は、複数の光電変換部で共用される場合もある。
【００５８】
受光面６０に配列された全ての画素行６２のうち、Ｎを０以上の整数として受光面６０の上端側から数えて（３Ｎ＋１）番目にある画素行６２が配置される受光面６０の領域をフィールドＦ１という。
【００５９】
フィールドＦ１にある画素６１は、センサ部５１に含まれる全ての画素６１のうちの一部の画素である第一の画素を構成する。
【００６０】
以下では、フィールドＦ１にある各画素６１から信号線に読み出される撮像信号の集合を第一の撮像画像信号という。
【００６１】
受光面６０に配列された全ての画素行６２のうち受光面６０の上端側から数えて（３Ｎ＋２）番目にある画素行６２が配置される受光面６０の領域をフィールドＦ２という。
【００６２】
受光面６０に配列された全ての画素行６２のうち受光面６０の上端側から数えて（３Ｎ＋３）番目にある画素行６２が配置される受光面６０の領域をフィールドＦ３という。
【００６３】
フィールドＦ２とフィールドＦ３を合わせた領域にある画素６１は、センサ部５１に含まれる全ての画素６１のうちの上記の第一の画素以外の画素である第二の画素を構成する。
【００６４】
以下では、フィールドＦ２及びフィールドＦ３にある各画素６１から信号線に読み出される撮像信号の集合を第二の撮像画像信号という。
【００６５】
駆動回路６３は、各画素６１の光電変換部に接続される読み出し回路を画素行単位で駆動して、画素行６２毎に、この画素行６２に含まれる各光電変換部のリセット、この各光電変換部に蓄積された電荷に応じた電圧信号の信号線への読み出し等を行う。駆動回路６３は、センサ駆動部１０によって制御される。
【００６６】
信号処理回路６４は、画素行６２の各画素６１から信号線に読み出された電圧信号に対し、相関二重サンプリング処理を行い、相関二重サンプリング処理後の電圧信号をデジタル信号に変換してセンサ部５１から出力する。
【００６７】
システム制御部１１のプロセッサは、静止画撮像プログラムを含むプログラムを実行することで、静止画露光制御と、第一の読み出し制御と、第二の読み出し制御とを行う撮像制御部として機能する。
【００６８】
静止画露光制御とは、レンズ制御部４及びシャッタ駆動部６を介してメカニカルシャッタ３を開けた状態（撮像光学系に光が入射する状態）でセンサ駆動部１０を制御してセンサ部５１の全ての画素６１の露光を同時に開始し、その後、レンズ制御部４及びシャッタ駆動部６を介してメカニカルシャッタ３を閉じてセンサ部５１の全ての画素６１の露光を同時に終了する制御を言う。
【００６９】
第一の読み出し制御とは、静止画露光制御によって行われる露光中にセンサ駆動部１０を制御して、この露光中の複数のタイミングの各々においてフィールドＦ１にある全ての画素６１から第一の撮像画像信号を読み出す制御を言う。
【００７０】
第二の記憶部５２Ｂは、第一の撮像画像信号を記憶可能な容量を有している。第一の読み出し制御によって読み出される第一の撮像画像信号は、第一の記憶部５２Ａと第二の記憶部５２Ｂの各々に記憶される。
【００７１】
第二の記憶部５２Ｂは、第一の読み出し制御によって順次読み出される第一の撮像画像信号を上書き記憶して、常に最新のものだけを記憶する。
【００７２】
つまり、第二の記憶部５２Ｂは、第一の撮像画像信号を記憶している状態で、新たな第一の撮像画像信号の入力があると、記憶済みの第一の撮像画像信号の各撮像信号に対し、新たな第一の撮像画像信号のうちのこの各撮像信号の読み出し元の画素６１と同じ画素６１から読み出された撮像信号を上書きすることで、第一の撮像画像信号を最新のものに更新していく。
【００７３】
一方、第一の記憶部５２Ａは、第一の読み出し制御によって順次読み出される第一の撮像画像信号を積算して記憶していく。
【００７４】
つまり、第一の記憶部５２Ａは、第一の撮像画像信号を記憶している状態で、新たな第一の撮像画像信号の入力があると、記憶済みの第一の撮像画像信号の各撮像信号と、新たな第一の撮像画像信号のうちのこの各撮像信号の読み出し元の画素６１と同じ画素６１から読み出された撮像信号とを積算し、積算後の撮像信号を記憶することで、第一の撮像画像信号を更新する。
【００７５】
これにより、第一の記憶部５２Ａには、既に記憶済みの第一の撮像画像信号に対し、上記の新たな第一の撮像画像信号が追加記憶されることになる。
【００７６】
第二の読み出し制御とは、静止画露光制御によって行われる露光の終了後に、フィールドＦ１にある全ての画素６１から第一の撮像画像信号を読み出し、かつ、フィールドＦ２及びフィールドＦ３にある全ての画素６１から第二の撮像画像信号を読み出す制御を言う。
【００７７】
第一の記憶部５２Ａは、第二の読み出し制御によって読み出された第二の撮像画像信号を、第一の撮像画像信号が記憶される領域を除く領域に記憶する。
【００７８】
したがって、第一の読み出し制御と第二の読み出し制御が終了した状態では、第一の記憶部５２Ａには、第一の撮像画像信号と第二の撮像画像信号とで構成される第三の撮像画像信号が記憶されることになる。
【００７９】
デジタル信号処理部１７のプロセッサは、デジタル信号処理部１７に内蔵されるＲＯＭに記憶された静止画撮像プログラムを実行することで、表示制御部と画像処理部として機能する。
【００８０】
表示制御部として機能するデジタル信号処理部１７のプロセッサは、第一の読み出し制御によって順次読み出されて第二の記憶部５２Ｂに記憶され、ここから転送インタフェース５３によってデータバス２５に出力された上記の第一の撮像画像信号に基づいてライブビュー画像データを生成し、このライブビュー画像データに基づく画像（ライブビュー画像）を、表示ドライバ２２を介して表示部２３に表示させる。
【００８１】
画像処理部として機能するデジタル信号処理部１７のプロセッサは、第一の読み出し制御と第二の読み出し制御によって読み出されて第一の記憶部５２Ａに記憶され、ここから転送インタフェース５３によってデータバス２５に出力された上記の第三の撮像画像信号を処理して撮像画像データを生成し、この撮像画像データを、外部メモリ制御部２０を介して記憶媒体２１に記憶する。
【００８２】
図４は、図１に示すデジタルカメラ１００の静止画撮像時の動作を模式的に示すタイミングチャートである。
【００８３】
図４において、“メカニカルシャッタ”の横には、メカニカルシャッタ３の開閉状態が示されている。
【００８４】
図４において、“センサ部”の横には、センサ部５１で行われる静止画撮像のための露光のタイミングが示されている。
【００８５】
図４において、“第一の記憶部”の横には、第一の記憶部５２Ａにおける撮像信号の記憶状態が示されている。
【００８６】
図４において、“第二の記憶部”の横には、第二の記憶部５２Ｂにおける撮像信号の記憶状態が示されている。
【００８７】
図４において、“撮像素子出力”の横には、撮像素子５からの撮像信号の出力状態が示されている。
【００８８】
図４において、“カメラ側処理”の横には、デジタル信号処理部１７で行われる処理が示されている。
【００８９】
デジタルカメラ１００が撮像モードに設定されると、システム制御部１１は、レンズ制御部４に指令を出してメカニカルシャッタ３を開けた状態とし、この状態で撮像素子５によりライブビュー画像表示のための撮像を行わせる。これにより、表示部２３にはライブビュー画像が表示される。
【００９０】
この状態で静止画撮像を行う指示がなされると、この指示に応じて、システム制御部１１は、センサ駆動部１０を制御してセンサ部５１の全ての画素６１のリセット（光電変換部からの電荷の排出）を同時に行い、全ての画素６１の露光（静止画露光制御による露光）を同時に開始する（時刻ｔ１）。
【００９１】
時刻ｔ１で開始された露光の期間中の時刻ｔ２になると、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ１にある各画素６１から撮像信号を読み出す第一の読み出し制御を実施する。
【００９２】
この第一の読み出し制御によって読み出された第一の撮像画像信号は、第一の記憶部５２Ａに記憶される（ステップＳ１）と共に、第二の記憶部５２Ｂに記憶される（ステップＳ２）。
【００９３】
そして、第二の記憶部５２Ｂへの第一の撮像画像信号の記憶が完了すると、システム制御部１１の制御により、第二の記憶部５２Ｂに記憶された第一の撮像画像信号が、１ラインずつ、転送インタフェース５３からデータバス２５へと出力される（ステップＳ３）。
【００９４】
ステップＳ３でデータバス２５に出力された第一の撮像画像信号の各ラインは、デジタル信号処理部１７に内蔵されるラインメモリに順次記憶されて処理されることでライブビュー画像データが１ラインずつ生成される。
【００９５】
そして、デジタル信号処理部１７は、生成したライブビュー画像データの１ラインを表示ドライバ２２に転送する。表示ドライバ２２は、受信した１ラインを表示部２３に描画する。この処理が繰り返されることで、ライブビュー画像データに基づくライブビュー画像が表示部２３に表示される（ステップＳ４）。
【００９６】
時刻ｔ２の後の時刻ｔ３になると、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ１にある各画素６１から撮像信号を読み出す第一の読み出し制御を再び実施する。
【００９７】
この第一の読み出し制御によって読み出された第一の撮像画像信号は、ステップＳ１で第一の記憶部５２Ａに記憶された第一の撮像画像信号と積算されることで第一の記憶部５２Ａに追加記憶される（ステップＳ５）。
【００９８】
また、この第一の撮像画像信号は、ステップＳ２で第二の記憶部５２Ｂに記憶された第一の撮像画像信号に上書きされることで、第二の記憶部５２Ｂに記憶される（ステップＳ６）。
【００９９】
そして、ステップＳ６の処理が完了すると、システム制御部１１の制御により、第二の記憶部５２Ｂに上書き記憶された第一の撮像画像信号が、１ラインずつ、転送インタフェース５３からデータバス２５へと出力される（ステップＳ７）。
【０１００】
ステップＳ７でデータバス２５に出力された第一の撮像画像信号の各ラインは、デジタル信号処理部１７に内蔵されるラインメモリに順次記憶されて処理されることでライブビュー画像データが１ラインずつ生成される。
【０１０１】
そして、デジタル信号処理部１７は、生成したライブビュー画像データの１ラインを表示ドライバ２２に転送する。表示ドライバ２２は、受信した１ラインを表示部２３に描画する。
【０１０２】
この処理が繰り返されることで、ステップＳ４の処理で表示中のライブビュー画像がライン毎に更新される（ステップＳ８）。
【０１０３】
時刻ｔ３の後の時刻ｔ４になると、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ１にある各画素６１から撮像信号を読み出す第一の読み出し制御を再び実施する。
【０１０４】
この第一の読み出し制御によって読み出された第一の撮像画像信号は、ステップＳ５で第一の記憶部５２Ａに記憶された第一の撮像画像信号と積算されることで第一の記憶部５２Ａに追加記憶される（ステップＳ９）。
【０１０５】
また、この第一の撮像画像信号は、ステップＳ６で第二の記憶部５２Ｂに記憶された第一の撮像画像信号に上書きされることで、第二の記憶部５２Ｂに記憶される（ステップＳ１０）。
【０１０６】
そして、ステップＳ１０の処理が完了すると、システム制御部１１の制御により、第二の記憶部５２Ｂに上書き記憶された第一の撮像画像信号が、１ラインずつ、転送インタフェース５３からデータバス２５へと出力される（ステップＳ１１）。
【０１０７】
ステップＳ１１でデータバス２５に出力された第一の撮像画像信号の各ラインは、デジタル信号処理部１７に内蔵されるラインメモリに順次記憶されて処理されることでライブビュー画像データが１ラインずつ生成される。
【０１０８】
そして、デジタル信号処理部１７は、生成したライブビュー画像データの１ラインを表示ドライバ２２に転送する。表示ドライバ２２は、受信した１ラインを表示部２３に描画する。
【０１０９】
この処理が繰り返されることで、ステップＳ８の処理で表示中のライブビュー画像がライン毎に更新される（ステップＳ１２）。
【０１１０】
時刻ｔ４の後の時刻ｔ５になると、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ１にある各画素６１から撮像信号を読み出す第一の読み出し制御を再び実施する。
【０１１１】
この第一の読み出し制御によって読み出された第一の撮像画像信号は、ステップＳ９で第一の記憶部５２Ａに記憶された第一の撮像画像信号と積算されることで第一の記憶部５２Ａに追加記憶される（ステップＳ１３）。
【０１１２】
また、この第一の撮像画像信号は、ステップＳ１０で第二の記憶部５２Ｂに記憶された第一の撮像画像信号に上書きされることで、第二の記憶部５２Ｂに記憶される（ステップＳ１４）。
【０１１３】
そして、ステップＳ１４の処理が完了すると、システム制御部１１の制御により、第二の記憶部５２Ｂに上書き記憶された第一の撮像画像信号が、１ラインずつ、転送インタフェース５３からデータバス２５へと出力される（ステップＳ１５）。
【０１１４】
ステップＳ１５でデータバス２５に出力された第一の撮像画像信号の各ラインは、デジタル信号処理部１７に内蔵されるラインメモリに順次記憶されて処理されることでライブビュー画像データが１ラインずつ生成される。
【０１１５】
そして、デジタル信号処理部１７は、生成したライブビュー画像データの１ラインを表示ドライバ２２に転送する。表示ドライバ２２は、受信した１ラインを表示部２３に描画する。
【０１１６】
この処理が繰り返されることで、ステップＳ１２の処理で表示中のライブビュー画像がライン毎に更新される（ステップＳ１６）。
【０１１７】
時刻ｔ５の後の時刻ｔ６になると、システム制御部１１は、レンズ制御部４を制御してメカニカルシャッタ３を閉じることで、時刻ｔ１で開始したセンサ部５１の全ての画素６１の露光を終了する。
【０１１８】
静止画露光制御による露光を終了すると、システム制御部１１は、センサ駆動部１０を制御して、まず、センサ部５１のフィールドＦ１にある各画素６１から撮像信号を読み出す第一の読み出し制御を実施する。
【０１１９】
この第一の読み出し制御によって読み出された第一の撮像画像信号は、ステップＳ１３で第一の記憶部５２Ａに記憶された第一の撮像画像信号と積算されることで第一の記憶部５２Ａに追加記憶される（ステップＳ１７）。
【０１２０】
ステップＳ１、ステップＳ５、ステップＳ９、ステップＳ１３、及び、ステップＳ１７の処理により、第一の記憶部５２Ａには、時刻ｔ１から時刻ｔ２の間の露光によって得られた第一の撮像画像信号と、時刻ｔ２から時刻ｔ３の間の露光によって得られた第一の撮像画像信号と、時刻ｔ３から時刻ｔ４の間の露光によって得られた第一の撮像画像信号と、時刻ｔ４から時刻ｔ５の間の露光によって得られた第一の撮像画像信号と、時刻ｔ５から時刻ｔ６の間の露光によって得られた第一の撮像画像信号との計５つの第一の撮像画像信号の積算値が記憶される。
【０１２１】
この積算値は、時刻ｔ１から時刻ｔ６の間の露光によってセンサ部５１のフィールドＦ１にある各画素６１に蓄積された電荷に応じた撮像信号の集合となる。
【０１２２】
次に、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ２にある各画素６１から撮像信号を読み出す第二の読み出し制御を実施する。この第二の読み出し制御によって読み出された撮像画像信号は、第一の記憶部５２Ａに記憶される（ステップＳ１８）。
【０１２３】
次に、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ３にある各画素６１から撮像信号を読み出す第二の読み出し制御を実施する。この第二の読み出し制御によって読み出された撮像画像信号は、第一の記憶部５２Ａに記憶される（ステップＳ１９）。
【０１２４】
ステップＳ１７〜ステップＳ１９の処理により、第一の記憶部５２Ａには、時刻ｔ１から時刻ｔ６の間の露光によって得られた第一の撮像画像信号と、時刻ｔ１から時刻ｔ６の間の露光によって得られた第二の撮像画像信号とが記憶され、第一の撮像画像信号と第二の撮像画像信号とによって第三の撮像画像信号が構成される。
【０１２５】
この第三の撮像画像信号は、センサ部５１の全ての画素６１を、途中で撮像信号を読み出すことなく時刻ｔ１から時刻ｔ６まで露光し、この露光終了後に、この全ての画素６１から読み出して得られる撮像画像信号と等価となる。
【０１２６】
ステップＳ１９の処理が終了し、第一の記憶部５２Ａに第三の撮像画像信号が記憶された状態になると、システム制御部１１の制御により、第一の記憶部５２Ａに記憶されている第三の撮像画像信号が、１ラインずつ、転送インタフェース５３からデータバス２５へと出力される（ステップＳ２０）。
【０１２７】
データバス２５に出力された第三の撮像画像信号は、デジタル信号処理部１７のラインメモリに順次記憶されて処理されて撮像画像データが生成され、生成された撮像画像データが記憶媒体２１に記憶される（ステップＳ２１）。
【０１２８】
これにより、静止画撮像が完了し、ライブビュー画像表示用の撮像が再開されて、ライブビュー画像の表示が再開される。
【０１２９】
以上のように、デジタルカメラ１００によれば、静止画撮像のための露光中であっても、センサ部５１の一部の画素６１から読み出される第一の撮像画像信号に基づいてライブビュー画像が表示されるため、ライブビュー画像の表示更新を継続することができる。
【０１３０】
また、ライブビュー画像データの生成に用いられる第一の撮像画像信号は、第二の記憶部５２Ｂにおいて上書き記憶されるものである。このため、静止画撮像中の被写体が動いている場合であってもライブビュー画像の品質を向上させることができる。
【０１３１】
また、時刻ｔ１から時刻ｔ２までの時間と、時刻ｔ２から時刻ｔ３までの時間と、時刻ｔ３から時刻ｔ４までの時間と、時刻ｔ４から時刻ｔ５までの時間と、時刻ｔ５から時刻ｔ６までの時間とをそれぞれ同じにすることで、ライブビュー画像データの生成に用いられる第一の撮像画像信号は、全て同じ露光時間で得られたものにすることができる。
【０１３２】
このため、図４のステップＳ４、ステップＳ８、ステップＳ１２、及び、ステップＳ１６の各々で表示されるライブビュー画像の輝度補正は不要となり、処理を簡略化することができる。
【０１３３】
また、デジタルカメラ１００によれば、露光中に撮像信号が読み出されるのはフィールドＦ１にある画素６１だけである。このように、フィールドＦ２とフィールドＦ３にある画素６１については露光終了までは撮像信号の読み出しが行われないことで、静止画撮像に要する電力消費を少なくすることができ、デジタルカメラ１００の電池持ちを長くすることができる。
【０１３４】
また、デジタルカメラ１００によれば、第一の記憶部５２Ａには、露光中に複数回に分けて読み出された第一の撮像画像信号の積算値と、露光終了後に読み出された第二の撮像画像信号とが記憶される。
【０１３５】
第一の撮像画像信号の積算値と第二の撮像画像信号とから構成される第三の撮像画像信号は、全ての画素６１を同じ露光時間で露光して得られたものと等価となる。このため、第三の撮像画像信号に基づいて生成される撮像画像データの高品質化が可能となる。
【０１３６】
また、デジタルカメラ１００によれば、撮像素子５が第一の記憶部５２Ａを有する構成である。このため、第三の撮像画像信号の出力途中であっても次の静止画撮像のための露光を開始することが可能となる。
【０１３７】
例えば、ステップＳ２０において、ステップＳ１７で第一の記憶部５２Ａに記憶された第一の撮像画像信号を先に出力し、その後に、第二の撮像画像信号を出力する構成とする。
【０１３８】
この構成によれば、第一の記憶部５２Ａに記憶された第一の撮像画像信号の出力が終了した時点で第一の記憶部５２Ａには新たな第一の撮像画像信号の記憶が可能になる。したがって、次の静止画露光制御を開始することができる。
【０１３９】
このように、静止画撮像を行ってから次の静止画撮像が可能となるまでの時間を短縮することができるため、シャッタチャンスを逃してしまう可能性を減らすことができる。
【０１４０】
また、デジタルカメラ１００によれば、撮像素子５が第一の記憶部５２Ａと第二の記憶部５２Ｂを有する構成である。このため、転送インタフェース５３の転送速度が低速であっても、露光中の第一の撮像画像信号の読み出しを高速に行うことができる。
【０１４１】
露光中の第一の撮像画像信号の読み出しを高速に行えることで、動く被写体を撮像している場合でも、この第一の撮像画像信号に基づく画像の歪みを抑えることができ、ライブビュー画像と撮像画像データの品質を向上させることができる。
【０１４２】
図４の説明では、静止画撮像のための露光中に第一の読み出し制御を４回行うものとしたが、この回数は２回以上であればライブビュー表示の更新を適度に行うことができ、ライブビュー画像の品質を向上させることができる。
【０１４３】
また、露光の途中でセンサ部５１から撮像信号を読み出す画素をフィールドＦ１にある画素６１としているが、フィールドＦ２にある画素６１又はフィールドＦ３にある画素６１から撮像信号を読み出す構成であってもよい。
【０１４４】
また、センサ部５１の画素６１は３つのフィールドに分割される構成であるが、フィールドの分割数は２つ以上であればよい。
【０１４５】
図５は、図１に示すデジタルカメラ１００の静止画撮像時の動作の変形例を模式的に示すタイミングチャートである。
【０１４６】
図５に示すタイミングチャートは、ステップＳ１３で開始された第一の撮像画像信号の第一の記憶部５２Ａへの記憶が完了したタイミング（図中の時刻ｔ５ａ）で静止画撮像のための露光が終了している点と、この露光の終了後に行われるステップＳ１７の処理が削除された点を除いては図４に示したものと同じである。
【０１４７】
図６は、図５に示すタイミングチャートにおける時刻ｔ５から時刻ｔ５ａの間のメカニカルシャッタ３とセンサ部５１の動作状態を示す図である。
【０１４８】
図６に示す直線Ｒは、フィールドＦ１にある画素６１から撮像信号を読み出すタイミングを示しており、時刻ｔ５から時刻ｔ５ａにかけて、フィールドＦ１にある画素行６２が受光面６０の上端側から下端側に向かって順次選択され、選択された画素行６２の各画素６１から撮像信号が読み出される。
【０１４９】
また、この例では、メカニカルシャッタ３は、受光面６０を上端側から下端側に向かって順次遮光していく構成となっている。
【０１５０】
メカニカルシャッタ３は、時刻ｔ５において閉じる動作を開始し、受光面６０を上端側から下端側に向かって移動する。そして、メカニカルシャッタ３は、時刻ｔ５ａで受光面６０全体を遮光する。
【０１５１】
図５及び図６に示された時刻ｔ５ａは、静止画撮像のための露光の終了の直前において第一の撮像画像信号の読み出しが完了した第一タイミングであり、かつ、メカニカルシャッタ３の閉じた第二タイミングである。
【０１５２】
このように、静止画撮像のための露光時間が、第一タイミングと第二タイミングとが一致するような露光時間である場合には、時刻ｔ５から時刻ｔ５ａの間において、フィールドＦ１の任意の画素行６２からの撮像信号の読み出し前、この撮像信号の読み出し後、又は、この撮像信号の読み出し中に、この任意の画素行６２の露光が終了する。
【０１５３】
このため、この任意の画素行６２から撮像信号を読み出し終わった状態では、この任意の画素行６２は露光されておらず、露光期間の終了後に、この任意の画素行６２の各画素６１から撮像信号を読み出す必要はなくなる。
【０１５４】
したがって、図５に示すように、時刻ｔ５ａで露光期間が終了すると、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ２にある各画素６１から撮像信号を読み出す第二の読み出し制御を実施する。この第二の読み出し制御によって読み出された撮像画像信号は、第一の記憶部５２Ａに記憶される（ステップＳ１８）。
【０１５５】
次に、システム制御部１１は、センサ駆動部１０を制御して、センサ部５１のフィールドＦ３にある各画素６１から撮像信号を読み出す第二の読み出し制御を実施する。この第二の読み出し制御によって読み出された撮像画像信号は、第一の記憶部５２Ａに記憶される（ステップＳ１９）。この後は、図４で説明したとおりである。
【０１５６】
以上のように、図５に示す動作例によれば、静止画撮像のための露光が終了した時点で、フィールドＦ１にある画素６１からの撮像信号の読み出しが完了している。このため、撮像画像データが記憶媒体２１に記憶されるまでにかかる時間を短縮することができる。また、次の静止画撮像が可能となるまでの時間を更に短縮することができる。
【０１５７】
図７は、図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ａの要部構成を示す図である。
【０１５８】
デジタルカメラ１００Ａは、撮像素子５に内蔵される記憶部５２が第一の記憶部５２Ａのみを含む点と、センサ部５１から出力される撮像信号が転送インタフェース５３にも入力される点を除いては、デジタルカメラ１００と同じ構成である。
【０１５９】
デジタルカメラ１００Ａでは、図４の時刻ｔ２〜ｔ５の各々でセンサ部５１から出力される撮像信号が、第一の記憶部５２Ａに記憶されると共に、転送インタフェース５３からデータバス２５に出力される。
【０１６０】
そして、デジタルカメラ１００Ａのデジタル信号処理部１７は、データバス２５に出力される撮像信号を処理してライブビュー画像データを生成し、このライブビュー画像データに基づくライブビュー画像を表示部２３に表示させる。
【０１６１】
つまり、デジタルカメラ１００Ａの静止画撮像時の動作は、図４において、ステップＳ２、ステップＳ６、ステップＳ１０、及び、ステップＳ１４が削除され、ステップＳ３の開始タイミングが時刻ｔ２に変更され、ステップＳ７の開始タイミングが時刻ｔ３に変更され、ステップＳ１１の開始タイミングが時刻ｔ４に変更され、ステップＳ１５の開始タイミングが時刻ｔ５に変更され、この変更に合わせてステップＳ４、ステップＳ８、ステップＳ１２、及び、ステップＳ１６の開始タイミングが早められたものとなる。
【０１６２】
このように、撮像素子５に第二の記憶部５２Ｂが含まれない構成であっても、露光期間中にライブビュー画像の表示を継続しながら、高品質の静止画像データを記憶することができる。この構成によれば、撮像素子５の記憶部５２の容量を削減してデジタルカメラのコストを下げることができる。
【０１６３】
また、デジタルカメラ１００Ａによれば、ライブビュー画像表示用の撮像信号はセンサ部５１から出力後、転送インタフェース５３によって直ぐに転送されるので、高速処理が可能となり、ライブビュー画像の表示を滑らかに行うことができる。
【０１６４】
図８は、図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ｂの要部構成を示す図である。
【０１６５】
デジタルカメラ１００Ｂは、第二の記憶部５２Ｂが撮像素子５外部に設けられてデータバス２５に接続されている点を除いては、図７のデジタルカメラ１００Ａと同じ構成である。
【０１６６】
デジタルカメラ１００Ｂでは、図４の時刻ｔ２〜ｔ５の各々でセンサ部５１から出力される撮像信号が、第一の記憶部５２Ａに記憶されると共に、転送インタフェース５３からデータバス２５に出力されて第二の記憶部５２Ｂに記憶される。第二の記憶部５２Ｂでは、第一の撮像画像信号が順次上書きされる。
【０１６７】
そして、デジタルカメラ１００Ｂのデジタル信号処理部１７は、第二の記憶部５２Ｂに記憶された第一の撮像画像信号を処理してライブビュー画像データを生成し、このライブビュー画像データに基づくライブビュー画像を表示部２３に表示させる。
【０１６８】
デジタルカメラ１００Ｂによれば、第二の記憶部５２Ｂを利用した複雑な画像処理を第一の撮像画像信号に対して実施することができる。このため、ライブビュー画像の高品質化を図ることができる。
【０１６９】
図９は、図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ｃの要部構成を示す図である。
【０１７０】
デジタルカメラ１００Ｃは、記憶部５２が撮像素子５の外部に設けられてデータバス２５に接続されている点を除いては、図１のデジタルカメラ１００と同じ構成である。
【０１７１】
デジタルカメラ１００Ｃでは、露光中にセンサ部５１のフィールドＦ１にある画素６１から読み出された第一の撮像画像信号が、転送インタフェース５３からデータバス２５に出力されて第一の記憶部５２Ａと第二の記憶部５２Ｂに記憶される。
【０１７２】
第一の記憶部５２Ａでは第一の撮像画像信号が積算して記憶され、第二の記憶部５２Ｂでは第一の撮像画像信号が上書き記憶される点はデジタルカメラ１００と同様である。
【０１７３】
また、デジタルカメラ１００Ｃでは、露光終了後にセンサ部５１のフィールドＦ１にある画素６１から読み出された第一の撮像画像信号が、転送インタフェース５３からデータバス２５に出力されて第一の記憶部５２Ａに記憶される。
【０１７４】
また、デジタルカメラ１００Ｃでは、露光終了後にセンサ部５１のフィールドＦ２及びフィールドＦ３にある画素６１から読み出された第二の撮像画像信号が、転送インタフェース５３からデータバス２５に出力されて第一の記憶部５２Ａに記憶される。これにより、第一の記憶部５２Ａには第三の撮像画像信号が記憶される。
【０１７５】
デジタルカメラ１００Ｃのデジタル信号処理部１７は、第二の記憶部５２Ｂに記憶された第一の撮像画像信号を処理してライブビュー画像データを生成し、このライブビュー画像データに基づくライブビュー画像を表示部２３に表示させる。
【０１７６】
また、デジタルカメラ１００Ｃのデジタル信号処理部１７は、第一の記憶部５２Ａに記憶された第三の撮像画像信号を処理して撮像画像データを生成し、これを記憶媒体２１に記憶する。
【０１７７】
このように、撮像素子５に記憶部５２が含まれない構成であっても、露光期間中にライブビュー画像の表示を継続しながら、高品質の静止画像データを記憶することができる。この構成によれば、撮像素子５のコストを下げてデジタルカメラを安価に提供することができる。
【０１７８】
また、デジタルカメラ１００Ｃによれば、ライブビュー画像表示用の撮像信号はセンサ部５１から出力後、転送インタフェース５３によって直ぐに転送されるので、高速処理が可能となり、ライブビュー画像の表示を滑らかに行うことができる。
【０１７９】
また、デジタルカメラ１００Ｃによれば、第二の記憶部５２Ｂを利用した複雑な画像処理を第一の撮像画像信号に対して実施することができるため、ライブビュー画像の高品質化を図ることができる。
【０１８０】
図１０は、図１に示すデジタルカメラ１００の変形例であるデジタルカメラ１００Ｄの要部構成を示す図である。
【０１８１】
デジタルカメラ１００Ｄは、撮像素子５の外部に設けられた記憶部５２が第一の記憶部５２Ａのみを有する構成となっている点を除いては、図９のデジタルカメラ１００Ｃと同じ構成である。
【０１８２】
デジタルカメラ１００Ｄでは、露光中にセンサ部５１のフィールドＦ１にある画素６１から読み出された第一の撮像画像信号が、転送インタフェース５３からデータバス２５に出力されて第一の記憶部５２Ａに記憶されると共に、デジタル信号処理部１７のラインメモリにも順次記憶される。
【０１８３】
デジタルカメラ１００Ｄのデジタル信号処理部１７は、ラインメモリに順次記憶される第一の撮像画像信号を処理してライブビュー画像データを生成し、このライブビュー画像データに基づくライブビュー画像を表示部２３に表示させる。
【０１８４】
デジタルカメラ１００Ｄによれば、記憶部５２のコストを下げることができ、デジタルカメラを安価に提供することができる。
【０１８５】
ここまでは撮像装置としてデジタルカメラを例にしたが、以下では、撮像装置としてカメラ付のスマートフォンの実施形態について説明する。
【０１８６】
図１１は、本発明の撮影装置の一実施形態であるスマートフォン２００の外観を示すものである。
【０１８７】
図１１に示すスマートフォン２００は、平板状の筐体２０１を有し、筐体２０１の一方の面に表示部としての表示パネル２０２と、入力部としての操作パネル２０３とが一体となった表示入力部２０４を備えている。
【０１８８】
また、この様な筐体２０１は、スピーカ２０５と、マイクロホン２０６と、操作部２０７と、カメラ部２０８とを備えている。
【０１８９】
なお、筐体２０１の構成はこれに限定されず、例えば、表示部と入力部とが独立した構成を採用したり、折り畳み構造又はスライド機構を有する構成を採用したりすることもできる。
【０１９０】
図１２は、図１１に示すスマートフォン２００の構成を示すブロック図である。
【０１９１】
図１２に示すように、スマートフォンの主たる構成要素として、無線通信部２１０と、表示入力部２０４と、通話部２１１と、操作部２０７と、カメラ部２０８と、記憶部２１２と、外部入出力部２１３と、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）受信部２１４と、モーションセンサ部２１５と、電源部２１６と、主制御部２２０とを備える。
【０１９２】
また、スマートフォン２００の主たる機能として、図示省略の基地局装置ＢＳと図示省略の移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。
【０１９３】
無線通信部２１０は、主制御部２２０の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータ等の送受信、又は、Ｗｅｂデータ又はストリーミングデータ等の受信を行う。
【０１９４】
表示入力部２０４は、主制御部２２０の制御により、画像（静止画像および動画像）又は文字情報等を表示して視覚的にユーザに情報を伝達するとともに、表示した情報に対するユーザ操作を検出する、いわゆるタッチパネルであって、表示パネル２０２と、操作パネル２０３とを備える。
【０１９５】
表示パネル２０２は、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ  Ｄｉｓｐｌａｙ）等を表示デバイスとして用いたものである。
【０１９６】
操作パネル２０３は、表示パネル２０２の表示面上に表示される画像を視認可能に載置され、ユーザの指又は尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスをユーザの指又は尖筆によって操作すると、操作に起因して発生する検出信号を主制御部２２０に出力する。次いで、主制御部２２０は、受信した検出信号に基づいて、表示パネル２０２上の操作位置（座標）を検出する。
【０１９７】
図１１に示すように、本発明の撮影装置の一実施形態として例示しているスマートフォン２００の表示パネル２０２と操作パネル２０３とは一体となって表示入力部２０４を構成しているが、操作パネル２０３が表示パネル２０２を完全に覆うような配置となっている。
【０１９８】
係る配置を採用した場合、操作パネル２０３は、表示パネル２０２外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル２０３は、表示パネル２０２に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル２０２に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。
【０１９９】
なお、表示領域の大きさと表示パネル２０２の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル２０３が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。更に、外縁部分の幅は、筐体２０１の大きさ等に応じて適宜設計されるものである。
【０２００】
更にまた、操作パネル２０３で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、又は、静電容量方式等が挙げられ、いずれの方式を採用することもできる。
【０２０１】
通話部２１１は、スピーカ２０５又はマイクロホン２０６を備え、マイクロホン２０６を通じて入力されたユーザの音声を主制御部２２０にて処理可能な音声データに変換して主制御部２２０に出力したり、無線通信部２１０あるいは外部入出力部２１３により受信された音声データを復号してスピーカ２０５から出力させたりするものである。
【０２０２】
また、図１１に示すように、例えば、スピーカ２０５を表示入力部２０４が設けられた面と同じ面に搭載し、マイクロホン２０６を筐体２０１の側面に搭載することができる。
【０２０３】
操作部２０７は、キースイッチ等を用いたハードウェアキーであって、ユーザからの指示を受け付けるものである。例えば、図１１に示すように、操作部２０７は、スマートフォン２００の筐体２０１の側面に搭載され、指等で押下されるとオンとなり、指を離すとバネ等の復元力によってオフ状態となる押しボタン式のスイッチである。
【０２０４】
記憶部２１２は、主制御部２２０の制御プログラム又は制御データ、アプリケーションソフトウェア、通信相手の名称又は電話番号等を対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータ又は、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータ等を一時的に記憶するものである。また、記憶部２１２は、スマートフォン内蔵の内部記憶部２１７と着脱自在な外部メモリスロットを有する外部記憶部２１８により構成される。
【０２０５】
なお、記憶部２１２を構成するそれぞれの内部記憶部２１７と外部記憶部２１８は、フラッシュメモリタイプ（ｆｌａｓｈ  ｍｅｍｏｒｙ  ｔｙｐｅ）、ハードディスクタイプ（ｈａｒｄ  ｄｉｓｋ  ｔｙｐｅ）、マルチメディアカードマイクロタイプ（ｍｕｌｔｉｍｅｄｉａ  ｃａｒｄ  ｍｉｃｒｏ  ｔｙｐｅ）、カードタイプのメモリ（例えば、ＭｉｃｒｏＳＤ（登録商標）メモリ等）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）等の格納媒体を用いて実現される。
【０２０６】
外部入出力部２１３は、スマートフォン２００に連結される全ての外部機器とのインタフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＩＥＥＥ１３９４等）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（登録商標）（Ｂｌｕｅｔｏｏｔｈ（登録商標））、ＲＦＩＤ（Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ  Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ｕｌｔｒａ  Ｗｉｄｅｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）等）により直接的又は間接的に接続するためのものである。
【０２０７】
スマートフォン２００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ  ｃａｒｄ）又はＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ  Ｉｄｅｎｔｉｔｙ  Ｍｏｄｕｌｅ  Ｃａｒｄ）／ＵＩＭ（Ｕｓｅｒ  Ｉｄｅｎｔｉｔｙ  Ｍｏｄｕｌｅ
Ｃａｒｄ）カード、オーディオ・ビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるＰＤＡ、有／無線接続されるパーソナルコンピュータ、イヤホン等がある。
【０２０８】
外部入出力部２１３は、このような外部機器から伝送を受けたデータをスマートフォン２００の内部の各構成要素に伝達したり、スマートフォン２００の内部のデータを外部機器に伝送したりする。
【０２０９】
ＧＰＳ受信部２１４は、主制御部２２０の指示にしたがって、ＧＰＳ衛星ＳＴ１〜ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン２００の緯度、経度、高度からなる位置を検出する。
【０２１０】
ＧＰＳ受信部２１４は、無線通信部２１０又は外部入出力部２１３（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
【０２１１】
モーションセンサ部２１５は、例えば、３軸の加速度センサ等を備え、主制御部２２０の指示にしたがって、スマートフォン２００の物理的な動きを検出する。スマートフォン２００の物理的な動きを検出することにより、スマートフォン２００の動く方向又は加速度が検出される。係る検出結果は、主制御部２２０に出力されるものである。
【０２１２】
電源部２１６は、主制御部２２０の指示にしたがって、スマートフォン２００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。
【０２１３】
主制御部２２０は、マイクロプロセッサを備え、記憶部２１２が記憶する制御プログラム又は制御データにしたがって動作し、スマートフォン２００の各部を統括して制御するものである。
【０２１４】
また、主制御部２２０は、無線通信部２１０を通じて、音声通信又はデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
【０２１５】
アプリケーション処理機能は、記憶部２１２が記憶するアプリケーションソフトウェアにしたがって主制御部２２０が動作することにより実現するものである。
【０２１６】
アプリケーション処理機能としては、例えば、外部入出力部２１３を制御して対向機器とデータ通信を行う赤外線通信機能、電子メールの送受信を行う電子メール機能、又は、ウェブページを閲覧するウェブブラウジング機能等がある。
【０２１７】
また、主制御部２２０は、受信データ又はダウンロードしたストリーミングデータ等の画像データ（静止画像又は動画像のデータ）に基づいて、映像を表示入力部２０４に表示する等の画像処理機能を備える。
【０２１８】
画像処理機能とは、主制御部２２０が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部２０４に表示する機能のことをいう。
【０２１９】
更に、主制御部２２０は、表示パネル２０２に対する表示制御と、操作部２０７、操作パネル２０３を通じたユーザ操作を検出する操作検出制御を実行する。表示制御の実行により、主制御部２２０は、アプリケーションソフトウェアを起動するためのアイコン又はスクロールバー等のソフトウェアキーを表示したり、あるいは電子メールを作成したりするためのウィンドウを表示する。
【０２２０】
なお、スクロールバーとは、表示パネル２０２の表示領域に収まりきれない大きな画像等について、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
【０２２１】
また、操作検出制御の実行により、主制御部２２０は、操作部２０７を通じたユーザ操作を検出したり、操作パネル２０３を通じて、上記アイコンに対する操作又は、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付ける。
【０２２２】
更に、操作検出制御の実行により主制御部２２０は、操作パネル２０３に対する操作位置が、表示パネル２０２に重なる重畳部分（表示領域）か、それ以外の表示パネル２０２に重ならない外縁部分（非表示領域）かを判定し、操作パネル２０３の感応領域又はソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
【０２２３】
また、主制御部２２０は、操作パネル２０３に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指等によって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。
【０２２４】
カメラ部２０８は、図１に示したデジタルカメラにおける外部メモリ制御部２０、記憶媒体２１、表示部２３、表示ドライバ２２、及び、操作部１４以外の構成を含む。
【０２２５】
カメラ部２０８によって生成された撮像画像データは、記憶部２１２に記憶したり、外部入出力部２１３又は無線通信部２１０を通じて出力したりすることができる。
【０２２６】
図１１に示すスマートフォン２００において、カメラ部２０８は表示入力部２０４と同じ面に搭載されているが、カメラ部２０８の搭載位置はこれに限らず、表示入力部２０４の背面に搭載されてもよい。
【０２２７】
また、カメラ部２０８はスマートフォン２００の各種機能に利用することができる。例えば、表示パネル２０２にカメラ部２０８で取得した画像を表示することができる。操作パネル２０３の操作入力のひとつとして、カメラ部２０８の画像を利用することができる。
【０２２８】
また、ＧＰＳ受信部２１４が位置を検出する際に、カメラ部２０８からの画像を参照して位置を検出することもできる。更には、カメラ部２０８からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン２００のカメラ部２０８の光軸方向を判断したり現在の使用環境を判断したりすることもできる。勿論、カメラ部２０８からの画像をアプリケーションソフトウェア内で利用することもできる。
【０２２９】
その他、静止画又は動画の画像データにＧＰＳ受信部２１４により取得した位置情報、マイクロホン２０６により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部２１５により取得した姿勢情報等を付加して記憶部２１２に記憶したり、外部入出力部２１３又は無線通信部２１０を通じて出力したりすることもできる。
【０２３０】
以上のように、本明細書には以下の事項が開示されている。
（１）  複数の画素を有するＭＯＳ型の撮像素子と、上記撮像素子の前方に配置されるメカニカルシャッタと、上記撮像素子を駆動する駆動部と、上記メカニカルシャッタを開けた状態で上記駆動部を制御して上記複数の画素の露光を同時に開始し、上記メカニカルシャッタを閉じて上記複数の画素の上記露光を同時に終了する静止画露光制御と、上記露光中に上記駆動部を制御して、上記露光中の複数のタイミングの各々において上記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御と、上記露光の終了後に、上記複数の画素の上記第一の画素以外の第二の画素と上記第一の画素とのうち少なくとも上記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御と、を行う撮像制御部と、上記第一の読み出し制御によって上記第一の画素から順次読み出される上記第一の撮像画像信号に基づいてライブビュー画像データを生成し上記ライブビュー画像データに基づく画像を表示部に表示させる表示制御部と、上記第一の読み出し制御と上記第二の読み出し制御のうちの少なくとも上記第一の読み出し制御によって上記第一の画素から順次読み出される上記第一の撮像画像信号を積算して記憶し、上記第二の読み出し制御によって上記第二の画素から読み出された上記第二の撮像画像信号を記憶する第一の記憶部と、上記第一の記憶部に記憶された上記第一の撮像画像信号と上記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理部と、を備える撮像装置。
【０２３１】
（２）  （１）記載の撮像装置であって、上記撮像制御部は、上記露光の終了の直前において上記第一の撮像画像信号の読み出しが完了した第一タイミングと、上記メカニカルシャッタの閉じた第二タイミングとが不一致の場合には、上記第二の読み出し制御として、上記第一の画素から第一の撮像画像信号を読み出し、かつ、上記第二の画素から第二の撮像画像信号を読み出す制御を行い、上記第一タイミングと上記第二タイミングが一致する場合には、上記第二の読み出し制御として、上記第二の画素のみから第二の撮像画像信号を読み出す制御を行う撮像装置。
【０２３２】
（３）  （１）又は（２）記載の撮像装置であって、上記第一の記憶部は、上記撮像素子に内蔵される撮像装置。
【０２３３】
（４）  （１）〜（３）のいずれか１つに記載の撮像装置であって、上記第一の読み出し制御によって上記第一の画素から順次読み出される上記第一の撮像画像信号を上書きしながら記憶する第二の記憶部を上記撮像素子の外部に更に備え、上記表示制御部は、上記第二の記憶部に記憶された上記第一の撮像画像信号を処理して上記ライブビュー画像データを生成する撮像装置。
【０２３４】
（５）  （１）〜（３）のいずれか１つに記載の撮像装置であって、上記撮像素子は、上記第一の読み出し制御によって上記第一の画素から順次読み出される上記第一の撮像画像信号を上書きしながら記憶する第二の記憶部と、上記第二の記憶部に記憶されている上記第一の撮像画像信号を上記表示制御部に転送する転送部と、を備える撮像装置。
【０２３５】
（６）  複数の画素を有するＭＯＳ型の撮像素子と、上記撮像素子の前方に配置されるメカニカルシャッタと、上記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置の静止画撮像方法であって、上記メカニカルシャッタを開けた状態で上記駆動部を制御して上記複数の画素の露光を同時に開始し、上記メカニカルシャッタを閉じて上記複数の画素の上記露光を同時に終了する静止画露光制御ステップと、上記露光中に上記駆動部を制御して、上記露光中の複数のタイミングの各々において上記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、上記露光の終了後に上記駆動部を制御して、上記複数の画素の上記第一の画素以外の第二の画素と上記第一の画素とのうち少なくとも上記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号に基づいてライブビュー画像データを生成し上記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、上記第一の読み出し制御ステップと上記第二の読み出し制御ステップのうちの少なくとも上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号を積算して第一の記憶部に記憶し、上記第二の読み出し制御ステップによって上記第二の画素から読み出された上記第二の撮像画像信号を上記第一の記憶部に記憶するステップと、上記第一の記憶部に記憶された上記第一の撮像画像信号と上記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を備える静止画撮像方法。
【０２３６】
（７）  （６）記載の静止画撮像方法であって、上記第二の読み出し制御ステップでは、上記露光の終了の直前において上記第一の撮像画像信号の読み出しが完了した第一タイミングと、上記メカニカルシャッタの閉じた第二タイミングとが不一致の場合には、上記露光の終了後に、上記第一の画素から第一の撮像画像信号を読み出し、かつ、上記第二の画素から第二の撮像画像信号を読み出し、上記第一タイミングと上記第二タイミングが一致する場合には、上記露光の終了後に、上記第二の画素のみから第二の撮像画像信号を読み出す静止画撮像方法。
【０２３７】
（８）  （６）又は（７）記載の静止画撮像方法であって、上記第一の記憶部は、上記撮像素子に内蔵される静止画撮像方法。
【０２３８】
（９）  （６）〜（８）のいずれか１つに記載の静止画撮像方法であって、上記撮像装置は、上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号を上書きしながら記憶する第二の記憶部を上記撮像素子の外部に更に備え、上記表示制御ステップでは、上記第二の記憶部に記憶された上記第一の撮像画像信号を処理して上記ライブビュー画像データを生成する静止画撮像方法。
【０２３９】
（１０）  （６）〜（８）のいずれか１つに記載の静止画撮像方法であって、上記撮像素子は、上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号を上書きしながら記憶する第二の記憶部と、上記第二の記憶部に記憶されている上記第一の撮像画像信号を出力する転送部と、を備える静止画撮像方法。
【０２４０】
（１１）  複数の画素を有するＭＯＳ型の撮像素子と、上記撮像素子の前方に配置されるメカニカルシャッタと、上記画素から撮像信号を読み出す駆動を行う駆動部と、を有する撮像装置に、上記メカニカルシャッタを開けた状態で上記駆動部を制御して上記複数の画素の露光を同時に開始し、上記メカニカルシャッタを閉じて上記複数の画素の上記露光を同時に終了する静止画露光制御ステップと、上記露光中に上記駆動部を制御して、上記露光中の複数のタイミングの各々において上記複数の画素の一部の第一の画素から第一の撮像画像信号を読み出す第一の読み出し制御ステップと、上記露光の終了後に上記駆動部を制御して、上記複数の画素の上記第一の画素以外の第二の画素と上記第一の画素とのうち少なくとも上記第二の画素から第二の撮像画像信号を読み出す第二の読み出し制御ステップと、上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号に基づいてライブビュー画像データを生成し上記ライブビュー画像データに基づく画像を表示部に表示させる表示制御ステップと、上記第一の読み出し制御ステップと上記第二の読み出し制御ステップのうちの少なくとも上記第一の読み出し制御ステップによって上記第一の画素から順次読み出される上記第一の撮像画像信号を積算して第一の記憶部に記憶し、上記第二の読み出し制御ステップによって上記第二の画素から読み出された上記第二の撮像画像信号を上記第一の記憶部に記憶するステップと、上記第一の記憶部に記憶された上記第一の撮像画像信号と上記第二の撮像画像信号とで構成される第三の撮像画像信号を処理して撮像画像データを生成し記憶媒体に記憶する画像処理ステップと、を実行させるための静止画撮像プログラム。
【産業上の利用可能性】
【０２４１】
本発明によれば、静止画撮像中におけるライブビュー画像の表示継続を可能としながら、高品質の静止画像データを記録することのできる撮像装置を提供することができる。【０２４２】
以上、本発明を特定の実施形態によって説明したが、本発明はこの実施形態に限定されるものではなく、開示された発明の技術思想を逸脱しない範囲で種々の変更が可能である。
本出願は、２０１６年１０月４日出願の日本特許出願（特願２０１６−１９６５３９）に基づくものであり、その内容はここに取り込まれる。
【符号の説明】
【０２４３】
１００，１００Ａ，１００Ｂ，１００Ｃ，１００Ｄ  デジタルカメラ
１  撮像レンズ
２  絞り
３  メカニカルシャッタ
４  レンズ制御部
５  撮像素子
６  シャッタ駆動部
８  レンズ駆動部
９  絞り駆動部
４０  レンズ装置
５１  センサ部
５２  記憶部
５２Ａ  第一の記憶部
５２Ｂ  第二の記憶部
５３  転送インタフェース
６０  受光面
６１  画素
６２  画素行
６３  駆動回路
６４  信号処理回路
Ｘ  行方向
Ｙ  列方向
Ｆ１〜Ｆ３  フィールド
１０  センサ駆動部
１１  システム制御部
１４  操作部
１７  デジタル信号処理部
２０  外部メモリ制御部
２１  記憶媒体
２２  表示ドライバ
２３  表示部
２４  制御バス
２５  データバス
Ｒ  読み出しタイミングを示す直線
２００  スマートフォン
２０１  筐体
２０２  表示パネル
２０３  操作パネル
２０４  表示入力部
２０５  スピーカ
２０６  マイクロホン
２０７  操作部
２０８  カメラ部
２１０  無線通信部
２１１  通話部
２１２  記憶部
２１３  外部入出力部
２１４  ＧＰＳ受信部
２１５  モーションセンサ部
２１６  電源部
２１７  内部記憶部
２１８  外部記憶部
２２０  主制御部
ＳＴ１〜ＳＴｎ  ＧＰＳ衛星
【図１】
0006539788.tif 000002
【図２】
0006539788.tif 000003
【図３】
0006539788.tif 000004
【図４】
0006539788.tif 000005
【図５】
0006539788.tif 000006
【図６】
0006539788.tif 000007
【図７】
0006539788.tif 000008
【図８】
0006539788.tif 000009
【図９】
0006539788.tif 000010
【図１０】
0006539788.tif 000011
【図１１】
0006539788.tif 000012
【図１２】
0006539788.tif 000013