(57)【要約】【課題】静止画撮影に連動して撮影前を動画として記録すると共に、待機中に行われるズーム操作、カメラ設定操作及び、レリーズスイッチ押下時に行われる静止画撮影用の撮影準備動作による影響を排除する。【解決手段】撮像手段の出力を連続的に読み出して表示用画像、動画像及び、静止画像を生成する手段、表示用画像、動画像及び、静止画像を記憶する手段、表示用画像を表示する手段、記憶した動画像及び、静止画画像を記録媒体に記録する手段、撮影指示を行う手段を備え、表示用画像を生成して表示すると共に、動画像を生成し、撮影指示に応じて、静止画像を生成すると共に、静止画と共に動画像を記録媒体に記録する際に、撮影指示手段の第一の位置で指示される撮影準備完了に基づいて動画像の生成を開始し、撮影指示手段の第二の位置で指示される静止画撮影に伴って、静止画撮影から所定時間遡って撮影した動画データを記録する。【選択図】  図２
2013162187.tif 000002
【特許請求の範囲】
【請求項１】
被写体像を形成する光学系と、該光学系により形成された光学像を電気信号に変換する撮像手段と、該撮像手段の出力を連続的に読み出して表示用画像及び、記録用動画像を生成する動画像生成手段と、前記撮像素子の出力を読み出して記録用静止画像を生成する静止画像生成手段と、前記表示用画像の一時記憶、前記記録用動画像及び、前記記録用静止画像を蓄積記憶する記憶手段と、表示用画像を表示する表示手段と、蓄積記憶した前記記録用動画像及び、前記静止画画像を記録媒体に記録する記録手段と、撮影指示を行う撮影指示手段とを備え、
表示用画像を生成して表示すると共に、前記記録用動画像を生成して蓄積記憶し、前記撮影指示に応じて、前記記録用静止画像を生成して蓄積記憶すると共に、前記記録用静止画と共に前記記録用動画像を記録媒体に記録する画像記録再生装置において、
前記撮影指示は、撮影準備を指示する第一の位置と、撮影記録を指示する第二の位置を備えて、前記撮影指示手段の第一の位置で指示される撮影準備完了に基づいて前記記録用動画像の生成を開始し、前記撮影指示手段の第二の位置で指示される静止画撮影に伴って、静止画撮影から所定時間遡って撮影した動画データを記録することを特徴とする画像記録再生装置。
【請求項２】
被写体像を形成する光学系と、該光学系により形成された光学像を電気信号に変換する撮像ステップと、該撮像の出力を連続的に読み出して表示用画像及び、記録用動画像を生成するステップと、前記撮像素子の出力を読み出して記録用静止画像を生成する静止画像生成ステップと、前記表示用画像の一時記憶、前記記録用動画像及び、前記記録用静止画像を蓄積記憶する記憶ステップと、表示用画像を表示するステップと、蓄積記憶した前記記録用動画像及び、前記静止画画像を記録媒体に記録するステップと、撮影指示を行うステップを備えた画像記録再生装置の制御方法であって、
表示用画像を生成して表示するステップと、前記記録用動画像を生成して蓄積記憶するステップと、前記撮影指示に応じて、前記記録用静止画像を生成して蓄積記憶するステップと、前記記録用静止画と共に前記記録用動画像を記録媒体に記録するステップを有し、前記撮影指示の撮影準備を指示する第一の位置で撮影準備を行うステップと、前記撮影指示手段の第二の位置で静止画撮影を行いステップとを有し、静止画撮影から所定時間遡って撮影した動画データを記録するステップを有することを特徴とする画像記録再生装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像素子の出力を利用して動画像を撮像記録及び、再生する画像記録再生装置に関するものである。
【背景技術】
【０００２】
近年のデジタルカメラなどの画像記録再生装置では、音声付き動画を撮影記録及び、再生する様々な方式が採られる。従来通り、使用者が撮影記録の開始指示をしてから終了指示をするまで撮影し続ける方式や、撮影記録の開始指示から予め決められた時間だけ撮影記録する方式がある。
【０００３】
前者の方式で撮影された動画を再生する場合は、画像データ単位で再生し、後者の方式で撮影された動画を再生する場合には、複数の画像データから再生リストを作成して、その順序にしたがって連続して複数の動画を連続して再生する方式が採られている。
【０００４】
しかしながら、静止画と動画を撮り分けたりすることの煩わしさから、静止画撮影に連動して静止画撮影前を動画として記録することが考えられる。
【０００５】
特許文献１では、静止画モードと動画モードを有し、半押しと全押しの２段階操作を備えたダブルアクションレリーズスイッチと、半押し時間計時を行う手段があり、動画モードで半押しが所定時間より短く全押しされたら動画のみ、半押しが所定時間より長く全押しされたら動画と静止画を記録する技術が提案されている。
【０００６】
具体的な動作フローによれば、動画記録前の場合、半押し状態が短く全押しされた時には、動画記録開始し、半押し状態が長く全押しされた時には、静止画撮影してから動画記録開始する。また、動画記録中の場合、半押し状態が短く全押しされた時には、動画記録終了し、半押し状態が長く全押しされた時には、静止画撮影してから動画記録終了するものである。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１０−１１４１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述の特許文献１に開示された従来技術では、静止画撮影時に動画記録開始と終了の場合があり、レリーズスイッチ保持時間で静止画撮影が決定する。したがって、静止画撮影タイミングに対して、動画は前の時と後ろの時があり、使用者が静止画撮影時に動画撮影中か否か強く意識する必要があった。また、静止画撮影に伴う操作音や駆動音が記録される動画に混入する可能性があった。
【０００９】
本発明の目的は、静止画撮影に連動してレリーズ前の様子を動画として記録すると共に、静止画撮影の待機中に行われるズーム操作、カメラ設定操作及び、レリーズスイッチ押下時に行われる静止画撮影用の撮影準備動作による影響を排除できる画像記録再生装置を提供することである。
【課題を解決するための手段】
【００１０】
上記目的を達成するために、本発明は、被写体像を形成する光学系と、該光学系により形成された光学像を電気信号に変換する撮像手段と、該撮像手段の出力を連続的に読み出して表示用画像及び、記録用動画像を生成する動画像生成手段と、前記撮像素子の出力を読み出して記録用静止画像を生成する静止画像生成手段と、前記表示用画像の一時記憶、前記記録用動画像及び、前記記録用静止画像を蓄積記憶する記憶手段と、表示用画像を表示する表示手段と、蓄積記憶した前記記録用動画像及び、前記静止画画像を記録媒体に記録する記録手段と、撮影指示を行う撮影指示手段とを備え、
表示用画像を生成して表示すると共に、前記記録用動画像を生成して蓄積記憶し、前記撮影指示に応じて、前記記録用静止画像を生成して蓄積記憶すると共に、前記記録用静止画と共に前記記録用動画像を記録媒体に記録する画像記録再生装置において、
前記撮影指示は、撮影準備を指示する第一の位置と、撮影記録を指示する第二の位置を備えて、前記撮影指示手段の第一の位置で指示される撮影準備完了に基づいて前記記録用動画像の生成を開始し、前記撮影指示手段の第二の位置で指示される静止画撮影に伴って、静止画撮影から所定時間遡って撮影した動画データを記録することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、操作部材の操作音、ズームレンズの駆動音、動画用とは異なる静止画撮影用のズームレンズ駆動による画角の見え方、自動露出制御による絞り駆動の様子や絞り駆動音、自動焦点調節制御による被写体ピントずれの様子やフォーカスモーター駆動音などが動画として記録されることを排除できる。また、待機中に行われるホワイトバランスモード、カラー調整または、露出補正における補正値など変更の様子が記録される動画像に影響を与えないようにできる。
【図面の簡単な説明】
【００１２】
【図１】本実施例の画像記録再生装置のブロック図
【図２】本実施例の動作を示すフローチャート
【図３】本実施例のＡＦ動作を示すフローチャート
【図４】本実施例のＡＥ動作を示すフローチャート
【発明を実施するための形態】
【００１３】
以下、添付図面を参照して本発明を実施する最良の形態を詳細に説明する。
【実施例１】
【００１４】
図１は、本実施の形態に係る画像記録再生装置システムの構成を示すブロック図である。同図において、１００は画像記録装置本体、１１０はズームレンズ、１１１はカメラのブレを補正するシフトレンズ、１１２は焦点調節用フォーカスレンズ、１１３は後段への光束を遮断するメカニカルシャッタ、１１４は後段への光束を調節する絞りである。１１５は撮像素子、１１６は撮像素子１１５を駆動及び、サンプリングに必要なタイミングパルスを発生するタイミング発生器である。
【００１５】
１１７は、撮像駆動用の同期信号を発生するＳＳＧ回路や、撮像出力となるデジタル出力を受信し、前処理回路、ＡＦ評価値演算回路、輝度積分回路、信号処理回路、顔検出回路、縮小回路、ラスタブロック変換回路及び、圧縮回路を含む画像処理部である。ＳＳＧ回路では、タイミング発生器から撮像駆動用のクロックを受けて、水平及び、垂直同期信号を発生し、タイミング発生器と撮像素子に出力する。前処理回路では、入力画像を行単位で輝度積分回路と信号処理回路とに分配する。また、撮像データに必要となるチャネル間のデータ補正等の処理を行う。ＡＦ評価値演算回路では、設定された複数の評価領域内に入力される画像信号の輝度成分について水平方向のフィルタ処理を施し、コントラストをあらわす所定周波数を抽出しながら最大値を選択し、垂直方向に積分演算を行う。輝度積分回路では、ＲＧＢ信号から輝度成分を混合生成し、入力画像を複数領域に分割し、領域毎に輝度成分を生成する。信号処理回路では、撮像素子出力データに色キャリア除去、アパーチャー補正、ガンマ補正処理等を行って輝度信号を生成する。同時に、色補間、マトリックス変換、ガンマ処理、ゲイン調整等を施して色差信号を生成し、メモリ部１２３にＹＵＶ形式の画像データを形成する。また、信号処理回路では、生成するＹＵＶ形式の画像データの輝度信号（Ｙ）をそのレベル毎に集計し、画像データ毎の輝度分布データを生成する。
【００１６】
縮小回路では、信号処理回路の出力を受けて、入力される画素データの切り出し、間引き及び、線形補間処理等を行い、水平垂直方向に画素データの縮小処理を施す。それを受けて、ラスタブロック変換回路では、縮小回路で変倍されたラスタスキャン画像データをブロックスキャン画像データに変換する。こうした一連の画像処理は、メモリ部１２３がバッファメモリとして用いられて実現される。圧縮回路は、バッファメモリでブロックスキャンデータに変換したＹＵＶ画像データを動画圧縮方式に従って圧縮して、動画ビットストリームを出力する。
【００１７】
１１８はメカニカルシャッタ１１３、絞り１１４を制御する露出制御部である。１１８はズームレンズ１１０、焦点調節レンズ１１２を光軸上に沿って移動させ、被写界像を撮像素子１１５上に結像させるレンズ制御部である。また、角速度センサと加速度センサの出力に応じてシフトレンズを駆動し、画像記録再生装置の手ブレを光学的に補正する。また、１２０は撮影指示を行うレリーズスイッチである。
【００１８】
１２７は入力された音声を音声信号に変換するマイクロフォン、１２８はマイクロフォンの音声出力をデジタル音声信号に変換するＡ／Ｄ変換器、１２９は、デジタル音声データに所定の音声処理を施し、音声ビットストリームを出力する音声処理部である。
【００１９】
これらの制御は、ＣＰＵとそのインターフェイス回路、ＤＭＡＣ（Direct・Memory・Access・Controller）、バスアービター等で構成されるシステム制御回路１２１で行われる。ＣＰＵが実行するプログラムは、フラッシュメモリ１２２に記憶されている。
【００２０】
１４２は電源となる電池、１３０と１４１は画像記録装置１００と電池１４２とを係合させる接続端子、１４０は画像記録装置１００に電池１４２を保持する電池ＢＯＸである。１３３は画像を記録する記録媒体、１２５と１３２は、画像記録装置１００と記録媒体１３３とを係合させる接続端子、１３４は記録媒体の書き込み禁止スイッチを検出するスイッチ、１２６は記録媒体１３３の着脱を検出する検出スイッチである。
【００２１】
１５０は画像処理部１１７で生成され、メモリ部１２３に記憶された画像データを表示用画像に変換してモニタに転送する再生回路、１５１は表示装置である。再生回路１５０では、ＹＵＶ形式の画像データを輝度成分信号Ｙと変調色差成分Ｃとに分離し、Ｄ／Ａ変換を行ったアナログ化されたＹ信号にＬＰＦを施す。また、Ｄ／Ａ変換を行ったアナログＣ信号にＢＰＦを施して変調色差成分の周波数成分のみを抽出する。こうして生成された信号成分とサブキャリア周波数に基づいて、Ｙ信号とＲＧＢ信号に変換生成して、モニタ１５１に出力される。このように、撮像素子からの画像データを逐次処理して表示することによってＥＶＦが実現される。
【００２２】
１８０はモード変更を指示するモードダイヤル、１８１はズームレンズを操作するズームスイッチ、１８２は露出補正スイッチ、１８３はホワイトバランスのモードを変更するＷＢスイッチである。
【００２３】
図２は本発明の画像記録再生装置の動作を示すフローチャートである。このフローチャートを用いて、画像記録再生装置の動作を説明する。また、これらの動作は、システム制御回路１２１がフラッシュメモリ１２２に記憶されたプログラムをロードして実行することで実現する。
【００２４】
画像記録再生装置が起動すると自動露出制御によって得られる略適正露出の撮像素子１１５出力から表示用画像を生成する（Ｓ２０１）。具体的には、システム制御回路１２１が予めプログラミングされた同期信号パターンを画像処理部１１７のＳＳＧ回路に設定する。ＳＳＧ回路は、タイミング発生回路１１６のクロックに基づいて、水平及び、垂直同期信号を出力する。撮像素子１１５は、これらの同期信号に基づいて生成されるタイミング発生器１１６の出力にしたがって駆動され、連続的に撮像して得られたデジタル画像データが画像処理部に取り込まれる。取り込まれた画像データは後に説明する自動露出制御を受けて、略適正露出で画像処理部に取り込まれるようになる。その後、順次、先に説明した画像処理を受けて、表示用のＹＵＶデータのＹＵＶデータに変換され、メモリ部１２３に書き込まれる。書き込まれたＹＵＶデータは、先に説明した方法で表示装置１５１に表示される。
【００２５】
次に、記録再生装置のモードが静止画撮影に連動して動画を撮影記録するモードであるかを判定し、モードダイヤル１８０でモードが変更された場合には、変更後のモードに遷移するためにこの後の動作を終了する（Ｓ２０２）。
【００２６】
次にズームスイッチ１８１が操作されたかを判定し（Ｓ２０３）、操作された場合には、操作に応じてＷｉｄｅ若しくは、Ｔｅｌｅ方向にズームレンズ１１０を駆動する（Ｓ２０４）。
【００２７】
次に露出補正スイッチ１８２が操作されたかを判定し（Ｓ２０５）、操作された場合には、操作によって設定された補正量に応じて、撮像素子の蓄積時間若しくは、絞り１１４を駆動し、露出補正を行う（Ｓ２０６）。
【００２８】
次にＷＢスイッチ１８３が操作されたかを判定し（Ｓ２０７）、操作された場合には、操作によって設定されたホワイトバランスモードに設定を行う（Ｓ２０８）。
【００２９】
次にレリーズスイッチが第一の位置まで操作されると（Ｓ２０９）、静止画撮影用の準備即ち、自動露出制御並びに、自動焦点調節を行う（Ｓ２１０）。
【００３０】
撮影準備が完了すると、記録用動画像の生成と音声サンプリングを開始する（Ｓ２１１）。具体的には、表示用画像と同様にして、画像処理部に取り込まれた画像データを順次、動画記録用のＹＵＶデータに変換する。画像処理部の圧縮部では、動画記録用のＹＵＶデータを圧縮して動画ビットストリームを出力する。システム制御回路１２１は、動画ビットストリームと音声ビットストリームから記録用の動画データをメモリに逐次メモリ部１２３に蓄積する。記録用動画像を蓄積するメモリ部１２３内の動画バッファは、静止画と共に記録する動画像の記録時間に相当する容量が割り当てられ、一般的なリングバッファとして使用する。
【００３１】
記録用動画像生成開始後、レリーズスイッチが放されると（Ｓ２１２）、記録用動画像生成と音声サンプリングを終了する（Ｓ２１３）。
【００３２】
また、レリーズスイッチが第二の位置まで操作されると（Ｓ２１４）、表示装置の画像表示を停止すると共に、表示用画像の生成と記録用動画像の生成と音声サンプリングを終了する（Ｓ２１５）。引き続いて、記録用の静止画撮影を行う（Ｓ２１６）。
【００３３】
撮影準備完了から開始し、静止画撮影に伴って生成を終了した記録用動画像の記録時間が所定時間を超えたかを判定し（Ｓ２１７）、所定時間以上の場合にはリングバッファに蓄積した動画を記録媒体１３３に記録後（Ｓ２１８）、静止画の現像処理を行い（Ｓ２１９）、記録媒体１３３に記録する（Ｓ２２０）。
【００３４】
＜静止画撮影用ＡＦ動作の説明＞
図３は静止画撮影前に行う自動焦点調節制御のフローチャートである。自動焦点調節制御は、システム制御回路１２１のプログラム領域に記憶されたプログラムによって行われる。
【００３５】
プログラムはレンズを駆動するレンズ制御部１１９、被写体の合焦評価値を測定する評価部とから成り、撮像素子１１５の露光単位でレンズ位置を移動させながらレンズ位置に評価値を対応付ける。被写界深度に応じたレンズのスキャン範囲でデータのサンプリングを行って、一定のアルゴリズムで最終的なレンズ位置を決定する。
【００３６】
まず、フォーカスレンズ１１２をリセットし初期位置へ移動し（Ｓ３０１）、露光カウント値（Ｎ）と焦点評価値カウント（Ｍ）を初期化する（Ｓ３０２）。次に焦点距離に応じたサンプリング数を決定し、サンプリング総数と通常撮像駆動時の駆動レートによるサンプリング総時間を求める（Ｓ３０３）。サンプリング総時間が所定時間内であれば（Ｓ３０４）、通常撮像駆動に設定し（Ｓ３０５）、所定時間以上であれば高速撮像駆動に設定する（Ｓ３０６）。
【００３７】
撮像駆動が確定してＡＦ動作が開始されると、フォーカスレンズ１１２をスキャン開始位置に相当する第１ステップに移動する（Ｓ３０７）。
【００３８】
次に、スキャン開始位置である第１ステップにおいて撮像素子１１５の露光完了を待つ（Ｓ３０８）。露光が完了したら、露光カウントをインクリメントし（Ｓ３０９）、露光カウント値がサンプリング総数値以下ならば（Ｓ３１０）、第２のステップにレンズを移動させて（Ｓ３１１）、第２の露光期間中に読み出される画像データを輝度の高周波成分の抽出を行う（Ｓ３１２）。また、得られた焦点評価値とフォーカスレンズ１１２の位置との対応を記憶し（Ｓ３１３）、焦点評価値カウントをインクリメントし（Ｓ３１４）、第２の露光を待つ（Ｓ３０８）。このようにして、焦点評価値がサンプリング総数揃うまでを繰り返し行う（Ｓ２１５）。そして、全サンプリングが完了した時点で、焦点評価値の最も出力の大きいレンズ位置に移動して終了する。
【００３９】
＜自動露出制御の説明＞
図４は、動画撮影記録中におけるＡＥ（自動露出制御）動作のフローチャートである。このフローチャートを用いて、本実施例に係わるＡＥ動作を説明する。この動作もシステム制御回路１２１がフラッシュメモリ１２２に記憶されたプログラムをロードして実行することで実現する。
【００４０】
システム制御回路１２１のＣＰＵは、撮像素子１１５の駆動を開始し（Ｓ４００）、画像処理部１１７の輝度積分回路に対し、入力画像を複数領域に分割し、領域毎に輝度成分を生成するための設定を行う（Ｓ４０１）。初期の露出制御を行い（Ｓ４０２）、この露出制御下での輝度積分が完了するのを待つ（Ｓ４０３）。輝度積分が完了すると、分割した領域毎の積分結果の評価演算を行い、適正露出からのずれ量を共に被写界輝度を求める（Ｓ４０４）。求められた被写界輝度に適合する露出制御値に基づいて次の露光タイミングの露出制御を行う（Ｓ４０５）。これらを終了指示まで続ける（Ｓ４０６）。
【００４１】
以上のように、静止画撮影に連動して、静止画撮影前の様子を動画として記録すると共に、静止画撮影に伴う撮影準備完了から記録用動画像を生成することにより、レリーズスイッチ操作前に行われるズーム操作、露出補正、ホワイトバランスモード変更に伴う画質や音質への影響（操作音、駆動音、画像の不自然な変化）を排除することができる。
【００４２】
本発明は、静止画撮影に連動して撮影された動画を静止画と共に記録する技術に関する。
【符号の説明】
【００４３】
１１２：フォーカスレンズ、１１５：撮像素子、１１６：タイミング発生部、１１７：画像処理部、１１８：レンズ駆動部、１２１：システム制御部、１２７：マイクロフォン、１２８：音声用Ａ／Ｄ変換器、１２９：音声処理部、１８０：モードダイヤル、１８１：ズームスイッチ、１８２：露出補正スイッチ、１８３：ＷＢスイッチ
【図１】
2013162187.tif 000003
【図２】
2013162187.tif 000004
【図３】
2013162187.tif 000005
【図４】
2013162187.tif 000006