(57)【特許請求の範囲】
【請求項１】
連続的に撮影することで複数フレームの画像を取得する撮影手段と、
撮影フレームレートより低い表示フレームレートで画像を表示する表示手段と、
前記表示手段に表示された画像から１のフレームの画像を選択可能とする第１選択手段と、
前記第１選択手段による選択指示に応じて前記複数フレームから所定フレーム数の画像を抽出する抽出手段と、
前記抽出手段によって抽出された所定フレーム数の画像を前記表示フレームレートで前記表示手段に表示するように制御する表示制御手段と、
前記表示手段に表示された所定フレーム数の画像から１のフレームの画像を記録画像として選択可能とする第２選択手段と、を備えることを特徴とする撮像装置。
【請求項２】
前記第１選択手段と第２選択手段のそれぞれによって選択可能である画像表示の期間が同じであることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示手段は、前記撮影手段によって取得された複数フレームの画像から一部のフレームを間引いて画像を表示することを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記抽出手段は、前記第１選択手段によって選択されたフレームを中心とした所定フレーム数または当該フレームを先頭とする所定フレーム数の画像を抽出することを特徴とする請求項１から３の何れか１項に記載の撮像装置。
【請求項５】
前記撮影手段によって取得された複数フレームの画像を、前記第２選択手段によって選択された記録画像が記録媒体に記録されるまで一時的に記憶する記憶手段を備えることを特徴とする請求項１から４の何れか１項に記載の撮像装置。
【請求項６】
撮影フレームレートが所定フレームレートよりも低いか否かを判定する判定手段を備え、
前記判定手段が、前記撮影フレームレートが所定フレームレートよりも低いと判定した場合は、前記第１選択手段による選択を行うことなく、前記第２選択手段による選択を可能とすることを特徴とする請求項１から５の何れか１項に記載の撮像装置。
【請求項７】
連続的に撮影することで複数フレームの画像を取得する取得ステップと、
撮影フレームレートより低い表示フレームレートで画像を表示する第１表示ステップと、
前記第１表示ステップで表示された画像から１のフレームの画像を選択する第１選択ステップと、
前記第１選択ステップでの選択指示に応じて前記複数フレームから所定フレーム数の画像を抽出する抽出ステップと、
前記抽出ステップで抽出された所定フレーム数の画像を前記表示フレームレートで表示する第２表示ステップと、
前記第２表示ステップで表示された所定フレーム数の画像から１のフレームの画像を記録画像として選択する第２選択ステップと、
前記第２選択ステップでの選択指示に応じて画像記録を行う記録ステップと、を備えることを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、高フレームレートで撮像された複数フレームの画像を、撮影のフレームレートよりも低いフレームレートで表示部に表示させ、ユーザが所望するフレームの画像を記録画像として選択する撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
高フレームレートで撮像された画像データを、該フレームレートよりも低いフレームレートで表示デバイスに表示させ、撮像装置の記録指示操作に応じて、ユーザが所望するフレーム画像の画像データを記録させる技術が、特許文献１に開示されている。
【０００３】
特許文献１に開示された技術によると、撮影時に低いフレームレートつまりスローモーションのように表示デバイスに表示された複数の画像データからユーザが意図するシャッターチャンスに対応した画像データのみを確実に記録させることができる。
【０００４】
このようにすることで、撮影終了後にシャッターチャンスに対応する画像以外の画像データを削除する煩雑な作業が不要になり、撮影終了後における煩雑な作業を強いられることなく、シャッターチャンスに対応する被写体画像を記録することができる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−０８５６８９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、撮影時間を維持する場合は、撮影のフレームレートを高くするほど表示デバイスに表示する画像データのフレーム数が増加することになり、ユーザが意図するシャッターチャンスに対応する画像データに到達するまでに時間がかかるという課題があった。
【課題を解決するための手段】
【０００７】
本発明の一態様によれば、連続的に撮影することで複数フレームの画像を取得する撮影手段と、撮影フレームレートより低い表示フレームレートで画像を表示する表示手段と、前記表示手段に表示された画像から１のフレームの画像を選択可能とする第１選択手段と、前記第１選択手段による選択指示に応じて前記複数フレームから所定フレーム数の画像を抽出する抽出手段と、前記抽出手段によって抽出された所定フレーム数の画像を前記表示フレームレートで前記表示手段に表示するように制御する表示制御手段と、前記表示手段に表示された所定フレーム数の画像から１のフレームの画像を記録画像として選択可能とする第２選択手段と、を備えることを特徴とする。
【発明の効果】
【０００８】
撮像装置の撮像フレームレートが高くなっても、ユーザが意図するシャッターチャンスに対応する画像データを選択するまでの時間を短縮することが可能となる。
【図面の簡単な説明】
【０００９】
【図１】２０ＦＰＳで撮像された画像データを５ＦＰＳで表示する場合を説明する図である。
【図２】１００ＦＰＳで撮像された画像データを５ＦＰＳで表示する場合を説明する図である。
【図３】間引き表示におけるフレーム絞り込み判定処理について説明する図である。
【図４】フレーム絞り込み処理の一例を説明する図である。
【図５】フレーム絞り込み処理の他の一例を説明する図である。
【図６】第１の実施形態にかかる撮像装置の構成を示すブロック図である。
【図７】第１の実施形態において画像入力から記録画像の出力までを示すフロー図である。
【発明を実施するための形態】
【００１０】
（第１の実施形態）
図１から図７を用いて、本発明の第１の実施形態にかかる撮像装置を説明する。
【００１１】
図６は撮像装置における特徴部分の構成を示すブロック図である。
【００１２】
画像入力から画像出力までの一連の処理を順に追って説明する。
【００１３】
撮像光学系から入力された画像データをセンサ補正部６０１にてセンサ補正処理を行なう。
【００１４】
センサ補正処理とは、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）センサやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサなどの撮像素子から取得される画像データの欠陥画素を補正する処理や列アンプ出力のばらつきを補正する処理などが挙げられる。
【００１５】
センサ補正部６０１でセンサ補正された画像データを一時的に記憶する記憶手段である画像バッファ６０２に記憶する。
【００１６】
ＡＦ／ＡＥ／ＡＷＢ処理部６０３にて、画像バッファ６０２で記憶された画像データを用いて、コントラストＡＦを行うための評価値や自動露出制御（ＡＥ）を行うためのＡＥ評価値、ホワイトバランスを自動調整するための評価値などを生成する。
【００１７】
現像処理部６０４にて、画像バッファ６０２で記憶された画像データを用いて、ガンマ補正やノイズ低減処理、偽色処理やＡＦ／ＡＥ／ＡＷＢ処理部６０３にて得られたホワイトランス係数をかけるなどの現像処理を行い、現像された画像を画像バッファ６０２にて記憶する。
【００１８】
撮像装置に付属するＥＶＦ（電子ビューファインダー）などの表示手段としての表示部６０５にて、画像バッファ６０２に記憶された現像後の画像データを表示する。
【００１９】
また、表示部６０５では、表示装置（表示パネルやテレビなど）の解像度や画像フォーマットに応じて、画像データの拡縮やフォーマット変換を行なって表示される。
【００２０】
また、図示しないが、撮像装置は、表示部６０５における画像の表示速度（表示フレームレート）などの画像の表示制御する表示制御手段、画像バッファ６０２に記憶された画像データから表示部に表示させる画像をユーザの選択指示などに応じて抽出する抽出手段として機能する制御手段を有する。
【００２１】
さらに、表示部６０５に所定フレームレートで順次表示される画像からユーザが１のフレームの画像を選択するための選択手段を有する。選択手段としては、表示部６０５がタッチパネルなどのようなユーザの入力操作を受け付ける場合には表示部６０５が選択手段を兼ねてもよく、撮像装置に付属するスイッチやボタンなどに割り当てられていてもよい。
【００２２】
次に、図７を用いて、撮像光学系から高いフレームレートで画像データが撮像される場合に、撮像された複数の画像データの中からユーザが所望するフレームの画像を選択するまでの処理について説明する。
【００２３】
図７は、連続的な撮像処理によって取得された複数フレームの画像データから記録画像が選択され、記録画像を出力されるまでの処理を示すフロー図である。
【００２４】
図７において、まず、撮像に用いるフレームレート（撮影フレームレート）が予め設定された所定のフレームレートより低いか否かを判定する（Ｓ７０１）。本実施形態では、所定のフレームレートとして、１秒間で２０フレーム（２０ＦＰＳ）の撮影フレームレートを用いる。
【００２５】
Ｓ７０１にてフレームレート判定処理で、ＮＯ（撮影に用いられたフレームレートが２０ＦＰＳよりも低い）と判断されたとき、表示部６０５では、撮影フレームレートよりも低い表示フレームレート（たとえば５ＦＰＳ）の速度でフレーム表示させる（Ｓ７０６）。
【００２６】
なお、２０ＦＰＳの撮影フレームレートで１秒間の撮像を行った場合は、２０フレームの画像は４秒をかけて表示部６０５にスロー表示することになる。
【００２７】
Ｓ７０６のスロー表示中にユーザが記録画像を選択する画像選択の決定ボタン（第２選択手段）を押さない場合（Ｓ７０７でＮＯ）、同じ表示フレームレート（５ＦＰＳ）でフレーム表示を継続する（初期値ｊ＝０として、Ｓ７０８でカウンタをインクリメントさせる）。
【００２８】
２０フレーム分の画像が表示された後（ｊ＝２０のとき）は、繰り返しで同じ４秒間のフレーム画像をスロー再生し続ける（ｊ＝０で初期値に戻してＳ７０６からＳ７０８を繰り返す）。
【００２９】
Ｓ７０６のスロー表示中にユーザが画像選択の決定ボタンを押した場合（Ｓ７０７でＹＥＳ）、低速表示処理を中断して、選択された画像データを画像記録する。
【００３０】
図１を用いて、１秒間で２０フレームの撮像される画像データを５ＦＰＳで表示部６０５にてスロー表示する場合を説明する。
【００３１】
フレーム１０１からフレーム１２０は１秒間に撮影された画像データである。
【００３２】
２秒目にあたる１１枚目のフレーム１１１でユーザが画像選択の決定ボタンを押した場合（Ｓ７０７でＹＥＳ）、低速表示処理を中断して、選択されたフレーム１１１の画像を記録する。この場合、画像表示の開始からユーザがフレーム１１１を選択するまでに２秒かかったことになる。
【００３３】
つぎに、図２を用いて、本実施形態との比較対象として、１００ＦＰＳの撮影フレームレートで撮像された画像データを５ＦＰＳで表示部６０５にてスロー表示する場合を説明する。
【００３４】
フレーム２００１からフレーム２１００は１秒間に撮影された画像データである。
【００３５】
画像表示の開始から１０秒目にあたる５１枚目のフレーム２０５１でユーザが画像選択決定ボタンを押した場合（Ｓ７０７でＹＥＳ）、低速表示処理を中断して、選択されたフレーム２０５１の画像を記録する。この場合、ユーザがフレーム２０５１を選択するまでに画像表示の開始から１０秒かかったことになる。
【００３６】
つぎに、本実施形態でのフレーム絞り込み判定処理について説明するため、１秒間で１００フレーム撮像される場合を示す。
この場合、撮影フレームレートが１００ＦＰＳであるため２０ＦＰＳより高いフレームレートとなり、フレームレート判定（Ｓ７０１）でＹＥＳとなる。
【００３７】
従って、図７のフローにしたがって、Ｓ７０２にて撮影フレームレートよりも低いフレームレートにて間引き表示を行う。ここでは、撮影手段によって取得された複数フレームの画像から一部のフレームを間引いて画像を表示する。
【００３８】
具体的には、フレーム絞り込み判定処理Ｓ７０３でＮＯとなる都度、フレーム番号ｉを＋５インクリメントする（Ｓ７０４で初期値ｉ＝０とする）ことで間引き表示を行う。
【００３９】
またフレーム絞り込み判定処理Ｓ７０３でＮＯとなり続ける場合、Ｓ７０２からＳ７０４の処理を繰り返し行う（ｉ＝１００となったら初期値ｉ＝０に戻す）。
【００４０】
図３では、間引き表示Ｓ７０２とフレーム絞り込み判定処理Ｓ７０３について説明する。
【００４１】
フレーム３０１（フレーム番号１）からフレーム３２０（フレーム番号９６）は１００フレームを均等分割（５フレームに１枚）に間引いた２０フレームを４秒間かけて表示する。
【００４２】
フレーム３１１の間引き表示にて、フレーム絞り込み判定処理Ｓ７０３（ＹＥＳ）が行われた場合、フレーム３１１つまり、フレーム番号５１の画像データ群を画像選択ボタン（第２選択手段）で選択（第１選択）することで抽出する。
【００４３】
画像データ群は、図４のようにフレーム番号５１を中心としてその前後の１０フレーム（フレーム４０１から４２０）を指す場合と、図５のようにフレーム番号５１を先頭としてその後の２０フレーム（フレーム５０１から５２０）を指す場合がある。なお、抽出されるフレーム数は２０フレームに限らず、表示秒数から設定される所定フレーム数であればよい。
【００４４】
図４のように選択されたフレーム番号５１の前後１０フレームを低速表示７０６にて表示させる場合、フレーム番号４１からフレーム番号６０の２０フレーム分（実撮影時間約２００ｍｓ中に２０フレームの画像データ）を繰り返し表示することが可能となる。
【００４５】
図５のように選択されたフレーム番号５１の後２０フレームを低速表示７０６にて表示させる場合、フレーム番号５１からフレーム番号７０の２０フレーム分（実撮影時間約２００ｍｓ中に２０フレームの画像データ）を繰り返し表示することが可能となる。
【００４６】
図４では、フレーム番号４１からフレーム番号６０までにユーザが記録したい画像が存在する場合で、記録したい画像のピークがフレーム番号５１の前後にずれていたとしても、絞り込み後のスロー表示で記録画像として選択可能となる（第２選択）。
【００４７】
たとえば、野球のバットとボールのインパクトの瞬間に画像データ群を絞り込む場合などが挙げられる。
【００４８】
このように、フレーム群絞り込み処理Ｓ７０５までにかかった時間２秒と画像決定判定処理Ｓ７０７までかかった時間０秒から４秒を合計すると、２秒から６秒で所望の画像を選択記録することが可能となる。
【００４９】
図５では、フレーム番号５１からフレーム番号７０までにユーザが記録したい画像が存在する場合で、記録したい画像のピークがフレーム番号５１の後にあらわれるのを予測できる場合には、絞り込み後のスロー表示で記録画像として選択可能となる（第２選択）。
【００５０】
たとえば、風船の割れた音で人物の驚く表情の変化を記録する場合、風船が割れた直後に絞り込み選択を行なうと、風船が割れた後に、人の表情が変わるため、そのときにピークを持ってきたい場合などが挙げられる。
【００５１】
このように、フレーム群絞り込み処理Ｓ７０５までにかかった時間２秒と画像決定判定処理Ｓ７０７までかかった時間０秒から４秒を合計すると、２秒から６秒で所望の画像を選択記録することが可能となる。
【００５２】
また、フレーム群絞り込み処理では、絞り込むフレームのタイミングを絞り込み指示後の２０フレームとしたが、指示前の２０フレームとしてもよい。
【００５３】
絞り込み指示前のフレームは、記録したい画像のピークを過ぎやすい被写体の場合に用いる用途が挙げられる。
【００５４】
さらに高速なフレームレートになった場合、たとえば１２０ＦＰＳのように動画からの静止画切り出しを行う場合でも、同様にフレーム群絞り込み処理７０５と画像判定処理Ｓ７０７を行うことによって、ユーザが意図するシャッターチャンスに対応する画像データを選択するまでの時間を短縮することが可能となる。
【００５５】
なお、本実施形態においては、第１選択（抽出するフレーム群の選択）と第２選択（記録画像の選択）のそれぞれにおける選択が可能である画像表示（低速間引き表示Ｓ７０２と低速表示Ｓ７０６）の期間は同じ長さに設定してある。こうすることで、画像が繰り返して表示される時間が同じとなり、繰り返し表示の時間が変化することによる違和感をユーザに与えるのを防ぐことができる。
【００５６】
なお、本発明の実施形態におけるフローチャート図に示した各処理は、各処理の機能を実現するためのコンピュータプログラムを画像処理装置がメモリから読み出して装置内のＣＰＵを実行することによっても実現できる。
【００５７】
上記プログラムは、前述した機能の一部を実現する為のものであっても良い。さらに、前述した機能をコンピュータシステムに既に記録されているプログラムとの組合せで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【００５８】
また、フローチャート図に示した各処理の全部または一部の機能は、専用のハードウェアにより実現してもよい。また、フローチャート図に示した各処理の機能を実現する為のプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって各処理を行っても良い。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００５９】
ここで、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置を含む。さらに、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。
【００６０】
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、或いは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
【００６１】
また、上記のプログラムを記録したコンピュータ読み取り可能な記録媒体等のプログラムプロダクトも本発明の実施形態として適用することができる。上記のプログラム、記録媒体、伝送媒体およびプログラムプロダクトは、本発明の範疇に含まれる。
【００６２】
以上が本発明の実施形態の説明であるが、本発明は、本発明の技術思想の範囲内において、上記実施形態に限定されるものではなく、特許請求の範囲に示した範囲で種々の変更が可能である。
【符号の説明】
【００６３】
６０１  センサ補正部
６０２  画像バッファ
６０３  ＡＦ／ＡＥ／ＡＷＢ処理部
６０４  現像処理部
６０５  表示部
【図１】
0006456121.tif 000002
【図２】
0006456121.tif 000003
【図３】
0006456121.tif 000004
【図４】
0006456121.tif 000005
【図５】
0006456121.tif 000006
【図６】
0006456121.tif 000007
【図７】
0006456121.tif 000008