(57)【要約】【課題】各フレームを間延びさせるか削除するかを決定し、ＧＯＰ単位に合わせこむことを可能とする。【解決手段】入力された映像信号を動画の形式に変換して記録する記録手段と、フレームレートに対する進捗を算出する手段と、動画のＧＯＰ単位に合うようにフレームを間延びさせる手段と、動画のＧＯＰ単位に合うようにフレームを削減する手段と、間延びさせるか削減するかを判断する手段と、どのフレームを処理するかを、静止画の状況により判断すると手段を有する。【選択図】図３
2016208206.tif 000002
【特許請求の範囲】
【請求項１】
入力された映像信号を動画の形式に変換して記録する記録手段と、
フレームレートに対する進捗を算出する手段と、
動画のＧＯＰ単位に合うようにフレームを間延びさせる手段と、
動画のＧＯＰ単位に合うようにフレームを削減する手段と、
間延びさせるか削減するかを判断する手段と、
どのフレームを処理するかを、静止画の状況により判断すると手段を有することを特徴とする記録装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録装置に関する。
【背景技術】
【０００２】
従来、記録装置として、固体メモリ素子を有するメモリカードを記録媒体として、静止画像や動画像の撮像、記録及び再生を行う電子カメラが市販されている。
【０００３】
このような電子カメラで現在違う場面で撮影した複数の動画を１つの動画として保存して再生するという機能を提供している。前記機能によりメリハリのある動画が生成できるというユーザーメリットを提供することが可能になる。
【０００４】
しかし、この機能のデメリットとしては動画の性質上リアルタイムに撮影処理を実施しなければならないなので、ＣＰＵの負荷、バッファの負荷いう観点から、例えば静止画で撮影できる最大サイズをそのまま動画のサイズとして記録することができない。また、好きな撮影間隔で撮影した映像を作り出すことができない。
【０００５】
これを解決するために静止画で撮影した映像を後のタイミングで組み合わせて１つの動画にする技術が存在する。これにより静止画で撮影可能な最大サイズでの動画生成ができることが可能になると同時に、好きなタイミングで撮影して生成した動画同士をつなげることができるようになった。しかし、全てのパターンでこれが有効なのではなくユーザーが好きな時に静止画から動画を生成して、さらに次の撮影時にそのファイルから再開して動画をつなげたいという場合、元の動画終了時にＧＯＰ単位で記録する必要があるという技術的制約がある。
【０００６】
この時に、ＧＯＰ単位に対して中途半端に撮影をして、そのまま記録するとＧＯＰ単位では記録できない。つまり中断後の再開した動画を繋げることができない可能性がある。
【０００７】
これを回避するために、特許文献１には廃棄優先度に応じてフレームを廃棄することができる記憶装置及びフレーム廃棄方法が開示されている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００４−２８２３９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
しかしながら、特許文献１では、ＧＯＰ単位に合わせこむ為にフレームを大量に捨ててしまうパターンも存在してしまう。これを解決する為にただ単純に余計に撮影をすることでＧＯＰ単位に合わせこむことで解決を図れるが、デメリットとしてユーザー操作により終了を指示してから実際の終了まで余計な時間がかかってしまいユーザーを待たせてしまう（例：１０秒間隔で３０ｆｐｓの場合、最大１４０秒ユーザは待たなければならない。）。
【００１０】
このような状況からユーザーの終了指示のタイミングから早急に終了しかつ動画同士をつなげるためにＧＯＰ単位で記録する場合、状況に応じて撮影したフレームを廃却、追加することが望ましい。
【００１１】
そこで、本発明の目的は、各フレームを間延びさせるか削除するかを決定し、ＧＯＰ単位に合わせこむことを可能にした記録装置を提供することにある。
【課題を解決するための手段】
【００１２】
上記の目的を達成するために、本発明の記録装置は、入力された映像信号を動画の形式に変換して記録する記録手段と、フレームレートに対する進捗を算出する手段と、動画のＧＯＰ単位に合うようにフレームを間延びさせる手段と、動画のＧＯＰ単位に合うようにフレームを削減する手段と、間延びさせるか削減するかを判断する手段と、どのフレームを処理するかを、静止画の状況により判断すると手段を有することを特徴とする。
【発明の効果】
【００１３】
本発明によれば、ユーザーに違和感を与えることなく、フレームレートに対する進捗状況を見て各フレームを間延びさせるか削除するかを決定し、ＧＯＰ単位に合わせこむことを可能にした記録装置を提供することができる。
【図面の簡単な説明】
【００１４】
【図１】記録装置のブロック図である。
【図２】記録装置のシーケンスを表した概要図である。
【図３】記録装置の処理を示すフローチャートである。
【図４】記録装置の処理を示すフローチャートである。
【図５】記録装置の処理を示すフローチャートである。
【図６】記録装置の処理を示すフローチャートである。
【発明を実施するための形態】
【００１５】
以下、本発明の好適な一実施形態について、図面を参照して詳細に説明する。
【００１６】
図１は本発明の一実施形態における画像処理機能を有する撮像装置の構成を示すブロック図である。本実施形態においては、撮像装置としてレンズ交換可能な一眼レフタイプのデジタルスチルカメラを例に挙げて説明する。
【００１７】
図１に示すように、本実施形態の撮像装置は、主にカメラ本体１００と、交換レンズタイプのレンズユニット３００とを備えて構成されている。
【００１８】
レンズユニット３００において、３１０は複数のレンズから成る撮像レンズ、３１２は絞り、３０６はレンズユニット３００をカメラ本体１００と機械的に結合するレンズマウントである。レンズマウント３０６内には、レンズユニット３００をカメラ本体１００と電気的に接続する各種機能が含まれている。３２０は、レンズマウント３０６において、レンズユニット３００をカメラ本体１００と接続するためのインターフェース、３２２はレンズユニット３００を
カメラ本体１００と電気的に接続するコネクタである。
【００１９】
コネクタ３２２は、カメラ本体１００とレンズユニット３００との間で制御信号、状態信号、データ信号などを伝え合うと共に、各種電圧の電流を供給される機能も備えている。また、コネクタ３２２は電気通信のみならず、光通信、音声通信などを用いて通信を行う構成としてもよい。３４０は、測光制御部４６からの測光情報に基づいて、後述するカメラ本体１００のシッター１２を制御するシャッター制御部４０と連携しながら、絞り３１２を制御する絞り制御部である。３４２は撮像レンズ３１０のフォーカシングを制御するフォーカス制御部、３４４は撮像レンズ３１０のズーミングを制御するズーム制御部である。
【００２０】
３５０はレンズユニット３００全体を制御するレンズシステム制御回路である。レンズシステム制御回路３５０は、動作用の定数、変数、プログラムなどを記憶するメモリを備えている。更に、レンズユニット３００固有の番号などの識別情報、管理情報、開放絞り値や最小絞り値、焦点距離などの機能情報、現在や過去の各設定値などを保持する不揮発性メモリも備えている。
【００２１】
次に、カメラ本体１００の構成について説明する。１０６はカメラ本体１００とレンズユニット３００を機械的に結合するレンズマウント、１３０，１３２はミラーで、撮像レンズ３１０に入射した光線を一眼レフ方式によって光学ファインダー１０４に導く。なお、ミラー１３０はクイックリターンミラーの構成としても、ハーフミラーの構成としても、どちらでも構わない。１２はフォーカルプレーン式のシャッター、１４はＣＣＤ、ＣＭＯＳセンサ等からなり、被写体像を光電変換する撮像素子である。撮像素子１４の前方には、光学ローパスフィルター等の光学素子１４ａが配置されている。
【００２２】
撮像レンズ３１０に入射した光線は、一眼レフ方式によって光量制限手段である絞り３１２、レンズマウント３０６及び１０６、ミラー１３０、シャッター１２を介して導かれ、光学像として撮像素子１４上に結像される。
【００２３】
１６は撮像素子１４から出力されるアナログ信号（出力信号）をデジタル信号に変換するＡ／Ｄ変換器である。１８は撮像素子１４、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にそれぞれクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
【００２４】
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理回路２０は、必要に応じて、Ａ／Ｄ変換器１６から出力される画像データを用いて所定の演算処理を行う。得られた演算結果に基づいてシステム制御回路５０がシャッター制御部４０、焦点調節部４２を制御するための、コントラスト方式のオートフォーカス（ＡＦ）処理、自動露出（ＡＥ）処理、フラッシュプリ発光（ＥＦ）処理を行うことができる。さらに、画像処理回路２０は、Ａ／Ｄ変換器１６から出力される画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のオートホワイトバランス（ＡＷＢ）処理も行っている。
【００２５】
２２はメモリ制御回路であり、Ａ／Ｄ  変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。Ａ／Ｄ変換器１６から出力される画像データは、画像処理回路２０、メモリ制御回路２２を介して、或いはメモリ制御回路２２のみを介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００２６】
２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＴＦＴ方式のＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。画像表示部２８を用いて、撮像した画像データを逐次表示することで、電子ビューファインダー（ＥＶＦ）機能を実現することができる。また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合にはカメラ本体１００の電力消費を大幅に低減することができる。
【００２７】
３０は撮影した静止画像あるいは動画像を格納するためのメモリであり、所定枚数の静止画像あるいは所定量の動画像を格納するのに十分な記憶容量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。また、動画撮影時には、所定レートで連続的に書き込まれる画像のフレームバッファとして使用される。さらに、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００２８】
３１は複数の画像を合成して１枚の合成写真を作成する画像合成回路である。メモリ３０に書き込まれている画像データを複数同時に読み込み、回路内で合成処理を実施し、作成された合成画像データはメモリ３０に書き込まれる。合成回路としては、Ａ／Ｄ変換器１６によって変換されてメモリ制御回路２２によって書き込まれた画像データや、画像処理回路２０によって画像処理された画像データを合成する回路となる。
【００２９】
３２は公知の圧縮方法を用いて画像データを圧縮・伸長する圧縮・伸長回路である。圧縮・伸長回路３２は、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータを再びメモリ３０に書き込む。また、動画像データを所定のフォーマットに圧縮符号化し、又は所定の圧縮符号化データから動画像信号を伸張する機能も有する。
【００３０】
４０はシャッター制御部であり、測光制御部４６からの測光情報に基づいて絞り３１２を制御する絞り制御部３４０と連携しながらシャッター１２を制御する。４２はＡＦ（オートフォーカス）処理を行うための焦点調節部である。レンズユニット３００内の撮像レンズ３１０に入射した光線を絞り３１２、レンズマウント３０６，１０６、ミラー１３０及び焦点調節用サブミラー（不図示）を介して一眼レフ方式で入射させることにより、光学像として結像された画像の合焦状態を測定する。
【００３１】
４６はＡＥ（自動露出）処理を行うための測光制御部である。レンズユニット３００内の撮像レンズ３１０に入射した光線を、絞り３１２、レンズマウント３０６，１０６、ミラー１３０及び測光用サブミラー（図示せず）を介して一眼レフ方式で入射させることにより、光学像として結像された画像の露出状態を測定する。
【００３２】
また、焦点調節部４２による測定結果と、Ａ／Ｄ変換器１６からの画像データを画像処理回路２０によって演算した演算結果とを用いて、ＡＦ制御を行うようにしてもよい。さらに、測光制御部４６による測定結果と、Ａ／Ｄ変換器１６からの画像データを画像処理回路２０によって演算した演算結果とを用いて露出制御を行うようにしてもよい。
【００３３】
５０はカメラ本体１００全体を制御するシステム制御回路であり、周知のＣＰＵなどを内蔵する。５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。
【００３４】
５４はシステム制御回路５０でのプログラムの実行に応じて、文字、画像、音声などを用いて動作状態やメッセージなどを外部に通知するための通知部である。通知部５４としては、例えばＬＣＤやＬＥＤなどによる視覚的な表示を行う表示部や音声による通知を行う発音素子などが用いられるが、通知部５４はこれらのうち１つ以上の組み合わせにより構成される。特に、表示部の場合には、カメラ本体１００の操作部７０近辺の、視認しやすい、単数あるいは複数箇所に設置される。また、通知部５４は、その一部の機能が光学ファインダー１０４内に設置されている。
【００３５】
通知部５４の表示内容の内、ＬＣＤなどの画像表示部２８に表示するものとしては以下のものがある。まず、単写／連写撮影表示、セルフタイマー表示等、撮影モードに関する表示がある。また、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示等の記録に関する表示がある。また、シャッター速度表示、絞り値表示、露出補正表示、調光補正表示、外部フラッシュ発光量表示、赤目緩和表示等の撮影条件に関する表示がある。その他に、マクロ撮影表示、ブザー設定表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００の着脱状態表示がある。更に、レンズユニット３００の着脱状態表示、通信Ｉ／Ｆ動作表示、日付・時刻表示、外部コンピュータとの接続状態を示す表示等も行われる。
【００３６】
また、通知部５４の表示内容のうち、光学ファインダー１０４内に表示するものとしては、例えば、以下のものがある。合焦表示、撮影準備完了表示、手振れ警告表示、フラッシュ充電表示、フラッシュ充電完了表示、シャッター速度表示、絞り値表示、露出補正表示、記録媒体書き込み動作表示等である。
【００３７】
５６は後述するプログラムなどが格納された電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。
【００３８】
５８は光学情報格納メモリであり、レンズユニット３００からコネクタ１２２を介して得られる、後述する各種レンズ情報を記憶する。６０，６２，６４，７０は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００３９】
ここで、これらの操作手段の具体的な説明を行う。６０はモードダイアルスイッチで、自動撮影モード、プログラム撮影モード、シャッター速度優先撮影モード、絞り優先撮影モード、マニュアル撮影モード、焦点深度優先（デプス）撮影モード等の各機能撮影モードを切り替え設定することができる。他に、ポートレート撮影モード、風景撮影モード、接写撮影モード、スポーツ撮影モード、夜景撮影モード、パノラマ撮影モードなどの各機能撮影モードを切り替え設定することもできる。
【００４０】
６２はシャッタースイッチＳＷ１で、不図示のシャッターボタンの操作途中（例えば半押し）でＯＮとなり、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理等の動作開始を指示する。
【００４１】
６４はシャッタースイッチＳＷ２で、不図示のシャッターボタンの操作完了（例えば全押し）でＯＮとなり、露光処理、現像処理、及び記録処理からなる一連の処理の動作開始を指示する。まず、露光処理では、撮像素子１４から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に書き込み、更に、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理が行われる。更に、記録処理では、メモリ３０から画像データを読み出し、圧縮・伸張回路３２で圧縮を行い、記録媒体２００に書き込む。
【００４２】
７０は各種ボタンやタッチパネルなどから成る操作部である。一例として、ライブビュー開始／停止ボタン、動画記録開始／停止ボタン、メニューボタン、セットボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタンを含む。更に、再生画像移動＋（プラス）ボタン、再生画像移動−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、調光補正ボタン、外部フラッシュ発光量設定ボタン、日付／時間設定ボタンなども含む。なお、上記プラスボタン及びマイナスボタンの各機能は、回転ダイアルスイッチを備えることによって、より軽快に数値や機能を選択することが可能となる。
【００４３】
また、画像表示部２８のＯＮ／ＯＦＦを設定する画像表示ＯＮ／ＯＦＦスイッチ、撮影直後に撮影した画像データを自動再生するクイックレビュー機能を設定するクイックレビューＯＮ／ＯＦＦスイッチがある。また、ＪＰＥＧ圧縮の圧縮率を選択するため、あるいは撮像素子の信号をそのままデジタル化して記録媒体に記録するＲＡＷモードを選択するためのスイッチである圧縮モードスイッチがある。また、ワンショットＡＦモードとサーボＡＦモードとを設定可能なＡＦモード設定スイッチなどがある。ワンショットＡＦモードでは、シャッタースイッチＳＷ１（６２）を押した際にオートフォーカス動作を開始し、一旦合焦した場合、その合焦状態を保ち続ける。サーボＡＦモードでは、シャッタースイッチＳＷ１（６２）を押している間、連続してオートフォーカス動作を続ける。
【００４４】
８０は電源制御部で、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されている。電源制御部８０は、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。
【００４５】
８２，８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池、ＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ‐ｉｏｎ電池、Ｌｉポリマー電池等の二次電池、ＡＣアダプター等からなる電源部である。
【００４６】
９０はメモリカードやハードディスク等の記録媒体やＰＣとのインターフェース、９２はメモリカードやハードディスク等の記録媒体やＰＣと接続を行うコネクタである。９８はコネクタ９２に記録媒体２００が装着されているか否かを検知する記録媒体着脱検知回路である。
【００４７】
インターフェース及びコネクタとしては、種々の記憶媒体の規格に準拠したものを用いて構成することが可能である。例えば、ＰＣＭＣＩＡ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ  Ｍｅｍｏｒｙ  Ｃａｒｄ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ａｓｓｏｃｉａｔｉｏｎ）カードやＣＦ（コンパクトフラッシュ（登録商標））カード、ＳＤカード等である。インターフェース９０、そしてコネクタ９２をＰＣＭＣＩＡカードやＣＦカード等の規格に準拠したものを用いて構成した場合、各種通信カードを接続することができる。通信カードとしては、ＬＡＮカードやモデムカード、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）カード、ＩＥＥＥ（Ｉｎｓｔｉｔｕｔｅ  ｏｆ  Ｅｌｅｃｔｒｉｃａｌ  ａｎｄ  Ｅｌｅｃｔｒｏｎｉｃ  Ｅｎｇｉｎｅｅｒｓ）１３９４カードがある。他にも、Ｐ１２８４カード、ＳＣＳＩ（Ｓｍａｌｌ  Ｃｏｍｐｕｔｅｒ  Ｓｙｓｔｅｍ  Ｉｎｔｅｒｆａｃｅ）カード、ＰＨＳ等がある。これら各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことができる。
【００４８】
１０４は光学ファインダーであり、撮像レンズ３１０に入射した光線を、一眼レフ方式によって、絞り３１２、レンズマウント３０６，１０６、ミラー１３０，１３２を介して導き、光学像として結像させて表示することができる。これにより、画像表示部２８による電子ファインダー機能を使用すること無しに、光学ファインダーのみを用いて撮影を行うことが可能である。また、光学ファインダー１０４内には、通知部５４の一部の機能、例えば、合焦状態、手振れ警告、フラッシュ充電、シャッター速度、絞り値、露出補正などが表示される。
【００４９】
１２０はレンズマウント１０６内でカメラ本体１００をレンズユニット３００と接続するためのインターフェースである。１２２はカメラ本体１００をレンズユニット３００と電気的に接続するコネクタである。また、レンズマウント１０６及びコネクタ１２２にレンズユニット３００が装着されているか否かは、不図示のレンズ着脱検知部により検知される。コネクタ１２２はカメラ本体１００とレンズユニット３００との間で制御信号、状態信号、データ信号などを伝え合うと共に、各種電圧の電流を供給する機能も備えている。また、コネクタ１２２は電気通信だけでなく、光通信、音声通信により通信を行う構成としてもよい。
【００５０】
２００はメモリカードやハードディスク等の記録媒体である。この記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、カメラ本体１００とのインターフェース２０４、カメラ本体１００と接続を行うコネクタ２０６を備えている。記録媒体２００としては、ＰＣＭＣＩＡカードやコンパクトフラッシュ（登録商標）等のメモリカード、ハードディスク等を用いることができる。また、マイクロＤＡＴ、光磁気ディスク、ＣＤ−ＲやＣＤ−ＲＷ等の光ディスク、ＤＶＤ等の相変化型光ディスク等で構成されていても勿論構わない。
【００５１】
以下、図２を用いて問題となり得るシーケンスについて説明をする。例えば４ｆｐｓの動画を想定した場合に、Ｓ５００のように２ｆｐｓ単位で記録でれば次の動画を撮影した場合に動画同士をつなげて１つの動画にすることができるが、Ｓ５０１のように２ｆｐｓで記録できない場合、次の動画を撮影することはできるが、規格上動画同士をつなげて記録することができない。
【００５２】
以下、図３−図６を参照して、本発明の第一の実施例について記録装置に適用した場合について説明する。
【００５３】
図３の全体像についてフローチャートを用いて説明する。最初にＳ１００において操作部材により画像、動画記録が開始される。これが開始されると、Ｓ１０１において画像記録装置に入力される光に対して光電変換を実施する撮像処理を行い、Ｓ１０２において所定の画像処理を実施することで現像処理を完了する。そして、前記現像処理手段を経た画像に対して、各種動画フォーマットに合うようにＳ１０３で映像形式変換処理を行う。Ｓ１０４で本発明の根幹であるフレームレート調整を実施し、Ｓ１０５でフレームレート調整された動画をカードに対して記録を実施する。
【００５４】
図４のフレーム量調整についてフローチャートを用いて説明する。最初にＳ２００においてフレーム量調整を開始する。Ｓ２０１において基準となるＳ２０３のフレームを間延びさせるか削除させるかの判断をする判断枚数を決定する。例えばここではＧＯＰ単位ということでフレームレートの半分としてもよい。
【００５５】
次にＳ２０２においてＳ２０１で決定した前記判断枚数に対しての処理枚数を、間延びさせた場合と削除した場合のそれぞれについて決定する。そしてＳ２０３においてＳ２０２で決定したそれぞれの枚数を考慮して、フレームを間延びさせるか削除するかの方針を決定する。
【００５６】
Ｓ２０４でフレーム毎の判断処理を実施してどのフレームをＳ２０３で決定した方針で処理をするのかを決定して処理を実施する。Ｓ２０５でＳ２０２とＳ２０３の組み合わせにより決定した処理枚数に対して処理した枚数が同じになったかどうかを判断する。その結果、同じになっている場合はＳ２０７に移行し、フレームレート調整を終了する。しかし、Ｓ２０５の結果処理した枚数がＳ２０２とＳ２０３の組み合わせにより決定した処理枚数に対して小さい場合は、Ｓ２０４に戻り処理を再度実行する。
【００５７】
図５の間延びもしくは削除の方針決定についてフローチャートを用いて説明する。最初に、Ｓ３００において方針決定処理を開始する。Ｓ３０１において処理枚数がＧＯＰの半分の枚数よりも小さいか大きいかを判断する。その結果大きい場合はＳ３０３で間延びさせる方針に決定し、小さい場合にはＳ３０２において削除させる方針に決定して、Ｓ３０４により間延び削除の方針決定を終了する。
【００５８】
図６のフレーム毎の判断処理についてフローチャートを用いて説明する。またここでは１実施例ということで、間延びさせるシーケンスに限定して説明をする。
【００５９】
最初に、Ｓ４００においてフレーム毎の判断処理を開始する。次にＳ４０１で動き判断について判断する。動きが小さい場合には、Ｓ４０４でそのフレームをコピーすることで間延びさせ、Ｓ４０５で処理後の枚数に対しての加算処理を実施して、Ｓ４０６でフレーム毎の判断処理を終了する。これは、動きの大きいフレームを間延びさせると激しく動いているシーンで一瞬動きが止まったような動画を生成することを防ぐためである。ついては動きが大きい場合にはそのフレームを間延びさせずにＳ４０２の合焦状況の判断に移行する。ここでは、ピントが合ってないつまりピンボケしている画像を間延びさせても無意味なフレームが増えてしまうので、ユーザーにとって無駄という観点から、ピントが合っている画像について間延びさせる方針を取る。ついてはＳ４０２で合焦状況を取得して、ピントが合っている画像については、Ｓ４０４でそのフレームをコピーすることで間延びさせ、Ｓ４０５で処理後の枚数に対しての加算処理を実施して、Ｓ４０６でフレーム毎の判断処理を終了する。またピンボケしている画像については、間延びさせないと決定し、Ｓ４０３の露出判断に移行する。
【００６０】
Ｓ４０３の露出判断では、例えばフレーム間での輝度差を見ることで判断を実施する。動き同様フレーム間で輝度差があらかじめ設定した閾値以上の場合にそのフレームを間延びさせるとその輝度が変化する時間に影響を及ぼすので、輝度差が少ないフレームに対して間延び処理を実施する。Ｓ４０３での露出判断を実施した際に露出差があらかじめ設定した閾値以上の場合には、Ｓ４０６でフレーム毎の判断処理を終了し、露出差が少ない場合にはＳ４０４でそのフレームをコピーすることで間延びさせ、Ｓ４０５で処理枚数に対しての加算処理を行い、Ｓ４０６でフレーム毎の判断処理を終了する。
【００６１】
例えば、動画全体で動きをメインとした動画なので動き判断をするとユーザーにとって不都合が生じると考えられる場合、動き判断により間延びさせる処理を省き、その代わりに合焦判断、露出判断により間延びさせるという処理を実施することが可能である。
【００６２】
本実施例により、ユーザーに違和感を与えることなく、フレームレートに対する進捗状況を見て露出差、輝度差、動き検知、合焦状況を見て各フレームを間延びさせるか削除するかを決定し、ＧＯＰ単位に合わせこむことを可能にした記録装置を提供することができる。
【００６３】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００６４】
１００  カメラ本体、３００  レンズユニット
【図１】
2016208206.tif 000003
【図２】
2016208206.tif 000004
【図３】
2016208206.tif 000005
【図４】
2016208206.tif 000006
【図５】
2016208206.tif 000007
【図６】
2016208206.tif 000008