(57)【要約】【課題】複数シーンからなる動画ファイルを評価し、閲覧に適したものを選抜したい。【解決手段】動画ファイルに含まれるそれぞれのシーンに関連する撮影情報をシーンに対応づけて記録し、個々の撮影情報を評価した評価値を用いて判断する。【選択図】図６
2017011629.tif 000002
【特許請求の範囲】
【請求項１】
複数の動画を結合して構成される動画ファイルを記録可能なデジタルカメラであって、
前記動画ファイルは、動画とそれぞれの動画撮影時の撮影情報を対応づけて記録する撮影情報記録部と、
前記動画ファイルに含まれる前記複数の動画の撮影情報をそれぞれ評価して算出された評価値を用いて、前記動画ファイルを再生対象とするか否か判断する再生判断部を具備することを特徴とするデジタルカメラ。
【請求項２】
前記再生判断部において、それぞれ算出された評価値の中で最も高い評価値を前記動画ファイルの評価値として再生対象とするか否かを判断することを特徴とする請求項１に記載のデジタルカメラ。
【請求項３】
前記撮影情報とは、動画撮影時に被写体として撮影された人物の顔の動画データ上における位置、サイズ、向き、角度、表情、特徴データや、デジタルカメラの動き、傾き、ブレ情報を少なくともいずれか含むことを特徴とする請求項１に記載のデジタルカメラ。
【請求項４】
前記動画ファイルを編集時に、削除された動画部分に対応する撮影情報を併せて削除する動画編集部を具備することを特徴とする請求項１に記載のデジタルカメラ。
【請求項５】
前記再生判断部において、それぞれ算出された評価値について、所定の閾値未満となる評価値が所定数算出された場合に、前記動画ファイルを再生対象としないよう判断することを特徴とする請求項１に記載のデジタルカメラ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラに関する。
【背景技術】
【０００２】
近年、デジタルカメラで動画撮影を行う機会が増えている。撮影された動画はただ鑑賞するだけでなく、ユーザの趣向に沿った編集を行うなどして楽しみたいといったニーズが高まっている。
【０００３】
ユーザのニーズを受けて、デジタルカメラには動画を扱った様々な機能が提供されている。特許文献１の様に、その中にデジタルカメラで撮影した画像を自動的に結合し、いわゆるダイジェスト動画を作成したり、ユーザがお気に入りの動画を集めて、１つの動画作品を作成するなど、複数のシーンをまとめて１つの動画ファイルとして記録し、家族や仲間と閲覧、共有することが一般的に広く行われるようになってきた。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第5683301号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
そういった複数のシーンをまとめて１つの動画ファイルを作成して、複数シーンからなる動画ファイルの数が増えるにつれ、それぞれの動画ファイルにどのシーンが記録されているのか分からないなど、観たい動画ファイルや希望する動画ファイルが見つけられないなど、その管理が困難となってくることがある。
【０００６】
そこで、本発明の目的は、複数シーンからなる動画ファイルの中から好ましい動画ファイルを選び出し、ユーザビリティを向上させる方法を提供することにある。
【課題を解決するための手段】
【０００７】
上記の目的を達成する為に、本発明に係るデジタルカメラは、
複数の動画を結合して構成される動画ファイルを記録可能なデジタルカメラであって、
前記動画ファイルは、動画とそれぞれの動画撮影時の撮影情報を対応づけて記録する撮影情報記録部と、
前記動画ファイルに含まれる前記複数の動画の撮影情報をそれぞれ評価して算出された評価値を用いて、前記動画ファイルを再生対象とするか否か判断する再生判断部を具備することを特徴としている。
【発明の効果】
【０００８】
本発明のデジタルカメラによれば、複数シーンからなる動画ファイルの中から失敗シーンを含む動画ファイルを除き、評価の高いシーンからなる動画ファイルの抽出を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】本発明のデジタルカメラの構成を示す図である。
【図２】本発明の実施例１の結合動画撮影モードの動作を示すフローチャートである。
【図３】本発明の実施例１の結合動画撮影モードで記録される動画ファイルの概要図である。
【図４】本発明の実施例１の再生機能の動作を示すフローチャートである。
【図５】本発明の実施例１の失敗結合動画ファイルを除外する処理の動作を示すフローチャートである。
【図６】本発明の実施例１の優良結合動画ファイルを選抜する処理の動作を示すフローチャートである。
【発明を実施するための形態】
【００１０】
以下、本発明を実施するための形態を図面に基づいて説明する。
【００１１】
［実施例１］
図１は本発明の実施例であるデジタルカメラ１００の構成を示す図である。１０は、デジタルカメラ１００の撮影レンズ１１を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護手段である。１１は撮影レンズ、１２は絞り機能を備えるシャッター、１３は光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子、１５は撮像素子１３のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。
【００１２】
１４は撮像素子１３、Ａ／Ｄ変換器１５、Ｄ／Ａ変換器２１にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。２０は画像処理回路であり、Ａ／Ｄ変換器１５からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。
【００１３】
また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御手段４０、測距制御手段４１に対して制御を行い、AF（オートフォーカス）処理、AE（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行っている。画像処理回路２０において、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてAWB（オートホワイトバランス）処理も行っている。
【００１４】
さらに、画像処理回路２０においては、メモリ２５に格納された画像を読み込んでＪＰＥＧ方式やMPEG-4 AVC/H.264方式での圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ２５に書き込む。２２はメモリ制御回路であり、Ａ／Ｄ変換器１５、タイミング発生回路１４、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２１、メモリ２５を制御する。
【００１５】
Ａ／Ｄ変換器１５のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１５のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ２５に書き込まれる。２４は画像表示メモリ、２１はＤ／Ａ変換器、２３はTFT LCD等から成る表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２１を介して表示部２３に表示される。
【００１６】
表示部２３を用いて撮像した画像データを逐次表示すれば、ライブ映像を表示する電子ファインダ機能を実現することが可能である。２５は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。また、メモリ２５はシステム制御回路５０の作業領域としても使用することが可能である。
【００１７】
４０は絞り機能を備えるシャッター１２を制御する露光制御手段である。４１は撮影レンズ１１のフォーカシングを制御する測距制御手段、４２は撮影レンズ１１のズーミングを制御するズーム制御手段、４３はバリアである保護手段１０の動作を制御するバリア制御手段である。５０は本デジタルカメラ全体を制御するシステム制御回路である。
【００１８】
５１は電気的に消去・記録可能な不揮発性メモリであり、例えばEEPROM等が用いられる。プログラムだけでなく、地図情報等も記録されている。
６０、６１及び６２は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、電源スイッチ、モード切り替えスイッチ、メニューボタン、十字キー、さらに、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００１９】
６０はシャッタースイッチSW1で、不図示のシャッターボタンの操作途中でONとなり、AF（オートフォーカス）処理、AE（自動露出）処理、AWB（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始を指示する。６１はシャッタースイッチSW2で、不図示のシャッターボタンの操作完了でONとなり、撮像素子１３から読み出した信号をＡ／Ｄ変換器１５、メモリ制御回路２２を介してメモリ２５に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理、メモリ２５から画像データを読み出し、画像処理回路２０により圧縮を行い、メモリ２５に格納した後にカードコントローラ９０を介して、外部記録媒体９１に画像データを書き込む記録処理という一連の処理の動作開始を指示する。
【００２０】
６２は各種ボタンやタッチパネル等からなる操作部で、電源ボタン、メニューボタン、撮影モード／再生モード／その他特殊撮影モードの切替えを行うモード切替スイッチ、十字キー、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写/連写/セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付/時間設定ボタン等ある。
【００２１】
７０は動画撮影の開始、終了を指示するための操作部材である動画撮影ボタンである。
７１は、被写体等の外部音声を取り込むマイク、７２は、デジタルカメラ１００の操作音やシャッター音、動画再生時の音声を出力するスピーカー、７３は、マイク７１、スピーカー７２の制御や入出力される音声データの録音レベルやボリューム、ノイズキャンセル処理、音声圧縮処理などを施す音声制御部である。
【００２２】
９２はデジタルカメラ１００の動き、傾き、ブレを検出する動き検出センサであり、加速度センサやジャイロセンサ等からなる。９３は顔検出部である。画像処理回路２０で処理された画像データや画像表示メモリ２４に保存されている画像データの解析を行い、画像データ内の顔と思われる領域を検出する。顔検出部では、顔を思われる領域を検出した際に、人間の顔と思われる確からしさ、入力画像データ中の位置、サイズなどが出力される。また、検出した顔の各々の特徴点の特徴量を検出し。特徴量から人物の表情が笑顔であるか、目つむり状態であるかなど表情の判定を行うことができる。さらに特徴量を用いて、人物の識別・認証を行う。
【００２３】
８１は電源制御手段である。８０はアルカリ電池やリチウム電池等の一次電池やNiCd電池やNiMH電池、Li電池等の二次電池、ACアダプター等からなる電源である。９０はメモリカード等の外部記録媒体とデータの送受信を行うカードコントローラである。
９１はメモリカード等の外部記録媒体である。
【００２４】
図２では、デジタルカメラ１００の撮影動作について説明する。デジタルカメラ１００では、操作部６２に含まれるモード切り替えスイッチを切り替えることで、あらかじめ決められた動画撮影回数分１つの動画ファイルに記録する結合動画撮影モードを選択することができる。
【００２５】
デジタルカメラ１００において、結合動画撮影モードが選択されると、ステップＳ２０１では、すでに外部記録媒体９１に記録済みの結合動画が存在するか確認し、記録済みの結合動画ファイルがない、または、所定回数分記録された結合動画ファイルしかなければ、ステップＳ２０３に進む。所定回数未満記録された結合動画ファイルがあれば、ステップＳ２０２に進む。
【００２６】
ステップＳ２０２では、当該結合動画ファイルが何回結合されたかをユーザに認識させるため、結合ファイル数を表示部２３に表示する。ステップＳ２０３では、結合動画撮影モードからのモード変更が行われたか確認する。操作部６２に含まれるモード切り替えスイッチによる他の撮影モードの変更や再生モードへの移行、電源スイッチによる電源ＯＦＦなどがモード変更に含まれる。モード変更が行われた場合は、結合動画撮影モードを終了する。
【００２７】
ステップＳ２０４では、動画撮影ボタン７０が押されたか確認し、押されていなければ、ステップＳ２０３に戻り、押されていればステップＳ２０５に進む。ステップＳ２０５では、露出制御４０によって制御され、適正露出となった撮像素子１３の出力を基に表示用画像を生成し、画像表示メモリ２４に記録する。ステップＳ２０６では、画像表示メモリ２４に記録されている表示用画像を表示部２３に表示する。
【００２８】
ステップＳ２０７では、ステップＳ２０５と同様に撮像素子１３の出力を基に動画記録用画像を生成し、ステップＳ２０８で動画記録用画像を画像処理回路２０に含まれる映像圧縮処理を用いて、映像データへと圧縮し、メモリ２５に格納する。また、映像データの圧縮とともにマイク７１で入力された音声データについても音声制御部７３を用いて、音声を圧縮し、メモリ２５に格納する。
【００２９】
ステップＳ２０９では、画像表示メモリ２４に記録されている表示用画像から顔検出部９３を使って、画像データに記録されている人の顔の情報を検出する。顔の情報としては、画面内に含まれる顔の数、それぞれの顔の確からしさ、位置、大きさ、傾き加減、表情が笑顔であるか否か、目つぶりではないか否かなどの情報を検出し、メモリ２５にその情報を記録しておく。
【００３０】
ステップＳ２１０では、動き検出センサ９２を用いて、カメラがどのような状況で撮影されているか、カメラ自体の動きや傾きに関する情報を検出し、メモリ２５にその情報を記録しておく。
【００３１】
ステップＳ２１１では、ステップＳ２０８でメモリ２５に記録された動画・音声データを外部記録媒体９１に記録する。ステップＳ２０１で、記録済みの結合動画ファイルがない、または、所定回数分記録された結合動画ファイルしかないと判断されていれば、新規のファイルとして記録し、所定回数未満記録された結合動画ファイルがあれば、当該結合動画ファイルに追記して記録を行う。
【００３２】
ステップＳ２１２で、動画撮影ボタン７０が押されたか、ステップＳ２１３で操作部６２に含まれるモード切り替えスイッチによる他の撮影モードの変更や再生モードへの移行、電源スイッチによる電源ＯＦＦなどのモード変更が行われた場合は、ステップＳ２１４に進み、動画撮影を終了する。そうでなければ、ステップＳ２０５に戻り、動画記録を継続する。
【００３３】
ステップＳ２１４では、映像・音声圧縮処理を終了させる。ステップＳ２１５、Ｓ２１６では、動画記録中にメモリ２５に記録していた被写体情報とカメラの動き情報を取得し、ステップＳ２１７で撮影時に取得した情報として今回撮影された動画と対応づけて動画ファイルに記録する。撮影情報として、この他に被写体の明るさが適正であるか否かを示す被写体輝度情報、被写体へのフォーカスが適正であるかう中を示す合焦度、ズーム動作の有無など併せて記録することができる。
【００３４】
図３は本発明で記録される結合動画ファイルの概要を示す図である。図３のように複数回にわたり撮影された動画データと、それぞれに対応づけて動画ファイルののヘッダ情報部分に被写体情報やカメラの動き情報などからなる撮影情報を記録するようなファイル形式となっている。
【００３５】
図４はデジタルカメラ１００が自動で良好な画像をユーザに提供する再生モードの動作である。ステップＳ４０１で外部記録媒体９１に結合動画ファイルが記録されているか検索し、結合動画ファイルがあれば、ステップＳ４０２に進み、なければ、ステップＳ４０４に進む。
【００３６】
ステップＳ４０２では、後述する失敗結合動画除外処理を行う。失敗結合動画除外処理では、部記録媒体９１に記録されている結合動画ファイルの中で再生に適さない結合動画ファイルを再生対象から除外する。ステップＳ４０３では、後述する優良結合動画選抜処理を行う。優良結合動画選抜処理では、失敗結合動画除外処理で再生対象から除外されなかった結合動画ファイルの中からそれぞれ結合動画ファイルに含まれるシーンの撮影情報を評価し、優良な評価値を持つ結合動画ファイルを選抜する。
【００３７】
ステップＳ４０４では、外部記録媒体９１に記録されている静止画の中から、静止画に記録されている被写体輝度が極端に高いか低い画像、静止画に記録されている合焦度の低い画像、静止画に記録されているユーザのお気に入り度が低い画像などの条件から再生対象から除外する。また、ステップＳ４０５では、外部記録媒体９１に記録されている結合動画ファイル以外の動画ファイルにおいては動画ファイルに記録されている合焦度から撮影期間中のフォーカスが動作し続け、焦点が定まっていないもの、撮影期間中にズーム動作を行い続け画角が安定しないもの、撮影期間中にカメラの動きが変化し、被写体の角度が安定しないであろうものなどの条件から再生対象から除外する。
【００３８】
ステップＳ４０６では、例えば静止画においてはユーザのお気に入り度が高く設定されているものなど、動画チャプタにおいてはに示すように撮影期間中に被写体の笑顔が検出されたものなどを優良な静止画・動画として再生対象として選抜する。ステップＳ４０７では、ステップＳ４０３，Ｓ４０６で選抜された結合動画ファイル、静止画、動画だけをユーザに閲覧するよう再生を行う。
【００３９】
図５は失敗結合動画除外処理について説明する。ステップＳ５０１、５０２では、外部記録媒体９１に記録されているすべての結合動画ファイルに対してステップＳ５０３以下の処理をくり返し行う。ステップＳ５０３では、変数の初期化(i=1)を行う。ステップＳ５０４、Ｓ５０５では、当該結合動画ファイルにi番目の撮影情報があるか確認し、あれば撮影情報を取得する。
【００４０】
ステップＳ５０６では、撮影情報を評価し、評価値を算出する。評価する対象としては、撮影情報に含まれる顔が笑顔であるか、撮影された人物の顔が撮影期間中に十分大きいサイズで、所定の構図に収まるような位置にあるか、顔の位置や大きさや傾きが大きく変動していないか、カメラの動きから安定して撮影が行われたかなど、また、動画ファイルに記録されている合焦度から撮影期間中のフォーカスが動作し続け、焦点が定まっていないもの、撮影期間中にズーム動作を行い続け画角が安定しないもの、撮影期間中にカメラの動きが変化し、被写体の角度が安定しないであろうものなどの条件から複合的に評価して、評価値を算出する。
【００４１】
ステップＳ５０７で変数を更新し、当該結合動画ファイルに含まれるすべての撮影シーンでの撮影情報を評価が終わったら、ステップＳ５０８に進む。ステップＳ５０８では、それぞれの撮影情報から算出された評価値があらかじめ決められた閾値より低いものが所定数あるか確認する。評価値が低いものが所定数以上あれば、ステップＳ５０９で、当該結合動画ファイルは再生するのに相応しくないとして、失敗結合動画ファイルとして再生対象から除外する。すべての結合動画ファイルに行ったら処理を終了する。
【００４２】
図６は優良結合動画選抜処理について説明する。ステップＳ６０１、６０２では、外部記録媒体９１に記録されているすべての結合動画ファイルに対してステップＳ６０３以下の処理をくり返し行う。ステップＳ６０３では、当該結合動画ファイルが図５で説明した失敗結合動画ファイルと判断されていないか確認し、失敗結合動画ファイルであれば、ステップＳ６０１に戻り、次の結合動画ファイルの処理を行う。失敗結合動画ファイルでなければ、ステップＳ６０４に進む。
【００４３】
ステップＳ６０４では、変数の初期化(i=1)を行う。ステップＳ６０５、Ｓ６０６では、当該結合動画ファイルにi番目の撮影情報があるか確認し、あれば撮影情報を取得する。ステップＳ６０７では、撮影情報を評価し、評価値を算出する。評価する対象としては、撮影情報に含まれる顔が笑顔であるか、撮影された人物の顔が撮影期間中に十分大きいサイズで、所定の構図に収まるような位置にあるか、顔の位置や大きさや傾きが大きく変動していないか、カメラの動きから安定して撮影が行われたかなどを複合的に評価して、評価値を算出する。
【００４４】
ステップＳ６０８で変数を更新し、当該結合動画ファイルに含まれるすべての撮影シーンでの撮影情報を評価が終わったら、ステップＳ６０９に進む。ステップＳ６０９では、それぞれの撮影情報から算出された評価値の中でもっとも高い評価値を当該結合動画ファイルの評価値と設定する。すべての結合動画ファイルに対して評価値の算出を終えると、ステップＳ６１０で、評価値の高い結合動画ファイルを選抜し、再生対象に設定する。
【符号の説明】
【００４５】
１００  デジタルカメラ、１０  保護手段、１１  撮影レンズ、１２  シャッター、
１３  撮像素子、１５  Ａ／Ｄ変換器
【図３】
2017011629.tif 000003
【図１】
2017011629.tif 000004
【図２】
2017011629.tif 000005
【図４】
2017011629.tif 000006
【図５】
2017011629.tif 000007
【図６】
2017011629.tif 000008