(57)【特許請求の範囲】
【請求項１】
動画像を撮影する動画像撮影部と、
前記動画像に含まれる人物を検出人物として検出する人物検出部と、
前記検出人物の動きを追跡して、前記検出人物の過去の一定時間の行動を記憶する人物情報記憶部と、
前記検出人物の過去の一定時間の行動に基づいて、前記検出人物を評価して点数を付ける人物評価部と、
前記検出人物の点数が一定値を超える場合に、前記検出人物が、前記動画像の撮影者が意図的に撮影している撮影対象人物であると判定する人物判定部と、
前記撮影対象人物が動画像に含まれるように、前記撮影者および前記撮影対象人物の少なくとも一方の行動をアシストする撮影アシスト部とを備え、
前記人物評価部は、前記過去の一定時間内に、前記検出人物が前記動画像のフレーム内で一人の場合に、前記検出人物の点数を増加させるものであることを特徴とする画像撮影装置。
【請求項２】
前記撮影アシスト部は、前記撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、前記撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、前記撮影者および前記撮影対象人物の少なくとも一方に通知するものである請求項１に記載の画像撮影装置。
【請求項３】
前記撮影アシスト部は、撮影中の前記動画像を表示する表示部上にコメントを表示する、もしくは、音声により、前記撮影者に通知するものである請求項２に記載の画像撮影装置。
【請求項４】
前記撮影アシスト部は、フラッシュを発光させて前記撮影対象人物に通知するものである請求項２または３に記載の画像撮影装置。
【請求項５】
動画像を撮影する動画像撮影部と、
前記動画像に含まれる人物を検出人物として検出する人物検出部と、
前記検出人物の動きを追跡して、前記検出人物の過去の一定時間の行動を記憶する人物情報記憶部と、
前記検出人物の過去の一定時間の行動に基づいて、前記検出人物を評価して点数を付ける人物評価部と、
前記検出人物の点数が一定値を超える場合に、前記検出人物が、前記動画像の撮影者が意図的に撮影している撮影対象人物であると判定する人物判定部と、
前記撮影対象人物が動画像に含まれるように、前記撮影者および前記撮影対象人物の少なくとも一方の行動をアシストする撮影アシスト部とを備え、
前記撮影アシスト部は、前記撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、前記撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、フラッシュを発光させて前記撮影対象人物に通知するものであることを特徴とする画像撮影装置。
【請求項６】
前記撮影アシスト部は、前記撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、前記撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、さらに、撮影中の前記動画像を表示する表示部上にコメントを表示する、もしくは、音声により、前記撮影者に通知するものである請求項５に記載の画像撮影装置。
【請求項７】
前記人物評価部は、前記過去の一定時間内に、前記検出人物が前記動画像からフレームアウトしている時間が長くなるほど、前記検出人物の点数を減少させるものである請求項１〜６のいずれか１項に記載の画像撮影装置。
【請求項８】
前記人物判定部は、前記撮影対象人物の点数が前記一定値以下となった場合に、前記撮影対象人物ではなくなったと判定するものである請求項７に記載の画像撮影装置。
【請求項９】
前記人物評価部は、前記過去の一定時間内に、前記検出人物が笑顔である場合に、前記検出人物の点数を増加させるものである請求項１〜８のいずれか１項に記載の画像撮影装置。
【請求項１０】
前記人物評価部は、前記過去の一定時間内に、前記動画像のフレーム内に撮影されている前記検出人物の顔領域のサイズが大きくなるほど、前記検出人物の点数を増加させるものである請求項１〜９のいずれか１項に記載の画像撮影装置。
【請求項１１】
前記人物評価部は、前記過去の一定時間内に、前記検出人物が前記動画像のフレームの中央部に撮影されている場合に、前記検出人物の点数を増加させるものである請求項１〜１０のいずれか１項に記載の画像撮影装置。
【請求項１２】
前記人物評価部は、前記過去の一定時間内に、前記検出人物がカメラ目線である場合に、前記検出人物の点数を増加させるものである請求項１〜１１のいずれか１項に記載の画像撮影装置。
【請求項１３】
前記人物評価部は、前記過去の一定時間内に、前記検出人物が前記動画像のフレーム内に撮影されている時間が長くなるほど、前記検出人物の点数を増加させるものである請求項１〜１２のいずれか１項に記載の画像撮影装置。
【請求項１４】
前記人物判定部は、表示部に表示された、撮影中の前記動画像に含まれる検出人物の中から、ユーザにより入力部を介して指定された検出人物が、前記撮影対象人物であると判定するものである請求項１〜１３のいずれか１項に記載の画像撮影装置。
【請求項１５】
前記撮影アシスト部は、前記動画像の撮影位置の移動方向と前記撮影対象人物の移動方向との相対的な位置関係に基づいて、前記撮影対象人物が前記動画像からフレームアウトすると予測される場合に、前記撮影対象人物が前記動画像からフレームアウトすると予測されることを、前記撮影者および前記撮影対象人物の少なくとも一方に通知するものである請求項１〜１４のいずれか１項に記載の画像撮影装置。
【請求項１６】
前記撮影アシスト部は、前記撮影対象人物が前記動画像からフレームアウトした場合に、前記フレームアウトした撮影対象人物が前記動画像のフレーム内に再び撮影されるまでの間、前記フレームアウトした撮影対象人物が前記動画像からフレームアウトしてから一定の期間を上限として、前記フレームアウトした撮影対象人物がいる方向を前記撮影者に通知するものである請求項１〜１５のいずれか１項に記載の画像撮影装置。
【請求項１７】
前記撮影アシスト部は、前記フレームアウトした撮影対象人物がいる方向を表す矢印を、撮影中の前記動画像が表示される表示部に表示するものである請求項１６に記載の画像撮影装置。
【請求項１８】
前記撮影アシスト部は、さらに、前記矢印を点滅させて前記表示部に表示するものである請求項１７に記載の画像撮影装置。
【請求項１９】
前記撮影アシスト部は、前記フレームアウトした撮影対象人物を表すアイコンを、前記フレームアウトした撮影対象人物がいる方向に対応する、撮影中の前記動画像が表示される表示部の画面の縁の中央部に表示するものである請求項１６に記載の画像撮影装置。
【請求項２０】
前記撮影アシスト部は、さらに、前記アイコンを点滅させて前記表示部に表示するものである請求項１９に記載の画像撮影装置。
【請求項２１】
前記撮影アシスト部は、複数の前記撮影対象人物が前記動画像に撮影されている場合に、それぞれの前記撮影対象人物が前記動画像に撮影された撮影累積時間を記憶しておき、前記複数の撮影対象人物が前記動画像に均等に撮影されるように、前記撮影累積時間が他の撮影対象人物よりも短い撮影対象人物がいる方向を前記撮影者に通知するものである請求項１〜１５のいずれか１項に記載の画像撮影装置。
【請求項２２】
動画像撮影部が、動画像を撮影するステップと、
人物検出部が、前記動画像に含まれる人物を検出人物として検出するステップと、
人物情報記憶部が、前記検出人物の動きを追跡して、前記検出人物の過去の一定時間の行動を記憶するステップと、
人物評価部が、前記検出人物の過去の一定時間の行動に基づいて、前記検出人物を評価して点数を付けるステップと、
人物判定部が、前記検出人物の点数が一定値を超える場合に、前記検出人物が、前記動画像の撮影者が意図的に撮影している撮影対象人物であると判定するステップと、
撮影アシスト部が、前記撮影対象人物が動画像に含まれるように、前記撮影者および前記撮影対象人物の少なくとも一方の行動をアシストするステップとを含み、
前記人物評価部は、前記過去の一定時間内に、前記検出人物が前記動画像のフレーム内で一人の場合に、前記検出人物の点数を増加させることを特徴とする画像撮影方法。
【請求項２３】
動画像撮影部が、動画像を撮影するステップと、
人物検出部が、前記動画像に含まれる人物を検出人物として検出するステップと、
人物情報記憶部が、前記検出人物の動きを追跡して、前記検出人物の過去の一定時間の行動を記憶するステップと、
人物評価部が、前記検出人物の過去の一定時間の行動に基づいて、前記検出人物を評価して点数を付けるステップと、
人物判定部が、前記検出人物の点数が一定値を超える場合に、前記検出人物が、前記動画像の撮影者が意図的に撮影している撮影対象人物であると判定するステップと、
撮影アシスト部が、前記撮影対象人物が動画像に含まれるように、前記撮影者および前記撮影対象人物の少なくとも一方の行動をアシストするステップとを含み、
前記撮影アシスト部は、前記撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、前記撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、フラッシュを発光させて前記撮影対象人物に通知することを特徴とする画像撮影方法。
【請求項２４】
前記撮影アシスト部は、前記動画像の撮影位置の移動方向と前記撮影対象人物の移動方向との相対的な位置関係に基づいて、前記撮影対象人物が前記動画像からフレームアウトすると予測される場合に、前記撮影対象人物が前記動画像からフレームアウトすると予測されることを、前記撮影者および前記撮影対象人物の少なくとも一方に通知する請求項２２または２３に記載の画像撮影方法。
【請求項２５】
前記撮影アシスト部は、前記撮影対象人物が前記動画像からフレームアウトした場合に、前記フレームアウトした撮影対象人物が前記動画像のフレーム内に再び撮影されるまでの間、前記フレームアウトした撮影対象人物が前記動画像からフレームアウトしてから一定の期間を上限として、前記フレームアウトした撮影対象人物がいる方向を前記撮影者に通知する請求項２２〜２４のいずれか１項に記載の画像撮影方法。
【請求項２６】
前記撮影アシスト部は、複数の前記撮影対象人物が前記動画像に撮影されている場合に、それぞれの前記撮影対象人物が前記動画像に撮影された撮影累積時間を記憶しておき、前記複数の撮影対象人物が前記動画像に均等に撮影されるように、前記撮影累積時間が他の撮影対象人物よりも短い撮影対象人物がいる方向を前記撮影者に通知する請求項２２〜２４のいずれか１項に記載の画像撮影方法。
【請求項２７】
請求項２２〜２６のいずれか１項に記載の画像撮影方法の各々のステップをコンピュータに実行させるためのプログラム。
【請求項２８】
請求項２２〜２６のいずれか１項に記載の画像撮影方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像から抽出されたフレーム画像のプリント（以下、動画プリントともいう）を作成するシステム等で使用される動画像を撮影するためのアシスト機能を備える画像撮影装置、画像撮影方法、プログラムおよび記録媒体に関するものである。
【背景技術】
【０００２】
昨今、スマートフォンやタブレット端末等の携帯端末の普及が急速に進んでおり、携帯端末で撮影される静止画像（写真）の枚数が増えているが、それと同時に動画像が撮影される機会も多くなっている。現在では、動画像を利用したサービスとして、非特許文献１に示すように、写真等のプリント物を携帯端末で撮影（キャプチャ）すると、プリント物に関連付けられた動画像を、ＡＲ技術を使って、携帯端末の画面上に再生（ＡＲ再生）するシステムが提供されている。
【０００３】
このシステムでは、以下の（１）〜（６）のステップで、プリントに関連付けられた動画像のＡＲ再生が行われる。
【０００４】
（１）ユーザにより、携帯端末上で動作する専用のアプリケーションを使用して、複数の動画像の中からプリントに使用したい動画像が選択されると、選択された動画像がサーバへアップロードされる。
（２）サーバにおいて、携帯端末からアップロードされた動画像から代表シーンのフレーム画像が抽出される。
（３）サーバで抽出された代表シーンのフレーム画像が携帯端末へダウンロードされる。
（４）ユーザにより、携帯端末の画面に一覧表示された代表シーンのフレーム画像の中からプリントしたいフレーム画像が選択され、プリントの注文が行われる。
（５）サーバにおいて、ユーザにより注文された代表シーンのフレーム画像のプリントが生成され、このフレーム画像に関連付けられた動画像がＡＲ再生用に画像処理される。
（６）ユーザにより、配達されたプリントが携帯端末で撮影（キャプチャ）されると、このプリントに関連付けられたＡＲ再生用の動画像がサーバからダウンロードされ、ＡＲ技術により、携帯端末の画面にＡＲ再生される。
【０００５】
上記の動画プリントを作成するシステムで使用される動画像は、一般的な動画像の撮影機能を備える画像撮影装置によって撮影された動画像が使用されている。
【０００６】
上記のシステムで生成される動画プリントは、静止画像としての役割と、動画像としての役割を備えている。従って、動画プリントを生成するために使用する動画像の撮影の際には、静止画像と動画像の双方に適したシーンを動画像中に盛り込まなければならない。しかし、従来の画像撮影装置では、動画像の撮影中に、動画プリントを生成するために適した撮影内容になっているか否かを確認する手段が備えられていないため、撮影された動画像が動画プリントに適していない場合があった。
【０００７】
ここで、本発明に関連性のある先行技術文献として、特許文献１〜４がある。
【０００８】
特許文献１は、撮影者が特定の人物を追って撮影する際に、フレーミングしやすいようにアシストする撮像装置に関するものであるが、人物がフレームアウトすると、アシスト機能が働かない。
【０００９】
特許文献２は、撮影内容にバリエーションを持たせるために、類似の内容で撮像が連続している場合に警告を行う撮像装置に関するものであるが、あらかじめ類似判定用の静止画像を登録しておかなければならない。
【００１０】
特許文献３は、写真撮影時に、複数の人物をバランスよく撮影するための撮影アシスト方法に関するものであるが、撮影者が意図的に撮影している被写体かどうかを自動で判断できない。
【００１１】
特許文献４は、撮影者の意図が反映されやすい動画用のサムネイル画像を作成する電子カメラに関し、笑顔の出現頻度によって主要人物を特定し、その主要人物が大きく写ったフレームをサムネイル画像とするものである。
【００１２】
また、特許文献１〜４の他にも、例えば、被写体人物を個別に判断し、被写体人物が一定時間笑顔であった場合に自動でシャッタを切る技術が知られているが、この技術は、被写体人物がフレームアウトすると、機能しない。
【先行技術文献】
【特許文献】
【００１３】
【特許文献１】特開２００７−１４２８６６号公報
【特許文献２】特開２００９−４４６０２号公報
【特許文献３】特開２０１１−２１１６９５号公報
【特許文献４】特開２０１０−１６１６４４号公報
【非特許文献】
【００１４】
【非特許文献１】"動画フォト！サービス"、[online]、富士フイルム株式会社、[平成２７年２月９日検索]、インターネット＜URL: http://fujifilm.jp/personal/print/photo/dogaphoto/＞
【発明の概要】
【発明が解決しようとする課題】
【００１５】
本発明の目的は、上記従来技術の問題点を解消し、動画プリントを生成するために適した動画像を撮影することができる画像撮影装置、画像撮影方法、プログラムおよび記録媒体を提供することにある。
【課題を解決するための手段】
【００１６】
上記目的を達成するために、本発明は、動画像を撮影する動画像撮影部と、
動画像に含まれる人物を検出人物として検出する人物検出部と、
検出人物の動きを追跡して、検出人物の過去の一定時間の行動を記憶する人物情報記憶部と、
検出人物の過去の一定時間の行動に基づいて、検出人物を評価して点数を付ける人物評価部と、
検出人物の点数が一定値を超える場合に、検出人物が、動画像の撮影者が意図的に撮影している撮影対象人物であると判定する人物判定部と、
撮影対象人物が動画像に含まれるように、撮影者および撮影対象人物の少なくとも一方の行動をアシストする撮影アシスト部とを備え、
人物評価部は、過去の一定時間内に、検出人物が動画像のフレーム内で一人の場合に、検出人物の点数を増加させるものであることを特徴とする画像撮影装置を提供するものである。
また、撮影アシスト部は、撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、撮影者および撮影対象人物の少なくとも一方に通知するものであることが好ましい。
また、撮影アシスト部は、撮影中の動画像を表示する表示部上にコメントを表示する、もしくは、音声により、撮影者に通知するものであることが好ましい。
また、撮影アシスト部は、フラッシュを発光させて撮影対象人物に通知するものであることが好ましい。
また、本発明は、動画像を撮影する動画像撮影部と、
動画像に含まれる人物を検出人物として検出する人物検出部と、
検出人物の動きを追跡して、検出人物の過去の一定時間の行動を記憶する人物情報記憶部と、
検出人物の過去の一定時間の行動に基づいて、検出人物を評価して点数を付ける人物評価部と、
検出人物の点数が一定値を超える場合に、検出人物が、動画像の撮影者が意図的に撮影している撮影対象人物であると判定する人物判定部と、
撮影対象人物が動画像に含まれるように、撮影者および撮影対象人物の少なくとも一方の行動をアシストする撮影アシスト部とを備え、
撮影アシスト部は、撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、フラッシュを発光させて撮影対象人物に通知するものであることを特徴とする画像撮影装置を提供する。
また、撮影アシスト部は、撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、さらに、撮影中の動画像を表示する表示部上にコメントを表示する、もしくは、音声により、撮影者に通知するものであることが好ましい。
また、人物評価部は、過去の一定時間内に、検出人物が動画像からフレームアウトしている時間が長くなるほど、検出人物の点数を減少させるものであることが好ましい。
また、人物判定部は、撮影対象人物の点数が一定値以下となった場合に、撮影対象人物ではなくなったと判定するものであることが好ましい。
【００１７】
ここで、人物評価部は、過去の一定時間内に、検出人物が笑顔である場合に、検出人物の点数を増加させるものであることが好ましい。
【００１８】
また、人物評価部は、過去の一定時間内に、動画像のフレーム内に撮影されている検出人物の顔領域のサイズが大きくなるほど、検出人物の点数を増加させるものであることが好ましい。
【００１９】
また、人物評価部は、過去の一定時間内に、検出人物が動画像のフレームの中央部に撮影されている場合に、検出人物の点数を増加させるものであることが好ましい。
【００２０】
また、人物評価部は、過去の一定時間内に、検出人物がカメラ目線である場合に、検出人物の点数を増加させるものであることが好ましい。
【００２２】
また、人物評価部は、過去の一定時間内に、検出人物が動画像のフレーム内に撮影されている時間が長くなるほど、検出人物の点数を増加させるものであることが好ましい。
【００２５】
また、人物判定部は、表示部に表示された、撮影中の動画像に含まれる検出人物の中から、ユーザにより入力部を介して指定された検出人物が、撮影対象人物であると判定するものであることが好ましい。
【００２６】
また、撮影アシスト部は、動画像の撮影位置の移動方向と撮影対象人物の移動方向との相対的な位置関係に基づいて、撮影対象人物が動画像からフレームアウトすると予測される場合に、撮影対象人物が動画像からフレームアウトすると予測されることを、撮影者および撮影対象人物の少なくとも一方に通知するものであることが好ましい。
【００２７】
また、撮影アシスト部は、撮影対象人物が動画像からフレームアウトした場合に、フレームアウトした撮影対象人物が動画像のフレーム内に再び撮影されるまでの間、フレームアウトした撮影対象人物が動画像からフレームアウトしてから一定の期間を上限として、フレームアウトした撮影対象人物がいる方向を撮影者に通知するものであることが好ましい。
【００２８】
また、撮影アシスト部は、フレームアウトした撮影対象人物がいる方向を表す矢印を、撮影中の動画像が表示される表示部に表示するものであることが好ましい。
【００２９】
撮影アシスト部は、さらに、矢印を点滅させて表示部に表示するものであることが好ましい。
【００３０】
また、撮影アシスト部は、フレームアウトした撮影対象人物を表すアイコンを、フレームアウトした撮影対象人物がいる方向に対応する、撮影中の動画像が表示される表示部の画面の縁の中央部に表示するものであることが好ましい。
【００３１】
撮影アシスト部は、さらに、アイコンを点滅させて表示部に表示するものであることが好ましい。
【００３２】
また、撮影アシスト部は、複数の撮影対象人物が動画像に撮影されている場合に、それぞれの撮影対象人物が動画像に撮影された撮影累積時間を記憶しておき、複数の撮影対象人物が動画像に均等に撮影されるように、撮影累積時間が他の撮影対象人物よりも短い撮影対象人物がいる方向を撮影者に通知するものであることが好ましい。
【００３６】
また、本発明は、動画像撮影部が、動画像を撮影するステップと、
人物検出部が、動画像に含まれる人物を検出人物として検出するステップと、
人物情報記憶部が、検出人物の動きを追跡して、検出人物の過去の一定時間の行動を記憶するステップと、
人物評価部が、検出人物の過去の一定時間の行動に基づいて、検出人物を評価して点数を付けるステップと、
人物判定部が、検出人物の点数が一定値を超える場合に、検出人物が、動画像の撮影者が意図的に撮影している撮影対象人物であると判定するステップと、
撮影アシスト部が、撮影対象人物が動画像に含まれるように、撮影者および撮影対象人物の少なくとも一方の行動をアシストするステップとを含み、
人物評価部は、過去の一定時間内に、検出人物が動画像のフレーム内で一人の場合に、検出人物の点数を増加させることを特徴とする画像撮影方法を提供する。
また、本発明は、動画像撮影部が、動画像を撮影するステップと、
人物検出部が、動画像に含まれる人物を検出人物として検出するステップと、
人物情報記憶部が、検出人物の動きを追跡して、検出人物の過去の一定時間の行動を記憶するステップと、
人物評価部が、検出人物の過去の一定時間の行動に基づいて、検出人物を評価して点数を付けるステップと、
人物判定部が、検出人物の点数が一定値を超える場合に、検出人物が、動画像の撮影者が意図的に撮影している撮影対象人物であると判定するステップと、
撮影アシスト部が、撮影対象人物が動画像に含まれるように、撮影者および撮影対象人物の少なくとも一方の行動をアシストするステップとを含み、
撮影アシスト部は、撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、フラッシュを発光させて撮影対象人物に通知することを特徴とする画像撮影方法を提供する。
【００３７】
ここで、撮影アシスト部は、動画像の撮影位置の移動方向と撮影対象人物の移動方向との相対的な位置関係に基づいて、撮影対象人物が動画像からフレームアウトすると予測される場合に、撮影対象人物が動画像からフレームアウトすると予測されることを、撮影者および撮影対象人物の少なくとも一方に通知することが好ましい。
【００３８】
また、撮影アシスト部は、撮影対象人物が動画像からフレームアウトした場合に、フレームアウトした撮影対象人物が動画像のフレーム内に再び撮影されるまでの間、フレームアウトした撮影対象人物が動画像からフレームアウトしてから一定の期間を上限として、フレームアウトした撮影対象人物がいる方向を撮影者に通知することが好ましい。
【００３９】
また、撮影アシスト部は、複数の撮影対象人物が動画像に撮影されている場合に、それぞれの撮影対象人物が動画像に撮影された撮影累積時間を記憶しておき、複数の撮影対象人物が動画像に均等に撮影されるように、撮影累積時間が他の撮影対象人物よりも短い撮影対象人物がいる方向を撮影者に通知することが好ましい。
【００４１】
また、本発明は、上記に記載の画像撮影方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。
【００４２】
また、本発明は、上記に記載の画像撮影方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【発明の効果】
【００４３】
本発明では、撮影中の動画像から人物を検出し、その検出人物の動きを追跡して、過去の一定時間の行動を記憶しておく。そして、過去の一定時間の行動に基づいて、検出人物を評価して点数を付け、点数が一定値を超える場合に、検出人物が撮影対象人物であり、点数が一定値以下の場合に、撮影対象人物ではなくなったと自動で判定し、撮影対象人物が動画像に含まれるように、撮影者および撮影対象者の少なくとも一方の行動をアシストする。
【００４４】
これにより、本発明によれば、動画像の撮影中に、リアルタイムで撮影者および撮影対象者の少なくとも一方の行動がアシストされるため、撮影者は、動画プリントを生成するために適した動画像を撮影することができる。
【図面の簡単な説明】
【００４５】
【図１】動画プリントを生成する画像処理装置の構成を表す一実施形態のブロック図である。
【図２】図１に示すサーバの構成を表す一実施形態のブロック図である。
【図３】図１に示す携帯端末の内部構成を表す一実施形態のブロック図である。
【図４】ＡＲコンテンツを生成し、選択画像の出力画像を出力する場合の画像処理装置の動作を表す一例のフローチャートである。
【図５】（Ａ）〜（Ｅ）は、いずれも、携帯端末の表示部の表示画面を表す一例の概念図である。
【図６】ＡＲ再生用の動画像を生成し、再生表示する場合の画像処理装置の動作を表す一例のフローチャートである。
【図７】本発明の画像撮影装置の構成を表す一実施形態のブロック図である。
【図８】（Ａ）〜（Ｅ）は、いずれも、撮影位置を右側から左側へ移動しながら動画像を撮影する場合の様子を説明する一例の概念図である。
【図９】図７に示す画像撮影装置の動作を表す一例のフローチャートである。
【発明を実施するための形態】
【００４６】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像撮影装置、画像撮影方法、プログラムおよび記録媒体を詳細に説明する。
【００４７】
本発明の画像撮影装置の説明を行う前に、まず、動画プリントを生成する画像処理装置について説明する。
【００４８】
図１は、動画プリントを生成する画像処理装置の構成を表す一実施形態のブロック図である。同図に示す画像処理装置１０は、出力画像（動画プリント）が撮影（キャプチャ）された場合に、出力画像に関連付けられた動画像を再生表示するものであり、サーバ１２と、携帯端末１４と、プリンタ１６とを備えている。サーバ１２、携帯端末１４およびプリンタ１６は、インターネット等のネットワーク１８を介して互いに接続されている。
【００４９】
図２は、図１に示すサーバの構成を表す一実施形態のブロック図である。図２に示すサーバ１２は、コンテンツ生成部２０と、記憶部２２と、撮影画像解析部２４と、管理マーカ特定部２６と、動画像処理部２８と、第１転送部３０とを備えている。
【００５０】
コンテンツ生成部２０は、動画像からフレーム画像を抽出し、動画像と、動画像から抽出されたフレーム画像の中から携帯端末１４のユーザにより選択されたフレーム画像である選択画像とが関連付けられたＡＲコンテンツを生成するものである。
【００５１】
ここで、動画像からフレーム画像を抽出する方法は限定されない。例えば、動画像からユーザが手動で所望のフレーム画像を抽出してもよいし、動画像から一定の時間間隔でフレーム画像を抽出してもよい。
【００５２】
あるいは、ＫＦＥ（Key Frame Extraction）技術を利用して、シーンの変わり目などのキーとなるフレーム画像を抽出してもよい。ＫＦＥでは、例えば、動画像の各々のフレーム画像を解析し、フレーム画像の色味、明るさ、ボケやブレ等を検出し、色味や明るさが大きく変わる前後のフレーム画像や、適正露出によりボケやブレがないフレーム画像が抽出される。
【００５３】
また、動画像において人物の顔の大きさや向き、顔の表情（笑顔、泣き顔等）を検出し、それらに基づいてフレーム画像を抽出してもよい。さらに、動画像に音声が含まれる場合には、音声が大きくなった時刻（タイムコード）の前後の動画像からフレーム画像を抽出してもよい。上述の方法で動画像からフレーム画像を抽出することで、動画像の代表的なシーンをフレーム画像として抽出することができる。
【００５４】
記憶部２２は、各種のデータを記憶するものである。記憶部２２には、例えば、コンテンツ生成部２０により生成されたＡＲコンテンツ、つまり、選択画像またはその特定情報が、選択画像の管理マーカとして、動画像と関連付けて記憶される。
【００５５】
ここで、管理マーカとは、所定のアルゴリズムに基づいて静止画像の画像解析を行うことにより、静止画像から読み取られる画像の特徴量であり、例えば、静止画像に撮影された撮影対象のエッジ情報やエッジの位置情報等が含まれる。管理マーカは、静止画像そのものであってもよいし、静止画像を特定するための特定情報でもよい。静止画像の特定情報は、撮影画像から選択画像を特定することができる情報であれば、どのような情報であってもよい。
【００５６】
撮影画像解析部２４は、後述する撮影画像の画像解析を行って、撮影画像の管理マーカを得るものである。
【００５７】
管理マーカ特定部２６は、記憶部２２に記憶された選択画像の管理マーカの中から、撮影画像解析部２４により得られた撮影画像の管理マーカに対応する選択画像の管理マーカを特定管理マーカとして特定するものである。管理マーカ特定部２６は、例えば、撮影画像の管理マーカに基づいて、記憶部２２に記憶された選択画像の管理マーカを検索することにより、撮影画像の管理マーカに対応する選択画像の管理マーカを特定する。
【００５８】
動画像処理部２８は、特定管理マーカに関連付けられた関連動画像から、ＡＲ再生用の動画像を生成するものである。つまり、動画像処理部２８は、特定管理マーカ、すなわち、動画像から抽出されたフレーム画像の中からユーザにより選択されたフレーム画像またはその特定情報に基づいて、関連動画像からＡＲ再生用の動画像を生成する。
【００５９】
動画像処理部２８は、動画像のファイルサイズを小さくするために、例えば、動画像の解像度やビットレートを下げることにより、ファイルサイズが小さいＡＲ再生用の動画像を生成する。
【００６０】
第１転送部３０は、サーバ１２と携帯端末１４との間で、動画像、撮影画像などを含む、各種のデータを転送するものである。
【００６１】
続いて、図３は、図１に示す携帯端末の内部構成を表す一実施形態のブロック図である。携帯端末１４は、ユーザが使用するスマートフォン、タブレット端末などであり、図３に示すように、画像撮影部３２と、入力部３４と、表示部３６と、制御部３８と、第２転送部４０とを備えている。
【００６２】
画像撮影部３２は、選択画像が出力された出力画像（ＡＲプリント）などを撮影（キャプチャ）して撮影画像を得るものである。
【００６３】
入力部３４は、ユーザにより入力される各種の指示を入力するためのものである。
表示部３６は、動画像等を再生して表示するものである。
本実施形態では、タッチパネル４２が、入力部３４および表示部３６を構成するものとする。
【００６４】
制御部３８は、画像撮影部３２により出力画像が撮影（キャプチャ）された場合に、撮影画像に基づいて生成されたＡＲ再生用の動画像が表示部３６に再生して表示されるように制御するものである。
ここで、制御部３８は、動画像を表示部３６に再生させる場合、ＡＲ技術を使用して再生（ＡＲ再生）させてもよいし、ＡＲ技術を使用せず再生（通常再生）させてもよい。制御部３８は、動画像をＡＲ再生させる場合、撮影された出力画像を表示部３６に表示し、表示部３６に表示された出力画像の表示部分において動画像が再生されるように制御する。また、制御部３８は、動画像を通常再生させる場合、表示部３６の全面ないし任意のサイズのウィンドウ内において動画像が再生されるように制御する。
【００６５】
第２転送部４０は、携帯端末１４とサーバ１２との間で、動画像、撮影画像などを含む、各種のデータを転送するものである。
【００６６】
次に、図４に示すフローチャートを参照しながら、画像処理装置１０において、ＡＲコンテンツを生成し、選択画像の出力画像（動画プリント）を出力する場合の動作を説明する。
【００６７】
まず、ユーザにより、携帯端末１４のタッチパネル４２（表示部３６）に表示された、図５（Ａ）に示す動画プリント管理画面を確認しながら、タッチパネル４２（入力部３４）を操作して、動画像（動画像データ）の送信指示が入力される（ステップＳ１）。
【００６８】
送信が指示された動画像は、第２転送部４０により、携帯端末１４からネットワーク１８を介してサーバ１２へ送信される。サーバ１２では、第１転送部３０により、携帯端末１４から送信されてきた動画像が受信され、記憶部２２に記憶される（ステップＳ２）。
【００６９】
続いて、コンテンツ生成部２０により、受信された動画像からフレーム画像（画像データ）が抽出され、抽出されたフレーム画像のサムネイル画像（画像データ）が生成される（ステップＳ３）。
【００７０】
生成されたサムネイル画像は、サーバ１２から携帯端末１４へ送信される。携帯端末１４では、図５（Ｂ）の画像確認画面に示すように、受信されたサムネイル画像が、タッチパネル４２（表示部３６）に一覧表示される（ステップＳ４）。
【００７１】
続いて、ユーザにより、タッチパネル４２（入力部３４）を操作して、タッチパネル４２（表示部３６）に一覧表示されたサムネイル画像の中から、１つのサムネイル画像が選択される（ステップＳ５）。図５（Ｂ）の例では、右下の太枠線で囲まれたサムネイル画像が選択されたものとする。
【００７２】
選択されたサムネイル画像の情報は、携帯端末１４からサーバ１２へ送信される。サーバ１２では、コンテンツ生成部２０により、動画像から抽出されたフレーム画像の中から、受信されたサムネイル画像の情報に対応するフレーム画像が選択画像として選択される（ステップＳ６）。
なお、サムネイル画像の代わりに、動画像から抽出されたフレーム画像を使用してもよい。
【００７３】
続いて、選択画像（画像データ）が、サーバ１２から携帯端末１４へ送信される。携帯端末１４では、受信された選択画像が、携帯端末１４のタッチパネル４２（表示部３６）に表示される（ステップＳ７）。
【００７４】
続いて、ユーザにより、タッチパネル４２（入力部３４）を操作して、タッチパネル４２（表示部３６）に表示された選択画像が編集される（ステップＳ８）。ユーザによって行われる編集処理には、例えば、図５（Ｃ）のフレーム選択画面に示すように、選択画像の背景となる背景フレームの選択や、図５（Ｄ）の画像トリミング画面に示すように、選択画像に対する画像補正、トリミング、拡大・縮小、回転等の処理が含まれる。
【００７５】
続いて、編集処理の情報が、携帯端末１４からサーバ１２へ送信される。サーバ１２では、コンテンツ生成部２０により、受信された編集処理の情報に基づいて選択画像が編集される。編集後の選択画像またはその特定情報が、選択画像の管理マーカとして、対応する動画像と関連付けられて記憶部２２に記憶される（ステップＳ９）。
なお、選択画像を編集することは必須ではない。
【００７６】
続いて、図５（Ｅ）のサイズ・枚数設定画面に示すように、ユーザにより、タッチパネル４２（入力部３４）を操作して、プリントサイズやプリント枚数等が設定され、編集後の選択画像のプリント出力の指示が入力される（ステップＳ１０）。
【００７７】
プリント出力の指示は、携帯端末１４からサーバ１２へ送信される。受信されたプリント出力の指示に対応する選択画像がサーバ１２からプリンタ１６へ送信され、プリンタ１６により、選択画像の出力画像（プリント物）が出力される（ステップＳ１１）。
出力画像は、ユーザに配達される。
【００７８】
以上のようにして、動画像と、動画像から抽出された選択画像とが関連付けられたＡＲコンテンツが記憶部２２に記憶されるとともに、選択画像の出力画像が出力される。
【００７９】
次に、図６に示すフローチャートを参照しながら、画像処理装置１０において、ＡＲ再生用の動画像を生成し、再生表示する場合の動作を説明する。
【００８０】
まず、画像撮影部３２により、選択画像の出力画像（プリント物）が撮影（キャプチャ）され、撮影画像（画像データ）が取得される（ステップＳ１２）。撮影された出力画像は、携帯端末１４のタッチパネル４２（表示部３６）に表示される。
【００８１】
取得された撮影画像は、第２転送部４０により、携帯端末１４からネットワーク１８を介してサーバ１２へ送信される。サーバ１２では、第１転送部３０により、携帯端末１４から送信されてきた撮影画像が受信される（ステップＳ１３）。
【００８２】
続いて、撮影画像解析部２４により、撮影画像の画像解析が行われ、撮影画像の管理マーカが取得される（ステップＳ１４）。
【００８３】
続いて、管理マーカ特定部２６により、記憶部２２に記憶された選択画像の管理マーカ中から、撮影画像の管理マーカに対応する選択画像の管理マーカが特定管理マーカとして特定される（ステップＳ１５）。
【００８４】
続いて、動画像処理部２８により、特定管理マーカに関連付けられた関連動画像から、ＡＲ再生用の動画像が生成される（ステップＳ１６）。
【００８５】
続いて、動画像処理部２８により生成されたＡＲ再生用の動画像は、サーバ１２から携帯端末１４へ送信される。携帯端末１４では、サーバ１２から送信されてきたＡＲ再生用の動画像が受信される（ステップＳ１７）。
【００８６】
ＡＲ再生用の動画像が受信されると、制御部３８の制御により、受信されたＡＲ再生用の動画像が、携帯端末１４のタッチパネル４２（表示部３６）に表示された出力画像の表示部分において再生して表示される（ステップＳ１８）。
【００８７】
以上のようにして、出力画像が撮影されると、撮影画像の管理マーカに対応する選択画像の管理マーカが特定され、特定管理マーカに関連付けられた関連動画像からＡＲ再生用の動画像が生成され、携帯端末１４で再生表示される。
【００８８】
なお、選択画像の出力画像を出力する場合、例えば、数字やアルファベットを含む文字列からなるアクセスキーを選択画像の出力画像に印刷してもよい。アクセスキーは、ユーザ毎に一意に決定されるものである。ユーザがアクセスキーを入力することにより、記憶部２２に記憶された選択画像の管理マーカの中から特定管理マーカを特定する場合に、各々のユーザがサーバ１２へ送信した動画像に関連付けられた選択画像の管理マーカの範囲に限定することができる。
【００８９】
また、携帯端末１４を使用することに限定されず、画像撮影部３２、入力部３４、表示部３６、制御部３８、第２転送部４０を備えるパーソナルコンピュータ等の制御装置を使用することもできる。
【００９０】
次に、本発明の画像撮影装置について説明する。
【００９１】
図７は、本発明の画像撮影装置の構成を表す一実施形態のブロック図である。同図に示す画像撮影装置５０は、図１に示す画像処理装置１０のような動画プリントを作成するシステム等で使用される動画像を撮影するものであり、動画像撮影部５２と、人物検出部５４と、人物情報記憶部５６と、人物評価部５８と、人物判定部６０と、撮影アシスト部６２と、入力部６４と、表示部６６とを備えている。
【００９２】
動画像撮影部５２は、動画プリントを作成するシステム等で使用される動画像を撮影するものである。
【００９３】
人物検出部５４は、動画像撮影部５２により撮影される動画像に含まれる人物を検出人物として検出するものである。人物検出部５４は、例えば、撮影中の動画像からフレーム画像を順次抽出し、抽出されたそれぞれのフレーム画像に含まれる人物の顔を検出し、フレーム画像から人物の顔が検出された場合に、検出されたそれぞれの人物の顔を有する人物を検出人物として出力する。
【００９４】
人物情報記憶部５６は、人物検出部５４により動画像から検出された検出人物の動きを追跡して、検出人物の過去の一定時間の行動、例えば、現時点から１分半前までの検出人物の行動を記憶するものである。
【００９５】
ここで、検出人物の行動とは、検出人物の動きの情報だけでなく、検出人物の表情、顔領域の位置やサイズ、動画像のフレームにおける撮影位置、目線、動画像に一人で撮影されているか否か、動画像に撮影されている時間、動作、音声等の情報を含んでいてもよい。また、検出人物の行動として、検出人物と他の人物および物との関係の情報、例えば、検出人物が他の人物と握手をしている、会話を行っている、検出人物がボールを持っている、運動している等の動きや動作の情報や、あるいは、検出人物の動きと、撮影日時、撮影場所等との関係の情報等を含んでいてもよい。
【００９６】
人物評価部５８は、人物情報記憶部５６に記憶された検出人物の過去の一定時間の行動に基づいて、検出人物を評価して点数を付けるものである。
【００９７】
ここで、人物評価部５８は、検出人物が笑顔なのか否か、検出人物の顔領域のサイズが大きいか否か、検出人物が動画像のフレームの中央部に撮影されているか否か、検出人物がカメラ目線か否か、検出人物が動画像に一人で撮影されているか否か、検出人物が動画像に撮影されている時間、検出人物が動画像からフレームアウトしているか否か等に応じて、検出人物の点数を増減させる。
【００９８】
人物評価部５８は、過去の一定時間内に、検出人物が笑顔である場合や、検出人物が動画像のフレームの中央部に撮影されている場合、検出人物が動画像のフレーム内に一人で撮影されている場合、検出人物がカメラ目線である場合等に、その検出人物の点数を増加させる。また、人物評価部５８は、過去の一定時間内に、動画像のフレーム内に撮影されている検出人物の顔領域のサイズが大きくなるほど、また、検出人物が動画像のフレーム内に撮影されている時間が長くなるほど、検出人物の点数を増加させる。
【００９９】
一方、人物評価部５８は、過去の一定時間内に、検出人物が動画像からフレームアウトしている時間が長くなるほど、検出人物の点数を減少させる。
【０１００】
なお、人物評価部５８は、上記のうちの１つを使用して検出人物の点数を増減させてもよいし、あるいは、上記の２以上を組み合わせて使用して検出人物の点数を増減させてもよい。
【０１０１】
人物判定部６０は、人物評価部５８により付与される検出人物の点数が一定値を超える場合に、検出人物が、動画像の撮影者が意図的に撮影している撮影対象人物であると判定するものである。また、人物判定部６０は、撮影対象人物の点数が一定値以下となった場合に、撮影対象人物ではなくなったと判定する。つまり、検出人物の点数が一定値を超えると撮影対象人物であると判定し、一定値以下になると撮影対象人物ではないと判定する。
【０１０２】
なお、人物判定部６０は、表示部６６に表示された、撮影中の動画像に含まれる検出人物の中から、ユーザにより入力部６４を介して指定される検出人物が、撮影対象人物であると判定してもよい。
【０１０３】
撮影アシスト部６２は、撮影対象人物が動画像に含まれる（撮影される）ように、撮影者および撮影対象人物の少なくとも一方の行動をアシストするものである。
【０１０４】
図８（Ａ）に示すように、例えば、木の右側にＡさん、木の左側にＢさんが立っている様子を、カメラワークとして、撮影位置（画像撮影装置５０）を右側から左側へ移動させながら動画像を撮影する場合を考える。
【０１０５】
この場合、撮影中の動画像のフレーム内には、まず、同図（Ｂ）に示すように、Ａさんが撮影され、続いて、同図（Ｃ）に示すように、Ａさんとその左側の木が撮影され、続いて、同図（Ｄ）に示すように、Ａさんおよび木とその左側のＢさんが撮影される。そして、このまま撮影位置を右側から左側へ移動しながら動画像の撮影を続けると、同図（Ｅ）に示すように、まず、Ａさんが動画像からフレームアウトする。
【０１０６】
このように、撮影アシスト部６２は、例えば、動画像の撮影位置の移動方向と撮影対象人物の移動方向との相対的な位置関係に基づいて、撮影対象人物が動画像からフレームアウトすると予測される場合に、つまり、図８（Ｄ）の状態から同図（Ｅ）の状態になる前に、撮影対象人物が動画像からフレームアウトすると予測されることを、撮影者および撮影対象人物の少なくとも一方に通知することができる。
【０１０７】
これにより、撮影対象人物が動画像からフレームアウトすることを未然に防ぐことができ、動画像に撮影対象人物を含めることができるため、動画プリントの生成に適した動画像を撮影することができる。
【０１０８】
なお、撮影アシスト部６２は、撮影対象人物が動画像からフレームアウトすると予測されることを、例えば、アイコンで表示部６６の画面に表示してもよいし、あるいは、音声やフラッシュ等により、撮影者および撮影対象人物の少なくとも一方に通知してもよい。
【０１０９】
また、撮影アシスト部６２は、図８（Ｄ）の状態から同図（Ｅ）の状態になる場合のように、撮影対象人物が動画像からフレームアウトした場合に、このフレームアウトした撮影対象人物が動画像のフレーム内に再び撮影されるまでの間、フレームアウトした撮影対象人物が動画像からフレームアウトしてから一定の期間（撮影対象人物の点数が一定値以下となり、撮影対象人物ではなくなるまでの時間）を上限として、フレームアウトした撮影対象人物がいる方向を撮影者に通知してもよい。
【０１１０】
これにより、撮影者は、撮影中の動画像に含まれている人物だけでなく、動画像から一時的にフレームアウトした撮影対象人物の現在の居場所（撮影対象人物がいる方向）を知ることができる。撮影者は、撮影対象人物が動画像からフレームアウトした場合であっても、フレームアウトした撮影対象人物を再び動画像に含めるように、動画像を撮影することができるため、動画プリントの生成に適した動画像を撮影することができる。
【０１１１】
なお、撮影アシスト部６２は、例えば、フレームアウトした撮影対象人物がいる方向を表す矢印を、撮影中の動画像が表示される表示部６６に表示したり、さらに、矢印を点滅させて表示部６６に表示したりしてもよい。
【０１１２】
あるいは、撮影アシスト部６２は、フレームアウトした撮影対象人物を表すアイコンを、フレームアウトした撮影対象人物がいる方向に対応する、撮影中の動画像が表示される表示部６６の画面の縁（辺）の中央部等に表示してもよい。アイコンは、図８（Ｅ）に示すように、撮影対象人物のＡさん、Ｂさん、Ｃさんを表す、Ａ、Ｂ、Ｃ等の記号で表してもよいし、Ａさん、Ｂさん、Ｃさんの顔をアイコン化して表示してもよい。この場合も、撮影アシスト部６２は、さらに、アイコンを点滅させて表示してもよい。
【０１１３】
また、撮影アシスト部６２は、複数の撮影対象人物が動画像に撮影されている場合に、複数の撮影対象人物が動画像に均等に撮影されるように、撮影累積時間が他の撮影対象人物よりも短い撮影対象人物がいる方向を撮影者に通知してもよい。この場合、撮影アシスト部６２は、それぞれの撮影対象人物が動画像に撮影された撮影累積時間を記憶しておき、例えば、記憶されている撮影累積時間が最も短い撮影対象人物がいる方向を撮影者に通知する。
【０１１４】
これにより、撮影者は、複数の撮影対象人物が均等に含まれるように動画像を撮影することができるため、動画プリントの生成に適した動画像を撮影することができる。
【０１１５】
なお、撮影対象人物が動画像からフレームアウトした場合に、フレームアウトした撮影対象人物がいる方向を撮影者に通知する処理と、複数の撮影対象人物が存在する場合に、撮影累積時間が他の撮影対象人物よりも短い撮影対象人物がいる方向を撮影者に通知する処理とは、同時に実施することができない。このため、前者を第１のモード、後者を第２のモードとして、ユーザにより指定されたモードに応じて、撮影アシスト部６２が動作するようにしてもよい。
【０１１６】
また、撮影アシスト部６２は、撮影対象人物が笑顔ではない、もしくは、話し声が少ない場合に、撮影対象人物が笑顔になる、もしくは、話し声が多くなるように促すことを、撮影者および撮影対象人物の少なくとも一方に通知してもよい。
【０１１７】
これにより、撮影対象人物が笑顔の動画像、もしくは、撮影対象人物が話をしている動画像を撮影することができるため、動画プリントの生成に適した動画像を撮影することができる。
【０１１８】
この場合、撮影アシスト部６２は、例えば、「撮影対象人物が笑顔になるように話しかけてください」のようなコメントを表示部６６上に表示する、もしくは、音声により、撮影者に通知してもよい。撮影者が、撮影対象人物に話しかけることにより、撮影対象人物を笑顔にさせたり、話をさせたりすることができる。あるいは、フラッシュを発光させて撮影対象人物に通知し、撮影対象人物の注意を引くことにより、カメラ目線の撮影対象人物を撮影することができる。
【０１１９】
なお、動画像の撮影位置が移動する場合を例に挙げて説明しているが、これに限定されず、撮影対象人物が移動している場合や、動画像の撮影位置が移動し、かつ、撮影対象人物が同時に移動している（両者が相対的に移動している）場合も同様である。
【０１２０】
入力部６４は、例えば、表示部６６に表示される撮影中の動画像に含まれる検出人物の中から、撮影対象人物となる検出人物を指定する指示等を含む、画像撮影装置５０のユーザにより入力される各種の指示を受け取るものである。
【０１２１】
表示部６６は、撮影中の動画像や、撮影済みの動画像等を再生して表示するものである。また、表示部６６には、動画像からフレームアウトした撮影対象人物がいる方向を表す矢印や、動画像からフレームアウトした撮影対象人物を表すアイコン等が表示される。
例えば、タッチパネルにより、入力部６４および表示部６６を構成することができる。
【０１２２】
次に、図９に示すフローチャートを参照しながら、画像撮影装置５０の動作を説明する。
【０１２３】
動画像撮影部５２により、動画像の撮影が開始される（ステップＳ２０）。
【０１２４】
続いて、人物検出部５４により、動画像撮影部５２により撮影される動画像に含まれる人物の検出が行われる（ステップＳ２１）。例えば、撮影中の動画像からフレーム画像が順次抽出され、抽出されたそれぞれのフレーム画像に含まれる人物の顔が検出される。
【０１２５】
続いて、フレーム画像から人物の顔、つまり、人物が検出されたか否かの確認が行われる（ステップＳ２２）。
【０１２６】
その結果、人物の顔が検出されていない場合（ステップＳ２２でＮｏ）は、ステップＳ２１へ戻り、人物の顔の検出が繰り返し行われる。
一方、人物の顔が検出された場合（ステップＳ２２でＹｅｓ）は、人物検出部５４により動画像から検出された検出人物の動きが追跡され、検出人物の過去の一定時間の行動が人物情報記憶部５６に記憶される（ステップＳ２３）。
【０１２７】
続いて、人物評価部５８により、検出人物の過去の一定時間の行動に基づいて、検出人物が評価され、点数が付けられる（ステップＳ２４）。
【０１２８】
続いて、人物判定部６０により、人物評価部５８により付与された検出人物の点数が一定値を超えているか否かの確認が行われる（ステップＳ２５）。
【０１２９】
その結果、検出人物の点数が一定値を超えていない場合（ステップＳ２５でＮｏ）は、ステップＳ２１へ戻り、人物の顔の検出が繰り返し行われる。
一方、検出人物の点数が一定値を超えている場合（ステップＳ２５でＹｅｓ）は、人物判定部６０により、その検出人物が撮影対象人物であると判定される（ステップＳ２６）。
【０１３０】
続いて、撮影対象人物が、動画像のフレーム内に撮影されているか否かの確認が行われる（ステップＳ２７）。
【０１３１】
その結果、撮影対象人物が動画像のフレーム内に撮影されている場合（ステップＳ２７でＹｅｓ）は、ステップＳ２６へ戻り、人物判定部６０により、その検出人物は依然として撮影対象人物であると判定される。
一方、撮影対象人物が動画像のフレーム内に撮影されていない場合、つまり、動画像からフレームアウトした場合（ステップＳ２７でＮｏ）は、ステップＳ２４へ戻り、人物評価部５８により、撮影対象人物が評価され、撮影対象人物が動画像からフレームアウトしている時間が長くなるほど、その撮影対象人物の点数が減少される。
【０１３２】
以下同様に、人物判定部６０により、撮影対象人物の点数が一定値を超えているか否かの確認が行われる（ステップＳ２５）。
【０１３３】
その結果、撮影対象人物の点数が一定値以下である場合（ステップＳ２５でＮｏ）は、人物判定部６０により、撮影対象人物ではなくなったと判定されて、ステップＳ２１へ戻り、人物の顔の検出が繰り返し行われる。
一方、撮影対象人物の点数が一定値を超えている場合（ステップＳ２５でＹｅｓ）は、人物判定部６０により、撮影対象人物であると判定される（ステップＳ２６）。これ以後の動作は同じである。
【０１３４】
上記の動作は、動画像撮影部５２により、動画像の撮影が終了されるまで繰り返される。
【０１３５】
画像撮影装置５０では、撮影中の動画像から人物を検出し、その検出人物の動きを追跡して、過去の一定時間の行動を記憶しておく。そして、過去の一定時間の行動に基づいて、検出人物を評価して点数を付け、点数が一定値を超える場合に、検出人物が撮影対象人物であり、点数が一定値以下の場合に、撮影対象人物ではなくなったと自動で判定し、撮影対象人物が動画像に含まれるように、撮影者および撮影対象者の少なくとも一方の行動をアシストする。
【０１３６】
これにより、画像撮影装置５０では、動画像の撮影中に、リアルタイムで撮影者および撮影対象者の少なくとも一方の行動がアシストされるため、撮影者は、動画プリントを生成するために適した動画像を撮影することができる。
【０１３７】
なお、本発明の画像撮影装置は、動画プリントを作成するシステムで使用される動画像に限らず、撮影対象人物が含まれている魅力的な動画像を撮影するために使用することができる。
【０１３８】
本発明の装置は、装置が備える各々の構成要素を専用のハードウェアで構成してもよいし、各々の構成要素をプログラムされたコンピュータで構成してもよい。
本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
【０１３９】
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０１４０】
１０  画像処理装置
１２  サーバ
１４  携帯端末
１６  プリンタ
１８  ネットワーク
２０  コンテンツ生成部
２２  記憶部
２４  撮影画像解析部
２６  管理マーカ特定部
２８  動画像処理部
３０  第１転送部
３２  画像撮影部
３４、６４  入力部
３６、６６  表示部
３８  制御部
４０  第２転送部
４２  タッチパネル
５０  画像撮影装置
５２  動画像撮影部
５４  人物検出部
５６  人物情報記憶部
５８  人物評価部
６０  人物判定部
６２  撮影アシスト部
【図１】
0006640460.tif 000002
【図２】
0006640460.tif 000003
【図３】
0006640460.tif 000004
【図４】
0006640460.tif 000005
【図５】
0006640460.tif 000006
【図６】
0006640460.tif 000007
【図７】
0006640460.tif 000008
【図８】
0006640460.tif 000009
【図９】
0006640460.tif 000010