(57)【要約】【課題】  フォトムービーの注文時に、顧客自身が行う編集条件の入力に要する手間を軽減する。【解決手段】  フォトムービーの編集条件を入力する際、切り出された静止画の一部を拡大表示するズームエフェクト又はパーンエフェクトが選択されると、静止画を切り出す対象となる切り出し領域の設定が行われる。切り出し領域の設定は、顧客により予め指定された特定の対象領域内から人物の顔画像が検出されることにより、顔画像の位置及び大きさに基づいて自動的に行われる。切り出し領域は、拡大表示された人物の顔の見映えがよくなるように適切な余白を有しており、人物の顔を基準として画像がズーム又はパーンする高品位のフォトムービーを容易に作成することができる。【選択図】        図３
2006148344.tif 000002
【特許請求の範囲】
【請求項１】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定するフォトムービーの編集条件設定装置において、
前記静止画から人物の顔画像を検出する顔画像検出手段と、
前記顔画像の検出時に、検出された顔画像の位置及び大きさに基づいて前記切り出し領域を決定する切り出し領域決定手段とを備えたことを特徴とするフォトムービーの編集条件設定装置。
【請求項２】
前記顔画像検出手段は、ディスプレイの表示画面に表示された前記静止画上で指定された特定の選択領域内の画像から前記顔画像を検出することを特徴とする請求項１記載のフォトムービーの編集条件設定装置。
【請求項３】
前記選択領域は、前記静止画上の少なくとも１つの任意のポイントが指定されることにより、指定されたポイントを基点とする所定の大きさの領域として画定されることを特徴とする請求項２記載のフォトムービーの編集条件設定装置。
【請求項４】
前記顔画像検出手段によって顔画像が検出された静止画に対し、画質補正処理を行う第１の画質補正手段を備えたことを特徴とする請求項１ないし３にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項５】
記憶媒体から前記静止画の画像データを読み出す画像読み出し手段と、
前記編集条件の設定を行う前に、読み出された全ての画像データに画質補正処理を行う第２の画質補正手段とを備えたことを特徴とする請求項１ないし４にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項６】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定する処理をコンピュータに実行させるフォトムービーの編集条件設定プログラムにおいて、
前記静止画から人物の顔画像を検出する顔画像検出手段と、
前記顔画像の検出時に、検出された顔画像の位置及び大きさに基づいて前記切り出し領域を決定する切り出し領域決定手段としてコンピュータを機能させることを特徴とするフォトムービーの編集条件設定プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、素材となる静止画から動画として観賞されるフォトムービーを作成するために必要な編集条件を設定するフォトムービーの編集条件設定装置及び編集条件設定プログラムに関する。
【背景技術】
【０００２】
フォトムービーは、デジタルカメラ等を用いて記録された静止画を加工編集して特殊効果を施すことにより、素材の静止画を動画に変換したものである。この特殊効果には、静止画の一部の領域に注目してズームイン／ズームアウトする電子ズーム効果、画像の一部の領域をクローズアップした状態で画像をスクロールさせる電子パーン効果、画像を縮小表示して直線又は曲線状に移動させる移動効果、特定の一点を中心に画像を回転させる回転効果、歪み（スキュー）を与える歪曲効果、これらを組み合わせた複合効果等がある。
【０００３】
フォトムービーでは、これらの特殊効果を使用して静止画に対する視点を擬似的に変化させることにより、特定の注目被写体を演出することや、画像を躍動的に表現することができる。また、複数の画像を同時に表示するマルチ画面効果、アニメーション画像や装飾画像、字幕の合成による視覚効果が併用されることや、これらの特殊効果を与えずにスライドショーとして画像を表示するものなど、その表示形態には様々なものがある。なお、以下の説明では、これらの特殊効果をエフェクトと称する。
【０００４】
特許文献１及び非特許文献１には、フォトムービーを作成するためのソフトウェアについて記載されている。これらのソフトウェアでは、フォトムービーの素材となる静止画を選択した後に、再生順序やエフェクトの種類等からなる編集条件を設定することでフォトムービーを作成することができる。作成されたフォトムービーは、これらのソフトウェア上で観賞することができる。また、フォトムービーの映像を汎用的なデジタル動画フォーマットに変換し、ＤＶＤ等の光ディスクに記録すれば、上記ソフトウェアを用いることなく、家庭用ＤＶＤプレイヤー等でフォトムービーを観賞できる。
【０００５】
非特許文献１に記載されたソフトウェアには、全ての画像の編集条件をユーザーが設定できるマニュアル編集モードと、素材とする画像を選択するだけでフォトムービーが自動的に作成される自動編集モードが用意されている。自動編集モードでは、静止画の選択順で再生順序が決定され、各画像のエフェクトの種類等はプログラムにより自動で設定されるので、操作手順が非常に簡単になる。
【特許文献１】特開平１０−２００８４３号公報
【非特許文献１】株式会社デジタルステージ  LIFE* with-Photo-Cinema  ［平成１６年４月６日検索］インターネット＜ＵＲＬ：http://www.digitalstage.net/jp/product/life/index.html＞
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述の自動編集モードは、画像の内容に基づいて適切にエフェクトが設定されるものではないため、電子ズーム効果や電子パーン効果のように画像を拡大表示するエフェクトが選択されたときに、人物の被写体を無視した映像になることがあり、ユーザーの希望する作品が得られにくいという欠点がある。また、従来のマニュアル編集モードを使用してこのような事態を回避しようとすると、画像を拡大表示するために切り出される静止画の特定の一部を決める切り出し領域の位置や大きさをユーザーが詳細に設定しなければならず、各画像の人物を画面上でバランスよく表示させるためには、大変な手間がかかるという問題がある。
【０００７】
本発明は、上記問題点を考慮してなされたもので、マニュアル編集モードを用いて人物の被写体を見映えよく表示するために要する手間が従来に比べて軽減でき、ユーザーが希望する作品をより簡単に作成できるようにしたフォトムービーの編集条件設定装置及び編集条件設定プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明は、静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定するフォトムービーの編集条件設定装置において、前記静止画から人物の顔画像を検出する顔画像検出手段と、前記顔画像の検出時に、検出された顔画像の位置及び大きさに基づいて前記切り出し領域を決定する切り出し領域決定手段とを備えたことを特徴とする。
【０００９】
前記顔画像検出手段は、ディスプレイの表示画面に表示された前記静止画上で指定された特定の選択領域内の画像から前記顔画像を検出することを特徴とする。
【００１０】
前記選択領域は、前記静止画上の少なくとも１つの任意のポイントが指定されることにより、指定されたポイントを基点とする所定の大きさの領域として画定されることを特徴とする。
【００１１】
前記顔画像検出手段によって顔画像が検出された静止画に対し、画質補正処理を行う第１の画質補正手段を備えたことを特徴とする。
【００１２】
記憶媒体から前記静止画の画像データを読み出す画像読み出し手段と、前記編集条件の設定を行う前に、読み出された全ての画像データに画質補正処理を行う第２の画質補正手段とを備えたことを特徴とする。
【００１３】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定する処理をコンピュータに実行させるフォトムービーの編集条件設定プログラムにおいて、前記静止画から人物の顔画像を検出する顔画像検出手段と、前記顔画像の検出時に、検出された顔画像の位置及び大きさに基づいて前記切り出し領域を決定する切り出し領域決定手段としてコンピュータを機能させることを特徴とする。
【発明の効果】
【００１４】
本発明によれば、画像の拡大表示を伴う電子ズーム効果、電子パーン効果のように、切り出し領域を設定する必要のあるエフェクトに関する編集条件を設定する場合に、静止画から人物の顔画像を検出し、検出された顔画像の位置及び大きさの少なくとも一方に基づいて切り出し領域が自動で決定されるから、人物の顔を見映えよく画面内に収められる編集条件を簡単に設定できる。また、全ての編集条件をユーザーが設定する従来技術と異なり、画像の拡大倍率を過度に高くしたときに拡大表示された画像が粗くなることでフォトムービーの品質低下を引き起こす切り出し領域の設定ミスを防止する効果も得られる。
【００１５】
また、画面上に表示された静止画上で特定の選択領域を指定し、指定された選択領域内の画像から顔画像を検出することにより、画像全体から顔画像を検出する場合に比べて顔画像の検出に要する時間を短縮できる。
【００１６】
また、ユーザーにより選択領域を指定する操作がなされる際、静止画上の任意の１点が指定されることで指定されたポイントを基点とする所定の大きさの選択領域が画定されるから、選択領域を指定する操作を簡単にできる。
【００１７】
顔画像が検出された静止画に対して画質補正処理を行うことにより、顔画像が拡大表示された際の画像の粗さによるフォトムービーの品質の低下を小さくすることができる。
【００１８】
記憶媒体から読み出される全ての静止画に対して画質補正処理を行うことにより、顔画像の検出精度を高めることができるとともに、編集条件の設定時点でフォトムービーのおおよその品質を知ることができる。
【発明を実施するための最良の形態】
【００１９】
図１において、フォトムービー注文受付システム１０は、注文受付機１１とフォトムービー出力機１２とにより構成されている。注文受付機１１とフォトムービー出力機１２はＤＰＥ店等の同一店舗内に設置され、店舗の構内ネットワーク（ＬＡＮ）により互いに通信可能に接続されている。なお、注文受付機１１がフォトムービー出力機１２に対して遠隔地に設置されていてもよく、この場合には、両者がインターネットを介して通信可能に接続されてもよい。
【００２０】
注文受付機１１は、顧客が注文内容を入力するための入力操作部１５と、フォトムービーに使用する静止画や編集条件を設定するための設定画面等が表示される表示部１６とを備えている。入力操作部１５は、表示部１６の表示画面と一体に設けられた透明なタッチパネルからなり、画面上に表示された選択キー等の位置に触れることで入力処理が行われる。メディア読取り部１７は、顧客が持参した記憶媒体から画像データを読取るもので、メモリカード１８とＣＤ又はＤＶＤの光ディスク１９とからデータの読取りが可能である。メモリカード１８は、デジタルカメラに着脱自在であり、撮影画像を保存するために用いられる。光ディスク１９は、パーソナルコンピュータ等に保存された画像データがコピーされ、メモリカード１８よりも多くの撮影画像を保存できる大容量記憶媒体である。
【００２１】
通信部２１は、注文受付機１１とフォトムービー出力機１２との間でデータの送受信を行う。レシート出力部２２は、顧客が商品を受け取る際の引換証となるレシート２３を発行する。レシート２３には、顧客の注文内容を識別するための識別情報が印刷されている。この識別情報は、注文番号、注文を受付けた受付機の識別コード、商品の受渡し日時及び受渡し店舗を示す情報等がバーコードと文字でそれぞれ記録されている。
【００２２】
制御部２５及び編集条件設定部２６は、注文受付機１１に内蔵された記憶装置に格納されたオペレーティングシステムとフォトムービーの編集条件を設定する編集条件設定プログラムとをマイクロプロセサに実行させることによりそれぞれ実現される。この記憶装置は、例えばハードディスク記憶装置（ＨＤＤ）又は多数のメモリチップからなるメモリユニットにより構成される。制御部２５は、メディア読取り部１７，通信部２１等の各ハードウェアを制御し、入力操作部１５でなされた操作に応じて各部の動作を管理する。
【００２３】
編集条件設定部２６では、顧客の入力操作等によりフォトムービーに使用する各静止画についてエフェクトの有無やその種類等の編集条件を設定するための処理が行われる。編集条件設定部２６は、予め用意されたシナリオテンプレートに従って全ての静止画のエフェクトを自動的に決定する自動編集モードと、顧客の手動設定により画像ごとにエフェクトの設定が行われるマニュアル編集モードとを有する。自動編集モードのシナリオテンプレートには、季節や年間行事等のテーマ別に複数種類のものが用意されており、旅行用のテンプレート、結婚式や卒業式用のテンプレート、正月、ひなまつり、七夕、クリスマス用のテンプレートなどがある。テンプレートごとに、撮影画像に合成される装飾画像の種類や、選ばれやすいエフェクトが異なっている。
【００２４】
プレビュー動画出力部２８は、編集条件設定部２６により設定された編集条件に基づいて、実際に作成されるフォトムービーと同様にエフェクトが付与されたプレビュー用フォトムービーを出力する。プレビュー動画出力部２８は、メモリカード１８や光ディスク１９から読み出した撮影画像の画素数を小さくした低解像度画像を生成し、この低解像度画像からプレビュー用フォトムービーを作成する。低解像度画像を用いることで、プレビュー用フォトムービーの生成及び再生表示に要するマイクロプロセサの負荷が軽減される。プレビュー用フォトムービーは表示部１６に表示され、その仕上がりの品質が顧客に伝えられる。
【００２５】
編集条件設定部２６は、シナリオデータ生成部２９と、切り出し領域設定部３０と、顔画像検出部３１とを有している。シナリオデータ生成部２９は、画像の再生順序、各画像のエフェクトの有無やその種類等が指定された編集条件を組み込んだシナリオデータを作成する。シナリオデータは、エフェクトの種類やその詳細な設定内容が画像データのファイル名に関連付けされることにより構成される。シナリオデータは、注文情報の一部として静止画の画像データとともにフォトムービー出力機１２に送信される。
【００２６】
切り出し領域設定部３０は、静止画の一部を切り出して特殊効果を付与するための切り出し領域を設定する。この切り出し領域は、静止画の一部に注目してズームイン又はズームアウトを行うズームエフェクトや、クローズアップした状態で画像をスクロールさせるパーンエフェクト、静止画の一部を除いて暗転表示することにより静止画にスポットライトを当てたような効果を出すスポットライトエフェクト等、静止画中の特定の被写体を注目させる場合に使用されるエフェクトのパラメータである。
【００２７】
例えば、ズームエフェクトでは、この切り出し領域により、ズームイン終了時の表示範囲、ズームアウト開始時の表示範囲が定められる。また、パーンエフェクトでは、パーンの開始及び終了時にクローズアップされる画像の抽出範囲が定められ、スポットライトエフェクトでは、明るく表示される領域が定められる。ズームエフェクトやパーンエフェクトでは、フォトムービーを再生表示する表示デバイスの画面のアスペクト比に基づいてアスペクト比が固定された矩形の切り出し領域が設定され、スポットライトエフェクトや他のエフェクトでは切り出し領域の形状を円形等の他の形状に指定することができる。なお、静止画全体を縮小又は等倍表示した状態から切り出し領域により定まる表示範囲の間で倍率を変化させて静止画を表示するズームエフェクトでは、１つの切り出し領域が設定される。クローズアップした状態で画像をスクロールさせるパーンエフェクトでは、複数の切り出し領域が設定される。これらの切り出し領域は、表示部１６の画面上に切り出し枠Ｆ１１（図４参照）として表示される。
【００２８】
顔画像検出部３１は、静止画中に存在する人物の顔画像を検出する。顔画像の検出が行われる際には、顔画像を検出する対象となる静止画上の特定の選択領域が顧客により指定され、この選択領域内部の顔画像が検出される。顔画像の検出処理は、静止画の画素ごとの色情報に基づいて肌色である皮膚が識別され、さらに瞳や眉毛、髪の有無から顔画像が識別される。また、顔の皮膚を示す肌色の画素と髪や眉毛、瞳を示す黒色の画素の配列パターンや、背景との輝度差等に基づき顔及び頭部の輪郭が識別され、顔の形状が特定される。
【００２９】
切り出し領域設定部３０には、顔画像検出部３１により検出された人物の顔が見映えよく表示されるように、検出された顔画像に基づいて顔画像の天地左右の余白を最適にする切り出し領域を画定するための推奨余白データが記憶されている。様々な撮影シーンにより最適とされる余白が異なるため、推奨余白データは、素材の静止画が横長の画像である場合と縦長の画像である場合ごとに、検出された顔画像の数（人数）や、それぞれの顔の位置関係、顔画像が静止画全体に占める割合等の特徴情報に応じて分類されたものが予め用意される。切り出し領域設定部３０は、指定された選択領域内から顔画像が検出されると、その特徴情報から推奨余白データを参照し、切り出し領域の位置及び大きさを決定する。
【００３０】
画質補正部３２は、画像データに対して色調補正等の画質補正処理を行う。画質補正処理には、メディア読取り部１７から読取られた全ての画像データに対して一律に行われるセットアップ補正処理と、顔画像検出部３１により人物の顔が認識された際に行われる高品位処理とがある。セットアップ補正処理では、全ての画像に対し、グレーバランスの調整、肌色画素の調子を整える色合い調整、コントラスト調整等の基本的な画質補正処理が行われる。高品位処理は、ズームエフェクトやパーンエフェクトのように、顔画像検出部３１により人物の顔が存在する静止画に対して行われるもので、撮影時のレンズ性能に起因する歪曲や周辺減光の補正、赤目補正処理、ノイズ低減処理、シャープネス補正、ジャギー低減処理等の画像の品質を高めるための画質補正処理が行われる。
【００３１】
フォトムービー出力機１２は、注文受付機１１より送信された注文情報を受信する通信部３５と、受信した注文情報が記憶される注文情報記憶部３６と、注文情報に組み込まれたシナリオデータを解析し、送信された画像データに基づいてフォトムービーを出力するフォトムービー出力部３７と、フォトムービーの映像を汎用的なデジタル動画フォーマットに準拠した映像に変換するビデオムービー変換部３８とを備えている。なお、デジタル動画フォーマットの１つとして、フォトムービーをＤＶＤ映像として観賞できるように、ＭＰＥＧ２−ＤＶＤ−Ｖｉｄｅｏフォーマットが採用されている。
【００３２】
制御部３９は、予め組み込まれた注文処理プログラムに基づいて各部を制御することにより、注文情報の処理から商品の仕上げまでの一連の流れを管理する。メディア記録部４０は、ＣＤ又はＤＶＤ等の光ディスク４１に対してフォトムービーのデータを記録する。ラベル印刷部４２は、注文内容を識別するための識別情報とフォトムービーの内容を示すラベル画像を光ディスク４１の表面にプリントする。
【００３３】
次にフォトムービー注文受付システム１０の作用について説明する。図２において、注文受付機１１のメディア読取り部１７に、静止画の画像データが記憶されたメモリカード１８又は光ディスク１９の記憶媒体がセットされると、制御部３９がセットされた記憶媒体を検知し、画像データの読み込みが開始される。
【００３４】
記憶媒体から画像データがコピーされると、画質補正部３２によって全ての画像データに対してセットアップ補正処理が行われる。また、セットアップ補正処理がなされた画像データからサムネイル画像が生成され、このサムネイル画像が表示部１６に一覧表示される。表示されたサムネイル画像を参考にしてフォトムービーの素材として用いる画像を選択することができ、全ての画像を使用するか、一部の画像を使用するかを決定する操作がなされる。
【００３５】
画像の選択が終了すると、選択された画像を用いてフォトムービーを自動で作成する自動編集モードと、再生順序やエフェクトの種類等を顧客が選択できるマニュアル編集モードのいずれかを選択する操作がなされる。自動編集モードが選択されると、編集条件設定部２６により、サムネイル画像の配列順に再生順序が決められ、各画像のエフェクトの有無やその種類が決定される。このとき、年間行事や季節等のテーマ別に予め用意されたシナリオテンプレートを選ぶことができる。
【００３６】
マニュアル編集モードでは、画像の再生順序、各画像のエフェクトの有無、エフェクトの種類、エフェクトのかけ方を示す詳細設定等の編集条件を顧客が自ら設定する。読み込まれた画像のサムネイル画像が表示部１６に一覧表示された状態で、入力操作部１５を介して表示部１６の画面上で画像の配列順を変更することにより画像の再生順序を決めることができる。また、所定の画像についてエフェクトを与えることを指定する項目が選択されることにより、そのエフェクトの詳細設定を行うためのステップに移る。
【００３７】
エフェクトには、ズームエフェクト、パーンエフェクトのように拡大表示を伴うエフェクト、静止画の一部を除いて暗転させるスポットライトエフェクト、静止画を画面上に縮小表示して画面の端から端へ直線又は曲線状に移動させるムーブエフェクトや、前に表示された静止画を徐々に透明にして次に表示される画像を徐々に濃くするフェードインエフェクト、装飾画像や字幕を合成する合成エフェクト、これらを組み合わせた複合エフェクトなど、多くの種類のエフェクトが用意されている。以下の説明では、パーンエフェクトを選択した場合を例にして説明する。
【００３８】
図３及び図４において、パーンエフェクトが選択されると、パーン動作の基点を指定するステップに移る。パーンエフェクトでは、パーン動作の基点として、パーン開始位置を示す始点、終了位置を示す終点となる切り出し領域が指定され、必要に応じて始点と終点の間の中継点を指定することができる。図４（ａ）に示すように、表示部１６の画面上には、エフェクトを指定した静止画を表示する編集ウインドウＷ１と、切り出し領域によって切り出される画像を表示するプレビューウインドウＷ２と、エフェクトの詳細設定を行うための設定ウインドウＷ３とが表示される。パーン動作の基点を指定する際には、編集ウインドウＷ１の画面上で人物の顔を指定する。
【００３９】
編集ウインドウＷ１には、パーンエフェクトが指定された画像として、例えば、被写体Ａ１及び被写体Ａ２が写る画像が表示される。設定ウインドウＷ３には、パーン動作の始点、終点、中継点を指定するための設定キーＫ１，Ｋ２，Ｋ３がそれぞれ表示される。パーン動作の始点を指定するためには、設定キーＫ１が操作される。表示部１６の画面上には、編集ウインドウＷ１上のポイントを指定するように促すメッセージが表示される。
【００４０】
パーン動作の始点が指定される際、顧客が被写体Ａ１の顔をクローズアップすることを希望した場合には、被写体Ａ１の顔の位置が指定される。編集ウインドウＷ１には、図４（ｂ）に示すように、指定された座標を示すマークＭ１と、顧客により指定された選択領域を示すものとしてマークＭ１を中心とする矩形状をした一定の大きさの選択枠ｆ１が表示される。なお、この選択枠ｆ１は、顧客の入力操作によりその大きさや形状が変更できるようにしてもよい。
【００４１】
顔画像検出部３１は、選択枠ｆ１の内部の顔検出処理を行う。顔検出処理により、選択枠ｆ１の内部から人物の顔が検出されると、その輪郭が特定され、特定された輪郭に基づいて顔画像の認識範囲が反転表示される。また、人物の顔が検出されない場合には、顔の確からしさを定める閾値が低く設定され、顔検出処理がやり直される。顔検出処理を２回行っても、人物の顔が検出できない場合にはエラーメッセージが表示され、パーン動作の始点を指定するステップに戻る。
【００４２】
選択枠ｆ１から被写体Ａ１の顔が検出されると、選択枠ｆ１に含まれる人数が１人であることが特定される。切り出し領域設定部３０は、被写体Ａ１の顔の位置及び大きさと、検出された人数が一人であることに基づいて推奨余白データを参照し、最適な切り出し領域の位置及び大きさを算出する。この最適化された切り出し領域は、切り出し枠Ｆ１１として表示される。なお、切り出し枠Ｆ１１の中心は、顔の認識範囲の中心Ｃ１と同一である。プレビューウインドウＷ２には、切り出し枠Ｆ１１によって切り出される画像が表示される。このようにして切り出し領域が決定し、パーン動作の始点の設定が終了する。
【００４３】
次に、設定ウインドウＷ３の設定キーＫ２が操作されることにより、パーン動作の終点を指定するステップに移る。顧客が被写体Ａ２の顔をクローズアップすることを希望した場合には、編集ウインドウＷ１上で被写体Ａ２の顔が指定される。編集ウインドウＷ１には、指定された座標を示すマークＭ２と、顧客により指定された切り出し領域を示すものとしてマークＭ２を中心とする矩形状の選択枠ｆ２が表示される。
【００４４】
顔画像検出部３１は、選択枠ｆ２について顔検出処理を行う。これにより、被写体Ａ２の顔が検出される。また、被写体Ａ２の顔の輪郭が特定され、顔画像の認識範囲が反転表示されるとともに、選択枠ｆ２に含まれる人数が１人であることが特定される。切り出し領域設定部３０は、検出された被写体Ａ２の顔の位置及び大きさに基づいて推奨余白データを参照し、最適な切り出し領域の位置及び大きさを算出する。この最適化された切り出し領域は、切り出し枠Ｆ２１として表示される。また、切り出し枠Ｆ２１の中心は、被写体Ａ２の顔の認識範囲の中心Ｃ２と同じになる。
【００４５】
推奨余白データに基づいて決定された切り出し領域を示す切り出し枠Ｆ２１は、図５（ｂ）に斜線部で示す画像の外部領域Ｈ１を包含している。このため、被写体Ａ２をクローズアップした映像は外部領域Ｈ１による黒帯部が混入することになる。このため、切り出し領域設定部３０は、切り出し枠Ｆ２１をその中心Ｃ２を維持したまま縮小し、外部領域Ｈ１を含まないように切り出し領域を修正する。この切り出し領域は、切り出し枠Ｆ２２として表示される。プレビューウインドウＷ２には、切り出し枠Ｆ２２によって切り出される画像が表示される。このようにして、パーン動作の終点が切り出し枠Ｆ２２で示される切り出し領域により決定する。
【００４６】
パーンエフェクトの始点及び終点が切り出し枠Ｆ１１，切り出し枠Ｆ２２によってそれぞれ決定され、パーンエフェクトの詳細設定が終了すると、画質補正部３２によりパーンエフェクトが指定された画像の高品位処理が行われる。高品位処理により、被写体Ａ１及び被写体Ａ２の顔を拡大表示したときに生じる画質の低下が小さくされ、フォトムービーの品質が損なわれることが防止される。
【００４７】
図６において、パーンエフェクトが設定されたフォトムービーの映像は、被写体Ａ１の顔をクローズアップした映像から始まり（図６（ａ））、画面上で被写体Ａ１から被写体Ａ２に向かって画面が移動して擬似的なパーンが再現され（図６（ｂ））、被写体Ａ２の顔をクローズアップした映像に移行して１つのシーンが終了する（図６（ｃ））。なお、パーンエフェクトでは、切り出し枠Ｆ１１によって切り出された画像を画面全体に拡大して表示するため、切り出し枠Ｆ１１が小さければその分だけ拡大倍率は大きくなり、切り出し枠Ｆ１１が大きければ拡大倍率が小さくなる。また、パーン動作の始点と終点の少なくとも２つの切り出し領域が指定されるため、切り出し枠Ｆ１１と切り出し枠Ｆ２２の大きさが異なれば、パーン動作中に拡大倍率が変化する。
【００４８】
図２において、その他の画像についてもエフェクトの有無、その種類等の設定がなされ、全ての編集条件の入力が終了すると、プレビュー動画出力部２８によりプレビュー用のフォトムービーが作成され、表示部１６に表示される。顧客は、プレビュー用フォトムービーを確認し、編集条件を変更する必要がなければ次のステップに移る操作を行い、氏名や住所等の個人情報を入力するステップに移る。これらの入力処理が終了すると、シナリオデータ生成部２９により全ての編集条件を記録したシナリオデータが作成される。また、制御部２５は、シナリオデータ、画像データ、顧客の個人情報、注文内容を識別するための識別情報等をまとめた注文情報を作成し、通信部２１を介して注文情報をフォトムービー出力機１２に送信する。
【００４９】
注文情報の送信が終了すると、制御部３９はレシート出力部２２を作動させる。レシート出力部２２が、注文内容の識別情報をプリントしたレシート２３を発行すると、注文受付処理が終了する。
【００５０】
注文情報を受信したフォトムービー出力機１２では、注文情報に組み込まれたシナリオデータ及び画像データに基づいてフォトムービーが作成される。作成されたフォトムービーは、注文内容に基づき、ＤＶＤ映像として観賞できるＭＰＥＧ２−ＤＶＤ−Ｖｉｄｅｏフォーマット等の映像データに変換され、この映像データがメディア記録部４０によりＤＶＤ等の光ディスク４１に記録される。フォトムービーが記録された光ディスク４１は、レシート２３と引換に顧客に渡される。
【００５１】
以上のように、本発明の実施形態について説明したが、本発明は上記実施形態に限られるものではなく、例えば、注文受付機１１とフォトムービー出力機１２のように、編集条件の入力設定とフォトムービーの作成を別々の機器により分担して行うことに限らず、これらを１つの装置により行えるようにしてもよい。また、注文受付機１１の機能と同等なアプリケーションプログラムを配布し、これを顧客が所有するパーソナルコンピュータに組み込むことにより、編集条件の入力設定とフォトムービーの注文を自宅からインターネット等の通信手段を介して行えるようにしてもよい。
【００５２】
また、顔画像検出部３１により複数の顔画像が複数検出された場合には、切り出し領域を決定する基準となる顔画像を指定するステップを追加することで、検出された顔画像の全て又は一部を自由に指定できるようにし、撮影シーンの多様な複数の静止画を素材とする場合であっても、簡単な操作でフォトムービーの編集条件を設定できるようにすることが好ましい。また、人物の顔画像を検出することに加え、人物の全身像、あるいは動物や植物、観光名所を例とする建造物や地形等が検出できるようにしてもよい。
【００５３】
上記実施形態は、表示部１６の画面と一体にしたタッチパネルによって入力操作部１５を構成しているが、ポインティングデバイス等の他の入力装置により構成してもよい。選択枠ｆ１，ｆ２に示される特定の選択領域を指定する際には、上記実施形態に示すように静止画上の１点の座標を指定することに限らず、矩形の対角線上に位置する２つの座標を指定するようにしてもよい。また、選択領域を指定した後に人物の顔画像を検出することに限らず、画像全体から人物の顔を検出した後に選択領域を指定することにより適切な切り出し領域が決定されるようにしてもよい。この場合、静止画中に一人の顔画像しか検出されなければ自動的に最適化された切り出し領域を決定でき、その画像について選択できるエフェクトとして、必要な切り出し領域が１つであるズームエフェクトを候補として示し、複数の切り出し領域が必要なパーンエフェクトを予め除外するようにしてもよい。
【００５４】
また、商品形態としては、ＤＶＤメディアにビデオムービー形式のデータを記録したものに限らず、例えば、フォトムービーのビューワーソフトをユーザーに配布し、このビューワーソフトをインストールしたコンピュータ上で再生できる形式のデータを静止画の画像データとともに記録してもよい。また、素材となる静止画は、デジタルカメラで記録された画像の他に、プリント写真や写真フイルムをスキャナーで読取って得られた画像や、動画から抽出した１コマの画像であってもよい。
【図面の簡単な説明】
【００５５】
【図１】フォトムービー注文受付システムの概略構成図である。
【図２】注文受付機の処理の流れを示すフローチャートである。
【図３】切り出し枠設定処理の流れを示すフローチャートである。
【図４】パーンエフェクトの始点設定時における画面の様子を示す説明図である。
【図５】パーンエフェクトの終点設定時における画面の様子を示す説明図である。
【図６】フォトムービーの映像の移り変わりを示す説明図である。
【符号の説明】
【００５６】
１０  フォトムービー注文受付システム
１１  注文受付機
１２  フォトムービー出力機
１５  入力操作部
２６  編集条件設定部
２８  プレビュー動画出力部
２９  シナリオデータ生成部
３０  切り出し領域設定部
３１  顔画像検出部
３２  画質補正部
Ａ１，Ａ２  被写体
ｆ１，ｆ２  選択枠
Ｆ１１，Ｆ２１，Ｆ２２  切り出し枠
Ｗ１  編集ウインドウ
Ｗ２  プレビューウインドウ
Ｗ３  設定ウインドウ
【図１】
2006148344.tif 000003
【図２】
2006148344.tif 000004
【図３】
2006148344.tif 000005
【図４】
2006148344.tif 000006
【図５】
2006148344.tif 000007
【図６】
2006148344.tif 000008