(57)【要約】【課題】  見栄えのよいフォトムービーを作成する。【解決手段】  フォトムービー作成装置２のメモリ１１には、フォトムービー作成プログラム１５が記憶されている。フォトムービー作成プログラム１５が起動すると、ＣＰＵ１０には、位置検出部１７、および画像編集部１８が生成される。位置検出部１７は、静止画像２０内の注目被写体２１を含む特定の部位を切り出すための切り出し枠２２の中心２２ａからその端縁２２ｂまでの距離Ｌ１と、端縁２２ｂ側にある静止画像の端縁２０ａから注目被写体２１の中心２１ａまでの距離Ｌ２とを検出する。画像編集部１８は、距離Ｌ１と距離Ｌ２との大小関係を比較し、距離Ｌ１が距離Ｌ２よりも大きい場合には、切り出し枠２２が静止画像２０外の画像データの無い領域にはみ出さないように、切り出し枠２２のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御する。【選択図】        図１
2006094053.tif 000002
【特許請求の範囲】
【請求項１】
静止画像を編集してフォトムービーを作成するフォトムービー作成方法であって、
前記静止画像内にある注目被写体を含む特定の部位を、前記注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、前記静止画像の端縁、前記切り出し枠、および前記注目被写体の位置関係を検出し、
この検出結果に基づいて、前記切り出し枠が前記静止画像外の画像データの無い領域にはみ出さないように、前記切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御することを特徴とするフォトムービー作成方法。
【請求項２】
前記切り出し枠の中心からその端縁までの距離Ｌ１と、前記切り出し枠の端縁側にある前記静止画像の端縁から前記注目被写体の中心までの距離Ｌ２とを検出することにより、前記位置関係の検出を行うとともに、
距離Ｌ１と距離Ｌ２との大小関係を比較して、距離Ｌ１が距離Ｌ２よりも大きい場合に、前記制御を行うことを特徴とする請求項１に記載のフォトムービー作成方法。
【請求項３】
静止画像を編集してフォトムービーを作成するフォトムービー作成装置であって、
前記静止画像内にある注目被写体を含む特定の部位を、前記注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、前記静止画像の端縁、前記切り出し枠、および前記注目被写体の位置関係を検出する位置検出手段と、
この検出結果に基づいて、前記切り出し枠が前記静止画像外の画像データの無い領域にはみ出さないように、前記切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御する画像編集手段とを備えたことを特徴とするフォトムービー作成装置。
【請求項４】
前記位置検出手段は、前記切り出し枠の中心からその端縁までの距離Ｌ１と、前記切り出し枠の端縁側にある前記静止画像の端縁から前記注目被写体の中心までの距離Ｌ２とを検出するとともに、
前記画像編集手段は、距離Ｌ１と距離Ｌ２との大小関係を比較して、距離Ｌ１が距離Ｌ２よりも大きい場合に、前記制御を行うことを特徴とする請求項３に記載のフォトムービー作成装置。
【請求項５】
静止画像を編集してフォトムービーを作成することをコンピュータに実行させるためのフォトムービー作成プログラムであって、
前記静止画像内にある注目被写体を含む特定の部位を、前記注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、前記静止画像の端縁、前記切り出し枠、および前記注目被写体の位置関係を検出し、
この検出結果に基づいて、前記切り出し枠が前記静止画像外の画像データの無い領域にはみ出さないように、前記切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御することを前記コンピュータに実行させることを特徴とするフォトムービー作成プログラム。
【請求項６】
前記切り出し枠の中心からその端縁までの距離Ｌ１と、前記切り出し枠の端縁側にある前記静止画像の端縁から前記注目被写体の中心までの距離Ｌ２とを検出することにより、前記位置関係の検出を行うとともに、
距離Ｌ１と距離Ｌ２との大小関係を比較して、距離Ｌ１が距離Ｌ２よりも大きい場合に、前記制御を行うことを前記コンピュータに実行させることを特徴とする請求項５に記載のフォトムービー作成プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、静止画像を編集してフォトムービーを作成するフォトムービー作成方法および装置、並びに静止画像を編集してフォトムービーを作成することをコンピュータに実行させるためのフォトムービー作成プログラムに関する。
【背景技術】
【０００２】
従来、デジタルカメラなどで撮影した静止画像を編集してフォトムービー（いわゆる擬似動画）を作成する方法が種々提案されている（特許文献１および２参照）。このようなフォトムービー作成方法では、ユーザーが製作意図に応じて作成したシナリオに基づいて、画像の選択、変形（拡大・縮小、回転など）、変倍、マスク（画像の一部切り出し、貼り付け）、移動、合成などの各種処理を複数の静止画像に対して施し、フォトムービーを作成している。これにより得られたフォトムービーは、ユーザーが所有するパーソナルコンピュータのモニタで鑑賞するのは勿論のこと、ＤＶＤ（Digital Versatile Disk）などの記録媒体に記録したり、プリンタで印刷出力するなどして楽しむことができる。
【０００３】
一方、静止画像を表す画像データが格納された画像ファイルに、その画像をズームした画像のズーム倍率、ズーム位置を示すデータを含むシナリオデータを格納し、再生時には、シナリオデータに従って、その画像の表示に続いてズーム画像を表示する画像再生方法が提案されている（特許文献３参照）。
【特許文献１】特開平６−１４２９２号公報
【特許文献２】特開平６−３０３８０号公報
【特許文献３】特開２００１−９４９２４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献３に記載の画像再生方法のように、静止画像内の注目被写体（人物の顔など）を含む特定の部位を切り出す際には、普通、見栄えを考慮して、切り出し枠の中心と注目被写体の中心とを一致させている。しかしながら、切り出す注目被写体が画像の端縁に近い箇所にある場合、切り出し枠のサイズや切り出す位置によっては、静止画像外の画像データが無い領域も含めて切り出してしまい、返って見栄えを悪くすることがあった。
【０００５】
本発明は、上記課題を鑑みてなされたものであり、見栄えのよいフォトムービーを作成することができるフォトムービー作成方法および装置、並びにフォトムービー作成プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、請求項１に記載の発明は、静止画像を編集してフォトムービーを作成するフォトムービー作成方法であって、前記静止画像内にある注目被写体を含む特定の部位を、前記注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、前記静止画像の端縁、前記切り出し枠、および前記注目被写体の位置関係を検出し、この検出結果に基づいて、前記切り出し枠が前記静止画像外の画像データの無い領域にはみ出さないように、前記切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御することを特徴とする。
【０００７】
なお、前記切り出し枠の中心からその端縁までの距離Ｌ１と、前記切り出し枠の端縁側にある前記静止画像の端縁から前記注目被写体の中心までの距離Ｌ２とを検出することにより、前記位置関係の検出を行うとともに、距離Ｌ１と距離Ｌ２との大小関係を比較して、距離Ｌ１が距離Ｌ２よりも大きい場合に、前記制御を行うことが好ましい。
【０００８】
請求項３に記載の発明は、静止画像を編集してフォトムービーを作成するフォトムービー作成装置であって、前記静止画像内にある注目被写体を含む特定の部位を、前記注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、前記静止画像の端縁、前記切り出し枠、および前記注目被写体の位置関係を検出する位置検出手段と、この検出結果に基づいて、前記切り出し枠が前記静止画像外の画像データの無い領域にはみ出さないように、前記切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御する画像編集手段とを備えたことを特徴とする。
【０００９】
なお、前記位置検出手段は、前記切り出し枠の中心からその端縁までの距離Ｌ１と、前記切り出し枠の端縁側にある前記静止画像の端縁から前記注目被写体の中心までの距離Ｌ２とを検出するとともに、前記画像編集手段は、距離Ｌ１と距離Ｌ２との大小関係を比較して、距離Ｌ１が距離Ｌ２よりも大きい場合に、前記制御を行うことが好ましい。
【００１０】
請求項５に記載の発明は、静止画像を編集してフォトムービーを作成することをコンピュータに実行させるためのフォトムービー作成プログラムであって、前記静止画像内にある注目被写体を含む特定の部位を、前記注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、前記静止画像の端縁、前記切り出し枠、および前記注目被写体の位置関係を検出し、この検出結果に基づいて、前記切り出し枠が前記静止画像外の画像データの無い領域にはみ出さないように、前記切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御することを前記コンピュータに実行させることを特徴とする。
【００１１】
なお、前記切り出し枠の中心からその端縁までの距離Ｌ１と、前記切り出し枠の端縁側にある前記静止画像の端縁から前記注目被写体の中心までの距離Ｌ２とを検出することにより、前記位置関係の検出を行うとともに、距離Ｌ１と距離Ｌ２との大小関係を比較して、距離Ｌ１が距離Ｌ２よりも大きい場合に、前記制御を行うことを前記コンピュータに実行させることが好ましい。
【発明の効果】
【００１２】
本発明のフォトムービー作成方法および装置、並びにフォトムービー作成プログラムによれば、静止画像内にある注目被写体を含む特定の部位を、注目被写体の中心と切り出し枠の中心とを一致させて切り出す際に、静止画像の端縁、切り出し枠、および注目被写体の位置関係を位置検出手段で検出し、この検出結果に基づいて、切り出し枠が静止画像外の画像データの無い領域にはみ出さないように、切り出し枠のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを画像編集手段で制御するので、見栄えのよいフォトムービーを作成することができる。
【発明を実施するための最良の形態】
【００１３】
図１において、本発明を適用したフォトムービー作成装置２は、ＣＰＵ１０により全体を統括的に制御される。ＣＰＵ１０には、メモリ１１、モニタ１２、操作部１３、および通信Ｉ／Ｆ１４が接続されている。
【００１４】
メモリ１１には、フォトムービー作成装置２の起動時に必要な各種プログラムやデータをはじめ、フォトムービー作成プログラム１５が記憶されている。また、デジタルカメラ１６から通信Ｉ／Ｆ１４を介して送信される画像データや、作成したフォトムービーが記憶される。
【００１５】
モニタ１２は、前述の画像データやフォトムービーなどを表示する。操作部１３は、キーボードやマウスなどからなり、画像編集時の各種パラメータ設定時に操作される。ＣＰＵ１０は、この操作部１３の操作に応答して、フォトムービー作成装置２の各部の動作を制御する。通信Ｉ／Ｆ１４は、デジタルカメラ１６などの外部機器とのデータの送受信を行う。
【００１６】
フォトムービー作成装置２は、複数の静止画像を編集することによって、例えば図２の（Ａ）〜（Ｃ）に示すような、電子ズーム処理やパン処理などの特殊効果を施したシーンＡ〜Ｃを作成する。（Ａ）のシーンＡは、親子二人が写っているフレームＡ１から、子どもの顔に焦点を当ててその部分を徐々にクローズアップさせるフレームＡ２、Ａ３を経て、子供の顔のアップであるフレームＡ４へ至る。このシーンＡを構成する各フレームＡ２〜Ａ４は、フレームＡ１に対応する静止画像内の一部分にズームポイントを合わせて電子ズーム処理を施し、その画像から拡大倍率の異なる部分画像を切り出していくことで生成する。
【００１７】
（Ｂ）のシーンＢは、道の地面を写したフレームＢ１から、徐々にズームアウトしてその道の延長上にある山を遠景として捉えたフレームＢ４へ至る。このシーンＢを構成する各フレームＢ１〜Ｂ３も、シーンＡのフレームＡ２〜Ａ４と同様に、フレームＢ４に対応する静止画像の一部分にズームポイントを合わせて電子ズーム処理を施し、その画像から拡大倍率の異なる部分画像を切り出していくことで生成する。
【００１８】
（Ｃ）のシーンＣは、あたかもカメラを左右にパンさせているように、山の左端の裾野を捉えるフレームＣ１から、画面中央に位置する山を捉えるフレームＣ２、Ｃ３を経て、右端の裾野を捉えるフレームＣ４へ至る。このシーンＣを構成する各フレームＣ１〜Ｃ４は、山全体を遠景で捉える静止画像の一部を切り出して、これを左から右へ移動させることで生成する。フォトムービー作成装置２は、こうしたシーンを繋ぎ合わせることでフォトムービーを作成する。なお、ここでは、各シーンが４フレームから構成されているかのように表現されているが、あくまでも説明の便宜上の表現であり、実際のシーンを構成するフレームの数はこれよりもはるかに多い。
【００１９】
ここで、フォトムービー作成装置２では、静止画像内にある注目被写体（人物の顔や、建物、山の頂上などのランドマーク）を、操作部１３によりユーザーが直接指定することで、あるいは、周知の画像認識技術を用いて自動的に抽出することで、ズーム処理やパン処理でメインとすべきいわゆるキメ画像が決定される。図２（Ａ）のシーンＡを例にとると、キメ画像はフレームＡ４にあたり、注目被写体は子どもの顔にあたる。なお、キメ画像であるフレームＡ４までに至るフレームＡ１〜Ａ３の切り出し枠のサイズ、および切り出し位置は、フォトムービー作成プログラム１５で予め設定された条件で選定される。
【００２０】
図１において、操作部１３の操作によりフォトムービー作成プログラム１５を起動すると、ＣＰＵ１０には、位置検出部１７、および画像編集部１８が生成される。図３に示すように、位置検出部１７は、前述の電子ズーム処理やパン処理を施す際に、静止画像２０内の注目被写体２１（この場合は子どもの顔）を含む特定の部位（図中斜線で示す）を切り出すための切り出し枠（図中一点鎖線で示す）２２の中心２２ａからその端縁２２ｂまでの距離Ｌ１と、端縁２２ｂ側にある静止画像の端縁２０ａから注目被写体２１の中心２１ａ（この場合は子どもの顔の中心）までの距離Ｌ２とを検出する。位置検出部１７は、この距離Ｌ１およびＬ２の検出結果を画像編集部１８に送信する。なお、図３では、煩雑を避けるために静止画像２０の右側の距離Ｌ１およびＬ２のみを表記しているが、位置検出部１７は、上下左右４方向について、それぞれ距離Ｌ１およびＬ２を検出する。
【００２１】
画像編集部１８は、位置検出部１７から送信された検出結果に基づいて、切り出し枠２２が静止画像２０外の画像データの無い領域にはみ出さないように、切り出し枠２２のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを制御する。
【００２２】
具体的には、距離Ｌ１と距離Ｌ２との大小関係を比較し、距離Ｌ１が距離Ｌ２よりも大きい場合には、子どもの顔を注目被写体とした図４（Ａ）のパン処理の例に示すように、キメ画像であるフレーム３の切り出し位置を下方に移動させる。これにより、（Ｂ）に示す制御前のシーンでは、フレーム３の上方に画像データの無い領域が黒塗り画像（図中ハッチング部分）として現れるのに対して、（Ｃ）に示す制御後のシーンでは、フレーム３に黒塗り画像は現れない。
【００２３】
また、図４と同様に子どもの顔を注目被写体とした図５（Ａ）のズーム処理の例に示すように、キメ画像であるフレーム３の切り出し枠２２のサイズを、切り出し枠２２の中心に注目被写体２１の中心２１ａを一致させたまま縮小する。これにより、（Ｂ）に示す制御前のシーンでは、図４（Ｂ）の場合と同様に、フレーム３の右方に画像データの無い領域が黒塗り画像（図中ハッチング部分）として現れるのに対して、（Ｃ）に示す制御後のシーンでは、フレーム３に黒塗り画像は現れない。
【００２４】
一方、画像編集部１８は、距離Ｌ１が距離Ｌ２以下である場合には、切り出し枠２２の中心２２ａに注目被写体２１の中心２１ａを一致させるように切り出し位置を決定する。
【００２５】
画像編集部１８は、前述の切り出し枠２２のサイズ、切り出し位置を制御しながら、ユーザーが製作意図に応じて操作部１３から入力したシナリオに基づいて、画像の選択、変形（拡大・縮小、回転など）、変倍、マスク（画像の一部切り出し、貼り付け）、移動、合成などの各種処理を施し、フォトムービーを作成する。ＣＰＵ１０は、操作部１３の操作に応じて、作成したフォトムービーをモニタ１２に表示するとともに、メモリ１１に記憶する。
【００２６】
次に、上記構成を有するフォトムービー作成装置２の処理手順について、図６のフローチャートを参照して説明する。まず、フォトムービー作成装置２の電源が投入されて、通信Ｉ／Ｆ１４を介してデジタルカメラ１６が接続され、デジタルカメラ１６からメモリ１１に画像データが取り込まれる。これと前後して、操作部１３が操作されてフォトムービー作成プログラム１５が起動される。
【００２７】
フォトムービー作成プログラム１５が起動されると、ＣＰＵ１０に位置検出部１７、および画像編集部１８が生成される。ズーム処理やパン処理でメインとなるキメ画像が決定されると、位置検出部１７では、キメ画像を切り出す切り出し枠２２の中心２２ａからその端縁２２ｂまでの距離Ｌ１と、端縁２２ｂ側にある静止画像の端縁２０ａから注目被写体２１の中心２１ａまでの距離Ｌ２とが、上下左右４方向についてそれぞれ検出される。距離Ｌ１およびＬ２の検出結果は、位置検出部１７から画像編集部１８に送信される。
【００２８】
画像編集部１８では、距離Ｌ１と距離Ｌ２との大小関係が比較され、距離Ｌ１が距離Ｌ２よりも大きい場合に、切り出し枠２２が静止画像２０外の画像データの無い領域にはみ出さないように、切り出し枠２２のサイズ、またはその切り出し位置のうち、少なくともいずれか１つが制御される。一方、距離Ｌ１が距離Ｌ２以下である場合は、切り出し枠２２の中心２２ａに注目被写体２１の中心２１ａを一致させるように切り出し位置が決定される。また、ユーザーが製作意図に応じて操作部１３から入力したシナリオに基づいて各種処理が施され、フォトムービーが作成される。作成されたフォトムービーは、モニタ１２に表示されるとともに、メモリ１１に記憶される。
【００２９】
上記のように、静止画像２０内にある注目被写体２１を含む特定の部位を切り出し枠２２で切り出す際に、距離Ｌ１およびＬ２を位置検出部１７で検出し、この検出結果に基づいて、切り出し枠２２が静止画像２０外の画像データの無い領域にはみ出さないように、切り出し枠２２のサイズ、またはその切り出し位置のうち、少なくともいずれか１つを画像編集部１８で制御するので、画像データの無い領域が黒塗り画像として現れることがなく、見栄えのよいフォトムービーを作成することができる。
【００３０】
上記実施形態では、矩形状の切り出し枠２２を例示して説明したが、本発明はこれに限定されず、例えば円形や星型形状の切り出し枠を用いた場合も有効である。
【００３１】
なお、上記実施形態で挙げた特殊効果は一例であり、本発明を特に限定するものではない。また、複数の静止画像に限らず、１つの静止画像を編集してフォトムービーを作成した場合も、本発明を適用することができる。
【００３２】
さらに、フォトムービー作成装置２にＤＶＤレコーダを内蔵させ、作成したフォトムービーをＤＶＤに記録したり、プリンタを接続してフォトムービーの１シーンを印刷出力してもよい。
【図面の簡単な説明】
【００３３】
【図１】本発明を適用したフォトムービー作成装置の構成を示すブロック図である。
【図２】フォトムービー作成装置で生成されるシーンの例を示す説明図であり、（Ａ）、（Ｂ）はズーム処理、（Ｃ）はパン処理を施した場合をそれぞれ示す。
【図３】静止画像、切り出し枠、および注目被写体の位置関係を示す説明図である。
【図４】切り出し枠のサイズ、切り出し位置を制御する例を示す説明図であり、（Ａ）は制御前、制御後の静止画像、切り出し枠、および注目被写体の位置関係、（Ｂ）は制御前のシーン、（Ｃ）は制御後のシーンをそれぞれ示す。
【図５】切り出し枠のサイズ、切り出し位置を制御する例を示す説明図であり、（Ａ）は制御前、制御後の静止画像、切り出し枠、および注目被写体の位置関係、（Ｂ）は制御前のシーン、（Ｃ）は制御後のシーンをそれぞれ示す。
【図６】フォトムービー作成装置の処理手順を示すフローチャートである。
【符号の説明】
【００３４】
２  フォトムービー作成装置
１０  ＣＰＵ
１５  フォトムービー作成プログラム
１７  位置検出部
１８  画像編集部
２０  静止画像
２１  注目被写体
２２  切り出し枠
【図１】
2006094053.tif 000003
【図２】
2006094053.tif 000004
【図３】
2006094053.tif 000005
【図４】
2006094053.tif 000006
【図５】
2006094053.tif 000007
【図６】
2006094053.tif 000008