(57)【要約】【課題】複数の静止画像もしくは動画像を同時に表示しながら連続的にかつ効果的に表示することができる画像表示装置を提供する。【解決手段】複数の静止画像もしくは動画像を同時に表示しながら連続的に表示するスライドショー表示部１０４と、動画像から重要シーンを抽出する重要シーン抽出部１０２とを備える。また、重要シーン抽出部１０２により抽出された重要シーンの重要度をもとに、重要シーンを含む１本以上の所定の再生時間以内のダイジェスト動画像を生成するダイジェスト動画像生成部１０３を備える。スライドショー表示部１０４は、ダイジェスト動画像生成部１０３によりダイジェスト動画像が複数本生成された場合、それぞれ別のフレームに表示する。【選択図】図１
2010258768.tif 000002
【特許請求の範囲】
【請求項１】
複数の静止画像もしくは動画像を同時に表示しながら連続的に表示する表示手段と、
動画像から重要シーンを抽出する抽出手段と、
抽出された前記重要シーンの重要度をもとに、前記重要シーンを含む複数本のダイジェスト動画像を生成する生成手段と、
前記複数本のダイジェスト動画像をそれぞれ別のフレームに表示するように前記表示手段を制御する制御手段とを備えることを特徴とする画像表示装置。
【請求項２】
前記生成手段は、前記表示手段の適正な表示位置で前記重要シーンが表示されるように、前記重要シーンの前及び／もしくは後のシーンを結合させて前記ダイジェスト動画像を生成することを特徴とする請求項１記載の画像表示装置。
【請求項３】
前記抽出手段は、撮影開始直後及び／もしくは撮影終了直前のフレーム周辺のシーンを重要シーンとして抽出することを特徴とする請求項１または２記載の画像表示装置。
【請求項４】
前記抽出手段は、前記動画像撮影中のパン情報、チルト情報、ズーム情報のうち少なくとも１つの情報をもとに、パン及び／もしくはチルト及び／もしくはズームが開始及び／もしくは終了したフレーム周辺のシーンを重要シーンとして抽出することを特徴とする請求項１または２記載の画像表示装置。
【請求項５】
前記抽出手段は、前記動画像のフレーム間の相関を計算し、相関値が所定の範囲内にある場合、フレーム周辺のシーンを重要シーンとして抽出することを特徴とする請求項１または２記載の画像表示装置。
【請求項６】
前記抽出手段は、前記動画像に記録されている音声の量が所定の値よりも大きいフレーム周辺のシーンを重要シーンとして抽出することを特徴とする請求項１または２記載の画像表示装置。
【請求項７】
前記重要度は、撮影開始情報、撮影終了情報、撮影中のパン情報、撮影中のチルト情報、撮影中のズーム情報、前記動画像のフレーム間の相関のうち少なくとも１つの情報をもとに決定することを特徴とする請求項１記載の画像表示装置。
【請求項８】
前記生成手段は、前記重要シーンと、前記重要シーンより前記表示手段の適正な表示位置に表示されるまでの時間だけ前のシーンとの間にシーンの変わり目が無い場合、前記重要シーンより前記画像表示手段の適正な表示位置に表示されるまでの時間だけ前のシーンから前記ダイジェスト動画像を生成することを特徴とする請求項２記載の画像表示装置。
【請求項９】
前記生成手段は、前記重要シーンと、前記重要シーンより前記画像表示手段の適正な表示位置に表示されるまでの時間だけ前のシーンとの間にシーンの変わり目がある場合、前記シーンの変わり目から前記ダイジェスト動画像を生成することを特徴とする請求項２記載の画像表示装置。
【請求項１０】
前記生成手段は、前記ダイジェスト動画像の開始シーンと、前記ダイジェスト動画像の開始シーンから所定の再生時間後のシーンとの間にシーンの変わり目が無い場合、前記ダイジェスト動画像の開始シーンから所定の再生時間後のシーンまでの前記ダイジェスト動画像を生成することを特徴とする請求項８または９記載の画像表示装置。
【請求項１１】
前記生成手段は、前記ダイジェスト動画像の開始シーンと、前記ダイジェスト動画像の開始シーンから所定の再生時間後のシーンとの間にシーンの変わり目がある場合、前記シーンの変わり目までの前記ダイジェスト動画像を生成することを特徴とする請求項８または９記載の画像表示装置。
【請求項１２】
前記制御手段は、前記ダイジェスト動画像が所定の再生時間より短いとき、前記ダイジェスト動画像の再生開始を遅らせ、もしくは／かつ、前記ダイジェスト動画像の再生終了を早めるように前記表示手段を制御することを特徴とする請求項１記載の画像表示装置。
【請求項１３】
前記制御手段は、前記ダイジェスト動画像が所定の再生時間より短いとき、前記ダイジェスト動画像の再生速度を遅くして表示するように前記表示手段を制御することを特徴とする請求項１記載の画像表示装置。
【請求項１４】
前記生成手段により複数の前記ダイジェスト動画像が生成された場合、前記制御手段は、前記複数のダイジェスト動画像が１本の動画像から生成された前記ダイジェスト動画像であることを識別できるように表示するように前記表示手段を制御することを特徴とする請求項１乃至１３のいずれかに記載の画像表示装置。
【請求項１５】
前記動画像及び静止画像を入力する入力手段を更に備え、
前記制御手段は、入力された前記静止画像と、前記動画像から生成した前記ダイジェスト動画像とを、それぞれ別のフレームに表示するように前記表示手段を制御することを特徴とする請求項１乃至１４のいずれかに記載の画像表示装置。
【請求項１６】
動画像から重要シーンを抽出する抽出ステップと、
抽出された前記重要シーンの重要度をもとに、前記重要シーンを含む複数本のダイジェスト動画像を生成する生成ステップと、
前記複数本のダイジェスト動画像をそれぞれ別のフレームに表示するようにして、複数の静止画像もしくは動画像を同時に表示しながら連続的に表示する表示ステップとを備えることを特徴とする画像表示装置の制御方法。
【請求項１７】
動画像から重要シーンを抽出する抽出ステップと、
抽出された前記重要シーンの重要度をもとに、前記重要シーンを含む複数本のダイジェスト動画像を生成する生成ステップと、
前記複数本のダイジェスト動画像をそれぞれ別のフレームに表示するようにして、複数の静止画像もしくは動画像を同時に表示しながら連続的に表示する表示ステップとをコンピュータに実行させることを特徴とするプログラム。
【請求項１８】
請求項１７に記載のプログラムを格納することを特徴とするコンピュータで読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の静止画像もしくは動画像を同時に、かつ連続的に表示する画像表示装置及びその制御方法、並びにプログラム及び記憶媒体に関する。
【背景技術】
【０００２】
デジタルカメラやデジタルカムコーダの普及に伴い、静止画像や動画像が撮り貯められている。それらの撮像装置（画像処理装置）には、装置上のＬＣＤ（Ｌｙｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）や、ＴＶ等に接続することによって、画面上で画像を見ることができる機能が搭載されている。
【０００３】
また、撮像装置には、複数の画像を所定の再生時間ごとに自動的に切り替えて、連続的に表示、再生するスライドショーの機能も搭載されている。
【０００４】
さらに、スライドショー自体を効果的に見せるためのスライドショーのテンプレートも提案されている。それらのテンプレートにおいて、画面上には１枚の画像が表示され、画像の表示が切り替わる際に、ワイプやディゾルブといった効果を施すものがある。
【０００５】
また、複数の画像を同時表示しながら右から左へフィルムのコマが流れていくようなスライドショーの機能も提案されている。さらに、３次元で表された大きなリング上に複数の画像を配置し、複数の画像を表示しながらリングを回転させるような、３次元空間上に配置された画像を効果的に表示するスライドショーの機能も提案されている。
【０００６】
スライドショーの最中で動画像を再生する場合には、予め、動画像を機器（撮像装置）のＣＰＵ等の能力に応じて編集しておき、編集した動画像を再生する技術が提案されている（特許文献１）。
【０００７】
動画像の編集技術に関しては、フレーム間の相違をもとにシーンの変わり目を検出し、その情報を利用してダイジェスト動画像を生成する技術（特許文献２）や、キーフレームの重要度をもとにダイジェスト動画像を生成する技術（特許文献３）等が提案されている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００７−２２１６８１号公報
【特許文献２】特開２０００−２３５６３７号公報
【特許文献３】特開２０００−２９９８２９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
複数の画像を同時表示しながら右から左へフィルムのコマが流れていくようなスライドショーで再生時間の長い動画像をそのまま再生すると、スライドショーの効果自体を一時止めるか、動画像の長さに応じて効果が流れる速度を遅くする必要がある。ここで、効果とは、上記ワイプやディゾルブである。
【００１０】
通常は、動画像ごとに再生時間が異なるため、再生する動画像ごとにスライドショーの効果が流れる速度が変わることになり、スライドショーの見栄えが悪くなってしまう。また、スライドショーの処理も煩雑になる。
【００１１】
３次元で表された大きなリング上に複数の画像を配置し、複数の画像を表示しながらリングを回転させるような、３次元空間上に配置された画像を効果的に表示するスライドショーにおいても同様である。
【００１２】
また、スライドショーの効果が流れる速度を一定にする場合は、１枚の画像が表示される時間は数秒である。そのようなスライドショーで動画像を再生する場合は、同様に、数秒で動画像の再生を終了させる必要がある。
【００１３】
上記特許文献１では、動画像から短縮版を作成することが述べられているが、スライドショーで再生する場合には、どのシーンを再生するかが重要であり、その点に関しては述べられていない。
【００１４】
また、上記特許文献２では、動画像を解析してダイジェスト動画像を生成する技術が、上記特許文献３では、動画像を解析した情報を用いてダイジェスト動画像を生成する技術が提案されている。
【００１５】
しかしながら、これらの技術は、分単位のダイジェスト動画像を生成するには適しているが、数秒単位のダイジェスト動画像を生成するには適していない。
【００１６】
さらに、３次元空間上に配置された画像を効果的に表示するスライドショーでは、画像を３次元上に表示し、それを平面上に投影させた画像を画面上に表示することになるため、表示画像に歪みが生じる。例としている大きなリングの場合は、リングの正面では、表示画像の歪みは小さいが、左右の隅では歪みが大きくなる。
【００１７】
上記特許文献のいずれにおいても、このようなスライドショーに対応したダイジェスト動画像の生成に関しては述べられていない。
【００１８】
本発明の目的は、複数の静止画像もしくは動画像を同時に表示しながら連続的にかつ効果的に表示することができる画像表示装置及びその制御方法、並びにプログラム及び記憶媒体を提供することにある。
【課題を解決するための手段】
【００１９】
上記目的を達成するために、請求項１記載の画像表示装置は、複数の静止画像もしくは動画像を同時に表示しながら連続的に表示する表示手段と、動画像から重要シーンを抽出する抽出手段と、抽出された前記重要シーンの重要度をもとに、前記重要シーンを含む複数本のダイジェスト動画像を生成する生成手段と、前記複数本のダイジェスト動画像をそれぞれ別のフレームに表示するように前記表示手段を制御する制御手段とを備えることを特徴とする。
【００２０】
請求項１６記載の画像表示装置の制御方法は、動画像から重要シーンを抽出する抽出ステップと、抽出された前記重要シーンの重要度をもとに、前記重要シーンを含む複数本のダイジェスト動画像を生成する生成ステップと、前記複数本のダイジェスト動画像をそれぞれ別のフレームに表示するようにして、複数の静止画像もしくは動画像を同時に表示しながら連続的に表示する表示ステップとを備えることを特徴とする。
【００２１】
請求項１７記載のプログラムは、動画像から重要シーンを抽出する抽出ステップと、抽出された前記重要シーンの重要度をもとに、前記重要シーンを含む複数本のダイジェスト動画像を生成する生成ステップと、前記複数本のダイジェスト動画像をそれぞれ別のフレームに表示するようにして、複数の静止画像もしくは動画像を同時に表示しながら連続的に表示する表示ステップとをコンピュータに実行させることを特徴とする。
【００２２】
請求項１８記載のコンピュータで読み取り可能な記憶媒体は、請求項１８のプログラムを格納することを特徴とする。
【発明の効果】
【００２３】
本発明の画像表示装置によれば、複数の静止画像もしくは動画像を同時に表示しながら連続的にかつ効果的に表示することができる。
【図面の簡単な説明】
【００２４】
【図１】本発明の実施の形態に係る画像表示装置の構成を示すブロック図である。
【図２】複数の画像を同時表示しながらフィルムのコマが流れていくスライドショーの一例を示す図である。
【図３】３次元空間上に配置された画像を効果的に表示するスライドショーの一例を示す図である。
【図４】図１の画像表示装置によって実行される画像表示処理の手順を示すフローチャートである。
【図５】重要シーン抽出処理の手順を示すフローチャートである。
【図６】ダイジェスト動画像生成処理の手順を示すフローチャートである。
【図７】スライドショー表示を説明するための図である。
【図８】画像の再生時間を設定するユーザインタフェースの一例を示す図である。
【発明を実施するための形態】
【００２５】
以下、本発明を図面を参照しながら詳細に説明する。
【００２６】
〔画像表示装置の制御構成〕
図１は、本発明の実施の形態に係る画像表示装置の構成を示すブロック図である。
【００２７】
図１において、本画像表示装置（画像処理装置）の構成と機能を説明する。
【００２８】
画像入力部１０１では、スライドショーで表示したい静止画像及び動画像を入力する。画像を入力する方法は、画面上に複数のサムネイル画像を表示し、それらの中から画像を選んでいく方法等がある。
【００２９】
重要シーン抽出部１０２では、画像入力部１０１で入力された動画像から重要シーンの抽出を行う。また、重要シーン抽出部１０２では、撮影開始直後及び／もしくは撮影終了直前のフレーム周辺のシーンを重要シーンとして抽出する。
【００３０】
また、重要シーン抽出部１０２では、動画像撮影中のパン情報、チルト情報、ズーム情報のうち少なくとも１つの情報をもとに、パン及び／もしくはチルト及び／もしくはズームが開始及び／もしくは終了したフレーム周辺のシーンを重要シーンとして抽出する。また、重要シーン抽出部１０２では、動画像のフレーム間の相関を計算し、相関値が所定の範囲内にある場合、フレーム周辺のシーンを重要シーンとして抽出する。
【００３１】
重要シーン抽出部１０２では、動画像に記録されている音声の量が所定の値よりも大きいフレーム周辺のシーンを重要シーンとして抽出する。
【００３２】
ダイジェスト動画像生成部１０３では、重要シーン抽出部１０２で抽出された重要シーンをもとに、ダイジェスト動画像の生成を行う。より詳しくは、ダイジェスト動画像生成部１０３では、重要シーンの重要度をもとに、重要シーンを含む１本以上の所定の再生時間以内のダイジェスト動画像を生成する。
【００３３】
また、ダイジェスト動画像生成部１０３では、ダイジェスト動画像の開始シーンと開始から所定の再生時間後のシーンとの間にシーンの変わり目が無い場合、開始シーンから所定の再生時間後のシーンまでのダイジェスト動画像を生成する。
【００３４】
スライドショー表示部１０４では、画像入力部１０１で入力された静止画像と、ダイジェスト動画像生成部１０３で生成されたダイジェスト動画像をスライドショーテンプレートに当てはめてスライドショー表示（連続的に表示）する。また、表示手段としてのスライドショー表示部１０４では、ダイジェスト動画像生成部１０３によりダイジェスト動画像が複数本生成された場合、それぞれ別のフレームにダイジェスト動画像を表示する。
【００３５】
スライドショー表示部１０４では、ダイジェスト動画像生成部１０３により複数のダイジェスト動画像が生成された場合、複数のダイジェスト動画像が１本の動画像から生成されたダイジェスト動画像であることを識別できるように表示する。
【００３６】
また、ダイジェスト動画像生成部１０３では、画像表示手段の適正な表示位置で前記重要シーンが表示されるように、重要シーンの前及び／もしくは後のシーンを結合させてダイジェスト動画像を生成する。
【００３７】
図２は、図１におけるスライドショー表示部１０４に表示される、複数の画像を同時表示しながら右から左へフィルムのコマが流れていくようなスライドショーの一例を示す図である。
【００３８】
ここで、スライドショー中の画像表示部２０１〜２０４には、画像入力部１０１で入力された静止画像と、ダイジェスト動画像生成部１０３で生成されたダイジェスト動画像が入る。スライドショーテンプレート２０５は、フィルムのコマをイメージしたものである。枠２０６は、スライドショー表示部１０４上に表示される範囲を表しており、画像が右から左へ流れるように表示される。
【００３９】
図３は、図１におけるスライドショー表示部１０４に表示される、３次元空間上に配置された画像を効果的に表示するスライドショーの一例を示す図である。具体的には、３次元で表された大きなリング上に複数の画像を配置し、複数の画像を表示しながらリングを回転させるスライドショーの一例である。
【００４０】
ここで、スライドショー中の画像表示部３０１〜３０３には、画像入力部１０１で入力された静止画像と、ダイジェスト動画像生成部１０３で生成されたダイジェスト動画像が入る。スライドショーテンプレート３０４は、３次元で表された大きなリングをイメージしたものである。枠３０５は、スライドショー表示部１０４上に表示される範囲を表しており、画像が右から左へ回転して流れるように表示される。
【００４１】
〔画像表示処理の概要説明〕
本実施の形態に係る画像表示装置における画像表示処理の詳細について図４を用いて説明する。図４は、図１の画像表示装置によって実行される画像表示処理の手順を示すフローチャートである。
【００４２】
まず、ステップＳ４０１では、画像入力部１０１は、スライドショーで表示したい静止画像及び動画像を選択して入力する。画像を入力する方法は、上述したように、画面上に複数のサムネイル画像を表示し、それらの中から画像を選んでいく方法等がある。
【００４３】
次に、ステップＳ４０２では、重要シーン抽出部１０２は、ステップＳ４０１で選択（入力）された画像の最初の画像を着目画像とする。ステップＳ４０３では、重要シーン抽出部１０２は、着目画像が静止画像であるか、動画像であるか判断する。静止画像の場合は、ステップＳ４０６へ進み、動画像の場合は、ステップＳ４０４へ進む。ステップＳ４０４では、重要シーン抽出部１０２により動画像に対し、重要シーン抽出処理が行われる。重要シーン抽出処理の詳細については後述する。
【００４４】
次に、ステップＳ４０５では、ダイジェスト動画像生成部１０３は、ステップＳ４０４で得られた重要シーン情報をもとに、ダイジェスト動画像生成処理を行う。ダイジェスト動画像生成処理の詳細については後述する。
【００４５】
ステップＳ４０６では、全画像に対して処理が終了したか判断される。処理が終了している場合はステップＳ４０８へ進み、処理が終了していない場合はステップＳ４０７へ進む。ステップＳ４０７では、次の画像を着目画像とし、ステップＳ４０３へ戻る。
【００４６】
最後に、ステップＳ４０８では、スライドショー表示部１０４は、ステップＳ４０１で入力された静止画像と、ダイジェスト動画像生成部１０３で生成されたダイジェスト動画像をスライドショー表示する。スライドショー表示の詳細については後述する。
【００４７】
〔重要シーン抽出処理の詳細〕
重要シーン抽出処理の詳細について図５を用いて説明する。図５は、図４のステップＳ４０４で実行される重要シーン抽出処理の手順を示すフローチャートである。
【００４８】
撮影開始直後は、撮影したいものが写っている可能性が高い。従って、ステップＳ５０１では、重要シーン抽出部１０２は、撮影開始フレームの重要度に所定値を加算する。撮影開始時は、ワイプやディゾルブ等の効果がかかっていることもあるので、撮影を開始して数秒後のフレームの重要度に所定値を加算するようにしてもよい。
【００４９】
撮影開始情報は、ビデオカメラの開始ボタンを押すことで撮影が開始されたときに得ることができ、その情報をメタデータとして動画像に付与することができる。尚、動画像に撮影開始情報のメタデータが付与されていない場合は、本ステップはスキップする。
【００５０】
撮影終了直前も同様に、撮影したいものが写っている可能性が高い。従って、ステップＳ５０２では、重要シーン抽出部１０２は、撮影終了フレームの重要度に所定値を加算する。撮影終了時は、ワイプやディゾルブ等の効果がかかっていることもあるので、撮影終了の数秒前のフレームの重要度に所定値を加算するようにしてもよい。
【００５１】
撮影終了情報は、ビデオカメラの終了ボタンを押すことで撮影が終了されたときに得ることができ、その情報をメタデータとして動画像に付与することができる。尚、動画像に撮影終了情報のメタデータが付与されていない場合は、本ステップはスキップする。
【００５２】
パン（動作）終了直前にも、撮影したいものが写っている可能性が高い。従って、ステップＳ５０３では、重要シーン抽出部１０２は、パン終了フレームの重要度に所定値を加算する。パン終了情報は、ビデオカメラに加速度センサやジャイロセンサが搭載されているときに、それらのセンサ情報をもとに取得することができ、その情報をメタデータとして動画像に付与することができる。尚、動画像にパン終了情報のメタデータが付与されていない場合は、本ステップはスキップする。
【００５３】
チルト終了直前にも、撮影したいものが写っている可能性が高い。従って、ステップＳ５０４では、重要シーン抽出部１０２は、チルト終了フレームの重要度に所定値を加算する。チルト終了情報は、ビデオカメラに加速度センサやジャイロセンサが搭載されているときに、それらのセンサ情報をもとに取得することができ、その情報をメタデータとして動画像に付与することができる。尚、動画像にチルト終了情報のメタデータが付与されていない場合は、本ステップはスキップする。
【００５４】
ズーム終了直前にも、撮影したいものが写っている可能性が高い。従って、ステップＳ５０５では、重要シーン抽出部１０２は、ズーム終了フレームの重要度に所定値を加算する。ズーム終了情報は、ビデオカメラのズームボタンの操作情報をもとに取得することができ、その情報をメタデータとして動画像に付与することができる。尚、動画像にズーム終了情報のメタデータが付与されていない場合は、本ステップはスキップする。
【００５５】
本実施の形態では、パン終了情報、チルト終了情報、ズーム終了情報をそれぞれ別々に使用して重要度に加算している（重要度を決定している）。しかしながらそれに限定しているものではなく、パンとチルトが終了した情報を利用して重要度を加算するようにしてもよいし、パンとチルトとズームが終了した情報を利用して重要度を加算するようにしてもよい。
【００５６】
背景の音声の音量が大きくなっているシーンは、重要なシーンである可能性が高い。従って、ステップＳ５０６では、重要シーン抽出部１０２は、背景の音声の音量をもとに、対応するフレームの重要度に加算する。加算量は、音量に比例した値にしてもよいし、多次元的に決めてもよい。尚、動画像に音声が無い場合は、本ステップはスキップする。
【００５７】
近接フレーム間の相関を算出することによって、フレームに写っているものがどのくらい変わったのかを知ることができる。フレーム間の差が非常に大きい場合は、その間にシーンの切り替えがあったと考えることができる。また、差が小さい場合は、写っているものがほとんど動いていないということがわかる。その中間の場合は、写っているものが静止している状態でもなく、シーンの切り替えがあったわけでもなく、この状態のときに撮影したいものが写っている可能性が高い。
【００５８】
従って、ステップＳ５０７では、重要シーン抽出部１０２は、フレーム間の差が所定の範囲内にある場合に、フレーム間の差をもとに、対応するフレームの重要度に加算する。加算量は、フレーム間の差に比例した値にしてもよいし、フレーム間の差に反比例した値にしてもよいし、多次元的に決めてもよい。尚、本方法以外の方法で充分な重要度加算がされている場合は、本ステップはスキップすることも可能である。
【００５９】
最後に、ステップＳ５０８において、重要シーン抽出部１０２は、所定の重要度よりも高いフレームを重要シーンとして抽出する。
【００６０】
尚、本実施の形態では、重要シーン抽出処理に際し、撮影開始情報、撮影終了情報、パン情報、チルト情報、ズーム情報、音声情報、フレーム間の相関情報のすべてを用いているが、すべてを用いるのではなく、これらのうち一部を用いるようにしてもよい。
【００６１】
〔ダイジェスト動画像生成処理の詳細〕
ダイジェスト動画像生成処理の詳細について図６を用いて説明する。図６は、図４のステップＳ４０５で実行されるダイジェスト動画像生成処理の手順を示すフローチャートである。
【００６２】
まず、ステップＳ６０１では、ダイジェスト動画像生成部１０３は、スライドショー中で画像が適正表示位置に到達するまでの時間をＴ１に代入する。図２に示したようなスライドショーでは、画面の隅の方では、画像の全面は表示されない。従って、画面の中央が適正表示位置である。図３に示したようなスライドショーでは、リングの正面では歪みは小さく、この位置が適正表示位置である。画像の表示が始まってから、画像がこの適正表示位置に来るまでに要する時間がＴ１である。
【００６３】
次に、ステップＳ６０２では、ダイジェスト動画像生成部１０３は、１つの画像がスライドショーで表示される時間をＴ２に代入する。この再生時間（スライドショーで表示される時間）は画像表示装置上のユーザインタフェースで設定できるようにしてもよい。再生時間を設定するユーザインタフェースの例については後述する。
【００６４】
ステップＳ６０３では、ダイジェスト動画像生成部１０３は、最も重要度の高い重要シーンを着目シーンに設定する。ステップＳ６０４では、ダイジェスト動画像生成部１０３は、着目シーンと着目シーンよりもＴ１前のフレームとの間に撮影開始情報があるか判断する。撮影開始情報がある場合はステップＳ６０５へ進み、撮影開始情報が無い場合はステップＳ６０６へ進む。
【００６５】
動画像に撮影開始情報のメタデータが付与されていない場合は、前述のフレーム間の差を利用して見つけることが可能なシーンの切り替え情報を撮影開始情報の代わりに使用してもよい。ステップＳ６０５では、ダイジェスト動画像生成部１０３は、撮影開始フレームをダイジェスト動画像開始フレームに設定する。ステップＳ６０６では、ダイジェスト動画像生成部１０３は、着目シーンよりもＴ１前のフレームをダイジェスト動画像開始フレームに設定する。
【００６６】
次に、ステップＳ６０７では、ダイジェスト動画像生成部１０３は、ダイジェスト動画像開始フレームとダイジェスト動画像開始フレームのＴ２後のフレームとの間に撮影終了情報があるか判断する。撮影終了情報がある場合はステップＳ６０８へ進み、撮影終了情報が無い場合はステップＳ６０９へ進む。
【００６７】
動画像に撮影終了情報のメタデータが付与されていない場合は、ステップＳ６０４と同様に、前述のフレーム間の差を利用して見つけることが可能なシーンの切り替え情報を撮影終了情報の代わりに使用してもよい。ステップＳ６０８では、ダイジェスト動画像生成部１０３は、撮影終了フレームをダイジェスト動画像終了フレームに設定する。ステップＳ６０９では、ダイジェスト動画像生成部１０３は、ダイジェスト動画像開始フレームのＴ２後のフレームをダイジェスト動画像終了フレームに設定する。
【００６８】
次に、ステップＳ６１０では、ダイジェスト動画像生成部１０３は、所定の閾値よりも高い重要度の重要シーンに対する処理が終了したか判断する。終了している場合は、処理を終了する。終了していない場合はステップＳ６１１へ進む。ステップＳ６１１では、ダイジェスト動画像生成部１０３は、次に重要度の高い重要シーンを着目シーンに設定し、ステップＳ６０４に戻る。
【００６９】
〔スライドショー表示の詳細〕
図４のステップＳ４０８のスライドショー表示の詳細について図７を用いて説明する。図７は、図１の画像表示装置におけるスライドショー表示を説明するための図である。
【００７０】
ここでは、フィルムのコマをイメージしたスライドショーテンプレートを用いて説明を行うが、３次元で表された大きなリングをイメージしたスライドショーテンプレートや、その他のテンプレートを用いても同様である。
【００７１】
図７において、符号７０１、７０７は、図４のステップＳ４０１で入力された静止画像を表示する静止画像表示部である。静止画像表示部７０１、７０７は、フィルムのコマをイメージしたスライドショーテンプレートの１コマに対し、１画像を入れる。符号７０２〜７０６は、図４のステップＳ４０５で生成されたダイジェスト動画像を表示する動画像表示部である。このうち、動画像表示部７０２〜７０４は、１本の動画像から生成されたダイジェスト動画像を表示するものであり、動画像表示部７０５、７０６は、別の１本の動画像から生成されたダイジェスト動画像を表示するものである。ここで示しているように、１本の動画像から複数のダイジェスト動画像が生成された場合は、スライドショーテンプレート上の複数のコマにそれらのダイジェスト動画像を入れる。
【００７２】
ダイジェスト動画像の長さが、スライドショー再生時間に満たない場合は、重要シーンが適正表示位置で表示されるよう、必要に応じて再生開始を遅らせ、かつ、必要に応じて再生終了を早める。再生が開始されるまではダイジェスト動画像の最初のフレームを静止画像表示し、再生終了後はダイジェスト動画像の最後のフレームを静止画像表示する。ダイジェスト動画像の長さが、スライドショー再生時間に満たない場合の処理は、本実施の形態に限定するものではなく、全体的に、もしくは、部分的に再生速度を遅くするようにしてもよい。
【００７３】
また本実施の形態では、動画像表示部７０２〜７０４のコマの背景には左下方向の斜線を付けており、動画像表示部７０５、７０６のコマの背景には右下方向の斜線を付けている。このように、背景の模様や色を変えることにより、どのコマからどのコマまでが、１本の動画像から生成されたダイジェスト動画像であるかを確認することも可能である。背景の模様や色を変える方法ではなく、同じ１本の動画像から生成されたダイジェスト動画像を枠で囲む方法等、その他の方法を用いても、どのコマからどのコマまでが、１本の動画像から生成されたダイジェスト動画像であるかを確認することが可能である。
【００７４】
〔再生時間設定のユーザインタフェース〕
図８は、図１の画像表示装置において、画像の再生時間を設定するユーザインタフェースの一例を示す図である。「スライドショー再生時間」表示の右側を選択するとプルダウンリストが表示され、その中から所望の再生時間を選択することができる。本実施の形態では、プルダウンリストからの選択形式についての説明をしているが、再生時間を数値入力するようにしてもよい。
【００７５】
また、本発明の目的は、上述した実施の形態の機能を実現するソフトウェアのプログラムコードをコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体から読み出して実行することによっても達成される。
【００７６】
また、プログラムコードを供給（格納）するための記憶媒体としては、種々のものを用いることができる。また、プログラムコードをネットワークを介してダウンロードしてもよい。
【００７７】
また、コンピュータが読み出したプログラムコードの指示に基づき、ＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行うことで前述した実施の形態の機能が実現される場合も含まれる。
【符号の説明】
【００７８】
１０１  画像入力部
１０２  重要シーン抽出部
１０３  ダイジェスト動画像生成部
１０４  スライドショー表示部
【図１】
2010258768.tif 000003
【図２】
2010258768.tif 000004
【図３】
2010258768.tif 000005
【図４】
2010258768.tif 000006
【図５】
2010258768.tif 000007
【図６】
2010258768.tif 000008
【図７】
2010258768.tif 000009
【図８】
2010258768.tif 000010