(57)【要約】      （修正有）【課題】連続的に表示される複数の画像の特徴を同時に把握することが容易な画像表示装置を提供する。【解決手段】複数の画像を記憶するデータフォルダ１１と、画像の特徴に関するコンテンツを記憶するキャラクタＤＢ１６と、上記複数の画像のいずれかの画像を選択する画像選択部１９と、選択された画像の特徴を認識するシーン認識部１２と、認識された第１画像の特徴と第１画像に連続する第２画像の特徴とが異なるか否かを判定するシーン切替検出部１５と、第１画像と第２画像の特徴とが異なると判定された場合、キャラクタＤＢ１６に記憶されたコンテンツのうち、第１画像の特徴及び第２画像の特徴の双方と関連のある特定のコンテンツを選択するキャラクタ決定部１３と、第１画像と第２画像の特徴とが異なると判定された場合、第１画像から第２画像の表示に切り替わるときに、選択されたコンテンツに基づいて、特徴切替情報を提示する表示部１８と、を備える。【選択図】図１
2011160285.tif 000002
【特許請求の範囲】
【請求項１】
画像を連続的に表示する画像表示装置であって、
複数の画像を記憶する画像記憶部と、
前記画像記憶部に記憶された画像の特徴に関するコンテンツを記憶するコンテンツ記憶部と、
前記画像記憶部に記憶された複数の画像のうち、いずれかの画像を選択する画像選択部と、
前記画像選択部により選択された画像の特徴を認識する画像特徴認識部と、
前記画像特徴認識部により認識された第１画像の特徴と前記第１画像に連続する第２画像の特徴とが異なるか否かを判定する特徴切替判定部と、
前記特徴切替判定部により前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記コンテンツ記憶部に記憶されたコンテンツのうち、前記画像特徴認識部により認識された前記第１画像の特徴及び前記第２画像の特徴の双方と関連のある特定のコンテンツを選択するコンテンツ選択部と、
前記特徴切替判定部により前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記第１画像の表示から前記第２画像の表示に切り替わるときに、前記コンテンツ選択部により選択されたコンテンツに基づいて、前記第１画像の特徴と前記第２画像の特徴とが異なることを示す特徴切替情報を提示する特徴切替情報提示部と、
を備える画像表示装置。
【請求項２】
請求項１に記載の画像表示装置であって、
前記画像特徴認識部は、前記画像選択部により選択された画像におけるシーンを前記画像の特徴として認識する画像表示装置。
【請求項３】
請求項１に記載の画像表示装置であって、
前記画像特徴認識部は、前記画像選択部により選択された画像に含まれる主要な被写体を前記画像の特徴として認識する画像表示装置。
【請求項４】
請求項１に記載の画像表示装置であって、
前記画像特徴認識部は、前記画像選択部により選択された画像が撮影された撮影場所を前記画像の特徴として認識する画像表示装置。
【請求項５】
請求項１に記載の画像表示装置であって、
前記画像特徴認識部は、前記画像選択部により選択された画像が撮影された撮影時刻を前記画像の特徴として認識する画像表示装置。
【請求項６】
請求項２に記載の画像表示装置であって、更に、
シーン毎に、前記画像特徴認識部により認識されたシーンの認識回数をシーン認識回数としてカウントするシーン認識回数カウント部を備え、
前記特徴切替情報提示部は、前記画像特徴認識部により認識されたシーンについての前記シーン認識回数カウント部によりカウントされたシーン認識回数に基づいて、前記特徴切替情報を提示する画像表示装置。
【請求項７】
請求項２に記載の画像表示装置であって、更に、
前記画像特徴認識部により同一のシーンが連続して認識された認識回数を同一シーン連続認識回数としてカウントする同一シーン連続認識回数カウント部を備え、
前記特徴切替情報提示部は、同一シーン連続認識回数カウント部によりカウントされた同一シーン連続認識回数に基づいて、前記特徴切替情報を提示する画像表示装置。
【請求項８】
請求項１ないし請求項７のいずれか１項に記載の画像表示装置であって、更に、
前記画像選択部により選択された画像とコンテンツ選択部により選択されたコンテンツに基づく前記特徴切替情報とを関連付けて記憶する画像関連付け記録部を備え、
前記画像関連付け記憶部は、前記画像、前記特徴切替情報、及び前記画像と前記特徴切替情報の関連付け情報または合成結果を記憶する画像表示装置。
【請求項９】
請求項１ないし請求項７のいずれか１項に記載の画像表示装置であって、更に、
前記画像特徴認識部により認識された画像の特徴に基づいて、前記特徴切替情報提示部により前記特徴切替情報を表示する際の表示形態を決定する表示形態決定部を備える画像表示装置。
【請求項１０】
請求項１ないし請求項９のいずれか１項に記載の画像表示装置を備える携帯端末装置。
【請求項１１】
画像を連続的に表示する画像表示方法であって、
複数の画像を記憶する画像記憶部に記憶された複数の画像のうち、いずれかの画像を選択するステップと、
選択された画像の特徴を認識するステップと、
認識された第１画像の特徴と前記第１画像に連続する第２画像の特徴とが異なるか否かを判定するステップと、
前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記画像記憶部に記憶された画像の特徴に関するコンテンツを記憶するコンテンツ記憶部に記憶されたコンテンツのうち、認識された前記第１画像の特徴及び前記第２画像の特徴の双方と関連のある特定のコンテンツを選択するステップと、
前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記第１画像の表示から前記第２画像の表示に切り替わるときに、選択されたコンテンツに基づいて、前記第１画像の特徴と前記第２画像の特徴とが異なることを示す特徴切替情報を提示するステップと、
を有する画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置、携帯端末装置、および画像表示方法に関し、特に、画像を連続的に表示する画像表示装置、携帯端末装置、および画像表示方法に関する。
【背景技術】
【０００２】
従来、デジタルカメラを利用して多数の写真を撮影した後には、撮影された各画像を確認したり鑑賞したりするために、デジタルカメラ自体に搭載された画像表示機能を利用したり、あるいは別に用意された画像表示装置（例えばパーソナルコンピュータ）を利用したりして、撮影された画像のデータを読み込み、適当な画面上に画像を表示することができる。ユーザはこれらの複数の画像を順番に閲覧することができる。
【０００３】
大画面を備えたパーソナルコンピュータを用いて画像を表示する場合には、１つの画面上に大量の情報を表示できるので、２つ以上の画像を１つの画面に同時に表示したり、それぞれの画像を縮小して得られる小型の画像を１つの画面上に多数並べて同時に表示したりすることができる。
【０００４】
しかし、デジタルカメラやカメラ付き携帯電話端末のようにカメラ自体に搭載された画像表示機能を利用して画像を表示する場合には、デジタルカメラやカメラ付き携帯電話端末の表示画面が小さいので、１つの画面上には１つの画像だけしか表示できないことがある。さらに、大量の画像が存在する場合には、ユーザが順番に閲覧し、これらの中から所望のシーンが映っている特定の画像を手作業で見つけるのは容易ではなく、非常に時間がかかる。
【０００５】
本発明と関連のある従来技術としては、以下の特許文献１〜３に開示された技術が知られている。
【０００６】
特許文献１においては、任意の背景画像に対して予め用意された人物画像等の挿入用画像をシーンに合わせて自然な形で合成するための技術を提案している。具体的には、取り込んだ背景画像の内容を認識処理して空、建物等のオブジェクトを認識し、背景画像中のどこに何があるかを把握し、その結果を用いて挿入する人物画像の位置、大きさ、向き等を変換し、変換後の人物画像を自然な形で背景画像に合成する。
【０００７】
特許文献２においては、文字列等で構成される文書の内容を複数画面（複数頁）に区分して、スクロール等の操作により選択的に各画面の内容を表示する場合に、選択した画面の一部分に前画面の最終行等の内容を同時に表示することを提案している。
【０００８】
特許文献３においては、状況の変化を観察するために互いに異なる時点で撮影された複数の画像を表示する場合に、複数画像の比較を容易にするための技術を開示している。具体的には、最新の画像と過去に撮影された画像とを並べて１つの画面上に同時に表示することなどを提案している。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００９−０８９０８４号公報
【特許文献２】特開平９−１６０７４７号公報
【特許文献３】特開２００９−７２４１２号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
大量の画像が存在する場合には、これらの画像の中から所望のシーンが映っている特定の画像をユーザが手作業で見つけることは容易ではない。特に、デジタルカメラやカメラ付き携帯電話端末のように画像表示装置の表示画面のサイズや解像度が小さい場合には、特許文献３のように複数の画像を並べて１つの画面上に同時に表示しても、それぞれの画像の表示が非常に小さくなり、それぞれの画像の内容が見えにくくなるため、ユーザが複数の画像を同時に閲覧することが難しい。また、特許文献２の技術では、写真などの画像を表示する場合には一部分だけを表示してもその内容を把握するのは困難である。
【００１１】
さらに、特許文献１の技術では、表示される合成画像がそれぞれの背景画像の特徴のみと関連付けられているので、ユーザが１つの合成画像を参照してもその内容から他の画像の特徴を把握できる訳ではない。特に、ユーザが複数の背景画像を順番に閲覧する場合には、背景画像の切り替わりの際に画像中のシーンが大きく変化すると、表示される合成画像に挿入された人物等の内容も一気に変化することになり、切り替え前の画像の内容は表示中の背景画像に挿入された人物等の状況からは把握できなくなることがある。
【００１２】
本発明は、連続的に表示される複数の画像の特徴を同時に把握することが容易な画像表示装置、携帯端末装置、および画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【００１３】
本発明の画像表示装置は、画像を連続的に表示する画像表示装置であって、複数の画像を記憶する画像記憶部と、前記画像記憶部に記憶された画像の特徴に関するコンテンツを記憶するコンテンツ記憶部と、前記画像記憶部に記憶された複数の画像のうち、いずれかの画像を選択する画像選択部と、前記画像選択部により選択された画像の特徴を認識する画像特徴認識部と、前記画像特徴認識部により認識された第１画像の特徴と前記第１画像に連続する第２画像の特徴とが異なるか否かを判定する特徴切替判定部と、前記特徴切替判定部により前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記コンテンツ記憶部に記憶されたコンテンツのうち、前記画像特徴認識部により認識された前記第１画像の特徴及び前記第２画像の特徴の双方と関連のある特定のコンテンツを選択するコンテンツ選択部と、前記特徴切替判定部により前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記第１画像の表示から前記第２画像の表示に切り替わるときに、前記コンテンツ選択部により選択されたコンテンツに基づいて、前記第１画像の特徴と前記第２画像の特徴とが異なることを示す特徴切替情報を提示する特徴切替情報提示部と、を備える。
【００１４】
この画像表示装置によれば、表示内容を第１画像の表示から第２画像の表示に切り替わる際に、第１画像の特徴と第２画像の特徴が異なる場合には、特徴切替情報の提示によってそれをユーザに知らせることができる。さらに、特徴切替情報は第１画像の特徴及び第２の画像の特徴の双方に関連するので、連続的に表示される複数の画像の特徴を同時に把握することが容易である。
【００１５】
また、本発明の画像表示装置は、前記画像特徴認識部が、前記画像選択部により選択された画像におけるシーンを前記画像の特徴として認識する。
【００１６】
この画像表示装置によれば、表示対象の画像のシーンの切り替わり毎に特徴切替情報を提示するので、ユーザは現在選択され表示されている画像と当該画像に連続する画像とが、共通のシーンの画像なのか異なるシーンの画像なのかを容易に把握できる。
【００１７】
また、本発明の画像表示装置は、前記画像特徴認識部が、前記画像選択部により選択された画像に含まれる主要な被写体を前記画像の特徴として認識する。
【００１８】
この画像表示装置によれば、表示対象の画像の主要被写体の切り替わり毎に特徴切替情報を提示するので、ユーザは現在選択され表示されている画像と当該画像に連続する画像とが、共通の主要被写体を有する画像なのか異なる主要被写体を有する画像なのかを容易に把握できる。
【００１９】
また、本発明の画像表示装置は、前記画像特徴認識部が、前記画像選択部により選択された画像が撮影された撮影場所を前記画像の特徴として認識する。
【００２０】
この画像表示装置によれば、表示対象の画像が撮影された撮影場所の違い毎に特徴切替情報を提示するので、ユーザは現在選択され表示されている画像と当該画像に連続する画像とが、同様の撮影場所で撮影された画像なのか異なる撮影場所で撮影された画像なのかを容易に把握できる。
【００２１】
また、本発明の画像表示装置は、前記画像特徴認識部が、前記画像選択部により選択された画像が撮影された撮影時刻を前記画像の特徴として認識する。
【００２２】
この画像表示装置によれば、表示対象の画像が撮影された撮影時刻の違い毎に特徴切替情報を提示するので、ユーザは現在選択され表示されている画像と当該画像に連続する画像とが、同様の撮影時刻に撮影された画像なのか異なる撮影時刻に撮影された画像なのかを容易に把握できる。
【００２３】
また、本発明の画像表示装置は、シーン毎に、前記画像特徴認識部により認識されたシーンの認識回数をシーン認識回数としてカウントするシーン認識回数カウント部を備え、前記特徴切替情報提示部が、前記画像特徴認識部により認識されたシーンについての前記シーン認識回数カウント部によりカウントされたシーン認識回数に基づいて、前記特徴切替情報を提示する。
【００２４】
この画像表示装置によれば、表示対象の画像のシーンの切り替わり毎に、切り替え前又は切り替え後のシーンの認識回数に応じた特徴切替情報を提示するので、切り替え前又は切り替え後のシーンの出現頻度を知ることができる。
【００２５】
また、本発明の画像表示装置は、前記画像特徴認識部により同一のシーンが連続して認識された認識回数を同一シーン連続認識回数としてカウントする同一シーン連続認識回数カウント部を備え、前記特徴切替情報提示部が、同一シーン連続認識回数カウント部によりカウントされた同一シーン連続認識回数に基づいて、前記特徴切替情報を提示する。
【００２６】
この画像表示装置によれば、表示対象の画像のシーンの切り替わり毎に、切り替え前のシーンが連続する画像の数に応じて特徴切替情報を提示するので、切り替え前のシーンの連続出現頻度を知ることができる。
【００２７】
また、本発明の画像表示装置は、前記画像選択部により選択された画像とコンテンツ選択部により選択されたコンテンツに基づく前記特徴切替情報とを関連付けて記憶する画像関連付け記憶部を備え、前記画像関連付け記憶部は、前記画像、前記特徴切替情報、及び前記画像と前記特徴切替情報の関連付け情報または合成結果を記憶する。
【００２８】
この画像表示装置によれば、過去に合成した特定の画像と特定の特徴切替情報との組み合わせを何回でも再現することができる。
【００２９】
また、本発明の画像表示装置は、前記画像特徴認識部により認識された画像の特徴に基づいて、前記特徴切替情報提示部により前記特徴切替情報を表示する際の表示形態を決定する表示形態決定部を備える。
【００３０】
この画像表示装置によれば、例えば画像中の主要な要素（例えば人物）が隠れないように、特徴切替情報の表示サイズや表示位置を適切に制御することが可能である。
【００３１】
また、本発明の携帯端末装置は、上記画像表示装置を備える携帯端末装置である。
【００３２】
この携帯端末装置によれば、特に、画面のサイズや解像度が小さい場合であっても、連続的に表示される複数の画像の特徴を同時に把握することが容易である。
【００３３】
また、本発明の画像表示方法は、画像を連続的に表示する画像表示方法であって、複数の画像を記憶する画像記憶部に記憶された複数の画像のうち、いずれかの画像を選択するステップと、選択された画像の特徴を認識するステップと、認識された第１画像の特徴と前記第１画像に連続する第２画像の特徴とが異なるか否かを判定するステップと、前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記画像記憶部に記憶された画像の特徴に関するコンテンツを記憶するコンテンツ記憶部に記憶されたコンテンツのうち、認識された前記第１画像の特徴及び前記第２画像の特徴の双方と関連のある特定のコンテンツを選択するステップと、前記第１画像の特徴と前記第２画像の特徴とが異なると判定された場合、前記第１画像の表示から前記第２画像の表示に切り替わるときに、選択されたコンテンツに基づいて、前記第１画像の特徴と前記第２画像の特徴とが異なることを示す特徴切替情報を提示するステップと、を有する。
【００３４】
この画像表示方法によれば、表示内容を第１画像の表示から前記第２画像の表示に切り替わる際に、前記第１画像の特徴と前記第２画像の特徴が異なる場合には、特徴切替情報の提示によってそれをユーザに知らせることができる。さらに、特徴切替情報は第１画像の特徴及び第２の画像の特徴の双方に関連するので、連続的に表示される複数の画像の特徴を同時に把握することが容易である。
【発明の効果】
【００３５】
本発明によれば、連続的に表示される複数の画像の特徴を同時に把握することが容易である。
【図面の簡単な説明】
【００３６】
【図１】本発明の実施形態の画像表示装置の構成例を示すブロック図
【図２】図１に示した画像表示装置の主要な動作を表すフローチャート
【図３】図１に示した画像表示装置が表示する画像群の具体例を示す図
【図４】図１に示した画像表示装置の変形例１の構成を示すブロック図
【図５】図４に示した画像表示装置の主要な動作を表すフローチャート
【図６】図１に示した画像表示装置の変形例２の構成を示すブロック図
【図７】図６に示した画像表示装置の主要な動作を表すフローチャート
【図８】図１に示した画像表示装置の変形例３の構成を示すブロック図
【図９】図８に示した画像表示装置の主要な動作を表すフローチャート
【図１０】図１に示した画像表示装置の変形例４の構成を示すブロック図
【図１１】図１０に示した画像表示装置の主要な動作を表すフローチャート
【図１２】図１に示した画像表示装置の変形例５の構成を示すブロック図
【図１３】図１２に示した画像表示装置の主要な動作を表すフローチャート
【図１４】図１に示した画像表示装置の変形例６の構成を示すブロック図
【図１５】図１４に示した画像表示装置の主要な動作を表すフローチャート
【発明を実施するための形態】
【００３７】
本発明の実施形態における画像表示装置、携帯端末装置、画像表示方法について、図面を参照しながら以下に説明する。
【００３８】
本発明の実施形態における画像表示装置の構成例が図１に示されている。また、図１に示した画像表示装置の主要な動作が図２に示されている。また、図１に示した画像表示装置が表示する画像群の具体例が図３に示されている。
【００３９】
図１に示す画像表示装置１００については、具体例として、カメラ付き携帯電話端末、カメラ付きＰＤＡのような携帯端末装置、デジタルカメラ、ＰＣ等の一部分として構成することが想定される。画像表示装置１００には、任意の被写体を撮影して得られる写真などの静止画や動画等の複数の画像を選択的にあるいは連続的に表示するための機能が設けられている。
【００４０】
図１に示すように、画像表示装置１００は、データフォルダ１１、シーン認識部１２、キャラクタ決定部１３、シーン記憶部１４、シーン切替検出部１５、キャラクタデータベース（ＤＢ）１６、合成部１７、表示部１８及び画像選択部１９を備えている。
【００４１】
データフォルダ１１は、例えばメモリカードのような不揮発性記憶装置上に設けられた記憶領域である。このデータフォルダ１１上には、事前に撮影して得られた写真などの静止画や動画等の複数の画像のデータが保持されている。
【００４２】
なお、データフォルダ１１上の各画像については、画像に割り当てられた名称の他に、各々の撮影時刻を表す時刻情報や、撮影した地点の位置情報（例えば緯度／経度／高度）あるいは撮影場所の地名を表す文字情報が含まれていても良い。
【００４３】
シーン認識部１２は、入力された画像のデータを処理してその特徴を検出する画像処理部である。具体的には、シーン認識部１２は公知の技術を用いて、画像の中に含まれる様々な物体などの構成要素をオブジェクトとして認識すると共に、各オブジェクトの種類、面積、形状、向き、画像中の位置などの特徴を特定し、当該画像を構成する各オブジェクトの組み合わせからシーン（場面）の特徴を認識する。例えば風景を撮影して得られた画像であれば、その風景の中に含まれる海、砂浜、山などをそれぞれオブジェクトとして認識し、画像全体の特徴を１つのシーンとして認識する。シーン認識部１２は各オブジェクトを認識するために必要な情報（認識用の辞書）を予め保持している。なお、シーンは画像の特徴の１つである。
【００４４】
シーン記憶部１４は、様々なデータの書き込み及び読み出しが可能な記憶装置であり、シーン認識部１２が認識したシーンの情報を一時的に記憶する。新たなシーンがシーン認識部１２によって認識されると、最新の認識結果によってシーン記憶部１４の記憶内容は上書き（更新）される。但し、この内容が更新される前に記憶されていた過去のシーンの情報がシーン記憶部１４から出力されシーン切替検出部１５に入力され得る。
【００４５】
シーン切替検出部１５は、複数の画像を所定の順番で連続的に選択しこれらを順番に表示する場合に、シーン認識部１２が認識したシーンの情報に基づいて、シーンの切り替わりの有無を識別する。すなわち、互いに隣接する（表示順、選択順が連続する）複数の画像の間でシーンの特徴量が所定以上大きく変化した場合に、「シーン切り替わり有」を検出する。例えば、各画像に含まれている複数のオブジェクトの面積の比率が大きく変化した場合や、オブジェクトの種類が変化した場合や、オブジェクトの数が大きく変化したような場合に「シーン切り替わり有」を検出する。互いに隣接する複数の画像のシーンを比較するために、シーン切替検出部１５は、シーン認識部１２が出力する最新のシーン（現在選択中の画像のシーン）の情報とシーン記憶部１４が出力する過去のシーン（前に選択していた画像のシーン）の情報とを同時に入力して比較する。
【００４６】
キャラクタデータベース（キャラクタＤＢ）１６は、表示する画像と同時に出力可能な様々なコンテンツの情報を保持している。具体的なコンテンツとしては、様々なオブジェクトのそれぞれと関連性を有するキャラクタ、すなわち人間、動物、各種物体、文字などに似せて作られた小型の画像パターンの静止画や動画（アニメーション）を想定することができる。また、各キャラクタについては、大きさや向きが互いに異なる複数種類のパターンを１組のデータとしてまとめて保持していても良い。また、キャラクタの他に、予め用意された画像を加工することにより得られた小型の画像パターンを用いても良く、更に、人間の音声、鳥や動物などの鳴き声、音楽のメロディなどの音響情報をコンテンツとして保持しても良い。これらのキャラクタ、静止画や動画、音響情報等は画像特徴情報の一例である。
【００４７】
キャラクタ決定部１３は、選択された表示対象の画像のシーンと関連性を有する１つ又は複数のキャラクタをキャラクタデータベース１６上のデータの中から選択する。例えば、背景が海のシーンである画像が選択された時には、これと関連のある泳ぐ人物に似たキャラクタや、ヨットに似たキャラクタが選択候補としてあげられる。また、シーン切替検出部１５がシーンの切り替わりを検出した時には、キャラクタ決定部１３は後述する特別な動作を行う。
【００４８】
合成部１７は、現在選択されている画像に対してキャラクタ決定部１３が選択したキャラクタ等のコンテンツの情報をキャラクタデータベース１６上から読み出し、このコンテンツと選択中の画像とを合成する。この合成により、例えば図３に示す各画像２０１、２０２（１）〜２０２（３）のようなデータが得られる。図３に示した画像２０１については、海のシーンが映った写真の風景画像の中に、泳ぐ人物に似た小さいキャラクタ３０１のパターンが合成されている。
【００４９】
表示部１８は、写真などの２次元画像を画面上に表示可能な表示装置であり、例えば小型の液晶表示装置などで構成される。すなわち、表示部１８の画面上に図３に示す各画像２０１、２０２（１）〜２０２（３）のような可視情報が二次元表示される。なお、音響を出力するためにスピーカなどの音響出力機器を表示部１８とともに搭載しても良い。
【００５０】
画像選択部１９は、データフォルダ１１上に保持されている複数の画像の中から１つずつ順番に表示対象の画像を選択する。画像選択部１９の選択した画像のデータがデータフォルダ１１から読み出されてシーン認識部１２に送られる。複数の画像の選択順序については、例えば各画像の撮影時刻の順番や、各画像に割り当てられた名称の５０音順や、事前にユーザが指定した条件に従って並び替えた順番などが考えられる。
【００５１】
例えば自動表示モードの場合には、事前に決定した所定時間が経過する毎に、画像選択部１９は多数の画像の中からそれらの並び順に従って１つずつ順番に画像を選択する。また、手動選択モードの場合には、画像選択部１９はユーザの入力操作を監視して、「次画像」、「前画像」などの選択指示を検出し、それを検出する毎に１つずつ順番に次の画像又は前の画像を選択する。
【００５２】
なお、図１に示したシーン認識部１２、キャラクタ決定部１３、シーン記憶部１４、シーン切替検出部１５、合成部１７及び画像選択部１９の各構成要素については、マイクロコンピュータのハードウェアとそれが実行する所定のプログラムとで実現することもできるし、それぞれ特別な論理回路など専用のハードウェアだけで構成することもできる。
【００５３】
次に、図１に示した画像表示装置１００の動作について、図２を参照しながら説明する。なお、図２に示した動作は、画像選択部１９が１つの画像を選択する毎に繰り返し実行される。
【００５４】
図２のステップＳ１１では、画像選択部１９が、選択した１つの画像のデータをデータフォルダ１１から読み出してシーン認識部１２に入力する。
【００５５】
ステップＳ１２では、シーン認識部１２が、入力された１つの画像のデータを処理して、この画像に含まれている各構成要素をそれぞれオブジェクトとして認識する。
【００５６】
ステップＳ１３では、シーン認識部１２が、ステップＳ１２で認識した各オブジェクトの特徴の組み合わせに基づいて、当該画像のシーンを特定する。すなわち、どのようなオブジェクトがどのように組み合わされてどのように画像中に配置されているのかを表す情報をシーンとして認識する。
【００５７】
ステップＳ１４では、シーン記憶部１４が、シーン認識部１２の認識結果であるシーンの情報を記憶する。新たなシーンがシーン認識部１２によって認識されると、最新の認識結果によってシーン記憶部１４の記憶内容は上書き（更新）される。なお、この内容が更新される前に記憶されていた過去のシーンの情報がシーン記憶部１４から出力され、シーン切替検出部１５に入力される。
【００５８】
ステップＳ１５では、シーン切替検出部１５が、現在選択（表示）している画像のシーンと前に選択した画像のシーンとを比較し、実質的に同じシーンか否か（特徴量の変化が小さいかどうか）を識別する。同じシーンであればステップＳ１６に進み、シーンの切り替わりを検出した場合にはステップＳ１７に進む。
【００５９】
ステップＳ１６では、キャラクタ決定部１３が、キャラクタデータベース１６上にある様々なコンテンツの中で、現在選択（表示）している画像のシーンと関連がある特定のキャラクタ等を選択し、これを出力用のキャラクタに決定する。なお、出力用のキャラクタの候補が複数存在する場合には、複数の候補の中からランダムな選択条件に従って１つの候補だけを最終的に選択する。また、あらかじめ優先順位を設定しておき、複数の候補の中から優先順位の高いものを選択してもよい。
【００６０】
ステップＳ１７では、キャラクタ決定部１３が、現在選択（表示）している画像の前に選択した画像のシーン（旧シーン）と関連のある第１のキャラクタと、現在選択している画像のシーン（新シーン）と関連のある第３のキャラクタと、旧シーンから新シーンに遷移する過渡状態と関連のある第２のキャラクタとをそれぞれキャラクタデータベース１６上のコンテンツの中からキャラクタ決定部１３が決定する。つまり、第２のキャラクタは、旧シーンと新シーンとの双方に関連している。
【００６１】
例えば、図３に示す画像２０１を最初に選択して表示し、次に画像２０２を選択して表示する場合には、画像２０１のシーンが海主体であるのに対し、画像２０２のシーンは砂浜主体であるので、画像２０２を選択してこれを処理する時に、シーンの切り替わりが検出され、ステップＳ１７が実行される。図３に示す各画像の例では、上記第１のキャラクタとして画像２０１に割り当てられたキャラクタ３０１と同等のキャラクタ３０２（泳ぐ人物に似たキャラクタ）が選択される。また、上記第２のキャラクタとして海から砂浜に上がる際の過渡状態を表すキャラクタ（泳ぐのをやめて砂浜に上がろうとする人物に似たキャラクタ）３０３が選択される。また、上記第３のキャラクタとして画像２０２のシーンと関連のあるキャラクタ（砂浜で遊ぶ人物に似たキャラクタ）３０４が選択される。
【００６２】
ステップＳ１８では、キャラクタ決定部１３が、シーン認識部１２が検出した各オブジェクトの特徴に基づいて、現在選択している画像に対するステップＳ１６又はＳ１７で決定した各キャラクタに関する位置、大きさ、向き（表示形態）を最適化するように制御する。つまり、キャラクタ決定部１３は、キャラクタを表示する際の表示形態を決定する表示形態決定部としての機能を有する。
【００６３】
ステップＳ１９では、合成部１７が、ステップＳ１６又はＳ１７でキャラクタ決定部１３が決定したキャラクタの情報をキャラクタデータベース１６から読み出し、ステップＳ１８でキャラクタ決定部１３が決定した位置、大きさ、向きに従ってキャラクタのパターンを制御した後、現在選択している画像上にこのキャラクタの情報を合成し、図３に示すように適当なキャラクタのパターンが埋め込まれた画像を生成する。
【００６４】
また、シーンの切り替わりが検出された時には、ステップＳ１７で複数のキャラクタが決定されているので、これら複数のキャラクタをシーンが切り替わることを表す特徴切替情報として、合成部１７が、合成画像を作成する。具体的には、旧シーンから新シーンに時間の経過に伴って徐々に切り替わるようなキャラクタ（特徴切替情報の一例）を選択している画像に合成する。
【００６５】
例えば、図３に示す画像２０１の海のシーンから砂浜のシーンに切り替わった直後の画像２０２（１）においては、旧シーンと関連のある第１のキャラクタ（泳ぐ人物に似たキャラクタ）３０２を合成する。次に画像２０２（２）のようにシーンの切り替わりの過渡状態であることを表す第２のキャラクタ（海から砂浜に上がろうとする人物に似たキャラクタ３０３）を合成する。次に、画像２０２（３）のように新シーンと関連のある第３のキャラクタ（砂浜で遊ぶ人物に似たキャラクタ３０４）を合成する。つまり、シーンが切り替わった時の画像２０２においては、各画像２０２（１）、２０２（２）、２０２（３）のように合成されるキャラクタの特徴が徐々に変化する。
【００６６】
ステップＳ２０では、表示部１８が、ステップＳ１９で合成部１７が合成した画像を可視情報として表示する。したがって、画像のシーンに切り替えがないときには、現シーン向けのキャラクタが選択された画像とともに表示され、画像のシーンに切り替えがあるときには、旧シーンから現シーンへ切り替わるときに、第１〜第３の各キャラクタが選択された画像とともに表示される。なお、旧シーンから現シーンへ切り替わるときとは、ある程度の時間幅を有してもよい。
【００６７】
上述のように、画像表示装置１００は、複数の画像として静止画や動画を記憶する画像記憶部としてデータフォルダ１１を有し、上記画像記憶部に記憶された画像の特徴に関するコンテンツを記憶するコンテンツ記憶部としてキャラクタデータベース１６を有し、上記画像記憶部に記憶された複数の画像のうち、いずれかの画像を選択する画像選択部として画像選択部１９を有し、上記画像選択部により選択された画像の特徴を認識する画像特徴認識部としてシーン認識部１２を有し、上記画像特徴認識部により認識された第１画像の特徴及び前記第１画像に連続する第２画像の特徴が異なるか否かを判定する特徴切替判定部としてシーン切替検出部１５を有し、上記特徴切替判定部により第１画像の特徴及び第２画像の特徴が異なると判定された場合、上記コンテンツ記憶部に記憶されたコンテンツのうち、上記画像特徴認識部により認識された第１画像の特徴及び第２画像の特徴の双方と関連のある特定のコンテンツを選択するコンテンツ選択部としてキャラクタ決定部１３を有し、上記特徴切替判定部により第１画像の特徴及び第２画像の特徴が異なると判定された場合、少なくとも表示内容が第１画像の表示から第２画像の表示に切り替わるときに、上記コンテンツ選択部により選択されたコンテンツに基づいて、第１画像の特徴と第２画像の特徴とが異なることを示す特徴切替情報を提示する特徴切替情報提示部として表示部１８を有している。
【００６８】
従って、例えば図３に示す画像２０１の海のシーンから画像２０２の砂浜のシーンに切り替わった時のように、海のシーンと砂浜のシーンの両方と関連を有する第２のキャラクタ３０３を過渡状態として表示したり、合成するキャラクタの特徴が時間の経過と共に変化するように表示形態やキャラクタ自体を切り替えたりすることにより、シーンの特徴が切り替わることをユーザに知らせることができる。なお、キャラクタを合成する代わりに、音声などの音響情報を利用しても良いし、これらを併用しても良い。
【００６９】
（変形例１）
図１に示した画像表示装置１００の構成及び図２に示した画像表示装置１００の動作の１つの変形例について、図４及び図５を参照しながら説明する。この変形例１の画像表示装置１００Ｂの構成が図４に示されており、画像表示装置１００Ｂの動作が図５に示されている。なお、図４及び図５において、図１及び図２と対応する構成要素及び動作は同一の符号あるいはステップ番号を付けて示してある。既に説明した画像表示装置１００と共通の構成及び動作については以下の説明を省略する。
【００７０】
図４に示すように、画像表示装置１００Ｂは主要被写体認識部２１、主要被写体記憶部２２、主要被写体切替検出部２３を備えている。
【００７１】
主要被写体認識部２１は、入力された画像のデータを処理してその特徴を検出する画像処理部である。具体的には、主要被写体認識部２１は公知の技術を用いて、画像の中に含まれる主要な被写体、例えば画像の中心付近に存在する物体や、画像の中で大きな面積を占める物体などのオブジェクトを認識する。具体的なオブジェクトとしては、人物、動植物、乗り物などが想定される。そして、主要被写体の種類（人の区別、物体の種類など）や、数、面積、形状、向き、画像中の位置などの特徴を主要被写体認識部２１が特定する。主要被写体認識部２１は各オブジェクトを認識するために必要な情報（認識用の辞書）を予め保持している。なお、主要被写体は画像の特徴の１つである。
【００７２】
主要被写体記憶部２２は、様々なデータの書き込み及び読み出しが可能な記憶装置であり、主要被写体認識部２１が認識した主要被写体の情報を一時的に記憶する。新たな主要被写体が主要被写体認識部２１によって認識されると、最新の認識結果によって主要被写体記憶部２２の記憶内容は上書き（更新）される。但し、この内容が更新される前に記憶されていた過去の主要被写体の情報が主要被写体記憶部２２から出力され主要被写体切替検出部２３に入力され得る。
【００７３】
主要被写体切替検出部２３は、複数の画像を所定の順番で連続的に選択しこれらを順番に表示する場合に、主要被写体認識部２１が認識した主要被写体の情報に基づいて、主要被写体の切り替わりの有無を識別する。すなわち、互いに隣接する（表示順、選択順が連続する）複数の画像の間で主要被写体の特徴量が所定以上大きく変化した場合に、「主要被写体切り替わり有」を検出する。例えば、各画像に含まれている主要被写体の種類が変化した場合や、主要被写体の数が大きく変化した場合に、「主要被写体切り替わり有」を検出する。互いに隣接する複数の画像の主要被写体を比較するために、主要被写体切替検出部２３は、主要被写体認識部２１が出力する最新の主要被写体（現在選択中の画像中の主要被写体）の情報と主要被写体記憶部２２が出力する過去の主要被写体（前に選択していた画像中の主要被写体）の情報とを同時に入力して比較する。
【００７４】
主要被写体認識部２１は、図５に示すステップＳ１１で読み込んだ画像の中に含まれている各オブジェクトをステップＳ１２で認識し、このオブジェクトの中から選択した主要被写体について、その種類（人物、動植物、乗り物などの区別）、数、大きさ、向き、形状などの特徴をステップＳ１３Ｂで特定する。
【００７５】
図５のステップＳ１５Ｂでは、主要被写体切替検出部２３が、主要被写体の切り替わりの有無を識別する。主要被写体の特徴に大きな変化がなければステップＳ１６Ｂに進み、主要被写体の特徴に大きな変化があった場合にはステップＳ１７Ｂに進む。
【００７６】
ステップＳ１６Ｂでは、キャラクタデータベース１６上にある様々なコンテンツの中で、現在選択（表示）している画像中の主要被写体と関連がある特定のキャラクタ等を自動的に選択し、これを出力用のキャラクタに決定する。なお、出力用のキャラクタの候補が複数存在する場合には、複数の候補の中からランダムな選択条件に従って１つの候補だけを最終的に選択する。また、先に説明したように、優先順位に応じて選択してもよい。
【００７７】
ステップＳ１７Ｂでは、現在選択（表示）している画像の１つ前に選択した画像中の主要被写体（旧主要被写体）と関連のある第１のキャラクタと、現在選択している画像中の主要被写体（新主要被写体）と関連のある第３のキャラクタと、旧主要被写体から新主要被写体に遷移する過渡状態と関連のある第２のキャラクタとをそれぞれキャラクタデータベース１６上のコンテンツの中からキャラクタ決定部１３Ｂが決定する。つまり、第２のキャラクタは、旧主要被写体と新主要被写体との双方に関連している。
【００７８】
（変形例２）
図１に示した画像表示装置１００の構成及び図２に示した画像表示装置１００の動作の１つの変形例について、図６及び図７を参照しながら説明する。この変形例２の画像表示装置１００Ｃの構成が図６に示されており、画像表示装置１００Ｃの動作が図７に示されている。なお、図６及び図７において、図１及び図２と対応する構成要素及び動作は同一の符号あるいはステップ番号を付けて示してある。既に説明した画像表示装置１００と共通の構成及び動作については以下の説明を省略する。
【００７９】
図６に示すように、画像表示装置１００Ｃは撮影場所認識部３１を備えている。この撮影場所認識部３１は、選択された各画像の撮影場所を認識し、その認識結果をキャラクタ決定部１３Ｃに与える。例えば、データフォルダ１１に保持されている各画像のデータにそれを撮影した地点を表す緯度／経度／高度の情報などが含まれている場合には、撮影場所認識部３１は、緯度／経度／高度と地名や施設名などとを関連付ける所定のデータベースを用いて、撮影場所の地名や施設名などを認識することができる。このデータベースについては、撮影場所認識部３１に内蔵しても良いし、通信が可能な環境であればインターネット上などに存在する任意のデータベースを流用しても良い。なお、撮影場所は画像の特徴の１つである。
【００８０】
図６に示すキャラクタ決定部１３Ｃは、撮影場所認識部３１の認識結果に応じて選択するキャラクタを決定することができる。また、図６中のキャラクタデータベース１６については、シーンの特徴と関連付けられるキャラクタだけでなく、場所の違いに応じた特徴を表現することが可能な様々なキャラクタや音響情報などをコンテンツとして保持している。つまり、撮影場所が画像の特徴の１つとして認識される。
【００８１】
画像表示装置１００Ｃの動作については、図７に示すように、ステップＳ１６、Ｓ１７の後でステップＳ２１を実行する。このステップＳ２１では、撮影場所認識部３１が、選択中の画像について撮影場所を認識する。
【００８２】
キャラクタ決定部１３Ｃは、撮影場所の情報を撮影場所認識部３１から取得し、１つ前に選択していた画像の撮影場所の情報と、現在選択している画像の撮影場所の情報とを把握する。そして、キャラクタ決定部１３Ｃは、前に選択していた画像の撮影場所と現在選択している画像の撮影場所とをステップＳ２２で比較し、撮影場所が同じ（実質的に同じ）であればステップＳ２３に進み、撮影場所が変化した場合はステップＳ２４に進む。
【００８３】
ステップＳ２３では、キャラクタ決定部１３Ｃが、現在選択している画像の撮影場所と関連のあるキャラクタをキャラクタデータベース１６上で検索し特定のキャラクタを決定する。複数のキャラクタが候補として検出された場合には、ランダムな条件に従って１つのキャラクタのみを最終的に選択する。また、あらかじめ優先順位を設けても良い。
【００８４】
ステップＳ２４では、キャラクタ決定部１３Ｃが、現在選択（表示）している画像の１つ前に選択した画像の撮影場所（旧場所）と関連のある第４のキャラクタと、現在選択している画像の撮影場所（新場所）と関連のある第６のキャラクタと、旧場所から新場所に遷移する過渡状態と関連のある第５のキャラクタと、をそれぞれキャラクタデータベース１６上のコンテンツの中から決定する。つまり、第５のキャラクタは、旧場所と新場所との双方に関連している。
【００８５】
ステップＳ１９Ｃでは、合成部１７が、ステップＳ１６、Ｓ１７、Ｓ２３、Ｓ２４のいずれかでキャラクタ決定部１３Ｃが決定したキャラクタの情報をキャラクタデータベース１６から読み出し、ステップＳ１８でキャラクタ決定部１３が決定した位置、大きさ、向きに従ってキャラクタのパターンを制御した後、現在選択している画像上にこのキャラクタの情報を合成し、図３に示すように適当なキャラクタのパターンが埋め込まれた画像を生成する。
【００８６】
また、撮影場所の切り替わりが検出された時には、ステップＳ２４で複数のキャラクタが決定されているので、これら複数のキャラクタを撮影場所が切り替わることを表す特徴切替情報として、ステップＳ１９Ｃで、合成部１７が、合成画像を作成する。具体的には、旧場所から新場所に時間の経過に伴って徐々に切り替わるようなキャラクタ（特徴切替情報の一例）を画像に合成する。
【００８７】
例えば、旅行などの際に電車で移動しながらその車内で写真を撮影する場合を想定すると、撮影される画像のシーンがほとんど変化しない場合であっても、撮影場所は「東京」、「大阪」、「京都」と順次変化することになる。このような場合、撮影場所が変わる毎に、合成するキャラクタを該当する地名や施設名と関連のあるものに変更することができる。
【００８８】
（変形例３）
図１に示した画像表示装置１００の構成及び図２に示した画像表示装置１００の動作の１つの変形例について、図８及び図９を参照しながら説明する。この変形例３の画像表示装置１００Ｄの構成が図８に示されており、画像表示装置１００Ｄの動作が図９に示されている。なお、図８及び図９において、図１及び図２と対応する構成要素及び動作は同一の符号あるいはステップ番号を付けて示してある。既に説明した画像表示装置１００と共通の構成及び動作については以下の説明を省略する。
【００８９】
図８に示すように、画像表示装置１００Ｄは撮影時刻認識部４１を備えている。この撮影時刻認識部４１は、選択された画像の撮影時刻を認識する。例えば、データフォルダ１１上に保持されている各画像のデータにそれの撮影時刻を表す情報が付加されている場合には、画像選択部１９が選択した画像に付加された撮影時刻の情報をデータフォルダ１１から読み込んで、その時刻を撮影時刻認識部４１が認識する。なお、撮影時刻は画像の特徴の１つである。
【００９０】
図８に示すキャラクタ決定部１３Ｄは、撮影時刻認識部４１の認識結果に応じて選択するキャラクタを決定することができる。また、図８中のキャラクタデータベース１６については、シーンの特徴と関連付けられるキャラクタだけでなく、撮影時刻の違いに応じた特徴を表現することが可能な様々なキャラクタや音響情報などをコンテンツとして保持している。つまり、撮影時刻が画像の特徴の１つとして認識される。
【００９１】
画像表示装置１００Ｄの動作については、図９に示すように変更されている。すなわち、ステップＳ１１の次のステップＳ３１で、撮影時刻認識部４１が、撮影時刻を認識する。また、現在選択中の画像と前の画像との間でシーンの切り替わりが検出されなかった場合には、ステップＳ１５からステップＳ３２に進む。
【００９２】
ステップＳ３２では、キャラクタ決定部１３Ｄが、現在選択（表示）している画像の１つ前に選択した画像の撮影時刻（旧時刻）と関連のある第７のキャラクタと、現在選択している画像の撮影時刻（新時刻）と関連のある第９のキャラクタと、旧時刻から新時刻に遷移する過渡状態と関連のある第８のキャラクタと、をそれぞれキャラクタデータベース１６上のコンテンツの中から決定する。つまり、第８のキャラクタは、旧時刻と新時刻との双方に関連している。
【００９３】
図９のステップＳ１９では、合成部１７が、ステップＳ３２又はステップＳ１７で決定した第１のキャラクタ、第２のキャラクタ、第３のキャラクタ、又は、第７のキャラクタ、第８のキャラクタ、第９のキャラクタのいずれかを時間の経過に伴って順次に選択し、このキャラクタのパターンを画像選択部１９が現在選択している画像に合成する。
【００９４】
従って、画像選択部１９が選択する画像の切り替わりに伴って画像のシーンが変化しない場合であっても、現在選択している画像と１つ前に選択していた画像との撮影時刻の違いを、表示する画像に合成するキャラクタの違いによって表現することができる。また、現在の画像と前の画像との撮影時刻の差異をキャラクタの特徴に反映したり、過渡状態の長さに反映したりしてもよい。
【００９５】
（変形例４）
図１に示した画像表示装置１００の構成及び図２に示した画像表示装置１００の動作の１つの変形例について、図１０及び図１１を参照しながら説明する。この変形例４の画像表示装置１００Ｅの構成が図１０に示されており、画像表示装置１００Ｅの動作が図１１に示されている。なお、図１０及び図１１において、図１及び図２と対応する構成要素及び動作は同一の符号あるいはステップ番号を付けて示してある。既に説明した画像表示装置１００と共通の構成及び動作については以下の説明を省略する。
【００９６】
図１０に示すように、画像表示装置１００Ｅは、シーン出現回数カウント部５１を備えている。このシーン出現回数カウント部５１は、シーン認識部１２の認識結果を入力し、それぞれのシーンが出現した回数を計数し、その情報を内部メモリに保持する。すなわち、シーン認識部１２が認識したシーンのうち、同一のシーンや類似のシーンは同一のグループに区分し、シーンが同一のグループ毎にシーン出現回数を計数する。また、シーン出現回数カウント部５１は、現在選択している画像のシーンと同一のグループについて、その出現回数を表す最新の情報をキャラクタ決定部１３Ｅに与える。
【００９７】
図１０に示すキャラクタ決定部１３Ｅは、シーン出現回数カウント部５１が出力するシーン出現回数に応じて選択するキャラクタを決定することができる。また、図１０中のキャラクタデータベース１６については、シーンの特徴と関連付けられるキャラクタだけでなく、シーン出現回数の違いに応じた特徴を表現することが可能な様々なキャラクタや音響情報などをコンテンツとして保持している。
【００９８】
画像表示装置１００Ｅの動作については、図１１に示すように変更されている。すなわち、ステップＳ１４の次のステップＳ４１で、シーン出現回数カウント部５１が、現在の画像のシーンに関するシーン出現回数をカウントアップし、その結果のシーン出現回数をキャラクタ決定部１３Ｅに与える。
【００９９】
ステップＳ４２では、シーン切替検出部１５が、現在選択（表示）している画像のシーンと前に選択した画像のシーンとを比較し、実質的に同じシーンか否か（特徴量の変化が小さいかどうか）を識別する。同じシーンであればステップＳ４３に進み、シーンの切り替わりを検出した場合にはステップＳ４４に進む。
【０１００】
ステップＳ４３では、キャラクタ決定部１３Ｅが、現在選択（表示）している画像のシーン（現シーン）と関連のあるキャラクタを、キャラクタデータベース１６上のコンテンツの中から、現シーンの出現回数を考慮して決定する。
【０１０１】
例えば、泳ぐ人に似たキャラクタを選択する場合には、下手な泳ぎ方をするキャラクタと上手な泳ぎ方をするキャラクタとを用意しておき、出現回数が少ない時には前者のキャラクタを選択し、出現回数が増えると後者のキャラクタを選択するように切り替えれば、シーン出現回数が大きくなるにつれて泳ぎ方が次第にうまくなる様子を、キャラクタの変化で表現できる。また、例えば元気な泳ぎ方をするキャラクタと疲れた泳ぎ方をするキャラクタとを用意しておき、出現回数が少ない時には前者のキャラクタを選択し、出現回数が増えると後者のキャラクタを選択するように切り替えれば、泳ぐ時間が長くなるにつれて疲れる様子をキャラクタの変化で表現できる。
【０１０２】
ステップＳ４４では、キャラクタ決定部１３が、現在選択（表示）している画像の１つ前に選択した画像のシーン（旧シーン）と関連のある第１のキャラクタと、現在選択している画像のシーン（新シーン）と関連のある第３のキャラクタと、旧シーンから新シーンに遷移する過渡状態と関連のある第２のキャラクタと、をそれぞれキャラクタデータベース１６上のコンテンツの中から決定する。また、各キャラクタを選択する際には、シーンの特徴だけでなく、該当するシーンの出現回数を考慮して自動的に決定する。
【０１０３】
従って、画像表示装置１００Ｅの場合には、順次に選択され表示される画像の中に同じシーンや似たシーンの画像が現れる毎に、出現回数の違いに応じて変化するキャラクタを用いて状況の変化を表現することが可能になる。
【０１０４】
（変形例５）
図１に示した画像表示装置１００の構成及び図２に示した画像表示装置１００の動作の１つの変形例について、図１２及び図１３を参照しながら説明する。この変形例５の画像表示装置１００Ｆの構成が図１２に示されており、画像表示装置１００Ｆの動作が図１３に示されている。なお、図１２及び図１３において、図１及び図２と対応する構成要素及び動作は同一の符号あるいはステップ番号を付けて示してある。既に説明した画像表示装置１００と共通の構成及び動作については以下の説明を省略する。
【０１０５】
図１２に示すように、画像表示装置１００Ｆは、同一シーン連続回数カウント部６１を備えている。この同一シーン連続回数カウント部６１は、現在選択している画像と実質的に同じシーンの画像が何回、連続的に現れたのかを表す連続回数を計数し、その結果（連続回数）をキャラクタ決定部１３Ｆに与える。同一シーン連続回数カウント部６１の計数値は、シーン切替検出部１５がシーンの切り替わりを検出する毎にクリアされ、１つの画像を新たに選択する毎にカウントアップされる。
【０１０６】
図１２に示すキャラクタ決定部１３Ｆは、同一シーン連続回数カウント部６１が出力する同一シーン連続回数に応じて選択するキャラクタを決定することができる。また、図１２中のキャラクタデータベース１６については、シーンの特徴と関連付けられるキャラクタだけでなく、同一シーン連続回数の違いに応じた特徴を表現することが可能な様々なキャラクタや音響情報などをコンテンツとして保持している。
【０１０７】
画像表示装置１００Ｆの動作については、シーン切替検出部１５が、図１３に示すように変更されている。すなわち、ステップＳ５１では、現在選択（表示）している画像のシーンと前に選択した画像のシーンとを比較し、実質的に同じシーンか否か（特徴量の変化が小さいかどうか）を識別する。同じシーンであればステップＳ５２に進み、シーンの切り替わりを検出した場合にはステップＳ５４に進む。
【０１０８】
ステップＳ５２では、同一シーン連続回数カウント部６１が、同一シーン連続回数の計数値をカウントアップする。
【０１０９】
ステップＳ５３では、キャラクタ決定部１３Ｆが、現在選択している画像のシーン（現シーン）と関連のあるキャラクタを、キャラクタデータベース１６上のコンテンツの中から決定する。キャラクタを決定する際には、同一シーン連続回数カウント部６１が出力する同一シーン連続回数を考慮してキャラクタの種類等の選択を行う。
【０１１０】
例えば、海のシーンで、泳ぐ人に似たキャラクタを選択する場合には、下手な泳ぎ方をするキャラクタと上手な泳ぎ方をするキャラクタとを用意しておき、同一シーン連続回数が少ない時には前者のキャラクタを選択し、同一シーン連続回数が増えると後者のキャラクタを選択するように切り替えれば、同一シーン連続回数が増えるにつれて泳ぎ方が次第にうまくなる様子を、キャラクタの変化で表現できる。また、例えば元気な泳ぎ方をするキャラクタと疲れた泳ぎ方をするキャラクタとを用意しておき、同一シーン連続回数が少ない時には前者のキャラクタを選択し、同一シーン連続回数が増えると後者のキャラクタを選択するように切り替えれば、泳ぐ時間が長くなるにつれて疲れる様子をキャラクタの変化で表現できる。
【０１１１】
ステップＳ５４では、キャラクタ決定部１３が、現在選択（表示）している画像の１つ前に選択した画像のシーン（旧シーン）と関連のある第１のキャラクタと、現在選択している画像のシーン（新シーン）と関連のある第３のキャラクタと、旧シーンから新シーンに遷移する過渡状態と関連のある第２のキャラクタと、をそれぞれキャラクタデータベース１６上のコンテンツの中から決定する。また、過渡状態と関連のある第２のキャラクタを選択する際には、シーンの特徴だけでなく、旧シーンの同一シーン連続回数をキャラクタの変化する様子に反映できるように、同一シーン連続回数を考慮して決定する。
【０１１２】
例えば、海のシーンから砂浜のシーンに切り替わる時には、海から砂浜に上がろうとする人物に似たキャラクタを前記第２のキャラクタとして選択することが具体例として想定されるが、同一シーン連続回数が多い時にはこれが少ない時と比べてより疲れた状態を表現するキャラクタを選択することにより、旧シーンとして海のシーンが長く続いたことをユーザに把握させることが可能になる。
【０１１３】
ステップＳ５５では、同一シーン連続回数カウント部６１が同一シーン連続回数の計数値をクリアする。これ以降、現在選択している画像と同じシーンについて、同一シーン連続回数が初期値（０）から計数開始される。
【０１１４】
（変形例６）
図１に示した画像表示装置１００の構成及び図２に示した画像表示装置１００の動作の１つの変形例について、図１４及び図１５を参照しながら説明する。この変形例６の画像表示装置１００Ｇの構成が図１４に示されており、画像表示装置１００Ｇの動作が図１５に示されている。なお、図１４及び図１５において、図１及び図２と対応する構成要素及び動作は同一の符号あるいはステップ番号を付けて示してある。既に説明した画像表示装置１００と共通の構成及び動作については以下の説明を省略する。
【０１１５】
図１４に示すように、画像表示装置１００Ｇは、キャラクタ保存選択入力部７１、キャラクタパターン記憶部７２、画像関連付け記憶部７３を備えている。
【０１１６】
キャラクタ保存選択入力部７１は、ユーザの好みのキャラクタのデータを保存するために、ユーザの入力操作を受け付けるための入力部（例えば操作ボタン）である。
【０１１７】
キャラクタパターン記憶部７２は、現在表示している画像に合成されている特定のキャラクタパターンのデータを、キャラクタ保存選択入力部７１からの指示に従って、合成部１７又はキャラクタデータベース１６から入力し、このデータを内部メモリに保存する。
【０１１８】
画像関連付け記憶部７３は、少なくとも現在選択し表示している特定の画像とこれに合成部１７が合成した特定のキャラクタ（キャラクタパターン記憶部７２の記録内容）とを関連付けるための情報を内部メモリに記録する。また、この画像とキャラクタとを合成した結果（表示されている合成画像と同等の情報）を同時に保存してもよい。該当する画像とキャラクタとの関連付けの情報は、画像関連付け記憶部７３から出力され、データフォルダ１１上の該当する画像のデータに付加される。
【０１１９】
図１４の画像表示装置１００Ｇは、図２に示した動作の他に、図１５に示す動作を行う。
図１５のステップＳ６１では、キャラクタ保存選択入力部７１が、キャラクタ保存機能に関する入力操作の有無を監視し、ステップＳ６２では、不図示の制御部が、キャラクタ保存要求があったか否かを識別する。キャラクタ保存要求があった場合はステップＳ６３に進む。
【０１２０】
ステップＳ６３では、キャラクタパターン記憶部７２が、現在の画像に対して合成部１７が合成しているキャラクタについて、当該キャラクタの種類や名称、キャラクタの動作、挿入位置、キャラクタの大きさ、キャラクタの向きなどの情報をキャラクタパターンとして記録する。
【０１２１】
ステップＳ６４では、画像関連付け記憶部７３が、現在の画像（例えば静止画）とキャラクタパターンとを関連付け、関連付けた結果を画像関連付け記憶部７３の内部又はデータフォルダ１１上に記録する。
【０１２２】
このように、画像関連付け記憶部７３又はデータフォルダ１１が特定の画像と特定のキャラクタとの関連付けを記録した場合には、これと同じ組み合わせの合成画像を何度でも再現することができる。
【０１２３】
画像とキャラクタパターンとの関連付け情報が保存されると、関連付けの情報に従って特定のキャラクタを選択し、当該キャラクタの情報を合成部１７に与える。従って、事前にユーザが保存を指示した合成画像については、特定の画像と特定のキャラクタとの組み合わせを、何度でも同じ状態で再現し表示することができる。
【０１２４】
なお、各画像表示装置が有するキャラクタデータベース１６上に用意するキャラクタ等のコンテンツについては、静止画のように変化しないキャラクタであっても良いし、複数のキャラクタの集合により構成されるアニメーションのような表現が可能な動画であっても良い。また、合成部１７が特徴切替情報として画像に合成するキャラクタ等のコンテンツについては、キャラクタデータベース１６上のコンテンツの中からキャラクタ決定部１３によって選択されたキャラクタ自体を用いても良いし、このキャラクタを加工（サイズ変更、向きの変更、表示色の変更、形状の変形など）して利用しても良いし、複数のキャラクタを組み合わせて動画のように時間の経過と共に変化するキャラクタを利用しても良い。
【０１２５】
いずれにしても、前述の各画像表示装置によれば、選択する画像のシーン、主要被写体、撮影場所、撮影時刻などが切り替わる時に、その変化を画像に合成される特徴切替情報によって表現することができるので、ユーザは特徴切替情報によりシーンの切り替わりや前後の画像等を把握できる。
【０１２６】
なお、例えば図１に示した画像表示装置１００の場合には、前に選択した画像と現在選択している画像との間のシーンの切り替わりを検出しているが、現在選択している画像と次に選択される予定の画像との間のシーンの切り替わりを検出し、その結果を特徴切替情報に反映するように制御することも可能である。
【０１２７】
このように、本実施形態の画像表示装置によれば、連続的に表示される複数の画像の特徴を同時に把握することが容易である。特に、画像表示装置１００が、携帯端末装置のような、画面サイズや解像度が比較的小さくて１つの表示画面上に複数の画像を並べて高解像度で表示することができない場合であっても、前後の画像の変化をスムーズに認識することができる。
【産業上の利用可能性】
【０１２８】
本発明は、連続的に表示される複数の画像の特徴を同時に把握することが容易な画像表示装置、携帯端末装置等に有用である。
【符号の説明】
【０１２９】
１１  データフォルダ
１２  シーン認識部
１３  キャラクタ決定部
１４  シーン記憶部
１５  シーン切替検出部
１６  キャラクタデータベース（キャラクタＤＢ）
１７  合成部
１８  表示部
１９  画像選択部
２１  主要被写体認識部
２２  主要被写体記憶部
２３  主要被写体切替検出部
３１  撮影場所認識部
４１  撮影時刻認識部
５１  シーン出現回数カウント部
６１  同一シーン連続回数カウント部
７１  キャラクタ保存選択入力部
７２  キャラクタパターン記憶部
７３  画像関連付け記憶部
１００、１００Ｂ〜１００Ｇ  画像表示装置
２０１，２０２  画像
３０１，３０２，３０３，３０４  キャラクタ
【図１】
2011160285.tif 000003
【図２】
2011160285.tif 000004
【図３】
2011160285.tif 000005
【図４】
2011160285.tif 000006
【図５】
2011160285.tif 000007
【図６】
2011160285.tif 000008
【図７】
2011160285.tif 000009
【図８】
2011160285.tif 000010
【図９】
2011160285.tif 000011
【図１０】
2011160285.tif 000012
【図１１】
2011160285.tif 000013
【図１２】
2011160285.tif 000014
【図１３】
2011160285.tif 000015
【図１４】
2011160285.tif 000016
【図１５】
2011160285.tif 000017