(57)【要約】【課題】動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合に、各画像の画像内容に応じて、各種効果を自動的に付与して画像再生を行う。【解決手段】画像再生装置１０は、動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生するに際し、再生対象画像に含まれる各画像の特徴量をそれぞれ抽出し、ｎ種類（ｎは、２以上の整数）の特徴量で表されるｎ次元画像特徴量空間を仮定し、抽出された各画像の特徴量をｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、複数の再生対象画像の再生制御を行う。【選択図】図２
2008288804.tif 000002
【特許請求の範囲】
【請求項１】
動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生する画像再生装置であって、
前記再生対象画像に含まれる各画像の特徴量をそれぞれ抽出する特徴量抽出部と、
ｎ種類（ｎは、２以上の整数）の前記特徴量で表されるｎ次元画像特徴量空間を仮定し、前記特徴量抽出部により抽出された各前記画像の特徴量を前記ｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行う再生制御部と、
を備えたことを特徴とする画像再生装置。
【請求項２】
請求項１記載の画像再生装置において、
複数の楽曲データを、前記楽曲データの特徴に基づいて、少なくとも季節および時刻を空間軸とするベクトル空間に割り当てた楽曲ベクトル空間情報を記憶する楽曲ベクトル空間記憶部を備え、
前記特徴量として、前記画像を撮影した撮影日時に関する情報を含み、
前記再生制御部は、前記楽曲ベクトル空間情報を参照して、前記撮影日時が属する季節および時刻に基づいて、前記楽曲データを選択し、前記選択された前記楽曲データを前記画像のＢＧＭとして付与することを特徴とする画像再生装置。
【請求項３】
請求項１または請求項２記載の画像再生装置において、
前記特徴量として、前記画像に関連する文書に含まれる重要語のＴＦ／ＩＤＦ値を用いることを特徴とする画像再生装置。
【請求項４】
請求項１ないし請求項３のいずれかに記載の画像再生装置において、
前記特徴量として、前記画像に予め付与されたメタデータを用いることを特徴とする画像再生装置。
【請求項５】
請求項４記載の画像再生装置において、
前記メタデータは、撮影日時または撮影場所の少なくともいずれかを含むことを特徴とする画像再生装置。
【請求項６】
請求項１ないし請求項５のいずれかに記載の画像再生装置において、
前記特徴量として、地図データベースから抽出された撮影場所および撮影場所近辺に関する情報を用いることを特徴とする画像再生装置。
【請求項７】
請求項２記載の画像再生装置において、
前記画像に対応する前記属性ベクトルあるいは前記空間座標の次元が、ｎ次元を超える場合に前記属性ベクトルあるいは前記空間座標の次元を削減する次元削減部を備えたことを特徴とする画像再生装置。
【請求項８】
動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生する画像再生装置の制御方法であって、
前記再生対象画像に含まれる各画像の特徴量をそれぞれ抽出する特徴量抽出過程と、
ｎ種類（ｎは、２以上の整数）の前記特徴量で表されるｎ次元画像特徴量空間を仮定し、前記特徴量抽出部により抽出された各前記画像の特徴量を前記ｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行う再生制御過程と、
を備えたことを特徴とする画像再生装置の制御方法。
【請求項９】
動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生する画像再生装置をコンピュータにより制御するための制御プログラムであって、
前記再生対象画像に含まれる各画像の特徴量をそれぞれ抽出させ、
ｎ種類（ｎは、２以上の整数）の前記特徴量で表されるｎ次元画像特徴量空間を仮定し、前記抽出された各前記画像の特徴量を前記ｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行わせる、
ことを特徴とする制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像再生装置、画像再生装置の制御方法および制御プログラムに係り、特に動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合に画像効果やＢＧＭを自動的に付与して再生するための技術に関する。
【背景技術】
【０００２】
従来、動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合には、画像毎にどのような効果を付与して再生するかを手作業で設定する必要があり、特に多数の画像を用いて再生を行う場合、多大な時間を費やしてしまうとともに、慣れないユーザにとってはとても煩雑な作業となっていた。
例えば、複数の静止画を用いてスライドショーを作成する場合、画像の画像効果やＢＧＭがないか、あるいは、常に同一の画像効果やＢＧＭを用いるなど単調なものであれば、演出効果のない、退屈なスライドショーとなり、再生効果が損なわれてしまう。
さらに、これらの画像効果やＢＧＭが、再生している画像と全く関係なく行われれば、視聴者は、画像からストーリ性を感じることもできない。
【特許文献１】特開２００６−１８６５０５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
これを解決するため、特許文献１記載の技術では、無音区間を検出することにより、画像とＢＧＭの再生時間が一致するようにしているが、画像の内容的なものは考慮しておらず、画像により好適なＢＧＭを再生させたり、再生対象の画像により好適な画像効果を付与することもできないという問題点があった。
ところで、近年、ディジタルカメラやディジタルビデオ、カメラ付携帯電話等の普及により、個人が保存している画像等のコンテンツは増加する一方である。代表的なコンテンツであるディジタル画像データには、ディジタルカメラの機能によって、撮影日時を示す情報等を含むメタデータが付加されることが多い。このメタデータに含まれる情報を利用すれば、例えば特定の日に撮影されたディジタル画像データを検索することができ、ディジタル画像データの管理の一助としていた。しかしながら、メタデータはあくまで管理のために用いるものであり、再生制御に用いられてはいなかった。
そこで、本発明の目的は、動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合に、各画像の画像内容に応じて、各種効果を自動的に付与して画像再生を行うことが可能な画像再生装置、画像再生装置の制御方法および制御プログラムを提供することにある。
【課題を解決するための手段】
【０００４】
上記課題を解決するため、本発明の第一形態は、動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生する画像再生装置であって、前記再生対象画像に含まれる各画像の特徴量をそれぞれ抽出する特徴量抽出部と、ｎ種類（ｎは、２以上の整数）の前記特徴量で表されるｎ次元画像特徴量空間を仮定し、前記特徴量抽出部により抽出された各前記画像の特徴量を前記ｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行う再生制御部と、を備えたことを特徴としている。
上記構成によれば、特徴量抽出部は、再生対象画像に含まれる各画像の特徴量をそれぞれ抽出する。
これにより、再生制御部は、特徴量抽出部により抽出された各画像の特徴量をｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行う。
したがって、動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合に、各画像の特徴量に応じて、各種効果を自動的に付与して画像再生を行うことができる。
【０００５】
また、本発明の第二形態は、第一形態の画像再生装置において、複数の楽曲データを、前記楽曲データの特徴に基づいて、少なくとも季節および時刻を空間軸とするベクトル空間に割り当てた楽曲ベクトル空間情報を記憶する楽曲ベクトル空間記憶部を備え、前記特徴量として、前記画像を撮影した撮影日時に関する情報を含み、前記再生制御部は、前記楽曲ベクトル空間情報を参照して、前記撮影日時が属する季節および時刻に基づいて、前記楽曲データを選択し、前記選択された前記楽曲データを前記画像のＢＧＭとして付与することを特徴としている。
上記構成によれば、楽曲ベクトル空間記憶部は、複数の楽曲データを、前記楽曲データの特徴に基づいて、少なくとも季節および時刻を空間軸とするベクトル空間に割り当てた楽曲ベクトル空間情報を記憶し、再生制御部は、楽曲ベクトル空間情報を参照して、撮影日時が属する季節および時刻に基づいて、楽曲データを選択し、画像のＢＧＭとして付与するので、撮影日時が属する季節及び時刻に対応した楽曲データが自動的にＢＧＭとして再生される。
また、本発明の第三形態は、第一形態または第二形態の画像再生装置において、前記特徴量として、前記画像に関連する文書に含まれる重要語のＴＦ／ＩＤＦ値を用いることを特徴としている。
上記構成によれば、画像に関連する文書に含まれる重要語のうち、ＴＦ／ＩＤＦ値に基づいて、より関連性の高い重要語に基づいて再生制御を行えるので、視聴者にとってより画像内容に則した違和感のない再生制御が行える。
【０００６】
また、本発明の第四形態は、第一形態ないし第三形態のいずれかの画像再生装置において、前記特徴量として、前記画像に予め付与されたメタデータを用いることを特徴としている。
上記構成によれば、より確実に画像内容に則した違和感のない再生制御が行える。
また、本発明の第五形態は、第四形態の画像再生装置において、前記メタデータは、撮影日時または撮影場所の少なくともいずれかを含むことを特徴としている。
上記構成によれば、撮影日時あるいは撮影場所に対応づけて、画像内容に則した最適な画像再生制御が行える。
【０００７】
また、本発明の第六形態は、第一形態ないし第五形態のいずれかの画像再生装置において、前記特徴量として、地図データベースから抽出された撮影場所および撮影場所近辺に関する情報を用いることを特徴としている。
上記構成によれば、地図データベースから抽出された撮影場所および撮影場所近辺に関する情報は、再生対象の画像に関連した情報を含むこととなり、より画像内容に則した最適な画像再生制御が行える。
また、本発明の第七形態は、第２形態の画像再生装置において、前記画像に対応する前記属性ベクトルあるいは前記空間座標の次元が、ｎ次元を超える場合に前記属性ベクトルあるいは前記空間座標の次元を削減する次元削減部を備えたことを特徴としている。
上記構成によれば、次元削減部は、画像に対応する属性ベクトルあるいは空間座標の次元が、ｎ次元を超える場合に属性ベクトルあるいは空間座標の次元を削減するので、確実に対応付けを行って、画像再生制御を行える。
【０００８】
また、本発明の第八形態は、動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生する画像再生装置の制御方法であって、前記再生対象画像に含まれる各画像の特徴量をそれぞれ抽出する特徴量抽出過程と、ｎ種類（ｎは、２以上の整数）の前記特徴量で表されるｎ次元画像特徴量空間を仮定し、前記特徴量抽出部により抽出された各前記画像の特徴量を前記ｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行う再生制御過程と、を備えたことを特徴としている。
上記構成によれば、動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合に、各画像の特徴量に応じて、各種効果を自動的に付与して画像再生を行うことができる。
【０００９】
また、本発明の第九形態は、動画像、静止画像あるいはそれらの組み合わせを含む複数の再生対象画像を再生する画像再生装置をコンピュータにより制御するための制御プログラムであって、前記再生対象画像に含まれる各画像の特徴量をそれぞれ抽出させ、ｎ種類（ｎは、２以上の整数）の前記特徴量で表されるｎ次元画像特徴量空間を仮定し、前記抽出された各前記画像の特徴量を前記ｎ次元画像特徴量空間における属性ベクトルあるいは空間座標とし、当該属性ベクトルあるいは当該空間座標に基づいて、前記複数の再生対象画像の再生制御を行わせる、ことを特徴としている。
上記構成によれば、動画像、静止画像あるいはそれらの組み合わせとしての複数の画像を再生する場合に、各画像の特徴量に応じて、各種効果を自動的に付与して画像再生を行うことができる。
この場合において、制御プログラムをコンピュータ読取可能な記録媒体に記録するようにしても良い。
【発明を実施するための最良の形態】
【００１０】
次に図面を参照して本発明の好適な実施形態について説明する。
図１は、実施形態の画像再生装置の概要構成ブロック図である。
画像再生装置１０は、パーソナルコンピュータとして構成されており、画像処理を行う画像再生装置本体１１と、各種画像入力を行う画像入力装置１２と、各種操作を行うためのキーボード、マウスなどの入力装置１３と、各種表示を行う液晶ディスプレイなどの表示装置１４と、印刷を行うプリンタなどの出力装置１５と、後述する画像再生方法に関連するデータを含む各種データを記憶するハードディスク装置などの外部記憶装置１６と、を備えている。
画像再生装置本体１１は、当該画像再生装置本体１１全体の制御を行うマイクロプロセッサユニット（ＭＰＵ）２１と、各種制御プログラムを含む各種データを記憶するＲＯＭ２２と、ＭＰＵ２１のワークエリアとして機能するＲＡＭ２３と、ＬＡＮ、インターネットなどの外部の通信ネットワークとの間のインタフェース動作を行う通信インタフェース部２４と、を備えている。
【００１１】
図２は、画像再生装置の機能ブロック図である。
画像再生装置１０は、大別すると、映像・画像入力部３１と、テキスト抽出部３２と、形態素解析部３３と、重要度算出部３４と、次元削減部３５と、画像再生方法記憶部３６と、を備えている。
映像・画像入力部３１は、放送電波、通信ネットワークあるいはＩＣメモリカードなどのデータ記憶媒体を介して動画像データ（動画像に対応）あるいは静止画像データ（静止画に対応）を入力する。具体的には、様々な画像フォーマットの画像を、様々な圧縮形式、ファイル形式を有するファイルや、スキャナ、ディジタルカメラ、ディジタルビデオカメラなどの入力装置から抽出あるいは受け取ることとなる。この場合において、圧縮形式としては、ＪＰＥＧ、ＭＰＥＧ−４、Ｈ．２６４等が挙げられる。
【００１２】
テキスト抽出部３２は、ＸＨＴＭＬ（個人のホームページ、ブログなど）、送受信した電子メール、ＸＭＬ（楽曲の検索用メタデータなど）で記述されているハイパーテキストデータや地図データベースからタグ情報以外のテキストデータを抽出する。
形態素解析部３３は、ブログなどのテキストデータあるいは音声認識部により音声認識したテキストデータに対応するテキストの形態素解析を行い、単語（語句）を抽出し、必要に応じてステミングを行う。
【００１３】
重要度算出部３４は、複数の関連コンテンツから、最も関連が深い関連コンテンツ（コンテンツｉと表記）、からメタデータとする語句を抽出する。
この場合において、関連コンテンツを代表する語句、すなわち、当該関連コンテンツの中で重要度の高い語句を、動画像あるいは静止画像を最も良く表現する語句とみなして、重要語句と表現する。
ここでは、ＴＦ／ＩＤＦ（Ｔｅｒｍ  Ｆｒｅｑｕｅｎｃｙ  ＆  Ｉｎｖｅｒｓｅ  Ｄｏｃｕｍｅｎｔ  Ｆｒｅｑｕｅｎｃｙ）処理によって重要度を算出する。そして、重要度算出部３４は、下記式（１）によって、形態素解析部３３によりコンテンツｉから抽出された各々の語句ｊの重要度ｔｆｉｄｆ（ｉ，ｊ）を求める。
【００１４】
以下、具体的に説明する。
まず、コンテンツｉにおける語句ｊの出現頻度をＦｒｅｑ（ｉ，ｊ）とし、関連コンテンツでの出現頻度に関わるｔｆ（ｉ，ｊ）を算出する。
ｔｆ（ｉ，ｊ）＝ｌｏｇ（Ｆｒｅｑ（ｉ，ｊ）＋１）／ｌｏｇ（コンテンツｉの総語句数）
ここで、ｔｆ（ｉ，ｊ）は、関連コンテンツのテキストデータにおける出現頻度をもとに、語句の重要度を表す指標である。言い換えれば、コンテンツ中に多く出現する語句が、重要な語句とみなされる。
【００１５】
次にｄｆ（ｊ）を語句ｊが出現するコンテンツ数として、ｉｄｆ（ｊ）を算出する。
ｉｄｆ（ｊ）＝ｌｏｇ（Ｎ／ｄｔ（ｊ））
ここで、ｉｄｆ（ｊ）は、検索された全てのコンテンツのうち、語句ｔが出現するコンテンツのテキストデータの数を語句ｔの出現頻度として計算したものである。
さらに、コンテンツｉにおける、語句ｊの重要度を、
ｔｆｉｄｆ（ｉ，ｊ）＝ｔｆ（ｉ，ｊ）×ｉｄｆ（ｊ）
とする。したがって、検索用メタデータを選択する場合には、このｔｆｉｄｆ（ｉ，ｊ）の値の大きい順に所定個数を選択すればよい。
【００１６】
次元削減部３５は、ｎ種類（ｎは、２以上の整数）の画像特徴量で表されるｎ次元画像特徴量空間を仮定し、抽出された各画像の特徴量をｎ次元画像特徴量空間における空間座標あるいはベクトルとして取り扱うに際し、実際の画像再生方法に対応する空間座標あるいはベクトルの次元ｍがより低い場合に、すなわち、ｎ＞ｍで有る場合に、再生対象となる画像の次元ｎを圧縮して実際の画像再生方法に対応する空間座標あるいはベクトルの次元ｍに合わせるように次元の圧縮を行う。
画像再生方法記憶部３６は、大別すると、画像フレーム（画像枠）や画像を装飾する色を変更するカラーパレット変更部４１と、画像の切り替えや画像そのものを変形したりして、演出効果（画像効果）を生成する画像効果付与部４２と、画像の再生に同期して楽曲（ＢＧＭ）を再生するＢＧＭ付与部４３と、を備えている。
【００１７】
以下の説明においては、画像の特徴量をベクトルとして取り扱う場合について述べる。
まず、各画像の特徴量としての属性ベクトルの生成について説明する。
各画像の特徴量としての属性ベクトルとしては、撮影日時、撮影場所、文書、メタデータ等が挙げられる。
属性ベクトルとして、撮影日時を用いる場合には、ｎを年初からの経過日数、Ｙｅａｒ＝３６５とすれば、θは、
【００１８】
【数１】
2008288804.tif 000003
と定義することができる。
撮影日時の属性ベクトルａは、
【００１９】
【数２】
2008288804.tif 000004
と表すことができる。
撮影時刻ｔまで考慮に入れる場合は、Ｄａｙ＝２４とすれば、φは
【数３】
2008288804.tif 000005
と定義することができる。
また、属性ベクトルａは、経過日数と合わせて、
【００２０】
【数４】
2008288804.tif 000006
としてもよい。
ここで、撮影日時を周期関数で写像しているのは、年または日の区切りを遷移的にするためである。
さらに、経過日数、または時刻をそのまま属性ベクトルの成分とするようにしても良い。
属性ベクトルとして、撮影場所を用いる場合には、撮影場所の緯度をｘ、経度ｙとすれば、
【００２１】
【数５】
2008288804.tif 000007
として表すことができる。
あるいは、撮影場所の平均位置の緯度をｘ0、経度をｙ0として、
【００２２】
【数６】
2008288804.tif 000008
として表すことができる。
属性ベクトルとして、文書（あるいは文書内のテキスト）を用いる場合には、画像に関連する文書の特徴を使用することとなる。
ここで、画像に関連する文書とは、例えば、以下のようなものが挙げられる。
撮影日時や撮影場所、イベントに関連した記述が含まれる、ニュースサイトや観光地のガイド、撮影日時および前後に送受信した電子メール、更新されたブログの内容などである。
【００２３】
より具体的には、文書集合の中で、文書ｉ、語ｊ、文書ｉに出現する語ｊの出現頻度をｆｒｅｑ（ｉ，ｊ）とし、文書中の出現頻度に関わるｔｆ（ｉ，ｊ）を以下のように定義する。
ｔｆ（ｉ，ｊ）＝ｌｏｇ（ｆｒｅｑ（ｉ，ｊ）＋１）
／ｌｏｇ（文書ｉに出現する語の種類数）
語ｊの出現する文書数をｄｆ（ｊ）で表し、さらに文書集合の数Ｎを考慮した逆数を、
ｉｄｆ（ｊ）＝ｌｏｇ（Ｎ／ｄｆ（ｊ））
として定義すれば、文書ｉにおける語ｊのＴＦ／ＩＤＦ値ｗ（ｉ，ｊ）は、
ｗ（ｉ，ｊ）＝ｔｆ（ｉ，ｊ）×ｉｄｆ（ｊ）
となる。文書ｉの属性ベクトルは、ｗ（ｉ，ｊ）を用いて、
【００２４】
【数７】
2008288804.tif 000009
そして、文書集合のうち、対応する画像に最も関係が深いと思われる、文書の属性ベクトルを用いればよい。
属性ベクトルとして、ＴＶ番組や画像データベース等のように、あらかじめ画像に付与された検索用のメタデータがある場合には、付与されたメタデータとして用いられている語を、上述した文書に含まれている語と同様に扱えばよい。
以上の説明は、属性ベクトルを単独に用いる場合のものであったが、上述した手法により生成した複数の属性ベクトルを合成し、さらに高次元のベクトルを生成して画像再生方法と細かく対応させるようにしても良い。
例えば、生成した複数の属性ベクトルａ1、ａ2を次式のように合成し、新しい属性ベクトルａ3を生成しても良い。
【００２５】
【数８】
2008288804.tif 000010
ここで、Ｃ1〜Ｃm、Ｃnはベクトルの成分の重み付け係数である。
【００２６】
次に、画像の背景あるいは画像フレームに使用する色を、属性ベクトルとしての文書（あるいは文書内のテキスト）を用いて割り当てる場合の具体的手法について説明する。
図３は、画像再生方法として、画像の背景あるいは画像フレームに使用する色を２次元に割り当てる場合の一例の説明図である。
図３は、画像再生方法記憶部３６のカラーパレット変更部４１が画像の背景、画像フレームに使用する色を、属性ベクトルとしての文書（あるいは文書内のテキスト）を用い、文書をさらに喜怒哀楽に対応させて選択する場合のものである。
具体的には、文書に含まれる語が「娘、結婚式、喜び、寂しい」である場合には、背景色あるいは画像フレームに使用する色としては、「喜び」に加えて寂しさからくる「哀しみ」を考慮した紫色から青紫色に至る範囲の色が選択されることとなる。
また、文書に含まれる語が「家族旅行、温泉、楽しい」である場合には、背景色あるいは画像フレームに使用する色としては、「楽しみ」を考慮した黄色から黄赤色に至る範囲の色が選択されることとなる。
【００２７】
次に、画像に対し、画像再生方法としての画像効果を、属性ベクトルとしての撮影日時を用いて割り当てる場合の具体的手法について説明する。
図４は、画像切替の画像効果であるスライドインおよびストリップイン（クロスフェード）を３次元空間に割り当てた場合の説明図である。
この図４は、画像再生方法記憶部３６の画像効果付与部４２が属性ベクトルとしての撮影日時を用いて画像切替の画像効果であるスライドインおよびストリップイン（クロスフェード）を割り当てる場合のものである。
例えば、Ｘ−Ｙ平面において、第１象限には、右からのスライドインあるいは右からのストリップインが割り当てられ、第２象限には、上からのスライドインあるいは上からのストリップインが割り当てられ、第３象限には、左からのスライドインあるいは左からのストリップインが割り当てられ、第４象限には、下からのスライドインあるいは下からのストリップインが割り当てられている。
そして、Ｚ軸には、画像効果の強度（強−弱）、あるいは、速度（早−遅）が割り当てられている。
したがって、撮影日時が「１１月１５日の午後６時」である場合には、画像効果は、左からのスライドインが、強度弱（最弱）となるように付与される。
【００２８】
続いて、画像に対し、ＢＧＭを、属性ベクトルとしての撮影日時を用いて割り当てる場合の具体的手法について説明する。
図５は、ＢＧＭを２次元空間に割り当てた場合の説明図である。
ＢＧＭを撮影日時を用いて割り当てる場合には、図５に示すように、人間の印象に基づき、ベクトル空間上にＢＧＭを配置することができる。
具体的には、３月〜５月は春を連想させるクラシック曲、６月〜８月は夏を連想させるクラシック曲、９月〜１１月は秋を連想させるクラシック曲、１２月〜２月は冬を連想させるクラシック曲を割り当てるようにすればよい。
この場合に、紙面垂直方向に、さらに属性ベクトルとしての撮影時刻を割り当て、紙面手前側に昼間を連想させる曲を配置し、紙面奥側に夜間を連想させる曲を配置し、例えば、撮影日時が「４月５日午前５時」である場合には、春の夜明けを連想させるクラシック曲を割り当て、撮影日時が「１０月１５日の午後１１時」である場合には、秋の夜長を連想させるクラシック曲を割り当てるようにすればよい。
この場合において、原則的には、画像の属性ベクトルに最も近い楽曲を選択することとなるが、楽曲の選択が単調になるような場合には、変化が生まれるように、画像の属性ベクトルと同一象限の他の楽曲を選択するようにしても良い。なお、楽曲をベクトル空間に割り当てた情報は外部記憶装置１６（楽曲ベクトル空間記憶部に相当）に記憶される。
【００２９】
また、例えば、特開２００３−５８１４７号に開示されている技術によってＢＧＭを楽曲特徴量によって自動分類しても良い。具体的には、ＢＧＭのテンポ、調、周波数特性により３次元の空間に分類することができ、同様に撮影日時（撮影時刻を含む）に応じていずれかのＢＧＭを割り当てればよい。
以上の説明は、属性ベクトルの次元数が割り当てるべき色、画像効果、あるいは、ＢＧＭの次元数以下である場合を前提として説明したが、文書の属性ベクトル、あるいは、高次元化したベクトルは、割り当てるべき色、画像効果、ＢＧＭ等の画像再生方法の次元数よりも高い次元数になる場合には、そのままでは、対応させることができない。
そこで、このような場合には、次元削減部３５が、属性ベクトルの集合を主成分分析を行い、必要な次元数に合わせて次元数を削減、あるいは、主に考慮すべき属性ベクトルに対応する軸を主軸として選択するようにしている。
【００３０】
図６は、実施形態の概要処理フローチャートである。
画像再生装置１０は、映像・画像入力部３１として機能する画像入力装置１２を介して入力された画像に対し、画像再生装置本体１１のＭＰＵ２１は、入力された画像に付加されているメタデータ（本実施形態の場合、撮影日時、撮影場所）、入力された画像に関連する文書（あるいは文書内のテキスト）に基づいて属性ベクトルを生成する（ステップＳ１１）。
この場合において、画像再生装置本体１１のＭＰＵ２１は、複数のデータに基づいて属性ベクトルを生成することも可能である。
次に、画像再生装置１０のＭＰＵ２１は、次元削減部３５として機能し、属性ベクトルの次元数が、画像再生方法に対応する属性ベクトルの次元数を超えている場合には、次元数が収まるように削減する（ステップＳ１２）。
これにより、画像再生装置１０のＭＰＵ２１は、共働して画像再生方法記憶部３６として機能している外部記憶装置１６を参照し、ステップＳ１１において生成した画像の属性ベクトルの値に基づいて、画像再生方法を選択する（ステップＳ１３）。
【００３１】
具体的には、ＭＰＵ２１および外部記憶装置１６は、共働してカラーパレット変更部４１、画像効果付与部４２およびＢＧＭ付与部４３として機能し、上述したように画像再生方法を選択することととなる。
この結果、ＭＰＵ２１は、選択した画像再生方法に従って、画像を再生し、表示装置１４に表示することとなる（ステップＳ１４）。
以上の説明のように、本実施形態によれば、画像に関連した属性ベクトルを用いることにより、画像内容に対応した画像再生方法を自動的に選択することができ、元の画像に対して自然な流れで画像効果やＢＧＭを付与して再生を行うことができ、視聴者は違和感なく再生された画像を視聴することができる。
【００３２】
以上の説明においては、画像に付与される属性ベクトルのうち、いずれのベクトルを画像再生方法の選択に使用するかは、予め設定されている場合について説明したが、ユーザが目的に応じて選択するように構成することも可能である。
例えば、以上の説明においては、カラーパレットを喜怒哀楽に分類した語に基づいて参照するように構成していたが、季節と昼夜を属性ベクトルとして用いるようにユーザが設定することも可能である。
この場合において、図３に示した円の外周に近づくほど彩度が高く、内側ほど彩度を低くするようにし、撮影日時の基点、即ちθ＝０が緑になるようにしておく。そして、撮影時刻をｔとしたとき、（ｃｏｓθ、ｓｉｎθ）を円周方向の座標、（ｓｉｎ（φ）＋１）／２を半径方向の座標に対応させればよい。これにより、季節の変化と一日の変化に対応した色を定めることができ、季節との対応がわかりやすい画像再生（例えば、スライドショー）を行うことができる。
以上の説明においては、画像の特徴に対応づけて属性ベクトルを画像に付与する構成を採っていたが、画像の特徴に対応づけて属性ベクトルに代えて属性ベクトルの終点の座標（空間座標）を画像に付与する構成とすることも可能である。
以上の説明においては、特徴量としての撮影場所については、メタデータとして予め画像に付与されている場合について説明したが、撮影後に地図データベースから抽出された撮影場所および撮影場所近辺に関する情報を用いるように構成することも可能である。
【００３３】
以上の説明においては、画像再生装置１０は、具体的には、パーソナルコンピュータ、ＰＤＡ、携帯型電話機等に適用可能であるが、ディジタルスチルカメラ、ディジタルビデオカメラ、スキャナ、プロジェクタ、テレビ、プリンタおよびその他の画像再生処理を行う電子機器に実装または接続することが可能である。
以上の説明においては、上記各機能を実現するための制御プログラムが、予めＲＯＭ２２に格納されている場合について説明したが、制御プログラムを、コンピュータ（ＣＰＵ）読取可能な記録媒体に記録するようにしてもよい。このような構成であれば、コンピュータによってプログラムが記憶媒体から読み取られ、読み取られたプログラムに従ってコンピュータが処理を実行すると、上記各実施形態と同等の作用および効果が得られる。
ここで、記憶媒体とは、ＲＡＭ、ＲＯＭ等の半導体記憶媒体、ＦＤ、ＨＤ等の磁気記憶型記憶媒体、ＣＤ、ＣＤＶ、ＬＤ、ＤＶＤ等の光学的読取方式記憶媒体、ＭＯ等の磁気記憶型／光学的読取方式記憶媒体であって、電子的、磁気的、光学的等の読み取り方法のいかんにかかわらず、コンピュータで読み取り可能な記憶媒体であれば、どのような記憶媒体であってもよい。
また、インターネット、ＬＡＮなどの通信ネットワークおよび通信インタフェース部２４を介して制御用プログラムをダウンロードし、インストールして実行するように構成することも可能である。
【図面の簡単な説明】
【００３４】
【図１】実施形態の画像再生装置の概要構成ブロック図である。
【図２】画像再生装置の機能ブロック図である。
【図３】画像再生方法として、画像の背景あるいは画像フレームに使用する色を２次元に割り当てる場合の一例の説明図である。
【図４】画像切替の画像効果であるスライドインおよびストリップイン（クロスフェード）を３次元空間に割り当てた場合の説明図である。
【図５】ＢＧＭを２次元空間に割り当てた場合の説明図である。
【図６】実施形態の概要処理フローチャートである。
【符号の説明】
【００３５】
１０…画像再生装置、１１…画像再生装置本体、１１…午後、１２…画像入力装置、１３…入力装置、１４…表示装置、１５…出力装置、１６…外部記憶装置、２１…ＭＰＵ、２２…ＲＯＭ、２３…ＲＡＭ、２４…通信インタフェース部、３１…映像・画像入力部、３２…テキスト抽出部、３３…形態素解析部、３４…重要度算出部、３５…次元削減部、３６…画像再生方法記憶部、４１…カラーパレット変更部、４２…画像効果付与部、４３…ＢＧＭ付与部。
【図１】
2008288804.tif 000011
【図２】
2008288804.tif 000012
【図３】
2008288804.tif 000013
【図４】
2008288804.tif 000014
【図５】
2008288804.tif 000015
【図６】
2008288804.tif 000016