(57)【要約】【課題】  従来のスライドショーでは予め決められたＢＧＭの中から選択されるので、再生する写真とは関連が無いＢＧＭが流されるという問題があった。【解決手段】  本発明に係る画像再生装置は、画像を表示する表示部と、前記画像の色調と顔の表情とを解析して予め決められた複数の種類に分類する解析部と、複数の音楽データを保持し、前記画像を前記表示部に表示する時に当該画像の前記色調と前記表情の分類に対応する予め決められた前記音楽データを再生する制御部とを有することを特徴とする。【選択図】    図１
2013183259.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
前記画像の色調と顔の表情とを解析して予め決められた複数の種類に分類する解析部と、
複数の音楽データを保持し、前記画像を前記表示部に表示する時に当該画像の前記色調と前記表情の分類に対応する予め決められた前記音楽データを再生する制御部と
を有することを特徴とする画像再生装置。
【請求項２】
請求項１に記載の画像再生装置において、
前記表示部に表示する画像が複数ある場合、
前記解析部は、前記複数の各画像の色調の分類結果と前記複数の画像のうち顔が含まれる画像の表情の分類結果とをそれぞれ統計的に解析して最大頻度の色調の分類と最大頻度の表情の分類とを求め、
前記制御部は、前記最大頻度の色調の分類と前記最大頻度の表情の分類とに対応する予め決められた前記音楽データを再生する
ことを特徴とする画像再生装置。
【請求項３】
請求項１に記載の画像再生装置において、
前記表示部に表示する画像が複数ある場合、
前記解析部は、前記複数の画像のうち予め設定された代表画像の色調と顔の表情とを解析して予め決められた複数の種類に分類し、
前記制御部は、前記複数の画像を前記表示部に表示する時に前記代表画像の前記色調と前記表情の分類に対応する予め決められた前記音楽データを再生する
ことを特徴とする画像再生装置。
【請求項４】
請求項１に記載の画像再生装置において、
前記表示部に表示する画像の撮影日時、撮影場所、撮影モードの少なくとも１つの付加情報を取得する付加情報取得部をさらに設け、
前記制御部は、前記色調の分類と前記表情の分類と前記付加情報とに対応する予め決められた前記音楽データを再生する
ことを特徴とする画像再生装置。
【請求項５】
請求項１に記載の画像再生装置において、
前記表示部に画像表示を行う再生日時、再生場所の少なくとも１つの付加情報を取得する付加情報取得部をさらに設け、
前記制御部は、前記色調の分類と前記表情の分類と前記付加情報とに対応する予め決められた前記音楽データを再生する
ことを特徴とする画像再生装置。
【請求項６】
請求項１から５のいずれか一項に記載の画像再生装置において、
前記解析部は、前記画像の中の予め設定された主要被写体または特定領域の色調を解析する
ことを特徴とする画像再生装置。
【請求項７】
請求項６に記載の画像再生装置において、
前記主要被写体または特定領域は、フォーカスのずれが予め設定された閾値以下の被写体または領域である
ことを特徴とする画像再生装置。
【請求項８】
請求項１から７のいずれか一項に記載の画像再生装置において、
前記解析部が解析する色調と顔の表情の分類と、前記複数の音楽データとの対応を示すテーブルを有する
ことを特徴とする画像再生装置。
【請求項９】
請求項１から８のいずれか一項に記載の画像再生装置において、
前記音楽データのヘッダ情報として当該音楽に対応する前記色調と前記表情の分類を予め付加しておき、
前記制御部は、前記解析部の解析結果に対応する前記ヘッダ情報の前記音楽データを検索し、検索結果が複数ある場合は、予め設定された条件に従って再生する前記音楽データを決定する
ことを特徴とする画像再生装置。
【請求項１０】
請求項９に記載の画像再生装置において、
前記制御部は、前記検索結果が複数ある場合は、表示する画像の撮影日時、撮影場所、再生日時、再生場所の少なくとも１つの条件に従って再生する前記音楽データを決定する
ことを特徴とする画像再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像再生装置に関する。
【背景技術】
【０００２】
従来、ユーザーが選択した感情に基づいてスライドショー表示する写真や表示効果を切り替えるスライドショー再生システムが知られている（例えば、特許文献１参照）。一方、色調と感情とを関連付ける検討が行われている（例えば、非特許文献１参照）。また、ＢＧＭの音の雰囲気に基づいてスライドショー表示する写真や効果を演出するスライドショー再生システムも考えられている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１６００３２
【非特許文献】
【０００４】
【非特許文献１】URL:http://www.sipec-square.net/~mt-home/students/miyazono/project/kanjyo/page06.html
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところが、一般に写真撮影された顔の表情は笑顔が多いので、背景音楽（ＢＧＭ）に対応する喜怒哀楽などの感情にマッチする表情の写真を抽出してスライドショー表示することは難しく、選択された感情に対応する顔の表情の写真が無い場合がある。また、スライドショー再生時に、再生したい写真が決まっていて、それらの写真の感情に合致するＢＧＭを流したい場合、従来のスライドショーでは予め決められたＢＧＭの中から選択されるので、再生する写真とは関連が無いＢＧＭが流されるという問題がある。
【０００６】
上記課題に鑑み、本発明の目的は、スライドショーで再生する写真に含まれる顔の表情や色調などを解析して、再生する写真の雰囲気に最適なＢＧＭを流すことができる画像再生装置を提供することである。
【課題を解決するための手段】
【０００７】
本発明に係る画像再生装置は、画像を表示する表示部と、前記画像の色調と顔の表情とを解析して予め決められた複数の種類に分類する解析部と、複数の音楽データを保持し、前記画像を前記表示部に表示する時に当該画像の前記色調と前記表情の分類に対応する予め決められた前記音楽データを再生する制御部とを有することを特徴とする。
【０００８】
特に、前記表示部に表示する画像が複数ある場合、前記解析部は、前記複数の各画像の色調の分類結果と前記複数の画像のうち顔が含まれる画像の表情の分類結果とをそれぞれ統計的に解析して最大頻度の色調の分類と最大頻度の表情の分類とを求め、前記制御部は、前記最大頻度の色調の分類と前記最大頻度の表情の分類とに対応する予め決められた前記音楽データを再生することを特徴とする。
【０００９】
また、前記表示部に表示する画像が複数ある場合、前記解析部は、前記複数の画像のうち予め設定された代表画像の色調と顔の表情とを解析して予め決められた複数の種類に分類し、前記制御部は、前記複数の画像を前記表示部に表示する時に前記代表画像の前記色調と前記表情の分類に対応する予め決められた前記音楽データを再生することを特徴とする。
【００１０】
或いは、前記表示部に表示する画像の撮影日時、撮影場所、撮影モードの少なくとも１つの付加情報を取得する付加情報取得部をさらに設け、前記制御部は、前記色調の分類と前記表情の分類と前記付加情報とに対応する予め決められた前記音楽データを再生することを特徴とする。
【００１１】
または、前記表示部に画像表示を行う再生日時、再生場所の少なくとも１つの付加情報を取得する付加情報取得部をさらに設け、前記制御部は、前記色調の分類と前記表情の分類と前記付加情報とに対応する予め決められた前記音楽データを再生することを特徴とする。
【００１２】
さらに、前記解析部は、前記画像の中の予め設定された主要被写体または特定領域の色調を解析することを特徴とする。
【００１３】
特に、前記主要被写体または特定領域は、フォーカスのずれが予め設定された閾値以下の被写体または領域であることを特徴とする。
【００１４】
さらに、前記解析部が解析する色調と顔の表情の分類と、前記複数の音楽データとの対応を示すテーブルを有することを特徴とする。
【００１５】
また、前記音楽データのヘッダ情報として当該音楽に対応する前記色調と前記表情の分類を予め付加しておき、前記制御部は、前記解析部の解析結果に対応する前記ヘッダ情報の前記音楽データを検索し、検索結果が複数ある場合は、予め設定された条件に従って再生する前記音楽データを決定することを特徴とする。
【００１６】
特に、前記制御部は、前記検索結果が複数ある場合は、表示する画像の撮影日時、撮影場所、再生日時、再生場所の少なくとも１つの条件に従って再生する前記音楽データを決定することを特徴とする。
【発明の効果】
【００１７】
本発明に係る画像再生装置は、スライドショーで再生する写真の雰囲気に最適なＢＧＭを流すことができる。
【図面の簡単な説明】
【００１８】
【図１】本実施形態に係る画像再生装置１０１のブロック図である。
【図２】顔の表情解析の一例を示す図である。
【図３】色調の感情的雰囲気の一例を示す図である。
【図４】音楽分類テーブル１６２の一例を示す図である。
【図５】スライドショー実行時の処理例を示すフローチャートである。
【図６】応用例１に係る電子カメラ１０１ａのブロック図である。
【図７】応用例２に係る画像再生装置１０１ｂ（電子カメラ１０１ｂ）のブロック図である。
【図８】スライドショー実行時の処理例を示すフローチャートである。
【発明を実施するための最良の形態】
【００１９】
以下、図面を参照して本発明に係る画像再生装置について説明する。
（第１の実施形態）
図１に、第１の実施形態に係る画像再生装置１０１のブロック図を示す。画像再生装置１０１は、表示部１０２と、音声出力部１０３と、操作部１０４と、制御部１０５と、画像解析部１０６と、記憶部１０７とで基本的に構成される。各ブロックは共通バス１０８により互いに接続され、画像データや音声データ、或いは動作に必要な制御コマンドやパラメータなどが入出力される。また、画像再生装置１０１にメモリカード１０９ａなどの外部記憶媒体に記憶された画像データを入力するための画像入力部１０９を設けてもよい。
【００２０】
本実施形態に係る画像再生装置１０１は、記憶部１０７やメモリカード１０９ａに記憶された画像データを読み出して表示部１０２の画面に表示するスライドショーを行う装置である。特に本実施形態に係る画像再生装置１０１は、表示部１０２に表示する画像の感情的雰囲気に合致するＢＧＭ（バックグランドミュージック）を記憶部１０７に記憶された音楽データの中から自動的に選択して音声出力部１０３のスピーカ１０３ａから再生する機能を有している。以下、図１の各ブロックについて説明する。
【００２１】
表示部１０２は、液晶モニタおよび表示回路などで構成され、共通バス１０８を介して入力する画像データを表示回路で画像信号に変換して液晶モニタに表示する。尚、画像再生装置１０１に液晶モニタを内蔵せずに表示部１０２に画像信号の出力端子を設け、外部のテレビやモニタに表示するようにしてもよい。
【００２２】
音声出力部１０３は、Ｄ／Ａ変換回路やアンプなどで構成され、共通バス１０８を介して入力する音声データをＤ／Ａ変換回路で音声信号に変換してスピーカ１０３ａに出力する。尚、画像再生装置１０１にスピーカ１０３ａを内蔵せずに音声出力部１０３に音声信号の出力端子を設け、外部のテレビやオーディオ機器に出力するようにしてもよい。
【００２３】
操作部１０４は、電源ボタン、メニューボタン、カーソルキー、決定ボタンなどで構成される。ユーザは、表示部１０２の画面に表示される操作メニューをカーソルキーや決定ボタンを用いて選択し、画像表示装置１０１を操作する。尚、操作部１０４を表示部１０２の画面上に配置されたタッチパネルで構成して、画面にグラフィック表示される操作ボタンを操作するようにしてもよい。
【００２４】
制御部１０５は、ＣＰＵなどで構成され、内部に予め記憶されたプログラムに従って動作し、画像再生装置１０１全体の動作を制御する。例えば操作部１０４の電源ボタンが押下されると画像再生装置１０１を起動し、メニューボタンが押下されると表示部１０２の画面に操作メニューを表示する。操作メニューは、例えばスライドショーで表示する画像選択ボタン、選択した画像でスライドショーを開始する開始ボタンなどである。例えば、カーソルキーで画像選択ボタンを選択して決定ボタンを押下すると、記憶部１０７に記憶されている画像データ１６３のサムネイル画像やファイル名が表示部１０２に表示される。そして、カーソルキーでスライドショーで表示したい画像を選択して決定ボタンを押下する。尚、操作方法の詳細については周知の技術なので詳しい説明を省略するが、任意の複数の画像を選択できるようにしてもよいし、フォルダ内の画像データ全てを選択してもよい。そして、例えばスライドショー開始ボタンをカーソルキーで選択して決定ボタンを押下すると、選択された画像のスライドショーが開始される。
【００２５】
画像解析部１０６は、スライドショーで表示する画像の解析を行う。特に本実施形態に係る画像再生装置１０１では、表情解析部１５１と、色解析部１５２とを有する。表情解析部１５１は、画像内に顔がある場合に顔の表情解析を行って予め設定された種類に分類する。色解析部１５２は、画像の色調を解析して予め設定された種類に分類する。尚、解析処理については後で詳しく説明する。
【００２６】
記憶部１０７は、不揮発性のメモリやハードディスクなどで構成される。記憶部１０７には、音楽データ１６１と、音楽分類テーブル１６２とが基本的に記憶されている。また、記憶部１０７にスライドショーで表示する画像データ１６３を記憶するようにしてもよいし、画像入力部１０９に装着されるメモリカード１０９ａ記憶された画像データを用いてもよい。同様に、音楽データ１６１をメモリカード１０９ａに記憶しておいてもよい。この場合、画像入力部１０９は一般的なメモリカードインターフェースとして動作する。
【００２７】
このように、本実施形態に係る画像再生装置１０１は構成され、表示部１０２に表示する画像を解析して、画像の感情的雰囲気に合致するＢＧＭをスピーカ１０３ａから再生することができる。
［画像の感情的雰囲気の解析］
次に、画像の感情的雰囲気の解析について説明する。図２は、表情解析部１５１が行う顔の表情解析の一例を示した図である。図２の例では、主成分クラスタリングなどの手法を用いて、顔の表情を口と目と眉毛の形状から「喜（Ｆ１）」「怒（Ｆ２）」「哀（Ｆ３）」「楽（Ｆ４）」の４つに分類している。例えば「喜」は喜びの表情を表し、例えば口の両端は上がった形状に特徴がある。「怒」は怒りの表情を表し、例えば口の両端は下がり、目や眉毛は吊り上った形状に特徴がある。「哀」は悲しみの表情を表し、例えば目尻や眉毛は下がった形状に特徴がある。「楽」は楽しみの表情を表し、例えば口や目が大きく開いた形状に特徴がある。このように、画像内の顔を検出して口や目や眉毛の特徴を解析することにより、当該人物の感情を推定することができる。尚、上記の特徴解析は一例であり、他の方法や他の特徴を判別して顔の表情を解析するようにしてもよい。
【００２８】
次に、図３は、色解析部１５２が行う画像の色解析の一例を示した図である。図３の例では、色解析部１５２は、画像全体の色調を解析して画像中に最も多く含まれる色を判別し、９種類の色に分類する。９種類の色は、例えば「赤系（Ｃ１）」、「緑系（Ｃ２）」、「青系（Ｃ３）」、「シアン系（Ｃ４）」、「イエロー系（Ｃ５）」、「マゼンタ系（Ｃ６）」、「白系（Ｃ７）」、「灰系（Ｃ８）」、「黒系（Ｃ９）」に分類する。尚、各色はある程度の色調の範囲を有し、例えば赤系では赤だけでなくオレンジや紅色なども含まれる。
【００２９】
「赤系」の画像例としては、太陽、炎などがあり、感情的雰囲気は例えば活動的、情熱、興奮などである。「緑系」の画像例としては、森林や芝生などがあり、感情的雰囲気は例えば平和、安らぎなどである。「青系」の画像例としては、深みのある空や海などがあり、感情的雰囲気は例えば誠実、清潔などである。「シアン系」の画像例としては、明るい空などがあり、感情的雰囲気は例えば開放的、さわやかなどである。「イエロー系」の画像例としては、レモンやひまわりなどがあり、感情的雰囲気は例えば陽気、元気などである。「マゼンタ系」の画像例としては、ふじの花やスミレなどがあり、感情的雰囲気は例えば高貴、神秘的などである。「白系」の画像例としては、雪や雲などがあり、感情的雰囲気は例えば清潔、無邪気などである。「灰系」の画像例としては、煙や雨雲などがあり、感情的雰囲気は例えば憂鬱、不安などである。「黒系」の画像例としては、暗闇や喪服などがあり、感情的雰囲気は例えば恐怖、悲哀などである。このように、画像内の色調を解析することにより、その画像が鑑賞者に与える感情的雰囲気を推定することができる。尚、上記の各色の感情的雰囲気は一例であり、各色に他の感情的雰囲気を設定してもよい。
【００３０】
このようにして、本実施形態に係る画像再生装置１０１は、表示部１０２に表示する画像の感情的雰囲気を解析することができる。そして、スライドショーで表示する画像の解析した感情的雰囲気に合致する音楽を記憶部１０７に記憶された音楽データの中から自動的に選択してスピーカ１０３ａから再生することができる。
［音楽分類テーブル１６２の一例］
次に、音楽分類テーブル１６２の一例を図４に示す。音楽分類テーブル１６２は、先に説明した表情解析部１５１および色解析部１５２の解析結果の分類でマトリクスを作成し、マトリクスの各要素の感情的雰囲気に合致した音楽データのファイル名を記載したテーブルである。例えば、画像の色調の解析結果が「赤系（Ｃ１）」で、顔の表情の解析結果が「喜（Ｆ１）」であった場合は、図４のマトリクスのＣ１とＦ１の要素に対応するＢＧＭ１の音楽データが選択される。同様に、画像の色調の解析結果が「白系（Ｃ７）」で、顔の表情の解析結果が「楽（Ｆ４）」であった場合は、図４のマトリクスのＣ７とＦ４の要素に対応するＢＧＭ３４の音楽データが選択される。
【００３１】
このようにして、本実施形態に係る画像再生装置１０１は、スライドショーで表示される画像の感情的雰囲気に合致した音楽を記憶部１０７に記憶された音楽データの中から選択して再生することができる。
［スライドショー実行時の処理］
次に、スライドショー実行時の処理について、図５のフローチャートを用いて説明する。尚、図５のフローチャートは、制御部１０５および画像解析部１０６によって実行される処理である。
（ステップＳ１０１）ユーザは、操作部１０４のメニューボタン、カーソルキー、決定ボタンなどを操作して、先に説明したように、記憶部１０７に記憶されている画像データ１６３の中から複数の画像を選択し、画面上のスライドショー開始ボタンをカーソルキーで選択して決定ボタンを押下する。これを受けて、制御部１０５は、選択された画像のスライドショーを開始する。ここで、複数の画像にうちユーザのお気に入りの代表画像を選択できるようにしてもよい。尚、代表画像は、１枚でもよいし複数枚でもよい。
（ステップＳ１０２）制御部１０５は、選択された画像の画像データを記憶部１０５から読み出し、画像解析部１０６に出力する。
（ステップＳ１０３）画像解析部１０６は、画像毎に顔検出を行う。尚、顔検出の方法は、周知の技術なので詳細な説明は省略するが、顔の輪郭や目、鼻、口などの配置などの特徴を抽出したパターンマッチングなどの手法が用いられる。
（ステップＳ１０４）制御部１０５は、画像内に顔が検出されたか否かを判別する。画像内に顔が検出された場合はステップＳ１０５に進み、顔が検出されなかった場合はステップＳ１０６に進む。
（ステップＳ１０５）画像解析部１０６の表情解析部１５１は、顔が検出された画像の表情解析を行う。本実施形態に係る画像再生装置１０１では、図２で説明したように、顔の表情を口と目と眉毛の形状から「喜」、「怒」、「哀」、「楽」の４つの表情に分類する。ここで、顔が検出された画像が複数枚ある場合は、例えば解析結果の分類を統計処理して最も多い表情の分類を代表表情とする。例えば５枚の画像に顔が含まれていて、「喜」が４枚で「怒」が１枚の場合は、代表表情は「喜」となる。或いは、ステップＳ１０１で代表画像を選択するようにして、代表画像に含まれる顔の表情を分析した結果のみを用いるようにしてもよい。尚、代表画像が複数枚ある場合は、上記と同様に統計処理を行う。
（ステップＳ１０６）画像解析部１０６の色解析部１５２は、各画像の色調解析を行う。本実施形態に係る画像再生装置１０１では、図３で説明したように、「赤系」、「緑系」、「青系」、「シアン系」、「イエロー系」、「マゼンタ系」、「白系」、「灰系」、「黒系」の９つの色系統に分類する。ここで、画像が複数枚ある場合は、ステップＳ１０５で説明したように、例えば解析結果の分類を統計処理して最も多い色調の分類を代表色調とする。例えば５枚の画像が選択されている場合、「赤系」が１枚で「緑系」が４枚の場合は、代表表情は「緑系」となる。或いは、ステップＳ１０１で代表画像を選択するようにして、代表画像に含まれる顔の表情を分析した結果のみを用いるようにしてもよい。尚、代表画像が複数枚ある場合は、上記と同様に統計処理を行う。
（ステップＳ１０７）制御部１０５は、ステップＳ１０５およびステップＳ１０６の解析結果に基づいて、スライドショー中に再生する音楽（背景音楽：ＢＧＭ）を決定する。尚、背景音楽は、先に図４で説明したように、記憶部１０７に予め記憶されている音楽分類テーブル１６２を参照して決定される。
（ステップＳ１０８）制御部１０５は、ステップＳ１０７で決定した音楽データを記憶部１０７から読み出して音声出力部１０３で音声信号に変換してスピーカ１０３ａから出力すると共に、ステップＳ１０１で選択された画像の画像データを記憶部１０５から順番に読み出し、予め決められたスライドショーの設定（画像の表示間隔、画像の切り替え時の効果など）に従って表示部１０２に画像を表示する。尚、読み出す順番は、撮影日時の古い画像から読み出すようにしてもよいし、ファイル名をあいうえお順に並べ替えて読み出すようにしてもよい。
（ステップＳ１０９）制御部１０５は、選択された画像の再生が全て終了したか否かを判別する。全て終了した場合はスライドショーを終了し、残っている場合はステップＳ１０８に戻って同様の処理を繰り返す。尚、音楽の再生が終了するまで同じ画像を最初から繰り返して表示するようにしてもよい。
【００３２】
このように、本実施形態に係る画像再生装置１０１は、スライドショーで表示部１０２に表示する画像の感情的雰囲気に合致する音楽を自動的に選択してスピーカ１０３ａから再生することができる。
【００３３】
尚、ステップＳ１０１で選択された全ての画像に顔が含まれていない場合は、色調のみの分類で再生する音楽を決定する。この場合、例えば図４の音楽分類テーブル１６２を参照すると、Ｃ１からＣ９までの各色調にＦ１からＦ４の４種類の音楽データがあるので、例えば顔が含まれていない場合は「喜」のＣ１の音楽データを選択する。或いは、顔が含まれていない場合の音楽データを音楽分類テーブル１６２に設定しておいてもよい。
（応用例１）
上記の実施形態では、図１に示したように、予め撮影された画像が記憶部１０７またはメモリカード１０９ａに記憶されているものとしたが、図６に示すように、画像再生装置１０１に撮像部１１０を設けた電子カメラ１０１ａであってもよい。この場合は、撮像部１１０で撮影した画像を記憶部１０７またはメモリカード１０９ａに追加することができる。
【００３４】
尚、電子カメラ１０１ａの場合は、撮像部１１０で画像を撮影する毎に、画像解析部１０６で撮影画像の感情的雰囲気を解析して、解析結果（色調の分類、表情の分類など）を画像データのヘッダ情報として付加してもよい。これにより、記憶部１０７またはメモリカード１０９ａに記憶される撮影画像をスライドショー表示する際に、画像解析部１０６で画像解析を行う必要がなくなるので、スライドショー実行時の処理負荷を低減することができる。例えば図５のフローチャートにおいて、ステップＳ１０３からステップＳ１０６の処理を実行する必要が無くなる。
（応用例２）
図１の画像再生装置１０１または図６の電子カメラ１０１ａにおいて、図７に示すように、通信部１１１を更に設け、画像再生装置１０１ｂまたは撮像部１１０を有する電子カメラ１０１ｂとしてもよい。或いは、携帯電話１０１ｂやスマートホン１０１ｂであってもよい。
【００３５】
図７の場合、制御部１０５は、通信部１１１を介して接続されるネットワーク上の音楽データや画像データを取得することができるので、例えば撮影日時や再生日時、或いは撮影場所や再生場所に適した音楽データをネットワーク上から取得して、スライドショー実行時にスピーカ１０３ａから再生することができる。これにより、記憶部１０７の記憶容量の削減を図ることができ、最新の音楽データなどネットワーク上の膨大な数の音楽データの中から最適な音楽データを再生することができる。尚、この場合でも、ネットワーク上から取得する音楽がどの色調の分類や表情の分類に対応するのかを知る必要があるので、音楽分類テーブル１６２に色調の分類や表情の分類に対応する曲名リストを予め記憶しておくものとする。
【００３６】
或いは、音楽分類テーブル１６２自体をネットワーク上の特定のサーバに保持して、複数のユーザで共有できるようにしてもよい。この場合は、画像再生装置１０１の製造メーカがサーバを管理して曲名を適宜更新してメンテナンスすることができるので、世界中の膨大な種類の音楽データでも利用できる。これにより、画像再生装置１０１ｂ（または電子カメラ１０１ｂ）は、記憶部１０７に音楽データ１６１と音楽分類テーブル１６２を記憶する必要がなくなり、スライドショー表示する画像を画像解析部１０６で解析して、解析結果（色調の分類、表情の分類など）の情報をネットワーク上のサーバに問い合わせることによって再生する画像に適した音楽データを取得して再生することができる。尚、音楽データの著作権などを考慮して、ダウンロード後に再生するのではなく、ストリーミング配信技術を用いてリアルタイムで再生するようにしてもよいし、更に課金するようにしてもよい。
【００３７】
また、記憶部１０７またはメモリカード１０９ａに記憶された画像だけでなく、当該画像の解析結果に合致するネットワーク上の画像データを取得して、記憶部１０７またはメモリカード１０９ａに記憶された画像に織り交ぜてスライドショーを行うようにしてもよい。これにより、例えば撮影日時や撮影場所、或いは再生日時や再生場所に関連する様々な画像をネットワーク上から取得できるので、スライドショーをより楽しく鑑賞することができる。尚、音楽データと同様に、ネットワーク上の画像を特定のサーバで管理するようにして、ネットワーク上の画像の感情的雰囲気の解析結果（色調の分類、表情の分類など）を予め付加しておくことにより、スライドショー表示する記憶部１０７またはメモリカード１０９ａに記憶された画像と同じ感情的雰囲気を有する画像のみをネットワーク上から取得して表示することができる。
【００３８】
ここで、上記の実施形態および各応用例では、画像解析部１０６の色解析部１５２は、画像内の全ての領域を対象とするものとしたが、中央部分の領域の色調を解析するようにしてもよい。或いは、フォーカスのずれが予め設定された閾値以下の被写体または領域の色調を解析するようにしてもよい。また、画像データにフォーカス位置の情報が付加されている場合、例えばＡＦ（オートフォーカス）位置を中心とする領域の色調を解析するようにしてもよい。または、画像を複数の領域に分割して領域毎に画像の高周波成分を解析し、高周波成分が高い領域をフォーカスが合っている領域として選択してもよい。このように、画像の中央部分やフォーカス位置を当該画像の主要被写体として色調解析を行ってもよいが、撮影時に主要被写体を設定できるようにして、設定された主要被写体位置を中心とする領域の色調を解析するようにしてもよい。さらに、中央部分の領域やフォーカス領域、主要被写体領域など特定領域とそれ以外の領域とで重み付けを行って画像の色調を分類するようにしてもよい。この場合、特定領域の色調を０．７、それ以外の領域の色調を０．３の比率で特定領域を重視するように解析する。
【００３９】
また、上記の実施形態および各応用例では、画像内に１つの顔が写っているものとして説明したが、例えば複数の顔が写っている場合、画像解析部１０６の表情解析部１５１は、中央部付近の顔の表情のみを解析するようにしてもよいし、全ての顔の表情を解析して統計的処理を行い、最多の表情を採用してもよい。或いは、一番大きい顔の表情を解析するようにしてもよいし、最もフォーカスが合っている顔の表情を解析するようにしてもよい。
【００４０】
さらに、図５のフローチャートでは、顔の表情と色調の２つを解析するようにしたが、図８に示すように、ステップＳ１０６とステップＳ１０７との間にステップＳ１０６ａを設けて、表情および色調以外の条件（例えば撮影日時、撮影場所、撮影モード、再生日時、再生場所など）で解析を行うようにしてもよい。この場合、次のステップＳ１０７では、表情および色調の解析結果に他の条件を加えて最適な音楽データを選択することができる。例えば、図４の音楽分類テーブル１６２では、マトリクスの１つの要素に１つの音楽を割り当てるようにしたが、マトリクスの１つの要素に複数の音楽を割り当てる。一例として、Ｃ１とＦ１の要素にＢＧＭ１、ＢＧＭ１ａおよびＢＧＭ１ｂの３つの音楽を割り当て、図８のフローチャートのステップＳ１０６ａで色調と顔の表情以外の条件を解析して選択する音楽を切り替える。例えばＢＧＭ１、ＢＧＭ１ａおよびＢＧＭ１ｂは共にＣ１とＦ１に対応する感情的雰囲気を持った音楽であっても微妙な雰囲気の違いがあり、ＢＧＭ１がＢＧＭ１ａおよびＢＧＭ１ｂよりも朝の爽やかな雰囲気に適した曲、ＢＧＭ１ａがＢＧＭ１およびＢＧＭ１ｂよりも昼の明るい雰囲気に適した曲、ＢＧＭ１ｂがＢＧＭ１およびＢＧＭ１ａよりも夜の落ち着いた雰囲気に適した曲であるとする。この場合、表示する画像の画像データに付加された情報から撮影時間が朝の場合はＢＧＭ１、昼の場合はＢＧＭ１ａ、夜の場合はＢＧＭ１ｂをそれぞれ選択する。尚、同じ時間帯に対応する複数の画像がある場合は、統計的処理を行って最多の時間（例えば１８：００以降の時間が最多である場合は夜）で判断する。同様に、撮影日で判別する場合は、５月に撮影された画像が最多である場合は５月向きの音楽を選択する。撮影場所についても同様に、地域（東北、関東、関西、日本、米国、欧州など）に応じて、その地域に関連する音楽を選択するようにしてもよい。
【００４１】
また、画像データのヘッダ情報として撮影時の撮影モード（夜景、風景、スポーツ、ポートレートなど）の情報が付加されている場合は、撮影モードなどの情報を利用してもよい。例えば、夜景モードで撮影された画像である場合は夜や暗い場合が多いので、落ち着いた感じの音楽を選択し、風景モードの場合は爽やかな感じの音楽を選択する。同様に、夜景モードで撮影された画像である場合は夜や暗い場合が多いので、落ち着いた感じの音楽を選択し、風景モードの場合は爽やかな感じの音楽を選択する。
【００４２】
さらに、画像再生装置１０１の制御部１０５に時計機能やＧＰＳ（全地球測位システム）機能を持たせて、スライドショーを実行する再生日時や再生場所を取得して、撮影日時や撮影場所と同様の考え方で、再生日時や再生場所に適した音楽を選択するようにしてもよい。
【００４３】
このように、各実施形態に係る画像再生装置１０１（または画像再生装置１０１ａ、１０１ｂ（または電子カメラ１０１ａ、１０１ｂ）は、スライドショーで表示部１０２に表示する画像の感情的雰囲気に合致する音楽を自動的に選択してスピーカ１０３ａから再生することができる。
【００４４】
以上、本発明に係る画像再生装置について、各実施形態で例を挙げて説明してきたが、その精神またはその主要な特徴から逸脱することなく他の多様な形で実施することができる。そのため、上述した実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明は、特許請求の範囲によって示されるものであって、本発明は明細書本文にはなんら拘束されない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内である。
【符号の説明】
【００４５】
１０１・・・画像再生装置
１０１ａ・・・電子カメラ
１０１ｂ・・・画像再生装置（電子カメラ）
１０２・・・表示部
１０３・・・音声出力部
１０４・・・操作部
１０５・・・制御部
１０６・・・画像解析部
１０７・・・記憶部
１０８・・・共通バス
１０９・・・画像入力部
１０９ａ・・・メモリカード
１１０・・・撮像部
１１１・・・通信部
１５１・・・表情解析部
１５２・・・色解析部
１６１・・・音楽データ
１６２・・・音楽分類テーブル
１６３・・・画像データ
【図１】
2013183259.tif 000003
【図２】
2013183259.tif 000004
【図３】
2013183259.tif 000005
【図４】
2013183259.tif 000006
【図５】
2013183259.tif 000007
【図６】
2013183259.tif 000008
【図７】
2013183259.tif 000009
【図８】
2013183259.tif 000010