(57)【要約】    【課題】  画像毎に添付された音声データの特徴パラメータの系列の類似度に応じて画像データを分類することができる画像表示装置を提供する。    【解決手段】  写真取り込み部２により取り込まれた写真１は、システムバス１０を介して、音声データ解析部３に入力され、音声データ解析部３は、撮影者音声１２を解析し、撮影者音声１２を特徴パラメータの系列（並び）に変換する。写真取り込み部２により取り込まれた各写真の撮影者音声１２からそれぞれ得られた特徴パラメータの系列は、写真分類部６に与えられる。写真分類部６は、写真間での特徴パラメータの系列の類似度を算出し、写真毎に算出された特徴パラメータの系列の類似度に応じて写真を分類する。この分類された結果は、表示部８に表示される。【選択図】      図１
2005175839.tif 000002
【特許請求の範囲】
【請求項１】
画像毎に添付された音声データを特徴パラメータの系列に変換する変換手段と、
前記画像毎の特徴パラメータの系列の類似度に応じて画像を分類する画像分類手段と、
前記画像分類手段による分類結果を表示する表示手段と
を備えることを特徴とする画像表示装置。
【請求項２】
前記画像分類手段は、前記画像毎の特徴パラメータの系列を比較して前記画像毎の特徴パラメータの系列の類似度を算出することを特徴とする請求項１記載の画像表示装置。
【請求項３】
前記画像分類手段は、前記画像毎の特徴パラメータの系列を後方から比較して前記画像毎の特徴パラメータの系列の類似度を算出することを特徴とする請求項２記載の画像表示装置。
【請求項４】
前記画像分類手段は、前記画像毎の特徴パラメータの系列を比較する際に、該特徴パラメータの系列の後方に位置する特徴パラメータの類似度に関して重み付けを行うことを特徴とする請求項３記載の画像表示装置。
【請求項５】
前記画像毎に添付された音声データは、前記画像の撮影後に添付された話者の音声データであることを特徴とする請求項１記載の画像表示装置。
【請求項６】
前記画像毎に添付された音声データは、撮影時の背景雑音データを含む被写体の音声データであることを特徴とする請求項１記載の画像表示装置。
【請求項７】
前記画像毎に添付された音声データは、前記画像の撮影後に添付された撮影者の音声データと、前記画像の撮影後に添付された話者の音声データと、撮影時の被写体の音声データを含む背景雑音データとを含み、
前記変換手段は、前記画像毎に添付された、前記撮影者の音声データ、前記話者の音声データ、前記背景雑音データのうち、２つのデータをそれぞれ特徴パラメータの系列に変換し、
前記分類手段は、前記画像毎の前記２つのデータに対する特徴パラメータの系列の類似度に応じて、それぞれの類似度を表すための二次元座標系上で画像を分類することを特徴とする請求項１記載の画像表示装置。
【請求項８】
前記画像に添付された音声データは、前記画像の撮影後に添付された撮影者の音声データと、前記画像の撮影後に添付された話者の音声データと、撮影時の被写体の音声データを含む背景雑音データとを含み、
前記変換手段は、前記画像毎に添付された、前記撮影者の音声データ、前記話者の音声データ、前記背景雑音データをそれぞれ特徴パラメータの系列に変換し、
前記分類手段は、前記画像毎の前記３つのデータに対する特徴パラメータの系列の類似度に応じて、それぞれの類似度を表すための三次元座標系上で画像を分類することを特徴とする請求項１記載の画像表示装置。
【請求項９】
前記表示手段は、同一グループに分類された画像のうち、該グループを代表する画像を背景画像として、該グループに属する画像のサムネイルを、他のグループと識別可能に表示することを特徴とする請求項１ないし８のいずれか１つに記載の画像表示装置。
【請求項１０】
分類された画像を対応する既存のフォルダに収納する収納手段を備えることを特徴とする請求項１ないし９のいずれか１つに記載の画像表示装置。
【請求項１１】
画像毎に添付された音声データを特徴パラメータの系列に変換する変換工程と、
前記画像毎の特徴パラメータの系列の類似度に応じて画像を分類する画像分類工程と、
前記画像分類工程による分類結果を表示する表示工程と
を備えることを特徴とする画像表示方法。
【請求項１２】
前記画像分類工程では、前記画像毎の特徴パラメータの系列を比較して画像毎の類似度を算出することを特徴とする請求項１１記載の画像表示方法。
【請求項１３】
前記画像分類工程では、前記画像毎の特徴パラメータの系列を後方から比較して画像毎の類似度を算出することを特徴とする請求項１２記載の画像表示方法。
【請求項１４】
前記画像分類工程では、前記画像毎の特徴パラメータの系列を比較する際に、該特徴パラメータの系列の後方に位置する特徴パラメータの類似度に関して重み付けを行うことを特徴とする請求項１３記載の画像表示方法。
【請求項１５】
前記画像毎に添付された音声データは、前記画像の撮影後に添付された話者の音声データであることを特徴とする請求項１１記載の画像表示方法。
【請求項１６】
前記画像毎に添付された音声データは、撮影時の背景雑音データを含む被写体の音声データであることを特徴とする請求項１１記載の画像表示方法。
【請求項１７】
前記画像毎に添付された音声データは、前記画像の撮影後に添付された撮影者の音声データと、前記画像の撮影後に添付された話者の音声データと、撮影時の被写体の音声データを含む背景雑音データとを含み、
前記変換工程では、前記画像毎に添付された、前記撮影者の音声データ、前記話者の音声データ、前記背景雑音データのうち、２つのデータをそれぞれ特徴パラメータの系列に変換し、
前記分類工程では、前記画像毎の前記２つのデータに対する特徴パラメータの系列の類似度に応じて、それぞれの類似度を表すための二次元座標系上で画像を分類することを特徴とする請求項１１記載の画像表示方法。
【請求項１８】
前記画像に添付された音声データは、前記画像の撮影後に添付された撮影者の音声データと、前記画像の撮影後に添付された話者の音声データと、撮影時の被写体の音声データを含む背景雑音データとを含み、
前記変換工程では、前記画像毎に添付された、前記撮影者の音声データ、前記話者の音声データ、前記背景雑音データをそれぞれ特徴パラメータの系列に変換し、
前記分類工程では、前記画像毎の前記３つのデータに対する特徴パラメータの系列の類似度に応じて、それぞれの類似度を表すための三次元座標系上で画像を分類することを特徴とする請求項１１記載の画像表示方法。
【請求項１９】
前記表示工程では、同一グループに分類された画像のうち、該グループを代表する画像を背景画像として、該グループに属する画像のサムネイルを、他のグループと識別可能に表示することを特徴とする請求項１１ないし１８のいずれか１つに記載の画像表示方法。
【請求項２０】
分類された画像を対応する既存のフォルダに収納する収納工程を備えることを特徴とする請求項１１ないし１９のいずれか１つに記載の画像表示方法。
【請求項２１】
画像毎に添付された音声データを特徴パラメータの系列に変換する変換モジュールと、
前記画像毎の特徴パラメータの系列の類似度に応じて画像を分類する画像分類モジュールと、
前記画像分類モジュールによる分類結果を表示する表示モジュールと
を備えることを特徴とするプログラム。
【請求項２２】
請求項２１記載のプログラムをコンピュータ読取可能に格納したことを特徴とする記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像に添付された音声データによって画像を分類し、その分類結果を表示する画像表示装置、画像表示方法、プログラムおよび記憶媒体に関する。
【背景技術】
【０００２】
従来、デジタルカメラで撮影されて記憶媒体に格納された画像を分類、整理する装置として、画像データに付随する音声データを音声認識し、音声認識された音声データが示す内容に基づいて画像データを分類する画像分類装置が提案されている（例えば、特許文献１を参照）。この装置によれば、画像データと音声データとが記憶されている記憶媒体をセットするだけで、自動的に撮影画像の分類を行うことができるとともに、分類した撮影画像ファイルを文字や音声によって容易に検索することが可能になる。
【０００３】
また、撮影時または撮影後に録音して画像データに付加した音声データをテキストデータに変換し、変換されたテキストデータに基づいて画像データの検索、ソートを行い、さらにテキストデータを画像データに自動合成し、ソートあるいは選択した順番で画像を台紙上に自動的にレイアウトする方法が提案されている（例えば、特許文献２を参照）。この方法によれば、電子アルバムを容易に作成することができる。
【０００４】
また、画像に関連した音声データを音声認識して表意文字に変換し、検索に用いる方法が提案されている（例えば、特許文献３を参照）。
【特許文献１】特開２０００−３５８２０５号公報
【特許文献２】特開２００３−１１１００９号公報
【特許文献３】特開平０９−１３５４１７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明の目的は、画像に添付された音声データの特徴パラメータの系列の類似度に応じて画像データを分類することができる画像表示装置、画像表示方法、プログラムおよび記憶媒体を提供することにある。
【課題を解決するための手段】
【０００６】
本発明は、上記目的を達成するため、画像毎に添付された音声データを特徴パラメータの系列に変換する変換手段と、前記画像毎の特徴パラメータの系列の類似度に応じて画像を分類する画像分類手段と、前記画像分類手段による分類結果を表示する表示手段とを備えることを特徴とする。
【０００７】
本発明は、上記目的を達成するため、画像毎に添付された音声データを特徴パラメータの系列に変換する変換工程と、前記画像毎の特徴パラメータの系列の類似度に応じて画像を分類する画像分類工程と、前記画像分類工程による分類結果を表示する表示工程とを備えることを特徴とする。
【０００８】
本発明は、上記目的を達成するため、画像毎に添付された音声データを特徴パラメータの系列に変換する変換モジュールと、前記画像毎の特徴パラメータの系列の類似度に応じて画像を分類する画像分類モジュールと、前記画像分類モジュールによる分類結果を表示する表示モジュールとを備えることを特徴とする。
【０００９】
本発明は、上記目的を達成するため、上記プログラムをコンピュータ読取可能に格納したことを特徴とする記憶媒体を提供する。
【発明の効果】
【００１０】
本発明によれば、画像毎に添付された音声データの特徴パラメータの系列の類似度に応じて画像データを分類することができる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の実施の形態について図面を参照しながら説明する。
【００１２】
（第１の実施の形態）
図１は本発明の第１の実施の形態に係る画像表示装置の構成を示すブロック図である。
【００１３】
画像表示装置は、図１に示すように、画像データ１１、撮影者音声１２、被写体音声１３がそれぞれ付加された写真１を取り込む写真取り込み部２を備える。ここで、写真１とは、例えばデジタルカメラなどの撮像装置で撮影され、例えばＳＤメモリ、ＣＦメモリなどの可搬記憶媒体に保存されている画像ファイルであり、写真取り込み部２は、記憶媒体に保存されている画像ファイルすなわち写真を読み出すものである。画像データ１１は、撮像装置で撮像された画像データである。また、被写体音声１３は、撮影時に撮像装置に設けられているマイクから取り込まれた音声であり、これには、背景雑音が含まれている。撮影者音声１２は、撮影後に写真１を見ながら写真１に対してユーザが付加した音声である。
【００１４】
写真取り込み部２により取り込まれた写真１は、システムバス１０を介して、音声データ解析部３に入力される。音声データ解析部３は、撮影者音声１２を解析し、撮影者音声１２を特徴パラメータの系列（並び）に変換する。この特徴パラメータの系列は、記憶部７に一時保存される。このようにして、写真取り込み部２により取り込まれた各写真の撮影者音声１２からそれぞれ得られた特徴パラメータの系列は、記憶部７に一時保存される。記憶部７は、ＲＡＭ、ハードディスクなどから構成され、上記特徴パラメータなどのデータが一時保存される領域と、後述する写真分類動作の制御を含む装置全体の動作を制御するプログラムが保存されている領域とを有する。
【００１５】
記憶部７に一時保存されている各写真の撮影者音声からそれぞれ得られた特徴パラメータの系列は、写真分類部６により読み出される。写真分類部６は、写真間での特徴パラメータの系列の類似度を算出し、写真毎に算出された特徴パラメータの系列の類似度に応じて写真を分類する。この分類された結果は、表示部８に表示される。
【００１６】
写真取り込み部２、音声データ解析部３、写真分類部６、記憶部７、表示部８の各ブロックの動作は、制御部９により、記憶部７に保存されているプログラムに基づいて制御される。制御部９は、ＣＰＵ、ＲＯＭ、ＲＡＭなどから構成される。
【００１７】
次に、本実施の形態における写真の分類動作について図２〜図７を参照しながら説明する。図２は図１の画像表示装置における写真の分類動作の手順を示すフローチャート、図３は写真に添付された撮影者音声の波形データの一例を示す図、図４は各写真の類似度の一例を示す図、図５は各フォルダに付加された音声データと各写真に添付された音声データとの類似度（それぞれの特徴パラメータの系列の類似度）を算出して各フォルダに写真が分類された例を示す図、図６は図５の各フォルダに分類された写真の１つを他のフォルダに移動した例を示す図、図７は図２のステップＳ１４の分類結果の表示例を示す図である。ここで、図２に示す手順は、制御部９による制御下で実行されるものである。
【００１８】
本実施の形態における写真の分類動作においては、図２に示すように、まずステップＳ１０において、写真取り込み部２が、記憶媒体から写真１を取り込み、続くステップＳ１１において、音声データ解析部３は、取り込まれた写真１に添付された撮影者音声１２を特徴パラメータの系列に変換する。例えば、図３（ａ）に示すような波形データの撮影者音声が添付されている写真Ａの場合、その撮影者音声は、図３（ｂ）に示すような特徴パラメータａ１、ａ２、…、ａｍの系列に変換される。図３（ｃ）に示すような波形データの撮影者音声が添付されている写真Ｂの場合、その撮影者音声は、図３（ｄ）に示すような特徴パラメータｂ１、ｂ２、…、ｂｎの系列に変換される。このようにして写真取り込み部２により、記憶媒体に保存されている各写真が順次取りこまれ、各写真に添付された撮影者音声は、音声データ解析部３により、特徴パラメータの系列に変換されて記憶部７に一時保存される。
【００１９】
次いで、ステップＳ１２において、写真分類部６は、記憶部７に保存されている各写真に対応する特徴パラメータの系列を読み出し、それらの間の類似度を求める。類似度は、ＤＰマッチング（Dynamic Programming Matching）などで求めてもよいし、また他の方法で求めるようにしてもよい。また、特徴パラメータの系列間の類似度を算出する際には、前方から順次ＤＰマッチングしてもよいし、後方から順次ＤＰマッチングしてもよい。後方からＤＰマッチングする際には、後方のフレームの特徴パラメータの系列の類似度ほど重み付けするようにしてもよい。ここで、５枚の写真Ａ，Ｂ，Ｃ，Ｄ、Ｅがあるとし、これらの写真に添付されている撮影者音声の類似度の一例を図４に示す。図４の例においては、マトリックス中の値が小さいほど音声が似ているものとする。
【００２０】
次いで、ステップＳ１３において、写真分類部６は、写真毎に算出された類似度に基づいて写真を分類する。例えば、図４の例をクラスタリングすると、５枚の写真Ａ，Ｂ，Ｃ，Ｄ、Ｅは、（Ａ，Ｂ，Ｃ）、（Ｃ，Ｄ）の２つのグループに分類される。そして、ステップＳ１４において、表示部８に、分類された画像のサムネイルが図７に示すように表示される。
【００２１】
ここで、既存のフォルダ「ＡＡＡ」と「ＢＢＢ」があって、各フォルダを特徴付ける音声データがフォルダに付加されている場合、図５に示すように、各フォルダに付加された音声データと、各写真に添付された音声データとの類似度（特徴パラメータ系列間の類似度）を算出して、各フォルダに写真が分類される。このように分類が行われた後に、ユーザが例えばフォルダ「ＡＡＡ」の写真Ｃを選択してフォルダ「ＢＢＢ」に移動する操作を行えば、図６に示すように、写真Ｃをフォルダ「ＢＢＢ」に移動することも可能である。
【００２２】
以上より、本実施の形態によれば、写真毎に添付された撮影者音声の特徴パラメータの系列の類似度に応じて画像を分類することができる。そして、分類した結果をユーザにわかり易く表示することができる。また、特徴パラメータの系列の後方から並びの類似度を比較する際に、後方のフレームの類似度を重視することによって、「たなかさん」、「なかむらさん」などの語尾付近が似ている音声を同じグループに分類することが可能になる。
【００２３】
（第２の実施の形態）
次に、本発明の第２の実施の形態について図８を参照しながら説明する。図８は本発明の第２の実施の形態に係る画像表示装置の写真分類動作の手順を示すフローチャートである。本実施の形態の構成は、上述の第１の実施の形態と同じ構成であるので、ここでは、その説明は省略する。
【００２４】
本実施の形態は、上述の第１の実施の形態に対し、写真１に添付された背景雑音（被写体音声１３を含む）を用いて写真１を分類する点で異なる。
【００２５】
本実施の形態においては、図８に示すように、まずステップＳ２０において、写真取り込み部２が記憶媒体から写真１を取り込む。そして、ステップＳ２１において、音声データ解析部３は、取り込まれた写真１に添付された背景雑音（被写体音声１３を含む）を特徴パラメータの系列に変換する。
【００２６】
次いで、ステップＳ２２において、写真分類部６は、各写真に対応する特徴パラメータの系列の類似度を求める。この類似度の算出は、上述の第１の実施の形態で述べたのと同様の方法で行われる。続いて、ステップＳ２３において、写真分類部６は、求められた類似度に基づいて各写真の分類を行う。そして、ステップＳ２４において、表示部８に、分類された写真のサムネイルが表示される（例えば図７を参照）。
【００２７】
このように、本実施の形態によれば、写真毎に添付された音声データ（被写体の発する音声や背景雑音）の特徴パラメータの系列の類似度に応じて写真を分類することができる。そして、分類した結果をユーザにわかり易く表示することができる。
【００２８】
（第３の実施の形態）
次に、本発明の第３の実施の形態について図９を参照しながら説明する。図９は本発明の第３の実施の形態に係る画像表示装置の写真分類動作の手順を示すフローチャートである。本実施の形態の構成は、上述の第１の実施の形態と同じ構成であるので、ここでは、その説明は省略する。
【００２９】
本実施の形態は、上述の第１の実施の形態に対し、写真１に添付された撮影者音声１２に含まれる話者を用いて写真１を分類する点で異なる。
【００３０】
本実施の形態においては、図９に示すように、まずステップＳ３０において、写真取り込み部２が写真１を取り込む。そして、ステップＳ３１において、音声データ解析部３は、取り込まれた写真１に添付された撮影者音声１２から話者（撮影者または写真を分類する人の音声）の特徴パラメータを取り出し、記憶部７に記憶する。
【００３１】
次いで、ステップＳ３２において、写真分類部６は、各写真に対応する話者の特徴パラメータの系列の類似度を求め、続くステップＳ３３において、写真毎の話者の特徴パラメータの系列の類似度に応じて写真を分類する。そして、ステップＳ３４において、分類した結果が表示部９に表示される。
【００３２】
（第４の実施の形態）
次に、本発明の第４の実施の形態について図１０〜図１２を参照しながら説明する。図１０は第１の実施の形態で述べた音の並びの類似度を横軸とし、第３の実施の形態で述べた話者の類似度を縦軸とした、写真のサムネイルの表示例を示す図、図１１は図１０の写真を既存のフォルダ「ＣＣＣ」と「ＤＤＤ」に分類した結果を示す図、図１２は第１の実施の形態で述べた音の並びの類似度を横軸とし、第３の実施の形態で述べた話者の類似度を縦軸とし、第２の実施の形態で述べた背景雑音の類似度を奥行きとした、写真のサムネイルの表示例を示す図である。
【００３３】
本実施の形態においては、上述の各実施の形態の分類に用いられる類似度を算出し、それぞれの類似度に応じた分類の関係が分かるように写真のサムネイルを表示する方法を説明する。
【００３４】
まず、上記表示方法の１つとして、第１の実施の形態で述べた音の並びの類似度（撮影者音声の特徴パラメータの系列の類似度）を横軸とし、第３の実施の形態で述べた話者の類似度（撮影者以外の話者の音声の特徴パラメータの系列の類似度）を縦軸とする座標系に、それぞれの類似度に応じた位置に写真のサムネイルを表示する方法がある。例えば、５枚の写真Ａ，Ｂ，Ｃ，Ｄ，Ｅのそれぞれに対して類似度を求め、求められた類似度に応じた位置に各写真のサムネイルを上記座標系に置いた場合、図１０に示すような位置関係で各写真のサムネイルが表示される。これらの写真は、例えば図１１に示すように、既存のフォルダ「ＣＣＣ」と「ＤＤＤ」にそれぞれ分類することが可能である。なお、上述したように、必要であれば、ユーザ操作により、フォルダ間で写真の移動を行い、所望の写真を所望のフォルダに収納することが可能である。
【００３５】
また、第１の実施の形態で述べた音の並びの類似度（撮影者音声の特徴パラメータの系列の類似度）を横軸とし、第３の実施の形態で述べた話者の類似度（撮影者以外の話者の音声の特徴パラメータの系列の類似度）を縦軸とし、第２の実施の形態で述べた背景雑音の類似度（背景雑音の特徴パラメータの系列の類似度）を奥行きとする座標系に、それぞれの類似度に応じた位置に写真のサムネイルを表示する方法がある。この方法の場合、第２の実施の形態で述べた背景雑音の類似度を奥行きとしているので、この背景雑音の類似度に関しては、例えば図１２に示すように、その類似度が高いもの（写真Ｂ）は、前方にかつ大きく表示され、その類似度が低いもの（写真Ａ）は、後方にかつ小さく表示される。このとき、写真が（Ｂ、Ｅ）、（Ｃ）、（Ａ、Ｄ）のように３つのグループに分類されると、写真ＢとＥの淵は、赤、写真Ｃの淵は、青、写真ＡとＤの淵は、緑のように表示するようにしてもよい。これにより、分類結果を容易に認識することができ、また、分類された写真を対応するフォルダに収納することができる。
【００３６】
（第５の実施の形態）
次に、本発明の第５の実施の形態について図１３を参照しながら説明する。図１３は本発明の第５の実施の形態に係る画像表示装置における分類結果の表示の一例を示す図である。
【００３７】
本実施の形態においては、図１３に示すように、分類されたグループ毎にそれに属する１つの写真のサムネイルを、そのグループの写真のサムネイルの背景として表示する方法が用いられる。この方法は、上述した各実施の形態に対して適用可能である。
【００３８】
（第６の実施の形態）
次に、本発明の第６の実施の形態について図１４および図１５を参照しながら説明する。図１４は本発明の第６の実施の形態に係る画像表示装置における分類結果の表示の一例を示す図、図１５は図１４の写真Ｄのサムネイルを所定の操作により拡大表示した画面例を示す図である。
【００３９】
本実施の形態においては、図１４に示すように、分類結果を表示する際に、予め設定された音声データに対して類似度が高い音声データが添付された写真のサムネイルほど、その表示を大きくする方法が用いられる。この方法は、上述した各実施の形態に対して適用可能である。この表示状態で、例えば写真Ｄのサムネイルが所定の操作方法で指定されると、図１５に示すように、写真Ｄのサムネイルが他のサムネイルより大きく拡大表示される。これにより、小さく表示されている写真のサムネイルを拡大表示して確認することが可能になる。
【００４０】
（第７の実施の形態）
次に、本発明の第７の実施の形態について説明する。
【００４１】
本実施の形態においては、画像を分類する際に、写真のサムネイルが一覧表示され、この状態で、ユーザ（撮影者）が発声すると、発声した音声の音の並びに最も近い声データが添付された写真が特定され、この特定された写真のサムネイルが画面の中心に表示される。
【図面の簡単な説明】
【００４２】
【図１】本発明の第１の実施の形態に係る画像表示装置の構成を示すブロック図である。
【図２】図１の画像表示装置における写真の分類動作の手順を示すフローチャートである。
【図３】写真に添付された撮影者音声の波形データの一例を示す図である。
【図４】各写真の類似度の一例を示す図である。
【図５】各フォルダに付加された音声データと各写真に添付された音声データとの類似度を算出して各フォルダに写真が分類された例を示す図である。
【図６】図５の各フォルダに分類された写真の１つを他のフォルダに移動した例を示す図である。
【図７】図２のステップＳ１４の分類結果の表示例を示す図である。
【図８】本発明の第２の実施の形態に係る画像表示装置の写真分類動作の手順を示すフローチャートである。
【図９】本発明の第３の実施の形態に係る画像表示装置の写真分類動作の手順を示すフローチャートである。
【図１０】第１の実施の形態で述べた音の並びの類似度を横軸とし、第３の実施の形態で述べた話者の類似度を縦軸とした、写真のサムネイルの表示例を示す図である。
【図１１】図１０の写真を既存のフォルダ「ＣＣＣ」と「ＤＤＤ」に分類した結果を示す図である。
【図１２】第１の実施の形態で述べた音の並びの類似度を横軸とし、第３の実施の形態で述べた話者の類似度を縦軸とし、第２の実施の形態で述べた背景雑音の類似度を奥行きとした、写真のサムネイルの表示例を示す図である。
【図１３】本発明の第５の実施の形態に係る画像表示装置における分類結果の表示の一例を示す図である。
【図１４】本発明の第６の実施の形態に係る画像表示装置における分類結果の表示の一例を示す図である。
【図１５】図１４の写真Ｄのサムネイルを所定の操作により拡大表示した画面例を示す図である。
【符号の説明】
【００４３】
１  写真
２  写真取り込み部
３  音声データ解析部
６  写真分類部
７  記憶部
８  表示部
９  制御部
１１  画像データ
１２  撮影者音声
１３  被写体音声
【図１】
2005175839.tif 000003
【図２】
2005175839.tif 000004
【図３】
2005175839.tif 000005
【図４】
2005175839.tif 000006
【図５】
2005175839.tif 000007
【図６】
2005175839.tif 000008
【図７】
2005175839.tif 000009
【図８】
2005175839.tif 000010
【図９】
2005175839.tif 000011
【図１０】
2005175839.tif 000012
【図１１】
2005175839.tif 000013
【図１２】
2005175839.tif 000014
【図１３】
2005175839.tif 000015
【図１４】
2005175839.tif 000016
【図１５】
2005175839.tif 000017