(57)【要約】      （修正有）【課題】使用者により予め感情状態に応じた画像情報等を対応付けて記憶させる登録操作の必要がなく、容易に感情に応じた画像情報を表示させることが可能な画像表示装置、画像表示方法、画像表示プログラムを提供する。【解決手段】人の状態を示す状態情報と、状態情報に対応付けられた対応情報を記憶する対応情報記憶手段と、生体情報を取得する生体情報取得手段と、生体情報取得手段から取得した生体情報に基づいて、状態情報を取得する状態情報取得手段と、状態情報取得手段により取得した状態情報に対応付けて記憶されている対応情報を対応情報記憶手段から取得する対応情報取得手段と、複数の画像情報を記憶する画像情報記憶手段と、対応情報取得手段により取得された前記対応情報に基づいて、画像情報記憶手段から少なくとも一の画像情報を検索する画像情報検索手段と、画像情報検索手段により検索された画像情報を表示手段へ出力する出力手段とを有する。【選択図】図１
2010282148.tif 000002
【特許請求の範囲】
【請求項１】
画像情報を表示手段に表示する画像表示装置において、
人の状態を示す状態情報と、前記状態情報に対応付けられた対応情報を記憶する対応情報記憶手段と、
生体情報を取得する生体情報取得手段と、
前記生体情報取得手段から取得した生体情報に基づいて、前記状態情報を取得する状態情報取得手段と、
前記状態情報取得手段により取得した前記状態情報に対応付けて記憶されている前記対応情報を前記対応情報記憶手段から取得する対応情報取得手段と、
複数の画像情報を記憶する画像情報記憶手段と、
前記対応情報取得手段により取得された前記対応情報に基づいて、前記画像情報記憶手段から少なくとも一の画像情報を検索する画像情報検索手段と、
前記画像情報検索手段により検索された画像情報を前記表示手段へ出力する出力手段と、
を有することを特徴とする画像表示装置。
【請求項２】
請求項１に記載の画像表示装置において、
前記対応情報記憶手段は、前記対応情報と、前記対応情報に関する特徴情報と、を対応付けて記憶し、
前記対応情報取得手段により取得された対応情報に対応付けて記憶されている特徴情報を取得し、かつ、前記画像情報記憶手段に記憶されている複数の画像情報から特徴情報を取得する特徴情報取得手段を更に有し、
前記画像情報検索手段は、前記特徴情報取得手段により取得された各特徴情報を比較した結果に基づいて、少なくとも一の画像情報を前記画像情報記憶手段から検索することを特徴とする画像表示装置。
【請求項３】
請求項２に記載の画像表示装置において、
前記対応情報は、色情報であり、
前記色情報に関する特徴情報は、色分類情報であり、
前記特徴情報取得手段は色情報取得手段を有し、前記色情報取得手段により取得された色情報に対応付けて記憶されている特徴情報としての色分類情報を取得し、かつ、前記画像情報記憶手段に記憶されている複数の画像情報から色分類情報を取得し、
前記画像情報検索手段は、前記色情報取得手段により取得された色情報に対応付けて記憶されている色分類情報と、前記画像情報記憶手段に記憶されている複数の画像情報の色分類情報と、を比較し、前記画像情報記憶手段に記憶されている各画像情報の色分類情報が、前記色情報取得手段により取得された色情報に対応付けて記憶されている色分類情報に比べて所定の範囲内である画像情報を前記画像情報記憶手段から検索することを特徴とする画像表示装置。
【請求項４】
請求項３に記載の画像表示装置において、
前記色情報は、前記状態情報が示す人の感情状態に効果的に働く色、又は、前記状態情報が示す人の感情状態を表現する色を示す情報であることを特徴とする画像表示装置。
【請求項５】
請求項２に記載の画像表示装置において、
前記対応情報は、関連情報であり、
前記関連情報に関する特徴情報は、画像情報に付された識別情報であり、
前記特徴情報取得手段は関連情報取得手段を有し、前関連情報取得手段により取得された関連情報に対応付けて記憶されている特徴情報としての識別情報を取得し、かつ、前記画像情報記憶手段に記憶されている複数の画像情報から識別情報を取得し、
前記画像情報検索手段は、前記関連情報取得手段により取得された関連情報に対応付けて記憶されている識別情報と、前記画像情報記憶手段に記憶されている複数の画像情報のそれぞれに付された識別情報と、を比較し、
前記画像情報記憶手段に記憶されている各画像情報の中から、前記関連情報取得手段により取得された関連情報に対応付けて記憶されている識別情報と一致する識別情報が付された画像情報を前記画像情報記憶手段から検索することを特徴とする画像表示装置。
【請求項６】
請求項５に記載の画像表示装置において、
前記関連情報は、前記状態情報が示す人の感情状態に効果的に働く情報、又は、前記状態情報が示す人の感情状態を表現する情報であることを特徴とする画像表示装置。
【請求項７】
請求項１乃至請求項６のいずれか一項に記載の画像表示装置において、
前記生体情報は、音声情報であり、
前記対応情報記憶手段は、前記状態情報と、前記状態情報に関する単語情報と、を対応付けて記憶し、
前記生体情報取得手段により取得した音声情報に含まれている単語情報を取得する音声特徴情報取得手段を更に有し、
前記状態情報取得手段は、前記音声特徴情報取得手段により取得した単語情報と、前記対応情報記憶手段に記憶されている単語情報と、を比較した結果に基づいて、前記状態情報を前記対応情報記憶手段から取得することを特徴とする画像表示装置。
【請求項８】
請求項１乃至請求項６のいずれか一項に記載の画像表示装置において、
前記生体情報は、音声情報であり、
前記対応情報記憶手段は、個人を特定する個人情報と、前記個人情報に対応する基本音声情報と、を対応付けて記憶し、
前記状態情報取得手段は、前記生体情報取得手段により取得したある一定時間の音声情報の時間経過による変化情報と、前記基本音声情報と、に基づいて前記状態情報を取得することを特徴とする画像表示装置。
【請求項９】
請求項８に記載の画像表示装置において、
前記対応情報記憶手段は、声の大きさ、高さ、又は、速さの少なくとも一を含む基本音声情報を記憶していることを特徴とする画像表示装置。
【請求項１０】
請求項１乃至請求項６のいずれか一項に記載の画像表示装置において、
前記生体情報は、顔画像情報であり、
前記対応情報記憶手段は、前記状態情報と、前記状態情報に関する顔特徴情報と、を対応付けて記憶し、
前記生体情報取得手段により取得した顔画像情報に含まれている顔特徴情報を取得する顔特徴情報取得手段を更に有し、
前記状態情報取得手段は、前記顔特徴情報取得手段により取得した顔特徴情報と、前記対応情報記憶手段に記憶されている顔特徴情報と、を比較した結果に基づいて、前記状態情報を前記対応情報記憶手段から取得することを特徴とする画像表示装置。
【請求項１１】
請求項１０に記載の画像表示装置において、
前記生体情報は、顔画像情報であり、
前記対応情報記憶手段は、個人を特定する個人情報と、前記個人情報に対応する基本顔画像情報と、を対応付けて記憶し、
前記状態情報取得手段は、前記生体情報取得手段により取得したしたある一定時間の顔画像情報の時間経過による変化情報と、前記基本顔画像情報と、に基づいて前記状態情報を取得することを特徴とする画像表示装置。
【請求項１２】
画像情報を表示手段に表示する画像表示方法において、
人の状態を示す状態情報と、前記状態情報に対応付けられた対応情報と、を記憶する対応情報記憶工程と、
生体情報を取得する生体情報取得工程と、
前記取得した生体情報に基づいて、前記状態情報を取得する状態情報取得工程と、
前記取得した状態情報に対応付けて記憶されている前記対応情報を取得する対応情報取得工程と、
複数の画像情報を記憶する画像情報記憶工程と、
前記取得された前記対応情報に基づいて、少なくとも一の画像情報を検索する画像情報検索工程と、
前記検索された画像情報を出力する出力工程と、
を有することを特徴とする画像表示方法。
【請求項１３】
人の状態を示す状態情報と、前記状態情報に対応付けられた対応情報を記憶する対応情報記憶手段、
生体情報を取得する生体情報取得手段、
前記生体情報取得手段から取得した生体情報に基づいて、前記状態情報を取得する状態情報取得手段、
前記状態情報取得手段により取得した前記状態情報に対応付けて記憶されている前記対応情報を前記対応情報記憶手段から取得する対応情報取得手段、
複数の画像情報を記憶する画像情報記憶手段、
前記画像情報を表示する表示手段、
前記対応情報取得手段により取得された前記対応情報に基づいて、前記画像記憶手段から少なくとも一の画像情報を検索する画像情報検索手段、
前記画像情報検索手段により検索された画像情報を前記表示手段へ出力する出力手段として機能させることを特徴とする画像表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、感情状態に応じた画像情報を表示させることができる画像表示装置、画像表示方法、及び画像表示プログラムの技術分野に関する。
【背景技術】
【０００２】
従来から、音声情報から感情状態を判断し、感情状態に応じた画像情報などを表示する画像表示装置が開発されている。例えば、犬の鳴き声（音声情報）から感情状態を分析し、感情状態を表示する「バウリンガル」が開発されている。また、ＬＥＤ（発光ダイオード）を組込んだ花型の端末が、話し手の感情を光の色で表現する「言花（ＫＯＴＯＨＡＮＡ）」が開発されている。具体的には、その周囲にいる話し手の声（音声情報）から感情情報を分析し、話し手が「楽しさ」を感じていたら前記花型の端末が「黄色」、「興奮」を感じていたら「赤色」というように反応することによって、話し手の感情状態を光の色によって表現する。さらに、特許文献１には、使用者の発する音声から感情状態を判断し、感情状態に応じた風景画像を表示させる発明や、特許文献２には、予め複数の感情状態に対応した顔画像を用意しておき、使用者の発する音声から感情状態を判断し、感情状態に応じて顔画像を表示させる発明や、特許文献３には、使用者の発する音声の大きさから感情状態を判断し、感情状態に基づいてキャラクターを表示する発明等が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−３５２１５４号公報
【特許文献２】特開２００５−３５２８９２号公報
【特許文献３】特開２００６−４８３５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１〜３に記載の発明ではいずれも、感情状態に応じた画像情報を表示させるためには、使用者により予め感情状態に応じた画像情報等を対応付けて記憶させるといった登録操作が必要となっており、操作が煩雑であり不便であるという問題が生じていた。
【０００５】
本発明はこのような状況に鑑みてなされたものであり、使用者により予め感情状態に応じた画像情報等を対応付けて記憶させる登録操作の必要がなく、容易に感情に応じた画像情報を表示させることが可能な画像表示装置、画像表示方法、及び画像表示プログラムを提供することを主たる課題とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するための請求項１に記載の発明は、画像情報を表示手段に表示する画像表示装置において、人の状態を示す状態情報と、前記状態情報に対応付けられた対応情報を記憶する対応情報記憶手段と、生体情報を取得する生体情報取得手段と、前記生体情報取得手段から取得した生体情報に基づいて、前記状態情報を取得する状態情報取得手段と、前記状態情報取得手段により取得した前記状態情報に対応付けて記憶されている前記対応情報を前記対応情報記憶手段から取得する対応情報取得手段と、複数の画像情報を記憶する画像情報記憶手段と、前記対応情報取得手段により取得された前記対応情報に基づいて、前記画像情報記憶手段から少なくとも一の画像情報を検索する画像情報検索手段と、前記画像情報検索手段により検索された画像情報を前記表示手段へ出力する出力手段と、を有することを特徴とする。
【０００７】
上記課題を解決するための請求項２に記載の発明は、請求項１に記載の画像表示装置において、前記対応情報記憶手段は、前記対応情報と、前記対応情報に関する特徴情報と、を対応付けて記憶し、前記対応情報取得手段により取得された対応情報に対応付けて記憶されている特徴情報を取得し、かつ、前記画像情報記憶手段に記憶されている複数の画像情報から特徴情報を取得する特徴情報取得手段を更に有し、前記画像情報検索手段は、前記特徴情報取得手段により取得された各特徴情報を比較した結果に基づいて、少なくとも一の画像情報を前記画像情報記憶手段から検索することを特徴とする。
【０００８】
上記課題を解決するための請求項３に記載の発明は、請求項２に記載の画像表示装置において、前記対応情報は、色情報であり、前記色情報に関する特徴情報は、色分類情報であり、前記特徴情報取得手段は色情報取得手段を有し、前記色情報取得手段により取得された色情報に対応付けて記憶されている特徴情報としての色分類情報を取得し、かつ、前記画像情報記憶手段に記憶されている複数の画像情報から色分類情報を取得し、前記画像情報検索手段は、前記色情報取得手段により取得された色情報に対応付けて記憶されている色分類情報と、前記画像情報記憶手段に記憶されている複数の画像情報の色分類情報と、を比較し、前記画像情報記憶手段に記憶されている各画像情報の色分類情報が、前記色情報取得手段により取得された色情報に対応付けて記憶されている色分類情報に比べて所定の範囲内である画像情報を前記画像情報記憶手段から検索することを特徴とする。
【０００９】
上記課題を解決するための請求項４に記載の発明は、請求項３に記載の画像表示装置において、前記色情報は、前記状態情報が示す人の感情状態に効果的に働く色、又は、前記状態情報が示す人の感情状態を表現する色を示す情報であることを特徴とする。
【００１０】
上記課題を解決するための請求項５に記載の発明は、請求項２に記載の画像表示装置において、前記対応情報は、関連情報であり、前記関連情報に関する特徴情報は、画像情報に付された識別情報であり、前記特徴情報取得手段は関連情報取得手段を有し、前関連情報取得手段により取得された関連情報に対応付けて記憶されている特徴情報としての識別情報を取得し、かつ、前記画像情報記憶手段に記憶されている複数の画像情報から識別情報を取得し、前記画像情報検索手段は、前記関連情報取得手段により取得された関連情報に対応付けて記憶されている識別情報と、前記画像情報記憶手段に記憶されている複数の画像情報のぞれぞれに付された識別情報と、を比較し、記画像情報記憶手段に記憶されている各画像情報の中から、前記関連情報取得手段により取得された関連情報に対応付けて記憶されている識別情報と一致する識別情報が付された画像情報を前記画像情報記憶手段から検索することを特徴とする。
【００１１】
上記課題を解決するための請求項６に記載の発明は、請求項５に記載の画像表示装置において、前記関連情報は、前記状態情報が示す人の感情状態に効果的に働く情報、又は、前記状態情報が示す人の感情状態を表現する情報であることを特徴とする。
【００１２】
上記課題を解決するための請求項７に記載の発明は、請求項１乃至請求項６のいずれか一項に記載の画像表示装置において、前記生体情報は、音声情報であり、前記対応情報記憶手段は、前記状態情報と、前記状態情報に関する単語情報と、を対応付けて記憶し、前記生体情報取得手段により取得した音声情報に含まれている単語情報を取得する音声特徴情報取得手段を更に有し、前記状態情報取得手段は、前記音声特徴情報取得手段により取得した単語情報と、前記対応情報記憶手段に記憶されている単語情報と、を比較した結果に基づいて、前記状態情報を前記対応情報記憶手段から取得することを特徴とする。
【００１３】
上記課題を解決するための請求項８に記載の発明は、請求項１乃至請求項６のいずれか一項に記載の画像表示装置において、前記生体情報は、音声情報であり、前記対応情報記憶手段は、個人を特定する個人情報と、前記個人情報に対応する基本音声情報と、を対応付けて記憶し、前記状態情報取得手段は、前記生体情報取得手段により取得したある一定時間の音声情報の時間経過による変化情報と、前記基本音声情報と、に基づいて前記状態情報を取得することを特徴とする。
【００１４】
上記課題を解決するための請求項９に記載の発明は、請求項８に記載の画像表示装置において、前記対応情報記憶手段は、声の大きさ、高さ、又は、速さの少なくとも一を含む基本音声情報を記憶していることを特徴とする。
【００１５】
上記課題を解決するための請求項１０に記載の発明は、請求項１乃至請求項６のいずれか一項に記載の画像表示装置において、前記生体情報は、顔画像情報であり、前記対応情報記憶手段は、前記状態情報と、前記状態情報に関する顔特徴情報と、を対応付けて記憶し、前記生体情報取得手段により取得した顔画像情報に含まれている顔特徴情報を取得する顔特徴情報取得手段を更に有し、前記状態情報取得手段は、前記顔特徴情報取得手段により取得した顔特徴情報と、前記対応情報記憶手段に記憶されている顔特徴情報と、を比較した結果に基づいて、前記状態情報を前記対応情報記憶手段から取得することを特徴とする。
【００１６】
上記課題を解決するための請求項１１に記載の発明は、請求項１０に記載の画像表示装置において、前記生体情報は、顔画像情報であり、前記対応情報記憶手段は、個人を特定する個人情報と、前記個人情報に対応する基本顔画像情報と、を対応付けて記憶し、前記状態情報取得手段は、前記生体情報取得手段により取得したある一定時間の顔画像情報の時間経過による変化情報と、前記基本顔画像情報と、に基づいて前記状態情報を取得することを特徴とする。
【００１７】
上記課題を解決するための請求項１２に記載の発明は、画像情報を表示手段に表示する画像表示方法において、人の状態を示す状態情報と、前記状態情報に対応付けられた対応情報と、を記憶する対応情報記憶工程と、生体情報を取得する生体情報取得工程と、前記取得した生体情報に基づいて、前記状態情報を取得する状態情報取得工程と、前記取得した状態情報に対応付けて記憶されている前記対応情報を取得する対応情報取得工程と、複数の画像情報を記憶する画像情報記憶工程と、前記取得された前記対応情報に基づいて、少なくとも一の画像情報を検索する画像情報検索工程と、前記検索された画像情報を出力する出力工程と、を有することを特徴とする。
【００１８】
上記課題を解決するための請求項１３に記載の発明は、人の状態を示す状態情報と、前記状態情報に対応付けられた対応情報を記憶する対応情報記憶手段、生体情報を取得する生体情報取得手段、前記生体情報取得手段から取得した生体情報に基づいて、前記状態情報を取得する状態情報取得手段、前記状態情報取得手段により取得した前記状態情報に対応付けて記憶されている前記対応情報を前記対応情報記憶手段から取得する対応情報取得手段、複数の画像情報を記憶する画像情報記憶手段、前記画像情報を表示する表示手段、前記対応情報取得手段により取得された前記対応情報に基づいて、前記画像記憶手段から少なくとも一の画像情報を検索する画像情報検索手段、前記画像情報検索手段により検索された画像情報を前記表示手段へ出力する出力手段として機能させることを特徴とする。
【発明の効果】
【００１９】
請求項１、１２、１３に記載の発明によれば、使用者により予め感情状態に応じた画像情報等を対応付けて記憶させる登録操作の必要がなく、容易に感情状態に応じた画像情報を表示させることができる。
【００２０】
請求項２に記載の発明によれば、対応情報と、特徴情報と、を対応付けて記憶させることによって、使用者の状態情報に応じた対応情報を取得した後に、対応情報に応じた特徴情報を介して画像情報を取得できることによって、使用者の感情状態により適した画像情報を取得し、表示させることができる。
【００２１】
請求項３、４に記載の発明によれば、色情報と、色分類情報と、を対応付けて記憶させることによって、使用者の状態情報に応じた色情報を取得した後に、色情報に応じた色分類情報を介して画像情報を取得できることによって、使用者の感情状態により適した画像情報を取得し、表示させることができる。
【００２２】
請求項５、６に記載の発明によれば、関連情報と、図番情報と、を対応付けて記憶させることによって、使用者の状態情報に応じた関連情報を取得した後に、関連情報に応じた図番情報を介して画像情報を取得できることによって、使用者の感情状態により適した画像情報を取得し、表示させることができる。
【００２３】
請求項７に記載の発明によれば、画像表示装置の使用者が発した音声情報に含まれる単語情報に基づいて画像情報を検索することができるため、使用者の感情状態に応じた画像情報を適切に表示することができる。
【００２４】
請求項８、９に記載の発明によれば、画像表示装置の使用者が発した音声情報の時間経過による変化情報に基づいて画像情報を検索することができるため、使用者の感情状態の変化に応じた画像情報を適切に表示することができる。
【００２５】
請求項１０に記載の発明によれば、使用者の顔画像情報に基づいて画像情報を検索することができるため、使用者の感情状態に応じた画像情報を適切に表示することができる。
【００２６】
請求項１１に記載の発明によれば、使用者の顔画像情報の時間変化による変化情報に基づいて画像情報を検索することができるため、使用者の感情状態の変化に応じた画像情報を適切に表示することができる。
【図面の簡単な説明】
【００２７】
【図１】本実施形態に係る画像表示装置１の概要構成の一例を示すブロック図である。
【図２】単語情報データベースを示す図である。
【図３】対応情報データベースを示す図である。
【図４】色情報データベースを示す図である。
【図５】関連情報データベースを示す図である。
【図６】画像情報データベースを示す図である。
【図７】第一実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【図８】音声特徴情報データベースを示す図である。
【図９】第二実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【図１０】基本音声情報データベースを示す図である。
【図１１】第三実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【図１２】顔特徴情報データベースを示す図である。
【図１３】第四実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【図１４】基本顔特徴情報データベースを示す図である。
【図１５】第五実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【図１６】基本生体特徴情報データベースを示す図である。
【図１７】第六実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【図１８】第七実施形態に係る画像表示装置１における制御部により実行される画像表示処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００２８】
以下、本発明の実施形態を図面に基づいて説明する。
【００２９】
（第一実施形態）
図１を参照して、本発明の実施形態に係る画像表示装置１の構成及び機能について説明する。
【００３０】
図１は、本実施形態に係る画像表示装置１の概要構成の一例を示すブロック図である。
【００３１】
図１に示すように、画像表示装置１は、マイク１１、カメラ１２、記憶部（生体情報記憶手段、対応情報記憶手段、画像情報記憶手段の一例）１３、ＣＰＵ１５、ＲＡＭ１６、ＲＯＭ１７等を備えた制御部１４、ディスプレイ（表示手段の一例）１８、通信部１９、外部記憶部２１、タイマー２２等を備えて構成されている。このような画像表示装置１として、例えば、パーソナルコンピュータ、デジタルフォトフレーム装置、各種携帯型機器等を適用可能である。
【００３２】
マイク１１は、例えば、画像表示装置の使用者等の発する音声を集音し、音声情報として制御部１４に出力する。カメラ１２は、画像表示装置の使用者の顔等の映像を撮影し、使用者画像情報として制御部１４に出力する。ディスプレイ１８は、例えば、タッチパネル式のカラー液晶ディスプレイとする。
【００３３】
記憶部１３は、例えば不揮発性半導体メモリ（例えば、フラッシュＲＯＭ）やハードディスクドライブ等からなり、ＯＳ（オペレーティングシステム）、本発明の画像表示プログラム、アプリケーションプログラム等を記憶している。
【００３４】
記憶部１３に記憶されるアプリケーションプログラムには、例えば、画像を表示する画像表示プログラム、所定の時間間隔で画像を切り替えながら表示するスライドショーの表示処理を規定するスライドショープログラム等がある。
【００３５】
また、記憶部１３に記憶される画像表示プログラムを実行し、画像表示装置の使用者の感情状態に応じた画像情報を検索するために用いられる単語情報データベース１０、対応情報データベース２０、色情報データベース３０、関連情報データベース４０、画像情報データベース５０が構築されている。以下、各データベースの内容について説明する。
【００３６】
＜単語情報データベース１０＞
図２に示すように、単語情報データベース１０には、状態情報と、状態情報に関する単語情報と、が対応付けられて記憶されている。
【００３７】
状態情報とは、例えば、人の感情状態を示す「怒り」、「喜び」、「悲しみ」等を示す情報である。単語情報とは、例えば、当該状態情報から連想される語句を示す「むかつく」、「嬉しい」、「悲しみ」等の情報である。当該状態情報、例えば、「怒り」に対応付けて、状態情報「怒り」に関する単語情報「むかつく」、「嫌い」、「腹立たしい」が記憶されている。また、状態情報、例えば、「喜び」に対応付けて、状態情報「喜び」に関する単語情報「楽しい」、「めでたい」が記憶されている。さらに、状態情報、例えば、「悲しみ」に対応付けて、状態情報「悲しみ」に関する単語情報「悲しみ」、「幻滅」が記憶されている。
【００３８】
＜対応情報データベース２０＞
図３に示すように、対応情報データベース２０には、状態情報と、対応情報の一例としての色情報と関連情報と、が対応付けて記憶されている。
【００３９】
状態情報とは、上述したものと同様である。対応情報とは、当該状態情報に対する情報であり、対応情報の一例としての色情報とは、例えば、前記状態情報が示す人の感情状態に効果的に働く色、又は、前記状態情報が示す人の感情状態を表現する色等を示す情報である。人の感情状態に効果的に働く色を示す色情報は、「青」（怒りを静めるための色情報）、「緑」（喜び、興奮した心情を緩和する色情報）、「オレンジ」（悲しみを緩和する色情報）等が挙げられる。人の感情状態を表現する色を示す色情報は、「黒」（怒りを表す色情報）、「赤」（喜び、興奮した心情を表す色情報）、「黄」（悲しみを表す色情報）等が挙げられる。図２は、当該状態情報、例えば、「怒り」に対応付けて、色情報「青」、また、当該状態情報「喜び」に対応付けて、色情報「赤」、更に、当該状態情報「悲しみ」に対応付けて、色情報「黄」が記憶されていることを示している。関連情報とは、例えば、前記状態情報が示す人の感情状態に効果的に働く情報、又は、前記状態情報が示す人の感情状態を表現する情報である。なお、上述したように、前記状態情報が示す人の感情状態に効果的に働く色を示す色情報以外の情報、又は、前記状態情報が示す人の感情状態を表現する色を示す色情報以外の情報である。人の感情状態に効果的に働く関連情報は、「海」、「空」（怒りを静めるための関連情報）、「山」、「草原」（喜び、興奮した心情を緩和する関連情報）、「動物」（悲しみを緩和する関連情報）等が挙げられる。人の感情状態を表現する関連情報は、「雷」、「火山」（怒りを表す関連情報）、「笑顔」、「祭り」（喜び、興奮した心情を表す関連情報）、「雨」（悲しみを表す関連情報）等が挙げられる。図２は、当該状態情報、例えば、「怒り」に対応付けて、関連情報「海」、「空」、状態情報「喜び」に対応付けて、関連情報「笑顔」、「祭り」、更に、状態情報「悲しみ」に対応付けて、関連情報「動物」が記憶されていることを示している。
【００４０】
＜色情報データベース３０＞
図４に示すように、色情報データベース３０には、色情報と、色情報に関する色分類情報（特徴情報の一例）と、が対応付けて記憶されている。
【００４１】
色情報とは、上述したものと同様である。色分類情報とは、例えば、色情報に対応するＲＧＢ値を示す情報である。当該色情報、例えば、「青」に対応付けて、青の画像として認められる色分類情報（ＲＧＢの値）、「Ｒ５０以下、Ｇ５０以下、Ｂ２００以上」が記憶されている。色情報、例えば、「赤」に対応付けて、赤の画像として認められる色分類情報（ＲＧＢの値）、「Ｒ２００以上、Ｇ５０以下、Ｂ５０以下」が記憶されている。色情報、例えば、「黄」に対応付けて、黄の画像として認められる色分類情報（ＲＧＢの値）、「Ｒ２００以上、Ｇ２００以上、５０以下」が記憶されている。
【００４２】
＜関連情報データベース４０＞
図５に示すように、関連情報データベース４０には、関連情報と、関連情報に関する図番情報（特徴情報の一例）と、が対応付けて記憶されている。
【００４３】
関連情報とは、上述したものと同様である。図番情報とは、画像情報に付されている識別情報、言い換えれば、画像情報に一意に付されるものである。図番情報は、例えば、画像情報は生成する際に自動的に、又は、当該画像表示装置の使用者の入力により付されるものである。
【００４４】
関連情報データベース４０には、例えば、関連情報、「海」、「空」に対応付けて、図番情報「Ｆｉｇ１」、「Ｆｉｇ１１」・・・が記憶されている。また、関連情報、例えば、「笑顔」、「祭り」に対応付けて、図番情報「Ｆｉｇ２」、「Ｆｉｇ１２」・・・が記憶されている。対応情報、例えば、「動物」に対応付けて、図番情報「Ｆｉｇ３」、「Ｆｉｇ１３」・・・が記憶されている。
【００４５】
＜画像情報データベース５０＞
図６に示すように、画像情報データベース５０には、画像情報と、画像情報に対応付けられた色分類情報と図番情報と、が記憶されている。
【００４６】
画像情報とは、例えば、画像表示装置の使用者に関する画像（写真）やその他の画像の情報であり、画像ファイル（例えば、ＴＩＦＦ、ＧＩＦ、又はＪＰＥＧ等の形式の画像ファイル）が複数記憶されている。各画像ファイルのヘッダには、画像情報の色数、及び画像サイズが格納されている。
【００４７】
色分類情報とは、上述したものと同様である。画像情報データベース５０には、画像表示装置の使用者に関する画像情報Ａに対応付けて、当該画像情報Ａの色分類情報（ＲＧＢの値）と、当該画像情報Ａに付された図番を示す図番情報（Ｆｉｇ１）が記憶されている。また、画像情報Ｂに対応付けて、当該画像情報Ｂの色分類情報（ＲＧＢの値）と、当該画像情報Ｂに付された図番を示す図番情報（Ｆｉｇ２）が記憶されている。画像情報Ｃ、画像情報Ｄ・・・においても画像情報（写真）と、画像情報に付された色分類情報と図番情報と、が記憶されている。
【００４８】
外部記憶部２１は、上記画像表示装置の記憶部に構築されている画像情報データベース５０に記憶されている画像情報を記憶させていてもよい。
【００４９】
通信部１９は、外部記憶部２１との間で通信を行う。例えば、通信部１９は、ＣＰＵ１５からの送信に応じて、外部記憶部２１に画像情報検索要求を送信し、当該画像情報検索要求に対する画像情報を外部記憶部２１から受信する。
【００５０】
制御部１４におけるＣＰＵ１５は、ＯＳ実行下、本発明の画像表示プログラム等にしたがって各種処理を実行する。特に、ＣＰＵ１５は、本発明の画像表示プログラムにしたがって、本発明における状態情報取得手段、音声特徴情報取得手段、対応情報取得手段、画像情報検索手段、顔特徴情報取得手段、特徴情報取得手段として機能する。なお、制御部１４の動作は、以下の画像表示装置の動作において説明する。
【００５１】
次に、図７を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【００５２】
図７は、第一実施形態に係る画像表示装置１における制御部１４のＣＰＵ１５により実行される画像表示処理の一例を示すフローチャートである。
【００５３】
＜画像表示処理＞
まず、ＣＰＵ１５は、生体情報を取得し、ＲＡＭ１６に一時記憶する（以下、「取得する」とは、ＲＡＭ１６に一時記憶させることをいうものとする）（ステップＳ１１）。
【００５４】
生体情報とは、例えば、画像情報装置の使用者等の発する音声を示す音声情報や、画像情報装置の使用者の顔等の映像を示す画像情報である。以下、生体情報の一例として音声情報を取得した場合について説明する。
【００５５】
例えば、ＣＰＵ１５は、マイク１１により集音された音声情報を取得する。
【００５６】
次に、ＣＰＵ１５は、取得した音声情報に基づいて単語情報データベース１０より状態情報を取得する（ステップＳ１２）。
【００５７】
まず、ＣＰＵ１５は、取得した音声情報から、当該音声情報に含まれている単語情報を取得する。例えば、「果物は嫌いです。」という音声情報を取得した場合に、当該音声情報に対して言語解析を行い、当該音声情報を「果物」「は」「嫌い」「です」と分解し、単語情報を取得する。次に、ＣＰＵ１５は、言語解析を行って得られた単語情報と、単語情報データベース１０に記憶されている単語情報と、を照合した結果に基づいて、照合して一致すると判断された単語情報に対応付けて記憶されている状態情報を単語情報データベース１０から取得する。例えば、ＣＰＵ１５は、図２に示すように単語情報データベース１０より、単語情報「嫌い」に対応付けられている状態情報「怒り」を取得する（同様にして、状態情報「喜び」、「悲しみ」を取得する場合もある。）。
【００５８】
次に、ＣＰＵ１５は、取得した状態情報に対応付けて記憶されている色情報を対応情報データベース２０から取得したか否かを判定する（ステップＳ１３）。
【００５９】
例えば、単語情報データベース１０より取得した状態情報が「怒り」であった場合には、ＣＰＵ１５は、図３に示されている対応情報データベース２０より、それに対応付けられている青（色情報）を取得したか否かを判定する。
【００６０】
取得した状態情報に対応付けて記憶されている色情報を対応情報データベース２０より取得した場合（ステップＳ１３：ＹＥＳ）には、ＣＰＵ１５は、対応情報データベース２０より取得された色情報に基づいて、画像情報データベース５０より少なくとも一の画像情報を検索する（ステップＳ１４）。
【００６１】
まず、ＣＰＵ１５は、取得された色情報に対応付けて記憶されている色分類情報を色情報データベース３０より取得し、かつ、画像情報データベース５０に記憶されている複数の画像情報から色分類情報を取得する。例えば、ＣＰＵ１５は、対応情報データベース２０より取得された色情報が「青」だった場合には、図４に示す色情報データベース３０より、色情報の「青」に対応付けて記憶されている色分類情報（Ｒ５０以下、Ｇ５０以下、Ｂ２００以上）を取得し、図６に示す画像情報データベース５０より、複数の画像情報に対応付けられて記憶されている色分類情報（ＲＧＢの値）を取得する。次に、ＣＰＵ１５は、色情報データベース３０より取得された色情報に対応付けて記憶されている色分類情報と、画像情報データベース５０に記憶されている複数の画像情報の色分類情報と、を比較し、画像情報データベース５０に記憶されている画像情報の色分類情報が、取得された色情報に対応付けて記憶されている色分類情報に比べて所定の範囲内である画像情報を画像情報データベース５０から検索する。例えば、ＣＰＵ１５は、色情報データベース３０より取得された色情報「青」に対応付けて記憶されている色分類情報（Ｒ５０以下、Ｇ５０以下、Ｂ２００以上）と、画像情報データベース５０に記憶されている各画像情報の色分類情報（ＲＧＢの値）と、を比較し、各画像情報の色分類情報（ＲＧＢの値）のうち、色情報データベース３０より取得された色情報「青」に対応付けて記憶されている色分類情報（Ｒ５０以下、Ｇ５０以下、Ｂ２００以上）の範囲内である色分類情報に対応する画像情報（例えば、画像情報Ａ、・・・）を検索し取得する。
【００６２】
一方、ＣＰＵ１５は、単語情報データベース１０より取得した状態情報に対応付けて記憶されている色情報を対応情報データベース２０より取得しなかった場合（ステップＳ１３：ＮＯ）には、ＣＰＵ１５は、単語情報データベース１０より取得した状態情報に対応付けて記憶されている関連情報を対応情報データベース２０から取得したか否かを判定する（ステップＳ１５）。
【００６３】
例えば、単語情報データベース１０より取得した状態情報が「怒り」であった場合には、ＣＰＵ１５は、図３に示されている対応情報データベース２０より、それに対応付けられている海、空（関連情報）を取得したか否かを判定する。
【００６４】
ＣＰＵ１５は、取得した状態情報に対応付けて記憶されている関連情報を対応情報データベース２０より取得した場合（ステップＳ１５：ＹＥＳ）には、ＣＰＵ１５は、対応情報データベース２０より取得された関連情報に基づいて、画像情報データベース５０より少なくとも一の画像情報を検索する（ステップＳ１６）。
【００６５】
まず、ＣＰＵ１５は、対応情報データベース２０より取得された関連情報に対応付けて記憶されている図番情報を関連情報データベース４０より取得し、かつ、画像情報データベース５０に記憶されている複数の画像情報から図番情報を取得する。例えば、関連情報が「海」、「空」だった場合には、図５に示す関連情報データベース４０より、関連情報「海」「空」に対応付けて記憶されている図番情報（Ｆｉｇ１、Ｆｉｇ１１・・・）を取得し、図６に示す画像情報データベース５０より、複数の画像情報（画像情報Ａ、Ｂ、Ｃ・・・）のそれぞれに付された図番情報（Ｆｉｇ１、Ｆｉｇ１１・・・）を取得する。次に、ＣＰＵ１５は、関連情報データベース４０より取得された関連情報に対応付けて記憶されている図番情報と、画像情報データベース５０に記憶されている複数の画像情報の図番情報と、を比較した結果に基づいて、少なくとも一の画像情報を画像情報データベース５０から検索する。例えば、ＣＰＵ１５は、関連情報データベース４０より取得された関連情報「海」、「空」に対応付けて記憶されている図番情報（Ｆｉｇ１、Ｆｉｇ１１・・・）と、画像情報データベース５０に記憶されている複数の画像情報の図番情報と、を比較し、画像情報データベース５０に記憶されている各画像情報の中から、関連情報データベース４０より取得された関連情報に対応付けて記憶されている図番情報と一致する図番情報が付された画像情報を検索し取得する。
【００６６】
次に、ＣＰＵ１５は、検索された画像情報を表示する順序を決定し（ステップＳ１７）、画像情報をディスプレイ１８へ出力する（出力工程）（ステップＳ１８）。
【００６７】
例えば、ＣＰＵ１５は、画像情報が複数取得された場合には表示する順序を予め設定した基準に基づいて決定してもよいし、ランダムに表示する順序を決定してもよい。その後、ＣＰＵ１５は、画像情報をディスプレイ１８に出力し、ディスプレイ１８は、画像を表示する。なお、スライドショーの表示処理においてディスプレイ１８上に各画像が表示されてもよい。
【００６８】
（第二実施形態）
次に、本発明の第二実施形態に係る画像表示装置について説明する。なお、第二実施形態に係る画像表示装置の構成及び機能は、基本的には第一実施形態と同様である。
【００６９】
第二実施形態に係る画像表示装置１において、記憶部１３には、第一実施形態で説明した単語情報データベース１０の代わりに、音声特徴情報データベース６０が記憶されている。
【００７０】
＜音声特徴情報データベース６０＞
図８に示すように、音声特徴情報データベース６０には、状態情報と、状態情報に関する音声特徴情報と、が対応付けて記憶されている。
【００７１】
音声特徴情報データベース６０には、例えば、状態情報「怒り」に対応付けて、状態情報「怒り」に対応する音声特徴情報（例えば、声がだんだん大きくなる、怒鳴り声が含まれている）が記憶され、状態情報「喜び」に対応付けて、状態情報「喜び」に対応する音声特徴情報（例えば、笑い声が含まれている）が記憶され、状態情報「悲しみ」に対応付けて、状態情報「悲しみ」に対応する音声特徴情報（例えば、声がだんだん小さくなる、泣き声が含まれている）が記憶されている。
【００７２】
次に、図９を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【００７３】
図９は、第二実施形態に係る画像表示装置１における制御部１４のＣＰＵ１５により実行される画像表示処理の一例を示すフローチャートである。
【００７４】
＜画像表示処理＞
まず、ＣＰＵ１５は、音声情報を取得する。
【００７５】
例えば、タイマー２２によりある一定時時間がカウントされ、その間に発せられた音声情報がマイク１１により取得される。ＣＰＵ１５は、マイク１１により取得された当該音声情報を取得する。
【００７６】
次に、ＣＰＵ１５は、取得したある一定時間の音声情報の時間経過による変化情報と、音声特徴情報と、に基づいて音声特徴情報データベース６０より状態情報を取得する（ステップＳ２２）。
【００７７】
まず、ＣＰＵ１５は、音声情報取得部により取得したある一定時間の音声情報の時間経過による変化情報を取得する。例えば、ＣＰＵ１５は、取得したある一定時間の音声情報が時間経過と共にだんだん大きくなっている場合には「声がだんだん大きくなっている」ことを変化情報として取得する。次に、ＣＰＵ１５は、取得した変化情報と、記憶部に記憶されている音声特徴情報と、を比較した結果に基づいて、状態情報を音声特徴情報データベース６０より取得する。例えば、図８に示すように音声特徴情報データベース６０により、音声特徴情報「声がだんだん大きくなる」に対応付けられている状態情報「怒り」を取得する。また、ＣＰＵ１５は、取得したある一定時間の音声情報に怒鳴り声が含まれている場合には「怒鳴り声が含まれている」ことを変化情報として取得する。図８に示すように音声特徴情報データベース６０により、音声特徴情報「怒鳴り声が含まれている」に対応付けられている状態情報「怒り」が取得される。なお、同様にして、状態情報「喜び」、「悲しみ」を取得する場合もある。
【００７８】
なお、図９に示す処理においてステップＳ２３〜２８の処理は、図７に示すステップＳ１３〜１８の処理と同様であるので、説明を省略する。
【００７９】
（第三実施形態）
次に、本発明の第三実施形態に係る画像表示装置について説明する。なお、第三実施形態に係る画像表示装置の構成及び機能は、基本的には第一実施形態と同様である。
【００８０】
第三実施形態に係る画像表示装置１において、記憶部１３には、第一実施形態で説明した単語情報データベース１０の代わりに、基本音声特徴情報データベース７０が記憶されている。
【００８１】
＜基本音声特徴情報データベース７０＞
図１０に示すように、基本音声特徴情報データベース７０には、個人を特定する個人情報と、個人情報に対応する基本音声情報と、が対応付けて記憶されている。
【００８２】
基本音声特徴情報データベース７０には、例えば、個人情報「Ａさん」に対応付けて、個人情報「Ａさん」に対応する基本音声情報である「声の大きさ」、「声の高さ」、「声の速さ」が記憶されている。同様に、個人情報「Ｂさん」に対応付けて、個人情報「Ｂさん」に対応する基本音声情報である「声の大きさ」、「声の高さ」、「声の速さ」が記憶されている。Ｃさん、Ｄさん・・・においても個人情報と、個人情報に対応する基本音声情報と、が対応付けて記憶されている。
【００８３】
次に、図１１を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【００８４】
図１１は、第三実施形態に係る画像表示装置１における制御部１４のＣＰＵ１５により実行される画像表示処理の一例を示すフローチャートである。
【００８５】
＜画像表示処理＞
まず、ＣＰＵ１５は、音声情報を取得する（ステップＳ３１）。
【００８６】
例えば、タイマー２２によりある一定時時間がカウントされ、その間に発せられた音声情報がマイク１１により取得される。ＣＰＵ１５は、マイク１１により取得された当該音声情報を取得する。
【００８７】
次に、ＣＰＵ１５は、取得したある一定時間の音声情報の時間経過による変化情報と、基本音声情報と、に基づいて基本音声特徴情報データベース７０より状態情報を取得する（ステップＳ３２）。
【００８８】
まず、ＣＰＵ１５は、取得したある一定時間の音声情報Ｓと、基本音声特徴情報データベース７０に記憶されている基本音声情報と、を照合し、基本音声特徴情報データベース７０に記憶されている基本音声情報のうち、音声情報Ｓと類似性を有する基本音声情報を取得する。例えば、ＣＰＵ１５は、一定時間の音声情報Ｓに類似な基本音声情報（Ａさんの音声情報であるとする）と比較して、ある一定時間の間に取得した音声情報が時間の経過によって音声情報（声）がだんだん大きくなったり、高さが高くなったり、速さが速くなったりした場合には、Ａさんが怒っていると判断し、状態情報「怒り」を取得する。また、ＣＰＵ１５は、その基本音声情報と比較して、音声情報（声）の大きさが時間の経過によってだんだん小さくなったり、高さが低くなったり、速さが遅くなったりした場合には、Ａさんが悲しんでいると判断し、状態情報「悲しみ」を取得する。このように時間経過による音声情報の変化によって状態情報を取得する。
【００８９】
なお、図１１に示す処理においてステップＳ３３〜３８の処理は、図７に示すステップＳ１３〜１８の処理と同様であるので、説明を省略する。
【００９０】
（第四実施形態）
次に、本発明の第四実施形態に係る画像表示装置について説明する。なお、第四実施形態に係る画像表示装置の構成及び機能は、基本的には第一実施形態と同様である。
【００９１】
第四実施形態に係る画像表示装置１において、記憶部１３には、第一実施形態で説明した単語情報データベース１０の代わりに、顔特徴情報データベース８０が記憶されている。
【００９２】
＜顔特徴情報データベース８０＞
図１２に示すように、顔特徴情報データベース８０には、状態情報と、状態情報に関する顔特徴情報と、が対応付けて記憶されている。
【００９３】
顔特徴情報データベース８０には、例えば、状態情報「怒り」に対応付けて、状態情報「怒り」に対応する顔特徴情報（例えば、目がつりあがっている）が記憶され、状態情報「喜び」に対応付けて、状態情報「喜び」に対応する顔特徴情報（例えば、口角が上がっている）が記憶され、状態情報「悲しみ」に対応付けて、状態情報「悲しみ」に対応する顔特徴情報（例えば、目じりが下がっている）が記憶されている。
【００９４】
次に、図１３を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【００９５】
図１３は、第四実施形態に係る画像表示装置１における制御部１４のＣＰＵ１５により実行される画像表示処理の一例を示すフローチャートである。
【００９６】
＜画像表示処理＞
以下、生体情報の一例として画像情報を取得した場合について説明する。
【００９７】
まず、ＣＰＵ１５は、画像情報を取得する（ステップＳ４１）。
【００９８】
例えば、タイマー２２によりある一定時時間がカウントされ、その間に得られた画像情報、特に顔画像情報がカメラ１２により取得される。ＣＰＵ１５は、カメラ１２により取得された当該画像情報を取得する。
【００９９】
次に、ＣＰＵ１５は、ある一定時間の顔画像情報の時間経過による変化情報と、顔特徴情報と、に基づいて顔特徴情報データベース８０より状態情報を取得する（ステップＳ４２）。
【０１００】
まず、ＣＰＵ１５は、画像情報取得部により取得したある一定時間の顔画像情報の時間経過による変化情報を取得する。例えば、ＣＰＵ１５は、取得したある一定時間の顔画像情報が時間経過と共にだんだん目がつり上がっている場合には、「目がだんだんつり上がっている」ことを変化情報として取得する。次に、ＣＰＵ１５は、取得した変化情報と、顔特徴情報データベース８０に記憶されている顔特徴情報と、を比較した結果に基づいて、状態情報を顔特徴情報データベース８０から取得する。例えば、ＣＰＵ１５は、図１２に示すように顔特徴情報データベース８０により、顔特徴情報「目がつりあがっている」に対応付けられている状態情報「怒り」を取得する。また、ＣＰＵ１５は、取得したある一定時間の顔画像情報が時間経過と共にだんだん口角が上がっている場合には、「口角がだんだん上がっている」ことを変化情報として取得する。図１２に示すように顔特徴情報データベース８０により、顔特徴情報「口角がだんだん上がっている」に対応付けられている状態情報「喜び」を取得する。さらに、ＣＰＵ１５は、取得したある一定時間の顔画像情報が時間経過と共にだんだん目じりが下がっている場合には、「目じりがだんだん下がっている」ことを変化情報として取得する。図１２に示すように顔特徴情報データベース８０により、顔特徴情報「目じりがだんだん下がっている」に対応付けられている状態情報「悲しみ」を取得する。
【０１０１】
なお、図１３に示す処理においてステップＳ４３〜４８の処理は、図７に示すステップＳ１３〜１８の処理と同様であるので、説明を省略する。
【０１０２】
（第五実施形態）
次に、本発明の第五実施形態に係る画像表示装置について説明する。なお、第五実施形態に係る画像表示装置の構成及び機能は、基本的には第一実施形態と同様である。
【０１０３】
第五実施形態に係る画像表示装置１において、記憶部１３には、第一実施形態で説明した単語情報データベース１０の代わりに、基本顔画像情報データベース９０が記憶されている。
【０１０４】
＜基本顔特徴情報データベース９０＞
図１４に示すように、基本顔特徴情報データベース９０には、個人を特定する個人情報と、個人情報に対応する基本顔画像情報と、が対応付けて記憶されている。  
【０１０５】
基本顔特徴情報データベース９０には、例えば、個人情報「Ａさん」に対応付けて、Ａさんの通常状態の「顔画像情報Ａ」が記憶されている。同様に、個人情報「Ｂさん」に対応付けて、Ｂさんの通常状態の「顔画像情報Ｂ」が記憶されている。Ｃさん、Ｄさん・・・においても個人情報と、個人情報に対応する基本顔画像情報と、が対応付けて記憶されている。
【０１０６】
次に、図１５を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【０１０７】
図１５は、第五実施形態に係る画像表示装置１における制御部のＣＰＵにより実行される画像表示処理の一例を示すフローチャートである。
【０１０８】
＜画像表示処理＞
まず、ＣＰＵ１５は、画像情報を取得する（ステップＳ５１）。
【０１０９】
例えば、タイマー２２によりある一定時時間がカウントされ、その間に得られた画像情報、特に顔画像情報がカメラ１２により取得される。ＣＰＵ１５は、カメラ１２により取得された当該顔画像情報を取得する。
【０１１０】
次に、ＣＰＵ１５は、取得したある一定時間の顔画像情報の時間経過による変化情報と、基本顔画像情報と、に基づいて基本顔特徴情報データベース９０より状態情報を取得する（ステップＳ５２）。
【０１１１】
例えば、ＣＰＵ１５は、取得したある一定時間の顔画像情報のある瞬間の顔画像情報（静止画）Ａと、記憶部に記憶されている基本顔画像情報と、を照合し、記憶部に記憶されている基本顔画像情報のうち、類似性を有する顔画像情報を取得する。
【０１１２】
ここで、類似性有無の判定手法は、公知であるので詳しい説明を省略するが、例えば、上記顔画像情報Ｓから顔の特徴をよく表す顔特徴点（例えば、目、鼻、口等）が抽出され、これらの特徴点を結ぶ顔グラフが作成される。そして、作成された顔グラフと、基本顔画像情報（顔画像情報Ａ、Ｂ、Ｃ・・・）に基づき上記と同じように作成された顔グラフとの一致度の割合が算出され、その割合が所定値以上である場合に、類似性有と判断される。
【０１１３】
なお、上記顔画像情報Ｓと上記基本顔画像情報（顔画像情報Ａ、Ｂ、Ｃ・・・）の向きが異なると、類似性が失われてしまうだけでなく、顔特徴点の検出もうまく行えなくなるという問題が生じるため、最初に顔の向きを推定（例えば、右目、左目、及び口の３点を頂点とする三角形の形状から顔の向きを推定）し、その向きに応じて顔グラフを変換することで当該問題を解消することができる。
【０１１４】
ＣＰＵ１５は、一定時間の顔画像情報（動画）のある瞬間の顔画像情報（静止画）Ｓに類似な顔画像情報（例えば、顔画像情報Ａ）と比較して、ある一定時間の間に取得した顔画像情報（動画）が時間の経過によってだんだん目がつりあがってきた場合には、Ａさんが怒っていると判断し、状態情報「怒り」を取得する。また、ＣＰＵ１５は、その基本顔画像情報と比較して、顔画像情報（動画）が時間の経過によってだんだん口角が上がっている場合には、Ａさんが喜んでいると判断し、状態情報「喜び」を取得する。さらに、ＣＰＵ１５は、その基本顔画像情報と比較して、顔画像情報（動画）が時間の経過によってだんだん目じりが下がっている場合には、Ａさんが悲しんでいると判断し、状態情報「悲しみ」を取得する。
【０１１５】
なお、図１５に示す処理においてステップＳ５３〜５８の処理は、図７に示すステップＳ１３〜１８の処理と同様であるので、説明を省略する。
【０１１６】
（第六実施形態）
次に、本発明の第四実施形態に係る画像表示装置について説明する。なお、第六実施形態に係る画像表示装置の構成及び機能は、基本的には第一実施形態と同様である。
【０１１７】
第六実施形態に係る画像表示装置１において、記憶部１３には、第一実施形態で説明した単語情報データベース１０の代わりに、基本生体特徴情報データベース１００が記憶されている。
【０１１８】
＜基本生体特徴情報データベース１００＞
図１６に示すように、基本生体特徴情報データベース１００には、状態情報と、状態情報に関する基本生体特徴情報と、が対応付けて記憶されている。
【０１１９】
基本生体特徴情報データベース１００には、例えば、状態情報「怒り」に対応付けて、状態情報「怒り」に対応する基本生体特徴情報「瞬きの回数が速い」、「脈拍数が速い」、「呼吸数が速い」が記憶され、状態情報「悲しみ」に対応付けて、状態情報「悲しみ」に対応する基本生体特徴情報「瞬きの回数が遅い」、「脈拍数が遅い」、「呼吸数が遅い」が記憶されている。
【０１２０】
次に、図１７を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【０１２１】
図１７は、第六実施形態に係る画像表示装置１における制御部のＣＰＵにより実行される画像表示処理の一例を示すフローチャートである。
【０１２２】
＜画像表示処理＞
まず、ＣＰＵ１５は、画像情報を取得する（ステップＳ６１）。
【０１２３】
例えば、タイマー２２によりある一定時時間がカウントされ、その間に得られた画像情報、特に顔画像情報がカメラ１２により取得される。ＣＰＵ１５は、カメラ１２により取得された当該顔画像情報を取得する。
【０１２４】
次に、ＣＰＵ１５は、取得したある一定時間の顔画像情報のうちの瞬き情報の時間経過による変化情報と、基本生体特徴情報と、に基づいて基本生体特徴情報データベース１００より状態情報を取得する（ステップＳ６２）。
【０１２５】
まず、ＣＰＵ１５は、画像情報取得部により取得したある一定時間の顔画像情報の時間経過による変化情報を取得する。
【０１２６】
例えば、ＣＰＵ１５は、取得したある一定時間の顔画像情報が時間経過と共にだんだん瞬きの回数が速くなっている場合には、「瞬きの回数が速い」ことを変化情報として取得する。
【０１２７】
次に、ＣＰＵ１５は、取得した変化情報と、記憶部に記憶されている基本生体特徴情報と、を比較した結果に基づいて、状態情報を記憶部から取得する。
【０１２８】
例えば、ＣＰＵ１５は、図１６に示すように記憶部に記憶されている基本生体特徴情報データベース１００により、基本生体特徴情報「瞬きの回数が速い」に対応付けられている状態情報「怒り」を取得する。
【０１２９】
また、取得したある一定時間の顔画像情報が時間経過と共にだんだん瞬きの回数が遅くなっている場合には、ＣＰＵ１５は、「瞬きの回数が遅い」ことを変化情報として取得する。図１４に示すように記憶部に記憶されている基本生体特徴情報データベース１００により、基本生体特徴情報「瞬きの回数が遅い」に対応付けられている状態情報「悲しみ」を取得する。
【０１３０】
なお、図１７に示す処理においてステップＳ６３〜６８の処理は、図７に示すステップＳ１３〜１８の処理と同様であるので、説明を省略する。
【０１３１】
（第七実施形態）
次に、本発明の第七実施形態に係る画像表示装置について説明する。なお、第七実施形態に係る画像表示装置の構成及び機能は、基本的には第一実施形態と同様である。
【０１３２】
第七実施形態に係る画像表示装置１において、第一実施形態で説明したマイク１１、カメラ１２の代わりに、図示しない脈拍数を測定する脈拍数測定部、呼吸数を測定する呼吸数測定部を備えている。なお、上記脈拍数測定部、呼吸数測定部は、画像表示装置１が備える図示しないインターフェース部により情報をやり取りする。
【０１３３】
第七実施形態に係る画像表示装置１において、記憶部１３には、第一実施形態で説明した単語情報データベース１０の代わりに、基本生体特徴情報データベース１００が記憶されている（第六実施形態参照）。
【０１３４】
次に、図１８を参照して、本実施形態に係る画像表示装置１の動作について説明する。
【０１３５】
図１８は、第七実施形態に係る画像表示装置１における制御部のＣＰＵにより実行される画像表示処理の一例を示すフローチャートである。
【０１３６】
＜画像表示処理＞
まず、ＣＰＵ１５は、生体情報を取得する（ステップＳ７１）。
【０１３７】
例えば、ＣＰＵ１５は、脈拍数測定部により脈拍数情報、又は、呼吸数測定部により呼吸数情報を取得する。
【０１３８】
次に、ＣＰＵ１５は、取得した脈拍数情報、又は、呼吸数情報の時間経過による変化情報と、基本生体特徴情報と、に基づいて基本生体特徴情報データベース１００より状態情報を取得する（ステップＳ７２）。
【０１３９】
例えば、ＣＰＵ１５は、脈拍数取得部、又は、呼吸数取得部により取得したある一定時間の脈拍数情報、又は、呼吸数情報の時間経過による変化情報を取得する。取得したある一定時間の脈拍数情報、又は、呼吸数情報が時間経過と共にだんだん速くなっている場合には、「速くなっている」ことを特徴情報として取得する。
【０１４０】
次に、ＣＰＵ１５は、取得した変化情報と、記憶部に記憶されている基本生体特徴情報と、を比較した結果に基づいて、状態情報を記憶部から取得する。
【０１４１】
例えば、ＣＰＵ１５は、図１６に示すように記憶部に記憶されている基本生体特徴情報データベース１００により、基本生体特徴情報「速くなっている」に対応付けられている状態情報「怒り」を取得する。
【０１４２】
また、ＣＰＵ１５は、取得したある一定時間の脈拍数情報、又は、呼吸数情報が時間経過と共にだんだん遅くなっている場合には、「遅くなっている」ことを変化情報として取得する。図１６に示すように記憶部に記憶されている基本生体特徴情報データベース１００により、基本生体特徴情報「遅くなっている」に対応付けられている状態情報「悲しみ」を取得する。
【０１４３】
なお、図１８に示す処理においてステップＳ７３〜７８の処理は、図７に示すステップＳ１３〜１８の処理と同様であるので、説明を省略する。
【０１４４】
以上説明したように、本発明の実施形態によれば、使用者により予め感情状態に応じた画像情報等を対応付けて記憶させる登録操作の必要がなく、容易に感情状態に応じた画像情報を表示させることができる。
【符号の説明】
【０１４５】
１・・・画像表示装置
１１・・・マイク
１２・・・カメラ
１３・・・記憶部
１４・・・制御部
１５・・・ＣＰＵ
１６・・・ＲＡＭ
１７・・・ＲＯＭ
１８・・・ディスプレイ
１９・・・通信部
２１・・・外部記憶部
２２・・・タイマー
【図１】
2010282148.tif 000003
【図２】
2010282148.tif 000004
【図３】
2010282148.tif 000005
【図４】
2010282148.tif 000006
【図５】
2010282148.tif 000007
【図６】
2010282148.tif 000008
【図７】
2010282148.tif 000009
【図８】
2010282148.tif 000010
【図９】
2010282148.tif 000011
【図１０】
2010282148.tif 000012
【図１１】
2010282148.tif 000013
【図１２】
2010282148.tif 000014
【図１３】
2010282148.tif 000015
【図１４】
2010282148.tif 000016
【図１５】
2010282148.tif 000017
【図１６】
2010282148.tif 000018
【図１７】
2010282148.tif 000019
【図１８】
2010282148.tif 000020