(57)【要約】【課題】ユーザが所有する画像について、ユーザにとっての画像の重要度を正確に評価することができる画像評価装置を提供する。【解決手段】本発明の画像評価装置は、カメラ機能を有するユーザ通信端末の履歴の情報を取得する情報取得部と、少なくともユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、情報取得部により取得された履歴の情報に基づいて、画像保存部に保存された各々の画像の評価値を算出する画像評価部とを備える。【選択図】図２
2013200715.tif 000002
【特許請求の範囲】
【請求項１】
カメラ機能を有するユーザ通信端末の履歴の情報を取得する情報取得部と、
少なくとも前記ユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、
前記情報取得部により取得された履歴の情報に基づいて、前記画像保存部に保存された各々の画像の評価値を算出する画像評価部とを備えることを特徴とする画像評価装置。
【請求項２】
前記画像評価部は、前記履歴の情報と該履歴の情報に対応する人物とを関連付ける第１評価部と、該第１評価部により各々の対応する人物に関連付けられた履歴の情報に基づいて、各々の前記人物の評価値を算出する第２評価部と、各々の人物と前記画像保存部に保存された各々の画像との関連付けを行い、前記第２評価部により算出された各々の人物の評価値に基づいて、前記画像保存部に保存された各々の画像の評価値を算出する第３評価部とを備える請求項１に記載の画像評価装置。
【請求項３】
前記第２評価部は、前記履歴の情報から該履歴の情報に対応する行為の実施回数および情報量を算出し、該実施回数および情報量から各々の前記人物の評価値を算出するものである請求項２に記載の画像評価装置。
【請求項４】
前記第２評価部は、前記履歴の情報から、前記ユーザ通信端末のユーザにより指定された所定期間における実施回数および情報量を算出し、該実施回数および情報量から各々の前記人物の評価値を算出するものである請求項２に記載の画像評価装置。
【請求項５】
前記第２評価部は、前記履歴の情報から、前記ユーザにより指定された所定期間を重み付けして全ての期間における実施回数および情報量を算出し、該実施回数および情報量から各々の前記人物の評価値を算出するものである請求項２に記載の画像評価装置。
【請求項６】
前記履歴の情報は、電子メールの送受信の情報であり、
前記第２評価部は、前記電子メールの送受信の情報から、前記実施回数および情報量として、前記電子メールの送受信の回数およびデータ容量を算出し、該電子メールの送受信の回数およびデータ容量から各々の前記人物の評価値を算出するものである請求項３〜５のいずれかに記載の画像評価装置。
【請求項７】
前記履歴の情報は、電話の発着信の情報であり、
前記第２評価部は、前記電話の発着信の情報から、前記実施回数および情報量として、前記電話の発着信の回数および通話時間を算出し、該電話の発着信の回数および通話時間から各々の前記人物の評価値を算出するものである請求項３〜５のいずれかに記載の画像評価装置。
【請求項８】
前記履歴の情報は、前記画像の表示の情報であり、
前記第２評価部は、前記画像の表示の情報から、前記実施回数および情報量として、各々の前記画像の表示回数および表示時間を算出し、該画像の表示回数および表示時間から各々の前記人物の評価値を算出するものである請求項３〜５のいずれかに記載の画像評価装置。
【請求項９】
前記ユーザ通信端末は、該ユーザ通信端末の位置情報を取得するＧＰＳ機能を有し、
前記履歴の情報は、前記位置情報から計算された人物宅への訪問の情報であり、
前記第２評価部は、前記人物宅への訪問の情報から、前記実施回数および情報量として、前記人物宅への訪問回数および訪問時間を算出し、該人物宅への訪問回数および訪問時間から各々の前記人物の評価値を算出するものである請求項３〜５のいずれかに記載の画像評価装置。
【請求項１０】
前記情報取得部は、さらに、前記ユーザ通信端末の設定の情報を取得するものであり、
前記画像評価部は、前記履歴の情報に加えて、さらに、前記情報取得部により取得されたユーザ通信端末の設定の情報に基づいて、前記画像保存部に保存された各々の画像を評価するものである請求項１〜９のいずれかに記載の画像評価装置。
【請求項１１】
前記ユーザ通信端末の設定の情報は、電子メールの受信拒否の情報、および、電話の着信拒否の情報の少なくとも一方を含む請求項１０に記載の画像評価装置。
【請求項１２】
前記第３評価部は、前記画像保存部に保存された各々の画像に対して複数の画像解析処理を実施し、前記第２評価部により算出された各々の人物の評価値と前記画像保存部に保存された各々の画像に対する画像解析処理の結果とを組み合わせて、前記画像保存部に保存された各々の画像の評価値を算出するものである請求項２〜１１のいずれかに記載の画像評価装置。
【請求項１３】
前記第３評価部は、前記画像解析処理として、各々の画像に撮影された人物の顔領域を検出する顔検出処理、各々の画像に撮影された人物の笑顔を検出する笑顔検出処理、各々の画像に撮影された人物が誰なのかを認識する人物認識処理、類似した画像を判定する類似画像判定処理、各々の画像をイベント毎に分類するイベント分類処理、各々の画像に撮影された文字を認識する文字認識処理の少なくとも２以上を実施するものである請求項１２に記載の画像評価装置。
【請求項１４】
前記第３評価部は、前記画像保存部に保存された各々の画像に対する各々の画像解析処理の結果にスコアを付け、複数の画像解析処理の結果のスコアの総合スコアを算出し、前記第２評価部により算出された各々の人物の評価値と前記総合スコアとを組み合わせて、前記画像保存部に保存された各々の画像の評価値を算出するものである請求項１２または１３に記載の画像評価装置。
【請求項１５】
前記画像評価部は、各々の前記画像の評価値の情報を、各々の画像の画像ファイルに付帯情報として付与するものである請求項１〜１４のいずれかに記載の画像評価装置。
【請求項１６】
さらに、前記画像保存部に保存された画像を使用するアプリケーションを実行するアプリケーション実行部を備え、
前記アプリケーション実行部は、前記画像評価部による各々の画像の評価値に基づいて、該評価値の高い画像を優先的に選択して使用するものである請求項１〜１５のいずれかに記載の画像評価装置。
【請求項１７】
前記アプリケーション実行部は、前記アプリケーションとして、電子フォトアルバムのレイアウトデータを作成する作成サービスを実行するものである請求項１６に記載の画像評価装置。
【請求項１８】
前記ユーザ通信端末と、
該ユーザ通信端末とネットワークを介して接続された請求項１〜１７のいずれかに記載の画像評価装置とを備えることを特徴とする画像評価システム。
【請求項１９】
カメラ機能を有するユーザ通信端末であって、
該ユーザ通信端末の履歴の情報を取得する情報取得部と、
少なくとも前記ユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、
前記情報取得部により取得された履歴の情報に基づいて、前記画像保存部に保存された各々の画像の評価値を算出する画像評価部と、
前記画像保存部に保存された画像を使用するアプリケーションを実行するアプリケーション実行部とを備え、
前記アプリケーション実行部は、前記画像評価部による各々の画像の評価値に基づいて、該評価値の高い画像を優先的に選択して使用するものであることを特徴とするユーザ通信端末。
【請求項２０】
カメラ機能を有するユーザ通信端末とネットワークを介して接続された画像処理サーバであって、
該ユーザ通信端末の履歴の情報を取得する情報取得部と、
少なくとも前記ユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、
前記情報取得部により取得された履歴の情報に基づいて、前記画像保存部に保存された各々の画像の評価値を算出する画像評価部と、
前記画像保存部に保存された画像を使用するアプリケーションを実行するアプリケーション実行部を備え、
前記アプリケーション実行部は、前記画像評価部による各々の画像の評価値に基づいて、該評価値の高い画像を優先的に選択して使用するものであることを特徴とする画像処理サーバ。
【請求項２１】
カメラ機能を有するユーザ通信端末の履歴の情報を取得する情報取得ステップと、
少なくとも前記ユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存ステップと、
前記情報取得ステップにより取得された履歴の情報に基づいて、前記画像保存ステップにより保存された各々の画像の評価値を算出する画像評価ステップとを含むことを特徴とする画像評価方法。
【請求項２２】
請求項２１に記載の画像評価方法の各々のステップをコンピュータに実行させるためのプログラム。
【請求項２３】
請求項２１に記載の画像評価方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザが所有する画像について、ユーザにとっての画像の重要度を評価する画像評価装置、画像評価方法、画像評価システムおよびプログラムに関するものである。
【背景技術】
【０００２】
フォトブックの作成や、ＳＮＳ（ソーシャル・ネットワーキング・サービス）などのＷＥＢ（ウェブ）サービス、あるいは、個人で画像をアーカイブする場合など、画像の重要度を評価したい場合がある。これに対し、従来、例えば、通話履歴から通話相手の人物とユーザ本人との親密度を測定する技術や、画像を解析することにより画像の重要度を判断する技術などが知られている。
【０００３】
例えば、特許文献１には、通信相手を識別し、通信履歴情報に基づいて、通信相手との親密度を判定し、親密度の判定と親密度に対応付けられた画像情報とに基づいて、文書に挿入する画像を決定して文書に挿入し、通信相手へ送信する通信機器が記載されている。
【０００４】
特許文献２には、画像のデータに基づいて画像に含まれる人物の顔を認識し、通信相手先の人物の情報と対応付けて記憶した通信履歴情報に基づいて通信相手先の人物との親密度を判定し、親密度に基づいて認識結果を修正する通信端末が記載されている。
【０００５】
特許文献３には、通信の履歴情報を収集して記憶し、通信相手の通信アドレス情報および通信相手を表す画像情報を登録して、登録された通信相手を表す画像を表示画面上に表示し、各通信相手との通信の履歴情報に基づいて通信相手を表す画像の配置位置を決定する通信端末装置が記載されている。
【０００６】
特許文献４には、特定人物が含まれるコンテンツにおける第２の人物または第３の人物の登場頻度と、特定人物が含まれないコンテンツにおける第２の人物および第３の人物の登場頻度とに基づいて特定人物および第２の人物の関係の深さの度合いを示す関係深度値を算出し、関係深度値に基づいて、特定人物に関する第２の人物の優先順位を決定する画像処理装置が記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１１−４３９３９号公報
【特許文献２】特開２００９−１３５６１６号公報
【特許文献３】特開２００７−１２９６０９号公報
【特許文献４】特開２０１０−１４００６９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかし、特許文献１は、親密度に応じた画像を文書に挿入して通信相手へ送信するだけのもの、特許文献２は、通信相手先の人物との親密度に応じて、画像に含まれる人物の顔の認識結果を修正するもの、特許文献３は、通信の履歴情報に応じて、通信相手を表す画像の配置位置を変更するものであり、いずれも、親密度に応じて画像の重要度を評価するものではない。
【０００９】
一方、特許文献４は、コンテンツに含まれる人物の登場頻度に応じた親密度から、人物の優先順位を決定するものであるが、特許文献１〜３のように履歴情報を利用していないので、実際に親密かどうかは不明である。
【００１０】
本発明の目的は、前記従来技術の問題点を解消し、ユーザが所有する画像について、ユーザにとっての画像の重要度を正確に評価することができる画像評価装置、画像評価方法、画像評価システムおよびプログラムを提供することにある。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、本発明は、カメラ機能を有するユーザ通信端末の履歴の情報を取得する情報取得部と、
少なくともユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、
情報取得部により取得された履歴の情報に基づいて、画像保存部に保存された各々の画像の評価値を算出する画像評価部とを備えることを特徴とする画像評価装置を提供するものである。
【００１２】
ここで、画像評価部は、履歴の情報と履歴の情報に対応する人物とを関連付ける第１評価部と、第１評価部により各々の対応する人物に関連付けられた履歴の情報に基づいて、各々の人物の評価値を算出する第２評価部と、各々の人物と画像保存部に保存された各々の画像との関連付けを行い、第２評価部により算出された各々の人物の評価値に基づいて、画像保存部に保存された各々の画像の評価値を算出する第３評価部とを備えることが好ましい。
【００１３】
また、第２評価部は、履歴の情報から履歴の情報に対応する行為の実施回数および情報量を算出し、実施回数および情報量から各々の人物の評価値を算出するものであることが好ましい。
【００１４】
また、第２評価部は、履歴の情報から、ユーザ通信端末のユーザにより指定された所定期間における実施回数および情報量を算出し、実施回数および情報量から各々の人物の評価値を算出するものであることが好ましい。
【００１５】
また、第２評価部は、履歴の情報から、ユーザにより指定された所定期間を重み付けして全ての期間における実施回数および情報量を算出し、実施回数および情報量から各々の人物の評価値を算出するものであることが好ましい。
【００１６】
また、履歴の情報は、電子メールの送受信の情報であり、
第２評価部は、電子メールの送受信の情報から、実施回数および情報量として、電子メールの送受信の回数およびデータ容量を算出し、電子メールの送受信の回数およびデータ容量から各々の人物の評価値を算出するものであることが好ましい。
【００１７】
また、履歴の情報は、電話の発着信の情報であり、
第２評価部は、電話の発着信の情報から、実施回数および情報量として、電話の発着信の回数および通話時間を算出し、電話の発着信の回数および通話時間から各々の人物の評価値を算出するものであることが好ましい。
【００１８】
また、履歴の情報は、画像の表示の情報であり、
第２評価部は、画像の表示の情報から、実施回数および情報量として、各々の画像の表示回数および表示時間を算出し、画像の表示回数および表示時間から各々の人物の評価値を算出するものであることが好ましい。
【００１９】
また、ユーザ通信端末は、ユーザ通信端末の位置情報を取得するＧＰＳ機能を有し、
履歴の情報は、位置情報から計算された人物宅への訪問の情報であり、
第２評価部は、人物宅への訪問の情報から、実施回数および情報量として、人物宅への訪問回数および訪問時間を算出し、人物宅への訪問回数および訪問時間から各々の人物の評価値を算出するものであることが好ましい。
【００２０】
また、情報取得部は、さらに、ユーザ通信端末の設定の情報を取得するものであり、
画像評価部は、履歴の情報に加えて、さらに、情報取得部により取得されたユーザ通信端末の設定の情報に基づいて、画像保存部に保存された各々の画像を評価するものであることが好ましい。
【００２１】
また、ユーザ通信端末の設定の情報は、電子メールの受信拒否の情報、および、電話の着信拒否の情報の少なくとも一方を含むことが好ましい。
【００２２】
また、第３評価部は、画像保存部に保存された各々の画像に対して複数の画像解析処理を実施し、第２評価部により算出された各々の人物の評価値と画像保存部に保存された各々の画像に対する画像解析処理の結果とを組み合わせて、画像保存部に保存された各々の画像の評価値を算出するものであることが好ましい。
【００２３】
また、第３評価部は、画像解析処理として、各々の画像に撮影された人物の顔領域を検出する顔検出処理、各々の画像に撮影された人物の笑顔を検出する笑顔検出処理、各々の画像に撮影された人物が誰なのかを認識する人物認識処理、類似した画像を判定する類似画像判定処理、各々の画像をイベント毎に分類するイベント分類処理、各々の画像に撮影された文字を認識する文字認識処理の少なくとも２以上を実施するものであることが好ましい。
【００２４】
また、第３評価部は、画像保存部に保存された各々の画像に対する各々の画像解析処理の結果にスコアを付け、複数の画像解析処理の結果のスコアの総合スコアを算出し、第２評価部により算出された各々の人物の評価値と総合スコアとを組み合わせて、画像保存部に保存された各々の画像の評価値を算出するものであることが好ましい。
【００２５】
また、画像評価部は、各々の画像の評価値の情報を、各々の画像の画像ファイルに付帯情報として付与するものであることが好ましい。
【００２６】
さらに、画像保存部に保存された画像を使用するアプリケーションを実行するアプリケーション実行部を備え、
アプリケーション実行部は、画像評価部による各々の画像の評価値に基づいて、評価値の高い画像を優先的に選択して使用するものであることが好ましい。
【００２７】
また、アプリケーション実行部は、アプリケーションとして、電子フォトアルバムのレイアウトデータを作成する作成サービスを実行するものであることが好ましい。
【００２８】
また、本発明は、ユーザ通信端末と、
ユーザ通信端末とネットワークを介して接続された上記のいずれかに記載の画像評価装置とを備えることを特徴とする画像評価システムを提供する。
【００２９】
また、本発明は、カメラ機能を有するユーザ通信端末であって、
ユーザ通信端末の履歴の情報を取得する情報取得部と、
少なくともユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、
情報取得部により取得された履歴の情報に基づいて、画像保存部に保存された各々の画像の評価値を算出する画像評価部と、
画像保存部に保存された画像を使用するアプリケーションを実行するアプリケーション実行部とを備え、
アプリケーション実行部は、画像評価部による各々の画像の評価値に基づいて、評価値の高い画像を優先的に選択して使用するものであることを特徴とするユーザ通信端末を提供する。
【００３０】
また、本発明は、カメラ機能を有するユーザ通信端末とネットワークを介して接続された画像処理サーバであって、
ユーザ通信端末の履歴の情報を取得する情報取得部と、
少なくともユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存部と、
情報取得部により取得された履歴の情報に基づいて、画像保存部に保存された各々の画像の評価値を算出する画像評価部と、
画像保存部に保存された画像を使用するアプリケーションを実行するアプリケーション実行部を備え、
アプリケーション実行部は、画像評価部による各々の画像の評価値に基づいて、評価値の高い画像を優先的に選択して使用するものであることを特徴とする画像処理サーバを提供する。
【００３１】
また、本発明は、カメラ機能を有するユーザ通信端末の履歴の情報を取得する情報取得ステップと、
少なくともユーザ通信端末のカメラ機能により撮影された画像を保存する画像保存ステップと、
情報取得ステップにより取得された履歴の情報に基づいて、画像保存ステップにより保存された各々の画像の評価値を算出する画像評価ステップとを含むことを特徴とする画像評価方法を提供する。
【００３２】
また、本発明は、上記に記載の画像評価方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。
【００３３】
また、本発明は、上記に記載の画像評価方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【発明の効果】
【００３４】
本発明によれば、ユーザ通信端末の履歴や設定等の情報を利用して、画像保存部に保存された画像の評価値を算出するため、ユーザが所有する画像の重要度を正確に評価することができる。
【図面の簡単な説明】
【００３５】
【図１】本発明の画像評価システムの構成を表す一実施形態の概念図である。
【図２】図１に示す画像処理サーバの構成を表すブロック図である。
【図３】図１および図２に示す画像処理サーバの動作を表すフローチャートである。
【図４】ＰＣにおいて、電子フォトアルバムのレイアウトデータの編集画面を表す一例の概念図である。
【発明を実施するための形態】
【００３６】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像評価装置、画像評価方法、画像評価システムおよびプログラムを詳細に説明する。
【００３７】
図１は、本発明の画像評価システムの構成を表す一実施形態の概念図である。同図に示す画像評価システム１０は、インターネット等のネットワーク１８を介してアップロードされた、ユーザが所有する画像（以下、ユーザ画像ともいう）について、ユーザにとっての画像の重要度を評価するものであり、ユーザ通信端末１２と、画像処理サーバ（画像評価装置）１４と、ＰＣ（パーソナルコンピュータ）１６とによって構成されている。
【００３８】
ユーザ通信端末１２は、画像評価システム１０を利用するユーザが使用するものであり、携帯電話やスマートフォンなどのモバイル端末である。ユーザ通信端末１２は、カメラやＧＰＳ（全地球測位システム）の機能の他、ユーザ通信端末１２の履歴や設定等の情報、ユーザがカメラ機能などにより撮影した画像を、ネットワーク１８を介して画像処理サーバ１４にアップロードしたり、ダウンロードする通信機能等を備えている。
【００３９】
ここで、ユーザ通信端末１２の履歴の情報には、電子メールの送受信の履歴、電話の発着信の履歴、画像の閲覧履歴、ＧＰＳ機能などによる行動（ユーザ通信端末１２のＧＰＳ機能により取得された位置情報）の履歴、アプリケーションの利用履歴等の情報が含まれる。また、ユーザ通信端末１２の設定の情報には、電話の着信拒否、電子メールの受信拒否等の設定の情報が含まれる。
【００４０】
ユーザ通信端末１２の履歴や設定等の情報は、ユーザ通信端末１２内のメモリに保持されている。ユーザ通信端末１２は、履歴や設定等の情報を、例えば、ログ情報の形式で画像処理サーバ１４にアップロードする。なお、アップロードする場合には、ログ情報を暗号化することが好ましい。
【００４１】
続いて、画像処理サーバ１４は、ユーザ通信端末１２からアップロードされたユーザ通信端末１２の履歴や設定等の情報に基づいて、同じくアップロードされた各々のユーザ画像の重要度を評価し、その評価値に基づいて、重要度の高い画像を優先的に選択してアプリケーションで使用するものであり、図２に示すように、情報取得部２０と、画像保存部２２と、画像評価部２４と、アプリケーション実行部２６とを備えている。
【００４２】
情報取得部２０は、ユーザ通信端末１２からネットワーク１８を介してアップロードされたユーザ通信端末１２の履歴や設定等の情報を取得するものである。
【００４３】
画像保存部２２は、ユーザ通信端末１２からネットワーク１８を介してアップロードされたユーザ画像（つまり、デジタルの画像データ）を保存するものである。画像保存部２２は、ユーザがユーザ通信端末１２のカメラ機能により撮影した画像だけでなく、例えば、ユーザがデジタルカメラ等により撮影した画像など、ユーザが所有するあらゆる画像を保存することができる。
【００４４】
画像評価部２４は、情報取得部２０により取得されたユーザ通信端末１２の履歴や設定等の情報に基づいて、画像保存部２２に保存された各々のユーザ画像の重要度（画像の所有者であるユーザにとっての重要度）を評価し、その評価値を算出するものである。
【００４５】
アプリケーション実行部２６は、画像保存部２２に保存されたユーザ画像を使用するアプリケーションを実行するものであり、画像評価部２４による各々の画像の評価値に基づいて、その評価値、すなわち、重要度の高い画像を優先的に選択して使用する。
【００４６】
アプリケーション実行部２６が実行するアプリケーションには、重要度の高いユーザ画像を優先的に配置してそのレイアウトデータを作成する電子フォトアルバムやフォトブックの作成サービスや、ユーザ画像をネットワーク１６上のストレージに保管し、重要度の高いユーザ画像の保管期間を長くしたり、不要なユーザ画像を削除するストレージサービス、重要度の高いユーザ画像を最初（先頭）に表示したり、大きく表示するビューワソフト等がある。
【００４７】
また、アプリケーション実行部２６が実行するアプリケーションにより、各々の画像の重要度（評価値）に基づいて、各々の画像の公開、非公開の制御や、サーバへの画像のアップロードの制御などを自動で行わせることもできる。例えば、ユーザ通信端末１２で動作するビューワソフトにより、重要度が高い画像のみを表示したり、ネットワークを介して他のユーザに画像を公開（他のユーザと共有）するために、重要度が高い画像を、画像を公開するためのサーバへアップロードするように制御することができる。
【００４８】
本実施形態の場合、アプリケーション実行部２６は、アプリケーションとして、電子フォトアルバムのレイアウトデータを作成する作成サービスを実行する。
【００４９】
ＰＣ１６は、画像保存部２２に保存されたユーザ画像や、アプリケーション実行部２６で実行されたアプリケーションによる処理後の画像の閲覧、編集等を行うものであり、画像処理サーバ１４からＰＣ１６へ画像をダウンロードしたり、ＰＣ１６から画像処理サーバ１４へ編集後の画像をアップロードする通信機能や、画像の閲覧機能、画像の編集機能等を備えている。
【００５０】
本実施形態の場合、ＰＣ１６は、アプリケーション実行部２６で実行された電子フォトアルバムの作成サービスにより作成された電子アルバムのレイアウトデータをダウンロードして閲覧、編集するために使用される。
【００５１】
次に、図３に示すフローチャートを参照しながら、画像評価システム１０の動作について、本発明の画像評価方法に従って説明する。
【００５２】
画像評価システム１０では、ユーザ通信端末１２の履歴や設定等の情報、ユーザが所有する画像等が、ユーザ通信端末１２からネットワーク１８を介して画像処理サーバ１４にアップロードされる。
画像処理サーバ１４では、ユーザ通信端末１２からアップロードされたユーザ通信端末１２の履歴や設定等の情報が情報取得部２０により取得され、同じくアップロードされたユーザ画像が画像保存部２２に保存される（ステップＳ１）。
【００５３】
ここで、ユーザ画像の重要度の評価において、ユーザにとって最も重要なものは電子メールの送受信の履歴であり、その次が電話の発着信の履歴である。ユーザ通信端末１２の履歴の情報には、履歴の情報に対応する行為の実施回数、情報量（電子メールのデータ容量、電話の通話時間等）、実施時期などの情報が含まれるが、ユーザにとって最も重要なものは実施回数である。従って、少なくとも電子メールの送受信の実施回数が相手の人物（例えば、友人）ごとに分かれば、各々のユーザ画像の重要度を評価することができる。
【００５４】
続いて、画像評価部２４により、情報取得部２０により取得されたユーザ通信端末１２の履歴や設定等の情報に基づいて、画像保存部２２に保存された各々のユーザ画像の重要度の評価が行われ、その評価値が算出される（ステップＳ２）。
【００５５】
画像評価部２４では、まず、第１評価部により、ユーザ通信端末１２の履歴や設定等の情報と、履歴や設定の情報に対応する人物との関連付けが行われる（ステップＳ２Ａ）。
ユーザ通信端末１２の履歴や設定等の情報は、ユーザ通信端末１２の中に保存されている電話帳やメールアドレス帳から抽出した人物と関連付けることができる。例えば、電話帳には電話番号と人物、メールアドレス帳にはメールアドレスと人物とが関連付けられている。従って、電子メールの履歴は、メールアドレスをもとに人物との関連付けが可能であり、電話の履歴は、電話番号をもとに人物との関連付けができる。
【００５６】
続いて、画像評価部２４では、第２評価部により、各々の対応する人物に関連付けられた履歴や設定等の情報に基づいて、各々の人物の重要度が評価され、その評価値が計算される（ステップＳ２Ｂ）。
【００５７】
画像評価部２４では、まず、各々の対応する人物に関連付けられた履歴および設定等の情報に基づいて、評価すべき履歴や設定、例えば、電子メールの送受信などの実施回数とその情報量が人物ごとに算出される。
【００５８】
このとき、過去全ての履歴の情報を使用してもよいし、例えば、直近の限定された期間（１ヶ月以内、１年以内など）の履歴の情報だけを使用して人物を評価してもよい。また、限定された期間は、アプリケーション実行部２６で実行されるアプリケーションとの関係に応じて決定してもよい。例えば、半年前の旅行に関する電子フォトアルバムを作成する場合には、半年前の前後１週間の履歴の情報に限定して評価を行う。あるいは、過去全ての履歴の情報を使用して、半年前の前後１週間の期間だけ重みを増やしてもよい。
【００５９】
特定のアプリケーションに依存しない場合の各々の人物の評価値は下記式（１）により算出される。
評価値＝Σ（Ｗ＿ｉ＊ｆ＿ｉ（ｘ、ｙ））  …  （１）
ここで、ｆ＿ｉ（ｘ、ｙ）は、評価すべき履歴を表す関数であり、ｘ、ｙは、それぞれ実施回数とその情報量を表す。すなわち、ｆ＿ｉ（ｘ、ｙ）は、実施回数とその情報量から計算される各々の履歴の評価値を表す。
Ｗ＿ｉは、各々の履歴にかけるべき重み（重み係数）であり、各々の履歴について、ｆ＿ｉ（ｘ、ｙ）とＷ＿ｉの積の総和が人物毎の重要度の評価値となる。
【００６０】
また、ｆ＿ｉ（ｘ、ｙ）は、情報量に関連付けられたスコアを実施回数分加算して求めるのが望ましく、下記式（２）で表される。
ｆ＿ｉ（ｘ、ｙ）＝ｇ（ｙ＿１）＋ｇ（ｙ＿２）＋  …  ＋ｇ（ｙ＿ｘ）  …  （２）
ここで、ｇ（ｙ＿ｊ）（ｊは、１≦ｊ≦ｘ）は、各々の実施時の情報量に関連付けられたスコアを表す。情報量とそのスコアとの関連づけは、例えば、関数もしくはテーブルを用いて行うことができる。
【００６１】
このような履歴の情報としては、前述の通り、電子メールの送受信の履歴、電話の発着信の履歴、画像の閲覧履歴、アプリケーションの利用履歴などが該当する。他にも、ＧＰＳ機能により得られた位置情報のうち、実施回数とその情報量で表現されるものが含まれる。例えば、ＧＰＳ機能により得られた位置情報から、あらかじめ設定された人物宅、例えば、友人宅への訪問回数とその滞在時間などが計算可能であり、このような履歴の情報を用いることもできる。
【００６２】
なお、最もシンプルに評価する場合には、情報量に関連付けられたスコアを固定値とする、つまり、実施回数だけをもとに各々の人物を評価してもよい。
また、各々の履歴について、固定値と、情報量に応じて加算される従量値とを組み合わせることにより、友人と頻繁に電話をするタイプのユーザなのか、長電話するタイプのユーザなのかなど、ユーザに応じて細かい設定を行うことが可能である。
【００６３】
以下、電子メールの送受信の履歴と電話の発着信の履歴の情報を用いた具体的な評価値の計算例を示す。
【００６４】
本具体例では、Ａさんに対して、電子メールの送信を５回、受信を５回、電話の発信による通話を１回、３分２０秒間し、Ｂさんからは要件を伝えるだけの３０秒程度の電話の着信による通話が２回かかってきたとする。なお、Ａさんへの電子メールの送信時のデータ容量はいずれも４ＫＢ未満であり、Ａさんからの電子メールの受信時のデータ容量は、画像も添付された４０ＫＢ程度であったとする。
【００６５】
ユーザ通信端末１２の履歴の情報毎の重み（重み係数）は下記表１の通りである。
【００６６】
【表１】
2013200715.tif 000003
【００６７】
また、各々の履歴の情報量（電子メールのデータ容量および電話の通話時間）とスコアとの関係は下記表２の通りである。本具体例では、固定値と、情報量に応じて加算される従量値を用いて、各々の履歴の情報量に対するスコア付けが行われる。
【００６８】
【表２】
2013200715.tif 000004
【００６９】
それぞれ下記式により、Ａさんの評価値Ａは１１３５点、Ｂさんの評価値Ｂは２００点であると計算することができる。
評価値Ａ＝（１＊（１００＋１００＋１００＋１００＋１００））＋（０．５＊（（１００＋５０）＋（１００＋５０）＋（１００＋５０）＋（１００＋５０）＋（１００＋５０）））＋（２＊（１００＋３０））＝１１３５
評価値Ｂ＝１＊（１００＋１００）＝２００
【００７０】
なお、画像評価部２４が、ユーザ通信端末１２の設定の情報を利用する場合には、電子メールの受信拒否の情報や電話の着信拒否の情報に応じて、拒否された人物の評価値を下げるように調整するのが望ましい。
【００７１】
一方、特定のアプリケーションに依存して評価値の計算を行う場合には、例えば、１ヶ月前の旅行に関する電子フォトアルバムを作成する場合には、前述のように、１ヶ月前の前後の所定の期間の履歴の情報のみをもとに評価値を計算してもよいし、あるいは、全ての期間の履歴の情報を使用して、１ヶ月前の前後の所定の期間の履歴の情報に関する評価値に重みを加えてもよい。
【００７２】
画像評価部２４では、最後に、第３評価部により、各々の人物とユーザ画像との関連付けが行われる（ステップＳ２Ｃ）。これにより、各々の人物の評価値に基づいて、各々のユーザ画像の重要度を評価し、その評価値を算出することができる。例えば、同じ人物が撮影された画像に対して一律に同じ評価値、例えば、人物の評価値と同じ評価値をつけるなど、各々のユーザ画像の評価値を算出することができる。
【００７３】
このように、ユーザ通信端末１２の履歴や設定等の情報を利用して、画像保存部２２に保存されたユーザ画像の評価値を算出するため、ユーザが所有する画像の重要度を正確に評価することができる。
【００７４】
ユーザが所有する画像と人物とを関連付ける方法はいくつか考えられるが、例えば、各々の画像と基準画像とを比較し、各々の画像に撮影された人物が誰なのかを認識する人物認識処理を行うことにより、画像と人物とを関連付けることが好ましい。
【００７５】
このとき、ユーザ通信端末１２の電話帳に関連付けられた人物の顔写真が添付されている場合には、電話帳に関連付けられた人物の顔写真を使って各々の画像に撮影された人物の人物認識処理を行ってもよいし、ユーザが所有する画像の中からユーザにより指定された数枚の画像を使って人物認識処理を行ってもよい。また、人物認識処理によらず、ユーザが人物と各々の画像との関連付けを指定してもよい。さらに、ユーザが人物と各々の画像との関連付けを行う場合であっても、全ての画像の関連付けを行う必要はなく、数枚の画像の関連付けを行うことにより、ユーザによる関連付けの指示に従って、残りの画像は、人物認識処理により自動で関連付けを行うことができる。
【００７６】
いずれの場合も、操作端末（ユーザ通信端末１２、ＰＣ１６）側から評価値の高い人物の名前の候補を提示したり、あるいは、各々の画像に撮影された人物の顔領域を検出する顔検出処理を行って、人物が誰であるかは不明であるとしても顔が撮影された画像を提示するなどすることにより、ユーザの作業効率を高めることができ、ユーザの利便性を向上させることができる。
【００７７】
なお、人物認識処理や顔検出処理は公知の画像処理であり、本発明においても各種の人物認識処理や顔検出処理を利用することができる。
【００７８】
また、第３評価部において、各々のユーザ画像に対して複数の画像解析処理を実施し、人物の評価値と各々のユーザ画像に対する画像解析処理の結果とを組み合わせて、各々のユーザ画像の評価値を算出してもよい。
【００７９】
例えば、各々の画像に対する各々の画像解析処理の結果にスコアを付け、複数の画像解析処理の結果のスコアの総合スコアを算出し、人物の評価値と総合スコアとを組み合わせてもよい。
また、画像解析処理として、顔検出処理、各々の画像に撮影された人物の笑顔を検出する笑顔検出処理、人物認識処理、類似した画像を判定する類似画像判定処理、各々の画像の撮影日時に基づいて、画像をイベント毎に分類するイベント分類処理、各々の画像に撮影された文字を認識する文字認識処理等の少なくとも２以上を実施し、これらの画像解析処理の結果と人物の評価値とを組み合わせてもよい。
【００８０】
また、履歴や設定等の情報、各々のユーザ画像の評価値の情報などを、画像の付帯情報（タグ情報）として、各々の画像の画像データのヘッダ部（例えば、Ｅｘｉｆ情報）や画像データそのものに電子透かしで埋め込むなど、画像ファイルに付与してもよい。これにより、アプリケーション実行部２６は、アプリケーションの実行時に、各々の画像の付帯情報を利用して画像の評価値、すなわち、画像の重要度等の情報を取得することができ、重要度の高い画像を優先的に選択して、電子フォトアルバム等を作成することができる。
【００８１】
続いて、アプリケーション実行部２６により、画像保存部２２に保存されたユーザ画像を使用するアプリケーション、本実施形態の場合、電子フォトアルバムの作成サービスが実行され、各々のユーザ画像の評価値に基づいて、重要度の高い画像が優先的に選択されて使用される（ステップＳ３）。例えば、画像保存部２２に保存されたユーザ画像から選択された複数の画像の中から、重要度の比較的高い画像が大きく表示されるように電子フォトアルバムのレイアウトデータが作成される。
【００８２】
以下、電子フォトアルバムのレイアウトデータの作成および編集について説明する。
【００８３】
図４は、ＰＣにおいて、電子フォトアルバムのレイアウトデータの編集画面を表す一例の概念図である。同図に示す編集画面２８は、ページ指定エリア３０と、テンプレート指定エリア３２と、候補画像表示エリア３４と、画像編集エリア３６とを含む。
【００８４】
ページ指定エリア３０は、ユーザによりマウス等の入力手段を介して指定（選択）される、編集対象のページ３８の一覧が縮小表示された領域であり、編集画面２８の右側上部の領域に設けられている。編集画面２８上には所定数のページ３８だけしか縮小表示されないが、スクロールバーにより、編集画面２８上に表示される所定数のページ３８の範囲を変えることができる。他のエリアについても同様である。
【００８５】
テンプレート指定エリア３２は、ユーザにより指定（選択）される、編集対象のページで使用されるテンプレート４０の一覧が縮小表示される領域であり、編集画面２８の左側上半分の領域に設けられている。
【００８６】
候補画像表示エリア３４は、ユーザにより指定（選択）される、画像配置の編集作業で使用される候補画像４２の一覧が縮小表示される領域であり、編集画面２８の左側下半分の領域に設けられている。候補画像４２は、選択された複数の画像のうち、編集対象のページには配置されていない画像であり、ユーザは、候補画像４２を用いて、画像の追加、入れ替え等の編集作業を簡単に行うことができる。
【００８７】
画像編集エリア３６は、ユーザによりページ指定エリア３０で指定された編集対象のページ、つまり、そのページに配置された画像４４が表示される領域であり、編集画面２８の右側の領域に設けられている。
【００８８】
アプリケーション実行部２６は、各々のユーザ画像の評価値に基づいて、画像保存部２２に保存されたユーザ画像の中から、重要度が高い画像を優先的に選択し、電子フォトアルバムのページに配置（自動レイアウト）する。図４に示す例では、選択された複数の画像のうちの７枚の画像が、見開きの２ページに配置され、７枚の画像の中で最も重要度が高い画像が、他の６枚の画像よりも大きいサイズで中央に配置されている。
【００８９】
このように、電子フォトアルバムのレイアウトデータを作成する場合、各々のユーザ画像の評価値に基づいて、重要度が高い画像を優先的に選択して配置して、電子フォトアルバムのレイアウトデータを作成することができる。
【００９０】
一度、アプリケーション実行部２６により作成された電子フォトアルバムのレイアウトデータは、画像処理サーバ１４からＰＣ１６へダウンロードし、ＰＣ１６において閲覧、編集が可能である。
【００９１】
ＰＣ１６において、ユーザは、ページの編集画面２８上のページ指定エリア３０に縮小表示されたページ３８の一覧の中から、マウス等の入力手段を用いて所望のページ３８をクリックすることにより、所望のページ３８を指定することができる。ユーザが、ページ３８の一覧の中から所望のページ３８を指定すると、指定されたページ３８が、編集対象のページとして、画像編集エリア３６に表示される。
【００９２】
そして、ユーザは、各々のユーザ画像の評価値に基づいて選択された画像が電子フォトアルバムの指定したページに自動レイアウトされた後、マウス等を介して指示を入力することにより、各々のページにおける画像の配置を編集することができる。
【００９３】
また、ＰＣ１６において、レイアウトデータから電子書籍を作成し、再びユーザ通信端末１２へダウンロードして閲覧したり、図示しないラボサーバ経由でレイアウトデータからフォトブックを作成することも可能である。
【００９４】
なお、図１の例では、ユーザ通信端末１２およびＰＣ１６を１つずつ代表的に示したが、画像評価システム１０には、各々のユーザが使用するユーザ通信端末１２およびＰＣ１６が備えられていてもよい。
【００９５】
上記の例では、説明の便宜上、ユーザ通信端末１２と、画像処理サーバ１４と、ＰＣ１６とを分けて別々に表現したが、機能的には、これら複数の機能がどこか１箇所に集約されていてもよいし、分散されて実装されていてもよい。つまり、画像評価装置の機能は、ユーザ通信端末１２に実装されていてもよいし、あるいは、画像処理サーバ１４に実装されていてもよいし、あるいは、ユーザ通信端末１２や画像処理サーバ１４以外の他の装置、サーバ等に備えられていてもよい。
【００９６】
例えば、画像処理サーバ１４（つまり、画像評価装置）の全ての機能をユーザ通信端末１２に実装した場合、ユーザ画像はユーザ通信端末１２内に保存され、各々のユーザ画像の重要度の評価も、電子フォトアルバムのレイアウトデータの作成もユーザ通信端末１２内で行われる。このように、画像処理サーバ１４の機能をユーザ通信端末１２に実装すれば、画像評価システム１０を低コストで実現することができる。
【００９７】
ＰＣ１６は、画像評価システム１０に必須の構成要素ではなく、ＰＣ１６の機能が必要な場合、ＰＣ１６の代わりに、ユーザ通信端末１２として、電話の機能に加えてＰＣ１６と同等の機能を備えるスマートフォンを使用することもできる。この場合、画像の閲覧、編集をユーザ通信端末１２上で行うことができる。また、画像処理サーバ１４およびＰＣ１６の機能をユーザ通信端末１２に実装すれば、ネットワーク１８も不要である。
【００９８】
一方、図１，２に示す実施形態のように、ユーザ通信端末１２と画像処理サーバ１４とを分けて別々に実装し、ユーザ通信端末１２の履歴や設定等の情報、ユーザ画像を画像処理サーバ１４にアップロードすることにより、ユーザ通信端末１２よりも処理能力の大きい画像処理サーバ１４により、各々のユーザ画像の重要度の評価や、アプリケーションの実行を高速に行うことができる。
【００９９】
また、ＰＣ１６において、画像処理サーバ１４の機能、すなわち、各々のユーザ画像の重要度の評価や、アプリケーションの実行の少なくとも１つを実行させることも可能である。
【０１００】
本発明の画像評価方法は、例えば、画像評価方法の各々のステップをコンピュータに実行させるためのプログラムにより実施することが可能である。このプログラムは、例えば、コンピュータ読み取り可能な記録媒体に記録して提供することができる。
【０１０１】
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０１０２】
１０  画像評価システム
１２  ユーザ通信端末
１４  画像処理サーバ
１６  ＰＣ（パーソナルコンピュータ）
１８  ネットワーク
２０  情報取得部
２２  画像保存部
２４  画像評価部
２６  アプリケーション実行部
２８  編集画面
３０  ページ指定エリア
３２  テンプレート指定エリア
３４  候補画像表示エリア
３６  画像編集エリア
３８  ページ
４０  テンプレート
４２  候補画像
４４  画像
【図１】
2013200715.tif 000005
【図２】
2013200715.tif 000006
【図３】
2013200715.tif 000007
【図４】
2013200715.tif 000008