(57)【特許請求の範囲】
【請求項１】
複数のユーザの端末装置からネットワークを介して複数の画像を取得する画像取得部と、
前記複数の画像の各々の内容を解析する画像解析部と、
前記各々の画像の解析結果に基づいて、前記複数の画像に関連する関連情報を、前記ネットワークを介して、前記複数のユーザのうちの少なくとも一人の第１ユーザの端末装置に対してリクエストするリクエスト部とを備え、
前記リクエスト部は、前記複数の画像のうちの少なくとも１つの画像および前記関連情報を用いて作成される合成画像において使用する素材が不足する場合に、前記合成画像の作成に必要となる素材および情報を前記関連情報としてリクエストし、
前記関連情報は、画像に対するコメント、画像に写っている人物の情報、画像の所有者の情報、どの画像に対するコメントなのかの情報、誰からのコメントなのかの情報、誰へのコメントなのかの情報の少なくとも１つを含む、画像処理装置。
【請求項２】
さらに、前記複数のユーザのうちの少なくとも一人の第１ユーザの端末装置から前記ネットワークを介して前記関連情報を取得する関連情報取得部を備える請求項１に記載の画像処理装置。
【請求項３】
さらに、前記複数の画像のうちの少なくとも１つの画像および前記関連情報を用いて合成画像を作成する合成画像作成部を備える請求項２に記載の画像処理装置。
【請求項４】
さらに、前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物の数を算出する人物数算出部と、
前記複数の画像のうち、閾値以上の数の人物が写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記リクエスト対象画像の関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項５】
さらに、前記複数のユーザのうち、前記画像取得部が前記リクエスト対象画像を取得した端末装置のユーザをリクエスト対象ユーザとして特定する対象ユーザ特定部を備え、
前記リクエスト部は、前記リクエスト対象ユーザの端末装置に対して、前記リクエスト対象画像の関連情報をリクエストする請求項４に記載の画像処理装置。
【請求項６】
前記リクエスト部は、前記関連情報として、前記リクエスト対象画像に写っているイベント、前記リクエスト対象画像の撮影日時、および、前記リクエスト対象画像の撮影場所のうちの少なくとも１つの情報をリクエストする請求項４または５に記載の画像処理装置。
【請求項７】
さらに、前記複数のユーザの顔画像あるいは顔特徴量データを記憶する顔データ記憶部と、
前記複数のユーザの顔画像あるいは顔特徴量データに基づいて、前記複数のユーザのうち、前記各々の画像に写っているユーザをリクエスト対象ユーザとして特定する対象ユーザ特定部と、
前記複数の画像のうち、前記リクエスト対象ユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記リクエスト対象ユーザの端末装置に対して、前記リクエスト対象画像の関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項８】
さらに、前記複数の画像の中から、前記合成画像において使用する複数の合成対象画像を抽出する画像抽出部と、
前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物の数を算出する人物数算出部と、
前記複数の画像のうち、前記複数の合成対象画像における登場回数または登場比率が閾値未満であるユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記複数のユーザのうちの少なくとも一人の第２ユーザの端末装置に対して、前記リクエスト対象画像を前記合成画像において使用することをリクエストする請求項３に記載の画像処理装置。
【請求項９】
さらに、前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物の数を算出する人物数算出部と、
前記複数の画像のうち、前記複数の画像における登場回数または登場比率が閾値未満であるユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記複数のユーザのうちの少なくとも一人の第２ユーザの端末装置に対して、前記リクエスト対象画像を前記合成画像において使用することをリクエストする請求項３に記載の画像処理装置。
【請求項１０】
さらに、前記各々の画像の解析結果に基づいて、前記各々の画像の解析評価値を算出する評価値算出部と、
前記複数の画像のうち、前記解析評価値が閾値以上である画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記リクエスト対象画像の関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１１】
前記画像解析部は、前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物の笑顔度、および、前記複数の画像に写っている全ての人物の笑顔度の平均値を算出し、
さらに、前記複数の画像のうち、前記笑顔度が前記笑顔度の平均値よりも高いユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部を備え、
前記リクエスト部は、前記リクエスト対象画像の関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１２】
さらに、前記複数のユーザの各々の端末装置から、前記ネットワークを介して、前記複数のユーザの各々によって付与された前記各々の画像に対する高評価または低評価を表す評価情報を取得する評価情報取得部と、
前記各々の画像に対して前記高評価を表す評価情報が付与された数を算出する評価数算出部と、
前記複数の画像のうち、前記高評価を表す評価情報が付与された数が閾値以上である画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記リクエスト対象画像の関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１３】
さらに、前記複数のユーザの端末装置から、前記ネットワークを介して、前記各々の画像が前記複数のユーザの各々の端末装置の画像表示部に表示されたことを表す表示情報を取得する表示情報取得部と、
前記表示情報に基づいて、前記各々の画像が前記各々のユーザの端末装置の画像表示部に表示された回数を算出する表示回数算出部と、
前記複数の画像のうち、前記各々のユーザの端末装置の画像表示部に表示された画像の回数が閾値以上である画像をリクエスト対象画像として特定する対象画像特定部とを備え、
前記リクエスト部は、前記リクエスト対象画像の関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１４】
さらに、前記各々の画像の撮影日時に基づいて、前記複数の画像の中に含まれていない画像の撮影時間帯を特定する撮影時間帯特定部を備え、
前記リクエスト部は、前記関連情報として、前記複数の画像の中に含まれていない画像の撮影時間帯に撮影された画像をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１５】
さらに、前記複数の画像のうち、前記複数のユーザのうちの少なくとも一人の第２ユーザの端末装置によって指定された画像をリクエスト対象画像として特定する対象画像特定部を備え、
前記リクエスト部は、前記複数のユーザのうちの少なくとも一人の第２ユーザの端末装置に対して、前記リクエスト対象画像の関連情報をリクエストする請求項３に記載の画像処理装置。
【請求項１６】
さらに、前記複数のユーザの顔画像あるいは顔特徴量データを記憶する顔データ記憶部と、
前記複数のユーザの顔画像あるいは顔特徴量データに基づいて、前記複数のユーザのうち、前記複数の画像に写っていないユーザをリクエスト対象ユーザとして特定する対象ユーザ特定部とを備え、
前記リクエスト部は、前記関連情報として、前記リクエスト対象ユーザが写っている画像をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１７】
前記画像解析部は、前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物の目線を検出し、前記人物の目線が、前記複数のユーザのうち、前記各々の画像を閲覧したユーザの目線と合うか否かに基づいて、前記各々の画像に写っている人物が前記複数のユーザに含まれている人物なのか否かを検出し、
さらに、前記複数の画像に写っている人物のうち、前記複数のユーザに含まれている人物をリクエスト対象ユーザとして特定する対象ユーザ特定部を備え、
前記リクエスト部は、前記リクエスト対象ユーザの端末装置に対して前記関連情報をリクエストする請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項１８】
さらに、前記複数のユーザの端末装置から、前記ネットワークを介して、前記合成画像の寄せ書きページにおいて使用する前記ユーザの寄せ書きメッセージを取得するメッセージ取得部と、
前記複数の画像および前記寄せ書きメッセージを取得する期間を設定する日程設定部と、
前記複数の画像および前記寄せ書きメッセージを取得する期間が経過した後に、前記画像取得部によって取得された画像の数を算出する画像数算出部と、
前記複数の画像および前記寄せ書きメッセージを取得する期間が経過した後に、前記メッセージ取得部によって取得された寄せ書きメッセージの数を算出するメッセージ数算出部とを備え、
前記リクエスト部は、前記複数の画像の数が第１閾値未満である場合に、前記関連情報として、前記複数の画像に関連する画像をリクエストし、前記寄せ書きメッセージの数が第２閾値未満である場合に、前記関連情報として、前記複数の画像に関連する寄せ書きメッセージをリクエストする請求項３に記載の画像処理装置。
【請求項１９】
さらに、前記寄せ書きメッセージを用いて前記寄せ書きページを作成する寄せ書き作成部を備える請求項１８に記載の画像処理装置。
【請求項２０】
前記リクエスト部は、前記関連情報として、前記複数の画像に関連する画像および前記寄せ書きページにおいて使用する寄せ書きメッセージのうちの少なくとも一方をリクエストする請求項１８または１９に記載の画像処理装置。
【請求項２１】
画像取得部が、複数のユーザの端末装置からネットワークを介して複数の画像を取得するステップと、
画像解析部が、前記複数の画像の各々の内容を解析するステップと、
リクエスト部が、前記各々の画像の解析結果に基づいて、前記複数の画像に関連する関連情報を、前記ネットワークを介して、前記複数のユーザのうちの少なくとも一人の第１ユーザの端末装置に対してリクエストするステップとを含み、
前記リクエストするステップは、前記複数の画像のうちの少なくとも１つの画像および前記関連情報を用いて作成される合成画像において使用する素材が不足する場合に、前記合成画像の作成に必要となる素材および情報を前記関連情報としてリクエストし、
前記関連情報は、画像に対するコメント、画像に写っている人物の情報、画像の所有者の情報、どの画像に対するコメントなのかの情報、誰からのコメントなのかの情報、誰へのコメントなのかの情報の少なくとも１つを含む、画像処理方法。
【請求項２２】
さらに、関連情報取得部が、前記複数のユーザのうちの少なくとも一人の第１ユーザの端末装置から前記ネットワークを介して前記関連情報を取得するステップを含む請求項２１に記載の画像処理方法。
【請求項２３】
さらに、合成画像作成部が、前記複数の画像のうちの少なくとも１つの画像および前記関連情報を用いて合成画像を作成するステップを含む請求項２２に記載の画像処理方法。
【請求項２４】
請求項２１ないし２３のいずれか一項に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラム。
【請求項２５】
請求項２１ないし２３のいずれか一項に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のユーザの端末装置からネットワークを介して取得された複数の画像を用いて、フォトブック等の合成画像を作成する画像処理装置、画像処理方法、プログラムおよび記録媒体に関する。
【背景技術】
【０００２】
フォトブックは、ユーザが所有する複数の画像（画像データ）を、インターネットを経由してサービス提供業者に送信し、送信した複数の画像を用いてユーザが希望するレイアウトの写真集を作成するサービスである。
【０００３】
フォトブックは、例えば、画像の連続性や関連性を考慮して、撮影時刻等に基づいて複数の画像を複数のグループに分類し、各々のグループに含まれる画像を各々対応するページに自動配置（自動レイアウト）することによって作成される。
【０００４】
近年では、一人のユーザが所有する複数の画像だけを用いてフォトブックを作成するだけでなく、複数のユーザが所有する複数の画像を用いて１つのフォトブックを作成するもの（特許文献１および２参照）、および、複数のユーザから寄せ書き用のメッセージを取得し、複数のユーザから取得した寄せ書きメッセージを用いて寄せ書きを作成するもの（特許文献３および４参照）等が知られている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−２５７３０８号公報
【特許文献２】特開２０１５−０６９４３１号公報
【特許文献３】特開２００１−２９７０５１号公報
【特許文献４】特開２０１５−１３３０００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、特許文献１〜４では、フォトブックにおいて使用する画像および寄せ書きにおいて使用する寄せ書きメッセー等の素材が不足する場合に、フォトブックおよび寄せ書きを作成することが難しいという問題点があった。
【０００７】
本発明の目的は、合成画像において使用する素材が不足する場合に、不足する素材を複数のユーザの端末装置から取得するのをアシストすることができる画像処理装置、画像処理方法、プログラムおよび記録媒体を提供することにある。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明は、複数のユーザの端末装置からネットワークを介して複数の画像を取得する画像取得部と、
複数の画像の各々の内容を解析する画像解析部と、
各々の画像の解析結果に基づいて、複数の画像に関連する関連情報を、ネットワークを介して、複数のユーザのうちの少なくとも一人の第１ユーザの端末装置に対してリクエストするリクエスト部とを備え、
リクエスト部は、複数の画像のうちの少なくとも１つの画像および関連情報を用いて作成される合成画像において使用する素材が不足する場合に、合成画像の作成に必要となる素材および情報を関連情報としてリクエストし、
関連情報は、画像に対するコメント、画像に写っている人物の情報、画像の所有者の情報、どの画像に対するコメントなのかの情報、誰からのコメントなのかの情報、誰へのコメントなのかの情報の少なくとも１つを含む、画像処理装置を提供する。
【０００９】
さらに、複数のユーザのうちの少なくとも一人の第１ユーザの端末装置からネットワークを介して関連情報を取得する関連情報取得部を備えることが好ましい。
【００１０】
さらに、複数の画像のうちの少なくとも１つの画像および関連情報を用いて合成画像を作成する合成画像作成部を備えることが好ましい。
【００１１】
さらに、各々の画像の解析結果に基づいて、各々の画像に写っている人物の数を算出する人物数算出部と、
複数の画像のうち、閾値以上の数の人物が写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００１２】
さらに、複数のユーザのうち、画像取得部がリクエスト対象画像を取得した端末装置のユーザをリクエスト対象ユーザとして特定する対象ユーザ特定部を備え、
リクエスト部は、リクエスト対象ユーザの端末装置に対して、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００１３】
リクエスト部は、関連情報として、リクエスト対象画像に写っているイベント、リクエスト対象画像の撮影日時、および、リクエスト対象画像の撮影場所のうちの少なくとも１つの情報をリクエストすることが好ましい。
【００１４】
さらに、複数のユーザの顔画像あるいは顔特徴量データを記憶する顔データ記憶部と、
複数のユーザの顔画像あるいは顔特徴量データに基づいて、複数のユーザのうち、各々の画像に写っているユーザをリクエスト対象ユーザとして特定する対象ユーザ特定部と、
複数の画像のうち、リクエスト対象ユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、リクエスト対象ユーザの端末装置に対して、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００１５】
さらに、複数の画像の中から、合成画像において使用する複数の合成対象画像を抽出する画像抽出部と、
各々の画像の解析結果に基づいて、各々の画像に写っている人物の数を算出する人物数算出部と、
複数の画像のうち、複数の合成対象画像における登場回数または登場比率が閾値未満であるユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、複数のユーザのうちの少なくとも一人の第２ユーザの端末装置に対して、リクエスト対象画像を合成画像において使用することをリクエストすることが好ましい。
【００１６】
さらに、各々の画像の解析結果に基づいて、各々の画像に写っている人物の数を算出する人物数算出部と、
複数の画像のうち、複数の画像における登場回数または登場比率が閾値未満であるユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、複数のユーザのうちの少なくとも一人の第２ユーザの端末装置に対して、リクエスト対象画像を合成画像において使用することをリクエストすることが好ましい。
【００１７】
さらに、各々の画像の解析結果に基づいて、各々の画像の解析評価値を算出する評価値算出部と、
複数の画像のうち、解析評価値が閾値以上である画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００１８】
また、画像解析部は、各々の画像の解析結果に基づいて、各々の画像に写っている人物の笑顔度、および、複数の画像に写っている全ての人物の笑顔度の平均値を算出し、
さらに、複数の画像のうち、笑顔度が笑顔度の平均値よりも高いユーザが写っている画像をリクエスト対象画像として特定する対象画像特定部を備え、
リクエスト部は、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００１９】
さらに、複数のユーザの各々の端末装置から、ネットワークを介して、複数のユーザの各々によって付与された各々の画像に対する高評価または低評価を表す評価情報を取得する評価情報取得部と、
各々の画像に対して高評価を表す評価情報が付与された数を算出する評価数算出部と、
複数の画像のうち、高評価を表す評価情報が付与された数が閾値以上である画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００２０】
さらに、複数のユーザの端末装置から、ネットワークを介して、各々の画像が複数のユーザの各々の端末装置の画像表示部に表示されたことを表す表示情報を取得する表示情報取得部と、
表示情報に基づいて、各々の画像が各々のユーザの端末装置の画像表示部に表示された回数を算出する表示回数算出部と、
複数の画像のうち、各々のユーザの端末装置の画像表示部に表示された画像の回数が閾値以上である画像をリクエスト対象画像として特定する対象画像特定部とを備え、
リクエスト部は、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００２１】
さらに、各々の画像の撮影日時に基づいて、複数の画像の中に含まれていない画像の撮影時間帯を特定する撮影時間帯特定部を備え、
リクエスト部は、関連情報として、複数の画像の中に含まれていない画像の撮影時間帯に撮影された画像をリクエストすることが好ましい。
【００２２】
さらに、複数の画像のうち、複数のユーザのうちの少なくとも一人の第２ユーザの端末装置によって指定された画像をリクエスト対象画像として特定する対象画像特定部を備え、
リクエスト部は、複数のユーザのうちの少なくとも一人の第２ユーザの端末装置に対して、リクエスト対象画像の関連情報をリクエストすることが好ましい。
【００２３】
さらに、複数のユーザの顔画像あるいは顔特徴量データを記憶する顔データ記憶部と、
複数のユーザの顔画像あるいは顔特徴量データに基づいて、複数のユーザのうち、複数の画像に写っていないユーザをリクエスト対象ユーザとして特定する対象ユーザ特定部とを備え、
リクエスト部は、関連情報として、リクエスト対象ユーザが写っている画像をリクエストすることが好ましい。
【００２４】
また、画像解析部は、各々の画像の解析結果に基づいて、各々の画像に写っている人物の目線を検出し、人物の目線が、複数のユーザのうち、各々の画像を閲覧したユーザの目線と合うか否かに基づいて、各々の画像に写っている人物が複数のユーザに含まれている人物なのか否かを検出し、
さらに、複数の画像に写っている人物のうち、複数のユーザに含まれている人物をリクエスト対象ユーザとして特定する対象ユーザ特定部を備え、
リクエスト部は、リクエスト対象ユーザの端末装置に対して関連情報をリクエストすることが好ましい。
【００２５】
さらに、複数のユーザの端末装置から、ネットワークを介して、合成画像の寄せ書きページにおいて使用するユーザの寄せ書きメッセージを取得するメッセージ取得部と、
複数の画像および寄せ書きメッセージを取得する期間を設定する日程設定部と、
複数の画像および寄せ書きメッセージを取得する期間が経過した後に、画像取得部によって取得された画像の数を算出する画像数算出部と、
複数の画像および寄せ書きメッセージを取得する期間が経過した後に、メッセージ取得部によって取得された寄せ書きメッセージの数を算出するメッセージ数算出部とを備え、
リクエスト部は、複数の画像の数が第１閾値未満である場合に、関連情報として、複数の画像に関連する画像をリクエストし、寄せ書きメッセージの数が第２閾値未満である場合に、関連情報として、複数の画像に関連する寄せ書きメッセージをリクエストすることが好ましい。
【００２６】
さらに、寄せ書きメッセージを用いて寄せ書きページを作成する寄せ書き作成部を備えることが好ましい。
【００２７】
また、リクエスト部は、関連情報として、複数の画像に関連する画像および寄せ書きページにおいて使用する寄せ書きメッセージのうちの少なくとも一方をリクエストすることが好ましい。
【００２８】
また、本発明は、画像取得部が、複数のユーザの端末装置からネットワークを介して複数の画像を取得するステップと、
画像解析部が、複数の画像の各々の内容を解析するステップと、
リクエスト部が、各々の画像の解析結果に基づいて、複数の画像に関連する関連情報を、ネットワークを介して、複数のユーザのうちの少なくとも一人の第１ユーザの端末装置に対してリクエストするステップとを含み、
リクエストするステップは、複数の画像のうちの少なくとも１つの画像および関連情報を用いて作成される合成画像において使用する素材が不足する場合に、合成画像の作成に必要となる素材および情報を関連情報としてリクエストし、
関連情報は、画像に対するコメント、画像に写っている人物の情報、画像の所有者の情報、どの画像に対するコメントなのかの情報、誰からのコメントなのかの情報、誰へのコメントなのかの情報の少なくとも１つを含む、画像処理方法を提供する。
【００２９】
さらに、関連情報取得部が、複数のユーザのうちの少なくとも一人の第１ユーザの端末装置からネットワークを介して関連情報を取得するステップを含むことが好ましい。
【００３０】
さらに、合成画像作成部が、複数の画像のうちの少なくとも１つの画像および関連情報を用いて合成画像を作成するステップを含むことが好ましい。
【００３１】
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。
【００３２】
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【発明の効果】
【００３３】
本発明によれば、合成画像において使用する素材が不足する場合に、不足する素材を複数の参加ユーザの端末装置から取得するのをアシストすることができるため、素材が不足する場合であっても合成画像を作成することができる。
【図面の簡単な説明】
【００３４】
【図１】本発明に係る画像処理装置の構成を表す一実施形態のブロック図である。
【図２】図１に示すサーバの構成を表す一実施形態のブロック図である。
【図３】図２に示す情報設定部の構成を表す一実施形態のブロック図である。
【図４】図２に示す情報管理部の構成を表す一実施形態のブロック図である。
【図５】図２に示すデータ取得部の構成を表す一実施形態のブロック図である。
【図６】図２に示すデータ解析部の構成を表す一実施形態のブロック図である。
【図７】図２に示す合成画像作成部の構成を表す一実施形態のブロック図である。
【図８】図１に示すユーザの端末装置の構成を表す一実施形態のブロック図である。
【図９】図１に示す画像処理装置の動作を表す一実施形態のフローチャートである。
【図１０】図９に続く画像処理装置の動作を表す一実施形態のフローチャートである。
【図１１】図１０に続く画像処理装置の動作を表す一実施形態のフローチャートである。
【図１２】合成画像の予算を設定する画面を表す一例の概念図である。
【図１３】フォトブックの表紙ページのデザインを設定する画面を表す一例の概念図である。
【図１４】フォトブックの寄せ書きページのデザインを設定する画面を表す一例の概念図である。
【図１５】画像および寄せ書きメッセージの募集締切日を設定する画面を表す一例の概念図である。
【図１６】合成画像の作成期間を設定する画面を表す一例の概念図である。
【図１７】画像商品の配送日を設定する画面を表す一例の概念図である。
【図１８】画像商材および日程の情報を確認する画面を表す一例の概念図である。
【図１９】アカウント情報を入力する画面を表す一例の概念図である。
【図２０】幹事ユーザのログインと、画像商材および日程の情報の保存とが完了したことを表す画面を表す一例の概念図である。
【図２１】参加ユーザの端末装置へ送付する招待状を作成するための画面を表す一例の概念図である。
【図２２】招待状の内容を確認するための画面を表す一例の概念図である。
【図２３】招待状を参加ユーザの端末装置へ送付するための画面を表す一例の概念図である。
【図２４】受け取った招待状を表す画面を表す一例の概念図である。
【図２５】合成画像において使用される画像、画像の評価情報、寄せ書きメッセージ等を参加ユーザがアップロードする画面にアクセスするための共通パスワードを入力するための画面を表す一例の概念図である。
【図２６】新規な参加ユーザを登録するための画面を表す一例の概念図である。
【図２７】参加ユーザとして登録する名前および秘密のコトバを登録するための画面を表す一例の概念図である。
【図２８】参加ユーザがアップロードする画像を選択するための画面を表す一例の概念図である。
【図２９】２以上の参加ユーザの端末装置から送信された複数の画像の各々を評価するための画面を表す一例の概念図である。
【図３０】寄せ書きページがフォトブックの巻末に入ることを通知する画面を表す一例の概念図である。
【図３１】寄せ書きページにおいて使用する参加ユーザのプロフィール画像を設定するための画面を表す一例の概念図である。
【図３２】寄せ書きメッセージを入力するための画面を表す一例の概念図である。
【図３３】参加ユーザが入力した寄せ書きメッセージを確認するための画面を表す一例の概念図である。
【図３４】寄せ書きメッセージのアップロードが完了したことを表す画面を表す一例の概念図である。
【発明を実施するための形態】
【００３５】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像処理装置、画像処理方法、プログラムおよび記録媒体を詳細に説明する。
【００３６】
図１は、本発明に係る画像処理装置の構成を表す一実施形態のブロック図である。同図に示す画像処理装置１０は、合成画像の作成に関わる複数のユーザの端末装置からネットワーク１６を介して取得された複数の画像を用いて、寄せ書きページを含むフォトブック等の合成画像を作成する。画像処理装置１０は、サーバ１２と、ネットワーク１６を介してサーバ１２に接続された複数のユーザの端末装置（クライアント）１４とを備えている。
【００３７】
サーバ１２は、端末装置１４からの指示に基づいて、合成画像を作成するための種々のデータ処理を行うものであり、例えば、デスクトップPC（Personal Computer：パーソナルコンピュータ）またはワークステーション等により構成される。
【００３８】
端末装置１４は、サーバ１２に対して各種の指示を与えて種々のデータ処理を行わせるものであり、例えば、スマートフォン、タブレットPCまたはノートPC等により構成される。
【００３９】
ネットワーク１６は、例えば、電話回線またはインターネット回線等であり、有線または無線によってサーバ１２と端末装置１４との間を相互に接続し、双方向の通信を可能とする。
【００４０】
図２は、図１に示すサーバの構成を表す一実施形態のブロック図である。同図に示すサーバ１２は、合成画像に関する各種の情報を設定する情報設定部１８と、合成画像の作成に関する各種の情報を管理する情報管理部２０と、合成画像において使用する各種のデータを取得するデータ取得部２２と、合成画像において使用する各種のデータを解析するデータ解析部２４と、合成画像を作成する合成画像作成部２６とを備えている。
【００４１】
以下の説明では、本編ページおよび寄せ書きページを含む合成画像の作成に関わる複数のユーザのうち、合成画像を作成する一人のユーザを幹事ユーザと表現し、幹事ユーザを含む２以上のユーザを参加ユーザと表現する。例えば、幹事が友人グループのうちの一人である場合などがこれに該当する。
ただし、別の実施態様において、写真店が幹事の代行を請け負う場合のように幹事自体は写真もメッセージも提供しないような場合は、参加ユーザの数には幹事ユーザの数は含まないものとする。
【００４２】
図３は、図２に示す情報設定部の構成を表す一実施形態のブロック図である。同図に示す情報設定部１８は、予算設定部２８と、商材取得部３０と、表紙デザイン設定部３２と、寄せ書きデザイン設定部３４と、日程設定部３６とを備えている。
【００４３】
予算設定部２８は、幹事ユーザによって設定された合成画像の予算の情報を、ネットワーク１６を介して、幹事ユーザの端末装置１４から取得する。
【００４４】
続いて、商材取得部３０は、予算設定部２８によって取得された予算の情報に対応するサイズおよびページ数の１以上の画像商材（画像商材の情報）の中から、幹事ユーザによって設定された１つの画像商材を、ネットワーク１６を介して、幹事ユーザの端末装置１４から取得する。
【００４５】
画像商材は、画像商品を作成するための素材であり、例えば、フォトブック等のフォトアルバム、シャッフルプリント、画像付きカレンダ等を含む。画像は主に写真である。
また、画像商材には、各々サイズおよびページ数のうちの少なくとも一方が異なる複数種類の画像商材が含まれる。画像商材のページ数は、本編ページおよび寄せ書きページを含むページ数である。画像商品には、紙媒体の画像商品および電子データの画像商品が含まれる。
本発明にいうページとは、画像配置および寄せ書き配置を行う単位をいう。本実施形態においては、見開きページのことを指す。しかし他の実施形態においては片面ページであってもよい。また、本実施形態内の画像処理装置１０の内部では見開きページを単位とし、かつユーザには片面ページを単位として画像商材のページ数を表示することとしてもよい。
【００４６】
フォトブックは、例えば、ユーザが選択した複数の画像を、ユーザの所望のレイアウトで複数のページに配置した合成画像である。フォトブックはまた、ユーザが保有する所望の期間（例えば一年分）の画像から、自動選択により選択された画像を、自動レイアウトで複数のページに配置した合成画像であってもよい（例えば富士フイルム株式会社製のイヤーアルバム）。また、シャッフルプリントは、複数の画像をシャッフルして１枚のプリントに配置した合成画像である。画像付きカレンダは、例えば、各月のカレンダに対応する画像を配置した合成画像である。
【００４７】
本実施形態の場合、合成画像は、寄せ書きページを巻末に含むフォトブックである。寄せ書きページは、参加ユーザの端末装置１４から取得された２以上の参加ユーザの寄せ書きメッセージが配置された合成画像である。寄せ書きメッセージは、寄せ書きページにおいて使用される参加ユーザのメッセージである。
また、寄せ書きメッセージに加えて、プロフィール画像を寄せ書きページに配置してもよい。プロフィール画像は、例えば、参加ユーザの顔画像であるが、その他の画像でもよい。
【００４８】
続いて、表紙デザイン設定部３２は、１以上の表紙ページのデザインの中から、幹事ユーザによって設定された１つの表紙ページのデザインの情報を、ネットワーク１６を介して、幹事ユーザの端末装置１４から取得する。
【００４９】
表紙ページのデザインの情報には、例えば、表紙ページの模様、表紙ページに描かれているイラスト等のデザインの情報の他、表紙ページに記載される合成画像のタイトルの情報、表紙ページの色の情報等が含まれる。
【００５０】
続いて、寄せ書きデザイン設定部３４は、１以上の寄せ書きページのデザインの中から、幹事ユーザによって設定された１つの寄せ書きページのデザインの情報を、ネットワーク１６を介して、幹事ユーザの端末装置１４から取得する。
【００５１】
寄せ書きページのデザインの情報には、例えば、参加ユーザのプロフィール画像および寄せ書きメッセージを寄せ書きページに配置する位置および大きさ等があらかじめ設定されたテンプレートの情報等を含む。
【００５２】
続いて、日程設定部３６は、幹事ユーザによって設定された画像および寄せ書きメッセージの募集締切日、合成画像の作成期間、および、画像商品の配送日を含む日程の情報を、ネットワーク１６を介して、幹事ユーザの端末装置１４から取得する。
【００５３】
画像および寄せ書きメッセージの募集締切日は、参加ユーザが画像および寄せ書きメッセージをアップロード（投稿）することができる期限、つまり、画像処理装置１０が参加ユーザの端末装置１４から画像および寄せ書きメッセージを取得することができる期限を表す。
また、合成画像の作成期間は、幹事ユーザが、複数のユーザの端末装置１４から取得された複数の画像を用いて合成画像を作成するための期間、言い換えると、画像商品を注文する期限を表し、画像商品の配送日は、画像商品を配送する日付を表す。
【００５４】
続いて、図４は、図２に示す情報管理部の構成を表す一実施形態のブロック図である。同図に示す情報管理部２０は、設定保存部３８と、アカウント情報保存部４０と、管理画面情報送付部４２と、アップロード催促部４４と、顔データ記憶部７２とを備えている。
【００５５】
設定保存部３８は、商材取得部３０によって取得された画像商材、および、日程設定部３６によって取得された日程の情報を保存する。
【００５６】
続いて、アカウント情報保存部４０は、幹事ユーザによって設定された幹事ユーザのアカウント情報を、ネットワーク１６を介して、幹事ユーザの端末装置１４から取得する。また、アカウント情報保存部４０は、参加ユーザによって設定された参加ユーザのアカウント情報を、ネットワーク１６を介して、参加ユーザの端末装置１４から取得して保存する。
【００５７】
例えば、幹事ユーザのアカウント情報は、幹事ユーザのメールアドレスおよび幹事パスワードである。一方、参加ユーザのアカウント情報は、参加ユーザの名前および個別パスワード（参加ユーザに対しては図２７にあるように「秘密のコトバ」と表示される）である。参加ユーザの名前は、幹事ユーザが参加ユーザを管理するために使用され、個別パスワードは、画像処理装置１０が参加ユーザを特定するために使用される。本実施形態の場合、秘密のコトバは、後から変更および再発行はできないものとする。
【００５８】
続いて、管理画面情報送付部４２は、幹事ユーザが、画像商材および日程等を管理する管理画面にアクセスするためのURL（Uniform Resource Locator）を含むメッセージを、ネットワーク１６を介して、幹事ユーザの端末装置１４に送付する。幹事ユーザは、管理画面から画像商材および日程の変更の他、幹事ユーザの変更、幹事ユーザの追加（例えば後述する副幹事の追加）等を行うことができる。
【００５９】
管理画面情報送付部４２は、例えば、電子メールにより、管理画面にアクセスするためのURLを含むメッセージを、アカウント情報保存部４０によって取得された幹事ユーザのメールアドレスに送付する。
【００６０】
続いて、アップロード催促部４４は、幹事ユーザによって作成された招待状を、ネットワーク１６を介して、参加ユーザの端末装置１４へ送付する。
【００６１】
招待状は、参加ユーザを合成画像の作成に招待し、合成画像において使用される画像、各々の画像に対する評価情報、プロフィール画像および寄せ書きメッセージ等をアップロードすることを参加ユーザに催促する催促情報である。
【００６２】
アップロード催促部４４は、招待状を、例えば、SNS（Social Networking Service：ソーシャルネットワーキングサービス）のメッセージ、または、電子メールによって参加ユーザの端末装置１４に送付する。
【００６３】
続いて、顔データ記憶部７２は、２以上の参加ユーザの顔画像（顔画像の画像データ）または顔特徴量データを記憶する。
【００６４】
顔特徴量データは、参加ユーザの顔を特定するためのデータであり、例えば、参加ユーザの顔の主色相、輝度、ボケ、および、目、鼻、口等の顔の各部位を表すエッジ等の情報を含む。
【００６５】
顔画像は、例えば、参加ユーザのプロフィール画像から取得してもよいし、画像取得部４６により、各々の参加ユーザの端末装置１４から顔画像となる専用の画像を取得してもよい。また、顔特徴量データは、顔画像から自動で作成することができる。
【００６６】
続いて、図５は、図２に示すデータ取得部の構成を表す一実施形態のブロック図である。同図に示すデータ取得部２２は、画像取得部４６と、評価情報取得部４８と、メッセージ取得部５０と、リクエスト部７４と、関連情報取得部７６と、表示情報取得部７８とを備えている。
【００６７】
画像取得部４６は、一定の期間、本実施形態の場合、招待状が送付されてから、日程設定部３６によって設定された画像および寄せ書きメッセージの募集締切日までの期間、２以上の参加ユーザの端末装置１４からネットワーク１６を介して送信された複数の画像（画像群）を取得する。また、画像取得部４６は、各々の参加ユーザによって設定された参加ユーザのプロフィール画像を取得する。
【００６８】
続いて、評価情報取得部４８は、同じく一定の期間、２以上の参加ユーザによって付与された各々の画像に対する評価を表す評価情報を、ネットワーク１６を介して、２以上の参加ユーザの端末装置１４から取得する。
【００６９】
画像の評価情報は、各々の画像に対する各々の参加ユーザの評価、例えば、高評価または低評価を表す情報である。
【００７０】
続いて、メッセージ取得部５０は、同じく一定の期間、各々の参加ユーザによってアップロードされた寄せ書きメッセージを、ネットワーク１６を介して、各々の参加ユーザの端末装置１４から取得する。
【００７１】
続いて、リクエスト部７４は、各々の画像の解析結果に基づいて、複数の画像に関連する関連情報を、ネットワーク１６を介して、２以上の参加ユーザのうちの少なくとも一人の参加ユーザ（本発明の第１ユーザ）の端末装置１４に対してリクエストする。
【００７２】
リクエスト部７４は、例えば、合成画像において使用する画像および寄せ書きメッセージ等の素材が不足する場合に、関連情報として、複数の画像に関連する追加の画像および追加の寄せ書きメッセージのうちの少なくとも一方を自動でリクエストする。リクエスト部７４は、例えば、電子メールにより、リクエストするメッセージを、参加ユーザのメールアドレスに送付する。
【００７３】
なお、関連情報は、合成画像の作成に必要となる各種の素材および各種の情報であり、追加の画像および追加の寄せ書きメッセージ等の素材に限らず、画像取得部４６によって取得された複数の画像に関連する情報であれば何でもよい。関連情報として、例えば、画像に対するコメント、画像に写っている人物の情報、画像の所有者の情報、どの画像に対するコメントなのかの情報、誰からのコメントなのかの情報、誰へのコメントなのかの情報等を例示することができる。
【００７４】
続いて、関連情報取得部７６は、リクエスト部７４によるリクエストに応じて、２以上の参加ユーザのうちの少なくとも一人の参加ユーザの端末装置１４からネットワーク１６を介して送信された関連情報を取得する。
【００７５】
続いて、表示情報取得部７８は、各々の画像が２以上の参加ユーザの各々の端末装置１４の画像表示部６８に表示されたことを表す表示情報を、ネットワーク１６を介して、２以上の参加ユーザの端末装置１４から取得する。
【００７６】
表示情報取得部７８は、例えば、縮小表示された複数の画像の中から、参加ユーザが１つの画像を拡大して画像表示部６８に表示させた場合に、拡大された１つの画像が参加ユーザの端末装置１４の画像表示部６８に表示されたことを表す表示情報を取得する。
【００７７】
続いて、図６は、図２に示すデータ解析部の構成を表す一実施形態のブロック図である。同図に示すデータ解析部２４は、画像数算出部５２と、評価数算出部５４と、メッセージ数算出部５６と、画像解析部５８と、評価値算出部６０と、人物数算出部８０と、対象画像特定部８２と、対象ユーザ特定部８４と、表示回数算出部８６と、撮影時間帯特定部８８とを備えている。
【００７８】
画像数算出部５２は、アップロード催促部４４によって招待状が送付されてから一定の期間が経過した後、つまり、画像および寄せ書きメッセージの募集締切日が過ぎた後、画像取得部４６によって取得された画像の数を算出する。
【００７９】
続いて、評価数算出部５４は、同じく画像および寄せ書きメッセージの募集締切日が過ぎた後、評価情報取得部４８によって取得された高評価および低評価を表す評価情報の数を算出する。
【００８０】
続いて、メッセージ数算出部５６は、同じく画像および寄せ書きメッセージの募集締切日が過ぎた後、メッセージ取得部５０によって取得された寄せ書きメッセージの数を算出する。
【００８１】
続いて、画像解析部５８は、画像取得部４６によって取得された各々の画像の内容を解析する。本実施形態の場合、画像解析部５８は、画像取得部４６によって画像が取得される毎に、画像解析を行う。
【００８２】
画像解析部５８は、例えば、画像の明るさや色合い、ボケおよびブレの程度等の解析の他、画像に人物の顔が含まれる場合には、顔の大きさ、顔の位置、顔の向き、顔の肌色、笑顔等の表情、目線、画像に含まれる人物の数、人物の位置関係等の解析を行う。
【００８３】
続いて、評価値算出部６０は、画像解析部５８による各々の画像の解析結果に基づいて、各々の画像の解析評価値を算出する。また、評価値算出部６０は、評価情報取得部４８によって取得された各々の画像に対する高評価および低評価を表す評価情報に基づいて、各々の画像の解析評価値に対して値を加減算ないしは重み付けして、各々の画像の総合評価値を算出する。
【００８４】
評価値算出部６０は、例えば、評価数算出部５４によって算出された高評価を表す評価情報の数に基づいて、画像の解析評価値に対して値を加算し、低評価を表す評価情報の数に基づいて、画像の解析評価値に対して値を減算することによって画像の総合評価値を算出することができる。
【００８５】
画像の解析評価値は、画像の解析結果に基づいて算出されるため、画像の良し悪しを決定するための基準となり、解析評価値が高いほど、画質の良い画像であると言える。
画像の総合評価値は、画像の解析結果に加えて、参加ユーザによって付与された高評価および低評価を表す評価情報に基づいて算出されるため、画像の良し悪しに加えて、参加ユーザの好みを判断するための基準となり、総合評価値が高いほど、画質の良い画像、または、参加ユーザの好みの画像であると言える。
【００８６】
続いて、人物数算出部８０は、各々の画像の解析結果に基づいて、各々の画像に写っている人物の数、例えば、人物の顔の数を算出する。
【００８７】
続いて、対象画像特定部８２は、各々の画像の解析結果等に基づいて、複数の画像のうち、リクエスト部７４がリクエストを行う対象となる画像をリクエスト対象画像として特定する。
【００８８】
続いて、対象ユーザ特定部８４は、アカウント情報等に基づいて、２以上の参加ユーザのうち、リクエスト部７４がリクエストを行う対象となる参加ユーザをリクエスト対象ユーザとして特定する。
【００８９】
続いて、表示回数算出部８６は、表示情報取得部７８によって取得された表示情報に基づいて、各々の画像が各々の参加ユーザの端末装置１４の画像表示部６８に表示された回数を算出する。
【００９０】
続いて、撮影時間帯特定部８８は、Exif（Exchangeable Image File Format）等のヘッダ情報に含まれる各々の画像の撮影日時に基づいて、複数の画像の中に含まれていない画像の撮影時間帯を特定する。
【００９１】
続いて、図７は、図２に示す合成画像作成部の構成を表す一実施形態のブロック図である。同図に示す合成画像作成部２６は、表紙作成部６２と、本編作成部６４と、寄せ書き作成部６６とを備えている。
【００９２】
表紙作成部６２は、設定保存部３８に保存された商材の情報、および、表紙デザイン設定部３２によって取得された表紙ページのデザインの情報に対応するデザインの表紙ページを作成する。
【００９３】
続いて、本編作成部６４は、画像取得部４６によって取得された複数の画像を用いて、商材取得部３０によって取得された１つの画像商材に対応するページ数の本編ページ（表紙ページおよび寄せ書きページ以外のページ）を作成する。本編作成部６４は、設定保存部３８に保存された商材の情報に対応する合成画像、本実施形態の場合、フォトブックの本編ページを作成する。
【００９４】
本編作成部６４は、図示省略するが、画像分割部、画像抽出部および画像配置部等を備えている。
【００９５】
画像分割部は、画像取得部４６によって取得された複数の画像を、本編ページのページ数に対応する数のグループに分割する。
【００９６】
画像抽出部は、画像のグループ毎に、画像の総合評価値に基づいて、グループに含まれる画像の中から、本編ページにおいて使用する複数の合成対象画像を抽出する。
【００９７】
画像配置部は、画像のグループ毎に、画像の総合評価値に基づいて、画像抽出部によって抽出された各々の合成対象画像のサイズおよび本編ページにおける配置位置を決定し、合成対象画像を、画像のグループに対応するページの本編ページに配置（自動レイアウト）する。
【００９８】
続いて、寄せ書き作成部６６は、メッセージ取得部５０によって取得された参加ユーザのプロフィール画像および寄せ書きメッセージを用いて、寄せ書きページを作成する。寄せ書き作成部６６は、設定保存部３８に保存された商材の情報、および、寄せ書きデザイン設定部３４によって取得された寄せ書きのデザインの情報に対応するデザインの寄せ書きページを作成する。
【００９９】
寄せ書き作成部６６は、図示省略するが、メッセージ分割部およびメッセージ配置部等を備えている。
【０１００】
メッセージ分割部は、メッセージ取得部５０によって取得された寄せ書きメッセージを、寄せ書きページのページ数に対応する数のグループに分割する。
【０１０１】
メッセージ配置部は、寄せ書きメッセージのグループ毎に、グループに含まれる寄せ書きメッセージを、寄せ書きメッセージのグループに対応するページの寄せ書きページに配置する。
【０１０２】
寄せ書きページのページ数は、参加ユーザの数および寄せ書きメッセージの数等に応じて設定される。また、本編ページのページ数は、合成画像のページ数および寄せ書きページのページ数等に応じて設定される。本実施形態の場合、参加ユーザの数を２〜３６人とし、１ページの寄せ書きページに２〜１２の寄せ書きメッセージを配置し、１６ページのフォトブックを作成するものとする。
【０１０３】
上記情報設定部１８、情報管理部２０、データ取得部２２、データ解析部２４、合成画像作成部２６を構成する各部位は、例えば、CPU（Central Processing Unit：中央処理装置）等の制御デバイスが、メモリにロードされたプログラムを実行することにより実現される。また、各部位によって保存されるデータは、例えば、HDD（Hard Disk Drive：ハードディスクドライブ）、SSD（Solid State Drive：ソリッドステートドライブ）、SD（Secure Digital：セキュアデジタル）メモリ等の記憶デバイスに保存される。
【０１０４】
次に、図８は、図１に示すユーザの端末装置の構成を表す一実施形態のブロック図である。同図に示すユーザの端末装置１４は、画像表示部６８と、指示入力部７０とを備えている。
【０１０５】
端末装置１４において、画像表示部６８は、各種の設定画面、選択画面、確認画面、入力画面、作成画面等を表示するものであり、例えば、液晶ディスプレイ等の表示デバイスによって構成される。
【０１０６】
続いて、指示入力部７０は、ユーザによって入力された各種の設定指示、選択指示、確認指示、入力指示、作成指示等を取得するものであり、例えば、キーボードおよびマウス等の入力デバイスによって構成される。
【０１０７】
本実施形態の場合、画像表示部６８および指示入力部７０は、タッチパネル等のように、表示デバイスおよび入力デバイスが一体化されたデバイスによって構成される。
【０１０８】
端末装置１４は、合成画像の作成に関わる各々のユーザに１対１に対応して１台である必要はなく、画像処理装置１０における各々のユーザのアカウントに対応することができるものであれば、各々のユーザに対応して複数台であってもよい。
【０１０９】
図示省略しているが、サーバ１２および端末装置１４は、例えば、サーバ１２と端末装置１４との間で各種データの送受信を行う通信デバイス等である送受信部、各部位の動作を制御するCPU等である制御部等を備えている。
【０１１０】
次に、図９〜図１１に示すフローチャートおよび図１２〜図３４に示す表示画面を参照しながら、画像処理装置１０の動作を説明する。
【０１１１】
合成画像を作成する場合、まず、幹事ユーザは、幹事ユーザの端末装置１４において、指示入力部７０を介して、画像処理装置１０が提供する、合成画像を作成するためのウェブサイトにアクセスする。
【０１１２】
合成画像を作成するためのウェブサイトにアクセスすると、図１２に示すように、予算設定部２８により、合成画像の予算を設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１１３】
幹事ユーザは、合成画像の予算を設定する画面において、指示入力部７０を介して、幹事ユーザが作成する合成画像の予算を設定する。図１２の例では、プルダウンメニューによって、合成画像の予算の一覧があらかじめ登録されている。幹事ユーザは、プルダウンメニューに登録されている合成画像の予算の一覧の中から１つの予算、例えば、３０００円〜４０００円を選択して設定する。
【０１１４】
合成画像の予算が設定されると、予算設定部２８により、幹事ユーザによって設定された合成画像の予算の情報が、幹事ユーザの端末装置１４から取得される（ステップS1）。
【０１１５】
続いて、商材取得部３０により、予算の情報に対応する１以上の画像商材が提示される。図１２の例では、画像商材として、サイズおよびページ数の異なる５件のフォトブックが提示される。
【０１１６】
画像商材が提示されると、商材取得部３０により、提示した１以上の画像商材の中から１つの画像商材を設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１１７】
幹事ユーザは、画像商材を設定する画面において、指示入力部７０を介して、提示された１以上の画像商材の中から１つの画像商材を選択して設定する。図１２の例では、A4サイズの１６ページのフォトブックが設定されている。
【０１１８】
画像商材としてフォトブックが設定された後、「次へ」のボタンが押されると、例えば、「次へ」のボタンがタップまたはクリックされると、商材取得部３０により、幹事ユーザによって設定された１つの画像商材が取得される（ステップS2）。
【０１１９】
なお、「＜」のボタンが押されると、１つ前の画面に戻ることができる。これ以後の画面においても同様である。
【０１２０】
続いて、図１３に示すように、表紙デザイン設定部３２により、フォトブックの表紙ページのデザインを設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１２１】
幹事ユーザは、表紙ページのデザインを設定する画面において、指示入力部７０を介して、１以上の表紙ページのデザイン、図１３の例では、３件の表紙ページのデザインの中から、１つの表紙ページのデザインを選択して設定する。また、幹事ユーザは、フォトブックの表紙ページのデザインの情報として、例えば、表紙ページに記載される最大２０文字までのフォトブックのタイトル、および、表紙ページの色を設定することができる。
【０１２２】
表紙ページのデザインが設定された後、「次へ」のボタンが押されると、表紙デザイン設定部３２により、幹事ユーザによって設定された表紙ページのデザインの情報が、幹事ユーザの端末装置１４から取得される（ステップS3）。
【０１２３】
続いて、図１４に示すように、寄せ書きデザイン設定部３４により、フォトブックの寄せ書きページのデザインを設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１２４】
幹事ユーザは、寄せ書きページのデザインを設定する画面において、指示入力部７０を介して、１以上の寄せ書きのデザイン、図１４の例では、９件の寄せ書きのデザインの中から、１つの寄せ書きのデザインを選択して設定する。
【０１２５】
寄せ書きページのデザインが設定された後、「次へ」のボタンが押されると、寄せ書きデザイン設定部３４により、幹事ユーザによって設定された寄せ書きページのデザインの情報が、幹事ユーザの端末装置１４から取得される（ステップS4）。
【０１２６】
続いて、図１５に示すように、日程設定部３６により、画像および寄せ書きメッセージの募集締切日を設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１２７】
幹事ユーザは、画像および寄せ書きメッセージの募集締切日を設定する画面において、指示入力部７０を介して、画像および寄せ書きメッセージの募集締切日を設定する。図１５の例では、プルダウンメニューによって、現在の日付から一定期間内の日付の一覧があらかじめ登録されている。幹事ユーザは、プルダウンメニューに登録されている日付の一覧の中から１つの日付、例えば、１２月２日を募集締切日として選択して設定する。
【０１２８】
画像および寄せ書きメッセージの募集締切日が設定された後、「次へ」のボタンが押されると、日程設定部３６により、幹事ユーザによって設定された画像および寄せ書きメッセージの募集締切日の情報が、幹事ユーザの端末装置１４から取得される（ステップS5）。
【０１２９】
続いて、図１６に示すように、日程設定部３６により、合成画像の作成期間を設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１３０】
幹事ユーザは、合成画像の作成期間を設定する画面において、指示入力部７０を介して、合成画像の作成期間を設定する。図１６の例では、プルダウンメニューによって、画像および寄せ書きメッセージの募集の期間の締切日から３０日以内の日付の一覧があらかじめ登録されている。幹事ユーザは、プルダウンメニューに登録されている日付の一覧の中から１つの日付、例えば、１２月４日を選択することによって１２月２日〜４日を作成期間として設定する。
【０１３１】
合成画像の作成期間が設定された後、「次へ」のボタンが押されると、日程設定部３６により、幹事ユーザによって設定された合成画像の作成期間の情報が、幹事ユーザの端末装置１４から取得される（ステップS5）。
【０１３２】
続いて、図１７に示すように、日程設定部３６により、画像商品の配送日を設定する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１３３】
画像商品の配送日は、日程設定部３６により、合成画像の作成期間の締切日から一定の期間の後の日付、図１７の例では、合成画像の作成期間の最終日である１２月４日から１６日後の１２月２０日に自動で設定される。
【０１３４】
幹事ユーザは、画像商品の配送日を設定する画面において、指示入力部７０を介して、画像商品の配送日を変更することができる。図１７の例では、例えば、追加料金を支払って、特急仕上げを指定することによって、画像商品の配送日を１２月２０日よりも前の日付に設定することができる。
【０１３５】
画像商品の配送日が設定された後、「次へ」のボタンが押されると、日程設定部３６により、画像商品の配送日の情報が取得される（ステップS5）。
【０１３６】
複数のユーザの端末装置１４から送信された複数の画像を用いて合成画像を作成する場合、期限管理が難しいが、画像処理装置１０では、期限管理を行うことができるため、幹事ユーザの負担を軽減することができる。
【０１３７】
続いて、図１８に示すように、設定保存部３８により、画像商材および日程の情報を確認する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１３８】
幹事ユーザは、画像商材および日程の情報を確認する画面において、画像商材および日程の情報を確認し、その設定でよい場合には、「保存／ログイン」のボタンを押して次の画面へ進み、設定を変更したい場合には、「＜」のボタンを押して前の画面に戻る。
【０１３９】
「保存／ログイン」のボタンが押されると、図１９に示すように、設定保存部３８により、幹事ユーザが画像処理装置１０へログインするためのアカウント情報を入力する画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１４０】
幹事ユーザは、画像処理装置１０にログインするためのアカウント情報として、指示入力部７０を介して、幹事ユーザのメールアドレスおよび幹事パスワードを入力する。幹事ユーザが既に画像処理装置１０への会員登録を済ませている場合には、「ログイン」のボタンを押す。また、会員登録後に幹事パスワードを忘れた場合には、「パスワード忘れ」のボタンを押すことによって幹事パスワードを回復するための処理を行う。
【０１４１】
「ログイン」のボタンが押されると、アカウント情報保存部４０により、既に保存されているアカウント情報と、幹事ユーザによって入力されたアカウント情報とが比較され、両者が一致した場合に、幹事ユーザは画像処理装置１０にログインすることができる。
【０１４２】
一方、まだ会員登録を済ませていない場合には、「新規会員登録」のボタンを押すことによって新規に会員登録を行うための処理を行う。「新規会員登録」のボタンが押されると、アカウント情報保存部４０により、幹事ユーザによって入力されたメールアドレスおよび幹事パスワードが取得され、幹事ユーザのアカウント情報として保存される。幹事ユーザの端末装置１４は、会員登録の完了後、画像処理装置１０へログインすることができる。
【０１４３】
続いて、設定保存部３８により、商材取得部３０によって取得された画像商材、および、日程設定部３６によって取得された日程の情報が保存される。
【０１４４】
続いて、図２０に示すように、設定保存部３８により、幹事ユーザのログインと、画像商材および日程の情報の保存とが完了したことを表す画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１４５】
続いて、管理画面情報送付部４２により、管理画面にアクセスするためのURLを含むメッセージが送付される。また、このメッセージには、画像商材および日程の情報が保存されたことを表す通知が含まれている。
【０１４６】
また、図２０の例では、幹事ユーザだけでなく、指示入力部７０を介して、幹事ユーザ以外の参加ユーザのメールアドレスを入力することによって、幹事ユーザ以外の参加ユーザ、例えば、幹事ユーザの代理を務める副幹事ユーザのメールアドレス等にも、管理画面にアクセスするためのURLを含むメッセージを送付することができる。
【０１４７】
続いて、「次へ」のボタンが押されると、図２１に示すように、アップロード催促部４４により、参加ユーザの端末装置１４へ送付する招待状を作成するための画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１４８】
幹事ユーザは、招待状を作成するための画面において、指示入力部７０を介して、招待状に含めるメッセージを一定文字以内、図２１の例では、１５０文字以内で入力する。また、図２１の例では、「みんなの写真とメッセージでフォトブックを贈ろうよ！」という初期メッセージが自動で入力されている。これにより、幹事ユーザがメッセージを入力する手間を省くことができる。幹事ユーザは、初期メッセージをそのまま使用してもよいし、他のメッセージを入力してもよい。
【０１４９】
「次へ」のボタンが押されると、アップロード催促部４４により、招待状に含めるメッセージの情報が取得され、招待状が作成される（ステップS6）。
【０１５０】
続いて、図２２に示すように、アップロード催促部４４により、招待状の内容を確認するための画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１５１】
幹事ユーザは、招待状の内容を確認するための画面において、招待状の内容を確認し、その内容でよい場合には、「招待状送付画面へ」のボタンを押して次の画面へ進み、内容を変更したい場合には、「＜」のボタンを押して前の画面に戻る。
【０１５２】
「招待状送付画面へ」のボタンが押されると、図２３に示すように、アップロード催促部４４により、招待状を参加ユーザの端末装置１４へ送付するための画面が、幹事ユーザの端末装置１４の画像表示部６８に表示される。
【０１５３】
幹事ユーザは、招待状を送付するための画面において、指示入力部７０を介して、招待状を送付する手段として、図２３の例では、SNSのメッセージまたは電子メールを選択する。招待状は、「SNS」のボタンが押された場合、SNSのメッセージとして参加ユーザのSNSのアカウントに送付され、「メール」のボタンが押された場合、電子メールによって参加ユーザのメールアドレスに送付される。
【０１５４】
幹事ユーザは、合成画像の作成に関わる全ての参加ユーザに対して招待状を送付してもよいし、一部の参加ユーザのみに対して招待状を送付してもよい。
【０１５５】
SNSのメッセージまたは電子メールには、招待状の他、合成画像で使用される画像、画像の評価情報、寄せ書きメッセージ等を参加ユーザがアップロードする画面にアクセスするための招待用URL、および、共通パスワード、図２３の例では、「５８６５」が含まれている。
【０１５６】
「次へ」のボタンが押されると、アップロード催促部４４により、招待状が参加ユーザの端末装置１４に送付される（ステップS7）。
【０１５７】
参加ユーザは、招待状を参加ユーザの端末装置１４において受け取り、指示入力部７０を介して、招待用URLで示されるウェブサイトにアクセスする。
【０１５８】
招待用URLで示されるウェブサイトにアクセスすると、図２４に示すように、アップロード催促部４４により、受け取った招待状を表す画面が、参加ユーザの端末装置１４の画像表示部６８に表示される（ステップS8）。
【０１５９】
招待状には、幹事ユーザからのメッセージの他、参加ユーザへの要望として、合成画像において使用する画像および寄せ書きメッセージをアップロードすること、および、その募集締切日等の情報、本実施形態の場合、１２月２日（水）の２３：５９が表示される。
【０１６０】
参加ユーザは、招待状を表す画面を閲覧して、幹事ユーザから参加ユーザへの要望が、フォトブックにする画像および寄せ書きメッセージのアップロードであり、その募集締切日が、１２月２日であることを理解する。
【０１６１】
続いて、「利用規約に同意する」のチェックボックスがチェックされ、「次へ」のボタンが押されると、図２５に示すように、アカウント情報保存部４０により、合成画像において使用される画像、画像の評価情報、寄せ書きメッセージ等を参加ユーザがアップロードする画面にアクセスするための共通パスワードを入力するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１６２】
参加ユーザは、共通パスワードを入力するための画面において、指示入力部７０を介して、受け取った招待状に含まれている共通パスワード、図２５の例では、「５８６５」を入力する。
【０１６３】
共通パスワードが入力され、「次へ」のバタンが押されると、図２６に示すように、アカウント情報保存部４０により、新規な参加ユーザを登録するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１６４】
新規な参加ユーザを登録するための画面には、既に参加ユーザとして登録済みのユーザ（現在の参加メンバー）の名前が表示される。登録済みの参加ユーザの名前を表示することは必須ではない。しかし、登録済みの参加ユーザの名前を表示することによって、ユーザが新規に参加ユーザとして登録する場合に、自分が知っている名前が登録済みの参加ユーザの名前の中にあれば、安心して登録を行うことができる。
【０１６５】
参加ユーザは、まだ参加ユーザとして画像処理装置１０に登録していない場合、「新規登録」のボタンを押し、既に参加ユーザとして登録済みの場合には、「内容修正」のボタンを押す。
【０１６６】
「新規登録」のボタンが押されると、図２７に示すように、アカウント情報保存部４０により、参加ユーザとして登録する名前および個別パスワード（図２７では「秘密のコトバ」と表示される）を登録するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１６７】
参加ユーザは、指示入力部７０を介して、名前として本名またはニックネームを入力し、秘密のコトバとして任意の文字列を入力する。
【０１６８】
参加ユーザの名前および秘密のコトバは、参加ユーザのアカウント情報となる。参加ユーザは、図２６に示すように、新規な参加ユーザを登録するための画面において、「内容修正」のボタンを押し、既に登録済みの名前および秘密のコトバを入力することによって、既にアップロードした画像、画像の評価情報、寄せ書きメッセージ等を修正することができる。
【０１６９】
参加ユーザの名前および秘密のコトバが入力され、「次へ」のボタンが押されると、アカウント情報保存部４０により、その参加ユーザの名前および秘密のコトバが取得され、参加ユーザのアカウント情報として保存される。
【０１７０】
続いて、図２８に示すように、画像取得部４６により、参加ユーザがアップロードする画像を選択するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１７１】
参加ユーザは、アップロードする画像を選択するための画面において、「画像追加」のボタンを押すことによって、アップロードする画像を選択することができる。アップロードする画像を選択するための画面には、参加ユーザによって選択された画像の枚数が表示される。
【０１７２】
アップロードする画像が選択された後、「次へ」のボタンが押されると、画像取得部４６により、参加ユーザからアップロードされた画像、つまり、参加ユーザの端末装置１４から投稿された画像が取得される（ステップS9）。このように、画像取得部４６は、２以上の参加ユーザの端末装置１４から送信された複数の画像を取得する。また、画像取得部４６によって画像が取得される毎に、画像解析部５８により画像の解析が行われ、評価値算出部６０により、画像の解析結果に基づいて画像の解析評価値が算出される（ステップS10）。
【０１７３】
続いて、図２９に示すように、評価情報取得部４８により、２以上の参加ユーザの端末装置１４から送信された複数の画像の各々を評価するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１７４】
参加ユーザは、各々の画像を評価するための画面において、指示入力部７０を介して、各々の画像に対して高評価または低評価を表す評価情報を付与することができる。例えば、参加ユーザは、各々の画像を閲覧し、自分が好きな画像に対して、「いいね」のボタンを押すことによって高評価を表す評価情報を付与し、嫌いな画像に対して、「いまいち」のボタンを押すことによって低評価を表す評価情報を付与することができる。
【０１７５】
各々の参加ユーザの端末装置１４から各々の画像に対して高評価および低評価を表す評価情報が付与されると、評価情報取得部４８により、各々の画像に対して付与された高評価および低評価を表す評価情報が、参加ユーザの端末装置１４から取得される（ステップS11）。
【０１７６】
評価情報が付与された後、「次へ」のボタンが押されると、図３０に示すように、メッセージ取得部５０により、寄せ書きページがフォトブックの巻末に入ることを通知する画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１７７】
参加ユーザは、寄せ書きページがフォトブックの巻末に入ることを通知する画面を閲覧して確認する。
【０１７８】
続いて、「次へ」のボタンが押されると、図３１に示すように、メッセージ取得部５０により、寄せ書きページにおいて使用する参加ユーザのプロフィール画像を設定するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１７９】
参加ユーザは、プロフィール画像を設定するための画面を押すことによって、参加ユーザが参加ユーザの端末装置１４において所有する画像の中からプロフィール画像として使用する画像を選択して設定することができる。また、参加ユーザは、「削除」のボタンを押すことによって、既に設定したプロフィール画像を削除し、再度、プロフィール画像を設定し直すことができる。
【０１８０】
参加ユーザがプロフィール画像を設定した後、「次へ」のボタンが押されると、画像取得部４６により、参加ユーザによって設定されたプロフィール画像が、参加ユーザの端末装置１４から取得される（ステップS12）。
【０１８１】
続いて、図３２に示すように、メッセージ取得部５０により、寄せ書きメッセージを入力するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１８２】
参加ユーザは、寄せ書きメッセージを入力するための画面において、指示入力部７０を介して、寄せ書きページに含めるメッセージを１５０文字以内で入力する。図３２の例では、「結婚おめでとう。  …  幸せになってください。」という初期メッセージが自動で入力されている。これにより、参加ユーザがメッセージを入力する手間を省くことができる。参加ユーザは、初期メッセージをそのまま使用してもよいし、他のメッセージを入力してもよい。
【０１８３】
また、参加ユーザは、寄せ書きメッセージを入力するための画面において、「他の人の寄せ書きを見る」のボタンを押すことによって、他の参加ユーザが既にアップロードした寄せ書きメッセージを閲覧することができる。
【０１８４】
参加ユーザが寄せ書きメッセージを入力した後、「入力完了」のボタンが押されると、図３３に示すように、メッセージ取得部５０により、参加ユーザが入力した寄せ書きメッセージを確認するための画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１８５】
参加ユーザは、寄せ書きメッセージを確認する画面において、寄せ書きメッセージを閲覧して確認し、そのメッセージでよい場合には、「投稿する」のボタンを押して次の画面へ進み、メッセージを変更したい場合には、「＜」のボタンを押して前の画面に戻る。
【０１８６】
「投稿する」のボタンが押されると、メッセージ取得部５０により、参加ユーザから投稿された寄せ書きメッセージ、つまり、参加ユーザの端末装置１４からアップロードされた寄せ書きメッセージが取得される（ステップS13）。
【０１８７】
このように、複数のユーザの画像を用いてフォトブック等の合成画像を作成する場合に、フォトブックの本編ページだけでなく、寄せ書きページを含めることによって、フォトブックの受取人に対する各々の参加ユーザの気持ちを寄せ書きメッセージとして伝えることができる。
【０１８８】
続いて、図３４に示すように、寄せ書きメッセージの投稿が完了したことを表す画面が、参加ユーザの端末装置１４の画像表示部６８に表示される。
【０１８９】
続いて、「完了」のボタンが押されると、画像、画像の評価情報および寄せ書きメッセージのアップロードは完了する。
【０１９０】
続いて、日程設定部３６により、画像および寄せ書きメッセージの募集締切日を過ぎたことが検出されると、画像数算出部５２により、画像取得部４６によって取得された画像の数が算出される（ステップS14）。また、評価数算出部５４により、評価情報取得部４８によって取得された高評価および低評価を表す評価情報の数が算出され（ステップS15）、メッセージ数算出部５６により、メッセージ取得部５０によって取得された寄せ書きメッセージの数が算出される（ステップS16）。
【０１９１】
画像数算出部５２によって算出された画像の数が第１閾値未満、例えば、合成画像の本編ページにおいて使用する画像の下限数未満である場合、リクエスト部７４により、関連情報として、複数の画像に関連する追加の画像が、参加ユーザの端末装置１４に対してリクエストされる（ステップS17）。
また、メッセージ数算出部５６によって算出された寄せ書きメッセージの数が第２閾値未満、例えば、寄せ書きページにおいて使用する寄せ書きメッセージの下限数未満である場合、リクエスト部７４により、関連情報として、寄せ書きページにおいて使用する追加の寄せ書きメッセージが、参加ユーザの端末装置１４に対してリクエストされる（ステップS17）。
【０１９２】
参加ユーザは、前述の画像および寄せ書きメッセージのアップロードの場合と同様にして、追加の画像および追加の寄せ書きメッセージをアップロードすることができる。
【０１９３】
追加の画像および追加の寄せ書きメッセージのアップロードが完了すると、関連情報取得部７６により、関連情報として、参加ユーザによってアップロードされた追加の画像および追加の寄せ書きメッセージが取得される（ステップS18）。
関連情報取得部７６が追加の画像および追加の寄せ書きメッセージを取得する場合の動作は、画像取得部４６が画像を取得する場合およびメッセージ取得部５０が寄せ書きメッセージを取得する場合の動作と同様である。
【０１９４】
ここで、リクエスト部７４は、関連情報をリクエストする場合、例えば、対象画像特定部８２によってリクエスト対象画像を特定し、かつ、対象ユーザ特定部８４によってリクエスト対象ユーザを特定し、対象画像特定部８２によって特定されたリクエスト対象画像の関連情報を、対象ユーザ特定部８４によって特定されたリクエスト対象ユーザの端末装置１４に対してリクエストしてもよい。
【０１９５】
例えば、人物数算出部８０により、各々の画像の解析結果に基づいて、各々の画像に写っている人物の数を算出し、対象画像特定部８２により、人物数算出部８０によって算出された各々の画像に写っている人物の数に基づいて、複数の画像のうち、閾値以上の数の人物が写っている画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像の関連情報として、例えば、５人以上の人物が写っている画像に関連する画像および５人以上の人物が写っている画像に対するコメント等をリクエストすることができる。また、関連情報として、例えば、画像に写っているイベント、画像の撮影日時、および、画像の撮影場所のうちの少なくとも１つの情報をリクエストしてもよい。
【０１９６】
また、上記のように、リクエスト対象画像を特定した場合、対象ユーザ特定部８４により、２以上の参加ユーザのうち、リクエスト対象画像をアップロードした参加ユーザ、つまり、画像取得部４６がリクエスト対象画像を取得した端末装置１４の参加ユーザをリクエスト対象ユーザとして特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像の関連情報を、リクエスト対象ユーザの端末装置１４、つまり、リクエスト対象画像をアップロードした参加ユーザの端末装置１４に対してリクエストすることができる。
【０１９７】
また、対象ユーザ特定部８４により、顔データ記憶部７２に記憶された２以上の参加ユーザの顔画像あるいは顔特徴量データに基づいて、２以上の参加ユーザのうち、各々の画像に写っている参加ユーザをリクエスト対象ユーザとして特定し、かつ、対象画像特定部８２により、複数の画像のうち、リクエスト対象ユーザが写っている画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、参加ユーザが写っている画像の関連情報を、リクエスト対象ユーザ、つまり、各々の画像に写っている参加ユーザの端末装置１４に対してリクエストすることができる。
【０１９８】
また、画像抽出部により、複数の画像の中から、本編ページにおいて使用する複数の合成対象画像を抽出し、人物数算出部８０により、各々の画像の解析結果に基づいて、各々の画像に写っている人物の数を算出し、対象画像特定部８２により、人物数算出部８０によって算出された各々の画像に写っている人物の数に基づいて、複数の画像のうち、画像抽出部によって抽出された複数の合成対象画像における登場回数または登場比率が閾値未満である参加ユーザが写っている画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、複数の合成対象画像における登場回数または登場比率が閾値未満である参加ユーザが写っている画像を本編ページにおいて使用することを、幹事ユーザ（本発明の第２ユーザ）の端末装置１４に対してリクエストすることができる。
【０１９９】
同様に、対象画像特定部８２により、人物数算出部８０によって算出された各々の画像に写っている人物の数に基づいて、複数の画像のうち、複数の画像における登場回数または登場比率が閾値未満である参加ユーザが写っている画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、複数の画像における登場回数または登場比率が閾値未満である参加ユーザが写っている画像を合成画像において使用することを、幹事ユーザの端末装置１４に対してリクエストすることができる。
【０２００】
また、評価値算出部６０により、各々の画像の解析結果に基づいて、各々の画像の解析評価値を算出し、対象画像特定部８２により、複数の画像のうち、評価値算出部６０によって算出された各々の画像の解析評価値が閾値以上である画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、画像解析値が閾値以上である画像の関連情報をリクエストすることができる。
【０２０１】
また、画像解析部５８により、各々の画像の解析結果に基づいて、各々の画像に写っている人物の笑顔度、および、複数の画像に写っている全ての人物の笑顔度の平均値を算出し、対象画像特定部８２により、複数の画像のうち、画像解析部５８によって算出された笑顔度が笑顔度の平均値よりも高い参加ユーザが写っている画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、笑顔度が笑顔度の平均値よりも高い参加ユーザが写っている画像の関連情報をリクエストすることができる。
【０２０２】
また、対象画像特定部８２により、評価数算出部５４によって算出された評価情報の数に基づいて、複数の画像のうち、高評価を表す評価情報が付与された数が閾値以上である画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、高評価を表す評価情報が付与された数が閾値以上である画像の関連情報をリクエストすることができる。
【０２０３】
また、表示情報取得部７８により、各々の画像が２以上の参加ユーザの各々の端末装置１４の画像表示部６８に表示されたことを表す表示情報を、２以上の参加ユーザの端末装置１４から取得し、表示回数算出部８６により、表示情報に基づいて、各々の画像が各々の参加ユーザの端末装置１４の画像表示部６８に表示された回数を算出し、対象画像特定部８２により、表示回数算出部８６によって算出された各々の画像の表示回数に基づいて、複数の画像のうち、各々の参加ユーザの端末装置１４の画像表示部６８に表示された画像の回数が閾値以上である画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、参加ユーザによる閲覧回数が閾値以上である画像の関連情報をリクエストすることができる。
【０２０４】
また、撮影時間帯特定部８８により、各々の画像の撮影日時に基づいて、複数の画像の中に含まれていない画像の撮影時間帯を特定してもよい。
この場合、リクエスト部７４は、関連情報として、例えば、撮影時間帯特定部８８によって特定された、複数の画像の中に含まれていない画像の撮影時間帯に撮影された画像をリクエストすることができる。
【０２０５】
また、対象画像特定部８２により、複数の画像のうち、幹事ユーザの端末装置１４によって指定された画像をリクエスト対象画像として特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象画像、つまり、幹事ユーザの端末装置１４によって指定された画像の関連情報を、幹事ユーザの端末装置１４に対してリクエストすることができる。
【０２０６】
また、対象ユーザ特定部８４により、顔データ記憶部７２に記憶された２以上の参加ユーザの顔画像あるいは顔特徴量データに基づいて、２以上の参加ユーザのうち、複数の画像に写っていない参加ユーザをリクエスト対象ユーザとして特定してもよい。
この場合、リクエスト部７４は、関連情報として、例えば、リクエスト対象ユーザ、つまり、複数の画像に写っていない参加ユーザが写っている画像をリクエストすることができる。
【０２０７】
また、画像解析部５８により、各々の画像の解析結果に基づいて、各々の画像に写っている人物の目線を検出し、人物の目線に基づいて、各々の画像に写っている人物が２以上の参加ユーザに含まれている人物なのか否かを検出し、対象ユーザ特定部８４により、複数の画像に写っている人物のうち、２以上の参加ユーザに含まれている人物をリクエスト対象ユーザとして特定してもよい。
この場合、リクエスト部７４は、例えば、リクエスト対象ユーザ、つまり、複数の画像に写っている参加ユーザの端末装置１４に対して関連情報をリクエストすることができる。
【０２０８】
このように、画像処理装置１０では、合成画像において使用する素材が不足する場合に、不足する素材を複数の参加ユーザの端末装置１４から取得するのをアシストすることができるため、素材が不足する場合であっても合成画像を作成することができる。
【０２０９】
続いて、評価値算出部６０により、各々の画像に対する高評価および低評価を表す評価情報、例えば、評価情報の数に基づいて、各々の画像の解析評価値に対して値が加減算されて、各々の画像の総合評価値が算出される（ステップS19）。
【０２１０】
前述のように、画像が取得される毎に、画像を解析して、その解析評価値を算出することは必須ではない。しかし、画像が取得される毎に、画像を解析して、その解析評価値を算出しておくことにより、全ての画像を取得した後に画像をまとめて解析して解析評価値を算出する場合と比べて、画像の総合評価値を短時間で算出することができ、その結果、合成画像の作成にかかる時間を短縮することができる。
【０２１１】
続いて、幹事ユーザは、幹事ユーザの端末装置１４において、指示入力部７０を介して、合成画像作成部２６に対して合成画像の作成を指示する。
【０２１２】
合成画像作成部２６に対して合成画像の作成が指示されると、表紙作成部６２により、表紙ページのデザインの情報に対応するデザインであり、幹事ユーザによって設定されたタイトルが記載され、幹事ユーザによって設定された色の表紙ページが作成される（ステップS20）。
【０２１３】
続いて、本編作成部６４により、画像取得部４６によって取得された複数の画像のうちの少なくとも１つの画像および関連情報取得部７６によって取得された関連情報、例えば、追加の画像およびコメント等を用いて、フォトブックの本編ページが作成される（ステップS21）。
【０２１４】
本編作成部６４では、画像分割部により、画像取得部４６によって取得された複数の画像が、本編ページのページ数に対応する複数のグループに分割される。
【０２１５】
続いて、画像抽出部により、画像のグループ毎に、画像の総合評価値に基づいて、例えば、総合評価値が最も高い画像から順に、グループに含まれる画像の中から、本編ページにおいて使用する複数の合成対象画像が抽出される。
【０２１６】
続いて、画像配置部により、画像のグループ毎に、画像の総合評価値に基づいて、各々の合成対象画像のサイズおよび本編ページにおける配置位置が決定され、合成対象画像が、各々対応する本編ページに配置される。例えば、本編ページに配置される複数の合成対象画像のうち、総合評価値が最も高い合成対象画像が、他の合成対象画像よりも大きいサイズで、そのページの中央位置に配置される。
【０２１７】
続いて、寄せ書き作成部６６により、参加ユーザのプロフィール画像、寄せ書きメッセージおよび関連情報取得部７６によって取得された関連情報、例えば、追加の寄せ書きメッセージ等を用いて、寄せ書きページのデザインの情報に対応するデザインの寄せ書きページが作成される（ステップS22）。
【０２１８】
寄せ書き作成部６６では、メッセージ分割部により、メッセージ取得部５０によって取得された寄せ書きメッセージが、寄せ書きページのページ数に対応する数のグループに分割される。
【０２１９】
続いて、メッセージ配置部により、寄せ書きメッセージのグループ毎に、例えば、グループに含まれる寄せ書きメッセージと対応する参加ユーザのプロフィール画像とが組み合わされて、寄せ書きメッセージのグループに対応するページの寄せ書きページに配置されて寄せ書きページが作成される。各々の寄せ書きページにおいて、寄せ書きメッセージは、例えば、寄せ書きメッセージがアップロードされた順序で順次配置される。
【０２２０】
上記のように、表紙作成部６２、本編作成部６４および寄せ書き作成部６６によって、２以上の参加ユーザの端末装置１４から取得された複数の画像、参加ユーザのプロフィール画像および寄せ書きメッセージを用いて、それぞれ、表紙ページのデザインの情報に対応する表紙ページ、本編ページ、および、寄せ書きページのデザインの情報に対応する寄せ書きページを含むフォトブックが自動で作成される。
【０２２１】
画像処理装置１０では、本編ページだけでなく、寄せ書きページを含むフォトブック等の合成画像を作成することができる。また、画像の総合評価値に基づいて、本編ページにおいて使用する画像の他、各々の画像のサイズおよび本編ページにおける配置位置等を決定することによって、画像の良し悪しだけでなく、複数の参加ユーザの好みを反映した合成画像を作成することができる。
【０２２２】
幹事ユーザは、幹事ユーザの端末装置１４において、自動で作成された表紙ページ、本編ページおよび寄せ書きページからなるフォトブックの各ページを閲覧する。幹事ユーザは、自動で作成されたフォトブックをそのまま採用してもよいし、各ページの内容、例えば、各ページにおいて使用する画像、画像のサイズ、画像および寄せ書きメッセージの配置位置等を編集してもよい。また、コメントの追加、スタンプ画像の追加、各ページの背景の種類および色の変更等を行うことができる。
【０２２３】
幹事ユーザは、日程設定部３６によって設定された合成画像の作成期間内、本実施形態の場合、１２月４日までにフォトブックの作成を完了し、作成を完了したフォトブックの内容で画像商品を注文する（ステップS23）。幹事ユーザが注文する画像商品には、紙媒体のフォトブックおよび電子データのフォトブックの少なくとも一方が含まれる。
【０２２４】
画像商品が注文されると、注文された画像商品のフォトブックが作成され、日程設定部３６によって設定された画像商品の配送日、本実施形態の場合、１２月２０日までに配送先へ送付される（ステップS24）。紙媒体のフォトブックの場合には、例えば、紙媒体のフォトブックが配送先へ送付され、電子データのフォトブックの場合には、例えば、電子データのフォトブック、あるいは電子データをダウンロードするためのURL等が配送先のメールアドレスへ送付される。
【０２２５】
以上のように、画像処理装置１０では、複数の参加ユーザの端末装置１４から取得された複数の画像および寄せ書きメッセージを用いて、寄せ書きページを含むフォトブック等の合成画像を作成することができる。
【０２２６】
なお、幹事ユーザだけが合成画像を作成することは必須ではなく、合成画像の作成に関わる複数のユーザが共同で合成画像を作成してもよいし、複数のユーザのうちの少なくとも一人のユーザが合成画像を作成してもよい。
【０２２７】
画像処理装置１０を構成する各部位の具体的な構成は特に限定されず、同様の機能を果たすことができる各種構成のものを利用することができる。
また、上記実施形態では、サーバ１２が情報設定部１８、情報管理部２０、データ取得部２２、データ解析部２４および合成画像作成部２６を備えているが、これらのうちの少なくとも１つをユーザの端末装置１４が備えていてもよい。
【０２２８】
本発明の装置は、装置が備える各々の構成要素を専用のハードウェアで構成してもよいし、各々の構成要素をプログラムされたコンピュータで構成してもよい。
本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
【０２２９】
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０２３０】
１０  画像処理装置
１２  サーバ
１４  端末装置（クライアント）
１６  ネットワーク
１８  情報設定部
２０  情報管理部
２２  データ取得部
２４  データ解析部
２６  合成画像作成部
２８  予算設定部
３０  商材取得部
３２  表紙デザイン設定部
３４  寄せ書きデザイン設定部
３６  日程設定部
３８  設定保存部
４０  アカウント情報保存部
４２  管理画面情報送付部
４４  アップロード催促部
４６  画像取得部
４８  評価情報取得部
５０  メッセージ取得部
５２  画像数算出部
５４  評価数算出部
５６  メッセージ数算出部
５８  画像解析部
６０  評価値算出部
６２  表紙作成部
６４  本編作成部
６６  寄せ書き作成部
６８  画像表示部
７０  指示入力部
７２  顔データ記憶部
７４  リクエスト部
７６  関連情報取得部
７８  表示情報取得部
８０  人物数算出部
８２  対象画像特定部
８４  対象ユーザ特定部
８６  表示回数算出部
８８  撮影時間帯特定部
【図１】
0006674798.tif 000002
【図２】
0006674798.tif 000003
【図３】
0006674798.tif 000004
【図４】
0006674798.tif 000005
【図５】
0006674798.tif 000006
【図６】
0006674798.tif 000007
【図７】
0006674798.tif 000008
【図８】
0006674798.tif 000009
【図９】
0006674798.tif 000010
【図１０】
0006674798.tif 000011
【図１１】
0006674798.tif 000012
【図１２】
0006674798.tif 000013
【図１３】
0006674798.tif 000014
【図１４】
0006674798.tif 000015
【図１５】
0006674798.tif 000016
【図１６】
0006674798.tif 000017
【図１７】
0006674798.tif 000018
【図１８】
0006674798.tif 000019
【図１９】
0006674798.tif 000020
【図２０】
0006674798.tif 000021
【図２１】
0006674798.tif 000022
【図２２】
0006674798.tif 000023
【図２３】
0006674798.tif 000024
【図２４】
0006674798.tif 000025
【図２５】
0006674798.tif 000026
【図２６】
0006674798.tif 000027
【図２７】
0006674798.tif 000028
【図２８】
0006674798.tif 000029
【図２９】
0006674798.tif 000030
【図３０】
0006674798.tif 000031
【図３１】
0006674798.tif 000032
【図３２】
0006674798.tif 000033
【図３３】
0006674798.tif 000034
【図３４】
0006674798.tif 000035