(57)【特許請求の範囲】
【請求項１】
プリントが入った額縁を飾る場所の背景を表わす背景画像の印象のカテゴリを決定する背景画像印象カテゴリ決定手段，
上記背景画像印象カテゴリ決定手段によって決定された印象のカテゴリに含まれる額縁画像を見つける額縁画像検出手段，
上記プリントを表わす画像を，上記背景画像印象カテゴリ決定手段によって決定された印象のカテゴリごとの目標値に近づける補正を行なう画像補正手段，および
上記画像補正手段によって補正された画像を，上記額縁画像検出手段によって見つけられた額縁画像の合成領域に合成して合成画像を生成する合成手段，
を備えた画像合成装置。
【請求項２】
上記背景画像印象決定手段によって決定された印象のカテゴリを表わす情報であって，上記背景画像に重畳する印象カテゴリ情報を出力する印象カテゴリ情報出力手段，
をさらに備えた請求項１に記載の画像合成装置。
【請求項３】
上記背景画像印象カテゴリ決定手段は，
背景画像の部分ごとに印象のカテゴリを決定するものであり，
上記印象カテゴリ情報出力手段は，
背景画像の部分ごとに決定された印象カテゴリ情報を出力するものである，
請求項２に記載の画像合成装置。
【請求項４】
上記プリントを表わす画像が，上記背景画像印象カテゴリ決定手段によって決定された印象のカテゴリごとの目標値に近づく補正方法を出力する補正方法出力手段，
をさらに備えた請求項１から３のうち，いずれか一項に記載の画像合成装置。
【請求項５】
上記補正方法によって補正された画像を出力する補正画像出力手段，
をさらに備えた請求項４に記載の画像合成装置。
【請求項６】
上記背景画像に，上記合成手段によって生成された合成画像を重畳する位置を入力する重畳位置入力手段，
をさらに備えた請求項１から５のうち，いずれか一項に記載の画像合成装置。
【請求項７】
上記合成手段によって生成された合成画像と上記背景画像とのマッチング度を算出するマッチング度算出手段，
をさらに備えた請求項１から６のうち，いずれか一項に記載の画像合成装置。
【請求項８】
上記合成手段によって生成された合成画像のうち，額縁画像を除く画像をプリントするプリント手段，
をさらに備えた請求項１から７のうち，いずれか一項に記載の画像合成装置。
【請求項９】
プリントが入った額縁を飾る場所の背景を表わす背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの背景画像解析情報を検出する背景画像解析情報検出手段，
上記背景画像解析情報検出手段によって検出された背景画像解析情報のうち一の背景画像解析情報と，額縁を表わす額縁画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の額縁画像解析情報のうち上記一の背景画像解析情報と同じ種類の一の額縁画像解析情報との近似度がしきい値以上である額縁画像を見つける額縁画像検出手段，ならびに
上記額縁画像検出手段によって見つけられた額縁画像に，上記プリントを表わす画像を合成して合成画像を生成する合成手段，
を備えた画像合成装置。
【請求項１０】
上記プリントを表わす画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の画像解析情報うち，上記背景画像解析情報検出手段によって検出された背景画像解析情報のうちの一の背景画像解析情報と同じ種類の一の画像解析情報を取得する画像解析情報取得手段，ならびに
上記画像解析情報取得手段によって取得された一の画像解析情報の値と上記一の背景画像解析情報の値とが近づく，あるいは遠ざかる補正を額縁に入る画像について行なう画像補正手段，
をさらに備えた請求項９に記載の画像合成装置。
【請求項１１】
上記合成手段によって生成された合成画像のうち，額縁画像を除く画像をプリントするプリント手段，
をさらに備えた請求項９または10に記載の画像合成装置。
【請求項１２】
背景画像印象カテゴリ決定手段が，プリントが入った額縁を飾る場所の背景を表わす背景画像の印象のカテゴリを決定し，
額縁画像検出手段が，上記背景画像印象カテゴリ決定手段によって決定された印象のカテゴリに含まれる額縁画像を見つけ，
画像補正手段が，上記プリントを表わす画像を，上記背景画像印象カテゴリ決定手段によって決定された印象のカテゴリごとの目標値に近づける補正を行ない，
合成手段が，上記画像補正手段によって補正された画像を，上記額縁画像検出手段によって見つけられた額縁画像の合成領域に合成して合成画像を生成する，
画像合成方法。
【請求項１３】
画像合成装置のコンピュータを制御するコンピュータが読み取り可能なプログラムであって，
プリントが入った額縁を飾る場所の背景を表わす背景画像の印象のカテゴリを決定させ，
決定された印象のカテゴリに含まれる額縁画像を見つけさせ，
上記プリントを表わす画像を，決定された印象のカテゴリごとの目標値に近づける補正を行なわせ，
補正された画像を，見つけられた額縁画像の合成領域に合成して合成画像を生成するように画像合成装置のコンピュータを制御するコンピュータが読み取り可能なプログラム。
【請求項１４】
請求項13に記載のプログラムを格納した記録媒体。
【請求項１５】
背景画像情報検出手段が，プリントが入った額縁を飾る場所の背景を表わす背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの背景画像解析情報を検出し，
額縁画像検出手段が，上記背景画像解析情報検出手段によって検出された背景画像解析情報のうち一の背景画像解析情報と，額縁を表わす額縁画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の額縁画像解析情報のうち上記一の背景画像解析情報と同じ種類の一の額縁画像解析情報との近似度がしきい値以上である額縁画像を見つけ，
合成手段が，上記額縁画像検出手段によって見つけられた額縁画像に，上記プリントを表わす画像を合成して合成画像を生成する，
画像合成方法。
【請求項１６】
画像合成装置のコンピュータを制御するコンピュータが読み取り可能なプログラムであって，
プリントが入った額縁を飾る場所の背景を表わす背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの背景画像解析情報を検出させ，
検出された背景画像解析情報のうち一の背景画像解析情報と，額縁を表わす額縁画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の額縁画像解析情報のうち上記一の背景画像解析情報と同じ種類の一の額縁画像解析情報との近似度がしきい値以上である額縁画像を見つけさせ，
見つけられた額縁画像に，上記プリントを表わす画像を合成して合成画像を生成させる画像合成装置のコンピュータを制御するコンピュータが読み取り可能なプログラム。
【請求項１７】
請求項16に記載のプログラムを格納した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は，画像合成装置，画像合成方法，画像合成装置の制御プログラムおよびそのプログラムを格納した記録媒体に関する。
【背景技術】
【０００２】
インテリアをコーディネイトする場合に，どのような感じとなるか分らないために，インテリアコーディネイト支援システムというものがある（特許文献１）。インテリア様式／特徴を示すパラメータが指定されると，指定されたパラメータに対応するインテリア構成要素セットが選択され，構成要素の画像がすでに指定されている構成要素の画像と重畳される。また，インテリア提唱システムでは，嗜好マップが表示され，嗜好マップ上のサンプル座標が指定されると，指定されたサンプル座標を中心とした選択フィールドが提示され，インテリアデザインとして統一感の取れる範囲内のサンプルが表示される（特許文献２）。さらに，背景画像に３次元オブジェクトを任意配置で合成するものにおいて，所望のテクスチャをマッピングするものもある（特許文献３）。
【０００３】
さらに，デジタル・フォト・フレームに内蔵されたカメラが周囲の画像を撮影し，室内の状況に適した額縁の画像を選択して写真とともに表示させるもの（特許文献４），部屋のインテリアにあった画像を表示するもの（特許文献５）などもある。さらに，装飾用画像に関連付けられた，画像補正を制御する情報に基づいて主画像を自動に補正するものなどもある（特許文献６）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第3040074号
【特許文献２】特許第4446705号
【特許文献３】特開2003-157290号公報
【特許文献４】特許第5477025号
【特許文献５】特許第4710497号
【特許文献６】特開2007-208912号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら，いずれの特許文献においても額縁に写真を部屋に入れて飾る場合に背景との関係を考慮して最適な額縁を見つけることについては何ら考えられていない。特許文献１においては，あらかじめイメージのパラメータのセットが必要である。特許文献２においては，あらかじめ登録されたインテリア構成要素を嗜好マップに表示するものであるから，任意のインテリア構成要素については対応していない。特許文献３は三次元表示のソフトウエアについてのものであり，インテリアについては考慮されていない。特許文献４は，デジタル・フォト・フレームの前面下部に設けられている撮影レンズを介してカメラが周囲の画像を撮像するものであり，デジタル・フォト・フレーム前方しか撮影できない。このために，デジタル・フォト・フレームの背景については全く考慮されていない。特許文献５は，情報処理装置が置かれている部屋の様式等を示す情報から，部屋にあった画像を表示するものであるから，ユーザが所望の画像を表示することはできない。特許文献６は，画像補正についてのものであり，画像を飾る部屋との関連については考えられていない。
【０００６】
この発明は，写真（画像）が入った額縁を飾る場合に，背景を考慮して適した額縁を選択できるようにすることを目的とする。
【課題を解決するための手段】
【０００７】
第１の発明による画像合成装置は，プリントが入った額縁（この額縁は，実際の額縁であってもよいし，テンプレート画像のように，額縁を現す画像であってもよい）を飾る場所の背景を表わす背景画像の印象のカテゴリを決定する背景画像印象カテゴリ決定手段，背景画像印象カテゴリ決定手段によって決定された印象のカテゴリに含まれる額縁画像を見つける額縁画像検出手段，プリントを表わす画像（プリントに用いられる画像）を，背景画像印象カテゴリ決定手段によって決定された印象のカテゴリの目標値に近づける補正を行なう画像補正手段，および画像補正手段によって補正された画像を，額縁画像検出手段によって見つけられた額縁画像の合成領域に合成して合成画像を生成する合成手段を備えていることを特徴とする。
【０００８】
第１の発明は，画像合成方法も提供している。すなわち，この方法は，背景画像印象カテゴリ決定手段が，プリントが入った額縁を飾る場所の背景を表わす背景画像の印象のカテゴリを決定し，額縁画像検出手段が，背景画像印象カテゴリ決定手段によって決定された印象のカテゴリに含まれる額縁画像を見つけ，画像補正手段が，プリントを表わす画像を，背景画像印象カテゴリ決定手段によって決定された印象のカテゴリの目標値に近づける補正を行ない，合成手段が，画像補正手段によって補正された画像を，額縁画像検出手段によって見つけられた額縁画像の合成領域に合成して合成画像を生成するものである。
【０００９】
第１の発明は，画像合成装置のコンピュータを制御するプログラムおよびそのプログラムを格納した記録媒体も提供している。
【００１０】
背景画像印象カテゴリ決定手段によって決定された印象のカテゴリを表わす情報であって，背景画像に重畳する印象カテゴリ情報を出力する印象カテゴリ情報出力手段をさらに備えてもよい。
【００１１】
背景画像印象カテゴリ決定手段は，たとえば，背景画像の部分ごとに印象のカテゴリを決定するものであり，印象カテゴリ情報出力手段は，背景画像の部分ごとに決定された印象カテゴリ情報を出力するものでもよい。
【００１２】
プリントを表わす画像が，背景画像印象カテゴリ決定手段によって決定された印象のカテゴリごとの目標値に近づく補正方法を出力する補正方法出力手段をさらに備えてもよい。
【００１３】
補正方法によって補正された画像を出力する補正画像出力手段をさらに備えてもよい。
【００１４】
背景画像に，合成手段によって生成された合成画像を重畳する位置を入力する重畳位置入力手段をさらに備えてもよい。
【００１５】
合成手段によって生成された合成画像と背景画像とのマッチング度を算出するマッチング度算出手段をさらに備えてもよい。
【００１６】
合成手段によって生成された合成画像のうち，額縁画像を除く画像をプリントするプリント手段をさらに備えてもよい。
【００１７】
第２の発明による画像合成装置は，プリントが入った額縁を飾る場所の背景を表わす背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの背景画像解析情報を検出する背景画像解析情報検出手段，背景画像解析情報検出手段によって検出された背景画像解析情報のうち一の背景画像解析情報と，額縁を表わす額縁画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の額縁画像解析情報のうち上記一の背景画像解析情報と同じ種類の一の額縁画像解析情報との近似度がしきい値以上である額縁画像を見つける額縁画像検出手段，ならびに額縁画像検出手段によって見つけられた額縁画像に，プリントを表わす画像を合成して合成画像を生成する合成手段を備えていることを特徴とする。
【００１８】
第２の発明は，画像合成方法も提供している。すなわち，背景画像情報検出手段が，プリントが入った額縁を飾る場所の背景を表わす背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの背景画像解析情報を検出し，額縁画像検出手段が，背景画像解析情報検出手段によって検出された背景画像解析情報のうち一の背景画像解析情報と，額縁を表わす額縁画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の額縁画像解析情報のうち一の背景画像解析情報と同じ種類の一の背景画像解析情報との近似度がしきい値以上である額縁画像を見つけ，合成手段が，額縁画像検出手段によって見つけられた額縁画像に，プリントを表わす画像を合成して合成画像を生成するものである。
【００１９】
第２の発明は，画像合成装置のコンピュータを制御するプログラムおよびそのプログラムを格納した記録媒体も提供している。
【００２０】
プリントを表わす画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の画像解析情報うち，背景画像解析情報検出手段によって検出された背景画像解析情報のうちの一の背景画像解析情報と同じ種類の一の画像解析情報を取得する画像解析情報取得手段，ならびに画像解析情報取得手段によって取得された一の画像解析情報の値と一の背景画像解析情報の値とが近づく，あるいは遠ざかる補正を額縁に入る画像について行なう画像補正手段をさらに備えてもよい。
【００２１】
合成手段によって生成された合成画像のうち，額縁画像を除く画像をプリントするプリント手段をさらに備えてもよい。
【発明の効果】
【００２２】
第１の発明によると，プリントが入った額縁を飾る場所の背景を表わす背景画像の印象のカテゴリが決定される。決定された印象のカテゴリに含まれる額縁画像が見つけられる。プリントを表わす画像を，決定された印象のカテゴリの目標値に近づける補正が行なわれ，補正された画像が，見つけられた額縁画像の合成領域に合成されて合成画像が生成される。
【００２３】
第１の発明によると，額縁画像は，その額縁が飾られる背景の印象のカテゴリと同じとなり，しかも額縁に入れられる画像はそのような印象のカテゴリの目標値に近づくように補正されるから，見つけられた額縁画像に対応する実際の額縁に，補正された画像が入れられて額縁が飾られると，額縁も額縁に入れられるプリントも，額縁が飾られる部屋の壁などに合うこととなる。飾る壁などに適した額縁を見つけ出すことができる。
【００２４】
第２の発明によると，プリントが入った額縁を飾る場所の背景を表わす背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの背景画像解析情報が検出される。検出された背景画像解析情報と同じ種類の額縁画像解析情報との近似度がしきい値以上である額縁画像が見つけられる。見つけられた額縁画像に，画像が合成される。
【００２５】
第２の発明においても，背景と近似した額縁画像が見つけられるので，見つけられた額縁画像により特定される額縁に画像が入れられて額縁が飾られると，背景に合うようになる。
【図面の簡単な説明】
【００２６】
【図１】額縁が飾られるユーザの部屋の一例である。
【図２】画像合成システムの概要を示している。
【図３】スマートフォンの電気的構成を示すブロック図である。
【図４】画像合成サーバの電気的構成を示すブロック図である。
【図５】画像合成システムの処理手順を示すフローチャートである。
【図６】画像合成システムの処理手順を示すフローチャートである。
【図７】印象と画像解析情報との関係を示している。
【図８】スマートフォンの表示画面の一例である。
【図９】スマートフォンの表示画面の一例である。
【図１０】スマートフォンの表示画面の一例である。
【図１１】スマートフォンの表示画面の一例である。
【図１２】画像合成システムの処理手順を示すフローチャートである。
【図１３】背景画像の解析結果を示している。
【図１４】が北部地画像解析情報を示している。
【発明を実施するための形態】
【００２７】
図１は，部屋の様子を示している。
【００２８】
部屋１には，天井２，床３ならびに壁４，５および６がある。一つの壁５には窓７があり，カーテン８がかけられている。また，箪笥９が置かれている。このような壁５を背景にして，鎖線10で示す位置に，額縁入りのプリント（写真）を飾ることを考える。このような場合，壁５の色，窓７，カーテン８，箪笥９を考慮して額縁が選ばれる。この実施例では，画像入りの額縁が飾られる背景を考慮して額縁（額縁画像）が選択されるものである。
【００２９】
額縁が飾られるのは部屋の壁だけでなく，屋外の壁，室内または屋外のついたてなど額縁が飾られるような場所であれば，どこでもよい。いずれにしてもプリントが入った額縁が飾られる場所の背景を考慮して額縁（額縁画像）が選択される。
【００３０】
図２は，画像合成システムの概要を示している。
【００３１】
画像合成システムには，インターネットのようなネットワークを介して互いに通信可能なスマートフォン（多機能携帯電話）20および画像合成サーバ（画像合成装置）50が含まれている。スマートフォン20を利用せずにクライアント・コンピュータなどを利用できるのはいうまでもない。画像合成サーバ50には，額縁に入れられるプリントを表わす画像をプリントするためのプリンタ59が接続されている。
【００３２】
図３は，スマートフォン20の電気的構成を示すブロック図である。
【００３３】
スマートフォン20の全体の動作は，ＣＰＵ32によって統括される。
【００３４】
スマートフォン20には，表示制御装置33によって制御される表示装置34が含まれている。表示装置34の表示画面にはタッチ・パネル35が形成されている。タッチ・パネル35から与えられる指令はＣＰＵ32に入力する。また，スマートフォン20には，カメラ36，データを一時的に記憶するメモリ37および外部装置と接続するための外部インターフェイス38も含まれている。さらに，スマートフォン20には，マイクロフォン39，音声制御装置40およびスピーカ41が含まれている。また，上述したようにインターネットに接続するための通信装置42，スマートフォン20の位置を検出するためのＧＰＳ（Global Positioning System）受信装置43および時計44もスマートフォン20に含まれている。
【００３５】
図４は，画像合成サーバ50の電気的構成を示すブロック図である。
【００３６】
画像合成サーバ50の全体の動作は，ＣＰＵ51によって統括される。
【００３７】
画像合成サーバ50には，データを一時的に記憶するメモリ52，コンパクト・ディスク53にアクセスするためのコンパクト・ディスク・ドライブ54およびプリンタ59を接続するためのプリンタ・インターフェイス55が含まれている。また，画像合成サーバ50には，ハードディスク58およびハードディスク58にアクセスするためのハードディスク・ドライブ57も含まれている。
【００３８】
後述する動作を制御するプログラムが格納されているコンパクト・ディスク（記録媒体）53が画像合成サーバ50に装填され，コンパクト・ディスク・ドライブ54によってコンパクト・ディスク53に格納されているプログラムが読み取られる。読み取られたプログラムが画像合成サーバ50にインストールされることにより，画像合成サーバ50は，後述する動作を行う。画像合成サーバ50を制御するプログラムは，コンパクト・ディスク53のような記録媒体から読み取られるのではなく，インターネットを介して送信されたものを受信するようにしてもよい。
【００３９】
図５および図６は，画像合成システムの処理手順を示すフローチャートである。
【００４０】
ユーザは，上述したようにプリント入りの額縁を飾る背景の壁をスマートフォン20のカメラ36などを用いて撮影する（図５ステップ61），撮影によって得られた背景画像（背景の壁画像）を表わす背景画像データおよび額縁に入れられるプリント（画像）を表わすユーザ画像データがスマートフォン20から画像合成サーバ50に送信される（図５ステップ62）。
【００４１】
背景画像データおよびユーザ画像データが画像合成サーバ50において受信されると（図５ステップ81），背景画像およびユーザ画像が画像合成サーバ50のＣＰＵ51によって解析される（図５ステップ81）。この解析により，プリントが入った額縁を飾る場所の背景を表わす背景画像の１つまたは複数の印象のカテゴリがＣＰＵ51によって決定される（図５ステップ83）（背景画像印象カテゴリ決定手段）。
【００４２】
図７は，印象カテゴリ決定テーブルの一例である。
【００４３】
印象カテゴリ決定テーブルは，画像合成サーバ50のメモリ52に格納されている。
【００４４】
印象カテゴリ決定テーブルには，印象のカテゴリに対応して，明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の画像解析情報が格納されている。解析によって得られた背景画像の画像解析情報から，その背景画像の印象のカテゴリが決定される。たとえば，明るさがレベル７（Ｌ７）以上であり，コントラストおよび彩度がレベル３から５（Ｌ３からＬ５）の間であり，色相その他の画像解析情報も印象のカテゴリが「かわいい」に対応して格納されている画像解析情報を満足していれば，その背景画像の印象のカテゴリは「かわいい」と決定される。決定される印象のカテゴリは一つだけでもよいし，二つ以上でもよい。また，図７に示す印象のカテゴリと画像解析情報との関係を必ずしも完全に満たす必要は無く，所定の割合で満たしていれば，対応する印象のカテゴリと決定するようにしてもよい。
【００４５】
また，印象のカテゴリの決定は背景画像の部分ごとにＣＰＵ51によって行なうようにしてもよい。背景画像の部分ごとに印象のカテゴリが決定される場合には，背景画像の部分ごとに解析が行なわれ，背景画像の部分ごとに画像解析情報が得られる。得られた部分ごとの画像解析情報と図７に示すテーブルとを用いて，ＣＰＵ51によって背景画像の部分ごとの印象のカテゴリが得られる。
【００４６】
図５に戻って，決定された印象のカテゴリを表わす印象カテゴリ・データ（印象カテゴリ情報）が通信装置56から送信される（ステップ84）（印象カテゴリ情報出力手段）。印象カテゴリ・データは，文字列で印象のカテゴリを表わすだけでなく，マークにより印象のカテゴリを表わすものでもよい。部分ごとに印象のカテゴリが得られる場合には，その印象のカテゴリが背景画像のどの部分かを示す座標等とともに印象カテゴリ・データが画像合成サーバ50からスマートフォン20に送信される。
【００４７】
また，決定された背景画像の印象のカテゴリをもつ額縁画像が画像合成サーバ50のＣＰＵ51によって見つけられる（図５ステップ85）（額縁画像検出手段）。額縁画像を表わすデータは，額縁画像の印象のカテゴリに対応してメモリ52に多数記憶されており，その多数記憶されている額縁画像を表わすデータの中から，背景画像の印象をもつ額縁画像が見つけられる。
【００４８】
スマートフォン20により印象カテゴリ・データが受信されると（図５ステップ63），スマートフォン20のＣＰＵ32によって印象カテゴリ・データによって表わされる印象カテゴリ情報（文字列，マークなど）が背景画像に重畳される（図５ステップ64）。
【００４９】
また，画像合成サーバ50においては，額縁に入れられるユーザ画像が，決定された背景画像の印象のカテゴリの目標値に近づくように，推奨補正方法でＣＰＵ51によって補正される（図５ステップ86）（画像補正手段）。ユーザ画像の解析により画像解析情報が得られているから，図７に示すテーブルに格納されている印象のカテゴリに対応する画像解析情報の値（目標値）に近づく（画像解析情報の値となる）ようにユーザ画像が補正される。たとえば，背景画像の印象のカテゴリが「かわいい」場合に，明るさを明るく（または暗く）補正すればユーザ画像の印象がかわいくなるときには，推奨補正方法一つは明るさ補正となる。その他の場合でも同様である。また，背景画像の印象のカテゴリが部分ごとに検出されている場合には，それぞれの部分の印象のカテゴリの目標値に近づくような推奨補正方法で補正される。推奨補正方法で補正されたユーザ画像および推奨補正方法が通信装置56によって画像合成サーバ50からスマートフォン20に送信される（図５ステップ87）（補正方法出力手段，補正画像出力手段）。
【００５０】
スマートフォン20において，推奨補正方法で補正されたユーザ画像および推奨補正方法が受信される（図５ステップ65）。印象カテゴリ情報が重畳された背景画像がスマートフォン20の表示装置34の表示画面に表示されることとなる（図５ステップ66）。
【００５１】
図８は，スマートフォン１の表示画面の一例である。
【００５２】
スマートフォン１の表示画面100には，背景画像101が表示されている。この背景画像101は，図１に示す壁５の画像を表わしている。背景画像101には，図１に示す壁５に対応する壁画像105，窓７に対応する窓画像107，カーテン８に対応するカーテン画像108および箪笥９に対応する箪笥画像109も含まれている。カーテン画像108の部分に対応する印象カテゴリとして吹き出し111に「エレガント」の文字列が表示され，箪笥画像109の部分に対応する印象カテゴリとして吹き出し112に「ナチュラル」の文字列が表示されている。壁画像105の部分に対応する印象カテゴリが表示されるようにしてもよいし，部分でなく，背景画像101の全体の印象カテゴリが表示されるようにしてもよい。
【００５３】
背景画像101の下部には，「推奨補正方法を表示する」という文字列が表示されている推奨補正方法表示指令ボタン113，「飾る位置を指定」という文字列が表示されている位置指定ボタン114および「クリア」の文字列が表示されているクリア・ボタン115が表示されている。
【００５４】
推奨補正方法表示指令ボタン113がユーザによってタッチされると表示画面100には，推奨補正方法で補正されたユーザ画像，推奨補正方法が表示される（図５ステップ67）。
【００５５】
図９は，推奨補正方法で補正されたユーザ画像および推奨補正方法が表示されるスマートフォン20の表示画面100の一例である。
【００５６】
表示画面100のほぼ中央に補正されていないユーザ画像（原ユーザ画像）120が表示されている。図９に示す例では，推奨補正方法として，明るさ補正，彩度補正，コントラスト補正および色バランス補正が例示されている。その他の推奨補正方法があれば，そのような推奨補正方法も表示されるのはいうまでもない。
【００５７】
原ユーザ画像120の上部に，原ユーザ画像が明るさ補正された第１の補正画像121が表示されている。原ユーザ画像120の左側に，原ユーザ画像が彩度補正された第２の補正画像122が表示されている。原ユーザ画像120の右側に，原ユーザ画像がコントラスト補正された第３の補正画像123が表示されている。原ユーザ画像120の下部に，原ユーザ画像が色バランス補正された第４の補正画像124が表示されている。これらの補正画像121から124のうち，第４の補正画像124が最適な補正画像と考えられたものとする。すると，その第４の補正画像124を推奨するために，第４の補正画像124の近くに「おすすめ！」の文字列が表示されている吹き出し125が表示されている。たとえば，補正後のユーザ画像の画像解析特性が，背景画像または背景画像の一部の画像解析特性にもっとも近くなる補正画像が最適な補正画像とされる。
【００５８】
表示画面100の下部には，「補正方法決定」の文字列が表示されている補正方法決定ボタン126，「クリア」の文字列が表示されているクリア・ボタン127および「飾る位置を指定」の文字列が表示されている位置指定ボタン128が表示されている。
【００５９】
第１の補正画像121から第４の補正画像124のうち，所望の補正画像がユーザによってタッチされ，かつ補正方法決定ボタン126が押されると，補正方法が決定される（図６ステップ68）。クリア・ボタン115が押されると，補正画像のタッチがクリアされる。補正方法が決定すると，位置指定ボタン128が押される。すると，スマートフォン20の表示画面には，背景画像101が再び表示され，その背景画像101において画像が入れられた額縁画像の表示位置が指定される（図６ステップ69）。
【００６０】
図10は，スマートフォン20の表示画面100の一例である。
【００６１】
上述したように，表示画面100に背景画像101が表示されている。この背景画像101において額縁画像の表示位置がタッチ・パネル35上にタッチされることにより指定される。たとえば，窓画像107の右側であり，かつ箪笥画像109の上部に表示位置が指定されると，その表示位置101が鎖線（他の表示方法でもよい）で示される。
【００６２】
背景画像101の下部には，「クリア」の文字列が表示されているクリア・ボタン116および「決定」の文字列が表示されている決定ボタン117が表示されている。クリア・ボタン116が押されると，指定された位置がクリアされる。決定ボタン117が押されると，決定した補正方法および額縁画像を飾る位置をそれぞれ示すデータがスマートフォン20から画像合成サーバ50に送信される（図６ステップ70）。
【００６３】
スマートフォン20から送信された補正方法および額縁画像を飾る位置をそれぞれ示すデータが画像合成サーバ50の通信装置56において受信される（図６ステップ88）（後述する合成画像を重畳する位置を入力するものとなる。重畳位置入力手段），見つけられた額縁画像の合成領域に，決定した補正方法で補正されたユーザ画像がＣＰＵ51によって合成され，合成画像が生成される（図６ステップ89）（合成手段）。
【００６４】
つづいて，背景画像の指定された位置に合成画像が合成され，合成画像と背景画像とのマッチング度がＣＰＵ51によって算出される（図６ステップ90）（マッチング度算出手段）。画像が入れられた額縁画像である合成画像の画像解析が行なわれ，画像解析により得られる画像解析情報と，背景画像との画像解析情報とが近似しているほど高いマッチング度となる。また，背景画像のうち，額縁画像（合成画像）の指定された位置の周り（図10であれば，鎖線110で示す位置の周り）の壁画像106の画像解析情報と，合成画像の画像解析情報とが近似しているほど高いマッチング度となるようにしてもよい。
【００６５】
算出されたマッチング度および合成画像が画像合成サーバ50からスマートフォン20に送信される（図６ステップ91）。
【００６６】
画像合成サーバ50から送信されたマッチング度および合成画像がスマートフォン20において受信されると（図６ステップ71），合成画像が重畳された背景画像にマッチング度がスマートフォン20の表示画面100に表示される（図６ステップ72）。
【００６７】
図11は，スマートフォン20の表示画面100の一例である。
【００６８】
表示画面100には，背景画像101が表示されている。この背景画像101には，指定された位置に合成画像130が合成されている。合成画像は，見つけられた額縁画像131の合成領域に補正されたユーザ画像132が合成されたものである。この合成画像130の上部にマッチング度としての点数133が表示されている。
【００６９】
背景画像101の下部には，「ＯＫ」の文字列が表示されているＯＫボタン118および「ＮＧ」の文字列が表示されているＮＧボタン119が表示されている。合成画像130がユーザの意向どおりとなっていれば，ＯＫボタン118が押される（図６ステップ73）。すると，ＯＫを示すデータがスマートフォン20から画像合成サーバ50に送信される（図６ステップ74）。合成画像130がユーザの意向どおりとなっていなければ（図６ステップ73），図５ステップ62からの処理から繰り返される。これにより，額縁画像，補正方法の再決定等が行なわれる。
【００７０】
スマートフォン20から送信されたＯＫを示すデータが画像合成サーバ50において受信されると（図６ステップ92），合成画像130のうち，額縁画像131を除いた画像（補正されたユーザ画像132）がプリンタ59によってプリントさせられる（図６ステップ93）（プリント手段）。このようにして得られたプリントが，見つけられた額縁画像によって特定される実際の額縁の中に入れられてユーザに配送される。
【００７１】
プリント（写真）が入った額縁を受け取ったユーザは，図１に示す壁５の指定した位置10に飾ることとなる。スマートフォン20においてあらかじめシミュレーションが行なわれているので，プリントが入った額縁は壁５に飾った場合に合うようになる。
【００７２】
上述の実施例において，図８に示すように，背景画像の印象カテゴリが複数表示される場合には，複数の印象カテゴリの中から所望の印象カテゴリをスマートフォン20のユーザが選択できるようにしてもよい。たとえば，吹き出し111または112がタッチされることにより，タッチされた吹き出しによって表わされている印象カテゴリが選択される。選択された印象カテゴリを表わすデータがスマートフォン20から画像合成サーバ50に送信される。印象カテゴリを表わすデータが画像合成サーバ50において受信されると，その受信したデータによって表わされる印象カテゴリが背景画像の印象カテゴリと決定される（図５ステップ83）。決定された印象カテゴリに含まれる額縁画像が見つけられることとなる（図５ステップ85）。
【００７３】
図12から図14は，他の実施例を示している。この実施例も，図２から図４に示した画像合成システムを利用できる。
【００７４】
図12は，画像合成システムの処理手順を示すフローチャートである。
【００７５】
上述のように，プリントが入った額縁を飾る場所の背景の壁がユーザによって撮影され（ステップ141），背景画像および額縁に入れるプリントを表わすユーザ画像がスマートフォン20から画像合成サーバ50に送信される（ステップ142）。
【００７６】
スマートフォン20から送信された背景画像およびユーザ画像が画像合成サーバ50において受信されると（ステップ151），ＣＰＵ51によって背景画像およびユーザ画像が解析されて背景画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性のうち，少なくとも１つの画像解析情報が背景画像およびユーザ画像のそれぞれについて検出される（ステップ152）（背景画像解析情報検出手段，画像解析情報取得手段）。これにより，額縁に入るユーザ画像の明るさ，コントラスト，彩度，色相,色バランスおよび周波数特性のユーザ画像解析情報のうち，検出された背景画像解析情報のうちの一の背景画像解析情報と同じ種類の一のユーザ画像解析情報が取得されることとなる。
【００７７】
図13は，背景画像の解析結果を示している。
【００７８】
背景画像の解析結果として，明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の画像解析情報が検出されている。しかしながら，上述したように，これらの画像解析情報のうち，少なくとも一つの画像解析情報が得られればよい。
【００７９】
検出された背景画像解析情報のうち一の背景画像解析情報と，額縁を表わす額縁画像の明るさ，コントラスト，彩度，色相，色バランスおよび周波数特性の額縁画像解析情報のうち一の背景画像解析情報と同じ種類の一の額縁画像解析情報との近似度がしきい値以上である額縁画像がＣＰＵ51によって見つけられる（ステップ153）（額縁画像検出手段）。
【００８０】
図14は，額縁画像解析情報テーブルの一例である。
【００８１】
額縁画像は，額縁No.によって識別される。額縁画像ごとに明るさ等の画像解析情報があらかじめ得られている。
【００８２】
図14に示すテーブルを利用して，たとえば，背景画像の明るさとの近似度がしきい値以上の明るさをもつ額縁画像が見つけられる。近似度は，たとえば，背景画像の解析情報に対する額縁画像の解析情報の割合とすることができ，一致すれば100％となり，背景画像の解析情報に近い解析情報をもつ額縁画像ほど近似度が高くなる。
【００８３】
図12に戻って，一のユーザ画像解析情報の値と，そのユーザ画像解析情報と同じ種類の背景画像解析情報である一の背景画像解析情報の値と，が近づく，あるいは遠ざかる補正がＣＰＵ51によって，額縁に入れられるプリントを表わすユーザ画像について行なわれる（図12ステップ154）（画像補正手段）。
【００８４】
見つけられた額縁画像に，額縁に入れられるプリントを表わすユーザ画像がＣＰＵ51によって合成され（図12ステップ155）（合成手段），合成画像が生成される。生成された合成画像は，画像合成装置50からスマートフォン20に送信される（ステップ156）。
【００８５】
合成画像がスマートフォン20において受信されると（ステップ143），背景画像に合成画像が重畳されてスマートフォン20の表示画面100に表示される（ステップ144）。合成画像がユーザの意向どおりのものであれば，上述のように，ＯＫボタンが押され，ＯＫを示すデータがスマートフォン20から画像合成サーバ50に送信される（ステップ145，146）。合成画像がユーザの意向とは違っている場合には，ＮＧボタンが押され，ステップ142からの処理が繰り返される（ステップ145）。図11に示すように，スマートフォン20の表示画面100にＯＫボタンおよびＮＧボタンが表示されるのはいうまでもない。
【００８６】
スマートフォン20から送信されたＯＫデータが画像合成サーバ50において受信されると（ステップ157），上述したのと同様に，合成画像のうち額縁画像を除いたユーザ画像がプリンタ59によってプリントされる（ステップ158）（プリンタ手段）。見つけられた額縁画像に対応する実物の額縁に，プリントが入れられてユーザに配達される。
【００８７】
上述の実施例においては，実際の額縁にプリントが入れられているが，実際の額縁の代わりに額縁を表わす画像のようにテンプレート画像に，ユーザの画像を合成するようにしてもよい。そのような場合であっても，ユーザの画像が合成される額縁画像が飾られる背景を表わす背景画像の印象のカテゴリを決定し，その決定された印象のカテゴリに含まれる額縁画像を見つけ，額縁画像に合成するユーザの画像を背景画像の印象のカテゴリごとの目標値に近づける補正を行い，補正されたユーザの画像を額縁画像に合成することができる。合成された画像が一枚にプリントされてもよい。
【符号の説明】
【００８８】
20  スマートフォン
50  画像合成サーバ
52  ＣＰＵ（背景画像印象カテゴリ決定手段，額縁画像検出手段，画像補正手段，合成手段，マッチング度算出手段，背景画像解析情報検出手段，画像解析情報取得手段）
56  通信装置（印象カテゴリ情報出力手段，補正方法出力手段，補正画像出力手段，重畳位置入力手段）
59  プリンタ（プリント手段）
【図１】
0006027581.tif 000002
【図２】
0006027581.tif 000003
【図３】
0006027581.tif 000004
【図４】
0006027581.tif 000005
【図５】
0006027581.tif 000006
【図６】
0006027581.tif 000007
【図７】
0006027581.tif 000008
【図８】
0006027581.tif 000009
【図９】
0006027581.tif 000010
【図１０】
0006027581.tif 000011
【図１１】
0006027581.tif 000012
【図１２】
0006027581.tif 000013
【図１３】
0006027581.tif 000014
【図１４】
0006027581.tif 000015