(57)【特許請求の範囲】
【請求項１】
画像を合成する画像処理システムであって、
画像合成の依頼を発し、かつ画像提供の受託先のアドレス情報を通知するとともに、画像及び画像制御情報を送信する第１の通信端末装置と、
前記画像提供の委託を受けて画像を送信する第２の通信端末装置と、
前記第１の通信端末装置から画像合成の依頼を受けるとともに、通知された前記アドレス情報を登録し、前記アドレス情報を用いて前記第２の通信端末装置に画像提供の問合せを送信し、前記第１及び第２の通信端末装置から送信された画像を受信し、前記第１の通信端末装置から送信された前記画像制御情報を用いて前記第２の通信端末装置から送信された前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置から送信された前記画像と該調整した前記画像とを用いて合成画像を作成する画像処理サーバと、
を備えることを特徴とする画像処理システム。
【請求項２】
前記画像処理サーバは、前記第１又は第２の通信端末装置から前記合成画像の修正指示を受信すると、前記第２の通信端末装置に前記第１の通信端末装置から送信された前記画像制御情報を送信することを特徴とする請求項１記載の画像処理システム。
【請求項３】
画像を合成する画像処理方法であって、
第１の通信端末装置から画像合成の依頼を受け、画像提供の受託先のアドレス情報を登録する処理と、
前記アドレス情報を用いて第２の通信端末装置に画像提供の問合せを送信する処理と、
前記第１の通信端末装置から送信された画像及び画像制御情報を受信し、且つ前記第２の通信端末装置から送信された画像を受信する処理と、
前記第１の通信端末装置より受信した前記画像制御情報を用いて前記第２の通信端末装置より受信した前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置より受信した前記画像と該調整した前記画像とを用いて合成画像を作成する処理と、
を含むことを特徴とする画像処理方法。
【請求項４】
コンピュータに複数の画像を合成させるための画像処理プログラムであって、
第１の通信端末装置から画像合成の依頼を受け、画像提供の受託先のアドレス情報を登録するステップと、
前記アドレス情報を用いて第２の通信端末装置に画像提供の問合せを送信するステップと、
前記第１の通信端末装置から送信された画像及び画像制御情報を受信し、且つ前記第２の通信端末装置から送信された画像を受信するステップと、
前記第１の通信端末装置より受信した前記画像制御情報を用いて前記第２の通信端末装置より受信した前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置より受信した前記画像と該調整した前記画像とを用いて合成画像を作成するステップと、
を含むことを特徴とする画像処理プログラム。
【請求項５】
画像を合成する画像処理装置であって、
画像合成の依頼を発し、かつ、画像提供の受託先を指定するとともに画像及び画像制御情報を送信する第１の通信端末装置、又は前記画像提供の委託を受けて画像を送信する第２の通信端末装置と通信する通信部と、
前記第１の通信端末装置から通知されたアドレス情報を登録する登録部と、
前記第１の通信端末装置から画像合成の依頼を受け、前記登録部に登録された前記アドレス情報を用いて画像提供の問合せを前記通信部より送信させ、前記第１の通信端末装置から送信された前記画像制御情報を用いて前記第２の通信端末装置から送信された前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置から送信された前記画像と該調整した前記画像とを用いて合成画像を作成する処理部と、
を備えることを特徴とする画像処理装置。
【請求項６】
画像合成に用いる画像を提供する通信端末装置であって、
前記画像合成に用いる画像を取得する画像取得部と、
画像を合成する画像処理サーバに対し、前記画像合成に必要な画像提供を受ける受託先である通信端末装置のアドレス情報を通知し、前記画像取得部で取得した前記画像と前記画像の明るさ及び／又は縮尺を調整するための画像制御情報とを送信するとともに、前記画像処理サーバで作成された合成画像を取得し、該合成画像を修正する場合に画像処理サーバに対し前記合成画像の修正指示を送信する通信部と、
を備えることを特徴とする通信端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影機能や通信機能を備える携帯端末等の通信端末装置から送信される画像合成等の画像処理に関し、その画像処理に用いられる画像処理システム、画像処理方法、画像処理プログラム、画像処理装置及び通信端末装置に関する。
【背景技術】
【０００２】
複数の画像を重ね合わせ等により単一の画像に合成させる画像合成に関し、従来、複数のユーザからの画像をサーバ上で合成する合成画像システムが知られている。この合成画像システムでは、複数のユーザが個別に持つ画像をサーバに集合させて合成させる。画像合成は、個別の画像を超えた演出や表現等が可能である。
【０００３】
この画像合成に関し、携帯電話機と、テレビ電話機と、これらと通信回線を介して接続されたサーバとから構成され、ユーザの撮影した画像がサーバで合成され、その合成画像は携帯電話機やテレビ電話機等に送信され、その合成画像を見たユーザが再度、画像を送信して再合成をサーバに行わせる合成画像システム（特許文献１）、カメラ付携帯電話機等、画像情報の取得が可能な複数の携帯電話機を用いた画像合成システムであって、携帯電話機間の通信を維持しながら通話モードから画像合成モードに切り換え、各携帯電話機上で画像合成を行うシステム（特許文献２）、背景画像を携帯電話機により回線を経由してデータベースに登録し、その背景画像に撮影画像を合成させて携帯電話機に返信する画像撮影システム（特許文献３）、画像合成サーバの記憶媒体にテンプレートデータを記憶しておき、カメラ付携帯電話機で取得した画像データを画像合成サーバに送信してテンプレートデータと合成させ、その合成画像データを携帯電話機側で取得する画像合成方法（特許文献４）等が存在している。
【特許文献１】特開２００２−１７６５４７号公報（段落番号００１０、図２等）
【特許文献２】特開２００２−１７１４９７号公報（段落番号００１８、図２等）
【特許文献３】特開２００３−２３４８３０号公報（段落番号０００４、図２）
【特許文献４】特開２００４−１４０５９０号公報（段落番号００１９、００２０、図３等）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところで、特許文献１〜４に開示されているように、複数の画像を単一の画像に合成するには、各画像を合成場所に移送して重ねる等の編集処理が必要である。撮影後に画像を合成サーバに移送する処理を行う場合には、提供された画像が合成画像の意図と合致しなければ、その提供者に再度の撮り直しを要求することになり、最適な合成画像を得るまでの処理が厄介であり、時間を要する。被写体と撮影レンズとの距離が異なる等、撮影条件が合致しなければ、提供された画像に相違が生じ、例えば、人物画像では、縮尺比率によって背丈が変わったり、体格が実際と異なる等の不都合が生じる。合成画像が実像と異なる結果となる。また、撮り直し画像が合成画像に適合しなければ、再度の撮り直しが必要となる。
【０００５】
しかしながら、特許文献１〜４には、斯かる課題についての開示や示唆はなく、それを解決する構成の開示や示唆もない。
【０００６】
そこで、本発明の目的は、画像合成に関し、画像提供側とその画像合成側との連携により、意図した画像合成を実現することにある。
【０００７】
斯かる目的を詳細に述べれば、画像提供側及びその画像合成側の画像修正を容易化し、画像合成の自由度を高めることにある。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の第１の側面は、画像を合成する画像処理システムであって、画像合成の依頼を発し、かつ画像提供の受託先のアドレス情報を通知するとともに、画像及び画像制御情報を送信する第１の通信端末装置と、前記画像提供の委託を受けて画像を送信する第２の通信端末装置と、前記第１の通信端末装置から画像合成の依頼を受けるとともに、通知された前記アドレス情報を登録し、前記アドレス情報を用いて前記第２の通信端末装置に画像提供の問合せを送信し、前記第１及び第２の通信端末装置から送信された画像を受信し、前記第１の通信端末装置から送信された前記画像制御情報を用いて前記第２の通信端末装置から送信された前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置から送信された前記画像と該調整した前記画像とを用いて合成画像を作成する画像処理サーバとを備える構成である。
【０００９】
斯かる構成において、画像合成の依頼と画像提供の受託先のアドレス情報が第１の通信端末装置から画像処理サーバに通知される。この通知を受けた画像処理サーバは、アドレスに画像提供が可能か否かの問合せを発し、第２の通信端末装置はそれに応答し、画像提供が可能な第２の通信端末装置から画像処理サーバに画像及び画像制御情報が提供される。画像合成の依頼元である第１の通信端末装置からも画像及び画像制御情報が提供される。そこで、画像処理サーバは、第１及び第２の通信端末装置から送信された画像制御情報により送信された画像の明るさ、縮尺を調整し、この調整した画像を合成して合成画像を作成する。提供される画像は、撮影された画像、撮影中の画像等、何れの画像でもよい。また、上記目的を達成するため、上記画像処理システムにおいて、前記画像処理サーバは、前記第１又は第２の通信端末装置から前記合成画像の修正指示を受信すると、前記第２の通信端末装置に前記第１の通信端末装置から送信された前記画像制御情報を送信する構成としてもよい。
【００１０】
上記目的を達成するため、本発明の第２の側面は、画像を合成する画像処理方法であって、第１の通信端末装置から画像合成の依頼を受け、画像提供の受託先のアドレス情報を登録する処理と、前記アドレス情報を用いて第２の通信端末装置に画像提供の問合せを送信する処理と、前記第１の通信端末装置から送信された画像及び画像制御情報を受信し、且つ前記第２の通信端末装置から送信された画像を受信する処理と、前記第１の通信端末装置より受信した前記画像制御情報を用いて前記第２の通信端末装置より受信した前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置より受信した前記画像と該調整した前記画像とを用いて合成画像を作成する処理とを含む構成である。既述の通り、この画像処理方法では、通信端末装置からの画像合成の依頼の発信、それを受領したことにより、画像提供の受託先にその可否を問い合わせ、画像合成に応じる通信端末装置から画像及び画像制御情報が提供され、第１の通信端末装置より受信した画像制御情報を用いて第２の通信端末装置より受信した画像の明るさ、縮尺が調整され、この調整した画像を用いて画像合成が行われる。既述したように、提供される画像は撮影中の画像だけでなく、記憶部等にある保存画像であってもよい。
【００１１】
上記目的を達成するため、本発明の第３の側面は、コンピュータに複数の画像を合成させるための画像処理プログラムであって、第１の通信端末装置から画像合成の依頼を受け、画像提供の受託先のアドレス情報を登録するステップと、前記アドレス情報を用いて第２の通信端末装置に画像提供の問合せを送信するステップと、前記第１の通信端末装置から送信された画像及び画像制御情報を受信し、且つ前記第２の通信端末装置から送信された画像を受信するステップと、前記第１の通信端末装置より受信した前記画像制御情報を用いて前記第２の通信端末装置より受信した前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置より受信した前記画像と該調整した前記画像とを用いて合成画像を作成するステップとを含む構成である。斯かる画像処理プログラムによれば、既述の画像処理方法がコンピュータの情報処理によって実現される。
【００１２】
上記目的を達成するため、本発明の第４の側面は、画像を合成する画像処理装置であって、画像合成の依頼を発し、かつ、画像提供の受託先を指定するとともに画像及び画像制御情報を送信する第１の通信端末装置、又は前記画像提供の委託を受けて画像を送信する第２の通信端末装置と通信する通信部と、前記第１の通信端末装置から通知されたアドレス情報を登録する登録部と、前記第１の通信端末装置から画像合成の依頼を受け、前記登録部に登録された前記アドレス情報を用いて画像提供の問合せを前記通信部より送信させ、前記第１の通信端末装置から送信された前記画像制御情報を用いて前記第２の通信端末装置から送信された前記画像の明るさ及び／又は縮尺を調整し、前記第１の通信端末装置から送信された前記画像と該調整した前記画像とを用いて合成画像を作成する処理部とを備える構成である。
【００１３】
斯かる構成の画像処理装置は、既述の画像処理サーバに対応している。即ち、この画像処理装置では、第１の通信端末装置から受けた画像合成の依頼と、画像合成に参加すべき第２の通信端末装置のアドレス情報の通知を受け、第２の通信端末装置に画像合成のための画像の提供の可否について問い合わせをする。そして、画像及び画像制御情報が提供され、画像を用いて画像合成が行われ、合成画像は画像制御情報により調整される。
【００１４】
上記目的を達成するため、本発明の第５の側面は、画像合成に用いる画像を提供する通信端末装置であって、前記画像合成に用いる画像を取得する画像取得部と、画像を合成する画像処理サーバに対し、前記画像合成に必要な画像提供を受ける受託先である通信端末装置のアドレス情報を通知し、前記画像取得部で取得した前記画像と前記画像の明るさ及び／又は縮尺を調整するための画像制御情報とを送信するとともに、前記画像処理サーバで作成された合成画像を取得し、該合成画像を修正する場合に画像処理サーバに対し前記合成画像の修正指示を送信する通信部とを備える構成である。
【００１５】
斯かる構成において、通信端末装置では、画像取得部により、画像合成に必要な画像を取得する。この画像取得部は、撮影により画像を取得するカメラ部の他、画像合成に必要な画像を取り込む構成であればよい。そして、この通信端末装置は、既述の第１の通信端末装置に対応するものであり、通信部は、画像合成に必要な画像提供の受託先の通信端末装置のアドレス情報を通知し、画像取得部で取得した画像及び画像制御情報を送信する。このような通信端末装置を用いることにより、既述の画像処理装置、画像処理サーバ又は画像処理システムにより、合成画像を形成し、その合成画像を画像制御情報により調整することにより、所望の合成画像を得ることができる。
【発明の効果】
【００１６】
本発明によれば、通信端末装置を通して画像及び画像制御情報の提供を受け、画像を用いて合成画像を形成できるとともに、合成画像を画像制御情報を用いて調整できるので、画像提供者の意図を反映した合成画像が得られ、それを通信端末装置に取得することができる。
【発明を実施するための最良の形態】
【００１７】
〔第１の実施の形態〕
【００１８】
本発明の第１の実施の形態に係る画像処理システムについて、図１を参照して説明する。図１は、画像処理システムの一例を示す図である。
【００１９】
図１に示すように、この画像処理システム２では、通信機能及び撮影機能を備え、画像合成の依頼側である第１の通信端末装置として、また、画像合成のための画像提供が委託される第２の通信端末装置として例えば、携帯電話機４１、４２、４３・・・４Ｎが設置されている。例えば、携帯電話機４１が画像合成の依頼を発する場合、この携帯電話機４１が第１の通信端末装置となり、他の携帯電話機４２〜４Ｎが第２の通信端末装置となる。これら携帯電話機４１、４２、４３・・・４Ｎに対して画像処理装置として例えば、画像処理サーバ６が設置され、これら携帯電話機４１、４２、４３・・・４Ｎと画像処理サーバ６とは公衆網等のネットワーク８を通じて接続されている。また、画像処理サーバ６は例えば、コンピュータで構成され、画像処理に関連する機能として例えば、ネットワーク８等を媒介とする通信機能、撮影により提供される撮影画像の保存機能、メールアドレス等のアドレス情報の登録機能、通知や問い合わせをする機能、テンプレート上に画像を合成する機能、画像の提供先に画像や撮影条件の補正情報を通知する機能等を備えている。
【００２０】
斯かる構成において、画像合成依頼者（以下単に「依頼者」と称する。）が携帯電話機４１から画像処理サーバ６に対し、画像合成の依頼、画像合成に参加するユーザのアドレス情報として例えば、携帯電話機４２、４３のメールアドレス等を通知する。画像処理サーバ６は、通知されたメールアドレスを登録するとともに、背景画像として予め用意されているテンプレートを依頼者に選択させる。また、画像処理サーバ６は、メールアドレス先にメールを送信することにより、画像合成の参加を呼びかけるとともに、画像合成に参加するか否かの問い合わせを行う。この画像合成に参加するユーザは、画像提供受託者（以下単に「受託者」と称する。）となる。このように画像合成の参加があれば、画像処理サーバ６から携帯電話機４１、４２、４３に画像表示エリアである画像表示用Ｗｅｂ（World Wide Web) 上のＵＲＬ（Uniform Resource Locator）がメール送信等により通知される。
【００２１】
撮影により画像を取得した各携帯電話機４１、４２、４３から、その画像とともに、明るさ、合焦距離等の画像制御情報が画像処理サーバ６に送信されると、画像処理サーバ６は、その画像を用いて合成画像を作成し、その合成画像は既述のＵＲＬに表示する。ＵＲＬの通知を受けた携帯電話機４１、４２、４３では、それを確認し、修正が必要な場合には、画像制御情報を用いることにより、画像処理サーバ６又は携帯電話機４１〜４Ｎで合成画像の修正等を行い、修正された合成画像が表示され、その合成画像を確定させた後、携帯電話機４１〜４Ｎに取り込むことができる。
【００２２】
このように合成画像を形成すれば、画像合成に参加したユーザが意図した合成画像や、画像制御情報により修正された統一性のある合成画像を得ることができ、合成画像では個別の画像を超える演出や表現等が可能である。
【００２３】
次に、前記画像処理システム２における携帯電話機４１〜４Ｎの構成について、図２及び図３を参照して説明する。図２は、携帯電話機の外観形態例を示す図、図３は、そのハード構成例を示すブロック図である。図２及び図３において、図１と対応箇所には、同一符号を付してある。
【００２４】
この画像処理システム２の携帯電話機４１〜４Ｎには携帯電話機４が使用され、この携帯電話機４は例えば、２つの筐体部１２、１４をヒンジ部１６で連結して開閉可能に構成され、筐体部１２には、カーソルキー、シャッター等に用いられる決定キー１７、テンキー等の複数のキーからなるキー入力部１８等が設置されている。キー入力部１８は、撮影、通信先の電話番号、ＵＲＬの入力、画像の送信のための指示等、情報入力に用いられる。また、筐体部１４には、画像取得部としてのカメラ部２０、ディスプレイ２２、インジケータ２４等が設置されている。カメラ部２０は、筐体部１４の前面部だけでなく、筐体部１４の背面側に設置されてもよく、また、双方に設置されてもよい。ディスプレイ２２は例えば、ＬＣＤ（Liquid Crystal Display）で構成され、カメラ部２０で撮影された画像やキー入力部１８からの入力情報等が表示される。インジケータ２４は例えば、ＬＥＤ（Light Emitting Diode）表示器で構成され、通信中の表示に用いられるとともに、撮影モードにおいて、所定の合焦距離に到達したことを点灯によって告知する。
【００２５】
この携帯電話機４には図３に示すように、制御部２６、記憶部２８、無線部３０、アンテナ３２等が既述のキー入力部１８、カメラ部２０、ディスプレイ２２、インジケータ２４とともに設置されている。制御部２６は例えば、ＣＰＵ（Central Processing Unit ）等で構成され、既述の通信機能、撮影機能等、画像合成のための各種処理を実行する。記憶部２８はＲＯＭ（Read-Only Memory）、ＲＡＭ（Random-Access Memory）等の記憶媒体で構成され、ＣＰＵ等の制御部２６の処理を実行するための画像処理プログラム等、各種制御プログラムが格納されているとともに、テンプレート、画像、画像情報、処理途上の情報等、既述の各種情報が格納されている。撮影途上の画像も、この記憶部２８に格納される。各種データのデータベースは、この記憶部２８で構成される。この記憶部２８は、ＲＯＭ、ＲＡＭの他、筐体部１２等に着脱可能なＲＯＭカード等の外部記録媒体で構成してもよい。
【００２６】
また、無線部３０は、ネットワーク８に接続された基地局との無線通信を行い、斯かる無線通信により、ネットワーク８を通して画像処理サーバ６との間で音声、画像、文字情報等の各種情報の授受を行う。この場合、画像処理サーバ６との画像や撮影情報の授受は例えば、電波によって実行され、その電波はアンテナ３２により送信又は受信される。
【００２７】
斯かる構成において、カメラ動作は、非通信モード又は通信モードのいずれにおいても可能であり、撮影中又は撮影後のいずれの画像も送信することができる。保存されている画像は、メール送信の例えば、添付ファイルによって送信することができる。また、送信した画像及びその撮影条件はディスプレイ２２に表示され、ユーザが確認することができる。
【００２８】
既述の画像合成に関する処理に関し、画像合成の依頼側又は受託側の処理動作は、次の通りである。
【００２９】
(1) 通信を確立させて画像処理サーバ６にアクセスし、画像処理サーバ６にあるテンプレートを選択するとともに、画像合成に参加させるユーザのメールアドレスを画像処理サーバ６に通知する。
【００３０】
(2) 画像処理サーバ６から送信される画像表示用ＷｅｂのＵＲＬを受信し、その画像表示用Ｗｅｂにアクセスする。
【００３１】
(3) 画像表示用Ｗｅｂにアクセスすると、撮影中の画像が画像処理サーバ６に送信され、撮影中の画像が周期的又は連続的に画像処理サーバ６に送信される。
【００３２】
(4) 画像表示用Ｗｅｂに表示された合成画像を取得し、その合成画像が意図した画像か否かを確認し、修正すべき場合には、調整指示を発信する。この調整には、撮影条件の変更、画像補正、画像の撮り直し等がある。
【００３３】
(5) 陽光の当たり具合等、画像の明るさや被写体の方角等の撮影条件の統一のため、画像処理サーバ６からのフィードバック指示を受信する。また、被写体の大きさ、縮尺等の撮影条件についても、画像処理サーバ６からのフィードバック指示を受信する。
【００３４】
(6) 依頼者又は受託者は、合成画像の確認後、キー入力部１８に存在する決定キー１７に割り当てられたシャッターを押下することにより、合成画像を確定させることができる。
【００３５】
(7) 確定させた合成画像は、携帯電話機４のディスプレイ２２に表示されるとともに、キー入力部１８の決定キー１７の押下により、記憶部２８に保存される。
【００３６】
次に、前記画像処理システム２における画像処理サーバ６について、図４を参照して説明する。図４は、画像処理サーバ６のハード構成例を示すブロック図である。図４において、図１と同一部分には、同一符号を付してある。
【００３７】
この画像処理サーバ６は通信機能を備えるコンピュータで構成されており、例えば、制御部３４、記憶部３６及びネットワーク部３８等が備えられている。制御部３４は例えば、ＣＰＵ等で構成され、画像合成に関連する機能として例えば、ネットワーク８等を媒介とする通信機能、撮影により提供される撮影画像の蓄積機能、メールアドレス等のアドレス情報の登録機能、通知や問い合わせをする機能、テンプレート上に画像を合成する機能、画像の提供先に画像や撮影条件の補正情報を通知する機能、既述の画像表示用Ｗｅｂに画像を表示する機能、そのＵＲＬの通知機能等を備える。即ち、制御部３４は画像合成や合成画像の調整等の画像処理を実行する画像処理部を構成している。
【００３８】
記憶部３６はＲＯＭ、ＲＡＭ等の記憶媒体で構成され、ＣＰＵ等の制御部３４の処理を実行するための画像処理プログラム等、各種制御プログラムが格納されているとともに、テンプレート、画像、画像情報、処理途上の情報、画像提供の受託先であるメールアドレス等、既述の各種情報が格納されている。即ち、記憶部３６はアドレス情報を登録する登録部を構成する。各種データのデータベースは、この記憶部３６で構成される。この記憶部３６は、ＲＯＭ、ＲＡＭの他、着脱可能なＲＯＭカード等の外部記録媒体で構成してもよい。また、ネットワーク部３８は、既述のネットワーク８と接続され、制御部３４による制御によって通信機能を実行し、既述の携帯電話機４１〜４Ｎとの情報の授受を行う。
【００３９】
既述の画像合成に関し、画像処理サーバ６側の画像処理は次の通りである。
【００４０】
(1) 背景画像として画像合成に用いられるテンプレートが選択される。
【００４１】
(2) 画像合成の受託者として例えば、携帯電話機４１から通知されたメールアドレスを登録部を構成する記憶部３６に登録する。
【００４２】
(3) 画像表示用Ｗｅｂを表すＵＲＬを依頼者及び受託者に送信する。
【００４３】
(4) 開設した画像表示用Ｗｅｂに対し、通知されたメールアドレスに対応する携帯電話機４からのアクセスを許可するとともに、携帯電話機４の撮影中の画像を携帯電話機４から取り込む。この場合、撮影中の画像は周期的又は連続的に取り込む。
【００４４】
(5) 受信した各画像をテンプレートに合成し、合成画像を形成する。
【００４５】
(6) 画像表示用Ｗｅｂに合成画像を表示し、メールアドレスに対応する携帯電話機４からのアクセスにより、画像修正等の調整依頼を受け付けるとともに、修正された合成画像を表示する。
【００４６】
(7) 撮影条件の変更をフィードバック指示として携帯電話機４に通知する。
【００４７】
(8) 合成画像の確定指示を受け、確定した合成画像を画像表示用Ｗｅｂに表示する。
【００４８】
次に、携帯電話機（依頼者側）画像処理方法について、図５を参照して説明する。図５は、携帯電話機（依頼者）の画像処理プログラムの処理手順を示すフローチャートである。
【００４９】
携帯電話機４１（図１）のユーザが依頼者となる場合を想定する。この場合、携帯電話機４１から画像処理サーバ６に画像合成の処理が要請される。
【００５０】
そこで、携帯電話機４１と画像処理サーバ６との通信をネットワーク８を通じて確立させ、画像処理サーバ６にアクセスすることにより、画像処理サーバ６上にある数種の背景情報として例えば、テンプレート５０（図１０）を選択する（ステップＳ１）。この場合、撮影の受託先のメールアドレスを画像処理サーバ６に通知し、登録する（ステップＳ２）。このメールアドレスには、依頼者のアドレスを含んでもよい。
【００５１】
このメールアドレスに対し、画像処理サーバ６から撮影をすること（画像合成に参加すること）が要請され、問合せ結果が受託者の例えば、携帯電話機４２等から依頼者の携帯電話機４１に通知される。そこで、問合せ先が撮影することを許容したか否かが確認され（ステップＳ３）、登録されたメールアドレスの問合せ先の全てが撮影を許容しない場合（拒否した場合）には（ステップＳ３のＮＯ）、この画像合成の処理を終了する。また、メールアドレスの問合せ先が撮影を許容した場合には（ステップＳ３のＹＥＳ）、撮影の受託者（画像提供者）となる。そして、画像処理サーバ６から画像合成を終了することを表す終了信号を受信しているか否かが確認され（ステップＳ４）、終了信号を受信している場合には（ステップＳ４のＹＥＳ）、この画像合成の処理を終了する。また、この終了信号を受信していない場合には（ステップＳ４のＮＯ）、画像合成の処理が続行されるので、携帯電話機４１は、画像処理サーバ６から通知される画像表示用ＷｅｂのＵＲＬを受信し（ステップＳ５）、これを登録する。
【００５２】
そこで、携帯電話機４１では、カメラ部２０の位置、被写体の位置、明るさ等を調整後、撮影をする（ステップＳ６）。この撮影によって取得した画像とともに、画像制御情報として、画像の明るさ、合焦距離等の撮影情報を画像処理サーバ６に送信する（ステップＳ７）。同様に、撮影を許容している携帯電話機４２等からの画像及び撮影情報が通知され、テンプレートにこれらの画像を重ね合わす画像合成が行われ、その合成画像が画像表示用Ｗｅｂに表示される。
【００５３】
そして、携帯電話機４１側では、画像表示用Ｗｅｂに表示された合成画像を許可するか否かを確認し（ステップＳ８）、その画像を修正する場合には（ステップＳ８のＮＯ）、ステップＳ６、Ｓ７の処理を再度行い、画像処理サーバ６に、画像表示用Ｗｅｂに表示された画像を修正させる。その画像表示用Ｗｅｂに表示された合成画像を許可する場合には（ステップＳ８のＹＥＳ）、画像処理サーバ６に許可信号としてＯＫ信号を送信する（ステップＳ９）。このＯＫ信号を受信した画像処理サーバ６は、表示している画像を固定する。そこで、画像表示用Ｗｅｂに表示されている画像を携帯電話機４１に保存する（ステップＳ１０）。この保存により、画像合成が完了する。そこで、依頼者は携帯電話機４１を通じて画像処理サーバ６に既述の終了信号を送信する（ステップＳ１１）。これを受けて画像処理サーバ６側では画像合成処理を終了する。
【００５４】
次に、画像処理サーバ６の画像処理方法について、図６を参照して説明する。図６は、画像処理サーバ６の画像処理プログラムの処理手順を示すフローチャートである。
【００５５】
画像処理サーバ６では、依頼者からの画像合成の依頼、問合せ先のメールアドレス、テンプレートの選択、画像及び撮影条件等の撮影情報、終了信号等の受信、登録されたメールアドレスに対する問合せ、受託者から画像及び撮影情報、終了信号等の受信、画像合成及びその表示等が行われる。
【００５６】
そこで、画像処理サーバ６では、依頼者によってテンプレート５０（図１０）が選択される（ステップＳ２１）。このテンプレートの選択の後、依頼者から送信された受託先のメールアドレスを受信し、登録する（ステップＳ２２）。依頼者から撮影依頼があったことをメールアドレス先に通知する（ステップＳ２３）。
【００５７】
画像処理サーバ６は、撮影依頼の通知に対し、受託者による撮影を許容したか否かを確認する（ステップＳ２４）。撮影が許容された場合には（ステップＳ２４のＹＥＳ）、受託者及び依頼者から画像とともに、その画像の明るさ、合焦距離等の撮影情報を受信する（ステップＳ２５）。
【００５８】
画像処理サーバ６では、依頼者から通知された画像の明るさ、合焦距離等の撮影条件に基づき、受託者からの画像を補正する（ステップＳ２６）。即ち、依頼者及び受託者の画像がテンプレートに嵌め込まれて合成画像が形成され、その合成画像が画像処理サーバ６の画像表示用Ｗｅｂに表示される（ステップＳ２７）。
【００５９】
画像表示用Ｗｅｂに表示された合成画像は、依頼者及び受託者によってアクセスされて確認され、それを受けるか否かが依頼者及び受託者によって判断される。依頼者及び受託者がその画像を受け入れた場合には、その画像を固定する指示として許可信号（ＯＫ信号）が発せられるので、画像処理サーバ６では、依頼者及び受託者の全員からＯＫ信号を受信したか否かが監視される（ステップＳ２８）。ＯＫ信号を受信していない場合には（ステップＳ２８のＮＯ）、ＯＫ信号を受信するまでステップＳ２６、Ｓ２７の処理が繰り返される。この結果、依頼者及び受託者の全員が受け入れる合成画像が形成され、画像表示用Ｗｅｂに表示されることになる。そして、依頼者及び受託者の全員のＯＫ信号を受信した場合には（ステップＳ２８のＹＥＳ）、同様に全員からの終了信号を受信したか否かが確認され（ステップＳ２９）、全員からの終了信号を受信するまで待機し（ステップＳ２９のＮＯ）、全員からの終了信号を受信した場合には（ステップＳ２９のＹＥＳ）、この処理を終了する。
【００６０】
また、メールアドレス先に撮影依頼をした場合に、受託者の全員が撮影を許容しない場合には（ステップＳ２４のＮＯ）、依頼者及び受託者に終了信号を送信し（ステップＳ３０）、同様に画像合成処理を終了する。
【００６１】
次に、携帯電話機（受託者側）の画像処理方法について、図７を参照して説明する。図７は、携帯電話機（受託者）の画像処理プログラムの処理手順を示すフローチャートである。
【００６２】
この場合、携帯電話機４２〜４Ｎのユーザが受託者となる場合、説明を容易にするため、携帯電話機４２を例に取って説明する。
【００６３】
携帯電話機４２は、画像処理サーバ６から撮影依頼の通知を受信する（ステップＳ３１）。この撮影依頼の通知を受け、撮影することを許容するか否かを判断し（ステップＳ３２）、撮影を許容する場合には（ステップＳ３２のＹＥＳ）、画像処理サーバ６に撮影を許容したことを通知する（ステップＳ３３）。この通知の後、画像処理サーバ６から終了信号を受信したか否かを判定し（ステップＳ３４）、終了信号を受信していない場合には（ステップＳ３４のＮＯ）、画像処理サーバ６から画像表示用ＷｅｂのＵＲＬを受信する（ステップＳ３５）。
【００６４】
そこで、携帯電話機４２では、カメラ部２０の位置、被写体の位置、明るさ等の撮影条件を調整後、撮影する（ステップＳ３６）。この撮影によって取得した画像とともに、その画像の明るさ、合焦距離等の撮影条件を表す撮影情報を画像処理サーバ６に送信する（ステップＳ３７）。
【００６５】
既述の通り、画像処理サーバ６では、携帯電話機４２からの画像とともに撮影情報が通知され、同様に、携帯電話機４１、撮影を許容している携帯電話機４３等からの画像及び情報が通知され、テンプレートにこれらの画像を重ね合わす画像合成が行われ、その合成画像が画像表示用Ｗｅｂに表示される。画像調整の処理は既述の通りである。
【００６６】
携帯電話機４２では、画像表示用Ｗｅｂに表示された合成画像の良否を確認し（ステップＳ３８）、合成画像を修正する場合には（ステップＳ３８のＮＯ）、ステップＳ３６、Ｓ３７の処理を繰り返して合成画像を画像処理サーバ６に修正させる。そして、合成画像を許可する場合には（ステップＳ３８のＹＥＳ）、携帯電話機４２から画像処理サーバ６に画像固定指示としてのＯＫ信号を送信する（ステップＳ３９）。このＯＫ信号は携帯電話機４２のキー入力部１８の例えば、決定キー１７の押下により発せられ、画像処理サーバ６に通知される。
【００６７】
画像表示用Ｗｅｂに表示された合成画像は、保存操作により携帯電話機４２に保存される（ステップＳ４０）。この画像保存は受託者の任意であるが、画像処理を終了する場合、携帯電話機４２から画像処理サーバ６に終了信号を送信し（ステップＳ４１）、この画像処理を終了する。
【００６８】
また、撮影を許容しない場合には（ステップＳ３２のＮＯ）、携帯電話機４２から画像処理サーバ６に撮影拒否が通知され（ステップＳ４２）、同様にこの画像処理を終了する。
【００６９】
次に、画像処理方法について、図８を参照して説明する。図８は、画像処理サーバ及び各携帯電話機の画像合成の処理シーケンスを示す図である。図８において、図１と対応する部分には同一符号を付してある。
【００７０】
この処理シーケンスでは、携帯電話機４１を依頼者、携帯電話機４２〜４Ｎを受託者として説明する。
【００７１】
この場合、携帯電話機４１から画像処理サーバ６に対し、テンプレート選択（ステップＳ１０１）、受託者メールアドレスの通知（ステップＳ１０２）が行われ、メールアドレスの通知を受けた画像処理サーバ６から携帯電話機４２〜４Ｎに対し、撮影依頼（ステップＳ１０３）をする。撮影依頼を許容した携帯電話機４２〜４Ｎの全部又はいずれかから画像処理サーバ６に対し、撮影受託（ステップＳ１０４）の通知が発せられる。この通知を受け、画像処理サーバ６から携帯電話機４１に対し、撮影受託のあった旨の通知とともに、画像表示用ＷｅｂのＵＲＬ通知（ステップＳ１０５）、同様に、携帯電話機４２〜４Ｎに対し、画像表示用ＷｅｂのＵＲＬ通知（ステップＳ１０６）が発せられる。
【００７２】
携帯電話機４１では、撮影（ステップＳ１０７）が行われ、画像、その画像の明るさ情報、合焦距離等の撮影情報が画像処理サーバ６に送信される（ステップＳ１０８、Ｓ１０９、Ｓ１１０）。また、受託者側の携帯電話機４２〜４Ｎでも、撮影（ステップＳ１１１）が行われ、画像、その画像の明るさ情報、合焦距離等の撮影情報が画像処理サーバ６に送信される（ステップＳ１１２、Ｓ１１３、Ｓ１１４）。
【００７３】
このような画像や撮影情報を受けた画像処理サーバ６では、画像補正及び画像合成（ステップＳ１１５）が行われ、合成画像が画像表示用Ｗｅｂに表示される（ステップＳ１１６）。この表示画像は、携帯電話機４１、携帯電話機４２〜４Ｎで確認することができる。そこで、携帯電話機４１では、画像表示用Ｗｅｂに表示された合成画像が良いか否かの判断が行われ（ステップＳ１１７）、同様に、携帯電話機４２〜４Ｎでも、その判断が行われ（ステップＳ１１８）、その画像に修正が必要な場合には携帯電話機４１〜４Ｎ、画像処理サーバ６で画像修正を行い、また、その画像に修正が不要な場合には、携帯電話機４１からＯＫ信号が画像処理サーバ６に通知され（ステップＳ１１９）、同様に、携帯電話機４２〜４ＮからＯＫ信号が画像処理サーバ６に通知される（ステップＳ１２０）。
【００７４】
携帯電話機４１、携帯電話機４２〜４Ｎでは、画像保存（ステップＳ１２１、Ｓ１２２）が行われ、それぞれ終了信号が画像処理サーバ６に対して発せられる（ステップＳ１２３、Ｓ１２４）。画像処理サーバ６では、全員からのＯＫ信号の受信を監視し（ステップＳ１２５）、ＯＫ信号を受信した後、終了信号の受信を監視し（ステップＳ１２６）、終了信号の受信により、画像合成処理を終了する。
【００７５】
次に、画像処理サーバの画像補正について、図９を参照して説明する。図９は、画像補正の処理シーケンスを示す図である。
【００７６】
この場合、依頼者の携帯電話機４１からの情報が基準であり、受託者の携帯電話機４２〜４Ｎからの情報が非基準となっている。携帯電話機４１の撮影（ステップＳ２０１）、携帯電話機４２〜４Ｎの撮影（ステップＳ２０２）が行われ、携帯電話機４１から画像処理サーバ６に対し、画像を表す画像データＡ、撮影情報としての明るさ情報Ａ、合焦距離Ａが送信され（ステップＳ２０３、Ｓ２０４、Ｓ２０５）、同様に、携帯電話機４２〜４Ｎから画像処理サーバ６に対し、画像を表す画像データＢ、撮影情報としての明るさ情報Ｂ、合焦距離Ｂが送信される（ステップＳ２０６、Ｓ２０７、Ｓ２０８）。
【００７７】
画像処理装置としての画像処理サーバ６では、明るさ情報Ａ、Ｂにより、画像データＢの明るさを調整し（ステップＳ２０９）、合焦距離Ａ、Ｂにより、画像データＢの縮尺を補正し（ステップＳ２１０）、テンプレートの大きさに画像データＡ、Ｂの縮尺を補正し（ステップＳ２１１）、テンプレートの決められた位置に補正済みの画像データＡ、Ｂを配置し（ステップＳ２１２）、合成画像を画像表示用Ｗｅｂに表示する（ステップＳ２１３）。
【００７８】
次に、画像合成について、図１０、図１１、図１２及び図１３を参照して説明する。図１０は、画像合成例を示す図、図１１、図１２及び図１３は、他の画像合成例を示す図である。
【００７９】
画像合成では、携帯電話機４１（依頼者）と画像処理サーバ６との通信により、図１０の（Ａ）に示すように、テンプレート５０が選択され、携帯電話機４１から撮影中の画像５１とともに、合焦距離、明るさ等の撮影情報が画像処理サーバ６に通知される。同様に、受託者はそれぞれの携帯電話機４２、４３と画像処理サーバ６との通信により、携帯電話機４２から撮影中の画像５２、携帯電話機４３から撮影中の画像５３とともに、合焦距離、明るさ等の撮影情報が画像処理サーバ６に通知される。
【００８０】
画像処理サーバ６では、図１０の（Ｂ）に示すように、例えば、画像５１に付随する撮影情報を基準に画像５２、５３の縮尺が行われるとともに、テンプレート５０の大きさに対応して画像５１〜５３の縮尺補正が行われ、図１０の（Ｃ）に示すように、決められた位置に各画像５１〜５３の配置が修正された後、図１０の（Ｄ）に示すように、テンプレート５０上に各画像５１、５２、５３が合成され、合成画像５５が得られる。この合成画像５５は既述の画像表示用Ｗｅｂ即ち、画像処理サーバ６及び合成画像のネットワーク８上の存在位置を表すＵＲＬに表示される。この合成画像５５は、画像合成に参加している携帯電話機４１、４２、４３からのアクセスにより確認される。
【００８１】
ところで、縮尺補正等の画像調整は、携帯電話機４１、４２、４３と画像処理サーバ６との通信により、合成画像５５を確認し、携帯電話機４２、４３側で行ってもよく、携帯電話機４２、４３から再送させてもよい。即ち、依頼者の画像５１を基準に受託者側の画像５２、５３を補正させ、あるいは、撮り直し画像の送信を要請し、例えば、合焦距離を補正する。この場合、画像処理サーバ６では画像の拡大又は縮小させて大きさの整合性を取るようにしてもよい。
【００８２】
同様に、この合成画像５５は、既述の画像表示用Ｗｅｂ即ち、画像処理サーバ６及び合成画像のネットワーク８上の存在位置を表すＵＲＬに展開され、その画像確認に基づき、依頼者又は受託者がその合成画像５５を了承した場合には、その旨の通知により、合成画像５５を固定し、登録する。そして、その合成画像５５は、ＵＲＬから各携帯電話機４１、４２、４３に取り込むことが可能である。
【００８３】
このように撮影中の画像５１〜５３を補正して合成できるので、画像合成に参加したユーザは意図した合成画像、統一性のある合成画像５５が得られる等、個別の画像を超える演出や表現等が可能である。合成画像５５には、実画像である画像５１〜５３とは異なるものの、実画像に近い画像が得られる。この場合、合焦距離を補正する場合を説明したが、明るさや画像上の人物像のみの抽出等のトリミング制御を実行するようにしてもよい。また、基準画像は、依頼者側に固定されることはなく、受託者側の画像であってもよいことは勿論である。
【００８４】
また、図１１の（Ａ）に示すように、画像処理サーバ６では、テンプレート６０が選択されるとともに、携帯電話機４１から画像６１が送信され、例えば、携帯電話機４２から画像６２、携帯電話機４３から画像６３が送信された場合には、画像合成及びその補正処理では、図１１の（Ｂ）に示すように、画像６１を基準にして他の画像６２、６３の明るさの調整が行われた後、図１１の（Ｃ）に示すように、テンプレート６０に合致するように画像６１、６２、６３の縮尺補正が行われる。そして、図１１の（Ｄ）に示すように、テンプレート６０の決められた位置に補正済みの画像６１、６２、６３が配置され、図１１の（Ｅ）に示すように、テンプレート６０に補正後の画像６１、６２、６３が合成され、合成画像６５が得られる。この結果、この合成画像６５は、テンプレート６０に合致し、統一性のある画像になる。そして、この合成画像６５が画像表示用Ｗｅｂに表示される。
【００８５】
また、図１２の（Ａ）に示すように、画像処理サーバ６では、テンプレート７０が選択されるとともに、携帯電話機４１から画像７１が送信され、例えば、携帯電話機４２から画像７２が送信された場合には、画像合成及びその補正処理では、図１２の（Ｂ）に示すように、テンプレート７０に合致するように画像７１、７２の縮尺補正が行われた後、図１２の（Ｃ）に示すように、テンプレート７０に補正後の画像７１、７２が所定位置に配置されて合成され、合成画像７５が得られる。この合成画像７５は、テンプレート７０に合致し、統一性のある画像となっている。この合成画像７５が画像表示用Ｗｅｂに表示される。
【００８６】
また、テンプレートには、種々の形態のものを用いることができる。この場合、図１３の（Ａ）に示すように、４分割表示のテンプレート８０が選択され、携帯電話機４１から画像８１が送信され、例えば、携帯電話機４２から画像８２、携帯電話機４３から画像８３、携帯電話機４４から画像８４が送信された場合には、画像合成及びその補正処理では、図１３の（Ｂ）に示すように、テンプレート８０に合致するように画像８１、８２、８３、８４の縮尺補正とともに、決められた位置に各画像８１〜８４が配置された後、これらの画像８１〜８４がテンプレート８０に合成され、図１３の（Ｃ）に示すように、合成画像８５が得られる。この合成画像８５は、テンプレート８０に合致し、統一性のある画像となっている。この合成画像８５が画像表示用Ｗｅｂに表示される。
【００８７】
次に、携帯電話機側のディスプレイ表示について、図１４〜図１７を参照して説明する。図１４は、画像合成の依頼時のディスプレイ表示を示す図、図１５は、画像合成の参加を呼びかけるディスプレイ表示を示す図、図１６は、ＵＲＬの通知時のディスプレイ表示を示す図、図１７は、合成画像の修正確認時のディスプレイ表示を示す図である。
【００８８】
画像合成の依頼を例えば、携帯電話機４１から画像処理サーバ６に発する場合、ディスプレイ２２には、画像合成の依頼メッセージ及び入力又は電話帳から検索されたメールアドレスが表示される。その表示は、図１４に示すように、
「画像合成を依頼します。
次のメールアドレスに問合せをお願いします。
１．ＸＸＸＸＸＸＸＸｎｅ．ｊｐ
２．ＸＸＸＸＸＸＸＸｎｅ．ｊｐ
３．ＸＸＸＸＸＸＸＸｎｅ．ｊｐ
・
・
・                              」
が表示され、これが画像処理サーバ６に通知される。
【００８９】
この問合せに対し、受託者側の例えば、携帯電話機４２には、依頼者名の通知とともに、画像処理サーバ６から画像合成の参加の問合せが発せられ、そのディスプレイ２２には、図１５に示すように、
「○○様から画像合成に用いる画像の撮影の依頼がありました。
１．許容する
２．許容しない                                          」
が表示される。「許容する」を選択すれば、これを契機に画像合成の処理が開始されることになる。
【００９０】
そして、画像合成が開始されると、依頼者及び受託者には、画像合成の開始通知とともに、画像表示用ＷｅｂのＵＲＬの通知が発せられる。即ち、携帯電話機４１、４２のディスプレイ２２には、図１６に示すように、
「画像合成を開始します。
下記の画像表示用ＷｅｂのＵＲＬにアクセスして下さい。
ｈｔｔｐ：／／・・・・・ｎｅ．ｊｐ／・・・／・・・／    」
が表示される。
【００９１】
また、画像合成の結果、合成画像の確認が可能になった時点から所定時間が経過した後、画像処理サーバ６から合成画像の修正についての問合せが発せられる。この場合、携帯電話機４１、４２のディスプレイ２２には、図１７に示すように、
「画像合成用Ｗｅｂに表示された画像を修正しますか？
１．修正する
２．修正しない                                  」
が表示される。画像を修正する場合には「修正する」を選択し、画像を修正しない場合には「修正しない」を選択する。画像を修正しない場合には、決定キー１７に割り当てられたシャッターを押下することにより、合成画像が撮影され、記憶部２８に取り込まれる。この場合、決定キー１７と別にシャッターキーを設け、それを押下してもよい。
【００９２】
以上の通り、ディスプレイ表示に従って画像合成の処理を手順通りに実行することができ、容易に所望の合成画像を形成し、取り込むことができる。
【００９３】
以上述べた第１の実施の形態について、斯かる画像処理では、画像処理サーバ６上で複数の携帯電話機４１〜４Ｎで撮影された画像を合成するため、ユーザにとって合成処理作業が簡略化される。また、画像確定する前（即ち、撮影前）に合成画像５５、６５、７５、８５が依頼者又は受託者の携帯電話機４１〜４Ｎに表示されるので、撮影対象や画像を容易に調整することができ、なおかつユーザが満足する画像を撮影することができる。
【００９４】
このような処理結果について、より詳細に述べれば、各携帯電話機４１〜４Ｎから送られてくるリアルタイム画像を画像処理サーバ６上で合成し、その合成画像を各携帯電話機４１〜４Ｎに配信する。各携帯電話機４１〜４Ｎのユーザは、合成画像を確認後、それを保存する。また、画像合成において、明るさや方角等（例えば、陽光の当たり具合）の統一化のために、画像処理サーバ６から各携帯電話機４１〜４Ｎに情報のフィードバックを行い、これを用いて画像修正をすれば、合成画像のために集合させた画像全体に統一感が得られる。また、被写体の大きさを実際の縮尺にするため、同様に、画像処理サーバ６から情報のフィードバックを行う。これらにより、現実の撮影画像と同等の合成写真が得られる。画像処理サーバ６からのフィードバック処理は、画像処理サーバ６側に一定の情報として演出情報例えば、太陽が撮影画像の右手から当たっている等の情報や、被写体の身長の情報等を与えることにより、これらを参照して画像補正をする構成としてもよい。以上により、各携帯電話機４１〜４Ｎから送られる画像を画像処理サーバ６を中継基地として画像修正を行うので、各ユーザの要望を取り入れることができ、その要望に沿った画像修正が容易にでき、より現実に近い合成画像が得られる。
【００９５】
第１の実施の形態について、画像処理の利点を列挙すれば、次の通りである。
【００９６】
(1) 提供された複数の画像から合成画像を得ることができ、得るべき合成画像に応じて提供画像を補正するので、合成画像の最適化を図ることができる。
【００９７】
(2) 合成画像に応じて画像提供側に画像制御情報を付与することにより、提供画像の合焦距離、画像明度、色彩等を制御するので、各画像に協調性が得られ、統一性のある合成画像を得られる。
【００９８】
〔第２の実施の形態〕
【００９９】
次に、第２の実施の形態に係る画像処理方法について、図１８を参照して説明する。図１８は、合成画像の明るさ調整の処理シーケンスを示す図である。図１８において、図１と対応する部分には同一符号を付してある。
【０１００】
この実施の形態にあっては、図１に示す画像処理システム、図２及び図３に示す携帯電話機、図４に示す画像処理サーバ等を使用するとともに、携帯電話機４１からの画像を基準にし、他の携帯電話機４２（〜４Ｎ）側の画像の明るさを調整することにより、合成画像の明るさの統一性を実現している。
【０１０１】
携帯電話機４１の撮影（ステップＳ３０１）、携帯電話機４２の撮影（ステップＳ３０２）により、携帯電話機４１から画像データＡとともに、明るさ情報Ａ及び合焦距離Ａが基準データとして画像処理サーバ６に送信され（ステップＳ３０３、Ｓ３０４、Ｓ３０５）、携帯電話機４２から画像データＢとともに、明るさ情報Ｂ及び合焦距離Ｂが画像処理サーバ６に送信される（ステップＳ３０６、Ｓ３０７、Ｓ３０８）。
【０１０２】
画像処理サーバ６では、画像データ合成が行われ（ステップＳ３０９）、その合成画像を表す画像データが画像表示用Ｗｅｂに表示される（ステップＳ３１０）。この合成画像は、携帯電話機４１、４２のアクセスにより閲覧が可能であり、合成画像を修正する場合には、画像処理サーバ６から基準データである明るさ情報Ａ、合焦距離Ａが携帯電話機４２に送信される（ステップＳ３１１）。携帯電話機４２側では、画像調整処理として明るさ調整が実行され（ステップＳ３１２）、この明るさ調整処理では、基準となる明るさ情報Ａと前回撮影時の明るさ情報Ｂとの差分を計算し、次回撮影時の明るさを調整する。この明るさ調整の後、ディスプレイ２２には明るさが調整されたことが表示される（ステップＳ３１３）。この明るさを確認した後、ステップＳ３０２に戻り、シャッターキーを押下することにより、撮影が行われる。
【０１０３】
〔第３の実施の形態〕
【０１０４】
次に、第３の実施の形態に係る画像処理方法について、図１９を参照して説明する。図１９は、合成画像の合焦距離の処理シーケンスを示す図である。図１９において、図１と対応する部分には同一符号を付してある。
【０１０５】
この実施の形態にあっては、図１に示す画像処理システム、図２及び図３に示す携帯電話機、図４に示す画像処理サーバ等を使用するとともに、携帯電話機４１からの合焦距離を基準にし、他の携帯電話機４２（〜４Ｎ）側の合焦距離を調整することにより、合成画像の統一性を実現している。
【０１０６】
携帯電話機４１の撮影（ステップＳ４０１）、携帯電話機４２の撮影（ステップＳ４０２）により、携帯電話機４１から画像データＡとともに、明るさ情報Ａ及び合焦距離Ａが基準データとして画像処理サーバ６に送信され（ステップＳ４０３、Ｓ４０４、Ｓ４０５）、携帯電話機４２から画像データＢとともに、明るさ情報Ｂ及び合焦距離Ｂが画像処理サーバ６に送信される（ステップＳ４０６、Ｓ４０７、Ｓ４０８）。
【０１０７】
画像処理サーバ６では、画像データ合成が行われ（ステップＳ４０９）、その合成画像を表す画像データが画像表示用Ｗｅｂに表示される（ステップＳ４１０）。この合成画像は、携帯電話機４１、４２のアクセスにより閲覧が可能であり、合成画像を修正する場合には、画像処理サーバ６から基準データである明るさ情報Ａ、合焦距離Ａが携帯電話機４２に送信される（ステップＳ４１１）。携帯電話機４２側では、画像調整処理として合焦距離の調整処理（ステップＳ４１２〜Ｓ４１６）が行われる。
【０１０８】
この合焦距離の調整処理では、基準となる合焦距離Ａと前回撮影時の合焦距離Ｂとの差分が演算されてディスプレイ２２に表示され（ステップＳ４１２）、ディスプレイ２２に表示された距離差分に基づいて撮影者であるユーザが移動し（ステップＳ４１３）、被写体との距離を変更する。そして、画像から移動後の合焦距離が算出され（ステップＳ４１４）、基準の合焦距離Ａと移動後の合焦距離が等しいか否かが判定され（ステップＳ４１５）、合焦距離が等しい場合には、インジケータ２４を点灯させ（ステップＳ４１６）、また、合焦距離が合致したことを告知する。
【０１０９】
合焦距離が合致しない場合には、基準となる合焦距離Ａと移動後の合焦距離との差分がディスプレイ２２に表示され（ステップＳ４１７）、ステップＳ４１３に移行し、携帯電話機４２による撮影者が移動する。このような処理及び動作を合焦距離が合致するまで繰り返し、インジケータ２４が点灯（ステップＳ４１６）した位置でシャッターキーを押下することにより、最適な合焦位置で撮影が行われる（ステップＳ４０２）。この画像及び撮影情報が画像処理サーバ６に送信される。
【０１１０】
〔第４の実施の形態〕
【０１１１】
本発明の第４の実施の形態に係る画像処理システムについて、図２０を参照して説明する。図２０は、他の画像処理システムを示す図である。
【０１１２】
この画像処理システム２では、画像合成に用いる画像を提供する通信端末装置として例えば、パーソナルコンピュータ（ＰＣ）９１、携帯電話機９２、携帯情報端末機（ＰＤＡ：Personal Digital Assistant）９３、ディジタルカメラ９４等が用いられている。ＰＣ９１、携帯電話機９２及びＰＤＡ９３は通信機能とともに撮影機能を備え、また、ディジタルカメラ９４は通信機能を備えている。
【０１１３】
斯かる構成によっても、第１〜第３の実施の形態で説明した通り、通信端末装置からの画像合成の呼びかけに対し、登録されたアドレス先の通信端末装置に画像処理サーバ６から撮影の問合せを行い、選択されたテンプレートに複数の画像を合成させ、その合成画像の各種の調整を行うことが可能である。よって、画像の受託先は、通信機能及び画像提供機能を備えていればよく、携帯電話機に限定されるものではない。
【０１１４】
〔他の実施の形態〕
【０１１５】
(1) 上記実施の形態では、画像を修正するための情報として、明るさ、合焦距離を画像制御情報に用いたが、色の濃さ、画像サイズ、ズーム情報、画質等を画像制御情報に用いてもよい。
【０１１６】
(2) 上記実施の形態では、携帯電話機４１を基準にし、他の携帯電話機４２〜４Ｎを非基準に設定することにより、画像調整を行っているが、基準とすべき通信端末装置は、携帯電話機４１以外のものを設定してもよい。
【０１１７】
(3) 上記実施の形態では、撮影中の画像を取り込んで合成画像を形成しているが、撮影後の画像や撮影以外の画像を用いて合成画像を形成する構成としてもよい。
【０１１８】
(4) 上記実施の形態では、通信端末装置と画像処理サーバ６とをネットワーク８で連携させているが、ネットワーク８は、公衆回線網以外のプライベートなネットワークでもよく、有線、無線のいずれであってもよい。通信媒体には、Bluetooth 規格の電波を用いてもよい。
【０１１９】
次に、以上述べた本発明の画像処理システム、画像処理方法、画像処理プログラム、画像処理装置及び通信端末装置の上記実施の形態から抽出される技術的思想を請求項の記載形式に準じて付記として列挙する。本発明に係る技術的思想は上位概念から下位概念まで、様々なレベルやバリエーションにより把握できるものであり、以下の付記に本発明が限定されるものではない。
【０１２０】
（付記１）  画像を合成する画像処理システムであって、
画像合成の依頼を発し、かつ画像提供の受託先のアドレス情報を通知する第１の通信端末装置と、
前記画像提供の委託を受けて画像を送信する第２の通信端末装置と、
前記第１の通信端末装置から画像合成の依頼を受けるとともに、通知された前記アドレス情報を登録し、前記アドレス情報を用いて前記第２の通信端末装置に画像提供の問合せを送信し、前記通信端末装置から送信された画像及び画像制御情報を受信し、前記画像を用いて合成画像を作成するとともに、前記画像制御情報に基づき前記合成画像を調整する画像処理サーバと、
を備えることを特徴とする画像処理システム。
【０１２１】
（付記２）  付記１の画像処理システムにおいて、
前記画像処理サーバに提供される前記画像は、撮影中の画像であることを特徴とする画像処理システム。
【０１２２】
（付記３）  付記１の画像処理システムにおいて、
前記画像処理サーバは、前記第１の通信端末装置又は前記第２の通信端末装置からアクセス可能な画像表示エリアに合成画像を表示することを特徴とする画像処理システム。
【０１２３】
（付記４）  付記１の画像処理システムにおいて、
前記第１の通信端末装置又は前記第２の通信端末装置から画像が周期的又は連続的に前記画像処理サーバに送信され、又は、前記第１の通信端末装置又は前記第２の通信端末装置から送信される画像を前記画像処理サーバが周期的又は連続的に受信することを特徴とする画像処理システム。
【０１２４】
（付記５）  付記１の画像処理システムにおいて、
前記画像処理サーバは、前記第１の通信端末装置又は前記第２の通信端末装置からアクセス可能な画像表示エリアを提供し、画像表示エリアにある共通の背景画像に対応し、前記通信端末装置が被写体の撮影を可能にしたことを特徴とする画像処理システム。
【０１２５】
（付記６）  付記１の画像処理システムにおいて、
前記画像処理サーバは、前記第１の通信端末装置又は前記第２の通信端末装置から送信された複数の画像のいずれかが有する画像情報を基準に他の画像を調整する画像制御情報を前記第１の通信端末装置又は前記第２の通信端末装置に送信して前記画像を調整させることを特徴とする画像処理システム。
【０１２６】
（付記７）  付記１の画像処理システムにおいて、
前記画像処理サーバは、前記第１の通信端末装置又は前記第２の通信端末装置から送信された画像制御情報により画像合成に用いる前記画像を調整することを特徴とする画像処理システム。
【０１２７】
（付記８）  付記１の画像処理システムにおいて、
前記画像処理サーバは、前記第１の通信端末装置又は前記第２の通信端末装置から送信された画像制御情報により、前記第１の通信端末装置又は前記第２の通信端末装置から提供された画像を基準に他の画像を調整することを特徴とする画像処理システム。
【０１２８】
（付記９）  付記１の画像処理システムにおいて、
前記第１の通信端末装置又は前記第２の通信端末装置は、前記画像処理サーバから送信された前記画像制御情報に基づいて画像を調整し、その画像を前記画像処理サーバに送信することを特徴とする画像処理システム。
【０１２９】
（付記１０）  画像を合成する画像処理方法であって、
第１の通信端末装置から画像合成の依頼を受け、画像提供の受託先のアドレス情報を登録する処理と、
前記アドレス情報を用いて第２の通信端末装置に画像提供の問合せを送信する処理と、
前記通信端末装置から送信された画像及び画像制御情報を受信する処理と、
受信した前記画像を用いて合成画像を作成するとともに、前記画像制御情報に基づき前記合成画像を調整する処理と、
を含むことを特徴とする画像処理方法。
【０１３０】
（付記１１）  コンピュータに複数の画像を合成させるための画像処理プログラムであって、
第１の通信端末装置から画像合成の依頼を受け、画像提供の受託先のアドレス情報を登録するステップと、
前記アドレス情報を用いて第２の通信端末装置に画像提供の問合せを送信するステップと、
前記通信端末装置から送信された画像及び画像制御情報を受信するステップと、
受信した前記画像を用いて合成画像を作成するとともに、前記画像制御情報に基づき前記合成画像を調整するステップと、
を含むことを特徴とする画像処理プログラム。
【０１３１】
（付記１２）  画像を合成する画像処理装置であって、
画像合成の依頼を発し、かつ、画像提供の受託先を指定する第１の通信端末装置、又は前記画像提供の委託を受けて画像を送信する第２の通信端末装置と通信する通信部と、
前記第１の通信端末装置から通知されたアドレス情報を登録する登録部と、
前記第１の通信端末装置から画像合成の依頼を受け、前記登録部に登録された前記アドレス情報を用いて画像提供の問合せを前記通信部より送信させ、前記通信端末装置から提供された画像を用いて合成画像を作成するとともに、前記通信端末装置から提供された画像制御情報に基づき前記合成画像を調整する処理部と、
を備えることを特徴とする画像処理装置。
【０１３２】
（付記１３）  画像合成に用いる画像を提供する通信端末装置であって、
前記画像合成に用いる画像を取得する画像取得部と、
画像を合成する画像処理サーバに対し、前記画像合成に必要な画像提供を受ける受託先である通信端末装置のアドレス情報を通知するとともに、前記画像取得部で取得した前記画像及び画像制御情報を送信する通信部と、
を備えることを特徴とする通信端末装置。
【０１３３】
（付記１４）  付記１３の通信端末装置において、
前記画像処理サーバから提供された画像制御情報を用いて前記画像を調整する画像処理部を備え、調整された画像を前記通信部により前記画像処理サーバに送信することを特徴とする通信端末装置。
【０１３４】
（付記１５）  付記１３の通信端末装置において、
前記画像処理サーバから提供された画像制御情報により画像を調整し、その画像が画像制御情報に合致した際にそれを表示する表示部を備えたことを特徴とする通信端末装置。
【０１３５】
（付記１６）  画像合成に用いる画像を撮影する撮影部と、
画像合成をする画像処理サーバと通信し、前記画像合成に必要な画像提供の問合せを受け、その可否を表す情報を前記画像処理サーバに通知するとともに、画像提供を許容する場合には前記撮影部で撮影された前記画像を前記画像処理サーバに送信する通信部と、
を備えたことを特徴とする通信端末装置。
【０１３６】
（付記１７）  付記１６の通信端末装置において、
前記画像処理サーバから提供された画像制御情報を用いて前記画像を調整する画像処理部を備え、調整された画像を前記通信部により前記画像処理サーバに送信することを特徴とする通信端末装置。
【０１３７】
以上説明したように、本発明の最も好ましい実施の形態等について説明したが、本発明は、上記記載に限定されるものではなく、特許請求の範囲に記載され、又は明細書に開示された発明の要旨に基づき、当業者において様々な変形や変更が可能であることは勿論であり、斯かる変形や変更が、本発明の範囲に含まれることは言うまでもない。
【産業上の利用可能性】
【０１３８】
本発明によれば、撮影機能を有する通信端末装置から提供される複数の画像や、画像処理サーバにある背景画像等のテンプレートを用いて合成画像をリアルタイムで作成できるとともに、画像制御情報を用いて合成画像の修正を可能にしており、画像合成の依頼者及び画像提供の受託者の双方が満足する統一性の高い合成画像を得ることができる。
【図面の簡単な説明】
【０１３９】
【図１】画像処理システムの一例を示す図である。
【図２】携帯電話機の外観形態例を示す図である。
【図３】携帯電話機のハード構成例を示すブロック図である。
【図４】画像処理サーバのハード構成例を示すブロック図である。
【図５】携帯電話機（依頼者）の画像処理プログラムの処理手順を示すフローチャートである。
【図６】画像処理サーバの画像処理プログラムの処理手順を示すフローチャートである。
【図７】携帯電話機（受託者）の画像処理プログラムの処理手順を示すフローチャートである。
【図８】画像処理サーバ及び各携帯電話機の画像合成の処理シーケンスを示す図である。
【図９】画像補正の処理シーケンスを示す図である。
【図１０】画像処理及び画像合成例を示す図である。
【図１１】他の画像処理及び画像合成例を示す図である。
【図１２】他の画像処理及び画像合成例を示す図である。
【図１３】他の画像処理及び画像合成例を示す図である。
【図１４】画像合成の依頼時のディスプレイ表示を示す図である。
【図１５】画像合成の参加を呼びかけるディスプレイ表示を示す図である。
【図１６】ＵＲＬの通知時のディスプレイ表示を示す図である。
【図１７】合成画像の修正確認時のディスプレイ表示を示す図である。
【図１８】第２の実施の形態に係る画像処理方法の処理シーケンスを示す図である。
【図１９】第３の実施の形態に係る画像処理方法の処理シーケンスを示す図である。
【図２０】第４の実施の形態に係る画像処理システムを示す図である。
【符号の説明】
【０１４０】
２  画像処理システム
４１、４２〜４Ｎ  携帯電話機（通信端末装置）
６  画像処理サーバ（画像処理装置）
２０  カメラ部（画像取得部）
３０  無線部（通信部）
３４  制御部
３６  記憶部（登録部）
３８  ネットワーク部
【図１】
0004809057.tif 000002
【図２】
0004809057.tif 000003
【図３】
0004809057.tif 000004
【図４】
0004809057.tif 000005
【図５】
0004809057.tif 000006
【図６】
0004809057.tif 000007
【図７】
0004809057.tif 000008
【図８】
0004809057.tif 000009
【図９】
0004809057.tif 000010
【図１０】
0004809057.tif 000011
【図１１】
0004809057.tif 000012
【図１２】
0004809057.tif 000013
【図１３】
0004809057.tif 000014
【図１４】
0004809057.tif 000015
【図１５】
0004809057.tif 000016
【図１６】
0004809057.tif 000017
【図１７】
0004809057.tif 000018
【図１８】
0004809057.tif 000019
【図１９】
0004809057.tif 000020
【図２０】
0004809057.tif 000021