(57)【要約】【課題】複数の分割画像を入力して画像を合成するための専用の処理手段を実装したパソコン等の機器が必要となり、ユーザーは画像入力デバイスと合成画像を生成する専用機器の両方がセットで持たなければ、所望の合成画像が得られないという問題があった。【解決手段】複数の分割画像から画像を合成できる手段をもつ画像合成サーバーであり、画像（静止画または動画）を入力できて通信機能を備えたデバイスから通信網を経由して分割画像を前記サーバーに送信することで、前記サーバーで一枚の合成画像を生成することができ、その合成された画像はいつでもどこでも見ることは可能であり、また、必要に応じて印刷することも可能になる。【選択図】  図１
2005005852.tif 000002
【特許請求の範囲】
【請求項１】
有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより予め定められた手順で複数の画像を撮影する撮影ステップと、前記ステップにより撮影された複数の画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された前記複数の画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法。
【請求項２】
前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項１に記載された画像合成方法。
【請求項３】
有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより動画像を撮影する撮影ステップと、前記ステップにより撮影された動画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された動画像から前記動画像を構成している複数のフレーム画像に変換するフレーム画像生成ステップと、前記複数のフレーム画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法。
【請求項４】
前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項３に記載された画像合成方法。
【請求項５】
有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより予め定められた手順で複数の画像を撮影する撮影ステップと、前記ステップにより撮影された複数の画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された前記複数の画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像から文字を認識し文字データ記憶手段に前記文字を保存する文字認識ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法。
【請求項６】
前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項５に記載された画像合成方法。
【請求項７】
有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより動画像を撮影する撮影ステップと、前記ステップにより撮影された動画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された動画像から前記動画像を構成している複数のフレーム画像に変換するフレーム画像生成ステップと、前記複数のフレーム画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像から文字を認識し文字データ記憶手段に前記文字を保存する文字認識ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法。
【請求項８】
前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項７に記載された画像合成方法。
【請求項９】
有線または無線により情報を送受信できる通信網から配信された複数の画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から読み出された複数の画像データを１枚の画像に合成する画像合成手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システム。
【請求項１０】
前記画像合成サーバーは、前記端末装置を使用するユーザーに対して前記画像内容を送信する毎に課金処理を行う課金手段を持つことを特徴とする請求項９に記載された画像合成システム。
【請求項１１】
有線または無線により情報を送受信できる通信網から配信された動画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から前記動画像データを読み出す動画像読み出し手段と、前記動画像読み出し手段から読み出された動画像データを構成している複数のフレーム画像に変換するフレーム画像生成手段と前記フレーム画像生成手段による複数のフレーム画像データを１枚の画像に合成する画像合成手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と、前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システム。
【請求項１２】
前記画像合成サーバーは、前記端末装置を使用するユーザーに対して前記画像内容を送信する毎に課金処理を行う課金手段を持つことを特徴とする請求項１１に記載された画像合成システム。
【請求項１３】
有線または無線により情報を送受信できる通信網から配信された複数の画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から読み出された複数の画像データを１枚の画像に合成する画像合成手段と、前記合成画像データから文字を認識し文字データ記憶手段に前記文字を保存する文字認識手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と、前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システム。
【請求項１４】
前記画像合成サーバーは、前記端末装置を使用するユーザーに対して前記画像内容を送信する毎に課金処理を行う課金手段を持つことを特徴とする請求項１３に記載された画像合成システム。
【請求項１５】
有線または無線により情報を送受信できる通信網から配信された動画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から前記動画像データを読み出す動画像読み出し手段と、前記動画像読み出し手段から読み出された動画像データを構成している複数のフレーム画像に変換するフレーム画像生成手段と前記フレーム画像生成手段による複数のフレーム画像データを１枚の画像に合成する画像合成手段と、前記合成画像データから文字を認識し文字データ記憶手段に前記文字を保存する文字認識手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と、前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システム。
【請求項１６】
前記画像合成サーバーはユーザーに対して課金処理を実行することができる課金手段を含むことを特徴とする請求項１５に記載された画像合成システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像合成装置および画像合成方法に関わり、特に、ネットワーク経由で画像を合成する画像合成方法に関するものである。
【０００２】
【従来の技術】
従来、分割された画像を合成する技術については、分割画像を合成する際に、合成すべき分割画像を大まかに重ね合わせて置くだけで、精度良く合成画像を作成する方法が知られている（例えば特許文献１を参照。）。図１０は、この従来例における画像合成装置および画像合成方法のブロック図である。以下、図１０を用いて説明する。
【０００３】
図１０において、２は分割画像入力部１によって入力された複数の分割画像を蓄積しておく分割画像蓄積部、３は分割画像の合成に必要な分割画像間の動きベクトル情報、拡大率、回転等の情報、各分割画像間の輝度補正情報等の合成情報を分割画像から抽出する合成情報抽出部、４は分割画像蓄積部２から複数の分割画像を読み込むとともに合成情報抽出部３から合成情報を読み込んで複数の分割画像を合成情報に基づいて合成する画像合成部、５は画像合成部４により合成された合成画像を蓄積する合成画像蓄積部、６は合成画像蓄積部５に蓄積された合成画像をプリンタやネットワークに出力する合成画像出力部であり、７は分割画像蓄積部２と合成情報抽出部３との間に介挿された比較範囲限定部である。
【０００４】
合成情報抽出部３は、比較範囲限定部７によって限定された隣接分割画像の比較範囲においてその隣接分割画像の比較範囲においてその隣接分割画像から合成情報を抽出するように構成されている。比較範囲限定部７は、分割画像表示部８と分割画像移動部９と比較範囲抽出部１０と合成画像表示部１１と分割画像指定部１２とから構成されている。
【０００５】
分割画像表示部８は分割画像蓄積部２における複数の分割画像を縮小して表示するものであり、分割画像移動部９はその表示された縮小の分割画像を合成画像表示部１１に移動してー定のオーバラップ領域を確保しながら隣接する縮小された分割画像を重ね合わせるものであり、比較範囲抽出部１０は合成画像表示部１１に表示された縮小の分割画像の表示位置から分割画像の参照ブロックと探索範囲を求めるものであり、合成画像表示部１１は分割画像表示部８から移動された縮小の分割画像を表示するものであり、分割画像指定部１２は画像合成が正常に合成されなかったときに再度の合成情報の抽出と画像合成とを行わせるために、その不正常な分割画像を指定するものである。比較範囲限定部７の機能は、マウス（あるいはキーボード）、ＣＰＵ、ディスプレイ等で実現することができる。したがって、この画像合成装置は、パソコンを始めとするＧＵＩ（グラフィカル・ユーザー・インターフェース）を持つ各種情報処理機器で実現できることを意味している。
【０００６】
以上のような構成により、分割画像蓄積手段における隣接分割画像同士を比較すべき範囲を狭く限定する比較範囲限定手段を備えるとともに、合成情報抽出手段は比較範囲限定手段による限定された画像比較範囲において隣接分割画像を比較して合成に必要な合成情報を抽出するように構成されている。
【０００７】
そのため、ユーザーが合成しようとする分割画像を大まかに位置合わせすれば、あとは２つの隣接する分割画像の比較範囲を狭く限定した上で合成情報を抽出するので、合成情報をその狭い画像比較範囲で抽出するときの演算量を減少させることが出来、演算処理装置やメモリへの負担軽減とともに、処理時間を短縮できる。さらに、画像比較範囲が狭いのでパターンマッチングの際に複数の同じパターンが発生する確率が低くなり、マッチング精度を向上することができる。また、汎用のカメラに適用することが可能となる。
【０００８】
【特許文献１】
特開平１０−１０８００３号公報
【０００９】
【発明が解決しようとする課題】
しかしながら、従来の画像合成方法によれば、複数の分割画像を入力して画像を合成するための専用の処理手段を実装したパソコン等の機器が必要となり、ユーザーは画像入力デバイスと合成画像を生成する専用機器の両方をセットで持たなければ、所望の合成画像が得られないという課題を有している。また、画像入力デバイスのコストを低減することができても、画像合成するためには専用の機器が必要となるため全体のコストは低減できないという課題も有している。
【００１０】
【課題を解決するための手段】
前記課題を解決するために、本発明の画像合成システムは、画像を入力できる通信デバイスと通信網を介して接続できる画像合成サーバーをシステムとして構成することで、画像入力デバイスで撮像した分割画像を前記画像合成サーバーに配信すれば、前記サーバーで画像合成処理が行われて、任意のネット機器でその合成画像を確認することができることを特徴としたものである。本発明によれば、画像入力デバイスで撮った画像を任意の時間に任意の場所で画像合成することができ、モバイル環境での画像合成ができる環境をユーザーに提供することができる。
【００１１】
【発明の実施の形態】
請求項１に記載の発明は、有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより予め定められた手順で複数の画像を撮影する撮影ステップと、前記ステップにより撮影された複数の画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された前記複数の画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法である。
【００１２】
請求項２に記載の発明は、前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項１に記載された画像合成方法である。
【００１３】
請求項３に記載の発明は、有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより動画像を撮影する撮影ステップと、前記ステップにより撮影された動画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された動画像から前記動画像を構成している複数のフレーム画像に変換するフレーム画像生成ステップと、前記複数のフレーム画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法である。
【００１４】
請求項４に記載の発明は、前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項３に記載された画像合成方法である。
【００１５】
請求項５に記載の発明は、有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより予め定められた手順で複数の画像を撮影する撮影ステップと、前記ステップにより撮影された複数の画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された前記複数の画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像から文字を認識し文字データ記憶手段に前記文字を保存する文字認識ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法である。
【００１６】
請求項６に記載の発明は、前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項５に記載された画像合成方法である。
【００１７】
請求項７に記載の発明は、有線または無線により情報の送受信を行う通信網において、画像入力デバイスにより動画像を撮影する撮影ステップと、前記ステップにより撮影された動画像を前記通信網に接続されたサーバー内の入力画像記憶手段に保存する画像保存ステップと、前記入力画像記憶手段に保存された動画像から前記動画像を構成している複数のフレーム画像に変換するフレーム画像生成ステップと、前記複数のフレーム画像を合成して１枚の合成画像を生成する合成画像生成ステップと、前記合成画像から文字を認識し文字データ記憶手段に前記文字を保存する文字認識ステップと、前記合成画像を前記サーバー内の合成画像記憶手段に保存する合成画像保存ステップと、前記通信網に接続された端末装置からの送信要求を解析する送信要求解析ステップと、前記送信要求解析ステップの結果に応じて前記合成画像記憶手段に保存された合成画像を前記通信網を経由して前記端末装置に送信する合成画像送信ステップとからなる、画像合成方法である。
【００１８】
請求項８に記載の発明は、前記端末装置を利用するユーザーに対し、前記合成画像を送信する毎に課金を行う課金ステップを含むことを特徴とする請求項７に記載された画像合成方法である。
【００１９】
請求項９に記載の発明は、有線または無線により情報を送受信できる通信網から配信された複数の画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から読み出された複数の画像データを１枚の画像に合成する画像合成手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システムである。
【００２０】
請求項１０に記載の発明は、前記画像合成サーバーは、前記端末装置を使用するユーザーに対して前記画像内容を送信する毎に課金処理を行う課金手段を持つことを特徴とする請求項９に記載された画像合成システムである。
【００２１】
請求項１１に記載の発明は、有線または無線により情報を送受信できる通信網から配信された動画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から前記動画像データを読み出す動画像読み出し手段と、前記動画像読み出し手段から読み出された動画像データを構成している複数のフレーム画像に変換するフレーム画像生成手段と前記フレーム画像生成手段による複数のフレーム画像データを１枚の画像に合成する画像合成手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と、前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システムである。
【００２２】
請求項１２に記載の発明は、前記画像合成サーバーは、前記端末装置を使用するユーザーに対して前記画像内容を送信する毎に課金処理を行う課金手段を持つことを特徴とする請求項１１に記載された画像合成システムである。
【００２３】
請求項１３に記載の発明は、有線または無線により情報を送受信できる通信網から配信された複数の画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から読み出された複数の画像データを１枚の画像に合成する画像合成手段と、前記合成画像データから文字を認識し文字データ記憶手段に前記文字を保存する文字認識手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と、前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システムである。
【００２４】
請求項１４に記載の発明は、前記画像合成サーバーは、前記端末装置を使用するユーザーに対して前記画像内容を送信する毎に課金処理を行う課金手段を持つことを特徴とする請求項１３に記載された画像合成システムである。
【００２５】
請求項１５に記載の発明は、有線または無線により情報を送受信できる通信網から配信された動画像データを記憶する入力画像記憶手段と、前記配信された画像の入力手段の特性情報を保持するデバイスプロファイルと、前記デバイスプロファイルの情報に基づいて前記入力画像記憶手段から前記動画像データを読み出す動画像読み出し手段と、前記動画像読み出し手段から読み出された動画像データを構成している複数のフレーム画像に変換するフレーム画像生成手段と前記フレーム画像生成手段による複数のフレーム画像データを１枚の画像に合成する画像合成手段と、前記合成画像データから文字を認識し文字データ記憶手段に前記文字を保存する文字認識手段と、前記画像合成手段により合成された画像データを保持する合成画像記憶手段と、前記通信網を経由して所定のユーザーインターフェースを提供するユーザーインターフェース手段と、前記ユーザーインターフェース手段を用いて、前記通信網に接続された端末装置に前記入力画像記憶手段および前記合成画像記憶手段の画像内容を送信するためのデバイス入出力制御手段を備えた画像合成サーバーを特徴とする画像合成システムである。
【００２６】
請求項１６に記載の発明は、前記画像合成サーバーはユーザーに対して課金処理を実行することができる課金手段を含むことを特徴とする請求項１５に記載された画像合成システムである。
【００２７】
（実施の形態１）
以下に、本発明の請求項１および請求項９に記載された発明の実施の形態について図１を用いて説明する。
【００２８】
図１は画像合成システムの全体構成図を示すものである。図１において、１００は画像入力通信デバイス、２００は画像合成サーバー、４００はインターネットまたは携帯電話網等を含むー般的な通信網、３００は通信網４００に接続してメールの送受信やブラウザによるアクセス等ができるネット接続機器である。画像入力通信デバイス１００を構成するものとして、１３０はＣＣＤやＣＭＯＳセンサーなどの撮像素子により画像を取り込むことができる画像入力手段、１４０は画像入力手段１３０で得られた入力画像データを保持する画像記憶手段、１１０は外部との通信を行うデバイス通信インターフェース、１２０は画像入力通信デバイス１００の中で全体の制御を行う画像制御手段である。
【００２９】
画像合成サーバー２００を構成するものとして、２１０は通信網４００と接続して外部との通信を行うサーバー通信インターフェース、２２０は通信網４００を介して入力された入力画像を保持する入力画像記憶手段、２３０は入力画像記憶手段２２０の内容を読み込んで画像合成処理を実行する画像合成手段、２３５は画像合成手段２３０により得られた合成画像を保持する合成画像記憶手段、２６０は通信網４００を介してデバイスとの情報交換を行うためにメールの送受信やホームベージを表示することを制御するデバイス入出力制御装置、２７０は画像合成システムを利用するユーザー情報を保持するユーザー情報記憶手段、２８０は画像合成システムが対応する入力デバイスの特性を記述したプロファイルを保持するデバイスプロファイル記憶手段、２５０は画像合成サーバーの中で全体の制御を行うサーバー制御手段である。
【００３０】
以上のように構成された本実施例の動作について詳細に説明する。ここでは、画像入力通信デバイス１００としてカメラ付き携帯電話を例にとり説明していくことにする。
【００３１】
図２は撮像されるものをレポート用紙等の紙の媒体とした場合の画像分割の例を示すものである。図２において、１３００は撮像されるレポート用紙の全体、１３０１は１回目に撮像すべく分割された分割画像、１３０２から１３０９までは２回目以降、順に撮像すべく分割された分割画像である。
【００３２】
本発明の大きな処理の流れは下記の通りである。
（１）図２のようなレポート用紙の内容をカメラ付き携帯電話等で分割した状態で撮像する。
（２）撮像されたデータをサーバーに転送する。
（３）サーバーにて分割された画像データを合成してーつの画像とする。
（４）合成された画像データをサーバーで管理し、いつでも誰でも見られるようにする。閲覧したいユーザーはこのサーバーをアクセスすればいつでも見られる
上記の流れについて、図１および図２を用いて詳細に説明する。
（１）分割画像データの撮像
図２にあるレポート用紙１３００の内容を画像として取り込むために、予め撮像のためのルールを決めておく。例えば、カメラ付き携帯電話でこの紙を撮像するために、次のルールを設定してあるとする。
ａ）紙の大きさに応じて分割する画像の枚数と撮像の順序を決めておく。  例えばＡ４サイズの紙サイズの場合には、図２のように９枚の分割画像を１３０１、１３０２、１３０３、・・・、１３０８、１３０９の順に  撮像するものとする。
ｂ）後で画像合成をしていくために、それぞれの分割画像は重なりを待った形で撮像するものとする。例えば、紙の端は紙の切れ目がわかるようにここが移るように撮像する。また、１３０１、１３０２のように  隣あう分割画像は必ず重なりのある部分を持つものである。
ｃ）紙とカメラ付き携帯電話の距離を決めておく。画像合成する際に上記  の条件を満たすことができるようにするための、目安の距離を設定しておいた方がよい。例えば、Ａ４の紙サイズの場合は紙から１ｃｍの距離で撮像する、など。
【００３３】
上記のルールにしたがって、ユーザーは、図２に示す紙の内容を画像として取り込むことになる。このときの、画像入力通信デバイス１００の中の動作としては、下記の通りである。
【００３４】
画像入力手段１３０により画像を撮像し、得られた画像データはそのまま画像記憶手段１４０に取り込まれる。これらの操作は画像制御手段１２０の指示にしたがって動作するものである。この操作を、図２の場合であれば９回繰り返すことになる。画像記憶手段１４０には１３０１から１３０９までの９枚の取り込まれた画像が保存されていることになる。
【００３５】
（２）画像の転送
カメラ付き携帯電話の場合、その中に保存されてある画像データをファイルとしてメールに添付して送信することができる機能を有している。本実施例においては、メール添付で画像を転送する機能を用いて画像合成サーバー２００に画像を転送する方法について説明する。
【００３６】
カメラ付き携帯電話においては、その機器特有の機能として、そのローカルメモリに保存されてある画像データをメール送信時に添付して送付することができる。そのときのメールの内容例を図３に示す。そのメールの送信先として、画像合成サーバー２００のアドレス（ｒｅｇｉｓｔｅｒ＠ｇｏｕｓｅｉ．ｃｏｍ）を指定して、画像記憶手段１４０の中にある分割画像１３０１から１３０９のデータをメールに添付して順次画像合成サーバー２００にメールにして送信する。画像記憶手段１４０の中にある画像データはデバイス通信Ｉ／Ｆ１１０を介して通信網４００を経由して画像合成サーバー２００にメールとして到着する。このときその分割画像が何枚目かわかるように図３に示すようにＳｕｂｊｅｃｔにこれを指定するか、本文中に記載するものとする。また、誰のデータか識別できるように本文中にＩＤの内容を記載しておく。このメールのＳｕｂｊｅｃｔならびに本文などの記載の方法については、画像合成サーバーとの間で決められるものである。本実施例の説明はーつの例にすぎず必ずしもこの書式でなければならないというものではない。
【００３７】
画像合成サーバー２００の動作としては次のようになる。
ａ）メールが到着したことをデバイス入出力制御手段２６０が認知したときに、メール本文中に記載されてあるＩＤ情報とユーザー情報記憶手段２７０に保存されているユーザーＩＤとの照合を行い、そのＩＤ合致した場合にサーバー制御手段２５０に対して添付された画像データの取り込みを指示する。
ｂ）サーバー制御手段２５０においてメールの内容（Ｓｕｂｊｅｃｔならびに本文）を解釈して、誰（ＩＤ）のデータで何番目の分割画像であるかを認識する。そしてそこに添付されてある画像データを分割画像データとして、その何枚目かという情報（図３であれば１／９枚目から９／９枚目）と添付されてある画像データを入力画像記憶手段２２０に保存する  。
【００３８】
（３）画像合成
前記（２）までの操作により、特定のＩＤ（ＭＫＥ）に対して画像（Ｉｍａｇｅ）の９枚の分割画像データ（１３０１から１３０９）が入力画像記憶手段２２０に保持されていることになる。ここでは、その分割画像データを読み出して、一つの画像データを合成することになる。このときに、その操作をユーザーが確認しながらできるように、Ｗｅｂページなどを準備してユーザーと対話しながらその操作を指示して実行できる場合について説明する。Ｗｅｂページを操作するためには、図１においてはー般的なＷｅｂブラウザを搭載したネット接続機器３００が必要となる。本実施例においては、画像入力とＷｅｂブラウザがー体となったカメラ付き携帯電話で説明しているので、図１においては画像入力通信デバイス１００とネット接続機器３００の両方の機能を有したものになっている。具体的に操作手順について説明する。
【００３９】
図４は画像合成サーバー２００のＷｅｂアクセスアドレス（例えば、ｈｔｔｐ：／／ｗｗｗ．ｇｏｕｓｅｉ．ｃｏｍ）をアクセスしたときに表示されるＷｅｂページの例である。このページの内容にしたがって画像を合成する方法について説明する。
ユーザーは予めメール等で分割画像データを送信したときのＩＤと対象となる分割画像データの名前を、図４のＩＤおよびＩｍａｇｅのフイールドに記述する。ここでは次の３つの操作ができるものとする。
（３．１）分割画像を確認する。
（３．２）画像を合成する。
（３．３）合成画像を確認する。
【００４０】
ユーザーはＷｅｂページの中で上記操作のーつを選択（具体的には、チェックボックスをチェック）して、ＯＫボタンを押すことにより画像合成サーバー２００においてその操作が実行される。デバイス入出力制御手段２６０が、ユーザーに対するＷｅｂページの表示およびＷｅｂページを介してのユーザーからの指示を解釈し、サーバー制御手段２５０に指示を出すものである。
前記のそれぞれの操作について、詳細に説明する。
【００４１】
（３．１）分割画像を確認する。
合成すべき画像データが正しいかどうかを確認するためのものであり、この操作を実行した場合には、入力画像記憶手段２２０に保存されている分割画像データ（１３０１から１３０９）が表示される。表示の仕方としては端末の表示画面のサイズに合わせて、サムネール表示にしたり、一枚ずつ順次表示したりすることができる。図１においては、サーバー制御手段２５０の指示にしたがって、入力画像記憶手段２２０に含まれる分割画像データをサーバー通信Ｉ／Ｆ２１０から通信網４００を介してネット接続機器３００で表示されることになる。このとき、ユーザーが所望の分割画像データを確認することができなかった場合（例えばメールの遅延等により全ての分割画像データが画像合成サーバー２００に届いていない場合）、次のステップに進むことなく、しばらく待って再度確認する必要がある。
【００４２】
（３．２）画像を合成する。
予めデバイスプロファイル２８０の中には画像入力通信デバイス１００の特徴となるパラメータ等を予め保持しておき、画像合成するときに必要となる情報をこの内容を引用して、画像合成を実行する。デバイスプロファイル２８０には例えば次の情報を保持しておく。
ａ）端末の機種ごとに入力される画像サイズ・色数。
ｂ）合成された後の画像の大きさ（Ａ４サイズ、名刺サイズ、等々）。
【００４３】
ここでは、カメラ付き携帯電話で入力された分割画像データをＡ４サイズの紙の大きさに合成するものと想定してその動作について説明する。図４に示すように、ユーザーは合成すべき画像サイズを選択できるようにしている。この場合はＡ４サイズを指定している。指定されたサイズ情報とアクセスした端末の情報は、デバイス入出力制御手段２６０において認識され、デバイスプロファイル２８０からサイズ情報と端末の属性情報が読み出される。サーバー制御手段２５０において、デバイスプロファイル２８０から得られた情報を画像合成手段２３０に入力される。また、入力画像記憶手段２２０からは分割画像データ（１３０１から１３０９）が順次画像合成手段２３０に入力されて、プロファイルからの情報をもとに、Ａ４の画像データを合成する。合成された画像データは合成画像記憶手段２３５に保持される。したがって理想的には図２の１３００の画像が保持されることになる。
【００４４】
（３．３）合成画像を確認する。
カメラ付き携帯電話のようなネット接続機器３００から「合成画像を確認する」がＷｅｂページにおいてチェックされた場合には、デバイス入出力制御手段２６０においてこの内容を解釈して該当する合成画像を合成画像記憶手段２３５から読み出す。このとき、デバイスプロファイル２８０から該当するデバイスのプロファイル（表示画像サイズ、色数）も読み込み、得られた合成画像をネット接続機器のプロファイルに合うように画像変換をデバイス入出力制御手段において実行して変換後の画像データをサーバー通信Ｉ／Ｆ２１０を介してネット接続機器３００に送信する。ネット接続機器３００において得られた画像データを表示することになる。
【００４５】
以上のようにして、画像入力通信デバイス１００で撮像された分割画像を画像合成サーバー２００に送信し、画像合成サーバー２００において分割画像を合成してー枚の合成画像を作成し、ネット接続機器３００においてこの画像を確認することができる。合成された画像データは常にサーバー２００内の合成画像記憶手段２３５に保持されているため、インターネットのような通信網４００に接続しているネット接続機器３００であればいつでもどこでもこの合成画像を確認することができ、また、必要に応じて印刷することも可能である。この方法を用いれば、画像入力通信デバイスがあればその入力範囲を超えた画像サイズであっても複数の分割画像をサーバー２００に送信することで、合成画像を取得することができるとともに、定型の紙サイズ（Ａ４、名刺サイズ等）であれば正確に合成することが可能になる。
【００４６】
なお、本実施例においては、１の紙の分割画像の数は９ということで説明したが、紙のサイズおよび画像入力通信デバイス１００の画像取り込み性能によって分割する画像の数は変わる。例えば、名刺サイズくらいの大きさであれば、２枚の分割画像でも済むこともある。また、画像入力通信デバイス１００からサーバー２００への送信方法として、画像データを添付したメールによる方法について説明したが、必ずしもこの方法を用いることは強いるものではなく、例えば、ＦＴＰやＨＴＴＰなどのプロトコルを利用してサーバー２００に送信することも問題ない。また、本実施例においては、画像入力通信デバイス１００としてカメラ付き携帯電話を例にして説明したが、特にこれに限定することはなく、スキャナを接続したＰＣやＰＤＡでも使用することは可能であり、ディジタルスチルカメラでも携帯電話等を経由することで通信手段を確保すれば同様の処理をすることは可能である。
【００４７】
以上のように、本発明によれば、任意の入力デバイスにより得られた分割画像をサーバーに送信し、サーバーがその分割画像を合成してーつの合成画像を生成することが可能になるので、いつでもどこでも画像を合成することができ、かつどこでもその合成画像を確認または印刷することが可能になるので、極めてその効果は大きい。
【００４８】
次に、本発明の請求項２および請求項１０に記載された発明の実施の形態について図１を用いて説明する。本発明はこれまでに説明してきた画像合成システムに対して、課金処理を含むことが特徴になっている。図１においては、２９５が課金手段である。
【００４９】
前記した方法により合成された合成画像データが合成画像記憶手段２３５に保存される。合成処理を実行するときには、ユーザーのＩＤが既に情報として入力されているため、ユーザー情報２７０から該当するＩＤのユーザーに対して課金手段２９５において課金処理が実行される。
【００５０】
このような処理を実行することによって、本発明の画像合成システムを利用したユーザーに対して課金することができるため、本システムの管理者はユーザーから利用料金を徴収することが可能になる。
【００５１】
（実施の形態２）
次に、本発明の請求項３および請求項１１に記載された発明の実施の形態について、図５を用いて説明する。なお、前述した実施の形態と同じ構成については同じ符号を用い，説明を省略する。
本実施例は実施の形態１において説明した画像合成システムを用いて、動画として入力された画像ファイルから合成画像を生成するものである。
【００５２】
図５は画像合成サーバー２００の内部の構成を示すものであり、２９０は動画ファイルを伸張して静止画の複数フレームを生成するフレーム生成手段である。以下、動画ファイルから合成画像データを生成する方法にについて詳細に説明する。図６は図２と同じレポート用紙を動画で撮像する場合の様子を示した図である。動面で撮像する場合の一つのルールとして図２の矢印（ＡからＥまで）の方向にそってレポート用紙を動画として撮像していくことにしておく。また、入力画像手段の性能によって撮像していく速度についても決めておく必要がある。早く操作しすぎるときれいな画像が撮像できない場合があるし、あまり遅すぎると画像データの情報量が多くなりすぎることが問題となる。動画を撮像してから合成画像データを生成するまでの流れについて、図１および図２を用いて説明する。このとき、撮像された動画データはファイルとして画像入力通信デバイスの中に管理されているものとする。
【００５３】
（１）動画の撮像
画像入力手段１３０は動画が撮像できるものとして、ユーザーは図６の矢印の順にレポート用紙１３００を撮像していく。最後（矢印Ｅ）まで撮像し終わったときには、画像入力手段１３０においてサポートしている動画の圧縮方式で圧縮された動画ファイルが画像記憶手段１４０に保持される。
【００５４】
（２）動画ファイルの転送
画像記憶手段１４０に保持されている動画ファイルが通信網４００を介して画像合成サーバー２００内の入力画像記憶手段２２０に転送される。動画の転送の方法は、実施の形態１で説明したメールに画像データを添付する方法で画像合成サーバー２００に送信してもよいし、ＦＴＰやＨＴＴＰのブロトコルにより送信することも可能である。
【００５５】
（３）フレームデータの生成
フレーム生成手段２９０は、入力画像記憶手段２２０に保持されている動画ファイルを入力し、デバイスプロファイル２８０にある該当機器の画像圧縮方式に関する情報をサーバー制御手段２５０からフレーム生成手段２９０に入力され、前記動画ファイルを伸張し、静止画のフレームデータを生成する。このときのフレーム数は画像合成手段の性能から予め決めておき、決められたフレーム数の静止画データを生成することになる。
【００５６】
（４）画像合成
画像合成手段２９０において、フレーム生成手段２９０で得られた静止画のフレームデータを入力して、一枚の画像を合成する。合成された画像データは合成画像記憶手段２３５に保存される。
以降は実施の形態１で説明した流れと同様である。
【００５７】
以上のように、動画入力機器により撮像することで、ユーザーとしては何度も静止画を撮像する必要性がなくなり、使い勝手がよくなる。また、画像合成手段２３０にとっても連続した静止画データが得られるため、一枚の合成画像の合成がスムーズに実行される。
【００５８】
次に、本発明の請求項４および請求項１２に記載された発明の実施の形態について図５を用いて説明する。本発明はこれまでに説明してきた画像合成システムに対して、課金処理を含むことが特徴になっている。図５においては、２９５が課金手段である。
【００５９】
前記した方法により合成された合成画像データが合成画像記憶手段２３５に保存される。合成処理を実行するときには、ユーザーのＩＤが既に情報として入力されているため、ユーザー情報２７０から該当するＩＤのユーザーに対して課金手段２９５において課金処理が実行される。
【００６０】
このような処理を実行することによって、本発明の画像合成システムを利用したユーザーに対して課金することができるため、本システムの管理者はユーザーから利用料金を徴収することが可能になる。
【００６１】
（実施の形態３）
次に、本発明の請求項５および請求項１３に記載された発明の実施の形態について、図７を用いて説明する。なお、前述した実施の形態と同じ構成については同じ符号を用い，説明を省略する。
【００６２】
本実施例は実施の形態１において説明した画像合成システムを用いて、合成された画像に含まれる文字を認識してデータベースとして記憶しておいて参照することを可能にするものである。この仕組みを実現するために、画像合成サーバー２００に文字認識手段を導入する。
図７は画像合成サーバー２００の内部の構成をしめすものであり、２４０は文字を認識する文字認識手段、２４５は文字データを保持しておく文字データ記憶手段である。
【００６３】
本実施例では名刺を画像入力した場合の動作について説明する。図８は名刺を画像入力した場合の様子がわかる図である。実施の形態１で説明した方法により入力画像記憶手段には分割画像１３１１と１３１２が保存されている。画像合成手段２３０によりこれらの分割画像が合成され、１３１０に示す名刺の画像が合成画像記憶手段２３５に保持されているものである。このとき、この名刺には文字が記入されており、この文字の情報がユーザーにとって必要な情報がある場合にはこれを文字データとして保存しておくと非常に便利なものになる。本実施例では合成された画像からこの文字を認識させてデータとして保存するのが一つの特徴になる。このような文字を含む画像データが合成画像記憶手段２３５に保存されている状態からその後の動作について説明する。
【００６４】
文字認識手段２４０が前記画像データを読み出してその画像に含まれる文字を認識して文字データとして文宇データ記憶手段２４５に保存される。この文字認識処理の誤りをより少なくするために、デバイスプロファイル２８０の中に画像データの種類として名刺であるという属性情報をサーバー制御手段２５０が文字認識手段２４０に入力することによって、文字認識手段２４０は名刺の中の文字の配置等の情報を得ることによってより正確に文字の認識を実行することができる。文字認識手段２４０はその文字を認識した後、その文字の意味を解釈して意味のある文字データとして文字データ記憶手段２４５に保存される。
【００６５】
例えば図６の場合であれば、文字認識手段２４０は次の内容を文字データ記憶手段２４５に保存する。
・氏名：松下  合成
・会社名：松下寿電子工業（株）
・会社住所：愛媛県松山市
・役職：代表取締役  社長
・会社電話番号：０８９−９９９−９９９９
・会社Ｅメール：  ＨＹＰＥＲＬＩＮＫ  “ｍａｉｌｔｏ：ｍａｔｓｕ＠ｇｏｕｓｅｉ．ｃｏｍ”ｍａｔｓｕ＠ｇｏｕｓｅｉ．ｃｏｍ
次にこの文字データをユーザーが参照する場合について説明する。この場合は名刺のデータを保存してあるので、この名刺データを参照するシステムの名称を仮に名刺管理システムとしておく。
【００６６】
ネット接続機器３００からＷｅｂアクセスにより名刺管理システムをＷｅｂページに表示させる。図９がこのときのＷｅｂページの内容を示している。このときデバイス入出力制御手段２６０は文字データ記憶手段２４５から氏名に対応するデータを読み出して、Ｗｅｂページに表示する。ユーザーがその中から一つの氏名を選択すると図９に示すようにその氏名に対応する詳細なデータが文字データ記憶手段２４５から読み出されて表示される。このとき、関連する画像データ（顔写真など）等があれば入力画像記憶手段２２０から該当する画像データを読み出してこのページに表示することも可能である。
【００６７】
なお、本実施例においては、名刺の場合を例にして説明したが、本発明は名刺に限定することなく、レポート用紙やその他文字を含む文書の場合には全て適用することは可能である。例えばレポート用紙であればその内容をサーバーに保存することで、サーバーをアクセスできるグループの中でその情報を共有化することも可能になる。
【００６８】
以上のように、合成された画像の文字を認識することで、ユーザーにとっては役に立つ情報がデータベースとしてサーバーに管理されることになるので、非常に便利になる。また、この情報はサーバーにあることからグループ間での共有化が図れ、いつでもどこでもこの内容を参照することができるので、新たな利便性が得られるという効果も得ることができる。
【００６９】
次に、本発明の請求項６および請求項１４に記載された発明の実施の形態について図７を用いて説明する。本発明はこれまでに説明してきた画像合成システムに対して、課金処理を含むことが特徴になっている。図１においては、２９５が課金手段である。
【００７０】
前記した方法により合成された合成画像データが合成画像記憶手段２３５に保存される。合成処理を実行するときには、ユーザーのＩＤが既に情報として入力されているため、ユーザー情報２７０から該当するＩＤのユーザーに対して課金手段２９５において課金処理が実行される。
【００７１】
このような処理を実行することによって、本発明の画像合成システムを利用したユーザーに対して課金することができるため、本システムの管理者はユーザーから利用料金を徴収することが可能になる。
【００７２】
なお、合成画像記憶手段２３５の前段にフレーム生成手段２９０が挿入された場合（図５参照）においても、前記したシステムと同様に文字を認識することができるため、同様の効果が得られる。
【００７３】
【発明の効果】
以上のように、本発明の画像合成方法および画像合成システムによれば、画像（静止画または動画）を入力できて通信機能を備えたデバイスから通信網を経由して分割画像を画像合成サーバーに送信することで、一枚の合成画像を生成することができ、その合成された画像はいつでもどこでも見ることは可能であり、また、必要に応じて印刷することも可能になる。また、入力デバイスに対しては新たな機能を追加することなく、合成画像を生成することができるので、ユーザーにとっては極めて使いやすいシステムである。さらに、文字認識手段を画像合成サーバー内に導入することで得られた合成画像から文字データベースをサーバー内に生成することができるので、グルーブウェアとしての使い方が可能になり、その利用範囲は極めて広くなり、ユーザーにとっては便利なものとなるので、画像合成システムとしては極めて有効なシステムである。
【図面の簡単な説明】
【図１】本発明の実施の形態１における画像合成システムの全体構成図
【図２】本発明の実施の形態１における取り込みたいサイズのレポート用紙の分割画像の例を示す図
【図３】入力通信デバイスから画像合成サーバーへ送信するメールの内容例を示す図
【図４】画像合成システムを表示するためのＷｅｂページ例を示す図
【図５】本発明の実施の形態２における画像合成サーバーの内部構成図
【図６】本発明の実施の形態２における動画の撮像方向を示した図
【図７】本発明の実施の形態３における画像合成サーバーの内部構成図
【図８】名刺サイズの紙を撮像する場合の例を示す図
【図９】本発明の実施の形態３による名刺管理システムの表示例を示す図
【図１０】従来のシステムの全体構成図
【符号の説明】
２  分割画像蓄積部
３  合成情報抽出部
４  画像合成部
５  合成画像蓄積部
７  比較範囲限定部
８  分割画像表示部
９  分割画像移動部
１０  比較範囲抽出部
１１  合成画像表示部
１２  分割画像指定部
１００  画像入力通信デバイス
１１０  デバイス通信Ｉ／Ｆ
１２０  画像制御手段
１３０  画像入力手段
１４０  画像記憶手段
２００  画像合成サーバー
２１０  サーバー通信Ｉ／Ｆ
２２０  入力画像記憶手段
２３０  画像合成手段
２３５  合成画像記憶手段
２４０  文字認識手段
２４５  文字データ記憶手段
２５０  サーバー制御手段
２６０  デバイス入出力制御手段
２７０  ユーザー情報記憶手段
２８０  デバイスプロファイル
２９０  フレーム生成手段
２９５  課金手段
１３００  レポート用紙
１３０１  分割画像
１３０２  分割画像
１３０３  分割画像
１３０４  分割画像
１３０５  分割画像
１３０６  分割画像
１３０７  分割画像
１３０８  分割画像
１３０９  分割画像
１３１０  名刺
１３１１  分割画像
１３１２  分割画像
【図１】
2005005852.tif 000003
【図２】
2005005852.tif 000004
【図３】
2005005852.tif 000005
【図４】
2005005852.tif 000006
【図５】
2005005852.tif 000007
【図６】
2005005852.tif 000008
【図７】
2005005852.tif 000009
【図８】
2005005852.tif 000010
【図９】
2005005852.tif 000011
【図１０】
2005005852.tif 000012