(57)【要約】【課題】移動体端末とサーバの間の情報交換方法を提供すること。【解決手段】本発明は、少なくとも１つの写真を移動体端末からサーバに送信するステップ、サーバが送信された写真を分析するステップ、分析された写真と写真の内容に関連する情報を関連付けるステップ、および移動体端末に写真に関連する情報の少なくとも一部を送信するステップを含む方法に関する。移動体端末は、サーバに追加の情報を提供してサーバが写真のサブセットを識別する助けをし、サーバは追加の情報を使用して写真のサブセットを識別する。【選択図】      図１
2006155592.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも１つの写真を移動体端末からサーバに送信するステップと、
前記サーバが送信された写真を分析するステップと、
分析された前記写真を前記写真の内容に関連する情報に関連付けるステップと、
前記写真に関連する情報の少なくとも一部を前記移動体端末に送信するステップとを含み、
前記移動体端末が前記サーバにサーバが前記写真のサブセットを識別するのを助ける追加の情報を提供し、
前記サーバが前記写真のサブセットを識別するように前記追加の情報を使用する、方法。
【請求項２】
前記追加の情報がテキスト形式である請求項１に記載の方法。
【請求項３】
前記テキスト形式の追加の情報がＳＭＳメッセージ形式で送信される請求項２に記載の方法。
【請求項４】
セットが前記テキスト形式の追加の情報を含み、前記写真がＭＭＳメッセージ形式で送信される請求項２に記載の方法。
【請求項５】
前記追加の情報が前記写真の少なくとも１つの領域のグラフィカルマーキングを含む請求項１に記載の方法。
【請求項６】
前記移動体端末が複数の写真を前記サーバにビデオ形式で送信し、前記追加の情報が前記ビデオに関連するサウンドトラックに含まれた音声メッセージを含む請求項１に記載の方法。
【請求項７】
前記追加の情報が、前記移動体端末と前記サーバの間の電話呼出し中に前記移動体端末の前記ユーザによって前記サーバに送信される音声メッセージを含む請求項１に記載の方法。
【請求項８】
前記追加の情報が前記サーバによって前記移動体端末に送信される多岐選択式質問事項への応答を含む請求項１に記載の方法。
【請求項９】
前記サーバが前記移動体端末にヒントを送信するステップと、
前記移動体端末が前の写真からの様々な条件下で少なくとも１つの追加の写真を撮るステップであって、前記様々な条件が前記ヒントを反映するステップと、
前記移動体端末が前記追加の写真を前記サーバに送信するステップとをさらに含む請求項１から８のいずれか一項に記載の方法。
【請求項１０】
前記写真に関連する前記情報が、前記移動体端末の前記ユーザのための行動計画を含む請求項１から９のいずれか一項に記載の方法。
【請求項１１】
前記移動体端末の位置の決定によって、前記移動体端末に地理的に近いサーバの選択が可能になる請求項１から１０のいずれか一項に記載の方法。
【請求項１２】
前記移動体端末の位置が、前記追加の情報の少なくとも一部を構成する請求項１から１１のいずれか一項に記載の方法。
【請求項１３】
前記サーバによって前記移動体端末に送信された前記写真に関連する前記情報がＨＴＭＬページの形式をとる請求項１から１２のいずれか一項に記載の方法。
【請求項１４】
前記移動体端末が前記追加の情報を前記写真と同時に送信する請求項１から１３のいずれか一項に記載の方法。
【請求項１５】
前記移動体端末が前記写真の送信に後続する前記サーバからの応答の後に前記追加の情報を送信する請求項１から１３のいずれか一項に記載の方法。
【請求項１６】
前記サーバが最初に前記追加の情報を使用して前記写真のサブセットを強調表示し、その後に前記サーバが強調表示されたサブセットを識別する請求項１から１５のいずれか一項に記載の方法。
【請求項１７】
前記サーバが前記追加の情報を使用して前記写真のサブセットを同時に強調表示し識別する請求項１から１５のいずれか一項に記載の方法。
【請求項１８】
前記追加の情報および前記１つまたは複数の写真が前記移動体端末のユーザによって前記サーバに提供される唯一の情報である請求項１から１７のいずれか一項に記載の方法。
【請求項１９】
写真を格納するための光学装置と、
前記写真をサーバに送信するための装置と、
送信された写真の内容に関連する、サーバからの情報を受信するための装置とを備え、
入力装置は、任意選択で前記光学装置とは別のものでもよく、前記サーバが前記送信された写真のサブセットを識別する助けをすることが意図された追加の情報を前記移動体端末のユーザが収集するためのものであり、
前記送信装置が前記追加の情報を前記サーバに送信するように構成される、移動体端末。
【請求項２０】
写真を移動体端末から受信するための装置と、
受信された写真を分析し、分析された写真を分析された前記写真の内容に関連する情報に関連付けるための装置と、
前記移動体端末に前記写真に関連する情報の少なくとも一部を送信するための装置とを備え、
前記受信装置が前記移動体端末から前記サーバが前記写真のサブセットを識別する助けをする追加の情報を受信するように構成され、
前記分析および関連付け装置が前記追加の情報を使用して前記写真のサブセットを識別するように構成される、サーバ。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は、参照により開示全体を本明細書に組み込み、優先権を主張する、２００４年１０月２４日に出願の仏国特許出願第０４１１３７４号に基づく。
【０００２】
本発明は、移動体端末とサーバの間の情報交換方法に関する。移動体端末のユーザはオブジェクトの写真をサーバに送信し、サーバはそのオブジェクトに関連する情報を送り返す。情報の交換は継続され、呼により移動体端末のユーザがサーバから写真のオブジェクトに関連する追加の情報を受信することができるようになる。
【背景技術】
【０００３】
中国特許出願公開第１４５８６１３号明細書に記載の従来技術によれば、認証マークの写真を移動体端末からサーバに送信し、サーバがその写真を認証マークの事前設定ベースと比較して、次にその認証マークが本物かどうかを移動体端末に知らせる方法が認証の分野で知られている。上記の従来技術の欠点は、事前定義されたデータベースに含まれる１組の参照と同一に比較されるのが１つのタイプのオブジェクトに限定されることである。さらに、応答がはい／いいえのタイプであるために、応答内容が比較的乏しい。オブジェクトが事前定義されたデータベースの１組の参照と同一に比較されなくなると、この従来技術では、もはや移動体端末のユーザに写真のオブジェクトに関する情報を提供することができない。
【０００４】
本発明は、移動体端末のユーザが、写真の他に、サーバが写真にある関連するオブジェクトを識別することができるようにし、それによってサーバが適切なデータベースを選択する際の助をし、適用可能な場合は、関連するオブジェクト、すなわち移動体端末のユーザが関心を持つオブジェクトにさらに適した内容の豊富な応答をサーバが移動体端末のユーザに提供することができるようにする追加の情報を提供することを提案する。さもなければ、ユーザからの追加の情報を全く用いない完全自動形状認識検索では、サーバが多数の非常に大きいデータベースを走査することになり、写真の分析に時間がかかりすぎる。移動体端末のユーザの僅かな労力を要することは、プロセスをできるだけ自動化し、ユーザ側の労力を最低限に抑える通常の目的に反するが、妥当なレベルのリソースの使用によって、したがって妥当な応答時間内かつ妥当な全体コスト内で十分な応答を得ることによって、移動体端末のユーザに利益を多くもたらすものである。さらに、写真は通常、豊富で複雑な内容を有しているが、移動体端末のユーザは写真の中の１つの要素だけ、または多くても限定数の要素だけにしか関心がないことが多いため、ユーザがサーバを少しも誘導しない場合、サーバが情報に関するユーザの要件を対象とする前に移動体端末のユーザに関係のない多数の質問を行なわなければならなくなる恐れがあり、それによってユーザを煩わせ、ユーザにとってサービスが有益であるよりもむしろ迷惑なものになる可能性がある。
【特許文献１】中国特許出願公開第１４５８６１３号明細書
【特許文献２】独国特許出願公開第１０２４５９００号明細書
【発明の開示】
【課題を解決するための手段】
【０００５】
本発明は、少なくとも１つの写真を移動体端末からサーバに送信するステップ、サーバが送信された写真を分析するステップ、分析された写真を写真の内容に関連する情報に関連付けるステップ、および移動体端末に写真に関連する情報の少なくとも一部を送信するステップを含み、移動体端末がサーバに追加の情報を提供してサーバが写真のサブセットを識別する助けをし、サーバが追加の情報を使用して写真のサブセットを識別する方法を提供する。
【０００６】
識別を実行するには、サーバは、先ず追加の情報を使用して写真のサブセットを強調表示し、次いでサーバは、好ましくは追加の情報の助けなしで、しかし場合によっては追加の情報の助けを用いて、強調表示されたサブセットを識別する。識別を実行する他の方法では、サーバが追加の情報を使用して写真のサブセットを同時に強調表示し識別する。
【０００７】
追加の情報および１つまたは複数の写真は、移動体端末のユーザによってサーバに提供される唯一の情報であることが好ましい。
【０００８】
本発明は、本発明の方法を実施するのに特に有益な移動体端末およびサーバにも関する。移動体端末は携帯電話であることが好ましい。
【０００９】
本発明は、写真を格納するための光学装置、写真をサーバに送信するための装置、送信された写真の内容に関連するサーバからの情報を受信するための装置、およびサーバが送信された写真のサブセットを識別する助けをすることが意図された追加の情報を移動体端末のユーザが収集するための任意選択で光学装置とは別のものでもよい入力装置を備え、送信装置が追加の情報をサーバに送信するように構成されている移動体端末も提供する。
【００１０】
本発明はさらに、写真を移動体端末から受信するための装置、受信された写真を分析し、分析された写真を分析された写真の内容に関連する情報に関連付けるための装置、および移動体端末に写真に関連する情報の少なくとも一部を送信するための装置を備え、受信装置が、移動体端末から追加の情報を受信してサーバが写真のサブセットを識別する助けをするように構成され、分析および関連付け装置が、追加の情報を使用して写真のサブセットを識別するように構成される、サーバを提供する。
【００１１】
以下の説明および一例として提供される添付の図面を考慮することにより、本発明がよりよく理解され、本発明の他の特徴および利点が明らかになるであろう。
【発明を実施するための最良の形態】
【００１２】
図１は、本発明の方法を使用するシステムの一例を示す図である。移動体端末１は通信ネットワーク２を介してサーバ３に接続される。通信ネットワーク２はインターネットタイプのネットワークである。移動体端末１は、たとえば汎用パケット無線サービス（ＧＰＲＳ）接続によってネットワーク２に接続された携帯電話である。サーバ３は、例えば非対称データ加入者回線（ＡＤＳＬ）によってネットワーク２に接続される。移動体端末１とサーバ３は、ネットワーク２を介して互いに通信する。移動体端末１は、少なくとも１つの写真、場合によってはビデオを構成する１組の写真を撮るための光学装置１０、受信装置１１、送信装置１２、および入力装置１３を備える。サーバ３は、分析装置３１、受信装置３２、送信装置３３、関連付け装置３４、および情報データベース３５を備える。
【００１３】
光学記録装置１０は写真を撮る。追加の情報は、移動体端末１のユーザによって入力装置１３を介して入力される。移動体端末１の送信装置１２は、写真および追加の情報をサーバ３の受信装置３２に送信する。分析装置３１は、追加の情報の助けを用いて写真の内容を分析する。より正確には、分析装置３１は追加の情報によって、具体的には形状認識方法を使用して写真のサブセットを識別する。サブセットが識別された後、関連付け装置３４は、場合によっては参照オブジェクトを含むデータベースの助けで、オブジェクトを識別されたサブセットに関連付ける。オブジェクトは、識別されたサブセットの内容に対応する。次いで、関連付け装置３４は、たとえばサーバ３の内部の情報データベース３５の助けで、またはネットワーク２を介して情報を外部データベース２０と交換し、受信装置３２および送信装置３３を使用することによって、情報をそのオブジェクトに関連付ける。オブジェクトに関連付けられた情報は、サーバ３の送信装置３３によって移動体端末１の受信装置１１に送信される。次いで、移動体端末１のユーザは、オブジェクトに関連付けられた情報にアクセスすることができる。
【００１４】
一実装形態では、追加の情報はテキスト形式である。移動体端末によってサーバに写真と共に送信されるのはメッセージであり、このメッセージは、単語、たとえば「動物」を含むことができる。サーバは次いで、写真の様々な領域を分析し、動物を捜し、最終的にたとえば写真の大きい黄色および茶色の領域で「ライオン」を認識する。一選択によれば、テキスト形式の追加の情報は、ショートメッセージサービス（ＳＭＳ）メッセージの形で送信される。他の選択では、テキスト形式の追加の情報と写真の組合せがＭＭＳ（マルチメディアメッセージサービス）メッセージの形で送信される。
【００１５】
他の実装形態では、追加の情報は、サーバがこの領域の識別に進む前にこの領域を強調表示することができるようにする、写真の少なくとも１つの領域内の図形マークを含む。たとえば、ユーザはカーソルを写真の白い領域上に置き、それによってユーザが写真の中で関心を持つもの、すなわち、たとえば「Ｖｉｃｔｏｒｙ  ｏｆ  Ｓａｍｏｔｈｒａｃｅ」を表す像に相当する白い領域をサーバに示す。他の例では、ユーザは、たとえば正方形で白い領域を囲み、この方法で、ユーザがこの枠で囲んだ領域内で関心を持つ、「Ｖｉｃｔｏｒｙ  ｏｆ  Ｓａｍｏｔｈｒａｃｅ」を表す像を含むオブジェクトをサーバに示す。
【００１６】
他の実装形態では、移動体端末はサーバにビデオ形式で複数の写真を送信する。追加の情報は、ビデオに関連するサウンドトラックに含まれた音声メッセージを含む。サファリ旅行中のユーザがサバンナを走って横断する草食動物の群れを撮影中に、「長い角を持つ動物」に興味があると声に出して言う。次いでサーバは、写真の対応する領域を識別し、動物に関するデータベースの要素との比較によって動物を検索し、セーブルアンテロープを認識する。次いでサーバは、移動体端末に動物の名前（セーブルアンテロープ）およびその動物についての詳細な情報を送信することができる。
【００１７】
他の実装形態では、追加の情報は、移動体端末とサーバの間の電話呼出し中に移動体端末のユーザによってサーバに送信される音声メッセージを含む。したがって、追加の情報は全て、サーバが写真の中のオブジェクトを迅速に正しく低リソースコストで認識する助けをする。たとえば、ユーザは写真を送信し、「茶色に見えるキノコ」が識別されることを要求する。次いでサーバは、難なくそのキノコをヤマドリタケとして識別し、たとえばそれがヤマドリタケであること、食用であること、またオムレツに料理するとおいしいことまでユーザに知らせる。
【００１８】
他の実装形態では、追加の情報は、たとえばユーザを誘導するためのサーバによって移動体端末に送信される多岐選択式質問事項への応答を含む。すなわち、たとえば、オブジェクトの色は概ね緑、黄色、赤であるか？オブジェクトは植物、動物、芸術品であるか？オブジェクトは右側、左側、最上部、底部に存在するか？サーバは最終的に、動物を表す右側の長く暗いスポットがウツボ類であることを認識する。
【００１９】
他の実装形態では、追加の情報が所定の要求によって得られ、それによってサーバはユーザにある情報を求める。
【００２０】
他の実装形態では、追加の情報が一定期間に１回だけ与えられる。たとえば、「私は一日中ルーブルにいるので、美術館が有する芸術品に関する情報が欲しい」、または「私は今週ケニアにサファリ旅行に行くので、そこで出会う動物全てに関する情報が欲しい」などである。デフォルト値により、サーバは選択された期間中、同じ追加の情報を常に考慮し、それによって移動体端末のユーザがサーバによって提供されるサービスをさらに使用しやすくなる。一選択では、ユーザが、ユーザの嗜好、アクティビティ、および関心を示すユーザプロファイルを定義して、移動体端末のユーザによって提供される写真に含まれたオブジェクトをサーバが識別する助けをする可能性も有する。
【００２１】
一実装形態では、追加の情報が移動体端末によって写真と同時に送信される。移動体端末のユーザは、始めに僅かな行動をとる必要があるが、サーバが次いで迅速かつ効果的に操作する。他の実装形態では、追加の情報が、写真の送信に後続するサーバからの応答後に、移動体端末によって送信される。したがって、サーバからの応答によって、追加の情報の提供によりユーザを誘導することができる。ユーザは、完全に受身のままでよい点であまり労力を用いなくてもよいが、この手順は、移動体端末とサーバの間の情報交換のため、僅かに長い時間がかかる。したがって、サーバは、サーバが写真を分析するために必要な追加の情報を得るのに少し長い時間が必要である。
【００２２】
好ましい選択は、この方法がさらに、サーバが移動体端末に「ヒント」を送信するステップ、移動体端末が様々な条件下で前の写真への少なくとも１つの追加の写真を撮り、こうした様々な条件がそのヒントを反映するステップ、および移動体端末が追加の写真をサーバに送信するステップを含むことである。最初の写真が、サーバがユーザのためにオブジェクトをうまく決定するには不十分である場合、ヒントは、たとえば、「角度を変える」、「さらに近づく」、「フラッシュのスイッチを入れる」、「ズームイン」など、たとえば様々な環境で別の写真を撮ることを求める要求でもよい。
【００２３】
好ましい選択は、写真に関連する情報が移動体端末のユーザのための行動計画を含むことである。たとえば、ユーザが蛇の写真を送信する。サーバは、蛇の名前、および、その蛇による咬傷からの毒がたとえば犠牲者の死など取り返しのつかない結果を招く前にユーザが病院に行くのに残された時間を情報によってユーザに送信することができる。本発明の端末は、主な解毒剤のキットと有利に組み合わせることができ、蛇の写真に応答してユーザは以下の情報を受信する。「噛まれた場合、シリンジＮｏ．３の中身を至急に注射し、２時間以内に病院に行きなさい」。
【００２４】
好ましい選択は、移動体端末の位置を決定し、移動体端末に地理的に近いサーバを選択することができるようにして、通信コストを低減することである。
【００２５】
好ましい選択は、移動体端末の位置決めが追加の情報の少なくとも一部を構成することである。たとえば、移動体端末のユーザがサーバに写真を送信し、サーバが、ユーザがルーブル美術館にいることを突きとめた場合、サーバはユーザが芸術品に関する情報を求める可能性が非常に高いことを知り、ルーブルにある芸術品の１つを直接認識することを試みてデフォルト値によって写真を分析することができる。たとえば、移動体端末のユーザがサーバに写真を送信し、サーバが、ユーザがヴァンセンヌ（Ｖｉｎｃｅｎｎｅｓ）動物園にいることを突き止めた場合、サーバは、ユーザが動物に関する情報を求める可能性が非常に高いことを知り、ヴァンセンヌ動物園にいる動物の１つを直接認識することを試みてデフォルト値によって写真を分析することができる。たとえば、ヴァンセンヌ動物園の熊の写真の場合、サーバは移動体端末にその動物に関する情報を送信し、米国国立公園で撮られた熊の写真の場合は、熊が自由に歩き回っているため、サーバは、その動物に関する情報に追加して、従うべき安全の説明を移動体端末に送信することができる。
【００２６】
好ましい選択は、サーバによって移動体端末に送信される写真に関連する情報が、たとえばメールによって送信されるＨＴＭＬページの形をとることである。
【００２７】
本発明の方法の用途は多様であってもよく、一例であって本発明を限定しない方法で、キノコの認識およびそれが食用に適しているか、または毒性であるかの提示、動物の認識および動物の大きさ、体重、懐妊期間、生息地など主な特性の提示、蛇の認識および噛まれた場合に注射すべき解毒剤の提示、芸術品と記念物の認識およびその製作者、時代などの提示などに関することがある。
【図面の簡単な説明】
【００２８】
【図１】本発明の方法を使用するシステムの一例を示す図である。
【符号の説明】
【００２９】
１  移動体端末
２  ネットワーク
３  サーバ
１０  光学装置
１１、３２  受信装置
１２、３３  送信装置
１３  入力装置
２０  外部データベース
３５  情報データベース
３１  分析装置
３４  関連付け装置
【図１】
2006155592.tif 000003
【外国語明細書】
2006155592.tif 000004
2006155592.tif 000005
2006155592.tif 000006
2006155592.tif 000007
2006155592.tif 000008
2006155592.tif 000009
2006155592.tif 000010
2006155592.tif 000011
2006155592.tif 000012
2006155592.tif 000013
2006155592.tif 000014
2006155592.tif 000015