(57)【要約】ユーザは、ユーザが紙にペンで１つまたは複数のオブジェクトやコマンドにマークしたディジタル画像を捕らえる。マーキングはマーキング規則の所定の集合に従って行われ、これにより、後でオブジェクトとコマンドを容易に分離することができる。オブジェクトやコマンドをマークする規則は、円で囲む、下線を引く、強調表示する、などである。ディジタル画像内に埋め込まれたコマンドはディジタル画像内の１つまたは複数のオブジェクトに関連付けることができる。この関連付けは関連付け規則の所定の集合に従って行われる。次に、処理のために画像を計算装置に送信する。送信には、ケーブルや、ブルートゥースなどのＩＲまたはＦＲ技術や、携帯電話を用いる。計算装置は「コマンド・サーバ」と呼ばれる。これは、マーキング規則の所定の集合を用いてディジタル画像を解析することにより、オブジェクトやコマンドを識別して分離する。またコマンド・サーバは、マーキング規則と関連付け規則の所定の集合に従ってディジタル画像を解析することにより、コマンドを識別し、解釈し、オブジェクトと関連付ける。最後に、コマンド・サーバはコマンドに関係するサービスをオブジェクトに開始する。
2004504676.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも１つの処理コマンドがマークされている原始ピクチャのディジタル画像内に存在する情報を処理する方法であって、
・　前記ディジタル画像内の少なくとも１つの処理コマンドを識別するステップと、
・　前記少なくとも１つの処理コマンドに従って前記ディジタル画像に関する処理を行うステップと、
を含む情報の処理方法。
【請求項２】
前記画像内の少なくとも１つの図形オブジェクトを識別するステップを更に含み、また前記少なくとも１つのオブジェクトの識別と前記少なくとも１つの処理コマンドの識別はマーキング規則の所定の集合を用いて行う、請求項１記載の情報の処理方法。
【請求項３】
前記マーキング規則の所定の集合は少なくとも１つの以下のマーキング規則、すなわち、
・　オブジェクトまたはコマンドを円で囲む
・　オブジェクトまたはコマンドの周囲に四角を描く
・　オブジェクトまたはコマンドに下線を引く
・　オブジェクトまたはコマンドを特殊な「マーカ・ペン」で強調表示する
ことを含む請求項２記載の情報の処理方法。
【請求項４】
少なくとも１つの処理コマンドと少なくとも１つの図形オブジェクトとの関係を識別するステップを更に含み、前記識別は関連付け規則の所定の集合を用いて行う、請求項２記載の情報の処理方法。
【請求項５】
前記関連付け規則の所定の集合は少なくとも１つの以下の関連付け規則、すなわち、
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトまたはそれらのマーキング図形の間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く
ことを含む請求項４記載の情報の処理方法。
【請求項６】
前記処理は少なくとも１つの以下のサービス、すなわち、
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　電子メールを送る
・　ファックスを送る
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前にコマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す
ことを開始することを含む請求項１−５のどれか記載の情報の処理方法。
【請求項７】
少なくとも１つの処理コマンドがマークされている原始ピクチャのディジタル画像内に存在する情報を処理する装置であって、
・　前記ディジタル画像内の少なくとも１つの処理コマンドを識別する手段と、
・　前記少なくとも１つの処理コマンドに従って前記ディジタル画像に関する処理を行う手段と、
を含む情報の処理装置。
【請求項８】
前記画像内の少なくとも１つの図形オブジェクトを識別する手段を更に含み、また前記少なくとも１つのオブジェクトの識別手段または前記少なくとも１つの処理コマンドの識別手段はマーキング規則の所定の集合を用いる手段を用いる、請求項７記載の情報の処理装置。
【請求項９】
前記マーキング規則の所定の集合は少なくとも１つの以下のマーキング規則、すなわち、
・　オブジェクトまたはコマンドを円で囲む
・　オブジェクトまたはコマンドの周囲に四角を描く
・　オブジェクトまたはコマンドに下線を引く
・　オブジェクトまたはコマンドを特殊な「マーカ・ペン」で強調表示する
ことを含む請求項８記載の情報の処理装置。
【請求項１０】
少なくとも１つの処理コマンドと少なくとも１つの図形オブジェクトとの関係を識別する手段を更に含み、前記識別は関連付け規則の所定の集合を用いて行う、請求項８記載の情報の処理装置。
【請求項１１】
前記関連付け規則の所定の集合は少なくとも１つの以下の関連付け規則、すなわち、
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトまたはそれらのマーキング図形の間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く
ことを含む請求項１０記載の情報の処理装置。
【請求項１２】
前記オブジェクトを処理する手段は少なくとも１つの以下のサービス、すなわち、
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　電子メールを送る
・　ファックスを送る
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前にコマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す
ことを開始する手段を含む請求項７−１１のどれか記載の情報の処理装置。
【請求項１３】
少なくとも１つの処理コマンドがマークされている原始ピクチャのディジタル画像内に存在する情報を処理することが可能な移動体通信端末であって、
・　前記ピクチャのディジタル画像を得る手段と、
・　前記ディジタル画像内の少なくとも１つの処理コマンドを識別する手段と、
・　前記少なくとも１つの処理コマンドに従って前記ディジタル画像に関する処理を行う手段と、
を含む移動体通信端末。
【請求項１４】
前記画像内の少なくとも１つの図形オブジェクトを識別する手段を更に含み、また前記少なくとも１つのオブジェクトの識別手段または前記少なくとも１つの処理コマンドの識別手段はマーキング規則の所定の集合を用いる手段を用いる、請求項１３記載の移動体通信端末。
【請求項１５】
前記マーキング規則の所定の集合は少なくとも１つの以下のマーキング規則、すなわち、
・　オブジェクトまたはコマンドを円で囲む
・　オブジェクトまたはコマンドの周囲に四角を描く
・　オブジェクトまたはコマンドに下線を引く
・　オブジェクトまたはコマンドを特殊な「マーカ・ペン」で強調表示する
ことを含む請求項１４記載の移動体通信端末。
【請求項１６】
少なくとも１つの処理コマンドと少なくとも１つの図形オブジェクトとの関係を識別する手段を更に含み、前記識別は関連付け規則の所定の集合を用いて行う、請求項１４記載の移動体通信端末。
【請求項１７】
前記関連付け規則の所定の集合は少なくとも１つの以下の関連付け規則、すなわち、
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトまたはそれらのマーキング図形の間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く
ことを含む請求項１６記載の移動体通信端末。
【請求項１８】
前記オブジェクトを処理する手段は少なくとも１つの以下のサービス、すなわち、
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　電子メールを送る
・　ファックスを送る
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前にコマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す
ことを開始する手段を含む請求項１３−１７のどれか記載の移動体通信端末。
【請求項１９】
請求項１−６のどれか記載の方法を実行するソフトウエア命令を含むコンピュータ・プログラム。
【発明の詳細な説明】
【０００１】
（発明の分野）
本発明はディジタル画像内の情報を処理する方法に関する。より正確に述べると、本発明はユーザがディジタル画像上で実行してほしいサービスに関する埋込みコマンドを含むディジタル画像を処理することに関する。
【０００２】
（背景）
ディジタル画像を捕らえることのできるディジタル・カメラが世界中で広く用いられている。かかる画像はコンピュータに転送され、将来検索できるように記憶されるか、または電子メールの添付ファイルとして送られる。電子メールの受信者はこの添付ファイルを開き、専用のアプリケーション・プログラムを用いて画像を見ることができる。かかる電子メールは、モデムを含むまたはモデムに接続する移動電話を介して送ることもできる。
【０００３】
問題は、ディジタル画像の受信者がディジタル画像の任意の必要な処理を手動で行わなければならないことである。ディジタル画像がピクチャを表す場合は、受信者はピクチャを印刷または記憶することのできるソフトウエア・アプリケーションでこのピクチャを開かなければならない。ディジタル画像が手書きのテキストを表す場合は、受信者は画像をディジタル文字に変換する手書き認識ソフトウエア・アプリケーションで画像を開き、次にその文字を或るソフトウエア・ワード処理アプリケーションに適合するファイル・フォーマットに変換したいと思うであろう。
【０００４】
もう１つの問題は、ディジタル画像が、ユーザが種々の操作を行いたいと思う複数のオブジェクトを含む場合があることである。ディジタル文字に変換するソフトウエアで解釈する必要のある、活字または手書きのテキストを含むオブジェクトもある。または、圧縮したり、別のピクチャ・ファイル・フォーマットに変換したりする必要のある、ディジタル・ピクチャを表すオブジェクトもある。公知のソフトウエア・アプリケーションはディジタル画像をテキストやピクチャやスケッチなどのオブジェクトに分離できるほど正確ではないので、ディジタル画像に含まれる種々のオブジェクトに関する種々のサービスを自動的に実行するのに適していない。
【０００５】
更に別の問題は、ディジタル画像の送信者が、基本的に性質の異なる多くのステップを行う必要があることである。例えば、ディジタル・カメラで画像を捕らえ、移動電話またはコンピュータにこれを送り、電子メールのアプリケーション・プログラムを起動し、ディジタル画像を電子メールに挿入し、受信者の電子メール・アドレスを入力しまたは探し、そして電子メールを送ることなどである。
【０００６】
（発明の概要）
以上の点から、本発明の目的は、従来の方法の欠点を克服してディジタル画像を知的に解釈し処理する全く新しい型の方法を提供することである。
この目的は、ディジタル画像を解析してオブジェクトとそのオブジェクトに関連するコマンドとに分離する方法と装置により達成することができる。更にオブジェクトに対して、関連するコマンドに関する種々の処理を行う。
【０００７】
本発明の１つの形態では、ユーザはディジタル・カメラを用いて、ユーザが紙に書きつけたコマンドやオブジェクトのディジタル画像を捕らえる。１つまたは複数のコマンドやオブジェクトはペンでマークされている。マーキングはマーキング規則の所定の集合に従って行われ、これにより、後で個々のオブジェクトとコマンドを容易に分離することができる。オブジェクトやコマンドをマークする規則は、例えば、円で囲む、下線を引く、強調表示する、などである。ディジタル画像内に埋め込まれたコマンドはディジタル画像内の１つまたは複数のオブジェクトに関連付けることができる。この関連付けは関連付け規則の所定の集合に従って行われる。関連付け規則により、画像内の種々のコマンドと種々のオブジェクトとを関連付けることができる。次に、処理のために画像を計算装置に送信する。送信には、ケーブルや、ブルートゥースなどのＩＲまたはＲＦ技術や、携帯電話を用いる。計算装置は「コマンド・サーバ」と呼ばれる。これは、マーキング規則の所定の集合を用いてディジタル画像を解析することにより、オブジェクトやコマンドを識別して分離する。またコマンド・サーバは、マーキング規則と関連付け規則の所定の集合に従ってディジタル画像を解析することにより、コマンドを識別し、解釈し、オブジェクトと関連付ける。コマンド・サーバは、例えば広告やパンフレットの印刷されたテキストや図形やユーザが書き込んだ手書きのテキストから成る、ディジタル画像を解釈することができる。最後に、コマンド・サーバはコマンドに関するサービスをオブジェクトに開始する。
ディジタル画像が１オブジェクトだけを含む場合は、コマンド・サーバで別のオブジェクトから分離する必要がないので、オブジェクトのマーキングは省略してよい。
【０００８】
本発明の利点は、ピクチャに含まれる情報を迅速に、簡単に、直感的に、自動的に処理する方法を提供することである。通常のコンピュータの場合のような本格的なマン・マシン・インターフェースを必要とせずに、ユーザは高度な電子的メッセージ伝達やその他のサービスを行うことができる。かかるサービスの例を以下に示す。
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項（ｔｏ−ｄｏ）」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前に、コマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために、１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す。
ユーザは自分用のユーザ・プロフィールを編集することにより、自分だけのサービスや関連付け規則やマーキング規則を自分で作ることができる。
【０００９】
理解されるように、ここに開示する発明は上に述べた目的を達成してその利点を提供するものであるが、ここに述べる本発明の特徴は好ましい実施の形態の単なる例である。従って、本発明の範囲はここに説明する実施の形態の詳細に限定されるものではない。この説明から推測される本発明と同等の、適合する、変更された形態は請求の範囲で規定される本発明の範囲に含まれるものである。
【００１０】
（実施の形態の詳細な説明）
図１は、組込みディジタル・カメラ（１０３）を有する移動電話（１０１）を示す。移動電話は、セルラ網と通信するためのアンテナ（１０２）と、スピーカ（１０４）と、ディスプレイ（１０５）と、キーパッド（１０６）と、マイクロホン（１０７）とを有する。システム・コネクタやＩＲポートや短距離ＲＦリンクを介して画像を移動電話に転送する別個のディジタル・カメラを用いることも可能である。更に別の選択肢は、画像をディジタル・カメラまたはスキャナで捕らえて、コマンド・サーバを有するローカル・コンピュータに送り、またはコマンド・サーバを有する別のコンピュータに網を通して画像を送ることである。このコマンド・サーバは、ディジタル画像を処理してコマンドに関係するサービスを開始する機能を有する。
【００１１】
図２は、ペンで紙片に書かれた情報を表すディジタル画像の例を表す。この画像は、マーキング規則の所定の集合に従ってペンを用いて円（２０１，２０５）で囲んだ１つのテキスト・オブジェクト（２０４）と１つのピクチャ・オブジェクト（２０７）とを含む。ユーザは、関連付け規則の所定の集合に従って円とコマンド（２０６，２０３）とを書き込んでいる。コマンド（２０３）は「Ｔ，Ｅ（Ｍａｘ）」で表されている。これは、円で囲んだオブジェクトをテキスト（「Ｔ」はテキスト）として扱って電子メール（「Ｅ」は電子メール）でＭａｘに送るようコマンド・サーバに指示する。円コマンド（２０６）は「Ｐ」で表されている。これは、この円がピクチャを含むことをコマンド・サーバに知らせる。この情報は、テキストを含むことを示した外側の円の情報を無効にする。円とその関連するコマンドとの間の線（２０２）は関連付け規則の所定の集合に従う関係を明示する。コマンドは、円内に含まれるオブジェクトに実行することをユーザが希望するサービスの種類を示す。この例の場合ユーザは、サーバが電子メールを作成してＭａｘに送ることを希望する。「Ｍａｘ」は、コマンド・サーバのデータベース内にユーザが予め規定しているもので、Ｍａｘの完全な電子メール・アドレスのニックネームを表す。電子メールの本体は、コマンド・サーバが手書きのテキスト（２０４）をディジタル文字に変換した結果である１つのテキスト部と、オブジェクト（２０７）のビット・マップ表現を含む１つのピクチャ部とを含む。
【００１２】
図３は、予め印刷された情報と手書きの円とコマンドとの組合わせを表すディジタル画像の別の例を示す。この画像は、マーキング規則の所定の集合に従ってペンを用いて円（３０１）で囲んだろうそくの広告（３０４）を含む。ユーザは、円（３０１）と、関連するパラメータ（Ｃ，＄５）を持つコマンド（３０３）とを書き込んでいる。円（３０１）とその関連するコマンド（３０３）との間の線（３０２）は関連付け規則の所定の集合に従う関係を明示する。コマンド（３０３）は、円内に含まれるオブジェクト（３０４）にユーザがどのようなサービスを行ってほしいかを記述する。この場合ユーザは、コマンド・サーバが、関連するオブジェクト（３０４）内のテキスト（「Ｔ」はテキスト）を解析して注文する（「Ｂ」は購入）ことを希望する。注文はクレジット・カード（「Ｃ」はクレジット・カード）で支払われる。注文の総額は＄５である。この例では、コマンド・サーバは広告内のテキストを解釈し、注文を送る先の住所を探す。次に、広告のコピーと、ユーザの住所、クレジット・カード番号、クレジット・カードから引き出すことをユーザが承諾する金額とを含む電子メールを作成する。ユーザの個人データはコマンド・サーバのデータベース内に予め入力されている。
【００１３】
ユーザは所定のマーキング規則を用いて、ディジタル画像内のオブジェクトとコマンドの識別と分離を容易に行うことができる。オブジェクトまたはコマンドをマークする方法の例を次に示す。
・　円で囲む
・　周囲に四角を描く
・　下線を引く
・　特殊な「マーカ・ペン」で強調表示する。
【００１４】
所定のマーキング規則として円で囲む場合は、円は完全な円または楕円でなくてよい。情報を囲む任意の適当な図形曲線を用いてよい。円と解釈するために囲む曲線を閉じる必要があるかどうかは、画像処理に決定を任せてよい。
【００１５】
ユーザは、所定の関連付け規則を用いてコマンドとオブジェクトとを関連付ける。コマンドとオブジェクトとを関連付ける方法の例を次に示す。
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトとの間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く。
【００１６】
ディジタル画像が１オブジェクトだけを含む場合は関連付けを省略してよい。
マーキング規則の所定の集合も関連付け規則の所定の集合も、種々の方法で指定してよい。各ユーザは自分の好みに従って規則を個別化してよい。かかる個別化された規則は各ユーザのプロフィール内に記憶してよい。
【００１７】
紙、チラシ、写真などの任意の種類の印刷された材料にペンで書くことができる。ユーザは、手書きのテキストや予め印刷されたテキストまたはピクチャやこれらの組合わせを含むオブジェクトにマークを付け、関連付け規則の所定の集合を用いて、オブジェクトに関連するコマンドを書いてよい。
コマンドの一般的なフォーマットは次のように定義される。
＜コマンド１（パラメータ１，パラメータ２，．．．），コマンド２（パラメータ１，パラメータ２，．．．），．．．＞
【００１８】
コマンドとこれに関連するパラメータのいくつかの例を以下に示す。
１．　Ｐ，Ｅ（ｍａｇ，ｍａｒ）
これは、ディジタル画像がピクチャ（Ｐ）を含むことと、電子メール（Ｅ）により受信者「ｍａｇ」と「ｍａｒ」（ユーザが友達のＭａｇｎｕｓとＭｒｉａの実際のインターネット・アドレスに関連付けたニックネーム）に送ることとを意味する。
２．　Ｔ，Ｅ（ｍａｇ，ｍａｒ）
これはディジタル画像がテキスト（Ｔ）を含むことと、これを手書き認識ソフトウエアで解釈してディジタル文字に変換した後で電子メール（Ｅ）により「ｍａｇ」と「ｍａｒ」の電子メール・アドレスに送ることとを意味する。
３．　Ｄ
これは、関連するオブジェクトを棄てる（Ｄ）ことを意味する。これはユーザが何か書いたことを後悔したときに用いる。
４．　Ｍ
これは関連するオブジェクトが約束（Ｍは「会合」）を含むことと、後で検索するためにまたは任意のユーザの計算装置と同期させるためにコマンド・サーバがユーザの電子予定表に入力することとを意味する。
５．　ＴＤ
これは関連するオブジェクトが「実施事項」項目（ＴＤ）を含むことと、後で検索するためにまたは任意のユーザの計算装置と同期させるためにコマンド・サーバがユーザの電子「実施事項リスト」に入力することとを意味する。
【００１９】
６．　Ａ
これは関連するオブジェクトがアドレス項目（Ａ）を含むことと、後で検索するためにまたは任意のユーザの計算装置と同期させるために円サーバがユーザの電子住所録に入力することとを意味する。
７．　Ｐ
これは、関連するオブジェクトが金融取引（Ｐは「支払い」）に関する情報を含むことと、コマンド・サーバがユーザのためにこれを実行することとを意味する。
８．　Ｅ（Ｐｉｃ３，６，１２，ｍａｒ）
これは、ディジタル・カメラまたはディジタル画像の記憶手段を含む移動電話からピクチャ（Ｐｉｃ）番号３，６，１２を取り出して、電子メールの一部として「ｍａｒ」のアドレスに送ることを意味する。このコマンドは、普通のはがきのメッセージと同様な手書きのまたは印刷されたテキスト・メッセージを含むオブジェクトに関連してよい。ここでは、ディジタル画像を記憶する装置はピクチャを取り出すためにコマンドをコマンド・サーバから受けることができると仮定する。
９．　Ｃ，Ｓ
これは、関連するオブジェクト内で見つかった番号を移動電話がダイヤルすることを意味する。これは、やはり関連するオブジェクト内で見つかった番号と名前を移動電話の電話帳に記憶することも意味する。ここでは、コマンド・サーバが移動電話内にあるかまたは通信する相手の外部計算装置内にあるかにかかわらず、移動電話はダイヤルと記憶のためにコマンドをコマンド・サーバから受けることができると仮定する。
【００２０】
利用可能なコマンドの集合はそれぞれの必要に応じて個人化してよい。これは、コマンド・サーバを用いるためにユーザが支払う加入料の基礎の１つでもある。
コマンド・サーバは自分自身を認証することをユーザに要求した後、ユーザから任意のデータまたはディジタル画像を受け、またはユーザが要求する任意の活動を行う。認証は、ＧＳＭ型の移動電話で行うのと同じ方法で、すなわちＳＩＭカード（加入者識別モジュール）で、行うことができる。機密保護を更に強化するため、サーバはピン・コードを要求してよいし、また送信されるデータを全て暗号化することを要求してよい。認証の別の方法は、電子署名を用いて行っても、ピクチャに含まれるユーザの手書きの署名で行ってもよい。
【００２１】
図４は、或る例示の実施の形態を示す。これは、埋込みディジタル・カメラを含む移動電話（４０１）と、セルラ基地局（４０２）と、セルラ網（４０３）と、インターネット（４０５）と、コマンド・サーバ（４０４）と、標準のコンピュータ（４０６）とで構成する。ディジタル画像は移動電話から基地局を介してセルラ網に送られ、セルラ網は選択されたコマンド・サーバにこれを転送する。コマンド・サーバのインターネット・アドレスはユーザが予め定義して移動電話内に記憶する。これにより、ユーザは使う度にコマンド・サーバのアドレスを入力する必要がなくなる。コマンド・サーバは、個人化されたユーザ・プロフィールを含むユーザの個人的な記憶された情報を含む。この情報は、インターネットに接続された一般のコンピュータ（４０６）からアクセスして修正することができる。またユーザ・プロフィールは、マーキング規則と関連付け規則の個人的な集合と利用可能なサービスの集合とで構成してよい。
【００２２】
図５は、コマンド・サーバ（５０１）の或る例示の実施の形態を示す。これは、インターネットへの通信リンク（５０９）と、ＣＰＵ（５０８）と、ユーザ・プロフィールを保持するデータベース（５０４）と、ユーザ・ファイル用の記憶領域（５０７）とで構成する。或るユーザからディジタル画像を含むファイルを受けると、コマンド・サーバは画像の解析を開始する。まず、画像解析ＳＷ（５０２）によりオブジェクトとコマンドとを検出して分離する。ＳＷはマーキング規則の所定の集合を用いる。また、関連付け規則の所定の集合を用いてコマンドとオブジェクトとを関連付ける。次に、識別したコマンドをコマンド・インタープリタＳＷ（５０３）により解釈し、最後に、オブジェクトに種々のサービス（５０５，５０６）を開始する。サービスはコマンドに従って選択される。
【００２３】
ユーザのユーザ・プロフィール（５０４）を保持するデータベースはユーザに関する情報を含む。例えば、
・　クレジット・カード番号
・　次の内容を含む電子名刺
名前
肩書き
住所
電子メール・アドレス
ファクス番号
家庭の電話番号
事務所の電話番号
携帯電話番号
・　個人やグループのニックネームと、電子メール・アドレスなどの完全なデータとを含む住所録。円サーバ内の住所録は、インターネットにより任意のコンピュータからユーザが更新して保持することができる。
・　約束などを含む予定表
・「実施事項」リスト
・　マーキング規則の個人的な集合
・　関連付け規則の個人的な集合
・　アクセス可能なコマンドとサービスの個人的な集合
【００２４】
ユーザ記憶領域は処理済みの全ての画像のコピーを記憶するのに用いられ、または見つかったコマンドにより開始されたサービスと送り出された任意のメッセージの全ての記録を保持する。
コマンド・サーバは、ユーザへの種々の通知や状況報告（受けたディジタル画像を処理したことにより開始された活動を記述する）をユーザの要求に応じて送ることができる。またコマンド・サーバはディジタル画像内のコマンドを解釈した結果をユーザに通知し、ユーザからの確認を待って所望のサービスを開始する。
【００２５】
コマンド・サーバのサービスは単一のユーザに限定されるわけではない。ユーザ毎に別個のユーザ・プロフィールと記憶領域を保持することができる。
ユーザはいつでも、インターネットにアクセスする任意のコンピュータから自分のプロフィールを更新しまたデータ記憶装置と対話することができる。アクセスはパスワードにより保護することができる。
【００２６】
ディジタル画像を記録し、ディジタル画像を送信し、画像を処理するために、種々の装置を用いて実現されるものとして本発明を開示したが、必要なほとんど全てのハードウエアとソフトウエアを単一ユニットで実現することができる。かかるユニットは、強力なディジタル・プロセッサと十分な記憶手段とを有する移動体ユーザ端末（移動電話など）でよい。別の選択肢は、ディジタル・カメラに、またはディジタル・カメラと移動電話との結合体に、コマンド・サーバを有することである。一般的に言うと、ディジタル・カメラと、移動電話（使えるならば）と、コマンド・サーバとは、結合してもよいし、直接または間接に互いに通信することが可能な任意の数の物理的な装置に分散してもよい。
【００２７】
図６は、手書きのメッセージ（６０３）が書かれている紙片（６０１）を表すディジタル画像の一例である。ユーザは下線が引かれたコマンド（６０２）も書き込んでいる。紙の物理的な境界（６０１）を単一オブジェクト（６０３）の囲みとしてよい。従ってオブジェクトの回りの手書きの円は省略されている。
【図面の簡単な説明】
【図１】組込みディジタル・カメラを備える移動電話の略図。
【図２】関連するコマンドを持つ円で囲んだオブジェクトを含む紙のディジタル画像の一例。
【図３】関連するコマンドを持つ円で囲んだオブジェクトを含む紙のディジタル画像の別の例。
【図４】全システムの或る例示の実施の形態の略図。
【図５】含まれる任意のコマンドに従ってディジタル画像を解析して処理することが可能なコマンド・サーバのブロックの略図。
【図６】手書きのメッセージとこれに関連するコマンドを含む紙片のピクチャを表すディジタル画像の一例。
【図１】
2004504676.tif 000003
【図２】
2004504676.tif 000004
【図３】
2004504676.tif 000005
【図４】
2004504676.tif 000006
【図５】
2004504676.tif 000007
【図６】
2004504676.tif 000008
【国際公開パンフレット】
2004504676.tif 000009
2004504676.tif 000010
2004504676.tif 000011
2004504676.tif 000012
2004504676.tif 000013
2004504676.tif 000014
2004504676.tif 000015
2004504676.tif 000016
2004504676.tif 000017
2004504676.tif 000018
2004504676.tif 000019
2004504676.tif 000020
2004504676.tif 000021
2004504676.tif 000022
2004504676.tif 000023
2004504676.tif 000024
2004504676.tif 000025
2004504676.tif 000026
2004504676.tif 000027
2004504676.tif 000028
【手続補正書】
【提出日】平成14年8月28日(2002.8.28)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
少なくとも１つの図形オブジェクトと少なくとも１つの処理コマンドがマークされている原始ピクチャのディジタル画像内に存在する情報を処理する方法であって、
・　マーキング規則の所定の集合を用いて前記ディジタル画像内の少なくとも１つの図形オブジェクトを識別するステップと、
・　マーキング規則の所定の集合を用いて前記ディジタル画像内の少なくとも１つの処理コマンドを識別するステップと、
・　前記少なくとも１つの処理コマンドと前記少なくとも１つの図形オブジェクトとの関係を、関連付け規則の所定の集合を用いて識別するステップと、
・　前記少なくとも１つの処理コマンドに従って前記ディジタル画像に関する処理を行うステップと、
を含む情報の処理方法。
【請求項２】
前記マーキング規則の所定の集合は少なくとも１つの以下のマーキング規則、すなわち、
・　オブジェクトまたはコマンドを円で囲む
・　オブジェクトまたはコマンドの周囲に四角を描く
・　オブジェクトまたはコマンドに下線を引く
・　オブジェクトまたはコマンドを特殊な「マーカ・ペン」で強調表示する
ことを含む請求項１記載の情報の処理方法。
【請求項３】
前記関連付け規則の所定の集合は少なくとも１つの以下の関連付け規則、すなわち、
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトまたはそれらのマーキング図形の間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く
ことを含む請求項１または２記載の情報の処理方法。
【請求項４】
任意の前記マーキング規則の集合と前記関連付け規則の集合を個人化するステップを更に含む、請求項１−３のどれか記載の情報の処理方法。
【請求項５】
前記処理は少なくとも１つの以下のサービス、すなわち、
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　電子メールを送る
・　ファックスを送る
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前にコマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す
ことを開始することを含む請求項１−４のどれか記載の情報の処理方法。
【請求項６】
少なくとも１つの図形オブジェクトと少なくとも１つの処理コマンドがマークされている原始ピクチャのディジタル画像内に存在する情報を処理する装置であって、
・　マーキング規則の所定の集合を用いて前記ディジタル画像内の少なくとも１つの図形オブジェクトを識別する手段と、
・　マーキング規則の所定の集合を用いて前記ディジタル画像内の少なくとも１つの処理コマンドを識別する手段と、
・　前記少なくとも１つの処理コマンドと前記少なくとも１つの図形オブジェクトとの関係を、関連付け規則の所定の集合を用いて識別する手段と、
・　前記少なくとも１つの処理コマンドに従って前記ディジタル画像に関する処理を行う手段と、
を含む情報の処理装置。
【請求項７】
前記マーキング規則の所定の集合は少なくとも１つの以下のマーキング規則、すなわち、
・　オブジェクトまたはコマンドを円で囲む
・　オブジェクトまたはコマンドの周囲に四角を描く
・　オブジェクトまたはコマンドに下線を引く
・　オブジェクトまたはコマンドを特殊な「マーカ・ペン」で強調表示する
ことを含む請求項６記載の情報の処理装置。
【請求項８】
前記関連付け規則の所定の集合は少なくとも１つの以下の関連付け規則、すなわち、
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトまたはそれらのマーキング図形の間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く
ことを含む請求項６または７記載の情報の処理装置。
【請求項９】
任意の前記マーキング規則の集合と前記関連付け規則の集合を個人化する手段を更に含む、請求項６−８のどれか記載の情報の処理装置。
【請求項１０】
前記オブジェクトを処理する手段は少なくとも１つの以下のサービス、すなわち、
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　電子メールを送る
・　ファックスを送る
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前にコマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す
ことを開始する手段を含む請求項６−９のどれか記載の情報の処理装置。
【請求項１１】
少なくとも１つの図形オブジェクトと少なくとも１つの処理コマンドがマークされている原始ピクチャのディジタル画像内に存在する情報を処理することが可能な移動体通信端末であって、
・　前記ピクチャのディジタル画像を得る手段と、
・　マーキング規則の所定の集合を用いて前記ディジタル画像内の少なくとも１つの図形オブジェクトを識別する手段と、
・　マーキング規則の所定の集合を用いて前記ディジタル画像内の少なくとも１つの処理コマンドを識別する手段と、
・　前記少なくとも１つの処理コマンドと前記少なくとも１つの図形オブジェクトとの関係を、関連付け規則の所定の集合を用いて識別する手段と、
・　前記少なくとも１つの処理コマンドに従って前記ディジタル画像に関する処理を行う手段と、
を含む移動体通信端末。
【請求項１２】
前記マーキング規則の所定の集合は少なくとも１つの以下のマーキング規則、すなわち、
・　オブジェクトまたはコマンドを円で囲む
・　オブジェクトまたはコマンドの周囲に四角を描く
・　オブジェクトまたはコマンドに下線を引く
・　オブジェクトまたはコマンドを特殊な「マーカ・ペン」で強調表示する
ことを含む請求項１１記載の移動体通信端末。
【請求項１３】
前記関連付け規則の所定の集合は少なくとも１つの以下の関連付け規則、すなわち、
・　コマンドとオブジェクトとを共に円で囲む
・　コマンドとオブジェクトまたはそれらのマーキング図形の間に線を引く
・　コマンドと、オブジェクトを含む円または四角との間に線を引く
ことを含む請求項１１または１２記載の移動体通信端末。
【請求項１４】
任意の前記マーキング規則の集合と前記関連付け規則の集合を個人化する手段を更に含む、請求項１１−１３のどれか記載の移動体通信端末。
【請求項１５】
前記オブジェクトを処理する手段は少なくとも１つの以下のサービス、すなわち、
・　少なくとも１つの手書きのオブジェクトを認識する
・　少なくとも１つのオブジェクトを、選択されたファイル・フォーマットに変換する
・　電子メールを送る
・　ファックスを送る
・　文字を印刷して送る
・　将来検索できるように少なくとも１つのオブジェクトを記憶する
・　少なくとも１つのオブジェクトを、予定表データベースや、住所録データベースや、「実施事項」リスト・データベースに入力しまたは同期させる
・　金融取引を行う
・　電話番号をダイヤルする
・　電話番号を記憶する
・　サービスを開始する前にコマンドまたはオブジェクトの解釈を確認するようにユーザに要求を送る
・　更に処理するために１つまたは複数のディジタル画像をディジタル画像の大容量記憶装置から取り出す
ことを開始する手段を含む請求項１１−１４のどれか記載の移動体通信端末。
【請求項１６】
請求項１−５のどれか記載の方法を実行するソフトウエア命令を含むコンピュータ・プログラム。
【国際調査報告】
2004504676.tif 000029
2004504676.tif 000030
2004504676.tif 000031