【手続補正書】
【提出日】平成18年6月8日(2006.6.8)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
「ユーザーから見える実際の景色であって、実際の特定対象物である所定の物体又は部分を含む景色」の映像を取得するための映像取得手段と、
検索用の文字列、画像、又は音などの検索用データを取得するための検索用データ取得手段と、
前記映像取得手段により取得された映像と前記検索用データ取得手段により取得された検索用データとに基づいて、前記「ユーザーから見える実際の景色」の映像の中の「前記検索用データに対応する特定対象物」の映像を特定するための特定手段と、
前記映像取得手段により取得された「ユーザーから見える実際の景色」の映像を表示するための表示手段と、
前記特定手段による特定結果に基づいて、前記表示手段により表示された前記「ユーザーから見える実際の景色」の映像の中の「前記検索用データに対応する特定対象物」の存在を、ユーザーに分かるように示すためのポイント手段と、
を含むことを特徴とするポインティング装置。
【請求項２】
検索用の文字列、画像、又は音などの検索用データを取得するための検索用データ取得手段と、
「ユーザーから見える実際の景色であって、実際の特定対象物である所定の物体又は部分を含む景色」の映像を取得するための映像取得手段と、
前記映像取得手段により取得された映像と前記検索用データ取得手段により取得された検索用データとに基づいて、前記「ユーザーから見える実際の景色」の映像の中の「前記検索用データに対応する特定対象物」の映像を特定するための特定手段と、
前記映像取得手段により取得された「ユーザーから見える実際の景色」の映像と前記特定手段による特定結果とに基づいて、前記「ユーザーから見える実際の景色」の中の前記「実際の特定対象物」の全部又は一部を照射するためのレーザー光線の照射方向を求めるための照射方向取得手段と、
前記照射方向取得手段に基づいて、前記「ユーザーから見える実際の景色」の中の前記「実際の特定対象物」の全部又は一部に向けて、レーザー光を照射するためのレーザー光照射手段と、
を含むことを特徴とするポインティング装置。
【請求項３】
請求項２において、前記特定手段は、前記映像の中の特定対象物である各物体又は部分を、互いに識別する識別手段を含むものである、ことを特徴とするポインティング装置。
【請求項４】
請求項２又は３において、
前記レーザー光照射手段は、指示すべき複数の特定対象物である物体又は部分を、所定の順序で順次照射していくものである、ことを特徴とするポインティング装置。
【請求項５】
請求項２、３又は４において、
前記レーザー光が物体又は部分に照射されたとき、そのことを検出するための検出手段と、
前記レーザー光が照射される物体又は部分又はその近傍に配置された音発生手段であって、前記検出手段からの出力に基づいてその当たった場所又はその近傍で所定の音を発するための音発生手段と、
を含むことを特徴とするポインティング装置。
【請求項６】
請求項２、３、４又は５において、さらに、
前記レーザー光が肉眼で見えない場合に、前記レーザー光をユーザーの眼前に画面で表示することにより、前記レーザー光をユーザーに認識させるためのレーザー光表示手段、
を含むことを特徴とするポインティング装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
本願の特許請求の範囲に記載された発明は、次のようなものである。
１．検索用の文字列、画像、又は音などの検索用データを取得するための検索用データ取得手段と、「ユーザーから見える実際の景色であって、実際の特定対象物である所定の物体又は部分を含む景色」の映像を取得するための映像取得手段と、前記映像取得手段により取得された映像と前記検索用データ取得手段により取得された検索用データとに基づいて、前記「ユーザーから見える実際の景色」の映像の中の「前記検索用データに対応する特定対象物」の映像を特定するための特定手段と、前記映像取得手段により取得された「ユーザーから見える実際の景色」の映像と前記特定手段による特定結果とに基づいて、前記「ユーザーから見える実際の景色」の中の前記「実際の特定対象物」の全部又は一部を照射するためのレーザー光線の照射方向を求めるための照射方向取得手段と、前記照射方向取得手段に基づいて、前記「ユーザーから見える実際の景色」の中の前記「実際の特定対象物」の全部又は一部に向けて、レーザー光を照射するためのレーザー光照射手段と、を含むことを特徴とするポインティング装置。
２．１において、前記特定手段は、前記映像の中の特定対象物である各物体又は部分を、互いに識別する識別手段を含むものである、ことを特徴とするポインティング装置。
３．１又は２において、前記レーザー光照射手段は、指示すべき複数の特定対象物である物体又は部分を、所定の順序で順次照射していくものである、ことを特徴とするポインティング装置。
４．１、２又は３において、前記レーザー光が物体又は部分に照射されたとき、そのことを検出するための検出手段と、前記レーザー光が照射される物体又は部分又はその近傍に配置された音発生手段であって、前記検出手段からの出力に基づいてその当たった場所又はその近傍で所定の音を発するための音発生手段と、を含むことを特徴とするポインティング装置。
５．１、２、３又は４において、前記レーザー光が肉眼で見えない場合に、前記レーザー光をユーザーの眼前に画面で表示することにより、前記レーザー光をユーザーに認識させるためのレーザー光表示、を含むことを特徴とするポインティング装置。
６．「ユーザーから見える実際の景色であって、実際の特定対象物である所定の物体又は部分を含む景色」の映像を取得するための映像取得手段と、検索用の文字列、画像、又は音などの検索用データを取得するための検索用データ取得手段と、前記映像取得手段により取得された映像と前記検索用データ取得手段により取得された検索用データとに基づいて、前記「ユーザーから見える実際の景色」の映像の中の「前記検索用データに対応する特定対象物」の映像を特定するための特定手段と、前記映像取得手段により取得された「ユーザーから見える実際の景色」の映像を表示するための表示手段と、前記特定手段による特定結果に基づいて、前記表示手段により表示された前記「ユーザーから見える実際の景色」の映像の中に在る「前記検索用データに対応する特定対象物」の存在を、ユーザーに分かるように（例えば、矢印、赤などの色の点、点滅などの方法で）示すためのポイント手段と、を含むことを特徴とするポインティング装置。
また、本明細書で開示する発明は、次のようなものも含む。
Ａ．検索キーを入力するための検索キー入力手段と、検索対象物（ユーザーが求めているモノ、ユーザーが探したいモノ）を含む映像を撮り込むための撮像手段と、前記撮像手段により取り込まれた映像と前記検索キー入力手段から入力された検索キーとに基づいて、前記検索キーに対応する物体又は部分を検索する検索手段と、前記検索手段による検索結果と前記映像とに基づいて、レーザー光線の照射方向を算出する方向算出手段と、前記方向算出手段に基づいて、前記の対応する物体に向けて、レーザー光を照射するレーザー発生手段と、を含むことを特徴とするポインティング装置。
Ｂ．上記Ａにおいて、前記検索手段は、前記検索対象物を含む映像の中の各物体又は部分を、互いに識別する識別手段を含むものである、ことを特徴とするポインティング装置。
なお、この識別手段による識別方式は、例えば、前記映像の中の各物体又は部分の色及び形状を検出して予め記憶した色又は形状のパターンと比較することにより識別する方式、前記各物体又は部分に表示された名前などの文字を読み取り認識する方式、前記各物体又は部分の表面に表示された識別用バーコード又は２次元コードや識別用カラーコードなどを読み取ることにより識別する方式、前記各物体又は部分に取り付けたＩＣチップ（半導体素子）に記録された識別コードをそのＩＣチップとの間で無線でやり取りすることにより識別する方式、などの様々な方式を採用することができる。
Ｃ．上記Ａ又はＢにおいて、前記レーザー光発生手段は、指示すべき複数の物体又は部分を、所定の順序で順次照射（指示）していくものである、ことを特徴とするポインティング装置。
本発明においては、例えば、ユーザーが「パソコンの画面上のデータを、外付けの光磁気ディスクに保存する操作」を希望したとき、本発明によるポインティング装置は、まず、パソコン画面の「ファイル」のアイコンをレーザー光で指示し（これにより、ユーザーに、このアイコンをマウス等でクリックするように指示する）、次に、「名前を付けて保存」の文字のあるボタン部分をレーザー光で指示し（これにより、ユーザーに、「名前を付けて保存」のポタンをクリックするように指示する）、次に、「保存する場所」の文字のあるボタン部分をレーザー光で指示し（これにより、ユーザーに、「保存する場所」の文字のあるボタン部分をクリックするように指示する）、次に「保存の実行」のボタン部分をレーザー光で指示する（是により、ユーザーに、「保存の実行」のボタン部分をクリックするように指示する）、というように、「データ保存のために必要な一連の操作」に必要な物体又は部分を、その一連の操作に即して、順次、ユーザーに対して、指し示していく。
Ｄ．上記Ａ、Ｂ又はＣにおいて、さらに、前記レーザー光が当たった（照射された）とき、その当たった場所又はその近傍で所定の音を発するための音発生手段、を含むことを特徴とするポインティング装置。
この音発生手段は、レーザー光が照射されたことを検知する検知手段と、この検知手段からの信号に基づいて駆動する振動板又はブザー等とから構成される。前記のレーザー光が照射されたことを検知する手段としては、例えば、受光素子などの光センサや、熱電素子などの熱センサ（レーザー光が照射されたスポットは、レーザー光のエネルギーにより他の部分よりも熱せられるから）などの様々なものが採用できる。
Ｅ．上記Ａ、Ｂ、Ｃ又はＤにおいて、さらに、前記レーザー光が肉眼で見えない場合に、前記レーザー光を肉眼で確認できるように画面表示させるためのレーザー光表示手段、を含むことを特徴とするポインティング装置。
Ｆ．検索キーを入力するための検索キー入力手段と、検索対象物を含む映像を取り込むための撮像手段と、前記撮像手段により取り込まれた映像と前記検索キー入力手段から入力された検索キーとに基づいて、前記検索キーに対応する物体又は部分を検索する検索手段と、前記検索手段による検索結果と前記映像とに基づいて、ユーザーに、検索された物体又は部分を示すためのディスプレイと、を含むことを特徴とするポインティング装置。
つまり、上記のＡ〜Ｅの発明では、レーザー光線を検索対象物（ユーザーが求めているモノ、ユーザーが探したいモノ）に照射することにより、ユーザーに検索対象物を示すようにしているのに対して、このＦの発明では、ディスプレイ画面上に「検索対象物とその周辺の物（人、動物、植物を含む）を示す映像を表示させながら、さらにその画面上で、検索対象物を、例えば矢印のマークなどで示すこと」により、ユーザー（例えば、視力の衰えた老人など）に、求める検索対象物を示すものである。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
実施形態２．
次に、本発明の実施形態２を図３に基づいて説明する。図３において、図１と共通する部分には、同一の符号を付している。図３において、１５は液晶表示装置などのディスプレイである。また、１４は、撮像部１からの対象物の映像と検索キーとに基づいてターゲットの物体又は部分を検索し、ユーザーにそのターゲットをディスプレイ１４上で示すための検索処理部である。
すなわち、この実施形態２では、ディスプレイ１５には、前記撮像部１からの映像がほぼそのまま表示されるようになっている。また、この実施形態２の検索処理部１４の検索動作は、実施形態１の検索処理部４（図１）とほぼ同様であるが、検索結果のターゲットの示すやり方が、実施形態１と異なっている。すなわち、この実施形態２では、検索結果であるターゲットの物体又は部分を示す方法として、実施形態１のようなレーザー光ではなく、ディスプレイ１５上の表示（例えば、矢印のマークの表示など）により示すようにしている。このときのユーザーに示すための表示のやり方は、例えば、画面上の矢印、画面上の赤などの色の点、画面上のある点の点滅、などの様々な方法がありうる。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
例えば、図４はこのディスプレイ１５の表示画面の一例を示すものである。この例では、ユーザーが戸外に出て、ある建物（例えば、「大手町ビル」）に行こうとしている場合である。ユーザーがその建物をなかなか見つけられないとき、ユーザーが「大手町ビル」と検索キーを音声入力する。すると、撮像部１が周囲の景色を映像として撮り込み、検索処理部１４に送る。検索処理部１４においては、前記の検索キー「大手町ビル」と、前記映像の中の建物の看板の文字との比較・照合を行い、該当する建物があれば、検索を終了する。そして、ディスプレイ１５の画面に、前記撮像部１からの映像（検索対象物をその一部として含む景色）を表示させると共に、その中の検索結果に該当する「大手町ビル」の建物（図４の符号２０）に、矢印(図４の符号２１）を表示させて、ユーザーに該当する建物を示す。このディスプレイ１５の画面は、ユーザーの眼前の景色とほぼ同一又は類似の景色を表示しているので、ユーザーは、このディスプレイ１５の画面を見ることにより、容易に求める建物を見つけることができるる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
【発明の効果】
（１）本発明によれば、ユーザーが求める検索対象物（物体又は部分）を検索して、それを、レーザー光で照射しすることにより、ユーザーに指し示すことができるので、ユーザーの行動を支援することが可能になる。
（２）また、本発明によれば、ユーザーが求める検索対象物（物体又は部分）を検索して、それを、ディスプレイの画面上で、前記検索対象物をその一部として含む映像を表示させながら、その検索対象物の存在を矢印のマークなどで示すことにより、ユーザーにその存在を示すことができるので、ユーザーの行動を支援することができる。