【手続補正書】
【提出日】平成24年8月23日(2012.8.23)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記目的を達成するため、本発明の第１の観点にかかる情報表示システムは、
撮像手段を備え、外部から提供された情報を前記撮像手段によって撮像された撮像画像上に重畳表示する情報表示装置と、
前記情報表示装置による撮像画像上に重畳させる情報を前記情報表示装置に提供する情報提供装置と、から構成された、拡張現実感による情報表示をおこなう情報表示システムにおいて、
前記情報提供装置は、
前記撮像画像において前記提供する情報が重畳されるべき被写体を照合するための照合画像を、当該照合画像における被写体のスケールを示す情報とともに前記重畳する情報に対応づけて蓄積する照合画像蓄積手段と、
前記情報表示装置から送信されたキー情報に基づいて前記照合画像蓄積手段を検索し、検索された照合画像とともに、当該照合画像に対応づけられた前記被写体のスケールを示す情報と前記重畳する情報を、前記情報表示装置に提供する情報提供手段と、を備え、
前記情報表示装置は、
前記情報提供手段から提供された前記被写体のスケールを示す情報と、前記撮像画像における被写体のスケールとに基づいて、前記照合画像を用いた被写体の照合に適した画角とするためのガイド表示をおこなうガイド表示手段を備える、
ことを特徴とする。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
上記目的を達成するため、本発明の第２の観点にかかる情報表示装置は、
撮像手段と、外部装置との通信をおこなう通信手段と、前記撮像手段による撮像画像に前記外部装置から提供された情報を重畳表示させる表示手段と、を備えた拡張現実感（ＡＲ）による情報表示をおこなう情報表示装置であって、
前記通信手段は、
前記撮像手段によって撮像された撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像に対応する重畳情報と、を含んだＡＲ用データを前記外部装置から取得するＡＲ用データ取得手段を備え、
前記表示手段は、
前記外部装置から提供された重畳情報を、前記照合画像と照合された被写体が写った前記撮像画像上に重畳表示する重畳表示手段と、
前記ＡＲ用データ取得手段が取得した前記スケール情報と、前記撮像画像における被写体のスケールとに基づいて、前記照合画像と前記撮像画像における被写体との照合に適した前記撮影画像の画角とするためのガイド表示をおこなうガイド表示手段を備える、
ことを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
上記情報表示装置において、
前記撮像手段は、ステレオカメラとすることができ、この場合、
前記スケール算出手段は、該ステレオカメラによって求められる被写体までの距離に基づいて、前記撮像画像における１画素が相当する実寸サイズの算出をおこなうことが望ましい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
上記目的を達成するため、本発明の第３の観点にかかる情報提供装置は、
撮像機能を備えた情報表示装置と通信する通信手段と、前記情報表示装置に提供する情報を蓄積する情報蓄積手段と、を備えた、拡張現実感（ＡＲ）による情報表示にかかる情報を前記情報表示装置に提供する情報提供装置であって、
前記情報蓄積手段は、
前記撮像機能による撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像と照合される被写体が写った前記撮影画像上にＡＲによって重畳表示される重畳情報とを対応づけたＡＲ用データを記憶するＡＲ用データ記憶手段を備え、
前記通信手段は、
前記情報表示装置から送信されたキー情報に対応するＡＲ用データを該情報表示装置に提供する情報提供手段を備える、
ことを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
上記情報提供装置は、
前記照合画像における１画素が相当する実寸サイズを算出するスケール算出手段をさらに備えていることが望ましく、この場合、
前記ＡＲ用データ記憶手段は、前記スケール算出手段が算出した前記照合画像における１画素が相当する実寸サイズを前記スケール情報として記憶することが望ましい。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
上記目的を達成するため、本発明の第４の観点にかかるプログラムは、
撮像手段と、外部装置との通信をおこなう通信手段と、前記撮像手段による撮像画像に前記外部装置から提供された情報を重畳表示させる表示手段と、を備えた拡張現実感（ＡＲ）による情報表示をおこなう情報表示装置を制御するコンピュータに、
前記撮像手段によって撮像された撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像に対応する重畳情報と、を含んだＡＲ用データを前記外部装置から取得する機能と、
前記外部装置から提供された重畳情報を、前記照合画像と照合された被写体が写った前記撮像画像上に重畳表示する機能と、
前記スケール情報と、前記撮像画像における被写体のスケールとに基づいて、前記照合画像と前記撮像画像における被写体との照合に適した前記撮影画像の画角とするためのガイド表示をおこなう機能と、
を実現させることを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
上記目的を達成するため、本発明の第５の観点にかかるプログラムは、
撮像機能を備えた情報表示装置と通信する通信手段と、前記情報表示装置に提供する情報を蓄積する情報蓄積手段と、を備えた、拡張現実感（ＡＲ）による情報表示にかかる情報を前記情報表示装置に提供する情報提供装置を制御するコンピュータに、
前記撮像機能による撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像と照合される被写体が写った前記撮影画像上にＡＲによって重畳表示される重畳情報とを対応づけたＡＲ用データを前記情報蓄積手段に蓄積する機能と、
前記情報表示装置から送信されたキー情報に対応するＡＲ用データを該情報表示装置に提供する機能と、
を実現させることを特徴とする。
上記目的を達成するため、本発明の第６の観点にかかる情報表示システムは、
拡張現実感（ＡＲ）による情報表示をおこなう情報表示システムであって、
撮像手段を備え、外部から提供された情報を前記撮像手段によって撮像された撮像画像上に重畳表示する情報表示装置と、
前記情報表示装置による撮像画像上に重畳表示させる重畳情報を前記情報表示装置に提供する情報提供装置と、
を備え、
前記情報表示装置は、
前記撮像機能によって撮像された被写体を特定するためのキー情報を取得するキー情報取得手段と、
前記キー情報を前記情報提供装置に送信するキー情報送信手段と、を備え、
前記情報提供装置は、
（１）前記撮像画像における被写体を照合するための照合画像と、（２）当該照合画像における被写体のスケールを示すスケール情報と、を前記重畳情報に対応づけて蓄積する照合画像蓄積手段と、
前記キー情報送信手段により送信されたキー情報に基づいて前記照合画像蓄積手段を検索し、検索された照合画像とともに、当該照合画像に対応づけられた前記スケール情報と前記重畳情報を、前記情報表示装置に提供する情報提供手段と、を備え、
前記情報表示装置は、
前記情報提供手段により提供された重畳情報を、前記照合画像と照合された被写体が写った前記撮像画像上に重畳表示する重畳表示手段と、
（１）前記情報提供手段から提供された前記スケール情報と、（２）前記撮像画像における被写体のスケールと、に基づいて、前記照合画像と前記撮像画像における被写体との照合に適した前記撮像画像の画角とするためのガイド表示をおこなうガイド表示手段と、を備える、
ことを特徴とする。
【手続補正８】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像手段を備え、外部から提供された情報を前記撮像手段によって撮像された撮像画像上に重畳表示する情報表示装置と、
前記情報表示装置による撮像画像上に重畳させる情報を前記情報表示装置に提供する情報提供装置と、から構成された、拡張現実感による情報表示をおこなう情報表示システムにおいて、
前記情報提供装置は、
前記撮像画像において前記提供する情報が重畳されるべき被写体を照合するための照合画像を、当該照合画像における被写体のスケールを示す情報とともに前記重畳する情報に対応づけて蓄積する照合画像蓄積手段と、
前記情報表示装置から送信されたキー情報に基づいて前記照合画像蓄積手段を検索し、検索された照合画像とともに、当該照合画像に対応づけられた前記被写体のスケールを示す情報と前記重畳する情報を、前記情報表示装置に提供する情報提供手段と、を備え、
前記情報表示装置は、
前記情報提供手段から提供された前記被写体のスケールを示す情報と、前記撮像画像における被写体のスケールとに基づいて、前記照合画像を用いた被写体の照合に適した画角とするためのガイド表示をおこなうガイド表示手段を備える、
ことを特徴とする情報表示システム。
【請求項２】
撮像手段と、外部装置との通信をおこなう通信手段と、前記撮像手段による撮像画像に前記外部装置から提供された情報を重畳表示させる表示手段と、を備えた拡張現実感（ＡＲ）による情報表示をおこなう情報表示装置であって、
前記通信手段は、
前記撮像手段によって撮像された撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像に対応する重畳情報と、を含んだＡＲ用データを前記外部装置から取得するＡＲ用データ取得手段を備え、
前記表示手段は、
前記外部装置から提供された重畳情報を、前記照合画像と照合された被写体が写った前記撮像画像上に重畳表示する重畳表示手段と、
前記ＡＲ用データ取得手段が取得した前記スケール情報と、前記撮像画像における被写体のスケールとに基づいて、前記照合画像と前記撮像画像における被写体との照合に適した前記撮影画像の画角とするためのガイド表示をおこなうガイド表示手段を備える、
ことを特徴とする情報表示装置。
【請求項３】
前記ガイド表示手段は、
前記ＡＲ用データ取得手段が取得した前記スケール情報に基づいた、前記照合画像の分布を表示する分布表示手段をさらに備え、
前記分布表示手段が表示した前記分布表示と対応した前記ガイド表示をおこなう、
ことを特徴とする請求項２に記載の情報表示装置。
【請求項４】
前記ガイド表示手段は、前記撮像手段による前記撮像画像の画角変化に応じて、前記ガイド表示を変化させる、
ことを特徴とする請求項３に記載の情報表示装置。
【請求項５】
前記撮像画像における１画素が相当する実寸サイズを算出するスケール算出手段をさらに備え、
前記分布表示手段は、前記スケール情報が示している前記照合画像における１画素が相当する実寸サイズによる前記照合画像の分布を表示し、
前記ガイド表示手段は、前記スケール算出手段が算出した前記撮像画像における１画素が相当する実寸サイズに応じた前記ガイド表示をおこなう、
ことを特徴とする請求項３または４に記載の情報表示装置。
【請求項６】
前記撮像手段は、ステレオカメラであり、
前記スケール算出手段は、該ステレオカメラによって求められる被写体までの距離に基づいて、前記撮像画像における１画素が相当する実寸サイズの算出をおこなう、
ことを特徴とする請求項５に記載の情報表示装置。
【請求項７】
撮像機能を備えた情報表示装置と通信する通信手段と、前記情報表示装置に提供する情報を蓄積する情報蓄積手段と、を備えた、拡張現実感（ＡＲ）による情報表示にかかる情報を前記情報表示装置に提供する情報提供装置であって、
前記情報蓄積手段は、
前記撮像機能による撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像と照合される被写体が写った前記撮影画像上にＡＲによって重畳表示される重畳情報とを対応づけたＡＲ用データを記憶するＡＲ用データ記憶手段を備え、
前記通信手段は、
前記情報表示装置から送信されたキー情報に対応するＡＲ用データを該情報表示装置に提供する情報提供手段を備える、
ことを特徴とする情報提供装置。
【請求項８】
前記照合画像における１画素が相当する実寸サイズを算出するスケール算出手段をさらに備え、
前記ＡＲ用データ記憶手段は、前記スケール算出手段が算出した前記照合画像における１画素が相当する実寸サイズを前記スケール情報として記憶する、
ことを特徴とする請求項７に記載の情報提供装置。
【請求項９】
撮像手段と、外部装置との通信をおこなう通信手段と、前記撮像手段による撮像画像に前記外部装置から提供された情報を重畳表示させる表示手段と、を備えた拡張現実感（ＡＲ）による情報表示をおこなう情報表示装置を制御するコンピュータに、
前記撮像手段によって撮像された撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像に対応する重畳情報と、を含んだＡＲ用データを前記外部装置から取得する機能と、
前記外部装置から提供された重畳情報を、前記照合画像と照合された被写体が写った前記撮像画像上に重畳表示する機能と、
前記スケール情報と、前記撮像画像における被写体のスケールとに基づいて、前記照合画像と前記撮像画像における被写体との照合に適した前記撮影画像の画角とするためのガイド表示をおこなう機能と、
を実現させることを特徴とするプログラム。
【請求項１０】
撮像機能を備えた情報表示装置と通信する通信手段と、前記情報表示装置に提供する情報を蓄積する情報蓄積手段と、を備えた、拡張現実感（ＡＲ）による情報表示にかかる情報を前記情報表示装置に提供する情報提供装置を制御するコンピュータに、
前記撮像機能による撮像画像上の被写体を照合するための照合画像と、当該照合画像における被写体のスケールを示すスケール情報と、当該照合画像と照合される被写体が写った前記撮影画像上にＡＲによって重畳表示される重畳情報とを対応づけたＡＲ用データを前記情報蓄積手段に蓄積する機能と、
前記情報表示装置から送信されたキー情報に対応するＡＲ用データを該情報表示装置に提供する機能と、
を実現させることを特徴とするプログラム。
【請求項１１】
拡張現実感（ＡＲ）による情報表示をおこなう情報表示システムであって、
撮像手段を備え、外部から提供された情報を前記撮像手段によって撮像された撮像画像上に重畳表示する情報表示装置と、
前記情報表示装置による撮像画像上に重畳表示させる重畳情報を前記情報表示装置に提供する情報提供装置と、
を備え、
前記情報表示装置は、
前記撮像機能によって撮像された被写体を特定するためのキー情報を取得するキー情報取得手段と、
前記キー情報を前記情報提供装置に送信するキー情報送信手段と、を備え、
前記情報提供装置は、
（１）前記撮像画像における被写体を照合するための照合画像と、（２）当該照合画像における被写体のスケールを示すスケール情報と、を前記重畳情報に対応づけて蓄積する照合画像蓄積手段と、
前記キー情報送信手段により送信されたキー情報に基づいて前記照合画像蓄積手段を検索し、検索された照合画像とともに、当該照合画像に対応づけられた前記スケール情報と前記重畳情報を、前記情報表示装置に提供する情報提供手段と、を備え、
前記情報表示装置は、
前記情報提供手段により提供された重畳情報を、前記照合画像と照合された被写体が写った前記撮像画像上に重畳表示する重畳表示手段と、
（１）前記情報提供手段から提供された前記スケール情報と、（２）前記撮像画像における被写体のスケールと、に基づいて、前記照合画像と前記撮像画像における被写体との照合に適した前記撮像画像の画角とするためのガイド表示をおこなうガイド表示手段と、を備える、
ことを特徴とする情報表示システム。