(57)【要約】【課題】現実世界環境におけるジェスチャに基づく対話型ホットスポットの生成を提供する。【解決手段】現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャが動作追跡装置を利用して検知される（Ｓ７０２）。ジェスチャが識別されて解釈され、ジェスチャの位置と意味が判定される（Ｓ７０４）。識別され解釈されたジェスチャに基づいて現実世界環境の３Ｄ空間中にホットスポットが生成される（Ｓ７０６）。ホットスポットは少なくとも１つのアクション、例えば、ソフトウェアアプリケーション中の１つのアクション、またはシステムによって制御されている装置の設定の調整等に関連付けられる（Ｓ７０８）。ジェスチャを取得してホットスポットを生成する場合に、ユーザに対してフィードバックが行なわれる（Ｓ７１０）。【選択図】図７
2013025789.tif 000002
【特許請求の範囲】
【請求項１】
現実世界環境におけるホットスポットの生成方法であって、
動作取得手段が、動作追跡装置を利用して、現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャを検知することと、
ジェスチャ処理手段が、検知した前記ジェスチャを識別及び解釈することと、
識別され解釈された前記ジェスチャに基づいて前記３Ｄ空間にホットスポットを生成することと、
ジェスチャ関連付け手段が、生成した前記ホットスポットを少なくとも１つのアクションに関連付けることと、
を含む方法。
【請求項２】
前記ジェスチャを取得して前記ホットスポットを生成する際に、前記ユーザにフィードバックすることを更に含む
請求項１に記載の方法。
【請求項３】
前記ジェスチャは、３つの異なる次元でのユーザの動きを含む３Ｄのジェスチャである
請求項１に記載の方法。
【請求項４】
前記ジェスチャは、前記ホットスポットの生成を意図するジェスチャであると識別されるホットスポット生成モードジェスチャを更に含む
請求項１に記載の方法。
【請求項５】
前記ホットスポットを生成することは、関連するアクションを始動するための前記ホットスポットとのインタラクションを規定することを更に含む
請求項１に記載の方法。
【請求項６】
前記ジェスチャは、前記関連するアクションを始動する前記インタラクションを規定するものであると識別されるジェスチャを含む
請求項５に記載の方法。
【請求項７】
前記ジェスチャは、前記ホットスポットを現実世界環境へ固定するためのものであると解釈されるジェスチャを含む
請求項１に記載の方法。
【請求項８】
前記ジェスチャは前記ホットスポットを現実世界環境の可動オブジェクトへ固定するためのものであると解釈されるジェスチャを含む
請求項１に記載の方法。
【請求項９】
前記ジェスチャを検知する前に、前記動作追跡装置を現実世界環境で較正することを更に含む
請求項８に記載の方法。
【請求項１０】
前記ユーザにフィードバックすることは、前記現実世界環境に対応しかつ前記ホットスポットの位置及び大きさを示す仮想環境の表示を、前記フィードバックとしてユーザに提供することを更に含む
請求項２に記載の方法。
【請求項１１】
前記ホットスポットは、前記ユーザがシステムと対話する現実世界環境内の空間における３次元領域である
請求項１に記載の方法。
【請求項１２】
現実世界環境にホットスポットを生成するシステムであって、
現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャを取得する動作取得手段と、
取得された前記ジェスチャを識別及び解釈し、識別及び解釈された前記ジェスチャに基づいて前記３Ｄ空間にホットスポットを生成するジェスチャ処理手段と、
生成された前記ホットスポットを少なくとも１つのアクションに関連付けるジェスチャ関連付け手段と、
を備えるシステム。
【請求項１３】
前記ジェスチャを取得して前記ホットスポットを生成する際に前記ユーザにフィードバックするフィードバック手段を更に備える
請求項１２に記載のシステム。
【請求項１４】
前記ジェスチャは、３つの異なる次元でのユーザの動きを含む３Ｄのジェスチャである
請求項１３に記載のシステム。
【請求項１５】
前記ジェスチャは、前記ホットスポットの生成を意図するジェスチャであると識別されるホットスポット生成モードジェスチャを更に含む
請求項１２に記載のシステム。
【請求項１６】
前記ジェスチャ処理手段は、関連するアクションを始動するための前記ホットスポットとのインタラクションを規定する
請求項１２に記載のシステム。
【請求項１７】
前記ジェスチャは、前記ホットスポットを始動する前記インタラクションを規定するものであると識別するジェスチャを更に含む
請求項１６に記載のシステム。
【請求項１８】
前記ジェスチャを、前記ホットスポットを現実世界環境へ固定するジェスチャであると解釈されるジェスチャを更に含む
請求項１２に記載のシステム。
【請求項１９】
前記ジェスチャを、前記ホットスポットを現実世界環境の可動オブジェクトへ固定するジェスチャであると解釈されるジェスチャを更に含む
請求項１２に記載のシステム。
【請求項２０】
前記動作取得手段が、前記動作取得手段を現実世界環境で較正する較正手段を更に備える
請求項１２に記載のシステム。
【請求項２１】
前記フィードバック手段は、前記現実世界環境に対応しかつ前記ホットスポットの位置及び大きさを示す仮想環境の表示を、フィードバックとして提供することを更に含む
請求項１３に記載のシステム
【請求項２２】
前記ホットスポットは、前記ユーザがシステムと対話する現実世界環境内の空間における３次元領域である
請求項１２に記載のシステム。
【請求項２３】
現実世界環境においてホットスポットを生成するためのコンピュータプログラムであって、コンピュータに、
動作追跡装置を利用して、現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャを検知することと、
検知した前記ジェスチャを識別及び解釈すること、
識別及び解釈された前記ジェスチャに基づいて前記３Ｄ空間にホットスポットを生成することと、
生成した前記ホットスポットを少なくとも１つのアクションに関連付けることと、
を含む処理を実行させるコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ジェスチャを利用して現実世界に対話型ホットスポットを生成するシステム、方法及びプログラムに関する。特にジェスチャを利用したホットスポットの位置の画定及び機能の規定に関する。
【背景技術】
【０００２】
複合現実（ｍｉｘｅｄ  ｒｅａｌｉｔｙ）及び追跡技術の進歩により、現実世界での動作や行動などのイベントをコンピュータシステムなどのデジタル環境におけるアプリケーションイベントのトリガとさせることが、これまでよりはるかに容易となってきた。物理的な現実世界空間から収集される情報を、装置の遠隔制御、ソフトウェアアプリケーションの代替インタフェース、仮想環境とのインタラクション強化等への適用することが考えられる。
【０００３】
「ホットスポット（ｈｏｔ  ｓｐｏｔ）」とは、ユーザが明示的または暗示的にシステムと対話する、現実世界空間における一領域のことである。ホットスポットは、インタフェース・ウィジェットとして作用してもよいし、または、システムが何らかの種類の行動を待ち受ける領域として画定されてもよい。以下で更に説明するように、インタラクション（対話）は、ユーザの身体または身体の特定の部位がホットスポットの領域を横切ったり、ユーザの手がホットスポットを指し示したりするというような単純なものであってよい。また、インタラクションは、ホットスポット内で所定のジェスチャをするとか、一連のホットスポットに特定の順序やパターンで触るというような複雑なものであってもよい。一連のホットスポットは、おそらくは他の種類のウィジェットと共にインタフェースを形成してもよい。ホットスポットは、持続的なものであって、一般的には現実世界に固定されてもよくまたは現実世界内のオブジェクトに固定されていてもよい。ホットスポット領域は、３次元（３Ｄ）の立体であったり、面であったり、または点であったりしてよいし、均質であっても不均質であってもよい。
【０００４】
現在のところ、カメラベースのシステムにおいて、カメラが撮影した画像上にマークを施すか、ホットスポットの物理座標の測定値を手入力するか、現実世界環境を反映するミラー世界内の位置を指示するかによって、物理的なホットスポット位置が生成されることが多い。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
制御ポイント及び対話空間として物理（現実）世界における領域を利用することが自然であるが、これらの領域を画定することは容易ではない。そこで、ジェスチャを利用して現実世界に対話型ホットスポットを生成するシステム、方法及びプログラムを提供する。
【課題を解決するための手段】
【０００６】
本発明の第１の態様によれば、現実世界環境におけるホットスポットの生成方法であって、動作取得手段が、動作追跡装置を利用して、現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャを検知することと、ジェスチャ処理手段が、検知した前記ジェスチャを識別及び解釈することと、識別され解釈された前記ジェスチャに基づいて前記３Ｄ空間にホットスポットを生成することと、ジェスチャ関連付け手段が、生成した前記ホットスポットを少なくとも１つのアクションに関連付けることと、を含む方法が提供される。
【０００７】
本発明の第２の態様によれば、第１の態様において、前記ジェスチャを取得して前記ホットスポットを生成する際に、前記ユーザにフィードバックすることを更に含んでもよい。
【０００８】
本発明の第３によれば、第１の態様において、前記ジェスチャは、３つの異なる次元でのユーザの動きを含む３Ｄのジェスチャであってもよい。
【０００９】
本発明の第４によれば、第１の態様において、前記ジェスチャは、前記ホットスポットの生成を意図するジェスチャであると識別されるホットスポット生成モードジェスチャを更に含んでもよい。
【００１０】
本発明の第５によれば、第１の態様において、前記ホットスポットを生成することは、関連するアクションを始動するための前記ホットスポットとのインタラクションを規定することを更に含んでもよい。
【００１１】
本発明の第６によれば、第５の態様において、
前記ジェスチャは、前記関連するアクションを始動する前記インタラクションを規定するものであると識別されるジェスチャを含んでもよい。
【００１２】
本発明の第７によれば、第１の態様において、前記ジェスチャは、前記ホットスポットを現実世界環境へ固定するためのものであると解釈されるジェスチャを含んでもよい。
【００１３】
本発明の第８によれば、第１の態様において、前記ジェスチャは前記ホットスポットを現実世界環境の可動オブジェクトへ固定するためのものであると解釈されるジェスチャを含んでもよい。
【００１４】
本発明の第９によれば、第１の態様において、前記ジェスチャを検知する前に、前記動作追跡装置を現実世界環境で較正することを更に含んでもよい。
【００１５】
本発明の第１０によれば、第２の態様において、前記ユーザにフィードバックすることは、前記現実世界環境に対応しかつ前記ホットスポットの位置及び大きさを示す仮想環境の表示を、前記フィードバックとしてユーザに提供することを更に含んでもよい。
【００１６】
本発明の第１１によれば、第１の態様において、前記ホットスポットは、前記ユーザがシステムと対話する現実世界環境内の空間における３次元領域であってもよい。
【００１７】
本発明の第１２によれば、現実世界環境にホットスポットを生成するシステムであって、現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャを取得する動作取得手段と、取得された前記ジェスチャを識別及び解釈し、識別及び解釈された前記ジェスチャに基づいて前記３Ｄ空間にホットスポットを生成するジェスチャ処理手段と、生成された前記ホットスポットを少なくとも１つのアクションに関連付けるジェスチャ関連付け手段と、を備えるシステムが提供される。
【００１８】
本発明の第１３によれば、第１２の態様において、前記ジェスチャを取得して前記ホットスポットを生成する際に前記ユーザにフィードバックするフィードバック手段を更に備えてもよい。
【００１９】
本発明の第１４によれば、第１３の態様において、前記ジェスチャは、３つの異なる次元でのユーザの動きを含む３Ｄのジェスチャであってもよい。
【００２０】
本発明の第１５によれば、第１２の態様において、前記ジェスチャは、前記ホットスポットの生成を意図するジェスチャであると識別されるホットスポット生成モードジェスチャを更に含んでもよい。
【００２１】
本発明の第１６によれば、第１２の態様において、前記ジェスチャ処理手段は、関連するアクションを始動するための前記ホットスポットとのインタラクションを規定してもよい。
【００２２】
本発明の第１７によれば、第１６の態様において、前記ジェスチャは、前記ホットスポットを始動する前記インタラクションを規定するものであると識別するジェスチャを更に含んでもよい。
【００２３】
本発明の第１８によれば、第１２の態様において、前記ジェスチャを、前記ホットスポットを現実世界環境へ固定するジェスチャであると解釈されるジェスチャを更に含んでもよい。
【００２４】
本発明の第１９によれば、第１２の態様において、前記ジェスチャを、前記ホットスポットを現実世界環境の可動オブジェクトへ固定するジェスチャであると解釈されるジェスチャを更に含んでもよい。
【００２５】
本発明の第２０によれば、第１２の態様において、前記動作取得手段が、前記動作取得手段を現実世界環境で較正する較正手段を更に備えてもよい。
【００２６】
本発明の第２１によれば、第１３の態様において、前記フィードバック手段は、前記現実世界環境に対応しかつ前記ホットスポットの位置及び大きさを示す仮想環境の表示を、フィードバックとして提供することを更に含んでもよい。
【００２７】
本発明の第２２によれば、第１２の態様において、前記ホットスポットは、前記ユーザがシステムと対話する現実世界環境内の空間における３次元領域であってもよい。
【００２８】
本発明の第２３によれば、現実世界環境においてホットスポットを生成するためのコンピュータプログラムであって、コンピュータに、動作追跡装置を利用して、現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャを検知することと、検知した前記ジェスチャを識別及び解釈すること、識別及び解釈された前記ジェスチャに基づいて前記３Ｄ空間にホットスポットを生成することと、生成した前記ホットスポットを少なくとも１つのアクションに関連付けることと、を含む処理を実行させるコンピュータプログラムが提供される。
【００２９】
本発明に関するその他の態様は、以下の記述で部分的に説明され、また以下の記述で部分的に明らかとなり、または本発明の実施により習得することができる。本発明の態様は、以下の詳細な説明及び添付の特許請求の範囲において特に指摘された要素、及び種々の要素と態様との組合せによって実現及び達成することができる。
【００３０】
上記及び以下の記述はいずれも単に例示及び説明を目的とするものであり、特許請求の範囲に記載の発明もしくはその適用を限定することは全く意図していないことを理解されたい。
【発明の効果】
【００３１】
本発明によれば、ジェスチャを利用して現実世界に対話型ホットスポットを生成するシステム、方法及びプログラムを提供する。本発明によれば、ホットスポットを現実世界に生成することができ、制御ポイント及び対話空間としての物理世界における領域を容易に画定することができる。
【図面の簡単な説明】
【００３２】
本明細書に組み込まれ本明細書の一部をなす添付の図面が本発明の実施形態を例示し、説明と相俟って本発明の原理の説明及び例示に供する。
【図１】本発明の一実施例による、現実世界環境に対話型ホットスポットを生成するシステムのブロック図である。
【図２】本発明の一実施例による、ユーザがジェスチャを利用してホットスポットを生成する現実世界環境を示す図である。
【図３】現実世界環境を反映するミラー世界の形でユーザに提供される視覚的フィードバックを示す図である。
【図４】本発明の一実施形態による、ユーザがジェスチャ生成モードでジェスチャを行なっていることを示す図である。
【図５】本発明の一実施形態による、ホットスポットでのインタラクションと関連付けを選択するために利用されるグラフィカル・ユーザ・インタフェース（ＧＵＩ）を示す図である。
【図６】本発明の一実施形態による、複数のホットスポットが配置されているスクリーンを示す図である。
【図７】本発明の一実施形態による、ジェスチャを利用したホットスポット生成方法のフローチャートを示す図である。
【図８】本システムを実装可能なコンピュータシステムのブロック図である。
【発明を実施するための形態】
【００３３】
以下の詳細な説明においては添付の図面を参照する。前述の添付図面は、本発明の原理に整合する特定の実施形態および実装を例示するものであり、それに限定するためのものではない。
【００３４】
本明細書で説明するシステム及び方法は、現実世界環境でのジェスチャに基づくホットスポット生成を提供する。現実世界環境の３次元空間においてユーザが行うジェスチャが、カメラなどの動作取得装置により検知される。次に、そのジェスチャが、識別されて、「ホットスポット」を生成するためのものであると解釈される。このホットスポットとは、３次元空間内のある領域であり、そこを通してユーザがコンピュータシステムと対話する。ホットスポットが現実世界環境に固定されているか、または現実世界環境内のオブジェクトに固定されているかが、ジェスチャによって示されてもよい。ジェスチャは、ホットスポットを始動し、そのホットスポットのアクションをシステムのアクション、例えばコンピュータ上のアプリケーションやシステム接続された電子装置の制御等のアクションに関連付ける。ジェスチャのタイプを識別するためにホットスポットの機能が規定される。
【００３５】
ジェスチャは、一人のユーザ（または複数のユーザ）の身体で実行される意味のあるポーズまたは動作であって、身体全体または腕あるいは手の指などの身体の一部だけのポーズまたは動作であってよい。ジェスチャは３次元のものであってよい。
【００３６】
物理的すなわち現実世界環境における領域を制御ポイントや対話空間として利用することは自然であるが、これらの領域を画定することは容易ではない。本明細書で説明する方法及びシステムでこれらの領域を物理空間で画定できるようにすることによって、このプロセスが容易となる。
【００３７】
［Ｉ．システム構成］
図１は、対話型ホットスポットを生成するシステムの一実施形態のブロック図である。システムには通常、動作取得装置１０２とコンピュータ１０４とディスプレイ装置１０６が含まれる。動作取得装置１０２は、ユーザがポーズをとってジェスチャをするときに、ユーザの位置及び動作を取得する。動作取得装置１０２はビデオカメラであってもよい。但し、動作取得装置は特定領域において動作を検知し、その際画像は取り込まないような極力単純な動作検出手段であってもよい。また、動作検出手段は、更なる処理のために動作に関するデータを作成してもよい。以下の説明では画像撮影装置と画像処理を利用するが、当業者であれば他の方法で動作を取得できることは理解されるであろう。動作取得装置１０２は、単一の画像または一連の画像を撮影して、その画像をコンピュータ１０４に送信する。コンピュータ１０４は、ジェスチャが実行されているかどうか、またユーザがホットスポットを生成しようとしているかどうかを判定するために、その画像を処理する。コンピュータ１０４で実行される処理について以下で更に説明する。ディスプレイ装置１０６は、システム中で異なる機能を果たし、例えばグラフィカル・ユーザ・インタフェース（ＧＵＩ）を表示して、ユーザがジェスチャを実行して対話型ホットスポットを生成するときに対話することができるようになっていてもよい。ディスプレイ装置はホットスポットの外形が示された現実世界空間の画像を示してもよい。それにより、ホットスポットが正しい位置にあるかどうか、また適切な特性を有しているかどうかをユーザは判定することができる。ディスプレイ装置１０６はホットスポットと共に動作するようにプログラムされたアプケーションやその他のソフトウェアの表示をしてもよい。これらについては後で更に説明する。
【００３８】
コンピュータ１０４には、ジェスチャが生成されているかどうかを検知し、ジェスチャの位置、従ってホットスポットの位置を判定するための様々な手段があってもよい。動作取得手段１０８、ジェスチャ処理手段１１０、ジェスチャ関連付け手段１１２を含めこれらの手段を以下で説明する。
【００３９】
動作取得手段１０８は、現実世界環境中の３次元（３Ｄ）空間におけるユーザのジェスチャを取得する。動作取得手段１０８には姿勢追跡手段１１４及び較正手段１１６が含まれていてもよい。動作取得手段１０８は、ビデオカメラからのビデオ映像などの検出された動作を受信するために、動作取得装置１０２と直接連携している。姿勢追跡手段１１４は、ユーザの身体または手などのユーザの身体の一部の姿勢の判定を行う。姿勢追跡手段１１４は、画像認識または深度追跡などによってユーザが取っている姿勢を判定してもよい。一例はＭｉｃｒｏｓｏｆｔ(登録商標)のＫｉｎｅｃｔ（登録商標）装置（マイクロソフト社、レッドモンド、ワシントン州）であり、これはカメラと、深度検出用の赤外線構成の光エミッタとセンサとを含んでいる。ＯｐｅｎＮＩ（商標）のアプリケーション・プログラミング・インターフェース（ＡＰＩ）（ＯｐｅｎＮＩ  Ｏｒｇａｎｉｚａｔｉｏｎ，  ｗｗｗ．ｏｐｅｎｎｉ．ｏｒｇ  ２０１１年７月１日アクセス）等のソフトウェアを、Ｋｉｎｅｃｔ（登録商標）に接続したコンピュータ上で実行して、画像と光情報を解釈してスケルトントラッキングを行うことが可能である。
【００４０】
較正手段１１６は、ジェスチャが室内の可動オブジェクトに対応している場合に動作取得装置１０２を物理空間との間で較正し、あるいは、動作取得装置１０２が動いた可能性のある場合に較正を行う。ジェスチャが空間位置に無関係な場合、つまりカメラの位置及び方向に対して固定されている場合には、較正は不要である。
【００４１】
ジェスチャ処理手段１１０はジェスチャを識別して解釈し、その識別し、解釈したジェスチャを基に３Ｄ空間内にホットスポットを生成する。ジェスチャ処理手段は、ジェスチャ検出手段１１８及びジェスチャ解釈手段１２０を含む。ジェスチャ検出手段１１８は姿勢追跡手段１１４から出力を受け、姿勢情報をどのタイミングでジェスチャ解釈手段１２０に渡して解釈させるかを判断する。
【００４２】
ジェスチャ解釈手段１２０は、ジェスチャ検出手段１１８から入力を受け、それを解釈する。ジェスチャには、ホットスポットを画定してその意味を規定するために使われるものがあり、また、ホットスポットと対話するために使われるものがある。ジェスチャのあるものは複雑であって、長時間に亘りかつ多数の位置に亘って解釈されるものもある。ジェスチャの多くは、事前に画定されたホットスポットに触るか指し示すという簡単なものであり得る。場合によっては、ホットスポットに触るユーザの身体の部位によって、ホットスポットが異なった作用をしてもよい。
【００４３】
ジェスチャの一部を使って、ホットスポットの画定のためのジェスチャであることを示してもよい。つまり、ジェスチャには、ホットスポットを生成することを意図したジェスチャであることを示すホットスポット生成モードジェスチャが含まれてもよい。例えば図４に示すように、左手４０４を上げたユーザ４０２は、右手でジェスチャを画定していることを示してもよい。あるいは、ジェスチャによって、またはＧＵＩのボタンを押すとかＱＲコード（登録商標）などの特別のマーカを示すとかの別の手段によって、ホットスポット生成モードに入ったり出たりすることができる。
【００４４】
ホットスポットが生成されると、ジェスチャ関連付け手段１１２がホットスポットを少なくとも１つのアクションに関連付ける。ホットスポット調整手段１２２が先ず提供されて、点のセットに対する最適面を見つけたり、ホットスポットの角度を正確に９０度にしたり、あるいはホットスポットの端を座標軸に合わせるというような機能が実行されてもよい。ホットスポットを画定するユーザのジェスチャは概して不正確であるために、ホットスポット調整手段１２２が必要とされる場合もある。調整手段１２２は画像処理を利用して、ホットスポットの端をシーン中のきちんと配列された特徴点に位置合わせすることもできる。この行動は、現実世界にあるオブジェクトをホットスポットとして画定しようする場合に特に有効である。
【００４５】
本明細書で記述するジェスチャは通常ホットスポットを始動させて何らかのアクションを実行させる。このアクションは通常、何らかのアプリケーションに作用する。ジェスチャ接続手段１２４は、この接続（ホットスポット、ジェスチャ、及びアクションの関連付け）をするためのものである。ある場合には、関連付けは、ジェスチャが画定されるときにプログラムされるか、メニューから選択されてもよい。別の場合には、ジェスチャ接続手段１２４が実例から関連付けを学習してもよい。例えば、ユーザはジェスチャとそれによりアプリケーションで始動されるアクションとを繰り返すことにより、システムに学習させてもよい。
【００４６】
フィードバック手段１２６は、ジェスチャ検出手段１１８、解釈手段１２０、接続手段１２４と対話し、いつジェスチャが検出されたか、またどんなジェスチャが検出されたかをユーザにフィードバックする。フィードバック手段１２６は、ビープ音やインジケータライトの点灯などのきわめて簡単なフィードバック、またはジェスチャとその効果をプロジェクタを介して仮想環境内または拡張現実（ａｕｇｍｅｎｔｅｄ  ｒｅａｌｉｔｙ）のオーバレイに表示するような複雑なフィードバックをすることもできる。後者の場合、仮想環境を表示するためにディスプレイ装置１０６が必要である。フィードバックは、触覚的なものであってもよいし、ヘッドマウントディスプレイによるものでもよいし、またはホログラフィック３Ｄディスプレイによりその場に表示されるものであってもよい。
【００４７】
図２は、本発明の一実施例による、ユーザがジェスチャを利用してホットスポットを生成する現実世界環境１２８を示す図である。環境には、少なくとも１つの動作取得装置１０２とコンピュータ１０４とディスプレイ装置１０６とが含まれる。ユーザ１３０は環境１２８内に位置して、動作取得装置１０２の観察範囲１３２内の任意の位置でジェスチャを実行することができる。
【００４８】
システムの一実施形態において、前述のＭｉｃｒｏｓｏｆｔ（登録商標）のＫｉｎｅｃｔ（登録商標）装置と対話するためＰｙｔｈｏｎスクリプトが利用される。これらのスクリプトでスケルトントラッキングからの出力が処理され、ホットスポットを画定する特定のジェスチャを検出して、関連する行動を実行する。図３に示す一実施形態において、最初にインタフェース要素を画定する場合に、ホットスポット要素１３４Ａと１３４Ｂと１３４Ｃが、図２に示された現実世界環境を反映するミラー世界１３６を表示するディスプレイ装置上に表示されてもよい。ユーザは、ディスプレイ装置からの視覚的なフィードバックを利用して、インタフェースの使い方を学び、ホットスポット１３４の位置と大きさを確認する。ディスプレイからの視覚的フィードバックに加えて、またはその代わりに別のタイプのフィードバックが与えられてもよい。これに関しては後述する。ユーザが習熟してくると、フィードバックは少なくてすみ、そのようなディスプレイなしのインタフェースを利用することができる。
【００４９】
［ＩＩ．ホットスポット位置の画定］
ホットスポットの画定には、位置の特定と意味すなわち機能の特定との２段階がある。本明細書の実施形態において、ホットスポットの位置はジェスチャで画定される。その意味つまり機能は、その全体または一部がジェスチャで規定されてもよいし、規定されなくてもよい。以下に述べるのは、ホットスポットの位置を画定するためのジェスチャの例である。但し、ホットスポットを画定するジェスチャはこれに限定される訳ではない。すべてのジェスチャは、ジェスチャ画定モードにある時に遂行されてもよいし、あるいは例えば左手を挙げて（図４参照）ホットスポットを画定中であることを示す別の動作を同時に実行しながら遂行されてもよい。
【００５０】
多角形ホットスポット
ユーザは頂点とする所望の位置に数秒間静止することにより、ポイントを指定する。あるいは、ユーザは形状の輪郭を描いてもよい。
【００５１】
円形ホットスポット
ユーザは同一の場所を複数回指して（かつ静止して）円の中心を指示し、次に半径線を外方向へ引いて、所望の半径長さになった処で静止する。
【００５２】
多面体ホットスポット
多面体のホットスポットは、面を画定するジェスチャと形状を判定する推論とを利用して画定される。それぞれの面を画定するだけで、凸面形状やより複雑な多数の形状を一意的に識別することができる。
【００５３】
球状ホットスポット
これは円形ホットスポットと同様である。指を握った状態ではなく、手を開いた状態で形成することができる。
【００５４】
ホットライン
ホットスポット画定モードにおいて２点で静止するだけで線分を画定できる。このラインをユーザが横切ると所定のアクションが始動される。
【００５５】
ホットポイント
片方の手を固定した状態で、もう一方の手をその周りで部分的に廻すことによりホットポイントを画定できる。このポイントの周りを廻るジェスチャによって所定のアクションが始動される。
【００５６】
複合ホットスポット
領域のセットでホットスポットを形成できる。これらの領域は例えば、不連続な領域であってもよいし、隣接する非共面領域であってもよい。ユーザは領域の１つにタッチするだけで行動を始動できてもよいし、あるいは領域のすべてを場合によっては所定の順序で触ることが必要な場合もある。
【００５７】
移動ホットスポット
ジェスチャを利用して空間内の領域としてホットスポットを画定するのではなく、画像処理との併用によりオブジェクトをホットスポットとして画定することができる。そのオブジェクトが移動する場合には、ホットスポット機能はオブジェクトと共に移動し、もとの空間座標はもはやホットスポットではなくなる。
【００５８】
異方性インタフェース
ホットスポット内部でのある方向への移動は、別方向の移動とは異なる効果を持ってもよい。例えば、手を右から左へ動かすことで２つのスピーカの左右のバランスに影響し、手を上下へ動かすことでトレブル／バスの調節を行い、手を前後へ動かすことでボリュームを調節する。ユーザがボリューム調節をできるホットスポットを画定するためには、最大ボリュームと最小ボリュームに対応する最大と最小の両手間隔を指定するだけでよい。このパターンから、他の任意の距離とボリュームとの対応関係を内挿することができる。
【００５９】
不均質ホットスポット
ホットスポットのなかには、ユーザがホットスポットのどこに触ろうと、またはどこでジェスチャを行おうと何ら影響を与えないものがある。別の場合には、ホットスポット内の位置が重要であって、この位置の変化を規定するためにジェスチャを利用できる。例えば、長くて幅の狭い長方形のホットスポットをボリューム制御として機能させることが可能である。ジェスチャを利用して、これが範囲をもつホットスポットであり、どちらの端が最大値でどちらが最小値であるかを示すことができる。
【００６０】
複写ホットスポット
片手でホットスポットを囲むジェスチャを行い、その後両手でそのホットスポットを「摘みあげ」て別の場所に置くという動作で、ホットスポットを別の場所にコピーすることができる。そこではジェスチャによって更なる所望の変更をすることもできる。同じように、「切り取り」のジェスチャによってあるオブジェクトに結びついたホットスポットを取り除き、「貼り付け」のジェスチャによって別のオブジェクトに結びつけることができる。このようにして、例えば現実世界のタンジブル（ｔａｎｇｉｂｌｅ、有形）インタフェースの一部から別の部分へ行動を移動させることが可能である。
【００６１】
暗黙的ホットスポット領域
ユーザはフロアのホットスポットの画定を要求するジェスチャをすることができ、システムは、壁やドアと言った既知の建物構造で囲まれたホットスポットを生成する。
【００６２】
これらのホットスポットのそれぞれは現実世界に固定することができ、現実世界の中の可動オブジェクトに固定することができる。ジェスチャで、より具体的にはユーザがジェスチャを行う場所で、そのホットスポットが現実世界に固定されるのか、現実世界の中の可動オブジェクトに固定されるのかが決定される。
【００６３】
場合によっては、ホットスポット境界は現実空間のいかなるものにも対応しない。このようなホットスポットは、インタフェースの「無形（ｉｎｔａｎｇｉｂｌｅ）」要素と称される。そして「無形」要素だけで構成されるインタフェースは「インタンジブル・インタフェース」と呼ばれる。その一方で、ホットスポットは、例えば電気器具などの現実世界のオブジェクトに対応してもよく、ホワイトボード上に描かれた箱やテーブル上に置かれたブロックなどのインタフェースとして生成されたオブジェクトに対応してもよい。
【００６４】
［ＩＩＩ．ホットスポット・インタラクションの規定］
ユーザはホットスポット内で起きるインタラクションの種類を規定しなければならない。ユーザのインタラクションは、ホットスポット生成に用いられたジェスチャの種類に基づいて自動的に規定されてもよいし、または図５に示すようにＧＵＩ５００のメニュー５０２から選択されてもよい。ユーザはジェスチャを介してメニュー５０２を操作することも可能である。そうすることにより、ユーザは現実世界環境内の位置を維持したままとすることができ、ホットスポットを生成するのにより都合がよい。
【００６５】
実際のインタラクションに関して、ホットスポットに単に触るだけでアクションを始動させることができる。ただし、場合によっては更に複雑なインタラクションを必要とする場合もある。イベントを始動させるのに両手でホットスポットに触ることが必要な場合もある。両手の間隔はそのイベントの強度を指示するものであってもよい。例えば、両手でホットスポットに触ってラジオにスイッチを入れることができ、どのくらい両手を広げるかによって所望のボリュームを指示することができる。別の場合には、アクションを始動させるのに、ホットスポットで特定のジェスチャをすることが要求されることがある。また、２つのホットスポットが含まれる場合もある。例えば、ユーザがホワイトボードまたは電子ディスプレイ用のディスプレイホットスポットに触り、その次にプリンタホットスポットに触ることで、そのディスプレイ内容を印刷したいということを指示することができる。一つのホットスポットで、複合した「３Ｄ  イン・エア・ウィジェット」をサポートすることができる。これは、さまざまな形態の触り方、指し方、および豊富な方法の組合せによるより複雑なジェスチャに反応するものである。ユーザはこの特別の３Ｄゾーンと対話することができる。例えば２つの手で（両手の距離に比例する）ボリュームを調節したり、片手で仮想的なノブを「回転」させてエアコンの温度を変えたり、×点を作るジェスチャで読み終えたｅメールや聞き終えたボイスメールを削除したりできる。
【００６６】
［ＩＶ．ホットスポット関連付けの規定］
ホットスポットとの対話による所望の効果が何らかの形で規定されて、ホットスポットの始動が意味のあるアクションへ変換されなければならない。この関連付けは、ホットスポットを画定する際に、所望のアプリケーションのアプリケーション・プログラミング・インタフェース（ＡＰＩ）と対話するジェスチャ解釈手段１２６にユーザがコードを付加することによって明確に組み込むことができる。または図５に示すように、ディスプレイ装置１０６上のＧＵＩ５００のメニュー５０２に考え得る関連付けの所定のセットを表示することも可能である。ホットスポット１３４を生成してインタラクションを特定した後に、ユーザは所望のアクションをリストから選択することができる。これを受けて、ジェスチャ解釈手段がそのホットスポットとインタラクションとアクションとの関連付けを行う。
【００６７】
ホットスポット関連付けのより高度な方法では、例えばユーザが行なったジェスチャとそれに続く所望のアクションとから、システムが関連付けを学習することによって行なわれる。ジェスチャまたはボタンクリック等の他の手段によって、学習モードに入ることができる。
【００６８】
［Ｖ．ホットスポット存在の指示］
現実世界環境においてはホットスポットがあることを物理的に指示する必要はない。インタラクションがシステムに及ぼす効果によって、または図３のホットスポット１３４Ａ、１３４Ｂ、１３４Ｃによって示されているように空間の仮想モデル中に色付けされた領域等のホットスポット表示を見ることによって、ホットスポットの存在を検知することができる。ホットスポットがオブジェクトに固定されている場合には、ホットスポットを追加的に物理表示する必要はない。しかし多くの場合、ホットスポットを物理的に表示することがホットスポット利用の助けとなる。
【００６９】
インジケータとしては、簡単な図やバーコードのついた付箋、オブジェクトの表面への描画、または３Ｄマーカの配置などが考えられる。理想的にはインジケータは容易に目につき、かつ目障りにならないものがよい。場合によっては、ユーザがシステムと十分な期間対話した後、物理的インジケータは効果を損なうことなく除去されてもよい。
【００７０】
また、インジケータは関連するアプリケーション内に埋め込まれてもよい。例えば図６のミラー世界の図に示すように、大投影スクリーン１３８上の表示は、スクリーン１３８のコーナーにホットスポット１３４Ｂを有していてもよい。プレゼンテーションにおいて、ホットスポットのセットが次のスライドまたは前のスライドへ移ることに関連している場合、プレゼンテーション用のソフトウェアは各ページのコーナーにインジケータ（図示せず）を与えて、ユーザがホットスポットでインタラクションをすると何が起きるかを図示する矢印アイコンを設けることができる。
【００７１】
［ＶＩ．ホットスポットの生成方法］
図７は、現実世界環境中でのジェスチャに基づくホットスポット生成方法の例示的実施形態を示している。最初にステップＳ７０２において、現実世界環境の３次元（３Ｄ）空間におけるユーザのジェスチャが動作追跡装置を利用して検知される。ステップＳ７０４において、ジェスチャが識別されて解釈され、ジェスチャの位置と意味が判定される。ステップＳ７０６において、識別され解釈されたジェスチャに基づいて現実世界環境の３Ｄ空間中にホットスポットが生成される。ステップＳ７０８において、ホットスポットは少なくとも１つのアクション、例えば、ソフトウェアアプリケーション中の１つのアクション、またはシステムによって制御されている装置の設定の調整等に関連付けられる。ステップＳ７１０において、ジェスチャを取得してホットスポットを生成する場合に、ユーザに対してフィードバックが行なわれる。
【００７２】
［ＶＩＩ．対話型３Ｄモデルの生成および変更への適用］
ジェスチャに基づく手法を利用すると、空間形状の外形をなぞることによって実物理空間の形状のモデル形状を画定することができる。ホットスポット生成のジェスチャは、これらのモデルにおいて対話型ゾーンを生成するために利用できる。以下に幾つかの例を示す。
【００７３】
仮想オブジェクトとの物理的インタラクション
物理空間における引き出しまたはドア、あるいは引き出しまたはドアのハンドル上に画定されたホットスポットに触れることで、仮想モデル内の引き出しまたはドアを開くことができる。最初の画定のためのジェスチャによって、ドアまたは引き出しをどれくらいまで開けるかを特定することができる。
【００７４】
制御スポット
壁のホットスポットに触れることで、現実世界環境または仮想世界環境における照明をオン／オフしたり、一連の照明のオプションを順に変えたりして制御することができる。
【００７５】
外観変更手段
制御スポットと同じように、フロア上のホットスポットに触ることによって、カーペットの色を多数のオプションから選んで変更することができる。
【００７６】
アニメーションパスの画定と制御
ジェスチャでアニメーションパスを画定することができる。そのパスを横切るオブジェクトをジェスチャまたは２次元バーコードなどの他の手段で選択することができる。ホットスポット領域を画定してアニメーションを制御することができる。例えば、両手でホットスポットと対話することで、パスを横切るオブジェクトのスピードを制御することができる。
【００７７】
ビュー制御
仮想世界を表示しているディスプレイの前に居るユーザが、現実世界環境のあるラインを横切ると、ディスプレイが反応して、仮想世界のズームインしたビューを表示することができる。
【００７８】
［ＶＩＩＩ．ビデオ監視システムの制御行動への適用］
本発明の方法の一アプリケーションとして、ジェスチャに基づくホットスポットを介してビデオ監視システムを制御してもよい。そのような監視システムの特徴としては次のようなものがある。
【００７９】
追跡領域のオン／オフ
ホットスポット領域でジェスチャを行うことで、その領域での追跡をオンまたはオフする。
【００８０】
記録領域のオン／オフ
ジェスチャでホットスポット領域の記録をオンまたはオフする。
【００８１】
移動経路のオン／オフ
追跡された人物がホットスポット領域に入ってくると、経路の追跡がスイッチオン（またはオフ）される。
【００８２】
追跡された人物の外見
追跡された人物がホットスポット領域でジェスチャをすると、領域内に居る間、システムはその追跡された人物の表示を変更する。例えば、ユーザの表示は、ビルボード表示から、個人のアバタ表示、非個人のリスト、または匿名のペンギン表示へ変更することができる。
【００８３】
ログとアラーム
追跡された人物が予め画定されたホットスポットに入ると、あるいは予め画定されたホットラインを越えると、アラームは消え、またはイベントがレビューのためにログされる。
【００８４】
システムへのクエリ
ホットスポットを指し示すことにより、システムにその領域で起きた最も直近のイベントを表示させるか、その領域でのイベントのリストを与えるように命令することができる。例えば、ごみを捨てた人物とか、そのスポットに居る２人以上の人物とかの、興味の対象のイベントの種類をジェスチャで指示することができる。
【００８５】
作り付け備品がない部屋のコントロール
対象とする部屋は会議室、家庭、または工場であってもよい。壁の上の様々なホットスポットに触ることで、照明をオンまたはオフしたり、スクリーンをオンまたはオフしたり、別の機械からのコンテンツを表示させたりすることができる。音声をオンまたはオフできるし、音響システム用のボリュームホットスポットに触れて手を上下させることでボリュームを上げたり下げたりできる。サーモスタットも調節できる。電子施錠されたキャビネットを解錠または施錠できる。ストリーミングやレコーディングやビデオ会議をオンまたはオフすることができる。様々な機械と器具を制御することができる。このようにユーザの身体が万能のリモコンとして作用する。また、特定のホットスポットに触れることで、ユーザの手をディスプレイ用のポインティング装置にすることもできる。所定のホットスポットに入ることでユーザがディスプレイの制御をすることができる。ディスプレイへのアクセスは、「ジェスチャによるパスワード」で制御できる。例えば、ディスプレイを制御するために、ジェスチャによるパスワードの順番通りにホットスポットのセットに触れることが必要である。人があるホットスポットに入るかホットスポットに触れることで、ビデオの再生をスタートできる。その同じホットスポット内でのジェスチャでビデオ内の検索が可能となる。システムが特定のユーザを識別することができるか、またはユーザが一意的にポーズを識別するホットスポットを選択する場合、そのホットスポットにユーザが入ると、予め設定されたスライドがスクリーンに現れて、会議における講演者の交代を円滑にできる。
【００８６】
個人情報空間
ユーザはこのシステムを利用して部屋の中あるいは自分の周りの空間内に個人情報空間を画定することができる。これによって、特別のメモリによって、ユーザの増え続ける個人情報の整理を支援できる。例えば、ユーザは壁にかかったカレンダ上に「ラボ活動」のホットスポットを画定することができる。腕をカレンダに向けることにより、従業員の最新の活動リストを見ることができる。同様に、椅子のそばに「ホーム監視」ホットスポットを画定することができ、それで自宅の監視カメラをチェックできる。机の上の壁に「やることリスト」のホットスポットを画定することができる。そのホットスポットに触れば現時点でのやることリストを聞くことができる。電話機の上のホットスポットに対話すれば、ＶＯＩＰ（ＩＰ電話）を作動させることができる。別のジェスチャで電話帳を開くことができる。より一般的には、機械やオブジェクトにあるホットスポットと対話すれば、そのオブジェクトに関連する情報または制御インタフェースを作動させることができる。特定のファイル引き出しから書類を取出せば、コンピュータ上に関連するフォルダを開くことができる。自分のオフィス内に領域を画定して、オフィスで今自分が行っている業務のステータスを示すメッセージを表示することができる。おそらくポーズまたはジェスチャによって、「執務中」、「電話中」であることを示す領域を特定することが可能であるし、または訪問者用の領域を特定することができる。
【００８７】
拡張現実体験
ホットスポットを画定した後、ユーザが所持しているモバイル装置がホットスポットに入ってくると、モバイル装置のスクリーンに拡張現実のコンテンツが現れるようにすることができる。これは、博物館や工場のツアーや、調度品を設置する部屋の代替的な可視化や、拡張現実のゲーム等に利用できる。ジェスチャによってこのコンテンツとの対話が可能であり、仮想モンスタを人間のジェスチャに反応させたりすることから、装置のスクリーンにより詳細な所望の指示を表示したりすることまで可能である。ホットスポットに入れば、場合によっては特定のジェスチャとの組合せで、装置は拡張現実のコンテンツを「取出し」、移動することができる。ホットスポットは、コンテンツに従って移動してもよいし、移動しなくてもよい。別のジェスチャは、コンテンツの変更ができ、拡大、回転、折り曲げ、短縮などをすることができる（オブジェクトまたはビデオの両方に適用できる）。ホワイトボードまたは電子ディスプレイの近くのホットスポットは、ディスプレイの画面取得要求に利用することができる。ディスプレイ上でのジェスチャによって、どの領域またはどのウィンドウを取得するかを指示できる。ユーザは拡張現実の「アバタの小部屋」に入ることができる。そしてどのアバタに入り込もうとも、そのアバタが拡張現実のディスプレイにおける自分自身に対する自分の見え方と他のユーザに対する自分の見え方を示す。所与のホットスポットに入ることにより、仮想世界で家具を移動する人間としての力やモンスタと戦える強大な力が付与される。
【００８８】
小売環境
顧客が適切なアプリケーションを動作させると、近くの商品に関する情報を閲覧可能なホットスポットをシステムを利用して画定することができる。商品のバーコードの写真を撮ることによって関連付けを生成できる。小売業者は特定の商品に対するホットスポットの境界を指示することができ、その結果そのホットスポットに滞在した時間の長さとそのホットスポットを通過した人の数とをモニタすることができる。人をうまく追跡することで、小売業者は顧客が次にどの商品に目を向けるかを記録して、店舗のよりよい編成を可能とする。人が長時間同じスポットに立っている場合には、その商品の購入を考えている可能性があるので、インタフェースが現れて支援することもできる。
【００８９】
プロトタイピング・インタフェース
ジェスチャをベースとするホットスポットの画定により、タンジブルインタフェースとＧＵＩの両方の高速プロトタイピングが可能となる。ジェスチャによって新しいホットスポットを生成することができ、別のジェスチャを使って、関連付けされた行動を前のホットスポットから移動させることができる。あるいは、ホットスポットに関連付けされた行動をメニューから選択することができる。インタフェースホットスポットは、描画されたインタフェースデザインの要素に対応してもよいし、タンジブルインタフェース用のブロックまたは他の３Ｄオブジェクトに対応してもよい。例えば、種々の器具または部屋全体に対するリモコンを、小さな携帯型のホワイトボード上に描画することも可能である。描画が改訂されると、ホットスポットの関連付けも更新される。
【００９０】
［ＶＩＩ．コンピュータの実施形態］
図８は、本発明による方法の実施形態を実装可能なコンピュータ／サーバシステム８００の一形態を示すブロック図である。システム８００は、当業者には周知のように、命令の実行に作用するプロセッサ８０２とメモリ８０３を含むコンピュータ／サーバプラットフォーム８０１を備える。本明細書で使用される「コンピュータ可読記憶媒体」という用語は、プロセッサ８０２に実行命令を与えることに関与する、ディスクや半導体メモリなどの任意の有形媒体を指す。更に、コンピュータプラットフォーム８０１は、キーボード、マウス、タッチデバイスなどの複数の入力装置８０４、または音声命令からの入力を受信する。コンピュータプラットフォーム８０１は更に、ポータブルハードディスク装置、光学媒体（ＣＤまたはＤＶＤ）、ディスク媒体、またはコンピュータが実行可能なコードを読み込むことができるその他の任意の有形媒体などのリムーバブル記憶装置８０５に接続されていてもよい。コンピュータプラットフォームは更に、インターネットやその他のローカルな公共または私的なネットワーク部品に繋がるネットワークリソース８０６に接続されていてもよい。ネットワークリソース８０６は、ネットワーク８０７上のリモートロケーションから命令およびデータをコンピュータプラットフォームへ提供してもよい。ネットワークリソース８０６への接続は、８０２．１１標準やＢｌｕｅｔｏｏｔｈ（登録商標）やセルラープロトコル等の無線プロトコル経由で、または、ケーブルやファイバ光学部品などの物理的伝送媒体経由であってもよい。ネットワークリソースは、コンピュータプラットフォーム８０１から隔離した場所にデータ及び実行可能な命令を格納するための記憶装置を含んでいてもよい。コンピュータはディスプレイ８０８とインタラクトして、データおよびその他の情報をユーザへ出力したり、ユーザからの追加の指示と入力を要求したりする。従ってディスプレイ８０８は、ユーザとインタラクトする入力装置８０４として更に作用してもよい。
【００９１】
上記の実施形態と実装は、当業者が本発明を実施できるように十分詳細に提示される。また、他の実装形態が利用されてもよいこと、及び本発明の範囲及び趣旨を逸脱することなしに様々な要素の構造上の変更及び／または代用が行われてもよいことを理解されたい。従って、以下の詳細な記述は本発明を制限するものとして解釈されるべきではない。更に、説明された本発明の様々な実施形態は、汎用コンピュータ上で実行されるソフトウェアの形態、または専用ハードウェアの形態、あるいはソフトウェアとハードウェアの組合せ、のいずれで実装されてもよい。
【符号の説明】
【００９２】
１０２  動作取得装置
１０４  コンピュータ
１０６  ディスプレイ装置
１０８  動作取得手段
１１０  ジェスチャ処理手段
１１２  ジェスチャ関連付け手段
１１４  姿勢追跡手段
１１６  較正手段
１１８  ジェスチャ検知手段
１２０  ジェスチャ解釈手段
１２２  ホットスポット調整手段
１２４  ジェスチャ接続手段
１２６  フィードバック手段
１２８  現実世界環境
１３０  ユーザ
１３２  観察範囲
１３４Ａ  ホットスポット要素
１３４Ｂ  ホットスポット要素
１３４Ｃ  ホットスポット要素
１３６  ミラー世界
１３８  投影スクリーン
４０２  ユーザ
４０４  左手
５００  ＧＵＩ
５０２  メニュー
８００  コンピュータ／サーバシステム
８０１  コンピュータプラットフォーム
８０２  プロセッサ
８０３  メモリ
８０４  入力装置
８０５  リムーバブル記憶装置
８０６  ネットワークリソース
８０７  ネットワーク
８０８  ディスプレイ
【図１】
2013025789.tif 000003
【図７】
2013025789.tif 000004
【図８】
2013025789.tif 000005
【図２】
2013025789.tif 000006
【図３】
2013025789.tif 000007
【図４】
2013025789.tif 000008
【図５】
2013025789.tif 000009
【図６】
2013025789.tif 000010