(57)【特許請求の範囲】
【請求項１】
異なる皮膚表面の間における入力を検出するセンサと、
前記センサが前記異なる皮膚表面の間における前記入力を検出したことに応じて前記センサから出力信号を受信し、前記出力信号に基づいて触覚制御信号を生成するプロセッサと、
前記触覚制御信号に基づいて、前記センサによって検出された前記異なる皮膚表面の間における前記入力に対応する近似場所に、触覚効果を生成する触覚出力装置と、を備えるシステム。
【請求項２】
前記センサは、前記システムのユーザの前記異なる皮膚表面間における入力を検出するように構成され、
前記触覚出力装置は、前記システムの前記ユーザに対して前記触覚効果を生成するように構成される、請求項１に記載のシステム。
【請求項３】
前記触覚出力装置は、ウェアラブル装置により搭載されるように構成されている、請求項１に記載のシステム。
【請求項４】
前記ウェアラブル装置は、指輪を含む、請求項３に記載のシステム。
【請求項５】
前記ウェアラブル装置は、リストバンド又はブレスレットを含む、請求項３に記載のシステム。
【請求項６】
前記触覚出力装置は、アクチュエータを有し、
前記触覚効果は、振動を含む、請求項１に記載のシステム。
【請求項７】
前記触覚出力装置は、電源に接続された少なくとも一つの電極を有する、請求項１に記載のシステム。
【請求項８】
前記触覚効果は、電気触覚的な刺激を含む、請求項７に記載のシステム。
【請求項９】
前記触覚効果は、筋肉刺激を含む、請求項７に記載のシステム。
【請求項１０】
前記触覚出力装置は、前記異なる皮膚表面の間を伸ばす又は引っ張るように構成された機械的装置を有する、請求項１に記載のシステム。
【請求項１１】
前記触覚出力装置は、前記異なる皮膚表面の間に引力又は斥力を生じさせるように構成された一対の電磁石を有する、請求項１に記載のシステム。
【請求項１２】
前記触覚出力装置は、超音波又は空気渦を生成するように構成されている、請求項１に記載のシステム。
【請求項１３】
異なる皮膚表面の間における入力を検出する工程と、
前記異なる皮膚表面の間において検出された入力に基づいて触覚制御信号を生成する工程と、
前記触覚制御信号に基づいて、前記異なる皮膚表面の間において検出された前記入力に対応する近似場所に、触覚出力装置を用いて触覚効果を生成する工程と、を備える方法。
【請求項１４】
前記触覚効果は、振動を含む、請求項１３に記載の方法。
【請求項１５】
前記触覚効果は、電気触覚的な刺激を含む、請求項１３に記載の方法。
【請求項１６】
前記触覚効果は、筋肉刺激を含む、請求項１３に記載の方法。
【請求項１７】
前記触覚効果は、前記皮膚を伸ばすこと又は前記異なる皮膚表面を引っ張ることを含む、請求項１３に記載の方法。
【請求項１８】
前記触覚効果は、前記異なる皮膚表面の間に引力又は斥力を生じさせることを含む、請求項１３に記載の方法。
【請求項１９】
前記触覚効果は、超音波又は空気渦を含む、請求項１３に記載の方法。
【請求項２０】
前記異なる皮膚表面の、前記触覚効果に対する感度を下げる工程を更に備える、請求項１３に記載の方法。
【請求項２１】
前記入力を検出する工程の前に、前記異なる皮膚表面に対して表面麻酔薬を塗布することにより、前記異なる皮膚表面の前記感度を下げる、請求項２０に記載の方法。
【請求項２２】
前記異なる皮膚表面の温度を下げることにより、前記異なる皮膚表面の前記感度を下げる、請求項２０に記載の方法。
【請求項２３】
前記入力を検出する工程の前に、前記異なる皮膚表面に対して振動を与えることにより、前記異なる皮膚表面の前記感度を下げる、請求項２０に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、皮膚を媒介したインタラクションのための触覚フィードバックを生成するシステム及び方法に関する。
【背景技術】
【０００２】
人間の皮膚を、電子装置に入力を供給するためのインタラクション面として使用することを提案する研究プロジェクトがいくつか進められている。例えば、２０１０年４月１０−１５日にアトランタ、ジョージアで開催された計算機学会（Ａｓｓｏｃｉａｔｉｏｎ  ｆｏｒ  Ｃｏｍｐｕｔｉｎｇ  Ｍａｃｈｉｎｅｒｙ：ＡＣＭ）のコンピュータシステムにおけるヒューマン・ファクターについての会議（ＣＨＩ  ２０１０）において、様々な体の部位（例えば、指、腕及び上腕）をインタラクション面として使用する「スキンプット（Ｓｋｉｎｐｕｔ）」と呼ばれる技術が報告された。人の指が当該皮膚表面を移動することによって生じる皮膚を伝播する振動を測定することにより、身体の部位の皮膚表面上でのタッチ入力を検出している。カリフォルニア、サンタバーバラで２０１１年１０月１６−１９日に開催された計算機学会（ＡＣＭ）のユーザインターフェースソフトウェア技術についての会議（“ＵＩＳＴ’１１”）では、ユーザの手の掌をインタラクション面として使用し、デプスカメラ及び画像処理技術を用いてユーザの掌上のタッチ入力を検出する技術が報告された。
【０００３】
イギリス、セントアンドリュースで２０１３年１０月８−１１日に開催された計算機学会（ＡＣＭ）のユーザインターフェースソフトウェア技術についての会議（“ＵＩＳＴ’１３”）では、ユーザの人差し指の指腹の皮膚をタッチ面として使用して、親指を当該タッチ面に対して移動し、つまむ動作を行うことによって入力を行う「フィンガーパッド」と呼ばれる技術が報告された。入力の追跡は、人差し指及び親指に取り付けられた磁気トラッカーを使用して行われる。また、ＵＩＳＴ’１３では、ユーザの前腕の皮膚表面をインタラクション面として使用する「ＳｅｎＳｋｉｎ」と称される技術が報告されており、この技術では、前腕に巻かれた２つのアームバンド付近の皮膚の変形を赤外線センサを使用して検出して、前腕の皮膚上のタッチ入力を追跡する。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記のような皮膚を媒介したインタラクションに対して触覚フィードバックを提供することにより、ユーザが皮膚上に与えた入力が電子装置によって受信されたことを知ることができるようにすることが望ましい。
【課題を解決するための手段】
【０００５】
本発明の一側面によれば、皮膚表面における入力を検出するセンサと、前記センサから出力信号を受信し、前記出力信号に基づいて触覚制御信号を生成するプロセッサと、前記触覚制御信号に基づいて触覚効果を生成する触覚出力装置とを備えるシステムが提供される。
【０００６】
一実施形態において、前記センサは、前記システムのユーザの前記皮膚表面における入力を検出するように構成され、前記触覚出力装置は、前記システムの前記ユーザに対して前記触覚効果を生成するように構成される。
【０００７】
一実施形態において、前記触覚出力装置は、ウェアラブル装置により搭載されるように構成されている。一実施形態において、前記ウェアラブル装置は、指輪を含む。一実施形態において、前記ウェアラブル装置は、リストバンド又はブレスレットを含む。
【０００８】
一実施形態において、前記触覚出力装置は、アクチュエータを有し、前記触覚効果は、振動を含む。
【０００９】
一実施形態において、前記触覚出力装置は、電源に接続された少なくとも一つの電極を有する。
【００１０】
一実施形態において、前記触覚効果は、電気触覚的な刺激を含む。
【００１１】
一実施形態において、前記触覚効果は、筋肉刺激を含む。
【００１２】
一実施形態において、前記触覚出力装置は、前記皮膚を伸ばす又は引っ張るように構成された機械的装置を有する。
【００１３】
一実施形態において、前記触覚出力装置は、前記ユーザのインタラクションする２つの皮膚表面の間に引力又は斥力を生じさせるように構成された一対の電磁石を有する。
【００１４】
一実施形態において、前記触覚出力装置は、空気渦を生成するように構成される。
【００１５】
本発明の一態様によれば、皮膚表面における入力を検出する工程と、前記検出された入力に基づいて触覚制御信号を生成する工程と、前記触覚制御信号に基づいて、触覚出力装置を用いて触覚効果を生成する工程と、を備える方法が提供される。
【００１６】
一実施形態において、前記触覚効果は、振動を含む。
【００１７】
一実施形態において、前記触覚効果は、電気触覚的な刺激を含む。
【００１８】
一実施形態において、前記触覚効果は、筋肉刺激を含む。
【００１９】
一実施形態において、前記触覚効果は、前記皮膚を伸ばす又は引っ張ることを含む。
【００２０】
一実施形態において、前記触覚効果は、前記ユーザのインタラクションする２つの皮膚表面の間に引力又は斥力を生じさせることを含む。
【００２１】
一実施形態において、前記触覚効果は、超音波又は空気渦を含む。
【００２２】
一実施形態において、前記方法は、前記皮膚表面の、前記触覚効果に対する感度を下げる工程を更に備える。
【００２３】
一実施形態において、前記ユーザからの前記入力を検出する工程の前に、前記皮膚表面に対して表面麻酔薬を塗布することにより、前記皮膚表面の前記感度を下げる。
【００２４】
一実施形態において、前記皮膚表面の温度を下げることにより、前記皮膚表面の前記感度を下げる。
【００２５】
一実施形態において、前記ユーザからの前記入力を検出する工程の前に、前記皮膚表面に対して振動を与えることにより、前記皮膚表面の前記感度を下げる。
【００２６】
本発明の上記及び上記以外の目的、特徴、及び性質、並びに、関連する構成要素の動作方法及び機能、そして製造における各部分の組み合わせと経済性については、添付図面を参照しつつ以下の詳細な説明と添付の特許請求の範囲を検討することによってさらに明らかになる。これらはいずれも本明細書の一部を構成する。添付図面は例示及び説明のためのものであり、本発明の発明特定事項の定義として用いることは意図されていない。本明細書及び特許請求の範囲における用法によれば、単数形の「ａ」、「ａｎ」及び「ｔｈｅ」には複数のものへの言及が含まれる。ただし、文脈によって別に解すべきことが明白な場合はこの限りでない。
【図面の簡単な説明】
【００２７】
以下の図面の構成要素は、本開示の一般的な原理を強調するように描写されており、必ずしも寸法通りには記載されていない。一貫性及び明瞭性を確保するために、対応する構成要素を指し示す参照符号は、必要に応じ、複数の図面にわたって繰り返し用いられる。
【００２８】
【図１】本発明の一実施形態にかかるシステムを模式的に示す。
【００２９】
【図２】図１のシステムのプロセッサを模式的に示す。
【００３０】
【図３】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３１】
【図４】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３２】
【図５】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３３】
【図６】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３４】
【図７】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３５】
【図８】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３６】
【図９】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３７】
【図１０】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３８】
【図１１】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００３９】
【図１２】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００４０】
【図１３】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００４１】
【図１４】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００４２】
【図１５】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００４３】
【図１６】図１のシステムの触覚出力装置の一実施形態を模式的に示す。
【００４４】
【図１７】本発明の一実施形態に係る方法を示したフローチャートである。
【発明を実施するための形態】
【００４５】
図１は、本発明の一実施形態にかかるシステム１００を模式的に示す。システム１００は、デスクトップ・コンピュータ、ラップトップ・コンピュータ、電子ワークブック、電子ハンドヘルド装置（例えば、携帯電話、スマートフォン、ゲーム装置、携帯情報端末（ｐｅｒｓｏｎａｌ  ｄｉｇｉｔａｌ  ａｓｓｉｓｔａｎｔ：「ＰＤＡ」）、携帯用電子メール装置、携帯用インターネット・アクセス装置、電卓など）、ゲーム・コントローラ、又は、ヘッドマウントディスプレイ、指輪若しくはリストバンドのようなウェアラブルデバイス等の電子装置の一部であってもよい。図示されるように、システム１００は、プロセッサ１１０、記憶装置１２０、及び、入出力装置１３０を備えており、これらはバス１４０を介して相互に接続されている。一実施形態において、入出力装置１３０は、少なくとも一つのセンサ１５０及び少なくとも一つの触覚出力装置１６０及び／又はその他の人間コンピュータインターフェース装置を備えてもよい。
【００４６】
プロセッサ１１０は、汎用又は特殊用途プロセッサ、あるいはシステム１００の動作及び機能を管理又は制御するマイクロ・コントローラである。例えば、プロセッサ１１０は、触覚効果を提供するために、特定用途向け集積回路（ａｐｐｌｉｃａｔｉｏｎ−ｓｐｅｃｉｆｉｃ  ｉｎｔｅｇｒａｔｅｄ  ｃｉｒｃｕｉｔ：「ＡＳＩＣ」）として、入力／出力装置１３０のドライバへの出力信号を制御するように特別に設計されてもよい。プロセッサ１１０は、プロセッサ１１０が受信した又は決定した触覚信号に基づいてどのような触覚効果が生成されるべきか、当該触覚効果がどのような順序で生成されるべきか、及び、どの程度の大きさ、頻度、持続時間の触覚効果とすべきか、及び／又は、触覚効果のその他のパラメータについて、所定の因子に基づいて決定してもよい。また、プロセッサ１１０は、特定の触覚効果を提供するために触覚出力装置１６０を駆動するのに使用することができるストリーミング・コマンドを提供するように構成されてもよい。実施形態によっては、プロセッサ１１０は実際には複数のプロセッサを含み、当該プロセッサの各々が電子装置１００の内部で特定の機能を果たすように構成されている。プロセッサ１１０についての詳細は後述する。
【００４７】
メモリデバイス１２０としては、内部に固定された１つ又は複数の記憶ユニット、リムーバブル記憶ユニット及び／又はリモート・アクセスが可能な記憶ユニットを含む。これら様々な記憶ユニットは、揮発性メモリと不揮発性メモリとのいかなる組合せをも含み得る。記憶ユニットは、情報、データ、命令、ソフトウェア・コードなどのいかなる組合せをも記憶し得るように構成されている。より具体的には、記憶ユニットは、触覚効果のプロフィール、入出力装置１３０の触覚出力装置１６０がいかにして駆動されるかを指示する命令、又は触覚効果を生成するためのその他の情報を含む。
【００４８】
バス１４０は、システム１００の様々な構成要素間の信号通信を可能とし、例えば、ネットワークを介して、リモートコンピュータ又はサーバからの情報にアクセス可能に構成されてもよい。ネットワークは、例えば、インターネット、イントラネット、ＰＡＮ（Ｐｅｒｓｏｎａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＳＡＮ（Ｓｔｏｒａｇｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＭＡＮ（Ｍｅｔｒｏｐｏｌｉｔａｎ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、無線ネットワーク、セルラー通信ネットワーク、公衆交換電話網、及び／又はこれら以外のネットワークの一又は複数である。
【００４９】
センサ１５０は、以下に詳細に説明するように、例えば、ユーザの指が、当該ユーザの皮膚の表面上を移動するのを検出するように構成された任意の好適な入力装置として構成されてもよい。当該センサ１５０は、容量結合、抵抗結合、又は誘導結合によって人の皮膚の存在を検出することができるが、検出方法はこれらの技術には限られない。一実施形態において、センサ１５０は、電磁センサ、容量センサ及び／又は生体用音響センサであってもよい。一実施形態において、センサ１５０は、デプスカメラ（ｄｅｐｔｈ  ｃａｍｅｒａ）及び当該デプスカメラで撮像した画像を処理するためのプロセッサを備えてもよい。センサ１５０の様々な実施形態について以下に説明する。
【００５０】
触覚出力装置１６０は、システム１００のユーザに対して触覚フィードバックを提供するように構成される。具体的には、触覚出力装置１６０は、ユーザの指に触覚フィードバックを提供して、以下に詳細に説明するように、入力を確認するものとして触覚効果を与えてもよい。システム１００とのインタラクションが発生する時のユーザエクスペリエンスを向上させるのに、触覚効果を使用してもよい。
【００５１】
触覚効果は、触覚を生成する任意の方法を使用して生成されてもよく、例えば、静電摩擦又は超音波摩擦、変形、振動、力覚等が利用できる。一実施形態において、触覚出力装置１６０は、非機械的又は非振動装置、例えば、静電摩擦（「ＥＳＦ」）や超音波表面摩擦（「ＵＳＦ」）を用いる装置、超音波触覚トランスデューサを用いて音響放射圧力を生じさせる装置、触覚基板及び可撓性もしくは変形可能な表面を用いる装置、又はエアジェットを用いた空気の吹きかけなどの発射型の触覚出力を提供する装置などを含んでもよい。一実施形態において、触覚出力装置１６０が含み得るアクチュエータは、例えば、偏心質量体がモータにより動かされる偏心回転質量体（「ＥＲＭ」）などの電磁アクチュエータ、ばねに取り付けられた質量体が前後に駆動されるリニア共振アクチュエータ（「ＬＲＡ」）、又は圧電材料、電気活性ポリマー、もしくは形状記憶合金などの「スマートマテリアル」、マクロ複合繊維アクチュエータ、静電気アクチュエータ、電気触感アクチュエータ、及び／又は触覚（例えば、振動触知）フィードバックなどの物理的フィードバックを提供する他の種類のアクチュエータ、である。異なる複数の触覚効果を生成させるのに、複数の触覚出力装置１６０を使用してもよく、それにより、テクスチャ、ボタンクリック、状態変化等の幅広い種類の効果を生成させることができる。
【００５２】
図２は、プロセッサ１１０の一実施形態をより詳細に例示している。プロセッサ１１０は、一又は複数のコンピュータ・プログラム・モジュールを実行するように構成されてもよい。当該一又は複数のコンピュータ・プログラム・モジュールは、センサモジュール１１２、判定モジュール１１４、触覚出力装置制御モジュール１１６、及び／又はこれら以外のモジュールの一又は複数を備えることができる。プロセッサ１１０は更に、メモリデバイス１２０と同じであってもよい電子記憶装置１１８を備えてもよい、又は、メモリデバイス１２０に加えて当該電子記憶装置を備えてもよい。プロセッサ１１０は、モジュール１１２、１１４、及び／又は１１６を実行する際に、ソフトウェア、ハードウェア、ファームウェア、何らかの方法で組み合わされたソフトウェア、ハードウェア、及び／又はファームウェア、及び／又はプロセッサ１１０の処理能力を構成する他の機構を用いてもよい。
【００５３】
図２においてモジュール１１２、１１４及び１１６は単一の処理装置内の同じ位置に配置されるものとして示されるが、プロセッサ１１０が複数の処理装置を含む実施形態においては、モジュール１１２、１１４及び／又は１１６のうちの一又は複数が他のモジュールから離れて配置されてもよい。以下の異なるモジュール１１２、１１４、及び／又は１１６によって提供される機能の記述は説明のためのものであり、限定を意図したものではない。モジュール１１２、１１４、及び／又は１１６はいずれも記述されるよりも多くの、又は少ない機能を提供してもよい。例えば、モジュール１１２、１１４、及び／又は１１６のうちの一又は複数を取り除き、その機能の一部又はすべてを、モジュール１１２、１１４、及び／又は１１６のうちの他のモジュールで提供してもよい。他の例として、以下でモジュール１１２、１１４、及び／又は１１６のうちの１つに帰せられる機能の一部又はすべてを実行する１つ又は複数の追加的なモジュールを実行するように、プロセッサ１１０が構成されてもよい。
【００５４】
センサモジュール１１２は、センサ１５０がシステム１００のユーザの皮膚表面におけるユーザ入力を検出すると生成されるセンサ１５０からの入力信号を受信するように構成される。一実施形態において、前記皮膚表面は、ユーザ入力を提供するユーザと同一のユーザの皮膚表面であってもよい。一実施形態において、前記皮膚表面は、ユーザ入力を提供するユーザとは異なる、システムのユーザの皮膚表面であってもよい。ユーザ入力は、インタラクション面上の仮想ボタンを押すような、一回のタッチの形態であってもよいし、複数のタッチ及び／又はタッチするジェスチャであってもよい。センサモジュール１１２はまた、更なる処理のために信号を判定モジュール１１４へと送信するように構成される。
【００５５】
判定モジュール１１４は、どのような種類の入力をユーザが意図しているか、当該入力に従ってシステム１００がどの種類のアクションをとるべきか、及び、触覚出力装置１６０によって生成されるべき触覚フィードバックの種類は何か、を判定するように構成される。一実施形態において、ユーザは、例えば、電話をかけるといった特定のアクションをシステム１００が実行することを希望することを示す特定のジェスチャを、インタラクション皮膚表面に対して提供してもよい。判定モジュール１１４は、複数の予め定められたジェスチャをライブラリとしてプログラムしていてもよく、ユーザが面の特定の場所をタッチすると、又は、ユーザが面に対してあるジェスチャを行うと、判定モジュール１１４が、対応する出力を判定してもよい。加えて、判定モジュール１１４は、触覚出力装置制御モジュール１１６に信号を出力して、好適な触覚効果をユーザに提供してもよい。
【００５６】
触覚出力装置制御モジュール１１６は、判定モジュール１１４が生成する信号に基づいて、触覚出力装置１６０によって生成されるべき触覚効果を決定するように構成される。触覚効果を決定することは、所望の効果がユーザに提供されるような触覚効果の振幅、周波数、期間等を含む１つ又は複数のパラメータを決定することを含んでもよい。
【００５７】
図１に示すように、一実施形態において、センサ１５０は、ユーザの指及び親指に搭載されて、ユーザの指の皮膚表面がタッチパッドとして機能し、ユーザの親指がタッチスタイラスとして機能するように構成されてもよい。センサ１５０の上記のような一実施形態の詳細は、Ｌｉｗｅｉ  Ｃｈａｎ他、ＵＩＳＴ１３、２０１３年１０月６−９日、２５５−２６０ページ、「ＦｉｎｇｅｒＰａｄ：Ｐｒｉｖａｔｅ  ａｎｄ  Ｓｕｂｔｌｅ  Ｉｎｔｅｒａｃｔｉｏｎ  Ｕｓｉｎｇ  Ｆｉｎｇｅｒｔｉｐｓ」に記載されており、参照により本明細書に組み込まれる。
【００５８】
一実施形態において、センサ１５０は、ユーザの前腕に取り付けられ、２つのアームバンドを備えるように構成されてもよく、２つのアームバンドの間の皮膚表面がタッチ入力面として使用されるように当該２つのアームバンドが互いに離間して配置される。このようなセンサ１５０の一実施形態の詳細は、Ｍａｓａ  Ｏｇａｔａ他、ＵＩＳＴ’１３、２０１３年１０月８−９日、５３９−５４３ページ、「ＳｅｎＳｋｉｎ：Ａｄａｐｔｉｎｇ  Ｓｋｉｎ  ａｓ  ａ  Ｓｏｆｔ  Ｉｎｔｅｒｆａｃｅ」に記載されており、参照により本明細書に組み込まれる。
【００５９】
一実施形態において、センサ１５０は、例えば、ユーザの前腕であるユーザの腕、又は、一の若しくは複数の指に取り付けられるように構成され、アームバンド、リストバンド又は指輪といったウェアラブル装置に取り付けられた複数の振動センサを含んでもよい。このようなセンサ１５０の一実施形態の詳細は、Ｃｈｒｉｓ  Ｈａｒｒｉｓｏｎ他、ＣＨＩ２０１０、２０１０年４月１０−１５日、４５３−４６２ページ、「Ｓｋｉｎｐｕｔ：  Ａｐｐｒｏｐｒｉａｔｉｎｇ  ｔｈｅ  Ｂｏｄｙ  ａｓ  ａｎ  Ｉｎｐｕｔ  Ｓｕｒｆａｃｅ」に記載されており、参照により本明細書に組み込まれる。
【００６０】
一実施形態において、センサ１５０は、例えば、ユーザの手の掌がインタラクション面に触れた時に、当該掌の上のタッチ入力を捉えるように構成されたデプスカメラのようなカメラを備えてもよい。このようなセンサ１５０の一実施形態の詳細は、Ｓｅａｎ  Ｇｕｓｔａｆｓｏｎ他、ＵＩＳＴ１１、２０１１年１０月１６−１９日、２８３−２９２ページ、「Ｉｍａｇｉｎａｒｙ  Ｐｈｏｎｅ：Ｌｅａｒｎｉｎｇ  Ｉｍａｇｉｎａｒｙ  Ｉｎｔｅｒｆａｃｅｓ  ｂｙ  Ｔｒａｎｓｆｅｒｒｉｎｇ  Ｓｐａｔｉａｌ  Ｍｅｍｏｒｙ  ｆｒｏｍ  ａ  Ｆａｍｉｌｉａｒ  Ｄｅｖｉｃｅ」に記載されており、参照により本明細書に組み込まれる。
【００６１】
上記で示したセンサに限定することを意図していない。皮膚表面におけるユーザによる入力を検出するように構成されたその他の種類のセンサを、本発明の実施形態に使用してもよい。
【００６２】
図１のシステムの触覚出力装置１６０として使用してもよい触覚出力装置３１０を備えるウェアラブル装置３００の一実施形態が図３に示されている。一実施形態において、ウェアラブル装置３００は、システム１００に入力を供給するインタラクティブパッドとして使用される皮膚表面と相互作用するユーザに指に装着されるように構成された指輪の形態であってもよい。ウェアラブル装置３００は、ユーザの指が皮膚表面に接触すると、触覚フィードバック又は触覚効果を提供するように構成されてもよい。振動又は締め付ける動作の形態の触覚効果を、ウェアラブル装置３００が備える触覚出力装置３１０によって生成してもよい。一実施形態において、触覚出力装置３１０は、上記したようなアクチュエータのうちの一つのような、アクチュエータを備えてもよい又はアクチュエータの形態であってもよい。
【００６３】
ユーザの指が肌表面と接触する接触点付近に、触覚フィードバックを適用してもよい。例えば、ウェアラブル装置３００は、インタラクションを行う指の爪上又は付近に装着されてもよいし、図３に示すようにインタラクションを行う指の別の部分に装着されてもよい。一実施形態では、ウェアラブル装置３００は、インタラクティブパッドとして使用される皮膚表面が存在する腕の手首に、若しくは、インタラクションを行う指の側の腕に装着されるリストバンド又はブレスレットの形態であってもよい。リストバンド又はブレスレットは、ユーザに触覚効果を提供するべく、手首に振動を与える又は手首を締め付けるように構成されてもよい。
【００６４】
図１のシステムにおける触覚出力装置１６０として使用してもよい触覚出力装置４００が図４に示されている。触覚出力装置４００は、ユーザの指に電気的に接続される電源４１０を備える。システム１００に対する入力として、ユーザがジェスチャを提供するインタラクション面として使用される皮膚表面４２０は接地される。インタラクションを行う指が、電源４１０と電気的に接続されると、インタラクション面として使用される皮膚表面４２０が接地されて、皮膚に電流が流れ、触覚感覚が生じる。
【００６５】
一実施形態において、所定の電圧を指腹及び皮膚表面に印加して、これらが接触した時に、電気触覚的な刺激（ｅｌｅｃｔｒｏｔａｃｔｉｌｅ  ｓｔｉｍｕｌａｔｉｏｎ）を印加してもよい。例えば、ウェアラブルなパッチの形態である第１電極４２０を、ユーザの上腕に適用し、ウェアラブルなパッチの形態である第２電極４３０をユーザの指に適用して、当該２つの電極４２０、４３０が異なる電圧に保持されるようにしてもよい。ユーザの指腹がユーザの上腕と接触すると、回路が形成されて電流が流れ、ユーザの皮膚の機械受容器（ｍｅｃｈａｎｏｒｅｃｅｐｔｏｒ）を刺激する。一実施形態において、電気触覚的な刺激は、他方を接地させることなく、一方の表面のみに蓄電させることによって生成されてもよい。
【００６６】
本発明の実施形態において、触覚出力装置１６０は、筋肉を電気的に刺激して、筋肉を収縮させるように構成された電極を備えてもよい。例えば、指腹をタッチ表面として使用する場合、インタラクションを行う指に向かって又はインタラクションを行う指から離れるように当該指腹を押すべく、指の筋肉が刺激されるように構成してもよい。上腕をタッチ面として使用する場合、上腕の筋収縮によって、当該タッチ表面の固さを変化させてもよい又は当該タッチ表面を振動させてもよい。
【００６７】
体の特定の部位に電極を取り付けて、一の又は複数の筋肉を刺激して、これらを収縮させてもよい。インタラクション表面の硬さを増すのに、筋収縮を利用してもよい。例えば、指腹を上腕に押し付けると当該上腕が硬くなるようにして、触知型（ｔａｃｔｉｌｅ）フィードバックの形態の触覚効果を生成してもよい。この硬さを動的に変化させることにより、ボタンの物理的な動きを擬似的に生成する、又は、振動と同様な効果を生成してもよい。また、硬さを位置によって変化させてもよく、それにより、例えば、ボタン、スライダといった仮想的な制御部の存在を示したり、これらの状態（例えば、オン又はオフ、感度を有する又は有さない等）を示すことができる。
【００６８】
電極によって引き起こす筋収縮を利用して、動きを生じさせてもよい。例えば、インタラクション面として使用される指腹に筋収縮を起こして当該指腹を曲げて、インタラクションを行う指を押すようにすることができる。例えば、指腹が仮想ボタンを押した場合、プロセッサによってこのアクションが登録され、触覚出力信号が電極に接続された電源に印加されて、当該指が押し返されるようにしてもよい。
【００６９】
筋収縮により皮膚が伸張されることから、インタラクション面の硬さを間接的に変化させてもよい。例えば、親指を手から引き離すことにより、母指球又は親指と人差し指との間の水かき部分を硬くさせることができる。同様に、筋収縮により、インタラクション面の皮膚を、一方向に引き離すことができる。例えば、手首の皮膚は、手首を曲げることにより、横向きに引っ張ることができる。
【００７０】
電気的刺激によって筋肉を不随意に収縮させる技術は周知であり、一般的には、「Ｅｌｅｃｔｒｉｃａｌ  Ｍｕｓｃｌｅ  Ｓｔｉｍｕｌａｔｉｏｎ（ＥＭＳ：電気的筋肉刺激）」又は「Ｆｕｎｃｔｉｏｎａｌ  Ｅｌｅｃｔｒｉｃａｌ  Ｓｔｉｍｕｌａｔｉｏｎ（ＦＥＳ：機能的電気刺激）」と称される。例えば、２０１１年米国、ニューヨークで開催されたＡＣＭ、ＳＩＧＣＨＩ  Ｃｏｎｆｅｒｅｎｃｅ  ｏｎ  Ｈｕｍａｎ  Ｆａｃｔｏｒｓ  ｉｎ  Ｃｏｍｐｕｔｉｎｇ  Ｓｙｓｔｅｍｓ  （ＣＨＩ’１１）、玉城絵美、味八木崇、暦本純一著、「ＰｏｓｓｅｓｓｅｄＨａｎｄ：ｔｅｃｈｎｉｑｕｅｓ  ｆｏｒ  ｃｏｎｔｒｏｌｌｉｎｇ  ｈｕｍａｎ  ｈａｎｄｓ  ｕｓｉｎｇ  ｅｌｅｃｔｒｉｃａｌ  ｍｕｓｃｌｅｓ  ｓｔｉｍｕｌｉ」、及び、２０１３年米国ニューヨークで開催されたＡＣＭ、ＳＩＧＣＨＩ  Ｃｏｎｆｅｒｅｎｃｅ  ｏｎ  Ｈｕｍａｎ  Ｆａｃｔｏｒｓ  ｉｎ  Ｃｏｍｐｕｔｉｎｇ  Ｓｙｓｔｅｍｓ  （ＣＨＩ’１３）、Ｐｅｄｒｏ  Ｌｏｐｅｓ及びＰａｔｒｉｃｋ  Ｂａｕｄｉｓｃｈ著、「Ｍｕｓｃｌｅ−ｐｒｏｐｅｌｌｅｄ  ｆｏｒｃｅ  ｆｅｅｄｂａｃｋ：  ｂｒｉｎｇｉｎｇ  ｆｏｒｃｅ  ｆｅｅｄｂａｃｋ  ｔｏ  ｍｏｂｉｌｅ  ｄｅｖｉｃｅｓ」には、ヒューマン−コンピュータインタラクションのために手指の動きをトリガするのに筋肉刺激が利用されている例が示されており、これらの内容は参照により本明細書に組み込まれる。このような技術は、体の特定の部位に電極を配置して、電流が流れると筋肉が収縮することを利用している。接着剤を使用して電極を皮膚に貼り付けてもよく、例えば、導電性ゲルを使用して、皮膚との密着性を改善してもよい。
【００７１】
図１のシステム１００における触覚出力装置１６０として使用してもよい触覚出力装置５００の一実施形態が図５に示されている。触覚出力装置５００は、第１電極５１０及び第２電極５２０、並びに、第１電極５１０及び第２電極５２０に接続された電源５３０を備える。図に示すように、第１電極５１０及び第２電極５２０が、ユーザの上腕の皮膚表面に取り付けられる。ユーザが、上腕の仮想ボタン５４０の位置をタップすると、センサ１５０が入力を検出して、上記したように入力信号をプロセッサ１１０に送信する。プロセッサ１１０は、入力に基づいて、生成すべき触覚効果を決定し、触覚制御信号を電源５３０に送信する。それにより、皮膚に取り付けられた２つの電極５１０、５２０が、前腕の筋肉に電気パルスを送信し、筋肉が硬直する。筋収縮の形態の触覚効果により、ボタン押下の入力がプロセッサ１１０によって受信されたことをユーザが確認することができる。
【００７２】
図１のシステム１００における触覚出力装置１６０として使用してもよい触覚出力装置６００の一実施形態が図６に示されている。図に示すように、触覚出力装置６００は、電源６３０に接続された第１電極６１０及び第２電極６２０を備える。第１電極６１０及び第２電極６２０は、図に示すように、親指の付け根付近のユーザの手に配置される。センサ１５０は、例えば、ユーザの反対側の手の人差し指が、当該ユーザの親指に位置する２つの仮想ボタン６４０、６５０のうちのどちらが押下されたかを判定するように構成されてもよい。ユーザの人差し指が、２つの仮想ボタン６４０、６５０のうちの一方を押すと、電極６１０、６２０により掌に電流が流れて、親指が内側に移動して触覚フィードバックを付与して、ユーザはプロセッサ１１０によって入力が受信されたことを確認することができる。
【００７３】
図１のシステム１００における触覚出力装置１６０として使用してもよい触覚出力装置７００の一実施形態が図７に示されている。図に示すように、触覚出力装置７００は、電源７３０に接続された第１電極７１０及び第２電極７２０を備える。第１電極７１０及び第２電極７２０は、図に示すように、ユーザの掌の上に配置される。この実施形態では、ユーザは、親指と人差し指との間の皮膚を押すことにより、例えば、ユーザの電話の一機能を起動させることができてもよい。ユーザが皮膚を押すと、電極７１０、７２０間を流れる電流によって筋肉が刺激されて、ユーザの親指が強制的に手から離れる方向に移動し、ユーザの親指と人差し指の間の水かきの部分の皮膚が伸ばされることにより、ユーザの入力を確認することができてもよい。
【００７４】
図１のシステム１００における触覚出力装置１６０として使用してもよい触覚出力装置８００の一実施形態が図８に示されている。図に示すように、触覚出力装置８００は、電源８３０に接続された第１電極８１０及び第２電極８２０を備える。第１電極８１０及び第２電極８２０は、図に示すように、ユーザの腕に配置される。この実施形態では、ユーザは、前腕の手首付近の内側の皮膚にタッチする。ユーザが皮膚を押圧すると、電極８１０、８２０に供給される電気パルスにより、筋肉が刺激され、手が後方へと僅かに曲げられる。この動きにより、手首の皮膚が手に向かって引っ張られることとなり、ユーザに対して方向キュー（ｃｕｅ）を提供できる。
【００７５】
当業者であれば理解できるように、図５から図８は、本発明の実施形態の概略図であり、図に描かれた電極の位置は、実装時の正確な位置を示していない場合がある。電極の正確な位置は、所望の効果を得るべく電極でどの筋肉を刺激するかによって異なる。
【００７６】
本発明の実施形態によれば、異なる複数の機械を使用して、タッチ面又はインタラクション面として使用される皮膚を伸ばす又は引っ張ってもよく、それにより、タッチ面又はインタラクション面の硬さが変化して、当該皮膚とのインタラクションに応答して触覚効果を生成することができる。例えば、皮膚の硬さを高めることにより、当該皮膚がインタラクションを行う指を押し返すようにすることができる。知覚可能な触覚フィードバック又は方向を示す効果を生成するべく、皮膚を一方向に引っ張ってもよい。例えば、一実施形態では、前腕に取り付けられた複数のストラップを互いに離れる方向に引っ張って、皮膚を引き伸ばしてもよい。このような実施形態では、皮膚及び／又はその他の組織を変形させて、インタラクション面に変化を引き起こすように構成された機械的な装置を使用してもよい。
【００７７】
例えば、図９に示すように、触覚出力装置９００は、前腕にきつく巻かれたバンドによって取り付けられる第１ローラ９１０及び第２ローラ９２０を備えてもよく、例えば、プロセッサ１１０からの触覚制御信号の受信に応答して、これらローラによって皮膚を掴み互いに反対方向へと皮膚を引っ張るように構成することができる。ローラ９１０、９２０によるこのような動きによって、ローラ９１０、９２０間に位置する皮膚の部分を硬くすることができる。図１０には、前腕の側部を両側から押して、前腕の組織を隆起させる又は硬くするように構成されたアームバンド１０１０を備える触覚出力装置１０００が示されている。図１１には、スマート材料アクチュエータ（ＳＭＡ）１１１０のグリッドを備える触覚出力装置１１００が示されており、ＳＭＡ１１１０のグリッドが前腕の皮膚に取り付けられて、アクチュエータが起動すると前腕の皮膚が引き伸ばされる又は押されるように構成されている。ＳＭＡ１１１０のグリッドは、皮膚表面に適用される触覚タトゥー（ｈａｐｔｉｃ  ｔａｔｔｏｏ）の形態であってもよいし、好適な接着剤によって皮膚表面に貼り付けられてもよい。図９〜図１１に示した実施形態において、触覚出力装置９００、１０００、１１００によって生成される刺激は、インタラクションを行う指だけでなく、インタラクション面として使用される皮膚で知覚可能であってもよい。一部の実施形態では、ユーザがインタラクションに注意を払うことによって、インタラクションを行っている指に主にフィードバックが存在するという錯覚を抱かせることができる。
【００７８】
本発明の実施形態では、タッチ面として使用される皮膚を、振動が伝播するようにしてもよい。例えば、振動アクチュエータを直接皮膚に取り付ける、又は、より良好な伝導性を得るべく骨の近くに取り付けてもよい。図１２には、振動を生成するように構成された第１アクチュエータ１２１０、及び、振動を生成するように構成された第２アクチュエータ１２２０を備える触覚出力装置１２００の一実施形態が示されている。アクチュエータ１２１０、１２２０はそれぞれ、ユーザの腕のインタラクション面の周辺に取り付けられる。アクチュエータ１２１０、１２２０の間のインタラクション面にユーザがタッチすると、アクチュエータ１２１０、１２２０が起動されて、インタラクション面上の接点に存在するインタラクションを行う指に振動が伝播する。理想的には、インタラクション面の皮膚は、この振動を感じないことが望ましい。振動がインタラクション面では感じられず、インタラクションを行う指が振動の大部分を知覚するように、当該振動の特性を設定してもよい。例えば、触知感度の違いにより、振動が前腕ではほとんど知覚できないがインタラクションを行う指では明らかに感じることができるように、当該振動の周波数及び振幅を調整してもよい。しかしながら、多くの場合、インタラクション面の皮膚と指腹との両方で振動を感じることになるが、ユーザの注目がインタラクションに集中することにより、インタラクションを行う指に感覚が主に感じられるようにすることができと考えられる。
【００７９】
本発明の実施形態において、触覚出力装置１６０は、指が、タッチ感知皮膚表面に触れると、インタラクションを行う指を引き付ける又は遠ざけるのに利用可能な磁力を生成するように構成されてもよい。例えば、触覚出力装置１６０は、引力又は斥力を生じさせるように構成された電磁石を備えてもよい。センサ１５０が、上記したフィンガーパッドを備える一実施形態では、２つの指に取り付けられた装置を電磁石を使用して拡張して、インタラクション面がインタラクションを行う指を引き付ける又は遠ざけるようにしてもよい。図１３には、インタラクション面として使用される親指の後ろに取り付けられるように構成された第１電磁石１３１０と、第１電磁石１３１０と反対の極性を有し、同じ手又はその他の手の人差し指に取り付けられるように構成された第２電磁石１３２０とを備える触覚出力装置１３００の一実施形態が示されている。人差し指が親指に近づくと、ユーザが引力を感じるように電磁石１３１０、１３２０が作用するようにしてもよい。
【００８０】
上記したように、タッチ感知皮膚表面は、インタラクションを行う指を対象とした触覚フィードバックを感じるように構成されてもよい。本発明の実施形態では、皮膚表面の感覚を鈍くして触覚フィードバックが減衰するようにして、タッチパッドとして動作する皮膚表面が、インタラクションを行う指を対象とした触覚フィードバックを感じないようにしてもよい。例えば、前腕が時間が経過すると慣れて、もはや感じることがなくなるような振動を生成することにより、振動フィードバックをマスクすることができる。これは、タッチ入力の前に皮膚を刺激して、当該刺激に慣れさせることにより行ってもよい。一実施形態では、例えば、皮膚の温度を、ペルチェセル（Ｐｅｌｔｉｅｒ  ｃｅｌｌ）を用いて低下させて、触覚効果に対する皮膚の感度を下げてもよい。一実施形態において、触覚効果に対する皮膚の感度を下げる又は鈍くさせるのに、化学薬品を使用してもよいが、この場合、ユーザはこの皮膚の無感覚を触覚効果と感じる可能性もある。当該無感覚が意図した触覚効果でない限り、無感覚又はしびれの感覚が続くことにより、そのうち気にならなくなると考えられる。
【００８１】
図１４には、インタラクションが開始する前に、表面麻酔薬１４１０を吹き付けるように構成されたリストバンド１４００の一実施形態が示されている。麻酔薬が吹き付けられた皮膚は無感覚となり、インタラクションを行う指を対象とした触覚フィードバックを感じなくなる。図１５には、振動を生成するように構成されたアクチュエータ１５１０を備えるリストバンド１５００が示されており、インタラクションの前の一定期間リストバンドが振動することにより、皮膚が当該振動に慣れるようにしている。
【００８２】
本発明の実施形態では、触覚出力装置１６０は、インタラクションを行う指に向かって、超音波又は空気渦を発射するように構成されてもよい。センサ１５０が上記した「ＳｅｎＳｋｉｎ」を備える一実施形態では、２つのアームバンドのうちの少なくとも一方が、タッチ入力を捉えるのに使用される当該２つのアームバンドの間に空気渦を発射するように構成されてもよく、それにより触覚フィードバックをインタラクションを行う指に対して生じさせるようにしてもよい。図１６には、リストバンド１６１０から離れたところで発射される空気渦を生成するように構成された空気砲１６２０を有するリストバンド１６１０を備える触覚出力装置１６００が示されている。ユーザが、インタラクション面上の仮想ボタンを押下すると、例えば、空気渦が指に向かって発射されて、確認フィードバックを生成することができる。一実施形態において、触覚出力装置１６００は、超音波を生成する超音波装置を備えてもよい。
【００８３】
図１７は本発明の実施形態にかかる方法１７００を示す。図示するように、この方法は工程１７１０から開始する。工程１７２０において、上記したシステム１００のユーザは、指先を使用して、例えば、別の指腹、前腕、手の掌のような皮膚表面を、タップ、なでる又は変形させて、タッチ入力を行ってもよい。当該タッチ入力は、上記したセンサのうちの一つのようなセンサによって捉えられる又は検出される。一実施形態において、変形される皮膚表面は、入力を行うユーザの皮膚表面である。一実施形態において、変形される皮膚表面は、入力を行うユーザとは異なる、システムを使用する第２のユーザの皮膚表面である。センサは、上記したプロセッサ１１０のような、プロセッサに信号を出力し、信号の処理が行われる。工程１７３０において、プロセッサは、上記した触覚出力装置のうちの一つのような触覚出力装置により、どのような触覚フィードバックを出力させるべきかを決定し、前記センサが捉えた検出されたタッチ入力に基づいて、触覚制御信号を生成する。そしてプロセッサは、触覚制御信号を、触覚出力装置に出力する。工程１７４０において、触覚出力装置は、触覚制御信号に基づいて、触覚効果を生成する。一実施形態において、生成される触覚効果は、入力のために変形された皮膚表面を有するユーザに提供される。一実施形態において、触覚効果は、入力を提供するユーザに対して生成される。上記した実施形態のうちの少なくとも一つに従って、指先又は体の別の部位に対して、触覚効果が生成されてもよい。方法１７００は工程１７５０において終了する。
【００８４】
本明細書に記載された実施形態は、実施可能な実装例及び実施例であるが、本発明を特定の実施形態に制限することを必ずしも意図するものではない。上記した実施形態では、ユーザの前腕、親指、指又は手の掌の皮膚をインタラクション面として使用する場合を説明した。しかしながら、２０１３年４月２７日から５月２日、フランス、パリで開催されたＣＨＩ  ２０１３の追加アブストラクト、１３２３−１３２８ページに記載されるＲｏｍａｎ  Ｌｉｓｓｅｒｍａｎ他著、「ＥａｒＰｕｔ：  Ａｕｇｍｅｎｔｉｎｇ  Ｂｅｈｉｎｄ−ｔｈｅ−Ｅａｒ  Ｄｅｖｉｃｅｓ  ｆｏｒ  Ｅａｒ−ｂａｓｅｄ  Ｉｎｔｅｒａｃｔｉｏｎ」に記載されるように、耳及び耳たぶのようなその他の皮膚表面を使用することができ、上記文献の内容は、参照により本明細書に組み込まれる。また、２０１４年４月２６日から５月１日にカナダ、トロントで開催されたＣＨＩ２０１４、「Ｅｘｐｌｏｒｉｎｇ  ｔｈｅ  Ｕｓｅ  ｏｆ  Ｈａｎｄ−ｔｏ−Ｆａｃｅ  Ｉｎｐｕｔ  ｆｏｒ  Ｉｎｔｅｒａｃｔｉｎｇ  ｗｉｔｈ  Ｈｅａｄ−Ｗｏｒｎ  Ｄｉｓｐｌａｙｓ」に記載されるように、額及び頬のような顔の部分の皮膚表面を使用することができ、上記文献の内容は、参照により本明細書に組み込まれる。
【００８５】
加えて、上記したように、システムは、一人のユーザが使用してもよいし、複数のユーザが使用してもよい。例えば、一実施形態では、上記したシステムの実施形態の一ユーザは、当該ユーザ自身の皮膚表面を使用して入力を供給してもよいし、別の人の皮膚表面を使用して入力を供給してもよい。同様に、生成される触覚効果は、入力を供給するユーザに提供されてもよいし、別の人に提供されてもよい。例えば、一実施形態において、医師又は外科医は、例えば、当該患者に直接情報を投影するコンピュータシステムのようなコンピュータシステムとやり取りを行うべく、患者の体の皮膚表面を利用して入力を供給してもよい。そして、触覚効果が、前記医師及び／又は患者に提供されてもよい。
【００８６】
むしろ、これら実施形態には、当該技術分野における当業者に理解できるような様々な変更を加えることができる。このような変更が加えられた態様も本発明の要旨及び範囲に含まれ、そして以下の請求項によって保護されるべきものである。
【図１】
0006712843.tif 000002
【図２】
0006712843.tif 000003
【図３】
0006712843.tif 000004
【図４】
0006712843.tif 000005
【図５】
0006712843.tif 000006
【図６】
0006712843.tif 000007
【図７】
0006712843.tif 000008
【図８】
0006712843.tif 000009
【図９】
0006712843.tif 000010
【図１０】
0006712843.tif 000011
【図１１】
0006712843.tif 000012
【図１２】
0006712843.tif 000013
【図１３】
0006712843.tif 000014
【図１４】
0006712843.tif 000015
【図１５】
0006712843.tif 000016
【図１６】
0006712843.tif 000017
【図１７】
0006712843.tif 000018