(57)【要約】【課題】個人の特性に応じた感覚情報を提供する。【解決手段】プロセッサと、前記プロセッサがアクセスする記憶装置と、を有する感覚情報提示システムであって、記憶装置は、五感のうち少なくとも一つの感覚を表現する複数の感覚情報を保持し、複数の感覚情報の各々と対象物と個人の特性とを対応付ける対象物プロパティ情報を保持し、プロセッサは、対象物を指定する情報が入力されると、対象物プロパティ情報に基づいて、指定された対象物と、対象物を指定した個人の特性と、の組合せに対応する感覚情報を特定し、特定された感覚情報を出力する。【選択図】図１
2018073019.tif 000002
【特許請求の範囲】
【請求項１】
プロセッサと、前記プロセッサがアクセスする記憶装置と、を有する感覚情報提示システムであって、
前記記憶装置は、
五感のうち少なくとも一つの感覚を表現する複数の感覚情報を保持し、
前記複数の感覚情報の各々と対象物と個人の特性とを対応付ける対象物プロパティ情報を保持し、
前記プロセッサは、
対象物を指定する情報が入力されると、前記対象物プロパティ情報に基づいて、前記指定された対象物と、前記対象物を指定した個人の特性と、の組合せに対応する前記感覚情報を特定し、
特定された前記感覚情報を出力することを特徴とする感覚情報提示システム。
【請求項２】
請求項１に記載の感覚情報提示システムであって、
前記個人の特性は、複数の項目を含み、
前記対象物プロパティ情報は、前記個人の特性の複数の項目の内容の組合せによって特定される特性タイプと、前記対象物と、前記複数の感覚情報の各々と、を対応付ける情報を含み、
前記プロセッサは、前記対象物プロパティ情報に基づいて、前記指定された対象物と、前記対象物を指定した個人の特性の複数の項目の内容の組合せによって特定される特性タイプと、の組合せに対応する前記感覚情報を特定することを特徴とする感覚情報提示システム。
【請求項３】
請求項２に記載の感覚情報提示システムであって、
前記プロセッサは、前記対象物を指定した個人の特性の複数の項目の内容の組合せによって特定される特性タイプが前記対象物プロパティ情報に含まれていない場合、前記対象物プロパティ情報に含まれている特性タイプのうち、前記対象物を指定した個人の特性の複数の項目の内容の組合せによって特定される特性タイプに最も類似する特性タイプと、前記指定された対象物と、の組合せに対応する前記感覚情報を特定することを特徴とする感覚情報提示システム。
【請求項４】
請求項１に記載の感覚情報提示システムであって、
前記複数の感覚情報は、それぞれが表現する感覚の相互の類似度を示す情報を含み、
前記プロセッサは、出力した前記感覚情報に対して入力された評価に基づいて、前記指定された対象物と、前記対象物を指定した個人の特性と、の組合せと、前記出力した感覚情報との対応付けが適切でないと判定した場合、前記指定された対象物と、前記対象物を指定した個人の特性と、の組合せに、前記出力した感覚情報との類似度が高い感覚情報を新たに対応付けることによって、前記対象物プロパティ情報を更新することを特徴とする感覚情報提示システム。
【請求項５】
請求項１に記載の感覚情報提示システムであって、
前記感覚情報は、視覚及び聴覚の少なくとも一つの情報であって、触覚、味覚及び嗅覚の少なくとも一つを表現する情報であることを特徴とする感覚情報提示システム。
【請求項６】
請求項５に記載の感覚情報提示システムであって、
画像表示装置をさらに有し、
前記感覚情報は、触覚、味覚及び嗅覚の少なくとも一つを表現する視覚情報を含み、
前記画像表示装置は、前記指定された対象物の画像と、前記特定された感覚情報とを表示することを特徴とする感覚情報提示システム。
【請求項７】
請求項６に記載の感覚情報提示システムであって、
音声出力装置をさらに有し、
前記視覚情報は、前記触覚、味覚及び嗅覚の少なくとも一つを表現する文字情報であり、
前記感覚情報は、前記視覚情報によって表現される前記触覚、味覚及び嗅覚の少なくとも一つを表現する聴覚情報をさらに含み、
前記画像表示装置は、前記指定された対象物の画像と、前記特定された感覚情報に含まれる視覚情報とを表示し、
前記音声出力装置は、前記特定された感覚情報に含まれる聴覚情報を出力することを特徴とする感覚情報提示システム。
【請求項８】
請求項５に記載の感覚情報提示システムであって、
画像表示装置及び音声出力装置をさらに有し、
前記感覚情報は、触覚、味覚及び嗅覚の少なくとも一つを表現する聴覚情報を含み、
前記画像表示装置は、前記指定された対象物の画像を表示し、
前記音声出力装置は、前記特定された感覚情報を出力することを特徴とする感覚情報提示システム。
【請求項９】
請求項５に記載の感覚情報提示システムであって、
前記個人の特性は、個人の年齢、性別、職業、現在の居住地域、過去の居住地域及び好んで利用する情報メディアの少なくとも一つの項目を含み、
前記感覚情報は、前記個人の特性を有する個人に、前記対象物の触覚、味覚及び嗅覚の少なくとも一つを想起させやすい視覚情報及び聴覚情報の少なくとも一つを含むことを特徴とする感覚情報提示システム。
【請求項１０】
請求項９に記載の感覚情報提示システムであって、
前記個人の特性は、所定の基準材質に触ったときの触感を表現する感覚情報を含み、
前記プロセッサは、前記対象物プロパティ情報に基づいて、前記対象物を指定した個人が前記基準材質に触ったときの触感を表現する感覚情報を含む、前記対象物を指定した前記個人の特性と、前記指定された対象物と、の組合せに対応する前記感覚情報を特定することを特徴とする感覚情報提示システム。
【請求項１１】
請求項１に記載の感覚情報提示システムであって、
画像表示装置及び入力装置をさらに有し、
前記画像表示装置は、対象物の画像を表示し、
前記表示された対象物を指定する情報が前記入力装置に入力されると、前記プロセッサは、前記対象物プロパティ情報に基づいて、前記指定された対象物と、前記対象物を指定した個人の特性と、の組合せに対応する前記感覚情報を特定することを特徴とする感覚情報提示システム。
【請求項１２】
請求項１１に記載の感覚情報提示システムであって、
前記画像表示装置は、複数の対象物の画像を表示し、
前記表示された複数の対象物の指定する情報が前記入力装置に入力されると、前記プロセッサは、前記対象物プロパティ情報に基づいて、前記指定された複数の対象物と、前記対象物を指定した個人の特性と、の組合せに対応する複数の前記感覚情報を特定し、
前記画像表示装置は、前記指定された複数の対象物の画像と、前記特定された複数の感覚情報と、を並べて表示することを特徴とする感覚情報提示システム。
【請求項１３】
プロセッサと、前記プロセッサがアクセスする記憶装置と、を有する計算機システムが実行する感覚情報提示方法であって、
前記記憶装置は、
五感のうち少なくとも一つの感覚を表現する複数の感覚情報を保持し、
前記複数の感覚情報の各々と対象物と個人の特性とを対応付ける対象物プロパティ情報を保持し、
前記感覚情報提示方法は、
対象物を指定する情報が入力されると、前記プロセッサが、前記対象物プロパティ情報に基づいて、前記指定された対象物と、前記対象物を指定した個人の特性と、の組合せに対応する前記感覚情報を特定する手順と、
前記プロセッサが、特定された前記感覚情報を出力する手順と、を含むことを特徴とする感覚情報提示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、遠隔にある対象物の感覚を伝え易くする手法に関する。
【背景技術】
【０００２】
特許文献１には、画像と音響との対応付けを補強して、人間の感覚に訴えるコンテンツの作成について、言語的な音響付加情報と、言語的な画像付加情報の間の関連性を以って、音響データと画像データを対応付ける手法が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００１−０８４７４３公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
グローバルなクラウド化が進む中、様々な情報がインターネットで入手可能となってきている。しかし、実際のものを手にできないため、実際に商品を手に取り、五感を頼りに自分に合ったものを探すことができず、実際に配送されてきた商品が期待に反する場合がある。実際商品を手にした情報は、皮膚で直接触った感覚のみでなく、視覚や聴覚、経験や知識、さらには印象や感情など、人間は多くの感覚を相互に作用させてクロスモーダルに情報を得ている。現状のＷｅｂサービスでは、視覚、聴覚である程度の情報は伝送できても、触感、嗅覚、味覚など含めた五感に関する感覚が欠如するため、実物の質感を遠隔に伝送するのは困難な状況にある。
【０００５】
特許文献１の手法は、画像に付加された感覚的言語（例えば「明るい」)と、長調を使った明るく感じられる音響データを組み合せることによって、画像シーンに合った音響を付加する手法であるが、個人によって、感覚的言語の捉え方や、音響のメロディから感じる感覚は様々であり、そのシーンと選択された音響データが合っているかは、個人の感覚に左右される。また、視覚、聴覚を使って、触覚、味覚や嗅覚などの他の感覚を想起させる工夫は開示されていない。
【課題を解決するための手段】
【０００６】
上記の課題を解決するために、本発明の一実施の態様は、プロセッサと、前記プロセッサがアクセスする記憶装置と、を有する感覚情報提示システムであって、前記記憶装置は、五感のうち少なくとも一つの感覚を表現する複数の感覚情報を保持し、前記複数の感覚情報の各々と対象物と個人の特性とを対応付ける対象物プロパティ情報を保持し、前記プロセッサは、対象物を指定する情報が入力されると、前記対象物プロパティ情報に基づいて、前記指定された対象物と、前記対象物を指定した個人の特性と、の組合せに対応する前記感覚情報を特定し、特定された前記感覚情報を出力することを特徴とする。
【発明の効果】
【０００７】
本発明の一態様によれば、個人の特性に応じた感覚情報を付加することによって、五感に関する感覚情報を利用者に想起させ易くし、遠隔の物の質感および価値の判断し易くさせる手法を提供することができる。上記した以外の課題、構成、及び効果は、以下の実施形態の説明によって明らかにされる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施例１における感覚情報提示システムを示す機能ブロック図である。
【図２】本発明の実施例１の対象物情報を示す説明図である。
【図３】本発明の実施例１の個人特性情報を示す説明図である。
【図４】本発明の実施例１の個人特性リファレンスを示す説明図である。
【図５】本発明の実施例１の対象物プロパティ情報を示す説明図である。
【図６】本発明の実施例１の感覚言語データベースを示す説明図である。
【図７】本発明の実施例１の感覚音データベースを示す説明図である。
【図８】本発明の実施例１の個人端末から感覚情報付きのＷｅｂページを閲覧する際の情報のフローを示すシーケンス図である。
【図９】本発明の実施例１における感覚情報提示システムの処理を示すフローチャートである。
【図１０】本発明の実施例１における個人特性登録処理時の質問と回答の例を示す説明図である。
【図１１】本発明の実施例１の感覚情報提示システムが提示する感覚情報の利用者ごとの相違の例を示す説明図である。
【図１２】本発明の実施例１の感覚情報提示システムによる感覚情報の提示方法の例を示す説明図である。
【図１３】本発明の実施例２において対象物に付加される対象物ＩＤの例を示す説明図である。
【図１４】本発明の実施例２において各作業員の個人特性情報を作成するための登録情報の説明図である。
【図１５】本発明の実施例２における車体ボディ評価用の感覚言語データベースを示す説明図である。
【図１６】本発明の実施例２における車体ボディの品質チェック時の感覚情報提示システムのデータフローを示すシーケンス図である。
【図１７】本発明の実施例２において、同じ製品の同じ対象物ＩＤの部位について、異なる作業員の個人端末に表示される感覚情報の例を示す説明図である。
【図１８】本発明の実施例３において医師が個人特性の情報を登録する情報を示す説明図である。
【図１９】本発明の実施例３において、ある患者の同じ部位に関して、異なる医師の個人端末に表示される感覚情報の例を示す説明図である。
【図２０】本発明の実施例１における感覚情報提示システムのハードウェア構成を示すブロック図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施例について図面に基づいて説明する。
【実施例１】
【００１０】
図１は、本発明の実施例１における感覚情報提示システム１００を示す機能ブロック図である。
【００１１】
感覚情報提示システム１００は、対象物情報１０１および個人特性情報１０２を入力として、その個人が感じ易い手法で、対象物情報１０１から受ける五感の内一つ以上の感覚情報１１０を出力する。実施例１では、感覚情報が付加された画像を含むＷｅｂページ閲覧の感覚情報提示手法において、その画像の対象物の触覚情報を表現する感覚言語情報と、その対象物の触覚の記憶を想起する感覚音と、の２つの情報を付加して、触覚の感覚情報を出力する例を示す。対象物情報１０１は、図２に示すように、感覚情報を持つ対象物を示すＩＤ（Identification）番号を有している。個人特性情報１０２は、図３のように、個人がどの条件に対してどのような特性を有するかを示している。
【００１２】
感覚情報提示システム１００は、初回の個人情報登録時に、図９で示す個人の特性に関する質問に対する回答情報を元に個人特性情報１０２を作成する。個人特性マッチング部１０３は、Ｗｅｂを閲覧している個人が登録した個人特性情報１０２を入力として、図４に示すような個人特性リファレンス１０４の中から、個人特性情報１０２の条件とのマッチングを取り、特性タイプを出力する。感覚情報選択部１０５は、対象物情報１０１と、個人特性マッチング部の出力である特性タイプを入力として、それらの情報に基づいて、感覚情報データベース１０６から、個人に合った対象物の感覚情報を選択し、感覚情報１１０として出力する。
【００１３】
感覚情報データベース１０６は、対象物プロパティ情報１０７と、感覚情報データベースからなる。本実施例では、感覚情報データベースは、触覚に関する感覚を表現する言語のデータベースである感覚言語データベース１０８と、聴覚で記憶している触覚を想起する音のデータベースである感覚音データベース１０９とを有している。対象物プロパティ情報１０７は、対象物ＩＤと個人特性を示す特性タイプとに対応した感覚データベースのＩＤ番号を関連付けたリストになっており、このリストに従って対象物ＩＤと特性タイプの組み合わせに対応した感覚情報を各感覚データベースから読み込ことが可能である。
【００１４】
これらの構成によって、例えば、観賞用の岩の画像に関して、その触覚を表現する「ごつごつ」という感覚言語が付加されることによって、画像の岩に触れた際に感じる触感を想像し易くさせることができる。「ごつごつ」という言語による触感のイメージも個人によって異なる場合がある。そこで、岩を叩いた音やテレビなどの効果音で使われる音などから個人特性に合った感覚音を出力することによって、個人が過去に聞いたことのある音の記憶を思い出させ、対象物の触感を想起させ易くすることができる。
【００１５】
図２０は、本発明の実施例１における感覚情報提示システム１００のハードウェア構成を示すブロック図である。
【００１６】
本実施例の感覚情報提示システム１００は、バス２００５を介して相互に接続されたＣＰＵ２００１、メモリ２００２、記憶装置２００３及び入出力インターフェース（Ｉ／Ｆ）２００４を有する。感覚情報提示システム１００は、さらに、入出力Ｉ／Ｆ２００４に接続されたキーボード／マウス等２００６、マイク２００７、ディスプレイ２００８及びスピーカ２００９を有する。入出力Ｉ／Ｆ２００４には、さらに、ネットワーク２０３０が接続される。
【００１７】
ネットワーク２０３０には、さらに個人端末８００及びＷｅｂサーバ８０１が接続される。個人端末８００は、バス２０１５を介して相互に接続されたＣＰＵ２０１１、メモリ２０１２、記憶装置２０１３及び入出力Ｉ／Ｆ２０１４を有する。個人端末８００は、さらに、入出力Ｉ／Ｆ２０１４に接続されたキーボード／マウス等２０１６、ディスプレイ２０１７及びスピーカ２０１８を有する。入出力Ｉ／Ｆ２０１４はネットワーク２０３０にも接続される。
【００１８】
なお、ディスプレイ２００８、２０１７、スピーカ２００９及び２０１８は出力装置の例であり、感覚情報提示システム１００及び個人端末８００は、上記以外の図示しない出力装置（例えば、イヤホン、所望の振動を発生させるモータ、超音波振動子又は電磁波発生装置等）を有してもよい。
【００１９】
感覚情報提示システム１００では、接続されたディスプレイ２００８でＷｅｂサーバ８０１等から取得した対象物の画像を確認でき、キーボード／マウス等２００６及びマイク２００７などの入力装置から、入出力Ｉ／Ｆ２００４を介して、個人特性リファレンス１０４、及び感覚情報データベース１０６を作成し、記憶装置２００３に保存することができる。
【００２０】
感覚情報データベース１０６に保存された文字情報及び音情報は、入出力Ｉ／Ｆ２００４を介して、ディスプレイ２００８及びスピーカ２００９に出力することができ、さらにネットワーク２０３０を介して、個人端末８００に転送することができる。
【００２１】
感覚情報提示システム１００では、ＣＰＵ２００１から指示されたコマンド、記憶装置２００３のアドレス、及び処理結果等がテンポラリ情報としてメモリ２００２に展開される。ＣＰＵ２００１は、バス２００５を介して、記憶装置２００３に保存された個人特性リファレンス１０４及び感覚情報データベース１０６から情報を読み取り、ＣＰＵ２００１で個人特性マッチング部１０３及び感覚情報選択部１０５の処理を行い、入出力Ｉ／Ｆ２００４を介して感覚情報１１０を出力する。以下の説明において個人特性リファレンス１０４及び感覚情報データベース１０６が実行する処理は、実際には、ＣＰＵ２００１がメモリ２００２に格納されたプログラムに従って実行する。
【００２２】
個人端末８００では、ＣＰＵ２０１１、メモリ２０１２、記憶装置２００３及びバス２０１５を使って実行されるアプリケーションから、ＬＡＮなどの入出力Ｉ／Ｆ２０１４を介して、Ｗｅｂサーバ８０１から情報を取得し、入出力Ｉ／Ｆ２０１４を介して接続されたディスプレイ２０１７に対象物の情報を表示し、入出力Ｉ／Ｆ２０１４を介してキーボード／マウス等２０１６で指定した対象画像情報に対し、入出力Ｉ／Ｆ２０１４を介して、感覚情報提示システム１００から対象画像の感覚情報を入手し、接続されたディスプレイ２０１７及びスピーカ２０１８から感覚情報１１０を出力する。
【００２３】
なお、感覚情報提示システム１００の機能が、個人端末８００によって実行されてもよいし、Ｗｅｂサーバ８０１によって実行されてもよい。例えば、個人特性リファレンス１０４及び感覚情報データベース１０６が記憶装置２０１３に保持され、個人特性マッチング部１０３及び感覚情報選択部１０５の処理がメモリ２０１２に保持されたプログラムに従ってＣＰＵ２０１１によって実行されてもよい。この場合、個人端末８００が感覚情報提示システム１００を兼ねることとなり、図２０に示した感覚情報提示システム１００のハードウェアは不要となる。あるいは、図２０では省略されているが、Ｗｅｂサーバ８０１もＣＰＵ、メモリ及び記憶装置等を有し、これらが個人特性リファレンス１０４及び感覚情報データベース１０６を保持し、個人特性マッチング部１０３及び感覚情報選択部１０５の処理を実行してもよい。
【００２４】
図２は、本発明の実施例１の対象物情報１０１を示す説明図である。
【００２５】
対象物情報１０１は、感覚情報を付加した対象物に特有の対象物ＩＤを有する。対象物ＩＤは、対象物を特定できる情報であれば、対象物の固有名称又は愛称などでも良い。画像中の対象物が存在を代表する位置情報と対象物ＩＤとを組み合せた情報を対象物情報としても良い。例えば、画像のｘ座標及びｙ座標が示す位置から横幅ｗ及び縦幅ｈで囲われた枠の中にある対象物を示す情報として、（対象物ＩＤ、ｘ、ｙ、ｗ、ｈ）の組み合せの情報を対象物情報として利用しても良い。この場合、画像中の対象物の特定の場所の感覚情報を提示することができるメリットがある。１つの画像中に複数の対象物ＩＤを有しても良い。この場合、１つの画像中に複数の感覚情報を提示できるメリットがある。
【００２６】
図３は、本発明の実施例１の個人特性情報１０２を示す説明図である。
【００２７】
個人特性情報１０２は、個人がどの条件に対してどのような特性を有するかを示している。例えばユーザが感覚情報提示システム１００を初めて利用するときに、そのユーザの個人特性情報が登録される。その時に、感覚情報提示システム１００は、図９で示すような年齢、性別、地域などの項目について個人に関する質問を行い、その回答情報を元に個人特性情報を作成する。例えば、条件１は年代の情報であり、”４”という値が４０代を示している。条件２は性別の情報であり、”０”という値が男性を示している。条件Ｍは、ユーザの子供の頃の居住地の情報であり、”３３”という値が、子供の頃に埼玉県に住んでいたことを示している。このように、それぞれの条件の値が個人の特性を示す情報を含んでいる。
【００２８】
本実施例では、初回登録時に個人に質問をして、その回答の情報を個人特性情報としているが、接続されているネットワークの環境から取得される地域情報に基づいて個人の居住地を推定してもよいし、ネットショッピングの履歴、Ｗｅｂ閲覧履歴、及び操作履歴の速度などから、個人の性別、年齢、好み等を推定しても良い。例えば、女性靴やピンク系の色の服の購入履歴が多ければ女性の可能性が高く、若者向けの話題が多いＷｅｂページの閲覧履歴から２０代、孫へのプレゼントなどの検索履歴があれば６０代など年齢を推定できる。また、テレビ番組表やラジオ番組の検索が多ければテレビやラジオを好きと推定でき、植物や生物に関するＷｅｂ検索をしていれば自然に親しみがあり、電化製品に関する閲覧履歴が多ければ、家電や機械系のものが好きなどの嗜好を推定できる。感覚情報提示システム１００は、これらの推定から、個人特性情報を自動的に収集しても良い。これにより、ユーザの個人特性の初回登録を省けるメリットがある。
【００２９】
図４は、本発明の実施例１の個人特性リファレンス１０４を示す説明図である。
【００３０】
個人特性情報の条件の値の組合せによって、その個人のタイプが分類される。例えば、条件１が”７”すなわち７０代以上、条件２が”１”すなわち女性、条件Ｍが”４７”すなわち沖縄県などの組み合わせの個人特性のタイプは、Ｔｙｐｅ−Ｎ、というように、個人特性情報を特性タイプに分類できる。本実施例では、１つのテーブルに条件の組み合わせが表現されているが、リレーショナルデータベース化した小さなテーブル群で個人特性リファレンス１０４を保持しても良い。これによって、処理効率を上げられるメリットがある。
【００３１】
図５は、本発明の実施例１の対象物プロパティ情報１０７を示す説明図である。
【００３２】
対象物プロパティ情報１０７は、対象物ＩＤ５０１と、特性タイプ５０２と、一つ以上の感覚情報の識別情報と、を対応付ける情報である。対象物ＩＤ５０１は、対象物を識別する情報であり、対象物情報１０１に含まれる対象物ＩＤに対応する。特性タイプ５０２は、個人の特性を分類したタイプであり、個人特性リファレンス１０４の特性タイプに対応する。一つ以上の感覚情報の識別情報は、対象物ＩＤ５０１と、特性タイプ５０２との組合せに対応する一つ以上の感覚情報を識別する情報であり、図５の例では、感覚言語データベース１０８に含まれる言語データを識別する感覚ＤＢ１−ＩＤ５０３、及び、感覚音データベース１０９に含まれる音声データを識別する感覚ＤＢ２−ＩＤ５０４を含む。対象物プロパティ情報１０７は、さらに、対象物ＩＤ５０１と、特性タイプ５０２との組合せに対応する他の感覚情報（例えば種々の嗅覚又は味覚を想起させる言語データ又は音声データ等）を識別する情報（例えば感覚ＤＢｘ−ＩＤ５０５）を含んでもよい。
【００３３】
対象物プロパティ情報１０７によって、対象物ＩＤと、特性タイプとの組み合せに応じて、感覚情報データベース１０６のどの情報を感覚情報として選択するかを特定することができる。例えば、対象物ＩＤがＰ０１００００００である対象物に関して、Ｔｙｐｅ−Ｎの人に対して、感覚言語データベース１０８のＤＢ１−ｉ番目の感覚語を示し、感覚音データベース１０９のＤＢ２−ｊ番目の感覚音を示せば、それに関連した感覚を感じ易くさせることができる。これらの組み合わせの情報は、多くの人のアンケート及びヒヤリングをベースに手動で作成しても良い。この場合、対象物プロパティ情報１０７の作成に手間はかかるが、人の感覚情報に基づいて精度の高い感覚情報の組み合わせを作成できるメリットがある。
【００３４】
また、感覚情報提示システム１００は、対象物プロパティ情報１０７に登録された対象物と個人の特性と感覚情報との対応関係を自動的に更新しても良い。例えば、感覚情報提示システム１００は、ネットショッピングで販売元が付加した情報をベースに、ある程度の精度で対象物プロパティ情報の組み合せによるタイプを分類する。さらに、感覚情報提示システム１００は、購入後に購入者が入力した評価の情報を利用して、例えば、対象物ＩＤがＰ０１００００００である対象物（商品）に関して、Ｔｙｐｅ−Ｎの購入者の中に、購入前と商品の入手後の感覚情報に差異が大きい人が多く、Ｔｙｐｅ−２の購入者の購入後の評価が高い傾向がある、といった状況が発生した場合には、当該商品とＴｙｐｅ−Ｎという個人の特性タイプとの組合せと、出力された感覚情報との対応付けが適切でないと判定できる。この場合、感覚情報提示システム１００は、Ｔｙｐｅ−Ｎに対応する感覚データベースをＴｙｐｅ−２に対応するものと同じものに変更するか、Ｔｙｐｅ−ＮとＴｙｐｅ−２の中間のタイプに変更する、などのように、対象物プロパティ情報１０７を更新してもよい。これによって、実購入者の感覚を反映した組み合わせの対象物プロパティ情報１０７を作成でき、利用者の感覚に合ったシステムを提供できるメリットがある。
【００３５】
図６は、本発明の実施例１の感覚言語データベース１０８を示す説明図である。
【００３６】
感覚言語データベース１０８は、対象物の触覚を表現する形容詞の言葉及びオノマトペなどの擬態語を集めたデータベースである。多くの人の主観評価に基づいて、触覚の感覚が近い言語を、統計処理によって分類して、似た感覚の言語毎にグループになるようにリスト化し、ＩＤを振ることによって、感覚言語データベース１０８が生成される。ＩＤは、ＤＢのＩＤを示す番号、感覚分類の番号、及び分類毎の小番号の組み合せによって表現される。例えば、硬くて、凹凸があるような対象物の触覚感覚に関して、「ごつごつ」及び「ごりごり」などの感覚語を１グループに分類し、柔らかくて軽い感じのする「ふわふわ」などの感覚語をｊグループに分類するなど、感覚語をグループ毎に分類してリスト化する。これによって、近いＩＤ番号の感覚語を選択すると、ある程度近い触覚を感じさせる感覚語を選択でき、実際の感覚と異なる場合に、近い感覚を探す手がかりになるメリットがある。
【００３７】
なお、上記の例では、同一のグループに分類された感覚語は、互いに近い（すなわち類似度が高い）感覚を想起させる。異なるグループに分類された感覚語は、同一グループの感覚語と比較すると、互いに遠い（すなわち類似度が低い）感覚を想起させる。異なるグループに分類された感覚語であっても、グループの番号が近い（すなわち差が小さい）グループに分類された感覚語ほど、近い感覚を想起させる。このように、データベース内に、それぞれの感覚情報が想起させる感覚の間の類似度を示す情報を含めておくことによって、例えば既に説明したように対象物と個人特性との対応付けが適切でないなどの理由によってそれを更新する必要が生じたときに、更新前の感覚情報との類似度が高い感覚情報を優先的に選択して、それを新たに対応付けることができる。これによって、利用者の評価に応じて適切な感覚情報を自動的に探すことができる。後述する感覚音データベース１０９等についても同様である。
【００３８】
図７は、本発明の実施例１の感覚音データベース１０９を示す説明図である。
【００３９】
感覚音データベース１０９は、対象物の触覚を表現する音ファイルをリスト化したデータベースである。ＩＤは、ＤＢのＩＤを示す番号、感覚分類の番号、及び分類毎の小番号の組み合せによって表現される。ＩＤによって感覚情報が近い音ファイルが並ぶようにリスト化する。これによって、近いＩＤ番号の感覚音を選択すると、近い触角を感じさせる感覚音を選択でき、例えば選択した音声が実際の感覚と異なる感覚を感じさせる場合に、より近い感覚を感じさせる音声を探す手がかりになるメリットがある。
【００４０】
上記の図６及び図７には、五感のうち触覚を表現する視覚情報及び聴覚情報の例を示したが、感覚情報データベース１０６は、その他の感覚を表現する情報、例えば、味覚又は嗅覚を表現する視覚情報又は聴覚情報を含んでもよい。
【００４１】
図８は、本発明の実施例１の個人端末８００から感覚情報付きのＷｅｂページを閲覧する際の情報のフローを示すシーケンス図である。
【００４２】
個人端末８００は、その端末から感覚情報を提示できるようにするための感覚情報利用フラグ８０２をＯｎにする。このフラグ情報は個人端末８００内のメモリ２０１２に保存される。個人端末８００内にフラグを持つ場合には、通信を介してフラグのＯｎ／Ｏｆｆを問い合わせることによる通信コストを削減できるメリットがある。あるいは、個人端末８００が感覚情報利用フラグ８０２を感覚情報提示システム１００に送信し、感覚情報提示システム１００のメモリ２００２に感覚情報利用フラグ８０２を保存してもよい。その場合には、他の通信端末からでもフラグのＯｎ／Ｏｆｆを設定できるメリット、及び、フラグがＯｆｆの場合には感覚情報の通信を省略することによって通信コストを削減できるメリットがある。
【００４３】
個人端末８００の操作者が最初に感覚情報提示システム１００を利用するときのみ、個人端末８００から感覚情報提示システム１００に対し、当該操作者に関する個人特性情報の登録を行い（Ｓ８１１）、感覚情報提示システム１００が個人特性情報１０２を作成する。次に、個人端末８００がＷｅｂサーバ８０１にＷｅｂ情報要求を出し（Ｓ８１２）、Ｗｅｂサーバ８０１からＷｅｂ情報を取得し（Ｓ８１３）、個人端末８００の操作者はＷｅｂ情報を閲覧することができる。
【００４４】
このＷｅｂ情報に感覚情報を有する対象物ＩＤが含まれている場合には、個人端末８００の操作者が対象物の画像をクリックする操作などに応じて、個人端末８００がその対象物ＩＤを含む対象物情報１０１を感覚情報提示システム１００に送付し（Ｓ８１４）、感覚情報を要求する。感覚情報提示システム１００では、既に登録してある当該個人端末８００の操作者の個人特性情報１０２と送付された対象物情報１０１に含まれる対象物ＩＤとを入力として、感覚情報選択部１０５が、感覚情報データベース１０６から、個人端末８００の操作者に合った感覚情報を選択して、個人端末８００に送付する（Ｓ８１５）。これによって、個人端末８００では、Ｗｅｂページの画像に表示された対象物に触った時の感覚を想起させる言語が表示され、操作者の記憶から対象物の触覚を想起させる感覚音が流れ、対象物の触覚に関する感覚を想像し易くすることができる。
【００４５】
対象物ＩＤは、上記のようにＷｅｂ情報に予め含まれていてもよいが、そうでない場合には、個人端末８００又は感覚情報提示システム１００が、画像認識によって画像に映っている対象物を認識し、そのＩＤを付加しても良い。個人端末８００が画像認識をする場合、操作者がクリック操作等によって指定した対象物の画像を認識する処理をＣＰＵ２０１１が実行する。メモリ２０１２には認識結果と対象物ＩＤとを対応付ける情報が保持され、認識結果に対応する対象物ＩＤが感覚情報提示システム１００に送信される（Ｓ８１５）。感覚情報提示システム１００が画像認識をする場合、操作者がクリック操作等によって指定した対象物の画像がＳ８１５において個人端末８００から感覚情報提示システム１００に送信され、ＣＰＵ２００１がその画像を認識する処理を実行する。メモリ２００２には認識結果と対象物ＩＤとを対応付ける情報が保持され、認識結果に対応する対象物ＩＤに基づいて感覚情報選択部１０５の処理が実行される。
【００４６】
上記のように画像認識が行われる場合、従来のＷｅｂサーバ情報に対象物ＩＤを付加する手間が省けるメリットがある。画像認識は、注目画素の周囲Ｎ×Ｍの平均値、エッジ情報、ヒストグラム情報などからパターン情報などを解析し、画像データベース上のパターンとのマッチング情報を算出する方法、及び、ビッグデータを利用して、Deep learningによる機械学習などで認識を行う方法など、任意の方法によって行うことができる。
【００４７】
感覚音は、システムに接続されたイヤホン（図示省略）またはスピーカ２０１８から再生しても良いし、感覚音の周波数に合わせた振動を個人端末８００が有するモーター（図示省略）のバイブ振動で提示しても良い。この場合、指など皮膚で触覚を直接的に感じられるメリットがある。また、個人端末８００は、超音波振動子（図示省略）を有し、感覚音の周期に合わせて、超音波振動子から超音波を発生させて人の皮膚に向けて情報を提示しても良いし、電磁波の発生装置（図示省略）を有し、電磁波に感覚音の周期に合わせてスペクラム強度を変化させて人の皮膚に向けて情報を提示しても良い。この場合、被験者は何も装置を見につけなくとも、非接触で皮膚に触感を感じられるメリットがある。このように、触覚、味覚、嗅覚情報を出力できるような特殊な機材を使わなくても、現状の映像と音声を出力できる端末があれば、クロスモーダルを利用して、感覚情報を伝送できるところは、本実施例の手法の特徴でもある。
【００４８】
図９は、本発明の実施例１における感覚情報提示システム１００の処理を示すフローチャートである。
【００４９】
処理が開始されると（Ｓ９００）、感覚情報選択部１０５は、まず、感覚情報利用フラグがＯｎ（利用有り）又はＯｆｆ（利用無し）のいずれであるかを判定する（Ｓ９０１）。感覚情報利用フラグがＯｆｆ（利用無し）の場合には、感覚情報提示処理は実行されず処理終了となる。Ｓ９０１で感覚情報利用フラグがＯｎ（利用有り）の場合には、感覚情報選択部１０５は、利用者の個人特性が登録されているかどうかを確認する（Ｓ９０２）。ここで、利用者とは、図８の例では個人端末８００の操作者である。利用者の個人特性が登録されていない場合には、感覚情報選択部１０５は、個人特性登録処理を行う（Ｓ９０３）。この処理は図８のＳ８１１に相当し、その詳細については図１０を参照して後述する。
【００５０】
Ｓ９０２において利用者の個人特性情報が登録されていると判定された場合、及び、Ｓ９０３の個人特性登録処理が終了した場合には、感覚情報選択部１０５は、指定された対象物の感覚情報が感覚情報データベース１０６に格納されているか否かを判定する（Ｓ９０４）。例えば、感覚情報選択部１０５は、図８に示すように、Ｗｅｂサーバ８０１から取得したＷｅｂ情報の画像を利用者がクリックした際に、当該Ｗｅｂ情報のデータが、感覚情報を持った対象物ＩＤを含んでいるかを判定してもよい。Ｗｅｂ情報のデータが、感覚情報を持った対象物ＩＤを含んでいなければ、指定された対象物の感覚情報が感覚情報データベース１０６に格納されていないため、処理が終了する。
【００５１】
一方、Ｗｅｂ情報のデータが、感覚情報を持った対象物ＩＤを含んでいれば、感覚情報選択部１０５は、感覚情報付加処理を行い（Ｓ９０５）、利用者がクリックした画像に対して、感覚情報１１０を提示する処理を行う（Ｓ９０６）。以上で処理が終了する（Ｓ９０７）。
【００５２】
ここで、Ｓ９０５の処理の一例を説明する。例えば、個人端末８００の操作者が指定した対象物のＩＤがＳ８０１において感覚情報提示システム１００に送信されると、感覚情報選択部１０５は、対象物プロパティ情報１０７に基づいて、当該対象物ＩＤと、当該操作者の個人特性に基づく特性タイプと、の組合せに対応する感覚情報を特定し、特定した感覚情報を感覚情報データベース１０６から読み出して個人端末８００に送信する（Ｓ８１５）。個人端末８００は、受信した感覚情報をディスプレイ２０１７又はスピーカ２０１８等から出力する。あるいは、感覚情報提示システム１００のディスプレイ２００８又はスピーカ２００９等が感覚情報を出力してもよい。
【００５３】
このとき、個人特性マッチング部１０３が、当該操作者の個人特性に対応する特性タイプを特定する。対象物プロパティ情報１０７に、全ての個人特性情報に対応する特性タイプが含まれている（すなわち、個人特性リファレンス１０４に、全ての条件の項目の全ての値の組合せに対応する特性タイプが登録され、その全ての特性タイプに対応する感覚情報が対象物プロパティ情報１０７に登録されている）場合には、個人特性マッチング部１０３は、当該操作者の個人特性に対応する特性タイプを特定できる。
【００５４】
仮に、対象物プロパティ情報１０７に、全ての個人特性情報に対応する特性タイプが含まれていない場合には、当該操作者の個人特性に完全に一致する特性タイプが個人特性リファレンス１０４に登録されていない場合がある。この場合には、個人特性マッチング部１０３は、当該操作者の個人特性の内容（例えば図３の条件１〜Ｍの内容の組合せ）と、個人特性リファレンス１０４に登録された特性タイプに対応する個人特性の内容（例えば図４の条件１〜Ｍの内容の組合せ）との類似度を計算し、最も類似度が高い個人特性の内容に対応する特性タイプを、当該操作者の個人特性に対応する特性タイプとして特定してもよい。これによって、操作者の特性に応じて適切な感覚情報を提示することができる。
【００５５】
なお、感覚情報選択部１０５は、Ｓ９０５の感覚情報付加処理を、利用者が画像をクリックした際に実施しても良いし、Ｗｅｂ情報取得時に一緒に実施しても良い。前者は、Ｗｅｂ表示に遅延をさせないメリットがあり、後者は、画像クリック時の感覚情報提示に遅延をさせないメリットがある。
【００５６】
図１０は、本発明の実施例１における個人特性登録処理時の質問と回答の例を示す説明図である。
【００５７】
図１０の例では、個人特性登録処理（図８のＳ８１１、図９のＳ９０３）において、年齢、性別、職業、現在の居住地域、故郷、学生時代の居住地域及び好きなメディアの順位といった質問１００１の項目ごとに、回答１００２の候補が出力され、利用者が候補のいずれかを回答１００２として選択することによって当該利用者の個人特性が登録される。これらの質問１００１の各項目が、個人特性情報１０２の各条件に対応する。図１０の例では、質問の項目である年齢について、候補として複数の年代が出力され、利用者が４０代を選択している。同様に性別は男性、職業は会社員が選択されている。現在の居住地域、故郷、学生時代の居住地域、好きなメディア順は、表示されている記号“▼”をクリックすると、選択肢が表示され、その中から県、及び、好きなメディア（テレビ、ラジオ、インターネット、本、雑誌、ＤＶＤ／ＢＤ、ＣＤ、レコード、新聞など）の順番を選択できる。これらの回答から個人特性情報１０２が作成される。
【００５８】
年齢情報からは、利用者の年代の教育基準に準じた言語を選択する、及び、利用者が過ごした時代における物質の純度及び材質などを参考に音を調整する、などの工夫ができる。例えば、昔のプラスチックの質及び塗料の質が低く、それらに触れたときに軽い音がした、といった事実がある場合に、それがシニアの記憶に合った感覚音作りに利用できる。地域に関しては、その地域だけで流通していたもの、その地域独特の言葉、及び、その地域の祭事に利用する独特の楽器の音などに由来した感覚言語及び感覚音を作成できる。また、地域によっては、暑さ又は寒さが影響して、同じオブジェクトの温度や湿気が異なり、それが地域における五感情報に影響を与える可能性がある。また好きなメディア順に関しては、テレビに慣れ親しんだ人は、実際のものの音よりも、コマーシャル、ドラマ、又はアニメ等で使われた効果音を利用した方が、感覚を想起し易い、といった場合の感覚音の選定に有効である。また、インターネット世代ではグローバルな感覚言語を知っていたり、国内では聞いたことのない音を動画で聞いていたりするので、利用者がその世代に属するという情報は言語及び音の選定の幅を広げる場合に有効である。年齢と地域及びメディアとを組み合せると、ある地域のある年代に流行った言葉及び音楽が共通の感覚情報として利用できる可能性もある。
【００５９】
なお、図３の説明で示した様に、初回の登録を手動ではなく、ネットショッピングの履歴、Ｗｅｂ閲覧履歴及び操作履歴の速度などを利用して、利用者の特性を自動で推定して個人特性情報を作成しても良い。この場合、初回登録の手間を省略できるメリットがある。
【００６０】
図１１は、本発明の実施例１の感覚情報提示システム１００が提示する感覚情報の利用者ごとの相違の例を示す説明図である。
【００６１】
具体的には、図１１は、Ｗｅｂ閲覧時に、画像をクリックして、その対象物の感覚情報を提示した表示例である。
【００６２】
図１１（Ａ）と図１１（Ｂ）は、異なる利用者が同じＷｅｂページを閲覧して、異なる感覚情報が表示された例である。図１１（Ａ）の利用者は、４０代で子供の頃に良くテレビを見ており、プリンのコマーシャルをテレビで見ていた。この場合、プリンには「ぷるぷる」という感覚言語が合っており、この感覚言語が文字情報としてディスプレイに表示され、さらに、この利用者がコマーシャルで聞いていた弾力のあるものが揺れるような効果音が感覚音として提示（具体的にはスピーカから出力）される。一方、図１１（Ｂ）は、６０代で本を良く読んでいた利用者に提示される感覚情報の例であり、その利用者が子供の頃には固い食べ物が多い中、プリンには柔らかさを強く感じ、テレビでの効果音の記憶もない。この場合、感覚音に関しては、与える情報がなくても、触覚に関する情報は十分であるため、「やわらかい」という感覚言語のみが提示されている。また、図２の説明で記載した様に、対象物ＩＤに、対象物を表示する画面上の、利用者がクリックした位置の座標情報も付加すれば、感覚情報提示システム１００は、クリックする場所に応じて、その位置の触覚などの感覚情報を付加できる。
【００６３】
なお、図１１（Ａ）の例では、表示される感覚言語と出力される感覚音がいずれも同じ触覚情報を表現するものである。このように、出力される感覚音は、感覚言語で表現された感覚を補うものであってもよいが、感覚言語と異なる感覚を表現する感覚音が出力されてもよい。例えば、味覚を表現する感覚言語と、触覚を表現する感覚音が同時に出力されてもよい。
【００６４】
図１２は、本発明の実施例１の感覚情報提示システム１００による感覚情報の提示方法の例を示す説明図である。
【００６５】
具体的には、図１２は、一人の利用者に対して、同じような対象物（例えば同種ではあるが異なる対象物）を並べて、その感覚情報を比較する提示方法を示した例を示す。図１２の例では、「こんがりプリン」と「焦がしプリン」を並べて、感覚情報を比較している。複数の対象物の情報を並べて出力することで、似ていてもそこに存在する微妙な違いを感覚言語と感覚音の違いで比較できるメリットがある。このとき、例えばシロップの部分を焼いた硬さなどを利用者が順々にクリックすることで、音の違いを比較して、好みを選定することができる。
【実施例２】
【００６６】
次に、本発明の実施例２について説明する。以下に説明する相違点を除き、実施例２のシステムの各部は、図１〜図１２に示された実施例１の同一の符号を付された各部と同一の機能を有するため、それらの説明は省略する。
【００６７】
現在、例えば自動車の製造現場において、車両のボディの継ぎ目、手触り感、塗料塗り等の品質を検査するために、人間の指及び視覚による官能試験が採用されている。人の指表面の硬さは、年齢、地域の湿気の度合、及びその人の過去の作業実績によっても異なってくる。熟練者が初心者に感覚情報を伝える場合に、伝える側と教わる側の指の感覚は異なるため、皮膚感覚を統一された言語や音で伝えるのは困難である。このような場合に、個人毎の特性に合った感覚情報を伝える手法として、実施例１と同様の構成のシステムを使い、情報を変更することで、感覚情報の提示が可能となる。
【００６８】
図１３は、本発明の実施例２において対象物に付加される対象物ＩＤの例を示す説明図である。
【００６９】
具体的には、図１３は、車体ボディを部位毎に分割して、それぞれの部位に対象物ＩＤを付加した例を示している。図１３（Ａ）は、上方から撮影したボディの写真画像を分割することで生成された部位を示す図であり、この例ではフロント、ルーフ、リアがそれぞれ３分割されている。図１３（Ｂ）は、サイドから撮影したボディの写真画像を分割することで生成された部位を示す図であり、この例ではフロント、前ドア、後ドア、リア、ルーフに５分割されている。車体の各部位を撮影した写真画像の各部位を対象物として、それぞれに実施例１と同様の対象物ＩＤが割り振られる。例えば、上方から撮影した画像においては、図１３（Ａ）に示すように、フロントの三つの部位にＦ１〜Ｆ３、ルーフの三つの部位にＵ１〜Ｕ３、リアの三つの部位にＲ１〜Ｒ３が、それぞれ対象物ＩＤとして割り当てられる。また、サイドから撮影した画像においては、図１３（Ｂ）に示すように、フロント、前ドア、後ドア、リア、ルーフにそれぞれＳ１〜Ｓ５が対象物ＩＤとして割り当てられる。これによって、各部位の感覚情報が出力されることとなる。
【００７０】
図１４は、本発明の実施例２において各作業員の個人特性情報を作成するための登録情報の説明図である。
【００７１】
実施例２においても実施例１と同様に図８及び図９に示す処理が行われるが、実施例２の個人特性登録処理（Ｓ８１１及びＳ９０３）において、図１０に示す登録情報の代わりに、図１４に示す登録情報が使用される。実施例１と同様に、実施例２の個人特性は、システムの利用者（本実施例では作業員）ごとに採取され、感覚情報提示システム１００に登録される。図１４には、例として、ある作業員の個人特性の登録情報を示す。
【００７２】
年齢及び性別によっても指表面の皮膚感覚が異なるため、作業員の年齢及び性別の情報は個人特性として有効である。地域情報は、作業員が作業を行う地域、例えば実施例２のシステムが工場で使用される場合は、その工場の所在地域（例えば「アジア」など）を示す情報である。気温及び湿気によっても皮膚の湿り気具合などの状態、及び、車体ボディ表面の状態による指のすべり心地が異なるため、地域情報も個人特性の重要な要素である。
【００７３】
さらに、製品の品質をグローバルで統一化させるための基準材質を準備し、その基準材質を触った際の触り心地を個人特性として記録しておく。これによって、同じ材質のものを触った際の、個人毎の感覚の感じ方の違いを予め把握し、それに応じた適切な感覚情報を出力することができる。例えば、それぞれ触り心地が異なる複数種類の基準の材質（材質１、材質２等）を用意しておき、それらを作業員に触らせて、その感触（例えばその作業員が感じた各材質のなめらかさの程度）を、材質ごとに、当該作業員の個人特性として採取する。
【００７４】
働く地域及び年齢に応じて、個人特性情報は更新される。これによって、作業員自身の状態、環境の状態及び熟練度合いによって変化する個人特性に合わせた感覚情報を提供することができる。
【００７５】
図１５は、本発明の実施例２における車体ボディ評価用の感覚言語データベース１０８を示す説明図である。
【００７６】
図１５の例では、高品質を保つために、同じ言葉で表現される触感をさらにその程度によって細かく分類している。例えば、“なめらか”という感覚語で表現される触感について、そのなめらかさの度合いを、“なめらか１”、“なめらか２”などのように、細かい段階に分けている。例えば、“なめらか１”、“なめらか２”等に含まれる数字の大きさが、なめらかさの度合いの大きさを表してもよい。“すべすべ”、“つるつる”、“ぴかぴか”といった他の感覚語についても同様である。
【００７７】
さらに、実施例２の感覚情報提示システムは、ボディに触ったときの上記のような感覚語に対応する感触を表現する音を、感覚音として登録した感覚音データベース１０９を準備する。その形式は実施例１の図７と同じであるので省略する。言語的感覚情報のみではなく、本システムを利用すれば、記憶した音との差異を確認することができ、品質向上が期待できる。
【００７８】
図１６は、本発明の実施例２における車体ボディの品質チェック時の感覚情報提示システム１００のデータフローを示すシーケンス図である。
【００７９】
最初に、作業員個人のタブレットなどの個人端末１６００から、図１４に示すような個人特性情報１０２の登録を行う（Ｓ１６１１）。これは、図８のＳ８１１と同様である。次に、検査中の車体ボディの写真に含まれる対象物ＩＤの情報を、個人端末１６００が感覚情報提示システム１００に送信する（Ｓ１６１２）。これによって、感覚情報提示システム１００では、感覚情報選択部１０５が、個人特性情報１０２と送られて来た対象物ＩＤの情報に基づいて、感覚情報データベース１０６から感覚情報を参照して、取得した感覚情報１１０を個人端末１６００に送信する。個人端末１６００では 、対象物ＩＤ毎の感覚言語及び感覚音を提示する。個人端末１６００を使用する作業員は、この感覚情報１１０と自分の感覚が合っているかを確認しながら、品質チェックをすることで、作業員による差異がない品質チェックが行われることとなる。
【００８０】
なお、処理シーケンスは実施例１の図９と同じであるため、説明を省略する。また、個人端末１６００のハードウェア構成は実施例１の個人端末８００と同様であるため、説明を省略する。
【００８１】
図１７は、本発明の実施例２において、同じ製品（車体）の同じ対象物ＩＤの部位について、異なる作業員の個人端末に表示される感覚情報の例を示す説明図である。
【００８２】
同じ品質を保つために、例えば、作業員１が車体側面のフロント部分を指でこすったときに、すべすべ２の感覚を得た場合に、品質が所定の基準を満たしていると判定するのに対して（図１７（Ａ））、作業員２はすべすべ５の感覚を得た場合に、当該所定の基準が満たされると判定することによって（図１７（Ｂ））、品質チェックが行われる。このように、作業員の個人特性の違いを考慮した品質チェックを行うことによって、製品としては、統一した品質を確保できることを示している。
【実施例３】
【００８３】
次に、本発明の実施例３について説明する。以下に説明する相違点を除き、実施例３のシステムの各部は、図１〜図１２に示された実施例１及び図１３〜図１７に示された実施例２の同一の符号を付された各部と同一の機能を有するため、それらの説明は省略する。
【００８４】
医療現場で腫瘍のしこりの硬さ具合などを感じ方に関して、熟練の医師と研修医では、個人が感じる感覚情報は異なる。熟練度合いによる指の使い方や、個人特性に応じて手術中に感じる触覚の感覚情報は異なってくる。そこで、実施例１の構成のシステムの応用として、個人特性の情報などを変更することによって、個人毎の感覚情報の伝送が可能となる。例えば、研修医が担当する手術時に、熟練医師が遠隔からサポートをする場合を想定する。熟練医師が画像を見て、対象物ＩＤによって特定される部位のしこりの硬さの程度の感覚情報を“こりこり感２”くらいであれば、そのしこりは悪性であると判断するべきだと研修医に伝えたとする。熟練医師の“こりこり感２”は、その研修医が感じる“こりこり感５”であるというのが、本システムで伝えることが可能となり、その情報を本当にその腫瘍が悪性なのか否かの判断材料として使用することができる。さらにこりこりと感じる感覚音からも、研修医は術式に確信を持てることになる。
【００８５】
図１８は、本発明の実施例３において医師が個人特性の情報を登録する情報を示す説明図である。
【００８６】
実施例３においても実施例１及び２と同様に図８及び図９に示す処理が行われるが、実施例３の個人特性登録処理（Ｓ８１１及びＳ９０３）において、図１０に示す登録情報の代わりに、図１８に示す登録情報が使用される。実施例１及び２と同様に、実施例３の個人特性は、システムの利用者（本実施例では医師）ごとに採取され、感覚情報提示システム１００に登録される。図１８には、例として、ある医師の個人特性の登録情報を示す。
【００８７】
年齢及び性別による指の柔らかさ及び長さの違いなどによる感覚情報の差異は重要な情報となり得る。医師が所在する地域に関しても、病院内は一定の環境に保たれていても、日頃接している環境に応じて皮膚感覚も異なってくる場合があるため、個人特性として登録する。
【００８８】
さらに、しこり標本（実施例２の基準材質に相当するもの）のような統一規格を準備し、その触り心地の度合いを個人毎に登録する。これによって、あるしこりに対して、自分がどのように感じているかの感覚情報を登録することができる。さらに、熟練医師の個人特性情報を公開することによって、研修医は熟練の医師がこんな感覚で手術しているのかと疑似体験をでき、その感覚を真似することで、熟練医師の技術の習得にも繋がるメリットがある。
【００８９】
図１８には、それぞれ感触が異なる複数のしこり標本（例えばしこり１、しこり２等）を用意し、それらを医師に触らせて、その感触（例えばその医師が感じた各標本の硬さの程度）を、当該医師の個人特性として登録する例を示す。この例では、しこりの感触を“こりこり”という感覚語と、その硬さの程度を示す数字との組合せで表現している。この例では数字の大きさが硬さの程度の大きさを表している。
【００９０】
図１９は、本発明の実施例３において、ある患者の同じ部位に関して、異なる医師の個人端末に表示される感覚情報の例を示す説明図である。
【００９１】
医師１ではしこり感を“こりこり感１”と感じているのに対し（図１９（Ａ））、医師２は、より敏感に、しこり感を“こりこり感５”と感じていることがわかる（図１９（Ｂ））。このように、同じしこりに関しても、医師による感覚情報の違いを知ることができ、遠隔医療時のサポート及び研修医の技術の習得に役立つ。
【００９２】
以上の実施形態によれば、個人の特性に応じた感覚情報を付加することによって、五感に関する感覚情報を消費者に想起させ易くし、遠隔の物の質感及び価値を判断を容易にする手法を提供することができる。特に、視覚情報（文字情報を含む）及び聴覚情報の少なくとも一つを含む感覚情報であって、触覚情報、味覚情報及び嗅覚情報の少なくとも一つを表現する情報を付加することによって、ディスプレイ装置及びスピーカ等の一般的に普及している出力装置を利用して低コストで触覚等の感覚情報を適切に伝達することが可能になる。
【００９３】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明のより良い理解のために詳細に説明したのであり、必ずしも説明の全ての構成を備えるものに限定されものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることが可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
【００９４】
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によってハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによってソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、不揮発性半導体メモリ、ハードディスクドライブ、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）等の記憶デバイス、または、ＩＣカード、ＳＤカード、ＤＶＤ等の計算機読み取り可能な非一時的データ記憶媒体に格納することができる。
【００９５】
また、制御線及び情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線及び情報線を示しているとは限らない。実際にはほとんど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【００９６】
１００  感覚情報付加装置および感覚情報提示システム、１０１  対象物情報、１０２  個人特性情報、１０３  個人特性マッチング部、１０４  個人特性リファレンス、１０５  感覚情報選択部、１０６  感覚情報データベース、１０７  対象物プロパティ情報、１０８  感覚言語データベース、１０９  感覚音データベース、１１０  感覚情報、８００、１６００  個人端末、８０１  Ｗｅｂサーバ、８０２  感覚情報利用フラグ
【図１】
2018073019.tif 000003
【図２】
2018073019.tif 000004
【図３】
2018073019.tif 000005
【図４】
2018073019.tif 000006
【図５】
2018073019.tif 000007
【図６】
2018073019.tif 000008
【図７】
2018073019.tif 000009
【図８】
2018073019.tif 000010
【図９】
2018073019.tif 000011
【図１０】
2018073019.tif 000012
【図１１】
2018073019.tif 000013
【図１２】
2018073019.tif 000014
【図１３】
2018073019.tif 000015
【図１４】
2018073019.tif 000016
【図１５】
2018073019.tif 000017
【図１６】
2018073019.tif 000018
【図１７】
2018073019.tif 000019
【図１８】
2018073019.tif 000020
【図１９】
2018073019.tif 000021
【図２０】
2018073019.tif 000022