(57)【要約】【課題】現在感知された知覚データを他の生物の感覚機構で感知された場合の知覚データに実時間で変換することが可能な信号処理装置および記憶媒体を提供する。【解決手段】知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、を備える、信号処理装置。【選択図】図１
2014165706.tif 000002
【特許請求の範囲】
【請求項１】
知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、
前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、
を備える、信号処理装置。
【請求項２】
前記信号処理装置は、前記所望の知覚データを選択するための選択画面を生成する生成部をさらに備える、請求項１に記載の信号処理装置。
【請求項３】
前記知覚特性パラメータは、生物の種別に応じて異なる、請求項１に記載の信号処理装置。
【請求項４】
前記信号処理装置は、周辺に存在する生物を自動的に認識する認識部をさらに備え、
前記設定部は、前記認識部により認識された生物に応じた知覚データに変更するための知覚特性パラメータを設定する、請求項１に記載の信号処理装置。
【請求項５】
前記認識部により認識された生物に応じた知覚特性パラメータは外部から取得される、請求項４に記載の信号処理装置。
【請求項６】
前記信号処理装置は、ユーザ周辺の知覚データを取得する取得部をさらに備え、
前記変換部は、前記取得部により取得された知覚データを、前記知覚特性パラメータに基づいて変換する、請求項１に記載の信号処理装置。
【請求項７】
前記信号処理装置は、前記認識部により認識された生物周辺の知覚データを受信する受信部をさらに備え、
前記変換部は、前記受信部により取得された知覚データを、前記知覚特性パラメータに基づいて変換する、請求項４に記載の信号処理装置。
【請求項８】
前記信号処理装置は、前記認識部により認識された生物に応じた知覚特性パラメータが、ユーザの知覚特性パラメータと異なる場合に、前記ユーザの知覚特性パラメータを、前記生物が有するデバイスに送信する送信部をさらに備える、請求項４に記載の信号処理装置。
【請求項９】
前記信号処理装置は、ユーザ周辺の知覚データを取得する取得部をさらに備え、
前記送信部は、前記取得部により取得された前記ユーザ周辺の知覚データも併せて送信する、請求項８に記載の信号処理装置。
【請求項１０】
前記信号処理装置は、前記変換部により変換された前記所望の知覚データを再生する再生部をさらに備える、請求項１に記載の信号処理装置。
【請求項１１】
前記知覚データは、画像データ、音響データ、圧力データ、温度データ、湿度データ、味データ、または匂いデータである、請求項１に記載の信号処理装置。
【請求項１２】
前記知覚特性パラメータは、視覚特性パラメータ、聴覚特性パラメータ、触覚特性パラメータ、味覚特性パラメータ、または嗅覚特性パラメータである、請求項１に記載の信号処理装置。
【請求項１３】
コンピュータを、
知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、
前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、
として機能させるためのプログラムを記憶した記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、信号処理装置および記憶媒体に関する。
【背景技術】
【０００２】
視覚状態を疑似体験するための装置として、下記特許文献１〜３が提案されている。
【０００３】
具体的には、下記特許文献１では、観察者と対象物との間に配置され、光を乱反射させるフィルタと、対象物とフィルタとの間の距離を、入力された疑似体験年齢に応じて算出する算出部とを備える視覚疑似体験装置が開示されている。
【０００４】
また、下記特許文献２では、外部の撮像装置、例えば他人が装着している撮像装置や、自動車、電車、動物や鳥などに装着された撮像装置によって撮像された画像データを取得して表示する画像表示システムが開示されている。
【０００５】
また、下記特許文献３では、展示空間内を照らす白色灯及び黄色灯と、展示空間の手前に設けられ、透明な状態と白濁した状態とを任意に切り替え可能な調光板と、を備える老化体験装置が開示されている。特許文献３の老化体験装置は、展示空間内を、白色灯または黄色灯の下で白濁した調光板を通して見せることで、眼が老化して白内障が進んだ高齢者の視覚光景を疑似的に提供することができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１１−１３３７３号公報
【特許文献２】特開２００８−１５４１９２号公報
【特許文献３】特開２００３−８４６５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上記特許文献１、３では、視覚の劣化による見え方の違いが提供されるものであって、視覚の構造的な違いによる見え方の違いの提供については何ら言及されていない。
【０００８】
また、上記特許文献２では、他人からの視界を見るための技術は開示されているが、自分が現在見ている視界を、自分以外の眼の構造で見た場合の景色にリアルタイムで変換して提供することについては何ら言及されていない。
【０００９】
そこで、本開示では、現在感知された知覚データを他の生物の感覚機構で感知される知覚データに実時間で変換することが可能な、新規かつ改良された信号処理装置および記憶媒体を提案する。
【課題を解決するための手段】
【００１０】
本開示によれば、知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、を備える、信号処理装置を提案する。
【００１１】
本開示によれば、コンピュータを、知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、として機能させるためのプログラムを記憶した記憶媒体を提案する。
【発明の効果】
【００１２】
以上説明したように本開示によれば、現在感知された知覚データを他の生物の感覚機構で感知される知覚データに実時間で変換することが可能となる。
【図面の簡単な説明】
【００１３】
【図１】本開示の一実施形態によるＨＭＤの概要を説明するための図である。
【図２】第１の実施形態によるＨＭＤの内部構成例を示す図である。
【図３】第１の実施形態による視覚変換処理を示すフローチャートである。
【図４】第１の実施形態による生物選択画面の一例を示す図である。
【図５】第１の実施形態による視覚特性パラメータに基づく撮像画像の変換例を示す模式図である。
【図６Ａ】第１の実施形態による視覚特性パラメータに基づく撮像画像の他の変換例を示す模式図である。
【図６Ｂ】第１の実施形態による視覚特性パラメータに基づく撮像画像の他の変換例を示す模式図である。
【図６Ｃ】第１の実施形態による視覚特性パラメータに基づく撮像画像の他の変換例を示す模式図である。
【図７】第１の実施形態による所望の生物の時代を指定できる入力画面の一例を示す図である。
【図８】第１の実施形態による聴覚変換処理について示すフローチャートである。
【図９】第１の実施形態による他の視覚変換処理を示すフローチャートである。
【図１０】視覚特性パラメータに基づく虹画像の変換例を示す模式図である。
【図１１】視覚特性パラメータに基づく月画像の変換例を示す模式図である。
【図１２】視覚特性パラメータに基づく景色画像の変換例を示す模式図である。
【図１３】第２の実施形態の概要を説明するための図である。
【図１４】第２の実施形態による主制御部の機能構成を示す図である。
【図１５】第２の実施形態による知覚変換処理を示すフローチャートである。
【図１６】第２の実施形態による視覚変換処理を示すフローチャートである。
【図１７】第２の実施形態による聴覚変換処理を示すフローチャートである。
【図１８】第２の実施形態による他の知覚変換処理を示すフローチャートである。
【発明を実施するための形態】
【００１４】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１５】
また、説明は以下の順序で行うものとする。
１．本開示の一実施形態によるＨＭＤの概要
２．各実施形態
２−１．第１の実施形態
２−２．第２の実施形態
３．まとめ
【００１６】
＜＜１．本開示の一実施形態によるＨＭＤの概要＞＞
まず、本開示の一実施形態によるＨＭＤ１（信号処理装置）の概要について、図１を参照して説明する。
【００１７】
図１は、本開示の一実施形態によるＨＭＤ１の概要を説明するための図である。図１に示すように、ユーザ８は、眼鏡型のＨＭＤ（Ｈｅａｄ  Ｍｏｕｎｔｅｄ  Ｄｉｓｐｌａｙ）１を装着している。ＨＭＤ１は、例えば両側頭部から後頭部にかけて半周回するようなフレームの構造の装着ユニットを有し、図１に示すように両耳殻にかけられることでユーザ８に装着される。
【００１８】
また、ＨＭＤ１は、装着状態において、ユーザ８の両眼の直前、即ち通常の眼鏡におけるレンズが位置する場所に、左眼用と右眼用の一対の表示部２が配置される構成となっている。表示部２には、例えば撮像レンズ３ａで撮像された現実空間の撮像画像（静止画／動画）が表示される。また、表示部２は透過型であってもよく、ＨＭＤ１により表示部２がスルー状態、即ち透明または半透明の状態とされることで、ユーザ８は、ＨＭＤ１を眼鏡のように常時装着していても通常の生活には支障がない。
【００１９】
また、ＨＭＤ１には、図１に示すように、ユーザ８に装着された状態で、ユーザが視認する方向を被写体方向として撮像するように、前方に向けて撮像レンズ３ａが配置されている。さらに、撮像レンズ３ａによる撮像方向に対して照明を行う発光部４ａが設けられる。発光部４ａは例えばＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）により形成される。
【００２０】
また、図１では左耳側しか示されていないが、装着状態でユーザの右耳孔および左耳孔に挿入できる一対のイヤホンスピーカ５ａが設けられる。また、右眼用の表示部２の右方と、左眼用の表示部２の左方に、外部音声を集音するマイクロホン６ａ、６ｂが配置される。
【００２１】
なお、図１に示すＨＭＤ１の外観は一例であり、ＨＭＤ１をユーザが装着するための構造は多様に考えられる。ＨＭＤ１は、一般に眼鏡型、あるいは頭部装着型とされる装着ユニットで形成されればよく、少なくとも本実施の形態としては、ユーザの眼の前方に近接して表示部２が設けられていればよい。また表示部２は、両眼に対応して一対設けられる他、片側の眼に対応して１つ設けられる構成でもよい。
【００２２】
また、撮像レンズ３ａ、照明を行う発光部４ａは、図１に示す例では右眼側に前方に向けて配置されているが、左眼側に配置されてもよいし、両側に配置されてもよい。
【００２３】
また、イヤホンスピーカ５ａは、左右のステレオスピーカとせずに、一方の耳にのみ装着するために１つ設けられるのみでもよい。また、マイクロホンも、マイクロホン６ａ、６ｂのうちの一方でもよい。
【００２４】
さらに、マイクロホン６ａ、６ｂやイヤホンスピーカ５ａを備えない構成も考えられる。また発光部４ａを設けない構成も考えられる。
【００２５】
以上、本実施形態によるＨＭＤ１（信号処理装置）の外観構成について説明した。本明細書では、画像データや音響データ等の知覚データの変換処理を行う信号処理装置の一例としてＨＭＤ１を用いるが、本開示による信号処理装置はＨＭＤ１に限定されない。例えば、信号処理装置は、スマートフォン、携帯電話端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、タブレット端末等であってもよい。
【００２６】
ここで、人間と他の動物や昆虫等とは、それぞれ眼の構造、視覚機構が異なっており、景色の見え方が異なる。例えば、ヒトは紫外線や赤外線領域の波長を感知する受容体分子をもっていないので、紫外線や赤外線を見ることができないが、マウスやラット等の齧歯類やコウモリ等は紫外線を感知できることが知られている。上記受容体分子（視物質）は、視覚をつかさどる視細胞にあり、視物質はオプシンというタンパク質から構成されている。多くの哺乳類は２種類の色覚オプシン遺伝子しかもたないので、例えば犬や猫は２色視となるが、ヒトを含む霊長類の多くは３種類の色覚オプシン遺伝子をもち、３色視できる。一方、魚類、鳥類、爬虫類の中には、４種類の色覚オプシン遺伝子を持つ生物（例えば金魚、ハト、カエル）がいて、これらの生物は４色視している。したがって、例えば鳥は、イチゴ等の紫外線をよく反射する物を見つけやすかったり、ヒトの眼には雌雄が同じに見える鳥でも、その羽毛に紫外線を反射する部分が存在することによって、性別を見分けられたりする。
【００２７】
以上生物の違いによる視覚の違いについて詳細に述べたが、感覚機構の違いは視覚に限らず、聴覚機構や嗅覚機構、触覚機構も生物によって異なる。例えば人間の可聴域は約１２Ｈｚ〜２３ｋＨｚ、犬の可聴域は約１５Ｈｚ〜６０ｋＨｚ、コウモリの可聴域は約１．２ｋＨｚ〜４００ｋＨｚ、魚類一般の可聴域は約２０Ｈｚ〜３．５ｋＨｚ、インコの可聴域は約２００Ｈｚ〜８．５ｋＨｚであって、生物によって聞こえる音の範囲が異なる。
【００２８】
このように、他の生物の感覚機構は人間と異なるので、他の生物には、人間が普段視ている景色とは異なる景色が視えていたり、人間が普段聴いている音とは違う音を聴いていたりする可能性が高い。
【００２９】
しかしながら、他の生物が視ている世界や聴いている音等をリアルタイムで提供する装置は従来提案されていなかった。例えば、上記特許文献１、３は、視覚の劣化による見え方の違いが提供されるものであって、視覚の構造的な違いによる見え方の違いは提供されていなかった。また、上記特許文献２では、他人からの視界を見るための技術は開示されているが、自分が現在見ている視界を自分以外の眼の構造で見た場合の景色は提供されていなかった。
【００３０】
そこで、上記事情を一着眼点にして本開示の各実施形態によるＨＭＤ１（信号処理装置）を創作するに至った。本開示の各実施形態によるＨＭＤ１は、現在感知された知覚データを、構造的に異なる他の生物の感覚機構で感知される知覚データに実時間で変換することができる。
【００３１】
ここで、所定の知覚特性パラメータとは、画像データ（静止画データ／動画データ）や音響データ等の知覚データを、所望の生物の感覚機構で感知された場合の知覚データに変換するためのパラメータであって、予め生物毎にデータベース化されているものとする。
【００３２】
以上、本開示の一実施形態によるＨＭＤ１（信号処理装置）の概要について説明した。続いて、ＨＭＤ１による知覚データの変換処理について、複数の実施形態を用いて詳細に説明する。
【００３３】
＜＜２．各実施形態＞＞
＜２−１．第１の実施形態＞
まず、第１の実施形態によるＨＭＤ１について、図２〜図１２を用いて具体的に説明する。
【００３４】
（２−１−１．構成）
図２は、第１の実施形態によるＨＭＤ１の内部構成例を示す図である。図２に示すように、本実施形態によるＨＭＤ１は、表示部２、撮像部３、照明部４、音声出力部５、音声入力部６、主制御部１０、撮像制御部１１、撮像信号処理部１２、撮像画像解析部１３、照明制御部１４、音声信号処理部１５、表示制御部１７、音声制御部１８、通信部２１、およびストレージ部２２を有する。
【００３５】
（主制御部１０）
主制御部１０は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、不揮発性メモリ、インタフェース部を備えたマイクロコンピュータにより構成され、ＨＭＤ１の各構成を制御する。
【００３６】
また、主制御部１０は、図２に示すように、知覚特性パラメータ設定部１０ａ、知覚データ変換部１０ｂ、生物認識部１０ｃ、および選択画面生成部１０ｄとして機能する。
【００３７】
知覚特性パラメータ設定部１０ａは、知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する。本明細書において、知覚データとは、例えば画像データ（静止画データ／動画データ）、音響データ（音声信号データ）、圧力データ、温度データ、湿度データ、味データ、または匂いデータであって、撮像部３、音声入力部６、圧力センサ、温度センサ、湿度センサ、味センサ、匂いセンサ（各センサは不図示）等の各取得部により取得される。また、知覚特性パラメータとは、生物の種別に応じて異なる知覚データ変換用のパラメータである。知覚特性パラメータは、ストレージ部２２にデータベース化して格納されているか、またはクラウド上（外部）に格納され、通信部２１を介して取得される。具体的には、知覚特性パラメータは、視覚特性パラメータ、聴覚特性パラメータ、触覚特性パラメータ、味覚特性パラメータ、または嗅覚特性パラメータ等である。
【００３８】
また、所望の知覚データとは、生物選択画面（図４参照）に応じてユーザ８（ＨＭＤ１の装着者）により選択された生物、または生物認識部１０ｃにより認識された周辺に存在する生物が感知する知覚データである。知覚特性パラメータ設定部１０ａは、このような所望の知覚データに変換するための知覚特性パラメータを、ストレージ部２２から、または通信部２１を介してクラウドから取得する。なお、どの知覚特性パラメータを取得するかは、知覚全般変換モード、視覚変換モード、または聴覚変換モード等のいずれに設定されているかによって決定されてもよい。
【００３９】
例えば、視覚変換モードにおいて「鳥」が選択された場合、知覚特性パラメータ設定部１０ａは、鳥の視覚特性パラメータを取得し、設定する。鳥の視覚特性パラメータは、例えば鳥の眼が紫外線も見える構造（４色視）であることから、紫外線を可視化するためのパラメータであってもよい。
【００４０】
また、聴覚変換モードにおいて、「犬」が選択された場合、知覚特性パラメータ設定部１０ａは、犬の聴覚特性パラメータを取得し、設定する。犬の聴覚特性パラメータは、例えば犬の可聴域が約１５Ｈｚ〜６０ｋＨｚであって、人間には聞こえない超音波も聞こえる構造であることから、約６０ｋＨｚまでの超音波を可聴化するためのパラメータであってもよい。
【００４１】
知覚データ変換部１０ｂは、知覚特性パラメータ設定部１０ａにより設定された知覚特性パラメータに従って、各取得部により現在取得された知覚データを、所望の知覚データに実時間で変換し、変換した知覚データを各再生部に出力する。ここで、各取得部とは、例えば撮像部３、および音声入力部６等である。また、各再生部とは、例えば表示部２、および音声出力部５等である。
【００４２】
例えば知覚データ変換部１０ｂは、知覚特性パラメータ設定部１０ａにより設定された鳥の視覚特性パラメータに従って、撮像部３により撮像された撮像画像を、鳥の視覚機構で視える景色にリアルタイムで変換し、表示制御部１７に出力する。撮像部３により撮像される撮像画像には、通常の（可視光線）撮像画像と、紫外線撮像画像が含まれていてもよく、知覚データ変換部１０ｂは、これらの撮像画像に基づいて、設定された鳥の視覚特性パラメータに従って、鳥の視覚機構で視える景色に実時間で変換する。なお、本明細書において、知覚データ変換部１０ｂによる知覚データの変換とは、知覚データの置換も含む概念である。すなわち、例えば複数の性質の異なる撮像部（赤外線／紫外線カメラ、パノラマカメラ、魚眼カメラ等）や、撮像範囲（画角）や撮像方向が異なる複数の撮像部で撮像した各画像に切り替えることも、知覚データの変換に含まれる。知覚データ変換部１０ｂは、設定された視覚特性パラメータに従って、所定の撮像部で撮像した撮像画像に置換することで、知覚データの変換を実現することが可能である。
【００４３】
生物認識部１０ｃは、周辺に存在する生物を自動的に認識する。具体的には、生物認識部１０ｃは、撮像部３により撮像された周辺の撮像画像に対して撮像画像解析部１３により解析された結果に基づいて、周辺に存在する生物を認識することができる。
【００４４】
選択画面生成部１０ｄは、所望の知覚データを選択するための選択画面を生成し、生成した選択画面を表示制御部１７に出力する。具体的には、選択画面生成部１０ｄは、図４を参照して後述するように、動物や昆虫のアイコンを含む選択画面を生成する。これによりユーザは、所望の動物、昆虫を選択することができる。この際、ユーザは、視線入力、ジェスチャー入力、または音声入力等により、所望の動物、昆虫を選択することができる。
【００４５】
（撮像部）
撮像部３は、撮像レンズ３ａ、絞り、ズームレンズ、及びフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）センサアレイや、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサアレイにより実現されてもよい。
【００４６】
また、本実施形態による撮像部３は、通常の（可視光線）撮像の他、特殊な撮像、例えば紫外線撮像や赤外線撮像が可能である。
【００４７】
また、本実施形態によるＨＭＤ１には、装着時において装着者の眼を撮像可能な撮像レンズが設けられていてもよく、これによりユーザ（装着者）による視線入力が可能となる。
【００４８】
（撮像制御部）
撮像制御部１１は、主制御部１０からの指示に基づいて、撮像部３及び撮像信号処理部１２の動作を制御する。例えば撮像制御部１１は、撮像部３、撮像信号処理部１２の動作のオン／オフを制御する。また撮像制御部１１は撮像部３に対して、オートフォーカス、自動露出調整、絞り調整、ズームなどの動作を実行させるための制御（モータ制御）を行うものとされる。また撮像制御部１１はタイミングジェネレータを備え、固体撮像素子及び撮像信号処理部１２のサンプルホールド／ＡＧＣ回路、ビデオＡ／Ｄコンバータに対しては、タイミングジェネレータにて生成されるタイミング信号により信号処理動作を制御する。また、このタイミング制御により撮像フレームレートの可変制御も可能とされる。
【００４９】
さらに撮像制御部１１は、固体撮像素子及び撮像信号処理部１２における撮像感度や信号処理の制御を行う。例えば撮像感度制御として固体撮像素子から読み出される信号のゲイン制御を行ったり、黒レベル設定制御や、デジタルデータ段階の撮像信号処理の各種係数制御、ぶれ補正処理における補正量制御などを行うことができる。
【００５０】
（撮像信号処理部）
撮像信号処理部１２は、撮像部３の固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／ＡＧＣ(Ａｕｔｏｍａｔｉｃ  Ｇａｉｎ  Ｃｏｎｔｒｏｌ)回路や、ビデオＡ／Ｄ（アナログ／デジタル）コンバータを備える。これにより、撮像信号処理部１２は、デジタルデータとしての撮像信号を得る。また、撮像信号処理部１２は、撮像信号に対してホワイトバランス処理、輝度処理、色信号処理、ぶれ補正処理なども行う。
【００５１】
（撮像画像解析部）
撮像画像解析部１３は、撮像部３により撮像され、撮像信号処理部１２により処理された画像データ（撮像画像）を解析し、画像データに含まれる画像の情報を得る。具体的には、例えば撮像画像解析部１３は、画像データに対して点検出、線・輪郭検出、領域分割等の解析を行い、解析結果を主制御部１０の生物認識部１０ｃや知覚データ変換部１０ｂに出力する。また、本実施形態によるＨＭＤ１は、撮像部３および撮像画像解析部１３を備えることで、例えばユーザによるジェスチャー入力を可能にする。
【００５２】
（照明部、照明制御部）
照明部４は、図１に示した発光部４ａとその発光部４ａ（例えばＬＥＤ）を発光させる発光回路から成る。照明制御部１４は、主制御部１０の制御に応じて、照明部４に発光動作を実行させる。照明部４における発光部４ａが図１に示したように前方に対する照明を行うものとして取り付けられていることで、照明部４はユーザの視界方向に対する照明動作を行うことになる。
【００５３】
（音声入力部、音声信号処理部）
音声入力部６は、図１に示したマイクロホン６ａ、６ｂと、そのマイクロホン６ａ、６ｂで得られた音声信号を増幅処理するマイクアンプ部やＡ／Ｄ変換器を有し、音声データを音声信号処理部１５に出力する。音声信号処理部１５は、音声入力部６で得られた音声データに対して、ノイズ除去、音源分離等の処理を行う。そして処理した音声データを主制御部１０に供給する。本実施形態によるＨＭＤ１は、音声入力部６および音声信号処理部１５を備えることで、例えばユーザによる音声入力を可能にする。
【００５４】
また、本実施形態による音声入力部６は、通常の（人間の可聴域の）集音の他、特殊な集音、例えば超音波の集音や、固体中を伝わってくる振動を音として集音することが可能である。
【００５５】
（表示制御部）
表示制御部１７は、主制御部１０の制御に応じて、知覚データ変換部１０ｂにより変換された画像データや、選択画面生成部１０ｄにより生成された画像データを表示部２に表示するための駆動制御を行う。表示制御部１７は、例えば液晶ディスプレイとされる表示部２において、表示させるための画素駆動回路で構成されていてもよい。また、表示制御部１７は、表示部２の各画素の透過率を制御し、表示部２をスルー状態（透過または半透過状態）にすることもできる。
【００５６】
（表示部）
表示部２は、表示制御部１７による制御に従って、画像データを表示する。また、表示部２は、表示制御部１７により透過率が制御され、スルー状態となることが可能なデバイスにより実現される。
【００５７】
（音声制御部）
音声制御部１８は、主制御部１０の制御に応じて、知覚データ変換部１０ｂにより変換された音声信号データを音声出力部５から出力するための制御を行う。
【００５８】
（音声出力部）
音声出力部５は、図１に示した一対のイヤホンスピーカ５ａと、そのイヤホンスピーカ５ａに対するアンプ回路を有する。また、音声出力部５は、いわゆる骨伝導スピーカとして構成されてもよい。
【００５９】
（ストレージ部）
ストレージ部２２は、所定の記録媒体に対してデータの記録再生を行う部位とされる。ストレージ部２２は、例えばＨＤＤ（Ｈａｒｄ  Ｄｉｓｃ  Ｄｒｉｖｅ）として実現される。もちろん記録媒体としては、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなど各種考えられ、ストレージ部２２としては採用する記録媒体に応じて記録再生を実行できる構成とされればよい。
【００６０】
本実施形態によるストレージ部２２は、各生物の知覚特性パラメータを格納する。例えば、人間の眼に見える景色を他の生物の眼で見える景色に変換するための視覚特性パラメータとして、変換Ｅｙｅ−Ｔｎが格納される。また、人間の耳に聞こえる音を他の生物の耳で聞こえる音に変換するための聴覚特性パラメータとして、変換Ｅａｒ−Ｔｎが格納される。ここで、ｎは自然数であって、生物毎にデータベース化された数だけ存在する。また、ストレージ部２２は、通信部２１を介してネットワーク上から取得した最新の知覚特性パラメータに自動的に更新してもよい。
【００６１】
（通信部）
通信部２１は外部機器との間でのデータの送受信を行う。通信部２１は、例えば無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙ、登録商標）、赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の方式で、外部機器と直接、またはネットワークアクセスポイントを介して無線通信する。
【００６２】
以上、本実施形態によるＨＭＤ１の内部構成について詳細に説明した。なお、図２に示す内部構成は一例であって、本実施形態によるＨＭＤ１の内部構成は図２に示す例に限定されない。例えば、ＨＭＤ１は、知覚データ変換部１０ｂにより変換された圧力データ、温度データ、湿度データ、味データ、または匂いデータを再生する各種再生部を有していてもよい。
【００６３】
上記構成により、本実施形態によるＨＭＤ１は、撮像部３や音声入力部６で取得した知覚データを、所望の生物に応じた知覚特性パラメータに基づいてリアルタイムで変換し、変換した知覚データを提供することができる。続いて、本実施形態のＨＭＤ１の動作処理について説明する。
【００６４】
（２−１−２．動作処理）
図３は、第１の実施形態による視覚変換処理を示すフローチャートである。図３に示すように、まず、ステップＳ１０３において、ＨＭＤ１は、ユーザ８により視覚変換モードに設定される。視覚変換モードの設定は、例えばＨＭＤ１の表示部２付近に設けられたスイッチ（不図示）の操作により設定されてもよい。
【００６５】
次に、ステップＳ１０６において、ＨＭＤ１の主制御部１０は、選択画面生成部１０ｄにより生成した生物選択画面を、表示部２に表示するよう表示制御部１７に指示を出す。ここで、生物選択画面の一例を図４に示す。図４に示すように、各生物のアイコン３１ａ〜３１ｈを含む選択画面３０は、リアルタイムで表示部２に表示されている撮像画像Ｐ１に重畳表示、または透過状態の表示部２に表示される。ユーザ８は、所望の生物のアイコン３１を、視線入力、ジェスチャー入力、または音声入力により選択する。
【００６６】
次いで、ステップＳ１０９において、知覚特性パラメータ設定部１０ａは、選択された生物に応じた変換Ｅｙｅ−Ｔｎテーブルを呼び出し、視覚変換用の視覚特性パラメータを設定する。
【００６７】
次に、ステップＳ１１２において、撮像部３は、周囲の景色を撮像し、撮像画像は撮像信号処理部１２および撮像画像解析部１３を介して知覚データ変換部１０ｂに送られる。なお撮像部３による撮像は、上記Ｓ１０３で視覚変換モードが設定されてから継続的に行われていてもよい。
【００６８】
続いて、ステップＳ１１５において、知覚データ変換部１０ｂは、撮像部３により撮像された撮像画像を、知覚特性パラメータ設定部１０ａにより設定された視覚特性パラメータに基づいて変換する。ここで、画像データの変換例について図５および図６（図６Ａ〜図６Ｃ）を参照して説明する。
【００６９】
図５は、視覚特性パラメータに基づく撮像画像の変換例を示す模式図である。図５では、人間の眼による見え方を示す撮像画像Ｐ１、鳥の眼による見え方に変換した変換画像Ｐ２、蝶の眼による見え方に変換した変換画像Ｐ３、犬の眼による見え方に変換した変換画像Ｐ４を示す。
【００７０】
例えば撮像画像Ｐ１を、鳥の眼による見え方に変換するための視覚特性パラメータＥｙｅ−Ｔ１に基づいて変換した場合、鳥の眼が紫外線も見える構造（４色視）であることから、紫外線の反射を検知した領域が特定の色や模様で表現された変換画像Ｐ２に変換される。これにより鳥の眼で見える景色が表現された画像がユーザ８に提供される。
【００７１】
また、蝶の眼による見え方に変換するための視覚特性パラメータＥｙｅ−Ｔ２に基づく場合、蝶の眼が紫外線も見える構造（４色視）であること、および蝶の視力は人間より低いことから、紫外線反射領域を特定の色等で表現し、かつ焦点を近づけてぼかした状態の変換画像Ｐ３に変換される。これにより蝶の眼で見える景色が表現された画像がユーザ８に提供される。
【００７２】
また、犬の眼による見え方に変換するための視覚特性パラメータＥｙｅ−Ｔ３に基づく場合、犬の眼が２色視の構造であること、および犬の視力は人間より低いことから、所定の２原色（例えば青と緑）で表現し、かつ焦点を近づけてぼかした状態の変換画像Ｐ４に変換される。これにより犬の眼で見える景色が表現された画像がユーザ８に提供される。
【００７３】
図６Ａ〜図６Ｃは、視覚特性パラメータに基づく撮像画像の他の変換例を示す模式図である。知覚データ変換部１０ｂは、撮像レンズ３ａがパノラマ撮像した撮像画像Ｐ０を、各生物の視覚特性パラメータＥｙｅ−Ｔｎに基づいて、撮像画像Ｐ０から各生物の視野角や視点に応じた範囲をクリッピングした画像データに変換する。
【００７４】
例えば、キリンの視覚特性パラメータＥｙｅ−Ｔ４に基づく場合、知覚データ変換部１０ｂは、図６Ａに示すように、パノラマ撮影された撮像画像Ｐ０から、約３５０度の視野角（キリンの視野角）で、上方（キリンの視点）の範囲をクリッピングした変換画像Ｐ６に変換する。また、馬の視覚特性パラメータＥｙｅ−Ｔ５に基づく場合、知覚データ変換部１０ｂは、図６Ｂに示すように、パノラマ撮影された撮像画像Ｐ０から、約３５０度の視野角（馬の視野角）で、中央（馬の視点）の範囲をクリッピングした変換画像Ｐ７に変換する。なお、馬の視野角の内、鼻先は盲点であって、見えていないが、それは変換画像Ｐ７では反映（図示）していない。また、猫の視覚特性パラメータＥｙｅ−Ｔ６に基づく場合、知覚データ変換部１０ｂは、図６Ｃに示すように、パノラマ撮影された撮影画像Ｐ０から、約２８０度の視野角（猫の視野角）で、下方（猫の視点）の範囲をクリッピングした変換画像Ｐ８に変換する。
【００７５】
以上図５および図６を参照して視覚特性パラメータに基づく画像データの変換の具体例について説明した。なお、本実施形態による視覚特性パラメータに基づく画像データの変換例は、図５および図６に図示したものに限定されず、例えば猫や犬の肉食動物は両眼視であることや、キリンや馬の草食動物は両眼視であることも考慮した視覚特性パラメータに基づいた画像データに変換されてもよい。また、撮像画像Ｐ０は、複数の撮像レンズ３ａにより撮像された複数の撮像画像から成るものであってもよい。これにより、ＨＭＤ１を装着しているユーザ（人間）の視野角より広い範囲を撮像した撮像画像から、設定された視覚特性パラメータに基づいてクリッピングすることができる。
【００７６】
そして、図３のステップＳ１１８において、主制御部１０は、知覚データ変換部１０ｂにより変換された画像データ（変換画像）を表示部２に表示するよう表示制御部１７に指示を出す。
【００７７】
上述したように、本実施形態のＨＭＤ１によれば、ユーザ８が見ている景色を、ユーザ８に選択された生物の眼で見える景色にリアルタイムで変換し、提供することができる。なお本実施形態による知覚データ変換部１０ｂは、各生物の進化に応じた知覚特性パラメータに基づいて知覚データを変換することも可能である。生物は、進化に応じて感覚機構が変化しているので、知覚データ変換部１０ｂは、例えば選択した生物の３０００万年前の見え方や２億年前の見え方等も、視覚特性パラメータとしてデータベース化されているものを取得すれば対応することができる。
【００７８】
ここで、図７に、所望の生物の時代を指定できる入力画面３２の一例を示す。図７に示すように、入力画面３２は、例えば魚のアイコン３１ｃが選択された場合に表示される画面であって、選択された魚のアイコン３１ｃと、魚の時代を指定するための時代バー表示３３を含む。ユーザ８は、視線入力、ジェスチャー入力、または音声入力により、所望の時代を指定することができる。
【００７９】
以上、図３〜７を参照して本実施形態による視覚変換処理について具体的に説明した。なお本実施形態によるＨＭＤ１は、図７に示す視覚変換処理に限定されず、聴覚変換処理、嗅覚変換処理等、各種の感覚器官で感知される知覚データの変換処理が可能である。一例として、本実施形態による聴覚変換処理について図８を参照して説明する。
【００８０】
図８は、第１の実施形態による聴覚変換処理について示すフローチャートである。図８に示すように、まず、ステップＳ１２３において、ＨＭＤ１は、ユーザ８により聴覚変換モードに設定される。聴覚変換モードの設定は、例えばＨＭＤ１のイヤホンスピーカ５ａ付近に設けられたスイッチ（不図示）の操作により設定されてもよい。
【００８１】
次に、ステップＳ１２６において、ＨＭＤ１の主制御部１０は、選択画面生成部１０ｄにより生成した生物選択画面（図４参照）を、表示部２に表示するよう表示制御部１７に指示を出す。ユーザ８は、所望の生物のアイコン３１を、視線入力、ジェスチャー入力、または音声入力により選択する。なお、ＨＭＤ１は、所望の生物の選択を、イヤホンスピーカ５ａからの音声出力によりユーザ８に促してもよい。
【００８２】
次いで、ステップＳ１２９において、知覚特性パラメータ設定部１０ａは、選択された生物に応じた変換Ｅａｒ−Ｔｎテーブルを呼び出し、聴覚変換用の聴覚特性パラメータを設定する。
【００８３】
次に、ステップＳ１３２において、音声入力部６は、周囲の音を集音し、集音されたオーディオ信号は音声信号処理部１５を介して知覚データ変換部１０ｂに送られる。なお音声入力部６による集音は、上記Ｓ１２３で聴覚変換モードが設定されてから継続的に行われていてもよい。
【００８４】
続いて、ステップＳ１３５において、知覚データ変換部１０ｂは、音声入力部６により集音されたオーディオ信号を、知覚特性パラメータ設定部１０ａにより設定された聴覚特性パラメータに基づいて変換する。例えば、知覚データ変換部１０ｂは、設定された聴覚特性パラメータに基づいて、音声入力部６により集音された超音波を可聴音に変換する。
【００８５】
そして、ステップＳ１３８において、主制御部１０は、知覚データ変換部１０ｂにより変換されたオーディオ信号（変換音声データ）を音声出力部５から再生するよう音声制御部１８に指示を出す。
【００８６】
これにより、ＨＭＤ１は、ユーザ８が聞いている音を、所望の生物の耳で聞いた場合の音にリアルタイムに変換して再生することができる。
【００８７】
以上、ＨＭＤ１による聴覚変換処理について説明した。
【００８８】
さらに、本実施形態によるＨＭＤ１は、図４に示すような選択画面３０からユーザに選択された生物に限定されず、周囲に存在する生物を自動認識し、認識した生物による知覚特性パラメータを設定してもよい。これにより、ＨＭＤ１は、ユーザ８の周囲に生息している生物の知覚特性パラメータを自動的に設定することができる。以下、図９を参照して周囲に存在する生物を自動認識する場合の動作処理について説明する。
【００８９】
図９は、第１の実施形態による他の視覚変換処理を示すフローチャートである。図９に示すように、まず、ステップＳ１４３において、ＨＭＤ１は、ユーザ８により視覚変換モードに設定される。視覚変換モードの設定は、例えばＨＭＤ１の表示部２付近に設けられたスイッチ（不図示）の操作により設定されてもよい。
【００９０】
次に、ステップＳ１４６において、ＨＭＤ１の生物認識部１０ｃは、ユーザ８の周囲に存在する生物を認識する。生物の認識は、撮像部３で撮像された周囲の撮像画像の解析結果に基づいて認識されてもよい。また、認識する生物には、人間以外の動物や昆虫の他、ユーザ８以外の人間も含まれる。人間を認識した場合、生物認識部１０ｃは、人間の種別（人種）や性別等を同定する。例えば人種の違いによって眼の色が異なり、光の感じ方や色の見え方が異なる場合がある。また、人種の違いによって環境や文化の違いが生じ、色の括り方が異なり、結果的に見え方が異なる場合がある。さらに、性別によっても見え方が異なることがある。例えば果物のオレンジは、男性には女性より少し赤く見えている可能性があり、また、緑の草は、ほぼ常に女性のほうがより緑色に見え、男性には少し黄色がかって見えている可能性がある。このように人種の違いや性別の違いによって見える世界が異なる場合があるので、生物認識部１０ｃは、周辺に存在する生物として、他の人間も認識し、認識結果を知覚特性パラメータ設定部１０ａに出力する。
【００９１】
次いで、ステップＳ１４９において、知覚特性パラメータ設定部１０ａは、生物認識部１０ｃで認識された生物に応じた変換Ｔｎテーブルをストレージ部２２または通信部２１を介してクラウドから呼び出し、視覚変換用の視覚特性パラメータを設定する。
【００９２】
次に、ステップＳ１５２において、撮像部３は、周囲の景色を撮像し、撮像画像は撮像信号処理部１２および撮像画像解析部１３を介して知覚データ変換部１０ｂに送られる。なお撮像部３による撮像は、上記Ｓ１０３で視覚変換モードが設定されてから継続的に行われていてもよい。
【００９３】
続いて、ステップＳ１５５において、知覚データ変換部１０ｂは、撮像部３により撮像された撮像画像を、知覚特性パラメータ設定部１０ａにより設定された視覚特性パラメータに基づいて変換する。
【００９４】
そして、ステップＳ１５８において、主制御部１０は、知覚データ変換部１０ｂにより変換された画像データ（変換画像）を表示部２に表示するよう表示制御部１７に指示を出す。
【００９５】
このようにして、ＨＭＤ１は、周囲に存在する生物の視覚特性パラメータを設定し、ユーザ８が見ている景色を、周囲に存在する生物の眼で見た場合の景色にリアルタイムに変換して提供することができる。また、ＨＭＤ１は、周囲に存在する生物として、他の人間を認識し、人種や性別による見え方の違いを提供することもできるので、夫婦間やカップル間、ホームステイ先などで利用することで、身近に居る性別や人種が異なる相手の見え方を把握することができる。これによりユーザは、身近に居る人の自分とは異なる見え方に驚きや新発見を得ることができる。
【００９６】
また、ＨＭＤ１は、人種や性別の他、年齢による見え方の違いを提供してもよく、この場合、子供と親、孫と祖父母、大人と子供（例えば先生と生徒）等の間において、年齢が異なる相手の見え方を把握することができる。ここで、一例として、人種による見え方の違いを考慮した画像データの変換例について、図１０〜図１２を参照して説明する。
【００９７】
図１０は、視覚特性パラメータに基づく虹画像の変換例を示す模式図である。虹の色数は、国や民族、文化圏によって、６色だったり、７色だったり、または４色だったりすることが知られている。人間の眼の構造は同じでも、文化によって色の括り方が異なる場合や、常識が異なる場合があるためである。
【００９８】
そこで、本実施形態によるＨＭＤ１は、認識（同定）した人間の人種（国、民族、文化圏等）に応じた視覚特性パラメータに基づいて、例えばＡ国人であれば虹の色数が７色に強調された変換画像Ｐ１０を提供し、Ｂ国人であれば虹の色数が４色に強調された変換画像Ｐ１１を提供する。これにより、ユーザ８は、人種や文化の違いによる虹の色数の見え方の違いを把握することができる。
【００９９】
図１１は、視覚特性パラメータに基づく月画像の変換例を示す模式図である。月の模様の見え方は、国や民族、文化圏によって、「餅をつくうさぎ」であったり、「大きなカニ」であったり、または「吠えるライオン」であったりすることが知られている。月は常に同じ面を地球に向けているので、地球上から見た月の模様は同じであるが、その土地の自然、習慣、伝統によって見え方が異なる。例えば、日本では「餅をつくうさぎ」によく例えられるが、うさぎがいない太平洋の島々では、うさぎに連想されることはなく、その地域に棲んでいる動物（例えばライオンやワニ等）に例えられる場合が多い。また、その土地に語り継がれた伝説や、神話の人物に見られる場合が多い（例えば「水桶を運ぶ男女」）。
【０１００】
そこで、本実施形態によるＨＭＤ１は、認識（同定）した人間の人種（国、民族、文化圏等）に応じた視覚特性パラメータに基づいて、例えば日本人であればうさぎの姿に強調された変換画像Ｐ１３を提供し、南ヨーロッパの人であればカニの姿に強調された変換画像Ｐ１４を提供する。これにより、ユーザ８は、人種や文化の違いによる月の模様の見え方の違いを把握することができる。
【０１０１】
図１２は、視覚特性パラメータに基づく景色画像の変換例を示す模式図である。例えば人間の眼の構造は同じであっても、眼の色（虹彩の色）によって光の感じ方が異なることが知られている。眼の色は、遺伝性の身体的特徴であって、主に虹彩の中のメラニン細胞が作り出すメラニン色素の割合によって決定されるところ、例えば青い眼はメラニン色素が少ないために茶色い眼よりも光を感じやすい（まぶしく感じる）傾向がある。
【０１０２】
そこで、本実施形態によるＨＭＤ１は、認識（同定）した人間の人種から推定される眼の色または同定した眼の色に応じた視覚特性パラメータに基づいて、例えば茶色い眼の人であれば露出を低くした変換画像Ｐ１６、青い眼の人であれば露出を高くした変換画像Ｐ１７を提供する。これにより、ユーザ８は、人種（眼の色）の違いによる光の感じ方の違いを把握することができる。
【０１０３】
以上、人種の違いによる見え方の違いを考慮した画像データの変換例について説明した。なお本実施形態による変換処理は、図９〜図１２を参照して上述した視覚変換処理に限定されず、聴覚変換処理、嗅覚変換処理等、各種の感覚器官で感知される知覚データの変換処理が可能である。
【０１０４】
また、本実施形態によるＨＭＤ１は、診察で医師が用いてもよい。医師に装着されたＨＭＤ１は、周辺に居る患者を自動認識し、患者の知覚特性パラメータを、通信部２１を介してネットワーク上の医療情報サーバから取得し、当該知覚特性パラメータを設定する。医療情報サーバには、予め患者の診察情報や病状情報に基づく知覚特性パラメータが格納されている。そして、ＨＭＤ１は、設定した知覚特性パラメータに従って、撮像部３により撮像された撮像画像や、音声入力部６により集音した音声信号データをリアルタイムで変換し、表示部２や音声出力部５から再生する。
【０１０５】
これにより、患者が自分の症状を言葉で正確に伝えられない場合でも、患者の知覚特性パラメータを用いて知覚データを変換することで、患者がどう見え、またはどう聞こえているか等を医師が把握することができる。
【０１０６】
＜２−２．第２の実施形態＞
以上、第１の実施形態によるＨＭＤ１について説明した。第１の実施形態では、ＨＭＤ１が単体の場合における知覚変換処理について説明したが、ＨＭＤ１が複数ある場合は、互いに知覚データや知覚特性パラメータを送受信することも可能である。そこで、第２の実施形態として、ＨＭＤ１が複数ある場合における知覚変換処理について、図１３〜図１８を参照して説明する。
【０１０７】
（２−２−１．概要）
図１３は、第２の実施形態の概要を説明するための図である。図１３に示すように、ユーザ８ｊがＨＭＤ１ｊを装着し、ユーザ８ｔがＨＭＤ１ｔを装着している場合に、ＨＭＤ１ｊは、ユーザ８ｊの知覚特性パラメータをＨＭＤ１ｔに送信したり、ＨＭＤ１ｊで取得した知覚データを併せてＨＭＤ１ｔに送信したりすることができる。
【０１０８】
これにより、ユーザ８ｊは、自分の見え方や聞こえ方をユーザ８ｔと共有することができるので、例えば夫婦間やカップル間、ホームステイ先、親子間、大人と子供（例えば先生と生徒）の間などで複数のＨＭＤ１ｊ、１ｔを利用することで、身近に居る性別や人種、年齢が異なる相手と見え方や聞こえ方を共有することができる。
【０１０９】
（２−２−２．構成）
次に、図１４を参照して本実施形態によるＨＭＤ１ｊ、１ｔの内部構成について説明する。本実施形態によるＨＭＤ１ｊ、１ｔは、図２に示すＨＭＤ１と基本構成は同様であって、主制御部１０の構成が異なる。図１４は、第２の実施形態によるＨＭＤ１ｊ、１ｔの主制御部１０’の機能構成を示す図である。
【０１１０】
図１４に示すように、主制御部１０’は、知覚特性パラメータ設定部１０ａ、知覚データ変換部１０ｂ、知覚特性パラメータ比較部１０ｅ、および通信制御部１０ｆとして機能する。
【０１１１】
知覚特性パラメータ比較部１０ｅは、相手ＨＭＤから受信した知覚特性パラメータを、本ＨＭＤの装着者の知覚特性パラメータと比較し、一致するか否かを判断する。一致しない場合、通信制御部１０ｆまたは知覚特性パラメータ設定部１０ａに比較結果（一致しなかった旨）を出力する。
【０１１２】
通信制御部１０ｆは、知覚特性パラメータ比較部１０ｅにより一致しなかった旨の比較結果を受け取った場合、通信部２１により、本ＨＭＤの装着者の知覚特性パラメータを、相手ＨＭＤに送信するよう制御する。また、通信制御部１０ｆは、本ＨＭＤの装着者の知覚特性パラメータと共に、本ＨＭＤで取得した知覚データも相手ＨＭＤに送信するよう制御してもよい。
【０１１３】
知覚特性パラメータ設定部１０ａは、知覚特性パラメータ比較部１０ｅにより一致しなかった旨の比較結果を受け取った場合、相手ＨＭＤから受信した知覚特性パラメータを設定する。若しくは、知覚特性パラメータ設定部１０ａは、相手ＨＭＤにより既に知覚特性パラメータの比較が行われ、一致しないために相手ＨＭＤから知覚特性パラメータが送信された場合、当該送信された知覚特性パラメータを設定してもよい。
【０１１４】
知覚データ変換部１０ｂは、知覚特性パラメータ設定部１０ａにより設定された知覚特性パラメータ（本実施形態では、相手ＨＭＤから受信した知覚特性パラメータ）に基づいて、本ＨＭＤで取得した知覚データまたは相手ＨＭＤから受信した知覚データを変換する。
【０１１５】
以上、本実施形態によるＨＭＤ１ｊ、１ｔの主制御部１０’の機能構成について説明した。なお知覚特性パラメータ設定部１０ａおよび知覚データ変換部１０ｂは、第１の実施形態による同構成と同様の処理を行うことも可能である。
【０１１６】
（２−２−３．動作処理）
続いて、本実施形態による変換処理について図１５〜図１８を参照して具体的に説明する。
【０１１７】
図１５は、第２の実施形態による知覚変換処理を示すフローチャートである。図１５に示すように、まず、ステップＳ２０３において、ＨＭＤ１ｊは、ユーザ８ｊにより人間同士の知覚変換モードに設定される。知覚変換モードの設定は、例えばＨＭＤ１の表示部２やイヤホンスピーカ５ａ付近に設けられたスイッチ（不図示）の操作により設定されてもよい。
【０１１８】
次いで、ステップＳ２０６において、ＨＭＤ１ｊは、周辺に存在する生物（例えばユーザ８ｔ）を認識し、ユーザ８ｔのＨＭＤ１ｔにアクセスを行う。図１３に示す例では、例えばＨＭＤ１ｊが、近くに居るユーザ８ｔを自動認識し、ユーザ８ｔが装着するＨＭＤ１ｔに対して、ユーザ８ｔの知覚特性パラメータを要求するためのアクセスを行う。
【０１１９】
次に、ステップＳ２０９において、ＨＭＤ１ｔは、ＨＭＤ１ｊからの要求に応じて、ユーザ８ｔの知覚特性パラメータをＨＭＤｊに送信する。
【０１２０】
続いて、ステップＳ２１２において、ＨＭＤ１ｊの知覚特性パラメータ比較部１０ｅは、ＨＭＤ１ｊの装着者であるユーザ８ｊの知覚特性パラメータを、ＨＭＤ１ｔから送信された知覚特性パラメータと比較し、異なるか否かを判断する。
【０１２１】
異ならない場合（Ｓ２１２／Ｎｏ）、ステップＳ２１３において、ＨＭＤ１ｊは、ＨＭＤ１ｔへの送信処理は行わない。
【０１２２】
一方、異なる場合（Ｓ２１２／Ｙｅｓ）、ステップＳ２１５において、ＨＭＤ１ｊは、変換Ｔｎテーブルを呼び出し、ＨＭＤ１ｊが装着されているユーザ８ｊの知覚特性パラメータＴｊを抽出する。
【０１２３】
次いで、ステップＳ２１８において、ＨＭＤ１ｊの通信制御部１０ｆは、知覚特性パラメータＴｊをＨＭＤ１ｔに送信するよう制御する。
【０１２４】
次に、ステップＳ２２１において、ＨＭＤ１ｔは、ユーザ８ｔの周囲から知覚データを取得する。
【０１２５】
次いで、ステップＳ２２４において、ＨＭＤ１ｔは、知覚特性パラメータ設定部１０ａにより、ＨＭＤ１ｊから受信した知覚特性パラメータＴｊを設定し、知覚データ変換部１０ｂにより、知覚特性パラメータＴｊに基づいてユーザ８ｔの周囲から取得した知覚データを変換する。
【０１２６】
そして、ステップＳ２２７において、ＨＭＤ１ｔは、変換した知覚データを出力する。
【０１２７】
これにより、ユーザ８ｊに装着されたＨＭＤ１ｊは、ユーザ８ｊの知覚特性パラメータをユーザ８ｔのＨＭＤ１ｔに送信し、ＨＭＤ１ｔによりユーザ８ｊの知覚特性パラメータに基づいて変換された知覚データをユーザ８ｔに提供させることができる。ユーザ８ｔは、自身の周囲で取得される知覚データがユーザ８ｊの知覚特性パラメータに基づいて変換され、出力されることで、ユーザ８ｊの感覚機構でどのように感知されるかを体感することができる。
【０１２８】
以上、図１５を参照して本実施形態によるＨＭＤ１ｊ、ＨＭＤ１ｔの知覚変換処理について説明した。なお上記知覚変換処理には、視覚変換処理、聴覚変換処理、および嗅覚変換処理等が含まれる。知覚変換処理の具体例として、以下図１６を参照し、ＨＭＤ１ｊ、ＨＭＤ１ｔが視覚変換処理を行う場合について説明する。
【０１２９】
図１６は、第２の実施形態による視覚変換処理を示すフローチャートである。図１６に示すように、まず、ステップＳ２４３において、ＨＭＤ１ｊは、ユーザ８ｊにより人間同士の視覚変換モードに設定される。視覚変換モードの設定は、例えばＨＭＤ１の表示部２付近に設けられたスイッチ（不図示）の操作により設定されてもよい。
【０１３０】
次いで、ステップＳ２４６において、ＨＭＤ１ｊは、周辺に存在するＨＭＤ１ｔにアクセスを行う。具体的には、ＨＭＤ１ｊは、ＨＭＤ１ｔに対して、ＨＭＤ１ｔを装着しているユーザ８ｔの視覚特性パラメータを要求する。
【０１３１】
次に、ステップＳ２４９において、ＨＭＤ１ｔは、ＨＭＤ１ｊからの要求に応じて、ユーザ８ｔの視覚特性パラメータＥｙｅ−ＴｔをＨＭＤｊに送信する。
【０１３２】
続いて、ステップＳ２５２において、ＨＭＤ１ｊの知覚特性パラメータ比較部１０ｅは、ＨＭＤ１ｊの装着者であるユーザ８ｊの視覚特性パラメータと、ＨＭＤ１ｔから送信された視覚特性パラメータＥｙｅ−Ｔｔを比較し、異なるか否かを判断する。
【０１３３】
異ならない場合（Ｓ２５２／Ｎｏ）、ステップＳ２５３において、ＨＭＤ１ｊは、ＨＭＤ１ｔへの送信処理は行わない。
【０１３４】
一方、異なる場合（Ｓ２５２／Ｙｅｓ）、ステップＳ２５５において、ＨＭＤ１ｊは、変換Ｔｎテーブルを呼び出し、装着者８ｊの視覚特性パラメータＥｙｅ−Ｔｊを抽出する。
【０１３５】
次いで、ステップＳ２５８において、ＨＭＤ１ｊの通信制御部１０ｆは、視覚特性パラメータＥｙｅ−ＴｊをＨＭＤ１ｔに送信するよう制御する。
【０１３６】
次に、ステップＳ２６１において、ＨＭＤ１ｔは、ＨＭＤ１ｔの撮像部３により周囲の景色を撮像し、撮像画像を取得する。
【０１３７】
次いで、ステップＳ２６４において、ＨＭＤ１ｔは、知覚特性パラメータ設定部１０ａによりＨＭＤ１ｊから受信した視覚特性パラメータＥｙｅ−Ｔｊを設定し、知覚データ変換部１０ｂにより視覚特性パラメータＥｙｅ−Ｔｊに基づいて上記Ｓ２６１で取得した撮像画像を変換する。
【０１３８】
そして、ステップＳ２６７において、ＨＭＤ１ｔは、変換した画像データをＨＭＤ１ｔの表示部２に表示する。
【０１３９】
これにより、ユーザ８ｊに装着されたＨＭＤ１ｊは、ユーザ８ｊの視覚特性パラメータをユーザ８ｔのＨＭＤ１ｔに送信し、ＨＭＤ１ｔによりユーザ８ｊの視覚特性パラメータに基づいて変換された画像データをユーザ８ｔに見せることができる。ユーザ８ｔは、自身の周囲の景色がユーザ８ｊの視覚特性パラメータに基づいて変換され、表示されることで、周囲の景色がユーザ８ｊの眼ではどのように見えているかを体感することができる。
【０１４０】
以上、ＨＭＤ１ｊ、ＨＭＤ１ｔが視覚変換処理を行う場合について具体的に説明した。続いて、ＨＭＤ１ｊ、ＨＭＤ１ｔが聴覚変換処理を行う場合について図１７を参照して説明する。
【０１４１】
図１７は、第２の実施形態による聴覚変換処理を示すフローチャートである。図１７に示すように、まず、ステップＳ２７３において、ＨＭＤ１ｊは、ユーザ８ｊにより人間同士の聴覚変換モードに設定される。聴覚変換モードの設定は、例えばＨＭＤ１のイヤホンスピーカ５ａ付近に設けられたスイッチ（不図示）の操作により設定されてもよい。
【０１４２】
次いで、ステップＳ２７６において、ＨＭＤ１ｊは、周辺に存在するＨＭＤ１ｔにアクセスを行う。具体的には、ＨＭＤ１ｊは、ＨＭＤ１ｔに対して、ＨＭＤ１ｔを装着しているユーザ８ｔの聴覚特性パラメータを要求する。
【０１４３】
次に、ステップＳ２７９において、ＨＭＤ１ｔは、ＨＭＤ１ｊからの要求に応じて、ユーザ８ｔの聴覚特性パラメータＥａｒ−ＴｔをＨＭＤｊに送信する。
【０１４４】
続いて、ステップＳ２８２において、ＨＭＤ１ｊの知覚特性パラメータ比較部１０ｅは、ＨＭＤ１ｊの装着者であるユーザ８ｊの聴覚特性パラメータを、ＨＭＤ１ｔから送信された聴覚特性パラメータＥａｒ−Ｔｔと比較し、異なるか否かを判断する。
【０１４５】
異ならない場合（Ｓ２８２／Ｎｏ）、ステップＳ２８３において、ＨＭＤ１ｊは、ＨＭＤ１ｔへの送信処理は行わない。
【０１４６】
一方、異なる場合（Ｓ２８２／Ｙｅｓ）、ステップＳ２８５において、ＨＭＤ１ｊは、変換Ｔｎテーブルを呼び出し、装着者８ｊの聴覚特性パラメータＥａｒ−Ｔｊを抽出する。
【０１４７】
次いで、ステップＳ２８８において、ＨＭＤ１ｊの通信制御部１０ｆは、聴覚特性パラメータＥａｒ−ＴｊをＨＭＤ１ｔに送信するよう制御する。
【０１４８】
次に、ステップＳ２９１において、ＨＭＤ１ｔは、ＨＭＤ１ｔの音声入力部６により周囲の音を集音し、音声信号データ（オーディオ信号）を取得する。
【０１４９】
次いで、ステップＳ２９４において、ＨＭＤ１ｔは、知覚特性パラメータ設定部１０ａによりＨＭＤ１ｊから受信した聴覚特性パラメータＥａｒ−Ｔｊを設定し、知覚データ変換部１０ｂにより聴覚特性パラメータＥａｒ−Ｔｊに基づいて上記Ｓ２９１で取得したオーディオ信号を変換する。
【０１５０】
そして、ステップＳ２９７において、ＨＭＤ１ｔは、変換したオーディオ信号をＨＭＤ１ｔの音声出力部５（スピーカ）から再生する。
【０１５１】
これにより、ユーザ８ｊに装着されたＨＭＤ１ｊは、ユーザ８ｊの聴覚特性パラメータをユーザ８ｔのＨＭＤ１ｔに送信し、ＨＭＤ１ｔによりユーザ８ｊの聴覚特性パラメータに基づいて変換されたオーディオ信号をユーザ８ｔに聞かせることができる。ユーザ８ｔは、自身の周囲の音がユーザ８ｊの聴覚特性パラメータに基づいて変換され、再生されることで、周囲の音がユーザ８ｊの耳ではどのように聞こえているかを体感することができる。
【０１５２】
以上、図１５〜図１７を参照してＨＭＤ１ｊが、ユーザ８ｊの知覚特性パラメータをユーザ８ｔが装着するＨＭＤ１ｔに送信する場合について説明した。なお本実施形態によるＨＭＤ１ｊ、ＨＭＤ１ｔの知覚変換処理は、図１５〜図１７に示す例に限定されず、例えばＨＭＤ１ｊで取得した知覚データを併せてＨＭＤ１ｔに送信してもよい。以下、図１８を参照して具体的に説明する。
【０１５３】
図１８は、第２の実施形態による他の知覚変換処理を示すフローチャートである。図１８のステップＳ２０３〜Ｓ２１８に示す処理は、図１５に示す同ステップの処理と同様であるので、ここでの説明は省略する。
【０１５４】
次いで、ステップＳ２２２において、ＨＭＤ１ｊは、ユーザ８ｊの周囲から知覚データを取得する。具体的には、例えばＨＭＤ１ｊは、ＨＭＤｊの撮像部３によりユーザ８ｊの周囲の景色を撮像した撮像画像を取得したり、ＨＭＤｊの音声入力部６によりユーザ８ｊの周囲の音を集音したオーディオ信号を取得したりする。
【０１５５】
次に、ステップＳ２２３において、ＨＭＤ１ｊの通信制御部１０ｆは、ユーザ８ｔの周囲から取得した知覚データをＨＭＤ１ｔに送信するよう制御する。
【０１５６】
次いで、ステップＳ２２５において、ＨＭＤ１ｔは、知覚特性パラメータ設定部１０ａにより、ＨＭＤ１ｊから受信した知覚特性パラメータＴｊを設定し、知覚データ変換部１０ｂにより、知覚特性パラメータＴｊに基づいてＨＭＤ１ｊから送信された知覚データを変換する。
【０１５７】
そして、ステップＳ２２７において、ＨＭＤ１ｔは、変換した知覚データを出力する。
【０１５８】
これにより、ユーザ８ｊに装着されたＨＭＤ１ｊは、ユーザ８ｊの知覚特性パラメータと知覚データをＨＭＤ１ｔに送信し、ＨＭＤ１ｔによりユーザ８ｊの知覚特性パラメータに基づいて変換された知覚データをユーザ８ｔに提供させることができる。ユーザ８ｔは、ユーザ８ｊの周囲で取得される知覚データがユーザ８ｊの知覚特性パラメータに基づいて変換され、出力されることで、ユーザ８ｊが自身の感覚機構でどのように周囲を感知しているかを体感することができる。
【０１５９】
具体的には、例えばユーザ８ｔは、ユーザ８ｊが現在見ている景色を、ユーザ８ｊの眼で見ているように見ることができる。
【０１６０】
以上、ＨＭＤ１ｊにより、ＨＭＤ１ｔに対して知覚特性パラメータや知覚データを送信する旨を説明した。なおＨＭＤ１ｊは、ＨＭＤ１ｔから受信した知覚特性パラメータが、ユーザ８ｊの知覚特性パラメータと異なる場合、ＨＭＤ１ｔから受信した知覚特性パラメータを設定し、これに基づいてＨＭＤ１ｊで取得した知覚データを変換してユーザ８ｊに提供してもよい。また、ＨＭＤ１ｊは、ＨＭＤ１ｔから受信した知覚特性パラメータが、ユーザ８ｊの知覚特性パラメータと異なる場合、ＨＭＤ１ｔから受信した知覚特性パラメータを設定し、これに基づいてＨＭＤ１ｔから受信した知覚データを変換してユーザ８ｊに提供してもよい。
【０１６１】
＜＜３．まとめ＞＞
上述したように、本実施形態によるＨＭＤ１では、所望の生物に応じた知覚特性パラメータに基づいて、ユーザ８が現在感知している知覚データを、構造的に異なる他の生物の感覚機構で感知された場合の知覚データに実時間で変換することができる。これにより、ユーザ８は、周辺の景色や音を、他の生物の眼や耳で感知した場合の景色や音で体感することができる。
【０１６２】
また、本実施形態によるＨＭＤ１の知覚特性パラメータ設定部１０ａは、ユーザ８に選択された生物、または周辺に存在すると自動的に認識した生物に応じた知覚特性パラメータを設定する。
【０１６３】
さらに、本実施形態によるＨＭＤ１の知覚特性パラメータ設定部１０ａは、人間以外の生物に限らず、ユーザ８と種別や性別が異なる人間に応じた知覚特性パラメータを設定してもよい。
【０１６４】
また、本実施形態によるＨＭＤ１が複数ある場合、装着者の知覚特性パラメータや知覚データを互いに送受信することが可能である。
【０１６５】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１６６】
例えば、ＨＭＤ１に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、上述したＨＭＤ１の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
【０１６７】
なお、本技術は以下のような構成も取ることができる。
（１）
知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、
前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、
を備える、信号処理装置。
（２）
前記信号処理装置は、前記所望の知覚データを選択するための選択画面を生成する生成部をさらに備える、前記（１）に記載の信号処理装置。
（３）
前記知覚特性パラメータは、生物の種別に応じて異なる、前記（１）または（２）に記載の信号処理装置。
（４）
前記信号処理装置は、周辺に存在する生物を自動的に認識する認識部をさらに備え、
前記設定部は、前記認識部により認識された生物に応じた知覚データに変更するための知覚特性パラメータを設定する、前記（１）〜（３）のいずれか１項に記載の信号処理装置。
（５）
前記認識部により認識された生物に応じた知覚特性パラメータは外部から取得される、前記（４）に記載の信号処理装置。
（６）
前記信号処理装置は、ユーザ周辺の知覚データを取得する取得部をさらに備え、
前記変換部は、前記取得部により取得された知覚データを、前記知覚特性パラメータに基づいて変換する、前記（１）〜（５）のいずれか１項に記載の信号処理装置。
（７）
前記信号処理装置は、前記認識部により認識された生物周辺の知覚データを受信する受信部をさらに備え、
前記変換部は、前記受信部により取得された知覚データを、前記知覚特性パラメータに基づいて変換する、前記（４）に記載の信号処理装置。
（８）
前記信号処理装置は、前記認識部により認識された生物に応じた知覚特性パラメータが、ユーザの知覚特性パラメータと異なる場合に、前記ユーザの知覚特性パラメータを、前記生物が有するデバイスに送信する送信部をさらに備える、前記（４）に記載の信号処理装置。
（９）
前記信号処理装置は、ユーザ周辺の知覚データを取得する取得部をさらに備え、
前記送信部は、前記取得部により取得された前記ユーザ周辺の知覚データも併せて送信する、前記（８）に記載の信号処理装置。
（１０）
前記信号処理装置は、前記変換部により変換された前記所望の知覚データを再生する再生部をさらに備える、前記（１）〜（９）のいずれか１項に記載の信号処理装置。
（１１）
前記知覚データは、画像データ、音響データ、圧力データ、温度データ、湿度データ、味データ、または匂いデータである、前記（１）〜（１０）のいずれか１項に記載の信号処理装置。
（１２）
前記知覚特性パラメータは、視覚特性パラメータ、聴覚特性パラメータ、触覚特性パラメータ、味覚特性パラメータ、または嗅覚特性パラメータである、前記（１）〜（１１）のいずれか１項に記載の信号処理装置。
（１３）
コンピュータを、
知覚データを所望の知覚データに変更するための知覚特性パラメータを設定する設定部と、
前記設定部により設定された知覚特性パラメータに従って、現在取得した知覚データを前記所望の知覚データに実時間で変換する変換部と、
として機能させるためのプログラムを記憶した記憶媒体。
【符号の説明】
【０１６８】
１    ＨＭＤ（Ｈｅａｄ  Ｍｏｕｎｔｅｄ  Ｄｉｓｐｌａｙ）
２    表示部
３    撮像部
３ａ    撮像レンズ
４    照明部
４ａ    発光部
５    音声出力部
６    音声入力部
１０    主制御部
１０ａ    知覚特性パラメータ設定部
１０ｂ    知覚データ変換部
１０ｃ    生物認識部
１０ｄ    選択画面生成部
１１    撮像制御部
１２    撮像信号処理部
１３    撮像画像解析部
１４    照明制御部
１５    音声信号処理部
１７    表示制御部
１８    音声制御部
２１    通信部
２２    ストレージ部
３０    変換画面
３１ａ〜３１ｈ    アイコン
Ｐ０、Ｐ１    撮像画像
Ｐ２〜Ｐ１７    変換画像
【図１】
2014165706.tif 000003
【図２】
2014165706.tif 000004
【図３】
2014165706.tif 000005
【図４】
2014165706.tif 000006
【図５】
2014165706.tif 000007
【図６Ａ】
2014165706.tif 000008
【図６Ｂ】
2014165706.tif 000009
【図６Ｃ】
2014165706.tif 000010
【図７】
2014165706.tif 000011
【図８】
2014165706.tif 000012
【図９】
2014165706.tif 000013
【図１０】
2014165706.tif 000014
【図１１】
2014165706.tif 000015
【図１２】
2014165706.tif 000016
【図１３】
2014165706.tif 000017
【図１４】
2014165706.tif 000018
【図１５】
2014165706.tif 000019
【図１６】
2014165706.tif 000020
【図１７】
2014165706.tif 000021
【図１８】
2014165706.tif 000022