(57)【要約】【課題】知覚に対する入力の矛盾により発生する酔いを低減する。【解決手段】装置であって、ユーザの頭部の動きを示す頭位情報を取得する第１取得部と、視覚及び前庭感覚へ入力される刺激に関連する刺激情報を取得する第２取得部と、頭位情報及び刺激情報に基づいて、酔いを低減する身体の動きを発生させる効果音の音データを生成する生成部と、を備え、生成部は、頭位情報に基づいて前記ユーザの頭部の位置の変化量を算出し、刺激情報に基づいて、視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量を算出し、ユーザの頭部の位置の変化量及び前記推定量に基づいて、ユーザの酔い感覚の強さを示す酔い感覚強度を算出し、酔い感覚強度に基づいて、音データの特徴量を算出するための低減量を算出し、低減量に基づいて音データの特徴量を算出する。【選択図】図３
2018126185.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの酔いを低減する装置であって、
前記ユーザの頭部の動きを示す頭位情報を取得する第１取得部と、
視覚及び前庭感覚へ入力される刺激に関連する刺激情報を取得する第２取得部と、
前記頭位情報及び前記刺激情報に基づいて、酔いを低減する身体の動きを発生させる効果音の音データを生成する生成部と、を備え、
前記生成部は、
前記頭位情報に基づいて前記ユーザの頭部の位置の変化量を算出し、
前記刺激情報に基づいて、視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量を算出し、
前記ユーザの頭部の位置の変化量及び前記推定量に基づいて、前記ユーザの酔い感覚の強さを示す酔い感覚強度を算出し、
前記酔い感覚強度に基づいて、前記音データの特徴量を算出するための低減量を算出し、
前記低減量に基づいて音データの特徴量を算出することによって前記音データを生成することを特徴とする装置。
【請求項２】
請求項１に記載の装置であって、
前記装置は、前記ユーザの個性に基づいて前記音データを補正するための調整情報を保持し、
前記生成部は、
対象のユーザの個性を示すデータを取得し、
前記対象のユーザの個性を示すデータに基づいて前記調整情報を参照することによって、前記音データの特徴量を補正し、
前記補正された音データの特徴量に基づいて前記音データを生成することを特徴とする装置。
【請求項３】
請求項２に記載の装置であって、
前記第１取得部は、表示装置に表示される映像を視聴するユーザの前記頭位情報を取得し、
前記第２取得部は、前記映像を表示する映像データを取得し、
前記生成部は、前記映像データに基づいて、前記映像の移動量を前記推定量として算出することを特徴とする装置。
【請求項４】
請求項２に記載の装置であって、
前記第１取得部は、輸送機器に搭乗するユーザの前記頭位情報を取得し、
前記第２取得部は、前記輸送機器の動きを示すデータを取得し、
前記生成部は、前記輸送機器の動きを示すデータに基づいて、前記輸送機器の移動量を前記推定量として算出することを特徴とする装置。
【請求項５】
請求項２に記載の装置であって、
前記音データの特徴量は、音量、周波数、再生タイミング、及び再生時間の少なくともいずれかであることを特徴とする装置。
【請求項６】
請求項２に記載の装置であって、
前記音データに基づいて前記効果音を再生する音出力装置と接続し、
前記音データを前記音出力装置に出力する場合に、前記音出力装置が前記効果音を再生しているか否かを判定し、
前記音出力装置が前記効果音を再生していないと判定された場合、前記音出力装置に前記音データを出力することを特徴とする装置。
【請求項７】
ユーザの酔いを低減する効果音の音データを生成する装置が実行する音データの生成方法であって、
前記装置は、演算装置及び前記演算装置に接続される記憶装置を有し、
前記音データの生成方法は、
前記演算装置が、前記ユーザの頭部の動きを示す頭位情報を取得する第１のステップと、
前記演算装置が、視覚及び前庭感覚へ入力される刺激に関連する刺激情報を取得する第２のステップと、
前記演算装置が、前記頭位情報に基づいて前記ユーザの頭部の位置の変化量を算出する第３のステップと、
前記演算装置が、前記刺激情報に基づいて、視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量を算出する第４のステップと、
前記演算装置が、前記ユーザの頭部の位置の変化量及び前記推定量に基づいて、前記ユーザの酔い感覚の強さを示す酔い感覚強度を算出する第５のステップと、
前記演算装置が、前記酔い感覚強度に基づいて、前記音データの特徴量を算出するための低減量を算出する第６のステップと、
前記演算装置が、前記低減量に基づいて音データの特徴量を算出することによって前記音データを生成する第７のステップと、を含むことを特徴とする音データの生成方法。
【請求項８】
請求項７に記載の音データの生成方法であって、
前記装置は、前記ユーザの個性に基づいて前記音データを補正するための調整情報を保持し、
前記第６のステップは、
前記演算装置が、対象のユーザの個性を示すデータを取得するステップと、
前記演算装置が、前記対象のユーザの個性を示すデータに基づいて前記調整情報を参照することによって、前記音データの特徴量を補正するステップと、を含み、
前記第７のステップでは、前記演算装置が、前記補正された音データの特徴量に基づいて前記音データを生成することを特徴とする音データの生成方法。
【請求項９】
請求項８に記載の音データの生成方法であって、
前記第１のステップでは、前記演算装置が、表示装置に表示される映像を視聴するユーザの前記頭位情報を取得し、
前記第２のステップでは、前記演算装置が、前記映像を表示する映像データを取得し、
前記第５のステップでは、前記演算装置が、前記映像データに基づいて、前記映像の移動量を前記推定量として算出することを特徴とする音データの生成方法。
【請求項１０】
請求項８に記載の音データの生成方法であって、
前記第１のステップでは、前記演算装置が、輸送機器に搭乗するユーザの前記頭位情報を取得し、
前記第２のステップでは、前記演算装置が、前記輸送機器の動きを示すデータを取得し、
前記第５のステップでは、前記演算装置が、前記輸送機器の動きを示すデータに基づいて、前記輸送機器の移動量を前記推定量として算出することを特徴とする音データの生成方法。
【請求項１１】
請求項８に記載の音データの生成方法であって、
前記音データの特徴量は、音量、周波数、再生タイミング、及び再生時間の少なくともいずれかであることを特徴とする音データの生成方法。
【請求項１２】
請求項８に記載の音データの生成方法であって、
前記音データに基づいて前記効果音を再生する音出力装置と接続し、
前記音データの生成方法は、
前記演算装置が、前記音データを前記音出力装置に出力する場合に、前記音出力装置が前記効果音を再生しているか否かを判定するステップと、
前記演算装置が、前記音出力装置が前記効果音を再生していないと判定された場合、前記音出力装置に前記音データを出力するステップと、を含むことを特徴とする音データの生成方法。
【請求項１３】
ユーザの酔いを低減する効果音の音データを生成する装置が実行するプログラムであって、
前記装置は、演算装置及び前記演算装置に接続される記憶装置を有し、
前記プログラムは、
前記ユーザの頭部の動きを示す頭位情報を取得する第１の手順と、
視覚及び前庭感覚へ入力される刺激に関連する刺激情報を取得する第２の手順と、
前記頭位情報に基づいて前記ユーザの頭部の位置の変化量を算出する第３の手順と、
前記刺激情報に基づいて、視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量を算出する第４の手順と、
前記ユーザの頭部の位置の変化量及び前記推定量に基づいて、前記ユーザの酔い感覚強さを示す酔い感覚強度を算出する第５の手順と、
前記酔い感覚強度に基づいて、前記音データの特徴量を算出するための低減量を算出する第６の手順と、
前記低減量に基づいて音データの特徴量を算出することによって前記音データを生成する第７の手順と、を前記装置に実行させることを特徴とするプログラム。
【請求項１４】
請求項１３に記載のプログラムであって、
前記音データの特徴量は、音量、周波数、再生タイミング、及び再生時間の少なくともいずれかであり、
前記装置は、前記ユーザの個性に基づいて前記音データを補正するための調整情報を保持し、
前記第６の手順は、
対象のユーザの個性を示すデータを取得する手順と、
前記対象のユーザの個性を示すデータに基づいて前記調整情報を参照することによって、前記音データの特徴量を補正する手順と、を含み、
前記第７の手順では、前記装置に、前記補正された音データの特徴量に基づいて前記音データを生成させる手順を含むことを特徴とするプログラム。
【請求項１５】
請求項１４に記載のプログラムであって、
前記音データに基づいて前記効果音を再生する音出力装置と接続し、
前記プログラムは、
前記音データを前記音出力装置に出力する場合に、前記音出力装置が前記効果音を再生しているか否かを判定させる手順と、
前記音出力装置が前記効果音を再生していないと判定された場合、前記音出力装置に前記音データを出力させる手順と、前記装置に実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザの酔いを低減する効果音を出力する装置、方法及びプログラムに関する。
【背景技術】
【０００２】
輸送機器の搭乗中又は映像の視聴中の快適性向上のための課題として、酔いの低減がある。
【０００３】
前述した酔いのうち、動揺病（乗り物酔い）の発生メカニズムについては、複数の感覚器官に入力される刺激の矛盾を主要因とする感覚不一致説が有力な説として知られている。映像酔いは、基本的には身体が静止している状態で発生し、身体の変動及び揺れを伴う動揺病とは発生環境の違いはあるが、動揺病と同様に感覚入力の矛盾が主要因と考えられている。
【０００４】
このような酔い低減及び解消を目的とした解決手段として、例えば、特許文献１及び特許文献２のような技術が知られている。
【０００５】
特許文献１には「車両の走行状況を検出する走行状況検出手段１２で検出した車両の走行状況および車両内の状態を検出する車両状況検出手段１３で検出した車両状況に応じて、映像制御手段１４が映像生成手段１１の生成した映像の上に一定時間メッセージ映像を合成させるため、後部座席の乗員に車両でテレビ等の映像を視聴させながら、同時に乗用車の現在および次期動作の認識および予知をさせることができ、後席乗員の負担および危険性を低減させる。」技術を開示している。
【０００６】
特許文献２には「動揺感抑制装置において、電流指令値入力部２００は、傾斜センサ５１−１，５１−２で船体の動揺と使用者の動揺を検出する。傾斜センサ５１−１の出力傾斜５１−１ａを元信号として電流指令値１０を生成する。この電流指令値１０に従って電気刺激装置１００が電極間に電流を発生させ、船体の動揺を打ち消す方向の加速度感を使用者に与える。使用者が知覚する動揺感が抑制される。」技術を開示している。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１１−２０５３９号公報
【特許文献２】特開２００６−２８８６６５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
特許文献１の技術の場合、乗員がメッセージ映像に基づいて酔いの解消するための行動等を行う必要がある。特許文献２に記載の技術では、人体に直接電流を流すため人体への影響を考慮して使用可能な時間が短く、また、機器が特殊であるため導入コストが高い。
【０００９】
本発明は、ユーザに負担を与えることなく、ユーザの酔いの程度に合わせた酔い低減を実現する装置、方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
本願において開示される発明の代表的な一例を示せば以下の通りである。すなわち、ユーザの酔いを低減する装置であって、前記ユーザの頭部の動きを示す頭位情報を取得する第１取得部と、視覚及び前庭感覚へ入力される刺激に関連する刺激情報を取得する第２取得部と、前記頭位情報及び前記刺激情報に基づいて、酔いを低減する身体の動きを発生させる効果音の音データを生成する生成部と、を備え、前記生成部は、前記頭位情報に基づいて前記ユーザの頭部の位置の変化量を算出し、前記刺激情報に基づいて、視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量を算出し、前記ユーザの頭部の位置の変化量及び前記推定量に基づいて、前記ユーザの酔い感覚の強さを示す酔い感覚強度を算出し、前記酔い感覚強度に基づいて、前記音データの特徴量を算出するための低減量を算出し、前記低減量に基づいて音データの特徴量を算出することによって前記音データを生成することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、酔いを低減する身体の動きを発生させる効果音を用いることによって、ユーザに負担を与えることなく、ユーザの酔いの程度に合わせた酔いの低減を実現できる。上記した以外の課題、構成及び効果は、以下の実施例の説明により明らかにされる。
【図面の簡単な説明】
【００１２】
【図１】本発明の概念を示す図である。
【図２】実施例１の音生成装置の構成を示す図である。
【図３】実施例１の音生成装置の構成を示す図である。
【図４】実施例１の音生成装置のハードウェア構成及びソフトウェア構成の一例を示す図である。
【図５】実施例１の調整情報の一例を示す図である。実施例１の個人情報入力画面の一例を示す図である。
【図６】実施例１の制御装置が実行する処理を説明する図である。
【図７】実施例１の制御装置が実行する処理を説明する図である。
【図８Ａ】実施例１の端末が再生する効果音の一例を示す図である。
【図８Ｂ】実施例１の端末が再生する効果音の一例を示す図である。
【図９】実施例２の輸送機器に搭載される音生成装置の構成を示す図である。
【図１０】実施例２の音生成装置のハードウェア構成及びソフトウェア構成の一例を示す図である。
【図１１】実施例２の制御装置が実行する処理を説明する図である。
【図１２】実施例３の輸送機器に搭載される音生成装置の構成を示す図である。
【図１３】実施例３の音生成装置のハードウェア構成及びソフトウェア構成の一例を示す図である。
【図１４】実施例３の制御装置が実行する処理を説明する図である。
【発明を実施するための形態】
【００１３】
以下、本発明の実施形態について図面を用いて説明する。以下では、全図を通じて同一の構成に対しては同一の符号を付与して重複する説明を省略する。
【００１４】
図１は、本発明の概念を示す図である。
【００１５】
現在、酔いの発生メカニズムの有力な説として感覚不一致説が最も妥当と考えられている。感覚不一致説では、視覚による知覚及び前庭感覚による知覚の矛盾が酔いの主要因であると考えられている。
【００１６】
図１に示すように、座席に着席したユーザがスクリーンに投影された映像を視聴する場合、ユーザは、頭部を積極的に動かすことはなく視覚刺激を受動的に享受する。そのため、視覚では左方向に動いていると知覚される。しかし、前庭感覚では静止していると知覚される。前述した知覚の矛盾が酔いの原因と考えられる。例えば、視覚誘導性身体運動の大きさと主観的な酔い症状との相関を調査した研究が知られている。
【００１７】
聴覚刺激によって身体運動を誘導できることが研究及び実験から指摘されている。具体的には、聴覚の方向知覚を利用して音の音量及び位相、並びに、周波数の変化及び勾配によって、本人が移動している感覚を生起することができる。
【００１８】
そこで、本発明では、酔いの主原因である前庭感覚及び視覚の知覚の矛盾を解消するための身体の動きを発生させる聴覚刺激をユーザに入力することによって、酔いを低減する。図１では、左方向の動きを抑制するような聴覚刺激をユーザに与えることによって、酔いを低減する。
【実施例１】
【００１９】
図２は、実施例１の音生成装置１の構成を示す図である。
【００２０】
図２では、ユーザが表示装置３０に対峙するように着席して使用する音生成装置１を示す。例えば、ユーザが制御装置１０によって管理される動画等のコンテンツの中から所望のコンテンツを選択し、映像を視聴するユースケースが考えられる。
【００２１】
音生成装置１は、制御装置１０、端末２０、及び表示装置３０から構成される。端末２０及び表示装置３０は、有線又は無線で制御装置１０と接続する。
【００２２】
制御装置１０は、表示装置３０を制御してユーザの視覚に刺激を与える映像を表示し、端末２０を制御してユーザの聴覚に刺激を与える音を再生する。また、制御装置１０は、ユーザの酔いを低減する音の音データの生成及び出力を制御する。制御装置１０は、例えば、一般的な計算機が考えられる。
【００２３】
端末２０は、音データに基づいて音を出力し、また、ユーザの顔向きを検出する。本実施例では、端末２０はユーザの頭部に装着される。端末２０は、例えば、ヘッドフォン等が考えられる。なお、音データには、映像データの表示に伴う音（音楽及び音声等）の音データと、ユーザの酔いを低減する効果音の音データとがある。以下の説明では、ユーザの酔いを低減する効果音を、単に効果音と記載する。
【００２４】
表示装置３０は、映像データに基づいて映像を表示する。表示装置３０は、例えば、プロジェクタ及びモニタ等が考えられる。
【００２５】
なお、一度に複数の映像を投影又は表示する場合、音生成装置１は、複数の表示装置３０を有してもよい。この場合、複数の表示装置３０は、制御装置１０と接続し、また、他の表示装置３０と同期又は非同期に映像を表示する。
【００２６】
図３は、実施例１の音生成装置１のハードウェア構成及びソフトウェア構成の一例を示す図である。
【００２７】
制御装置１０は、制御部１０１、メモリ１０２、センサデータ受信部１０３、比較部１０４、映像データ処理部１０５、映像データ送信部１０６、音データ処理部１０７、及び音データ送信部１０８を有する。なお、制御装置１０は、ＨＤＤ及びＳＳＤ等の内部記憶装置を有してもよい。
【００２８】
制御部１０１は、制御装置１０内の各構成を制御するプロセッサ等の演算装置である。制御部１０１は、メモリ１０２に格納されるプログラムにしたがって処理を実行することによって、特定の機能を実現するモジュールとして動作する。以下の説明では、モジュールを主語に処理を説明する場合、制御部１０１が当該モジュールを実現するプログラムを実行していることを示す。
【００２９】
メモリ１０２は、制御部１０１等のハードウェアが実行するプログラム及びプログラムが使用する情報を格納する。また、メモリ１０２は、プログラムが一時的に使用するワークエリアを含む。
【００３０】
本実施例のメモリ１０２は、制御モジュール１１１を実現するプログラムを格納し、また、コンテンツ情報１１２及び調整情報１１３を格納する。制御モジュール１１１は、制御装置１０全体を制御する。コンテンツ情報１１２は、表示する映像及び映像に伴う音に関する情報である。コンテンツ情報１１２には、映像データ及び音データが含まれる。調整情報１１３は、効果音の特徴量を補正する場合に使用される情報である。
【００３１】
図示していないが、メモリ１０２は、ユーザの個性に関連する情報を管理するユーザ情報を格納してもよい。ユーザ情報は、ユーザの個人情報（名前、年齢、及び性別等）、ユーザの酔いの耐性、及び音生成装置１の使用履歴等から構成されるエントリを含む。
【００３２】
なお、メモリ１０２に格納されるプログラム及び情報は、内部記憶装置に格納されてもよい。この場合、制御部１０１が、内部記憶装置からプログラム及び情報を読み出し、メモリ１０２にプログラム及び情報をロードし、また、メモリ１０２に格納されるプログラムを実行する。
【００３３】
センサデータ受信部１０３は、端末２０が送信したセンサデータを受信し、比較部１０４に出力する。なお、受信するセンサデータは、ユーザの頭部の位置、移動方向、及び移動速度等を特定する値を含む。
【００３４】
比較部１０４は、センサデータ受信部１０３から入力されたセンサデータを用いてユーザの頭部の動揺を示す物理量を算出し、また、当該物理量と再生される映像に関する物理量とを比較することによって、ユーザの酔い感覚の強さ（酔いの程度）を評価するための定量的な値を算出する。以下の説明では、ユーザの酔い感覚の強さを評価するための定量的な値を酔い感覚強度とも記載する。
【００３５】
また、比較部１０４は、酔い感覚強度に基づいて、効果音の特徴量を決定するための物理量を算出する。本実施例では、効果音の特徴量を決定するための物理量を低減量とも記載する。比較部１０４は、低減量に基づいて効果音の特徴量を算出する。
【００３６】
ここで、効果音の特徴量には、音量、再生タイミング、周波数、パンポットの変化速度、及び再生時間が含まれる。なお、前述した以外の項目が特徴量に含まれてもよい。
【００３７】
映像データ処理部１０５は、コンテンツ情報１１２に基づいて、表示装置３０に表示させる映像の映像データを生成する。映像データ処理部１０５は、生成した映像データを映像データ送信部１０６に出力する。なお、映像データは、例えば、カメラで撮影された実写の動画、所定のＣＧから構成される映像、及び実写及びＣＧを組み合わせた映像等を表示するためのデータである。
【００３８】
映像データ送信部１０６は、映像データ処理部１０５から入力された映像データを表示装置３０に送信する。
【００３９】
音データ処理部１０７は、コンテンツ情報１１２に基づいて、映像の再生に伴って端末２０に再生させる音の音データを生成する。例えば、実写の動画とともに再生する音データ、仮想世界の背景及びオブジェクトの動きを表現する音の音データが生成される。
【００４０】
また、音データ処理部１０７は、比較部１０４によって算出された特徴量に基づいて、効果音の音データを生成する。当該音データは、ユーザの動作が反映されたデータである。音データ処理部１０７は、生成された音データを音データ送信部１０８に出力する。なお、音データを生成する機能を有する比較部１０４を生成部として実現してもよい。この場合、生成部は、制御部１０１を介して音データ送信部１０８を出力できるようにすればよい。
【００４１】
音データ送信部１０８は、音データ処理部１０７から入力された音データを端末２０に送信する。
【００４２】
端末２０は、加速度センサ２０１、地磁気センサ２０２、センサデータ送信部２０３、音再生部２０４、及び音データ受信部２０５を有する。
【００４３】
加速度センサ２０１及び地磁気センサ２０２は、端末２０の加速度及び向きを示す値を計測し、当該値を含むセンサデータをセンサデータ送信部２０３に出力する。
【００４４】
なお、端末２０は、加速度センサ２０１のみを用いて生じるユーザの頭部の変位の計測誤差を周期的にリセットできる機構として地磁気センサ２０２を有しているが、地磁気センサ２０２の代わりにジャイロセンサ等の他のセンサを有してもよい。
【００４５】
センサデータ送信部２０３は、加速度センサ２０１及び地磁気センサ２０２から入力されたセンサデータを制御装置１０に送信する。
【００４６】
音データ受信部２０５は、制御装置１０が送信した音データを受信し、音再生部２０４に出力する。
【００４７】
音再生部２０４は、音データに対応する音を出力する。音再生部２０４は、例えば、ヘッドフォンのスピーカ等が考えられる。
【００４８】
なお、本実施例では、端末２０が計測機能及び音の再生機能を有しているが、二つの機能を別々の装置が有する構成でもよい。
【００４９】
表示装置３０は、映像データ受信部３０１及び映像表示部３０２を有する。
【００５０】
映像データ受信部３０１は、制御装置１０が送信した映像データを受信し、映像表示部３０２に出力する。
【００５１】
映像表示部３０２は、映像データに対応する映像を出力する。表示装置３０がプロジェクタである場合、映像表示部３０２はスクリーンに映像を投影し、また、表示装置３０がモニタである場合、映像表示部３０２はモニタ画面に映像を表示する。
【００５２】
なお、映像表示部３０２は、映像を表示する表示面のサイズ及び映像の画質等を調整してもよい。
【００５３】
制御装置１０、端末２０、及び表示装置３０の間のデータの送受信方法は、一般的な通信方法を用いればよいため説明を省略する。なお、制御装置１０と端末２０との間のデータの送受信方法として無線通信方式を用いることによって、制御装置１０及び端末２０を接続線で物理に的に接続する必要がなくなるため、ユーザの動作の制約がなくなる。
【００５４】
図４は、実施例１の調整情報１１３の一例を示す図である。
【００５５】
調整情報１１３は、効果音の特徴量を調整するための情報である。本実施例の調整情報１１３では、音量、再生タイミング、周波数、パンポットの変化速度、及び再生時間の少なくともいずれかを調整するための情報を含む。図４では、周波数を調整するための周波数情報４００を含む調整情報１１３を示す。
【００５６】
周波数情報４００は、年代と可聴周波数の帯域との間の相関を示す情報である。周波数情報４００は、年代４０１及び最大可聴周波数４０２から構成されるエントリを含む。なお、老化による可聴域の変化は、女性の方が男性より緩やかであるという説もあることから、周波数情報４００は、年代、性別、及び最大可聴周波数から構成されるエントリを含んでもよい。
【００５７】
外耳、内耳、及び蝸牛等の器官の周波数特性によって知覚の感度が異なるため、同一の音量の下では、低い周波数の方が酔いの低減効果が高いと考えられる。そのため、周波数情報４００を用いて効果音の周波数を調整できるようにしている。例えば、効果音が、年代に応じた不可聴音となるように周波数が調整される。
【００５８】
なお、図４に示す周波数情報４００は、１０歳単位で区分しているが、より細かい単位で区分してもよい。また、周波数情報４００は、表形式のデータでなくてもよく、年代等を変数とする数式でもよい。
【００５９】
人間の聴力は一般的に老化に伴って音量レベルも低下するため、調整情報１１３は、音量を調整するための情報を含んでもよい。当該情報は、年代及び比率から構成されるエントリを含む。比率は、年齢が大きいほど値が大きくなるように設定する。例えば、４０代の場合は「１倍」、５０代の場合は「１．１倍」、６０代の場合は「１．２倍」に設定される。なお、年代及び音量から構成されるエントリでもよい。
【００６０】
図５は、実施例１の個人情報入力画面の一例を示す図である。
【００６１】
個人情報入力画面５００は、ユーザの個性を入力するための操作画面であり、音生成装置１の利用開始時に表示装置３０に表示される。ユーザは、個人情報入力画面５００を参照し、制御装置１０に接続されるキーボード及びマウス等の入力デバイスを用いて値を入力する。
【００６２】
個人情報入力画面５００は、名前入力欄５０１、年齢入力欄５０２、性別入力欄５０３、酔い頻度入力欄５０４、登録ボタン５０５、及びキャンセルボタン５０６を含む。
【００６３】
名前入力欄５０１は、ユーザの名前を入力する欄である。なお、ユーザを一意に識別できる情報であれば、ユーザの名前以外の情報を入力する欄でもよい。例えば、ユーザのＩＤ等を入力する欄が考えられる。
【００６４】
年齢入力欄５０２は、ユーザの年齢を入力する欄である。本実施例では、１０歳単位で区分した年代を示すプルダウンリストが表示される。なお、年齢入力欄５０２は、直接、数値を入力する欄でもよい。
【００６５】
性別入力欄５０３は、ユーザの性別を入力する欄である。本実施例では、男性及び女性のいずれかを選択するためのラジオボタンが表示される。
【００６６】
酔い頻度入力欄５０４は、ユーザの酔いの耐性を示す値を入力する欄である。本実施例では、酔いの頻度を示すプルダウンリストが表示される。当該プルダウンリストには、「常に酔う」、「よく酔う」、「たまに酔う」、「酔わない」、及び「全く酔わない」が含まれる。本実施例では、ユーザは、酔い頻度入力欄５０４を参照して、映像の視聴中の酔い傾向に該当する値を選択する。
【００６７】
なお、酔い頻度入力欄５０４は、酔いの頻度を示す数値を入力する欄でもよい。例えば、ユーザは、酔い頻度入力欄５０４に「０」から「９」までの数値を入力する。ここで、「０」は全く酔わないことを示し、「９」は必ず酔うことを示す。
【００６８】
登録ボタン５０５は、各入力欄の値を登録するための操作ボタンである。ユーザが登録ボタン５０５を操作した場合、制御部１０１が、所定のインタフェースを介して、各入力欄の値を受信し、各入力欄の値が対応付けられたデータをメモリ１０２に格納する。なお、制御装置１０が、エントリを格納するユーザ情報を管理する場合、入力された値を含むエントリを当該ユーザ情報に登録する。制御部１０１がユーザ情報を管理する場合、ユーザは、音生成装置１の使用開始前に一度だけ個人情報入力画面５００を用いた入力を行えばよい。以後、ユーザ名に基づいて、ユーザ情報からユーザの個性を示すデータが取得される。なお、値の更新が必要な場合には、制御部１０１は、再度、個人情報入力画面５００を表示して、入力を受け付ける。
【００６９】
キャンセルボタン５０６は、値の設定を中止するための操作ボタンである。ユーザがキャンセルボタン５０６を操作した場合、制御部１０１は、各入力欄の値を初期化する。
【００７０】
なお、酔いの耐性は、音生成装置１の使用履歴及び酔い感覚強度の推移に基づいて算出してもよい。
【００７１】
図６及び図７は、実施例１の制御装置１０が実行する処理を説明する図である。
【００７２】
まず、制御装置１０が実行する処理の概要について説明する。制御装置１０は、映像の再生中におけるユーザの頭部の動き及び映像の動きに基づいて、視覚刺激の影響による運動量を算出する。なお、この運動量が視覚誘導性自己運動感覚（Ｖｅｃｔｉｏｎ）と相関する可能性がある。以下の説明では、前述の運動量を動揺量とも記載する。制御装置１０は、動揺量に基づいてユーザの酔い感覚強度を算出し、また、ユーザの酔い感覚強度に基づいて低減量を算出する。
【００７３】
まず、図６を用いてユーザの酔い感覚強度を算出する処理について説明する。以下で説明する処理は、動画の再生中に周期的に実行されてもよいし、動画の再生中にユーザ等の指示を受け付けた場合に実行してもよい。
【００７４】
制御装置１０は、端末２０の加速度センサ２０１及び地磁気センサ２０２によって取得されたセンサデータを取得する（ステップＳ６０１）。
【００７５】
具体的には、センサデータ受信部１０３が、ユーザの頭部の動きを示す頭位情報としてセンサデータを受信する。本実施例では、加速度センサ２０１及び地磁気センサ２０２が計測を行うタイミング（計測間隔）は、予め設定されているものとする。なお、計測間隔は、制御装置１０から適宜変更できるようにしてもよい。また、計測間隔は、ユーザの頭部の動きを詳細に把握するために短いことが望ましい。
【００７６】
制御装置１０は、コンテンツ情報１１２を参照して、表示装置３０に送信された映像データによって表示される映像の移動量を算出する（ステップＳ６０２）。
【００７７】
具体的には、制御部１０１が、コンテンツ情報１１２から映像データを取得し、計測間隔と同一の時間幅における映像の移動量を算出する。映像データは、視覚及び前庭感覚へ入力される刺激に関連する刺激情報の一つとして取得される。
【００７８】
映像の移動量は、ユーザの視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量であり、移動方向及び移動距離を持つベクトル量として表される。制御部１０１は、映像の移動量を比較部１０４に出力する。なお、制御部１０１の指示を受け付けた比較部１０４が、映像の移動量を算出してもよい。
【００７９】
表示される映像が２次元画像である場合、制御部１０１は、ある時点の画像上の画素又は物体等が、次に表示される画像のどの点に移動したかを算出する。なお、当該算出方法は、公知の方法であるため詳細な説明は省略する。
【００８０】
制御装置１０は、動揺量を算出する（ステップＳ６０３）。具体的には、以下のような処理が実行される。
【００８１】
比較部１０４は、センサデータを用いて、所定の時間間隔におけるユーザの頭部の揺れの方向及び大きさを持つベクトル量である頭部の移動量を算出する。なお、比較部１０４は、最初に取得したセンサデータを基準値に設定し、これ以降に受信したセンサデータと基準値との差分を頭部の揺れを示す値として算出する。
【００８２】
比較部１０４は、頭部の移動量及び映像の移動量に基づいて動揺量を算出する。例えば、比較部１０４は、頭部の移動量と映像の移動量との差分を動揺量として算出する。比較部１０４は、動揺量をメモリ１０２に一時的に格納する。
【００８３】
なお、センサデータの計測誤差が存在する場合、比較部１０４は、一定期間の頭部の移動量の平均値及び映像の移動量の平均値を用いて、動揺量を算出してもよい。例えば、映像が左右方向の移動を含まない期間の頭部の揺れは自然な挙動であるため、比較部１０４は、動揺量の大きさを「０」と算出する。また、映像が継続的に左右方向に移動する期間において頭部の揺れが自然な挙動より大きい変化を示す場合、比較部１０４は、頭部の移動量と映像の移動量の差分を動揺量として算出する。
【００８４】
なお、映像の移動量が２次元ベクトルであり、頭部の移動量が３次元ベクトルである場合、映像の移動量を画面の奥行き方向の成分を「０」とする３次元ベクトルとして二つの移動量の差分を取ればよい。
【００８５】
なお、加速度センサ２０１の計測値は、映像の視聴に起因する動揺とは無関係に、自発的な挙動（ノイズ）を含む場合がある。そのため、加速度センサ２０１の計測値と地磁気センサ２０２の計測値とを組み合わせて頭部の移動量を算出し、その後、頭部の移動量と映像の移動量との差分を算出する方法、又は、加速度センサ２０１の計測値に対して周波数成分分析を行って、所定の時間内の画面の動きの周波数に近い特定の周波数帯の成分量を選択的に抽出する方法等を用いて前述のノイズを低減してもよい。以上がステップＳ６０３の説明である。
【００８６】
制御装置１０は、動揺量に基づいて酔い感覚強度を算出する（ステップＳ６０４）。
【００８７】
例えば、比較部１０４は、動揺量の大きさ（スカラー値）を酔い感覚強度として算出する。また、比較部１０４は、統計処理を実行することによって、経時的な動揺量の変動割合を酔い感覚強度として算出する。より具体的には、比較部１０４は、各成分の変動割合の平均値を酔い感覚強度として算出する。
【００８８】
制御装置１０は、酔い感覚強度に基づいて低減量を算出する（ステップＳ６０５）。
【００８９】
具体的には、比較部１０４は、メモリ１０２に格納されるユーザの個性を示すデータ（例えば、ユーザ情報に格納されるエントリ）から酔いの耐性を示す値を取得する。比較部１０４は、酔い感覚強度及び酔いの耐性に基づいて低減量を算出し、制御部１０１を介してメモリ１０２に低減量を格納する。
【００９０】
例えば、比較部１０４は、効果音の特徴量そのものを低減量として算出する。また、当該特徴量を決定する数式が与えられている場合、比較部１０４は、数式の係数又は数式の算出結果を補正する値を低減量として算出する。
【００９１】
なお、メモリ１０２にユーザの個性を示すデータが存在しない場合、比較部１０４は、所定の既定値を用いて処理を実行する。
【００９２】
次に、図７を用いて効果音を再生するための処理について説明する。以下で説明する処理は、動画の再生中に繰り返し実行される。実行周期は任意に設定することができる。
【００９３】
制御装置１０は、効果音を出力する必要があるか否かを判定する（ステップＳ７０１）。
【００９４】
例えば、比較部１０４は、低減量に基づいて効果音を出力するか否かを判定する方法が考えられる。低減量がスカラー値である場合、比較部１０４は、低減量が閾値以上か否かを判定する。低減量がベクトル量である場合、比較部１０４は、少なくとも一つの成分の値が閾値以上か否かを判定し、又は、ベクトル量の内積が閾値以上か否かを判定する。なお、二つ以上の成分について同様の判定を行ってもよい。
【００９５】
判定に使用する閾値は、加速度センサのデータビット幅及び精度に依存するため、予め行われた試験に基づいて決定された値を用いる。なお、当該閾値は適宜変更することができる。
【００９６】
効果音を出力する必要がないと判定された場合、制御装置１０は処理を終了する。
【００９７】
効果音を出力する必要があると判定された場合、制御装置１０は、効果音の特徴量を算出する（ステップＳ７０２）。具体的には、比較部１０４が、低減量に基づいて効果音の特徴量を算出し、制御部１０１を介して当該特徴量をメモリ１０２に格納する。
【００９８】
例えば、低減量を用いて特徴量を決定する数式が与えられている場合、比較部１０４は、低減量及び数式に基づいて特徴量を算出し、また、ユーザの個性に基づいて調整情報１１３を参照して、算出された特徴量を補正する。なお、調整情報１１３は特徴量の算出時に用いてもよい。例えば、数式に設定する定数を調整情報１１３に基づいて選択する方法等が考えられる。比較部１０４は、算出された特徴量をメモリ１０２に格納する。
【００９９】
調整情報１１３に基づいて、効果音の音データの特徴量を補正することによって、効果音による酔いの低減効果を向上させ、また、ユーザの負担の低減等が可能となる。
【０１００】
なお、効果音の特徴量そのものが低減量として算出されている場合には、ステップＳ７０２の処理を省略してもよい。
【０１０１】
制御装置１０は、他の効果音の再生中であるか否かを判定する（ステップＳ７０３）。例えば、制御装置１０が効果音の再生開始時及び再生終了時の状態を管理することによって、他の効果音の再生中である否かを判定できる。なお、当該判定は、制御モジュール１１１によって実行される。
【０１０２】
他の効果音の再生中であると判定された場合、制御装置１０は処理を終了する。この場合、効果音の特徴量に関するデータは破棄されてもよい。なお、一定期間経過後に、ステップＳ７０３の判定を再度実行するようにしてもよい。
【０１０３】
他の効果音の再生中でないと判定された場合、制御装置１０は、効果音の音データを生成し、当該音データを端末２０に送信することによって、効果音を再生する（ステップＳ７０４）。その後、制御装置１０は、処理を終了する。
【０１０４】
具体的には、制御部１０１が、メモリ１０２に格納される特徴量を音データ処理部１０７に出力し、効果音の音データの生成を指示する。音データ処理部１０７は、特徴量に基づいて音データを生成し、当該音データを音データ送信部１０８に出力する。音データ送信部１０８は、音データを端末２０に送信する。端末２０の音再生部２０４は、受信した音データに基づいて効果音を再生する。
【０１０５】
なお、再生される映像等を考慮して、特徴量を算出してもよい。例えば、Ｖｅｃｔｉｏｎに伴う運動の発生が予測される映像の動きに合わせて効果音を再生する場合、映像に紐付けた再生タイミング及び再生速度（再生時間）が特徴量として算出される。この場合、制御モジュール１１１は、再生タイミングに合わせて、音データ処理部１０７に音データの生成を指示する。これによって、前述の運動発生時に聴覚刺激を与えることによって、酔いの低減処理を網羅的に実行できる。
【０１０６】
なお、効果音の再生中に低減量が変化した場合、変更後の低減量に基づいて特徴量を補正してもよい。例えば、ステップＳ７０３の判定結果がＹＥＳの場合、制御モジュール１１１又は比較部１０４は、音量補正処理を実行する。当該処理では、制御モジュール１１１又は比較部１０４は、低減量の大きさが「０」の場合には音量を「０」に補正し、低減量の大きさが過去の低減量の大きさの最大値より大きい場合には音量を最大値に補正する。さらに、制御モジュール１１１又は比較部１０４は、低減量が変化前の音量と低減量の変化後の音量との間を線形的に補完する。前述の処理は一例であって、酔いの低減効果が得られる範囲で任意に補正することができる。
【０１０７】
なお、制御装置１０は、効果音の再生後の低減量の経時変化を監視し、低減量が閾値より大きい状態が一定時間継続する場合、効果音による酔いの低減効果を超える酔いが発生しているものとして、酔い状態の悪化を示す警告メッセージを音声又は画像として再生してもよい。
【０１０８】
次に、図８Ａ及び図８Ｂを用いて効果音について説明する。図８Ａ及び図８Ｂは、実施例１の端末２０が再生する効果音の一例を示す図である。図８Ａ及び図８Ｂでは、２チャンネルのステレオ音響システムに適用する音データのフォーマットを示す。５．１チャンネル等の音響システムの音データのフォーマットでは、主となる左右の出力チャンネルについて同様の音データを適用すればよい。
【０１０９】
まず、図８Ａについて説明する。図８Ａに示す効果音の再生タイミング（再生開始時刻）は、ステップＳ７０３の判定結果がＮＯと判定された時点とする。
【０１１０】
端末２０は、左耳側の音量を０から最大音量δ１まで上昇させた後、微小音量δ２まで下降させる。このとき、端末２０は、左耳側の音量の変化と同期するように、右耳側の音量を０から音量δ３に上昇させた後、微小音量δ２まで変化させる。
【０１１１】
端末２０は、各耳の音量が微小音量δ３に変化してから一定時間経過した後、右耳側の音量を最大音量δ１まで上昇させた後、０まで下降させる。このとき、端末２０は、右耳側の音量の変化と同期するように、左耳側の音量をδ３まで上昇させた後、０まで下降させる。
【０１１２】
なお、再生タイミング、音量、及び再生速度等の特徴量は、ある時点の低減量に基づいて算出されてもよいし、また、経時的な低減量の変化に基づいて算出されてもよい。
【０１１３】
前述のような効果音を用いて聴覚刺激を与えることによって、ユーザは左から右への音源の移動と知覚し、左方向への移動感覚を想起させることができる。なお、前述の音量変化を左右入れ替えることによって、右方向への移動感覚を想起させることができる。
【０１１４】
視覚刺激の影響によるユーザの身体の移動方向とは逆方向の移動感覚を想起させることによって、頭部の動揺を低減することができる。
【０１１５】
図８Ｂは、頭部伝達関数を畳み込んだステレオのバイノーラル信号を示す。端末２０は、当該バイノーラル信号をホワイトノイズのような効果音（可聴音）として再生することによって、ユーザは時間軸に沿って反時計回りに周回する音として知覚し、反時計回りの回転感覚を想起できる。なお、右耳及び左耳の聴覚刺激を入れ替えることによって、端末２０は時計回りに周回する効果音を再生できる。
【０１１６】
頭部伝達関数の値をメモリ１０２に格納し、当該値を用いることによって任意の音源データから周波数特性を変化させたデータを、３次元空間の任意の方向の任意の距離から発せられる効果音として再生できる。
【０１１７】
なお、コンテンツ情報１１２に基づく音を妨げない効果音（不可聴音）を再生する音データが生成されてもよい。例えば、制御装置１０は、周波数が１６ＫＨｚであり、図８Ａ又は図８Ｂに示すような波形の音を再生する音データを生成する。当該周波数の音は、若年齢のユーザは知覚できるが、高年齢のユーザは知覚できない。
【０１１８】
頭部の動揺は左右方向だけではなく上下方向の動揺も考慮してもよい。この場合、映像の奥行き方向への移動量に対して、ユーザの前後方向の移動感覚を生起させる音源を使用することによって同様の効果を得ることができる。
【０１１９】
実施例１によれば、音生成装置１は、聴覚刺激を与えることによって映像を視聴するユーザの酔いを低減することができる。音生成装置１は、ユーザの個性に合わせて効果音を調整できるため、酔い低減の効果を向上させ、また、ユーザの負担を低減できる。また、聴覚刺激は、電流等を直接流すような刺激ではないため、ユーザへの負担が低い。また、ユーザが積極的に行動を行う必要がないため、ユーザのへの負担が低い。
【０１２０】
また、実施例１の音生成装置１は、汎用的な装置及びデバイスを用いて実現できるため、導入コストを低く抑えることができる。
【実施例２】
【０１２１】
実施例２では、車及び船舶等の輸送機器に搭乗するユーザの酔いを低減することを目的とする。以下、実施例１との差異を中心に実施例２について説明する。
【０１２２】
輸送機器に搭乗するユーザが酔いを発生する原因は、映像の視聴する場合に発生する酔いと同様と考えられる。例えば、輸送機器に搭乗するユーザが座席に着席した状態で読書をする場合、視覚では静止していると知覚され、前庭感覚では輸送機器の移動に伴って動いていると知覚される。したがって、前述した知覚の矛盾が酔いの原因と考えられる。
【０１２３】
図９は、実施例２の輸送機器２に搭載される音生成装置１の構成を示す図である。
【０１２４】
輸送機器２に搭載される音生成装置１は、制御装置１０、端末２０、及び第１の撮像装置５０から構成される。端末２０及び第１の撮像装置５０は、有線又は無線で制御装置１０と接続する。
【０１２５】
実施例２の制御装置１０は、輸送機器２の電子機器全体を制御する。また、実施例２の制御装置１０は、実施例１の制御装置１０と同様に、効果音の音データの生成及び出力を制御する。実施例２の制御装置１０は、例えば、マイクロコンピュータが考えられる。
【０１２６】
実施例２の端末２０は、実施例１の端末２０と同様であるため説明を省略する。なお、実施例２の端末２０は、オープンイヤー型のヘッドフォンを用いることによって、効果音だけではなく環境音を聞けるように聞けるようにしてもよい。また、端末２０は、輸送機器２に搭乗可能な人数と同じ数だけ存在してもよい。
【０１２７】
第１の撮像装置５０は、輸送機器２の進行方向の映像を撮影する。第１の撮像装置５０は、ステレオカメラ等、３次元形状を計測できる装置であればよい。
【０１２８】
図１０は、実施例２の音生成装置１のハードウェア構成及びソフトウェア構成の一例を示す図である。
【０１２９】
制御装置１０は、制御部１０１、メモリ１０２、センサデータ受信部１０３、比較部１０４、音データ処理部１０７、音データ送信部１０８、加速度センサ１２１、及びデータ受信部１２２を有する。
【０１３０】
なお、制御装置１０は、ＨＤＤ及びＳＳＤ等の内部記憶装置を有してもよい。また、輸送機器２の大きさ又は特性を考慮して、制御装置１０は、複数の加速度センサ１２１を有してもよい。
【０１３１】
制御部１０１、メモリ１０２、センサデータ受信部１０３、比較部１０４、音データ処理部１０７、及び音データ送信部１０８は、実施例１の制御装置１０が有するものと同様であるため説明を省略する。
【０１３２】
なお、実施例２のメモリ１０２には、制御モジュール１１１、調整情報１１３、及びユーザ情報が格納される。また、実施例２の比較部１０４が実行する処理は、実施例１の比較部１０４が実行する処理と一部異なる。
【０１３３】
加速度センサ１２１は、輸送機器２の加速度を計測する。なお、制御装置１０は、輸送機器２の大きさ及び特性を考慮して、複数の加速度センサ１２１を有してもよい。また、加速度センサ１２１のみを用いた場合、計測誤差が蓄積する可能性があるため、地磁気センサ又はジャイロセンサ等を用いて、周期的に計測誤差を補正するようにしてもよい。
【０１３４】
データ受信部１２２は、加速度センサ１２１からセンサデータを受信し、また、第１の撮像装置５０から画像データを受信する。
【０１３５】
端末２０は、加速度センサ２０１、地磁気センサ２０２、センサデータ送信部２０３、音再生部２０４、及び音データ受信部２０５を有する。加速度センサ２０１、地磁気センサ２０２、センサデータ送信部２０３、音再生部２０４、及び音データ受信部２０５を有する。各構成は実施例１と同様であるため説明を省略する。
【０１３６】
図１１は、実施例２の制御装置１０が実行する処理を説明する図である。以下で説明する処理は、輸送機器２の移動中に周期的に実行される。
【０１３７】
制御装置１０は、端末２０の加速度センサ２０１及び地磁気センサ２０２によって取得されたセンサデータを取得する（ステップＳ６０１）。
【０１３８】
制御装置１０は、輸送機器２の移動量を算出する（ステップＳ１１０１）。具体的には、以下のような処理が実行される。
【０１３９】
制御部１０１は、加速度センサ１２１によって取得されたセンサデータを用いて、輸送機器２の加速度の変化値を算出する。また、制御部１０１は、第１の撮像装置５０から取得した画像データに基づいて画像に含まれる物体の形状の変化を示す物理量を算出する。なお、加速度センサ１２１によって取得されたセンサデータ及び第１の撮像装置５０から取得した画像データは、視覚及び前庭感覚へ入力される刺激に関連する刺激情報の一つとして取得される。
【０１４０】
制御部１０１は、加速度の変化値及び物理量から輸送機器２の移動量を算出する。当該移動量は、ユーザの視覚及び前庭感覚の少なくともいずれかに入力される刺激の大きさを推定する推定量であり、移動方向及び移動距離を持つベクトル量として表される。
【０１４１】
輸送機器２の移動量を算出する場合、加速度センサ１２１の値だけでは、輸送機器２の移動量を正しく算出できないため、画像の変化も考慮する。例えば、輸送機器２が舗装された道路の左カーブを走行している場合、路面形状は左方向に曲折する。このとき、遠心力によって右方向に加速度が計測される。ただし、路面の傾斜によって加速度センサ１２１が計測する値が変化する。そこで、制御部１０１は、画像データの変化から路面の傾斜を算出し、当該値を用いて加速度センサ１２１によって計測された値を補正する。
【０１４２】
なお、制御部１０１は、計測間隔と同一の時間幅で輸送機器２の移動量を算出する。また、制御部１０１は、輸送機器２が静止している状態の加速度センサの値を基準値に設定し、受信したセンサデータと基準値との差分を加速度の変化値として算出する。
【０１４３】
なお、制御装置１０が複数の加速度センサ１２１を有する場合、各加速度センサ１２１が計測した値の平均値又は中間値を用いて前述した処理を実行すればよい。
【０１４４】
なお、車のハンドル操作、アクセス及びブレーキの操作、及びウインカー操作、並びに船舶の操舵等の輸送機器２の操作状態を考慮して、加速度センサ１２１によって計測された値を補正してもよい。以上がステップＳ１１０１の処理の説明である。
【０１４５】
制御装置１０は、動揺量を算出する（ステップＳ１１０２）。具体的には、以下のような処理が実行される。
【０１４６】
比較部１０４は、センサデータを用いて、所定の時間間隔における頭部の移動量を算出する。なお、頭部の移動量の算出方法は、実施例１と同様であるため説明を省略する。
【０１４７】
比較部１０４は、頭部の移動量及び輸送機器２の移動量に基づいて動揺量を算出する。例えば、比較部１０４は、頭部の移動量と輸送機器２の移動量との差分を動揺量として算出する。比較部１０４は、動揺量をメモリ１０２に一時的に格納する。
【０１４８】
なお、センサデータの計測誤差が存在する場合、比較部１０４は、一定期間の頭部の移動量の平均値及び映像の移動量の平均値を用いて、動揺量を算出してもよい。例えば、輸送機器２の左右方向の加速度が閾値より小さい場合、頭部の揺れは自然な挙動であるため、比較部１０４は、動揺量の大きさを「０」と算出する。また、所定の期間における左右方向の加速度が閾値以上の場合、比較部１０４は、頭部の移動量と映像の移動量の差分を動揺量として算出する。
【０１４９】
制御装置１０は、動揺量に基づいて酔い感覚強度を算出し（ステップＳ６０４）、酔い感覚強度に基づいて低減量を算出する（ステップＳ６０５）。
【０１５０】
効果音を再生するための処理は、図７に示す処理と同様であるため説明を省略する。
【０１５１】
実施例１の制御装置１０は、酔い状態の悪化を示す警告メッセージを音声又は画像をユーザに提示していたが、実施例２の制御装置１０は、ユーザ以外に輸送機器２を操作するユーザにも警告メッセージを提示してもよい。
【０１５２】
実施例２によれば、音生成装置１は、聴覚刺激を与えることによって輸送機器２に搭乗するユーザの酔いを低減することができる。音生成装置１は、ユーザの個性に合わせて効果音を調整できるため、酔い低減の効果を向上させ、また、ユーザの負担を低減できる。また、聴覚刺激は、電流等を直接流すような刺激ではないため、ユーザへの負担が低い。また、ユーザが積極的に行動を行う必要がないため、ユーザのへの負担が低い。
【０１５３】
また、実施例２の音生成装置１は、汎用的な装置及びデバイスを用いて実現できるため、導入コストを低く抑えることができる。
【実施例３】
【０１５４】
実施例３は、実施例２と同様に、車等の輸送機器に搭乗するユーザの酔いを低減することを目的とする。実施例３では、音生成装置１の構成が一部異なる。以下、実施例２との差異を中心に実施例３について説明する。
【０１５５】
図１２は、実施例３の輸送機器２に搭載される音生成装置１の構成を示す図である。
【０１５６】
輸送機器２に搭載される音生成装置１は、制御装置１０、第１の撮像装置５０、第２の撮像装置６０、及び音出力装置７０から構成される。端末２０、第１の撮像装置５０、第２の撮像装置６０、及び音出力装置７０は、有線又は無線で制御装置１０と接続する。
【０１５７】
ユーザが装着する接触型のデバイスである端末２０の装着が困難又は煩わしいケースが考えられる。そこで、実施例３の輸送機器２は、端末２０の代わりに、第２の撮像装置６０及び音出力装置７０を設けている点が実施例２の輸送機器２と異なる点である。
【０１５８】
第２の撮像装置６０は、ユーザを撮影する。音出力装置７０は、ユーザに対して音を出力する。なお、図１２には音出力装置７０が一つのみ表示されているが、輸送機器２の左右の側面に一つ存在する。第２の撮像装置６０はカメラが考えられ、また、音出力装置７０はステレオスピーカが考えられる。第２の撮像装置６０及び音出力装置７０は、後部座席にのみ設置しているが、他の座席にも設置してもよい。また、一つの第２の撮像装置６０を用いて複数のユーザの動きを検出してもよい。
【０１５９】
実施例３の輸送機器２のその他の構成は、実施例２の輸送機器２の構成と同一であるため説明を省略する。
【０１６０】
図１３は、実施例３の音生成装置１のハードウェア構成及びソフトウェア構成の一例を示す図である。
【０１６１】
制御部１０１、メモリ１０２、比較部１０４、音データ処理部１０７、音データ送信部１０８、加速度センサ１２１、及びデータ受信部１２２を有する。なお、制御装置１０は、ＨＤＤ及びＳＳＤ等の内部記憶装置を有してもよい。
【０１６２】
制御部１０１、メモリ１０２、比較部１０４、音データ処理部１０７、音データ送信部１０８、加速度センサ１２１、及びデータ受信部１２２は、実施例２の制御装置１０が有するものと同様であるため説明を省略する。なお、データ受信部１２２は、第１の撮像装置５０及び第２の撮像装置６０のそれぞれから画像データを受信する。
【０１６３】
音出力装置７０は、音データ受信部２０５及び音再生部２０４を有する。音データ受信部２０５及び音再生部２０４は、実施例２の端末２０が有するものと同一であるため説明を省略する。
【０１６４】
図１４は、実施例３の制御装置１０が実行する処理を説明する図である。以下で説明する処理は、輸送機器２の移動中に周期的に実行される。
【０１６５】
制御装置１０は、第２の撮像装置６０によって取得された画像データを取得する（ステップＳ１４０１）。実施例３では、画像データがユーザの頭部の動きを示す頭位情報として取得される。また、制御装置１０は、輸送機器２の移動量を算出する（ステップＳ１１０１）。
【０１６６】
制御装置１０は、動揺量を算出する（ステップＳ１４０２）。具体的には、以下のような処理が実行される。
【０１６７】
比較部１０４は、第２の撮像装置６０から取得した画像データを用いて頭部の移動量を算出する。なお、頭部の移動量の算出方法は、実施例１の画像の移動量の算出方法と同様であるため説明を省略する。
【０１６８】
比較部１０４は、頭部の移動量及び輸送機器２の移動量に基づいて動揺量を算出する。例えば、比較部１０４は、頭部の移動量と輸送機器２の移動量との差分を動揺量として算出する。比較部１０４は、動揺量をメモリ１０２に一時的に格納する。
【０１６９】
なお、第２の撮像装置６０が単眼カメラである場合、２次元の画像データが取得されるため、頭部の移動量は２次元のベクトル量となり、第２の撮像装置６０がステレオカメラ又は赤外線カメラである場合、３次元の画像データが取得されるため、頭部の移動量は３次元のベクトル量となる。
【０１７０】
制御装置１０は、動揺量に基づいて酔い感覚強度を算出し（ステップＳ６０４）、酔い感覚強度に基づいて低減量を算出する（ステップＳ６０５）。
【０１７１】
効果音を再生するための処理は、図７に示す処理と同様であるため説明を省略する。ただし、ステップＳ７０４において、効果音の再生前に当該効果音を説明する音声又は文字情報を出力する。
【０１７２】
実施例３の制御装置１０は、実施例２と同様に、ユーザ以外に輸送機器２を操作するユーザにも警告メッセージを提示してもよい。
【０１７３】
実施例３によれば、装着型のデバイスを用いることなく実施例２と同様の効果を奏することができる。
【０１７４】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。また、例えば、上記した実施例は本発明を分かりやすく説明するために構成を詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、各実施例の構成の一部について、他の構成に追加、削除、置換することが可能である。
【０１７５】
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、本発明は、実施例の機能を実現するソフトウェアのプログラムコードによっても実現できる。この場合、プログラムコードを記録した非一時的記憶媒体をコンピュータに提供し、そのコンピュータが備えるプロセッサが非一時的記憶媒体に格納されたプログラムコードを読み出す。この場合、非一時的記憶媒体から読み出されたプログラムコード自体が前述した実施例の機能を実現することになり、そのプログラムコード自体、及びそれを記憶した非一時的記憶媒体は本発明を構成することになる。このようなプログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）、光ディスク、光磁気ディスク、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭなどが用いられる。
【０１７６】
また、本実施例に記載の機能を実現するプログラムコードは、例えば、アセンブラ、Ｃ／Ｃ＋＋、ｐｅｒｌ、Ｓｈｅｌｌ、ＰＨＰ、Ｊａｖａ（登録商標）等の広範囲のプログラム又はスクリプト言語で実装できる。
【０１７７】
さらに、実施例の機能を実現するソフトウェアのプログラムコードを、ネットワークを介して配信することによって、それをコンピュータのハードディスクやメモリ等の記憶手段又はＣＤ−ＲＷ、ＣＤ−Ｒ等の記憶媒体に格納し、コンピュータが備えるプロセッサが当該記憶手段や当該記憶媒体に格納されたプログラムコードを読み出して実行するようにしてもよい。
【０１７８】
上述の実施例において、制御線や情報線は、説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。全ての構成が相互に接続されていてもよい。
【符号の説明】
【０１７９】
１  音生成装置
２  輸送機器
１０  制御装置
２０  端末
３０  表示装置
５０  第１の撮像装置
６０  第２の撮像装置
７０  音出力装置
１０１  制御部
１０２  メモリ
１０３  センサデータ受信部
１０４  比較部
１０５  映像データ処理部
１０６  映像データ送信部
１０７  音データ処理部
１０８  音データ送信部
１１１  制御モジュール
１１２  コンテンツ情報
１１３  調整情報
１２１、２０１  加速度センサ
１２２  データ受信部
２０２  地磁気センサ
２０３  センサデータ送信部
２０４  音再生部
２０５  音データ受信部
３０１  映像データ受信部
３０２  映像表示部
【図１】
2018126185.tif 000003
【図２】
2018126185.tif 000004
【図３】
2018126185.tif 000005
【図４】
2018126185.tif 000006
【図５】
2018126185.tif 000007
【図６】
2018126185.tif 000008
【図７】
2018126185.tif 000009
【図８Ａ】
2018126185.tif 000010
【図８Ｂ】
2018126185.tif 000011
【図９】
2018126185.tif 000012
【図１０】
2018126185.tif 000013
【図１１】
2018126185.tif 000014
【図１２】
2018126185.tif 000015
【図１３】
2018126185.tif 000016
【図１４】
2018126185.tif 000017