(57)【要約】【課題】立体映像の迫力を表現することができる３Ｄ映像再生装置を、提供する。【解決手段】３Ｄ映像再生装置１００は、３Ｄ映像データ及び音声データを有する３Ｄストリームデータを、再生する装置である。本３Ｄ映像再生装置１００は、主に、音声解析部１１３と、視差量設定部１１４と、映像補正部１１５と、映像表示部１１６とを、備えている。音声解析部１１３は、３Ｄ映像データが示す場面を判断するために、音声データを解析する。視差量設定部１１４は、解析後の音声データに基づいて、映像の場面に対応する視差量を、設定する。映像補正部１１５は、視差量に基づいて、３Ｄ映像データを補正する。映像表示部１１６は、補正後の３Ｄ映像データを再生し音声データを出力する。【選択図】図１
2013165331.tif 000002
【特許請求の範囲】
【請求項１】
３Ｄ映像データ及び音声データを有する３Ｄストリームデータを、再生する３Ｄ映像再生装置であって、
前記３Ｄ映像データが示す場面を判断するために、前記音声データを解析する音声解析部と、
解析後の前記音声データに基づいて、前記場面に対応する視差量を、設定する視差量設定部と、
前記視差量に基づいて、前記３Ｄ映像データを補正する映像補正部と、
補正後の前記３Ｄ映像データを再生し前記音声データを出力する出力部と、
を備える３Ｄ映像再生装置。
【請求項２】
前記視差量設定部は、前記場面に対応する結像方向を設定する結像方向設定部と、前記結像方向に対応する前記視差量を、調整する第１視差量調整部とを、有している、
請求項１に記載の３Ｄ映像再生装置。
【請求項３】
前記音声解析部は、前記音声データに基づいて、前記音声の強度を示す第１特性データと、前記音声の大きさを示す第２特性データとを、算出し、
前記結像方向設定部は、前記第１特性データに基づいて前記結像方向を設定し、
前記第１視差量調整部は、前記第２特性データに基づいて前記視差量を調整する、
請求項２に記載の３Ｄ映像再生装置。
【請求項４】
前記３Ｄストリームデータは、複数の音声データを有し、
前記結像方向設定部は、複数の前記音声データそれぞれの前記第１特性データに基づいて、複数の音声データの少なくともいずれか１つの音声データを選択し、選択された前記音声データに基づいて、前記結像方向を設定し、
前記第１視差量調整部は、選択された前記音声データの前記第２特性データに基づいて、前記視差量を調整する、
請求項３に記載の３Ｄ映像再生装置。
【請求項５】
前記結像方向設定部は、前記結像方向を一方向に設定する、
請求項２から４のいずれかに記載の３Ｄ映像再生装置。
【請求項６】
前記結像方向設定部は、前記結像方向を、前記３Ｄ映像データを再生する画面の位置に応じて、変更する、
請求項２から５のいずれかに記載の３Ｄ映像再生装置。
【請求項７】
音量を調節する音量調節部、
をさらに備え、
前記視差量設定部は、前記音量調節部によって調節された音量に基づいて、前記結像方向の前記視差量をさらに調整する第２視差量調整部を、さらに有している、
請求項１から６のいずれかに記載の３Ｄ映像再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、３Ｄ映像再生装置に関する。
【背景技術】
【０００２】
近年、３Ｄ映像を表示する装置の開発が、進んでいる。一般的な３Ｄ映像再生装置では、視差を有する映像が、スクリーンに投射される。このスクリーンに投射された映像（右目映像、左目映像）を、ユーザは、脳内で合成し、立体映像として認識する。また、スクリーンへの映像の投射時には、音響信号を複数のスピーカから放音することによって、ユーザは、サラウンドの音響を体感する（特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−１２２５９０
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来の３Ｄ映像再生装置では、立体映像及びサラウンドの音響がユーザに対して提供されていた。しかしながら、従来の３Ｄ映像再生装置では、音響は、立体映像を単に表現してはいたものの、立体映像特有の迫力を十分に表現できるものではなっていなかった。
本発明は、上記のような問題点を解決すべくなされたものであり、本発明の目的は、立体映像の迫力を十分に表現できる３Ｄ映像再生装置を、提案することにある。
【課題を解決するための手段】
【０００５】
本発明の３Ｄ映像再生装置は、３Ｄ映像データ及び音声データを有する３Ｄストリームデータを、再生する装置である。本３Ｄ映像再生装置は、音声解析部と、視差量設定部と、映像補正部と、出力部とを、備えている。音声解析部は、３Ｄ映像データが示す場面を判断するために、音声データを解析する。視差量設定部は、解析後の音声データに基づいて、場面に対応する視差量を、設定する。映像補正部は、視差量に基づいて、３Ｄ映像データを補正する。出力部は、補正後の３Ｄ映像データを再生し音声データを出力する。
【０００６】
本３Ｄ映像再生装置では、音声データを解析することによって、３Ｄ映像データが示す場面を判断することができる。また、この解析結果に基づいて、映像の場面に対応する視差量を設定することによって、３Ｄ映像データを補正し、補正後の３Ｄ映像データが再生される。このように、本３Ｄ映像再生装置では、３Ｄ映像データと音声データとを互いに連携させることによって、３Ｄ映像を表現している。これにより、本３Ｄ映像再生装置では、３Ｄ映像データと音声データとを単に独立したデータとして用いて、出力部に出力する従来の場合と比較して、３Ｄ映像の迫力を十分に表現することができる。
【発明の効果】
【０００７】
本発明の３Ｄ映像再生装置では、立体映像の迫力を十分に表現することができる。
【図面の簡単な説明】
【０００８】
【図１】３Ｄ映像再生装置の全体構成を示す図
【図２Ａ】映像がユーザに視認される状態を示す図（映像基準状態）。
【図２Ｂ】映像がユーザに視認される状態を示す図（映像近接状態）。
【図２Ｃ】映像がユーザに視認される状態を示す図（映像離反状態）。
【図３Ａ】３Ｄ効果を映像に付加するために用いられる視差量の概念図（映像近接状態）。
【図３Ｂ】３Ｄ効果を映像に付加するために用いられる視差量の概念図（映像離反状態）。
【図４】補正用のチャンネルの音量データと増幅係数（第１増幅係数、第２増幅係数）との対応関係を示す図。
【図５】ボリュームによる増幅量と第３増幅係数との対応関係を示す図。
【図６】音声に基づくシーン判断処理及び映像補正処理を示すフローチャート。
【図７Ａ】他の実施形態に係る、映像がユーザに視認される状態を示す図（その１）。
【図７Ｂ】他の実施形態に係る、視差量の概念図（その１）。
【図８Ａ】他の実施形態に係る、映像がユーザに視認される状態を示す図（その２）。
【図８Ｂ】他の実施形態に係る、視差量の概念図（その２）。
【発明を実施するための形態】
【０００９】
＜３Ｄ映像再生装置の構成＞
図１は、３Ｄ映像再生装置１００の全体構成を示す図である。３Ｄ映像再生装置１００は、３Ｄ映像データ及び複数の音声データを有する３Ｄストリームデータを、再生する装置である。３Ｄ映像再生装置１００には、３Ｄストリームデータ（３Ｄ映像データ及び複数の音声データ）が、入力される。
【００１０】
３Ｄ映像再生装置１００は、コントローラ１５０と、操作ユニット１６０と、ストリーム制御部１１０と、音声デコーダ部１１１と、映像デコーダ部１１２と、音声解析部１１３と、視差量設定部１１４と、映像補正部１１５と、映像表示部１１６（出力部）とを、備えている。
コントローラ１５０は、３Ｄ映像再生装置１００全体の動作を統括制御する。コントローラ１５０は、ＣＰＵ（Central Processing Unit）及びＲＯＭ（Read-Only Memory）等から、構成される。ＲＯＭには、基本制御に関するプログラム等が、格納されている。なお、
操作ユニット１６０は、ユーザから操作を受け付けるインターフェースである。操作ユニット１６０は、ユーザから操作を受け付けると、操作の内容に対応する信号を、コントローラ１５０に送信する。操作ユニット１６０には、音量調節部１６０ａが、含まれている。音量調節部１６０ａにおいて、音量（ボリューム）が設定されると、その音量に対応する信号が、コントローラ１５０に送信される。
【００１１】
ストリーム制御部１１０は、３Ｄ映像再生装置１００に入力された３Ｄストリームデータを、３Ｄ映像データと音声データとに分離して、３Ｄ映像データと音声データとを個別に外部に出力する。３Ｄ映像データは、例えば、Ｌ（左）用の映像データ、及びＲ（右）用の映像データを、有している。複数の音声データは、例えば、複数チャンネルのサラウンドの音声データを、有している。
【００１２】
音声デコーダ部１１１は、ストリーム制御部から出力された各チャンネルの音声データを、デコードする。映像デコーダ部１１２は、ストリーム制御部から出力された３Ｄ映像データ、例えば左右の映像データを、デコードする。
音声解析部１１３は、３Ｄ映像データが示す各場面の状態を判断するために、音声データを解析する。詳細には、音声解析部１１３は、音声データを解析することによって、音声の強度を示す音圧データ（第１特性データ）と、音声の大きさを示す音量データ（第２特性データ）とを、算出する。
【００１３】
具体的には、音声データは、映像データに対応する音声の時系列データである。音声解析部１１３は、この音声の時系列データに基づいて、音圧データ及び音量データを算出する。音圧データは、例えば、「Ｌｐ（ｔ）＝１０×ｌｏｇ１０（Ｐ（ｔ）／Ｐｏ）＾２」式を用いて、算出される。ここで、Ｐ（ｔ）は音声データであり、Ｐｏは基準音圧である。音量データは、時系列データにおけるある時点ｔの音声データＰ（ｔ）である。
【００１４】
なお、音声の時系列データにおいて解析の対象とする音声データは、映像表示部に出力されるある時点の映像に対応する、各チャンネルの音声データを、用いてもよいし、映像表示部に出力されるある時点より前の所定の範囲における、各チャンネルの音声データの平均を、用いてもよい。この平均としては、例えば、映像表示部に出力される前にデコードされバッファに格納された各チャンネルの音声データの平均が、考えられる。
【００１５】
視差量設定部１１４は、解析後の音声データに基づいて、映像に表示される各場面に対応する視差量を、設定する。ここで、視差量とは、例えば、左眼画像と右眼画像とで互いに対応する位置、領域、又は対象等において、水平方向の位置情報の変化量に対応している。
視差量設定部１１４は、結像方向設定部１１４ａと、第１調整部１１４ｂ（第１視差量調整部）と、第２調整部１１４ｃ（第２視差量調整部）とを、有している。
【００１６】
結像方向設定部１１４ａは、各場面に対応する結像方向を、設定する。各場面に対応する結像方向は、音圧データに基づいて、設定される。より具体的には、結像方向設定部１１４ａは、複数の音声データそれぞれの音圧データ（各チャンネルの音圧データ）に基づいて、複数の音声データの少なくともいずれか１つの音声データを、選択する。そして、結像方向設定部１１４ａは、選択された音声データに基づいて、視差量がゼロである面（基準面）に対して、結像方向を一方向に設定する。結像方向は、離反方向と近接方向とを有している。結像方向設定部１１４ａは、選択された音声データに基づいて、結像方向を、離反方向又は近接方向に設定する。
【００１７】
ここで、離反方向は、基準面を基準として対象がユーザから離れるように視認される方向である。近接方向は、基準面を基準として、対象がユーザ側に近づくように視認される方向である。
第１調整部１１４ｂは、設定された結像方向に向かって対象の移動が視認されるように、視差量を調整する。具体的には、視差量調整部は、選択された音声データの音量データに基づいて、設定された結像方向に対象の移動が視認されるように、視差量を調整する。視差量を調整する形態の詳細については、後述する。
【００１８】
なお、後述する図２Ｂ及び図２Ｃと、後述する図３Ａ及び図３Ｂとに示すように、結像方向の設定は、視差量の設定方向に対応している。例えば、結像方向が近接方向である場合は、視差量の設定方向は、図３Ａに示す方向に設定される。また、結像方向が離反方向である場合は、視差量の設定方向は、図３Ｂに示す方向に設定される。
第２調整部１１４ｃは、音量調節部によって調節された音量データに基づいて、結像方向の視差量を、さらに調整する。視差量をさらに調整する形態の詳細については、後述する。
【００１９】
映像補正部１１５は、各場面に対応する視差量に基づいて、３Ｄ映像データを補正する。３Ｄ映像再生装置１００に入力された３Ｄ映像データ（左右の映像データ）は、左右の視差量を既に有している。しかしながら、上記のように視差量が設定された場合、３Ｄ映像データの視差量が、上記で設定した視差量になるように、３Ｄ映像データが補正される。
【００２０】
映像表示部は、補正後の３Ｄ映像データを再生し音声データを出力する。映像表示部は、例えばスピーカを備えた液晶モニタである。この場合、補正後の３Ｄ映像データが液晶モニタに表示され、各チャンネルの音声データがスピーカから出力される。
なお、３Ｄ映像再生装置１００は、図示しないＲＡＭ（Random-Access Memory）を、さらに有している。ＲＡＭは、コントローラ１３０のワークメモリ（バッファメモリ）として機能する。ＲＡＭは、揮発性の記憶媒体、例えばＤＲＡＭ（Dynamic Random Access Memory）である。
＜３Ｄ映像再生装置の動作＞
以下では、図２〜図５を用いて、３Ｄ映像再生装置１００の動作を、説明する。まず、図２〜図５の説明を行う。
【００２１】
図２Ａ〜図２Ｃは、３Ｄ映像がユーザに視認される状態を示す図である。図２Ａは、３Ｄ映像に３Ｄ効果が生じていない場合の例である。図２Ｂは、ユーザ側に３Ｄ効果が生じる場合の例である。図２Ｃは、ユーザから離れる方向に３Ｄ効果が生じる場合の例である。
図３Ａ及び図３Ｂは、３Ｄ効果を映像に付加するために用いられる視差量の概念図である。図３Ａは、図２Ｂに対応する図である。図３Ａでは、左目用の映像データには、視差量がゼロである位置を基準として、右側に所定の視差量が付加されている。一方で、右目用の映像データには、視差量がゼロである位置を基準として、左側に所定の視差量が付加されている。
【００２２】
図３Ｂは、図２Ｃに対応する図である。図３Ｂでは、左目用の映像データには、視差量がゼロである位置を基準として、左側に所定の視差量が付加されている。一方で、右目用の映像データには、視差量がゼロである位置を基準として、右側に所定の視差量が付加されている。
図４は、補正用のチャンネルの音量データと増幅係数（第１増幅係数、第２増幅係数）との対応関係を示す図である。図４では、所定の第１音量レベルα１以上であり所定の第２音量レベルα２以下である範囲では、増幅係数が線形で増加するように設定されている。また、所定の第１音量レベルα１未満では、増幅係数は１．０で一定であり、所定の第２音量レベルα２より大きい範囲では、増幅係数は３．０で一定である。
【００２３】
図５は、ボリュームによる増幅量と第３増幅係数との対応関係を示す図である。図５では、所定の第１増幅量β１以上であり所定の第２増幅量β２以下である範囲では、第３増幅係数が線形で増加するように設定されている。また、所定の第１増幅量β１未満では、増幅係数は１．０で一定であり、所定の第２増幅量β２より大きい範囲では、増幅係数は２．０で一定である。
【００２４】
なお、図４及び図５は、増幅係数が線形で増加する場合の例を示したが、増幅係数を変化させる方法は、どのようにしてもよい。例えば、増幅係数を、段階的に増加させてもよいし、多次曲線を用いて増加させてもよい。また、図４では、第１増幅係数及び図２増幅係数を同じ図を用いて説明したが、第１増幅係数及び第２増幅係数は、異なる直線及び／又は曲線を用いてもよい。
【００２５】
また、図４における所定の第１音量レベルα１及び所定の第２音量レベルα２と、図５における所定の第１増幅量β１及び所定の第２増幅量βとは、適宜、他の値に変更可能である。また、図４及び図５における増幅係数の上限値及び下限値は、適宜、他の値に変更可能である。
以下では、上述した、図２〜図５を参照しながら、図６に示すフローチャートに沿って、３Ｄ映像再生装置１００における処理を、説明する。ここでは、３Ｄストリームデータに含まれる音声データが、５．１ｃｈのサラウンドの音声データである場合を一例として、説明を行う。この場合、センターチャンネルの音声データには、例えば人物等の音声データが、含まれる。また、センターチャンネルを除いたチャンネル（５つのサラウンドチャンネル）の音声データには、例えば環境音（画面内の風景等）の音声データが、含まれる。
【００２６】
なお、前記実施形態では、説明を容易にするために、人物の台詞等の音声データや、環境音（画面内の風景等）の音声データを一例として説明を行うが、これら音声データは、どのようなものであってもよい。
本３Ｄ映像再生装置１００では、３Ｄ映像データと音声データとを含む３Ｄストリームデータが、コントローラ１３０に認識されると（Ｓ１）、まず、各チャンネルの音圧データに基づいて、視差量がゼロである面Ｋ０（基準面）に対する、対象Ｋ１（視認画面）を設定する方向（結像方向）が、設定される（図２Ａ〜図２Ｃを参照）。
【００２７】
詳細には、センターチャンネルを除いたチャンネルの音圧データ（サラウンドチャンネル）が、所定の第１音圧データより大きいか否かが、判断される（Ｓ２）。例えば、まず、５つのサラウンドチャンネルの中から、最大の音圧データを有するサラウンドチャンネル（第１補正用のチャンネル）が、選択される。次に、この第１補正用のチャンネルの音圧データが、所定の第１音圧データより大きかった場合（Ｓ２でＹｅｓ）、基準面Ｋ０を基準として視認画面Ｋ１がユーザから離れる方向（離反方向）に、結像方向が設定される（Ｓ３）。この場合、ユーザは、視認画面Ｋ１例えば画面内の風景等を自分からより離れた位置で、認識する。これにより、画面内の風景等を、ユーザに対して、よりダイナミックに感じさせることができる。
【００２８】
なお、ここでは、５つのサラウンドチャンネルの中の最大の音圧データが、所定の第１音圧データより大きかった場合に、結像方向が離反方向に設定される場合の例を示したが、５つのサラウンドチャンネルの平均の音圧データが、所定の第１音圧データより大きかった場合に、結像方向が離反方向に設定されるようにしてもよい。この場合は、５つのサラウンドチャンネルの平均の音圧データが、第１補正用のチャンネルとして、設定される。
【００２９】
続いて、第１補正用のチャンネルが、所定の第１音圧データ以下であった場合（Ｓ２でＮｏ）、センターチャンネルの音圧データ（第２補正用のチャンネル）が、所定の第２音圧データより大きいか否かが、判断される（Ｓ４）。ここで、第２補正用のチャンネルの音圧データが、所定の第２音圧データより大きかった場合（Ｓ４でＹｅｓ）、結像方向は、基準面Ｋ０を基準として視認画面Ｋ１がユーザ側に近づく方向（近接方向）に、設定される（Ｓ５）。この場合、ユーザは、視認画面Ｋ１例えば画面内の人物等がより自分の近くに位置しているように、認識する。これにより、画面内の人物等に対して、ユーザをより注目させることができる。
【００３０】
なお、第２補正用のチャンネル（センターチャンネル）の音圧データが、所定の第２音圧データ以下であった場合（Ｓ４でＮｏ）、結像方向の設定は実行されず、後述するステップ８（Ｓ８）の処理が実行される。
次に、上記のようにして結像方向が設定されると、各チャンネルの音量データに基づいて、視認画面Ｋ１の飛び出し量又は視認画面Ｋ１の奥まり量が、補正される。
【００３１】
具体的には、結像方向が離反方向に設定された場合（Ｓ３）、第１補正用のチャンネルの音量データに基づいて、視認画面Ｋ１の奥まり量が補正される（Ｓ４）。より具体的には、この場合、第１補正用のチャンネルの音量データが大きくなるほど、視認画面Ｋ１の飛び出し量も大きくなるように、奥まり量が補正される（Ｓ６）。
ここでは、図４に示した第１増幅係数を、視差量に乗じることによって、視認画面Ｋ１の奥まり量が補正される。第１増幅係数は、第１補正用のチャンネルの音量データに対応する係数である。このように視差量を補正することによって、視認画面Ｋ１の奥まり量が補正される。例えば、図４に示すように、第１補正用のチャンネルの音量データと第１増幅係数との対応関係は、設定されている。この対応関係を示すテーブルは、コントローラ１５０のＲＯＭに記録されており、このテーブルを参照することによって、第１増幅係数が算出される。
【００３２】
一方で、結像方向が近接方向に設定された場合、第２補正用のチャンネル（センターチャンネル）の音量データに応じて、視認画面Ｋ１の飛び出し量が補正される（Ｓ７）。より具体的には、この場合、第２補正用のチャンネルの音量データが大きいほど、視認画面Ｋ１の飛び出し量も大きくなるように、飛び出し量が補正される。
ここでは、図４に示した第２増幅係数を、視差量に乗じることによって、視認画面Ｋ１の飛び出し量が設定される。このように視差量を補正することによって、視認画面Ｋ１の飛び出し量が補正される。例えば、図４に示すように、第２補正用のチャンネルの音量データと第２増幅係数との対応関係は、設定されている。この対応関係を示すテーブルは、コントローラ１５０のＲＯＭに記録されており、このテーブルを参照することによって、第２増幅係数が算出される。
【００３３】
続いて、ボリュームによる増幅が行われたか否かが、判断される（Ｓ８）。ここで、ボリュームの増幅が行われた場合（Ｓ８でＹｅｓ）、ボリュームによる増幅量に応じて、視認画面Ｋ１の奥まり量及び／又は視認画面Ｋ１の飛び出し量が、さらに補正される（Ｓ９）。増幅量は、予め設定されたボリューム基準値に対する、現状のボリュームである。
この場合、ボリュームによる増幅量に対応する第３増幅係数を、上記で補正された視差量に乗じることによって、視認画面Ｋ１の奥まり量及び／又は視認画面Ｋ１の飛び出し量が、再設定される。また、「Ｓ４でＮｏ」の場合は、ボリュームによる増幅量に対応する第３増幅係数を、未補正の視差量に乗じることによって、視認画面Ｋ１の奥まり量及び／又は視認画面Ｋ１の飛び出し量が、設定される。なお、図５に示すように、ボリュームによる増幅量と第３増幅係数との対応関係は、設定されている。この対応関係を示すテーブルは、コントローラ１５０のＲＯＭに記録されており、このテーブルを参照することによって、第３増幅係数が算出される。
【００３４】
以上のように、各チャンネルの音声データに基づいて、各場面に対応する左右の視差量が設定されると、これら視差量に基づいて、３Ｄ映像データが補正される（Ｓ１０）。すると、補正後の３Ｄ映像データが液晶モニタにおいて再生され、各チャンネルの音声データがスピーカから出力される（Ｓ１１）。
＜３Ｄ映像再生装置の特徴＞
本発明の３Ｄ映像再生装置１００は、３Ｄ映像データ及び音声データを有する３Ｄストリームデータを、再生する装置である。本３Ｄ映像再生装置１００は、主に、音声解析部１１３と、視差量設定部１１４と、映像補正部１１５と、映像表示部１１６とを、備えている。音声解析部１１３は、３Ｄ映像データが示す場面を判断するために、音声データを解析する。視差量設定部１１４は、解析後の音声データに基づいて、映像の場面に対応する視差量を、設定する。映像補正部１１５は、視差量に基づいて、３Ｄ映像データを補正する。映像表示部１１６は、補正後の３Ｄ映像データを再生し音声データを出力する。
【００３５】
本３Ｄ映像再生装置１００では、各チャンネルの音声データを解析することによって、３Ｄ映像データが示す場面を判断することができる。また、この解析結果に基づいて、映像の場面に対応する視差量を設定することによって、３Ｄ映像データを補正し、補正後の３Ｄ映像データが再生される。このように、本３Ｄ映像再生装置１００では、３Ｄ映像データと音声データとを互いに連携させることによって、３Ｄ映像を表現している。これにより、本３Ｄ映像再生装置１００では、３Ｄ映像データと音声データとを単に独立したデータとして用いて、出力部に出力する従来の場合と比較して、３Ｄ映像の迫力を十分に表現することができる。
＜他の実施形態＞
（ａ）前記実施形態では、第１補正用のチャンネルの音圧データが、所定の第１音圧データ以下であり、且つ第２補正用のチャンネルの音圧データが、所定の第２音圧データより大きい場合、結像方向が近接方向に設定される場合の例を示した。これに代えて、図７Ａ及び図７Ｂに示すように、左端部及び右端部では結像方向を離反方向に設定し、中央部では結像方向を近接方向に設定するようにしてもよい。この場合、左端部及び右端部における結像方向及び飛び出し量は、センターチャンネルの左右のチャンネル（左右の前方チャンネル、又は左右の後方チャンネル）の音声データを用いて、設定される。また、中央部の結像方向及び飛び出し量は、センターチャンネルの音声データを用いて、設定される。このようにして、上記の効果と同様の効果を得ることができるとともに、より空間的に最適化された映像をユーザに提供することができる。
（ｂ）前記実施形態では、第１補正用のチャンネルの音圧データが、所定の第１音圧データより大きく、且つ第２補正用のチャンネルの音圧データが、所定の第２音圧データ以下である場合、結像方向が離反方向に設定される場合の例を示した。これに代えて、図８Ａ及び図８Ｂに示すように、左端部及び右端部では結像方向を近接方向に設定し、中央部では結像方向を離反方向に設定するようにしてもよい。この場合、左端部及び右端部における結像方向及び飛び出し量は、センターチャンネルの左右のチャンネル（左右の前方チャンネル、又は左右の後方チャンネル）の音声データを用いて、設定される。また、中央部の結像方向及び飛び出し量は、センターチャンネルの音声データを用いて、設定される。このようにしても、上記の効果と同様の効果を得ることができるとともに、より空間的に最適化された映像をユーザに提供することができる。
（ｃ）前記実施形態では、サラウンドチャンネルが、５．１ｃｈである場合の例を示したが、チャンネルの数は、複数であれば、前記実施形態に限定されず、どのようにしてもよい。
【産業上の利用可能性】
【００３６】
本発明は、３Ｄ映像再生装置に広く適用できる。
【符号の説明】
【００３７】
１００  ３Ｄ映像再生装置
１５０  コントローラ
１６０  操作ユニット１６０
１１０  ストリーム制御部
１１１  音声デコーダ部
１１２  映像デコーダ部
１１３  音声解析部
１１４  視差量設定部
１１５  映像補正部
１１６  映像表示部
【図１】
2013165331.tif 000003
【図２Ａ】
2013165331.tif 000004
【図２Ｂ】
2013165331.tif 000005
【図２Ｃ】
2013165331.tif 000006
【図３Ａ】
2013165331.tif 000007
【図３Ｂ】
2013165331.tif 000008
【図４】
2013165331.tif 000009
【図５】
2013165331.tif 000010
【図６】
2013165331.tif 000011
【図７Ａ】
2013165331.tif 000012
【図７Ｂ】
2013165331.tif 000013
【図８Ａ】
2013165331.tif 000014
【図８Ｂ】
2013165331.tif 000015