(57)【要約】【課題】この発明は、アングル機能によって映像を切り替えた際に、音声を変化させることにより、より臨場感が得られるディスク再生装置を提供することを目的とする。【解決手段】ディスクには、メインストリームおよびサブストリームの各ストリーム毎に、所定の空間内での視点の位置に関する情報および映像の撮像方向に関する情報を記憶したテーブルが記録されており、アングル機能によってサブストリームが選択された際に、ディスクに記録されているテーブル内における、選択されたサブストリームに対応する視点の位置に関する情報および映像の撮像方向に関する情報と、基準映像に対応する音声信号とに基づいて、各スピーカに対応する音声信号を制御する音声信号制御手段を備えている。【選択図】  図１
2005005843.tif 000002
【特許請求の範囲】
【請求項１】
基準映像を含んでいるメインストリームとは別に、基準映像に対して撮像方向および／または視点位置を変化させた１または複数の映像それぞれに対応するサブストリームが記録されており、かつメインストリームにのみ基準映像に対応する音声信号が含まれているディスクを再生する際に、メインストリームおよびサブストリームから任意のストリームを選択させて表示させるアングル機能を備えている再生装置において、
ディスクには、メインストリームおよびサブストリームの各ストリーム毎に、所定の空間内での視点の位置に関する情報および映像の撮像方向に関する情報を記憶したテーブルが記録されており、
アングル機能によってサブストリームが選択された際に、ディスクに記録されているテーブル内における、選択されたサブストリームに対応する視点の位置に関する情報および映像の撮像方向に関する情報と、基準映像に対応する音声信号とに基づいて、各スピーカに対応する音声信号を制御する音声信号制御手段を備えていることを特徴とするディスク再生装置。
【請求項２】
音声信号制御手段は、選択されたサブストリームに対応する視点の位置に関する情報に基づいて、各スピーカに対応する音声信号の大きさを調整する第１手段、ならびに
第１手段によって得られた各スピーカに対応する音声信号を基準として、選択されたサブストリームに対応する映像の撮像方向に関する情報に基づいて、各スピーカの音声信号の成分を調整する第２手段、
を備えていることを特徴とする請求項１に記載のディスク再生装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、例えば、ＤＶＤプレーヤ等の再生装置に関する。
【０００２】
【従来の技術】
光ディスクとして、基準映像を含んでいるメインストリームとは別に、基準映像に対して撮像方向や視点位置を変化させた１または複数の映像それぞれに対応するサブストリームが記録されており、かつメインストリームにのみ基準映像に対応する音声信号が含まれているものがある。
ＤＶＤプレーヤとして、上記のような光ディスクを再生する際に、メインストリームおよびサブストリームから任意のストリームを選択させて表示させるアングル機能を備えているものがある。
【０００３】
【発明が解決しようとする課題】
ストリームを切り替えることにより、表示映像を撮像方向や視点位置が異なるる映像に切り替えることはできるが、そのときに出力される音声は映像の切り替えに対応して変化させるといったことは行われていない。表示映像が撮像方向や視点位置が異なる映像に切り替えられた場合には、表示映像の変化に伴って、音声も変化するため、本来であれば音声も変化させるべきである。
【０００４】
この発明は、アングル機能によって映像を切り替えた際に、音声を変化させることにより、より臨場感が得られるディスク再生装置を提供することを目的とする。
【０００５】
【課題を解決するための手段】
請求項１に記載の発明は、基準映像を含んでいるメインストリームとは別に、基準映像に対して撮像方向および／または視点位置を変化させた１または複数の映像それぞれに対応するサブストリームが記録されており、かつメインストリームにのみ基準映像に対応する音声信号が含まれているディスクを再生する際に、メインストリームおよびサブストリームから任意のストリームを選択させて表示させるアングル機能を備えている再生装置において、ディスクには、メインストリームおよびサブストリームの各ストリーム毎に、所定の空間内での視点の位置に関する情報および映像の撮像方向に関する情報を記憶したテーブルが記録されており、アングル機能によってサブストリームが選択された際に、ディスクに記録されているテーブル内における、選択されたサブストリームに対応する視点の位置に関する情報および映像の撮像方向に関する情報と、基準映像に対応する音声信号とに基づいて、各スピーカに対応する音声信号を制御する音声信号制御手段を備えていることを特徴とする。
請求項２に記載の発明は、請求項１に記載のディスク再生装置において、音声信号制御手段は、選択されたサブストリームに対応する視点の位置に関する情報に基づいて、各スピーカに対応する音声信号の大きさを調整する第１手段、ならびに第１手段によって得られた各スピーカに対応する音声信号を基準として、選択されたサブストリームに対応する映像の撮像方向に関する情報に基づいて、各スピーカの音声信号の成分を調整する第２手段を備えていることを特徴とする。
【０００６】
【発明の実施の形態】
以下、図面を参照して、この発明をＤＶＤプレーヤに適用した場合の実施の形態について説明する。
【０００７】
図１は、ＤＶＤプレーヤの電気的構成を示している。
【０００８】
１は光ディスクから情報を読み取るドライブ部である。２はドライブ部が読み取った情報をビデオ／オーディオ信号にデコードするデコード部である。ドライブ部１およびデコード部２は図示しないＣＰＵによって制御される。
【０００９】
３はデコード部２によって得られたビデオ信号に対して所定のビデオ処理を施して、モニタ４にビデオ信号を供給するビデオ処理部である。５はデコード部２によって得られたオーディオ信号に対して所定のオーディオ処理を施して、各スピーカ１１〜１４に対応するオーディオ信号を出力するオーディオ処理部である。
【００１０】
スピーカ１１はフロントレフト（ＦＬ）のスピーカであり、スピーカ１２はフロントライト（ＦＲ）のスピーカであり、スピーカ１３はサラウンドレフト（ＳＬ）のスピーカであり、スピーカ１４はサラウンドライト（ＳＲ）のスピーカである。
【００１１】
光ディスクには、基準映像を含んでいるメインストリームとは別に、基準映像に対して撮像方向および／または視点位置を変化させた１または複数の映像それぞれに対応するサブストリームが記録されている。そして、メインストリームにのみ基準映像に対応する音声信号が含まれている。
【００１２】
このＤＶＤプレーヤは、メインストリームおよびサブストリームから任意のストリームを選択させて表示させるアングル機能を備えている。さらに、このＤＶＤプレーヤは、アングル機能によってサブストリームが選択された際に、各スピーカ１１〜１４に対応する音声信号を制御する機能を備えている。ここでは、説明を簡略化するため２次元の場面を例にするが、３次元の場面にも応用できるものである。
【００１３】
光ディスクには、メインストリームおよびサブストリームの各ストリーム（アングルストリーム）毎に、図２に示すような４つの仮想音源ＱＦＬ、ＱＦＲ、ＱＳＬ、ＱＳＲが存在する２Ａ×２Ｂの仮想空間内での視聴者１００の位置を表す位置情報（Ｘ，Ｙ）と、その映像がどの方向から撮影された映像であるかを表す角度情報θとを記憶したテーブルが記録されている。図３は、アングルストリーム毎に位置情報（Ｘ，Ｙ）と角度情報θとを記憶したテーブルの例を示している。なお、ストリーム番号が”１”のストリームは、メインストリームであり、位置情報が（０，０）であり、θが０°となっている。
【００１４】
アングル機能によってサブストリームが選択された際に、どのようにスピーカ１１〜１４に対応する音声信号を制御するかについて説明する。ここでは、図３中のストリーム番号が”２”のストリームが選択された場合を例に取って説明する。
【００１５】
ストリーム番号が”２”のサブストリームでは、メインストリーム（ストリーム番号が”１”のストリーム）に対して、上記２Ａ×２Ｂの仮想空間内での視聴者１００の位置が図２のＰ１（０，０）からＰ２（Ｘ２，Ｙ２）に変更されるとともに、映像の撮像方向θが０°からθ２°に変更されることになる。
【００１６】
まず、上記２Ａ×２Ｂの仮想空間内での視聴者１００の位置の変更に基づいて、スピーカ１１〜１４に対する音声信号の大きさを変更する。
【００１７】
実世界では、音の聞こえる大きさは、音源に近づくにつれて大きくなり、離れるにしたがって小さくなる。そこで、視聴者１００の位置から各仮想音源ＱＦＬ、ＱＦＲ、ＱＳＬ、ＱＳＲまでの距離に基づいて、スピーカ１１〜１４に対応する音声信号の大きさを変更する。
【００１８】
図２を参照して、仮想音源ＱＦＬからの音に関しては、その音を位置Ｐ１で聞く場合には（Ａ２  ＋Ｂ２  ）１／２  の距離があるのに対して、その音を位置Ｐ２で聞く場合には、｛（Ａ−Ｘ２）２  ＋（Ｂ−Ｙ２）２  ｝１／２  の距離となる。したがって、位置Ｐ２での仮想音源ＱＦＬからの音の大きさは、位置Ｐ１での音量の〔（Ａ２  ＋Ｂ２  ）１／２  ／｛（−Ａ−Ｘ２）２  ＋（Ｂ−Ｙ２）２  ｝１／２  〕倍となるようにする。他の仮想音源ＱＦＲ、ＱＳＬ、ＱＳＲからの音の音量についても同様に算出できる。
【００１９】
以上のことから、位置Ｐ１の場合の各スピーカ１１〜１４に対応する音声信号（基準映像に対応する音声信号）をＦＬ１、ＦＲ１、ＳＬ１、ＳＲ１とし、位置Ｐ２に対応するスピーカ１１〜１４に対応する音声信号をＦＬ２、ＦＲ２、ＳＬ２、ＳＲ２とすると、ＦＬ２、ＦＲ２、ＳＬ２、ＳＲ２は、次式（１）〜（４）で表される。
【００２０】
ＦＬ２＝ＦＬ１×〔（Ａ２  ＋Ｂ２  ）１／２  ／｛（−Ａ−Ｘ２）２  ＋（Ｂ−Ｙ２）２  ｝１／２  〕      …（１）
ＦＲ２＝ＦＲ１×〔（Ａ２  ＋Ｂ２  ）１／２  ／｛（Ａ−Ｘ２）２  ＋（Ｂ−Ｙ２）２  ｝１／２  〕        …（２）
ＳＬ２＝ＳＬ１×〔（Ａ２  ＋Ｂ２  ）１／２  ／｛（−Ａ−Ｘ２）２  ＋（−Ｂ−Ｙ２）２  ｝１／２  〕    …（３）
ＳＲ２＝ＳＲ１×〔（Ａ２  ＋Ｂ２  ）１／２  ／｛（−Ａ−Ｘ２）２  ＋（Ｂ−Ｙ２）２  ｝１／２  〕      …（４）
【００２１】
このようにして得られた各スピーカ１１〜１４に対する音声信号ＦＬ２、ＦＲ２、ＳＬ２、ＳＲ２を基に、映像の撮像方向の変更に基づいて、各スピーカ１１〜１４に対応する音声信号を変更する。
【００２２】
この例では、図４に示すように、映像の撮像方向θが０°からθ２°に変更されたとする。映像の撮像方向θが０°からθ２°に変更された場合には、図５に示すように、視聴者の視線方向が０°〜θ２°に変化したと考えられる。図５を参照すると、０°＜θ２＜９０°のとき、変更後の音源位置ＦＬ’での音声信号は、変更前の音源ＦＬの音声信号と音源ＦＲの音声信号とが合成されたものとなる。撮像方向が変更される前の各スピーカ１１〜１４に対応する音声信号として、視聴者１００の位置の変更に基づいて算出された各スピーカ１１〜１４に対応する音声信号ＦＬ２、ＦＲ２、ＳＬ２、ＳＲ２を用いる。
【００２３】
撮像方向が変更された後のスピーカ１１に対する音声信号をＦＬ２’とすると、ＦＬ２’は図６から分かるように、次式（５）で表される。
【００２４】
ＦＬ２’＝ＦＬ２×ｃｏｓ  θ２＋ＦＲ２×ｓｉｎ  θ２    …（５）
【００２５】
同様に、撮像方向が変更された後のスピーカ１２、１３、１４に対する音声信号ＦＲ２’、ＳＬ２’、ＳＲ２’は、次式（６）、（７）、（８）で表される。
【００２６】
ＦＲ２’＝ＦＲ２×ｃｏｓ  θ２＋ＳＲ２×ｓｉｎ  θ２    …（６）
ＳＬ２’＝ＳＬ２×ｃｏｓ  θ２＋ＦＬ２×ｓｉｎ  θ２    …（７）
ＳＲ２’＝ＳＲ２×ｃｏｓ  θ２＋ＳＬ２×ｓｉｎ  θ２    …（８）
【００２７】
このようにして、求められたＦＬ２’、ＦＲ２’、ＳＬ２’、ＳＲ２’が、ストリーム番号２のストリームが選択された場合の各スピーカ１１〜１４に対応する音声信号となる。
【００２８】
上記は、θが０°＜θ＜９０°である場合について説明したが、θが９０°を越える場合にも、同様な考え方で撮像方向変更後の各スピーカ１１〜１４に対応する音声信号を求めることができる。
【００２９】
なお、ストリームが他のストリーム番号に切り替えられた場合にも、基準映像に対応する音声信号を基に、各スピーカ１１〜１４に対応する音声信号が求められる。
【００３０】
【発明の効果】
この発明によれば、アングル機能によって映像を切り替えた際に、音声を変化させることにより、より臨場感が得られるようになる。
【図面の簡単な説明】
【図１】ＤＶＤプレーヤの電気的構成を示すブロック図である。
【図２】４つの仮想音源ＱＦＬ、ＱＦＲ、ＱＳＬ、ＱＳＲが存在する２Ａ×２Ｂの仮想空間内での視聴者１００の位置を表す模式図である。
【図３】アングルストリーム毎に位置情報（Ｘ，Ｙ）と角度情報θとを記憶したテーブルの例を示す模式図である。
【図４】映像の撮像方向θが０°からθ２°に変更されたことを示す模式図である。
【図５】視聴者の視線方向が０°〜θ２°に変化したと考えた場合の模式図である。
【図６】撮像方向が変更された後のスピーカ１１に対する音声信号ＦＬ２’の求め方を説明するための説明図である。
【符号の説明】
１  ドライブ部
２  デコード部
３  ビデオ処理部
４  モニタ
５  オーディオ処理部
１１〜１４  スピーカ
【図１】
2005005843.tif 000003
【図２】
2005005843.tif 000004
【図３】
2005005843.tif 000005
【図４】
2005005843.tif 000006
【図５】
2005005843.tif 000007
【図６】
2005005843.tif 000008