(57)【特許請求の範囲】
【請求項１】
左音声信号および右音声信号を処理して所定位置に音像を定位させる音像制御部を備え、
上記音像制御部は、
入力音声信号に元々含まれる音像の奥行き感を、上記入力音声信号のレベルに基づいて強調制御する
音像制御装置。
【請求項２】
上記音像制御部は、
上記入力音声信号から直接音信号を抽出する直接音用フィルタと、
上記入力音声信号から間接音信号を抽出する間接音用フィルタと、
上記間接音用フィルタで抽出された間接音信号を遅延させる遅延器と、
上記直接音用フィルタで抽出された直接音信号を増幅する第１の増幅器と、
上記遅延器で遅延された間接音信号を増幅する第２の増幅器と、
上記入力音声信号のレベルに応じて、上記第１の増幅器の信号増幅量を制御する第１の音圧制御部と、
上記第１の増幅器で増幅された直接音信号および上記第２の増幅器で増幅された間接音信号を加算して出力音声信号を得る加算部とを有する
請求項１に記載の音像制御装置。
【請求項３】
上記第１の音圧制御部は、少なくとも、上記入力音声信号の第１のレベルより大きなレベル範囲で上記第１の信号増幅器の信号増幅量を大きくするか、または、上記入力音声信号の上記第１のレベルより小さい第２のレベルより小さなレベル範囲で上記第１の増幅器の信号増幅量を小さくする
請求項２に記載の音像制御装置。
【請求項４】
上記音像制御部は、
上記入力音声信号のレベルに応じて上記第２の増幅器の信号増幅量を上記第１の音圧制御部による上記第１の増幅器の信号増幅量の制御とは逆の特性となるように制御する第２の音圧制御部をさらに有する
請求項２に記載の音像制御装置。
【請求項５】
上記音像制御部は、
上記入力音声信号のレベルに応じて上記遅延器の信号遅延量を制御する遅延制御部をさらに有する
請求項２に記載の音像制御装置。
【請求項６】
上記遅延制御部は、少なくとも、上記入力音声信号の第１のレベルより大きなレベル範囲で上記遅延器の信号遅延量を小さくするか、または、上記入力音声信号の上記第１のレベルより小さい第２のレベルより小さなレベル範囲で上記遅延器の信号遅延量を大きくする
請求項５に記載の音像制御装置。
【請求項７】
左音声信号および右音声信号を処理して所定位置に音像を定位させる音像制御方法であって、
入力音声信号のレベルに応じて、該入力音声信号に元々含まれる音像の奥行き感を強調制御する
音像制御方法。
【請求項８】
左音声信号および右音声信号を処理して所定位置に音像を定位させる音像制御部を備え、
上記音像制御部は、
入力音声信号に元々含まれる音像の奥行き感を、上記入力音声信号のレベルおよび該入力音声信号に対応した立体映像を構成する左眼映像および右眼映像の視差情報に基づいて強調制御する
音像制御装置。
【請求項９】
上記音像制御部は、
上記入力音声信号から直接音信号を抽出する直接音用フィルタと、
上記入力音声信号から間接音信号を抽出する間接音用フィルタと、
上記間接音用フィルタで抽出された間接音信号を遅延させる遅延器と、
上記直接音用フィルタで抽出された直接音信号を増幅する第１の増幅器と、
上記遅延器で遅延された間接音信号を増幅する第２の増幅器と、
上記入力音声信号のレベルおよび上記視差情報に応じて、上記第１の増幅器の信号増幅量を制御する第１の音圧制御部と、
上記第１の増幅器で増幅された直接音信号および上記第２の増幅器で増幅された間接音信号を加算して出力音声信号を得る加算部とを有する
請求項８に記載の音像制御装置。
【請求項１０】
上記第１の音圧制御部は、少なくとも、上記入力音声信号の第１のレベルより大きなレベル範囲で上記第１の信号増幅器の信号増幅量を視差の大きさに対応した量だけ大きくするか、または、上記入力音声信号の上記第１のレベルより小さな第２のレベルより小さなレベル範囲で上記第１の増幅器の信号増幅量を視差の大きさに対応した量だけ小さくする
請求項９に記載の音像制御装置。
【請求項１１】
上記音像制御部は、
上記入力音声信号のレベルおよび上記視差情報に応じて上記第２の増幅器の信号増幅量を上記第１の音圧制御部による上記第１の増幅器の信号増幅量の制御とは逆の特性となるように制御する第２の音圧制御部をさらに有する
請求項９に記載の音像制御装置。
【請求項１２】
上記音像制御部は、
上記入力音声信号のレベルおよび上記視差情報に応じて上記遅延器の信号遅延量を制御する遅延制御部をさらに有する
請求項９に記載の音像制御装置。
【請求項１３】
上記遅延制御部は、少なくとも、上記入力音声信号の第１のレベルより大きなレベル範囲で上記遅延器の信号遅延量を視差の大きさに対応した量だけ小さくするか、または、上記入力音声信号の上記第１のレベルより小さい第２のレベルより小さなレベル範囲で上記遅延器の信号遅延量を視差の大きさに対応した量だけ大きくする
請求項１２に記載の音像制御装置。
【請求項１４】
左音声信号および右音声信号を処理して所定位置に音像を定位させる音像制御方法であって、
入力音声信号のレベルおよび該入力音声信号に対応した立体映像を構成する左眼映像および右眼映像の視差情報に応じて、該入力音声信号に元々含まれる音像の奥行き感を強調制御する
音像制御方法。
【請求項１５】
上記音像制御部の出力側に、クロストークキャンセル補正部をさらに備える
請求項１または８に記載の音像制御装置。
【請求項１６】
左音声信号および右音声信号を処理して所定位置に音像を定位させる音像制御部を備え、
上記音像制御部は、入力音声信号に元々含まれる音像の奥行き感を強調制御し、
上記音像制御部における上記入力音声信号に元々含まれる音像の奥行き感の強調の度合いを切り換える切り換え操作部をさらに備え、
上記音像制御部は、
上記入力音声信号から直接音信号を抽出する直接音用フィルタと、
上記入力音声信号から間接音信号を抽出する間接音用フィルタと、
上記間接音用フィルタで抽出された間接音信号を遅延させる遅延器と、
上記直接音用フィルタで抽出された直接音信号を増幅する第１の増幅器と、
上記遅延器で遅延された間接音信号を増幅する第２の増幅器と、
上記入力音声信号のレベルに応じて、上記第１の増幅器の信号増幅量を制御する第１の音圧制御部と、
上記入力音声信号のレベルに応じて上記第２の増幅器の信号増幅量を上記第１の音圧制御部による上記第１の増幅器の信号増幅量の制御とは逆の特性となるように制御する第２の音圧制御部と、
上記入力音声信号のレベルに応じて上記遅延器の信号遅延量を制御する遅延制御部と、
上記第１の増幅器で増幅された直接音信号および上記第２の増幅器で増幅された間接音信号を加算して出力音声信号を得る加算部とを有し、
上記切り換え操作部は、上記第１の音圧制御部、上記第２の音圧制御部および上記遅延制御部の制御動作を切り換える
音像制御装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、音像制御装置および音像制御方法に関し、特に、２チャネルステレオ音声信号を再生するヘッドホン装置、スピーカ装置等に適用できる音像制御装置等に関する。
【背景技術】
【０００２】
例えば、特許文献１には、バーチャル・リアリティの実現を目ざして、聴取者（リスナ）の頭部に装着された２チャンネルステレオ音声再生装置において、音源に対する聴取者の相対的な位置に応じて音像を制御すること、が記載されている。
【０００３】
また、例えば、特許文献２には、立体映像において左右の映像の水平ずれ量を検出することにより、リアルタイムな遠近データの取得を可能とし、その遠近データに応じて音声信号の増幅量と遅延量を変えることで、立体映像にマッチした音像の作成を実現すること、が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平０８−００９４９８号公報
【特許文献２】特開平０８−２０５２９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述の特許文献１に記載される発明にあっては音源に対する聴取者の相対的な位置に応じて音像を制御するものである。また、上述の特許文献２に記載される発明にあっては立体画像データから取得された遠近データに応じて音像を制御するものである。これらの音像制御は、元々の音声信号に含まれる音像の距離感からさらに奥行きが出るように強調制御するものではない。
【０００６】
本技術の目的は、元々の音声信号に含まれる音像の距離感をさらに奥行きが出るように強調制御することにある。
【課題を解決するための手段】
【０００７】
本技術の概念は、
左音声信号および右音声信号を処理して所定位置に音像を定位させる音像制御部を備え、
上記音像制御部は、
入力音声信号に元々含まれる音像の奥行き感を強調制御する
音像制御装置にある。
【０００８】
本技術においては、音像制御部により、左音声信号および右音声信号が処理されて所定位置に音像が定位するようにされる。そして、この音像制御部では、入力音声信号に元々含まれる音像の奥行き感が強調制御される。
【０００９】
本技術において、例えば、音像制御部では、入力音声信号に元々含まれる音像の奥行き感を、入力音声信号のレベルに基づいて強調制御する、ようにされる。例えば、音像制御部は、入力音声信号から直接音信号を抽出する直接音用フィルタと、入力音声信号から間接音信号を抽出する間接音用フィルタと、間接音用フィルタで抽出された間接音信号を遅延させる遅延器と、直接音用フィルタで抽出された直接音信号を増幅する第１の増幅器と、遅延器で遅延された間接音信号を増幅する第２の増幅器と、入力音声信号のレベルに応じて、第１の増幅器の信号増幅量を制御する第１の音圧制御部と、第１の増幅器で増幅された直接音信号および第２の増幅器で増幅された間接音信号を加算して出力音声信号を得る加算部とを有する、ようにされる。
【００１０】
この場合、例えば、第１の音圧制御部は、少なくとも、入力音声信号の第１のレベルより大きなレベル範囲で第１の信号増幅器の信号増幅量を大きくするか、または、入力音声信号の第１のレベルより小さな第２のレベルより小さなレベル範囲で第１の増幅器の信号増幅量を小さくする、ようにされる。
【００１１】
また、この場合、例えば、音像制御部は、入力音声信号のレベルに応じて第２の増幅器の信号増幅量を第１の音圧制御部による第１の増幅器の信号増幅量の制御とは逆の特性となるように制御する第２の音圧制御部をさらに有する、ようにされる。
【００１２】
また、この場合、例えば、音像制御部は、入力音声信号のレベルに応じて遅延器の信号遅延量を制御する遅延制御部をさらに有する、ようにされる。例えば、遅延制御部は、少なくとも、入力音声信号の第１のレベルより大きなレベル範囲で遅延器の信号遅延量を小さくするか、または、入力音声信号の第１のレベルより小さい第２のレベルより小さなレベル範囲で遅延器の信号遅延量を大きくする、ようにされる。
【００１３】
また、本技術において、例えば、音像制御部における入力音声信号に元々含まれる音像の奥行き感の強調の度合いを切り換える切り換え操作部をさらに備える、ようにされる。例えば、携帯ゲーム機などのポータブル機器であるか、あるいは大型のテレビ受信機
であるか等により、想定される聴取者（リスナ）の距離感がある。上述の奥行き感の強調の度合いを切り換える切り換え操作部を備えることで、機器に合った距離感の強調を行うことが可能となる。
【００１４】
この場合、例えば、音像制御部は、入力音声信号から直接音信号を抽出する直接音用フィルタと、入力音声信号から間接音信号を抽出する間接音用フィルタと、間接音用フィルタで抽出された間接音信号を遅延させる遅延器と、直接音用フィルタで抽出された直接音信号を増幅する第１の増幅器と、遅延器で遅延された間接音信号を増幅する第２の増幅器と、入力音声信号のレベルに応じて、第１の増幅器の信号増幅量を制御する第１の音圧制御部と、入力音声信号のレベルに応じて第２の増幅器の信号増幅量を第１の音圧制御部による第１の増幅器の信号増幅量の制御とは逆の特性となるように制御する第２の音圧制御部と、入力音声信号のレベルに応じて遅延器の信号遅延量を制御する遅延制御部と、第１の増幅器で増幅された直接音信号および第２の増幅器で増幅された間接音信号を加算して出力音声信号を得る加算部とを有し、切り換え操作部は、第１の音圧制御部、第２の音圧制御部および遅延制御部の制御動作を切り換える、ようにされる。
【００１５】
また、本技術において、例えば、音像制御部は、入力音声信号に元々含まれる音像の奥行き感を、入力音声信号のレベルおよび入力音声信号に対応した立体映像を構成する左眼映像および右眼映像の視差情報に基づいて強調制御する、ようにされる。このように視差情報に基づいて強調制御が行われることで、立体映像にマッチしたより一層奥行きのある音像表現が実現可能となる。
【００１６】
この場合、例えば、音像制御部は、入力音声信号から直接音信号を抽出する直接音用フィルタと、入力音声信号から間接音信号を抽出する間接音用フィルタと、間接音用フィルタで抽出された間接音信号を遅延させる遅延器と、直接音用フィルタで抽出された直接音信号を増幅する第１の増幅器と、遅延器で遅延された間接音信号を増幅する第２の増幅器と、入力音声信号のレベルおよび視差情報に応じて、第１の増幅器の信号増幅量を制御する第１の音圧制御部と、第１の増幅器で増幅された直接音信号および第２の増幅器で増幅された間接音信号を加算して出力音声信号を得る加算部とを有する、ようにされる。
【００１７】
そして、例えば、第１の音圧制御部は、少なくとも、入力音声信号の第１のレベルより大きなレベル範囲で第１の信号増幅器の信号増幅量を視差の大きさに対応した量だけ大きくするか、または、入力音声信号の第１のレベルより小さい第２のレベルより小さなレベル範囲で第１の増幅器の信号増幅量を視差の大きさに対応した量だけ小さくする、ようにされる。
【００１８】
また、例えば、音像制御部は、入力音声信号のレベルおよび視差情報に応じて第２の増幅器の信号増幅量を第１の音圧制御部による第１の増幅器の信号増幅量の制御とは逆の特性となるように制御する第２の音圧制御部をさらに有する、ようにされる。
【００１９】
また、例えば、音像制御部は、入力音声信号のレベルおよび視差情報に応じて遅延器の信号遅延量を制御する遅延制御部をさらに有する、ようにされる。この場合、例えば、遅延制御部は、少なくとも、入力音声信号の第１のレベルより大きなレベル範囲で遅延器の信号遅延量を視差の大きさに対応した量だけ小さくするか、または、入力音声信号の第１のレベルより小さな第２のレベルより小さな第２のレベルより小さなレベル範囲で遅延器の信号遅延量を視差の大きさに対応した量だけ大きくする、ようにされる。
【００２０】
また、本技術において、例えば、音像制御部の出力側に、クロストークキャンセル補正部をさらに備える、ようにされる。このようにクロストークキャンセル補正部を備えることで、２チャネルステレオ音声信号を再生するスピーカ装置においても、ヘッドホン装置と同様に適用可能となる。
【発明の効果】
【００２１】
本技術によれば、元々の音声信号に含まれる音像の距離感をさらに奥行きが出るように強調制御することができる。
【図面の簡単な説明】
【００２２】
【図１】本技術の第１の実施の形態としての音像制御装置の構成例を示すブロック図である。
【図２】スピーカ再生による音の伝播の様子を示す図である。
【図３】音像制御装置を構成する音像制御回路の構成例を示すブロック図である。
【図４】音像制御回路を構成する直接音用ＦＩＲフィルタ、間接音用ＦＩＲフィルタの構成例を示す図である。
【図５】直接音用ＦＩＲフィルタで畳み込むための直接音係数データと、間接音用ＦＩＲフィルタで畳み込むための間接音係数データの測定方法の一例を説明するための図である。
【図６】直接音用ＦＩＲフィルタで畳み込むための直接音係数データと、間接音用ＦＩＲフィルタで畳み込むための間接音係数データの測定方法の他の例を説明するための図である。
【図７】音像制御回路を構成する音圧制御部の構成例を示すブロック図である。
【図８】音圧制御部における直接音信号の信号増幅量の制御動作の一例を説明するための図である。
【図９】音圧制御部における間接音信号の信号増幅量の制御動作の一例を説明するための図である。
【図１０】音像制御回路を構成する遅延制御部の構成例を示すブロック図である。
【図１１】遅延制御部における間接音信号の信号遅延量の制御動作の一例を説明するための図である。
【図１２】リスナ（ユーザ）が、音像の奥行き感の強調度合いを切り換える際に表示部に表示されるＧＵＩの一例を示す図である。
【図１３】元々の音声信号に含まれる音像の距離感をさらに奥行きが出るように強調制御されるという効果を概略的に示す図である。
【図１４】本技術の第２の実施の形態としての音像制御装置の一例を示すブロック図である。
【図１５】音像制御装置を構成する音像制御回路の構成例を示すブロック図である。
【図１６】音像制御回路を構成する音圧制御部の構成例を示すブロック図である。
【図１７】音圧制御部における直接音信号の信号増幅量の制御動作の一例を説明するための図である。
【図１８】音圧制御部における間接音信号の信号増幅量の制御動作の一例を説明するための図である。
【図１９】音像制御回路を構成する遅延制御部の構成例を示すブロック図である。
【図２０】遅延制御部における間接音信号の信号遅延量の制御動作の一例を説明するための図である。
【図２１】本技術の第３の実施の形態としての音像制御装置の一例を示すブロック図である。
【図２２】スピーカ再生による音の伝播の様子を示し、本来、左側スピーカＳＰＬから放音される音声はリスナＭの両方の耳に伝達され、右側スピーカＳＰＲから放音される音声はリスナＭの両方の耳に伝達されることを示す図である。
【図２３】音像制御装置を構成するクロストークキャンセル補正部の構成例を示すブロック図である。
【図２４】音圧制御部における直接音信号の信号増幅量の制御動作の種々の例を説明するための図である。
【発明を実施するための形態】
【００２３】
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．第３の実施の形態
４．変形例
【００２４】
＜１．第１の実施の形態＞
［音像制御装置の構成例］
図１は、第１の実施の形態としての音像制御装置１０の構成例を示している。この音像制御装置１０は、２チャネルステレオ音声信号を再生するヘッドホン装置への適用例を示している。この音像制御装置１０は、音像制御回路１００ＬＬと、音像制御回路１００ＬＲと、音像制御回路１００ＲＲと、音像制御回路１００ＲＬと、加算器１２０Ｌと、加算器１２０Ｒを有している。
【００２５】
図２は、スピーカ再生による音の伝播の様子を示している。左側スピーカＳＰＬ、右側スピーカＳＰＲで再生された音は、リスナＭの耳での反射や、回折、さらに部屋の反射などが付加された特性となる。左側スピーカＳＰＬで再生された音は、左耳への伝達特性ＨLLおよび右耳への伝達特性ＨLRがそれぞれ付加されて、リスナＭの両耳に到達する。また、右側スピーカＳＰＲで再生された音は、右耳への伝達特性ＨRRおよび左耳への伝達特性RLがそれぞれ付加されて、リスナＭの両耳に到達する。
【００２６】
図１戻って、音像制御回路１００ＬＬは、上述の左側スピーカＳＰＬからリスナＭの左耳に至る伝達特性ＨLLを持つフィルタを有し、入力される左音声信号ＳＬに対してフィルタ処理を施し、リスナＭの左耳に入力すべき左音声信号ＳLLを生成する。また、音像制御回路１００ＬＲは、上述の左側スピーカＳＰＬからリスナＭの右耳に至る伝達特性ＨLRを持つフィルタを有し、入力される左音声信号ＳＬに対してフィルタ処理を施し、リスナＭの右耳に入力すべき左音声信号ＳLRを生成する。
【００２７】
また、音像制御回路１００ＲＲは、上述の右側スピーカＳＰＲからリスナＭの右耳に至る伝達特性ＨRRを持つフィルタを有し、入力される右音声信号ＳＲに対してフィルタ処理を施し、リスナＭの右耳に入力すべき右音声信号ＳRRを生成する。また、音像制御回路１００ＲＬは、上述の左側スピーカＳＰＲからリスナＭの左耳に至る伝達特性ＨRLを持つフィルタを有し、入力される右音声信号ＳＲに対してフィルタ処理を施し、リスナＭの左耳に入力すべき右音声信号ＳRLを生成する。
【００２８】
なお、音像制御回路１００ＬＬ，１００ＬＲ，１００ＲＲ，１００ＲＬは、上述のフィルタ処理の他に、入力音声信号のレベルに応じて、音像制御処理を行う。この音像制御処理は、直接音信号の信号増幅量の制御、間接音信号の信号増幅量の制御、間接音信号の信号遅延量の制御などである。
【００２９】
加算器１２０Ｌは、音像制御回路１００ＬＬで生成される左音声信号ＳLLに、音像制御回路１００ＲＬで生成される右音声信号ＳRLを加算して、図示しないヘッドホンの左側スピーカに供給すべき左音声信号ＳＬ′を得る。また、加算器１２０Ｒは、音像制御回路１００ＲＲで生成される右音声信号ＳRRに、音像制御回路１００ＬＲで生成される左音声信号ＳLRを加算して、図示しないヘッドホンの右側スピーカに供給すべき右音声信号ＳＲ′を得る。
【００３０】
図１に示す音像制御装置１０の動作を簡単に説明する。左音声信号ＳＬは、音像制御回路１００ＬＬおよび音像制御回路１００ＬＲに供給される。音像制御回路１００ＬＬでは、左音声信号ＳＬに対してフィルタ処理が施され、さらに入力音声信号レベルに基づいて音像制御処理が施されて、リスナＭの左耳に入力すべき左音声信号ＳLLが生成される。また、音像制御回路１００ＬＲでは、左音声信号ＳＬに対してフィルタ処理が施され、さらに入力音声信号レベルに基づいて音像制御処理が施されて、リスナＭの右耳に入力すべき左音声信号ＳLRが生成される。
【００３１】
また、右音声信号ＳＲは、音像制御回路１００ＲＲおよび音像制御回路１００ＲＬに供給される。音像制御回路１００ＲＲでは、右音声信号ＳＲに対してフィルタ処理が施され、さらに入力音声信号レベルに基づいて音像制御処理が施されて、リスナＭの右耳に入力すべき右音声信号ＳRRが生成される。また、音像制御回路１００ＲＬでは、右音声信号ＳＲに対してフィルタ処理が施され、さらに入力音声信号レベルに基づいて音像制御処理が施されて、リスナＭの左耳に入力すべき右音声信号ＳRLが生成される。
【００３２】
音像制御回路１００ＬＬで生成された左音声信号ＳLLおよび音像制御回路１００ＲＬで生成された右音声信号ＳRLは加算器１２０Ｌに供給される。この加算器１２０Ｌでは、左音声信号ＳLLに右音声信号ＳRLが加算されて、ヘッドホンの左側スピーカに供給すべき左音声信号ＳＬ′が得られる。また、音像制御回路１００ＲＲで生成された右音声信号ＳRRおよび音像制御回路１００ＬＲで生成された左音声信号ＳLRは加算器１２０Ｒに供給される。この加算器１２０Ｒでは、右音声信号ＳRRに左音声信号ＳLRが加算されて、ヘッドホンの右側スピーカに供給すべき右音声信号ＳＲ′が得られる。
【００３３】
図３は、音像制御回路１００（１００ＬＬ，１００ＬＲ，１００ＲＲ，１００ＲＬ）の構成例を示している。この音像制御回路１００は、制御部１０１と、ユーザ操作部１０２と、表示部１０３を有している。また、この音像制御回路１００は、直接音用ＦＩＲ（Finite Impulse Response）フィルタ１１１と、間接音用ＦＩＲフィルタ１１２を有している。また、この音像制御回路１００は、遅延器１１３と、増幅器１１４，１１５と、音圧制御部１１６，１１７と、遅延制御部１１８と、加算器１１９を有している。
【００３４】
制御部１０１は、例えば、マイクロコンピュータを備えてなり、音像制御回路１００の各部の動作を制御する。ユーザ操作部１０２および表示部１０３は、ユーザインタフェースを構成しており、制御部１０１に接続されている。
【００３５】
直接音用ＦＩＲフィルタ１１１は、入力音声信号ＳＡから直接音信号を生成するためのフィルタである。また、間接音用ＦＩＲフィルタ１１２は、入力音声信号ＳＡから間接音信号を生成するためのフィルタである。図４は、これらのフィルタ１１１，１１２を構成するＦＩＲフィルタの構成例を示している。ＦＩＲフィルタは、図示のように、乗算器と、遅延器と、加算器等の演算器により構成されている。演算器の数は、係数データのサンプル分だけ必要となる。
【００３６】
ここで、図５を参照して、直接音用ＦＩＲフィルタ１１１で畳み込むための直接音係数データと、間接音用ＦＩＲフィルタ１１２で畳み込むための間接音係数データの測定方法の一例を説明する。この測定方法においては、ある残響を有する視聴室において、スピーカＳＰからリスナＭの耳介の外耳道入口に設置したマイクロホンまでのインパルス応答を取得する。このインパルス応答を初期データと後期データに分け、初期データを直接音係数データとし、後期データを間接音係数データとする。
【００３７】
次に、図６を参照して、直接音用ＦＩＲフィルタ１１１で畳み込むための直接音係数データと、間接音用ＦＩＲフィルタ１１２で畳み込むための間接音係数データの測定方法の他の例を説明する。この測定方法においては、図６（ａ）に示すように、残響を有しない無響室において、スピーカＳＰからリスナＭの耳介の外耳道入口に設置したマイクロホンまでのインパルス応答を取得する。このインパルス応答を直接音係数データとする。また、この測定方法においては、図６（ｂ）に示すように、ある残響を有する視聴室において、スピーカＳＰから視聴位置の置かれたマイクロホンＭＩＣまでのインパルス応答を取得する。このインパルス応答を間接音係数データとする。
【００３８】
図３に戻って、遅延器１１３は、間接音用フィルタ１１２で生成される間接音信号を、遅延制御部１１８からの信号遅延量を示す音像制御パラメータに基づいて、遅延させる。また、増幅器１１４は、直接音用ＦＩＲフィルタ１１１で生成される直接音信号を、音圧制御部１１６からの信号増幅量を示す音像制御パラメータに基づいて、増幅する。また、増幅器１１５は、遅延器１１３で遅延処理された間接音信号を、音圧制御部１１７からの信号増幅量を示す音像制御パラメータに基づいて、増幅する。加算器１１９は、増幅器１１４で増幅処理された直接音信号と増幅器１１５で増幅処理された間接音信号とを加算して出力音声信号ＳＡ′を得る。
【００３９】
図７は、音圧制御部１２０（音圧制御部１１６、音圧制御部１１７）の構成例を示している。この音圧制御部１２０は、レベル検出部１２１と、信号増幅量算出部１２２を有している。レベル検出部１２１は、入力音声信号ＳＡのレベルを検出する。信号増幅量算出部１２２は、レベル検出部１２１で検出された入力音声信号ＳＡのレベルに応じた信号増幅量を算出し、その信号増幅量を示す音像制御パラメータを出力する。
【００４０】
図８（ａ），（ｂ）は、音圧制御部１１６における直接音信号の信号増幅量の制御動作の一例を示している。すなわち、音圧制御部１１６は、入力音声信号ＳＡのレベルが所定レベル範囲にある中間レベル範囲（（２）の範囲）では、直接音信号の信号増幅量を、例えば「Ａｃ」とする。
【００４１】
これに対して、音圧制御部１１６は、中間レベル範囲の上端の第１のレベルより大きなレベル範囲（（１）の範囲）では、直接音信号の信号増幅量を、例えば「Ａｃ」より大きな「Ａｈ」とする。この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、音像の奥行き感が強調される。
【００４２】
また、音圧制御部１１６は、中間レベル範囲の下端の第２のレベルより小さなレベル範囲（（３）の範囲）では、直接音信号の信号増幅量を、例えば「Ａｃ」より小さな「Ａｌ」とする。この制御により、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになり、音像の奥行き感が強調される。
【００４３】
なお、リスナは、ユーザ操作部１０２の操作により、音像の奥行き感の強調度合いを間欠的に複数段階に、あるいは連続的に切り換え可能とされる。例えば、携帯ゲーム機などのポータブル機器であるか、あるいは大型のテレビ受信機であるか等により、想定されるリスナの距離感がある。リスナは、音像の奥行き感の強調の度合いを切り換えることで、機器に合った距離感の強調を行うことが可能となる。
【００４４】
図８（ａ），（ｂ）は、２段階の切り換え例を示している。すなわち、図８（ａ）は、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量が大きくされており、奥行き感の強調度合いが高くなる。また、図８（ｂ）は、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量が小さくされており、奥行き感の強調度合いが小さくなる。
【００４５】
図９（ａ），（ｂ）は、音圧制御部１１７における間接音信号の信号増幅量の制御動作の一例を示している。この音圧制御部１１７では、上述の音圧制御部１１６の信号増幅量の制御とは逆の特性となるように、信号増幅量の制御が行われる。音圧制御部１１７は、入力音声信号ＳＡのレベルが所定レベル範囲にある中間レベル範囲（（２）の範囲）では、間接音信号の信号増幅量を、例えば「Ａｃ」とする。
【００４６】
これに対して、音圧制御部１１７は、中間レベル範囲の上端の第１のレベルより大きなレベル範囲（（１）の範囲）では、間接音信号の信号増幅量を、例えば「Ａｃ」より小さな「Ａｈ」とする。この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、音像の奥行き感が強調される。
【００４７】
また、音圧制御部１１７は、中間レベル範囲の下端の第２のレベルより小さなレベル範囲（（３）の範囲）では、間接音信号の信号増幅量を、例えば「Ａｃ」より大きな「Ａｌ」とする。この制御により、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになり、音像の奥行き感が強調される。
【００４８】
なお、リスナは、ユーザ操作部１０２の操作により、音像の奥行き感の強調度合いを間欠的に複数段階に、あるいは連続的に切り換え可能とされる。例えば、携帯ゲーム機などのポータブル機器であるか、あるいは大型のテレビ受信機であるか等により、想定されるリスナの距離感がある。リスナは、音像の奥行き感の強調の度合いを切り換えることで、機器に合った距離感の強調を行うことが可能となる。
【００４９】
図９（ａ），（ｂ）は、２段階の切り換え例を示している。すなわち、図９（ａ）は、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量が大きくされており、奥行き感の強調度合いが高くなる。また、図９（ｂ）は、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量が小さくされており、奥行き感の強調度合いが小さくなる。
【００５０】
図１０は、遅延制御部１１８の構成例を示している。この遅延制御部１１８は、レベル検出部１３１と、信号遅延量算出部１３２を有している。レベル検出部１３１は、入力音声信号ＳＡのレベルを検出する。信号遅延量算出部１３２は、レベル検出部１３１で検出された入力音声信号ＳＡのレベルに応じた信号遅延量を算出し、その信号遅延量を示す音像制御パラメータを出力する。
【００５１】
図１１（ａ），（ｂ）は、遅延制御部１１８における間接音信号の信号遅延量の制御動作の一例を示している。すなわち、遅延制御部１１８は、入力音声信号ＳＡのレベルが所定の幅を持つ中間レベル範囲（（２）の範囲）では、間接音信号の信号遅延量を、例えば「Ｄｃ」とする。
【００５２】
これに対して、遅延制御部１１８は、中間レベル範囲の上端の第１のレベルより大きなレベル範囲（（１）の範囲）では、間接音信号の信号遅延量を、例えば「Ｄｃ」より小さな「Ｄｈ」とする。この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、音像の奥行き感が強調される。
【００５３】
また、遅延制御部１１８は、中間レベル範囲の下端の第２のレベルより小さなレベル範囲（（３）の範囲）では、間接音信号の信号遅延量を、例えば「Ｄｃ」より大きな「Ｄｌ」とする。この制御により、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになり、音像の奥行き感が強調される。
【００５４】
なお、リスナは、ユーザ操作部１０２の操作により、音像の奥行き感の強調度合いを間欠的に複数段階に、あるいは連続的に切り換え可能とされる。例えば、携帯ゲーム機などのポータブル機器であるか、あるいは大型のテレビ受信機であるか等により、想定されるリスナの距離感がある。リスナは、音像の奥行き感の強調の度合いを切り換えることで、機器に合った距離感の強調を行うことが可能となる。
【００５５】
図１１（ａ），（ｂ）は、２段階の切り換え例を示している。すなわち、図１１（ａ）は、中間レベル範囲の信号遅延量「Ｄｃ」に対する、高レベル範囲の信号遅延量「Ｄｈ」、低レベル範囲の信号遅延量「Ｄｌ」の変化量が大きくされており、奥行き感の強調度合いが高くなる。また、図１１（ｂ）は、中間レベル範囲の信号遅延量「Ｄｃ」に対する、高レベル範囲の信号遅延量「Ｄｈ」、低レベル範囲の信号遅延量「Ｄｌ」の変化量が小さくされており、奥行き感の強調度合いが小さくなる。
【００５６】
図１２は、リスナ（ユーザ）が、音像の奥行き感の強調度合いを切り換える際に、表示部１０３に表示されるＧＵＩ（Graphical User Interface）の一例を示している。リスナは、このＧＵＩを用いて、視聴距離、ディスプレイの大きさ、立体映像（３Ｄ映像）における３Ｄ効果の強さなどを入力する。この入力内容に応じて、制御部１０１は、音像の奥行き感の強調度合いの切り換えを行う。例えば、ディスプレイの大きさが大きくなる程強調度合いを大きくする。また、例えば、視聴距離が大きくなる程強調度合いを大きくする。
【００５７】
図３に示す音像制御回路１００の動作を説明する。入力音声信号ＳＡは、直接音用ＦＩＲフィルタ１１１、間接音用ＦＩＲフィルタ１１２、音圧制御部１１６，１１７および遅延制御部１１８に供給される。直接音用ＦＩＲフィルタ１１１では、入力音声信号ＳＡに対してフィルタ処理が施されて、つまり入力音声信号ＳＡに直接音係数データが畳み込まれて、直接音信号が生成される。この直接音信号は増幅器１１４に入力される。
【００５８】
音圧制御部１１６では、入力音声信号ＳＡのレベルが検出され、その検出レベルに応じた信号増幅量が算出され（図８（ａ）、（ｂ）参照）、その信号増幅量を示す音像制御パラメータが出力される。この音像制御パラメータは、増幅器１１４に供給される。増幅器１１４では、直接音用ＦＩＲフィルタ１１１で生成される直接音信号が、音圧制御部１１６からの信号増幅量を示す音像制御パラメータに基づいて、増幅される。
【００５９】
また、間接音用ＦＩＲフィルタ１１２では、入力音声信号ＳＡに対してフィルタ処理が施されて、つまり入力音声信号ＳＡに間接音係数データが畳み込まれて、間接音信号が生成される。この間接音信号は遅延器１１３に入力される。
【００６０】
遅延制御部１１８では、入力音声信号ＳＡのレベルが検出され、その検出レベルに応じた信号遅延量が算出され（図１１（ａ）、（ｂ）参照）、その信号遅延量を示す音像制御パラメータが出力される。この音像制御パラメータは、遅延器１１３に供給される。遅延器１１３では、間接音用ＦＩＲフィルタ１１２で生成される間接音信号が、遅延制御部１１８からの信号遅延量を示す音像制御パラメータに基づいて、遅延される。
【００６１】
遅延器１１３で遅延処理された間接音信号は、増幅器１１５に供給される。音圧制御部１１７では、入力音声信号ＳＡのレベルが検出され、その検出レベルに応じた信号増幅量が算出され（図９（ａ）、（ｂ）参照）、その信号増幅量を示す音像制御パラメータが出力される。この音像制御パラメータは、増幅器１１５に供給される。増幅器１１５では、遅延器１１３からの間接音信号が、音圧制御部１１７からの信号増幅量を示す音像制御パラメータに基づいて、増幅される。
【００６２】
増幅器１１４で増幅処理された直接音信号は加算器１１９に供給される。また、増幅器１１５で増幅処理された間接音信号は加算器１１９に供給される。加算器１１９では、直接音信号と間接音信号とが加算されて、出力音声信号ＳＡ′が得られる。
【００６３】
上述したように、図１に示す音像制御装置１０において、音像制御回路１００（１００ＬＬ，１００ＬＲ，１００ＲＲ，１００ＲＬ）では、直接音信号に関して、以下の制御が行われる。すなわち、入力音声信号ＳＡのレベルに応じて、高レベル範囲では中間レベル範囲と比べて信号増幅量が大きくされ、低レベル範囲では中間レベル範囲と比べて信号増幅量が小さくされる。
【００６４】
また、この音像制御回路１００では、間接音信号に関して、入力音声信号ＳＡのレベルに応じて、高レベル範囲では中間レベル範囲と比べて信号増幅量が小さくされ、低レベル範囲では中間レベル範囲と比べて信号増幅量が大きくされる。さらに、この音像制御回路１００では、間接音信号に関して、入力音声信号ＳＡのレベルに応じて、高レベル範囲では中間レベル範囲と比べて信号遅延量が小さくされ、低レベル範囲では中間レベル範囲と比べて信号遅延量が大きくされる。
【００６５】
そのため、この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、また、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになる。したがって、元々の音声信号に含まれる音像の距離感をさらに奥行きが出るように強調制御することができる。例えば、図１３（ａ）は元々の音声信号による音像の表現範囲を概略的に示し、図１３（ｂ）は元々の音声信号に含まれる音像の距離感をさらに奥行きが出るように強調制御した後の音像の表現範囲を概略的に示している。
【００６６】
＜２．第２の実施の形態＞
［音像制御装置の構成例］
図１４は、第２の実施の形態としての音像制御装置２０の構成例を示している。この音像制御装置２０は、２チャネルステレオ音声信号を再生するヘッドホン装置への適用例を示している。この音像制御装置２０は、音像制御回路２００ＬＬと、音像制御回路２００ＬＲと、音像制御回路２００ＲＲと、音像制御回路２００ＲＬと、加算器２２０Ｌと、加算器２２０Ｒを有している。
【００６７】
音像制御回路２００ＬＬは、左側スピーカＳＰＬからリスナＭの左耳に至る伝達特性ＨLLを持つフィルタを有し（図２参照）、入力される左音声信号ＳＬに対してフィルタ処理を施し、リスナＭの左耳に入力すべき左音声信号ＳLLを生成する。また、音像制御回路２００ＬＲは、左側スピーカＳＰＬからリスナＭの右耳に至る伝達特性ＨLRを持つフィルタを有し（図２参照）、入力される左音声信号ＳＬに対してフィルタ処理を施し、リスナＭの右耳に入力すべき左音声信号ＳLRを生成する。
【００６８】
また、音像制御回路２００ＲＲは、右側スピーカＳＰＲからリスナＭの右耳に至る伝達特性ＨRRを持つフィルタを有し（図２参照）、入力される右音声信号ＳＲに対してフィルタ処理を施し、リスナＭの右耳に入力すべき右音声信号ＳRRを生成する。また、音像制御回路１００ＲＬは、左側スピーカＳＰＲからリスナＭの左耳に至る伝達特性ＨRLを持つフィルタを有し（図２参照）、入力される右音声信号ＳＲに対してフィルタ処理を施し、リスナＭの左耳に入力すべき右音声信号ＳRLを生成する。
【００６９】
なお、音像制御回路２００ＬＬ，２００ＬＲ，２００ＲＲ，２００ＲＬは、上述のフィルタ処理の他に、入力音声信号のレベル、および立体映像を構成する左眼画像および右眼画像の視差情報に応じて、音像制御処理を行う。この音像制御処理は、直接音信号の信号増幅量の制御、間接音信号の信号増幅量の制御、間接音信号の信号遅延量の制御などである。
【００７０】
加算器２２０Ｌは、音像制御回路２００ＬＬで生成される左音声信号ＳLLに、音像制御回路２００ＲＬで生成される右音声信号ＳRLを加算して、図示しないヘッドホンの左側スピーカに供給すべき左音声信号ＳＬ′を得る。また、加算器２２０Ｒは、音像制御回路２００ＲＲで生成される右音声信号ＳRRに、音像制御回路２００ＬＲで生成される左音声信号ＳLRを加算して、図示しないヘッドホンの右側スピーカに供給すべき右音声信号ＳＲ′を得る。
【００７１】
図１４に示す音像制御装置２０の動作を簡単に説明する。左音声信号ＳＬは、音像制御回路２００ＬＬおよび音像制御回路２００ＬＲに供給される。この音像制御回路２００ＬＬおよび音像制御回路２００ＬＲには、左眼映像信号および右眼映像信号を含む映像信号ＳＶも供給される。音像制御回路２００ＬＬでは、左音声信号ＳＬに対してフィルタ処理が施され、さらに入力音声信号レベルと、左眼映像および右眼映像の視差情報とに基づいて音像制御処理が施されて、リスナＭの左耳に入力すべき左音声信号ＳLLが生成される。また、音像制御回路２００ＬＲでは、左音声信号ＳＬに対してフィルタ処理が施され、さらに入力音声信号レベルと、左眼映像および右眼映像の視差情報とに基づいて音像制御処理が施されて、リスナＭの右耳に入力すべき左音声信号ＳLRが生成される。
【００７２】
また、右音声信号ＳＲは、音像制御回路２００ＲＲおよび音像制御回路２００ＲＬに供給される。この音像制御回路２００ＲＲおよび音像制御回路２００ＲＬには、左眼映像信号および右眼映像信号を含む映像信号ＳＶも供給される。音像制御回路２００ＲＲでは、右音声信号ＳＲに対してフィルタ処理が施され、さらに入力音声信号レベルと、左眼映像および右眼映像の視差情報とに基づいて音像制御処理が施されて、リスナＭの右耳に入力すべき右音声信号ＳRRが生成される。また、音像制御回路２００ＲＬでは、右音声信号ＳＲに対してフィルタ処理が施され、さらに入力音声信号レベルと、左眼映像および右眼映像の視差情報とに基づいて音像制御処理が施されて、リスナＭの左耳に入力すべき右音声信号ＳRLが生成される。
【００７３】
音像制御回路２００ＬＬで生成された左音声信号ＳLLおよび音像制御回路２００ＲＬで生成された右音声信号ＳRLは加算器２２０Ｌに供給される。この加算器２２０Ｌでは、左音声信号ＳLLに右音声信号ＳRLが加算されて、ヘッドホンの左側スピーカに供給すべき左音声信号ＳＬ′が得られる。また、音像制御回路２００ＲＲで生成された右音声信号ＳRRおよび音像制御回路２００ＬＲで生成された左音声信号ＳLRは加算器２２０Ｒに供給される。この加算器２２０Ｒでは、右音声信号ＳRRに左音声信号ＳLRが加算されて、ヘッドホンの右側スピーカに供給すべき右音声信号ＳＲ′が得られる。
【００７４】
図１５は、音像制御回路２００（２００ＬＬ，２００ＬＲ，２００ＲＲ，２００ＲＬ）の構成例を示している。この図１５において、図３と対応する部分には同一符号を付し、適宜、その詳細説明を省略する。この音像制御回路２００は、制御部１０１と、ユーザ操作部１０２と、表示部１０３を有している。また、この音像制御回路２００は、直接音用ＦＩＲフィルタ１１１と、間接音用ＦＩＲフィルタ１１２と、遅延器１１３と、増幅器１１４，１１５と、音圧制御部２１６，２１７と、遅延制御部２１８と、加算器１１９を有している。
【００７５】
遅延器１１３は、間接音用フィルタ１１２で生成される間接音信号を、遅延制御部２１８からの信号遅延量を示す音像制御パラメータに基づいて、遅延させる。また、増幅器１１４は、直接音用ＦＩＲフィルタ１１１で生成される直接音信号を、音圧制御部２１６からの信号増幅量を示す音像制御パラメータに基づいて、増幅する。また、増幅器１１５は、遅延器１１３で遅延処理された間接音信号を、音圧制御部２１７からの信号増幅量を示す音像制御パラメータに基づいて、増幅する。
【００７６】
図１６は、音圧制御部２２０（音圧制御部１１６、音圧制御部１１７）の構成例を示している。この音圧制御部２２０は、レベル検出部２２１と、信号増幅量算出部２２２と、映像視差検出部２２１を有している。レベル検出部２２１は、入力音声信号ＳＡのレベルを検出する。映像視差検出部２２３は、立体映像信号ＳＶに含まれる左眼映像信号および右眼映像信号に基づいて、左眼映像および右眼映像の視差情報を検出する。信号増幅量算出部２２２は、レベル検出部２２１で検出された入力音声信号ＳＡのレベルおよび映像視差検出部２２３で検出された視差情報に応じた信号増幅量を算出し、その信号増幅量を示す音像制御パラメータを出力する。
【００７７】
図１７は、音圧制御部２１６における直接音信号の信号増幅量の制御動作の一例を示している。すなわち、音圧制御部２１６は、入力音声信号ＳＡのレベルが所定レベル範囲にある中間レベル範囲（図１７の（２）の範囲）では、直接音信号の信号増幅量を、例えば「Ａｃ」とする。
【００７８】
これに対して、音圧制御部２１６は、中間レベル範囲の上端の第１のレベルより大きなレベル範囲（図１７の（１）の範囲）では、直接音信号の信号増幅量を、例えば「Ａｃ」より大きな「Ａｈ」とする。この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、音像の奥行き感が強調される。
【００７９】
また、音圧制御部２１６は、中間レベル範囲の下端の第２のレベルより小さなレベル範囲（図１７の（３）の範囲）では、直接音信号の信号増幅量を、例えば「Ａｃ」より小さな「Ａｌ」とする。この制御により、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになり、音像の奥行き感が強調される。
【００８０】
また、音圧制御部２１６は、視差（絶対値）が大きいとき、つまり立体映像のオブジェクトの奥行き方向位置としてスクリーン位置に対して手前にも奥にも大きく離れるものがある場合には（図１７の（４）位置参照）、以下のように制御する。すなわち、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量を大きくする。この制御により、手前と奥に大きく立体視させる映像の場合、奥行き感の強調度合いは大きくなる。
【００８１】
また、音圧制御部２１６は、視差（絶対値）が小さいとき、つまり立体映像のオブジェクトの奥行き方向位置がスクリーン位置に対して手前にも奥にもそれほど離れない場合には（図１７の（５）位置参照）、以下のように制御する。すなわち、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量を小さくする。この制御により、それほど立体視しない映像の場合、奥行き感の強調度合いは小さくなる。
【００８２】
図１８は、音圧制御部２１７における間接音信号の信号増幅量の制御動作の一例を示している。この音圧制御部２１７では、上述の音圧制御部２１６の信号増幅量の制御とは逆の特性となるように、信号増幅量の制御が行われる。音圧制御部２１７は、入力音声信号ＳＡのレベルが所定のレベル範囲にある中間レベル範囲（図１８の（２）の範囲）では、間接音信号の信号増幅量を、例えば「Ａｃ」とする。
【００８３】
これに対して、音圧制御部２１７は、中間レベル範囲の上端の第１のレベルより大きなレベル範囲（図１８の（１）の範囲）では、間接音信号の信号増幅量を、例えば「Ａｃ」より小さな「Ａｈ」とする。この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、音像の奥行き感が強調される。
【００８４】
また、音圧制御部２１７は、中間レベル範囲の下端の第２のレベルより小さなレベル範囲（図１８の（３）の範囲）では、間接音信号の信号増幅量を、例えば「Ａｃ」より大きな「Ａｌ」とする。この制御により、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになり、音像の奥行き感が強調される。
【００８５】
また、音圧制御部２１７は、視差（絶対値）が小さいとき、つまり立体映像のオブジェクトの奥行き方向位置としてスクリーン位置に対して手前にも奥にも大きく離れるものがある場合には（図１８の（４）位置参照）、以下のように制御する。すなわち、音圧制御部２１７は、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量を大きくする。この制御により、手前と奥に大きく立体視させる映像の場合、奥行き感の強調度合いは大きくなる。
【００８６】
また、音圧制御部２１７は、視差（絶対値）が小さいとき、つまり立体映像のオブジェクトの奥行き方向位置がスクリーン位置に対して手前にも奥にもそれほど離れない場合には（図１８の（５）位置参照）、以下のように制御する。すなわち、中間レベル範囲の信号増幅量「Ａｃ」に対する、高レベル範囲の信号増幅量「Ａｈ」、低レベル範囲の信号増幅量「Ａｌ」の変化量を小さくする。この制御により、それほど立体視しない映像の場合、奥行き感の強調度合いは小さくなる。
【００８７】
図１９は、遅延制御部２１８の構成例を示している。この遅延制御部２１８は、レベル検出部２３１と、信号遅延量算出部２３２と、映像視差検出部２３３を有している。レベル検出部２３１は、入力音声信号ＳＡのレベルを検出する。映像視差検出部２３３は、上述の音圧制御部２００の映像視差検出部２２３と同様に、立体映像信号ＳＶに含まれる左眼映像信号および右眼映像信号に基づいて、左眼映像および右眼映像の視差情報を検出する。信号遅延量算出部２３２は、レベル検出部２３１で検出された入力音声信号ＳＡのレベルおよび映像視差検出部２３３で検出された視差情報に応じた信号遅延量を算出し、その信号遅延量を示す音像制御パラメータを出力する。
【００８８】
図２０は、遅延制御部２１８における間接音信号の信号遅延量の制御動作の一例を示している。すなわち、遅延制御部２１８は、入力音声信号ＳＡのレベルが所定の幅を持つ中間レベル範囲（図２０の（２）の範囲）では、間接音信号の信号遅延量を、例えば「Ｄｃ」とする。
【００８９】
これに対して、遅延制御部２１８は、中間レベル範囲の上端の第１のレベルより大きなレベル範囲（図２０の（１）の範囲）では、間接音信号の信号遅延量を、例えば「Ｄｃ」より小さな「Ｄｈ」とする。この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、音像の奥行き感が強調される。
【００９０】
また、遅延制御部２１８は、中間レベル範囲の下端の第２のレベルより小さなレベル範囲（図２０の（３）の範囲）では、間接音信号の信号遅延量を、例えば「Ｄｃ」より大きな「Ｄｌ」とする。この制御により、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになり、音像の奥行き感が強調される。
【００９１】
また、遅延制御部２１８は、視差（絶対値）が大きいとき、つまり立体映像のオブジェクトの奥行き方向位置としてスクリーン位置に対して手前にも奥にも大きく離れるものがある場合には（図２０の（４）位置参照）、以下のように制御する。すなわち、中間レベル範囲の信号遅延量「Ｄｃ」に対する、高レベル範囲の信号遅延量「Ｄｈ」、低レベル範囲の信号遅延量「Ｄｌ」の変化量を大きくする。この制御により、手前と奥に大きく立体視させる映像の場合、奥行き感の強調度合いは大きくなる。
【００９２】
また、遅延制御部２１８は、視差（絶対値）が小さいとき、つまり立体映像のオブジェクトの奥行き方向位置がスクリーン位置に対して手前にも奥にもそれほど離れない場合には（図２０の（５）位置参照）、以下のように制御する。すなわち、中間レベル範囲の信号遅延量「Ｄｃ」に対する、高レベル範囲の信号遅延量「Ｄｈ」、低レベル範囲の信号遅延量「Ｄｌ」の変化量を小さくする。この制御により、それほど立体視しない映像の場合、奥行き感の強調度合いは小さくなる。
【００９３】
図１５に示す音像制御回路２００の動作を説明する。入力音声信号ＳＡは、直接音用ＦＩＲフィルタ１１１、間接音用ＦＩＲフィルタ１１２、音圧制御部２１６，２１７および遅延制御部２１８に供給される。また、左眼映像信号および右眼映像信号を含む立体映像信号ＳＶは、音圧制御部２１６，２１７および遅延制御部２１８に供給される。
【００９４】
直接音用ＦＩＲフィルタ１１１では、入力音声信号ＳＡに対してフィルタ処理が施されて、つまり入力音声信号ＳＡに直接音係数データが畳み込まれて、直接音信号が生成される。この直接音信号は増幅器１１４に入力される。音圧制御部２１６では、入力音声信号ＳＡのレベルが検出され、さらに左眼画像および右眼画像の視差情報が検出される。そして、この音圧制御部２１６では、それらの検出情報に基づいて信号増幅量が算出され（図１７参照）、その信号増幅量を示す音像制御パラメータが出力される。
【００９５】
このように音圧制御部２１６から出力される音像制御パラメータは、増幅器１１４に供給される。この増幅器１１４では、直接音用ＦＩＲフィルタ１１１で生成される直接音信号が、音圧制御部２１６からの信号増幅量を示す音像制御パラメータに基づいて、増幅される。
【００９６】
また、間接音用ＦＩＲフィルタ１１２では、入力音声信号ＳＡに対してフィルタ処理が施されて、つまり入力音声信号ＳＡに間接音係数データが畳み込まれて、間接音信号が生成される。この間接音信号は遅延器１１３に入力される。遅延制御部２１８では、入力音声信号ＳＡのレベルが検出され、さらに左眼画像および右眼画像の視差情報が検出される。そして、この遅延制御部２１８では、それらの検出情報に基づいて信号遅延量が算出され（図２０参照）、その信号遅延量を示す音像制御パラメータが出力される。
【００９７】
このように遅延制御部２１８から出力される音像制御パラメータは、遅延器１１３に供給される。この遅延器１１３では、間接音用ＦＩＲフィルタ１１２で生成される間接音信号が、遅延制御部２１８からの信号遅延量を示す音像制御パラメータに基づいて、遅延される。
【００９８】
遅延器１１３で遅延処理された間接音信号は、増幅器１１５に供給される。音圧制御部２１７では、入力音声信号ＳＡのレベルが検出され、さらに左眼画像および右眼画像の視差情報が検出される。そして、この音圧制御部２１７では、それらの検出情報に基づいて信号増幅量が算出され（図１８参照）、その信号増幅量を示す音像制御パラメータが出力される。
【００９９】
このように音圧制御部２１７から出力される音像制御パラメータは、増幅器１１５に供給される。この増幅器１１５では、遅延器１１３で遅延処理された間接音信号が、音圧制御部１１７からの信号増幅量を示す音像制御パラメータに基づいて、増幅される。
【０１００】
増幅器１１４で増幅処理された直接音信号は加算器１１９に供給される。また、増幅器１１５で増幅処理された間接音信号は加算器１１９に供給される。加算器１１９では、直接音信号と間接音信号とが加算されて、出力音声信号ＳＡ′が得られる。
【０１０１】
上述したように、図１４に示す音像制御装置２０において、音像制御回路２００（２００ＬＬ，２００ＬＲ，２００ＲＲ，２００ＲＬ）では、直接音信号に関して、以下の制御が行われる。すなわち、入力音声信号ＳＡのレベルに応じて、高レベル範囲では中間レベル範囲と比べて信号増幅量が大きくされ、低レベル範囲では中間レベル範囲と比べて信号増幅量が小さくされる。
【０１０２】
また、この音像制御回路２００では、直接音信号に関して、入力音声信号ＳＡのレベルに応じて、高レベル範囲では中間レベル範囲と比べて信号増幅量が小さくされ、低レベル範囲では中間レベル範囲と比べて信号増幅量が大きくされる。さらに、この音像制御回路２００では、間接音信号に関して、入力音声信号ＳＡのレベルに応じて、高レベル範囲では中間レベル範囲と比べて信号遅延量が小さくされ、低レベル範囲では中間レベル範囲と比べて信号遅延量が大きくされる。
【０１０３】
そのため、この制御により、入力音声信号ＳＡのレベルが大きなことで元々近くに感じられていた音像がより近くに感じられるようになり、また、入力音声信号ＳＡのレベルが小さいことで元々遠くに感じられていた音像がより遠くに感じられるようになる。したがって、元々の音声信号に含まれる音像の距離感をさらに奥行きが出るように強調制御することができる。
【０１０４】
また、図１４に示す音像制御装置２０において、音像制御回路２００では、左眼画像および右眼画像の視差情報に基づいて、奥行き感の強調度合いが制御される。すなわち、視差（絶対値）が大きいとき、つまり立体映像のオブジェクトの奥行き方向位置としてスクリーン位置に対して手前にも奥にも大きく離れるものがある場合には、奥行き感の強調度合いが大きくされる。一方、視差（絶対値）が小さいとき、つまり立体映像のオブジェクトの奥行き方向位置がスクリーン位置に対して手前にも奥にもそれほど離れない場合には、奥行き感の強調度合いは小さくされる。したがって、立体映像にマッチしたより一層奥行きのある音像表現を実現できる。
【０１０５】
なお、図１５に示す音像制御回路２００において、音圧制御部２１６，２１７および遅延制御部２１８では、左眼映像信号および右眼映像信号を含む立体映像信号ＳＶから左眼画像および右眼画像の視差情報を得ている。しかし、外部から立体映像信号ＳＶではなく視差情報そのものが供給される構成も考えられる。また、図１５に示す音像制御回路２００において、音圧制御部２１６，２１７および遅延制御部２１８では、それぞれ別個に視差情報を得るように説明したが、いずれかで視差情報を得るようにし、それを共通に用いるようにしてもよい。
【０１０６】
また、図１５に示す音像制御回路２００においては、音像の奥行き感の強調度合いを、視差情報に基づいて、例えば２段階に制御している（図１７、図１８、図２０参照）。しかし、間欠的にさらに多くの段階に、あるいは連続的に強調度合いを変化させることもできる。また、図３に示す音像制御回路１００と同様に、リスナによるユーザ操作部１０２の操作により、音像の奥行き感の強調度合いをさらに調整可能としてもよい。
【０１０７】
＜３．第３の実施の形態＞
［音像制御装置の構成例］
図２１は、第３の実施の形態としての音像制御装置３０の構成例を示している。この音像制御装置３０は、２チャネルステレオ音声信号を再生するスピーカ装置への適用例を示している。この音像制御装置３０は、音像制御部３１０と、クロストークキャンセル補正部３２０を有している。
【０１０８】
音像制御部３１０は、詳細説明は省略するが、上述の図１に示す音像制御装置１０、あるいは、上述の図１４に示す音像制御装置２０と同様の構成を持つ。クロストークキャンセル補正部３２０は、音像制御部３１０から出力される音声信号ＳＬ′，ＳＲ′に対してクロストークキャンセル処理を行って、左側スピーカに供給すべき左音声信号ＳＬ″および右側スピーカに供給すべき右音声信号ＳＲ″を出力する。
【０１０９】
このクロストークキャンセル処理は、以下のような処理である。すなわち、２つのスピーカの一方から放音される音声がリスナの一方の耳のみに聞こえるように、また、当該２つのスピーカの他方から放音される音声がリスナの他方の耳のみに聞こえるように、反対側の耳に聞こえる音声を打ち消す音声を生成する処理である。
【０１１０】
図２２はスピーカ再生による音の伝播の様子を示している、本来、左側スピーカＳＰＬから放音される音声はリスナＭの両方の耳に伝達され、同様に、右側スピーカＳＰＲから放音される音声はリスナＭの両方の耳に伝達される。上述したクロストークキャンセル処理を行うことで、左側スピーカＳＰＬから放音され右耳に伝達される音声は打ち消され、また、右側スピーカＳＰＲから放音され左耳に伝達される音声は打ち消される。
【０１１１】
図２３は、クロストークキャンセル補正部３２０の構成例を示している。このクロストークキャンセル補正部３２０は、クロストークキャンセル用フィルタ３２１ＬＬ，３２１ＬＲ，３２１ＲＲ，３２１ＲＬと、加算器３２２Ｌ，３２２Ｒを有している。詳細説明は省略するが、各フィルタには、上述したように、左側スピーカＳＰＬから放音され右耳に伝達される音声を打ち消し、右側スピーカＳＰＲから放音され左耳に伝達される音声を打ち消すように、フィルタ係数が設定されている。
【０１１２】
図２１に示す音像制御装置３０は、図１、図１４に示す音像制御装置１０，２０と同様の構成を持つ音像制御部３１０を有するので、音像制御装置１０，２０と同様の効果を得ることができる。また、この音像制御部３１０の後段にクロストークキャンセル補正部３２０が配置され、左側スピーカＳＰＬから放音され右耳に伝達される音声は打ち消され、また、右側スピーカＳＰＲから放音され左耳に伝達される音声は打ち消される。そのため、２チャネルステレオ音声信号を再生するスピーカ装置に良好に適用できる。
【０１１３】
＜４．変形例＞
なお、上述実施の形態においては、直接音信号の信号増幅量の制御と、間接音信号の信号増幅量の制御と、間接音信号の信号遅延量の制御とを全て行っているが、必ずしも全ての制御を行う必要はなく、一部の制御のみを行う構成も考えられる。例えば、直接音信号の信号増幅量の制御のみ、あるいは直接音信号の信号増幅量の制御と間接音信号の信号遅延量の制御等である。
【０１１４】
また、上述実施の形態においては、入力音声信号ＳＡのレベルに応じて、高レベル範囲および低レベル範囲では中間レベル範囲に対して信号増幅量、信号遅延量が変化するように制御されている。しかし、高レベル範囲のみ、あるいは低レベル範囲のみを、中間レベル範囲に対して変化するように制御することも考えられる。また、上述実施の形態においては、中間レベル範囲が比較的広く取られている例を示したが、中間レベル範囲が幅を持たない点であること、つまり上述の第１のレベルおよび第２のレベルが等しい場合も考えられる。
【０１１５】
例えば、図２４は、音圧制御部１１６、２１６における直接音信号の信号増幅量の制御動作の種々の例を示している。図２４（ａ）は、高レベル範囲のみ信号増幅量が増加するように制御する例である。図２４（ｂ）は、低レベル範囲のみ信号増幅量が低下するように制御する例である。さらに、図２４（ｃ）は、中間レベル範囲が幅を持たない点である例を示している。
【産業上の利用可能性】
【０１１６】
本技術は、例えば、２チャネルステレオ音声信号を再生するヘッドホン装置、スピーカ装置等に適用できる。
【符号の説明】
【０１１７】
１０，２０，３０・・・音声制御装置
１００，１００ＬＬ，１００ＬＲ，１００ＲＲ，１００ＲＬ・・・音声制御回路
１０１・・・制御部
１０２・・・ユーザ操作部
１０３・・・表示部
１１１・・・直接音用ＦＩＲフィルタ
１１２・・・間接音用ＦＩＲフィルタ
１１３・・・遅延器
１１４，１１５・・・増幅器
１１６，１１７，１２０・・・音圧制御部
１１８・・・遅延制御部
１１９，１２０Ｌ，１２０Ｒ・・・加算器
１２１・・・レベル検出部
１２２・・・信号増幅量算出部
１３１・・・レベル検出部
１３２・・・信号遅延量算出部
２００，２００ＬＬ，２００ＬＲ，２００ＲＲ，２００ＲＬ・・・音像制御回路
２１６，２１７・・・音圧制御部
２１８・・・遅延制御部
２２０Ｌ，２２０Ｒ・・・加算器
２２１・・・レベル検出部
２２２・・・信号増幅量算出部
２２３・・・映像視差検出部
２３１・・・レベル検出部
２３２・・・信号遅延量算出部
２３３・・・映像視差検出部
３１０・・・音像制御部
３２０・・・クロストークキャンセル補正部
３２１ＬＬ，３２１ＬＲ，３２１ＲＲ，３２１ＲＬ・・・クロストークキャンセル用フィルタ
３２２Ｌ，３２２Ｒ・・・加算器
【図１】
0005776223.tif 000002
【図２】
0005776223.tif 000003
【図３】
0005776223.tif 000004
【図４】
0005776223.tif 000005
【図５】
0005776223.tif 000006
【図６】
0005776223.tif 000007
【図７】
0005776223.tif 000008
【図８】
0005776223.tif 000009
【図９】
0005776223.tif 000010
【図１０】
0005776223.tif 000011
【図１１】
0005776223.tif 000012
【図１２】
0005776223.tif 000013
【図１３】
0005776223.tif 000014
【図１４】
0005776223.tif 000015
【図１５】
0005776223.tif 000016
【図１６】
0005776223.tif 000017
【図１７】
0005776223.tif 000018
【図１８】
0005776223.tif 000019
【図１９】
0005776223.tif 000020
【図２０】
0005776223.tif 000021
【図２１】
0005776223.tif 000022
【図２２】
0005776223.tif 000023
【図２３】
0005776223.tif 000024
【図２４】
0005776223.tif 000025