(57)【要約】ステレオ信号からモノラル信号を生成する際に、明瞭性や了解性に富んだ、めり張りある適切なモノラル信号を生成することができる音声符号化装置。この装置では、重み付け部（１１）は、Ｌチャネル信号ＸＬおよびＲチャネル信号ＸＲそれぞれに重み付けを行って、重み付けしたＬチャネル信号ＸＬＷおよびＲチャネル信号ＸＲＷをモノラル信号生成部（１２）に入力し、モノラル信号生成部（１２）は、Ｌチャネル信号ＸＬＷとＲチャネル信号ＸＲＷを平均してモノラル信号ＸＭＷを生成してモノラル信号符号化部（１３）に入力し、モノラル信号符号化部（１３）は、モノラル信号ＸＭＷを符号化してモノラル信号ＸＭＷの符号化パラメータ（モノラル信号符号化パラメータ）を出力する。【特許請求の範囲】
【請求項１】
ステレオ信号の各チャネルの信号の音声情報量に応じた重み付け係数により前記各チャネルの信号を重み付けする重み付け手段と、
重み付けされた前記各チャネルの信号を平均してモノラル信号を生成する生成手段と、
前記モノラル信号を符号化する符号化手段と、
を具備する音声符号化装置。
【請求項２】
前記重み付け手段は、各チャネルの信号のエントロピーを前記音声情報量として用いて前記重み付け係数を算出する、
請求項１記載の音声符号化装置。
【請求項３】
前記重み付け手段は、各チャネルの信号のＳ／Ｎ比を前記音声情報量として用いて前記重み付け係数を算出する、
請求項１記載の音声符号化装置。
【請求項４】
請求項１記載の音声符号化装置を具備する無線通信移動局装置。
【請求項５】
請求項１記載の音声符号化装置を具備する無線通信基地局装置。
【請求項６】
ステレオ信号の各チャネルの信号の音声情報量に応じた重み付け係数により前記各チャネルの信号を重み付けする重み付け工程と、
重み付けされた前記各チャネルの信号を平均してモノラル信号を生成する生成工程と、
前記モノラル信号を符号化する符号化工程と、
を具備する音声符号化方法。
【発明の詳細な説明】
【技術分野】
【０００１】  本発明は、音声符号化装置および音声符号化方法に関し、特に、ステレオの音声入力信号からモノラル信号を生成して符号化する音声符号化装置および音声符号化方法に関する。
【背景技術】
【０００２】  移動体通信やＩＰ通信での伝送帯域の広帯域化、サービスの多様化に伴い、音声通信において高音質化、高臨場感化のニーズが高まっている。例えば、今後、テレビ電話サービスにおけるハンズフリー形態での通話、テレビ会議における音声通信、多地点で複数話者が同時に会話を行うような多地点音声通信、臨場感を保持したまま周囲の音環境を伝送できるような音声通信などの需要が増加すると見込まれる。その場合、モノラル信号より臨場感があり、また複数話者の発話位置が認識できるような、ステレオ音声による音声通信を実現することが望まれる。このようなステレオ音声による音声通信を実現するためには、ステレオ音声の符号化が必須となる。【０００３】  また、ＩＰネットワーク上での音声データ通信において、ネットワーク上のトラフィック制御やマルチキャスト通信実現のために、スケーラブルな構成を有する音声符号化が望まれている。スケーラブルな構成とは、受信側で部分的な符号化データからでも音声データの復号が可能な構成をいう。【０００４】  よって、ステレオ音声を符号化し伝送する場合にも、ステレオ信号の復号と、モノラル信号の復号とを受信側において選択可能な、モノラル−ステレオ間でのスケーラブル構成（モノラル−ステレオ・スケーラブル構成）を有する符号化が望まれる。【０００５】  このような、モノラル−ステレオ・スケーラブル構成を有する音声符号化においては、ステレオの入力信号からモノラル信号を生成する。モノラル信号の生成方法としては、例えば、ステレオ信号の各チャネルの信号を単純に平均してモノラル信号を得るものがある（非特許文献１参照）。
【非特許文献１】ＩＳＯ／ＩＥＣ  １４４９６−３，”Ｉｎｆｏｒｍａｔｉｏｎ  Ｔｅｃｈｎｏｌｏｇｙ−Ｃｏｄｉｎｇ  ｏｆ  ａｕｄｉｏ−ｖｉｓｕａｌ  ｏｂｊｅｃｔｓ−Ｐａｒｔ  ３：Ａｕｄｉｏ”，ｓｕｂｐａｒｔ−４，４．Ｂ．１４  Ｓｃａｌａｂｌｅ  ＡＡＣ  ｗｉｔｈ  ｃｏｒｅ  ｃｏｄｅｒ，ｐｐ．３０４−３０５，Ｓｅｐ．２０００．
【発明の開示】
【発明が解決しようとする課題】
【０００６】  しかしながら、単にステレオ信号の各チャネルの信号をそのまま平均してモノラル信号を生成すると、特に音声では、めり張りのない聞き難いモノラル信号となってしまうことがある。【０００７】  本発明の目的は、ステレオ信号からモノラル信号を生成する際に、明瞭性や了解性に富んだ、めり張りある適切なモノラル信号を生成することができる音声符号化装置および音声符号化方法を提供することである。
【課題を解決するための手段】
【０００８】  本発明の音声符号化装置は、ステレオ信号の各チャネルの信号の音声情報量に応じた重み付け係数により前記各チャネルの信号を重み付けする重み付け手段と、重み付けされた前記各チャネルの信号を平均してモノラル信号を生成する生成手段と、前記モノラル信号を符号化する符号化手段と、を具備する構成を採る。
【発明の効果】
【０００９】  本発明によれば、ステレオ信号からモノラル信号を生成する際に、明瞭性や了解性に富んだ、めり張りある適切なモノラル信号を生成することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施の形態１に係る音声符号化装置の構成を示すブロック図
【図２】本発明の実施の形態１に係る重み付け部の構成を示すブロック図
【図３】本発明の実施の形態１に係るＬチャネル信号の波形例
【図４】本発明の実施の形態１に係るＲチャネル信号の波形例
【発明を実施するための最良の形態】
【００１１】  以下、本発明の実施の形態について、添付図面を参照して詳細に説明する。【００１２】  （実施の形態１）
本実施の形態に係る音声符号化装置の構成を図１に示す。図１に示す音声符号化装置１０は、重み付け部１１、モノラル信号生成部１２、モノラル信号符号化部１３、モノラル信号復号部１４、差分信号生成部１５、および、ステレオ信号符号化部１６を備える。【００１３】  ステレオ音声信号のＬチャネル（左チャネル）信号ＸＬおよびＲチャネル（右チャネル）信号ＸＲは、重み付け部１１および差分信号生成部１５に入力される。【００１４】  重み付け部１１は、Ｌチャネル信号ＸＬおよびＲチャネル信号ＸＲそれぞれに重み付けを行う。重み付けの具体的な方法については後述する。重み付けされたＬチャネル信号ＸＬＷおよびＲチャネル信号ＸＲＷは、モノラル信号生成部１２に入力される。【００１５】  モノラル信号生成部１２は、Ｌチャネル信号ＸＬＷとＲチャネル信号ＸＲＷを平均してモノラル信号ＸＭＷを生成する。このモノラル信号ＸＭＷは、モノラル信号符号化部１３に入力される。【００１６】  モノラル信号符号化部１３は、モノラル信号ＸＭＷを符号化し、モノラル信号ＸＭＷの符号化パラメータ（モノラル信号符号化パラメータ）を出力する。このモノラル信号符号化パラメータは、ステレオ信号符号化部１６から出力されるステレオ信号符号化パラメータと多重されて音声復号装置へ伝送される。また、モノラル信号符号化パラメータは、モノラル信号復号部１４に入力される。【００１７】  モノラル信号復号部１４は、モノラル信号符号化パラメータを復号してモノラル信号を得る。このモノラル信号は、差分信号生成部１５に入力される。【００１８】  差分信号生成部１５は、Ｌチャネル信号ＸＬとモノラル信号との差分信号ΔＸＬおよびＲチャネル信号ＸＲとモノラル信号との差分信号ΔＸＲを生成する。これらの差分信号ΔＸＬ、ΔＸＲは、ステレオ信号符号化部１６に入力される。【００１９】  ステレオ信号符号化部１６は、Ｌチャネルの差分信号ΔＸＬおよびＲチャネルの差分信号ΔＸＲを符号化し、こられの差分信号の符号化パラメータ（ステレオ信号符号化パラメータ）を出力する。【００２０】  次いで、重み付け部１１の詳細について図２を用いて説明する。この図に示すように、重み付け部１１は、指標算出部１１１、重み付け係数算出部１１２、および、乗算部１１３を備える。【００２１】  ステレオ音声信号のＬチャネル信号ＸＬおよびＲチャネル信号ＸＲは、指標算出部１１１および乗算部１１３に入力される。【００２２】  指標算出部１１１は、各チャネルの信号ＸＬ、ＸＲの音声情報量の度合いを表す指標ＩＬ、ＩＲを一定区間毎（例えば、各フレーム毎、複数のフレーム毎等）に算出する。Ｌチャネル信号の指標ＩＬとＲチャネル信号の指標ＩＲは時間的に同じ区間における値を示すものとする。これらの指標ＩＬ、ＩＲは、重み付け係数算出部１１２に入力される。なお、具体的な指標ＩＬ、ＩＲについては、後の実施の形態において説明する。【００２３】  重み付け係数算出部１１２は、ステレオ信号の各チャネルの信号に対する重み付け係数を指標ＩＬ、ＩＲに基づいて算出する。重み付け係数算出部１１２は、Ｌチャネル信号ＸＬに対する一定区間毎の重み付け係数ＷＬ、Ｒチャネル信号ＸＲに対する一定区間毎の重み付け係数ＷＲを、式（１��および（２）に従って算出する。なお、ここでの一定区間は、指標算出部１１１が指標ＩＬ、ＩＲを算出した際の一定区間と同一である。これらの重み付け係数ＷＬ、ＷＲは、乗算部１１３に入力される。
【数１】
2006080358.tif 000002
【数２】
2006080358.tif 000003
【００２４】  乗算部１１３は、ステレオ信号の各チャネルの信号の振幅に、重み付け係数を乗算する。これにより、ステレオ信号の各チャネルの信号は、各チャネルの信号の音声情報量に応じた重み付け係数により重み付けされる。具体的には、Ｌチャネル信号の一定区間内のｉ番目のサンプルをＸＬ（ｉ）、Ｒチャネル信号のｉ番目のサンプルをＸＲ（ｉ）とすると、重み付けされたＬチャネル信号のｉ番目のサンプルＸＬＷ（ｉ）および重み付けされたＲチャネル信号のｉ番目のサンプルＸＲＷ（ｉ）は、式（３）および（４）に従って求められる。重み付けされた各チャネルの信号ＸＬＷ、ＸＲＷは、モノラル信号生成部１２に入力される。
【数３】
2006080358.tif 000004
【数４】
2006080358.tif 000005
【００２５】  そして、図１に示すモノラル信号生成部１２は、重み付けされたＬチャネル信号ＸＬＷと重み付けされたＲチャネル信号ＸＲＷの平均値を算出し、その平均値をモノラル信号ＸＭＷとする。モノラル信号生成部１２は、モノラル信号のｉ番目のサンプルＸＭＷ（ｉ）を式（５）に従って生成する。
【数５】
2006080358.tif 000006
【００２６】  モノラル信号符号化部１３は、モノラル信号ＸＭＷ（ｉ）を符号化し、モノラル信号復号部１４は、モノラル信号符号化パラメータを復号してモノラル信号を得る。【００２７】  差分信号生成部１５は、Ｌチャネル信号のｉ番目のサンプルをＸＬ（ｉ）、Ｒチャネル信号のｉ番目のサンプルをＸＲ（ｉ）、モノラル信号のｉ番目のサンプルをＸＭＷ（ｉ）とすると、Ｌチャネル信号のｉ番目のサンプルの差分信号ΔＸＬ（ｉ）、および、Ｒチャネル信号のｉ番目のサンプルの差分信号ΔＸＲ（ｉ）を式（６）および（７）に従って求める。
【数６】
2006080358.tif 000007
【数７】
2006080358.tif 000008
【００２８】  そして、ステレオ信号符号化部１６において、差分信号ΔＸＬ（ｉ）およびΔＸＲ（ｉ）に対して各々符号化を行う。差分信号の符号化方法は、例えば差分ＰＣＭ符号化等、音声差分信号を符号化するのに適した方法を用いる。【００２９】  ここで、例えば、図３に示すようにＬチャネル信号は音声信号から成り、図４に示すようにＲチャネル信号は無音（ＤＣ成分のみ）から成る場合は、音声信号から成るＬチャネル信号の方が無音（ＤＣ成分のみ）から成るＲチャネル信号よりも多くの情報を受信側の受聴者に与える。よって、従来のように、単に各チャネルの信号をそのまま平均してモノラル信号を生成すると、そのモノラル信号は、Ｌチャネル信号の振幅を２分の１にした信号となり、明瞭性や了解性に乏しい信号になってしまうと考えられる。【００３０】  これに対し、本実施の形態では、各チャネルの信号の音声情報量の度合いを示す指標に応じた重み付け係数により重み付けした各チャネルの信号からモノラル信号を生成する。音声情報量が多いほど、モノラル信号の受信側でモノラル信号を復号・再生した際の明瞭性や了解性が高まるものと考えられる。よって、本実施の形態のようにしてモノラル信号を生成することにより、明瞭性や了解性に富んだ、めり張りある適切なモノラル信号を生成することができる。【００３１】  また、本実施の形態では、このようにして生成したモノラル信号に基づいてモノラル−ステレオ・スケーラブル構成を有する符号化を行っているため、音声情報量の度合いの大きいチャネルの信号とモノラル信号との差分信号のパワーが、各チャネルの信号の平均値をモノラル信号とする場合よりも小さくなり（すなわち、音声情報量の度合いの大きいチャネルの信号とモノラル信号との類似性が高くなり）、その結果、そのチャネルの信号に対する符号化歪みを低減することができる。音声情報量の度合いの小さい他のチャネルの信号とモノラル信号との差分信号のパワーは、各チャネルの信号の平均値をモノラル信号とする場合よりも大きくなるものの、チャネル間において各チャネルの符号化歪みに偏りをもたせることができ、音声情報量の多いチャネルの信号の符号化歪みをより小さくすることができる。よって、受信側で復号されるステレオ信号全体としての聴感的歪み感を小さくすることができる。【００３２】  （実施の形態２）
本実施の形態では、音声情報量の度合いを表す指標として、各チャネルの信号のエントロピーを用いる場合について説明する。この場合、指標算出部１１１は以下のようにしてエントロピーを算出し、重み付け係数算出部１１２は以下のようして重み付け係数を算出する。なお、符号化されるステレオ信号は実際には標本化された離散値であるが、連続値として扱っても同様の性質を有するので、以下の説明においては連続値として説明する。【００３３】  確率密度関数ｐ（ｘ）をもつ連続標本値ｘのエントロピーは式（８）により定義される。
【数８】
2006080358.tif 000009
【００３４】  指標算出部１１１は、式（８）に従って、各チャネルの信号に対してエントロピーＨ（Ｘ）を求める。ここでは、一般的に音声信号が式（９）に示す指数分布（ラプラス分布）で近似できることを利用してエントロピーＨ（Ｘ）を求める。なお、αは後述の式（１２）により定義される。
【数９】
2006080358.tif 000010
【００３５】  式（９）を用いることで、式（８）に示すエントロピーＨ（Ｘ）は式（１０）により算出される。つまり、式（１０）により求められるエントロピーＨ（Ｘ）は、１標本値を表現するのに必要なビット数を示すため、音声情報量の度合いを表す指標として用いることができる。なお、式（１０）においては、式（１１）に示すように、音声信号の振幅の絶対値の平均値を０とみなしている。
【数１０】
2006080358.tif 000011
【数１１】
2006080358.tif 000012
【００３６】  ところで、指数分布の場合、音声信号の標準偏差をσｘとすると、αは式（１２）により表される。
【数１２】
2006080358.tif 000013
【００３７】  上記のように音声信号の振幅の絶対値の平均値は０とみなせるので、標準偏差は音声信号のパワーＰを用いて式（１３）のように表される。
【数１３】
2006080358.tif 000014
【００３８】  式（１２）および式（１３）を用いると、式（１０）は、式（１４）のようになる。
【数１４】
2006080358.tif 000015
【００３９】  よって、Ｌチャネル信号の一定区間毎のエントロピーＨＬは、Ｌチャネル信号のパワーをＰＬとすると、式（１５）に従って求められる。
【数１５】
2006080358.tif 000016
【００４０】  同様に、Ｒチャネル信号の一定区間毎のエントロピーＨＲは、Ｒチャネル信号のパワーをＰＲとすると、式（１６）に従って求められる。
【数１６】
2006080358.tif 000017
【００４１】  このようにして、指標算出部１１１では、各チャネルの信号のエントロピーＨＬ、ＨＲが求められ、これらのエントロピーが重み付け係数算出部１１２に入力される。【００４２】  なお、上記説明では、音声信号の分布は指数分布と仮定してエントロピーを求めたが、実際の信号のサンプルｘｉと、その信号の発生頻度から算出される発生確率ｐ（ｘｉ）とから、各チャネルの信号のエントロピーＨＬ、ＨＲを算出することも可能である。【００４３】  そして、重み付け係数算出部１１２では、エントロピーＨＬ、ＨＲを実施の形態１において示した指標ＩＬ、ＩＲとして用いて、重み付け係数ＷＬ、ＷＲを式（１７）および（１８）に従って算出する。これらの重み付け係数ＷＬ、ＷＲは、乗算部１１３に入力される。
【数１７】
2006080358.tif 000018
【数１８】
2006080358.tif 000019
【００４４】  このように、本実施の形態では、エントロピーを音声情報量（ビット数）を表す指標として用い、各チャネルの信号にエントロピーに応じた重み付けを行うことにより、音声情報量が多いチャネルの信号が強調された、めり張りあるモノラル信号を生成することができる。【００４５】  （実施の形態３）
本実施の形態では、音声情報量の度合いを表す指標として、各チャネルの信号のＳ／Ｎ比を用いる場合について説明する。この場合、指標算出部１１１は以下のようにしてＳ／Ｎ比を算出し、重み付け係数算出部１１２は以下のようして重み付け係数を算出する。【００４６】  本実施の形態で用いるＳ／Ｎ比は、入力信号において、主となる信号Ｓとそれ以外の信号Ｎとの比である。例えば、入力信号が音声信号の場合は、主となる音声信号Ｓと背景の周囲雑音信号Ｎとの比である。具体的には、式（１９）によって求められる、入力音声信号の平均パワー（入力音声信号のフレーム単位のパワーを時間的に平均化したもの）ＰＳと非音声区間（雑音のみの区間）での雑音信号の平均パワー（非音声区間のフレーム単位のパワーを時間的に平均化したもの）ＰＥとの比を逐次計算・更新することでＳ／Ｎ比とする。また、受聴者にとっては、一般に雑音信号Ｎよりも音声信号Ｓの方が必要な情報であることが多いため、Ｓ／Ｎ比を指標として用いることで受聴者が必要な情報が強調されたモノラル信号を生成することができる。そこで、本実施の形態では、Ｓ／Ｎ比を音声情報量の度合いを表す指標として用いる。
【数１９】
2006080358.tif 000020
【００４７】  式（１９）より、Ｌチャネル信号のＳ／Ｎ比（Ｓ／Ｎ）Ｌは、Ｌチャネル信号の音声信号の平均パワー（ＰＳ）Ｌと、Ｌチャネル信号の雑音信号の平均パワー（ＰＥ）Ｌとから、式（２０）によって表される。
【数２０】
2006080358.tif 000021
【００４８】  同様に、Ｒチャネル信号のＳ／Ｎ比（Ｓ／Ｎ）Ｒは、Ｒチャネル信号の音声信号の平均パワー（ＰＳ）Ｒと、Ｒチャネル信号の雑音信号の平均パワー（ＰＥ）Ｒとから、式（２１）によって表される。
【数２１】
2006080358.tif 000022
【００４９】  ただし、（Ｓ／Ｎ）Ｌ、（Ｓ／Ｎ）Ｒが負となる場合は、負となるＳ／Ｎ比を、予め定めた正の下限値に置き換える。【００５０】  このようにして、指標算出部１１１では、各チャネルの信号のＳ／Ｎ比（Ｓ／Ｎ）Ｌ、（Ｓ／Ｎ）Ｒが求められ、これらのＳ／Ｎ比が重み付け係数算出部１１２に入力される。【００５１】  そして、重み付け係数算出部１１２では、Ｓ／Ｎ比（Ｓ／Ｎ）Ｌ、（Ｓ／Ｎ）Ｒを実施の形態１において示した指標ＩＬ、ＩＲとして用いて、重み付け係数ＷＬ、ＷＲを式（２２）および（２３）に従って算出する。これらの重み付け係数ＷＬ、ＷＲは、乗算部１１３に入力される。
【数２２】
2006080358.tif 000023
【数２３】
2006080358.tif 000024
【００５２】  なお、重み付け係数は以下のようにして求めてもよい。すなわち、式（２０）、（２１）に示すｌｏｇ領域でのＳ／Ｎ比の代わりに、ｌｏｇをとらないＳ／Ｎ比を用いて重み付け係数を求めてもよい。また、式（２２）、（２３）を用いて重み付け係数を算出する代わりに、Ｓ／Ｎ比が大きいほど重み付け係数が大きくなるような、Ｓ／Ｎ比と重み付け係数との対応関係を示すテーブルを予め用意しておき、Ｓ／Ｎ比に基づいてそのテーブルを参照して重み付け係数を求めてもよい。【００５３】  このように、本実施の形態では、Ｓ／Ｎ比を音声情報量を表す指標として用い、各チャネルの信号にＳ／Ｎ比に応じた重み付けを行うことにより、音声情報量が多いチャネルの信号が強調された、めり張りあるモノラル信号を生成することができる。【００５４】  なお、音声情報量の度合いを表す指標としては、他に、音声波形の規則性（不規則性が大きいほど音声情報量が多いことに基づく）や、スペクトラム包絡の時間的変化量（変化量が大きいほど音声情報量が多いことに基づく）等を用いることも可能である。【００５５】  なお、上記各実施の形態に係る音声符号化装置を、移動体通信システムにおいて使用される無線通信移動局装置や無線通信基地局装置等の無線通信装置に搭載することも可能である。【００５６】  また、上記実施の形態では、本発明をハードウェアで構成する場合を例にとって説明したが、本発明はソフトウェアで実現することも可能である。【００５７】  また、上記実施の形態の説明に用いた各機能ブロックは、典型的には集積回路であるＬＳＩとして実現される。これらは個別に１チップ化されてもよいし、一部又は全てを含むように１チップ化されてもよい。【００５８】  ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。【００５９】  また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用してもよい。【００６０】  さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。【００６１】  本明細書は、２００５年１月２６日出願の特願２００５−０１８１５０に基づくものである。この内容はすべてここに含めておく。
【産業上の利用可能性】
【００６２】  本発明は、移動体通信システムやインターネットプロトコルを用いたパケット通信システム等における通信装置の用途に適用できる。
【図１】
2006080358.tif 000025
【図２】
2006080358.tif 000026
【図３】
2006080358.tif 000027
【図４】
2006080358.tif 000028
【国際調査報告】
2006080358.tif 000029
2006080358.tif 000030
2006080358.tif 000031
2006080358.tif 000032