(57)【要約】【課題】或る情報量のオーディオ信号を雑音に埋もれにくい形態の少ない情報量のデータに符号化する。【解決手段】オーディオ符号化装置(232)は、情報量が低減するように聴覚特性に基づいてマスキング閾値を利用してオーディオ信号を符号化する。オーディオ符号化装置は、端末から受信した周囲雑音レベル(304)に応じてマスキング閾値(302)を補正し、その際、マスキング閾値との差が或る閾値より大きい入力信号(350)が、補正後のマスキング閾値(306,310)より大きくなるように、マスキング閾値(302)および入力信号(350)の少なくとも一方の補正を行う第１の処理部(239,240,242)と、補正後のマスキング閾値(306,310)より大きい、その少なくとも一方の補正が行われた後の入力信号(350,351)の符号化を行う第２の処理部(236,246)と、を含む。【選択図】図２
2015227912.tif 000002
【特許請求の範囲】
【請求項１】
情報量が低減するように聴覚特性に基づいてマスキング閾値を利用してオーディオ信号を符号化するオーディオ符号化装置であって、
端末から受信した周囲雑音レベルに応じてマスキング閾値を補正し、その際、前記マスキング閾値との差が或る閾値より大きい入力信号が、補正後の前記マスキング閾値より大きくなるように、前記マスキング閾値および前記入力信号の少なくとも一方の補正を行う第１の処理部と、
補正後の前記マスキング閾値より大きい、前記少なくとも一方の補正が行われた後の前記入力信号の符号化を行う第２の処理部と、
を含むオーディオ符号化装置。
【請求項２】
前記第１の処理部が前記端末における信号対ノイズ比に応じて前記マスキング閾値を補正することを特徴とする、請求項１に記載のオーディオ符号化装置。
【請求項３】
前記第１の処理部は、さらに前記符号化されたオーディオ信号の前記端末への伝送レートに応じて前記マスキング閾値を補正するものであることを特徴とする、請求項１または２に記載のオーディオ符号化装置。
【請求項４】
前記入力信号は、前記マスキング閾値より大きく、かつ前記マスキング閾値と間の利得差が前記或る閾値より大きいものであることを特徴とする、請求項１乃至３のいずれかに記載のオーディオ符号化装置。
【請求項５】
前記第１の処理部は、前記マスキング閾値より大きい或る入力信号と、前記或る入力信号の部分帯域に隣接する部分帯域の他の入力信号との間の利得差が、或る利得閾値より大きい場合に、前記マスキング閾値を前記或る入力信号より小さくなるように補正するものであることを特徴とする、請求項１乃至４のいずれかに記載のオーディオ符号化装置。
【請求項６】
前記第２の処理部が、さらに、前記端末における信号対ノイズ比に応じて前記第２の処理部によって符号化される前記入力信号のブロックの長さを変更することを特徴とする、請求項１乃至５のいずれかに記載のオーディオ符号化装置。
【請求項７】
情報量が低減するように聴覚特性に基づいてマスキング閾値を利用してオーディオ信号を符号化する方法であって、
端末から受信した周囲雑音レベルに応じてマスキング閾値を補正し、その際、前記マスキング閾値との差が或る閾値より大きい入力信号が、補正後の前記マスキング閾値より大きくなるように、前記マスキング閾値および前記入力信号の少なくとも一方の補正を行い、
補正後の前記マスキング閾値より大きい、前記少なくとも一方の補正が行われた後の前記入力信号の符号化を行う
処理を情報処理装置が実行する方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、オーディオ信号の符号化に関する。
【背景技術】
【０００２】
既知の録画装置は、ユーザの操作に従って、放送番組のオーディオおよびビデオ・ストリームを受信して記録することができる。既知の著作権保護機能付き録画装置は、さらに、移動体通信網およびインターネットを介して、ユーザによる携帯情報端末からの送信要求に応答して、記録したオーディオおよびビデオ・ストリームを低い伝送レートに変換して携帯情報端末に送信することができる。著作権保護機能付き録画装置は、例えば著作権保護規格の機能ＤＴＣＰ＋（Digital Transmission Content Protection Plus）等に適合するものであってもよい。ユーザは、携帯情報端末において、著作権保護機能付き録画装置からその低いレートのオーディオおよびビデオ・ストリームを受信して再生して視聴することができる。
【０００３】
或る既知の信号符号化方法において、伝送モード決定部が、入力信号中の音声または楽音信号の背景に含まれる環境雑音を検知し、環境雑音のレベルに応じて相手側通信端末である通信端末装置から伝送される信号の伝送ビットレートを制御する伝送モードを決定する。また、信号復号化部が、伝送路を介して通信端末装置から伝送される符号化情報を復号化し、得られた信号を出力信号として出力する。このとき、信号復号化部は、伝送路から出力される符号化情報に含まれる伝送モード情報と伝送モード決定部から得られる伝送モード情報とを、伝送遅延を考慮した上で比較することにより、伝送誤りを検出する。それによって、受信側の使用環境を考慮して送信側の伝送ビットレートを制御することによって、品質を維持しつつ効率的な音声または楽音信号の符号化を行うことが可能である。
【０００４】
或る既知の通信端末において、背景雑音検出部が、背景雑音の雑音レベルを検出する。また、制御部が、雑音レベルに基づいて復号レベルを決定する。制御部は、このようにして決定された復号レベルでのＡＭＲ（Adaptive Multi-Rate）復号を、圧縮伸長処理部に行わせる。それによって、過剰な品質での音声の出力を行うことが防止され、効率化を図ることが可能となる。
【０００５】
或る既知の通信端末装置では、電波強度やネットワーク輻輳などの下位層の情報をアプリケーションから隠蔽するように構成されていた従来の通信端末装置に、これら下位層の情報を上位層に通知する下位層管理部が、新たに導入される。それによって、アプリケーションのサービス生成環境を提供する接続制御部が、直接下位層の情報を認識でき、アプリケーション・レベルで、下位層の情報に基づいた様々な状況判断と制御の変更が可能となる。また、それによって、モバイル環境で通信状況が変化しても、ユーザがシームレスな感覚で映像や音声のコミュニケーションを継続することができる通信端末が提供される。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００５−２４１７６１号公報
【特許文献２】特開２００３−２１８７８１号公報
【特許文献３】特表２００４−２６６３３０号公報
【非特許文献】
【０００７】
【非特許文献１】E. Kurniawati, C. T. Lau, B. Premkumar, J. Absar, S. George, “New Implementation Techniques of an Efficient MPEG Advanced Audio Coder”、［平成２６年３月７日検索］インターネット<http://www.img.lx.it.pt/~fp/cav/ano2008_2009/Trabalhos_MEEC_2009/Artigo_MEEC_11/pagina%20web/pagina%20web/referencias/artigo3.pdf>
【発明の概要】
【発明が解決しようとする課題】
【０００８】
記録装置に或るレートで記録されたオーディオ・ストリーム・データが、送信側で低いレートで再符号化されて送信されて、受信側で再生されたとき、再生側での再生音は、受信側の周囲雑音に埋もれて聴取者にとって聴取しにくく、聴取音質が低下することがある。
【０００９】
発明者たちは、或るレートで記録されたオーディオ・ストリーム・データを、再生時の周囲雑音に埋もれにくい形態のオーディオ・ストリーム・データに変換すれば、その実効的な聴取音質を高くすることができる、と認識した。
【００１０】
１つの観点では、本発明の目的は、或る情報量のオーディオ信号を雑音に埋もれにくい形態かつ少ない情報量で符号化することである。
【課題を解決するための手段】
【００１１】
本発明の実施形態によれば、情報量が低減するように聴覚特性に基づいてマスキング閾値を利用してオーディオ信号を符号化するオーディオ符号化装置が提供される。そのオーディオ符号化装置は、端末から受信した周囲雑音レベルに応じてマスキング閾値を補正し、その際、マスキング閾値との差が或る閾値より大きい入力信号が、補正後のマスキング閾値より大きくなるように、マスキング閾値および入力信号の少なくとも一方の補正を行う第１の処理部と、補正後のマスキング閾値より大きい、その少なくとも一方の補正が行われた後の入力信号の符号化を行う第２の処理部と、を含んでいる。
【発明の効果】
【００１２】
実施形態の実施形態によれば、或る情報量のオーディオ信号を雑音に埋もれにくい形態かつ少ない情報量で符号化することができる。
【図面の簡単な説明】
【００１３】
【図１】図１は、実施形態による通信システムの例を示している。
【図２】図２は、トランスコーダ装置の概略的な構成（configuration）の例を示している。
【図３】図３は、携帯情報端末の概略的な構成（configuration）の例を示している。
【図４】図４Ａ〜４Ｃは、音響符号化部によって処理される復号オーディオ・ストリーム・データの周波数スペクトルの例を示している。
【図５】図５は、携帯情報端末によって実行される、周囲の雑音を含む音に関するノイズ電力情報を生成して送信するための処理のフローチャートの例を示している。
【図６Ａ】図６Ａおよび６Ｂは、トランスコーダ装置の音響符号化部によって実行される、携帯情報端末のノイズ電力レベルに応じて、復号されたビデオ・ストリーム・データを聴覚符号化するための処理のフローチャートの例を示している。
【図６Ｂ】(図6Aで説明)
【図７】図７は、図６Ｂのステップ６２０の、より具体的なフローチャートの例を示している。
【図８】図８Ａ〜８Ｃは、３つの要素の補正関数の例を示している。
【図９】図９は、オーディオ信号のスペクトルのピーク性の例を説明するための図である。
【図１０】図１０は、上述の実施形態の変形形態による、携帯情報端末の別の概略的な構成（configuration）の例を示している。
【図１１】図１１は、図５のフローチャートの変形形態であり、携帯情報端末によって実行される、ノイズ電力および信号対ノイズ比を生成して送信するための処理のフローチャートの例を示している。
【図１２】図１２は、図７のフローチャートの変形形態であり、合成マスキング閾値を要素および３つの要素で補正するための処理の別のフローチャートの例を示している。
【図１３】図１３は、図２のトランスコーダ装置の変形形態であり、トランスコーダ装置の別の概略的な構成（configuration）の例を示している。
【図１４Ａ】図１４Ａおよび１４Ｂは、音響符号化部によって実行される、携帯情報端末のノイズ電力レベルおよび信号対ノイズ比に応じて、復号されたビデオ・ストリーム・データを聴覚符号化するための処理のフローチャートの例を示している。
【図１４Ｂ】(図14Aで説明)
【発明を実施するための形態】
【００１４】
発明の目的および利点は、請求の範囲に具体的に記載された構成要素および組み合わせによって実現され達成される。
前述の一般的な説明および以下の詳細な説明は、典型例および説明のためのものであって、本発明を限定するためのものではない、と理解される。
【００１５】
本発明の非限定的な実施形態を、図面を参照して説明する。図面において、同様のコンポーネントおよび要素には同じ参照番号が付されている。
【００１６】
記録装置に或るレートで記録されたオーディオ（音響）ストリーム・データが、送信側の装置で低いレートで再符号化されて送信されて、受信側の端末で再生されたとき、その端末での再生音は、端末の周囲雑音に埋もれて聴取者にとって聴取しにくいことがある。一方、送信側の装置で低いレートで符号化されて送信されるオーディオ・ストリーム・データについて、受信側の端末で周囲雑音によって聴取しにくい周波数部分帯域の信号の利得を受信側の端末で増大させると、符号化の量子化誤差が増大して再生音の音質が低下する。
【００１７】
一方、人の聴覚特性、即ち音に対する人の知覚特性として、或る周波数の或る閾値電力レベルより大きい音には、その音のレベルに応じてその付近の周波数の或る閾値電力レベルより小さい他の音を聞こえなくする効果、即ちマスキング効果がある。マスキング閾値は、可聴周波数帯域にわたって分布するそのような閾値電力レベルを表し、マスキング効果によって人に知覚できないスペクトル電力の限界値（上限）を表している。一方、聴覚特性に基づく知覚符号化（Perceptual Coding）又は聴覚符号化は、マスキング効果を利用して、オーディオ信号のスペクトルおよびレベルに応じて知覚可能な部分帯域のオーディオ信号だけを符号化し、マスキング閾値以下の部分帯域の信号を符号化しない。聴覚符号化によって、オーディオ信号の実効的な符号化効率が増大する。
【００１８】
発明者たちは、符号化されるオーディオ信号を、部分帯域毎にマスキング閾値と周囲雑音に応じて選択すれば、聴取可能な部分帯域の信号だけに多くのビット数を割り当てて、低いレートでも周囲雑音に埋もれにくい形態でオーディオ信号を符号化できる、と認識した。また、発明者たちは、受信側の周囲雑音のレベルに応じて各部分帯域のオーディオ信号を選択してレベル補正して符号化すれば、人の聴覚特性に基づいて周囲雑音に埋もれにくい形態で、オーディオ信号を低いレートのデータに符号化することができる、と認識した。
【００１９】
実施形態の目的は、オーディオ信号を、雑音に埋もれにくい形態かつ少ない情報量の符号化データへと、周囲雑音レベルに応じて適応的に符号化または変換することである。この目的は、実施形態によって達成される。
【００２０】
図１は、実施形態による通信システム２の例を示している。
【００２１】
図１において、通信システム２は、携帯情報端末１０および情報処理装置２０を含んでいる。情報処理装置２０は、通信ネットワーク５を介して、携帯情報端末１０からの要求に応答して、放送ストリームを或るデータレートで記録した符号化オーディオおよびビデオ・ストリームを復号し、低レートで再符号化して、携帯情報端末１０に送信することができる。通信ネットワーク５は、無線基地局またはアクセスポイント５０を含む移動体通信網、および例えばインターネットのようなＩＰ（Internet Protocol）ネットワークを含んでいてもよい。
【００２２】
携帯情報端末１０は、例えば、携帯電話機、スマートフォン、タブレット端末、モバイル型パーソナル・コンピュータであってもよい。
【００２３】
情報処理装置２０は、例えば、ＨＤＤ（Hard Disk Drive）レコーダのような放送記録装置もしくは放送記録再生装置、または放送記録再生機能付きのパーソナル・コンピュータであってもよい。図１において、情報処理装置２０は、例えば、プロセッサ２２、記憶装置２４、ネットワーク・インタフェース（ＮＷ／ＩＦ）２６、入力部２７、トランスコーダ装置またはトランスコーダ部２００、放送受信機２０２、ドライブ２８を含んでいる。但し、情報処理装置２０そのものが、トランスコーダ装置またはトランスコーダ機器と称されてもよい。
【００２４】
プロセッサ２２は、コンピュータ用のＣＰＵ（Central Processing Unit）であってもよい。記憶装置２４は、主記憶装置および補助記憶装置を含んでいる。主記憶装置は、半導体メモリ等の記憶装置を含んでいる。また、補助記憶装置は、例えば、ハードディスク・ドライブ（ＨＤＤ）、および／または、フラッシュ・メモリのような半導体メモリを含んでいる。記憶装置２４の補助記憶装置の少なくとも一部の領域は、ストリーム・データの記録部として機能してもよい。入力部２７は、例えば、複数のキー、タッチパッド、テンキー、キーボード、および／またはタッチパネルを含んでいてもよい。
【００２５】
ドライブ２８は、ソフトウェア、およびオーディオおよびビデオ・ストリーム・データが記録された例えば光ディスクまたは磁気ディスクのような記録媒体２８４を読み取るためのものであってもよい。そのソフトウェアは、例えば、ＯＳ、データベース管理システム（ＤＢＭＳ）、アプリケーション・プログラム、等を含んでいてもよい。アプリケーション・プログラムは、携帯情報端末１０からの操作コマンドまたは要求の受信に応答動作して要求されたストリーム・データを携帯情報端末１０に送信するためのアプリケーションを含んでいてもよい。
【００２６】
プロセッサ２２は、例えば集積回路として実装された専用のプロセッサであってもよい。また、プロセッサ２２は、記憶装置２４に格納されたアプリケーション・プログラムに従って動作するものであってもよい。アプリケーション・プログラムは、記録媒体２８４に格納されていて、ドライブ２８によって記録媒体２８４から読み出されて情報処理装置２０にインストールされてもよい。
【００２７】
情報処理装置２０において、プロセッサ２２は、ユーザの操作に従って、例えば地上波および衛星放送の放送信号を放送受信機２０２に受信させて、そのオーディオおよびビデオ（ＡＶ）ストリーム・データを記憶装置２４に記録させることができる。放送信号は、例えばＤＴＣＰ（Digital Transmission Content Protection）で著作権保護されたオーディオおよびビデオ・ストリーム・データを搬送するものであってもよい。また、情報処理装置２０において、プロセッサ２２は、通信ネットワーク５を介して、ユーザ操作による携帯情報端末１０からのストリーム送信要求を受信することができる。プロセッサ２２は、さらに、携帯情報端末１０からの要求に応答して、記憶装置２４に記録されたオーディオおよびビデオ・ストリーム・データを読み出して、トランスコーダ装置２００に、復号させて低レートのストリーム・データに再符号化させることができる。プロセッサ２２は、さらに、再符号化されたストリーム・データを、ネットワーク・インタフェース２６を介し通信ネットワーク５を介して携帯情報端末１０に送信することができる。
【００２８】
図２は、トランスコーダ装置２００の概略的な構成（configuration）の例を示している。
【００２９】
図２において、トランスコーダ装置２００は、例えば、情報入力部２１０、ストリーム入力部２２２、音響復号部２２６、音響符号化部２３０、画像復号部２５６、画像符号化部２６０、多重化部２７０、およびストリーム出力部２８０を含んでいる。音響符号化部２３０は、例えば、信号変換部２３６、マスキング閾値生成部２３８、マスキング閾値補正部２３９、符号化判定部２４０、レベル補正部２４２、マスキング補正部２４４、量子化部２４６、および多重化部２４８を含んでいる。音響符号化部２３０は、例えば、ＡＡＣ（Advanced Audio Coding）、ＭＰ３（MPEG Audio Layer-3）またはＡＣ３（Audio Code number 3）のようなオーディオ圧縮符号化規格に従う符号化器であってもよい。従って、音響符号化部２３０によって生成される低レートのオーディオ・ストリーム・データは、例えば、ＡＡＣ、ＭＰ３またはＡＣ３のようなオーディオ圧縮符号化規格で符号化されたものであってもよい。
【００３０】
図３は、携帯情報端末１０の概略的な構成（configuration）の例を示している。
【００３１】
携帯情報端末１０は、電話通信以外のオーディオ信号に関連して、例えば、受信部１３０、復号部１３２、音響再生部１３６、スピーカ１３８、マイクロホン１４２、音響入力部１４４、変換部１４６、測定部１４８、および送信部１５０を含んでいる。受信部１３０および送信部１５０は、移動体通信用の無線送受信機（図示せず）に結合されても、または移動体通信用の無線送受信機を含んでいてもよい。但し、図３において、携帯情報端末１０のその他の電話通信部および情報処理部等は図示されていない。復号部１３２は、例えばＡＡＣ、ＭＰ３またはＡＣ３のようなオーディオ圧縮符号化規格に従う復号器であってもよい。
【００３２】
携帯情報端末１０において、受信部１３０は復号部１３２に結合され、復号部１３２は、音響再生部１３６に結合され、音響再生部１３６はスピーカ１３８に結合されている。また、マイクロホン１４２は音響入力部１４４に結合され、音響入力部１４４は変換部１４６に結合され、変換部１４６は測定部１４８に結合され、測定部１４８は送信部１５０に結合されている。音響再生部１３６は、さらに音響入力部１４４に結合されていてもよい。
【００３３】
マイクロホン１４２は携帯情報端末１０の周囲の雑音を含む音を捕捉してノイズを含む音信号を生成し、音響入力部１４４は音信号を入力して濾波し増幅する。また、変換部１４６は、音響入力部１４４からの時間領域の音信号を周波数領域のスペクトルに変換する。その変換は、例えば高速フーリエ変換（ＦＦＴ）であってもよい。また、測定部１４８は、周波数スペクトルを複数の部分帯域に分割し、各部分帯域のスペクトルの電力を検出して、各部分帯域のノイズ電力を生成する。送信部１５０は、各部分帯域のノイズ電力を含むノイズ電力情報を情報処理装置２０に送信する。一方、携帯情報端末１０は、ユーザの操作に応じたストリーム送信要求と共に、またはストリーム送信要求の一部として、周囲の雑音に関するノイズ電力情報を情報処理装置２０に送信してもよい。また、携帯情報端末１０は、新しいノイズ電力情報を定期的に（例えば、３または５分間隔で）生成して情報処理装置２０に送信してもよい。
【００３４】
一方、受信部１３０は情報処理装置２０から符号化されたオーディオ・ストリーム・データを受信し、復号部１３２は符号化オーディオ・ストリーム・データを復号してオーディオ信号を生成する。また、音響再生部１３６は、復号されたオーディオ信号を増幅し再生してスピーカ１３８に供給して音響を発生させる。音響再生部１３６でオーディオ信号を再生してスピーカ１３８で音を発生させている時に、音響入力部１４４は、マイクロホン１４２で捕捉された音信号から、音響再生部１３６における再生中のオーディオ信号を減算して、ノイズ成分の音信号を抽出し生成してもよい。
【００３５】
図２において、プロセッサ２２は、ユーザの携帯情報端末１０からのストリーム送信要求に応答して、要求された番組のオーディオおよびビデオ・ストリーム・データを記憶装置２４から読み出してトランスコーダ装置２００に供給して低いレートで再符号化させる。また、プロセッサ２２は、携帯情報端末１０からノイズ電力情報を受信してトランスコーダ装置２００に供給する。
【００３６】
トランスコーダ装置２００において、情報入力部２１０は、ノイズ電力情報を入力して各部分帯域のノイズ電力レベル（図４Ａ、３０４）を音響符号化部２３０に供給する。この場合、ノイズ電力を含むノイズ電力情報は、マスキング閾値補正部２３９および符号化判定部２４０に供給される。一方、ストリーム入力部２２２は、記憶装置２４から取り出されたオーディオおよびビデオ・ストリーム・データを分離して、オーディオ・ストリーム・データを音響復号部２２６に供給し、ビデオ・ストリーム・データを画像復号部２５６に供給する。
【００３７】
画像復号部２５６は、符号化ビデオ・ストリーム・データを復号して、復号ビデオ・ストリーム・データを画像符号化部２６０に供給する。画像符号化部２６０は、復号ビデオ・ストリーム・データを低いレートで再符号化して、符号化されたビデオ・ストリーム・データを多重化部２７０に供給する。
【００３８】
一方、音響復号部２２６は、符号化オーディオ・ストリーム・データを復号して、復号オーディオ・ストリーム・データを音響符号化部２３０に供給する。音響符号化部２３０において、信号変換部２３６は、受け取った時間領域の復号オーディオ・ストリーム・データを周波数領域のスペクトルに変換し、周波数スペクトルを複数の部分帯域に分割し、各部分帯域のスペクトルの電力を生成する。信号変換部２３６は、さらに、各部分帯域のスペクトルを、マスキング閾値生成部２３８、符号化判定部２４０およびレベル補正部２４２に供給する。信号変換部２３６は、例えばＭＤＣＴ（modified discrete cosine transform：修正離散コサイン変換）用の変換器であってもよい。
【００３９】
次は、実施形態による、音響符号化部２３０における復号オーディオ・ストリーム・データの再符号化のしかたを概略的に説明する。
【００４０】
図４Ａ〜４Ｃは、音響符号化部２３０によって処理される復号オーディオ・ストリーム・データの周波数スペクトルの例を示している。図４Ａ〜４Ｃは、初期のマスキング閾値３０２を補正し、補正マスキング閾値３１０で符号化対象のオーディオ信号の電力３５０、３５１を選択し、レベル補正対象の電力３３２、３３４、３３８、３４０を選択する方法を説明するためのものである。
【００４１】
図４Ａ〜４Ｃにおいて、周波数ｆに対する、復号されたオーディオ信号の各部分帯域の電力（パワー）３３０（棒グラフ）、およびオーディオ信号の各部分帯域の電力３３０に対する初期のマスキング閾値（プロファイル）３０２（細い破線）が示されている。ここで、図４Ａ〜４Ｃにおけるオーディオ信号の各部分帯域の電力３３０は、可聴周波数帯域全体を分割した各部分帯域におけるそれぞれの合計の電力を表している。また、図４Ａには、携帯情報端末１０で捕捉された周囲雑音の周波数ｆに対する各部分帯域のノイズ電力レベル３０４（細い破線）が示されている。この場合、可聴周波数帯域は、例えば２０Ｈｚ〜２４ｋＨｚの周波数範囲であってもよい。
【００４２】
マスキング閾値生成部２３８は、各部分帯域に対する或る時間区間のブロックの復号オーディオ信号の各電力３３０の分布に対して、聴覚特性によるマスキング特性に基づいて、初期のマスキング閾値３０２を生成してマスキング閾値補正部２３９に供給する。一方、情報入力部２１０は、携帯情報端末１０から受信したノイズ電力情報に含まれる複数の部分帯域にわたるノイズ電力レベル３０４をマスキング閾値補正部２３９および符号化判定部２４０に供給する。
【００４３】
次いで、マスキング閾値補正部２３９は、各部分帯域について、初期のマスキング閾値３０２をノイズ電力レベル３０４と合成することによって補正して、合成マスキング閾値３０６（太い一点鎖線）を形成する。その合成は、例えば、各部分帯域について、マスキング閾値３０２とノイズ電力レベル３０４とを比較して、ノイズ電力レベル３０４がマスキング閾値３０２の電力を超える場合に、マスキング閾値３０２をノイズ電力レベル３０４で置換することによって行われる。換言すれば、その合成は、各部分帯域について、マスキング閾値３０２とノイズ電力レベル３０４のいずれか大きい方の電力レベルを選択して、合成マスキング閾値３０６を形成する処理であってもよい。
【００４４】
図４Ａにおいて、復号オーディオ信号の各電力３３０を合成マスキング閾値３０６と比較すると、例えば、或る部分帯域の電力３３６は合成マスキング閾値３０６より大きい。ここで、初期のマスキング閾値３０２より大きい部分帯域の電力３３６を聴覚符号化して携帯情報端末１０に送信するとする。この場合、合成マスキング閾値３０６より充分大きい部分帯域の電力３３６は携帯情報端末１０において有効に聴取可能である。しかし、合成マスキング閾値３０６より僅かに小さい別の部分帯域の電力３３１は、聴取可能性が僅かにあるだけで、その聴覚的な再生音質が低い。また、合成マスキング閾値３０６より大きい部分帯域の電力３３６だけを聴覚符号化すると、伝送レートまたは伝送容量のうちの使用されない残りの部分が無駄になる。従って、トランスコーダ装置２００は、伝送レートの範囲内で、聴覚的な再生音質の向上に寄与する他の部分帯域の電力を選択してレベル補正または増幅して追加的に聴覚符号化し送信することができる。それによって、トランスコーダ装置２００は、携帯情報端末１０でのオーディオ信号の実効的な聴覚的な再生音質を向上させることができる。
【００４５】
次いで、図４Ｂにおいて、マスキング閾値補正部２３９は、全ての部分帯域にわたって合成マスキング閾値３０６の電力を、伝送レートに応じて、マスキング閾値３０２を下限として下向き矢印のように推定の余裕伝送容量の範囲内で一律に低く移動させて補正する。それによって、太い破線で示されたマスキング閾値３０８が得られる。この補正は、後で説明する第１の要素ｆ１による補正である。 
【００４６】
次いで、マスキング閾値補正部２３９は、マスキング閾値３０２より充分大きいオーディオ信号の各電力３５０の部分帯域とその付近について、マスキング閾値３０２を下限として、マスキング閾値３０８を、所定量だけまたは各電力３５０より低くなるように補正する。その際、補正の対象となるそのような部分帯域として、例えば、オーディオ信号の電力３３０と初期のマスキング閾値３０２に関する信号対マスキング閾値のゲイン（利得）比がゲイン比閾値より大きい部分帯域が、選択されてもよい。所定量は、信号対マスキング閾値のゲイン比に応じて決定されてもよい。ここで、ゲイン比閾値は、例えば、１．０〜１．２のような１以上の値であってもよい。この補正は、後で説明する第２の要素ｆ２による補正である。
【００４７】
また、マスキング閾値補正部２３９は、各部分帯域と隣接部分帯域における局所的にピーク性の高いオーディオ信号の電力３５１について、マスキング閾値３０２を下限として、マスキング閾値３０８を所定量だけまたは電力３５１より低くするように補正する。その際、補正対象となるそのような部分帯域として、例えば、マスキング閾値３０２より大きい或る部分帯域のオーディオ信号の電力３３０と、隣接部分帯域のオーディオ信号の電力３３０との間のゲイン比の平均値が、ゲイン比閾値より大きい部分帯域が選択される。所定量は、電力３５１のピーク性の高さに応じて決定されてもよい。ここで、ゲイン比閾値は、例えば２．０または２．５、または３であってもよい。この補正は、後で説明する第３の要素ｆ３による補正である。
【００４８】
このようにして、マスキング閾値補正部２３９は、全ての部分帯域にわたる補正マスキング閾値３１０（図４Ｂの太い破線３０８および太い実線３１０、図４Ｃの太い実線３１０）生成する。次いで、マスキング閾値補正部２３９は、各部分帯域の補正マスキング閾値３１０を符号化判定部２４０およびマスキング補正部２４４に供給する。
【００４９】
次いで、符号化判定部２４０は、図４Ｂにおける各部分帯域について復号オーディオ信号の電力３３０と補正マスキング閾値３１０を比較する。符号化判定部２４０は、補正マスキング閾値３１０より大きい電力の部分帯域を選択し、選択された部分帯域のオーディオ信号の電力３５０、３５１のデータを符号化対象と判定する。一方、符号化判定部２４０は、補正マスキング閾値３１０以下の電力を有するオーディオ信号の部分帯域の電力３５２のデータを符号化対象外と判定する。
【００５０】
次いで、符号化判定部２４０は、符号化対象として決定された部分帯域の電力３５０、３５１の中で、合成マスキング閾値３０６以下の電力３３０を、合成マスキング閾値３０６より大きくなるようにレベル補正または増幅するための増幅率を決定する。その際、符号化対象として決定された部分帯域の電力３５０、３５１の中で、合成マスキング閾値３０６より充分大きい電力３３６のレベルは、そのまま維持され、または増幅率が１と決定されてもよい。次いで、符号化判定部２４０は、符号化対象として決定された電力３５０、３５１の部分帯域と、それぞれの部分帯域の増幅率とを、レベル補正部２４２に通知する。
【００５１】
レベル補正部２４２は、符号化判定部２４０から受け取った符号化対象の電力３５０、３５１の部分帯域とその増幅率に従って、信号変換部２３６から受け取った各部分帯域のオーディオ信号の電力３３０の部分帯域の電力３５０、３５１を増幅する。図４Ｃには、合成マスキング閾値３０６より大きくなるように増幅されたオーディオ信号の電力３３２、３３４、３３８および３４０（太い棒状の破線）が示されている。それによって、部分帯域の電力３５０、３５１は、電力３３２、３３４、３３８、３４０のように増幅される。一方、レベル補正部２４２は、符号化対象外の部分帯域のオーディオ信号の電力３５２を削除しまたは増幅率０で増幅する。それによって、符号化されまたは伝送されるオーディオ信号の情報量が低減される。
【００５２】
レベル補正部２４２によってレベル補正された後のオーディオ信号の電力３３２〜３４０は、補正マスキング閾値３１０に基づいて、設定された伝送レートまたは伝送容量の範囲内で全てを量子化し切れないことがある。マスキング補正部２４４は、符号化されるオーディオ信号の電力が伝送レートのビット数を満たすように、可能な限り音質を維持するように補正マスキング閾値３１０をさらに補正することができる。
【００５３】
次いで、量子化部２４６は、各部分帯域について、レベル補正部２４２で補正されたオーディオ信号の電力３３２〜３４０を量子化する。多重化部２４８は、各部分帯域の量子化データを多重化して、符号化オーディオ・ストリーム・データとして多重化部２７０に供給する。
【００５４】
多重化部２７０は、符号化されたオーディオ・ストリーム・データを、画像符号化部２６０からのビデオ・ストリーム・データと多重化して、低いレートで符号化されたオーディオおよびビデオ・ストリーム・データを生成してストリーム出力部２８０に供給する。
【００５５】
ストリーム出力部２８０は、符号化されたオーディオおよびビデオ・ストリーム・データを出力する。プロセッサ２０は、オーディオおよびビデオ・ストリーム・データを、ネットワーク・インタフェース２６を介し通信ネットワーク５を介して携帯情報端末１０に送信する。
【００５６】
次は、携帯情報端末１０のより具体的な動作を、フローチャートに基づいて説明する。
【００５７】
図５は、携帯情報端末１０によって実行される、周囲の雑音を含む音に関するノイズ電力情報を生成して送信するための処理のフローチャートの例を示している。
【００５８】
図５を参照すると、ステップ５０２において、携帯情報端末１０の音響入力部１４４は、マイクロホン１４２で捕捉された音を表す音信号を記憶装置（図示せず）に記録する。この場合、音信号は、オーディオ信号の再生前に捕捉され、周囲雑音を表すノイズとして記録される。また、音響入力部１４４は、音響再生部１３６で受信オーディオ信号が再生されてスピーカ１３８で音が放出される時に、マイクロホン１４２で捕捉した音信号から音響再生部１３６での再生信号を減算してノイズ成分を求めて周囲雑音を表すノイズとして記録してもよい。
【００５９】
ステップ５０４において、変換部１４６は、例えば高速フーリエ変換（ＦＦＴ）によって、記録された時間領域のノイズを含む音信号ｘｉｎ（ｎ）を周波数領域のスペクトルＸ（ｆ）に変換する。ここで、ｘｉｎ（ｎ）は各サンプルｎの入力信号を表し、Ｘ（ｆ）は各周波数ビン（区間）ｆの入力スペクトルを表す。
【００６０】
変換部１４６は、さらに、周波数スペクトルＸ（ｆ）を、例えば次の式で表される周波数パワースペクトルＳ（ｆ）に変換する。
Ｓ（ｆ）＝｜Ｘ（ｆ）２｜
【００６１】
ステップ５０６において、測定部１４８は、周波数パワースペクトルＳ（ｆ）を複数の部分帯域ｓｆｂに分割して、例えば次の式で表される各部分帯域ｓｆｂのノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）を求める。
【数１】
2015227912.tif 000003
ここで、ノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）は、各部分帯域ｓｆｂ毎のグループ化された電力の総和を表し、ｓｆｂは部分帯域の番号を表し、ｓｆｂｏｆｆｓｅｔ（ｎｏ）は部分帯域のオフセット番号ｎｏを表す。それによって、測定部１４８は、各部分帯域ｓｆｂ毎にグループ化されたノイズ電力を生成する。
【００６２】
ステップ５１０において、送信部１５０は、各部分帯域ｓｆｂのノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）を含むノイズ電力情報を、ストリーム送信要求と共にまたは定期的に、通信ネットワーク５を介して情報処理装置２０に送信する。一方、情報処理装置２０はノイズ電力情報を受信し、情報処理装置２０のトランスコーダ装置２００はノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）に基づいて初期のマスキング閾値３０２を補正する。
【００６３】
次は、トランスコーダ装置２００のより具体的な動作を、フローチャートに基づいて説明する。
【００６４】
図６Ａおよび６Ｂは、トランスコーダ装置２００の音響符号化部２３０によって実行される、携帯情報端末１０のノイズ電力レベルに応じて、復号されたビデオ・ストリーム・データを聴覚符号化するための処理のフローチャートの例を示している。
【００６５】
図６Ａを参照すると、ステップ６０６において、信号変換部２３６は、音響復号部２２６によって復号された時間領域の復号オーディオ信号ｘｉｎを周波数領域のスペクトルＸ（ｆ）に変換する。例えば、信号変換部２３６は、復号オーディオ信号ｘｉｎに対して、変換ＭＤＣＴ（modified discrete cosine transform、修正離散コサイン変換）を行って、例えば次の式の周波数スペクトルｍｄｃｔ（ｋ）を得る。
【数２】
2015227912.tif 000004
ここで、ｋは周波数ビンを表し、ＮはＭＤＣＴ変換の窓（例えば、窓長２０４８または２５６サンプル）を表し、ｎ０＝（Ｎ／２＋１）／２である。
【００６６】
ステップ６０８において、マスキング閾値生成部２３８は、複数の周波数ビンｋの周波数帯域を複数の部分帯域ｓｆｂに分割して、例えば次の式で表される、スペクトルｍｄｃｔ（ｋ）の各部分帯域ｓｆｂの周波数スペクトル電力ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）を算出する。
【数３】
2015227912.tif 000005
ここで、ｋは、例えば、１０２４個のビン番号０〜１０２３を表していてもよい。また、部分帯域ｓｆｂは、例えば、５２個の部分帯域番号０〜５１を表していてもよい。
【００６７】
ステップ６１０において、マスキング閾値生成部２３８は、各部分帯域ｓｆｂの電力の分布の特徴に基づいて聴覚特性に従って、可聴周波数ｆの帯域にわたる初期のマスキング閾値３０２を算出しまたは求める。マスキング閾値３０２は、例えば、各部分帯域ｓｆｂについてａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）で表される。
【００６８】
その際、各入力信号ｘｉｎの各マスキング閾値が求められて、各部分帯域ｓｆｂの各マスキング閾値の中の小さい値または大きい値がマスキング閾値として選択されてもよい。また、各入力信号ｘｉｎのマスキング閾値として、例えば、簡易的に、各部分帯域ｓｆｂの最小可聴域の電力が用いられてもよい。より正確なマスキング閾値を算出するための既知の方法に関する文献として、例えば、“New Implementation Techniques of an Efficient MPEG Advanced Audio Coder”（非特許文献１）がある。
【００６９】
ステップ６１２において、マスキング閾値補正部２３９は、初期のマスキング閾値３０２を、携帯情報端末１０によって生成されたノイズ電力レベル３０４（ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ））と合成して、合成マスキング閾値３０６を形成する。合成マスキング閾値３０６は、各部分帯域ｓｆｂについて、例えば次のｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）で表される。
ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）≧ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）の場合、
ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）＝ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
となる。
ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）＜ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）の場合、
ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）＝ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）
となる。
【００７０】
合成マスキング閾値３０６は、携帯情報端末１０における周囲雑音の存在下での聴覚的な再生品質にとって有効なオーディオ信号の電力レベルの閾値を表している。即ち、マスキング閾値３０２がノイズ電力レベル３０４以上の高さを有する部分帯域において、オーディオ信号の電力が合成マスキング閾値３０６以下の場合は、聴覚特性に起因して、人はオーディオ信号をほとんど聞き取れない。また、ノイズ電力レベル３０４がマスキング閾値３０２より高い高さを有する部分帯域において、オーディオ信号の電力が合成マスキング閾値３０６以下の場合は、周囲雑音に起因して、人はオーディオ信号をほとんど聞き取れない。従って、或る部分帯域において合成マスキング閾値３０６以下のオーディオ信号は、符号化して送信されなくてよい。一方、或る部分帯域において合成マスキング閾値３０６より大きいオーディオ信号は聴取可能である。従って、音質の維持または向上に寄与する部分帯域のオーディオ信号を合成マスキング閾値３０６より大きくなるようにレベル補正し、レベル補正されたオーディオ信号を符号化して送信すれば、復号して再生されたオーディオ信号は高い音質で聴取可能となる。
【００７１】
図６Ｂを参照すると、ステップ６２０において、マスキング閾値補正部２３９は、さらに、合成マスキング閾値３０６を３つの要素またはファクタｆ１〜ｆ３で補正して、補正マスキング閾値３１０を生成する。第１の要素ｆ１は、伝送データレートまたはビットレートに応じた合成マスキング閾値３０６に対する補正量である。第２の要素ｆ２は、オーディオ信号３３０と初期のマスキング閾値３０２に関する信号対マスキング閾値の比または利得比に応じた合成マスキング閾値３０６の補正量である。第３の要素ｆ３は、オーディオ信号の電力のピーク性に応じた合成マスキング閾値３０６の補正量である。要素ｆ１〜ｆ３による補正は、各部分帯域について、合成マスキング閾値３０６を要素ｆ１〜ｆ３に関して引き下げて、補正マスキング閾値３１０を生成するものである。
【００７２】
合成マスキング閾値３０６を補正してレベルを下げた補正マスキング閾値３１０を用いることによって、聴覚符号化において、聴覚的な再生音質の向上に寄与するオーディオ信号の部分帯域を符号化対象として増やすことができる。
【００７３】
次は、聴覚的な再生音質の維持または向上に有効な符号化対象を増やすための、３つの要素ｆ１〜ｆ３による補正について、より具体的に説明する。
【００７４】
図７は、図６Ｂのステップ６２０の、より具体的なフローチャートの例を示している。
【００７５】
図８Ａ〜８Ｃは、３つの要素の補正関数ｆ１、ｆ２およびｆ３の例を示している。
図９は、オーディオ信号のスペクトルのピーク性の例を説明するための図である。
【００７６】
図７を参照すると、ステップ６２６において、マスキング閾値補正部２３９は、伝送ビットレートに応じた補正量ｆ１を算出する。補正量ｆ１は、伝送ビットレートｂｉｔｒａｔｅの関数ｆ１（ｂｉｔｒａｔｅ）として、例えば図８Ａのように表される。従って、伝送ビットレートが高くなるに従って、閾値ＢＲＴＨより高い或るビットレートの範囲で概して補正量ｆ１が増大する。それによって、伝送ビットレートに応じて、推定の余裕ビット数の範囲内で、符号化対象の部分帯域を増大させることが可能である。
【００７７】
ステップ６２８において、マスキング閾値補正部２３９は、各部分帯域ｓｆｂにおけるオーディオ信号の電力（３３０）ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）と初期のマスキング閾値（３０２）ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）の利得比Ｒを算出する。ここで、利得比は、Ｒ＝ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）／ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）で表される。
【００７８】
ステップ６３０において、マスキング閾値補正部２３９は、比Ｒに基づいて補正量ｆ２を算出する。補正量ｆ２は、比Ｒの関数ｆ２（Ｒ）として、例えば図８Ｂのように表される。従って、オーディオ信号電力ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）とマスキング閾値ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）の利得比Ｒが大きくなるに従って、閾値ＲＴＨより高い或る比の範囲で概して補正量ｆ２が増大する。それによって、オーディオ信号の電力３３０とマスキング閾値３０２のゲイン比が大きい部分帯域が、符号化対象として選択されやすくなる。
【００７９】
ステップ６３２において、マスキング閾値補正部２３９は、各部分帯域ｓｆｂにおけるオーディオ信号の電力のピーク性を算出する。或る部分帯域ｓｆｂ＿ｘにおけるオーディオ信号電力ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）のピーク性ｐｅａｋ（ｓｆｂ＿ｘ）は、隣接の部分帯域の電力との利得比または利得差分の平均に基づいて算出することができる。例えば、図９において、或る部分帯域ｓｆｂ＿ｘの、隣接の部分帯域ｓｆｂ＿ｘ−１、ｓｆｂ＿ｘ＋１に対するピーク性ｐｅａｋ（ｓｆｂ＿ｘ）は、利得比の平均値による次の式で表される。
ｐｅａｋ（ｓｆｂ＿ｘ）
＝｛ｍｄｃｔ＿ｐｏｗ（ｓｆｂ＿ｘ）／ｍｄｃｔ＿ｐｏｗ（ｓｆｂ＿ｘ−１）
＋ｍｄｃｔ＿ｐｏｗ（ｓｆｂ＿ｘ）／ｍｄｃｔ＿ｐｏｗ（ｓｆｂ＿ｘ＋１）｝／２
【００８０】
ステップ６３４において、マスキング閾値補正部２３９は、ピーク性ｐｅａｋ（ｓｆｂ＿ｘ）に基づいて補正量ｆ３を算出する。補正量ｆ３は、ピーク性ｐｅａｋ（ｓｆｂ＿ｘ）の関数ｆ２（ｐｅａｋ）として、例えば図８Ｃのように表される。従って、ピーク性ｐｅａｋが大きくなるに従って、閾値ＰＴＨより或るピーク性の範囲で概して補正量ｆ３が増大する。それによって、隣接の部分帯域との比較でピーク性の高いオーディオ信号の部分帯域が、符号化対象として選択されやすくなる。
【００８１】
ステップ６３６において、マスキング閾値補正部２３９は、合成補正量α（ｓｆｂ）に基づいて合成マスキング閾値３０６を補正する。補正マスキング閾値３１０は、例えば次の式で表される。
補正マスキング閾値３１０＝合成マスキング閾値３０６×補正量α（ｓｆｂ）
ここで、３つの要素ｆ１〜ｆ３による合成補正量α（ｓｆｂ）は、例えば次の式で表される。
α（ｓｆｂ）＝−（ｆ１×ｆ２×ｆ３）
【００８２】
従って、合成マスキング閾値３０６を補正して得られる補正マスキング閾値３１０、即ちｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）は、例えば次の式で表される。
ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）×α（ｓｆｂ）
但し、補正マスキング閾値３１０は、初期のマスキング閾値３０２より小さくなることはなく、従って次の式を満たす。
左辺ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）≧ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
次いで、マスキング閾値補正部２３９は、各部分帯域の補正マスキング閾値３１０をマスキング補正部２４４に供給する。
【００８３】
図６Ｂを再び参照すると、ステップ６４０において、符号化判定部２４０は、各部分帯域ｓｆｂについてオーディオ信号の電力３３０と補正マスキング閾値３１０とを比較する。次いで、符号化判定部２４０は、補正マスキング閾値３１０より大きい電力を有する部分帯域ｓｆｂのオーディオ信号の電力３５０、３５１を符号化対象と判定する。即ち、各部分帯域ｓｆｂについて、オーディオ信号の電力ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）は、補正マスキング閾値ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）より大きい（＞）場合に、符号化対象として選択される。一方、符号化判定部２４０は、補正マスキング閾値３１０以下の電力を有する部分帯域のオーディオ信号の電力３５２を符号化対象外と判定する。
【００８４】
ステップ６４２において、符号化判定部２４０は、補正マスキング閾値３１０より大きい各部分帯域のオーディオ信号の電力３５０、３５１を、合成マスキング閾値３０６より大きくなるようにレベル補正または増幅するための増幅率γを決定する。一方、符号化判定部２４０は、合成マスキング閾値３０６より充分大きい各部分帯域のオーディオ信号の電力３３６の増幅率γを１と決定し、増幅しないようにする。次いで、レベル補正部２４２は、各増幅率γに従ってオーディオ信号の部分帯域の電力３５０、３５１をレベル補正し増幅する。
【００８５】
より具体的には、オーディオ信号の電力ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）は、例えば次式に従って、周囲雑音に埋もれないように増幅される。
部分帯域ｓｆｂに対して、
ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）＝ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）×ｇａｉｎ（ｓｆｂ）
ここで、ゲインｇａｉｎ（ｓｆｂ）は、例えば次式で表されてもよい。
ｇａｉｎ（ｓｆｂ）＝（ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）／ｍｄｃｔ＿ｐｏｗ（ｓｆｂ））×γ、
ここで、例えば、係数γ＝１．２であってもよい。
このゲインｇａｉｎ（ｓｆｂ）の式において、ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）／ｍｄｃｔ＿ｐｏｗ（ｓｆｂ）の比によって、オーディオ信号の電力が、ノイズ電力と同じレベルにレベル補正され、さらに、係数γによってノイズ電力より大きく増幅される。
また、部分帯域ｓｆｂのグループの電力における各ビンの電力に対する増幅は、次の式で表される。
ｍｄｃｔ＿ｐｏｗ（ｋ）＝ｍｄｃｔ＿ｐｏｗ（ｋ）×ｇａｉｎ（ｓｆｂ）
【００８６】
ステップ６４４において、マスキング補正部２４４は、量子化部２４６と連携して動作して、マスキング閾値補正部２３９から受け取った補正マスキング閾値３１０をさらに伝送レートに適合するように補正する。一方、量子化部２４６は、マスキング補正部２４４によって補正されたマスキング閾値に基づいて、レベル補正部２４２によってレベル補正された各部分帯域または周波数ビンのオーディオ信号の電力を量子化する。
【００８７】
ステップ６４６において、多重化部２４８は、量子化部２４６によって生成された複数の部分帯域のオーディオ・ストリーム・データを多重化して、聴覚符号化されたオーディオ・ストリーム・データを生成する。このようにして、音響復号部２２６で復号されたオーディオ信号は、音響符号化部２３０で、雑音に埋もれにくい形態の低いレートのデータへと、携帯情報端末１０の周囲雑音レベルに応じて適応的に符号化または変換される。
【００８８】
次は、上述の実施形態の変形形態による、３つの要素ｆ１〜ｆ３に加えてさらに信号対ノイズ（ＳＮ）比に関する別の要素ｆSNに基づいて合成マスキング閾値３０６を補正することによって、補正マスキング閾値３１０を生成する方法を説明する。この場合、携帯情報端末１０における再生オーディオ信号と周囲雑音に関する信号対ノイズ（ＳＮ）比が、合成マスキング閾値３０６の補正に用いられて、補正マスキング閾値３１０が生成される。
【００８９】
図１０は、上述の実施形態の変形形態による、携帯情報端末１０の別の概略的な構成（configuration）の例を示している。
【００９０】
図１０において、測定部１４８は、復号部１３２に結合されていて、復号部１３２から復号されたオーディオ信号またはそのパワースペクトルを受け取る。携帯情報端末１０におけるその他の結合関係は、図３のものと同様である。
【００９１】
図１０の携帯情報端末１０において、受信部１３０は情報処理装置２０から符号化されたオーディオ・ストリーム・データを受信し、復号部１３２は符号化オーディオ・ストリーム・データを復号してオーディオ信号を生成する。また、音響再生部１３６は、オーディオ信号を増幅し再生してスピーカ１３８に供給して音響を発生させる。
【００９２】
一方、変換部１４６は、マイクロホン１４２で捕捉された音信号を周波数スペクトルに変換する。この場合、捕捉された音信号は、周囲雑音のノイズ信号成分と、スピーカ１３８で発生した再生オーディオ信号成分とを含んでいる。測定部１４８は、復号されたオーディオ信号の各部分帯域の周波数スペクトルを算出する。また、測定部１４８は、捕捉された音信号の部分帯域のスペクトルを算出する。次いで、測定部１４８は、各部分帯域について、捕捉された音信号のスペクトルからオーディオ信号成分のスペクトルを減算して、ノイズ信号成分のスペクトルを算出してもよい。次いで、測定部１４８は、オーディオ信号成分とノイズ信号成分の各スペクトルに基づいて信号対ノイズ比を算出する。次いで、送信部１５０は、ノイズ電力および信号対ノイズ比を含むノイズ電力情報を、ストリーム送信要求と共にまたは定期的に情報処理装置２０に送信する。
【００９３】
代替形態として、携帯情報端末１０は復号オーディオ信号をスピーカ１３８で発生させずに、測定部１４８が、捕捉された周囲雑音のノイズ信号のスペクトルと、復号オーディオ信号の算出されたスペクトルとに基づいて、信号対ノイズ比を算出してもよい。その際、復号オーディオ信号のスペクトルは、復号オーディオ信号をスピーカ１３８で再生した場合の音響的特性に基づいて、オーディオ信号のスペクトルを修正することによって、算出されてもよい。
【００９４】
この場合、図２を再び参照すると、トランスコーダ装置２００において、情報入力部２１０は、ノイズ電力および信号対ノイズ比を含むノイズ電力情報を入力して音響符号化部２３０に供給する。ノイズ電力および信号対ノイズ比を含むノイズ電力情報は、マスキング閾値補正部２３９および符号化判定部２４０に供給される。情報処理装置２０のトランスコーダ装置２００のマスキング閾値補正部２３９は、さらに、携帯情報端末１０における信号対ノイズ比に基づいて合成マスキング閾値３０６を補正する。
【００９５】
図１１は、図５のフローチャートの変形形態であり、携帯情報端末１０によって実行される、ノイズ電力および信号対ノイズ比を生成して送信するための処理のフローチャートの例を示している。
【００９６】
図１１を参照すると、ステップ５０２において、携帯情報端末１０の音響入力部１４４は、マイクロホン１４２で捕捉された音信号を記憶装置に記録する。この場合、音信号は、オーディオ信号の再生前に捕捉されたものがノイズとして記録され、また、復号オーディオ信号の再生中の再生音の信号成分と周囲音のノイズ成分を含むものが混合音信号として記憶装置に記録される。
【００９７】
ステップ５０４は、図５のものと同様である。即ち、変換部１４６は、時間領域の音信号ｘｉｎ（ｎ）を周波数領域のスペクトルＸ（ｆ）に変換し、さらに周波数パワースペクトルＳ（ｆ）に変換する。
【００９８】
ステップ５０６において、測定部１４８は、図５の場合と同様に、周波数パワースペクトルＳ（ｆ）を複数の部分帯域ｓｆｂに分割して、各部分帯域ｓｆｂのノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）および再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）を求める。ここで、再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）は、再生時の復号オーディオ信号の電力を表す。この場合、再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）は、復号部１３２で復号されたオーディオ信号に基づいて、計算上の推定値として求められてもよい。その際、再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）は、携帯情報端末１０におけるスピーカ１３８およびマイクロホン１４２等の音響特性を考慮して修正して、計算されてもよい。また、再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）は、或る時点で捕捉された混合音信号の電力ｓｏｕｎｄ＿ｐｏｗ（ｓｆｂ）から、別の時点で捕捉されたノイズの電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）を減算することによって、求められてもよい。また、ノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）は、捕捉された混合音信号の電力ｓｏｕｎｄ＿ｐｏｗ（ｓｆｂ）から、計算で求めた再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）を減算することによって、求められてもよい。各部分帯域ｓｆｂのノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）および再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）は、例えば次の式で表される。
【数４】
2015227912.tif 000006
【数５】
2015227912.tif 000007
【００９９】
ステップ５０８において、測定部１４８は、各部分帯域のノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）および再生音信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）に基づいて、各部分帯域の信号対ノイズ比ＳＮ＿ｒａｔｉｏ（ｓｆｂ）を算出する。信号対ノイズ比ＳＮ＿ｒａｔｉｏ（ｓｆｂ）は、例えば次の式で表される。
ＳＮ＿ｒａｔｉｏ（ｓｆｂ）
＝ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）／ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）
【０１００】
ステップ５１０において、送信部１５０は、各部分帯域ｓｆｂのノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）および信号対ノイズ（ＳＮ）比ＳＮ＿ｒａｔｉｏ（ｓｆｂ）を含むノイズ電力情報を、図５の場合と同様に情報処理装置２０に送信する。この場合、情報処理装置２０のトランスコーダ装置２００は、ノイズ電力ｎｏｉｓｅ＿ｐｏｗ（ｓｆｂ）に基づいて初期のマスキング閾値３０２を補正し、さらに信号対ノイズ（ＳＮ）比ＳＮ＿ｒａｔｉｏ（ｓｆｂ）に基づいて合成マスキング閾値３０６を補正する。
【０１０１】
代替形態として、各部分帯域における信号電力ｓｉｇｎａｌ＿ｐｏｗ（ｓｆｂ）および信号対ノイズ比は、携帯情報端末１０から送信されたノイズ電力に基づいて、トランスコーダ装置２００のマスキング閾値補正部２３９によって算出されてもよい。この場合、信号対ノイズ比は、音響符号化部２３０において符号化されたオーディオ信号を遅延させた信号と、携帯情報端末１０から受信したノイズ電力とに基づいて、算出されてもよい。
【０１０２】
図１１の携帯情報端末１０によって実行されるフローチャートに対して、トランスコーダ装置２００の音響符号化部２３０によって図６Ａおよび６Ｂのフローチャートが同様に実行される。
【０１０３】
図１２は、図７のフローチャートの変形形態であり、合成マスキング閾値３０６を要素ｆＳＮおよび３つの要素ｆ１〜ｆ３で補正するための処理の別のフローチャートの例を示している。
【０１０４】
図１２を参照すると、ステップ６２２において、マスキング閾値補正部２３９は、携帯情報端末１０における信号対ノイズ（Ｓ／Ｎ）比（利得比）が例えば１未満（＜１）の場合、信号対ノイズ（Ｓ／Ｎ）比に応じ補正量ｆＳＮを算出する。補正量ｆＳＮは、信号対ノイズ（Ｓ／Ｎ）比に応じて合成マスキング閾値３０６を増大させるように補正するための、次式で表される補正量である。
ｆＳＮ＝ｆＳＮＭ＝１／ＳＮ＿ｒａｔｉｏ（ｓｆｂ）
この場合、マスキング閾値補正部２３９は、後で説明するように、次のように補正される。
ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）×ｆＳＮＭ
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）／ＳＮ＿ｒａｔｉｏ（ｓｆｂ）
【０１０５】
代替形態として、補正量ｆＳＮは、次式で表される補正量であってもよい。
ｆＳＮ＝ｆＳＮＡ＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）×（１／ＳＮ＿ｒａｔｉｏ（ｓｆｂ）−１）
この場合、マスキング閾値補正部２３９は、後で説明するように、次のように補正される。
補正された合成マスキング閾値（３０６）ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）は、例えば次の式で表される。
ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）×ｆＳＮＡ
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）×１／ＳＮ＿ｒａｔｉｏ（ｓｆｂ）
【０１０６】
このように、オーディオ信号の信号対ノイズ比が１未満の場合に合成マスキング閾値３０６を引き上げることによって、聴覚的な再生音質の向上に寄与する部分帯域のオーディオ信号のレベル補正量を、雑音に埋もれにくいように大きくできる。
【０１０７】
ステップ６２６〜６３４は、図７のものと同様である。
ステップ６３７において、マスキング閾値補正部２３９は、補正量ｆＳＮおよび合成補正量α（ｓｆｂ）に基づいて合成マスキング閾値３０６を補正する。補正マスキング閾値３１０は、例えば次の式で表される。
補正マスキング閾値３１０＝合成マスキング閾値３０６×補正量ｆＳＮＭ×補正量α（ｓｆｂ）、または
補正マスキング閾値３１０＝合成マスキング閾値３０６×補正量ｆＳＮＡ×補正量α（ｓｆｂ）
ここで、前述の通り、合成補正量α（ｓｆｂ）＝−（ｆ１×ｆ２×ｆ３）である。この場合、補正量ｆＳＮが大きくなるに従って、伝送データレートに応じた補正量ｆ１が大きくなる傾向にあってもよい。
【０１０８】
従って、合成マスキング閾値３０６をさらに補正して得られる補正マスキング閾値３１０、即ちｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）は、例えば次の式で表される。
ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）×補正量ｆＳＮＭ×α（ｓｆｂ）、または
＝ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）＋補正量ｆＳＮＡ×α（ｓｆｂ）
但し、補正マスキング閾値３１０は、初期のマスキング閾値３０２より小さくなることはなく、従って次の式を満たす。
左辺ｎｅｗ＿ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）≧ａｌｌｏｗｅｄ＿ｐｏｗ（ｓｆｂ）
次いで、マスキング閾値補正部２３９は、各部分帯域の補正マスキング閾値３１０をマスキング補正部２４４に供給する。
【０１０９】
次は、上述の実施形態のさらに別の変形形態による、携帯情報端末１０の再生オーディオ信号の信号対ノイズ比に応じて、トランスコーダ装置２００における周波数領域に変換されるオーディオ信号の時間領域の分析窓の長さを制御する方法を説明する。
【０１１０】
オーディオ信号符号化に関しては、アタック音など時間領域で急峻な変化を見せる信号に対しては分析長を短くして、プリエコーノイズが抑制される。しかし、単位時間での符号化効率が低下するので、入力音に応じて分析長の長さが適切に調整される。例えば、ＡＡＣなどでは、１２８点の短い窓と１０２４点の長い窓の２種類の窓の間の切り替えが行われる。
【０１１１】
また、次の場合には、信号対ノイズ比に応じて、トランスコーダ装置２００における周波数領域に変換されるオーディオ信号の時間領域の分析窓の長さが調整されまたは切り替えられる。信号対ノイズ比が低い場合には、分析窓を長くしたとしてもプリエコーノイズが知覚されにくいので、分析窓を長くしても問題はない。分析長を長くすることによって、単位時間で１つの部分帯域当り使用できるビットが多くなり、符号化効率が向上し、またはビット数の使用量が少ない分、別の単位時間（フレーム）でそのビット数を使用することによって、音質を向上させることができる。
【０１１２】
図１３は、図２のトランスコーダ装置２００の変形形態であり、トランスコーダ装置２００の別の概略的な構成（configuration）の例を示している。
【０１１３】
この場合、トランスコーダ装置２００は、例えば、図２の音響符号化部２３０の代わりに、音響符号化部２３２を含んでいる。音響符号化部２３２は、図２の音響符号化部２３０と同様に、信号変換部２３６、マスキング閾値生成部２３８、マスキング閾値補正部２３９、符号化判定部２４０、レベル補正部２４２を含んでいる。また、音響符号化部２３２は、図２の音響符号化部２３０と同様に、マスキング補正部２４４、量子化部２４６、および多重化部２４８を含んでいる。この場合、音響符号化部２３２は、さらに、ブロック切替制御部２３２およびブロック切替部２３４を含んでいる。
【０１１４】
ブロック切替制御部２３２は、情報入力部２１０から各部分帯域の信号対ノイズ比を受け取っても、または情報入力部２１０から受け取ったノイズ電力と信号変換部２３６のオーディオ信号の電力に基づいて各部分帯域の信号対ノイズ比を算出してもよい。ここで、信号対ノイズ比は、携帯情報端末１０における再生オーディオ信号の信号対ノイズ比である。
【０１１５】
ブロック切替制御部２３２は、携帯情報端末１０における信号対ノイズ（ＳＮ）比に応じて、ブロック切替部２３４に、音響復号部２２６から供給される信号変換部２３６の入力データのブロック長を切り替えさせる。ブロック切替制御部２３２は、例えば、ｘ個の部分帯域以上の信号対ノイズ（ＳＮ）比が閾値ＳＮｔｈ以下の場合（ＳＮ＿ｒａｔｉｏ（ｓｆｂ）≦ＳＮｔｈ）、ブロックの長さを強制的に長くする（例えば、１０２４点）。それによって、音響符号化部２３２は、信号対ノイズ（ＳＮ）比が閾値ＳＮｔｈより低くオーディオ信号が聴取しにくい場合に、ブロック長が短い場合に比べて、単位時間当りの符号化オーディオ・データのビット数を増やすことができる。それによって、１つの部分帯域当りにより多くのビット数を当てることができ、実効的な聴覚的音質の向上に寄与する部分帯域のオーディオ信号により多くのビット数を割り当てることができる。
【０１１６】
一方、信号対ノイズ比（ＳＮ＿ｒａｔｉｏ（ｓｆｂ））が閾値ＳＮｔｈより高い（＞）場合、信号変換部２３６は、通常通り入力データを入力信号の特性に応じて、信号変換部２３６を用いてそれぞれ長いブロックまたは短いブロックの周波数領域のデータに変換する。その際、例えば、窓長は２０４８であり、長いブロックは１０２４点であり、短いブロックは１２８点であってもよい。信号変換部２３６は、例えばアタック音のような時間領域で急峻な変化を示す信号には短いブロックの周波数領域のデータに変換する。それによって、時間的分解能が向上してプリエコー減少が改善される。
【０１１７】
図１４Ａおよび１４Ｂは、音響符号化部２３２によって実行される、携帯情報端末１０のノイズ電力および信号対ノイズ比に応じて、復号されたビデオ・ストリーム・データを聴覚符号化するための処理のフローチャートの例を示している。図１４Ａおよび１４Ｂのフローチャートは、図６Ａおよび６Ｂのフローチャートの変形形態である。
【０１１８】
図１４Ａを参照すると、ステップ６０２において、ブロック切替制御部２３２は、各部分帯域について、携帯情報端末１０での信号対ノイズ比が閾値より大きいかどうか（ＳＮ＿ｒａｔｉｏ（ｓｆｂ）＞ＳＮｔｈ）を判定する。ステップ６０４において、ブロック切替制御部２３２は、各部分帯域の信号対ノイズ比に応じて、個数閾値ｘ個以上の部分帯域の信号対ノイズ比がノイズ比閾値より大きい場合に、ブロックを強制的に長くなるよう制御する。それ以外の場合は、ブロック切替制御部２３２は、通常の形態で、信号変換部２３６にブロック長の制御を行わせる。
【０１１９】
ステップ６０６〜６１２およびステップ６２０〜６４４は、図６Ａおよび６Ｂのものと同様である。
【０１２０】
上述の実施形態では、オーディオ信号の部分帯域の電力３３２、３３４、３３８、３４０が、音響符号化部２３０、２３２のレベル補正部２４２によって補正された。その代替形態として、音響符号化部２３０、２３２はオーディオ信号の電力を増幅せずに符号化し、携帯情報端末１０が、ユーザの再生操作に従って、受信して復号した符号化オーディオ・データを、周囲雑音のノイズ電力レベルより大きくなるように増幅してもよい。但し、この場合、量子化誤差が増大する傾向がある。
【０１２１】
また、上述の実施形態では、マスキング閾値３０２が、音響符号化部２３０、２３２のマスキング閾値補正部２３９によってマスキング閾値３０６に補正され、さらにマスキング閾値３１０に補正されて、マスキング閾値３１０がマスキング補正部２４４で使用された。その代替形態として、符号化判定部２４０は、補正マスキング閾値３０２との差が或る利得閾値より大きい各部分帯域の電力３５０、５３１を選択し、レベル補正部２４２が、電力３５０、３５１をノイズ電力レベル３０６より大きくなるようレベル補正してもよい。この場合、マスキング補正部２４４は、量子化部２４６での量子化のために、補正マスキング閾値３１０ではなくマスキング閾値３０６を補正し、量子化部２４６が、各部分帯域のレベル補正された電力を、マスキング補正部２４６に従って量子化してもよい。
【０１２２】
このように、実施形態によれば、音響符号化部２３０および２３２は、伝送レートの許容範囲内で、聴覚的音質の維持または向上に寄与する部分帯域の電力を選択し増大させて聴覚符号化するので、携帯情報端末１０でのオーディオ信号の聴覚的再生音質が改善できる。また、実施形態によれば、音響符号化部２３０および２３２は、携帯情報端末１０での周囲雑音に応じて聴覚的な再生音質の確保に有効な情報を選択的に符号化するので、実効的な再生音質の確保に有利な形態で送信情報量を低減することができる。
【０１２３】
ここで挙げた全ての例および条件的表現は、発明者が技術促進に貢献した発明および概念を読者が理解するのを助けるためのものであり、ここで具体的に挙げたそのような例および条件に限定することなく解釈され、また、明細書におけるそのような例の編成は本発明の優劣を示すこととは関係ない、と理解される。本発明の実施形態を詳細に説明したが、本発明の精神および範囲から逸脱することなく、それに対して種々の変更、置換および変形を施すことができる、と理解される。
【０１２４】
以上の実施例を含む実施形態に関して、さらに以下の付記を開示する。
（付記１）情報量が低減するように聴覚特性に基づいてマスキング閾値を利用してオーディオ信号を符号化するオーディオ符号化装置であって、
端末から受信した周囲雑音レベルに応じてマスキング閾値を補正し、その際、前記マスキング閾値との差が或る閾値より大きい入力信号が、補正後の前記マスキング閾値より大きくなるように、前記マスキング閾値および前記入力信号の少なくとも一方の補正を行う第１の処理部と、
補正後の前記マスキング閾値より大きい、前記少なくとも一方の補正が行われた後の前記入力信号の符号化を行う第２の処理部と、
を含むオーディオ符号化装置。
（付記２）前記第１の処理部が前記端末における信号対ノイズ比に応じて前記マスキング閾値を補正することを特徴とする、付記１に記載のオーディオ符号化装置。
（付記３）前記第１の処理部は、さらに前記符号化されたオーディオ信号の前記端末への伝送レートに応じて前記マスキング閾値を補正するものであることを特徴とする、付記１または２に記載のオーディオ符号化装置。
（付記４）前記入力信号は、前記マスキング閾値より大きく、かつ前記マスキング閾値と間の利得差が前記或る閾値より大きいものであることを特徴とする、付記１乃至３のいずれかに記載のオーディオ符号化装置。
（付記５）前記第１の処理部は、前記マスキング閾値より大きい或る入力信号と、前記或る入力信号の部分帯域に隣接する部分帯域の他の入力信号との間の利得差が、或る利得閾値より大きい場合に、前記マスキング閾値を前記或る入力信号より小さくなるように補正するものであることを特徴とする、付記１乃至４のいずれかに記載のオーディオ符号化装置。
（付記６）前記第２の処理部が、さらに、前記端末における信号対ノイズ比に応じて前記第２の処理部によって符号化される前記入力信号のブロックの長さを変更することを特徴とする、付記１乃至５のいずれかに記載のオーディオ符号化装置。
（付記７）前記少なくとも一方の補正が前記入力信号の各部分帯域について行われることを特徴とする、付記１乃至６のいずれかに記載のオーディオ符号化装置。
（付記８）情報量が低減するように聴覚特性に基づいてマスキング閾値を利用してオーディオ信号を符号化する方法であって、
端末から受信した周囲雑音レベルに応じてマスキング閾値を補正し、その際、前記マスキング閾値との差が或る閾値より大きい入力信号が、補正後の前記マスキング閾値より大きくなるように、前記マスキング閾値および前記入力信号の少なくとも一方の補正を行い、
補正後の前記マスキング閾値より大きい、前記少なくとも一方の補正が行われた後の前記入力信号の符号化を行う
処理を情報処理装置が実行する方法。
【符号の説明】
【０１２５】
１０  移動通信端末
２０  情報処理装置
２００  トランスコーダ装置
２１０  情報入力部
２２６  音響復号部
２３０、２３２  音響符号化部
２３２  ブロック切替制御部
２３４  ブロック切替部
２３６  信号変換部
２３８  マスキング閾値
２３９  マスキング閾値補正部
２４０  符号化判定部
２４２  レベル補正部
２４４  マスキング補正部
２４６  量子化部
２５６  画像復号部
２６０  画像符号化部
２７０  多重化部
２８０  ストリーム出力部
【図１】
2015227912.tif 000008
【図２】
2015227912.tif 000009
【図３】
2015227912.tif 000010
【図４】
2015227912.tif 000011
【図５】
2015227912.tif 000012
【図６Ａ】
2015227912.tif 000013
【図６Ｂ】
2015227912.tif 000014
【図７】
2015227912.tif 000015
【図８】
2015227912.tif 000016
【図９】
2015227912.tif 000017
【図１０】
2015227912.tif 000018
【図１１】
2015227912.tif 000019
【図１２】
2015227912.tif 000020
【図１３】
2015227912.tif 000021
【図１４Ａ】
2015227912.tif 000022
【図１４Ｂ】
2015227912.tif 000023