(57)【特許請求の範囲】
【請求項１】
入力デジタル音声信号のラウドネス調整を行うラウドネス調整装置であって、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整部と、
前記ゲイン調整部によるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタ部と、
前記第１フィルタ部の生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整部によるゲイン調整済みの音声データを増幅して出力するブースト処理部と、
前記ブースト処理部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタ部と、
前記第２フィルタ部の生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサ部と、を備えるラウドネス調整装置。
【請求項２】
前記リミッタコンプレッサ部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第３フィルタ部と、
前記第３フィルタ部が生成したフィルタ済み音声データに対し、第１の時間区間を用いた移動二乗平均により第１二乗平均値を算出する第１二乗平均算出部と、
前記第３フィルタ部が生成したフィルタ済み音声データに対し、第１の時間区間より長い第２の時間区間を用いた移動二乗平均により第２二乗平均値を算出する第２二乗平均算出部と、
前記第１及び第２二乗平均値、及びターゲットラウドネス値に基づいて前記ゲイン調整に用いるゲイン調整値を算出する制御部と、
を備える請求項１に記載のラウドネス調整装置。
【請求項３】
前記制御部は、前記第１二乗平均値が前記ターゲットラウドネス値よりも大きく、前記第２二乗平均値が増加傾向にある場合、前記入力デジタル音声信号から抽出された前記音声データを抑圧するように前記ゲイン調整値を調整する抑圧処理を行い、
前記第１二乗平均値が前記ターゲットラウドネス値よりも大きく、前記第２二乗平均値が減少傾向にある場合、前記抑圧処理を中断し、
上記以外の場合には、前記抑圧処理は行わない、
ことを特徴とする請求項２に記載のラウドネス調整装置。
【請求項４】
前記制御部は、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が開放閾値以下である場合、所定時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する開放処理を行い、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が前記開放閾値以下ではない場合、前記開放処理を行わない、
ことを特徴とする請求項３に記載のラウドネス調整装置。
【請求項５】
前記制御部は、
前記抑圧処理の実行中であり、かつ外部からの制御情報の入力及び前記入力デジタル音声信号の音声モードの変更のいずれか一方が生じた場合、前記所定時間よりも短い時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する、
ことを特徴とする請求項４に記載のラウドネス調整装置。
【請求項６】
前記入力デジタル音声信号から前記音声データを抽出するデコーダを更に備え、
前記デコーダは、前記入力デジタル音声信号から付加情報を抽出し、前記付加情報内にゲイン調整を行わないことを指示する情報が含まれている場合、抽出した前記音声データを前記ゲイン調整部に供給せずに他の任意の出力装置に供給し、
それ以外の場合には前記ゲイン調整部に抽出した前記音声データを供給する、
ことを特徴とする請求項４または請求項５に記載のラウドネス調整装置。
【請求項７】
前記デコーダが抽出した前記音声データを解析し、無音状態が一定時間続いた場合に前記制御部に通知を行う無音検出部を更に備え、
前記制御部は、前記抑圧処理の実行中であり、かつ前記無音検出部からの通知を受信した場合、前記所定時間よりも短い時間で前記音声データの開放が完了するように前記ゲイン調整値を調整する、
ことを特徴とする請求項６に記載のラウドネス調整装置。
【請求項８】
請求項１乃至請求項７のいずれか１項に記載のラウドネス調整装置を内蔵した映像／音声処理装置。
【請求項９】
入力デジタル音声信号のラウドネス調整を行うラウドネス調整方法であって、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整ステップと、
前記ゲイン調整ステップにおけるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタステップと、
前記第１フィルタステップにて生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整ステップにおいてゲイン調整済みの音声データを増幅して出力するブースト処理ステップと、
前記ブースト処理ステップにて出力された音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタステップと、
前記第２フィルタステップにて生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理ステップにて増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサステップと、を備えるラウドネス調整方法。
【請求項１０】
入力デジタル音声信号のラウドネス調整をコンピュータに実行させるプログラムであって、
コンピュータに、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整ステップと、
前記ゲイン調整ステップにおけるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタステップと、
前記第１フィルタステップにて生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整ステップにおいてゲイン調整済みの音声データを増幅して出力するブースト処理ステップと、
前記ブースト処理ステップにて出力された音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタステップと、
前記第２フィルタステップにて生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理ステップにて増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサステップと、
を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はラウドネス調整装置、ラウドネス調整方法、及びプログラムに関する。
【背景技術】
【０００２】
地上波デジタルテレビ放送の本格運用が開始されている。デジタルテレビ放送は、コンテンツの作成者が生成した音声をそのまま視聴者の視聴する音声とすることができる。しかしその反面、作成者がダイナミックレンジの広いコンテンツを作成した場合、コンテンツ内での音量差が大きくなる。視聴者が生活雑音の中でこのようなコンテンツをデジタルテレビ等で視聴すると、小さな音声が聞きづらいと感じる場合がある。そこで、視聴者がデジタルテレビ等の音量をリモートコントローラ等で大きくした場合、シーンチェンジ等が生じた場合に急に大きな音声が出力されてしまい、不快に感じる場合がある。また、このような場合にはユーザが主導で音量を再調整する必要が生じる。
【０００３】
このような状況を鑑みて、音声信号の音量に関する世界的な標準規格の策定が進められている。この標準規格は、番組・素材単位での平均ラウドネス値を計算し、ターゲットラウドネス値に合わせた素材を生成・運用することを目的としている。なお、ラウドネスとは、人間が感じる音の大きさ（音の感覚量）である。ラウドネス値とは、デジタル録音レベルからラウドネス測定アルゴリズムに基づいて算出したラウドネスの計算値である。平均ラウドネス値とは、任意の測定区間のラウドネス値である。ターゲットラウドネス値とは、番組の聴取レベルを適切に保つために目標とする番組の平均のラウドネス値である。詳細は、非特許文献１を参照されたい。
【０００４】
デジタルテレビ放送には、スポーツ中継や記者会見中継等の生放送番組があり、これらの番組に対しては基本的に編集処理を行うことが出来ない。そのため、前述の標準規格に規定された音量感の調整処理をリアルタイムで行う装置を提供する必要がある。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−９３９０８号公報
【非特許文献】
【０００６】
【非特許文献１】社団法人  電波産業会、デジタルテレビ放送番組におけるラウドネス運用規定  技術資料（ＡＲＩＢ  ＴＲ−Ｂ３２  １．０版）、平成２３年３月２８日策定
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述したように、生放送番組等を考慮した場合、音量感の調整処理をリアルタイムで行うことが望ましい。しかしながら、前述の標準規格（非特許文献１）に記載された方式では、ラウドネス値が移動二乗平均値であるため、すなわち任意の区間（時間）を待った後に値を算出するため、音量感の調整処理に一定の遅れが生じてしまう。生放送番組等ではない場合（リアルタイム性が求められない場合）、平均ラウドネス値の算出時間を考慮して音声信号を遅延させる手法を用いることができる。しかしながら、生放送番組等である場合（リアルタイム性が求められる場合）、このような音声信号を遅延させる手法を用いることはできない。
【０００８】
すなわち、前述の標準規格（非特許文献１）に記載された一般的な方式では、リアルタイム性を担保しつつ、音量感の調整処理を行うことが困難であるという問題が生じていた。
【０００９】
本発明は、上述した問題点を鑑みてなされたものであり、リアルタイム性を担保しつつ、音量感の調整処理を行うことができるラウドネス調整装置、ラウドネス調整方法、及びプログラムを提供することを主たる目的とする。
【課題を解決するための手段】
【００１０】
本発明にかかるラウドネス調整装置の一態様は、
入力デジタル音声信号のラウドネス調整を行うラウドネス調整装置であって、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整部と、
前記ゲイン調整部によるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタ部と、
前記第１フィルタ部の生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整部によるゲイン調整済みの音声データを増幅して出力するブースト処理部と、
前記ブースト処理部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタ部と、
前記第２フィルタ部の生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサ部と、を備えるものである。
【００１１】
本発明にかかるラウドネス調整方法の一態様は、
入力デジタル音声信号のラウドネス調整を行うラウドネス調整方法であって、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整ステップと、
前記ゲイン調整ステップにおけるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタステップと、
前記第１フィルタステップにて生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整ステップにおいてゲイン調整済みの音声データを増幅して出力するブースト処理ステップと、
前記ブースト処理ステップにて出力された音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタステップと、
前記第２フィルタステップにて生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサステップと、を備えるものである。
【００１２】
本発明にかかるプログラムの一態様は、
入力デジタル音声信号のラウドネス調整をコンピュータに実行させるプログラムであって、
コンピュータに、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整ステップと、
前記ゲイン調整ステップにおけるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタステップと、
前記第１フィルタステップにて生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整ステップにおいてゲイン調整済みの音声データを増幅して出力するブースト処理ステップと、
前記ブースト処理ステップにて出力された音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタステップと、
前記第２フィルタステップにて生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサステップと、
を実行させる、ものである。
【発明の効果】
【００１３】
本発明によれば、リアルタイム性を担保しつつ、音量感の調整処理を行うことができるラウドネス調整装置、ラウドネス調整方法、及びプログラムを提供することができる。
【図面の簡単な説明】
【００１４】
【図１】実施の形態１にかかるラウドネス調整装置１の全体構成を示すブロック図である。
【図２】一般的な抑圧処理（ＡＴＫ処理）を示す概念図である。
【図３】一般的な開放処理（ＲＥＬ処理）を示す概念図である。
【図４】実施の形態１にかかる制御部１９の抑圧処理（ＡＴＫ処理）を示すフローチャートである。
【図５】実施の形態１にかかる制御部１９の開放処理（ＲＥＬ処理）を示すフローチャートである。
【図６】実施の形態１にかかるラウドネス調整装置１のラウドネス調整を示す概念図である。
【図７】実施の形態１にかかる制御部１９によるゲイン調整を示す概念図である。
【図８】実施の形態１にかかる制御部１９によるゲイン調整を示す概念図である。
【図９】実施の形態１にかかる制御部１９による開放処理（ＲＥＬ処理）を示す概念図である。
【図１０】実施の形態２にかかるラウドネス調整装置１の全体構成を示すブロック図である。
【図１１】実施の形態３にかかるラウドネス調整装置１の全体構成を示すブロック図である。
【図１２】本発明にかかるラウドネス調整装置１の全体構成を示すブロック図である。
【発明を実施するための形態】
【００１５】
＜実施の形態１＞
以下、図面を参照して本発明の実施の形態について説明する。図１は、本実施の形態にかかるラウドネス調整装置１の構成を示すブロック図である。ラウドネス調整装置１は、例えばデジタルテレビ受像機に内蔵される装置である。また、ラウドネス調整装置１は、インターネット放送やラジオ放送等の音声を扱う装置（例えばコンピュータ、ラジオ装置、映像／音声処理装置とも記載する。）に内蔵されても良い。
【００１６】
ラウドネス調整装置１は、デコーダ１１と、ゲイン調整部１２と、音声調整部１３と、セレクタ１８と、制御部１９と、移動二乗平均算出部２０と、移動二乗平均算出部２１と、Ｋフィルタ２２と、エンコーダ２３と、を備える。音声調整部１３は、Ｋフィルタ１４と、音声データブースト部１５と、Ｋフィルタ１６と、リミッタコンプレッサ部１７と、を備える。
【００１７】
デコーダ１１には、入力デジタル音声信号が供給される。入力デジタル音声信号は、デジタルテレビ受像機のアンテナ等から入力されたデータである。入力音声データは、例えばＡＥＳ／ＥＢＵフォーマット信号、エンベディッドオーディオ信号等である。デコーダ１１は、入力デジタル音声信号をデコードし、デコード済みの音声データをゲイン調整部１２に供給し、デコードにより得られた付加情報（音声モード情報、切替情報、ラウドネス運用情報等）をセレクタ１８に供給する。
【００１８】
なお、デコーダ１１は、デコードにより得られた付加情報内にラウドネス調整を行わないことを指示する情報が含まれる場合、デコード済みの音声データをエンコーダ２３または任意の処理部にそのまま供給し、ゲイン調整部１２への音声データの供給は行わない。
【００１９】
ゲイン調整部１２は、制御部１９から入力されるゲイン調整値を用いて、デコーダ１１から入力された音声データのゲインを調整する。ゲイン調整部１２は、ゲイン調整済みの音声データをＫフィルタ１４、及び音声データブースト部１５に供給する。
【００２０】
音声調整部１３は、後述する移動二乗平均の算出処理を待つことなく、入力された音声データのブースト処理及びリミッタコンプレッサ処理を行う。当該ブースト処理は、ラウドネス運用基準の周波数特性に適応した処理である。以下、音声調整部１３内の各処理部の処理について説明する。
【００２１】
Ｋフィルタ１４は、入力された音声データに対してＫ特性（ＩＴＵ−Ｒ  ＢＳ．１７７０で規定されている聴感補正フィルタの特性）フィルタリング処理を行い、フィルタリング済みの音声データを音声データブースト部１５に供給する。
【００２２】
音声データブースト部１５は、Ｋフィルタ１４から入力された音声データが予め定められた閾値以下の音声データであるか否かを判定する。当該判定は、例えばデシベル値（ｄＢ）の比較により行う。閾値以下であると判定した場合、音声データブースト部１５は、ゲイン調整部１２から入力された音声データを増幅する（ブースト処理を行う）。音声データブースト部１５は、増幅済みの音声データをＫフィルタ１６及びリミッタコンプレッサ部１７に供給する。なお、閾値より大きいと判定した場合、音声データブースト部１５は、ゲイン調整部１２から入力された音声データをそのままＫフィルタ１６及びリミッタコンプレッサ部１７に供給する。
【００２３】
Ｋフィルタ１６は、音声データブースト部１５から入力された音声データに対してＫ特性（ＩＴＵ−Ｒ  ＢＳ．１７７０で規定されている聴感補正フィルタの特性）フィルタリング処理を行い、フィルタリング済みの音声データをリミッタコンプレッサ部１７に供給する。
【００２４】
リミッタコンプレッサ部１７は、Ｋフィルタ１６から入力された音声データが予め定められた閾値以上の音声データであるか否かを判定する。当該判定は、例えばデシベル値（ｄＢ）の比較により行う。閾値以上であると判定した場合、リミッタコンプレッサ部１７は、音声データブースト部１５から入力された音声データに対してリミッタコンプレッサ処理を行い、処理後の音声データをＫフィルタ２２及びエンコーダ２３に供給する。ここで、リミッタコンプレッサ処理は、一般的な放送音声の処理について行われる任意の音声レベルの適正化処理であれば良い。なお、閾値以上ではないと判定した場合、リミッタコンプレッサ部１７は、音声データブースト部１５から入力された音声データをそのままＫフィルタ２２及びエンコーダ２３に供給する。
【００２５】
エンコーダ２３は、リミッタコンプレッサ部１７またはデコーダ１１から入力された音声データを所定のフォーマットにエンコードし、エンコード済みの音声データを任意の処理部（例えばデジタルテレビ受像機のスピーカ等）に供給する。
【００２６】
Ｋフィルタ２２は、リミッタコンプレッサ部１７から入力された音声データに対してＫ特性（ＩＴＵ−Ｒ  ＢＳ．１７７０で規定されている聴感補正フィルタの特性）フィルタリング処理を行い、フィルタリング済みの音声データを移動二乗平均算出部２０及び移動二乗平均算出部２１に供給する。
【００２７】
移動二乗平均算出部２０及び移動二乗平均算出部２１は、Ｋフィルタ２２から入力された音声データの信号パワーを求めるための二乗平均値を算出する。ここで、移動二乗平均算出部２０と移動二乗平均算出部２１は、異なる時間の移動二乗平均処理を行う。以下の説明では、移動二乗平均算出部２０は、非特許文献１に規定された最小ブロックである１００ｍｓ（０．１秒）単位で移動二乗平均値を算出し、算出値Ｓ（短い時間での移動二乗平均値）を制御部１９に供給する。一方、移動二乗平均算出部２１は、ＥＢＵ  Ｒ−１２８に規定された時間である３ｓ（３秒）単位で移動二乗平均を算出し、算出値Ｌ（長い時間での移動二乗平均値）を制御部１９に供給する。なお、移動二乗平均の算出方法の詳細は、非特許文献１を参照されたい。また、上述の移動二乗平均の単位となる時間（０．１秒、３秒）はあくまで一例であり、これに必ずしも限られない。
【００２８】
セレクタ１８には、外部からの制御情報と、デコーダ１１からの付加情報と、が入力される。制御情報とは、後述する高速な開放処理（ＲＥＬ処理）を指示する指示情報を含むことができる情報である。付加情報には、上述のように音声モードの切替（例えば、ＣＭ（コマーシャル）音声と番組音声の切替）に関する情報が含まれる。セレクタ１８は、両入力のうち制御部１９の動作を変更する情報を適宜選択し、選択した情報を制御部１９に供給する。セレクタ１８の動作詳細は、図５を参照して後述する。
【００２９】
制御部１９には、セレクタ１８の選択した情報と、ターゲットラウドネス値と、移動二乗平均算出部２０の算出値Ｓと、移動二乗平均算出部２１の算出値Ｌと、が入力される。制御部１９は、これらの情報を基にゲイン調整値を算出し、算出したゲイン調整値をゲイン調整部１２に供給する。
【００３０】
ターゲットラウドネス値とは、前述のように出力音量の目的値となる平均ラウドネス値である。制御部１９は、ゲイン調整値に関する抑圧処理（ＡＴＫ（アタック）処理）、または開放処理（ＲＥＬ（リリース）処理）を行うことにより、ゲイン調整部１２における音声データのゲイン調整を制御する。抑圧処理（ＡＴＫ処理）とは、規定値レベル（ｄＢ）以上の音声データが入力された場合には、音声データを抑圧するようなゲイン調整値を定めることを意味する。開放処理（ＲＥＬ処理）とは、規定値レベル（ｄＢ）以下の音声データが入力された場合には、音声データを開放するようなゲイン調整値を定めることを意味する。制御部１９は、設定したゲイン調整値をゲイン調整部１２に供給する。
【００３１】
図２及び図３を参照し、一般的な抑圧処理（ＡＴＫ処理）及び開放処理（ＲＥＬ処理）の概要を説明する。ある音声データが規定値レベル（ｔｈ）である場合、図２に示すように音声データを抑圧する処理（ＡＴＫ処理）を行う。例えば音声データのデシベル値（ｄＢ）が規定レベル（ｔｈ）より大きい場合、音声データのレベルを弱めるようなゲイン調整値を設定する。この時、抑圧量がある一定量以上（通常は約９０％以上）になるまでの時間を抑圧時間（アタック時間）という。
【００３２】
また、図３に示すように、抑圧状態から規定値レベル（ｔｈ）以下の音声データとなった場合、抑圧状態から開放する処理（ＲＥＬ処理）を行う。この時、開放される量がある一定量以上（通常は開放量が約９０％以上）になるまでの時間を開放時間（リリース時間）という。なお、抑圧処理（ＡＴＫ処理）及び開放処理（ＲＥＬ処理）の詳細は、例えば特許文献１を参照されたい。
【００３３】
以下、制御部１９の詳細な処理を図４及び図５を参照して説明する。はじめに、図４を参照して制御部１９による抑圧処理（ＡＴＫ処理）について説明する。制御部１９は、算出値Ｓ（移動二乗平均算出部２０の出力値）と、ターゲットラウドネス値（Ｌｔｈ）と、を比較する（ＳＴ１１）。算出値Ｓがターゲットラウドネス値（Ｌｔｈ）よりも大きくない場合（ＳＴ１１：Ｎｏ）、制御部１９は、処理を行わない。算出値Ｓがターゲットラウドネス値（Ｌｔｈ）よりも大きい場合（ＳＴ１１：Ｙｅｓ）、制御部１９は、抑圧処理（ＡＴＫ処理）の実行中であるか否かを判定する（ＳＴ１２）。
【００３４】
抑圧処理（ＡＴＫ処理）の実行中ではない場合（ＳＴ１２：Ｎｏ）、制御部１９は、算出値Ｌ（移動二乗平均算出部２１の出力値）が増加傾向にあるか否かを判定する（ＳＴ１３）。算出値Ｌが増加傾向にはない場合（ＳＴ１３：Ｎｏ）、制御部１９は、処理を行わない。一方、算出値Ｌが増加傾向にある場合（ＳＴ１３：Ｙｅｓ）、制御部１９は、抑圧処理（ＡＴＫ処理）を実行する（ＳＴ１４）。ゲイン調整値は、所望の抑圧時間と、入力音声データのｄＢ値に応じて調整される
【００３５】
抑圧処理（ＡＴＫ処理）の実行中である場合（ＳＴ１２：Ｙｅｓ）、制御部１９は、算出値Ｌ（移動二乗平均算出部２１の出力値）が増加傾向にあるか否かを判定する（ＳＴ１５）。算出値Ｌが増加傾向にはない場合（ＳＴ１５：Ｎｏ）、制御部１９は、抑圧処理（ＡＴＫ処理）を中断する（ＳＴ１６）。一方、算出値Ｌが増加傾向にある場合（ＳＴ１５：Ｙｅｓ）、制御部１９は、抑圧処理（ＡＴＫ処理）を実行する（ＳＴ１４）。
【００３６】
続いて、抑圧処理（ＡＴＫ処理）からの開放処理（ＲＥＬ）処理の流れを図５を参照して説明する。セレクタ１８は、音声モードが変更された場合に、変更されたことを示す信号を出力する。制御部１９は、セレクタ１８からの出力信号により音声モードが切り替わったか否かを判定する（ＳＴ２１）。音声モードが切り替わっていない場合（ＳＴ２１：Ｎｏ）、制御部１９は、開放用の閾値（開放閾値（ＲＥＬ  ｓｔａｒｔ  ｔｈ）とも記載する。）と、算出値Ｓと、を比較する（ＳＴ２２）。開放閾値は、ターゲットラウドネス値よりも低い値を持つ。
【００３７】
算出値Ｓが開放閾値以下である場合（ＳＴ２２：Ｙｅｓ）、制御部１９は、通常の開放処理となるようにゲイン調整値を設定する（ＳＴ２３）。すなわち、制御部１９は、所定の開放時間（Ｔ１）となるようにゲイン調整値を設定する（ＳＴ２３）。一方、算出値Ｓが開放閾値以下ではない場合（ＳＴ２２：Ｎｏ）、制御部１９は、処理を行わない。
【００３８】
抑圧処理（ＡＴＫ処理）の実行中であって音声モードの変更が生じた場合（ＳＴ２１：Ｙｅｓ）、制御部１９は、高速の開放処理となるようにゲイン調整値を設定する（ＳＴ２４）。すなわち、制御部１９は、所定の開放時間（Ｔ１）よりも短い開放時間（Ｔ２）となるようにゲイン調整値を設定する（ＳＴ２４）。換言すると、制御部１９は、通常の開放処理（ＲＥＬ）よりも開放量が大きくなるようにゲイン調整値を設定する。ゲイン調整値は、所望の開放時間（Ｔ１またはＴ２）と、入力音声データのｄＢ値に応じて調整される。
【００３９】
なお、上述の判定において、高速な開放処理（ＲＥＬ）処理を指示する制御情報がセレクタ１８から入力された場合、制御部１９は、音声モードの変更時と同様の処理（ＳＴ２１：Ｙｅｓ）を行う。
【００４０】
続いて、各処理部の動作と出力音声データとの関係を図６〜図９を参照して説明する。図６は、音声調整部１３（Ｋフィルタ１４、音声データブースト部１５、Ｋフィルタ１６、リミッタコンプレッサ１７）の制御を示すグラフである。
【００４１】
前述のように非特許文献１に記載されたラウドネス値の調整手法では、移動二乗平均を用いるため、リアルタイムでのラウドネス調整が困難である。そのため、図６に示すように、瞬間的に大きな音量の音声データが入力された場合、一般的なラウドネス値の調整手法では大きな音量差（図中の（１））が生じてしまう。これにより、視聴者に不快感を与えてしまう。
【００４２】
一方、本実施の形態にかかるラウドネス調整装置１は、音声調整部１３を備える。そして、当該音声調整部１３は、移動二乗平均値を用いることなく、入力音声データの抑圧処理（リミッタコンプレッサ処理）を行う。そのため、瞬間的に大きな音量の音声データが入力された場合であっても、音量差を抑えることが出来る（図中の（２））。これにより、視聴者にとって違和感の無い、すなわち不快感を与えることの無い音声データの提供を実現することができる。
【００４３】
図７及び図８は、制御部１９のゲイン調整値の調整処理を示すグラフである。図７は、各タイミング（ＴＭ１〜ＴＭ５）における算出値Ｓと各閾値（ターゲットラウドネス値及び開放閾値）、及び算出値Ｌの増減を示す図である。図８は、制御部１９によるゲイン調整値の調整を示す図である。図７及び図８には、同一の入力音声データ、算出値Ｓ、及び算出値Ｌが表示されている。
【００４４】
タイミングＴＭ１において、算出値Ｓは、ターゲットラウドネス値以上であり、かつ算出値Ｌは増加傾向にある（図７ＴＭ１）。そのため、制御部１９は、タイミングＴＭ１から抑圧処理（ＡＴＫ処理）を開始する（図８ＴＭ１）。タイミングＴＭ１〜ＴＭ２の間、制御部１９は、抑圧処理（ＡＴＫ処理）を実行する。
【００４５】
タイミングＴＭ２において、算出値Ｌは減少傾向にある（図７ＴＭ２）。そのため、制御部１９は、タイミングＴＭ２から抑圧処理（ＡＴＫ処理）の実行を保留する（図８ＴＭ２）。タイミングＴＭ２〜ＴＭ３の間、制御部１９は、抑圧処理（ＡＴＫ処理）を行わない。
【００４６】
タイミングＴＭ３において、算出値Ｓは、ターゲットラウドネス値以上であり、かつ算出値Ｌは増加傾向となる（図７ＴＭ３）。そのため、制御部１９は、タイミングＴＭ１から抑圧処理（ＡＴＫ処理）を再開する（図８ＴＭ３）。
【００４７】
タイミングＴＭ４において、算出値Ｓは、開放閾値以下となる（図７ＴＭ４）。そのため、制御部１９は、タイミングＴＭ４から開放処理（ＲＥＬ処理）を開始する（図８ＴＭ４）。
【００４８】
タイミングＴＭ１において、算出値Ｓは、ターゲットラウドネス値以上となり、かつ算出値Ｌは増加傾向にある（図７ＴＭ５）。のため、制御部１９は、タイミングＴＭ５から抑圧処理（ＡＴＫ処理）を開始する（図８ＴＭ５）。以上のように、制御部１９は、算出値Ｓ及び算出値Ｌを用いてゲイン調整値の調整を行う。
【００４９】
図９は、制御部１９による開放処理を示す図である。図９は、一般的な開放処理（ターゲットラウドネス値との比較）を用いて生成した音声データと、開放閾値を用いた開放処理を用いて生成した音声データと、を示すグラフである。図示するように、一般的な開放処理では、音声データがターゲットラウドネス値を下回った場合、即座に開放処理を行う。そのため、ターゲットラウドネス値付近での抑圧、及び開放が交互に繰り返される。これにより、元の音声データに対して振幅の変化が揺らいだ状態になる。換言すると、元の音声データの抑揚を正確に表した音声データを生成することができない。
【００５０】
一方、ターゲットラウドネス値よりも小さい値である開放閾値を用いた開放処理を用いて生成した音声データは、ターゲットラウドネス値付近において抑圧と開放が交互に繰り返される事象が無くなる。これにより、元の音声データに対して振幅の変化が揺らいだ状態を回避することができる。よって、図９に示すように、元の音声データの抑揚を正確に表した音声データを生成することができる。
【００５１】
続いて、本実施の形態にかかるラウドネス調整装置１の効果について改めて説明する。上述のように、音声調整部１３は、移動二乗平均の算出値を用いることなく、特性フィルタ処理に従ったブースト処理及びリミッタコンプレッサ処理を行う。これらの処理は、移動二乗平均の算出とは異なり、即時的に処理が可能である。当該構成により、極端に大きな音声データを抑圧することができ、かつ、極端に大きな音声データに後続する通常の音量の音声データを不要に抑圧することが無くなる。すなわち、リアルタイム性を担保しつつ、音量感の調整を適切に行うことができる。換言すると、リアルタイム性を保ちつつ、音質を一定に保つ（違和感の無い音声を生成する）ラウドネス調整を実現することが可能となる。
【００５２】
さらに、制御部１９は、図４に示すように、算出値Ｌの増加時にのみ抑圧処理（ＡＴＫ処理）を行い、算出値Ｌの減少時には抑圧処理（ＡＴＫ処理）の保留を行うことにより、過度の抑圧処理（ＡＴＫ処理）を行わない。これにより、抑圧が行われすぎた音声データを出力することを回避できる。
【００５３】
さらにまた、抑圧処理（ＡＴＫ処理）の実行中から開放処理（ＲＥＬ処理）に移行する際にも、音声データのレベルがターゲットラウドネス値よりも小さい値である開放閾値以下となった場合に開放処理を行う。これにより、不要な開放処理を行うことなく、生成する音声データの抑揚を基の音声データの抑揚と近づけることができる。
【００５４】
制御部１９は、抑圧処理（ＡＴＫ処理）の実行中に音声モードの変更や外部からの指示が生じた場合に、通常の開放処理（ＲＥＬ処理）よりも開放時間が短くなるようにゲイン調整値を設定する（高速開放処理を実行する）。デジタルテレビに関する音声信号は、番組コンテンツとコマーシャルが混在し、両者の音量感が全く異なる場合がある。一般的なラウドネス調整の手法では、番組コンテンツからコマーシャルに切り替わる場合、番組コンテンツにかかる音声データの解析（移動二乗平均の算出）に基づく抑圧処理（ＡＴＫ処理）が行われてしまう恐れがある。すなわち、番組コンテンツに適した抑圧処理（ＡＴＫ処理）をコマーシャルに対しても行ってしまう。しかし、本実施形態にかかるラウドネス調整装置では、上述の高速開放処理を行うことにより、抑圧量を即座にキャンセルすることができ、コンテンツに応じたラウドネス調整を瞬時に行うことが可能になる。
【００５５】
さらにまた、デコーダ１１は、デコードにより得られた付加情報内にラウドネス調整を行わないことを指示する情報が含まれる場合、デコード済みの音声データをエンコーダ２３または任意の処理部にそのまま供給する。デコーダ１１に入力される入力デジタル音声信号は、生放送等のような番組にかかるものの他に、予め非特許文献１に規定のラウドネス調整が行われたコンテンツにかかるものがある。後者の場合、既に制作者の意図通りのラウドネス調整が行われているため、改めてラウドネス調整を行う必要がない。デコーダ１１が後者の信号の場合にラウドネス調整を行うことなくそのまま出力を行うため、制作者の意図を変えることなく音声データを供給することができる。
【００５６】
＜実施の形態２＞
本実施の形態にかかるラウドネス調整装置１は、多チャンネル（サラウンドまたはそれ以上のチャンネル数）の音声データを処理できることを特徴とする。本実施の形態にかかるラウドネス調整装置１について、実施の形態１と異なる点を以下に説明する。
【００５７】
図１０は、本実施の形態にかかるラウドネス調整装置１の構成を示すブロック図である。ラウドネス調整装置１には、多チャンネル（サラウンドまたはそれ以上のチャンネル数）に関する入力デジタル音声信号が入力される。
【００５８】
ラウドネス調整装置１は、入力デジタル音声信号内の各チャンネルに応じた数の音声調整部１３（１３−１〜１３―ｎ、ｎは２以上の整数であり以下の記載でも同様である。）、移動二乗平均算出部２０（２０−１〜２０−ｎ）、移動二乗平均算出部２１（２１−１〜２１−ｎ）、Ｋフィルタ２２（２２−１〜２２−ｎ）、ゲイン乗算部２４（２４−１〜２４−ｎ）、二乗平均積算部２５−１、及び二乗平均積算部２５−２を備える。
【００５９】
デコーダ１１は、入力デジタル音声信号をデコードし、各チャネルに対応する音声データを音声調整部１３−１〜１３−ｎに供給する。実施の形態１と同様の符号を付した処理部の処理は、チャネル毎に実施の形態１と同様の処理を行うため、その詳細な説明は省略する。
【００６０】
ゲイン乗算部２４−１は、算出値Ｓ及び算出値Ｌに対して、処理対象のチャネルに対応付けられたゲインを乗算する。そして、ゲイン乗算部２４−１は、算出値Ｓの乗算結果を二乗平均積算部２５−１に供給し、算出値Ｌの乗算結果を二乗平均積算部２５−２に供給する。
【００６１】
二乗平均積算部２５−１は、各チャネルの算出値Ｓ（最小ブロックである１００ｍｓ（０．１秒）単位で移動二乗平均値）を積算（累積加算）する。二乗平均積算部２５−１は、積算結果を制御部１９に供給する。
【００６２】
二乗平均積算部２５−２は、各チャネルの算出値Ｌ（（３秒）単位で移動二乗平均）を積算（累積加算）する。二乗平均積算部２５−１は、積算結果を制御部１９に供給する。
【００６３】
制御部１９は、二乗平均積算部２５−１及び二乗平均積算部２５−２から入力された積算値を基に、各ゲイン調整部１２−１〜１２−ｎに供給するゲイン調整部を算出し、供給する。
【００６４】
続いて、本実施の形態にかかるラウドネス調整装置１の効果について説明する。ラウドネス調整装置１は、上述の構成により、多チャンネルに関する入力デジタル音声信号が入力された場合であってもリアルタイム性を担保しつつ、音量感の調整処理を行うことができる。
【００６５】
＜実施の形態３＞
本実施の形態にかかるラウドネス調整装置１は、音声データの無音判定を行う処理部を有することを特徴とする。本実施の形態にかかるラウドネス調整装置１について、実施の形態１と異なる点を以下に説明する。
【００６６】
図１１は、本実施の形態にかかるラウドネス調整装置１の構成を示すブロック図である。ラウドネス調整装置１は、実施の形態１の構成（図１）に加えて無音検出部２６を更に備える。
【００６７】
デコーダ１１は、デコード済みの音声データをゲイン調整部１２と、無音検出部２６と、に適宜供給する。無音検出部２６は、音声データのレベル変動、すなわちデシベル（ｄＢ）変動の有無を検知し、レベル変動が一定時間生じない場合、あるいは、素材切替時に音声データをミュート（無音状態）とする時に生成される音声データが全て"０"となる場合、あるいは特定の音声データとなる状態が一定時間経過する場合、のいずれかを検出した際に制御部１９に通知を行う。
【００６８】
制御部１９は、抑圧処理（ＡＴＫ処理）を行っている際に無音検出部２６からの通知を受け付けた場合、上述の高速開放処理（ＲＥＬ処理、図５ＳＴ２４）を実行する。
【００６９】
続いて、本実施の形態にかかるラウドネス調整装置１の効果について説明する。一般的に、テレビ番組コンテンツからコマーシャルに切り替わる場合、一定時間の無音区間が存在する。ここで、入力音声デジタル信号内に抽出した付加情報内に、コンテンツの切り替わりにかかる情報が含まれない場合がある。本実施の形態にかかるラウドネス調整装置１は、無音検出部２６により無音区間を検出している。そして、制御部１９は、付加情報に加えて無音区間の有無に応じて高速開放処理（ＲＥＬ処理）を実行する。これにより、コンテンツが切り替わる前に行われていた抑圧処理（ＡＴＫ処理）を即座にキャンセルすることができ、コンテンツに応じたラウドネス調整を瞬時に行うことが可能になる。
【００７０】
ここで、改めて本発明の概略を図１２を参照して説明する。図１２は、ラウドネス調整装置１の概略を示したブロック図である。ラウドネス調整装置１は、ゲイン調整部１２と、音声調整部１３と、を備える。音声調整部１３は、Ｋフィルタ１４と、音声データブースト部１５と、Ｋフィルタ１６と、リミッタコンプレッサ部１７と、を備える。
【００７１】
ゲイン調整部１２には、音声データが入力される。ここで、音声データとは、例えばＡＥＳ／ＥＢＵフォーマット信号、エンベディッドオーディオ信号等をデコードすることにより得られるデータである。ゲイン調整部１２は、所定のゲイン調整値を用いて入力された音声データのゲインを調整し、ゲイン調整済みの音声データをＫフィルタ１４及び音声データブースト部１５に供給する。
【００７２】
Ｋフィルタ１４は、入力された音声データに対してＫ特性（フィルタリング処理を行い、フィルタリング済みの音声データを音声データブースト部１５に供給する。
【００７３】
音声データブースト部１５は、Ｋフィルタ１４から入力された音声データが予め定められた閾値以下の音声データであるか否かを判定する。閾値以下であると判定した場合、音声データブースト部１５は、ゲイン調整部１２から入力された音声データを増幅する（ブースト処理を行う）。音声データブースト部１５は、増幅済みの音声データをＫフィルタ１６及びリミッタコンプレッサ部１７に供給する。
【００７４】
Ｋフィルタ１６は、音声データブースト部１５から入力された音声データに対してＫ特性フィルタリング処理を行い、フィルタリング済みの音声データをリミッタコンプレッサ部１７に供給する。
【００７５】
リミッタコンプレッサ部１７は、Ｋフィルタ１６から入力された音声データが予め定められた閾値以上の音声データであるか否かを判定する。閾値以上であると判定した場合、リミッタコンプレッサ部１７は、音声データブースト部１５から入力された音声データに対してリミッタコンプレッサ処理を行い、処理後の音声データを出力する。
【００７６】
上記のとおり、ラウドネス調整装置１は、移動二乗平均の算出値を用いることなく、特性フィルタ処理に従ったブースト処理及びリミッタコンプレッサ処理を行う。これらの処理は、移動二乗平均の算出とは異なり、即時的に処理が可能である。当該構成により、例えば図６に示すように極端に大きな音声データを抑圧することができ、かつ、極端に大きな音声データに後続する通常の音量の音声データを不要に抑圧することが無くなる。すなわち、リアルタイム性を担保しつつ、音量感の調整を適切に行うことができる。
【００７７】
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。
【００７８】
上述のデコーダ１１、ゲイン調整部１２、音声調整部１３、制御部１９、移動二乗平均算出部２０、移動二乗平均算出部２１、Ｋフィルタ２２、エンコーダ２３の各処理は、任意のコンピュータ内で動作するプログラムとして実現することが可能である。
【００７９】
プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer
readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【００８０】
上記実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【００８１】
＜付記１＞
入力デジタル音声信号のラウドネス調整を行うラウドネス調整装置であって、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整部と、
前記ゲイン調整部によるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタ部と、
前記第１フィルタ部の生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整部によるゲイン調整済みの音声データを増幅して出力するブースト処理部と、
前記ブースト処理部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタ部と、
前記第２フィルタ部の生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサ部と、を備えるラウドネス調整装置。
【００８２】
＜付記２＞
前記リミッタコンプレッサ部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第３フィルタ部と、
前記第３フィルタ部が生成したフィルタ済み音声データに対し、第１の時間区間を用いた移動二乗平均により第１二乗平均値を算出する第１二乗平均算出部と、
前記第３フィルタ部が生成したフィルタ済み音声データに対し、第１の時間区間より長い第２の時間区間を用いた移動二乗平均により第２二乗平均値を算出する第２二乗平均算出部と、
前記第１及び第２二乗平均値、及びターゲットラウドネス値に基づいて前記ゲイン調整に用いるゲイン調整値を算出する制御部と、
を備える付記１に記載のラウドネス調整装置。
【００８３】
＜付記３＞
前記リミッタコンプレッサ部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第３フィルタ部と、
前記第３フィルタ部が生成したフィルタ済み音声データに対し、第１の時間区間を用いた移動二乗平均により第１二乗平均値を算出する第１二乗平均算出部と、
前記第３フィルタ部が生成したフィルタ済み音声データに対し、第１の時間区間より長い第２の時間区間を用いた移動二乗平均により第２二乗平均値を算出する第２二乗平均算出部と、
前記第１及び第２二乗平均値、及びターゲットラウドネス値に基づいて前記ゲイン調整に用いるゲイン調整値を算出する制御部と、
を備える付記１に記載のラウドネス調整装置。
【００８４】
＜付記４＞
前記制御部は、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が開放閾値以下である場合、所定時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する開放処理を行い、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が前記開放閾値以下ではない場合、前記開放処理を行わない、
ことを特徴とする付記３に記載のラウドネス調整装置。
【００８５】
＜付記５＞
前記制御部は、
前記抑圧処理の実行中であり、かつ外部からの制御情報の入力及び前記入力デジタル音声信号の音声モードの変更のいずれか一方が生じた場合、前記所定時間よりも短い時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する、
ことを特徴とする付記３または付記４に記載のラウドネス調整装置。
【００８６】
＜付記６＞
前記入力デジタル音声信号から前記音声データを抽出するデコーダを更に備え、
前記デコーダは、前記入力デジタル音声信号から付加情報を抽出し、前記付加情報内にゲイン調整を行わないことを指示する情報が含まれている場合、抽出した前記音声データを前記ゲイン調整部に供給せずに他の任意の出力装置に供給し、
それ以外の場合には前記ゲイン調整部に抽出した前記音声データを供給する、
ことを特徴とする付記１乃至付記５のいずれか１項に記載のラウドネス調整装置。
【００８７】
＜付記７＞
前記デコーダが抽出した前記音声データを解析し、無音状態が一定時間続いた場合に前記制御部に通知を行う無音検出部を更に備え、
前記制御部は、前記抑圧処理の実行中であり、かつ前記無音検出部からの通知を受信した場合、前記所定時間よりも短い時間で前記音声データの開放が完了するように前記ゲイン調整値を調整する、
ことを特徴とする付記６に記載のラウドネス調整装置。
【００８８】
＜付記８＞
入力デジタル音声信号のラウドネス調整を行うラウドネス調整装置であって、
前記入力デジタル音声信号から第１の音声データ及び第２の音声データを抽出するエンコーダと、
前記エンコーダが抽出した前記第１の音声データに対し、第１ゲイン調整値を用いてゲイン調整を行う第１ゲイン調整部と、
前記エンコーダが抽出した前記第２の音声データに対し、第２ゲイン調整値を用いてゲイン調整を行う第２ゲイン調整部と、
前記第１ゲイン調整部によるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタ部と、
前記第２ゲイン調整部によるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタ部と、
前記第１フィルタ部の生成したフィルタ済み音声データが第１閾値以下の場合、前記第１ゲイン調整部によるゲイン調整済みの音声データを増幅して出力する第１ブースト処理部と、
前記第２フィルタ部の生成したフィルタ済み音声データが前記第１閾値以下の場合、前記第２ゲイン調整部によるゲイン調整済みの音声データを増幅して出力する第２ブースト処理部と、
前記第１ブースト処理部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第３フィルタ部と、
前記第２ブースト処理部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第４フィルタ部と、
前記第３フィルタ部の生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力する第１リミッタコンプレッサ部と、
前記第４フィルタ部の生成したフィルタ済み音声データが前記第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力する第２リミッタコンプレッサ部と、
を備えるラウドネス調整装置。
【００８９】
＜付記９＞
前記第１リミッタコンプレッサ部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第５フィルタ部と、
前記第２リミッタコンプレッサ部が出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第６フィルタ部と、
前記第５フィルタ部が処理したフィルタ済み音声データに対し、第１の時間区間を用いた移動二乗平均により算出した第１二乗平均値を算出する第１二乗平均算出部と、
前記第５フィルタ部が処理したフィルタ済み音声データに対し、第１の時間区間より長い第２の時間区間を用いた移動二乗平均により算出した第２二乗平均値を算出する第２二乗平均算出部と、
前記第６フィルタ部が処理したフィルタ済み音声データに対し、前記第１の時間区間を用いた移動二乗平均により算出した第３二乗平均値を算出する第３二乗平均算出部と、
前記第６フィルタ部が処理したフィルタ済み音声データに対し、前記第２の時間区間を用いた移動二乗平均により算出した第４二乗平均値を算出する第４二乗平均算出部と、
前記第１及び第２二乗平均値、及びターゲットラウドネス値に基づいて前記ゲイン調整値を算出する制御部と、
前記第１及び第３二乗平均値の積算値、前記第２及び第４二乗平均値の積算値、及びターゲットラウドネス値に基づいて、前記第１ゲイン調整値及び前記第２ゲイン調整値を算出する制御部と、を備えることを特徴とする付記８に記載のラウドネス調整装置。
【００９０】
＜付記１０＞
付記１乃至付記９のいずれか１項に記載のラウドネス調整装置を内蔵した映像／音声処理装置。
【００９１】
＜付記１１＞
入力デジタル音声信号のラウドネス調整を行うラウドネス調整方法であって、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整ステップと、
前記ゲイン調整ステップにおけるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタステップと、
前記第１フィルタステップにて生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整ステップにおいてゲイン調整済みの音声データを増幅して出力するブースト処理ステップと、
前記ブースト処理ステップにて出力された音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタステップと、
前記第２フィルタステップにて生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサステップと、を備えるラウドネス調整方法。
【００９２】
＜付記１２＞
前記リミッタコンプレッサステップに手出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第３フィルタステップと、
前記第３フィルタステップにて生成したフィルタ済み音声データに対し、第１の時間区間を用いた移動二乗平均により第１二乗平均値を算出する第１二乗平均算出ステップと、
前記第３フィルタステップにて生成したフィルタ済み音声データに対し、第１の時間区間より長い第２の時間区間を用いた移動二乗平均により第２二乗平均値を算出する第２二乗平均算出ステップと、
前記第１及び第２二乗平均値、及びターゲットラウドネス値に基づいて前記ゲイン調整に用いるゲイン調整値を算出する制御ステップと、
を備える付記１１に記載のラウドネス調整方法。
【００９３】
＜付記１３＞
前記制御ステップでは、前記第１二乗平均値が前記ターゲットラウドネス値よりも大きく、前記第２二乗平均値が増加傾向にある場合、前記入力デジタル音声信号から抽出された前記音声データを抑圧するように前記ゲイン調整値を調整する抑圧処理を行い、
前記第１二乗平均値が前記ターゲットラウドネス値よりも大きく、前記第２二乗平均値が減少傾向にある場合、前記抑圧処理を中断し、
上記以外の場合には、前記抑圧処理は行わない、
ことを特徴とする付記１２に記載のラウドネス調整方法。
【００９４】
＜付記１４＞
前記制御ステップでは、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が開放閾値以下である場合、所定時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する開放処理を行い、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が前記開放閾値以下ではない場合、前記開放処理を行わない、
ことを特徴とする付記１３に記載のラウドネス調整方法。
【００９５】
＜付記１５＞
前記制御ステップでは、
前記抑圧処理の実行中であり、かつ外部からの制御情報の入力及び前記入力デジタル音声信号の音声モードの変更のいずれか一方が生じた場合、前記所定時間よりも短い時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する、
ことを特徴とする付記１３または付記１４に記載のラウドネス調整方法。
【００９６】
＜付記１６＞
入力デジタル音声信号のラウドネス調整をコンピュータに実行させるプログラムであって、
コンピュータに、
前記入力デジタル音声信号から抽出された音声データに対し、ゲイン調整を行うゲイン調整ステップと、
前記ゲイン調整ステップにおけるゲイン調整済みの音声データを特性フィルタ処理したフィルタ済み音声データを生成する第１フィルタステップと、
前記第１フィルタステップにて生成したフィルタ済み音声データが第１閾値以下の場合、前記ゲイン調整ステップにおいてゲイン調整済みの音声データを増幅して出力するブースト処理ステップと、
前記ブースト処理ステップにて出力された音声データを特性フィルタ処理したフィルタ済み音声データを生成する第２フィルタステップと、
前記第２フィルタステップにて生成したフィルタ済み音声データが第２閾値以上の場合、前記ブースト処理部が増幅した音声データに対してリミッタコンプレッサ処理を行って出力するリミッタコンプレッサステップと、
を実行させるプログラム。
【００９７】
＜付記１７＞
前記リミッタコンプレッサステップに手出力した音声データを特性フィルタ処理したフィルタ済み音声データを生成する第３フィルタステップと、
前記第３フィルタステップにて生成したフィルタ済み音声データに対し、第１の時間区間を用いた移動二乗平均により第１二乗平均値を算出する第１二乗平均算出ステップと、
前記第３フィルタステップにて生成したフィルタ済み音声データに対し、第１の時間区間より長い第２の時間区間を用いた移動二乗平均により第２二乗平均値を算出する第２二乗平均算出ステップと、
前記第１及び第２二乗平均値、及びターゲットラウドネス値に基づいて前記ゲイン調整に用いるゲイン調整値を算出する制御ステップと、
を備える付記１６に記載のプログラム。
【００９８】
＜付記１８＞
前記制御ステップでは、前記第１二乗平均値が前記ターゲットラウドネス値よりも大きく、前記第２二乗平均値が増加傾向にある場合、前記入力デジタル音声信号から抽出された前記音声データを抑圧するように前記ゲイン調整値を調整する抑圧処理を行い、
前記第１二乗平均値が前記ターゲットラウドネス値よりも大きく、前記第２二乗平均値が減少傾向にある場合、前記抑圧処理を中断し、
上記以外の場合には、前記抑圧処理は行わない、
ことを特徴とする付記１７に記載のプログラム。
【００９９】
＜付記１９＞
前記制御ステップでは、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が開放閾値以下である場合、所定時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する開放処理を行い、
外部からの制御情報の入力が無く、前記入力デジタル音声信号の音声モードの変更がなく、前記抑圧処理の実行中であり、かつ前記第１二乗平均値が前記開放閾値以下ではない場合、前記開放処理を行わない、
ことを特徴とする付記１８に記載のプログラム。
【０１００】
＜付記２０＞
前記制御ステップでは、
前記抑圧処理の実行中であり、かつ外部からの制御情報の入力及び前記入力デジタル音声信号の音声モードの変更のいずれか一方が生じた場合、前記所定時間よりも短い時間で前記入力デジタル音声信号から抽出された前記音声データの開放が完了するように前記ゲイン調整値を調整する、
ことを特徴とする付記１８または付記１９に記載のプログラム。
【符号の説明】
【０１０１】
１  ラウドネス調整装置
１１  デコーダ
１２  ゲイン調整部
１３  音声調整部
１４  Ｋフィルタ
１５  音声データブースト部
１６  Ｋフィルタ
１７  リミッタコンプレッサ部
１８  セレクタ
１９  制御部
２０  移動二乗平均算出部
２１  移動二乗平均算出部
２２  Ｋフィルタ
２３  エンコーダ
２４  ゲイン乗算部
２５  二乗平均積算部
２６  無音検出部 
【図１】
0005527827.tif 000002
【図２】
0005527827.tif 000003
【図３】
0005527827.tif 000004
【図４】
0005527827.tif 000005
【図５】
0005527827.tif 000006
【図６】
0005527827.tif 000007
【図７】
0005527827.tif 000008
【図８】
0005527827.tif 000009
【図９】
0005527827.tif 000010
【図１０】
0005527827.tif 000011
【図１１】
0005527827.tif 000012
【図１２】
0005527827.tif 000013