(57)【要約】【課題】ミキシングバランスの状態を聴感に対応させて表示することができるミキシングバランス表示装置及びミキシングバランス表示プログラムを提供すること。【解決手段】ミキシングバランス表示装置１０は、ＮＲ信号のレベルを検出するＮＲレベル検出部１３と、ＢＧＭ信号のレベルを検出するＢＧＭレベル検出部１４と、ＮＲ信号とＢＧＭ信号とのレベル差を算出するレベル差算出部１５と、レベル差に対して所定の重み付けを行って重み付きレベル差を算出する重み付きレベル差算出部１６と、重み付きレベル差の値の平均値を算出する平均レベル差算出部１７と、ＮＲ信号のレベルの平均値を算出するＮＲ平均値算出部１８と、ミキシングバランスの状態を示す表示値を決定する表示値決定部１９と、表示制御信号を生成する表示制御信号生成部２０と、ミキシングバランスの状態を表示する表示部２１とを備える。【選択図】図１
2008124892.tif 000002
【特許請求の範囲】
【請求項１】
第１及び第２の音信号のレベルを所定時間間隔のフレーム毎に検出するレベル検出手段と、前記第１の音信号と前記第２の音信号とのレベル差を算出するレベル差算出手段と、前記レベル差に対して前記第１の音信号のレベルに応じた重み付けを行って重み付きレベル差を算出する重み付きレベル差算出手段と、現フレームから過去のｎ個のフレームまでの間において前記重み付きレベル差の値の大きいものから順にｍ個の値の平均値を算出する平均レベル差算出手段と、現フレームから過去の所定数のフレームまでの間における前記第１の音信号のレベル平均値を算出する第１音信号平均値算出手段と、前記平均レベル差算出手段及び前記第１音信号平均値算出手段の算出結果に基づいて前記第１の音信号と前記第２の音信号とのミキシングバランスの状態を示す表示値を決定する表示値決定手段と、前記第１の音信号のレベルに基づいて前記表示値決定手段の出力を制御する表示制御信号を生成する表示制御信号生成手段と、前記表示制御信号に基づいて前記ミキシングバランスの状態を表示するミキシングバランス表示手段とを備えたことを特徴とするミキシングバランス表示装置。
【請求項２】
前記重み付きレベル差算出手段は、予め定められた第１及び第２の閾値に応じて前記レベル差に対して重み付けを行うものであり、前記第１及び前記第２の音信号のレベルをそれぞれＮ及びＢ、前記第１及び前記第２の閾値をそれぞれＴ１及びＴ２とした場合、Ｎ＜Ｔ１のときは所定レベルの信号を出力し、Ｎ＞Ｔ２のときはレベルがＢ−Ｎの信号を出力し、Ｔ１≦Ｎ≦Ｔ２のときは予め定められた単調な関数に基づいて算出したレベルの信号を出力することを特徴とする請求項１に記載のミキシングバランス表示装置。
【請求項３】
前記表示値決定手段は、前記第１の音信号のレベル平均値を予め定められた閾値ＬＴと比較して前記表示値を決定するものであり、前記第１の音信号のレベル平均値をＮＡとした場合、ＮＡ≧ＬＴのときは前記平均レベル差算出手段が算出した値を前記表示値とし、ＮＡ＜ＬＴのときは前記平均レベル差算出手段が算出した値を所定値に変換し、前記所定値を前記表示値とすることを特徴とする請求項１又は請求項２に記載のミキシングバランス表示装置。
【請求項４】
前記表示制御信号生成手段は、前記第１の音信号のレベルと予め定められた閾値ＬＧとを前記フレーム毎に比較して前記表示制御信号を生成するものであり、前記第１の音信号のレベルをＮとした場合、Ｎ≧ＬＧとなったフレームのうち現フレームに最も近いフレームから所定個数分のフレームにおける前記表示値決定手段からの出力信号を前記ミキシングバランス表示手段に入力させるよう制御するとともに、前記所定個数を超えたときは前記表示値決定手段の出力信号を遮断するよう制御する表示制御信号を生成することを特徴とする請求項１から請求項３までのいずれか１項に記載のミキシングバランス表示装置。
【請求項５】
前記ミキシングバランス表示手段は、前記表示制御信号に基づき、前記表示値決定手段が決定した前記表示値を所定数の段階に分類して表示することを特徴とする請求項１から請求項４までのいずれか１項に記載のミキシングバランス表示装置。
【請求項６】
第１の音信号と第２の音信号とのミキシングバランスの状態を表示するミキシングバランス表示装置としてコンピュータを機能させるためのミキシングバランス表示プログラムであって、
前記コンピュータを、前記第１及び前記第２の音信号のレベルを所定時間間隔のフレーム毎に検出するレベル検出手段と、前記第１の音信号と前記第２の音信号とのレベル差を算出するレベル差算出手段と、前記レベル差に対して前記第１の音信号のレベルに応じた重み付けを行って重み付きレベル差を算出する重み付きレベル差算出手段と、現フレームから過去のｎ個のフレームまでの間において前記重み付きレベル差の値の大きいものから順にｍ個の値の平均値を算出する平均レベル差算出手段と、現フレームから過去の所定数のフレームまでの間における前記第１の音信号のレベル平均値を算出する第１音信号平均値算出手段と、前記平均レベル差算出手段及び前記第１音信号平均値算出手段の算出結果に基づいて前記第１の音信号と前記第２の音信号とのミキシングバランスの状態を示す表示値を決定する表示値決定手段と、前記第１の音信号のレベルに基づいて前記表示値決定手段の出力を制御する表示制御信号を生成する表示制御信号生成手段と、前記表示制御信号に基づいて前記ミキシングバランスの状態を表示するミキシングバランス表示手段として機能させることを特徴とするミキシングバランス表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばテレビやラジオ等の番組制作時にナレーション信号とバックグラウンドミュージック信号とのミキシングバランスの状態を表示するミキシングバランス表示装置及びミキシングバランス表示プログラムに関する。
【背景技術】
【０００２】
従来、例えばナレーション（以下「ＮＲ」と表す。）信号とバックグラウンドミュージック（以下「ＢＧＭ」と表す。）信号とのミキシングを行う際に、訓練された音声調整者が実際に音を聞きながら音声調整卓を操作し、ＮＲ信号とＢＧＭ信号とのミキシングバランスが最適になるよう手動で調整していた。この手法では、熟練した音声調整者が必要となるという課題があり、この課題の解決を図るものとして、例えば特許文献１に示された音声レベルバランス指示装置がある。
【０００３】
特許文献１に示されたものは、ＮＲ用及びＢＧＭ用の聴覚モデルに基づいた聴覚マスキング曲線を求める手段と、ＮＲの聴覚マスキング曲線とＢＧＭの聴覚マスキング曲線とのレベル差を求める手段と、両者のレベル差からミキシングバランスを制御する制御信号を生成する手段とを備え、ＮＲ信号とＢＧＭ信号とのミキシングバランスの状態を指示することができるようになっている。
【０００４】
【特許文献１】特開平１０−３０８９９９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に示された従来のものは、熟練した音声調整者が必要となるという課題を解決できるものではあったが、ＮＲ信号の立ち上がり部及び立ち下がり部においてＢＧＭ信号がＮＲ信号よりも大き過ぎるという不適切な表示が頻繁に起こるので、ミキシングバランスの状態の表示値と聴感とが一致し難いものであり、その改善が望まれていた。
【０００６】
本発明は、前述のような観点に基づいてなされたものであり、ミキシングバランスの状態を聴感に対応させて表示することができるミキシングバランス表示装置及びミキシングバランス表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の発明者は、ミキシングバランスの表示に係る実験及び検討を重ねた結果、ミキシングの対象である２つの信号のレベル差に適切な信号処理を施して新しい評価値を算出し、当該評価値を用いてミキシングバランスが適正か否かを判断する手法を見出し、前述の従来の課題を解決した。
【０００８】
すなわち、本発明のミキシングバランス表示装置は、第１及び第２の音信号のレベルを所定時間間隔のフレーム毎に検出するレベル検出手段と、前記第１の音信号と前記第２の音信号とのレベル差を算出するレベル差算出手段と、前記レベル差に対して前記第１の音信号のレベルに応じた重み付けを行って重み付きレベル差を算出する重み付きレベル差算出手段と、現フレームから過去のｎ個のフレームまでの間において前記重み付きレベル差の値の大きいものから順にｍ個の値の平均値を算出する平均レベル差算出手段と、現フレームから過去の所定数のフレームまでの間における前記第１の音信号のレベル平均値を算出する第１音信号平均値算出手段と、前記平均レベル差算出手段及び前記第１音信号平均値算出手段の算出結果に基づいて前記第１の音信号と前記第２の音信号とのミキシングバランスの状態を示す表示値を決定する表示値決定手段と、前記第１の音信号のレベルに基づいて前記表示値決定手段の出力を制御する表示制御信号を生成する表示制御信号生成手段と、前記表示制御信号に基づいて前記ミキシングバランスの状態を表示するミキシングバランス表示手段とを備えた構成を有している。
【０００９】
この構成により、本発明のミキシングバランス表示装置は、重み付きレベル差算出手段は、第１の音信号と第２の音信号とのレベル差に対して第１の音信号のレベルに応じた重み付けを行って重み付きレベル差を算出し、第１音信号平均値算出手段、表示値決定手段及び表示制御信号生成手段は、重み付きレベル差を示す信号に対して聴感に対応させるための信号処理を施すので、ミキシングバランスの状態を聴感に対応させて表示することができる。
【００１０】
また、本発明のミキシングバランス表示装置は、前記重み付きレベル差算出手段は、予め定められた第１及び第２の閾値に応じて前記レベル差に対して重み付けを行うものであり、前記第１及び前記第２の音信号のレベルをそれぞれＮ及びＢ、前記第１及び前記第２の閾値をそれぞれＴ１及びＴ２とした場合、Ｎ＜Ｔ１のときは所定レベルの信号を出力し、Ｎ＞Ｔ２のときはレベルがＢ−Ｎの信号を出力し、Ｔ１≦Ｎ≦Ｔ２のときは予め定められた単調な関数に基づいて算出したレベルの信号を出力する構成を有している。
【００１１】
この構成により、本発明のミキシングバランス表示装置は、重み付きレベル差算出手段が出力する信号のレベルに基づいて、第１の音信号と第２の音信号とのミキシングバランスが適切か否かを判断することができる。
【００１２】
さらに、本発明のミキシングバランス表示装置は、前記表示値決定手段は、前記第１の音信号のレベル平均値を予め定められた閾値ＬＴと比較して前記表示値を決定するものであり、前記第１の音信号のレベル平均値をＮＡとした場合、ＮＡ≧ＬＴのときは前記平均レベル差算出手段が算出した値を前記表示値とし、ＮＡ＜ＬＴのときは前記平均レベル差算出手段が算出した値を所定値に変換し、前記所定値を前記表示値とする構成を有している。
【００１３】
この構成により、本発明のミキシングバランス表示装置は、第１の信号が存在しない場合において、又は第１の音信号の立ち上がり部及び立ち下がり部において、不適切な表示を防止することができるので、ミキシングバランスの状態を聴感に対応させて表示することができる。
【００１４】
さらに、本発明のミキシングバランス表示装置は、前記表示制御信号生成手段は、前記第１の音信号のレベルと予め定められた閾値ＬＧとを前記フレーム毎に比較して前記表示制御信号を生成するものであり、前記第１の音信号のレベルをＮとした場合、Ｎ≧ＬＧとなったフレームのうち現フレームに最も近いフレームから所定個数分のフレームにおける前記表示値決定手段からの出力信号を前記ミキシングバランス表示手段に入力させるよう制御するとともに、前記所定個数を超えたときは前記表示値決定手段の出力信号を遮断するよう制御する表示制御信号を生成する構成を有している。
【００１５】
この構成により、本発明のミキシングバランス表示装置は、第１の音信号が長時間に渡り存在せず第２の音信号のみが存在している場合において第２の音信号のレベルは適正であるという不適切な表示を防止することができるので、ミキシングバランスの状態を聴感に対応させて表示することができる。
【００１６】
さらに、本発明のミキシングバランス表示装置は、前記ミキシングバランス表示手段は、前記表示制御信号に基づき、前記表示値決定手段が決定した前記表示値を所定数の段階に分類して表示する構成を有している。
【００１７】
この構成により、本発明のミキシングバランス表示装置は、表示値を所定数の段階に分類して表示することによって、ミキシングバランスの状態を聴感に対応させて視認性よく表示することができる。
【００１８】
本発明のミキシングバランス表示プログラムは、第１の音信号と第２の音信号とのミキシングバランスの状態を表示するミキシングバランス表示装置としてコンピュータを機能させるためのミキシングバランス表示プログラムであって、前記コンピュータを、前記第１及び前記第２の音信号のレベルを所定時間間隔のフレーム毎に検出するレベル検出手段と、前記第１の音信号と前記第２の音信号とのレベル差を算出するレベル差算出手段と、前記レベル差に対して前記第１の音信号のレベルに応じた重み付けを行って重み付きレベル差を算出する重み付きレベル差算出手段と、現フレームから過去のｎ個のフレームまでの間において前記重み付きレベル差の値の大きいものから順にｍ個の値の平均値を算出する平均レベル差算出手段と、現フレームから過去の所定数のフレームまでの間における前記第１の音信号のレベル平均値を算出する第１音信号平均値算出手段と、前記平均レベル差算出手段及び前記第１音信号平均値算出手段の算出結果に基づいて前記第１の音信号と前記第２の音信号とのミキシングバランスの状態を示す表示値を決定する表示値決定手段と、前記第１の音信号のレベルに基づいて前記表示値決定手段の出力を制御する表示制御信号を生成する表示制御信号生成手段と、前記表示制御信号に基づいて前記ミキシングバランスの状態を表示するミキシングバランス表示手段として機能させる構成を有している。
【００１９】
この構成により、本発明のミキシングバランス表示プログラムは、重み付きレベル差算出手段、第１音信号平均値算出手段、表示値決定手段及び表示制御信号生成手段としてコンピュータを機能させ、重み付きレベル差算出手段は、第１の音信号と第２の音信号とのレベル差に対して第１の音信号のレベルに応じた重み付けを行って重み付きレベル差を算出し、第１音信号平均値算出手段、表示値決定手段及び表示制御信号生成手段は、重み付きレベル差を示す信号に対して聴感に対応させるための信号処理を施すので、ミキシングバランスの状態を聴感に対応させて表示することができる。
【発明の効果】
【００２０】
本発明は、ミキシングバランスの状態を聴感に対応させて表示することができるという効果を有するミキシングバランス表示装置及びミキシングバランス表示プログラムを提供することができるものである。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の実施の形態について図面を用いて説明する。なお、本発明のミキシングバランス表示装置を、テレビやラジオ等の番組制作時にＮＲ信号とＢＧＭ信号とのミキシングバランスの状態を表示するミキシングバランス表示装置に適用した例を挙げて説明する。ここで、本実施の形態におけるミキシングバランス表示装置は、番組制作時にＮＲ信号とＢＧＭ信号とのミキシングバランスを監視し、例えばＢＧＭ信号のレベルが大き過ぎてＮＲが聞きにくい場合には「ＢＧＭ信号のレベルが大き過ぎる」、逆に、ＢＧＭ信号のレベルが小さ過ぎて音響効果が得られない場合には「ＢＧＭ信号のレベルが小さ過ぎる」というような注意又は警告を音声ミキサに対して行うものである。なお、本実施の形態におけるＮＲ信号及びＢＧＭ信号は、特許請求の範囲に記載の第１及び第２の音信号にそれぞれ対応するものである。
【００２２】
まず、本発明に係るミキシングバランス表示装置の一実施の形態における構成について説明する。
【００２３】
図１に示すように、本実施の形態におけるミキシングバランス表示装置１０は、ＮＲ信号をＡＤ変換するＡＤ変換部１１と、ＢＧＭ信号をＡＤ変換するＡＤ変換部１２と、ＮＲ信号のレベルを検出するＮＲレベル検出部１３と、ＢＧＭ信号のレベルを検出するＢＧＭレベル検出部１４と、ＮＲ信号とＢＧＭ信号とのレベル差を算出するレベル差算出部１５と、レベル差に対して所定の重み付けを行って重み付きレベル差を算出する重み付きレベル差算出部１６と、重み付きレベル差の値の平均値を算出する平均レベル差算出部１７と、ＮＲ信号のレベルの平均値を算出するＮＲ平均値算出部１８と、ミキシングバランスの状態を示す表示値を決定する表示値決定部１９と、表示値決定部１９の出力を制御するための表示制御信号を生成する表示制御信号生成部２０と、例えばＶＵ（Ｖｏｌｕｍｅ  Ｕｎｉｔ）メータのようなレベルメータを有し、ミキシングバランスの状態を表示する表示部２１とを備えている。
【００２４】
ＡＤ変換部１１及び１２は、それぞれ、ＮＲ信号及びＢＧＭ信号を入力し、アナログ値からデジタル値に変換するようになっている。例えば、ＡＤ変換部１１及び１２は、それぞれ、サンプリング周波数が４８ｋＨｚ、量子化精度が１６ビットのデジタル信号にアナログ信号を変換するようになっている。尤も、入力されるＮＲ信号及びＢＧＭ信号がデジタル信号である場合は、ＡＤ変換部１１及び１２は不要である。なお、本実施の形態におけるサンプリング周波数は、４８ｋＨｚとして以下説明する。
【００２５】
ＮＲレベル検出部１３は、ＮＲ信号のラウドネスレベル（ｐｈｏｎ）を一定の短時間ΔＴ毎に検出するようになっている。ここで、一定の短時間ΔＴは、サンプリング周波数４８ｋＨｚで例えば１０２４サンプルを取得する場合は、約２１．３ｍｓ（＝１０２４／４８０００ｓ）となる。なお、ＮＲレベル検出部１３は、サンプリング周波数４８ｋＨｚで１０２４サンプルを取得するものとし、以下の説明において、１０２４サンプルの取得単位をフレームという。
【００２６】
ＢＧＭレベル検出部１４は、ＮＲレベル検出部１３と同様に、ＢＧＭ信号のラウドネスレベルをフレーム毎に検出するようになっている。
【００２７】
なお、ＮＲレベル検出部１３及びＢＧＭレベル検出部１４は、本発明のレベル検出手段に対応している。また、ＮＲレベル検出部１３及びＢＧＭレベル検出部１４が各信号のラウドネスレベルを検出する方法としては、例えばＩＳＯ５６２に規格化されたものがある。また、ラウドネスレベルに代えて各信号の平均エネルギレベル（ｄＢ）を算出する構成としてもよく、この場合は、例えばサンプル値の２乗平均値を算出し、ｄＢ変換すればよい。
【００２８】
以下の説明においては、適正なレベルでミキシングされたＮＲ信号のラウドネスレベル（ｐｈｏｎ）を０で正規化した相対レベルを用いて表すことにする。また、ＢＧＭ信号のレベルもＮＲ信号と同一のレベルで正規化した相対レベルを用いて表すことにする。一例を挙げれば、適正なレベルでミキシングされたＮＲ信号のラウドネスレベルが７０（ｐｈｏｎ）の場合では、ＮＲ信号又はＢＧＭ信号のラウドネスレベルが、７０（ｐｈｏｎ）のときは当該信号の相対レベルは０であり、７５（ｐｈｏｎ）のときは当該信号の相対レベルは＋５である。
【００２９】
また、正規化後の相対レベルが例えば−５０程度以下の場合は、ＮＲ信号及びＢＧＭ信号のラウドネスレベルは聴感的に非常に小さいものであるので、−５０以下の値を全て−５０で置き換えても実用上は十分である。なお、０で正規化しないで後述する処理を行うこともできるが、その場合には各閾値の値が相対的に変わってくる。以下、正規化されたＮＲ信号の相対レベルを「Ｎ」、正規化されたＢＧＭ信号の相対レベルを「Ｂ」と表す。
【００３０】
レベル差算出部１５は、ＮＲレベル検出部１３及びＢＧＭレベル検出部１４から、それぞれ、ＮＲ信号の相対レベルＮ及びＢＧＭ信号の相対レベルＢの情報をフレーム毎に入力し、両者の相対レベルの差（以下「相対レベル差」という。）Ｂ−Ｎを算出するようになっている。なお、レベル差算出部１５は、本発明のレベル差算出手段に対応している。
重み付きレベル差算出部１６は、レベル差算出部１５が算出した相対レベル差Ｂ−Ｎに対し、ＮＲ信号の相対レベルＮの大きさに応じた重み付けを行って重み付きレベル差を算出するようになっている。なお、重み付きレベル差算出部１６は、図示しないメモリを備えており、このメモリは、算出された重み付きレベル差の各値を逐次記憶するようになっている。
【００３１】
具体的には、重み付きレベル差算出部１６は、例えば図２に示すようなレベル重み付け関数によって相対レベル差Ｂ−Ｎに対する重み付けを行う。図２において、重み付きレベル差算出部１６は、Ｎ＜−３０のときは相対レベルが−５０の信号を出力し、Ｎ＞−１５のときは相対レベルがＢ−Ｎである信号を出力し、−３０≦Ｎ≦−１５のときは相対レベルがＮ（Ｂ−Ｎ＋５０）／１５＋２（Ｂ−Ｎ）＋５０である信号を出力するようになっている。
【００３２】
なお、図２においては、座標（−３０，−５０）と（−１５，Ｂ−Ｎ）との２点を直線で結んだ例で説明したが、本発明はこれに限定されるものではなく、この２点を単調な関数で結んだものであれば実用上は十分である。また、重み付きレベル差算出部１６は、本発明の重み付きレベル差算出手段に対応している。また、図２において、Ｎ＝−３０及びＮ＝−１５は、特許請求の範囲に記載の第１の閾値Ｔ１及び第２の閾値Ｔ２にそれぞれ対応するものである。
【００３３】
次に、レベル差算出部１５及び重み付きレベル差算出部１６が出力する信号について図３の模式図を用いて説明する。レベル差算出部１５に入力されるＮＲ信号及びＢＧＭ信号の各相対レベルが図３（ａ）に示すような関係にある場合、レベル差算出部１５は、まず、図３（ｂ）に示すような相対レベル差Ｂ−Ｎを算出する。次に、重み付きレベル差算出部１６は、算出した相対レベル差Ｂ−Ｎの値に、図２に例示した重み付け関数で重み付けすることにより、図３（ｂ）に示すような重み付き相対レベル差Ｂ−Ｎを算出する。
【００３４】
図３（ｂ）に示すように、相対レベル差Ｂ−Ｎは、ＢＧＭ信号の相対レベルＢが大きいほど、又はＮＲ信号の相対レベルＮが小さいほど大きくなる。ＮＲ信号の相対レベルＮが小さい場合、すなわち、ＮＲ信号がほとんど存在しない場合には、「ＢＧＭ信号が大き過ぎる」という表示を行う必要はないので、図２に例示したような重み関数で重み付けして、図３（ｃ）に示すように、ＮＲ信号の相対レベルＮが小さい場合には重み付き相対レベル差Ｂ−Ｎの値を小さくしている。すなわち、重み付けを行う前の相対レベル差Ｂ−Ｎの値（図３（ｂ））の大小では「ＢＧＭ信号が大き過ぎる」か否かの判断を行うことはできないが、重み付き相対レベル差Ｂ−Ｎの値（図３（ｃ））の大小を用いれば「ＢＧＭ信号が大き過ぎる」か否かの判断を行うことができることになる。
【００３５】
平均レベル差算出部１７は、現フレームから過去のｎ個のフレームまでの間において、重み付きレベル差Ｂ−Ｎの値の大きいものから順にｍ個の値の平均値（以下「パーセント時間率平均レベル差」という。）を算出するようになっている。ここで、ｎ及びｍは正の整数であり、ｎ≧ｍの関係がある。なお、平均レベル差算出部１７は、本発明の平均レベル差算出手段に対応している。
【００３６】
ｎを大きくするほど、長時間の無音区間を除くことができるので、表示部２１が有するレベルメータの指示値の変化を緩やかにすることができるが、ｎが大き過ぎると無音区間が長時間続いても０でない指示値を長時間指示するので、適当な長さに設定する必要がある。また、ｍを大きくするほど、レベルメータの指示値の変化を緩やかにすることができるが、指示値の立ち上がり時間が遅くなるので、ｍをある程度小さくして、指示値の立ち上がり時間を短くする必要がある。実用上は、例えばｎ＝１００、ｍ＝４として、４％に相当するパーセント時間率平均レベル差を求める構成とするのが好ましい。
【００３７】
ｎ及びｍを適切に設定して算出したパーセント時間率平均レベル差を用いることにより、ＮＲ信号とＢＧＭ信号とのラウドネスの差に関し、聴感とよく合った判断ができるようになる。なお、パーセント時間率平均レベル差に関しては、特許第３４６２３９０号公報に詳述されている。
【００３８】
なお、発明者の検討結果によれば、ステレオ信号の場合には音素材の種類に関わらず、ＮＲ信号とＢＧＭ信号とのミキシングバランスが適正であれば、平均レベル差算出部１７の出力信号の相対レベルは概ね０となる。
【００３９】
次に、ＮＲ信号が存在するフレームのみにおいて、パーセント時間率平均レベル差が大きいほど「ＢＧＭ信号が大き過ぎる」、逆に、小さいほど「ＢＧＭ信号が小さ過ぎる（ＢＧＭの効果がない）」という表示を行おうとする場合、ＮＲ信号が存在しないフレームでは「ＢＧＭ信号が大き過ぎる」あるいは、「ＢＧＭ信号が小さ過ぎる」と表示されるよりも「ＢＧＭ信号のレベルが適正である」と表示される方が聴感的に好ましい。そこで、本実施の形態におけるＮＲ平均値算出部１８及び表示値決定部１９は以下のように構成されている。
【００４０】
すなわち、ＮＲ平均値算出部１８は、現フレームから過去の所定数（例えば数個〜数十個）のフレームまでの間におけるＮＲ信号のレベル平均値ＮＡを算出するようになっている。なお、ＮＲ平均値算出部１８は、本発明の第１音信号平均値算出手段に対応している。
【００４１】
また、表示値決定部１９は、ＮＲ信号のレベル平均値ＮＡを予め定められた閾値ＬＴと比較してミキシングバランスの状態を示す表示値を決定するようになっている。具体的には、表示値決定部１９は、ＮＲ信号のレベル平均値ＮＡが、ＮＡ≧ＬＴのときは平均レベル差算出部１７の出力値を表示値とし、ＮＡ＜ＬＴのときは平均レベル差算出部１７の出力値をミキシングバランスが適正な場合の値に変換して表示値とするようになっている。なお、表示値決定部１９は、本発明の表示値決定手段に対応している。
【００４２】
ここで、ＮＲ信号の相対レベルＮではなく平均値ＮＡを用いることにより、パーセント時間率平均レベル差の立ち上がり部及び立ち下がり部における不適切な判定を防ぐことができる。なお、不適切な判定をより確実に防ぐためには、ＮＲ平均値算出部１８が平均する個数を平均レベル差算出部１７における個数ｍより大きくした方がよい。なお、ミキシングバランスが適正な場合のパーセント時間率平均レベル差の値は心理実験を行って測定する必要があるが、ステレオ信号の場合には、当該値の相対レベルとしては概ね０程度である。
【００４３】
実用的には、ＮＲ平均値算出部１８は、平均値ＮＡを算出するためのフレーム個数を例えば１４個（２１．３ｍｓ×１４＝２９８ｍｓ）としてＮＲ信号の相対レベルの平均値を算出するものであればよい。その結果、平均値ＮＡの値は、ＶＵメータの立ち上がり時間（約３００ｍｓ）とほぼ等しい立ち上がり時間で変動することとなる。また、閾値ＬＴとしては相対レベルで−１５程度の値にすればよい。この場合、表示値決定部１９は、平均値ＮＡが約−１５以上の場合には平均レベル差算出部１７の出力値をそのまま出力し、平均値ＮＡが約−１５未満の場合には平均レベル差算出部１７の出力値をミキシングバランスが適正な場合の値（例えば相対レベル＝０）に変換することとなる。したがって、平均値ＮＡが約−１５未満の場合、すなわち、ＮＲ信号が存在しないとみなせるフレームでは、「ＢＧＭ信号のレベルは適正である」と表示され、聴感と対応がとれた表示が得られることとなる。
【００４４】
ここで、表示値決定部１９が決定した出力値を表示部２１で常時表示したのでは、ＮＲ信号が長時間（例えば５ｓ）に渡り存在しない場合においても、表示部２１は「ＢＧＭ信号のレベルは適正である」と表示することになる。そこで、ＮＲ信号が長時間に渡って存在しない場合には表示そのものを消した方が聴感的によく合うので、本実施の形態における表示制御信号生成部２０は、以下のように構成されている。
【００４５】
すなわち、表示制御信号生成部２０は、ＮＲ信号の相対レベルＮと予め定められた閾値ＬＧとをフレーム毎に比較し、ＮＲ信号の相対レベルＮが、Ｎ≧ＬＧとなったフレームのうち現フレームに最も近いフレームから所定個数分のフレームにおける表示値決定部１９からの出力信号を表示部２１に入力させるよう制御するとともに、所定個数を超えたときは表示値決定部１９からの出力信号を遮断して表示を行わないよう制御する表示制御信号を生成するようになっている。なお、表示制御信号生成部２０は、本発明の表示制御信号生成手段に対応している。
【００４６】
実用的には、閾値ＬＧとしては相対レベルで−１５程度であればよい。また、ＮＲ信号の相対レベルが瞬間的に低下した場合、例えば数１００ｍｓ程度低下した場合の影響を除くためには、前述の所定個数としては５０〜１００個程度が適当である。なお、所定個数を１００個とした場合の時間は、２１．３ｍｓ×１００＝２．１３ｓである。
【００４７】
表示部２１は、例えばレベルメータを備え、表示制御信号生成部２０が生成した表示制御信号に基づいて、表示値決定部１９の出力値を表示するようになっている。この表示部２１は、本発明のミキシングバランス表示手段に対応している。
【００４８】
なお、表示部２１は、表示値決定部１９の出力値を例えば数〜十数段階に分類して表示するものであってもよい。具体的には、ＢＧＭ信号のレベルを例えば７段階に分類して表示部２１に表示させる場合は、表示値決定部１９の出力の値を大きい方から順に７段階に分類し、ＢＧＭ信号のレベルが「非常に大き過ぎる」、「大き過ぎる」、「やや大きい」、「適正」、「やや小さい」、「小さ過ぎる」、「非常に小さ過ぎる」等と表示させればよい。ＢＧＭ信号のレベルを前述のように７段階に分類するための６つの境界値は心理実験を行って求める必要があるが、６つの境界値の相対レベルとしては、概ね、６、４、２、−３、−６、−９程度が好ましい。この構成により、ミキシングバランスの状態を聴感に対応させて視認性よく表示することができる。
【００４９】
次に、本実施の形態におけるミキシングバランス表示装置１０の動作について図４を用いて説明する。
【００５０】
まず、ＡＤ変換部１１によって、ＮＲ信号が入力されてＡＤ変換され（ステップＳ１１）、ＡＤ変換部１２によって、ＢＧＭ信号が入力されてＡＤ変換される（ステップＳ１２）。なお、ステップＳ１１と１２とを前述の順序とは逆に処理してもよく、また、同時に処理するものとしてもよい。
【００５１】
次いで、ＮＲレベル検出部１３によって、ＮＲ信号のレベルがフレーム毎に検出され（ステップＳ１３）、ＢＧＭレベル検出部１４によって、ＢＧＭ信号のレベルがフレーム毎に検出される（ステップＳ１４）。なお、ステップＳ１３と１４とを前述の順序とは逆に処理してもよく、また、同時に処理するものとしてもよい。
【００５２】
さらに、レベル差算出部１５によって、ＮＲ信号とＢＧＭ信号とのレベル差が算出された後、重み付きレベル差算出部１６によって、レベル差算出部１５が算出したレベル差に対して、例えば図２に示す重み付け関数に基づいて重み付けが行われることにより重み付きレベル差が算出される（ステップＳ１５）。
【００５３】
続いて、平均レベル差算出部１７によって、パーセント時間率平均レベル差の算出、すなわち、現フレームから過去のｎ個のフレームまでの間において、重み付きレベル差Ｂ−Ｎの値の大きいものから順にｍ個の値の平均値が算出される（ステップＳ１６）。
【００５４】
次いで、ＮＲ平均値算出部１８によって、現フレームから過去の所定数（例えば数個〜数十個）のフレームまでの間におけるＮＲ信号のレベル平均値ＮＡが算出される（ステップＳ１７）。
【００５５】
さらに、表示値決定部１９によって、ＮＲ信号のレベル平均値ＮＡが、ＮＡ≧ＬＴのときは平均レベル差算出部１７の出力値が表示値とされ、ＮＡ＜ＬＴのときは平均レベル差算出部１７の出力値が、ミキシングバランスが適正な場合の値に変換されて表示値とされる（ステップＳ１８）。
【００５６】
引き続き、表示制御信号生成部２０によって、ＮＲ信号の相対レベルＮと予め定められた閾値ＬＧとがフレーム毎に比較され、表示値決定部１９の出力を制御するための表示制御信号が生成される（ステップＳ１９）。具体的には、表示制御信号生成部２０は、ＮＲ信号の相対レベルＮが、Ｎ≧ＬＧとなったフレームのうち現フレームに最も近いフレームから所定個数分のフレームにおける表示値決定部１９からの出力信号を表示部２１に入力させるよう制御するとともに、所定個数を超えたときは表示値決定部１９からの出力信号を遮断して表示を行わないよう制御する表示制御信号を生成する。
【００５７】
そして、表示部２１によって、表示制御信号生成部２０が生成した表示制御信号に基づいて、ＮＲ信号とＢＧＭ信号とのミキシングバランスの状態が表示される（ステップＳ２０）。
【００５８】
なお、図４に示された各ステップの処理をプログラミングし、当該プログラムによってコンピュータを動作させることにより、当該プログラムは、コンピュータをミキシングバランス表示装置１０として機能させることができる。この場合、コンピュータは、図１に示された構成を有することとなる。
【００５９】
以上のように、本実施の形態におけるミキシングバランス表示装置１０によれば、重み付きレベル差算出部１６は、ＮＲ信号とＢＧＭ信号とのレベル差に対して所定の重み付けを行って重み付きレベル差を算出し、平均レベル差算出部１７は、パーセント時間率平均レベル差を算出し、ＮＲ平均値算出部１８は、現フレームから過去の所定数のフレームまでの間におけるＮＲ信号のレベル平均値ＮＡを算出し、表示値決定部１９は、ＮＲ信号のレベル平均値ＮＡを閾値ＬＴと比較してミキシングバランスの状態を示す表示値を決定し、表示制御信号生成部２０は、表示値決定部１９の出力を制御するための表示制御信号を生成し、表示部２１は、表示制御信号に基づいてミキシングバランスの状態を表示する構成としたので、ミキシングバランスの状態を聴感に対応させて表示することができる。
【００６０】
したがって、本実施の形態におけるミキシングバランス表示装置１０は、例えばＢＧＭ信号のレベルがＮＲ信号のレベルよりも大き過ぎる場合はＢＧＭ信号のレベルを下げるよう音声ミキサに促すことができ、ＢＧＭ信号のレベルが大き過ぎてＮＲが聴き取りにくいといった現象を未然に防ぐことができるので、番組の音響効果の向上を支援することができる。また、本実施の形態におけるミキシングバランス表示装置１０は、例えばＢＧＭ信号のレベルがＮＲ信号のレベルよりも小さ過ぎて音響効果が得られない場合はＢＧＭ信号のレベルを上げるよう音声ミキサに促すことができるので、番組の音響効果の向上を支援することができる。
【００６１】
なお、前述の実施の形態において、第１の音信号及び第２の音信号をそれぞれＮＲ信号及びＢＧＭ信号とし、ＮＲ信号とＢＧＭ信号とをミキシングする際のミキシングバランスを表示する例を挙げて説明したが、本発明はこれに限定されるものではない。例えば、複数の音楽信号のミキシングを対象とするものや、台詞の音声信号と効果音の信号とのミキシングを対象とするもの等に適用しても同様な効果が得られる。
【００６２】
また、前述の実施の形態において示した各閾値の値や、各閾値に対する大小の判断手法は一例であり、前述のものに限定されない。
【産業上の利用可能性】
【００６３】
以上のように、本発明に係るミキシングバランス表示装置及びミキシングバランス表示プログラムは、ミキシングバランスの状態を聴感に対応させて表示することができるという効果を有し、テレビやラジオ等の番組制作時にナレーション信号とバックグラウンドミュージック信号とのミキシングバランスの状態を表示するミキシングバランス表示装置及びミキシングバランス表示プログラム等として有用である。
【図面の簡単な説明】
【００６４】
【図１】本発明に係るミキシングバランス表示装置の一実施の形態における構成を示すブロック図
【図２】本発明に係るミキシングバランス表示装置の一実施の形態における重み付け関数の一例を示す図
【図３】本発明に係るミキシングバランス表示装置の一実施の形態において、ＮＲ信号及びＢＧＭ信号の相対レベル差を説明するための模式図  （ａ）入力されるＮＲ信号及びＢＧＭ信号の相対レベルの一例を示す図  （ｂ）相対レベル差Ｂ−Ｎの一例を示す図  （ｃ）重み付き相対レベル差Ｂ−Ｎの一例を示す図
【図４】本発明に係るミキシングバランス表示装置の一実施の形態における動作を示すフロー図
【符号の説明】
【００６５】
１０  ミキシングバランス表示装置
１１、１２  ＡＤ変換部
１３  ＮＲレベル検出部（レベル検出手段）
１４  ＢＧＭレベル検出部（レベル検出手段）
１５  レベル差算出部（レベル差算出手段）
１６  重み付きレベル差算出部（重み付きレベル差算出手段）
１７  平均レベル差算出部（平均レベル差算出手段）
１８  ＮＲ平均値算出部（第１音信号平均値算出手段）
１９  表示値決定部（表示値決定手段）
２０  表示制御信号生成部（表示制御信号生成手段）
２１  表示部（ミキシングバランス表示手段）
【図１】
2008124892.tif 000003
【図２】
2008124892.tif 000004
【図３】
2008124892.tif 000005
【図４】
2008124892.tif 000006