(57)【特許請求の範囲】
【請求項１】
周波数軸上に設けた複数の符号化パラメータに応じて圧縮符号化されたオーディオ信号が入力され、この入力されたオーディオ信号を表示するオーディオ信号表示装置であって、
上記圧縮符号化されたオーディオ信号の上記周波数軸上に設けた複数の符号化パラメータを取り出すパラメータ取出手段と、
このパラメータ取出手段により取り出された周波数軸上の複数の符号化パラメータを時間軸上に展開することにより表示用のデータを出力する表示用データ配列手段と、
上記表示用データ配列手段からのデータを視覚的に表示する表示部と
を有して成ることを特徴とするオーディオ信号表示装置。
【請求項２】
上記表示用データ配列手段は、
上記各符号化パラメータの周波数軸と時間軸との座標を計算する座標計算部と、
上記座標計算部からのデータに基づいて上記表示用のデータを作成する表示用データ作成部と
を有することを特徴とする請求項１記載のオーディオ信号表示装置。
【請求項３】
上記表示用のデータの任意の位置を設定し入力する位置指定手段を設け、
上記表示部は、上記位置指定手段にて指定された部分の符号化パラメータを用いて形成される表示用のデータを表示することを特徴とする請求項１記載のオーディオ信号表示装置。
【請求項４】
上記表示部は、上記オーディオ信号を出力するオーディオ信号出力手段を有して成るオーディオ信号編集装置における上記オーディオ信号出力手段からのオーディオ信号を編集するための編集用データとして上記表示用のデータを表示することを特徴とする請求項３記載のオーディオ信号表示装置。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、周波数軸上に複数の符号化パラメータを有するオーディオ信号が入力され、このオーディオ信号を表示するオーディオ信号表示装置に関する。
【０００２】
【従来の技術】
一般に、デジタルオーディオ信号をその編集する際に、図５に示すように、編集する箇所におけるオーディオ信号の時間軸での信号振幅幅を波形表示し、この波形３０に基づいて編集作業を行っている。また、編集するオーディオ信号が圧縮符号化処理されていないパルス符号変調された（ＰＣＭ：ｐｕｌｓｅ−ｃｏｄｅ  ｍｏｄｕｌａｔｉｏｎ  ）オーディオ信号であれば、図５に示したような波形３０が得られる。
【０００３】
この図５において、縦軸が上記信号振幅を示す軸であり、また横軸が上記時間軸である。また、ユーザが指定した箇所の位置を所定位置からの経過時間で示したものが選択位置表示部３１に、画面３５で表示される一画面当たりが示す時間が一画面時間表示部３２に、また、編集しているオーディオ信号全体が占める時間が全体時間表示部３３にそれぞれ表示されている。また、スクロールバー３４を動かすことで、画面３５に表示されている波形３０の前後の位置でのオーディオ信号の振幅波形が画面３５に表示される。
【０００４】
ユーザは、画面３５に表示された波形３０にてオーディオ信号の時間軸における振幅の分布を確認しながら、このオーディオ信号の編集を行うことができる。
【０００５】
【発明が解決しようとする課題】
ところで、編集するオーディオ信号がデータ量を削減するために圧縮符号化処理された符号化信号である場合、図５に示したような波形３０が表示された画面３５を得るには、上記符号化信号を復号化処理する必要がある。
【０００６】
ここで、オーディオ信号を圧縮符号化するアルゴリズムの一例として、帯域分割符号化方式による符号化アルゴリズムを説明する。なお、帯域分割符号化方式として従来より様々な方式が提案されているが、ここでは、その代表的なものとして蓄積用動画像符号化の検討組織（ｍｏｖｉｎｇ  ｐｉｃｔｕｒｅ  ｉｍａｇｅ  ｃｏｄｉｎｇ  ｅｘｐｅｒｔｓ  ｇｒｏｕｐ  ：ＭＰＥＧ）にて標準化されているＭＰＥＧ／オーディオのレイヤ１について説明する。
【０００７】
先ず、１６ビット直線量子化された入力ＰＣＭオーディオ信号が、帯域分析フィルタで３２帯域のサブバンド信号に分割される。各帯域１２サブバンド信号毎にスケールファクタが計算される。このスケールファクタは、各帯域１２サンプルの絶対値の最大値に応じて、与えられたスケールファクタの表からこの最大値より大きい最小の値として求められる。
【０００８】
また、一方入力ＰＣＭオーディオ信号を高速フーリエ変換処理した結果を用いてマスキングが計算され、各帯域に対してのビット割り当てが決定される。続いて、このビット割り当てに従ってサブバンド信号が量子化される。以上のようにして、符号化信号が得られる。
【０００９】
上記符号化信号を復号化処理するには、先ず量子化されたサブバンド信号を逆量子化処理し、得られるサブバンド信号を帯域合成フィルタにて帯域合成し、ＰＣＭオーディオ信号が復元される。
【００１０】
このように、圧縮符号化処理された符号化信号では、上述したようにこの符号化信号に一度復号化処理を施し、ＰＣＭオーディオ信号に変換しないと図４に示した波形３０のような上記オーディオ信号の時間軸における振幅の分布を得ることができない。
【００１１】
この復号化処理に必要な演算量は大変大きいものであると共に、この演算処理に時間が掛かる。従って、復号化処理用のハードウェア規模が大きくなること及び復号化処理の演算処理時間分だけ波形の表示が遅れること等の改善が望まれている。
【００１２】
【課題を解決するための手段】
本発明のオーディオ信号表示装置は、周波数軸上に設けた複数の符号化パラメータに応じて圧縮符号化されたオーディオ信号が入力され、この入力されたオーディオ信号を表示するオーディオ信号表示装置であって、上記圧縮符号化されたオーディオ信号の上記周波数軸上に設けた複数の符号化パラメータを取り出すパラメータ取出手段と、このパラメータ取出手段により取り出された周波数軸上の複数の符号化パラメータを時間軸上に展開することにより表示用のデータを出力する表示用データ配列手段と、上記表示用データ配列手段からのデータを視覚的に表示する表示部とを有して成るものである。
【００１３】
【課題を解決するための手段】
本発明のオーディオ信号表示装置は、周波数軸上に設けた複数の符号化パラメータに応じて圧縮符号化されたオーディオ信号が入力され、この入力されたオーディオ信号を表示するオーディオ信号表示装置であって、上記オーディオ信号の上記符号化パラメータを取り出すパラメータ取出手段と、上記符号化パラメータを時間軸上に展開することにより表示用のデータを出力する表示用データ配列手段と、上記表示用データ配列手段からのデータを視覚的に表示する表示部とを有して成るものである。
【００１４】
また、上記表示用データ配列手段は、上記各符号化パラメータの周波数軸と時間軸との座標を計算する座標計算部と、上記座標計算部からのデータに基づいて上記表示用のデータを作成する表示用データ作成部とを有することが挙げられる。
【００１５】
また、上記表示用のデータの任意の位置を設定し入力する位置指定手段を設け、上記表示部は、上記位置指定手段にて指定された部分の符号化パラメータを用いて形成される表示用のデータを表示することが挙げられる。
【００１６】
さらに、上記表示部は、上記オーディオ信号を出力するオーディオ信号出力手段を有して成るオーディオ信号編集装置における上記オーディオ信号出力手段からのオーディオ信号を編集するための編集用データとして上記表示用のデータを表示することが挙げられる。
【００１７】
【作用】
本発明のオーディオ信号表示装置によれば、入力されるオーディオ信号からパラメータ取出手段にて周波数軸上の符号化パラメータが取り出され、表示用データ配列手段にてこの符号化パラメータが時間軸上に展開されることで表示用のデータが得られ、表示部にて上記表示用のデータが表示される。
【００１８】
また、表示用データ配列手段として座標計算部と表示用データ作成部とを設ける場合、上記座標計算部にて上記各符号化パラメータの周波数軸と時間軸との座標が計算され、これら座標が上記表示用データ作成部にて配列され、表示用のデータが作成される。
【００１９】
また、位置指定手段を設ける場合、使用者は上記位置指定手段にて上記オーディオ信号の任意の位置を指定することで、指定された位置近傍のオーディオ信号の符号化パラメータから上記表示用データ配列手段にて表示用のデータが得られる。
【００２０】
さらに、上記オーディオ信号表示装置を上記オーディオ信号を出力するオーディオ信号出力手段を有して成るオーディオ信号編集装置に設ける場合、使用者は上記オーディオ信号出力手段からのオーディオ信号の編集位置を上記位置指定手段にて指定することで、上記表示用データ配列手段にてこの指定された位置近傍のオーディオ信号の符号化パラメータから表示用のデータが得られ、この表示用のデータが上記表示部にて上記オーディオ信号を編集するための編集用データとして表示される。
【００２１】
【実施例】
以下、本発明のオーディオ信号表示装置について、図面を参照しながら説明する。
【００２２】
上記オーディオ信号表示装置は、図１に示すように、周波数軸上に設けた複数の符号化パラメータに応じて圧縮符号化されたオーディオ信号を表示するオーディオ信号表示装置において、上記オーディオ信号の上記符号化パラメータ例えばスケールファクタを取り出すパラメータ取出手段としてのスケールファクタ取り出し部２と、上記符号化パラメータを時間軸上に展開することにより表示用のデータを出力する表示用データ配列手段である表示用データ配列部６と、上記表示用データ配列手段からのデータを表示する表示部である表示部５とを有して成るものである。
【００２３】
また、上記表示用データ配列部６は、上記各符号化パラメータの周波数軸と時間軸との座標を計算する座標計算部３と、座標計算部３からのデータに基づいて上記表示用のデータを作成する表示用データ作成部４とを有するものである。
【００２４】
上記オーディオ信号表示装置において、圧縮オーディオ信号出力部１から、周波数帯域に分割され各帯域毎に符号化処理されたオーディオ信号がスケールファクタ取り出し部２に出力される。なお、この符号化として、例えば蓄積用動画像符号化の検討組織（ｍｏｖｉｎｇ  ｐｉｃｔｕｒｅ  ｉｍａｇｅ  ｃｏｄｉｎｇ  ｅｘｐｅｒｔｓ  ｇｒｏｕｐ  ：ＭＰＥＧ）にて標準化されているＭＰＥＧ／オーディオのレイヤ１の符号化アルゴリズムで符号化する帯域分割符号化方式による符号化が挙げられる。
【００２５】
スケールファクタ取り出し部２は、上記オーディオ信号の符号化パラメータの内、上記各帯域毎のスケールファクタを取り出して、座標計算部３に出力する。
【００２６】
座標計算部３は、スケールファクタ取り出し部２で取り出された各帯域毎のスケールファクタから時間データを計算し、このスケールファクタを時間軸と周波数軸との座標点上の強度で表した強度データを計算し表示用データ作成部４に出力する。また、表示用データ作成部４は上記強度データを時間軸方向と周波数軸方向とに配列して、各座標点上の強度を濃淡で表す表示用データを作成し表示部５に出力する。
【００２７】
表示部５は、上記表示用データを表示する。
【００２８】
以上のように、オーディオ信号表示装置を構成することで、圧縮符号化されたオーディオ信号を表示させるのに、このオーディオ信号を復号化する特別なハードウェアを設けなくても、上記オーディオ信号のスケールファクタの周波数成分の分布状態を、時間軸及び周波数軸で表される各座標点における強度を濃淡にて表示することができる。
【００２９】
ここで、上記オーディオ信号表示装置を有して成るオーディオ信号編集装置の一例を図３に示す。
【００３０】
上記オーディオ信号編集装置は、図１の圧縮オーディオ信号出力部１であるオーディオ信号出力手段としての通信装置１１、テープ再生装置１２及びディスク再生装置１３と、上記オーディオ信号表示装置としての表示部５及び制御部１５とを有している。
【００３１】
また、上記オーディオ信号編集装置において、表示部５と通信装置１１とテープ再生装置１２とディスク再生装置１３と編集バッファ１４と制御部１５とはデータバス７に接続している。また、通信装置１１、テープ再生装置１２、ディスク再生装置１３、編集バッファ１４及び制御部１５とデータバス１７との間で双方向のデータのやりとりが可能である。
【００３２】
通信装置１１は、送信所より送られる例えば上記帯域分割符号化方式にて符号化処理されたオーディオ信号を受信し、受信したオーディオ信号をデータバス１７を介して編集バッファ１４に送る。
【００３３】
また、テープ再生装置１２は、例えば上記帯域分割符号化方式にて符号化処理されたオーディオ信号を記録したテープ状記録媒体を再生して得られる再生信号をデータバス１７を介して編集バッファ１４に送る。ディスク再生装置１３は、例えば上記帯域分割符号化方式にて符号化処理されたオーディオ信号を記録したディスク状記録媒体を再生して得られる再生信号をデータバス１７を介して編集バッファ１４に送る。
【００３４】
また、編集バッファ１４は、通信装置１１から送られるオーディオ信号やテープ再生装置１２あるいはディスク再生装置１３から送られる各記録媒体の再生信号を取り込んで一時的に記憶する。また、後述する編集用データとしての表示用データが制御部１５より送られると、この編集用データを取り込み一時的に記憶し、上記表示用データをデータバス１７を介して表示部５に送る。
【００３５】
制御部１５内部には、図３で示されるような表示制御部１８が設けられている。
【００３６】
また、表示制御部１８は、上記オーディオ信号の上記符号化パラメータ例えばスケールファクタを取り出すパラメータ取出手段としてのスケールファクタ取り出し部２と、上記符号化パラメータを時間軸上に展開することにより表示用のデータを出力する表示用データ配列手段である表示用データ配列部６とを有している。また、上記表示用データ配列部６は、上記各符号化パラメータの周波数軸と時間軸との座標を計算する座標計算部３と、座標計算部３からのデータに基づいて上記表示用のデータを作成する表示用データ作成部４とから成るものである。
【００３７】
また、図３において、入力装置２５からの出力は入力制御部２１に送られ、入力制御部２１からの出力は編集バッファ１４と表示用データ作成部４とに送られる。編集バッファ１４からの出力はスケールファクタ取り出し部２に送られ、スケールファクタ取り出し部２からの出力は座標計算部３に送られる。座標計算部３からの出力は編集バッファ１４及び表示用データ作成部４に送られ、表示用データ作成部４からの出力は表示部５に送られる。
【００３８】
入力装置２５は、ユーザが例えば予め編集バッファ１４に取り込んでおいたオーディオ信号で編集しようとするオーディオ信号を選択したり、あるいは編集中のオーディオ信号で編集したい部分を拡大するためにこの拡大位置を指定し入力するデバイスであり、例えばキーボードやマウス等が用いられる。
【００３９】
入力制御部２１は、入力装置２５からの入力信号に基づいて、編集バッファ１４に取り込んでおいたオーディオ信号の内ユーザが選択したオーディオ信号を指定したり、編集中のオーディオ信号でユーザが選択した部分を指定するための制御信号を発生し出力する。
【００４０】
座標計算部２３は、スケールファクタ取り出し部２で取り出された各帯域毎のスケールファクタから時間データを計算し、このスケールファクタを時間軸と周波数軸との座標点上の強度で表した強度データを計算し表示用データ作成部４及び編集バッファ１４に出力する。なお、編集バッファ１４に送られる上記各座標点のデータは、編集バッファ１４に取り込まれているオーディオ信号の編集部分のアドレスに対応しており、編集バッファ１４ではこのアドレスで指定された前あるいは後のオーディオ信号がスケールファクタ２に送られる。
【００４１】
また、表示用データ作成部４は上記強度データを時間軸方向と周波数軸方向とに配列して、各座標点上の強度を濃淡で表す表示用データを作成し表示部５に出力する。さらに、入力制御部２１からの制御信号に基づいて、ユーザにより指定された位置の近傍の強度データに基づいた表示用データを表示部５に出力する。
【００４２】
表示部５は、例えば図４に示すように、上記表示用データを編集用データとして表示する。なお、図４においては、上記表示用データの濃淡は、ブロック毎に施した斜線の数で表されている。
【００４３】
上記オーディオ信号編集装置によれば、ユーザはオーディオ信号を編集する際に、予め通信装置１１にてオーディオ信号を受信したり、テープ状記録媒体をテープ再生装置１２にて再生したり、ディスク状記録媒体をディスク再生装置１３にて再生したりして編集バッファ１４にオーディオ信号を取り込んでおく。編集バッファ１４に取り込んでおいたオーディオ信号の中から、入力装置２５にて所望のオーディオ信号を選択すると、時間軸と周波数軸とで表される各座標点での濃淡で示される編集用データが表示部５に表示され、上記オーディオ信号の符号化パラメータであるスケールファクタすなわち上記信号振幅の周波数成分の分布の視覚化が可能になる。従って、ユーザは上記オーディオ信号の信号振幅の周波数成分における分布状態をもって編集点を決定することで、比較的容易にオーディオ信号の編集を行うことが可能である。
【００４４】
以上のように本発明のオーディオ信号表示装置が適用されるオーディオ信号編集装置を構成することで、圧縮符号化されたオーディオ信号を編集する際に、このオーディオ信号を復号化するためのハードウェアを設けなくても、符号化パラメータであるスケールファクタの周波数成分の分布状態を、時間軸及び周波数軸で表される各座標点における強度を濃淡にて表示することができ、さらに位置指定手段として入力装置２５を設けることで、上記オーディオ信号の任意の位置における信号振幅の周波数成分の分布の確認が容易になる。従って、オーディオ信号の編集を行う際の操作性が向上する。さらに、上記圧縮符号化されたオーディオ信号の復号化に必要な演算量の削減が可能になり、ハードウェアに対する負担の低減が可能になる。
【００４５】
なお、本実施例においては、帯域分割符号化方式にて符号化処理されたオーディオ信号を編集する際に、このオーディオ信号の周波数成分での分布状態を視覚化するのに、符号化パラメータであるスケールファクタを用いる例を挙げたが、これに限定されることはなく、周波数分布を示す符号化パラメータであれば、どのような符号化パラメータを用いても差し支えない。
【００４６】
また、本実施例においては、表示するオーディオ信号として予め帯域分割符号化方式にて符号化されたオーディオ信号を用いる例を挙げたが、これに限定されることはなく、周波数分布を示す符号化パラメータを用いた圧縮符号化方式で符号化されたオーディオ信号を用いる範囲では本発明と同様の効果を得る。
【００４７】
また、本実施例においては、スケールファクタの強度分布を時間軸及び周波数軸で示される座標点での濃淡で表したが、こちらもこれに限定されることはなく、例えば色分けで表したり、またはさらに強度を示す軸を設けて３次元表示例えば等高線表示にて表してもよい。
【００４８】
また、本実施例においては、本発明のオーディオ信号表示装置をオーディオ信号編集装置に適用した例を挙げたが、これに限定されることはなく、例えば出力レベル調整等の他の用途に適用しても差し支えない。
【００４９】
【発明の効果】
以上説明したように、本発明のオーディオ信号表示装置によれば、圧縮符号化処理されたオーディオ信号を復号化処理するための復号化手段を設けなくても、圧縮符号化した際の符号化パラメータを用いて、この符号化パラメータを時間軸方向と周波数軸方向とで展開された強度分布として視覚化することで、上記オーディオ信号の信号振幅の周波数成分における分布を容易に確認することが可能になる。
【００５０】
さらに、位置指定手段を設けた場合、上記オーディオ信号でこの位置指定手段にて任意に指定された位置の近傍の信号振幅の周波数成分の分布を容易に確認することが可能になる。
【００５１】
また、本発明のオーディオ信号表示装置をオーディオ信号編集装置に適用した場合、上記オーディオ信号の信号振幅の周波数成分の分布を容易に確認でき、この分布をもってオーディオ信号の編集が可能になるため、復号化処理に必要な演算量を削減できると共に、オーディオ信号編集時の操作性も向上する。
【図面の簡単な説明】
【図１】本発明のオーディオ信号表示装置の概略を示すブロック図である。
【図２】上記オーディオ信号表示装置をオーディオ信号編集装置に適用した例を示すブロック図である。
【図３】上記オーディオ信号の制御部での動作を説明するブロック図である。
【図４】上記オーディオ信号編集装置にて編集する際に表示されるオーディオ信号の一例を示す図である。
【図５】従来のオーディオ信号編集装置にて編集する際に表示されるオーディオ信号の一例を示す図である。
【符号の説明】
２  スケールファクタ取り出し部
３、２３  座標計算部
４  表示用データ作成部
５  表示部
６  表示用データ配列部
１１  通信装置
１２  テープ再生装置
１３  ディスク再生装置
１５  制御部
２５  入力装置
【図１】
0003555224.tif 000002
【図２】
0003555224.tif 000003
【図３】
0003555224.tif 000004
【図４】
0003555224.tif 000005
【図５】
0003555224.tif 000006