(57)【要約】【課題】再生中の番組の音響信号が音楽か否かを番組のジャンルに応じて適切に判定する。【解決手段】パラメータ調整部６は、番組情報取得部５で取得した番組のジャンル情報を用いて、変化量パラメータ値および持続性判定パラメータ値を調整し、エネルギー変化量分析部３は、再生中の番組の音響信号の所定の周波数帯ごとのフレーム間のエネルギー変化量が変化量パラメータ値を超えたか否かを判断し、持続性分析部４は、エネルギー変化量が変化量パラメータ値を超えた周波数帯におけるエネルギー変化後のエネルギーの持続時間が持続性判定パラメータ値を超えたか否かを判断し、音楽判定部７は、エネルギー変化量分析部３の判断結果および持続性分析部４の判断結果のうちの少なくとも一方に基づいて、音響信号に音楽が含まれるか否かを判定する。【選択図】図１
2010169878.tif 000002
【特許請求の範囲】
【請求項１】
入力された音響信号を所定の単位であるフレームに分割するフレーム分割手段と、
前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する周波数分析手段と、
前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が、前記フレーム間の前記エネルギー変化量から音楽性を判定するための閾値である変化量パラメータ値を超えたか否かを判断するエネルギー変化量分析手段と、
前記エネルギー変化量分析手段の判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する音楽判定手段と、
前記音響信号を含む番組のジャンルを示すジャンル情報を含む番組情報を取得する番組情報取得手段と、
前記ジャンル情報を用いて前記変化量パラメータ値を調整するパラメータ調整手段と
を備えることを特徴とする音響信号分析装置。
【請求項２】
入力された音響信号を所定の単位であるフレームに分割するフレーム分割手段と、
前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する周波数分析手段と、
前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が、前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を超えたか否かを判断する持続性分析手段と、
前記持続性分析手段の判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する音楽判定手段と、
前記音響信号を含む番組のジャンルを示すジャンル情報を含む番組情報を取得する番組情報取得手段と、
前記ジャンル情報を用いて前記持続性判定パラメータ値を調整するパラメータ調整手段と
を備えることを特徴とする音響信号分析装置。
【請求項３】
入力された音響信号を所定の単位であるフレームに分割するフレーム分割手段と、
前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する周波数分析手段と、
前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が、前記フレーム間の前記エネルギー変化量から音楽性を判定するための閾値である変化量パラメータ値を超えたか否かを判断するエネルギー変化量分析手段と、
前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が、前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を超えたか否かを判断する持続性分析手段と、
前記エネルギー変化量分析手段の判断結果および前記持続性分析手段の判断結果のうちの少なくとも一方に基づいて、前記音響信号に音楽が含まれるか否かを判定する音楽判定手段と、
前記音響信号を含む番組のジャンルを示すジャンル情報を含む番組情報を取得する番組情報取得手段と、
前記ジャンル情報を用いて前記変化量パラメータ値および前記持続性判定パラメータ値を調整するパラメータ調整手段と
を備えることを特徴とする音響信号分析装置。
【請求項４】
前記周波数信号の１または複数の前記所定の周波数帯の内、少なくとも１つの周波数帯は、前記エネルギー変化量が前記変化量パラメータ値を超えた周波数帯であることを特徴とする請求項３に記載の音響信号分析装置。
【請求項５】
前記パラメータ調整手段は、番組の複数のジャンルを各ジャンルに適した音響効果に基づいて分類したカテゴリに応じて、前記変化量パラメータ値を調整することを特徴とする請求項１に記載の音響信号分析装置。
【請求項６】
前記パラメータ調整手段は、番組の複数のジャンルを各ジャンルに適した音響効果に基づいて分類したカテゴリに応じて、前記持続性判定パラメータ値を調整することを特徴とする請求項２に記載の音響信号分析装置。
【請求項７】
前記パラメータ調整手段は、番組の複数のジャンルを各ジャンルに適した音響効果に基づいて分類したカテゴリに応じて、前記変化量パラメータ値および前記持続性判定パラメータ値を調整することを特徴とする請求項３または４に記載の音響信号分析装置。
【請求項８】
入力された音響信号を所定の単位であるフレームに分割する工程と、
前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する工程と、
前記音響信号を含む番組のジャンルを示すジャンル情報を取得する工程と、
前記ジャンル情報を用いて、前記音響信号の前記フレーム間のエネルギーの変化量から音楽性を判定するための閾値である変化量パラメータ値を調整する工程と、
前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が前記変化量パラメータ値を超えたか否かを判断する工程と、
前記判断する工程における判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する工程と
を含むことを特徴とする音響信号分析方法。
【請求項９】
入力された音響信号を所定の単位であるフレームに分割する工程と、
前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する工程と、
前記音響信号を含む番組のジャンルを示すジャンル情報を取得する工程と、
前記ジャンル情報を用いて、前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を調整する工程と、
前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が前記持続性判定パラメータ値を超えたか否かを判断する工程と、
前記判断する工程における判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する工程と
を含むことを特徴とする音響信号分析方法。
【請求項１０】
入力された音響信号を所定の単位であるフレームに分割する工程と、
前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する工程と、
前記音響信号を含む番組のジャンルを示すジャンル情報を取得する工程と、
前記ジャンル情報を用いて、前記音響信号の前記フレーム間のエネルギーの変化量から音楽性を判定するための閾値である変化量パラメータ値、および前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を調整する工程と、
前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が前記変化量パラメータ値を超えたか否かを判断する工程と、
前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が前記持続性判定パラメータ値を超えたか否かを判断する工程と、
前記エネルギー変化量が前記変化量パラメータ値を超えたか否かの判断結果、および前記持続時間が前記持続性判定パラメータ値を超えたか否かの判断結果のうちの少なくとも一方に基づいて、前記音響信号に音楽が含まれるか否かを判定する工程と
を含むことを特徴とする音響信号分析方法。
【請求項１１】
前記周波数信号の１または複数の前記所定の周波数帯の内、少なくとも１つの周波数帯は、前記エネルギー変化量が前記変化量パラメータ値を超えた周波数帯であることを特徴とする請求項１０に記載の音響信号分析方法。
【請求項１２】
前記調整する工程は、番組の複数のジャンルを各ジャンルに適した音響効果に基づいて分類したカテゴリに応じて、前記変化量パラメータ値を調整することを特徴とする請求項８に記載の音響信号分析方法。
【請求項１３】
前記調整する工程は、番組の複数のジャンルを各ジャンルに適した音響効果に基づいて分類したカテゴリに応じて、前記持続性判定パラメータ値を調整することを特徴とする請求項９に記載の音響信号分析方法。
【請求項１４】
前記調整する工程は、番組の複数のジャンルを各ジャンルに適した音響効果に基づいて分類したカテゴリに応じて、前記変化量パラメータ値および前記持続性判定パラメータ値を調整することを特徴とする請求項１０または１１に記載の音響信号分析方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音響信号を分析して音楽か否かを判定する音響信号分析装置および音響信号分析方法に関する。
【背景技術】
【０００２】
現在、放送された番組を楽しむ方法として、テレビやラジオなどで受信した番組を保存せずにリアルタイムで楽しむ方法や、番組をＤＶＤ（Digital Versatile Disc）やハードディスクなどの記録媒体に保存した後に観賞するなどの方法がある。番組を記録媒体に保存した後に観賞する場合、時間を有効活用するために、各種情報を基に、番組のハイライトを探し出したり、番組のダイジェストを作成したり、番組の中で音楽が含まれる信号区間を判別したりする技術が開発されている。
【０００３】
例えば、特許文献１には、音響信号の単位時間ごとの周波数データを抽出し、この周波数データのエネルギーの分散値により有音区間と無音区間の判別を行い、また、周波数の重心の平均と重心の標準偏差から周波数の分布により雑音区間と雑音以外の区間の判別を行い、雑音以外の区間のうち有音区間において音の疎密度により、音声か音楽かの判別を行う技術が開示されている。
【０００４】
また、特許文献２には、２チャンネル音声の各チャンネルのパワーの合計と各チャンネルのパワーの差との比を用いて、音楽区間の判別を行う技術が開示されている。
【０００５】
これらの技術を応用することで、リアルタイムで番組の視聴を行う際に、音楽であれば音楽向けの臨場感拡大効果や迫力効果を、音声であれば明瞭度向上効果を付加し提供することが可能となる。
【０００６】
また、テレビジョン受像機などにおいて、ＥＰＧ（Electronic Program Guide）等の番組情報を用いて、番組ごとに最良の音響モードを自動で提供する技術も提案されている（例えば、特許文献３参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０００−６６６９１号公報
【特許文献２】特開２００６−３０１１３４号公報
【特許文献３】特開２００１−１１１９７０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
様々な番組が放送される多種多様のコンテンツをテレビジョン受像機などで再生しながら音楽検出を行う場合、入力される音響信号の特徴に応じ、特に音楽区間や音声区間を特定しコンテンツに最適な音声モードを提供するには、検出精度の確保が必要となる。
【０００９】
特許文献１，２に開示された技術などの従来から知られている音楽検出方法は、ある特定の判断基準に従って音楽区間を特定しているが、入力されるコンテンツをある程度限定しており、また、入力コンテンツの特徴を考慮せず判定基準を固定したまま判定処理を行っていた。
【００１０】
音楽検出の目的の１つに、再生中のコンテンツの音響特性をコンテンツのジャンルに合わせ、最適なモードで視聴者に届けようとする意図がある。例えば、音楽番組ならば、臨場感があり、広がり感のある音楽性豊かな音として再生されることが望ましい。一方、会話やナレーションが主体のコンテンツは、よりはっきりと聴き易く、画面中心に定位感がある音として再生されることが望ましい。
【００１１】
つまり、似たような音響信号を含むコンテンツでも視聴者に提供すべき基準が番組の内容等によって異なり、そのジャンルや視聴目的によって様々であるといった状況が存在する。
【００１２】
したがって、従来のように、様々なコンテンツに対して同じ判定基準を適用して音楽検出を行うと、音楽区間の判定を誤り、実際の視聴者の趣向やコンテンツ制作側の意向に沿った音声モードが提供されず、逆効果になってしまうことがあった。
【００１３】
特許文献３は、入力コンテンツの特徴を番組情報から取得した番組ジャンル別分類情報を考慮し、コンテンツに最適な音声モードを自動で提供するものであるが、同一番組においても、シーン毎あるいはカット毎に多種多様な音声信号が含まれており、１つの音声モードで大局的な自動設定は可能であるが、部分ごとに注目すれば必ずしも最適な音声モードが選択されているとは限らなかった。
【００１４】
本発明は上記に鑑みてなされたもので、再生中の番組の音響信号が音楽か否かを番組のジャンルに応じて適切に判定することができる音響信号分析装置および音響信号分析方法を提供することを目的とする。
【課題を解決するための手段】
【００１５】
本発明の一態様によれば、入力された音響信号を所定の単位であるフレームに分割するフレーム分割手段と、前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する周波数分析手段と、前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が、前記フレーム間の前記エネルギー変化量から音楽性を判定するための閾値である変化量パラメータ値を超えたか否かを判断するエネルギー変化量分析手段と、前記エネルギー変化量分析手段の判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する音楽判定手段と、前記音響信号を含む番組のジャンルを示すジャンル情報を含む番組情報を取得する番組情報取得手段と、前記ジャンル情報を用いて前記変化量パラメータ値を調整するパラメータ調整手段とを備えることを特徴とする音響信号分析装置が提供される。
【００１６】
本発明の他の態様によれば、入力された音響信号を所定の単位であるフレームに分割するフレーム分割手段と、前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する周波数分析手段と、前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が、前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を超えたか否かを判断する持続性分析手段と、前記持続性分析手段の判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する音楽判定手段と、前記音響信号を含む番組のジャンルを示すジャンル情報を含む番組情報を取得する番組情報取得手段と、前記ジャンル情報を用いて前記持続性判定パラメータ値を調整するパラメータ調整手段とを備えることを特徴とする音響信号分析装置が提供される。
【００１７】
本発明の他の態様によれば、入力された音響信号を所定の単位であるフレームに分割するフレーム分割手段と、前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する周波数分析手段と、前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が、前記フレーム間の前記エネルギー変化量から音楽性を判定するための閾値である変化量パラメータ値を超えたか否かを判断するエネルギー変化量分析手段と、前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が、前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を超えたか否かを判断する持続性分析手段と、前記エネルギー変化量分析手段の判断結果および前記持続性分析手段の判断結果のうちの少なくとも一方に基づいて、前記音響信号に音楽が含まれるか否かを判定する音楽判定手段と、前記音響信号を含む番組のジャンルを示すジャンル情報を含む番組情報を取得する番組情報取得手段と、前記ジャンル情報を用いて前記変化量パラメータ値および前記持続性判定パラメータ値を調整するパラメータ調整手段とを備えることを特徴とする音響信号分析装置が提供される。
【００１８】
本発明の他の態様によれば、入力された音響信号を所定の単位であるフレームに分割する工程と、前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する工程と、前記音響信号を含む番組のジャンルを示すジャンル情報を取得する工程と、前記ジャンル情報を用いて、前記音響信号の前記フレーム間のエネルギーの変化量から音楽性を判定するための閾値である変化量パラメータ値を調整する工程と、前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が前記変化量パラメータ値を超えたか否かを判断する工程と、前記判断する工程における判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する工程とを含むことを特徴とする音響信号分析方法が提供される。
【００１９】
本発明の他の態様によれば、入力された音響信号を所定の単位であるフレームに分割する工程と、前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する工程と、前記音響信号を含む番組のジャンルを示すジャンル情報を取得する工程と、前記ジャンル情報を用いて、前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を調整する工程と、前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が前記持続性判定パラメータ値を超えたか否かを判断する工程と、前記判断する工程における判断結果に基づいて、前記音響信号に音楽が含まれるか否かを判定する工程とを含むことを特徴とする音響信号分析方法が提供される。
【００２０】
本発明の他の態様によれば、入力された音響信号を所定の単位であるフレームに分割する工程と、前記フレームごとの前記音響信号を時間領域の信号から周波数領域の信号である周波数信号へと変換する工程と、前記音響信号を含む番組のジャンルを示すジャンル情報を取得する工程と、前記ジャンル情報を用いて、前記音響信号の前記フレーム間のエネルギーの変化量から音楽性を判定するための閾値である変化量パラメータ値、および前記音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である持続性判定パラメータ値を調整する工程と、前記周波数信号の周波数帯ごとに前記フレーム間のエネルギー変化量を算出し、算出した前記エネルギー変化量が前記変化量パラメータ値を超えたか否かを判断する工程と、前記周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、前記持続時間が前記持続性判定パラメータ値を超えたか否かを判断する工程と、前記エネルギー変化量が前記変化量パラメータ値を超えたか否かの判断結果、および前記持続時間が前記持続性判定パラメータ値を超えたか否かの判断結果のうちの少なくとも一方に基づいて、前記音響信号に音楽が含まれるか否かを判定する工程とを含むことを特徴とする音響信号分析方法が提供される。
【発明の効果】
【００２１】
本発明によれば、再生中の番組の音響信号が音楽か否かを番組のジャンルに応じて適切に判定することができる。
【図面の簡単な説明】
【００２２】
【図１】本発明の実施の形態に係る音響信号分析装置の構成を示すブロック図である。
【図２】カテゴリ分類テーブルの一例を示す図である。
【図３】パラメータ調整値テーブルの一例を示す図である。
【発明を実施するための形態】
【００２３】
以下、本発明の実施の形態について、図面を参照して説明する。
【００２４】
図１は、本発明の実施の形態に係る音響信号分析装置の構成を示すブロック図である。図１に示すように本実施の形態に係る音響信号分析装置は、フレーム分割部１と、周波数分析部２と、エネルギー変化量分析部３と、持続性分析部４と、番組情報取得部５と、パラメータ調整部６と、音楽判定部７とを備える。
【００２５】
フレーム分割部１は、外部から入力されるデジタル信号の音響信号を所定のサンプル数（周波数分析幅）で区切ったフレーム単位に分割する。
【００２６】
周波数分析部２は、フレーム分割部１から入力される音響信号を、時間領域の信号から周波数領域の信号へと変換し、得られた周波数信号をエネルギー変化量分析部３および持続性分析部４に供給する。
【００２７】
周波数分析部２で用いる周波数解析法は特に限定されるものではなく、例えば、ＦＦＴ（Fast Fourier Transform）、ＭＤＣＴ（Modified Discrete Cosine Transform）、ポリフェイズフィルタ等を用いる。あるいは、ＦＩＲ（Finite Impulse Response）フィルタやＩＩＲ（Infinite Impulse Response）フィルタによるバンド分割方式を用いてもよい。
【００２８】
エネルギー変化量分析部３は、周波数信号の周波数帯ごとにフレーム間のエネルギー変化量を算出し、算出したエネルギー変化量が変化量パラメータ値を超えたか否かを判断する。変化量パラメータ値は、音響信号のフレーム間のエネルギー変化量から音楽性を判定するための閾値である。
【００２９】
持続性分析部４は、周波数信号の１または複数の所定の周波数帯におけるエネルギーの持続時間を検出し、この持続時間が持続性判定パラメータ値を超えたか否かを判断する。ここでエネルギーの持続時間を検出する周波数帯は、エネルギー変化量分析部３によりエネルギー変化量が変化量パラメータ値を超えたと判断された周波数帯である。以下、この周波数帯を適宜、特定帯域と呼ぶ。また、持続性分析部４は、低域の周波数帯にエネルギーが集中する楽器等による音楽を検出するために、所定の低域の周波数帯のエネルギーの持続時間も検出する。持続性判定パラメータ値は、音響信号におけるエネルギーの持続性から音楽性を判定するための閾値である。
【００３０】
番組情報取得部５は、ＥＰＧ等の番組情報提供サービスを用いて、入力音響信号の番組のジャンルを示すジャンル情報を含む番組情報を取得する。なお、番組情報は、インターネットを介してインターネットサイトから取得する等してもよい。
【００３１】
パラメータ調整部６は、番組情報取得部５で取得したジャンル情報を用いて、変化量パラメータ値および持続性判定パラメータ値を調整する。
【００３２】
音楽判定部７は、エネルギー変化量分析部３の判断結果および持続性分析部４の判断結果のうちの少なくとも一方に基づいて、入力された音響信号に音楽が含まれるか否かを判定する。
【００３３】
次に、本実施の形態に係る音響信号分析装置の動作を説明する。
【００３４】
外部から再生中の番組の音響信号が入力されると、フレーム分割部１は、後段の周波数分析部２で用いる周波数分析法に従う所定のサンプル数（周波数分析幅）を有するフレーム単位に音響信号を分割する。なお、入力音響信号はデジタル信号が前提であるが、アナログ信号である場合は、図示しないＡＤコンバータによりデジタル信号に変換された後、フレーム分割部１に入力される。
【００３５】
次いで、周波数分析部２は、フレーム分割部１でフレーム単位に分割された音響信号を、時間領域の信号から周波数信号へと変換し、この変換後の周波数信号をエネルギー変化量分析部３および持続性分析部４に出力する。
【００３６】
一方、番組情報取得部５は、入力音響信号を含む番組の番組情報を取得し、この番組情報に含まれるジャンル情報をパラメータ調整部６に供給する。
【００３７】
パラメータ調整部６は、番組情報取得部５からのジャンル情報を用いて、変化量パラメータ値および持続性判定パラメータ値を、予め保持している基準値（初期設定値）から調整する。ジャンル情報を用いて変化量パラメータ値および持続性判定パラメータ値を調整する方法の例については後述する。
【００３８】
音響信号を音楽と判断するための重要な指標は少なくとも２つある。１つは、音響信号の音楽的に特徴のある帯域におけるエネルギー、もう１つはそのエネルギーの持続性である。これら２つを観察すれば、音楽の有無を判断することができる。
【００３９】
音楽が始まる際には、それまでより音響信号のエネルギーが増加し、また特徴のある帯域ではその変化が顕著となる。そこで、エネルギー変化量分析部３は、周波数信号の周波数帯ごとにフレーム間のエネルギー変化量を算出する。そして、エネルギー変化量分析部３は、算出したエネルギー変化量が、パラメータ調整部６における調整後の変化量パラメータ値を超えたか否かを判断する。
【００４０】
エネルギー変化量分析部３では、短時間（例えば周波数分析幅が１０２４ポイントのＦＦＴで、入力音響信号のサンプリング周波数が４８ｋＨｚであるとすると、約２０ｍｓｅｃ）のエネルギー変化量を観察している。しかし、音楽以外の信号であっても短時間であれば音楽と同様のエネルギー変化量を示す場合があるため、誤検出のおそれがある。
【００４１】
前述のように音楽の特徴はエネルギーの持続性にある。そこで、持続性分析部４において、エネルギー変化量分析部３の判断の結果、エネルギー変化量が変化量パラメータ値を超えた特定帯域におけるエネルギー変化後のエネルギー値以上のエネルギーが持続する時間を検出する。そして、持続性分析部４は、検出した持続時間が、パラメータ調整部６における調整後の持続性判定パラメータ値を超えたか否かを判断する。なお、一般的には音楽を認識するために必要な時間は数秒間である。
【００４２】
そして、音楽判定部７は、エネルギー変化量分析部３によりエネルギー変化量が変化量パラメータ値を超えた周波数帯があると判断され、かつ、持続性分析部４によりその周波数帯（特定帯域）におけるエネルギーの持続時間が持続性判定パラメータ値を超えたと判断された場合、エネルギー変化量が変化量パラメータ値を超えたフレームから音楽が開始されたと判定する。
【００４３】
ところで、ドラムやベースや太鼓等による低域の周波数帯にエネルギーが集中する音楽では、音楽が始まっても中高域の周波数帯の信号にあまり大きなエネルギー変化量が観察されない。そこで、持続性分析部４は、低域の音楽を検出するために、音響信号における所定の低域のエネルギーを常に観察し、その低域のエネルギーが所定の閾値を超えて持続する時間が調整後の持続性判定パラメータ値を超えたか否かを判断する。
【００４４】
そして、音楽判定部７は、低域のエネルギーが閾値を超えて持続する時間が持続性判定パラメータ値を超えた場合、低域のエネルギーが閾値を超えたフレームから音楽が開始されたと判定する。この場合、音楽判定部７は、エネルギー変化量分析部３による判断結果にかかわらず、持続性分析部４の判断結果のみにより、音響信号が音楽であるか否かを判断する。
【００４５】
なお、エネルギー変化量分析部３の判断結果のみにより、音響信号が音楽であるか否かを判断してもよい。特に、エネルギー変化量分析部３で観察されるエネルギー変化量が変化量パラメータ値をはるかに超え、音楽的特徴が顕著な場合、持続性分析部４におけるエネルギーの持続性判断結果にかかわらず、音楽が開始されたと判定してもよい。
【００４６】
エネルギー変化量分析部３は、音楽判定部７が音楽が開始されたと判定した後、特定帯域において、エネルギーが所定の閾値を超えて減少するか否かを判断する。持続性分析部４は、エネルギー変化量分析部３でエネルギーが所定の閾値を超えて減少したと判断された場合、そのエネルギーが減少した状態が所定時間を超えて持続するか否かを判断する。また、持続性分析部４は、所定の低域のエネルギーが閾値以下となる状態が所定時間を超えて持続するか否かを判断する。
【００４７】
そして、音楽判定部７は、エネルギー変化量分析部３により特定帯域のエネルギーが所定の閾値を超えて減少したと判断され、かつ、持続性分析部４により特定帯域のエネルギーが所定の閾値を超えて減少した状態の持続時間が所定時間を超えたと判断され、かつ、持続性分析部４により所定の低域のエネルギーが閾値以下となる状態が所定時間を超えたと判断された場合、音楽が終了したと判定する。なお、エネルギー変化量分析部３で観察されるエネルギーの減少量が閾値をはるかに超え、非音楽的特徴が顕著ならば、持続性分析部４の判断結果にかかわらず、音楽が終了したと判定してもよい。
【００４８】
次に、変化量パラメータ値および持続性判定パラメータ値を調整する方法について説明する。
【００４９】
パラメータ調整部６に予め保持されている変化量パラメータ値および持続性判定パラメータ値の基準値（初期設定値）は、あらゆる音響信号に対して良好な音楽検出結果を導くとして設定された値である。本実施の形態では、さまざまなジャンルの番組の音響信号に対して最適な音楽判定結果を得るために、番組のジャンル情報を用いて変化量パラメータ値および持続性判定パラメータ値の基準値に対して調整を行う。
【００５０】
ＥＰＧに代表される番組情報の分類方法として主に、ドラマ、バラエティ、映画、音楽、アニメ、スポーツ、ニュース、芸能、教養、ドキュメンタリー、趣味、といったジャンルが設定されている。このジャンルは大分類であり、ここからさらに小分類されている。例えば、スポーツの中にサッカー、野球、相撲、テニスといったように、スポーツの中でのジャンルが設定されている。
【００５１】
したがって、番組情報により提供されるジャンル情報は非常に豊富であるが、提供すべき音響効果は主に「聞き易さ」と「臨場感」の２点に集約される。聞き易さが重視されるジャンルとしては、ニュースやドラマ等がある。臨場感が重視されるジャンルとしては、映画（特にＳＦ映画やアクション映画）、スポーツ、音楽等がある。
【００５２】
本実施の形態では、番組のジャンルを各ジャンルに適した音響効果に基づいてカテゴリ分類する。カテゴリ分類の一例を図２に示す。図２は、「聞き易さ」と「臨場感」について、一般的なユーザの嗜好特性に沿う音響効果に対応するように、各ジャンルをＡ〜Ｅの５つのカテゴリに分類した例を示している。カテゴリＡ，Ｅは聞き易さを重視するカテゴリであり、カテゴリＣ，Ｄは臨場感を重視するカテゴリであり、カテゴリＢはそれらの中間の音響効果が適切なカテゴリである。
【００５３】
図２は大分類のジャンルをカテゴリ分類した例を示しているが、小分類のジャンルに応じてカテゴリ分類してもよい。例えば、図２では、映画は臨場感を重視するカテゴリＣに分類されているが、恋愛映画はドラマと同じカテゴリＡに分類されるようにしてもよい。
【００５４】
パラメータ調整部６は、図２に示したような、ジャンルとカテゴリとの対応を示すカテゴリ分類テーブルを保持している。番組情報取得部５からジャンル情報が供給されると、パラメータ調整部６は、カテゴリ分類テーブルを参照して、取得したジャンル情報の属するカテゴリを判断する。
【００５５】
そして、パラメータ調整部６は、取得したジャンル情報の属するカテゴリに基づいて、予め保持している、図３に示すようなパラメータ調整値テーブルを参照して、エネルギー変化量分析部３で用いる変化量パラメータ値、および持続性分析部４で用いる持続性判定パラメータ値を調整する。
【００５６】
図３に示すパラメータ調整値テーブルについて説明する。例えば、音楽番組や情景に重ねたＢＧＭなどのように、場の雰囲気を重視する場合には、視聴者に音楽を届けたいというコンテンツ制作者の意図がある。一方、ニュースやドキュメンタリーなどにおいてＢＧＭ等で音楽を流す場合は、あくまでスピーチやナレーションが優先される傾向が強い。
【００５７】
そこで、エネルギー変化量分析部３で用いる変化量パラメータ値は、例えば音楽番組の属するカテゴリＤでは、検出速度や音楽判定精度を高めるために、基準値より小さくなるように調整する。図３の例では、基準値に０．５を乗じた値を調整後の変化量パラメータ値とする。
【００５８】
一方、例えばニュースの属するカテゴリＥでは、ＢＧＭを音楽とみなすべきではないため、変化量パラメータ値が基準値より大きくなるように調整する。図３の例では、基準値に３を乗じた値を調整後の変化量パラメータ値とする。
【００５９】
同様にして、持続性分析部４で用いる持続性判定パラメータ値は、音楽番組の属するカテゴリＤでは、短時間でも音楽を検出できるように、基準値より小さくなるように調整する。図３の例では、基準値に０．５を乗じた値を調整後の持続性判定パラメータ値とする。
【００６０】
一方、ニュースの属するカテゴリＥでは、短時間の音楽は検出すべきでないため、持続性判定パラメータ値が基準値より大きくなるように調整する。図３の例では、基準値に３を乗じた値を調整後の持続性判定パラメータ値とする。
【００６１】
このように、音楽的な効果を重視するカテゴリでは、変化量パラメータ値および持続性判定パラメータ値を基準値から緩和して音楽と判定し易くなるよう調整し、音声を重視するカテゴリでは、その逆の調整を行う。なお、図３中の数値は一例であり、実際にはこの限りではない。
【００６２】
上記説明のように本実施の形態では、ジャンル情報を用いて、音楽性を判定するための変化量パラメータ値および持続性判定パラメータ値を調整することで、再生中の番組の音響信号が音楽か否かを番組のジャンルに応じて適切に判定することができる。この判定結果を利用すると、番組に最適な音響効果を自動で切り替えることができ、利便性が向上する。
【００６３】
なお、周波数分析部２を省略してもよい。この場合、エネルギー変化量分析部３では全帯域におけるエネルギー変化量を算出してエネルギー変化量が変化量パラメータ値を超えたか否かを判断し、持続性分析部４では、変化量パラメータ値を超えた変化後のエネルギーの持続時間を検出し、この持続時間が持続性判定パラメータ値を超えたか否かを判断する。フレーム分割部１におけるサンプル数は任意であり、この場合サンプルは時間領域の信号のままである。
【００６４】
上記した実施の形態に係る音響信号分析装置の機能をプログラムによりコンピュータに実現させるようにしてもよい。このプログラムは、記録媒体から読みとられてコンピュータに取り込まれてもよいし、通信ネットワーク等を介して伝送されてコンピュータに取り込まれてもよい。
【符号の説明】
【００６５】
１  フレーム分割部
２  周波数分析部
３  エネルギー変化量分析部
４  持続性分析部
５  番組情報取得部
６  パラメータ調整部
７  音楽判定部
【図１】
2010169878.tif 000003
【図２】
2010169878.tif 000004
【図３】
2010169878.tif 000005