(57)【要約】【課題】録画した音楽番組中の所望する楽曲部分のみを再生する方法として、従来法では各楽曲の開始時間・終了時間とメタ情報が含まれる管理情報を予め受信することが必要となっている。このような詳細な管理情報は、番組製作者、あるいは一般ユーザにより作成・公開されている必要があるが、放送される全ての音楽番組に対して詳細な管理情報を作成するのは現実的ではない。【解決手段】まず、録画した番組データから信号処理を用いて各楽曲の開始時間・終了時間を検出する。次に、検出したそれぞれの楽曲ごとに、楽曲指紋情報データベースとの照合を行い、メタ情報を認識する。その際、予めＥＰＧ（電子番組表）情報から当該番組の出演アーティスト情報を取得しておき、それらのアーティストに限定した照合を行うことで認識率を高める。最後に、開始時間・終了時間と、認識されたメタ情報を関連付けて保存する。【選択図】図１
2009147775.tif 000002
【特許請求の範囲】
【請求項１】
記録されているテレビ番組画像の番組ジャンルを判定する番組ジャンル判定ステップと、
前記番組ジャンル判定ステップで判定された結果が音楽番組であった場合に、テレビ番組画像から楽曲区間を抽出する楽曲区間抽出ステップと、
前記楽曲区間抽出ステップで抽出された楽曲区間内の連続的な音声信号を抽出する音声波形抽出ステップと、
前記音声波形抽出ステップで抽出された音声波形を、音声波形と楽曲情報を対応付けて保存している楽曲指紋情報データベースと照合し、該楽曲区間に対応する楽曲情報を取得する楽曲指紋情報照合ステップと、
該音楽番組の出演者名を入力し、前記楽曲指紋情報照合ステップで照合する楽曲情報を、該出演者名が含まれる楽曲情報に限定する照合範囲限定ステップと、
前記照合範囲限定ステップで得られた楽曲情報を、前記楽曲区間抽出ステップで抽出された楽曲区間と対応付ける楽曲区間情報生成ステップとを有することを特徴とする番組情報生成方法。
【請求項２】
前記照合範囲限定ステップは、放送波あるいはネットワークを介して送られてくる電子番組表から当該番組の出演者名を抽出し、該楽曲情報データベースの中から、該出演者名が含まれる楽曲情報のみを抽出することを特徴とする、請求項１に記載の番組情報生成方法。
【請求項３】
前記楽曲区間抽出ステップは、音楽番組動画像の映像信号または音声信号が連続的に楽曲シーンの特徴と一致する区間を楽曲区間として抽出することを特徴とする、請求項１に記載の番組情報生成方法。
【請求項４】
請求項１から請求項３のいずれかの請求項に記載の番組情報生成方法で生成された楽曲区間情報を保存する楽曲区間情報保存ステップと、
前記楽曲区間情報保存ステップで保存された楽曲情報及び楽曲区間を基にして、所望の楽曲の記録位置を検索する検索ステップと、
前記検索ステップで検索された記録位置の映像／音声データを再生する再生ステップとを有することを特徴とする番組再生方法。
【請求項５】
請求項１から４のいずれかの請求項に記載の方法を含むプログラム。
【請求項６】
請求項５に記載のプログラムを記録した媒体。
【請求項７】
記録されているテレビ番組画像の番組ジャンルを判定する番組ジャンル判定部と、
前記番組ジャンル判定部で判定された結果が音楽番組であった場合に、テレビ番組画像から楽曲区間を抽出する楽曲区間抽出部と、
前記楽曲区間抽出部で抽出された楽曲区間内の連続的な音声信号を抽出する音声波形抽出部と、
前記音声波形抽出部で抽出された音声波形を、音声波形と楽曲情報を対応付けて保存している楽曲指紋情報データベースと照合し、該楽曲区間に対応する楽曲情報を取得する楽曲指紋情報照合部と、
該音楽番組の出演者名を入力し、前記楽曲指紋情報照合部で照合する楽曲情報を、該出演者名が含まれる楽曲情報に限定する照合範囲限定部と、
前記照合範囲限定部で得られた楽曲情報を、前記楽曲区間抽出部で抽出された楽曲区間と対応付けて保存する楽曲情報保存部と、
前記楽曲情報保存部で保存された楽曲情報及び楽曲区間をキーとして、所望する楽曲の記録位置を検索する検索部と、
前記検索部で検索された記録位置の映像／音声データを再生する再生部とを有することを特徴とする番組再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、録画番組を効率的に視聴するための技術に関し、特に音楽番組の楽曲抽出、及びメタ情報（曲名・アーティスト名等）付与を自動的に行うことで各楽曲の検索性を向上させる方法及び装置等に関する。
【背景技術】
【０００２】
大容量のＨＤＤレコーダやテレビ録画機能付きＰＣの普及によりテレビ録画が手軽になったことに伴い、大量のコンテンツをＨＤＤ上に蓄積しておき、後でまとめて視聴するという視聴スタイルが一般的になりつつある。その一方で、録画された大量のコンテンツ数に対してユーザの視聴時間は限られており、録画はしたものの視聴する時間が無く、一度も見ないままＨＤＤ内に埋もれている死蔵コンテンツが増加している。そのため、ＨＤＤにため込まれた大量の録画コンテンツを限られた時間内で効率的に視聴する技術への要求が高まっている。
【０００３】
特に音楽番組においては、所望する楽曲部分のみを再生することにより視聴時間の大幅な効率化が望めるため、これまでに様々な方法が提案されている。特許文献１では、番組データを録画すると同時に、当該番組中の各楽曲に関する開始時間、終了時間、及び曲名・アーティスト名等が含まれる管理情報を記憶しておき、番組データ中の各楽曲と時刻情報により関連付けることで実現している。
【０００４】
この方法は、録画した番組データ中の各楽曲から楽曲区間を抽出し、当該楽曲に対応する曲名・アーティスト名等のメタ情報を付与するために、各楽曲の開始時間・終了時間とメタ情報が含まれる管理情報を受信することが前提となっている。
【０００５】
このような詳細な管理情報は、番組製作者、あるいは一般ユーザにより作成・公開されている必要があるが、放送される全ての音楽番組に対して詳細な管理情報を作成するのは大変な労力を要し、現実的ではない。
【特許文献１】特開２００７―０２８２２６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明の目的は、番組管理情報を別途作成することなく、音楽番組の各楽曲への検索性を向上させる方法を提供することである。
【課題を解決するための手段】
【０００７】
本発明では、記録されているテレビ番組動画像の番組ジャンルを判定する番組ジャンル判定ステップと、番組ジャンル判定ステップで判定された結果が音楽番組であった場合に、テレビ番組動画像から楽曲区間を抽出する楽曲区間抽出ステップと、楽曲区間抽出ステップで抽出された楽曲区間内の連続的な音声信号を抽出する音声波形抽出ステップと、音声波形抽出ステップで抽出された音声波形を、音声波形と楽曲情報を対応付けて保存している楽曲指紋情報データベースと照合し、楽曲区間に対応する楽曲情報を取得する楽曲指紋情報照合ステップと、音楽番組の出演者名を入力し、楽曲指紋情報照合ステップで照合する楽曲情報を、該出演者名が含まれる楽曲情報に限定する照合範囲限定ステップと、照合範囲限定ステップで得られた楽曲情報を、楽曲区間抽出ステップで抽出された楽曲区間と対応付ける楽曲区間情報生成ステップと、楽曲区間情報を保存する楽曲区間情報保存ステップと、楽曲区間情報保存ステップで保存された楽曲情報及び楽曲区間を基にして、所望する楽曲の記録位置を検索する検索ステップと、検索ステップで検索された記録位置の映像／音声データを再生する再生ステップとを有することを特徴とする番組再生方法を提供する。
【発明の効果】
【０００８】
本発明によれば、番組管理情報を手動で作成することなしに、音楽番組中の各楽曲の頭出し検索、及び曲名・アーティスト名等をキーとしたメタ情報検索が可能となる。
【発明を実施するための最良の形態】
【０００９】
（実施の形態）
図１は、本発明の実施の形態１における番組再生装置のシステム構成図を示している。
【００１０】
図１に示す番組再生装置は、テレビ放送波を介して入力されるテレビ番組動画像の映像／音声データを、テレビ放送波に重畳されて、あるいはネットワークを介して入力されるＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ  Ｐｒｏｇｒａｍ  Ｇｕｉｄｅ、電子番組表）情報と関連付けて保存する映像音声記録部１０１と、ＥＰＧ情報に含まれる番組ジャンル情報をもとに、当該番組が音楽番組かどうかを判定するジャンル判定部１０２と、当該音楽番組データから楽曲区間の開始時間・終了時間を抽出する楽曲区間抽出部１０３と、楽曲区間の音声波形データを抽出する音声波形抽出部１０４と、楽曲指紋情報データベース１０５を参照し、楽曲区間に対応する楽曲情報（曲名、アーティスト名等）を認識する楽曲指紋情報照合部１０６と、ＥＰＧ情報から当該音楽番組の出演者名を取得し、楽曲指紋情報照合部１０６で照合する楽曲情報を、該出演者名が含まれる楽曲情報に限定する照合範囲限定部１０７と、楽曲の開始時間・終了時間と、認識された楽曲情報を関連付けて保存する楽曲情報保存部１０８と、楽曲情報及び楽曲区間をキーとして、所望する楽曲の記録位置を検索する検索部１０９と、記録位置の映像／音声データを再生する再生部から構成される。
【００１１】
以下、図１に沿って本発明の実施の形態１における番組再生装置の詳細を説明する。映像音声記録部１０１はアンテナ１１１を介してテレビ放送波を受信し、任意のテレビ番組の映像／音声信号を、テレビ放送波に重畳されて、あるいは別のネットワークを介して入力される当該番組のＥＰＧ情報と関連付けて保存する。ＥＰＧ情報には、番組ジャンル情報、出演者情報などが含まれている。図２にＥＰＧ情報の例を示す。ここで番組ジャンル情報は、例えば「音楽番組」「スポーツ番組」などのように、テレビ番組をその内容に基づいて分類するために用いられる情報を表しており、図３に示すように、予め定められた識別子により識別可能なものになっている。出演者情報には、当該番組に出演する人名が格納されている。例えば当該番組が音楽番組であった場合、出演アーティスト名、司会者名などが格納されている。
【００１２】
ジャンル判定部１０２は、映像音声記録部１０１で記録されたテレビ番組のジャンル識別子が音楽番組に該当するかどうかを判定し、音楽番組と判定された場合は楽曲区間抽出部１０３に接続される。音楽番組ではない場合には直ちに処理を終了する。
【００１３】
楽曲区間抽出部１０３は、まずジャンル判定部１０２で音楽番組と判定された番組データの映像信号または音声信号から信号処理技術を用いて特徴量を抽出し、次に抽出した特徴量が連続的に楽曲区間の特徴と一致する区間を検知し、楽曲区間の開始時間・終了時間として自動的に抽出する。
【００１４】
音声波形抽出部１０４は、楽曲区間抽出部１０３で抽出されたそれぞれの楽曲区間に含まれる連続的な音声波形データを抽出する。
【００１５】
楽曲指紋情報照合部１０６は、音声波形抽出部１０４で抽出された音声波形データを、音声波形フィンガープリント（楽曲指紋）情報と楽曲情報（曲名、アーティスト名など）とが対応付けて保存されている楽曲指紋情報データベース１０５と照合し、それぞれの楽曲区間に対応する楽曲情報を取得する。
【００１６】
ここで、楽曲指紋情報データベース１０５に登録されている楽曲指紋情報は通常、一般に発売されている音楽ＣＤ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ）から音源を取得し、作成されている。音楽ＣＤは、スタジオ録音などの安定した環境で録音されているものが圧倒的多数を占める。これに対し、テレビの音楽番組で放送される楽曲は、ライブ録音や独自のアレンジを加えた曲になっている場合が少なくない。このような場合、音声波形抽出部１０４で抽出された音声波形データと、楽曲指紋情報データベース１０５に登録されている楽曲指紋情報が本来は同一曲であるにもかかわらず、別の曲として認識されるという認識率の低下を招いてしまう。
【００１７】
本発明では、このような場合の認識率を高めるために、照合範囲限定部１０７を設けている。照合範囲限定部１０７は、ＥＰＧ情報から出演者名を抽出し、楽曲指紋情報データベース１０５の中からアーティスト名が該出演者名と一致するデータのみを照合対象として抽出する。楽曲指紋情報照合部１０６においては、照合範囲限定部１０７で抽出されたデータのみに絞り込んだ照合を行うため、誤認識が発生する可能性を低く抑えることができる。
【００１８】
楽曲情報保存部１０８は、楽曲指紋照合部１０６で得られた楽曲情報と、楽曲区間抽出部１０３で得られた楽曲区間の開始時間・終了時間を関連付けて保存する。図４に楽曲情報保存部１０８で保存される情報の一例を示す。
【００１９】
検索部１０９は、検索キーとして任意の楽曲情報が入力されると、該楽曲情報と対応付けられたテレビ番組動画像データの記録位置を取得する。再生部１１０は、検索部１０９で取得された記録位置の動画像データを再生させる。
【００２０】
以下、本システムを用いて動画像データを再生する処理の流れを、図５のフローチャートに従って説明する。
【００２１】
まず、放送波またはネットワークを介して送出されるＥＰＧ情報から番組ジャンル情報を取得し、音楽番組と判定された場合には処理を継続、音楽番組ではないと判定された場合は直ちに処理を終了する（Ｓ５０１）。
【００２２】
次に、Ｓ５０１で音楽番組と判定された動画像データに対して、信号処理技術を用いて特徴量を抽出し、その特徴量が連続的に楽曲区間の特徴と一致する区間を楽曲区間として抽出する（Ｓ５０２）。
【００２３】
また、Ｓ５０１で音楽番組と判定された動画像データに関連付けられたＥＰＧ情報から、番組の出演者名を抽出しておく（Ｓ５０５）。
【００２４】
Ｓ５０２で楽曲区間が抽出された後、それぞれの楽曲区間に含まれる連続的な音声波形データを抽出し（Ｓ５０３）、楽曲指紋情報と楽曲情報とが対応付けて保存されている楽曲指紋情報データベースと照合することで、それぞれの楽曲区間に対応した楽曲メタ情報を取得する（Ｓ５０４）。
【００２５】
Ｓ５０４で照合を行う際、予め楽曲指紋情報データベースの中から、アーティスト名がＳ５０５で抽出した番組出演者名と一致するデータのみを照合対象として限定しておくことで（Ｓ５０６）、誤認識が発生する可能性を低減させる。
【００２６】
各楽曲区間に対応した楽曲情報が取得されると、Ｓ５０２で得られた楽曲区間の開始時間・終了時間と、楽曲メタ情報を関連付けて保存する（Ｓ５０７）。
【００２７】
保存された動画像データから、ユーザが所望の楽曲のみを再生する際は、まずシステムが保存している楽曲メタ情報のリストを提示する。ユーザはリスト中からアーティスト名や曲名などの楽曲情報を検索キーとして選択し、システムに入力する（Ｓ５０８）。なお、ユーザが検索キーを入力する方法としては、提示されたものから選択する方法だけでなく、ユーザが自由にキーワードを入力して検索する方法でも良い。
【００２８】
楽曲情報の検索キーが入力されると、システムは該当する楽曲情報と関連づけられている動画像データの記録位置を取得し（Ｓ５０９）、その記録位置にある動画像データを再生する（Ｓ５１０）。
【産業上の利用可能性】
【００２９】
以上述べたように本発明によれば、管理情報を予め作成することなしに、音楽番組中の各楽曲の楽曲情報による検索が可能となる。
【図面の簡単な説明】
【００３０】
【図１】本発明の実施の形態１における番組再生装置のシステム構成図
【図２】放送波あるいはネットワークを介して送出されるＥＰＧ情報の一例を示す図
【図３】ＥＰＧにおける番組ジャンル識別番号の一例を示す図
【図４】入力動画像と対応付けて保存される楽曲情報の構造を示す図
【図５】本システムを用いて動画像データを再生する処理の流れを示すフローチャート
【符号の説明】
【００３１】
１０１    映像音声記録部
１０２    ジャンル判定部
１０３    楽曲区間抽出部
１０４    音声波形抽出部
１０５    楽曲指紋情報データベース
１０６    楽曲指紋照合部
１０７    照合範囲限定部
１０８    楽曲情報保存部
１０９    検索部
１１０    再生部
１１１    アンテナ
【図１】
2009147775.tif 000003
【図２】
2009147775.tif 000004
【図３】
2009147775.tif 000005
【図４】
2009147775.tif 000006
【図５】
2009147775.tif 000007