(57)【要約】【課題】  放送局から発信されている放送音声を特定し、これに関連した情報を容易且つ確実に取得する。【解決手段】  ＰＣ２は、受信した放送音声に基づいて所定の方法により当該放送音声の特徴量を第１の特徴量として抽出するとともに、検索サーバ３は、受信した放送音声に基づいて所定の方法により当該放送音声の特徴量を第２の特徴量として抽出し、検索サーバ３は、第１の特徴量と第２の特徴量とを比較し、ＰＣ２に入力した放送音声及び当該放送音声を発信した放送局を特定する。【選択図】  図１
2006319467.tif 000002
【特許請求の範囲】
【請求項１】
放送局からの放送音声を受信する放送受信機と、
前記放送受信機により受信した前記放送音声を入力する入力手段と、
複数の放送局からの放送音声を直接受信する検索サーバと
を含み、
前記入力手段と前記検索サーバとがネットワークを介して接続されてなることを特徴とする音声情報送受信システム。
【請求項２】
前記入力手段は、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第１の特徴量として抽出するとともに、
前記検索サーバは、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第２の特徴量として抽出し、
前記検索サーバは、前記第１の特徴量と前記第２の特徴量とを比較し、前記入力手段に入力した前記放送音声及び当該放送音声を発信した放送局を特定することを特徴とする請求項１に記載の音声情報送受信システム。
【請求項３】
前記検索サーバは、受信した前記放送音声に基づいて実時間で前記第２の特徴量を抽出することを特徴とする請求項２に記載の音声情報送受信システム。
【請求項４】
前記入力手段は、前記放送音声を集音して入力するマイクを有することを特徴とする請求項１〜３のいずれか１項に記載の音声情報送受信システム。
【請求項５】
前記入力手段は、前記放送音声を音声データとして入力する入力端子を有することを特徴とする請求項１〜３のいずれか１項に記載の音声情報送受信システム。
【請求項６】
前記入力手段は、前記探索サーバとのユーザインターフェース部を有しており、
前記検索サーバは、利用者による前記ユーザインターフェース部への１回の操作に基づき、前記放送音声及び当該放送音声を発信した前記放送局を特定する処理を行うことを特徴とする請求項２〜５のいずれか１項に記載の音声情報送受信システム。
【請求項７】
前記検索サーバは、前記入力手段からの指示を待たずに自動的に前記放送音声及び当該放送音声を発信した前記放送局を特定する処理を行うことを特徴とする請求項２〜６のいずれか１項に記載の音声情報送受信システム。
【請求項８】
ネットワークを介して前記入力手段と接続されており、前記検索サーバにより特定された前記放送音声に応じたコンテンツ情報を前記入力手段に対して配信する配信サーバを更に含むことを特徴とする請求項２〜７のいずれか１項に記載の音声情報送受信システム。
【請求項９】
前記入力手段は、放送内容の進行に応じて前記コンテンツ情報を前記配信サーバより受信し、前記コンテンツ情報を自動表示することを特徴とする請求項８に記載の音声情報送受信システム。
【請求項１０】
前記配信サーバは、前記コンテンツ情報の配信により前記入力手段に対して所定金額の課金処理を行うとともに、利用者が前記入力手段に表示された前記コンテンツ情報に基づいて情報・物品の購買を行った際に、前記検索サーバにより特定された前記放送局に所定金額の支払い処理を行うことを特徴とする請求項８又は９に記載の音声情報送受信システム。
【請求項１１】
放送局からの放送音声を受信する放送受信機と、前記放送受信機により受信した前記放送音声を入力する入力手段とを含み、前記入力手段と、複数の放送局からの放送音声を直接受信する検索サーバとがネットワークを介して接続されてなる音声情報送受信システムを用い、
前記入力手段において、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第１の特徴量として抽出するステップと、
前記検索サーバにおいて、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第２の特徴量として抽出するステップと、
前記検索サーバにおいて、前記第１の特徴量と前記第２の特徴量とを比較し、前記入力手段に入力した前記放送音声及び当該放送音声を発信した放送局を特定するステップと
を含むことを特徴とする音声情報送受信方法。
【請求項１２】
前記検索サーバは、受信した前記放送音声に基づいて実時間で前記第２の特徴量を抽出することを特徴とする請求項１１に記載の音声情報送受信方法。
【請求項１３】
前記入力手段は、前記放送音声を集音して入力するマイクを有することを特徴とする請求項１１又は１２に記載の音声情報送受信方法。
【請求項１４】
前記入力手段は、前記放送音声を音声データとして入力する入力端子を有することを特徴とする請求項１１又は１２に記載の音声情報送受信方法。
【請求項１５】
前記入力手段は、前記検索サーバとのユーザインターフェース部を有しており、
前記放送音声及び前記放送局を特定するステップでは、前記検索サーバにおいて、利用者による前記ユーザインターフェース部への１回の操作に基づき、前記放送音声及び前記放送局を特定する処理を行うことを特徴とする請求項１１〜１４のいずれか１項に記載の音声情報送受信方法。
【請求項１６】
前記放送音声及び前記放送局を特定するステップでは、前記検索サーバにおいて、前記入力手段からの指示を待たずに自動的に前記放送音声及び前記放送局を特定する処理を行うことを特徴とする請求項１１〜１４のいずれか１項に記載の音声情報送受信方法。
【請求項１７】
配信サーバがネットワークを介して前記入力手段と接続されており、
前記放送局を特定するステップの後、前記配信サーバにおいて、前記検索サーバにより特定された前記放送音声に応じたコンテンツ情報を前記入力手段に対して配信するステップを更に含むことを特徴とする請求項１１〜１６のいずれか１項に記載の音声情報送受信方法。
【請求項１８】
前記コンテンツ情報を配信するステップの後、前記入力手段において、放送内容の進行に応じて前記コンテンツ情報を前記配信サーバより受信し、前記コンテンツ情報を自動表示するステップを更に含むことを特徴とする請求項１７に記載の音声情報送受信方法。
【請求項１９】
前記コンテンツ情報を配信するステップの後、前記配信サーバにおいて、前記コンテンツ情報の配信により前記入力手段に対して所定金額の課金処理を行うとともに、利用者が前記入力手段に表示された前記コンテンツ情報に基づいて情報・物品の購買を行った際に、前記検索サーバにより特定された前記放送局に所定金額の支払い処理を行うステップを更に含むことを特徴とする請求項１７又は１８に記載の音声情報送受信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、放送局から発信された放送音声に基づいて、利用者が各種情報を得るための音声情報送受信システム及び方法に関する。
【背景技術】
【０００２】
ラジオ放送やテレビ放送などの放送局から発信されている番組の放送音声と関連した情報を、パーソナルコンピュータ（ＰＣ）などの情報端末で表示したい場合、従来では、ＰＣ上で放送局を検索したり、その放送局の持つＷＥＢサイトのＵＲＬを直接入力するなど、利用者にとっては手間のかかる作業を行う必要があった。
【０００３】
従来の技術を用いて、自動的に放送とＷＥＢサイトとの連動を行おうとする際には、ＷＥＢサイトへのアクセスを制御するＰＣ内にテレビチューナやラジオチューナを搭載し、ＰＣ内において、当該放送音声を特定することが必要となる。
【０００４】
音楽の音声データから、流れている音楽が何であるかを特定する技術は既に存在する。この技術は、一般的な音声認識技術が実現困難であるため、認識対象を特定の音楽やコマーシャルなどのごく限られた分野に限定することで認識精度の向上を計っている。しかしながら、この技術では、特定する対象が予めデータベースに登録されている音楽やＣＭといったカテゴリに限定され、例えばラジオ放送やテレビ放送で流れる人間の会話・音声といったものを認識することは困難となっている。
【０００５】
【特許文献１】特開２００４−３６３７４９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
このように従来では、放送局から発信されている放送音声を特定し、これに関連した情報を容易且つ確実に取得する技術は未だ確立されていない現況にある。
【０００７】
本発明は、上記の課題に鑑みてなされたものであり、ＰＣ等の入力手段にテレビチューナやラジオチューナが搭載されていない場合であっても、放送局から発信されている放送音声を特定し、これに関連した情報を容易且つ確実に取得することを可能とする音声情報送受信システム及び方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の音声情報送受信システムは、放送局からの放送音声を受信する放送受信機と、前記放送受信機により受信した前記放送音声を入力する入力手段と、複数の放送局からの放送音声を直接受信する検索サーバとを含み、前記入力手段と前記検索サーバとがネットワークを介して接続されてなるものである。
【０００９】
本発明の音声情報送受信システムの一態様では、前記入力手段は、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第１の特徴量として抽出するとともに、前記検索サーバは、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第２の特徴量として抽出し、前記検索サーバは、前記第１の特徴量と前記第２の特徴量とを比較し、前記入力手段に入力した前記放送音声及び当該放送音声を発信した放送局を特定する。
【００１０】
本発明の音声情報送受信システムの一態様では、前記検索サーバは、受信した前記放送音声に基づいて実時間で前記第２の特徴量を抽出する。
【００１１】
本発明の音声情報送受信システムの一態様では、前記入力手段は、前記放送音声を集音して入力するマイクを有する。
【００１２】
本発明の音声情報送受信システムの一態様では、前記入力手段は、前記放送音声を音声データとして入力する入力端子を有する。
【００１３】
本発明の音声情報送受信システムの一態様では、前記入力手段は、前記探索サーバとのユーザインターフェース部を有しており、前記検索サーバは、利用者による前記ユーザインターフェース部への１回の操作に基づき、前記放送音声及び当該放送音声を発信した前記放送局を特定する処理を行う。
【００１４】
本発明の音声情報送受信システムの一態様では、前記検索サーバは、前記入力手段からの指示を待たずに自動的に前記放送音声及び当該放送音声を発信した前記放送局を特定する処理を行う。
【００１５】
本発明の音声情報送受信システムの一態様では、ネットワークを介して前記入力手段と接続されており、前記検索サーバにより特定された前記放送音声に応じたコンテンツ情報を前記入力手段に対して配信する配信サーバを更に含む。
【００１６】
本発明の音声情報送受信システムの一態様では、前記入力手段は、放送内容の進行に応じて前記コンテンツ情報を前記配信サーバより受信し、前記コンテンツ情報を自動表示する。
【００１７】
本発明の音声情報送受信システムの一態様では、前記配信サーバは、前記コンテンツ情報の配信により前記入力手段に対して所定金額の課金処理を行うとともに、利用者が前記入力手段に表示された前記コンテンツ情報に基づいて情報・物品の購買を行った際に、前記検索サーバにより特定された前記放送局に所定金額の支払い処理を行う。
【００１８】
本発明の音声情報送受信方法は、放送局からの放送音声を受信する放送受信機と、前記放送受信機により受信した前記放送音声を入力する入力手段とを含み、前記入力手段と、複数の放送局からの放送音声を直接受信する検索サーバとがネットワークを介して接続されてなる音声情報送受信システムを用い、前記入力手段において、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第１の特徴量として抽出するステップと、前記検索サーバにおいて、受信した前記放送音声に基づいて所定の方法により当該放送音声の特徴量を第２の特徴量として抽出するステップと、前記検索サーバにおいて、前記第１の特徴量と前記第２の特徴量とを比較し、前記入力手段に入力した前記放送音声及び当該放送音声を発信した放送局を特定するステップとを含む。
【００１９】
本発明の音声情報送受信方法の一態様では、前記検索サーバは、受信した前記放送音声に基づいて実時間で前記第２の特徴量を抽出する。
【００２０】
本発明の音声情報送受信方法の一態様では、前記入力手段は、前記放送音声を集音して入力するマイクを有する。
【００２１】
本発明の音声情報送受信方法の一態様では、前記入力手段は、前記放送音声を音声データとして入力する入力端子を有する。
【００２２】
本発明の音声情報送受信方法の一態様では、前記入力手段は、前記検索サーバとのユーザインターフェース部を有しており、前記放送音声及び前記放送局を特定するステップでは、前記検索サーバにおいて、利用者による前記ユーザインターフェース部への１回の操作に基づき、前記放送音声及び前記放送局を特定する処理を行う。
【００２３】
本発明の音声情報送受信方法の一態様では、前記放送音声及び前記放送局を特定するステップでは、前記検索サーバにおいて、前記入力手段からの指示を待たずに自動的に前記放送音声及び前記放送局を特定する処理を行う。
【００２４】
本発明の音声情報送受信方法の一態様では、配信サーバがネットワークを介して前記入力手段と接続されており、前記放送局を特定するステップの後、前記配信サーバにおいて、前記検索サーバにより特定された前記放送音声に応じたコンテンツ情報を前記入力手段に対して配信するステップを更に含む。
【００２５】
本発明の音声情報送受信方法の一態様では、前記コンテンツ情報を配信するステップの後、前記入力手段において、放送内容の進行に応じて前記コンテンツ情報を前記配信サーバより受信し、前記コンテンツ情報を自動表示するステップを更に含む。
【００２６】
本発明の音声情報送受信方法の一態様では、前記コンテンツ情報を配信するステップの後、前記配信サーバにおいて、前記コンテンツ情報の配信により前記入力手段に対して所定金額の課金処理を行うとともに、利用者が前記入力手段に表示された前記コンテンツ情報に基づいて情報・物品の購買を行った際に、前記検索サーバにより特定された前記放送局に所定金額の支払い処理を行うステップを更に含む。
【発明の効果】
【００２７】
本発明によれば、ＰＣ等の入力手段にテレビチューナやラジオチューナが搭載されていない場合であっても、放送局から発信されている放送音声を特定し、これに関連した情報を容易且つ確実に取得することが可能となる。
【発明を実施するための最良の形態】
【００２８】
以下、本発明を適用した音声情報送受信システム及び方法の具体的な実施形態について、図面を参照しながら詳細に説明する。
図１は、本実施形態による音声情報送受信システムの概略構成を示す模式図である。
【００２９】
この音声情報送受信システムは、放送局からの放送音声を受信する放送受信機１と、利用者（ユーザ）の情報端末であるＰＣ２と、複数の放送局からの放送音声を直接受信する検索サーバ３と、放送音声に応じたコンテンツ情報をＰＣ２に対して配信する配信サーバ４とを含み構成されている。ここで、ＰＣ２と検索サーバ３、及びＰＣ２と配信サーバ４とは、コンピュータネットワーク（ＬＡＮ、インターネットの等のＷＡＮ、無線通信ネットワーク等）システムにおける通信媒体（光ファイバ等の有線回線や無線回線等）を介して接続されている。
【００３０】
放送受信機１は、ラジオ放送局やテレビ放送局等の複数の放送局から１つの放送局を特定して、当該放送局から放送音声（ここでは、主に音楽を対象とするが、これに限定されることなく、ラジオ・テレビ放送で流れる人間の会話・音声等でも良い。）を受信するものである。
【００３１】
ＰＣ２は、ディスプレイ等の表示手段１１と、放送受信機１から発する放送音声を集音して当該ＰＣ２へ入力するためのマイク１２とを有している。ＰＣ２は、所定の方法により、マイク１２により入力した放送音声の特徴量を第１の特徴量として抽出（エンコード）する機能を有している。ここで、ＰＣ２としては、マイク１２の代わりに、或いはマイク１２と共に、放送音声を音声データとして入力する入力端子を有するようにしても良い。また、ＰＣ２は、検索サーバ３とのユーザインターフェース部を有している。
【００３２】
検索サーバ３は、放送音声を電波又はディジタル情報により複数の放送局から直接受信するサーバであり、受信した放送音声に基づいて所定の方法により実時間（リアルタイム）で放送音声の特徴量を第２の特徴量として抽出する機能を有している。検索サーバ３は、各放送音声から抽出した第２の特徴量を保存するデータベース１３を有している。なお、検索サーバ３を複数の相異なるサーバを集合させて構成することも可能である。
【００３３】
本実施形態では、放送局からの放送音声を認識し、ユーザが現在視聴している放送を特定するために、音声データをリアルタイムで取得してエンコードした放送音声のみを音声認識の対象とて限定することにより、既存の音楽認識では実現不可能であった放送における音声データの認識を可能にしている。
【００３４】
ここで、ＰＣ２及び検索サーバ３において、放送音声の特徴量を抽出する一手法について図２を用いて説明する。
先ず、図２（ａ）に示すように、放送音声の音声波形から、例えば１６個のサンプリングポイントにおける音声データを取得する。取得した音声データを式（１）の入力ベクトルｘとする。
【００３５】
【数１】
2006319467.tif 000003
【００３６】
次に、ベクトル量子化により、予め用意された複数、例えば式（２）に示すような２５６種のコードブックベクトルｔ1〜ｔ256と入力ベクトルｘとを比較する。ここでは、式（３）に基づき、入力ベクトルとの距離が最小となるようなコードブックベクトルを特定する。
【００３７】
【数２】
2006319467.tif 000004
【００３８】
【数３】
2006319467.tif 000005
【００３９】
次に、図２（ｂ）に示すように、サンプリングポイントを時間軸上でずらしながら、一定時間における最小のコードブックベクトルのインデックスの出現確率（頻度）を計算する。そして、各コードブックベクトルのインデックスの出現確率を表す新たなベクトルを、一定時間における放送音声の特徴量とする。
【００４０】
更に、検索サーバ３は、第１の特徴量と第２の特徴量とを比較し、ＰＣ２に入力した放送音声及び当該放送音声を発信した放送局、換言すれば当該放送局及びその発信する放送音声を含む番組情報を特定する機能を有している。
【００４１】
放送音声及び放送局を特定するには、ユーザは、ＰＣ２のユーザインターフェース部に対して所定の操作、例えば図３に示すように、ＰＣ２の画面に表示された放送連動（BC Sync）ボタンを１回クリックするワンタッチ動作を行う。この操作に起因して、検索サーバ３は、放送音声及び放送局の特定処理を行う。なおこの場合、検索サーバ３は、ＰＣ２からの放送連動ボタンを介した指示を待たずに自動的に放送音声及び放送局を特定する処理を行うようにしても良い。
【００４２】
配信サーバ４は、検索サーバ３により特定された放送局の放送音声に応じたコンテンツ情報をＰＣ２に対して配信するサーバである。ここで、ＰＣ２は、放送内容の進行に応じてコンテンツ情報を配信サーバ４より受信し、コンテンツ情報を表示手段１１に自動表示する機能を有している。
【００４３】
即ち、ユーザは、放送連動ボタンをクリックすることにより（或いは自動的に）検索サーバ３により特定された放送音声に応じたコンテンツ情報に基づき、放送音声の音声データ等の情報や当該放送音声に関連する物品の購買を、コンピュータネットワークシステムを介して配信サーバ４に要求することができる。
【００４４】
この場合、配信サーバ４は、コンテンツ情報の配信によりＰＣ２に対して所定金額の課金処理を行うとともに、ユーザがＰＣ２に表示されたコンテンツ情報に基づいて情報・物品の購買を行った際に、検索サーバ３により特定された放送局に所定金額の手数料等の支払い処理を行う。
【００４５】
ここで、図１及び図４を用いて、図１の音声情報送受信システムを用いた音声情報送受信方法について説明する。
図４は、本実施形態による音声情報送受信方法をステップ順に示すフロー図である。
【００４６】
先ず、ユーザ側の処理として、ＰＣ２は、放送受信機１から発する放送音声をマイク１２により集音して入力する（ステップＳ１１）。
続いて、ＰＣ２は、マイク１２により入力した放送音声の特徴量を第１の特徴量として抽出する（ステップＳ１２）。
【００４７】
このＰＣ２の処理と並行して、或いはＰＣ２の処理と別個独立に、検索サーバ３は、放送音声を電波又はディジタル情報により複数の放送局から直接受信する（ステップＳ２１）。
【００４８】
続いて、検索サーバ３は、受信した放送音声に基づいてリアルタイムで放送音声の特徴量を第２の特徴量として抽出する（ステップＳ２２）。そして、検索サーバ３は、各放送音声から抽出した第２の特徴量をデータベース１３に保存する（ステップＳ２３）。
【００４９】
続いて、ユーザ側の処理として、ＰＣ２は、ユーザによる放送連動ボタンのクリックに基いて第１の特徴量の情報を検索サーバ３に送信する（ステップＳ１３）。ここで、放送連動ボタンがクリックされない場合には、クリックされるまでステップＳ１１及びステップＳ１２が繰り返される。放送連動ボタンがクリックされた場合、検索サーバ３は、第１の特徴量の情報に基づき、データベース１３に保存された第２の特徴量を読み込んで、当該第２の特徴量と第１の特徴量とを比較し（マッチング処理）、ＰＣ２に入力した放送音声及び当該放送音声を発信した放送局、換言すれば当該放送局及びその発信する放送音声を含む番組情報を特定する（ステップＳ１４）。
【００５０】
ここで、検索サーバ３が、ユーザによるＰＣ２からの放送連動ボタンを介した指示を待たずに自動的に放送音声及び放送局を特定する処理を行う構成の場合には、ステップＳ１３は省略され、ステップＳ１２及びステップＳ２３の後にステップＳ１４へ進む。
【００５１】
続いて、ＰＣ２は、検索サーバ３により特定された放送局の放送音声に応じたコンテンツ情報を、配信サーバ４に対して要求する（ステップＳ１５）。この要求に基づき、配信サーバ４は、放送音声に応じたコンテンツ情報をＰＣ２に送信する（ステップＳ１６）。そして、ＰＣ２は当該コンテンツ情報を表示手段１１に表示する（ステップＳ１７）。
【００５２】
以上説明したように、本実施形態によれば、ＰＣ２にテレビチューナやラジオチューナが搭載されていない場合であっても、現在利用者が現在視聴している放送の音声データを元に、自動的に視聴している放送局を特定し、それに応じたコンテンツ情報を表示することで、利用者の作業を簡略化し、放送局とＷＥＢサイト（探索サイト３）との連動を容易且つ確実に行うことができる。
【図面の簡単な説明】
【００５３】
【図１】本発明の実施形態による音声情報送受信システムの概略構成を示す模式図である。
【図２】放送音声の特徴量を抽出する一手法について説明するための模式図である。
【図３】ＰＣの画面に表示された放送連動（BC Sync）ボタンを示す模式図である。
【図４】本発明の実施形態による音声情報送受信方法をステップ順に示すフロー図である。
【符号の説明】
【００５４】
１  放送受信機
２  パーソナルコンピュータ（ＰＣ）
３  検索サーバ
４  配信サーバ
１１  表示手段
１２  マイク
１３  データベース
【図１】
2006319467.tif 000006
【図２】
2006319467.tif 000007
【図３】
2006319467.tif 000008
【図４】
2006319467.tif 000009