(57)【要約】【課題】ラジオを聴取中のリスナーをリアルタイムで認証することが可能な技術を提供すること。【解決手段】リスナー認証システムは、サーバ１０と、サーバ１０と通信可能であって、ラジオ番組のリスナーが操作する携帯電話２０とからなる。リスナーは、携帯電話２０を手元のラジオ３０にかざして、そのスピーカから出力されるオンエア中のラジオ番組の音を取り込む。携帯電話２０に取り込まれたラジオの聴取音信号からは聴取音特徴データが抽出され、聴取時刻情報とともにサーバ１０に送信される。サーバ１０は、ラジオ番組の放送音信号から放送音特徴データを抽出し、リスナーの携帯電話２０から送信された聴取音特徴データと各データの時刻情報を比較する。サーバ１０の認証手段１０６は、音特徴データならびに時刻情報の間に一致性が認められたことを条件に、リスナーがそのラジオ番組を聴取したものと認証する。【選択図】図１
2020088672.tif 000002
【特許請求の範囲】
【請求項１】
放送中のラジオ番組の放送電波信号から音信号（これを放送音信号という）を復調する復調手段と、
リスナーがラジオにかざして当該ラジオのスピーカから出力される前記ラジオ番組の音を取り込み、音信号（これを聴取音信号という）に変換するマイクロホンと、
前記放送音信号及び前記聴取音信号を比較する比較手段と、
前記比較手段により前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証する認証手段と
を備える、リスナー認証システム。
【請求項２】
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出する第一特徴抽出手段と、前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出する第二特徴抽出手段とを更に備え、
前記比較手段が、前記放送音特徴データ及び前記聴取音特徴データを比較する、請求項１に記載のリスナー認証システム。
【請求項３】
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるタイムスタンプ手段を更に備える、請求項２に記載のリスナー認証システム。
【請求項４】
前記放送音特徴データ及び前記聴取音特徴データが一致すると判定され、かつ、これら音特徴データが一致する時間位置における前記放送音信号の放送時刻及び前記聴取音特徴データが示す聴取時刻が一致すると判定された場合に、前記認証手段が前記リスナーを認証する、請求項３に記載のリスナー認証システム。
【請求項５】
前記所定の方式が、音の周波数スペクトルを解析する方式である、請求項２に記載のリスナー認証システム。
【請求項６】
前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルの時間変化を示すスペクトグラムとして表現可能である、請求項５に記載のリスナー認証システム。
【請求項７】
前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルのピーク周波数のペアとそれらの距離とを要素として含むベクトルの配列データに基づくものである、請求項６に記載のリスナー認証システム。
【請求項８】
前記放送音信号及び前記聴取音信号の各音特徴データが、前記ベクトルの配列データをハッシュ化したデータである、請求項７に記載のリスナー認証システム。
【請求項９】
サーバが、少なくとも前記第一特徴抽出手段及び前記比較手段を備え、
リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン及び前記第二特徴抽出手段を備える、請求項２〜８の何れか１項に記載のリスナー認証システム。
【請求項１０】
サーバが、少なくとも前記第一特徴抽出手段を備え、
リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン、前記第二特徴抽出手段及び前記比較手段を備える、請求項２〜８の何れか１項に記載のリスナー認証システム。
【請求項１１】
ラジオ番組の番組識別情報と、当該ラジオ番組を聴取したと認証されたリスナーの情報とを関連付けて記録するデータベースを更に備える、請求項１〜８の何れか１項に記載のリスナー認証システム。
【請求項１２】
前記データベースにおいて、リスナーの識別情報に基づいて当該リスナーが聴取したラジオ番組の聴取認証履歴が検索可能に記録されている、請求項１１に記載のリスナー認証システム。
【請求項１３】
放送中のラジオ番組の放送電波信号から放送音信号を復調するステップと、
リスナーが情報端末をラジオにかざして、当該ラジオのスピーカから実際に出力される前記ラジオ番組の音を取り込み、聴取音信号に変換するステップと、
前記放送音信号及び前記聴取音信号を比較するステップと、
前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証するステップと
を含む、リスナー認証方法。
【請求項１４】
情報端末にインストールされるアプリケーションプログラムであって、少なくとも請求項２〜８の何れか１項に記載の第二特徴抽出手段の機能を、当該情報端末のプロセッサが行う演算処理により実現させるアプリケーションプログラム。
【請求項１５】
情報端末にインストールされるアプリケーションプログラムであって、少なくとも請求項２〜８の何れか１項に記載の第二特徴抽出手段及び比較手段の機能を、当該情報端末のプロセッサが行う演算処理により実現させるアプリケーションプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ラジオ番組の聴取状況を把握するための技術に関する。
【背景技術】
【０００２】
テレビやラジオ等の放送事業において、広告収入は、全体の８割を超えることが報告されている。したがって、放送事業者にとっては、より多くの視聴者（リスナー）を獲得し番組を視聴する機会を増やすことが、経営上最も重要な課題といえる。例えばラジオの場合、カーラジオや携帯型ラジオなどで聴取する者が多く、正確な聴取率を算出するために、現状では調査対象者に実際にラジオから聴取した番組をシートに書き込んでもらう日記形式調査が主流となっている。
【０００３】
このような日記形式の聴取率調査は、リスナー（調査対象者）にとっては非常に煩雑であるうえに、最終的な集計結果を得るまでに時間もかかる。また、調査の精度に関してはリスナーの回答精度に大きく依存するため、人的な回答誤差を含む可能性が高い。このような課題に関連し、例えば放送中のラジオ音声を解析することにより、放送局、放送番組又はコンテンツ等を自動的に識別する各種技術が提案されている。
【０００４】
例えば特許文献１に開示される調査装置は、カーラジオのスピーカから出力される音声と、予め車両に搭載した基準ラジオで独自に再生した音声とを、基準ラジオの選局周波数を逐次走査しながら比較することで、聴取局を特定する。各車両で聴取局が特定された計測データは、無線通信にて調査センターに送信され、聴取率の集計がリアルタイムで行われる。各車両に搭載される調査装置においては、ラジオ音声の周波数スペクトル信号同士が比較される。なお、放送番組内容の比較又は特定に関して、例えば特許文献２には、オーディオ又はビデオ信号から選択したサンプル、ハッシュ、フィンガープリントが識別のための代表値として使用できることが示唆されている。
【０００５】
更に、例えば特許文献３のカーラジオ聴取状況調査方法によれば、カーラジオの受信信号から抽出処理した特徴量を調査センターに送信し、調査センター側でデータベースに記録したラジオ放送のマスターデータの特徴量と各車両のカーラジオで抽出した特徴量とを比較することにより各放送局の聴取状況の調査を可能としている。特許文献３によれば、ラジオで選局された検波信号をデジタルフィルタにより複数の通過帯域別信号に分割し、各通過帯域別信号の平均振幅を対数変換して得たパワーベクトルを上記特徴量とすることが示唆されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平７−３２７０１７号公報
【特許文献２】特表２０１７−５３５２１４号公報
【特許文献３】特開平１１−２７５０３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述した従来の技術は、何れも作動中のラジオが、どのラジオ放送局又はラジオ番組を選局しているかによって聴取状況を判断するものであり、リスナーが確かにその放送番組を聴取していたことまでをも証明するものではない。逆に言えば、ラジオ番組を聴取しているリスナーをリアルタイムで認証する仕組みが提供できれば、聴取率の正確な算出のみならず、例えばリスナー参加型のインターアクティブな番組制作等の可能性の拡大が期待できる。
【０００８】
本発明は、こうした事情に鑑みてなされたものであり、ラジオを聴取中のリスナーをリアルタイムで認証することが可能な技術を提供することを目的としている。
【課題を解決するための手段】
【０００９】
上述した課題を解決するため、本発明は、放送中のラジオ番組の放送電波信号から音信号（これを放送音信号という）を復調する復調手段と、リスナーがラジオにかざして当該ラジオのスピーカから出力される前記ラジオ番組の音を取り込み、音信号（これを聴取音信号という）に変換するマイクロホンと、前記放送音信号及び前記聴取音信号を比較する比較手段と、前記比較手段により前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証する認証手段とを備える、リスナー認証システムである。
【００１０】
リスナー認証システムは、前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出する第一特徴抽出手段と、前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出する第二特徴抽出手段とを更に備え、前記比較手段が、前記放送音特徴データ及び前記聴取音特徴データを比較することが好ましい。
【００１１】
また、リスナー認証システムは、リスナーがラジオ番組を聴取した時刻情報を前記聴取音信号に関連付けるタイムスタンプ手段を更に備えることが好ましい。
【００１２】
また、リスナー認証システムは、前記放送音特徴データ及び前記聴取音特徴データが一致すると判定され、かつ、これら音特徴データが一致する時間位置における前記放送音信号の放送時刻及び前記聴取音特徴データが示す聴取時刻が一致すると判定された場合に、前記認証手段が前記リスナーを認証することが好ましい。
【００１３】
また、リスナー認証システムは、前記所定の方式が、音の周波数スペクトルを解析する方式であることが好ましい。
【００１４】
また、リスナー認証システムは、前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルの時間変化を示すスペクトグラムとして表現可能であることが好ましい。
【００１５】
また、リスナー認証システムは、前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルのピーク周波数のペアとそれらの距離とを要素として含むベクトルの配列データに基づくものであることが好ましい。
【００１６】
また、リスナー認証システムは、前記放送音信号及び前記聴取音信号の各音特徴データが、前記ベクトルの配列データをハッシュ化したデータであることが好ましい。
【００１７】
また、リスナー認証システムは、サーバが、少なくとも前記第一特徴抽出手段及び前記比較手段を備え、リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン及び前記第二特徴抽出手段を備えることが好ましい。
【００１８】
また、リスナー認証システムは、サーバが、少なくとも前記第一特徴抽出手段を備え、リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン、前記第二特徴抽出手段及び前記比較手段を備えるものでもよい。
【００１９】
また、リスナー認証システムは、ラジオ番組の番組識別情報と、当該ラジオ番組を聴取したと認証されたリスナーの情報とを関連付けて記録するデータベースを更に備えることが好ましい。
【００２０】
また、リスナー認証システムは、前記データベースにおいて、リスナーの識別情報に基づいて当該リスナーが聴取したラジオ番組の聴取認証履歴が検索可能に記録されていることが好ましい。
【００２１】
また、本発明は、放送中のラジオ番組の放送電波信号から放送音信号を復調するステップと、リスナーが情報端末をラジオにかざして、当該ラジオのスピーカから実際に出力される前記ラジオ番組の音を取り込み、聴取音信号に変換するステップと、前記放送音信号及び前記聴取音信号を比較するステップと、前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証するステップとを含む、リスナー認証方法である。
【００２２】
また、本発明は、情報端末にインストールされるアプリケーションプログラムであって、少なくとも前記第二特徴抽出手段の機能を、当該情報端末のプロセッサが行う演算処理により実現させるアプリケーションプログラムである。
【００２３】
また、本発明は、情報端末にインストールされるアプリケーションプログラムであって、少なくとも前記第二特徴抽出手段及び前記比較手段の機能を、当該情報端末のプロセッサが行う演算処理により実現させるアプリケーションプログラムであってもよい。
【発明の効果】
【００２４】
本発明によれば、所定のラジオ番組を聴取中のリスナーを、リアルタイムで認証することができる。本システムを利用することにより、例えばリスナーに手間を取らせることなく、ラジオ番組の聴取率を、迅速かつ正確に算出することができる。また、リスナー認証を、ラジオ番組中のプレゼントの応募やイベントへの参加等、多様な目的にも応用することができる。
【図面の簡単な説明】
【００２５】
【図１】本発明の一実施形態による、リスナー認証システムを説明するための概念図である。
【図２】図１のリスナー認証システムの機能ブロック図である。
【図３】ある音声をスペクトル解析して得たスペクトグラムを例示する図である。
【図４】図３のスペクトグラムに基づいて、パワースペクトルのピークをプロットした図である。
【図５】図４のピークスペクトグラムにより、ピークのペアを結び付けて得られるベクトル配列を説明するための図である。
【図６】放送音と聴取音の比較認証処理を例示するフローチャートである。
【図７】ある時間位置で互いに一致する、放送音及び聴取音を例示する図である。
【図８】自動音声応答装置（ＩＶＲ）を使ってリスナー認証を行う手順を例示するフローチャートである。
【発明を実施するための形態】
【００２６】
以下、図面を参照して、本発明に係るリスナー認証システムの実施形態を説明する。図１は、本発明の一実施形態によるリスナー認証システムを説明するための概念図である。リスナー認証システムは、本サービスを提供するためのクラウド上のコンピューターであるサーバ１０と、ラジオ３０のリスナーが操作する情報端末としての携帯電話２０とが、通信可能に接続されたシステムとして構成される。リスナーの携帯電話２０は、例えばそのＷｉ−Ｆｉ接続機能を使いインターネットを介してサーバ１０に接続される。
【００２７】
クラウドには、リスナー認証の対象となるラジオ番組の音声（本明細書ではこれを「放送音」という。）を取得するためのラジオ受信機１２を設置することができる。また、クラウドは、エリア内の各ラジオ放送局が放送するラジオ番組を常時録音する録音装置（図示略）を備えてもよい。そしてサーバ１０は、その録音装置から、リスナー認証のための放送音の音信号を再生してもよい。また、サーバ１０は、ラジオ放送局から配信されるデジタルのオーディオストリームデータを通じて放送音を得てもよい。更にクラウドには、放送音の音特徴データ、リスナーのアカウント登録情報、リスナーが聴取したラジオ番組の聴取認証履歴情報等を記録するデータベース１１を備えてもよい。
【００２８】
本リスナー認証システムは、ラジオのリスナーをリアルタイムで認証するために、上述の放送音の音声と、リスナーが手元のラジオ３０に携帯電話２０をかざして取り込んだラジオ音声（本明細書ではこれを「聴取音」という。）とを比較し、それらの間に一致性が認められた場合に、当該リスナーがそのラジオ番組を聴取していることを認証する。
ここで、ラジオの「音声」には、アナウンサー等が発話する通常の意味での音声の他、コマーシャル、楽曲及び効果音等、ラジオから流れる全ての音が対象となる。なお、楽曲の場合は、演奏の一部が繰り返される場合も多いので、リアルタイムの認証対象からは除外してもよい。
【００２９】
リスナー認証システムの構成例を更に詳細に説明する。図２は、一実施形態によるリスナー認証システムの機能ブロック図である。図２において、サーバ１０は、上述した放送音を得るために、認証対象のラジオ番組の放送電波を選局する同調器１２１と、選局した放送電波信号から音信号を検波（復調）する検波器（復調器）１２２とを備える。なお、同調器１２１及び検波器（復調器）１２２を上述のラジオ受信機１２により構成してもよい。
【００３０】
サーバ１０は、また、Ａ／Ｄ変換器１０１、特徴抽出手段１０２及び記録手段１０３を備えている。認証対象のラジオ番組の音信号は、Ａ／Ｄ変換器１０１により例えば数十ｋＨｚのサンプリング周波数でデジタル変換された後、特徴抽出手段１０２により音特徴データが抽出される。特徴抽出手段１０２は、音信号の周波数及び位相の時間変化をスペクトル解析することにより、音特徴データを抽出することが好ましい。ラジオ音声から音特徴データを抽出して比較することにより、データのトランザクションを軽減し、また聴取音の音量差やノイズ等の影響を無くして、高い精度での比較処理が可能となる。
【００３１】
ここで、特徴抽出手段１０２が、ラジオ音声から音特徴データを抽出する解析方式の一例を具体的に説明する。特徴抽出手段１０２は、先ず、デジタル音信号に対し、短時間フーリエ変換（ＳＴＦＴ；Short Time Fourier Transform）を掛け、音の周波数領域におけるパワースペクトルの時間変化を示すスペクトグラムを得る。窓関数（フレーム）のシフト時間は、例えば数十ミリ秒〜数百ミリ秒程度とすることができる。ここで、図３に、ある音声をスペクトル解析して得たスペクトグラムを例示する。図３には、時間を横軸、周波数を縦軸とし、スペクトルのパワーが濃淡（グレースケール）で示される。
【００３２】
このスペクトグラムから、ノイズを除去し、処理データをよりダウンサイズするために、パワースペクトルのピーク（局所的最大値）を求め、そのピークをスペクトグラムにプロットしてもよい（図４参照）。例えば、振幅にハイパスフィルタを掛け対数変換することにより、高振幅を強調したパワースペクトルのピークを得ることができる。
【００３３】
図３及び図４に例示されるような音の周波数の時間変化を示すスペクトグラムは、音声の特徴を示すいわばフィンガープリントとしてその特徴を画像化したものである。よって、放送音と聴取音とを、それぞれのスペクトグラムで比較することができる。
【００３４】
更に特徴抽出手段１０２は、上述のスペクトグラムから、ピーク周波数のペアとそれらの距離を要素として含むベクトルの配列データを、本発明でいう音特徴データとして抽出してもよい。具体的には、図５に示されるように、ある時間Ｗにおいて任意に選択したアンカーポイントＡｆ（Ｗ）と、そのアンカーポイントＡｆ（Ｗ）からみて所定エリア内にある複数のピークＢｆ１（Ｗ），Ｂｆ２（Ｗ），Ｂｆ３（Ｗ），・・・とを結び付けたベクトルの配列ＭＢｆ（Ｗ）を求める。
ＭＢｆ（Ｗ）＝[Ｐｆ（Ｗ），ΔＰｆｎ（Ｗ），ΔＴｆｎ（Ｗ）]      …（１）
ここで、ベクトル要素Ｐｆ（Ｗ）はアンカーポイントＡｆ（Ｗ）の周波数、ΔＰｆｎ（Ｗ）は所定エリア内のｎ番目のピークＢｆｎ（Ｗ）とアンカーポイントＡｆ（Ｗ）との周波数差、ΔＴｆｎ（Ｗ）はそのｎ番目のピークＢｆｎ（Ｗ）とアンカーポイントＡｆ（Ｗ）との時間差である。
【００３５】
また、アンカーポイントは、時間Ｗにおいて複数選択されるが、例えば可聴領域において予め任意に定めた各周波数（例えばｆ＝１ｋＨｚ、２ｋＨｚ、３ｋＨｚ、・・・等）に最も近い位置にそれぞれピークを持つポイントとしてもよい（例えばＡ１ｋＨｚ（Ｗ），Ａ２ｋＨｚ（Ｗ），Ａ３ｋＨｚ（Ｗ），・・・等）。
【００３６】
そして、特徴抽出手段１０２は、所定の時間Ｗ毎（Ｗ＝１，２，３，・・・）にスペクトグラムから得たベクトル配列ＭＢｆ（１）、ＭＢｆ（２）、ＭＢｆ（３）、・・・を音特徴データとすることができる。所定の時間Ｗの間隔は、上述の短時間フーリエ変換時の窓関数のシフト時間が望ましいが、それよりも長い間隔であってもよい。
また、特徴抽出手段１０２は、音特徴データ間の比較を容易にするために、各時間Ｗのベクトル配列ＭＢｆ（Ｗ）を固定長のデータにハッシュ化することが好ましい。
【００３７】
図２に戻り、記録手段１０３（又はデータベース１１）には、特徴抽出手段１０２によって抽出された、放送音の音特徴データ（以下「放送音特徴データ」という。）が、その放送音の収録時刻（放送時刻）の情報とともに記録される。
【００３８】
リスナーが操作する携帯電話２０は、マイクロホン２０１、Ａ／Ｄ変換器２０２、特徴抽出手段２０３及び送信手段２０６を備えている。リスナーは、認証を求めるラジオ番組をラジオ３０で聴取中に携帯電話２０をラジオ３０にかざし、そのラジオ３０のスピーカから実際に出力されている音声を、例えば数秒間、携帯電話２０のマイクロホン２０１に取り込む。
【００３９】
マイクロホン２０１は、取り込んだ聴取音を音信号（聴取音信号）に変換する。Ａ／Ｄ変換器２０２は、聴取音信号を、例えば数十ｋＨｚのサンプリング周波数でデジタル変換する。特徴抽出手段２０３は、サーバ１０の上述の特徴抽出手段１０２と同一の解析方式により、聴取音信号から音特徴データ（以下「聴取音特徴データ」という。）を抽出する。
【００４０】
携帯電話２０は、また、タイムスタンプ手段２０４と、送信手段２０６とを備えている。タイムスタンプ手段２０４は、通信キャリアの基地局から定期的に同期した正確な時刻情報を得ており、リスナーが携帯電話２０をラジオ３０にかざしてラジオ音声を聴取する間に刻まれる聴取時刻情報（タイムスタンプ情報）を聴取音特徴データに関連付ける。そして、送信手段２０６は、特徴抽出手段２０３による抽出処理に連続して、聴取音特徴データ、聴取時刻情報、及びリスナーＩＤをサーバ１０に送信する。
【００４１】
サーバ１０は、また、受信手段１０４、比較手段１０５及び認証手段１０６を備えている。受信手段１０５は、携帯電話２０から送信された聴取音特徴データを受信する。比較手段１０５は、記録手段１０３に収録されている放送音信号（本実施形態では放送音特徴データ）と、携帯電話２０から送信された聴取音信号（本実施形態では聴取音特徴データ）とを比較する。
【００４２】
図６のフローチャートに示すように、比較手段１０５は、聴取音特徴データが示す聴取時刻が、対象ラジオ番組の認証対象時間帯にあるか否か判断する（ステップＳ１）。聴取時刻が認証対象時間帯にある場合（ステップＳ１；ＹＥＳ）、比較手段１０５は、当該ラジオ番組の認証対象時間帯に放送された放送音の放送音特徴データに対し、聴取時刻を目途に、聴取音特徴データを時間軸でスイープする（ステップＳ２）。比較手段１０５は、図７に示すように、認証時間帯に放送されたラジオ番組の放送音特徴データと聴取音特徴データとを対比した際の類似指数が所定のしきい値以上となった場合に、これら音特徴データが一致すると判定する（ステップＳ３；ＹＥＳ）。
【００４３】
比較手段１０５は、更に、音特徴データ同士が一致する時間位置における、放送音信号の放送時刻と、聴取音特徴データが示す聴取時刻との誤差があるしきい値以下で一致するか否か判定する（ステップＳ４）。
【００４４】
最終的に、認証手段１０６は、放送音特徴データ及び聴取音特徴データが一致し、かつ、これらの時刻（時間位置）も一致する場合に（ステップＳ４；ＹＥＳ）、当該リスナーが当該ラジオ番組を確かに聴取したと認証する（ステップＳ５）。
なお、聴取音の聴取時刻が認証対象時間帯外の場合（ステップＳ１；ＮＯ）、放送音特徴データ及び聴取音特徴データが一致しない場合（ステップＳ３；ＮＯ）、及び仮に放送音と聴取音とが一致してもそれらの時刻（時間位置）が一致しない場合には（ステップＳ４；ＮＯ）、認証手段１０６は、当該リスナーを認証しない（ステップＳ６）。
【００４５】
なお、本実施形態のリスナー認証システムにおいて、リスナーが聴取音を取り込むタイミングの例として次のパターンが挙げられる。
（１）任意時間帯：
認証対象時間帯がラジオ番組の全体に渡る場合、リスナーが聴取音を取り込むタイミングは当該ラジオ番組の放送中の時間帯であればいつでもよい。
（２）固定時間帯：
ラジオ番組の例えば開始直後から５分間のように特定の時間帯に固定してもよい。認証対象時間帯を放送後数分等に固定することで、集計される聴取率の精度を高めることができる。また、例えばコマーシャルの前後に認証対象時間帯を設ければ、そのコマーシャルの聴取数をより一層高めることが期待できる。
（３）指定時間帯：
ラジオ番組の生放送中に、例えばアナウンサーが「今から５分間リスナー認証します。携帯電話をラジオにかざしてください。」と指定してもよい。この場合、リスナーは認証対象時間帯を予測することができないので、リスナーの関心を当ラジオ番組に長く留めておくことができる。
また、例えばプレゼント抽選への応募の場合など、その案内を放送する時間帯のみに認証対象時間帯を限定してもよい。
【００４６】
また、認証手段１０６は、番組放送中、一回の時間帯における音声の一致だけで認証を判定するのではなく、複数回の組み合わせで一致を判定した場合に認証を確定してもよい。例えば、ラジオ番組の開始直後から５分間に一度、聴取音の一致性を判定した後、同じリスナーが当該番組中に指定された時間帯に２度目の一致性が確認された場合にのみ当該リスナーの認証を確定させてもよい。
或いは、ラジオ番組におけるプレゼントの抽選予告のときに最初のリスナーの認証を行って応募の資格を得て、更に番組中に予告なく「今からプレゼントの抽選を行います。携帯電話をラジオにかざしてください。」とアナウンスされた２回目の時間帯で認証がされたことを以って、プレゼントの本抽選への参加とすることもできる。
【００４７】
クラウドのデータベース１１には、本システムを利用する各リスナーのアカウント登録情報や、各リスナーの聴取認証履歴情報等が記録される。リスナーは、アカウント登録情報として、リスナーＩＤ（又は電話番号）、ログインパスワード、地域、性別、年代、所属、趣味等の情報をデータベース１１に登録することができる。また、聴取認証履歴情報には、ラジオ番組の番組識別情報と、当該ラジオ番組を聴取したと認証されたリスナーＩＤとが関連付けられる。ラジオ番組を例えば１５分毎、或いはコーナ毎のブロックに分け、それらブロック毎にリスナーの認証履歴を記録してもよい。
【００４８】
図２の実施形態においては、Ａ／Ｄ変換器２０２、特徴抽出手段２０３及びタイムスタンプ手段２０４は、携帯電話２０のマイクロプロセッサが、例えばサーバ１０からインストールされた専用のアプリケーションプログラム（アプリ）に従って演算処理を実行することで実現される。このアプリケーションプログラムは、以上説明した認証機能の他、本システムのサービスを利用するリスナーの新規アカウント登録、サーバ１０へのログイン・ログアウト、認証リクエストを行う際のヒューマンインターフェースの機能等を提供することができる。
【００４９】
また、アプリのインストールができない、いわゆるフィーチャーホンや卓上電話機であっても、自動音声応答装置（ＩＶＲ）を使ってリスナー認証を行うことができる。その手順の例を図８に示す。この例の場合、リスナーは、個人識別用のＩＤとして携帯電話２０の電話番号を用いることができ、そのＩＤに関連付けられるリスナー情報を、サーバ１０側のデータベース１１に事前に登録しておいてもよい。
【００５０】
上述した本発明の実施形態では、サーバ１０側のデータトランザクションを小さくするために、ラジオ音声から音特徴データを抽出して比較している。ただし、ラジオの音声を直接比較してもよいし、音声の振幅、周波数、音特徴データであるスペクトグラムやフィンガープリント等を適宜組み合わせて比較してもよい。
【００５１】
更にサーバ１０へのアクセスの集中や処理負荷をより軽減するために、下記のような変形や対策を施してもよい。
（１）例えばリスナー認証のための音声の比較を、サーバ１０側ではなく、クライアント側（携帯電話２０）の処理により行ってもよい。
（２）多人数のリスナーの携帯電話１０から送信される聴取音のデータをクラウド上の記憶装置に一時的にバッファリングしておき、サーバ１０側での比較処理をシリアル化して順次行うようにしてもよい。
（３）サーバ１０側をクラスタリングして処理スケールを拡張できるようにしてもよい。
【００５２】
以上のようなシステム構成によって、サーバ１０は、対象のラジオ番組を聴取しているリスナーをリアルタイムで認証することができる。本システムでは実際のラジオの音声を直接拾い音と聴取時刻のデータをリアルタイムで比較・認証するため、聴取認証において極めて高い精度を得ることができる。また、リスナーにとっては、携帯電話２０をラジオ３０に「かざす」操作をするだけでよく、従来の日記式調査に比較して負担を格段に軽減することができる。
【００５３】
また、サーバ１０は、認証されたリスナーの数を統計的に集計することにより、当該ラジオ番組の聴取率等を直ちに、かつ詳細に算出することができる。また、例えばデータベース１１のアカウント登録情報を参照して、リスナーの地域、性別又は年代別などに分けて聴取率を割り出すことができる。また、携帯電話１０が位置情報システム（GPSなど）でより精度の高い位置情報を取得できる場合は、その情報をサーバ１０への送信することでより精度の高い聴取位置の情報も付加することができる。ラジオ放送局側では、このような詳細なリスナー聴取情報を分析し、より魅力的な番組制作や広告スポンサーの獲得につなげることができる。
【００５４】
また、例えばコマーシャルの前後の時間帯で認証を行うようにすれば、そのコマーシャルの聴取数を高める効果も期待できる。
【００５５】
また、プレゼントの応募やイベントへの参加等の申し込み資格を、認証されたリスナーのみに限定することができる。サーバ１０からは、認証したリスナーのＩＤを含むリスナー情報と、認証した番組や放送時刻を含む情報がラジオ放送局に送信される。ラジオで「かざし」アクションをリアルタイムで求めることで、ラジオ放送局側及びリスナー同士の一体感を醸し出すことができる。リスナー側としては、イベントへの応募などが「かざし認証」だけでできるので、その手間を省くことができる。更に、リスナーは、ラジオ番組を実際に聴いていることを、ラジオ放送局やスポンサーに客観的な態様でアピールすることができる。
【００５６】
また、データベース１１には、リスナーＩＤに基づいて、当該リスナーが聴取したラジオ番組の聴取認証履歴が検索可能に記録されている。更に本システムでは、認証した時刻を示すタイムスタンプ情報も聴取認証履歴情報に記録される。タイムスタンプ情報から検索される番組内容等の聴取履歴から、そのリスナーの嗜好に合致したレコメンド広告等を放送することができる。
【符号の説明】
【００５７】
１０  サーバ
１１  データベース
１２  ラジオ受信機
２０  携帯電話（情報端末）
３０  ラジオ
１０１  Ａ／Ｄ変換器
１０２  特徴抽出手段
１０３  記録手段
１０４  受信手段
１０５  比較手段
１０６  認証手段
１２１  同調器
１２２  検波器（復調器）
２０１  マイクロホン
２０２  Ａ／Ｄ変換器
２０３  特徴抽出手段
２０４  タイムスタンプ手段
２０６  送信手段
【図１】
2020088672.tif 000003
【図２】
2020088672.tif 000004
【図３】
2020088672.tif 000005
【図４】
2020088672.tif 000006
【図５】
2020088672.tif 000007
【図６】
2020088672.tif 000008
【図７】
2020088672.tif 000009
【図８】
2020088672.tif 000010
【手続補正書】
【提出日】平成31年2月7日(2019.2.7)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
放送中のラジオ番組の放送電波信号から音信号（これを放送音信号という）を復調する復調手段と、
リスナーがラジオにかざして当該ラジオのスピーカから出力される前記ラジオ番組の音を取り込み、音信号（これを聴取音信号という）に変換するマイクロホンと、
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出する第一特徴抽出手段と、
前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出する第二特徴抽出手段と、
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるタイムスタンプ手段と、
前記放送音信号及び前記聴取音信号を比較する比較手段と、
前記比較手段により前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証する認証手段と
を備え、
前記比較手段が前記放送音特徴データ及び前記聴取音特徴データを比較し、これら音特徴データが一致すると判定され、かつ、これら音特徴データが一致する時間位置における前記放送音信号の放送時刻及び前記聴取音特徴データが示す聴取時刻が一致すると判定された場合に、前記認証手段が前記リスナーを認証する、リスナー認証システム。
【請求項２】
前記所定の方式が、音の周波数スペクトルを解析する方式である、請求項１に記載のリスナー認証システム。
【請求項３】
前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルの時間変化を示すスペクトグラムとして表現可能である、請求項２に記載のリスナー認証システム。
【請求項４】
放送中のラジオ番組の放送電波信号から音信号（これを放送音信号という）を復調する復調手段と、
リスナーがラジオにかざして当該ラジオのスピーカから出力される前記ラジオ番組の音を取り込み、音信号（これを聴取音信号という）に変換するマイクロホンと、
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出する第一特徴抽出手段と、
前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出する第二特徴抽出手段と、
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるタイムスタンプ手段と、
前記放送音信号及び前記聴取音信号を比較する比較手段と、
前記比較手段により前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証する認証手段と
を備え、
前記比較手段が前記放送音特徴データ及び前記聴取音特徴データを比較し、これら音特徴データが一致すると判定された場合に、前記認証手段が前記リスナーを認証するものであり、
前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルのピーク周波数のペアとそれらの距離とを要素として含むベクトルの配列データに基づくものである、リスナー認証システム。
【請求項５】
前記放送音信号及び前記聴取音信号の各音特徴データが、前記ベクトルの配列データをハッシュ化したデータである、請求項４に記載のリスナー認証システム。
【請求項６】
サーバが、少なくとも前記第一特徴抽出手段及び前記比較手段を備え、
リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン及び前記第二特徴抽出手段を備える、請求項１〜５の何れか１項に記載のリスナー認証システム。
【請求項７】
サーバが、少なくとも前記第一特徴抽出手段を備え、
リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン、前記第二特徴抽出手段及び前記比較手段を備える、請求項１〜５の何れか１項に記載のリスナー認証システム。
【請求項８】
ラジオ番組の番組識別情報と、当該ラジオ番組を聴取したと認証されたリスナーの情報とを関連付けて記録するデータベースを更に備える、請求項１〜５の何れか１項に記載のリスナー認証システム。
【請求項９】
前記データベースにおいて、リスナーの識別情報に基づいて当該リスナーが聴取したラジオ番組の聴取認証履歴が検索可能に記録されている、請求項８に記載のリスナー認証システム。
【請求項１０】
放送中のラジオ番組の放送電波信号から放送音信号を復調するステップと、
リスナーが情報端末をラジオにかざして、当該ラジオのスピーカから実際に出力される前記ラジオ番組の音を取り込み、聴取音信号に変換するステップと、
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出するステップと、
前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出するステップと、
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるステップと、
前記放送音信号及び前記聴取音信号を比較するステップと、
前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証するステップと
を含み、
前記放送音信号及び前記聴取音信号を比較するステップにおいて、前記放送音信号の放送音特徴データ及び前記聴取音信号の聴取音特徴データが一致すると判定され、かつ、これら音特徴データが一致する時間位置における前記放送音信号の放送時刻及び前記聴取音特徴データが示す聴取時刻が一致すると判定された場合に、前記認証するステップにおいて、前記リスナーが前記ラジオ番組を聴取したものと認証する、リスナー認証方法。
【請求項１１】
情報端末にインストールされるアプリケーションプログラムであって、少なくとも請求項１〜５の何れか１項に記載の第二特徴抽出手段の機能を、当該情報端末のプロセッサが行う演算処理により実現させるアプリケーションプログラム。
【請求項１２】
情報端末にインストールされるアプリケーションプログラムであって、少なくとも請求項１〜５の何れか１項に記載の第二特徴抽出手段及び比較手段の機能を、当該情報端末のプロセッサが行う演算処理により実現させるアプリケーションプログラム。
【手続補正書】
【提出日】平成31年2月21日(2019.2.21)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
放送中のラジオ番組の放送電波信号から音信号（これを放送音信号という）を復調する復調手段と、
リスナーがラジオにかざして当該ラジオのスピーカから出力される前記ラジオ番組の音を取り込み、音信号（これを聴取音信号という）に変換するマイクロホンと、
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出する第一特徴抽出手段と、
前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出する第二特徴抽出手段と、
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるタイムスタンプ手段と、
前記放送音信号及び前記聴取音信号を比較する比較手段と、
前記比較手段により前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証する認証手段と
を備え、
前記比較手段が前記放送音特徴データ及び前記聴取音特徴データを比較し、これら音特徴データが一致すると判定され、かつ、これら音特徴データが一致する時間位置における前記放送音信号の放送時刻及び前記聴取音特徴データが示す聴取時刻が一致すると判定された場合に、前記認証手段が前記リスナーを認証する、リスナー認証システム。
【請求項２】
前記所定の方式が、音の周波数スペクトルを解析する方式である、請求項１に記載のリスナー認証システム。
【請求項３】
前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルの時間変化を示すスペクトグラムとして表現可能である、請求項２に記載のリスナー認証システム。
【請求項４】
放送中のラジオ番組の放送電波信号から音信号（これを放送音信号という）を復調する復調手段と、
リスナーがラジオにかざして当該ラジオのスピーカから出力される前記ラジオ番組の音を取り込み、音信号（これを聴取音信号という）に変換するマイクロホンと、
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出する第一特徴抽出手段と、
前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出する第二特徴抽出手段と、
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるタイムスタンプ手段と、
前記放送音信号及び前記聴取音信号を比較する比較手段と、
前記比較手段により前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証する認証手段と
を備え、
前記比較手段が前記放送音特徴データ及び前記聴取音特徴データを比較し、これら音特徴データが一致すると判定された場合に、前記認証手段が前記リスナーを認証するものであり、
前記放送音信号及び前記聴取音信号の各音特徴データが、音の周波数領域におけるパワースペクトルのピーク周波数のペアとそれらの距離とを要素として含むベクトルの配列データに基づくものである、リスナー認証システム。
【請求項５】
前記放送音信号及び前記聴取音信号の各音特徴データが、前記ベクトルの配列データをハッシュ化したデータである、請求項４に記載のリスナー認証システム。
【請求項６】
サーバが、少なくとも前記第一特徴抽出手段及び前記比較手段を備え、
リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン及び前記第二特徴抽出手段を備える、請求項１〜５の何れか１項に記載のリスナー認証システム。
【請求項７】
サーバが、少なくとも前記第一特徴抽出手段を備え、
リスナーが操作する、前記サーバにアクセス可能な情報端末が、少なくとも前記マイクロホン、前記第二特徴抽出手段及び前記比較手段を備える、請求項１〜５の何れか１項に記載のリスナー認証システム。
【請求項８】
ラジオ番組の番組識別情報と、当該ラジオ番組を聴取したと認証されたリスナーの情報とを関連付けて記録するデータベースを更に備える、請求項１〜５の何れか１項に記載のリスナー認証システム。
【請求項９】
前記データベースにおいて、リスナーの識別情報に基づいて当該リスナーが聴取したラジオ番組の聴取認証履歴が検索可能に記録されている、請求項８に記載のリスナー認証システム。
【請求項１０】
放送中のラジオ番組の放送電波信号から放送音信号を復調するステップと、
リスナーが情報端末をラジオにかざして、当該ラジオのスピーカから実際に出力される前記ラジオ番組の音を取り込み、聴取音信号に変換するステップと、
前記放送音信号から所定の方式で音特徴データ（これを放送音特徴データという）を抽出するステップと、
前記聴取音信号から前記所定の方式で音特徴データ（これを聴取音特徴データという）を抽出するステップと、
リスナーがラジオ番組を聴取した時刻情報を前記聴取音特徴データに関連付けるステップと、
前記放送音信号及び前記聴取音信号を比較するステップと、
前記放送音信号及び前記聴取音信号の一致性が認められたことに基づいて、前記リスナーが前記ラジオ番組を聴取したものと認証するステップと
を含み、
前記放送音信号及び前記聴取音信号を比較するステップにおいて、前記放送音信号の放送音特徴データ及び前記聴取音信号の聴取音特徴データが一致すると判定され、かつ、これら音特徴データが一致する時間位置における前記放送音信号の放送時刻及び前記聴取音特徴データが示す聴取時刻が一致すると判定された場合に、前記認証するステップにおいて、前記リスナーが前記ラジオ番組を聴取したものと認証する、リスナー認証方法。