(57)【要約】【課題】テレビ受像機からリアルタイムで出力される音楽に対する音源遺伝子情報を検索することで音楽に関する情報を提供する。【解決手段】音楽検索サーバは、各放送番組に含まれた音楽情報及び時間、各広告に使用された音楽情報及び時間、及び各音楽に対する音響遺伝子及び詳細情報を格納するデータベースと、テレビ受像機から現在放送中の音楽の音響遺伝子及び放送情報を受信する情報要請受信部と、受信された音響遺伝子及び放送情報のうち少なくとも一つに基づいて放送中の音楽を識別する音響遺伝子検索部と、データベースに格納された情報のうち音響遺伝子検索部によって識別された音楽に関する詳細情報を検索する音楽情報照会部と、音楽情報照会部の詳細情報検索結果を前記テレビに送信する結果情報送信部と、を含む。【選択図】図４
2014010458.tif 000002
【特許請求の範囲】
【請求項１】
各放送番組に含まれた音楽情報及び時間、各広告に使用された音楽情報及び時間、及び各音楽に対する音響遺伝子及び詳細情報を格納するデータベースと、
テレビ受像機から現在放送中の音楽の音響遺伝子及び放送情報を受信する情報要請受信部と、
前記受信された音響遺伝子及び放送情報のうち少なくとも一つに基づいて前記放送中の音楽を識別する音響遺伝子検索部と、
前記データベースに格納された情報のうち前記音響遺伝子検索部によって識別された音楽に関する詳細情報を検索する音楽情報照会部と、
前記音楽情報照会部の詳細情報検索結果を前記テレビ受像機へ送信する結果情報送信部と、を含み、
前記音響遺伝子検索部は、
前記受信された放送情報が前記データベースに格納された各放送番組に含まれた音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する放送情報照会部と、
前記受信された放送情報が前記データベースに格納された各広告に使用された音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する広告情報照会部と、
前記放送情報照会部及び広告情報照会部により識別された音楽がない場合、前記受信された音響遺伝子と前記データベースに格納された各音楽に対する音響遺伝子とを比較して現在放送中の音楽を識別する音源情報照会部と、を含む、音楽検索サーバ。
【請求項２】
前記放送情報は、前記テレビで現在選択された放送チャンネル情報及び前記音楽情報の検索要請時間情報である、請求項１に記載の音楽検索サーバ。
【請求項３】
前記詳細情報は、前記識別された音楽に対するメタデータとして、音楽のタイトル、ミュージシャンの名前、アルバムのタイトル、アルバムに含まれた音楽リスト、音楽のジャンル、及びアルバム写真から選択された何れか一つ以上である、請求項１に記載の音楽検索サーバ。
【請求項４】
前記詳細情報は、前記識別された音楽に対するターゲット広告をさらに含む、請求項３に記載の音楽検索サーバ。
【請求項５】
前記情報要請受信部は前記テレビから音声信号を受信し、前記音源情報照会部は前記受信された音声信号から音響遺伝子をさらに生成する、請求項１に記載の音楽検索サーバ。
【請求項６】
テレビ受像機における音楽認識による音楽関連情報の提供方法であって、音楽検索サーバで遂行される各段階は、
情報要請受信部により、前記テレビ受像機から現在放送中の音楽の音響遺伝子及び放送情報を受信する段階と、
音響遺伝子検索部により、前記受信された音響遺伝子及び放送情報のうち少なくとも一つに基づいて前記放送中の音楽を識別する段階と、
音楽情報照会部により、データベースに格納された情報のうち前記音響遺伝子検索部により識別された音楽に関する詳細情報を検索する段階と、
結果情報送信部により、前記音楽情報照会部の詳細情報検索結果を前記テレビ受像機へ送信する段階と、を含み、
前記音楽を識別する段階は、
前記受信された放送情報が前記データベースに格納された各放送番組に含まれた音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する第１識別段階と、
前記受信された放送情報が前記データベースに格納された各広告に使用された音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する第２識別段階と、
前記第１識別段階及び第２識別段階で識別された音楽がない場合、前記受信された音響遺伝子と前記データベースに格納された各音楽に対する音響遺伝子とを比較して現在放送中の音楽を識別する第３識別段階と、を含む、テレビ受像機における音楽認識による音楽関連情報の提供方法。
【請求項７】
前記方法は、各放送番組に含まれた音楽情報及び時間、各広告に使用された音楽情報及び時間、及び各音楽に対する音響遺伝子及び詳細情報を格納する段階をさらに含む、請求項６に記載のテレビ受像機における音楽認識による音楽関連情報の提供方法。
【請求項８】
前記放送情報は、前記テレビ受像機で現在選択された放送チャンネル情報及び前記音楽情報の検索要請時間情報である、請求項６に記載のテレビ受像機における音楽認識による音楽関連情報の提供方法。
【請求項９】
前記詳細情報は、前記識別された音楽に対するメタデータとして、音楽のタイトル、ミュージシャンの名前、アルバムのタイトル、アルバムに含まれた音楽リスト、音楽のジャンル、及びアルバム写真から選択された何れか一つ以上である、請求項６に記載のテレビ受像機における音楽認識による音楽関連情報の提供方法。
【請求項１０】
前記詳細情報は、前記識別された音楽に対するターゲット広告をさらに含む、請求項９に記載のテレビ受像機における音楽認識による音楽関連情報の提供方法。
【請求項１１】
前記受信する段階は、情報要請受信部により、前記テレビ受像機から音声信号を受信する段階であり、
前記第３識別段階は、前記受信された音声信号から音響遺伝子を生成する段階をさらに含む、請求項６に記載のテレビ受像機における音楽認識による音楽関連情報の提供方法。
【請求項１２】
請求項６から１１の何れか一つの方法を遂行するためのプログラムが記録されていることを特徴とするコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビ放送中に出力される音楽に関する情報を提供するための装置に関し、より詳細には、テレビ受像機からリアルタイムで出力される音楽に対する音源遺伝子情報を検索することで音楽に関する情報を提供する、テレビにおける音楽認識による音楽関連情報提供装置、方法及びコンピュータ読み取り可能な記録媒体に関する。
【背景技術】
【０００２】
最近の技術の発展により、テレビジョンシステムは、過去のような単純に受信された電波またはケーブル放送信号のみをディスプレイする機能を超え、ユーザとのインタラクティブ（相互通信）機能及びインターネットを利用した各種付加サービスを提供している。
【０００３】
また、デジタル放送を受信するためには、テレビ受像機だけでなく、セットトップボックス（Ｓｅｔ  ｔｏｐ  ｂｏｘ；ＳＴＢ）という装置がさらに必要である。セットトップボックスとは、テレビ受像機に接続され、外部から入って来る信号を受信して適切に変換してテレビ受像機を介してその内容を表示する装置である。セットトップボックスは、通常、ビデオオンデマンド（Ｖｉｄｅｏ  ｏｎ  ｄｅｍａｎｄ；ＶＯＤ）、ホームショッピング、ネットワークゲームなどの次世代双方向マルチメディア通信サービス（いわゆる対話形テレビ）を利用するために必要な家庭用通信端末機であり、テレビ受像機（テレビセット）の上に置いて利用するボックスという意味であって、「加入者信号変換装置」とも言う。双方向テレビや電話、会社の映像送信サービスなどの網と接続され、家庭ではテレビ受像機などに接続して利用する。
【０００４】
セットトップボックスは、電話会社や総合有線放送（ＣＡＴＶ）局に設けられているビデオサーバなどとの通信の他に、映像信号の受信及び変換機能を基本機能として備える。また、電話やＰＣ通信などのデータ通信サービスも同時に利用できるように、電話インターフェースや個人用コンピュータ（ＰＣ）との接続インターフェースを有するものなど、様々な規格が検討されている。そのため、インタラクティブテレビ市場で優位を占めるために、通信、コンピュータ、家電製品の製造会社らは、セットトップボックスの製品化及び販売競争を行っている。
【０００５】
一方、セットトップボックスは、必ずしも同調器（チューナ）を内蔵している必要はない。また、セットトップボックスに外部信号を与える器具としては、イーサネット（登録商標）（ｅｔｈｅｒｎｅｔ）ケーブル、衛星波受信アンテナまたは地上波受信アンテナ、同軸ケーブル、電話線、アナログＶＨＦ（Ｖｅｒｙ  Ｈｉｇｈ  Ｆｒｅｑｕｅｎｃｙ）またはＵＨＦ（Ｕｌｔｒａ  Ｈｉｇｈ  Ｆｒｅｑｕｅｎｃｙ）アンテナなどが挙げられる。これを介して受信できるコンテンツとしては、映像、音声、インターネットウェブページ、ゲームなどがある。
【０００６】
このように、テレビ受像機は、インターネットと連動されるセットトップボックスを介して、放送情報だけでなく様々な情報のサービスを受け取り、ユーザとの双方向通信を通じてこれらサービスを選択して制御することができる。このようなユーザの選択信号の入力を容易にするためには、リモートコントローラの機能が多様に拡張されることが必要であり、便利なインターフェースを備える必要性が要求されている。
【０００７】
また、このようなセットトップボックスの機能が内蔵されたテレビ受像機は、地上波放送の視聴はもちろん、インターネットに接続されてＶＯＤ（Ｖｉｄｅｏ−  Ｏｎ−Ｄｅｍａｎｄ）、ゲーム、映像通話、アプリ（ａｐｐ）の活用など、コンピュータの機能を遂行することができる。一方、一般のテレビ受像機でも、上述したセットトップボックスが接続されることによって上記機能を活用することができる。テレビ受像機の入れ替え周期が長いという点等を考慮すると、テレビ受像機とセットトップボックス市場は共存して発展する。
【０００８】
一方、一般の視聴者が、テレビ受像機を介して放送中または広告中に出力される音楽に関する情報を知ろうとする場合、歌詞などの音楽に関する情報を記憶して、ＰＣまたはスマートフォンなどを利用して検索する。しかし、歌詞のない音楽や、視聴者がよく聞き取れなかった場合には検索が不可能である。また、部分的に歌詞を聞き取れた場合でも、正確な音楽情報を検索することは容易でない。
【０００９】
このように出力される音楽から音楽に関する情報を検索するための方法の一つとして、韓国登録特許公報第１０‐１１３２５０９号「モバイル検索のためのモバイルシステム、検索システム及び検索結果提供方法（エヌエイチエヌコーポレーション）」（特許文献１）には、モバイル端末に入力されたオーディオデータに対する音楽検索結果を提供する方法が、開示されている。
【００１０】
上記の方法を利用する場合、テレビ受像機から出力される放送または広告音楽をモバイル端末のマイクを介して入力し、入力された音楽をモバイル端末でサーバを介して検索することで、検索された音楽関連情報が、モバイル端末の画面上に表示されることができる。
【００１１】
しかし、上記の方法は、モバイル端末のマイクを介して入力される音楽データを検索しなければならないため、別の音楽録音過程が必要であるという短所がある。また、テレビ放送でスピーカを介して出力される音楽データをさらにモバイル端末で録音して音楽を検索しなければならないため、周囲の環境雑音と入力される音楽データとの音量レベルの差のため、認識率が高くないという問題がある。
【００１２】
したがって、テレビジョンシステムを介して放送または広告中に出力される音楽を効果的に検索して関連情報を提供するための方法が求められている。
【先行技術文献】
【特許文献】
【００１３】
【特許文献１】韓国登録特許第１０‐１１３２５０９号
【発明の概要】
【発明が解決しようとする課題】
【００１４】
本発明の目的は、テレビ受像機から出力される放送信号から音声信号を抽出し、抽出された音声信号に対する音響遺伝子に基づいてサーバから該当音楽を識別して関連情報を提供することができる、テレビジョンシステムにおける音楽認識による音楽関連情報提供システム、装置、方法及びコンピュータ読み取り可能な記録媒体を提供することにある。
【００１５】
また、本発明の他の目的は、サーバで収集された放送関連情報を利用して現在テレビ受像機から出力される放送に含まれている音楽を識別することができる、テレビジョンシステムにおける音楽認識による音楽関連情報提供システム、装置、方法及びコンピュータ読み取り可能な記録媒体を提供することにある。
【００１６】
また、本発明のさらに他の目的は、現在テレビ受像機から出力されている音楽が広告音楽である場合、サーバに格納された広告音楽の音響遺伝子を優先的に検索する、テレビジョンシステムにおける音楽認識による音楽関連情報提供システム、装置、方法及びコンピュータ読み取り可能な記録媒体を提供することにある。
【００１７】
また、本発明のさらに他の目的は、テレビ受像機から出力される放送信号から音声信号を抽出し、抽出された音声信号に対する音響遺伝子に基づいてサーバから該当音楽を識別し、識別された音楽に係わるターゲット広告を提供することができる、テレビジョンシステムにおける音楽認識による音楽関連情報提供システム、装置、方法及びコンピュータ読み取り可能な記録媒体を提供することにある。
【課題を解決するための手段】
【００１８】
上記の本発明の目的を果たし、後述する本発明の特有の効果を果たすための、本発明の特徴的な構成は下記のとおりである。
【００１９】
本発明の一側面によると、音楽検索サーバは、各放送番組に含まれた音楽情報及び時間、各広告に使用された音楽情報及び時間、及び各音楽に対する音響遺伝子及び詳細情報を格納するデータベースと、テレビ受像機から現在放送中の音楽の音響遺伝子及び放送情報を受信する情報要請受信部と、前記受信された音響遺伝子及び放送情報のうち少なくとも一つに基づいて前記放送中の音楽を識別する音響遺伝子検索部と、前記データベースに格納された情報のうち前記音響遺伝子検索部によって識別された音楽に関する詳細情報を検索する音楽情報照会部と、前記音楽情報照会部の詳細情報検索結果を前記テレビ受像機へ送信する結果情報送信部と、を含み、前記音響遺伝子検索部は、前記受信された放送情報が前記データベースに格納された各放送番組に含まれた音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する放送情報照会部と、前記受信された放送情報が前記データベースに格納された各広告に使用された音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する広告情報照会部と、前記放送情報照会部及び広告情報照会部により識別された音楽がない場合、前記受信された音響遺伝子と前記データベースに格納された各音楽に対する音響遺伝子とを比較して現在放送中の音楽を識別する音源情報照会部と、を含む。
【００２０】
好ましくは、前記放送情報は、前記テレビで現在選択された放送チャンネル情報及び前記音楽情報の検索要請時間情報である。
【００２１】
好ましくは、前記音楽に関する情報は、前記音楽に対するメタデータとして、音楽のタイトル、ミュージシャンの名前、アルバムのタイトル、アルバムに含まれた音楽リスト、音楽のジャンル、及びアルバム写真から選択された何れか一つ以上である。
【００２２】
好ましくは、前記詳細情報は、前記音楽に対するターゲット広告をさらに含む。
【００２３】
好ましくは、前記情報要請受信部は前記テレビ受像機から音声信号を受信し、前記音源情報照会部は前記受信された音声信号から音響遺伝子をさらに生成する。
【００２４】
本発明の他の側面によると、音楽検索サーバでのテレビ受像機における音楽認識による音楽関連情報を提供するための方法であって、前記音楽検索サーバで遂行される各段階は、情報要請受信部で、前記テレビ受像機から現在放送中の音楽の音響遺伝子及び放送情報を受信する段階と、音響遺伝子検索部で、前記受信された音響遺伝子及び放送情報のうち少なくとも一つに基づいて前記放送中の音楽を識別する段階と、音楽情報照会部で、データベースに格納された情報のうち前記音響遺伝子検索部により識別された音楽に関する詳細情報を検索する段階と、結果情報送信部で、前記音楽情報照会部の詳細情報検索結果を前記テレビ受像機へ送信する段階と、を含み、前記音楽を識別する段階は、前記受信された放送情報が前記データベースに格納された各放送番組に含まれた音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する第１識別段階と、前記受信された放送情報が前記データベースに格納された各広告に使用された音楽情報及び時間にマッチするか否かに基づいて現在放送中の音楽を識別する第２識別段階と、前記第１識別段階及び第２識別段階で識別された音楽がない場合、前記受信された音響遺伝子と前記データベースに格納された各音楽に対する音響遺伝子とを比較して現在放送中の音楽を識別する第３識別段階と、を含む。
【００２５】
一方、前記テレビ受像機における音楽認識による音楽関連情報の提供を受けるための情報は、サーバコンピュータによって読み取り可能な記録媒体に格納されることができる。このような記録媒体は、コンピュータシステムによって実行されるようにプログラム及びデータが格納される全ての種類の記録媒体を含む。その例としては、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＣＤ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ）、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｉｄｅｏ  Ｄｉｓｋ）−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク、光データ格納装置などが挙げられ、また、搬送波（例えば、インターネットを介した伝送）の形態に具現されるものも含まれる。また、このような記録媒体は、ネットワークで接続されたコンピュータシステムに分散され、分散方式でコンピュータ読み取り可能なコードが格納されて実行されることができる。
【発明の効果】
【００２６】
上述したように、本発明によると、視聴者がテレビジョンシステムを介して放送中または広告中に出力される音楽に関する情報を知ろうとする場合、視聴者が直接検索しなくても音楽に関する情報を確認することができ、視聴者が検索することが容易でない場合にも正確な音楽情報を検索することができる長所がある。
【００２７】
また、本発明によると、テレビ受像機のスピーカを介して出力される音楽をモバイル端末に入力して検索する既存の方法に比べより正確な検索結果を得ることができ、周りの環境雑音が大きい場合にも正確な検索結果を得ることができる長所がある。
【００２８】
また、本発明によると、サーバで収集された放送関連情報を利用して現在テレビ受像機から出力されている放送に含まれた音楽を識別することで、音楽識別にかかる時間を短縮し、識別の正確度を高めることができる長所がある。
【００２９】
また、本発明によると、現在テレビ受像機から出力されている音楽が広告音楽である場合、サーバに格納された広告音楽の音響遺伝子を優先的に検索することで、音楽識別にかかる時間を短縮し、識別の正確度を高めることができる長所がある。
【００３０】
また、本発明によると、テレビ受像機から出力される放送信号から抽出された音声信号に対する該当音楽を識別し、識別された音楽に係わるターゲット広告を提供することができる長所がある。
【図面の簡単な説明】
【００３１】
【図１】本発明によるテレビジョンシステムにおける音楽認識による音楽関連情報提供システムを示す図面である。
【図２】本発明の実施形態によるテレビ受像機の詳細構造を示すブロック図である。
【図３】本発明の実施形態によるテレビ受像機にインストールされるアプリケーションの詳細機能を示すブロック図である。
【図４】本発明の実施形態による音楽検索サーバの詳細構造を示すブロック図である。
【図５】本発明の実施形態によるテレビジョンシステムにおける音楽認識による音楽関連情報提供の手順を示す信号の流れ図である。
【図６】本発明の実施形態によるテレビ受像機にインストールされるアプリケーションの実行手順を示すフローチャートである。
【図７】本発明の実施形態による音楽検索サーバのデータベース構築手順を示すフローチャートである。
【図８】本発明の実施形態による音楽検索サーバの音楽関連情報提供の手順を示すフローチャートである。
【図９】本発明の実施形態による放送編成情報データベースのデータ構造を示す図面である。
【図１０】本発明の実施形態による広告遺伝子情報データベースのデータ構造を示す図面である。
【図１１】本発明の実施形態による音楽検索アプリケーションの実行画面を示すテレビ画面の例示図である。
【図１２】本発明の実施形態による音楽検索結果の画面を示すテレビ画面の例示図である。
【図１３】本発明の実施形態による放送日程照会結果の画面を示すテレビ画面の例示図である。
【発明を実施するための形態】
【００３２】
以下において、本発明は、本発明が実施できる特定実施形態を例示として示す添付図面を参照して、更に詳細に説明される。これらの実施形態は、当業者が本発明を十分に実施することができるように詳細に説明される。本発明の多様な実施形態は、互いに異なるが、相互排他的な必要はないことを理解すべきである。例えば、ここに記載されている特定形状、構造及び特徴は、一実施形態に関連して本発明の思想及び範囲を外れずに他の実施形態に具現されることができる。また、それぞれの開示された実施形態内の個別構成要素の位置または配置は、本発明の思想及び範囲を外れずに変更されることができることを理解するべきである。従って、後述する詳細な説明は限定的な意味で扱うものでなく、本発明の範囲は、適切に説明されるならば、その請求範囲が主張するものと均等な全ての範囲と共に、添付した請求範囲によってのみ限定される。図面において、類似の参照符号は、様々な側面にわたって同一または類似の機能を示す。
【００３３】
本発明によると、テレビ受像機から出力される放送信号から音声信号を抽出し、抽出された音声信号に対する音響遺伝子に基づいてサーバから該当音楽を識別することにより関連情報を提供することができるシステム及び方法が開示される。一方、前記音声信号は、スピーカを介して出力される信号を利用するのではなく、テレビのＡＰＩ（Ａｐｐｌｉｃａｔｉｏｎ  Ｐｒｏｇｒａｍｍｉｎｇ  Ｉｎｔｅｒｆａｃｅ）を介して直接音声信号を得たり、バッファリングされたビデオ情報から音声信号を分離して利用することにより、さらに正確な音声信号を抽出することができる。
【００３４】
その後、前記抽出された現在放送中の音声信号に対して音響遺伝子（ＤＮＡ）を抽出し、インターネットを介してサーバ（即ち、音楽検索サーバ）に送信する。音楽検索サーバは、前記送信された音響遺伝子とマッチする音楽情報をデータベースから検索して音楽を識別する。
【００３５】
この際、本発明の実施形態によると、サーバにキャッシュ（ｃａｃｈｅ）形態で予め格納された既存の認識結果または放送情報を参照して音楽を識別することで、音響遺伝子に基づいた検索作業を行わなくても音楽を識別することができる。例えば、前記テレビでは放送情報（例えば、チャンネル情報）を共に送信し、サーバは前記放送情報と放送時間情報を利用して、音響遺伝子の検索による音楽識別の前に放送情報を利用した音楽識別を先に行うことができる。これにより、検索時間とサーバの演算負荷を低減し、より正確な検索結果を得ることができる。また、広告チャンネルの音響遺伝子をサーバに予め収集した後、広告時間の間に出力された音楽である場合、受信された音響遺伝子を広告チャンネルの音響遺伝子に基づいて先に認識することで認識効率を高めることができる。
【００３６】
一方、音楽識別または音楽認識（ｍｕｓｉｃ  ｒｅｃｏｇｎｉｔｉｏｎ）は、人の指紋のような各音楽や音源の固有の特徴要素、即ち、音響遺伝子を検索して音楽を認識し、音楽のタイトル、歌手、作曲家、指揮者、アルバムのタイトルなどの音楽に関する情報を提供する技術である。特に、音響遺伝子は、一種の音響指紋（ａｕｄｉｏ  ｆｉｎｇｅｒｐｒｉｎｔｉｎｇ）とみなすことができる。音響遺伝子は、オーディオ遺伝子（Ａｕｄｉｏ  ＤＮＡ）または特徴ベクトル（ｆｅａｔｕｒｅ  ｖｅｃｔｏｒ）などのように様々な用語で称され、音響固有の指紋あるいは遺伝子のように、その音響を区別するために用いられる特徴を意味する。このように音楽認識に用いられる音響遺伝子は、音響を一定時間サンプリングする過程とサンプリングされた音響から特徴を抽出する過程とに区分される。
【００３７】
サンプリング過程は、例えば抽出された音声信号を４４．１ｋＨｚなどの一定な周波数で、１０秒などの一定時間サンプリングして録音するプロセスである。また、音響の特徴を抽出する過程は、サンプリングされた音響を時間または周波数空間でフィルタリング、ウエーブ変換、増幅、減衰などの様々な信号処理過程を経る。
【００３８】
これにより、前記音響遺伝子をデータベースサーバ（Ｄａｔａ  Ｂａｓｅ  Ｓｅｒｖｅｒ）に格納された音響遺伝子と比較することにより、音楽を検索する。即ち、データベースサーバは、音楽情報及び音響遺伝子に関する情報を格納し、現在放送中の音楽の音響遺伝子を受信してこれに対応する音楽情報を提供する。
【００３９】
一方、本発明は、如何なる種類の形態と機能を有するテレビ受像機にも適用可能であり、以下では、所定のアプリケーションがインストールされ、インターネットとの通信機能が備えられたスマートテレビが、その一例として説明される。一方、スマートテレビでなく一般のテレビ受像機にセットトップボックスが接続された形態のシステムにも本発明が適用されることができ、本発明によって、スマートテレビ内で具現される機能の全部または一部がセットトップボックス内で機能するように具現されることができる。また、下記では、発明の理解を容易にするために、テレビ受像機の一例として、スマートテレビが説明されているが、本発明はスマートテレビに限定されるものではなく、所定のアプリケーションが設置されてネットワーク通信機能が提供される如何なる方式のテレビ受像機にも適用されることができる。
【００４０】
また、後述する説明において「放送信号」は、前記テレビ受像機またはセットトップボックスを介して受信された映像信号及び音声信号を含む概念であって、地上波放送信号、ケーブル放送信号、衛星放送信号、ＩＰテレビ放送信号など、如何なる放送信号も本発明に含まれることができる。この際、前記放送信号に含まれた音声信号は、声、音響、音楽などの様々な形態の音を電気的信号に変換したデータを意味し、前記放送信号のうち映像信号に含まれてまたは別の信号として送信及び受信されることができる。
【００４１】
また、後述する説明において、「音響遺伝子」は、上述したように、音楽を識別するために音楽の特徴要素を抽出した情報であって、様々な方法で音楽信号を信号処理することにより生成されることができ、本発明の音響遺伝子を生成する方法は、特定方法に限定されない。
【００４２】
また、後述する説明において、「音楽関連情報」とは、音楽に対するメタデータ（ｍｅｔａ  ｄａｔａ）及び音楽に係わるターゲット広告情報を含む。前記音楽に対するメタデータは、例えば、音楽のタイトル、ミュージシャンの名前、アルバムのタイトル、アルバムに含まれた音楽リスト、音楽のジャンル、及びアルバム写真などの様々な形態を含むことができる。一方、ＩＤ３タグは最近ｍｐ３などの圧縮オーディオファイルに多く用いられる規格であり、ＩＤ３ｖ１タグまたはＩＤ３ｖ２タグがある。ＩＤ３ｖ１タグにはトラック／タイトル／アーティスト／アルバムのタイトル／ジャンル／詳細情報などの情報が添付され、ＩＤ３ｖ２タグには作曲家／歌詞／オリジナルアーティスト／著作権者／ＵＲＬ／エンコドした人などの情報が添付される。
【００４３】
本発明の音楽関連情報でのメタデータは、前記ＩＤ３タグのように標準に定義されている形態であってもよく、これとは別に個別的に定義された形態であってもよい。また、音楽に係わるターゲット広告は、該当音楽を好む性別、年齢層、ジャンル、趣味などを考慮して広告効果を高めるために予め設定した広告を意味する。即ち、後述する説明において「ターゲット広告」は、特定情報または特定ユーザ層に連関された広告情報であって、本発明では識別された音楽情報に連関された広告情報をターゲット広告と称する。
【００４４】
以下、本発明が属する技術分野において通常の知識を有する者が本発明を容易に実施できるようにするために、本発明の好ましい実施形態について、添付図面を参照して詳細に説明する。
【００４５】
まず、図１から図４を参照して、本発明の実施形態によるシステム及び装置の構造を説明した後、図５から図８を参照して本発明の実施形態による手順を詳細に説明する。
【００４６】
音楽関連情報提供システム
図１は本発明によるテレビにおける音楽認識による音楽関連情報提供システムを示す図面である。図１を参照すると、本発明によるシステムは、スマートテレビ１１０と、通信ネットワーク１２０と、音楽検索サーバ１３０と、地上波放送サーバ１４０と、ケーブル放送サーバ１５０と、を含んで構成されることができる。
【００４７】
本発明の具現のために、テレビ受像機は、通信ネットワーク１２０との接続が可能であり、アプリケーションが設置されて実行されることができるスマートテレビ１１０であることが好ましいが、上述したように一般のテレビ受像機にセットトップボックスが接続された形態に具現されることもできる。
【００４８】
この際、前記スマートテレビ１１０は、地上波放送サーバ１４０、ケーブル放送サーバ１５０から放送信号を受信して、ユーザが選択した特定チャンネルの放送情報を映す。一方、前記図１ではスマートテレビ１１０で放送信号を直接受信することで図示されているが、本発明の実施形態によって、上述したように、一般のテレビ受像機と接続されたセットトップボックス（ＳＴＢ）を介して放送信号を受信することもできる。例えば、前記ＳＴＢが地上波放送サーバ１４０またはケーブル放送サーバ１５０から放送信号を受信してテレビ受像機に提供することができる。この際、前記ＳＴＢは、インターネット接続機能を含んで通信ネットワーク１２０と接続することにより音楽検索サーバ１３０との通信を遂行する。尚、前記ＳＴＢに別の専用アプリケーションをインストールすることにより、本発明の機能を提供することができる。
【００４９】
一方、本発明の実施形態によると、スマートテレビ１１０にインストールされたアプリケーション（ａｐｐｌｉｃａｔｉｏｎ）を実行して現在放送中の音楽に対する情報検索を要請すると、前記アプリケーションでは、現在スマートテレビ１１０で放送されている情報のうち音声信号を収集し、収集された音声信号（例えば、音源）を信号処理して音響遺伝子を抽出する。このように抽出された音響遺伝子情報は、スマートテレビ１１０から通信ネットワーク１２０を介して音楽検索サーバ１３０に送信される。この際、本発明の実施形態によると、効果的な音楽検索のために、前記音響遺伝子情報だけでなく放送関連情報（例えば、放送チャンネル情報、放送時間情報など）もともに送信することができる。
【００５０】
前記スマートテレビ１１０またはセットトップボックスから音声信号に対する音響遺伝子情報を受信した音楽検索サーバ１３０は、本発明の実施形態によって様々な方法で音楽を識別する。例えば、本発明の実施形態によると、データベースに格納された音響遺伝子情報と比較して音楽を識別することもでき、予め格納された放送スケジュール情報を利用して音楽を識別することもでき、広告に対する音響遺伝子を優先的に比較して音楽を識別することもできる。
【００５１】
前記音楽検索サーバ１３０は、このように識別された音楽関連情報（例えば、メタデータ、ターゲット広告など）を検索してスマートテレビ１１０に提供する。
【００５２】
一方、前記通信ネットワーク１２０は、有線及び無線などのような通信形態を問わず、構成されることができ、パーソナルエリアネットワーク（ＰＡＮ；Ｐｅｒｓｏｎａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ローカルエリアネットワーク（ＬＡＮ；Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、メトロポリタンエリアネットワーク（ＭＡＮ；Ｍｅｔｒｏｐｏｌｉｔａｎ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、広域ネットワーク（ＷＡＮ；Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）など、多様な通信網で構成されることができる。また、前記通信ネットワーク１２０は、公知のワールドワイドウェブ（ＷＷＷ；Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂ）であることができ、赤外線（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ；ＩｒＤＡ）またはブルートゥース（Ｂｌｕｅｔｏｏｔｈ（登録商標））のように短距離通信に用いられる無線送信技術を利用することもできる。また、前記通信ネットワーク１２０は、スマートテレビ１１０で放送信号を受信するためのケーブル放送通信網、地上波放送通信網、衛星放送通信網などを含むことができる。
【００５３】
以下、図２から図４を参照して、前記スマートテレビ１１０及び音楽検索サーバ１３０の詳細構造を説明する。
【００５４】
図２は、本発明の実施形態によるテレビの詳細構造を示すブロック図である。図２を参照すると、本発明の実施形態によるスマートテレビ１１０は、放送信号受信部２０１と、データ通信Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）部（Ｄａｔａ  Ｃｏｍｍ．Ｉ／Ｆ）２０２と、主制御部（Ｍａｉｎ  Ｃｏｎｔｒｏｌｌｅｒ）２０３と、入力部２０４と、音声信号収集部２０５と、応用プログラム処理部（ＣＰ  Ｐｒｏｖｉｄｅｄ  Ａｐｐｌｉｃａｔｉｏｎ  Ｐｒｏｃｅｓｓｏｒ）２０６と、インターネット接続部（Ｉｎｔｅｒｎｅｔ  Ａｃｃｅｓｓ  Ｐｒｏｃｅｓｓｏｒ）２０７と、テレビ制御画面生成部（ＴＶ  ｃｏｎｔｒｏｌ  Ｖｉｄｅｏ  Ｇｅｎｅｒａｔｏｒ）２０８と、テレビ映像構成部（ＴＶ  Ｖｉｄｅｏ  Ｃｏｍｂｉｎｅｒ）２０９と、ディスプレイパネル部（Ｄｉｓｐｌａｙ  Ｐａｎｎｅｌ）２１０と、を含んで構成されることができる。
【００５５】
前記放送信号受信部２０１は、外部から送信された各種放送データを受信し、例えば、地上波放送信号の受信、ケーブル放送信号の受信、ＩＰテレビ放送信号の受信、衛星放送信号の受信などの機能を遂行する。例えば、放送信号受信部２０１におけるケーブルテレビ受信部は、ケーブルテレビ信号に対する復調（ｄｅｍｏｄｕｌａｔｉｏｎ）を行う。この際、復調された後のデータは、圧縮された映像、音声及び付加情報で構成される。前記圧縮された映像は、ＭＰＥＧｘ／Ｈ．２６４標準に基づいて復元（ｄｅｃｏｍｐｒｅｓｓｉｏｎ）されて、ビデオ原本データ（ｖｉｄｅｏ  ｒａｗ  ｄａｔａ）として生成される。また、圧縮された音声は、ＭＰＥＧｘ／ＡＣ３／ＡＡＣ標準に基づいて復元されて、オーディオ原本データ（ａｕｄｉｏ  ｒａｗ  ｄａｔａ）として生成される。尚、付加情報は前記主制御部２０３に送信される。前記受信された放送信号は、テレビ映像構成部２０９を介してディスプレイパネル部２１０に送信される。前記放送信号受信部２０１におけるＩＰテレビ受信部がＩＰテレビ信号を復調した後のデータは、インターネットを介して受信されたＩＰテレビデータとして圧縮された映像、音声及び付加情報で構成される。この際、前記圧縮された映像は、ケーブルテレビ受信部と同様に、ＭＰＥＧｘ／Ｈ．２６４標準に基づいて復元されてビデオ原本データとして生成される。また、圧縮された音声は、ＭＰＥＧｘ／ＡＣ３／ＡＡＣ標準に基づいて復元されて、オーディオ原本データとして生成される。尚、付加情報は、前記主制御部２０３に送信される。
【００５６】
データ通信Ｉ／Ｆ部２０２は、前記放送信号受信部２０１に受信されるテレビ放送コンテンツの受信とは別のデータ通信を行うデータ通信チャンネルであって、本発明の実施形態によると、通信ネットワーク１２０を介して音楽検索サーバ１３０とのデータ通信を行う。
【００５７】
本発明の実施形態による主制御部２０３は、音楽検索サーバ１３０による各種音楽検索及び音楽関連情報提供機能を支援するためのスマートテレビ１１０の主制御機能を遂行する。即ち、インターネット接続を介して音楽検索サーバ１３０と情報を交換することで、音楽関連情報提供サービスを提供する。また、音楽検索のための選択信号が入力部２０４を介してユーザから入力されると、応用プログラム処理部２０６を制御して、該当アプリケーションを実行させる。尚、前記主制御部２０３は、テレビのチャンネル変更、音声調節などのテレビの設定変更を制御し、インターネット接続を制御して、「Ｔ‐ｃｏｍｍｅｒｃｅ」などのＣＰ（Ｃｏｎｔｅｎｔ  Ｐｒｏｖｉｄｅｒ）が提供する応用プログラムの制御を行う。
【００５８】
音声信号収集部２０５は、応用プログラム処理部２０６の音声情報の要請に応じて、前記放送信号受信部２０１を介して受信された各種放送信号から音声信号を収集する機能を、遂行する。
【００５９】
通常、テレビ受像機内で用いられる信号はレベル毎に大きく四つに区分されることができる。最も低いレベルの信号は、テレビアンテナ線に入るＲＦ（Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ、またはＨＦ、Ｈｉｇｈ  Ｆｒｅｑｕｅｎｃｙともいう）信号であって、一つの線に映像及び音声が混在している。テレビの内部回路は、画面に映像を直接表現するためのＲ、Ｇ、Ｂのそれぞれの信号と、音声信号を、この一つの信号から分離する。一般家庭で視聴するケーブル放送や電波放送が、前記信号形式で受信される。
【００６０】
ＲＦ信号より高いレベルの信号は、コンポジット映像信号（しばしばビデオ信号と称されるＣＶＢＳ（Ｃｏｍｐｏｓｉｔｅ  Ｖｉｄｅｏ  Ｂａｎｋｉｎｇ  Ｓｙｎｃ）信号）であって、色差、輝度、シンクの映像信号が一つの信号線に混入されているが、オーディオ信号（即ち、音声信号）は含まれていない。通常ビデオ入出力と呼ばれる黄色い端子を介して入出力される信号であり、一つの線を利用して映像信号を送信することができる。
【００６１】
前記ＣＶＢＳより高いレベルの信号はＹ／ＣまたはＹ／Ｐ信号であって、輝度とシンクが混合していて、色差が分離される信号である。テレビまたはビデオのＹ、Ｐｂ、Ｐｒ、またはＹ、Ｃｂ、Ｃｒコンポーネント端子が、このＹ／Ｃ、Ｙ／Ｐ信号を送受信するためのものである。また、Ｙ／Ｃ、Ｙ／Ｐより高いレベルの信号はＲＧＢ信号であり、Ｒ、Ｇ、Ｂがそれぞれ分離されており、シンク信号も別に分離されているため、最上の画質を表することができる。
【００６２】
即ち、前記音声信号収集部２０５は、上記のように様々な形態で受信される放送信号のうち該当信号形式に応じて音声信号（即ち、オーディオ信号）を収集する機能を遂行する。
【００６３】
インターネット接続部２０７は、本発明の実施形態による応用プログラムの実行によって音楽検索サーバ１３０とのインターネット接続を行う場合、これを制御する機能を遂行する。前記インターネット接続部２０７により、テレビ１１０の画面上ではテレビディスプレイ領域とは別にインターネットディスプレイ領域を生成して、各種情報（例えば、音楽検索アプリケーション進行情報、音楽検索結果としての各種音楽関連情報など）を提供する。
【００６４】
本発明の実施形態による応用プログラム処理部２０６は、音楽検索サーバ１３０により行われる音楽検索プログラムを実行する。例えば、ユーザの現在放送中の音楽に対する情報検索の要請に応じて音声信号を収集し、収集された音声信号から音響遺伝子を抽出して音楽検索サーバ１３０に送信処理する。また、音楽検索サーバ１３０から受信された検索結果情報を、ディスプレイパネル部２１０を介して画面に映すように、処理する。
【００６５】
テレビ制御画面生成部２０８は、テレビのチャンネル変更、音量調整、設定変更などに対する別の制御ディスプレイ領域をテレビ１１０の画面上に生成することができる。
【００６６】
テレビ映像構成部２０９は、上述の放送信号受信部２０１、インターネット接続部２０７、応用プログラム処理部２０６、テレビ制御画面生成部２０８により提供される各ディスプレイ領域を、ユーザが設定した形態で結合し、テレビディスプレイ領域を生成する。即ち、前記テレビディスプレイ領域は、例えば、テレビディスプレイ領域、インターネットディスプレイ領域、ＣＰディスプレイ領域、制御ディスプレイ領域などに区分されて提供されたり、各領域の一部が重なり合って生成されることもできる。この際、前記各ディスプレイ領域が結合される形態としては、ユーザの好みに応じて独立的に各ディスプレイ領域の大きさ（ｓｃａｌｅ）を異ならせて出力するためのディスプレイ画面を生成したり、特定のディスプレイ領域を透明または半透明に処理してテレビディスプレイ画面を生成することができる。
【００６７】
以下、図３を参照して前記応用プログラム処理部２０６の詳細構造を説明する。
【００６８】
応用プログラム処理部（スマートテレビアプリケーション）
図３は本発明の実施形態によるテレビに設置されるアプリケーションの詳細機能を示すブロック図である。本発明の実施形態によるスマートテレビ１１０に設置されるアプリケーションは、音楽情報要請受信部３１０と、音響遺伝子生成部３２０と、放送情報抽出部３３０と、音楽情報照会部３４０と、照会結果受信部３５０と、結果情報生成部３６０と、放送情報照会部３７０と、を含んで構成されることができる。
【００６９】
音楽情報要請受信部３１０は、ユーザにより入力された音楽情報要請信号を受信し、アプリケーションを駆動させる機能を遂行する。前記アプリケーションの駆動に応じて、音響遺伝子生成部３２０は、図２の音声信号収集部２０５により収集された音声信号を予め設定された方法で信号処理して音響遺伝子を生成する。前記音響遺伝子の生成方法は多様に具現することができ、これについての詳細な説明は後述する。
【００７０】
放送情報抽出部３３０は、放送信号受信部２０１またはインターネットなどを介して受信された放送信号から各種放送情報を抽出する。また、前記放送情報抽出部３３０は現在テレビに設定されたチャンネル情報を収集する。
【００７１】
音楽情報照会部３４０は、前記音響遺伝子生成部３２０により生成された現在放送中の音楽の音響遺伝子情報を音楽検索サーバ１３０に送信することで音楽検索を要請する機能を遂行する。この際、本発明の実施形態によると、前記放送情報抽出部３３０により抽出された放送情報をともに送信することもできる。
【００７２】
これにより、音楽検索サーバ１３０は、前記送信された音響遺伝子情報または放送情報に基づいて放送中の音楽を識別し、該当音楽に関する情報を前記テレビ１１０に送信する。
【００７３】
この際、テレビ１１０の照会結果受信部３５０は、前記音楽検索サーバ１３０から音楽関連情報を受信し、結果情報生成部３６０は、受信された情報を編集して画面に映すための情報を生成する。
【００７４】
一方、本発明の実施形態による放送情報照会部３７０は、ユーザの放送情報照会要請信号の入力に応じて該当検索された音楽に関する放送情報を照会し、照会結果を、ディスプレイパネル部２１０を介して画面上に映す。
【００７５】
音響遺伝子生成方法の例
以下、前記音響遺伝子生成部３２０により音響遺伝子を生成する方法の例を説明する。一方、本発明は後述する実施形態に限定されるものではなく、様々な方法によって音響遺伝子を生成することができる。
【００７６】
前記音響遺伝子を生成するためには、まず、音声コーダ（ｓｐｅｅｃｈ  ｃｏｄｅｒ）を用いてサンプル時間（例えば、３秒）の間の音声信号をサンプリングして格納し、オーディオ信号の大きさ（ｄｂ）を測定する。この際、サンプルは、３秒間１１ｍｓｅｃ毎に３００Ｈｚ〜３ｋＨｚ範囲の周波数によるオーディオ信号の大きさを測定することにより、格納することができる。
【００７７】
その後、周波数に応じたオーディオ信号のうち、その大きさが特定の大きさ、例えば５００ｄｂ以上であるオーディオ信号が１０倍に増幅され、未満であるオーディオ信号が０．１倍減衰されて、２５６個の時間区間に、オーディオ信号の大きさを格納する。このような変調の結果、１１ｍｓｅｃ毎に、特定周波数の信号のみが存在する形態に、オーディオ信号が変換される。変換されたオーディオ信号は、例えば、Ａ．ＷＡＶなどのオーディオファイル形態で格納されることができる。したがって、オーディオサンプルは、１１ｍｓｅｃ単位で２５６＊１１ｍｓｅｃの間に３００Ｈｚ〜３ｋＨｚ範囲の周波数のオーディオ信号のうち増幅または減衰されて変調されたオーディオ信号を含むことになる。
【００７８】
このように生成されたオーディオサンプルからサンプルの音響遺伝子を生成する方法によると、まず、前記オーディオサンプルから７５０Ｈｚ〜２７５０Ｈｚの周波数のみを選択して、３３個の周波数区間（ＦＩ１〜ＦＩ３３）に分割する。その後、各周波数区間に、オーディオ信号の大きさをそれぞれ格納しておく。例えば、下記数学式１のように、結果的に２５６個の時間区間（単位時間：１１ｍｓｅｃ）と３３個の周波数区間（単位周波数：６６Ｈｚ）の積である２５６＊３３個のオーディオ信号の大きさが格納される。
【００７９】
【数１】
2014010458.tif 000003
（ここで、ｉ（１≦ｉ≦２５６の自然数）は２５６個の時間区間を意味し、ｊ（１≦ｊ≦３３の自然数）は３３個の周波数区間を意味する。）
【００８０】
オーディオ信号から音響遺伝子を生成するために、下記数学式２のように、特定時間帯、例えば、１１ｍｓｅｃの隣接する周波数同士、例えばＦＩ１及びＦＩ２の間における信号の大きさの差を求める。ＦＩ２とＦＩ３との間、ＦＩ３とＦＩ４との間、…ＦＩ３２とＦＩ３３との間における信号の大きさの差を、同様の方法で求める。次の時間帯１１＊２ｍｓｅｃでも、隣接する周波数区間同士の間における信号の大きさの差を求める。同様の方法で、２５６＊１１ｍｓｅｃまで求める。これにより、２５６＊３２個の信号の大きさの差分が、計算される。
【００８１】
【数２】
2014010458.tif 000004
（ここで、ｋは１〜３２の自然数である。）
【００８２】
次に、下記数学式３のように、隣接した時間帯同士、例えば、１１ｍｓｅｃの時間帯と１１＊２ｍｓｅｃの時間帯との間で、求められた差分の差（以下、勾配という）をさらに計算して、この値が０以上であると「１」、０未満であると「０」の値を格納する。このような過程を、全体時間区間に対して行う。前記勾配を全て求めて格納すると、３２＊２５６個の量子化された２進数値が格納される。この量子化された２進数値を音響遺伝子（ａｕｄｉｏ  ＤＮＡ  ｏｆ  ｓａｍｐｌｅ）として決定する。
【００８３】
【数３】
2014010458.tif 000005
（ここで、ｋは１〜３２の自然数である。）
【００８４】
一方、後述する音楽検索サーバ１３０でのサンプル音響遺伝子の生成方法も、前記音響遺伝子生成部３２０の音響遺伝子の生成方法と同様の生成方法であることが好ましい。また、前記音楽検索サーバ１３０またはスマートテレビ１１０の音響遺伝子生成部３２０での音響遺伝子の生成方法は、上述したように設定された時間（例えば、３秒間）のみ生成するものであってもよい。、前記音楽検索サーバ１３０は、サンプルとして格納する音響遺伝子を、設定された時間分のみのサンプルとして生成してもよくく、検索対象である音声情報のための音響遺伝子については受信した音声情報の全体から生成してもよい。
【００８５】
また、前記音響遺伝子を生成する他の方法を説明すると次のとおりである。
【００８６】
まず、入力された音声信号から音の高低（Ｐｉｔｃｈ）及び長さ（Ｄｕｒａｔｉｏｎ）を抽出することで、各音の高低及び長さからなる音響遺伝子信号に変換することができる。この際、音の高低及び長さを抽出する方法は次のとおりである。
【００８７】
まず、入力された音声信号を信号処理の便宜のために０と１の間の値に正規化（ｎｏｒｍａｌｉｚｅ）し、正規化された値の平均が０となるように補正する。次に、可聴領域を外れた周波数範囲などの不要な周波数領域を除いた有効周波数範囲をパスバンド（ｐａｓｓｂａｎｄ）とするバンドパスフィルタリングを行う。
【００８８】
次に、入力された音声信号の雑音を除去して、正確な音楽的特性が抽出できるようにする。例えば、スペクトル重み付け（ｓｐｅｃｔｒａｌ  ｗｅｉｇｈｔｉｎｇ）などの方式を用いることができる。その後、入力された音声信号を重なり合ったフレーム単位に分離する。この際、各フレームは一定区間重なり合うように設定する。このように分離されたそれぞれのフレームに対して、次の手順を行う。
【００８９】
まず、各フレームに対して、雑音以外の有効な音が発生した区間の開始点と終了点を求める。具体的には、信号の大きさ（ａｍｐｌｉｔｕｄｅ）によって有効な信号の区間を決定するが、ｋ番目のフレームの信号の大きさＡ（ｋ）は下記数学式４のように算出されることができる。
【００９０】
【数４】
2014010458.tif 000006
（ここで、Ｎは一つのフレーム内のサンプル数である。）
【００９１】
音符区分方法としては、フレームｋに対する信号の大きさＡ（ｋ）の値が特定閾値Ｔ（ｋ）より大きい場合には有効なピッチであると判断し、小さい場合には有効なデータが存在しない無音（ｓｉｌｅｎｃｅ）区間であると判断する。このような音符区分方法では閾値Ｔ（ｋ）を決定することが重要であるが、Ｔ（ｋ）を動的に求めるために、グローバル閾値ＴＧ、背景雑音の閾値ＴＮとともに、フレームｋを基準として前後Ｗだけのフレームを考慮する２Ｗ＋１の大きさのウィンドウに対して求めたローカル閾値ＴＬ（ｋ）を用いる。閾値Ｔ（ｋ）は次のように求められる。
【００９２】
（１）グローバル（ｇｌｏｂａｌ）閾値ＴＧを下記数学式５のように算出する。
【００９３】
【数５】
2014010458.tif 000007
（ここで、ＮＦは全体フレーム数である。）
【００９４】
（２）背景雑音（ｂａｃｋｇｒｏｕｎｄ  ｎｏｉｓｅ）の閾値ＴＮを下記数学式６のような過程で算出する。
【００９５】
【数６】
2014010458.tif 000008
【００９６】
（３）１≦ｋ≦ＮＦを満たすｋに対して、ローカル（ｌｏｃａｌ）閾値ＴＬ（ｋ）を下記数学式７のような過程で求める。
【００９７】
【数７】
2014010458.tif 000009
【００９８】
（４）フレームｋでの閾値Ｔ（ｋ）は、下記数学式８のようにＴＧ、ＴＮとＴＬ（ｋ）の値のうち大きい値を取る。
【００９９】
【数８】
2014010458.tif 000010
【０１００】
フレームｋが有効な情報であるか否かは、Ａ（ｋ）がＴ（ｋ）より大きい場合には有効、小さい場合には有効ではない情報であると判断することができる。
【０１０１】
ピッチ抽出段階：それぞれのフレームに対してピッチを求めてセミトーン値を決定する。この際、ピッチを抽出する方法としては、例えば、下記数学式９のような時間領域解析（Ｔｉｍｅ  Ｄｏｍａｉｎ  Ａｎａｌｙｓｉｓ）アルゴリズムであるＡＣＦ（Ａｕｔｏｃｏｒｒｅｌａｔｉｏｎ  Ｆｕｎｃｔｉｏｎ）方法を用いることができる。
【０１０２】
【数９】
2014010458.tif 000011
【０１０３】
平滑化段階：セミトーン値をより明確に解析できるように平滑化（ｓｍｏｏｔｈｉｎｇ）する。したがって、線形または非線形フィルタリング方法を適用して、値を平滑化することができる。例えば、非線形フィルタリング方法であるメディアンフィルタリング（Ｍｅｄｉａｎ  ｆｉｌｔｅｒｉｎｇ）を利用して、平滑化することができる。
【０１０４】
メロディ及び拍子決定段階：平滑化されたデータを利用して音楽の固有な特徴であるメロディ及び拍子を抽出する。前記平滑化されたデータは、区分された一つの有効音区間内で多数のピッチ値を有する。このような平滑化されたデータからメロディ及び拍子を決定するためには、まず、求められたセミトーン値に対して、前記有効区間区分部で区分した有効区間である場合にはセミトーン値をそのまま維持し、有効区間ではない場合にはセミトーン値を０にする。即ち、セミトーン値は有効区間でのみ値を有し、各有効区間毎に開始フレームと終了フレームを決定することができる。各有効区間に対して、次のような過程を経てメロディ及び拍子を決定する。
【０１０５】
（１）セミトーン値の差がΔより小さい区間を探す。（この際、Δは０＜Δ＜１）
【０１０６】
（２）区間の長さが閾値ＬＳより小さいと安定区間、閾値より大きいと不安定区間にする。不安定区間を無視する際に、隣接した安定区間のセミトーン値の差が１より小さいと二つの区間を統合する。即ち、不安定区間のセミトーン値は、安定区間のセミトーン値に再調整されて、統合された安定区間に編入される。
【０１０７】
（３）上記のように決定された有効区間内の安定区間の開始フレームと終了フレームを決定し、その長さを拍子として決定する。
【０１０８】
（４）前記安定区間内でセミトーン値を四捨五入して、このうち頻度数が最も高い値を音程として決定する。
【０１０９】
前記（１）から（４）の過程を全ての有効区間に対して順に行うことにより、メロディ及び拍子が決定される。上記のような方式で一つの有効音区間内で変化する多数の音符を抽出することができる。
【０１１０】
このように処理することで、音楽に対する音響遺伝子を生成することができる。前記音響遺伝子の生成方法は、本発明の理解のために例として説明したものであり、本発明はこれに限定されない。
【０１１１】
音楽検索サーバ（サービスサーバ）
図４は、本発明の実施形態による音楽検索サーバの詳細機能を示すブロック図である。図４を参照すると、本発明の実施形態による音楽検索サーバ１３０は、情報要請受信部４１０と、音響遺伝子検索部４２０と、放送情報送信部４３０と、放送情報収集部４４０と、音楽情報照会部４５０と、ターゲット広告検索部４６０と、音楽情報データベース４７０と、音響遺伝子生成部４８０と、広告情報収集部４９０と、広告情報データベース４９１と、結果情報送信部４９２と、を含んで構成されることができる。また、前記音響遺伝子検索部４２０は、各検索方法によって、放送情報照会部４２１、広告情報照会部４２３、音源情報照会部４２５、放送編成情報データベース４２２、広告遺伝子情報データベース４２４、及び音源遺伝子情報データベース４２６を含んで構成されることができる。
【０１１２】
まず、前記情報要請受信部４１０は、スマートテレビ１１０から音楽検索が要請されると、前記スマートテレビ１１０から受信された音響遺伝子情報及び放送情報で予め設定されたアルゴリズム（例えば、図８に図示された手順）に従って、音響遺伝子検索部４２０により音楽を検索する。
【０１１３】
例えば、放送情報照会部４２１は、受信された放送情報（例えば、チャンネル情報及び時間情報）から放送編成情報データベース４２２に格納された放送編成情報を検索し、該当音楽情報が検索されると、これを検索結果として出力する。即ち、放送編成情報４２２には、各放送チャンネル毎の放送編成情報が含まれ、編成された各放送番組内に含まれた音楽情報と該当音楽が放送される時間情報が含まれ得る。したがって、スマートテレビ１１０からチャンネル情報と時間情報が受信されると、前記放送編成情報データベース４２２に格納された情報を検索して、現在放送中の音楽情報を得ることができる。
【０１１４】
一方、前記放送編成情報データベース４２２を介した照会結果、特定放送の間の広告時間である場合には、広告情報照会部４２３によって広告音楽を優先的に検索することができる。即ち、広告情報照会部４２３は、音楽情報の要請時点が該当チャンネルでの広告放送時点である場合、前記音楽情報が広告である可能性が高いため、広告遺伝子情報データベース４２４に格納された広告音楽の音響遺伝子を検索することで、放送中の音楽の情報を確認することができる。
【０１１５】
広告情報収集部４９０は、広告音楽として用いられる各広告音源に対して音響遺伝子生成部４８０によって音響遺伝子情報を生成し、前記生成された各広告音源に対する音響遺伝子を前記広告遺伝子情報データベース４２４に格納する。また、前記広告情報収集部４９０は、視聴者に提供する各種広告情報を受信して広告情報データベース４９１に格納することができる。
【０１１６】
前記スマートテレビ１１０から要求された情報に応じて受信された音響遺伝子情報に対応した放送情報または広告情報が存在しない場合、音源情報照会部４２５は、音源遺伝子情報データベース４２６に格納された各音源に対する音響遺伝子と比較することで、音楽情報を検索する。前記音源情報照会部４２５の音楽検索方法は、多様に具現されることができ、受信された音響遺伝子情報と音源遺伝子情報データベース４２６に格納された各音源に対する音響遺伝子情報とを比較して最も類似なデータを検索する方法により、具現することができる。
【０１１７】
例えば、前記音源情報照会部４２５の音楽検索方法は、次のような方法により、具現することができる。
【０１１８】
情報要請受信部４１０を介してスマートテレビ１１０から放送される音楽の音響遺伝子情報を受信すると、音源情報照会部４２５は、各音源に対して音楽的遺伝子形式で格納された音源遺伝子情報データベース４２６から、前記音楽の音響遺伝子信号を含む音楽データを抽出する。
【０１１９】
一方、音響遺伝子生成部４８０は、各種音楽データ（即ち、音源データ）を収集して、スマートテレビ１１０で生成する音響遺伝子情報の生成方法と同様の方法で変換して、各音源に対する音響遺伝子情報を生成し、前記生成された音響遺伝子情報を前記音源遺伝子情報データベース４２６に格納する。
【０１２０】
この際、前記音源情報照会部４２５は、前記音源遺伝子情報データベース４２６を検索して、受信した音響遺伝子を完全に同一に含む音楽データを抽出することもでき、類似性を有する音楽データを抽出することもできる。類似性は、受信した音楽の音響遺伝子情報と音源遺伝子情報データベース４２６内のデータとを比較して、その差が設定された範囲以内である場合に類似度が高いと判断することができる。
【０１２１】
このように、前記音響遺伝子検索部４２０により照会要請された音楽が検索されると、音楽情報照会部４５０は、前記検索された音楽に関する詳細情報を、音楽情報データベース４７０を介して照会する。この際、前記音楽情報データベース４７０には、各音楽毎の詳細情報が格納される。例えば、前記音楽情報データベース４７０に格納される情報は音楽に対するメタデータ（ｍｅｔａ  ｄａｔａ）として、音楽のタイトル、ミュージシャンの名前、アルバムのタイトル、アルバムに含まれた音楽リスト、音楽のジャンル、及びアルバム写真などの様々な形態の情報が含まれ得る。また、上述したように、ＩＤ３タグ、ＩＤ３ｖ１タグ、ＩＤ３ｖ２タグなどによる情報が格納され得る。前記ＩＤ３ｖ１タグにはトラック／タイトル／アーティスト／アルバムのタイトル／ジャンル／詳細情報などの情報が添付され、ＩＤ３ｖ２タグには作曲家／歌詞／オリジナルアーティスト／著作権者／ＵＲＬ／エンコドした人などの情報が添付される。尚、前記検索された音楽に対する再生可能な音源データをダウンロードできるアドレスなどの付加的な情報がさらに含まれ得る。
【０１２２】
一方、本発明の実施形態による前記ターゲット広告検索部４６０は、前記音響遺伝子検索部４２０により検索された音楽に係わるターゲット広告を、広告情報データベース４９１を介して検索する。前記音楽に係わるターゲット広告は、上述したように、該当音楽を好む性別、年齢層、ジャンル、趣味などを考慮して広告効果を高めるために予め設定された広告を意味する。即ち、前記ターゲット広告は、特定情報または特定ユーザ層に連関された広告情報であって、前記識別された音楽情報に連関された如何なるタイプの広告情報も、本発明によるターゲット広告となることができる。
【０１２３】
放送情報収集部４４０は、各放送局サーバ（例えば、地上波放送サーバ１４０またはケーブル放送サーバ１５０など）から放送情報（例えば、放送編成情報、チャンネル情報、放送中に挿入される音楽情報など）を収集して、放送編成情報データベース４２２に格納することができる。この際、ユーザが検索された該当音楽の放送日程に関する情報検索を要請する場合（図１３参照）、放送情報送信部４３０は、前記放送編成情報データベース４２２に格納された該当音楽の放送日程に対する情報を検索してスマートテレビ１１０に送信する。
【０１２４】
一方、上記の説明では、図２から図４に図示された本発明の実施形態において放送中の音声信号を音響遺伝子信号に変換するための音響遺伝子生成部３２０がスマートテレビ１１０に含まれると説明されているが、具現の容易性のために、前記音響遺伝子生成部３２０を音楽検索サーバ１３０に位置させることもできる。即ち、スマートテレビ１１０で収集した放送中の音声信号に対する音響遺伝子を生成せずに音楽検索サーバ１３０に送信し、音楽検索サーバ１３０にさらに備えられる音響遺伝子生成部（不図示）によって前記送信された音声信号に対する音響遺伝子情報を生成するように処理することができる。
【０１２５】
また、他の実施形態によると、前記スマートテレビ１１０は、放送中の音楽情報の要請に応じて収集された音声信号を送信せず放送チャンネル情報及び時間情報のみを送信し、音楽検索サーバ１３０で前記放送チャンネル情報及び時間情報のみを用いて現在放送中の音楽に関する情報を検索するように具現することもできる。例えば、音楽検索サーバ１３０で各チャンネルに対する放送中の音楽に関する情報をリアルタイムで検索して格納し、スマートテレビ１１０から受信された放送チャンネル情報及び時間情報に該当する音楽情報を前記格納された情報から検索することができる。
【０１２６】
以上、図１から図４を参照して本発明の実施形態によるシステム及び装置の構造を説明した。以下、図５から図８を参照して本発明の実施形態による手順を詳細に説明する。
【０１２７】
音楽関連情報の提供方法
図５は、本発明の実施形態によるテレビ受像機における音楽認識による音楽関連情報提供の手順を示す信号の流れ図である。図５を参照すると、音楽検索サーバ１３０は、放送情報（例えば、各チャンネル毎の放送編成情報、放送中に挿入された音楽情報など）を収集し、前記収集された放送情報をデータベースに格納する（Ｓ５０１）。また、広告情報（例えば、放送に挿入された各広告に対する音源情報、各チャンネル毎の各広告が放送される放送時間情報など）を収集し、前記収集された広告情報をデータベースに格納する（Ｓ５０２）。この際、前記広告に対する音源情報は、上述したように音響遺伝子として生成してデータベースに格納する（Ｓ５０３）。
【０１２８】
一方、スマートテレビ１１０は、音楽検索アプリケーションを設置して実行し（Ｓ５０４）、現在放送中の音楽に関する情報を要請する。前記要請に応じて、現在放送中のデータのうち音声信号を収集し（Ｓ５０５）、前記収集された音声信号から音響遺伝子を生成する（Ｓ５０７）。また、選択的に、現在スマートテレビ１１０に対する音楽情報要請時の放送情報（例えば、放送チャンネル及び放送時間など）を抽出する（Ｓ５０６）。その後、前記生成された音響遺伝子情報及び／または放送情報を音楽検索サーバ１３０に送信して、現在放送中の音楽に関する情報を要請する（Ｓ５０８）。
【０１２９】
音楽検索サーバ１３０は、前記情報要請に応じて、前記送信された放送情報からデータベースに格納された放送編成情報を照会することにより、該当放送中の音楽を検索する。この際、前記放送編成情報の照会結果、広告時間である場合には広告音楽に対する音響遺伝子を先に検索する。
【０１３０】
前記検索結果、放送編成情報及び広告情報に該当音楽が照会されない場合には、受信された音響遺伝子情報を既格納された各音源毎の音響遺伝子情報と比較して、音楽を検索する（Ｓ５１１）。
【０１３１】
上記のような方法によって検索された音楽に対して音楽関連情報（例えば、メタデータ）を検索する（Ｓ５１２）。また、選択的に、前記検索された音楽に対するターゲット広告を検索する（Ｓ５１３）。
【０１３２】
前記検索された音楽関連情報及びターゲット広告は、スマートテレビ１１０に送信され（Ｓ５１４）、スマートテレビ１１０では、前記音楽検索アプリケーションによって、前記検索結果が画面上に映される（Ｓ５１５）。
【０１３３】
図６は、本発明の実施形態によるテレビ受像機にインストールされるアプリケーションの実行手順を示すフローチャートである。図６を参照すると、スマートテレビにインストールされた音楽検索アプリケーションを実行すると（Ｓ６０１）、図１１に図示されたように、現在放送中の音楽に関する情報を検索するかを問う案内メッセージが映される。この際、ユーザがテレビ受像機用のリモコンなどを用いて現在放送中の音楽の検索を選択せず（Ｓ６０２）、アプリケーションを終了させると（Ｓ６０３）、サービスが終了して、テレビ放送信号のみがディスプレイされる。
【０１３４】
一方、現在放送中の音楽に対する検索を選択すると（Ｓ６０２）、前記音楽検索アプリケーションは、上述したように放送中のデータから音声信号を抽出（または収集）する（Ｓ６０４）。また、選択的に、現在選択した放送チャンネルに関する情報を確認し（Ｓ６０５）、現在検索を要請した時間情報を確認する（Ｓ６０６）。
【０１３５】
このように確認が完了すると、音楽検索サーバに現在放送中の音楽に対する照会を要請する（Ｓ６０７）。上述した方法によって音楽検索サーバで照会が完了すると、要請結果として該当音楽に関する情報が受信される（Ｓ６０８）。
【０１３６】
一方、前記音楽検索サーバから受信した結果によると、該当音楽に対する検索結果情報が存在しない場合、検索結果がないことを示すメッセージが映されてもよい（Ｓ６１０）。一方、前記該当音楽に対する検索結果情報が存在する場合、検索された結果として音楽に関する各種情報が図１２のように映されてもよい（Ｓ６１１）。
【０１３７】
図７及び図８は、音楽検索サーバ１３０で行われる手順を示す図面である。
【０１３８】
図７は、本発明の実施形態による音楽検索サーバのデータベース構築の手順を示すフローチャートである。図７を参照すると、音楽検索サーバは、放送情報をリアルタイムで収集することができる（Ｓ７０１）。例えば、各チャンネル毎に時間別に放送される音楽情報を収集することができる。即ち、特定チャンネルで放送中に挿入される音楽に対する時間及び曲名情報と、放送の間の広告時間に挿入される広告音楽に関する情報などが各放送局サーバから収集されることができる。また、音楽検索サーバは、広告音楽情報を収集し、各広告音楽の音源から音響遺伝子を生成することもできる（Ｓ７０２）。
【０１３９】
さらに、音楽検索サーバは、放送で使用される音楽に対して各音楽の音源情報を収集し、前記音源情報から音響遺伝子を生成して（Ｓ７０３）、データベースに格納する（Ｓ７０４）。音源に関する情報及び放送関連情報が更新及び累積されて格納されるように、このようなデータベースの構築過程は周期的または非周期的に行われる。
【０１４０】
図８は、本発明の実施形態による音楽検索サーバの音楽関連情報提供の手順を示すフローチャートである。図８を参照すると、前記図７のようにデータベースが構築されると、特定スマートテレビから、放送中の音楽に対する情報要請が受信される（Ｓ８０１）。この際、前記スマートテレビから送信された受信情報内で放送情報を選択的に確認することも可能である（Ｓ８０２）。
【０１４１】
一方、前記確認された放送情報（例えば、チャンネル情報及び時間情報）を用いてデータベースに格納された放送編成情報を照会し、前記受信された放送情報に該当する音楽情報が存在しない場合には、各音楽に対する音源遺伝子情報を検索（Ｓ８１１）することにより、音楽情報を照会する。前記音源遺伝子情報の照会結果、検索結果が存在する場合には、前記検索結果として該当検索された音楽に関する音楽情報を照会する（Ｓ８０８）。また、検索された音楽に従ってターゲット広告が選択的に検索され（Ｓ８０９）、前記検索された結果情報が該当スマートテレビに送信される（Ｓ８１０）。
【０１４２】
また、前記受信された放送情報に該当する音楽情報が存在し（Ｓ８０３）、該当放送時間が広告時間である場合（Ｓ８０４）には、受信された音響遺伝子に基づいて広告音楽に対する遺伝子情報が検索される（Ｓ８０５）。しかし、前記受信された放送情報に該当する音楽情報が存在し（Ｓ８０３）、該当放送時間が広告時間ではない場合（Ｓ８０４）（例えば、ドラマ、娯楽番組などの放送中である場合）には、受信された放送情報に基づいて音楽が検索される。前記方法による照会結果、検索された音楽が存在しない場合、さらに上述の各音楽に対する音源遺伝子情報と比較することで、音楽が検索される（Ｓ８１１）。
【０１４３】
このように、各種方法によって該当音楽が検索されると、検索結果として音楽に関する情報（例えば、メタデータなど）が照会され（Ｓ８０８）、ターゲット広告が検索されて（Ｓ８０９）、該当スマートテレビに送信される（Ｓ８１０）。
【０１４４】
以上、本発明の実施形態によるテレビ受像機における音楽認識による音楽関連情報提供の手順を詳細に説明した。以下、本発明の実施形態によって具現されたサービスの例を説明する。
【０１４５】
実施形態
図９は、本発明の実施形態による放送編成情報データベースのデータ構造を示す図面である。図９を参照すると、放送編成情報データベース４２２には、各チャンネル毎に放送時間情報及び各放送に含まれた音楽情報が格納され得る。
【０１４６】
例えば、放送編成情報データベース４２２に格納された情報を参照すると、図示されたように、「ＣＨ２」で１時〜２時２０分まで「ＡＡＡ」が放送されることが分かり、前記該当放送中に挿入された音楽に関する情報を確認することができる。例えば、１時１５分から１時１８分の間には「ＢＢＢ」という音楽が挿入されて再生されることが分かり、１時３５分から１時３８分の間には「ＣＣＣ」という音楽が挿入されて再生されることが分かり、１時４４分から１時４７分の間には「ＤＤＤ」という音楽が挿入されて再生されることが分かる。
【０１４７】
したがって、スマートテレビから放送チャンネル情報と現在時間情報を音楽検索サーバに送信すると、図示されたように、該当放送編成情報に音楽情報が含まれている場合には、音響遺伝子を検索することなく音楽情報を検索することができる。
【０１４８】
例えば、ユーザが１時３７分に現在「ＣＨ２」で放送されている「ＡＡＡ」で出ている音楽を検索しようとして検索要請をする場合、前記「１時３７分」及び「ＣＨ２」情報が音楽検索サーバに送信され、前記送信された情報に基づいて放送編成情報データベース４２２を検索することにより、現在放送中の音楽が「ＣＣＣ」であることが分かることになる。
【０１４９】
図１０は、本発明の実施形態による広告遺伝子情報データベースのデータ構造を示す図面である。上述したように、広告遺伝子情報データベース４２４には、各広告音楽の音源を音響遺伝子として生成したデータが格納されることができ、また図１０に図示されたように、各広告が放送されるスケジュール情報が、さらに格納されることができる。
【０１５０】
例えば、「広告＃１」は、「ＣＨ１」で「０１：１５」、「０３：１８」、「０５：３８」などに放送され、「ＣＨ２」で「０３：２５」、「０４：１５」、「０６：２３」などに放送され、「ＣＨ４」で「０２：１７」、「０３：１５」、「０８：２３」などに放送されることが分かる。
【０１５１】
したがって、特定広告音楽が現在放送される音楽として検索され、ユーザが検索された音楽の放送スケジュールを検索する場合、上記のように、各広告が放送されるスケジュール情報が格納されているので、検索された広告音楽の放送スケジュール情報を、図１３に図示されたように提供することができる。
【０１５２】
図１１は、本発明の実施形態による音楽検索アプリケーションの実行画面を示すテレビ画面の例示図であり、図１２は、本発明の実施形態による音楽検索の結果画面を示すテレビ画面の例示図である。
【０１５３】
図１１及び図１２を参照すると、上述したように、スマートテレビ１１０で音楽検索アプリケーション１１１０が実行されると、現在出ている音楽の情報を検索するかを問うメッセージがディスプレイされる。この際、ユーザがリモコンなどの入力手段を用いて検索ボタン１１１１を選択すると、現在放送されている音楽に対する情報検索がなされ、取り消しボタン１１１２を選択すると、アプリケーションが終了される。
【０１５４】
したがって、前記検索要請に応じて、図１２に図示されたような音楽検索結果情報１２１０が映され、これに係わるターゲット広告１２２０がともに映される。前記図１２の画面でダウンロード１２１１が選択されると、該当検索された音楽のダウンロードを行うための決済画面に切り替えられる。さらに、前記図１２の画面で次の放送情報の検索１２１２が選択されると、図１３に図示されたように、検索された音楽の放送スケジュールが検索されて映される。
【０１５５】
図１３は、本発明の実施形態による放送日程照会結果の画面を示すテレビ画面の例示図である。図１３を参照すると、図１２で検索された音楽の放送スケジュール情報が要求されると、図１０を参照して上述したように、音楽情報サーバのデータベース検索を経て、該当音楽の放送スケジュール情報１３１０が受信されて映される。
【０１５６】
以上、本発明を具体的な構成要素などのような特定事項と限定された実施形態及び図面を参照して説明したが、これは本発明のより全体的な理解を容易にするために提供されたものにすぎず、本発明は前記実施形態によって限定されず、本発明が属する分野で通常的な知識を有した者であれば、このような記載から多様な修正及び変形が可能である。
【０１５７】
従って、本発明の思想は前記実施形態に限定されて決まってはならず、添付する特許請求範囲だけでなく、特許請求範囲と均等または等価的に変形された全ては、本発明の思想の範疇に属するとするべきであろう。
【符号の説明】
【０１５８】
１１０  スマートテレビ
１２０  通信ネットワーク
１３０  音楽検索サーバ
１４０  地上波放送サーバ
１５０  ケーブル放送サーバ
２０１  放送信号受信部
２０２  データ通信Ｉ／Ｆ部
２０３  主制御部
２０４  入力部
２０５  音声信号収集部
２０６  応用プログラム処理部
２０７  インターネット接続部
２０８  テレビ制御画面生成部
２０９  テレビ映像構成部
２１０  ディスプレイパネル部
３１０  音楽情報要請受信部
３２０  音響遺伝子生成部
３３０  放送情報抽出部
３４０  音楽情報照会部
３５０  照会結果受信部
３６０  結果情報生成部
３７０  放送情報照会部
４１０  情報要請受信部
４２０  音響遺伝子検索部
４２１  放送情報照会部
４２２  放送編成情報データベース
４２３  広告情報照会部
４２４  広告遺伝子情報データベース
４２５  音源情報照会部
４２６  音源遺伝子情報データベース
４３０  放送情報送信部
４４０  放送情報収集部
４５０  音楽情報照会部
４６０  ターゲット広告検索部
４７０  音楽情報データベース
４８０  音響遺伝子生成部
４９０  広告情報収集部
４９１  広告情報データベース
４９２  結果情報送信部
【図１】
2014010458.tif 000012
【図２】
2014010458.tif 000013
【図３】
2014010458.tif 000014
【図４】
2014010458.tif 000015
【図５】
2014010458.tif 000016
【図６】
2014010458.tif 000017
【図７】
2014010458.tif 000018
【図８】
2014010458.tif 000019
【図９】
2014010458.tif 000020
【図１０】
2014010458.tif 000021
【図１１】
2014010458.tif 000022
【図１２】
2014010458.tif 000023
【図１３】
2014010458.tif 000024