(57)【特許請求の範囲】
【請求項１】
インターネット放送を始めとするネットワーク放送、またはデジタル放送を始めとする有線または無線の放送を通して配信される番組の提示方法であって、
番組映像と、該番組映像中のシーンあるいは別の方法で定められる映像の意味的単位の内容を記述した意味情報をクライアントの復号部が受信し、
前記クライアントの意味情報解釈部は、意味情報に対して提示すべき関連情報のカテゴリを予め定めたルールを参照して、前記受信した意味情報から提示すべき関連情報のカテゴリを決定し、
前記クライアントの意味情報解釈部は、項目名とその嗜好値を対としたユーザプロファイルを参照して、前記決定したカテゴリと項目名から嗜好値を決定し、
前記クライアントの映像合成部は、配信されてきた番組映像に、決定された嗜好値の関連情報を合成してユーザに提示する
番組提示方法。
【請求項２】
インターネット放送を始めとするネットワーク放送、またはデジタル放送を始めとする有線または無線の放送を通して受信した番組を提示する番組提示装置であって、
情報配信サーバから送信された、番組映像と、該番組映像中のシーンあるいは別の方法で定められる映像の意味的単位の内容を記述した意味情報を受信する復号部と、
意味情報に対して提示すべき関連情報のカテゴリを定めたルールを格納しているルールＤＢと、
項目名とその嗜好値を対としたユーザプロファイルを蓄積するユーザプロファイルＤＢと、
前記ルールＤＢを参照して、前記受信した意味情報から提示すべき関連情報のカテゴリを決定し、前記ユーザプロファイルＤＢを参照して、前記決定したカテゴリと項目名から嗜好値を決定する意味情報解釈部と、
前記決定された嗜好値の関連情報を、前記番組提示装置に具備された関連情報ＤＢから取得するか、あるいはネットワークを介して関連情報サーバから取得する関連情報管理部と、
前記復号部で受信された番組映像に、前記関連情報管理部で取得された、決定された嗜好値の関連情報を合成する映像合成部と、
前記映像合成部で合成された映像をユーザに提示する表示部と
を有する番組提示装置。
【請求項３】
情報配信サーバから送信された、番組映像と、該番組映像中のシーンあるいは別の方法で定められる映像の意味的単位の内容を記述した意味情報を受信する復号処理と、
意味情報に対して提示すべき関連情報のカテゴリを定めたルールを参照して、前記受信した意味情報から提示すべき関連情報のカテゴリを決定し、項目名とその嗜好値を対としたユーザプロファイル蓄積するユーザプロファイルＤＢを参照して、前記決定したカテゴリと項目名から嗜好値を決定する意味情報解釈処理と、
前記決定された嗜好値の関連情報を、番組提示装置に具備された関連情報ＤＢから取得するか、あるいはネットワークを介して関連情報サーバから取得する関連情報管理処理と、
前記復号処理で受信された番組映像に、決定された嗜好値の関連情報を合成する映像合成処理と、
前記映像合成処理で合成された映像をユーザに提示する表示処理と
をコンピュータに実行させるための番組提示プログラムを記録した、コンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、デジタル放送やインターネット放送における情報提示システムに関し、特に放送局や放送サーバから送られる情報に応じて、広告などの関連情報をユーザに提示するシステムに関する。
【０００２】
【従来の技術】
従来のアナログ放送において、放送局からユーザに送られる番組は、広告を提示する場合、シーンとシーンの合間に広告（CM）を挟んで提示されていた。広告はユーザの購買意欲をそそるのに効果的なように、番組を視聴しているユーザの層に合わせて番組の内容に応じて提示されていた。
【０００３】
また、映像の関連情報の提示方法としては映像にテロップなどをオーバラップさせることにより、実現していた。
【０００４】
【発明が解決しようとする課題】
従来の広告提示方法は、番組映像を切り刻んでその合間に広告（CM）を挿入するという方法であったので、番組の内容に合わせて効果的に広告を提示することはできなかった。
【０００５】
さらに、従来の広告挿入方法は、放送局が挿入する番組の視聴ターゲットとしているユーザを決めてそれに合わせて広告（CM）を挿入するというものであったので、予め視聴者層を予測し、その視聴者層に向けた広告しか送信することはでなかった。
【０００６】
また、映像の関連情報をユーザに提示する方法としては、制作者側の意図を元に同じ情報を映像に重畳してから放送するため、全ての人に同じ関連情報を提示する方法しかなく、関連情報の提供に課金する手段はなかった。
【０００７】
さらに、ユーザがどのような関連情報を欲するかなどユーザの好みや興味を収集する方法は存在しなかった。
【０００８】
本発明の目的は、ユーザ毎の好みや興味に合わせて関連情報を提示する番組提示方法、装置、および番組提示プログラムを記録した記録媒体を提供することにある。
【００１０】
【課題を解決するための手段】
本発明の番組提示方法は、
インターネット放送を始めとするネットワーク放送、またはデジタル放送を始めとする有線または無線の放送を通して配信される番組の提示方法であって、
番組映像と、該番組映像中のシーンあるいは別の方法で定められる映像の意味的単位の内容を記述した意味情報をクライアントの復号部が受信し、
前記クライアントの意味情報解釈部は、意味情報に対して提示すべき関連情報のカテゴリを予め定めたルールを参照して、前記受信した意味情報から提示すべき関連情報のカテゴリを決定し、
前記クライアントの意味情報解釈部は、項目名とその嗜好値を対としたユーザプロファイルを参照して、前記決定したカテゴリと項目名から嗜好値を決定し、
前記クライアントの映像合成部は、配信されてきた番組映像に、決定された嗜好値の関連情報を合成してユーザに提示する。
【００１１】
映像と同時に配信される意味情報を用いることで、映像がどんなシーンなのかをシステムで把握し、ルールと合わせて解釈することで、状況や番組の内容に合わせてユーザに対する効果的な関連情報の提示が可能となる。
【００１２】
また、ユーザの好み、興味を記述したユーザプロファイルを参照して、ユーザの好みや興味に合った関連情報を選択しユーザに提示する。
【００１３】
また、そのユーザに個別に対応した関連情報の提示も可能となり、効果的な情報提供が可能となる。
【００１５】
【発明の実施の形態】
次に、本発明の実施の形態について図面を参照して説明する。
【００１６】
図１は本発明の一実施形態の番組提示システムの構成図である。
【００１７】
本番組提示システムは情報配信サーバ１０１と関連情報サーバ１０２とクライアント１０３と応答サーバ１０４で構成され、情報配信サーバ１０１、関連情報サーバ１０２、応答サーバ１０４はそれぞれネットワーク１０７、１０８、１０５を介してクライアント１０３と接続される。
【００１８】
情報発信サーバ１０１は番組中のシーンあるいは別の方法で定められる映像の意味的単位の内容を記述した意味情報を番組映像とともに配信する。関連情報サーバ１０２は、広告などの、番組に関連する情報を要求に応じクライアント１０３に配信する。クライアント１０３は、意味情報に応じてユーザに提示すべき関連情報の種類およびその提示タイミングを予め定めたルールを参照して情報発信サーバ１０１から配信されたきた意味情報に応じた関連情報を提示タイミングで番組映像と共にユーザ１０６に提示する。
【００１９】
ネットワーク１０７、１０８、１０５はインターネットや電話網と放送網の組み合わせなどであり、それぞれ異なっていても同じでもよい。
【００２０】
クライアント１０３は復号部２０１とルールDB２０２と意味情報解釈部２０３と関連情報管理部２０４と関連情報DB２０５と映像合成部２０６と表示部２０７と反応応答部２０８とユーザプロファイルDB２０９から構成される。
【００２１】
復号部２０１は、情報配信サーバ１０１から送信された番組情報と、各シーンの意味を記述した意味情報を復号処理により取り出し、番組情報、意味情報をそれぞれ映像合成部２０６、意味情報解釈部２０３に送る。
【００２２】
意味情報解釈部２０３は、意味情報とルールDB１０４中のルール、およびユーザプロファイルDB１０５中のユーザプロファイルにしたがって関連情報の種類とその提示タイミングを決定する。すなわち、ユーザに関連情報を提示して効果的に見せられるタイミングを決定し、そのタイミングで提示する関連情報の種類を関連情報管理部２０４へ送る。
【００２３】
関連情報管理部２０４は、送られてきた種類の関連情報を関連情報DB２０５から取り出し、映像合成部２０６へ送る。このとき必要な関連情報が関連情報DB２０５に存在しなかった場合、関連情報管理部２０４はネットワーク１０８を経由して関連情報サーバ１０２へ関連情報を要求し、関連情報サーバ１０２からネットワーク１０８経由で送られた関連情報を関連情報DB２０５に蓄えると共に、映像合成部２０６へ送る。
【００２４】
映像合成部２０６は、取り出された関連情報と情報配信サーバ１０１からクライアント１０３に送られた映像を合成してユーザに提示する映像を作成する。映像合成部２０６で作成された映像や画面イメージは表示部２０７を通してユーザ１０６に提示される。
【００２５】
反応応答部２０８はユーザ１０６の操作により、必要な情報をネットワーク１０５を介して応答サーバ１０４に送信したり、自らの好みや興味をユーザプロファイルDB２０９中の自らのプロファイルに反映する。
【００２６】
次に、本実施形態の動作を説明する。
【００２７】
情報配信サーバ１０１からクライアント１０３へ番組映像と各シーンの意味を記述した意味情報が同期して送信される。情報配信サーバ１０１から番組映像と分離して意味情報をクライアント１０３へ送信しても構わないし、映像中に埋め込んで配信することも可能である。例えば、デジタル放送において番組映像はMPEG2フォーマットでエンコードされ、MPEG2システム（ISO／IEC JTC1／13818−1）の形態にMultiplexされるが、MPEG2システムのユーザ領域に番組の意味情報を埋め込むことができる。別の例として、電子透かし技術を用いて番組映像中や音声に意味情報を埋め込むことができる。
【００２８】
クライアント１０３では、情報配信サーバ１０１から配信された意味情報を復号部２０１で復号処理を経て取り出す。映像に意味情報が埋め込まれていた場合は、所定の処理を施すことによって復号処理が実現される。この処理により映像と意味情報が分離され、それぞれ映像合成部２０６、意味情報解釈部２０３へ送られる。
【００２９】
意味情報解釈部２０３は、意味情報とルールDB２０２中のルール、およびユーザプロファイルDB２０９中のユーザプロファイルにしたがって関連情報の種類と関連情報を提示するタイミング、すなわち、ユーザに関連情報を提示して効果的に見せられるタイミングを決定する。
【００３０】
ここで、ルールは意味情報に対して提示すべき関連情報のカテゴリを示し、ユーザプロファイルはユーザが好むシーンやユーザの好むものなどに関する記述である。図２はルールの例であり、図３はユーザプロファイルの例である。
【００３１】
第１の例として、映像の意味情報が「暑いシーン」であり、ルールに「暑いシーンでは飲み物のCM提示」という記述がある場合、意味情報解釈部２０３は暑いシーンに対して飲み物のCMを提示することを決定する。このとき、ユーザのプロファイルに好みの飲み物が「ビール」であると記述されていれば、ビールのCMを提示することを決定する。また、ユーザプロファイルに好みの飲み物が「コーラ」であると記述されていれば、コーラのCMを提示することを決定する。
【００３２】
第２の例として、本発明をライブ映像送受信システム上で用いる場合について説明する。ライブ映像送受信システム（LiveWatch）では、ライブ中継で見たいシーンをユーザが予め設定しておけば、そのシーンがきたときユーザにお知らせしたり、そのシーンの映像を表示したりする（文献  田中、阿久津、外村、秦泉寺：“見たいシーンを見逃さないライブ中継Live  Watch,”信学技報、100, 134, PRUM2000-30,200参照）。
【００３３】
LiveWatchでユーザが見たいシーンを野球の得点シーンであると設定した場合、その設定情報がユーザプロファイルDB２０９に保存される。意味情報解釈部２０３では、ユーザプロファイルDB２０９を参照してユーザが得点シーンを見ることを把握できる。そこで、得点シーンでCMを提示するというルールを作成し、ルールDB２０２に追加する。これにより、得点シーンがきたらCMを提示するという情報を関連情報管理部２０４に送るようになる。
【００３４】
意味情報解釈部２０３で関連情報を提示するタイミングが決まれば、そのタイミングで特定の関連情報、例えばビールのCMを提示するという情報を関連情報管理部２０４へ送る。関連情報ＤＢ２０５には関連情報サーバ１０２から関連情報が予めダウンロードされて蓄積されている。関連情報管理部２０４は、関連情報DB２０５から例えばビールに関連するCMを取り出し、映像合成部２０６へ送る。
【００３５】
このとき必要な関連情報、例えば、ビールに関するCMが関連情報DB２０５に存在しなかった場合、関連情報管理部２０４はネットワーク１０８を経由して関連情報サーバ１０２へビールに関するCMを要求する。ビールに関するCMは関連情報サーバ１０２からネットワーク１０８経由で関連情報管理部２０４へ送られる。送られてきたビールに関するCMは関連情報DB２０５に蓄えると共に、映像合成部２０６へ送られる。
【００３６】
関連情報サーバ１０２では、例えばビールのCMがクライアント１０３を利用しているユーザ１０６から要求されたことを、関連情報を要求されたタイミングでサーバ内のテーブルに追加する。テーブルの例を表１に示す。また、別のシーンで別の関連情報がユーザ１０６から要求されても、同様の手順でテーブルに追加できる。さらに、予めユーザ１０６が操作してクライアント１０３が関連情報サーバ１０２から関連情報をダウンロードし、クライアント１０３内の関連情報DB２０５に蓄積する場合においても、ダウンロードした関連情報がユーザ１０６が欲している関連情報であるとして、その記述をダウンロードのタイミングでテーブルに追加する。別途テーブルを解析することで、ユーザ１０６が行った関連情報要求からユーザ１０６の要求傾向がわかり、ユーザ１０６の好みや興味が分析できる。また、関連情報サーバ１０２を利用するユーザ全体の興味についても同様に分析が可能である。
【００３７】
【表１】
0003727231.tif 000002
【００３８】
また、別のテーブル利用方法として、ユーザ１０６が利用した関連情報に対して課金することも可能である。さらに、ユーザ１０６に対して関連情報提示と広告提示の価値を鑑み、広告を要求する毎に課金額を減額するという操作を行うことも可能である。例えば、表１に示すテーブルを参照して、ユーザ１０６が「○○選手のプロフィール」を要求しているのでそれに対し課金するが、別のタイミングで「ビールのCM」と「パソコンのCM」を要求しているのでユーザ１０６への課金額をそれらのCMを見たことに対応する額だけ減額する、という操作が可能となる。
【００３９】
映像合成部２０６は、取り出された関連情報と情報配信サーバ１０１からクライアント１０３に送られた映像を合成してユーザ１０６に提示する映像を作成する。例えば、映像処理により、映像中で変化のない領域やフォーカスされたオブジェクトではない領域、または画像上意味をなさないぼけた領域などを抽出し、その領域に関連情報を重畳して表示することが可能である。また、関連情報を重畳する領域は情報発信サーバ１０１から送られる意味情報として示されていてもよい。その場合は、与えられた領域に関連情報を重畳する。
【００４０】
また、別の画面合成例では、全画面をフレームに分割し、映像と関連情報を異なるフレームに描画して並べる画面イメージを作成してもよい。
【００４１】
映像合成部２０６で作成された映像や画面イメージは表示部２０７を通してユーザ１０６に提示される。
【００４２】
以上の操作により、ユーザ１０６は例えば、暑いシーンでビールやコーラのCMを提示されたり、自ら見たいと設定した得点シーンでCMを提示されたりする。これにより、システムではユーザ１０６に広告を見せるのに効果的なタイミングでユーザ１０６の好みや興味に合ったCMを提示したり、ユーザ１０６が映像を見ている可能性が高い場面で効果的にCMを提示することが可能になる。
【００４３】
ここで、ユーザ１０６はCMの商品や関連情報が気に入れば、反応応答部２０８を操作することにより、ネットワーク１０５を通して応答サーバ１０４へ情報を送り、オンラインショッピングを実現することも可能である。
【００４４】
さらに、ユーザプロファイルDB２０９中の自らのプロファイルに反映することも可能である。例えば、ユーザ１０６が暑いシーンでビールのCMが提示されたときに、反応応答部２０８を操作して自分が喜んだと反応すれば、ユーザプロファイルにビールが好きであることを記述する。逆に、ビールのCMを提示されたくなかったときは、そのように反応して、ユーザプロファイルからビールが好きであるという情報を消去する。これにより、次の「暑いシーン」からは違う飲み物のCMが提示されるようになる。
【００４５】
また、別の例として、反応応答部２０８で得た、ユーザ１０６の好みや操作に関する情報はネットワーク１０５を通して応答サーバ１０４に送信することも可能である。応答サーバ１０４ではその情報を元に、ユーザ１０６の興味を直接得ることも可能となる。
【００４６】
関連情報ＤＢ２０５をなくし、関連情報管理部２０４はその都度関連情報サーバ１０２に関連情報を要求し、受信するようにしてもよい。
【００４７】
なお、クライアント１０３中の復号部２０１、意味情報解釈部２０３、関連情報管理部２０４、映像合成部２０６、表示部２０７、反応応答部２０８からなる処理は番組提示プログラムとして、フロッピィディスク、CD−ROM、光磁気ディスク、DVDなどの記録媒体に記録しておき、パソコンなどのコンピュータ上で実行することができる。
【００４８】
【発明の効果】
以上説明したように、本発明によれば、下記のような効果がある。
【００４９】
１）映像と同時に配信される意味情報を用いることで、映像がどんなシーンなのかをシステムで把握できるようになり、ルールと合わせて解釈することで、状況や番組の内容に合わせてユーザに対する効果的な関連情報の提示が可能となる。
【００５０】
２）ユーザのプロファイルを用いることにより、そのユーザに個別に対応した関連情報の提示も可能となり、効果的な情報提供が可能となる。
【図面の簡単な説明】
【図１】本発明の一実施形態の番組提示システムの構成図である。
【図２】ルールDB２０２に格納されたルールの例を示す図である。
【図３】ユーザプロファイルDB２０９に格納されたプロファイルの例を示す図である。
【符号の説明】
１０１    情報配信サーバ
１０２    関連情報サーバ
１０３    クライアント
１０４    応答サーバ
１０５、１０７、１０８    ネットワーク
１０６    ユーザ
２０１    復号部
２０２    ルールDB
２０３    意味情報解釈部
２０４    関連情報管理部
２０５    関連情報DB
２０６    映像合成部
２０７    表示部
２０８    反応応答部
２０９    ユーザプロファイルDB
【図１】
0003727231.tif 000003
【図２】
0003727231.tif 000004
【図３】
0003727231.tif 000005