(57)【特許請求の範囲】
【請求項１】
視聴済みのコンテンツを格納するコンテンツ格納手段と、
前記コンテンツの識別子、視聴日時、及び、音声または文字情報を前記コンテンツの視聴属性として格納する視聴属性格納手段と、
前記コンテンツを視聴したユーザ自身または周囲の現在の時間及び状況情報を入力する入力手段と、
前記入力されたユーザ自身または周囲の現在の時間及び状況情報と前記コンテンツの視聴属性中の視聴日時、及び、音声または文字情報とを照合する照合手段と、
前記照合手段によって、前記ユーザ自身または周囲の現在の時間及び状況情報と少なくとも部分一致すると照合された前記コンテンツについて、（１）視聴してから日が浅い場合には、前記コンテンツの視聴属性のみを、（２）視聴してから日数が経過している場合には、前記コンテンツの視聴属性及び前記視聴済みのコンテンツを、ユーザに提示する提示手段と
を備える情報提示システム。
【請求項２】
前記入力手段によって入力されたユーザ自身または周囲の現在の時間及び状況情報は、前記ユーザ自身の現在時間での位置情報、または、ユーザが現在の時間に閲覧している表示デバイスに表示されている情報であることを特徴とする請求項１記載の情報提示システム。
【請求項３】
前記提示手段は、照合された前記コンテンツ内の画像データ又はテキストデータから画像クリップ又はメッセージデータを生成し、提示することを特徴とする請求項１記載の情報提供システム。
【請求項４】
コンテンツ格納手段が、視聴済みのコンテンツを格納し、
視聴属性格納手段が、前記コンテンツの識別子、視聴日時、及び、音声または文字情報を前記コンテンツの視聴属性として格納し、
入力手段が、前記コンテンツを視聴したユーザ自身または周囲の現在の時間及び状況情報を入力し、
照合手段が、前記入力されたユーザ自身または周囲の現在の状況情報と前記コンテンツの視聴属性中の視聴日時、及び、音声または文字情報とを照合し、
提示手段が、前記ユーザ自身または周囲の現在の時間及び状況情報と少なくとも部分一致すると照合された前記コンテンツについて、（１）視聴してから日が浅い場合には、前記コンテンツの視聴属性のみを、（２）視聴してから日数が経過している場合には、前記コンテンツの視聴属性及び前記視聴済みのコンテンツを、ユーザに提示することを特徴とする情報提示方法。
【請求項５】
視聴済みのコンテンツを格納するコンテンツ格納手段と、
前記コンテンツの識別子、視聴日時、及び、音声または文字情報を前記コンテンツの視聴属性として格納する視聴属性格納手段と、
前記コンテンツを視聴したユーザ自身または周囲の現在の状況情報を受信する受信手段と、
前記入力されたユーザ自身または周囲の現在の時間及び状況情報と前記コンテンツの視聴属性中の視聴日時、及び、音声または文字情報とを照合する照合手段と、
前記照合手段によって、前記ユーザ自身または周囲の現在の時間及び状況情報と少なくとも部分一致すると照合された前記コンテンツについて、（１）視聴してから日が浅い場合には、前記コンテンツの視聴属性のみを、（２）視聴してから日数が経過している場合には、前記コンテンツの視聴属性及び前記視聴済みのコンテンツを、表示装置に表示する送信手段と
を備える情報提示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、過去にユーザが視聴したコンテンツに関する情報を提示する情報提示システム、特に、ユーザの現在状況に応じて視聴済みのコンテンツに関する情報を提示する情報提示システムに関する。
【背景技術】
【０００２】
テレビなどのコンテンツ視聴による経験は疑似体験とも言えるものであるが、テレビ番組で見つけたレストランの場所や欲しいと思った商品などを、実際にユーザが関係する状況、例えばそのレストランの近くを通りかかったり、商品のある場所でそれを思い出したりするためには、あらかじめメモを取っておくなどして明示的に活用を意識する必要がある。
【０００３】
従来、ユーザが適当な状況に置かれた場合に推薦・提示する方法としては、視聴結果からユーザの嗜好を表すユーザモデルを作成し、未視聴のコンテンツを推薦するような方法が提案されている。
【０００４】
このユーザモデルによる方法では、マーキングを意識させず、ユーザの操作履歴からユーザの嗜好を学習し、ユーザに先立ってコンテンツを選択することが行われている。例えば、特許文献１では、テレビ番組において、視聴履歴に基づくユーザ嗜好に基づき、番組表からユーザに推薦する番組を選択して表示する方法が提案されている。
【特許文献１】特開２００３−１１４９０３号公報（第９〜１４頁、図４，５）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、ユーザモデルに基づく推薦は、未視聴のコンテンツのうちユーザが好みそうなものを選択することが目的であり、視聴済みのコンテンツを更に活用することを目指したものではない。
【０００６】
本発明は、上記に鑑みてなされたものであって、ユーザが過去に視聴したコンテンツを後でユーザの現在状況に応じてそのコンテンツに関する情報を提示することによりユーザに過去の視聴経験を想起させる情報提示システム、情報提示方法、情報提示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
第１の発明は、視聴済みのコンテンツを格納するコンテンツ格納手段と、前記コンテンツの視聴属性を格納する視聴属性格納手段と、前記コンテンツを視聴したユーザ自身または周囲の現在の状況情報を入力する入力手段と、前記入力されたユーザ自身または周囲の現在の状況情報と前記コンテンツの視聴属性とを照合する照合手段と、前記照合手段によって、前記ユーザ自身または周囲の現在の状況情報と少なくとも部分一致すると照合された、視聴済みのコンテンツ情報をユーザに提示する提示手段とを備える情報提示システムである。
【０００８】
第２の発明は、前記入力手段によって入力されたユーザ自身または周囲の現在の状況情報は、前記ユーザ自身の現在の位置情報、または、ユーザが閲覧している表示デバイスに表示されている情報であることを特徴とする第１の発明記載の情報提示システムである。
【０００９】
第３の発明は、前記提示手段は、前記照合された視聴済みのコンテンツ情報内の画像データ又はテキストデータから画像クリップ又はメッセージデータを生成し、提示することを特徴とする第１の発明記載の情報提供システムである。
【００１０】
第４の発明は、前記視聴属性格納手段は、前記視聴属性として、前記視聴済みのコンテンツの識別子、視聴日時、及び、音声または文字情報を組にして格納することを特徴とする第１の発明記載の情報提供システムである。
【００１１】
第５の発明は、視聴済みのコンテンツを格納し、前記コンテンツの視聴属性を格納し、前記コンテンツを視聴したユーザ自身または周囲の現在の状況情報を入力し、前記入力されたユーザ自身または周囲の現在の状況情報と前記コンテンツの視聴属性とを照合し、前記ユーザ自身または周囲の現在の状況情報と少なくとも部分一致すると照合された、視聴済みのコンテンツ情報をユーザに提示することを特徴とする情報提示方法である。
【００１２】
第６の発明は、視聴済みのコンテンツを格納するコンテンツ格納手段と、前記コンテンツの視聴属性を格納する視聴属性格納手段と、前記コンテンツを視聴したユーザ自身または周囲の現在の状況情報を受信する受信手段と、前記入力されたユーザ自身または周囲の現在の状況情報と前記コンテンツの視聴属性とを照合する照合手段と、前記照合手段によって、前記ユーザ自身または周囲の現在の状況情報と少なくとも部分一致すると照合された、視聴済みのコンテンツ情報を表示装置に表示する送信手段とを備える情報提示装置である。
【発明の効果】
【００１３】
本発明によれば、ユーザが過去に視聴したコンテンツを後でユーザの現在状況に応じてそのコンテンツに関する情報を提示することによりユーザに過去の視聴経験を想起させる情報提示システム、情報提示方法、情報提示装置を提供することができる。
【発明を実施するための最良の形態】
【００１４】
以下、本発明の実施の形態について図面を参照しながら説明する。本実施形態にかかる情報提示システムは、コンピュータ上で管理される視聴済みコンテンツの視聴属性をもとに、コンテンツに関する情報を提示するものである。
【００１５】
本実施形態にかかる情報提示システムは、CPUなどの制御装置と、ROMやRAMなどの記憶装置と、HDDなどの外部記憶装置と、ディスプレイ装置などの表示装置と、キーボード、マウスなどの入力装置とを備えた、一般的なコンピュータに適用することができる。
【００１６】
以下では、利用者が過去に視聴したテレビ番組の映像コンテンツを用いて、テレビ視聴以外の作業を行う時に映像あるいは映像の視聴属性を提示する例を示す。なお、本実施形態では視聴コンテンツとしてテレビ番組の映像コンテンツを対象とするが、視聴コンテンツとして活用するのはテレビ番組に限るものではなく、DVDなど他の映像媒体や、音声コンテンツ、あるいはテキストやWebページなどの電子データを対象とするように構成してもよい。
【００１７】
図１は、本実施形態にかかる情報提示システムの概略構成を示すブロック図である。同図に示すように、情報提示システムは、コンテンツを再生するコンテンツ再生部１１０と、再生したコンテンツを格納する視聴済みコンテンツ格納部１２０と、視聴日時等の属性を取得する視聴属性取得部１３０と、再生したコンテンツに対して音声認識処理及び画像認識処理を実行する音声認識部１４０及び画像認識部１５０と、認識結果に対し意味属性を付与する意味解析部１６０と、取得した視聴属性を格納する視聴属性格納部１７０と、ユーザの現在状況を入力する状況情報入力部１８０と、入力された状況情報と視聴属性情報と照合する視聴属性照合部１９０と、照合された視聴属性に応じてユーザに提示する情報を生成する表示内容生成部２００と、生成された情報を表示する表示部２１０と、実際にユーザに提示された履歴を管理する表示履歴制御部２２０とを備えている。各格納部は、HDD、光ディスク、メモリカード、RAMなどの一般的に利用されているあらゆる記憶手段により構成することができる。
【００１８】
以下、各機能ブロックの説明を行う。それぞれの機能ブロックを構成するデータ構造や処理の流れは、必要に応じて後述する。
【００１９】
コンテンツ再生部１１０は、ユーザが視聴するテレビ番組を再生する。コンテンツにはテレビ放送の映像自体に加え、EPGやデータ放送、字幕など映像信号と重畳して配信されるメタデータも含まれる。視聴されたコンテンツはその都度視聴済みコンテンツ格納部１２０に保存・格納されるとともに、視聴属性取得部１３０によって映像から画像認識処理等によって取得可能な情報や重畳されるメタデータが抽出される。
【００２０】
視聴属性取得部１３０は、音声認識部１４０や画像認識部１５０の認識結果から得られるテキストデータを入力し、視聴日時や各認識結果のテキストデータに含まれる人名、地名などのキーワードを意味解析部１６０を用いて抽出した後、映像情報に重畳されているメタデータや出現時刻、元の映像コンテンツのIDと組にして視聴属性格納部１７０に格納する。
【００２１】
音声認識部１４０は、映像情報中の音声または音楽を認識し、認識された音声または認識された音楽の曲名をテキストデータとして出力する。
【００２２】
画像認識部１５０は、映像中の人物、建物、テロップなどの部分画像を認識し、認識した部分画像の範囲と認識結果の内容を表すテキストデータを出力する。
【００２３】
意味解析部１６０は、テキストデータ中に含まれる単語に対し、人名、地名などの意味属性を付与する。
【００２４】
視聴属性格納部１７０は、視聴属性取得部１３０によって取得されたキーワードやメタデータ、出現時刻、コンテンツIDを組にしたものを格納する。
【００２５】
状況情報入力部１８０は、ユーザの現在の場所や周囲にある表示デバイスなどユーザが利用するデバイスのリアルタイムに計測可能な情報を入力する。例えば、ユーザの周囲にある表示デバイスやＧＰＳ、無線タグなどユーザが身につけている機器、あるいは顔画像認識などによりユーザを同定する機器であればよい。
【００２６】
視聴済みコンテンツ格納部１２０は、ユーザが視聴した映像コンテンツ自体を格納する。
【００２７】
視聴属性照合部１９０は、状況情報入力部１８０により入力された情報と視聴属性格納部１７０に格納された情報とを照合し、対応する視聴属性、すなわち、少なくとも部分一致する視聴属性が存在するかどうか照合する。
【００２８】
表示内容生成部２００は、視聴属性照合部１９０によって照合された視聴属性と対応する視聴済みコンテンツ情報から、提示する内容を生成する。すなわち、コンテンツ情報内の画像データから画像クリップを、または、コンテンツ情報内のテキストデータからメッセージデータを生成する。
【００２９】
表示部２１０は、表示内容生成部２００によって決定された提示内容をユーザに提示する。
【００３０】
表示履歴制御部２２０は、実際にユーザに提示された情報に対応するコンテンツに関して提示済みフラグを設定する。
【００３１】
次に、このように構成された本実施形態にかかる情報提示システムによる情報提示処理について説明する。
【００３２】
図２は、本実施形態においてテレビ視聴時に視聴属性が抽出・格納されるまでの処理の流れを示す。ユーザがコンテンツを再生し（Ｓ２１０）、視聴すると（Ｓ２２０のＹｅｓ）、コンテンツは視聴済みコンテンツ格納部１２０に逐次格納される（Ｓ２３０）。また、視聴中のコンテンツに対しては音声認識・画像認識を行い（Ｓ２４０）、認識されたテキストデータに対して意味解析を行い、各時刻において人名や地名といった意味属性を持つキーワードを抽出する（Ｓ２５０）。これらのデータに加え、視聴コンテンツに付与されたコンテンツIDと番組に重畳されたメタデータを組にして視聴属性格納部１７０に格納する（Ｓ２５０）。上記の処理は，ユーザがテレビ番組を視聴する間継続して行われる。
【００３３】
図３は、視聴属性格納部１７０に格納された視聴属性の例を示す。番組を視聴すると、コンテンツ毎にコンテンツID、番組名、番組ジャンルのメタデータ、およびユーザが実際に視聴した日時が格納される。また、番組中のチャプター毎に、音声やテロップ、字幕から認識・検出されたキーワードと意味解析結果の属性が格納される。また、後述するように視聴属性を提示したことを示す提示済みフラグも格納される。
【００３４】
図４は、視聴済みコンテンツ格納部１２０に格納されたコンテンツの例を示す。番組を特定するためのコンテンツIDと対応する映像ファイルが格納され、コンテンツIDを参照することにより格納されているコンテンツを呼び出し、再生することができるようになっている。
【００３５】
なお、映像ファイルが別の格納部（例えば、録画格納部）に記録してあり、録画コンテンツを視聴した場合、視聴済みコンテンツ格納部１２０には、番組を特定するためのコンテンツIDと対応する映像ファイルが格納されている別の格納部（例えば、録画格納部）の場所情報が格納され、コンテンツIDを参照することにより別の格納部（例えば、録画格納部）に格納されているコンテンツを呼び出し、再生することができるようにしてもよい。
【００３６】
図５は、本実施形態において他の活動を行っている時に以前視聴したテレビ番組に関する情報を提示する処理の流れを示す。
【００３７】
まず、PCや携帯電話、デジタルテレビといったユーザが利用するデバイス等の状況情報入力部１８０からの情報入力を受け付ける（Ｓ５１０）。入力される情報には、PC上で表示するWebブラウザのテキストや、GPS塔載携帯電話からの位置情報などが含まれる。
【００３８】
入力された情報は視聴属性照合部１９０によって、視聴属性格納部１７０に格納されている各視聴属性と照合される（Ｓ５２０）。
【００３９】
図６は、図５のＳ５３０に対応する視聴属性照合の流れを示す。入力された情報がテキストデータの場合（Ｓ６１０のＹｅｓ）、各項目のキーワードとのマッチングにより（Ｓ６２０）、照合を行う（Ｓ６３０）。一方、位置情報の場合（Ｓ６４０のＹｅｓ）、地名や住所情報を緯度経度に変換することにより（Ｓ６５０）、距離を計算し（Ｓ６６０）、あらかじめ決められた範囲内に存在するかどうか判定することにより（Ｓ６７０）、照合を行うことで入力情報と視聴属性との照合が行われる。照合された視聴属性は表示内容生成部２００に送られ（Ｓ６８０）、実際にどのように表示されるかが決定される。
【００４０】
図７は、図５のＳ５４０に対応する表示内容を決定する例を示す。本実施形態では、一定時間以上視聴したコンテンツ（Ｓ７１０のＹｅｓ）をユーザが興味を持って視聴したコンテンツとみなし、その中でまだ提示していないコンテンツのみを表示対象とする（Ｓ７２０のＮｏ）。
【００４１】
表示内容については、視聴してから日が浅いコンテンツ（Ｓ７３０のＮｏ）に関してはユーザは映像を見なくとも「先日××番組で見たレストラン」のように提示するだけで思い出すことができるので、視聴属性のみ表示することに決定される（Ｓ７４０）。視聴してから日数の経過したコンテンツ（Ｓ７３０のＹｅｓ）に関しては、視聴属性だけでは思い出せない可能性が高いので、映像コンテンツ自体もあわせて提示する（Ｓ７５０）。他にも、ユーザが操作する表示デバイスに応じて表示方法を決定するようにしてもよい。
【００４２】
表示内容生成部２００によって生成された表示内容は、表示部２１０を用いてユーザが利用中の表示デバイスに対して表示される（Ｓ５５０）。
【００４３】
このようにすることで、例えばレストランの紹介番組を見た後では、例えばGPS内蔵の携帯電話を持ってそのレストランの付近を通りかかった時には「先週××番組で見た△△レストランがこの近くにありますよ」という提示が行われたり、レストラン情報の一覧を表示するWebサイトを見ている時には、番組で視聴した「△△レストラン」の項目の横に「××番組で見たレストランです」のような表示が追加される。
【００４４】
情報が提示された後は、一度提示された視聴属性が何度も表示されるのを防ぐために、表示履歴制御部２２０によって視聴属性に視聴済みフラグが付与される（Ｓ５６０）。
【００４５】
（実施例１）
図８は、実施例１の利用シーンの説明図である。実施例１に係る情報提示システムは、ＨＤＤレコーダと、ＧＰＳ機能を備えた携帯端末で構成され、場所情報に基づいて、過去に視聴したコンテンツに関する情報を提示する。
【００４６】
すなわち、図１で説明した機能ブロックのうち、携帯端末側には、状況情報入力部１８０と、表示部２１０と、表示履歴制御部２２０を備えており、それ以外の機能ブロックはＨＤＤレコーダ側が備えている。
【００４７】
（ａ）ユーザが、ＨＤＤレコーダ側のコンテンツ再生部１１０が再生したコンテンツをテレビで視聴する。
【００４８】
（ｂ）ＧＰＳ機能を備えた携帯端末側の状況情報入力部１８０はＧＰＳ情報をＨＤＤレコーダ側の視聴属性照合部１９０に送信する。そして、ユーザが、コンテンツで視聴したお店のそばを通ると、視聴属性照合部１９０は視聴属性格納部１７０から該当する視聴属性を照合する。
【００４９】
（ｃ）表示内容生成部２００では、画像クリップ再生またはメッセージ再生する内容を生成し、携帯端末側の表示部２１０に送信され、ユーザに提示される。
【００５０】
（実施例２）
図９は、実施例２の利用シーンの説明図である。実施例２に係る情報提示システムは、ＨＤＤレコーダ及びデジタルテレビで構成され、キーワードに基づいて、過去に視聴したコンテンツに関する情報を提示する。
【００５１】
すなわち、図１で説明した機能ブロックのうち、デジタルテレビ側には、状況情報入力部１８０と、表示部２１０と、表示履歴制御部２２０を備えており、それ以外の機能ブロックはＨＤＤレコーダ側が備えている。
【００５２】
（ａ）ユーザが、ＨＤＤレコーダ側のコンテンツ再生部１１０が再生したコンテンツをデジタルテレビで視聴する。
【００５３】
（ｂ）Ｗｅｂブラウザ機能付きデジタルテレビ側の状況情報入力部１８０は、ユーザが閲覧しているＷｅｂページのテキスト情報をＨＤＤレコーダ側の視聴属性照合部１９０に送信する。そして、送られてきたテキスト情報をキーワードとして、ユーザがコンテンツで視聴した名所を検索し、視聴属性照合部１９０は視聴属性格納部１７０から該当する視聴属性を照合する。
【００５４】
（ｃ）表示内容生成部２００では、画像クリップ再生する内容を生成し、携帯端末側の表示部２１０でユーザに提示する。
【００５５】
このように、本実施の形態にかかる情報提示システムでは、状況に応じて表示形式を変えて過去に視聴したコンテンツを提示することにより、現在の状況をユーザの経験と結び付けることが容易に行えるとともに、経験済みのコンテンツに特化することで提示理由の説明が容易に行える。
【００５６】
本実施の形態にかかる情報提示システムで実行される情報提示プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD-ROM、フロッピー(R)ディスク、CD-R、DVD等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【００５７】
また、本実施の形態にかかる情報提示装置で実行される情報提示プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施の形態にかかる情報提示装置で実行される情報提示プログラムをインターネット等のネットワーク経由で提供または配布するようにしても良い。
【００５８】
また、本実施の形態の情報提示プログラムを、ROM等に予め組み込んで提供するように構成しても良い。
【００５９】
本実施の形態にかかる情報提示システムで実行される情報提示プログラムは、上述した各部を含むモジュール構成となっており、実際のハードウェアとしてはCPUが上記記憶媒体から情報提示プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、上述した各部が主記憶装置上に生成されるようになっている。
【００６０】
上述した実施の形態は、本発明の好適な具体例であるから、技術的に好ましい種々の限定が付されているが、本発明の趣旨を逸脱しない範囲であれば、適宜組合わせ及び変更することができることはいうまでもない。
【図面の簡単な説明】
【００６１】
【図１】本実施形態にかかる情報提示システムの概略構成を示すブロック図。
【図２】テレビ視聴時に視聴属性が抽出・格納されるまでのフローチャート。
【図３】視聴属性格納部１７０に格納された視聴属性の例を示す図。
【図４】視聴済みコンテンツ格納部１２０に格納されたコンテンツの例を示す図。
【図５】過去に視聴したテレビ番組に関する情報を提示するフローチャート。
【図６】Ｓ５３０に対応する視聴属性照合のフローチャート。
【図７】Ｓ５４０に対応する表示内容決定のフローチャート。
【図８】実施例１の利用シーンの説明図。
【図９】実施例２の利用シーンの説明図。
【符号の説明】
【００６２】
１１０  コンテンツを再生するコンテンツ再生部
１２０  視聴済みコンテンツ格納部
１３０  視聴属性取得部
１４０  音声認識部
１５０  画像認識部
１６０  意味解析部
１７０  視聴属性格納部
１８０  状況情報入力部
１９０  視聴属性照合部
２００  表示内容生成部
２１０  表示部
２２０  表示履歴制御部
【図１】
0004393454.tif 000002
【図２】
0004393454.tif 000003
【図３】
0004393454.tif 000004
【図４】
0004393454.tif 000005
【図５】
0004393454.tif 000006
【図６】
0004393454.tif 000007
【図７】
0004393454.tif 000008
【図８】
0004393454.tif 000009
【図９】
0004393454.tif 000010