(57)【特許請求の範囲】
【請求項１】
属性情報の紐付けられた動画コンテンツを表示可能な表示手段と、
前記表示手段に対面するユーザを識別するユーザ識別手段と、
識別された前記ユーザが第１の操作を行うと、前記表示手段に表示された前記動画コンテンツの静止画像を該動画コンテンツに紐付けられた前記属性情報と前記ユーザとに関連づけて記憶する指定画像記憶手段と、
前記記憶された静止画像に基づいて情報を検索し前記属性情報と前記ユーザとに関連づけて記憶する情報検索手段とを備えることを特徴とする情報処理装置。
【請求項２】
前記表示手段上の座標を指定可能な座標指定手段をさらに備え、
前記指定画像記憶手段は、前記座標指定手段により指定された座標により特定される前記表示手段に表示された前記動画コンテンツの一部の静止画像を該動画コンテンツに紐付けられた前記属性情報と前記ユーザとに関連づけて記憶することを特徴とする請求項１記載の情報処理装置。
【請求項３】
識別された前記ユーザが第２の操作を行うと、前記ユーザに関連づけられて記憶された情報を前記属性情報ごとに一覧表示することを特徴とする請求項１または２記載の情報処理装置。
【請求項４】
属性情報の紐付けられた動画コンテンツを表示可能な表示手段に対面するユーザを識別し、
識別された前記ユーザが第１の操作を行うと、前記表示手段に表示された前記動画コンテンツの静止画像を該動画コンテンツに紐付けられた前記属性情報と前記ユーザとに関連づけて記憶し、
前記記憶された静止画像に基づいて情報を検索し前記属性情報と前記ユーザとに関連づけて記憶することを特徴とする情報処理方法。
【請求項５】
表示手段、ユーザ識別手段、指定画像記憶手段、及び情報検索手段を備えた情報処理装置のコンピュータが、
前記表示手段に、属性情報の紐付けられた動画コンテンツを表示する手順、
前記ユーザ識別手段に、前記表示手段に対面するユーザを識別する手順、
前記指定画像記憶手段に、識別された前記ユーザが第１の操作を行うと、前記表示手段に表示された前記動画コンテンツの静止画像を該動画コンテンツに紐付けられた前記属性情報と前記ユーザとに関連づけて記憶する手順、
前記情報検索手段に、前記記憶された静止画像に基づいて情報を検索し前記属性情報と前記ユーザとに関連づけて記憶する手順、
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、及びプログラムに関する。
【背景技術】
【０００２】
情報処理装置の中には１以上の動画コンテンツにおける重要なシーンを効率的にユーザが把握できるように支援できるものがある（例えば、特許文献１参照。）。
特許文献１に記載の発明は、情報処理装置、情報処理方法、プログラム、および監視システムに関するものであり、具体的には、サムネイル表示部は、一つの動画コンテンツのサムネイル画像時系列の少なくとも一部の時系列部分を横に時間順に並べて横サムネイルラインとして表示し、複数の動画コンテンツのサムネイル動画時系列において、ブックマークが付与された重要サムネイル画像を縦に並べて、横サムネイルと操作対象サムネイルとしての一つのサムネイル画像で交わるように縦サムネイルラインを表示する。操作対象サムネイルに対して上下方向への移動の指示がユーザより与えられたとき、サムネイル表示部は縦サムネイルライン上の移動指示先の重要サムネイル画像から連続するサムネイル画像の時系列部分で横サムネイルラインを更新するものである。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−９５１１８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した特許文献１に記載の技術では、単に重要なシーンを把握できるものの、重要シーンに登場した人物の持ち物や飲食物、あるいはロケ地について関心があっても全てユーザが検索したり、問い合わせしたりして調べなければならず、不便である。また、他のシーンに再度登場した持ち物や飲食物等について関心がある場合調べたか否かが不明な場合、再度調べ直さなければならない。
一方、情報処理装置としてのパソコンやテレビジョン受像器（ＴＶ）の視聴だけでなく、スマートホンによるＳＮＳ（ソーシャルエリアネットワーク）の閲覧も挙げられる。例えば、ＳＮＳで友人のつぶやき閲覧時、「○井  理発見のコメント（写真付き）」を発見した場合、一般的な「いいね」ボタンを押しても押したというデータがネットワークを介してプロバイダ等には伝送されるもののそのままではユーザの情報処理装置には残らないので、後で関連記事を観たい場合には不便である。
【０００５】
そこで、本発明の目的は、視聴もしくは閲覧中のコンテンツにマークを付与するだけで、後日活用することが容易な情報処理装置、情報処理方法、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、請求項１に係る発明は、属性情報の紐付けられた動画コンテンツを表示可能な表示手段と、前記表示手段に対面するユーザを識別するユーザ識別手段と、識別された前記ユーザが第１の操作を行うと、前記表示手段に表示された前記動画コンテンツの静止画像を該動画コンテンツに紐付けられた前記属性情報と前記ユーザとに関連づけて記憶する指定画像記憶手段と、前記記憶された静止画像に基づいて情報を検索し前記属性情報と前記ユーザとに関連づけて記憶する情報検索手段とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、視聴もしくは閲覧中のコンテンツにマークを付与するだけで、後日活用することが容易な情報処理方法、情報処理装置、及びプログラムの提供を実現することができる。
【図面の簡単な説明】
【０００８】
【図１】（ａ）は、本発明の一実施の形態に係る情報処理装置の正面図であり、（ｂ）はリモコンの正面図であり、（ｃ）はスマートホンの正面図である。
【図２】図１に示した情報処理装置１００のハードウエア構成を示すブロック図である。
【図３】図１に示した情報処理装置１００を利用するための準備段階のソフトウエアの構成図の一例である。
【図４】図１に示した情報処理装置を利用するための準備段階の動作を示すフローチャートの一例である。
【図５】ユーザがコンテンツを視聴中に興味の対象がある場合の動作についてのフローチャートの一例である。
【図６】特定ボタンを説明するための説明図である。
【図７】図１に示した情報処理装置１００としてのＴＶを、リモコン４０を用いて画面中のアイテムをマークする場合の個別状態の遷移を説明するための説明図である。
【図８】（ａ）〜（ｆ）は、マイカタログＤＢ１０をスマートホン４１の操作で情報処理装置１００に表示する場合の説明図である。
【図９】マイカタログの出力についての説明図である。
【図１０】マイカタログＤＢに登録していた気になるアイテムを購入する場合についての説明図である。
【図１１】マイカタログＤＢ１０に登録されるマイカタログの全体像を示す概念図である。
【発明を実施するための形態】
【０００９】
＜概  要＞
本情報処理装置は、ユーザが気になるアイテムをカタログ形式で登録するものである。すなわち、本情報処理装置は、ＴＶ等のコンテンツを視聴しているときに「いいね」操作すると、そのときの静止画像(全体または一部)をコンテンツのタグ・視聴中のユーザと関連づけて記憶する。また、本情報処理装置は、静止画像に基づいて情報を検索し、タグ・ユーザと関連づけて記憶する。さらに、本情報処理装置は、マイカタログ表示操作すると、視聴中ユーザに関連づけられた情報をタグごとに表示する。
＜構  成＞
図１（ａ）は、本発明の一実施の形態に係る情報処理装置の正面図であり、図１（ｂ）はリモコンの正面図であり、図１（ｃ）はスマートホンの正面図である。
情報処理装置１００の表示部の画面１０３は、通常はメイン画面１０１と、サイドメニュー１０２とが表示される。画面１０３はメイン画面１０１を拡大表示する事も可能である。画面１０３はサイドメニュー１０２を縮小し、メイン画面１０１を拡大表示することも可能である。
【００１０】
サイドメニュー１０２は、パーソナルビューア（図ではPersonal Viewer）のサイドメニュー１０２ａ、ショッピングチャンネル（図ではShopping Channel）のサイドメニュー１０２ｂ、及びパーソナルチャンネル（図ではPersonal Channel）のサイドメニュー１０２ｃを有する。
【００１１】
パーソナルビューアは、ユーザが個人的に蓄積（録画）した放送番組のコンテンツやWebコンテンツを含むデジタルコンテンツを一覧表示するためのサイドメニューである。ショッピングチャンネルは、ユーザが視聴中のデジタルコンテンツに予めリモコン等の第１のボタンとしての「いいね」ボタンを押すことによりタグが貼られた番組や関心のあるシーンに関連する情報を検索し、蓄積したショッピング情報を一覧表示するためのサイドメニューである。パーソナルチャンネルは、ユーザが視聴したデジタルコンテンツを分析し、ユーザ好みの出演者、ジャンル等を学習し、デジタルコンテンツの推薦を行うためのサイドメニューである。
【００１２】
情報処理装置１００は、コンテンツの視聴中にユーザが気になるアイテムをリモコン操作によりカタログ形式で登録した後活用するためのものである。
リモコン４０は、ボタンの配置は固定されているが、録画番組視聴等によく使うボタンが上側に配置されている。特にボタン４０ａはマーク手段としてのマークボタンである。４０ｂは再生ボタンである。４０ｃは一時停止／再生ボタン兼用の決定ボタンであり、４０ｄは十字キーである。４０ｈは音量調節ボタンであり、４０ｉはチャンネル切り替えボタンである。
スマートホン４１にリモコン用のソフトウエアがインストールされている場合には、リモコン４０と同様のボタンのパターンがタッチパネル上に表示されるようになっている。すなわち、ボタン４１ａがボタン４０ａに相当し、ボタン４１ｂがボタン４０ａに相当し、ボタン４１ｃがボタン４０ｃに相当し、以下、十字キー４１ｄが十字キーｄに相当する。ボタン４１ｈがボタン４０ｈ、ボタン４１ｉがボタン４０ｉに相当する。
情報処理装置１００のオンオフ操作、チャンネル切り替え、音量調整、「いいね」ボタン等の操作、サイドメニュー選択等の操作は、リモコン４０もしくはスマートホン４１により行うことができる。
【００１３】
〔ハードウエア〕
図２は、図１に示した情報処理装置１００のハードウエア構成を示すブロック図である。
図２に示す情報処理装置１００（例えば、ＴＶ）は、マイカタログＤＢ１０、受信部（チューナ）１１、ストリーム分離部（ＤＥＭＵＸ：demultiplexer：デマルチプレクサ）１２、映像デコード部１３、表示処理部（スケーラ）１４、表示部（モニタ）１５、パーソナルＤＢ（database）１６、サービス１７、ＧＰＳ（Global Positioning System：汎地球測位システム）１８、受信制御部１９、センサ２０、リモコン受信部２１、入力手段２２、カメラ２３、及びネットワーク接続部２４を有する。
【００１４】
受信部１１は、地上デジタル放送、ＢＳ（broadcasting satellite：放送衛星）放送、もしくはＣＳ（communication satellite：通信衛星）放送を受信し、受信したストリームをストリーム分離部１２に入力するチューナとして機能する回路である。受信部１１は、受信制御部１９の制御により受信するチャンネルを変更する機能を有する。
ストリーム分離部１２は、映像、音声、データ等の多重化されたストリームを分離するＤＥＭＵＸ処理を行う。ストリーム分離部１２は、分離されたストリームのうち映像に関するストリームを映像デコード部１３に入力する。その他のストリームについては本発明とは直接関係がないので説明を割愛する。
映像デコード部１３は、入力された映像に関するストリームをデコードして映像データとして後段の処理ブロックに入力する。ストリームについては限定しないが、例えば、ＭＰＥＧ(Moving Picture Experts Group)、Ｈ．２６４等の規格のものが挙げられる。
表示処理部１４は、表示部１５にストリーム画像やサイドメニューの表示可能な範囲や大きさを制御する。
表示部１５は、例えば、ＨＤＴＶ（high-definition television：高品位テレビ）を表示することのできるモニタであり、例えば液晶表示装置が挙げられる。
【００１５】
受信制御部１９は、マイカタログＤＢ１０、受信部１１、表示処理部１４、パーソナルＤＢ１６、サービス１７、ＧＰＳ１８、センサ２０、リモコン受信部２１、入力手段２２、及びカメラ２３からのデータに基づいて各種処理を行う機能を有する回路であり、例えばマイクロプロセッサが挙げられる。受信制御部１９は、抽出手段１９ａ、絞り込み手段１９ｂ、収集手段１９ｃ、画像処理手段１９ｄ、検索手段１９ｅ、分類手段１９ｆ、選択手段１９ｇ、ユーザ識別手段ｈ、指定画像記憶手段１９ｉ、及び座標指定手段１９ｊを有する。
受信制御部１９は、入力手段２２もしくはリモコンから入力された電源オンオフ、番組切り替えの指示、音量調節等の指示に基づき電源オンオフ、チャンネル切り替え等の制御をする機能を有する。
【００１６】
抽出手段１９ａは、パーソナルＤＢ１６に蓄積したデータからキーワードを抽出する機能を有する。
絞り込み手段１９ｂは、キーワードを頻度でランキングすることで興味情報を絞り込む機能を有する。
収集手段１９ｃは、絞り込んだ興味情報に関連するコンテンツ及び検索結果を収集する機能を有する。
画像処理手段１９ｄは、ユーザの過去のライフログをビジュアル表示、検索するための第一のサイドメニュー、ショッピングサイトと連携し、ユーザの嗜好に応じた商品をネットショッピングするための第二のサイドメニュー、及びユーザの嗜好に応じて収集したコンテンツ毎にまとめたチャンネル用の第三のサイドメニューを、コンテンツを表示するメイン画面と共に表示部１５に表示させる機能を有する。
検索手段１９ｅは、ネットワーク接続部２４を介してインターネットに接続し、ユーザのマーク手段操作により選択されたアイテムに関連する情報を検索する機能を有する。
分類手段１９ｆは、検索した情報を所定の条件に基づいて分類する機能を有する。所定の条件としては、例えば時間、嗜好、鮮度、ソース、タグ、もしくはメディアタイプが挙げられる。
選択手段１９ｇは、ユーザが次にコンテンツを視聴している時にマークされたアイテムと、蓄積されたアイテムのうち合致したアイテムに関する情報を選択してカタログ形式で表示部に１５表示させる機能を有する。
ユーザ識別手段１９ｈは、表示手段としての表示部１５に表示されたコンテンツを視聴しているユーザを特定する機能を有する。ユーザ特定手段１９ｇは、カメラ２３で表示部１５の前面を常時撮影し、視聴している人物の数が単数の場合はその人物がユーザであると特定し、視聴している人物が複数の場合はリモコンを所持している人物をユーザであると認識する。
指定画像記憶手段１９ｉは、識別されたユーザが第１の操作を行うと、表示部１５に表示されたコンテンツの静止画像をコンテンツに紐付けられた属性情報とユーザとに関連づけて記憶する機能を有する。「第１の操作」は、例えば、リモコン４０でサイドメニュー１０２ａ〜１０２ｃの何れかを選択することが挙げられる。指定画像記憶手段１９ｉは、座標指定手段１９ｊにより指定された座標により特定される表示部１５に表示されたコンテンツの一部の静止画像を該コンテンツに紐付けられた属性情報とユーザとに関連づけて記憶する機能を有しても良い。
座標指定手段１９ｊは、表示部１５上の座標を指定する機能を有する。
また、識別されたユーザが第２の操作を行うと、ユーザに関連づけられて記憶された情報を属性情報ごとに一覧表示する機能を有してもよい。「第２の操作」は、例えば、第１の操作以降の操作をいい、マイカタログの内容を閲覧したり、ショッピングサイトを利用したりすることを含む。
【００１７】
これら抽出手段１９ａ、絞り込み手段１９ｂ、収集手段１９ｃ、画像処理手段１９ｄ、検索手段１９ｅ、分類手段１９ｆ、選択手段１９ｇ、ユーザ識別手段１９ｈ、指定画像記憶手段１９ｉ、及び座標指定手段１９ｊは、ソフトウエアで構成される。
【００１８】
受信制御部１９にて行われるコンテンツの分類は、取得したコンテンツデータの一部を表示するサムネイルを生成し、興味情報の各々に付与された属性毎にまとめ、同一属性を有する情報に対する処理の基礎となった指示の履歴に基づいて、ユーザにとって優先度が高いか否かで判断する。
また、優先度が高いとは、ユーザの視聴する番組のジャンル、出演者、もしくは団体毎に視聴回数、及び視聴時間を測定し、視聴回数、及び視聴時間の多い番組を興味度が高いとする。
【００１９】
蓄積手段としてのパーソナルＤＢ１６は、ユーザ毎にファイルに分けて興味情報を記憶する。
サービス１７は、情報処理装置１００がネットワーク接続部２４によりネットワーク接続されている場合に、得られた情報を記憶する装置である。
ＧＰＳ１８は、情報処理装置１００の現在位置に関する情報を探索する装置である。
センサ２０は、情報処理装置１００の前面のリモコン使用可能領域に人がいるか否か、距離はどのくらいかを判断する。センサ２０は赤外線センサ、超音波センサ等が挙げられる。センサ２０は単一のセンサに限定されるものではなく、複数のセンサを組み合わせてもよい。
リモコン受信部２１は、リモコン４０（図１参照）との間でアイテムのマーク、チャンネル切り替え、音量調節等の制御信号や応答信号を授受する。
入力手段２２は、例えば、電源ボタン、チャンネル切り替えボタン、音量ボタン、もしくは入力切換ボタンである。
カメラ２３は、情報処理装置１００の前面で図には示されていないリモコン４０もしくはスマートホン４１（図１参照）を操作するユーザを認識するため撮影し、電気信号に変換する機能を有する。これは、ユーザが複数存在する場合にユーザ毎に顔を識別し、興味情報を紐づけるのに利用される。カメラ２３は、図では表示部１５を支持する支柱に設けられているが、本発明はこれに限定されるものではなく表示部１５の外周部に設けてもよい。
ネットワーク接続部２４は、図示しないネットワークと無線もしくは有線を用いて接続する機能を有する。
【００２０】
＜動  作＞
〔準備段階〕
図３は、図１に示した情報処理装置１００を利用するための準備段階のソフトウエアの構成図の一例である。
情報処理装置１００は、工場出荷時にはユーザの情報は何ら記録されていないので、ユーザの嗜好情報は購入後に蓄積される。
ユーザの行動３１やユーザの状態３２がＴＰＯ（time position occasion：時、所、場合）に応じて分析し、パーソナルＤＢ（データベース）１６に記憶される。パーソナルＤＢ１６には例えばＨＤＤ（ハードディスクドライブ）が用いられる。
ＴＰＯは、ユーザが誰であるかに加え、ユーザの行動３１及びユーザの状態３２を含む。ユーザの行動３１としては、例えば、ＴＶ／録画コンテンツ、ＳＮＳ／Ｔｗｉｔｔｅｒ（ツイッター「以下、登録商標」）、メール／ブラウザ、検索、スケジューラ、及びショッピング等が挙げられる。
ＴＶ／録画コンテンツは、放送時間、チャンネル、番組名、ジャンル、出演者名、録画時間、及び録画モード等を意味する。
ＳＮＳは、ソーシャルネットワーキングサービスの略語であり、人と人とのつながりを促進・サポートするＷｅｂサイトである。友人・知人間のコミュニケーションを円滑にする手段や場を提供したり、趣味や嗜好、居住地域、出身校等を通じて新たな人間関係を提供したりする、会員制のサービスである。Ｔｗｉｔｔｅｒは、１４０文字以内の「ツイート」と称される短文を投稿できる情報サービスで、ツイッター社によって提供されている。
ＳＮＳやＴｗｉｔｔｅｒで話題からキーワードを分析することでユーザの興味情報を得ることができる。
メールは、ユーザが他者との間で情報を授受するものであり、メールを分析すればユーザの興味情報を得ることができる。
ブラウザは、インターネット上の情報を探し出し表示するためのソフトウエアであり、例えば、ネットスケープ・ナビゲータやインターネット・エクスプローラーが挙げられる。ブラウザをユーザが利用するときのキーワードを分析すれば興味情報が得られる。
検索は、キーワードを使ってユーザが知りたい情報を得るので、キーワードからユーザの興味情報が得られる。
スケジューラは、個人のスケジュールを管理するソフトウエアであり、スケジュールのキーワードからユーザの興味情報を得ることができる。
ショッピングは、ユーザがいつ、どのような商品を、いくつ購入したか履歴に残るので、ユーザの興味情報を得ることができる。
【００２１】
一方、ユーザの状態３２としては、位置、移動検知手段、表情（集中度）、及び感情状態が挙げられる。
位置は、ユーザが情報処理装置１００を使用しているときの位置であり、情報処理装置１００のＧＰＳ１８よりユーザが情報処理装置１００を利用しているときの位置情報を把握することができる。
移動検知手段は、例えば、ユーザが電車で移動している状態か、自動車で移動している状態か、もしくは徒歩で移動している状態かを把握する手段であり、例えば加速度センサや振動センサ等のセンサが挙げられる。この移動検知手段はユーザがスマートホン４１をリモコンとして利用する場合に用いられる。
表情（集中度）は、ユーザの表情が硬いか柔らかい、もしくはユーザが画面の特定箇所を凝視しているか、退屈しているか、居眠りしているか等を画像認識処理により判断するものである。
感情状態は、ユーザが喜怒哀楽、無表情（真顔）のいずれを示しているか等を画像認識処理により判断するものである。
【００２２】
パーソナルＤＢ１６に記憶されたデータは、必要に応じてリコメンドエンジン３４に送られる。リコメンドエンジン３４はユーザに必要と判断されるデータを提供するためのソフトウエアであり、サービス１７に接続されている。リコメンドエンジン３４はサービス１７との間で、サーチクエリーとサーチリザルトとを行う。
リコメンドエンジン３４は重要キーワードを抽出する重要キーワード抽出部３５と、ユーザランキングによる絞り込みを行う絞り込み部３６とを有する。重要キーワードは、ユーザ毎に異なる興味や関心の高いキーワードであり、頻出度の高い固有名詞（例えば、人名、キャラクタ名、曲名、番組名、国名、都市名、地名、競技名、ゲーム名等）が挙げられる。重要キーワードにはタグが貼られた番組やシーンに関連するキーワードを含む。ユーザランキングは、統計数学的処理を施してユーザ毎に抽出されたキーワードを頻度順にランク付けをしたものである。絞り込みとは、ランク付けされたキーワードを上位から所定の順位まで選択して絞り込んだものをすぐに提供できるように確保しておくことである。
【００２３】
リコメンドエンジン３４からの出力される情報の中からショッピング情報を抽出するショッピング情報抽出部３７により抽出される。情報処理装置１００はショッピング情報をユーザからの要求があった場合に一覧表示する一覧表示部３８を有する。一覧表示部３８により分類、整理した状態で表示される。また、リコメンドエンジン３４にはユーザにより選択されたアイテムに関する情報が読み出し自在に蓄積される。
【００２４】
図４は、図１に示した情報処理装置を利用するための準備段階の動作を示すフローチャートの一例である。
まず、ＴＰＯの判定が開始されると、情報抽出エンジンが作動し（ステップＳ１）、パーソナルＤＢとの間で情報の授受が行われる（ステップＳ５）。
次に検索エンジンが作動し（ステップＳ２）、サービスとの間でサーチクエリーとサーチリザルトとが行われ、タグの貼られたシーンや番組等に関連する情報を検索する（ステップＳ６）。
マッチングエンジンが作動し（ステップＳ３）、重要キーワードを用いてショッピングに関連するショッピング情報を抽出し（ステップＳ４）、一覧表示できるように分類整理し、準備する（ステップＳ５）。
リコメンド結果はマイカタログＤＢ１０に読み出し自在に蓄積される（ステップＳ７）。
【００２５】
〔アイテムチェック及びマイカタログ表示段階〕
図５は、ユーザがコンテンツを視聴中に興味の対象がある場合の動作についてのフローチャートの一例である。尚、マイカタログＤＢ１０には予めユーザが興味を有するコンテンツ等のデータが記憶されているものとする。
動作の主体は受信制御部１９である。
【００２６】
情報処理装置１００がコンテンツを表示すると（ステップＳ１１）、ユーザによって行きたいボタンが押されたか否かを判断する（ステップＳ１２）。ユーザによって行きたいボタンが押された場合（ステップＳ１２／Ｙｅｓ）、行きたい所の地図や付帯情報として、行きたい所が観光地なら観光案内所のホームページ、行きたい所が店舗やコンサート会場なら店舗や会場のホームページ、口コミ情報及び周辺地域情報を検索し（ステップＳ２３）、ステップＳ１８へ進む。
ユーザによって行きたいボタンが押されていない場合（ステップＳ１２／Ｎｏ）、観たいボタンが押されたか否かを判断する（ステップＳ１３）。ユーザによって観たいボタンが押された場合（ステップＳ１３／Ｙｅｓ）、観たいものがテレビ番組の場合にはテレビ番組の公式ホームページを検索すると共に番組の録画を予約し、観たいものが映画、絵画、彫刻等の場合には、映画館、美術館、博物館やチケット売り場等のホームページを検索し、付帯情報としての口コミ情報等を検索し（ステップＳ２４）、ステップＳ１８へ進む。
ユーザによって観たいボタンが押されていない場合（ステップＳ１３／Ｎｏ）、食べたいボタンが押されたか否かを判断する（ステップＳ１４）。ユーザによって食べたいボタンが押された場合（ステップＳ１４／Ｙｅｓ）、レシピ、店舗、通販のサイトのホームページ及び付帯情報としての食べ方、飲み方、飲食マナー等を検索し（ステップＳ２５）、ステップＳ１８へ進む。
ユーザによって食べたいボタンが押されていない場合（ステップＳ１４／Ｎｏ）、欲しいボタンが押されたか否かを判断する（ステップＳ１５）。ユーザによって欲しいボタンが押された場合（ステップＳ１５／Ｙｅｓ）、欲しい物の商品情報、販売店（実店舗）、ショッピングサイトのアドレス及び付帯情報としての口コミ情報等を検索し（ステップＳ２５）、ステップＳ１８へ進む。
ユーザによって欲しいボタンが押されていない場合（ステップＳ１５／Ｎｏ）、いいねボタンが押されたか否かを判断する（ステップＳ１６）。ユーザによっていいねボタンが押された場合（ステップＳ１６／Ｙｅｓ）、番組、俳優、歌手、芸人等の人物、商品、及び付帯情報として口コミ等を検索し（ステップＳ１７）、ステップＳ１８へ進む。
【００２７】
ステップＳ１８では、マイカタログＤＢ１０（図２参照）に登録し、分類し（ステップＳ１９）、整理し（ステップＳ２０）、以前ユーザによってマークされたアイテムに合致したアイテムがマイカタログＤＢ１０内に有るか否か判断する（ステップＳ２１）。マークされたアイテムに合致したアイテムがマイカタログＤＢ１０内に有る場合（ステップＳ２１／Ｙｅｓ）、情報処理装置１００の表示部１５の画面に一覧表示して終了する（ステップＳ２２）。
いいねボタンが押されていない場合（ステップＳ１６／Ｎｏ）、若しくはマークされたアイテムに合致したアイテムがマイカタログＤＢ１０内に無い場合（ステップＳ２１／Ｎｏ）、ステップＳ１１に戻る。
【００２８】
［特定ボタン］
図６は、特定ボタンを説明するための説明図である。
特定ボタン４１ｃは、図６の右下のように、第１のボタンとしてのいいねボタン５１と、第２のボタンとしての観たいボタン５２、食べたいボタン５３、行きたいボタン５４、及び欲しいボタン５５と、を有する。Ｗａｎｔｓボタンは、観たいボタン５２、食べたいボタン５３、行きたいボタン５４、及び欲しいボタン５５を有する。
【００２９】
第１のボタンはユーザが気になるアイテムを登録するためのボタンである。第２のボタンは、ユーザがアイテムを選択するときにユーザが次に行う購入、飲食、観覧、及び訪問を含む行動を選択するためのボタンである。
これらのボタン５１〜５５は、図の上段の情報処理装置１００のメイン画面１０１中の気になるアイテムに貼り付けてマイカタログＤＢ１０に登録するためのボタンである。例えば、ドラマ１の視聴時に、“○井  理”出演シーンでいいねボタン５１を押すことにより、いわばスマートホンのカメラで取り溜めるようなものである。
また、他のドラマ２の視聴時、竹○結子が持っていたバッグに欲しいボタン５３を押すと、マイカタログＤＢ１０に登録される。
上段のＴＶ視聴時に対して、ＳＮＳ（ソーシャルネットワーキングサイト）で友人のつぶやき閲覧時に、“○井  理発見”のコメント（写真付き）にいいねボタン５１を押すとマイカタログＤＢ１０に登録される。また、前述の竹○結子が持っていたバッグについて、近くで売っている店の名前をＳＮＳで友人が教えてくれる場合、タグとして登録される。
【００３０】
［個別状態遷移ＴＶ画面］
図７は、図１に示した情報処理装置１００としてのＴＶを、リモコン４０を用いて画面中のアイテムをマークする場合の個別状態の遷移を説明するための説明図である。
図７の上段において、情報処理装置１００のコンテンツの巻き戻しシーン再生中にリモコン４０の決定ボタン４０ｃが押されると、情報処理装置１００は一時停止し音声は消音状態となる。情報処理装置１００のメイン画面１０１の中にフィルム状にサムネイル１０１ａが表示されている。サムネイル１０１ａにはセリフ及び停止位置からの時間１５Ｓ、３０Ｓ、６０Ｓ、ＣＭ明け、頭からと表記されている。これらの表記は字幕データより抽出して表示される。十字キー４０ｄが押されることにより、フィルム状のサムネイル１０１ａから任意のシーンが選択できる。リモコン４０には再生ボタン４０ｂが用意されており、再生ボタン４０ｂが押されることで再スタートすることができる。尚、メイン画面１０１中の再生ボタン１０１ｂを指定して決定ボタン４０ｃが押されても再スタートが可能である。
【００３１】
次にＷａｎｔｓ登録について述べる。
Ｗａｎｔｓ登録とは、リモコン４０もしくはスマートホン４１によりアイテムをマークすることをいう。マークするとは、アイテムに対して「いいね」、「観たい」、「欲しい」、「行きたい」、「食べたい」等のデータを貼り付けることをいう。アイテムとは、情報処理装置１００のメイン画面１０１に表示された人物、物品、場所、食品等ユーザの興味対象となり得るものをいう。
【００３２】
図７の下段に示すように、シーンの再生中に目的シーンが表示されたときにカメラマークのボタン４０ａが押されると、目的シーンが一時停止状態となり、メイン画面１０１にカーソル１０１ｃが表示され、サイドメニュー１０２に操作ガイドが表示される。サイドメニュー１０２にはアイテムにマークするためのアイコン、例えば図に示すような消しゴムアイコン１２１、鉛筆アイコン１２２、及び確定アイコン１２３が表示される。
メイン画面１０１にカーソル１０１ｃが表示され、決定ボタン４０ｃを離すと、情報処理装置１００はプレゼンマウスモードになる。リモコン４０を移動することによりカーソル１０１ｃがリモコン４０の移動に合わせて移動する。十字キー４０ｄで鉛筆アイコン１２２を選択し、決定ボタン４０ｃでアイテム（この場合、バッグ）にマーキングをする。マーキングが終了したら、十字キー４０ｄで確定アイコン１２３を選択する。
プレゼンマウスモードが解除され、サイドメニュー１０２にＷａｎｔｓ指定ボックス１２４、１２５とショッピング情報とが表示される。十字キー４０ｄで選択し、決定ボタン４０ｃでＷａｎｔｓ指定ボックス１２４、１２５にチェックを入れることによりマークされる。
【００３３】
ここで、マイカタログＤＢに入力される対象について表１に示す。
【００３４】
【表１】
0005920848.tif 000002
【００３５】
表１に何から、何を、どうやって、付加情報（タグ）を貼り付けるかについて示す。アイテムが存在するのはＴＶ及びＳＮＳとしており、ＴＶからはＴＶ番組、マイチャンネル番組表、及びパーソナルチャンネルが挙げられる。ＳＮＳからは画像（スクリーンショット）及びつぶやき／ＲＴ（ツイートの共有）が挙げられる。
ＥＰＧはElectronic Program Guideの略であり、電子番組ガイドのことである。
【００３６】
［マイカタログビューア］
図８（ａ）〜（ｆ）は、マイカタログＤＢ１０をスマートホン４１の操作で情報処理装置１００に表示する場合の説明図である。
マイカタログＤＢ１０は、時間、嗜好、鮮度、ソース、タグ、メディアタイプ別に表示することが可能である。ユーザの検索レベルに合わせて各スライドバー４１ｓを調整することができる。
図８（ａ）は、マイカタログＤＢ１０に登録されているデータのサムネイルを眺める状態を示す。各サムネイルの大きさは、ユーザの興味度の大きさに相当し、奥から手前に向かって月順に配列されている。このときのスマートホン４１のリモコンイメージは図８（ｄ）である。時間軸、嗜好軸、鮮度軸のスライドバーのレベルは８０であり、ソースのレベルはＴＶとなっており、タグは○井  理、サッカー、○ＸＩＬＥのいずれでもない。メディアタイプは動画、音楽、画像、テキストの全てとなっている。
図８（ｂ）は、マイカタログＤＢ１０に登録されているデータを探す場合を示す。ユーザの興味度の高いドラマのサムネイルが配列されている。このときのスマートホン４１のリモコンイメージは図８（ｅ）である。時間、嗜好、鮮度のスライドバーのレベルは８０であり、ソースのスライドバーの位置はＴＶである。タグのスライドバーの位置は○井  理であり、メディアタイプのスライドバーの位置は全てである。
図８（ｃ）は、マイカタログＤＢ１０に登録されているデータの中からＷａｎｔｓとタグを選択して整理すると、ドラマの１シーンが表示される。このときのスマートホンの表示部４１ｂにはドラマ「ウィンターレスキュー」の１シーン、録画日時、特定ボタン４１ｃ、及びタグが表示されている。
例えば、『○井  理』タグを選択すると、該当タグの付いたアイテム情報が検索結果として表示される。特定アイテムとしての図８（ｃ）を選択すると、自動付加されたタグ情報が表示される。この情報を整理することにより必要なタイミングで自動録画、リマインダ、リコメンドが発動する。
ここで、「整理」とは、自動整理されたものを確認し、ふさわしいものを選択、入力し、ふさわしくない物を削除することをいう。
【００３７】
［マイカタログＯＵＴ  ＰＵＴ］
図９は、マイカタログの出力についての説明図である。
マイカタログＤＢ１０に登録されたアイテムは、Ｗａｎｔｓ（観たい、欲しい等）に関連するサービスに繋がる。
例えば、マイカタログＤＢ１０に『観たい』のタグが付いた『○井  理』が登録されていることにより、○井  理主演の『ウィンターレスキュー』を録画したり、映画『ＧＩＲＬＳ』（○井  理主演）を録画したりすることが挙げられる。
また、例えば、マイカタログＤＢ１０に『欲しい』のタグが付いた『○里奈の来ていたドレス』が登録されていることにより、○里奈の着ていたドレスや雰囲気の似ているドレスをおすすめ表示することが挙げられる。また、以前ピンク系のドレスを買ったため青系のドレスを購入することが挙げられる。
【００３８】
［ショッピングチャンネル］
図１０は、マイカタログＤＢに登録していた気になるアイテムを購入する場合についての説明図である。
情報処理装置１００のパーソナルビューアをメイン画面１０１に展開しているため、サムネイルが多数配列されている。その中で「以前いいねボタンを押した番組テーマ曲１１３が見えた、購入へ」という気持ちに傾いたユーザがショッピングチャンネルのサイドメニュー１０２ｂを選択すると、メイン画面１０１にショッピングサイトの画面１０１２が表示される。これは、予めユーザが気になるアイテムである番組テーマ曲がマークされており、パーソナルビューアでマイカタログを眺めていたときにテーマ曲のアイコン１１３が発見できるようになっていたためである。ショッピングサイトの画面１０１２は通販各社と提携サービス１１２が設定されているため、即座にネットショッピングができる。
【００３９】
［マイカタログ全体像］
図１１は、マイカタログＤＢ１０に登録されるマイカタログの全体像を示す概念図である。
図１１において、主に上段が入力（ＩＮ  ＰＵＴ）を示し、中段が、マイカタログＤＢ、下段が出力（ＯＵＴ  ＰＵＴ）を示す。
入力について述べる。ユーザが情報処理装置１００としてのＴＶによりコンテンツの視聴中にマーク手段としての特定ボタン４１ｅのいずれかのボタンを押すと、日時、番組名、人物、商品情報等がマイカタログＤＢ１０に入力されて登録される。
情報処理装置１００としてのＳＮＳ用の端末によりマイカタログＤＢ１０へのつぶやきがあると、いつ、どこで、誰が、何をつぶやいたか登録される（ＳＴＥＰ１）。
ＳＴＥＰ２以降では検索、ブラウザ、スケジューラ、メール機能を有するが検索機能が活用される。
マイカタログＤＢ１０には特定ボタン４１ｅやタグ４１ｆにより、ユーザが気になるアイテムに対し、いいねボタン、観たいボタン、欲しいボタン、行きたいボタン、食べたいボタンのうちの押されたボタンとタグとが気になるシーンの気になるアイテムに紐づけられて登録される。また、マイカタログＤＢ１０に登録されたデータは特定ボタン４１ｅにより整理される。
出力について述べる。ユーザが観たいアイテムに対してはＴＶ番組の録画予約等が行われ、欲しいアイテムに対しては商品情報等が表示され、ショッピングが容易となる（ＳＴＥＰ１）。
ＳＴＥＰ２以降では、どこかへ行きたい場合はトラベルのサイトへ、何かを食べたい場合はグルメのサイトが気にあるアイテムに紐づけられて表示される。
【００４０】
＜プログラム＞
以上で説明した本発明に係る情報処理装置は、コンピュータで処理を実行させるプログラムによって実現されている。一例として、プログラムにより本発明の機能を実現する場合の説明を以下で行う。
【００４１】
例えば、
表示部、マーク手段、検索手段、蓄積手段、及び選択手段を有し、前記表示部の画面中のアイテムがリモコンの特定のボタンによりマークされる情報処理装置のコンピュータに、
表示部が、コンテンツを表示する手順、
検索手段が、マークされたアイテムに関する情報を検索する手順、
分類手段が、検索した情報を所定の条件に基づいて分類する手順、
蓄積手段が、分類された情報を蓄積する手順、
選択手段が、ユーザが次にコンテンツを視聴している時にマークされたアイテムと、蓄積されたアイテムのうち合致したアイテムに関する情報を選択してカタログ形式で表示部に表示させる手順、
を実行させるためのプログラムが挙げられる。
【００４２】
このようなプログラムは、コンピュータに読み取り可能な記憶媒体に記憶されていてもよい。
【００４３】
＜記憶媒体＞
ここで、記憶媒体としては、例えばＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ等のコンピュータで読み取り可能な記憶媒体、フラッシュメモリ、ＲＡＭ、ＲＯＭ、ＦｅＲＡＭ等の半導体メモリやＨＤＤが挙げられる。
【００４４】
ＣＤ−ＲＯＭは、Compact Disc Read Only Memoryの略である。フレキシブルディスクは、Flexible Disk：ＦＤを意味する。ＣＤ−Ｒは、CD Recordableの略である。ＲＡＭは、Random-Access Memoryの略である。ＲＯＭは、Read-Only Memoryの略である。ＦｅＲＡＭは、Ferroelectric RAMの略で、強誘電体メモリを意味する。ＨＤＤは、Hard Disc Driveの略である。
【００４５】
尚、上述した実施の形態は、本発明の好適な実施の形態の一例を示すものであり、本発明はそれに限定されることなく、その要旨を逸脱しない範囲内において、種々変形実施が可能である。
【符号の説明】
【００４６】
１１    受信部（チューナ）
１２    ストリーム分離部（ＤＥＭＵＸ）
１３    映像デコード部
１４    表示処理部（スケーラ）
１５    表示部（モニタ）
１６    パーソナルＤＢ
１７    サービス
１８    ＧＰＳ（汎地球測位システム）
１９    受信制御部
１９ａ    抽出手段
１９ｂ    絞り込み手段
１９ｃ    収集手段
１９ｄ    画像処理手段
１９ｅ    検索手段
１９ｆ    分類手段
１９ｇ    選択手段
１９ｈ    ユーザ識別手段
１９ｉ    指定画像記憶手段
１９ｊ    座標指定手段
２０    センサ
２１    リモコン受信部
２２    入力手段
２３    カメラ
２４    ネットワーク接続部
３１    ユーザの行動
３２    ユーザの状態
３４    リコメンドエンジン
３５    重要キーワード抽出部
３６    絞り込み部
３７    リコメンド結果
４０    リモコン
４１    スマートホン
１００    情報処理装置（テレビジョン受像器、ＴＶ、ＳＮＳの端末）
１０１    メイン画面
１０２    サイドメニュー
１０３    画面
【図１】
0005920848.tif 000003
【図２】
0005920848.tif 000004
【図３】
0005920848.tif 000005
【図４】
0005920848.tif 000006
【図５】
0005920848.tif 000007
【図６】
0005920848.tif 000008
【図７】
0005920848.tif 000009
【図８】
0005920848.tif 000010
【図９】
0005920848.tif 000011
【図１０】
0005920848.tif 000012
【図１１】
0005920848.tif 000013