(57)【要約】【課題】テレビ番組を見逃すことなく、テレビ関連情報を容易に取得可能とする。【解決手段】インターネットに接続された情報処理装置であって、映像情報を受信する手段と、受信された映像情報を解析する手段と、解析された映像情報の中から映像情報と関連性があるキーワードを作成する手段と、作成されたキーワードに基づいて、インターネットを用いてキーワードに関連する関連情報を検索する手段と、検索された関連情報と受信された映像情報とを区分して表示する表示手段と、を含む。【選択図】図３
2014154073.tif 000002
【特許請求の範囲】
【請求項１】
Ｗｅｂに接続された情報処理装置であって、
映像情報を受信する手段と、
前記受信された映像情報を解析する手段と、
前記解析された映像情報の中から前記映像情報と関連性があるキーワードを作成する手段と、
前記作成されたキーワードに基づいて、前記Ｗｅｂを用いて前記キーワードに関連する関連情報を検索する手段と、
前記検索された関連情報と前記受信された映像情報とを区分して表示する表示手段と、
を含むことを特徴とする情報処理装置。
【請求項２】
前記表示手段は、前記映像情報と前記関連情報とを区分して表示する分割表示モードと、前記映像情報を全面に表示するフル表示モードとを有し、前記分割表示モードは、前記関連情報をメイン画面として表示し、前記映像情報をサブ画面として表示することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記映像情報の中からＣＭ（Commercial Message）を検知する手段をさらに含み、前記ＣＭが開始されたことが検知されると、前記表示手段は前記フル表示モードから前記分割表示モードへ移行し、前記ＣＭが終了したことが検知されると、前記表示手段は、前記分割表示モードから前記フル表示モードへ移行することを特徴とする請求項２に記載の情報処理装置。
【請求項４】
前記関連情報に対するアクセスを検出する手段をさらに含み、前記分割表示モードにおいて、前記関連情報に対するアクセスが検出されると、前記ＣＭが終了したことが検知されても、前記分割表示モードから前記フル表示モードへ移行しないことを特徴とする請求項３に記載の情報処理装置。
【請求項５】
Ｗｅｂに接続された情報処理装置の制御方法であって、
映像情報を受信する工程と、
前記受信する工程により受信された映像情報を解析する工程と、
前記解析する工程により解析された映像情報の中から前記映像情報と関連性があるキーワードを作成する工程と、
前記作成する工程により作成されたキーワードに基づいて、前記Ｗｅｂを用いて前記キーワードに関連する関連情報を検索する工程と、
表示手段が、前記検索する工程により検索された関連情報と前記受信された映像情報とを区分して表示する工程と、
を含むことを特徴とする制御方法。
【請求項６】
Ｗｅｂに接続された情報処理装置に実行させるコンピュータにより読み取り可能なプログラムであって、
映像情報を受信する処理と、
前記受信する処理により受信された映像情報を解析する処理と、
前記解析する処理により解析された映像情報の中から前記映像情報と関連性があるキーワードを作成する処理と、
前記作成する処理により作成されたキーワードに基づいて、前記Ｗｅｂを用いて前記キーワードに関連する関連情報を検索する処理と、
表示手段が、前記検索する処理により検索された関連情報と前記受信された映像情報とを区分して表示する処理と、
を含むことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、制御方法、及びプログラムに関する。
【背景技術】
【０００２】
ＩＴ（Information Technology）技術の進展に伴い、私達はインターネットを通じて、自分が欲しいと思う情報を世界中から瞬時に取得することが可能となった。例えば、テレビ、広告、又は日常生活で気になる情報を、パーソナルコンピュータ（ＰＣ）を用いて検索エンジンによって検索を実行すれば、その情報に関連する情報を瞬く間に取得することが可能になった。しかし、実際には、気になる情報を気に留めてからしばらくたった後に、ＰＣを用いた関連情報の検索実行を行うことが圧倒的に多く、気になる情報を気に留めていながら、実際には忘れてしまい、検索自体を行わずにやり過ごしてしまう場合も少なくない。
【０００３】
特に、検索実行を後回しにした結果、結局検索を行わずに忘れてしまう原因として、気になる情報に対する興味、関心を抱いたその時点で、すぐに検索実行を行うことができない環境にあることが考えられる。すなわち、興味、関心を持った時点て、即座に情報を検索することができないため、自ら情報取得の機会を失っているのである。
【０００４】
他の理由として、検索文字列をＰＣに入力する手間が原因で、情報取得の機会を失っている場合もある。ＰＣのＣＰＵ（Central Processing Unit）の演算能力の向上、メモリ等のコストダウンに伴うパソコン価格の下落に伴い、一般ユーザがＰＣに触れる機会も増加してきている。しかし、ＰＣの操作に不慣れな一般ユーザは、キーボードを用いた入力、又はＧＵＩ（Graphical User Interface）操作に必要とされるマウス操作等に習熟する必要があり、以前と比較してかなり扱いやすくなったとはいえ、ＰＣは一般ユーザにとって容易に扱えるものとはなっていない。
【０００５】
このように情報入力の点から見ても、一般ユーザになるべく負担をかけることなく、気になる情報に興味、関心を抱いたその時点で、直接的に情報検索が可能な手段が要求されている。
【０００６】
また、情報を検索するために必要とされるものが、検索エンジンを用いて検索を行うための文字列に限定されていることも、情報の検索及び取得を困難にしている要因として挙げられる。情報の検索を主体とした従来型の検索エンジンでは、文字で表すことができないものに対する情報を得るための手段がそもそも存在しない。
【０００７】
例えば、テレビ番組に出演している芸能人が試食している料理に対して、興味、関心を抱いたとしても、直接的に、その芸能人に対してその料理を提供しているレストランの名前や料理の値段等を尋ねることはできないのであり、例えば、そのテレビ番組を録画しておき、後で再生して確認したり、放送される番組を視聴しながらメモ書きしておいたりしておかなければ、忘れてしまうことが多々ある。また、テレビショッピングのような番組を視聴していても、同様なことはしばしば起こるものである。このように、欲しいと感じたその瞬間に、情報を取得するための手段が存在しないため、興味、関心を持った情報を獲得する機会をみすみす逃してしまっている場合が多い。
【０００８】
このように、私達が日常生活において興味、関心を抱くものには、文字列で表されるものだけでなく、目で見たもの、耳で聞いたもの、手で触れたもの等、自分の周囲に存在するものであることが非常に多く、その場で、リアルタイムに、その対象物に関する情報を容易に獲得することができる環境の構築が強く望まれている。
【０００９】
すなわち、目で見たもの、耳で聞いたもの、手で触れたもの等の情報やそれに関連する情報を、その場に居ながらにしてリアルタイムに取得することができれば、後からＰＣを用いて検索をする必要もなく、その場で知的好奇心を満たすことが可能となり、ＰＣを用いた検索操作を意識せずに、情報社会の恩恵を享受することが可能となる。
【００１０】
このように、従来の情報の取得手段は、ＰＣを用いた検索エンジンに対する検索用文字列の入力、検索の実行といった処理が主体であり、ＰＣの操作に不慣れな一般ユーザにとって、検索用文字列の入力、及び検索の実行といった操作は難しく、眼前にある興味、関心を抱いた情報に関連する情報をその場でリアルタイムに取得するための手段も存在しない。さらに、形、音、触感等、文字列では表現することができない要素に基づく情報取得のための手法が確立されていない等、従来の情報検索システムには様々な問題があった。
【先行技術文献】
【特許文献】
【００１１】
【特許文献１】特開２００２−０７４２９０号公報
【発明の概要】
【発明が解決しようとする課題】
【００１２】
上述したように、従来、情報の取得は、文字列を用いて情報の検索を行うことが主体であり、ＰＣに不慣れな一般ユーザにとって敷居が高く、扱い難いものであった。また、眼前に現れているものに関する情報を獲得するための手法も確立されていない。特に、３次元的な物の形状や、手触りといった人間にとってより自然な形で取得することができる文字列以外の情報を利用した情報獲得手段は存在しない。
【００１３】
また、特許文献１に記載された情報取得装置では、画面に表示された対象物にユーザが指で触れると、その対象物に対して電子透かし技術で埋め込まれた登録情報から、オブジェクトを特定する識別情報が抽出され、情報取得装置の送受信部が、その識別情報に対応する登録データベースからサービス提供サーバによって検索された結果（関連ホームページ）を受信し、画面上に関連情報を表示している。
【００１４】
しかしながら、特許文献１には、検索された情報が如何なるタイミングでユーザに通知されるかについては具体的に明記されておらず、仮に、テレビ番組を見ている最中に検索された情報がテレビ画面に現れてしまうと、テレビ番組と検索情報とが同一画面に同時に表示されてしまうこととなり、ユーザは、検索情報に気を取られて、テレビ番組を見逃してしまうという問題がある。また、番組に被らないようにテレビ画面に検索情報を表示するためには、テレビ画面上に小さく検索情報を表示しなければならず、見難くなるという問題がある。
【００１５】
そこで本発明は、上記従来の問題点に鑑みてなされたもので、番組放送中に番組情報を解析し、当該番組情報に関連するキーワードに基づいてインターネット検索を行い、テレビ番組と検索された情報とを区分して表示することにより、テレビ番組を見逃したり、検索したい情報を取得し忘れたりすることを防止することが可能な情報処理装置、制御方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１６】
上記課題を解決するため、請求項１に記載の本発明における情報処理装置は、インターネットに接続された情報処理装置であって、映像情報を受信する手段と、前記受信された映像情報を解析する手段と、前記解析された映像情報の中から前記映像情報と関連性があるキーワードを作成する手段と、前記作成されたキーワードに基づいて、前記インターネットを用いて前記キーワードに関連する関連情報を検索する手段と、前記検索された関連情報と前記受信された映像情報とを区分して表示する表示手段と、を含むことを特徴とする。
【００１７】
また、本発明における情報処理装置は、請求項１に記載の情報処理装置において、前記表示手段は、前記映像情報と前記関連情報とを区分して表示する分割表示モードと、前記映像情報を全面に表示するフル表示モードとを有し、前記分割表示モードは、前記関連情報をメイン画面として表示し、前記映像情報をサブ画面として表示することを特徴とする。
【００１８】
さらに、本発明における情報処理装置は、請求項２に記載の情報処理装置において、前記映像情報の中からＣＭ（Commercial Message）の有無を検知する手段をさらに含み、前記ＣＭが開始されたことが検知されると、前記表示手段は前記フル表示モードから前記分割表示モードへ移行し、前記ＣＭが終了したことが検知されると、前記表示手段は、前記分割表示モードから前記フル表示モードへ移行することを特徴とする。
【００１９】
また、本発明における情報処理装置は、請求項３に記載の情報処理装置において、前記関連情報に対するアクセスを検出する手段をさらに含み、前記分割表示モードにおいて、前記関連情報に対するアクセスが検出されると、前記ＣＭが終了したことが検知されても、前記分割表示モードから前記フル表示モードへ移行しないことを特徴とする。
【００２０】
そして、上記課題を解決するため、請求項５に記載の本発明における制御方法は、インターネットに接続された情報処理装置の制御方法であって、映像情報を受信する工程と、前記受信する工程により受信された映像情報を解析する工程と、前記解析する工程により解析された映像情報の中から前記映像情報と関連性があるキーワードを作成する工程と、前記作成する工程により作成されたキーワードに基づいて、前記インターネットを用いて前記キーワードに関連する関連情報を検索する工程と、表示手段が、前記検索する工程により検索された関連情報と前記受信された映像情報とを区分して表示する工程と、を含むことを特徴とする。
【００２１】
また、上記課題を解決するために、請求項６に記載の本発明におけるプログラムは、インターネットに接続された情報処理装置に実行させるコンピュータにより読み取り可能なプログラムであって、映像情報を受信する処理と、前記受信する処理により受信された映像情報を解析する処理と、前記解析する処理により解析された映像情報の中から前記映像情報と関連性があるキーワードを作成する処理と、前記作成する処理により作成されたキーワードに基づいて、前記インターネットを用いて前記キーワードに関連する関連情報を検索する処理と、表示手段が、前記検索する処理により検索された関連情報と前記受信された映像情報とを区分して表示する処理と、を含むことを特徴とする。
【発明の効果】
【００２２】
本発明によれば、テレビ番組を見逃すことなく、テレビ関連情報を容易に取得可能とする情報処理装置、制御方法、及びプログラムが得られる。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施形態における情報処理装置の動作概要を説明するための構成図である。
【図２】本発明の実施形態における情報処理装置の構成について説明する概略ブロック図である。
【図３】本発明の実施形態における情報処理装置において、ディスプレイの表示方法として、（ａ）テレビ映像のみを表示するときの表示状態を説明するための図、（ｂ）テレビ映像と関連情報とを併せて表示するときの表示状態を説明する図である。
【図４】本発明の実施形態における情報処理装置の動作を説明するためのフローチャート図である。
【発明を実施するための形態】
【００２４】
次に、本発明を実施するための形態について図面を参照して詳細に説明する。なお、各図中、同一又は相当する部分には同一の符号を付しており、その重複説明は適宜に簡略化乃至省略する。本発明の内容を簡潔に説明すると、受信されたテレビ映像を解析し、当該テレビ番組に関係するキーワードに基づいて検索を行い、当該検索結果を所定の位置、所定のタイミングでユーザに提示することを可能とするものである。なお、以下に説明する実施の形態において、映像の受信方法として、現行のテレビ映像を受信する方法を例示して説明するが、映像を受信する方法は特に限定されることなく、例えば、インターネット等を介して映像情報を取得しても良いことは勿論である。
【００２５】
まず、図１を用いて本発明の実施形態における情報処理装置の構成について説明する。図１は、本発明の実施形態における情報処理装置の動作概要を説明するための構成図である。図１を参照すると、情報処理装置２０は、放送局１０から送信されるテレビ映像を受信し、解析を行う（（１）ＴＶ映像受信と解析）。すなわち、情報処理装置２０は、放送局１０からテレビ映像を受信し再生するのであるが、その際、番組の画像と音声とを解析し、解析結果から映像に関係する単語（映像キーワード）を作成する。例えば、オリンピックの水泳競技が放映されているときには、画面の字幕スーパーの「水泳」という文字と、実況アナウンサーの「これから１００ｍ平泳ぎ」という音声とに基づいて、「水泳  平泳ぎ」という映像キーワードを作成する。この映像キーワードについては後述する。
【００２６】
次に、Ｗｅｂ（インターネット）３０に接続された情報処理装置２０は、解析結果に基づいて、映像キーワードを用いて関連情報を取得する（（２）映像キーワードで関連情報を取得）。すなわち、映像キーワードを用いてＷｅｂ（インターネット）を用いて検索実行を行い、当該映像キーワードに関連性が高い情報を取得する。また、特定のＷｅｂサイト内で映像キーワードを用いて検索実行を行っても良い。
【００２７】
最後に、取得された関連情報を、テレビ視聴の邪魔にならないようユーザ４０に対して提示する（（３）テレビ視聴の邪魔にならないよう関連情報を提示）。すなわち、（２）で取得された関連情報を、テレビ視聴の邪魔にならない表示位置、表示タイミングでユーザ４０に対して提示する。詳細については、後述する関連情報提示方法のところで具体的に説明する。
【００２８】
次に、情報処理装置２０の構成について図２を参照しながら説明する。図２は、本発明の実施形態における情報処理装置の構成について説明する概略ブロック図である。図２において、情報処理装置２０は、放送局１０から送信される放送波を受信するチューナ部２１と、チューナ部２１により受信されたコンテンツを記録するコンテンツ記録部２２と、動画コンテンツをディスプレイ２４に表示するために動画表示処理を行う動画表示処理部２３と、動画表示処理された映像を解析する映像解析処理部２８と、インターネットに接続すると共に、映像解析処理部２８により解析された映像キーワードに基づいてインターネットに接続し、検索実行を行うネットワーク接続処理部２５と、ネットワーク接続処理部２５により検索された関連情報を記録する関連情報記録部２６と、映像解析処理部２８により解析された映像と、関連情報記録部２６に記録された関連情報とに基づいて、ディスプレイ２４に関連情報を表示する関連情報表示部２７と、動画表示処理部２３と、関連情報表示部２７とに基づいて、動画及び関連情報を表示するディスプレイ２４と、から構成される。
【００２９】
次に、テレビ映像と関連情報の表示方法について説明する。図３は、本発明の実施形態における情報処理装置において、ディスプレイの表示方法として、（ａ）テレビ映像のみを表示するときの表示状態を説明するための図、（ｂ）テレビ映像と関連情報を併せて表示するときの表示状態を説明する図である。
【００３０】
図３（ａ）は、テレビ映像のみを表示するときの表示状態を説明するための図であり、映像本編表示中（ＣＭ配信中ではない場合）はこの表示状態となる。この表示状態では、ディスプレイ２４（図２）に対してテレビ映像が全画面（フル画面）に表示される。もし、関連情報が存在する場合、ＣＭ配信中は自動的に後述する図３（ｂ）の表示状態となり、ＣＭ配信が終了すると自動的に図３（ａ）の表示状態に戻る。
【００３１】
図３（ｂ）は、テレビ映像と関連情報とを併せて表示するときの表示状態を説明する図であり、映像本編以外を表示中（ＣＭ配信中の場合）はこの表示状態となる。この表示状態では、テレビ映像を邪魔しないような表示形態で関連情報を表示する。具体的には、ディスプレイ２４の左上にテレビ映像が表示され、その下には関連情報の目次が表示され、ディスプレイ２４の右側３分の２の領域には、関連情報の詳細が表示されるといった分割表示がなされる。すなわち、関連情報の詳細がメイン画面として表示され、テレビ映像がサブ画面として表示される。
【００３２】
図３（ｂ）の場合、関連情報目次部の中の宇宙観測が選択されており、関連情報詳細表示部には、宇宙観測に関する詳細な説明が表示されている。もし、ユーザ４０が、一度関連情報を操作すると、映像が本編表示状態（ＣＭ配信が終了した状態）に移行したとしても、ユーザ４０が明示的に関連情報を閉じる操作を行わない限り、図３（ａ）の表示状態に戻ることはしない。
【００３３】
次に、本発明の実施形態における情報処理装置の動作について説明する。図４は、本発明の実施形態における情報処理装置の動作を説明するためのフローチャート図である。図４において、まず、ステップ（以下、「Ｓ」という。）４１の動画表示処理では、チューナ部２１（図２）によって放送波から受信されたコンテンツデータが、コンテンツ記録部２２に蓄積される。動画表示処理部２３では、そのコンテンツデータがデコードされ、ディスプレイ２４に表示される。
【００３４】
Ｓ４２の映像解析（映像キーワード作成）処理では、映像解析処理部２８によって、動画表示処理部２３のＳ４１の処理結果であるデコード結果にアクセスされ、その映像（文字や音声等）が解析される。この解析結果が集計され、解析された映像と関連性が高い単語（これを、「映像キーワード」と呼ぶ。）が作成される。
【００３５】
Ｓ４３の処理では、映像キーワードが作成できたか否かが判断される。映像キーワードが作成できたと判断されたときは（Ｓ４３：ＹＥＳ）、Ｓ４４の処理へ移行し、映像キーワードが作成できないと判断されたときは（Ｓ４３：ＮＯ）、Ｓ４５の処理へ移行する。
【００３６】
Ｓ４４の関連情報取得処理では、ネットワーク接続処理部２５によって、Ｓ４２の処理で作成された映像キーワードに基づいてインターネット検索が実行され、当該映像キーワードに関連する関連情報が取得され、関連情報記録部２６に蓄積される。
【００３７】
Ｓ４５の映像解析（ＣＭ検知）処理では、映像解析処理部２８によって、Ｓ４１の処理結果であるデコード結果にアクセスされ、ＣＭ配信が検知される。映像解析処理部２８では、ＣＭ配信の開始及び終了が区別される。
【００３８】
Ｓ４６の処理では、ＣＭ配信が開始されたか否かが判断される。ＣＭ配信が開始されたと判断されたときは（Ｓ４６：ＹＥＳ）、Ｓ４９の処理へ移行し、ＣＭ配信が開始されないと判断されたときは（Ｓ４６：ＮＯ）Ｓ４７の処理へ移行する。
【００３９】
Ｓ４９の関連情報表示処理（表示）では、Ｓ４４の関連情報取得処理で取得された関連情報記録部２６に蓄積された関連情報が、テレビ映像の邪魔にならないようにディスプレイ２４に表示される。
【００４０】
Ｓ４７の処理では、ＣＭ配信が終了したか否かが判断される。ＣＭ配信が終了したと判断されたときは（Ｓ４７：ＹＥＳ）、Ｓ４８の処理へ移行し、ＣＭ配信が終了していないと判断されたときは（Ｓ４７：ＮＯ）、Ｓ４１の処理へ戻る。
【００４１】
Ｓ４８の関連情報表示処理（終了）では、Ｓ４９の処理で、ディスプレイ２４に表示された関連情報に対してユーザ４０が興味を示さなかった場合（例えば、ユーザ４０が表示された関連情報に対して、アクセスを行わなかった場合等）であって、Ｓ４７の処理でＣＭ配信が終了したと判断されたとき（Ｓ４７：ＹＥＳ）、関連情報表示処理が終了される。すなわち、ディスプレイ２４から関連情報表示が閉じられ、テレビ映像がディスプレイ２４の全画面（フル画面）に表示される。また、ユーザ４０が関連情報を操作中の場合（例えば、ユーザ４０が表示された関連情報に対して、アクセスを行った場合等）、ユーザ４０によって明示的に関連情報を閉じる操作が行われるまで分割表示状態を維持し、ユーザ４０によって関連情報を閉じる操作がなされた後、テレビ映像がディスプレイ２４の全画面（フル画面）に表示される。
【００４２】
このように、本発明によれば、映像解析結果を用いて得られたテレビ映像に関係する関連情報を、テレビ視聴の邪魔にならないように表示することにより、従来のテレビ視聴状態をそのまま維持すると共に、関連情報を分割表示画面に表示することにより、さらに有意義なものにすることが可能な情報処理装置、制御方法、及びプログラムを提供することができる。
【００４３】
なお、図４に示した本発明の実施形態における情報処理装置２０の各動作フローは、コンピュータ上のプログラムに実行させることもできる。すなわち、図示しない制御部に内蔵される図示しないＣＰＵが、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等から構成される図示しない記憶部に格納されたプログラムをロードし、プログラムの処理ステップが順次実行されることによって行われる。
【００４４】
以上、本発明の好適な実施の形態により本発明を説明した。ここでは特定の具体例を示して本発明を説明したが、特許請求の範囲に定義された本発明の広範囲な趣旨及び範囲から逸脱することなく、これら具体例に様々な修正及び変更が可能である。
【符号の説明】
【００４５】
１０    放送局
２０    情報処理装置
２１    チューナ部
２２    コンテンツ記録部
２３    動画表示処理部
２４    ディスプレイ
２５    ネットワーク接続処理部
２６    関連情報記録部
２７    関連情報表示部
２８    映像解析処理部
３０    Ｗｅｂ（インターネット）
４０    ユーザ
【図１】
2014154073.tif 000003
【図２】
2014154073.tif 000004
【図３】
2014154073.tif 000005
【図４】
2014154073.tif 000006