(57)【要約】測定部（１１０）が、利用者の脳の電磁気学的特性を測定し、イメージ生成部（１２０）が、測定部（１１０）が測定した電磁気学的特性を解析し、解析の結果に基づいて、知覚イメージを生成し、検索部（１４０）が、イメージ生成部（１２０）が生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを、複数のコンテンツデータを格納しているデータベース（１３０）から検索して取得し、照合部（１５０）が、イメージ生成部（１２０）が生成した知覚イメージの特徴量と、検索部（１４０）が取得したコンテンツデータの特徴量とを照合し、出力部（１６０）が、照合部（１５０）における照合の結果に基づいて、コンテンツデータを出力する。
2013018515.tif 000002
【特許請求の範囲】
【請求項１】
利用者の脳の電磁気学的特性を測定する測定部と、
前記測定部が測定した電磁気学的特性を解析し、該解析の結果に基づいて、知覚イメージを生成するイメージ生成部と、
複数のコンテンツデータを格納しているデータベースと、
前記イメージ生成部が生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを前記データベースから検索して取得する検索部と、
前記イメージ生成部が生成した知覚イメージの特徴量と、前記検索部が取得したコンテンツデータの特徴量とを照合する照合部と、
前記照合部における照合の結果に基づいて、前記コンテンツデータを出力する出力部とを有する情報処理装置。
【請求項２】
請求項１に記載の情報処理装置において、
前記出力部は、前記照合部における照合の結果、前記イメージ生成部が生成した知覚イメージの特徴量と、前記検索部が取得したコンテンツデータの特徴量との差異が、所定の範囲内にある場合、該コンテンツデータを出力することを特徴とする情報処理装置。
【請求項３】
請求項１または請求項２に記載の情報処理装置において、
第１の情報を入力する情報入力部を有し、
前記データベースは、第２の情報が付加された前記コンテンツデータを格納し、
前記照合部は、前記イメージ生成部が生成した知覚イメージの特徴量および前記情報入力部に入力された前記第１の情報と、前記検索部が取得したコンテンツデータの特徴量および該コンテンツデータに付加された前記第２の情報とをそれぞれ照合することを特徴とする情報処理装置。
【請求項４】
請求項３に記載の情報処理装置において、
前記情報入力部は、前記第１の情報として音声情報を入力し、
前記データベースは、前記第２の情報として音声情報を格納することを特徴とする情報処理装置。
【請求項５】
請求項３に記載の情報処理装置において、
前記情報入力部は、前記第１の情報として位置情報を入力し、
前記データベースは、前記第２の情報として位置情報を格納することを特徴とする情報処理装置。
【請求項６】
請求項１乃至５のいずれか１項に記載の情報処理装置において、
前記出力部は、前記コンテンツデータの出力回数を制限することを特徴とする情報処理装置。
【請求項７】
利用者の脳の電磁気学的特性を測定する処理と、
前記測定した電磁気学的特性を解析する処理と、
前記解析の結果に基づいて、知覚イメージを生成する処理と、
前記生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを、複数のコンテンツデータを格納しているデータベースから検索して取得する処理と、
前記生成した知覚イメージの特徴量と、前記取得したコンテンツデータの特徴量とを照合する処理と、
前記照合の結果に基づいて、前記コンテンツデータを出力する処理とを行う情報処理方法。
【請求項８】
コンピュータに、
利用者の脳の電磁気学的特性を測定する手順と、
前記測定した電磁気学的特性を解析する手順と、
前記解析の結果に基づいて、知覚イメージを生成する手順と、
前記生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを、複数のコンテンツデータを格納しているデータベースから検索して取得する手順と、
前記生成した知覚イメージの特徴量と、前記取得したコンテンツデータの特徴量とを照合する手順と、
前記照合の結果に基づいて、前記コンテンツデータを出力する手順とを実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報を処理する情報処理装置、情報処理方法およびプログラムに関する。
【背景技術】
【０００２】
近年、コンテンツデータの電子データ化が急速に広まっており、既存の媒体（新聞・雑誌・本等）と電子データ化されたものとが併存する状況が生まれている。【０００３】
例えば、新聞で読んだ記事を、後でもう一度読みたいときに、新聞そのものが既にない場合がある。このような場合、この新聞に該当するコンテンツの電子データ（以下、デジタルコンテンツと称する）を閲覧することで、当該記事を読むことができる。【０００４】
このようにデジタルコンテンツを閲覧する際、当該デジタルコンテンツに関連する検索キーワードを入力することで当該デジタルコンテンツを検索して取得する。【０００５】
また、視聴したコンテンツデータからテキストデータ等の属性を抽出して、その属性を当該コンテンツデータと共に保存しておき、後で当該コンテンツデータを閲覧する際に、当該コンテンツデータと共に保存した属性を検索キーとして入力することで当該コンテンツデータを検索して取得するシステムが開示されている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−１７９２５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上述した技術において、デジタルコンテンツを検索するためのキーワードを利用者が入力しなければならなく、その手間がかかってしまうという問題点がある。これではデジタルコンテンツの活用が限られてしまう。【０００８】
本発明の目的は、上述した課題を解決する情報処理装置、情報処理方法およびプログラムを提供することである。
【課題を解決するための手段】
【０００９】
本発明の情報処理装置は、
利用者の脳の電磁気学的特性を測定する測定部と、
前記測定部が測定した電磁気学的特性を解析し、該解析の結果に基づいて、知覚イメージを生成するイメージ生成部と、
複数のコンテンツデータを格納しているデータベースと、
前記イメージ生成部が生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを前記データベースから検索して取得する検索部と、
前記イメージ生成部が生成した知覚イメージの特徴量と、前記検索部が取得したコンテンツデータの特徴量とを照合する照合部と、
前記照合部における照合の結果に基づいて、前記コンテンツデータを出力する出力部とを有する。【００１０】
また、本発明の情報処理方法は、
利用者の脳の電磁気学的特性を測定する処理と、
前記測定した電磁気学的特性を解析する処理と、
前記解析の結果に基づいて、知覚イメージを生成する処理と、
前記生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを、複数のコンテンツデータを格納しているデータベースから検索して取得する処理と、
前記生成した知覚イメージの特徴量と、前記取得したコンテンツデータの特徴量とを照合する処理と、
前記照合の結果に基づいて、前記コンテンツデータを出力する処理とを行う。【００１１】
また、本発明のプログラムは、
コンピュータに実行させるためのプログラムであって、
利用者の脳の電磁気学的特性を測定する手順と、
前記測定した電磁気学的特性を解析する手順と、
前記解析の結果に基づいて、知覚イメージを生成する手順と、
前記生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを、複数のコンテンツデータを格納しているデータベースから検索して取得する手順と、
前記生成した知覚イメージの特徴量と、前記取得したコンテンツデータの特徴量とを照合する手順と、
前記照合の結果に基づいて、前記コンテンツデータを出力する手順とを実行させる。
【発明の効果】
【００１２】
以上説明したように、本発明においては、一度閲覧した情報を再度閲覧するための手間を削減することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の情報処理装置の実施の一形態を示す図である。
【図２】図１に示したデータベースに格納されているコンテンツデータの一例を示す図である。
【図３】図１に示した情報処理装置における情報処理方法を説明するためのフローチャートである。
【図４】本発明の情報処理装置の他の実施の形態を示す図である。
【発明を実施するための形態】
【００１４】
以下に、本発明の実施の形態について図面を参照して説明する。
【００１５】
図１は、本発明の情報処理装置の実施の一形態を示す図である。
【００１６】
本形態における情報処理装置１００には図１に示すように、測定部１１０と、イメージ生成部１２０と、データベース１３０と、検索部１４０と、照合部１５０と、出力部１６０とが設けられている。なお、情報処理装置１００は、携帯電話やスマートフォン等の携帯端末、ゲーム機、デスクトップ型、タブレット型やノート型のＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、他の通信装置や医療機器であっても良い。
【００１７】
測定部１１０は、利用者の脳内の視覚連合野等の電磁気学的特性を測定する。ここで、電磁気学的特性とは、電場における電気的特性および磁場における磁気的特性を示すもの（例えば、電磁波等）である。また、測定部１１０は、測定結果をイメージ生成部１２０へ出力する。
【００１８】
イメージ生成部１２０は、測定部１１０から出力されてきた測定結果を解析する。また、イメージ生成部１２０は、その解析の結果に基づいて、利用者が過去に知覚した文字、画像、映像等の知覚イメージを生成（再現）する。
【００１９】
この測定部１１０およびイメージ生成部１２０の処理は、一般的に開示されている、人間の脳の動きから画像を再生する技術（例えば、文献１（Neuron,  Volume  60,  Issue  5,  915-929,  10  December  2008  "Visual  Image  Reconstruction  from  Human  Brain  Activity  using  a  Combination  of  Multiscale  Local  Image  Decoders"）に記載されているような技術）や、動物の脳を記憶情報を電子化して取り出し、蘇生させる技術（例えば、文献２（Theodore  W  Berger,  Robert  E  Hampson,  Dong  Song,  Anushka  Goonawardena,  Vasilis  Z  Marmarelis  and  Sam  A  Deadwyler,  Journal  of  Neural  Engineering  8  (2011)  046017  (11pp)  “A  cortical  neural  prosthesis  for  restoring  and  enhancing  memory”）に記載されているような技術）を用いて行うもので良い。
【００２０】
また、イメージ生成部１２０は、生成した知覚イメージのうちの対象物画像を検索部１４０へ出力する。この対象物画像とは、利用者が視覚的にとらえた画像や映像等である。この対象物画像は、例えば、知覚イメージが山手線の車両の外観である場合、その山手線の車両の外観そのものの画像や映像である。
【００２１】
また、イメージ生成部１２０は、生成した知覚イメージの特徴量を照合部１５０へ出力する。
【００２２】
この特徴量とは、例えば、知覚イメージが、新聞、雑誌、ポスター、ウェブサイト等の紙面イメージである場合、その紙面イメージの縦横比や、文字・画像・余白のレイアウト等の、そのイメージの特徴を示す情報である。また、知覚イメージが、映画、映像番組、ライブ、スポーツ等の映像イメージである場合、その映像イメージの少なくとも一部のシーンの登場人物・登場物の組み合わせ・構図・配置・色・形・動作、文字・画像の色・形およびそれらのレイアウト、およびそれらの経時変化等の、そのイメージの特徴を示す情報である。
【００２３】
データベース１３０は、複数のコンテンツデータをあらかじめ格納する。このコンテンツデータは、新聞や雑誌、映画、テレビ番組、インターネット配信動画等であり、静止画や動画が含まれるものである。
【００２４】
図２は、図１に示したデータベース１３０に格納されているコンテンツデータの一例を示す図である。
【００２５】
図１に示したデータベース１３０には図２に示すように、複数のコンテンツデータがファイルとして格納されている。図２に示したコンテンツデータのファイルの形式は、拡張子をして「ｊｐｇ」、「ａｖｉ」および「ｍｐｇ」を用いるものを例に挙げているが、これらに限らない。
【００２６】
検索部１４０は、イメージ生成部１２０から出力されてきた対象物画像が含まれるコンテンツデータをデータベース１３０から検索する。また、検索部１４０は、検索の結果、検索対象のコンテンツデータが見つかった場合、当該コンテンツデータをデータベース１３０から取得する（読み出す）。この取得したコンテンツデータは、後述する出力部１６０が出力するコンテンツデータの候補となるものであり、複数のコンテンツデータが見つかる可能性もある。なお、検索部１４０の検索処理は、一般的なテキスト検索処理や画像（映像）検索処理で良い。
【００２７】
例えば、知覚イメージが文字である場合、検索部１４０は、データベース１３０内にてテキスト検索を行う。また、知覚イメージが画像（ロゴを含む）や映像である場合、検索部１４０は、データベース１３０内にて画像検索や映像検索を行う。
【００２８】
また、検索部１４０は、取得したコンテンツデータを照合部１５０へ出力する。
【００２９】
照合部１５０は、イメージ生成部１２０から出力されてきた知覚イメージの特徴量と、検索部１４０から出力されてきたコンテンツデータの特徴量とを照合する。また、照合部１５０は、照合の結果、イメージ生成部１２０から出力されてきた知覚イメージの特徴量と、検索部１４０から出力されてきたコンテンツデータの特徴量との差異が、あらかじめ設定された範囲内にある場合、その検索部１４０から出力されてきたコンテンツデータを出力部１６０へ出力する。なお、照合部１５０は、特徴量の中で、例えば、特定の画像、特定の色・形状の物・文字、特定の人物やその服装等の、利用者の記憶に残り易いものが選ばれ、その選ばれた特徴量を用いて照合を行うものであっても良い。なお、この照合部１５０から出力部１６０へ出力されるコンテンツデータが、利用者が実際に知覚したイメージとなる。
【００３０】
なお、検索部１４０と照合部１５０とは、同一であってもよい。つまり、コンテンツを特定する処理は一度で済ませてもよい。
【００３１】
出力部１６０は、照合部１５０における照合の結果、照合部１５０から出力されてきたコンテンツデータを出力する。このとき、出力部１６０のコンテンツデータの出力方法としては、コンテンツデータの表示（再生）や、他の装置への送信、インターネット上への配信、印刷等が考えられる。
【００３２】
また、出力部１６０は、コンテンツデータの出力回数を制限するものであっても良いし、コンテンツデータの１部だけを出力する制限を行うものであっても良い。この制限の基準は、あらかじめ設定されているものであっても良いし、出力頻度等に基づいて計算されるものであっても良いし、外部から設定できるものであっても良い。また、出力部１６０は、出力や再生に期限を設けてもよい。
【００３３】
また、情報処理装置１００は、さらに課金処理部を備え、コンテンツデータの配信や制限等の条件に基づいて、課金情報を決定し、利用者情報と関連付けてもよい。
【００３４】
また、情報処理装置１００は、関連コンテンツ提示部をさらに備え、コンテンツの照合後、特定したコンテンツに関連するコンテンツ情報やコンテンツそのものをデータベース１３０から抽出し、出力部１６０へ転送するものであってもよい。ここで、関連するコンテンツとは、例えば、書籍のポスターを特定した場合は当該書籍であり、また、ライブ映像を特定した場合はその音楽データや当該アーティストの他の音楽や著作物等である。
【００３５】
以下に、図１に示した情報処理装置１００における情報処理方法について説明する。
【００３６】
図３は、図１に示した情報処理装置１００における情報処理方法を説明するためのフローチャートである。
【００３７】
まず、ステップ１にて、測定部１１０が利用者の脳の電磁気学的特性を測定すると、ステップ２にて、測定部１１０が測定した電磁気学的特性をイメージ生成部１２０が解析する。また、ステップ３にて、イメージ生成部１２０は、その解析の結果に基づいて、知覚イメージを生成する。
【００３８】
続いて、ステップ４にて、イメージ生成部１２０が生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータを、検索部１４０がデータベース１３０から検索する。
【００３９】
イメージ生成部１２０が生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータがデータベース１３０に存在しない場合、処理は終了する。
【００４０】
一方、イメージ生成部１２０が生成した知覚イメージのうちの対象物画像が含まれるコンテンツデータがデータベース１３０に存在する場合は、ステップ５にて、該当するコンテンツデータを検索部１４０がデータベース１３０から取得する（読み出す）。
【００４１】
すると、ステップ６にて、イメージ生成部１２０が生成した知覚イメージの特徴量と、検索部１４０が取得したコンテンツデータの特徴量とを、照合部１５０が照合する。
【００４２】
照合の結果、イメージ生成部１２０が生成した知覚イメージの特徴量と、検索部１４０が取得したコンテンツデータの特徴量との差異が、所定の範囲内にある場合、ステップ７にて、そのコンテンツデータを、出力するコンテンツデータとして決定し、ステップ８にて、出力部１６０が当該コンテンツデータを出力する。
【００４３】
このように、利用者が一度知覚したコンテンツデータを、その利用者が当該コンテンツデータを思い出すだけで、当該コンテンツデータを再出力することができる。
【００４４】
図４は、本発明の情報処理装置の他の実施の形態を示す図である。
【００４５】
本形態における情報処理装置１０１には図４に示すように、図１に示した形態に情報入力部１７０が追加され、また、図１に示した形態におけるデータベース１３０の代わりにデータベース１３１が設けられ、また、照合部１５０の代わりに照合部１５１が設けられた形態となっている。
【００４６】
情報入力部１７０は、外部からの利用者の操作で所定の情報（第１の情報）を入力する。この入力される情報は、音声情報であっても良いし、情報処理装置１０１の存在位置を示す位置情報であっても良い。情報入力部１７０に入力される情報が音声情報である場合、情報入力部１７０は、音声の入力を受け付けるマイク等であっても良い。また、情報入力部１７０に入力される情報が位置情報である場合、情報入力部１７０は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）機能を用いて位置情報を取得するものあっても良い。また、情報入力部１７０は、入力した情報を照合部１５１へ出力する。
【００４７】
また、データベース１３１は、データベース１３０に格納されるコンテンツデータと同じものを格納するが、格納されるコンテンツデータには付加情報（第２の情報）が付加されている。この付加情報は、音声情報であっても良いし、位置情報であっても良い。
【００４８】
また、照合部１５１は、イメージ生成部１２０が生成した知覚イメージの特徴量および情報入力部１７０に入力された第１の情報と、検索部１４０が取得したコンテンツデータの特徴量およびコンテンツデータに付加された第２の情報とをそれぞれ照合する。そして、照合の結果、それらがそれぞれ互いに合致した場合、当該コンテンツデータを出力部１６０へ出力する。例えば、第１および第２の情報が音声情報である場合、照合部１５１は、その中の音声、音程、音色や声紋を照合するものであっても良い。
【００４９】
また、利用者が過去に知覚した文字、画像、映像、音声、音程、音色等の知覚情報を記録する知覚情報記録部をさらに設ける。そして、イメージ生成部１２０が生成した知覚イメージや情報入力部１７０に入力された情報と、知覚情報記録部内の知覚情報とを照合する。こうすることで、利用者が入手したいコンテンツデータに関わる知覚情報を特定し、該当するコンテンツデータを出力するものであっても良い。
【００５０】
このように、追加の情報を用いることで、再出力するコンテンツデータについて、より精密な決定を行うことができる。
【００５１】
なお、上述した情報処理装置１００，１０１に設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を手順として記述したコンピュータプログラム（以下、プログラムと称する）を情報処理装置１００，１０１にて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムを情報処理装置１００，１０１に読み込ませ、実行するものであっても良い。情報処理装置１００，１０１にて読取可能な記録媒体とは、フロッピー（登録商標）ディスク、光磁気ディスク、ＤＶＤ、ＣＤなどの移設可能な記録媒体の他、情報処理装置１００，１０１に内蔵されたＲＯＭ、ＲＡＭ等のメモリやＨＤＤ等を指す。この記録媒体に記録されたプログラムは、情報処理装置１００，１０１に設けられたＣＰＵ（不図示）にて読み込まれ、ＣＰＵの制御にて、上述したものと同様の処理が行われる。ここで、ＣＰＵは、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。
【００５２】
以上、実施の形態を参照して本願発明を説明したが、本願発明は上記実施の形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
【００５３】
この出願は、２０１１年７月２９日に出願された日本出願特願２０１１−１６６４８８を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【図１】
2013018515.tif 000003
【図２】
2013018515.tif 000004
【図３】
2013018515.tif 000005
【図４】
2013018515.tif 000006
【国際調査報告】
2013018515.tif 000007
2013018515.tif 000008
2013018515.tif 000009
2013018515.tif 000010