(57)【要約】【課題】表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことが可能な情報処理装置、および情報処理システムを提供する。【解決手段】表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、ユーザの視線が向けられているオブジェクトを判別する判別部と、判別部がユーザの視線が向けられているオブジェクトを判別した場合に、判別部により判別されたオブジェクトに対応した処理を選択的に行う処理部とを備える情報処理装置が提供される。【選択図】図７
2012123513.tif 000002
【特許請求の範囲】
【請求項１】
表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、前記画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、前記ユーザの視線が向けられているオブジェクトを判別する判別部と、
前記判別部がユーザの視線が向けられているオブジェクトを判別した場合に、前記判別部により判別された前記オブジェクトに対応した処理を選択的に行う処理部と、
を備える、情報処理装置。
【請求項２】
前記画像に対応付けられたメタデータを用いること、および／または、前記画像を処理することによって、前記画像に含まれるオブジェクトを検出して前記オブジェクト情報を生成する検出部をさらに備え、
前記判別部は、前記検出部が生成した前記オブジェクト情報に基づいて、前記ユーザの視線が向けられているオブジェクトを判別する、請求項１に記載の情報処理装置。
【請求項３】
前記処理部は、前記判別部により判別された前記オブジェクトに対応する、オブジェクトに関する補助情報が示す内容を、前記判別部により判別された前記オブジェクトに対応する前記画像領域の近傍に表示させる、請求項１、または２のいずれか１項に記載の情報処理装置。
【請求項４】
記憶部と、
前記補助情報を記憶する外部装置と通信を行う通信部と、
をさらに備え、
前記処理部は、
前記判別部により判別された前記オブジェクトを示す注目オブジェクト情報を生成して、生成した前記注目オブジェクト情報を前記記憶部に記録し、
前記判別部により判別された前記オブジェクトに対応するオブジェクトを示す前記注目オブジェクト情報が前記記憶部に記憶されている場合には、前記注目オブジェクト情報に対応する前記補助情報を、前記通信部を介して前記外部装置から取得し、
取得した前記補助情報が示す内容を、前記判別部により判別された前記画像における前記オブジェクトに対応する前記画像領域の近傍に表示させる、請求項３に記載の情報処理装置。
【請求項５】
外部装置と通信を行う通信部をさらに備え、
前記処理部は、
前記判別部により判別された前記オブジェクトを示す注目オブジェクト情報を生成し、
前記通信部に、生成した前記注目オブジェクト情報を前記外部装置に対して送信させる、請求項１、または２のいずれか１項に記載の情報処理装置。
【請求項６】
前記処理部は、前記判別部により判別された前記オブジェクトに対応する画像領域を拡大させる拡大処理、および／または、前記画像領域の画質を向上させる高画質化処理を行う、請求項１、または２のいずれか１項に記載の情報処理装置。
【請求項７】
前記処理部は、前記判別部により判別された前記オブジェクトに対応する前記画像領域には、前記画像と異なる他の画像、および／または、前記画像と関連しない情報が示す内容を、重畳させて表示させない、請求項１、または２のいずれか１項に記載の情報処理装置。
【請求項８】
表示装置の表示画面に表示された前記画像におけるユーザの視線を検出して前記座標情報を生成する撮像装置が生成した、前記座標情報が入力される入力部をさらに備え、
前記判別部は、前記入力部に入力された前記座標情報に基づいて、前記ユーザの視線が向けられているオブジェクトを判別する、請求項１、または２のいずれか１項に記載の情報処理装置。
【請求項９】
表示画面に前記画像を表示させる表示部と、
前記表示部の前記表示画面に表示された前記画像におけるユーザの視線を検出して前記座標情報を生成する撮像部と、
をさらに備え、
前記判別部は、前記撮像部が生成した前記座標情報に基づいて、前記ユーザの視線が向けられているオブジェクトを判別する、請求項１、または２のいずれか１項に記載の情報処理装置。
【請求項１０】
オブジェクトに関する補助情報を記憶するサーバと、
前記サーバと通信を行う情報処理装置と、
を有し、
前記情報処理装置は、
記憶部と、
前記サーバと通信を行う通信部と、
表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、前記画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、前記ユーザの視線が向けられているオブジェクトを判別する判別部と、
前記判別部がユーザの視線が向けられているオブジェクトを判別した場合に、前記判別部により判別された前記オブジェクトに対応した処理を選択的に行う処理部と、
を備え、
前記処理部は、
前記判別部により判別された前記オブジェクトを示す注目オブジェクト情報を生成して、生成した前記注目オブジェクト情報を前記記憶部に記録し、
前記判別部により判別された前記オブジェクトに対応するオブジェクトを示す前記注目オブジェクト情報が前記記憶部に記憶されている場合には、前記注目オブジェクト情報に対応する前記補助情報を、前記通信部を介して前記サーバから取得し、
取得した前記補助情報が示す内容を、前記判別部により判別された前記オブジェクトに対応する前記画像領域の近傍に表示させる、情報処理システム。
【請求項１１】
サーバと、
前記サーバと通信を行う情報処理装置と、
を有し、
前記情報処理装置は、
前記サーバと通信を行う通信部と、
表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、前記画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、前記ユーザの視線が向けられているオブジェクトを判別する判別部と、
前記判別部がユーザの視線が向けられているオブジェクトを判別した場合に、前記判別部により判別された前記オブジェクトに対応した処理を選択的に行う処理部と、
を備え、
前記処理部は、
前記判別部により判別された前記オブジェクトを示す注目オブジェクト情報を生成し、前記通信部に、生成した前記注目オブジェクト情報を前記サーバに対して送信させる、情報処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、および情報処理システムに関する。
【背景技術】
【０００２】
近年、表示画面に表示される画像をみるユーザが当該画像において注目する（または、注目するであろう）領域を利用する技術が開発されている。参照データ（メタデータ）に基づいて画像における注目オブジェクトを検出し、検出された注目オブジェクトの座標に基づき設定したトリミング座標がトリミング画像の中心となるように、画像をトリミングしてトリミング画像を生成する技術としては、例えば、特許文献１が挙げられる。また、各ユーザが指定したコンテンツにおける領域の情報に基づく興味情報をデータベースに記録し、解析者が当該データベースを利用することによってユーザの興味の動向を示す情報を作成する技術としては、例えば、特許文献２が挙げられる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−００６１１１号公報
【特許文献２】特開２００９−１１７９７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載の技術（以下、「従来の技術１」と示す場合がある。）が適用された装置（以下、「従来の装置１」と示す場合がある。）は、外部から入力された参照データに基づいて注目オブジェクトを検出する。しかしながら、従来の装置１が検出する注目オブジェクトは、外部から入力された参照データに基づいて検出されるものであるので、検出された当該注目オブジェクトは、画像（動画像または静止画像。以下、同様とする。）をみるユーザが実際に注目するものであるとは限らない。また、上記のように、従来の装置１は、検出された注目オブジェクトの座標に基づき設定したトリミング座標がトリミング画像の中心となるように画像をトリミングする。そのため、従来の装置１が生成したトリミング画像は、ユーザが注目しないオブジェクトが中心の画像となる可能性があるだけでなく、画像に含まれていたユーザが注目した可能性のあるオブジェクトがトリミングによって含まれなくなる恐れがある。よって、従来の技術１を用いたとしても、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができるとは、限らない。
【０００５】
また、特許文献２に記載の技術（以下、「従来の技術２」と示す場合がある。）が適用された装置（以下、「従来の装置２」と示す場合がある。）は、各ユーザが指定したコンテンツにおける領域の情報に基づく興味情報をデータベースに記録する。ここで、従来の技術２に係る興味情報は、ユーザにより指定されたコンテンツにおける領域の情報に基づくので、従来の技術２に係る興味情報が記録されたデータベースを用いることによってユーザの興味の動向を示す情報を作成できる可能性はある。しかしながら、従来の装置２はユーザが手動で領域を指定しなければ興味情報をデータベースに記録することはできない。つまり、従来の技術２は、ユーザが意図的に操作を行うことを前提とするものである。よって、従来の技術２を用いる場合には、ユーザの利便性の低下を招く恐れがある。また、従来の技術２はユーザの意図的な操作を前提としているため、従来の技術２を用いる場合には、例えば興味をもっていないにも関わらず何らかの理由により指定された領域などの恣意的な領域に基づく興味情報がデータベースに記録される恐れもある。よって、従来の技術２を用いたとしても、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができるとは、限らない。
【０００６】
上記のように、従来の技術１や従来の技術２（以下、総称して「従来の技術」と示す場合がある。）を用いたとしても、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができるとは、限らない。
【０００７】
本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことが可能な、新規かつ改良された情報処理装置、および情報処理システムを提供することにある。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明の第１の観点によれば、表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、上記画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、上記ユーザの視線が向けられているオブジェクトを判別する判別部と、上記判別部がユーザの視線が向けられているオブジェクトを判別した場合に、上記判別部により判別された上記オブジェクトに対応した処理を選択的に行う処理部とを備える情報処理装置が提供される。
【０００９】
かかる構成により、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができる。
【００１０】
また、上記画像に対応付けられたメタデータを用いること、および／または、上記画像を処理することによって、上記画像に含まれるオブジェクトを検出して上記オブジェクト情報を生成する検出部をさらに備え、上記判別部は、上記検出部が生成した上記オブジェクト情報に基づいて、上記ユーザの視線が向けられているオブジェクトを判別してもよい。
【００１１】
また、上記処理部は、上記判別部により判別された上記オブジェクトに対応する、オブジェクトに関する補助情報が示す内容を、上記判別部により判別された上記オブジェクトに対応する上記画像領域の近傍に表示させてもよい。
【００１２】
また、記憶部と、上記補助情報を記憶する外部装置と通信を行う通信部とをさらに備え、上記処理部は、上記判別部により判別された上記オブジェクトを示す注目オブジェクト情報を生成して、生成した上記注目オブジェクト情報を上記記憶部に記録し、上記判別部により判別された上記オブジェクトに対応するオブジェクトを示す上記注目オブジェクト情報が上記記憶部に記憶されている場合には、上記注目オブジェクト情報に対応する上記補助情報を、上記通信部を介して上記外部装置から取得し、取得した上記補助情報が示す内容を、上記判別部により判別された上記画像における上記オブジェクトに対応する上記画像領域の近傍に表示させてもよい。
【００１３】
また、外部装置と通信を行う通信部をさらに備え、上記処理部は、上記判別部により判別された上記オブジェクトを示す注目オブジェクト情報を生成し、上記通信部に、生成した上記注目オブジェクト情報を上記外部装置に対して送信させてもよい。
【００１４】
また、上記処理部は、上記判別部により判別された上記オブジェクトに対応する画像領域を拡大させる拡大処理、および／または、上記画像領域の画質を向上させる高画質化処理を行ってもよい。
【００１５】
また、上記処理部は、上記判別部により判別された上記オブジェクトに対応する上記画像領域には、上記画像と異なる他の画像、および／または、上記画像と関連しない情報が示す内容を、重畳させて表示させなくてもよい。
【００１６】
また、表示装置の表示画面に表示された上記画像におけるユーザの視線を検出して上記座標情報を生成する撮像装置が生成した、上記座標情報が入力される入力部をさらに備え、上記判別部は、上記入力部に入力された上記座標情報に基づいて、上記ユーザの視線が向けられているオブジェクトを判別してもよい。
【００１７】
また、表示画面に上記画像を表示させる表示部と、上記表示部の上記表示画面に表示された上記画像におけるユーザの視線を検出して上記座標情報を生成する撮像部とをさらに備え、上記判別部は、上記撮像部が生成した上記座標情報に基づいて、上記ユーザの視線が向けられているオブジェクトを判別してもよい。
【００１８】
上記目的を達成するために、本発明の第２の観点によれば、オブジェクトに関する補助情報を記憶するサーバと、上記サーバと通信を行う情報処理装置とを有し、上記情報処理装置は、記憶部と、上記サーバと通信を行う通信部と、表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、上記画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、上記ユーザの視線が向けられているオブジェクトを判別する判別部と、上記判別部がユーザの視線が向けられているオブジェクトを判別した場合に、上記判別部により判別された上記オブジェクトに対応した処理を選択的に行う処理部とを備え、上記処理部は、上記判別部により判別された上記オブジェクトを示す注目オブジェクト情報を生成して、生成した上記注目オブジェクト情報を上記記憶部に記録し、上記判別部により判別された上記オブジェクトに対応するオブジェクトを示す上記注目オブジェクト情報が上記記憶部に記憶されている場合には、上記注目オブジェクト情報に対応する上記補助情報を、上記通信部を介して上記サーバから取得し、取得した上記補助情報が示す内容を、上記判別部により判別された上記オブジェクトに対応する上記画像領域の近傍に表示させてもよい。
【００１９】
かかる構成により、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことが可能な情報処理システムが実現される。
【００２０】
上記目的を達成するために、本発明の第３の観点によれば、サーバと、上記サーバと通信を行う情報処理装置とを有し、上記情報処理装置は、上記サーバと通信を行う通信部と、表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、上記画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、上記ユーザの視線が向けられているオブジェクトを判別する判別部と、上記判別部がユーザの視線が向けられているオブジェクトを判別した場合に、上記判別部により判別された上記オブジェクトに対応した処理を選択的に行う処理部とを備え、上記処理部は、上記判別部により判別された上記オブジェクトを示す注目オブジェクト情報を生成し、上記通信部に、生成した上記注目オブジェクト情報を上記サーバに対して送信させてもよい。
【００２１】
かかる構成により、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことが可能な情報処理システムが実現される。
【発明の効果】
【００２２】
本発明によれば、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができる。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施形態に係る画像の一例および当該画像における画像領域の一例を示す説明図である。
【図２】本発明の実施形態に係る情報処理装置における、ユーザの視線が向けられているオブジェクトの判別方法の一例を説明するための説明図である。
【図３】本発明の実施形態に係る情報処理装置における、オブジェクト識別処理の一例を説明するための説明図である。
【図４】本発明の実施形態に係る情報処理装置における、オブジェクト識別処理の一例を説明するための説明図である。
【図５】本発明の実施形態に係る情報処理装置における、判別されたオブジェクトに対応した処理の一例を説明するための説明図である。
【図６】本発明の実施形態に係る情報処理装置における、判別されたオブジェクトに対応した処理の一例を説明するための説明図である。
【図７】本発明の第１の実施形態に係る情報処理装置の構成の一例を示すブロック図である。
【図８】本発明の実施形態に係る情報処理装置のハードウェア構成の一例を示す説明図である。
【図９】本発明の第２の実施形態に係る情報処理装置の構成の一例を示すブロック図である。
【図１０】本発明の実施形態に係るサーバの構成の一例を示すブロック図である。
【発明を実施するための形態】
【００２４】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２５】
また、以下では、下記に示す順序で説明を行う。
１．本発明の実施形態に係るアプローチ
２．本発明の実施形態に係る情報処理装置、サーバ
３．本発明の実施形態に係るプログラム
【００２６】
（本発明の実施形態に係るアプローチ）
本発明の実施形態に係る情報処理装置（以下、「情報処理装置１００」と示す場合がある。）の構成について説明する前に、本発明の実施形態に係る処理アプローチについて説明する。
【００２７】
［本発明の実施形態に係る処理アプローチの概要］
上述したように、従来の技術１のように外部から入力された参照データに基づいてオブジェクトを検出したとしても、検出されたオブジェクトが、ユーザが注目する可能性のあるオブジェクトであるとは限らない。また、従来の技術２のように、ユーザの意図的な操作を前提としてユーザが注目するオブジェクトを特定する場合には、ユーザの利便性の低下が生じる恐れがあり、また、ユーザの意図的な操作を前提としているので、ユーザが実際には注目していない恣意的なオブジェクトが特定される恐れがある。よって、従来の技術を用いたとしても、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別できるとは限らない。
【００２８】
そこで、情報処理装置１００は、表示画面に表示された画像におけるユーザの視線の位置を示す座標情報と、当該画像におけるオブジェクトが含まれる画像領域を示す領域情報を含むオブジェクト情報とに基づいて、ユーザの視線が向けられているオブジェクトを判別する。
【００２９】
ここで、本発明の実施形態に係る画像が表示される表示画面としては、例えば、外部表示装置（後述する表示装置５００）の表示画面、または、情報処理装置１００が備える表示部（後述する）の表示画面が挙げられる。
【００３０】
また、本発明の実施形態に係る座標情報は、例えば、表示装置５００の表示画面の表示方向を撮像する外部撮像装置（例えば後述する撮像装置６００）、または、情報処理装置１００が備え表示部（後述する）の表示画面の表示方向を撮像する撮像部（後述する）により生成される。そして、情報処理装置１００は、外部撮像装置において座標情報が生成された場合には、外部撮像装置から送信された座標情報を処理に用い、また、撮像部により座標情報が生成された場合には、撮像部が生成した座標情報を処理に用いる。
【００３１】
座標情報としては、例えば画像の左上部分などの特定の位置が原点として表された座標が挙げられる。ここで、外部撮像装置（または撮像部。以下、同様とする。）は、例えば本件出願人が出願した特開２００６−２０２１８１号公報に記載の技術を用いてユーザの視線を検出することによって、座標情報を生成することができる。より具体的には、外部表示装置は、例えば、外部表示装置（または表示部。以下、同様とする。）の表示画面の水平方向に設けられた２つの撮像デバイスの撮像結果に基づいてユーザの視線を検出することによって、座標情報を生成する。また、外部撮像装置は、撮像された画像（以下、「撮像画像」と示す。）からユーザの顔を検出し、撮像画像に基づいて顔の姿勢および眼球の姿勢とをそれぞれ推定してユーザの視線方向を推定することによって、座標情報を生成することも可能である。より具体的には、外部撮像装置は、例えば、ユーザの目、鼻、口、骨格などの特徴点の検出や、顔の輝度分布および構造パターンと類似した領域を検出することによって、顔を検出する。また、外部撮像装置は、検出された顔に対して、例えばＡＡＭ（Active  Appearance  Model）を用いて顔の姿勢を推定し、また、撮像画像から検出した目の部分における黒目の位置関係に基づいて眼球の姿勢を推定する。そして、外部撮像装置は、顔の姿勢の推定結果と眼球の姿勢の推定結果とを総合することによって、ユーザの視線の方向を推定して推定結果に応じた座標情報を生成する。なお、本発明の実施形態に係る座標情報の生成方法は、上記に限られない。例えば、本発明の実施形態に係る外部撮像装置、撮像部は、例えば本件出願人が出願した特開２００９−５９２５７号公報に記載の技術など、任意のＥｙｅＴｒａｃｋｉｎｇ技術を用いて撮像画像からユーザの視線を検出する（または推定する）ことによって、座標情報を生成することができる。
【００３２】
図１は、本発明の実施形態に係る画像の一例および当該画像における画像領域の一例を示す説明図である。図１は、画像領域Ａ、画像領域Ｂ、および画像領域Ｃが含まれる画像を示している。ここで、画像領域Ａおよび画像領域Ｂは、オブジェクトが含まれる画像領域であり、また、画像領域Ｃは、画像における画像領域Ａおよび画像領域Ｂ以外の画像領域、すなわち、オブジェクトが含まれない画像領域である。
【００３３】
本発明の実施形態に係る領域情報は、例えば画像領域Ａ、画像領域Ｂなどのように、オブジェクトが含まれる画像領域を示す情報であり、画像領域が図１に示すような矩形の領域である場合には、領域情報は、例えば、左上の座標と右下の座標とを示す。なお、本発明の実施形態に係る画像領域は、例えば図１に示すような矩形の領域に限られない。例えば、本発明の実施形態に係る画像領域は、円形や楕円形の領域であってもよい。上記の場合には、本発明の実施形態に係る領域情報は、例えば、画像領域の中心の座標と、短径および長径の長さ（短径＝長径のときは、円となる。）とを示す。
【００３４】
情報処理装置１００は、例えば画像領域Ａ、画像領域Ｂなどのようにオブジェクトが含まれる画像領域を示す領域情報を用いることによって、例えば画像領域Ｃのようにオブジェクトが含まれない画像領域を一意に特定することが可能である。なお、本発明の実施形態に係る領域情報は、オブジェクトが含まれる画像領域を示す情報に限られず、例えば、画像領域Ｃのようにオブジェクトが含まれない画像領域を示す情報であってもよいことは、言うまでもない。
【００３５】
また、本発明の実施形態に係るオブジェクト情報は、画像に含まれるオブジェクトを示すデータであり、例えば領域情報を含む。また、オブジェクト情報は、例えば、オブジェクトを特定する情報（例えば、オブジェクトの名称や種別などを示す情報）や、オブジェクトに関する情報（例えば、オブジェクトの関連情報など。以下、「補助情報」という。）をさらに含んでいてもよい。なお、オブジェクト情報に含まれる情報は、上記に限られない。例えば、オブジェクト情報には、オブジェクトに対して設定された視聴ポイントを示す情報が含まれていてもよい。情報処理装置１００は、例えば、ネットワークを介して（または直接的に）接続されたサーバ（以下、「サーバ２００」と示す場合がある。）に、上記視聴ポイントを示す情報を送信する（後述する判別されたオブジェクトに対応した処理の一例）。情報処理装置１００から送信された視聴ポイントを示す情報が示す視聴ポイントは、サーバ２００において、例えばオブジェクトごとの視聴率の算出などに用いられる。
【００３６】
情報処理装置１００は、例えば、外部装置（例えば表示画面に表示されている画像の作成者（以下、「コンテンツ提供者」と示す場合がある。）が所有する装置など）において生成された、画像に対応するメタデータを取得し、取得したメタデータを用いてオブジェクト情報を生成する。ここで、情報処理装置１００は、例えば、画像を表示画面に表示させる外部表示装置や、ネットワークを介して（または直接的に）接続された外部装置（例えば後述するサーバ２００など）からメタデータを取得する。なお、情報処理装置１００が、表示画面に画像を表示させるために、例えばＢｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃなどの記録媒体に記録された、画像を示すコンテンツデータを再生する場合には、情報処理装置１００は、当該記録媒体からメタデータを取得してもよい。
【００３７】
上記メタデータは例えばコンテンツ提供者によって生成されるので、上記メタデータには、領域情報の他、オブジェクトを特定する情報や補助情報などが含まれうる。よって、情報処理装置１００は、取得したメタデータを用いることによって、例えば、少なくとも領域情報を含むオブジェクト情報を生成することができる。
【００３８】
なお、情報処理装置１００におけるオブジェクト情報の生成方法は、上記に限られない。例えば、情報処理装置１００は、表示画面に表示されている画像を処理して当該画像に含まれる画像を検出し、検出結果に基づいて画像領域を設定することによってオブジェクト情報を生成することもできる。ここで、本発明の実施形態に係る情報処理装置１００が「表示画面に表示されている画像を処理する」とは、例えば、表示画面に表示されている画像に対応する画像データまたは画像信号を処理することをいう。また、情報処理装置１００が処理する画像は、例えば、外部表示装置により再生されて情報処理装置１００が受信したものであってもよいし、情報処理装置１００が画像を示すコンテンツデータを再生したものであってもよい。
【００３９】
より具体的には、情報処理装置１００は、例えば、ローカルバイナリパターン（Local  Binary  Pattern）を用いて画像に含まれる検出対象の物体の輪郭を示す特徴量を取得し、画像内のある領域においてローカルバイナリパターンに係る特徴量のヒストグラムを算出して統計的にオブジェクトを検出する。そして、情報処理装置１００は、検出されたオブジェクトを含む画像領域を設定して、領域情報を含むオブジェクト情報を生成する。なお、本発明の実施形態に係るオブジェクト情報の生成方法が、上記に限られないことは、言うまでもない。
【００４０】
上記のように、情報処理装置１００は、座標情報とオブジェクト情報とに基づいて、ユーザの視線が向けられているオブジェクトを判別する。ここで、表示画面に表示された画像をみるユーザが視線を向けている画像領域にオブジェクトが含まれている場合には、ユーザが当該オブジェクトに注目している可能性が高い。一方、表示画面に表示された画像をみるユーザが視線を向けている画像領域にオブジェクトが含まれていない場合には、画像内にユーザが注目しているオブジェクトが存在していない可能性が高いといえる。したがって、情報処理装置１００がユーザの視線が向けられているオブジェクトを判別することによって、ユーザが画像において注目するオブジェクトに対して、当該オブジェクトに対応した処理（後述する）を行うことができる。
【００４１】
［本発明の実施形態に係る処理アプローチに係る処理の具体例］
次に、上述した本発明の実施形態に係る処理アプローチに係る処理についてより具体的に説明する。情報処理装置１００は、例えば下記の（１）の処理〜（３）の処理を行うことによって、上述した本発明の実施形態に係る処理アプローチを実現する。
【００４２】
（１）オブジェクト情報の生成処理
情報処理装置１００は、例えば、画像に対応付けられたメタデータを用いること、および／または、表示画面に表示されている画像を処理することによって、画像に含まれるオブジェクトを検出する。そして、情報処理装置１００は、検出したオブジェクトごとにオブジェクト情報を生成する。
【００４３】
（２）オブジェクト識別処理
情報処理装置１００は、外部撮像装置または撮像部が生成した座標情報と、上記（１）の処理（オブジェクト情報の生成処理）において生成したオブジェクト情報とに基づいて、ユーザの視線が向けられているオブジェクトを判別する。
【００４４】
図２は、本発明の実施形態に係る情報処理装置１００における、ユーザの視線が向けられているオブジェクトの判別方法の一例を説明するための説明図である。ここで、図２は、図１と同様の画像を示しており、図２に示す画像には画像領域Ａ〜Ｃが含まれる。
【００４５】
情報処理装置１００は、例えば、座標情報が示す座標（図２に示すＰ）がどの画像領域に存在するかによって、ユーザの視線が向けられているオブジェクトを判別する。例えば、図２の例では、座標情報が示す座標が画像領域Ｂ（オブジェクト情報の領域情報が示す画像領域）内に存在するので、情報処理装置１００は、画像領域Ｂに対してユーザの視線が向けられていることを把握することが可能である。よって、情報処理装置１００は、図２の例では、画像領域Ｂに含まれているオブジェクトをユーザの視線が向けられているオブジェクトとして判別することができる。
【００４６】
ここで、情報処理装置１００におけるオブジェクトの判別とは、例えば、ユーザの視線が向けられているオブジェクトがどのようなオブジェクトであるかを判別することに限られない。例えば、本発明の実施形態に係る情報処理装置１００におけるオブジェクトの判別とは、ユーザの視線が向けられているオブジェクトを含む画像領域を判別することであってもよい。より具体的には、情報処理装置１００は、例えば、オブジェクト情報に含まれる領域情報によってユーザの視線が向けられているオブジェクトを含む画像領域を判別し、また、オブジェクトを特定する情報がオブジェクト情報に含まれる場合には、ユーザの視線が向けられているオブジェクトがどのようなオブジェクトであるかをさらに判別する。
【００４７】
なお、図２に示す例では、座標情報が示す座標（図２に示すＰ）が一つである場合、すなわち、外部撮像装置または撮像部が一人のユーザの視線に対応する座標情報を生成した場合を示しているが、本発明の実施形態に係る情報処理装置１００が処理に用いる座標情報が示す座標は、一つに限られない。例えば、外部撮像装置または撮像部が複数のユーザの視線に対応する座標情報を生成した場合、すなわち、座標情報が示す座標が複数である場合には、情報処理装置１００は、座標情報が示す座標がどの画像領域に存在するかを当該座標ごとに特定することによって、ユーザの視線が向けられているオブジェクトを座標情報が示す座標ごとに判別する。以下では、座標情報が示す座標が一つである場合を主に例に挙げて、本発明の実施形態に係る処理アプローチに係る処理について説明する。
【００４８】
また、情報処理装置１００は、例えば、所定の時間の間、座標情報が示す座標が同一のオブジェクトに対応する画像領域内に存在する場合に、当該画像領域に対応するオブジェクト（または当該画像領域）を、ユーザの視線が向けられているオブジェクトとして判別する。ここで、上記所定の時間は、情報処理装置１００の製造時などにおいて予め規定された時間であってもよいし、情報処理装置１００のユーザなどによって適宜設定することが可能であってもよい。
【００４９】
図３、図４は、本発明の実施形態に係る情報処理装置１００における、オブジェクト識別処理の一例を説明するための説明図である。ここで、図３、図４は、表示画面に表示される画像が動画像（または静止画像の集合体）である場合を示している。なお、表示画面に表示される画像が静止画像であったとしても、動画像である場合と同様である。
【００５０】
図３に示す例では、図３のＩに示す画像および図３のＩＩに示す画像の双方で、座標情報が示す座標（図３に示すＰ）が画像領域Ｂ内に存在している。よって、情報処理装置１００は、画像領域Ｂに含まれているオブジェクト（または、画像領域Ｂ）を、ユーザの視線が向けられているオブジェクトとして判別する。
【００５１】
それに対して、図４に示す例では、図４のＩに示す画像、図４のＩＩに示す画像、および図４のＩＩＩに示す画像それぞれにおいて、座標情報が示す座標（図４に示すＰ）が同一の画像領域内に存在していない。つまり、図４に示す例では、ユーザの視線は特定の画像領域内に留まっておらず、ユーザが特定のオブジェクトに注目している可能性は低いといえる。よって、情報処理装置１００は、画像に含まれるいずれのオブジェクト（または、画像領域）も、ユーザの視線が向けられているオブジェクトとして判別しない。
【００５２】
上記のように、所定の時間の間座標情報が示す座標が同一の画像領域内に存在する場合にユーザの視線が向けられているオブジェクトとして判別することによって、情報処理装置１００は、ユーザが真に注目しているオブジェクト（または、画像領域）を、ユーザの視線が向けられているオブジェクトとして判別することができる。
【００５３】
なお、情報処理装置１００における処理は、所定の時間の間座標情報が示す座標が同一のオブジェクトに対応する画像領域内に存在する場合にユーザの視線が向けられているオブジェクトとして判別することに限られない。例えば、情報処理装置１００は、座標情報が受信されるごとに座標情報が示す座標がどの画像領域内に存在するかを判定し、座標情報が示す座標が領域情報が示す画像領域内に存在する場合に、ユーザの視線が向けられているオブジェクトを判別してもよい。また、情報処理装置１００は、上記座標情報が示す座標がどの画像領域内に存在するかの判定結果を、ユーザの視線の履歴を示す情報として記録することも可能である。
【００５４】
（３）実行処理
情報処理装置１００は、上記（２）の処理（オブジェクト識別処理）における判別結果に基づいて、判別されたオブジェクトに対応した処理を選択的に行う。より具体的には、情報処理装置１００は、上記（２）の処理（オブジェクト識別処理）によってユーザの視線が向けられているオブジェクトが判別された場合に、判別されたオブジェクトに対応した処理を行い、判別されなかった場合には、当該処理を行わない。
【００５５】
［判別されたオブジェクトに対応した処理の具体例］
ここで、本発明の実施形態に係る情報処理装置１００が実行する、判別されたオブジェクトに対応した処理について説明する。
【００５６】
（Ａ）画像処理
情報処理装置１００は、判別されたオブジェクトに対応した処理として、例えば、上記（２）の処理（オブジェクト識別処理）において判別されたオブジェクトに対応する画像領域に対して画像処理を行う。ここで、情報処理装置１００が行う画像処理としては、例えば、判別されたオブジェクトに対応する画像領域を拡大させる拡大処理や、平滑化処理や超解像処理などによって当該画像領域の画質を向上させる高画質化処理、あるいは、これらの処理の組合せた処理が挙げられる。なお、本発明の実施形態に係る画像処理は、拡大処理および／または高画質化処理に限られない。例えば、情報処理装置１００は、判別されたオブジェクトに対応する画像領域の画像を２Ｄ−３Ｄ変換する変換処理を行ってもよい。また、情報処理装置１００は、例えば本件出願人が出願した特開２００７−２５６９６１号公報に記載の技術などを用いて画像信号を調整して、画像における判別されたオブジェクトに対応する画像領域以外の画像領域を、別されたオブジェクトに対応する画像領域よりも相対的に目立たないようにさせることもできる。
【００５７】
図５は、本発明の実施形態に係る情報処理装置１００における、判別されたオブジェクトに対応した処理の一例を説明するための説明図である。ここで、図５は、上記（２）の処理（オブジェクト識別処理）において図２に示す画像領域Ｂが、ユーザの視線が向けられているオブジェクトを含む画像領域として判別された場合における例を示している。
【００５８】
情報処理装置１００は、図５に示す画像領域Ｂに対して上記のような画像処理を行い、他の画像領域に対しては当該画像処理を行わない。情報処理装置１００が画像領域Ｂに対してのみ画像処理を行うことよって、画像全体に対して処理を行う場合よりも情報処理装置１００の負荷を低減させることが可能となる。また、上述したように、ユーザが視線を向けている画像領域にオブジェクトが含まれている場合、ユーザが当該オブジェクトに注目している可能性が高い。そのため、情報処理装置１００が画像領域Ｂに対して画像処理を行えば、画像処理の効果を十分にユーザに対して提供することが可能である。
【００５９】
したがって、情報処理装置１００が、判別されたオブジェクトに対応する画像領域に対して上記のような画像処理を行うことによって、画像全体に対して処理を行う場合よりも情報処理装置１００の負荷を低減させながら、ユーザが注目するオブジェクトの強調や、当該オブジェクトの高画質化などを図ることが可能となる。
【００６０】
（Ｂ）表示処理
情報処理装置１００は、判別されたオブジェクトに対応した処理として、例えば、上記（２）の処理（オブジェクト識別処理）において判別されたオブジェクトに対応する画像領域を基準とした表示処理を行う。
【００６１】
図６は、本発明の実施形態に係る情報処理装置１００における、判別されたオブジェクトに対応した処理の一例を説明するための説明図である。ここで、図６は、図５と同様に、上記（２）の処理（オブジェクト識別処理）において図２に示す画像領域Ｂが、ユーザの視線が向けられているオブジェクトを含む画像領域として判別された場合における例を示している。また、図６は、後述する２つの表示処理が行われている例を示している。なお、情報処理装置１００が、１、または２以上の表示処理を行うことが可能であることは、言うまでもない。
【００６２】
情報処理装置１００は、例えば、上記（２）の処理（オブジェクト識別処理）において判別されたオブジェクトに対応する補助情報が示す内容を、判別されたオブジェクトに対応する画像領域の近傍に表示させる（図６のＥ）。ここで、情報処理装置１００が表示させる補助情報が示す内容としては、例えば、オブジェクト情報に含まれている補助情報が示す内容、または、記憶部（後述する）などに予め記憶されている補助情報が示す内容が挙げられる。また、本発明の実施形態に係る「補助情報が示す内容を判別されたオブジェクトに対応する画像領域の近傍に表示」とは、例えば、判別されたオブジェクトに対応する画像領域に接するように補助情報が示す内容を表示することと、当該画像領域に近接する位置に補助情報が示す内容を表示することとを含む。なお、図６では、情報処理装置１００が、ポップアップ形式で補助情報が示す内容を表示させている例（図６のＥ）を示しているが、本発明の実施形態に係る補助情報が示す内容の表示方法が、上記に限られないことは、言うまでもない。
【００６３】
上述したように、ユーザが視線を向けている画像領域にオブジェクトが含まれている場合、ユーザが当該オブジェクトに注目している可能性が高い。したがって、判別されたオブジェクトに関連する補助情報の内容が、判別されたオブジェクトに対応する画像領域の近傍に表示されることによって、ユーザは、視線を大きく動かすことなく、注目しているオブジェクトに関連する情報を視覚を通じて得ることが可能となる。
【００６４】
なお、本発明の実施形態に係る情報処理装置１００における表示処理は、上記に限られない。例えば、情報処理装置１００は、判別されたオブジェクトに対応する画像領域には、表示画面に表示させている画像と異なる他の画像（例えば図６のＦ）、および／または、当該画像と関連しない情報が示す内容を、重畳させて表示させなくてもよい。ここで、上記他の画像としては、例えば、ＰＩＰ（Picture  In  Picture）やＰＯＰ（Picture  On  Picture）などで表示されている画像などが挙げられる。また、上記画像と関連しない情報としては、例えば、緊急速報の情報や、広告を示す情報などが挙げられる。
【００６５】
上述したようにユーザが視線を向けている画像領域にオブジェクトが含まれている場合、ユーザが当該オブジェクトに注目している可能性が高く、また、他の画像領域は、ユーザが注目していない画像領域であるといえる。したがって、上記他の画像および／または上記画像と関連しない情報を、判別されたオブジェクトに対応する画像領域に重畳させないことによって、ユーザが注目しているオブジェクト（または画像領域）を侵すことなくこれらの画像や情報を表示画面に表示させることが可能となる。
【００６６】
（Ｃ）注目オブジェクト情報の記録処理
情報処理装置１００は、判別されたオブジェクトに対応した処理として、例えば、上記（２）の処理（オブジェクト識別処理）において判別されたオブジェクトを示す注目オブジェクト情報を、記憶部（後述する）などに記録する。ここで、情報処理装置１００は、例えば上記（１）の処理（オブジェクト情報の生成処理）において生成したオブジェクト情報のうち、上記（２）の処理（オブジェクト識別処理）において判別されたオブジェクトに対応するオブジェクト情報を注目オブジェクト情報として記録する。情報処理装置１００は、注目オブジェクト情報を、例えば、複数の注目オブジェクト情報を記憶可能な注目オブジェクトデータベースに記録してもよいし、また、注目オブジェクト情報ごとの注目オブジェクトファイルとして記録してもよい。なお、本発明の実施形態に係る注目オブジェクト情報は、上記に限られない。例えば、情報処理装置１００は、記録時間（すなわちユーザが注目していた時間に対応する）や、画像を特定する情報（例えば、ファイル名や、何フレーム目の画像であるかを示す情報など）などの他の情報を上記オブジェクト情報に対して付加した情報を、注目オブジェクト情報として記録してもよい。
【００６７】
上述したように、ユーザが視線を向けている画像領域にオブジェクトが含まれている場合、ユーザが当該オブジェクトに注目している可能性が高い。したがって、記憶された注目オブジェクト情報を解析することによって、ユーザ嗜好の把握を行うことが可能となる。また、情報処理装置１００は、例えば外部装置または自装置において再生された画像に、記憶された注目オブジェクト情報が示すオブジェクトと同一または類似するオブジェクト（対応するオブジェクト）が含まれる画像領域がある場合には、例えば当該画像領域に対して高画質化処理などの画像処理を施すことも可能である。さらに、情報処理装置１００は、上記対応するオブジェクトが含まれる画像領域がある場合には、上記（Ｂ）の処理（表示処理）と同様に、記憶された注目オブジェクト情報が示すオブジェクトに対応する補助情報が示す内容を、当該画像領域の近傍に表示させてもよい。
【００６８】
（Ｄ）サーバ２００（外部装置の一例）との連携処理
上記（Ａ）〜（Ｃ）では、情報処理装置１００が、判別されたオブジェクトに対応した処理を、基本的にスタンドアロンで行う例を示した。しかしながら、本発明の実施形態に係る情報処理装置１００における判別されたオブジェクトに対応した処理は、上記に限られず、サーバ２００などの外部装置と連携して処理を行うことも可能である。
【００６９】
（Ｄ−１）第１の例
情報処理装置１００は、判別されたオブジェクトに対応した処理として、例えば、上記（Ｃ）の処理（注目オブジェクト情報の記録処理）と同様に、注目オブジェクト情報を生成し、生成した注目オブジェクト情報をサーバ２００などの外部装置へと送信する。
【００７０】
情報処理装置１００が注目オブジェクト情報をサーバ２００（外部装置の一例。以下、同様とする。）へ送信することによって、サーバ２００は、注目オブジェクト情報を用いてユーザがどのオブジェクトに注目していたのかを画像ごとに解析することが可能となる。また、サーバ２００が、ネットワークを介して（または直接的に）接続された複数の情報処理装置１００それぞれから注目オブジェクト情報を取得することによって、一のユーザが注目していたオブジェクトだけでなく、複数のユーザが注目していたオブジェクトを解析することが可能となる。よって、情報処理装置１００が注目オブジェクト情報をサーバ２００へ送信することによって、サーバ２００は、例えば下記の（ａ）〜（ｃ）のようなことを実現することができる。なお、情報処理装置１００が注目オブジェクト情報をサーバ２００へ送信することによって実現される処理が、下記の（ａ）〜（ｃ）に限られないことは、言うまでもない。
【００７１】
（ａ）情報処理装置１００のユーザの嗜好分析
上記（ａ）によって、サーバ２００は、例えば、ユーザがどのようなオブジェクトに注目しているかを分析ことによって、ユーザの嗜好を把握することが可能となる。よって、上記分析によって、サーバ２００は、例えば、ユーザに対して嗜好に合致した情報を提供する（レコメンデーションの一例）ことができる。
【００７２】
（ｂ）注目オブジェクト情報に含まれる視聴ポイントを示す情報を用いた、オブジェクトごとの注視率（視聴率）の算出
上記（ｂ）によって算出される注視率はどの画像のどのオブジェクトがユーザに注目されていたかの指標となるので、サーバ２００は、例えばどのコンテンツが視聴されていたかを示す従来の視聴率よりも、より高精度の指標を得ることができる。なお、上記注目オブジェクト情報は、例えばコンテンツ提供者の操作に基づいて作成されたメタデータに基づくオブジェクト情報に対応するものであるので、上記注目オブジェクト情報に含まれる視聴ポイントは、コンテンツ提供者側でオブジェクトごとに重み付けをすることも可能である。
【００７３】
（ｃ）コンテンツを提供するコンテンツ提供システム（例えばテレビジョン放送システム）などの外部システムに対する、算出された注視率の情報の提供
上記（ｃ）によって、外部システムは、例えば上記注視率が高いオブジェクトがより画像に含まれるようなコンテンツ（画像、または、画像および音声（音楽も含む。以下、同様とする。））を提供することが可能となる。したがって、上記（ｃ）によって、例えば、ライブ中継などにおいてユーザの注視率の高いオブジェクトに対して自動的に（または手動で）カメラを向けることによる、よりインタラクティブな映像配信サービスを実現することができる。なお、サーバ２００が、上記コンテンツ提供システムなどの外部システムの機能を有していてもよいことは、言うまでもない。
【００７４】
（Ｄ−１）第２の例
情報処理装置１００は、サーバ２００などの外部装置から補助情報を取得し、取得した補助情報の内容を表示させる。より具体的には、情報処理装置１００は、上記（Ｃ）の処理（（Ｃ）注目オブジェクト情報の記録処理）と同様に、注目オブジェクト情報を記憶する。また、情報処理装置１００は、例えば外部装置または自装置において再生された画像に、記憶された注目オブジェクト情報が示すオブジェクトと同一または類似するオブジェクト（対応するオブジェクト）が含まれる画像領域がある場合には、当該注目オブジェクト情報に対応する補助情報を、サーバ２００などから取得する。そして、情報処理装置１００は、上記（Ｂ）の処理（表示処理）と同様に、取得した補助情報が示す内容を、再生された画像における上記画像領域の近傍に表示させる。
【００７５】
ここで、情報処理装置１００に記憶された補助情報よりもサーバ２００などの外部装置に記憶された補助情報の方が、より情報量が多くまたより最新の情報である可能性が高い。よって、上記のように、サーバ２００などの外部装置から取得した補助情報の内容を表示させることによって、ユーザに対して、ユーザが注目するオブジェクトに関するよりよい情報を提供することが可能となる。
【００７６】
情報処理装置１００は、例えば上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）を行うことによって、情報処理装置１００がユーザの視線が向けられているオブジェクトを判別して、ユーザが画像において注目するオブジェクトに対して当該オブジェクトに対応した処理を行うことができる。よって、例えば上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）が行われることによって、上述した本発明の実施形態に係る処理アプローチが実現される。
【００７７】
（本発明の実施形態に係る情報処理装置、サーバ）
次に、上述した本発明の実施形態に係る処理アプローチに係る処理を行うことが可能な本発明の実施形態に係る情報処理装置１００の構成の一例と、情報処理装置１００と連携して処理を行うことが可能なサーバ２００の構成の一例とについて説明する。
【００７８】
なお、以下では、情報処理装置１００とサーバ２００とがネットワークで接続された情報処理システム（以下、「情報処理システム１０００」という。）を例に挙げて、情報処理装置１００とサーバ２００の構成の一例について説明するが、本発明の実施形態に係る情報処理装置１００は、情報処理システム１０００を構成する装置の一つであることに限られない。例えば、本発明の実施形態に係る情報処理装置１００は、上記（３）の処理（実行処理）における上記（Ａ）〜（Ｃ）に示すように、基本的にスタンドアロンで判別されたオブジェクトに対応した処理を行うことが可能である。
【００７９】
（Ｉ）情報処理装置１００の構成
［第１の実施形態］
図７は、本発明の第１の実施形態に係る情報処理装置１００の構成の一例を示すブロック図である。ここで、図７では、ネットワーク３００により接続されたサーバ２００を併せて示している。つまり、図７に示す構成は、情報処理装置１００とサーバ２００とを有する情報処理システム１０００と捉えることができる。ネットワーク３００としては、例えば、ＬＡＮ（Local  Area  Network）やＷＡＮ（Wide  Area  Network）などの有線ネットワーク、基地局を介した無線ＷＡＮ（ＷＷＡＮ；Wireless  Wide  Area  Network）や無線ＭＡＮ（ＷＭＡＮ；Wireless  Metropolitan  Area  Network）などの無線ネットワーク、あるいは、ＴＣＰ／ＩＰ（Transmission  Control  Protocol/Internet  Protocol）などの通信プロトコルを用いたインターネットなどが挙げられる。
【００８０】
また、図７では、表示画面への画像（静止画像または動画像）の表示と、表示画面の表示方向を撮像することによる座標情報の生成とを行う表示システム４００を併せて示している。図７では、表示システム４００が、表示を行う表示装置５００と、撮像を行う撮像装置６００とからなる例を示しているが、本発明の実施形態に係る表示システム４００の構成は、上記に限られない。例えば、表示システム４００は、表示装置５００と撮像装置６００とが一体となった装置（例えば撮像機能を有する表示装置）であってもよい。
【００８１】
図７を参照すると、情報処理装置１００は、例えば、記憶部１０２と、入力部１０４と、通信部１０６と、制御部１０８とを備える。
【００８２】
また、情報処理装置１００は、例えば、ＲＯＭ（Read  Only  Memory；図示せず）や、ＲＡＭ（Random  Access  Memory；図示せず）などを備えてもよい。情報処理装置１００は、例えば、データの伝送路としてのバス（bus）により各構成要素間を接続する。ここで、ＲＯＭ（図示せず）は、例えば制御部１０８が使用するプログラムや演算パラメータなどの処理用データを記憶する。ＲＡＭ（図示せず）は、例えば制御部１０８などにより実行されるプログラムやデータなどを一時的に記憶する。
【００８３】
〔情報処理装置１００のハードウェア構成例〕
図８は、本発明の実施形態に係る情報処理装置１００のハードウェア構成の一例を示す説明図である。図８を参照すると、情報処理装置１００は、例えば、ＭＰＵ１５０と、ＲＯＭ１５２と、ＲＡＭ１５４と、記録媒体１５６と、入出力インタフェース１５８と、操作入力デバイス１６０と、表示デバイス１６２と、通信インタフェース１６４とを備える。また、情報処理装置１００は、例えば、データの伝送路としてのバス１６６で各構成要素間を接続する。
【００８４】
ＭＰＵ１５０は、例えば、ＭＰＵ（Micro  Processing  Unit）や、制御機能を実現するための複数の回路、画像処理などの各種機能を実現するための複数の回路が集積された集積回路などで構成され、情報処理装置１００全体を制御する制御部１０８として機能する。また、ＭＰＵ１５０は、情報処理装置１００において、検出部１２０、判別部１２２、および処理部１２４としての役目を果たす。また、ＭＰＵ１５０は、後述する再生処理部としての役目を果たしてもよい。
【００８５】
ＲＯＭ１５２は、ＭＰＵ１５０が使用するプログラムや演算パラメータなどの制御用データなどを記憶する。ＲＡＭ１５４は、例えば、ＭＰＵ１５０により実行されるプログラムなどを一時的に記憶する。
【００８６】
記録媒体１５６は、記憶部１０２として機能し、例えば、補助情報や、注目オブジェクト情報、コンテンツデータなどの様々なデータや、アプリケーションなどを記憶する。ここで、記録媒体１５６としては、例えば、ハードディスクなどの磁気記録媒体や、ＥＥＰＲＯＭ（Electrically  Erasable  and  Programmable  Read  Only  Memory）、フラッシュメモリ（flash  memory）、ＭＲＡＭ（Magnetoresistive  Random  Access  Memory）、ＦｅＲＡＭ（Ferroelectric  Random  Access  Memory）、ＰＲＡＭ（Phase  change  Random  Access  Memory）などの不揮発性メモリ（nonvolatile  memory）が挙げられる。また、情報処理装置１００は、情報処理装置１００から着脱可能な記録媒体１５６を備えることもできる。
【００８７】
入出力インタフェース１５８は、例えば、操作入力デバイス１６０や、表示デバイス１６２を接続する。また、入出力インタフェース１５８は、入力部１０４としての役目を果たすこともできる。操作入力デバイス１６０は、操作部（図示せず）として機能し、また、表示デバイス１６２は、表示部（後述する）として機能する。ここで、入出力インタフェース１５８としては、例えば、ＵＳＢ（Universal  Serial  Bus）端子や、ＤＶＩ（Digital  Visual  Interface）端子、ＨＤＭＩ（High-Definition  Multimedia  Interface）端子、各種処理回路などが挙げられる。また、操作入力デバイス１６０は、例えば、情報処理装置１００上に備えられ、情報処理装置１００の内部で入出力インタフェース１５８と接続される。操作入力デバイス１６０としては、例えば、ボタン、方向キー、ジョグダイヤルなどの回転型セレクター、あるいは、これらの組み合わせなどが挙げられる。また、表示デバイス１６２は、例えば、情報処理装置１００上に備えられ、情報処理装置１００の内部で入出力インタフェース１５８と接続される。表示デバイス１６２としては、例えば、液晶ディスプレイ（Liquid  Crystal  Display；ＬＣＤ）や有機ＥＬディスプレイ（organic  ElectroLuminescence  display。または、ＯＬＥＤディスプレイ（Organic  Light  Emitting  Diode  display）ともよばれる。）などが挙げられる。なお、入出力インタフェース１５８が、情報処理装置１００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）や、表示デバイス（例えば、表示装置３００などの外部表示デバイス）、撮像デバイス（例えば、撮像装置６００など）などの外部デバイスと接続することもできることは、言うまでもない。また、表示デバイス１６２は、例えばタッチスクリーンなど、表示とユーザ操作とが可能なデバイスであってもよい。
【００８８】
通信インタフェース１６４は、情報処理装置１００が備える通信手段であり、ネットワーク３００を介して（あるいは、直接的に）、例えばサーバ２００などの外部装置と無線／有線で通信を行うための通信部１０６として機能する。ここで、通信インタフェース１６４としては、例えば、通信アンテナおよびＲＦ回路（無線通信）や、ＩＥＥＥ８０２．１５．１ポートおよび送受信回路（無線通信）、ＩＥＥＥ８０２．１１ｂポートおよび送受信回路（無線通信）、あるいはＬＡＮ端子および送受信回路（有線通信）などが挙げられる。
【００８９】
情報処理装置１００は、例えば図８に示す構成によって、本発明の実施形態に係る処理アプローチに係る処理を行う。なお、本発明の実施形態に係る情報処理装置１００のハードウェア構成は、図８に示す構成に限られない。
【００９０】
例えば、情報処理装置１００は、撮像部（後述する）の役目を果たす、レンズ／撮像素子と、信号処理回路とから構成される撮像デバイスを備えていてもよい。上記の場合には、情報処理装置１００は、自装置が生成した座標情報を用いて処理を行うことができる。ここで、レンズ／撮像素子は、例えば、光学系のレンズと、ＣＣＤ（Charge  Coupled  Device）やＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）などの撮像素子を複数用いたイメージセンサとで構成される。信号処理回路は、例えば、ＡＧＣ（Automatic  Gain  Control）回路やＡＤＣ（Analog  to  Digital  Converter）を備え、撮像素子により生成されたアナログ信号をデジタル信号（画像データ）に変換する。また、信号処理回路は、例えばＭＰＵを備え、上記画像データを用いて上述した座標情報の生成に係る処理を行って座標情報を生成する。
【００９１】
また、情報処理装置１００は、ＤＳＰ（Digital  Signal  Processor）と、増幅器（アンプ）やスピーカなどから構成される音声出力デバイスとを備えてもよい。また、情報処理装置１００は、外部メモリを収納し当該外部メモリに対するデータの読み書きを可能とするスロットや、光ディスクからデータの読み出しが可能な光ディスクドライブなどを備えていてもよい。また、情報処理装置１００は、例えば、図８に示す操作デバイス１６０や表示デバイス１６２、通信インタフェースを備えない構成であってもよい。
【００９２】
再度図７を参照して、本発明の第１の実施形態に係る情報処理装置１００の構成について説明する。記憶部１０２は、情報処理装置１００が備える記憶手段である。ここで、記憶部１０２としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリなどが挙げられる。
【００９３】
また、記憶部１０２は、例えば、補助情報や、注目オブジェクト情報、コンテンツデータなどの様々なデータや、アプリケーションなどを記憶する。図７では、補助情報１３０と、注目オブジェクト情報１３２とが記憶部１０２に記憶されている例を示している。
【００９４】
入力部１０４は、例えば、表示画面に表示されている画像に対応する画像データ（表示装置５００が再生処理を行う場合）や、当該画像に対応するメタデータ、撮像装置６００が生成した座標情報を受信する。そして、入力部１０４は、受信した（入力された）各種データを制御部１０８へ伝達する。ここで、入力部１０４としては、例えば、ＵＳＢ端子や、ＤＶＩ端子、ＨＤＭＩ端子、各種処理回路などが挙げられるが、入力部１０４は、上記に限られない。例えば、入力部１０４は、外部装置から上記各種データを有線または無線で受信することが可能な任意の構成をとることができる。
【００９５】
また、情報処理装置１００が再生した画像データが示す画像を表示装置５００の表示画面に表示させる場合には、情報処理装置１００は、例えば入力部１０４を介して表示装置５００へ画像データを送信する。つまり、入力部１０４は、表示装置５００などの外部装置（または外部システム）との間においてデータの送受信を行うための接続部としての役目を果たしてもよい。なお、図７では、入力部１０４と通信部１０６とを備えている構成を示しているが、情報処理装置１００の構成は、上記に限られない。例えば、本発明の実施形態に係る情報処理装置１００は、入力部１０４と後述する通信部１０６とを１つの部として備えることも可能である。
【００９６】
通信部１０６は、情報処理装置１００が備える通信手段であり、ネットワーク３００を介して（あるいは、直接的に）、サーバ２００などの外部装置と無線／有線で通信を行う。また、通信部１０６は、例えば制御部１０８により通信が制御される。ここで、通信部１０６としては、例えば、通信アンテナおよびＲＦ回路や、ＬＡＮ端子および送受信回路などが挙げられるが、通信部１０６は、上記に限られない。例えば、通信部１０６は、ネットワーク３００を介して外部装置と通信可能な任意の構成をとることができる。
【００９７】
通信部１０６を備えることによって、情報処理装置１００は、上述した（３）の処理（実行処理）において、サーバ２００と連携して処理を行うことが可能となる。
【００９８】
制御部１０８は、例えば、ＭＰＵや、制御機能を実現するための複数の回路、画像処理などの各種機能を実現するための複数の回路が集積された集積回路などで構成され、情報処理装置１００全体を制御する役目を果たす。また、制御部１０８は、検出部１２０と、判別部１２２と、処理部１２４とを備え、本発明の実施形態に係る処理アプローチに係る処理を主導的に行う役目を果たす。また、制御部１０８は、サーバ２００などの外部装置との通信を制御する通信制御部（図示せず）を備えていてもよい。
【００９９】
検出部１２０は、上記（１）の処理（オブジェクト情報の生成処理）を主導的に行う役目を果たす。より具体的には、検出部１２０は、例えば、画像に対応付けられたメタデータを用いること、および／または、表示画面に表示されている画像を処理することによって、画像に含まれるオブジェクトを検出する。そして、情報処理装置１００は、検出したオブジェクトごとにオブジェクト情報を生成する。
【０１００】
判別部１２２は、上記（２）の処理（オブジェクト識別処理）を主導的に行う役目を果たす。より具体的には、判別部１２２は、例えば、入力部１０４から伝達される表示装置５００（外部撮像装置）が生成した座標情報と、検出部１２０が生成したオブジェクト情報とに基づいて、ユーザの視線が向けられているオブジェクト（または画像領域）を判別する。
【０１０１】
処理部１２４は、上記（３）の処理（実行処理）を主導的に行う役目を果たす。より具体的には、処理部１２４は、例えば、判別部１２２における判別結果に基づいて、上記（Ａ）〜（Ｄ）に示すような判別されたオブジェクトに対応した処理を選択的に行う。ここで、処理部１２４は、例えば、判別されたオブジェクトに対応した処理として予め規定された処理を行ってもよいし、または、ユーザ操作に基づいて選択された処理を判別されたオブジェクトに対応した処理として行ってもよい。
【０１０２】
制御部１０８は、例えば検出部１２０、判別部１２２、および処理部１２４を備えることによって、処理アプローチに係る上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）を主導的に行うことができる。
【０１０３】
なお、制御部１０８の構成は、図７に示す構成に限られない。例えば、制御部１０８は、画像、または、画像および音声を示すコンテンツデータを再生する再生処理部（後述する再生処理部１２６に対応する。）をさらに備えてもよい。上記の場合、情報処理装置１００は、例えば、表示装置５００の表示画面に再生処理部が再生したコンテンツデータが示す画像を表示させ、当該画像を検出部１２０および判別部１２２が処理することが可能となる。
【０１０４】
第１の実施形態に係る情報処理装置１００は、図７に示す構成によって、処理アプローチに係る上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）を実現することができる。したがって、情報処理装置１００は、例えば図７に示す構成によって、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができる。
【０１０５】
［第２の実施形態］
上記では、第２の実施形態に係る情報処理装置１００として、表示システム４００の表示装置５００（外部表示装置）の表示画面に表示された画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行う構成を示した。しかしながら、本発明の実施形態に係る情報処理装置１００の構成は、外部表示装置の表示画面に表示された画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行う構成に限られない。図９は、本発明の第２の実施形態に係る情報処理装置１００の構成の一例を示すブロック図である。
【０１０６】
図９に示す第２の実施形態に係る情報処理装置１００は、図７に示す第１の実施形態に係る情報処理装置１００と基本的に同様の構成を有するが、図７に示す第１の実施形態に係る情報処理装置１００と比較すると、第２の実施形態に係る情報処理装置１００は、入力部１０４を備えず、また、撮像部１１０と表示部１１２とをさらに備えている。また、図９に示す第２の実施形態に係る情報処理装置１００は、図７に示す第１の実施形態に係る情報処理装置１００と比較すると、制御部１０８が、上記第１の実施形態に係る再生処理部と同様の機能を有する再生処理部１２６を有する。
【０１０７】
撮像部１１０は、情報処理装置１００が備える撮像手段であり、表示部１１２の表示画面に表示された画像におけるユーザの視線を検出して座標情報を生成する。より具体的には、撮像部１１０は、例えば、レンズ／撮像素子と信号処理回路とから構成され、撮像素子により生成されたアナログ信号を信号処理回路によってデジタル信号（画像データ）に変換する。そして、撮像部１１０は、信号処理回路が上記画像データを用いて上述した座標情報の生成に係る処理を行うことによって、座標情報を生成する。また、撮像部１１０は、生成した座標情報を制御部１０８へ伝達する。
【０１０８】
表示部１１２は、情報処理装置１００が備える表示手段であり、表示画面に様々な情報や画像を表示する。表示部１１２の表示画面に表示される画面としては、例えば、再生処理部１２６によって再生された画像（コンテンツ）を表示するコンテンツ表示画面や、所望する動作を情報処理装置１００に対して行わせるための操作画面などが挙げられる。表示部１１２としては、例えば、液晶ディスプレイや有機ＥＬディスプレイなどの表示デバイスが挙げられる。
【０１０９】
第２の実施形態に係る情報処理装置１００は、図９に示す第１の実施形態に係る情報処理装置１００と基本的に同様の構成を有する。よって、第２の実施形態に係る情報処理装置１００は、図９に示す構成によって、第１の実施形態に係る情報処理装置１００と同様に、処理アプローチに係る上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）を実現することができる。したがって、第２の実施形態に係る情報処理装置１００は、例えば図９に示す構成によって、例えば図９に示す構成によって、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができる。
【０１１０】
（ＩＩ）サーバ２００の構成
図１０は、本発明の実施形態に係るサーバ２００の構成の一例を示すブロック図である。図１０を参照すると、サーバ２００は、例えば、記憶部２０２と、通信部２０４と、制御部２０６とを備える。
【０１１１】
また、サーバ２００は、例えば、ＲＯＭ（図示せず）や、ＲＡＭ（図示せず）などを備えてもよい。サーバ２００は、例えば、データの伝送路としてのバスにより各構成要素間を接続する。ここで、ＲＯＭ（図示せず）は、例えば制御部２０６が使用するプログラムや演算パラメータなどの処理用データを記憶する。ＲＡＭ（図示せず）は、例えば制御部２０６などにより実行されるプログラムやデータなどを一時的に記憶する。
【０１１２】
［サーバ２００のハードウェア構成例］
サーバ２００は、例えば図８に示す本発明の実施形態に係る情報処理装置１００のハードウェア構成の一例と同様のハードウェア構成をとることができる。なお、本発明の実施形態に係るサーバ２００のハードウェア構成が、図８に示す構成に限られないことは、言うまでもない。
【０１１３】
記憶部２０２は、サーバ２００が備える記憶手段である。ここで、記憶部２０２としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリなどが挙げられる。また、記憶部２０２は、例えば、補助情報や、注目オブジェクト情報の分析結果に基づくユーザの嗜好に関する情報が記録されたユーザ情報などの様々なデータ（または、データベース。以下「ＤＢ」と示す場合がある。）、コンテンツデータ、アプリケーションなどを記憶する。図１０では、複数の補助情報を記憶することが可能な補助情報ＤＢ２２０と、複数のユーザ情報をユーザごとに記憶することが可能なユーザ情報ＤＢ２２２とが記憶部２０２に記憶されている例を示している。
【０１１４】
通信部２０４は、サーバ２００が備える通信手段であり、ネットワーク３００を介して（あるいは、直接的に）、複数の情報処理装置１００それぞれや、コンテンツ提供システム７００（外部システムの一例）などの外部装置（または外部システム）と無線／有線で通信を行う。また、通信部２０４は、例えば制御部２０６により通信が制御される。通信部２０４を備えることによって、サーバ２００は、例えば、情報処理装置１００それぞれから注目オブジェクト情報を取得することができ、また、情報処理装置１００から送信された補助情報送信要求に応じて、補助情報を当該情報処理装置１００へ送信することができる。つまり、通信部２０４を備えることによって、サーバ２００は、上記（Ｄ）に示すような情報処理装置１００と連携した処理を実現することが可能となる。
【０１１５】
ここで、通信部２０４としては、例えば、通信アンテナおよびＲＦ回路や、ＬＡＮ端子および送受信回路などが挙げられるが、通信部２０４は、上記に限られない。例えば、通信部２０４は、ネットワーク３００を介して外部装置（または外部システム）と通信可能な任意の構成をとることができる。
【０１１６】
制御部２０６は、例えば、ＭＰＵや、制御機能などの各種機能を実現するための複数の回路が集積された集積回路などで構成され、サーバ２００全体を制御する役目を果たす。また、制御部２０６は、上記（Ｄ）に示すような情報処理装置１００と連携した処理に係る処理を行う役目を果たす。
【０１１７】
より具体的には、制御部２０６は、例えば通信部２０４が受信した注目オブジェクト情報に基づいてユーザがどのようなオブジェクトに注目しているかを分析する（上記（ａ）に係る処理）。そして、制御部２０６は、分析結果を記憶部２０２のユーザ情報ＤＢへ記録する。
【０１１８】
また、制御部２０６は、例えば通信部２０４が受信した、複数の情報処理装置１００から送信された注目オブジェクト情報に基づいて、オブジェクトごとの注視率を算出する（上記（ｂ）の処理）。ここで、制御部２０６は、例えば、受信された注目オブジェクト情報の数で、受信された注目オブジェクト情報が示すオブジェクトの数に当該オブジェクトに対応する視聴ポイントを乗算した数をオブジェクトごとに除算することによって、オブジェクトごとに注視率を算出する。なお、本発明の実施形態に係る注視率の算出方法が、上記に限られないことは、言うまでもない。
【０１１９】
そして、制御部２０６は、算出した注視率の情報を、例えば記憶部２０２に記録する。なお、制御部２０６は、通信部２０４を制御し、算出した注視率の情報をコンテンツ提供システム７００に対して送信してもよい（上記（ｃ）の処理）。
【０１２０】
また、制御部２０６は、通信部２０４が、情報処理装置１００から送信された補助情報送信要求を受信した場合には、当該補助情報送信要求が指定するオブジェクトに対応する補助情報を、記憶部２０２に記憶された補助情報ＤＢ２２０から読み出す。そして、制御部２０６は、通信部２０４を制御し、補助情報ＤＢ２２０から読み出した補助情報を、補助情報送信要求を送信した情報処理装置１００に対して送信する。なお、制御部２０６は、補助情報送信要求が指定するオブジェクトに対応する補助情報が記憶部２０２に記憶された補助情報ＤＢ２２０に記録されていない場合には、ネットワーク３００を介して外部装置（例えば、他のサーバなど）と通信を行い、対応する補助情報を当該外部装置から取得してもよい。また、制御部２０６は、補助情報送信要求が指定するオブジェクトに対応する補助情報を送信できない場合には、通信部２０４を制御し、エラーを示す応答を、補助情報送信要求を送信した情報処理装置１００に対して送信する。
【０１２１】
制御部２０６は、例えば上記のような処理を行うことによって、上記（Ｄ）に示すような情報処理装置１００と連携した処理に係る処理を行う。
【０１２２】
サーバ２００は、例えば図１０に示す処理を行うことによって、例えば上記（Ｄ）に示すような情報処理装置１００と連携した処理を実現することができる。なお、本発明の実施形態に係るサーバ２００の構成が、上記に限られないことは、言うまでもない。
【０１２３】
以上のように、本発明の実施形態に係る情報処理装置１００は、処理アプローチに係る処理として例えば上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）を行う。情報処理装置１００は、上記（２）の処理（オブジェクト識別処理）において、座標情報とオブジェクト情報とに基づいて、ユーザの視線が向けられているオブジェクトを判別する。ここで、表示画面に表示された画像をみるユーザが視線を向けている画像領域にオブジェクトが含まれている場合には、ユーザが当該オブジェクトに注目している可能性が高い。一方、表示画面に表示された画像をみるユーザが視線を向けている画像領域にオブジェクトが含まれていない場合には、画像内にユーザが注目しているオブジェクトが存在していない可能性が高いといえる。よって、情報処理装置１００がユーザの視線が向けられているオブジェクトを判別することによって、従来の技術よりもユーザが画像において注目するオブジェクトの判別精度の向上を図ることができる。
【０１２４】
したがって、情報処理装置１００は、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができる。
【０１２５】
また、情報処理装置１００は、判別したオブジェクトに対応した処理として、上記（Ａ）〜（Ｃ）に係る処理（基本的にスタンドアロンの処理）や、上記（Ｄ）に示す処理（サーバ２００などの外部装置と連携した処理）を行う。よって、情報処理装置１００は、上述したような、実行する判別したオブジェクトに対応した処理に応じた効果を奏することが可能である。
【０１２６】
以上、本発明の実施形態として情報処理装置１００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣ（Personal  Computer）やサーバなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置、映像／音楽再生装置（または映像／音楽記録再生装置）、ゲーム機など、様々な機器に適用することができる。
【０１２７】
また、本発明の実施形態としてサーバ２００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣやサーバなどのコンピュータや、複数のサーバなどから構成されるサーバ群（コンピュータ群）など、様々な機器に適用することができる。
【０１２８】
また、本発明の実施形態として表示システム４００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣなどのコンピュータ、テレビ受像機やサイネージ装置などの表示装置、携帯電話などの携帯型通信装置など、表示と撮像とが可能な様々な機器に適用することができる。なお、本発明の実施形態に係る表示システム４００は、表示を行う機器、撮像を行う機器との組合せであってもよい。
【０１２９】
（本発明の実施形態に係るプログラム）
［情報処理装置に係るプログラム］
コンピュータを、本発明の実施形態に係る情報処理装置として機能させるためのプログラム（例えば、上記（１）の処理（オブジェクト情報の生成処理）〜（３）の処理（実行処理）を実現するプログラム）によって、表示画面に表示される画像をみるユーザが当該画像において注目するオブジェクトを判別し、判別した当該オブジェクトに対応した処理を行うことができる。
【０１３０】
［サーバに係るプログラム］
コンピュータを、本発明の実施形態に係るサーバとして機能させるためのプログラム（例えば、本発明の実施形態に係る情報処理装置と連携した処理に係る処理を実行するためのプログラム）によって、本発明の実施形態に係る情報処理装置が判別したユーザが画像において注目するオブジェクトに対応した処理を、本発明の実施形態に係る情報処理装置と連携して行うことが可能な、情報処理システムを実現することができる。
【０１３１】
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【０１３２】
例えば、本発明の実施形態に係る情報処理装置１００は、図７、図９に示す検出部１２０、判別部１２２、および処理部１２４を個別に備える（例えば、それぞれを個別の処理回路で実現する）ことができる。
【０１３３】
また、上記では、コンピュータを、本発明の実施形態に係る情報処理装置、またはサーバとしてそれぞれ機能させるためのプログラム（コンピュータプログラム）が提供されることを示したが、本発明の実施形態は、さらに、上記プログラムを記憶させた記録媒体も併せて提供することができる。
【０１３４】
上述した構成は、本発明の実施形態の一例を示すものであり、当然に、本発明の技術的範囲に属するものである。
【符号の説明】
【０１３５】
１００    情報処理装置
１０２、２０２    記憶部
１０４    入力部
１０６、２０４    通信部
１０８、２０６    制御部
１１０    撮像部
１１２    表示部
１２０    検出部
１２２    判別部
１２４    処理部
１２６    再生処理部
２００    サーバ
３００    ネットワーク
１０００  情報処理システム
【図１】
2012123513.tif 000003
【図２】
2012123513.tif 000004
【図３】
2012123513.tif 000005
【図４】
2012123513.tif 000006
【図５】
2012123513.tif 000007
【図６】
2012123513.tif 000008
【図７】
2012123513.tif 000009
【図８】
2012123513.tif 000010
【図９】
2012123513.tif 000011
【図１０】
2012123513.tif 000012