(57)【特許請求の範囲】
【請求項１】
視聴者に視聴対象コンテンツを視聴させるコンテンツ再生装置であって、
前記視聴対象コンテンツを取得する視聴対象コンテンツ取得部と、
該コンテンツ再生装置で前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出部と、
時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出部で検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択部と、
前記視聴対象コンテンツ取得部で取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択部で選択された前記視聴者コンテンツとを再生するコンテンツ再生部とを備える
コンテンツ再生装置。
【請求項２】
前記視聴者検出部は、
現在、該コンテンツ再生装置で前記視聴対象コンテンツを視聴している前記第１の視聴者の映像又は音声の情報を含む前記視聴者コンテンツを取得する視聴者コンテンツ取得部と、
前記視聴者コンテンツ取得部で取得された前記視聴者コンテンツから、前記第１の視聴者に関する情報である視聴者情報を取得する視聴者情報取得部とを備え、
該コンテンツ再生装置は、さらに、過去に取得された前記第２の視聴者の視聴者コンテンツと、当該視聴者コンテンツから取得された前記第２の視聴者の視聴者情報とを対応付けて記憶する記憶部を備え、
前記視聴者コンテンツ選択部は、
前記視聴者検出部で検出された前記第１の視聴者の視聴者情報と、前記記憶部に記憶されている前記第２の視聴者の視聴者情報との前記一致度を算出し、前記記憶部に記憶されている前記第２の視聴者の前記視聴者コンテンツのうち、前記一致度が前記閾値を上回る視聴者情報に対応付けられた前記視聴者コンテンツを選択する
請求項１に記載のコンテンツ再生装置。
【請求項３】
前記視聴者情報は、対応する前記視聴者コンテンツに含まれる１以上の視聴者それぞれを特定する視聴者ＩＤを含み、
前記視聴者コンテンツ選択部は、前記記憶部に記憶されている前記第２の視聴者の視聴者情報のうち、前記第１の視聴者の視聴者情報に含まれる視聴者ＩＤを、最も多く含む前記視聴者情報に対応付けられた視聴者コンテンツを選択する
請求項２に記載のコンテンツ再生装置。
【請求項４】
前記視聴者コンテンツ選択部は、さらに、前記記憶部に記憶されている前記第２の視聴者の視聴者情報のうち、前記第１の視聴者の視聴者情報に含まれない視聴者ＩＤを、最も少なく含む前記視聴者情報に対応付けられた視聴者コンテンツを選択する
請求項３に記載のコンテンツ再生装置。
【請求項５】
前記記憶部は、さらに、前記視聴者の視聴者ＩＤと、当該視聴者の顔画像とを対応付けて予め記憶し、
前記視聴者情報取得部は、前記視聴者コンテンツから前記第１の視聴者の顔画像を抽出し、前記記憶部に記憶されている前記顔画像のうち、前記抽出された顔画像に一致する顔画像に対応付けられた前記視聴者ＩＤを、前記視聴者情報として取得する
請求項３又は４に記載のコンテンツ再生装置。
【請求項６】
前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含み、
該コンテンツ再生装置は、さらに、前記視聴対象コンテンツを前記表示画面に表示させ、前記視聴者コンテンツを前記視聴対象コンテンツの一部に重畳するように表示させる表示制御部を備え、
前記表示制御部は、
前記表示画面上において、前記第１の視聴者が注目している領域の外側の領域である非注目領域を推定する非注目領域推定部と、
前記表示画面上において、前記第１の視聴者の有効視野領域を推定する有効視野領域推定部とを備え、
前記非注目領域内で、且つ前記有効視野領域内に前記視聴者コンテンツを表示させる
請求項２〜５のいずれか１項に記載のコンテンツ再生装置。
【請求項７】
前記表示制御部は、前記視聴者コンテンツ選択部で複数の前記視聴者コンテンツが選択された場合において、前記複数の視聴者コンテンツのうち、前記一致度の高い前記視聴者コンテンツから順に表示位置を決定する
請求項６に記載のコンテンツ再生装置。
【請求項８】
前記視聴者情報は、前記表示画面上における前記第１の視聴者の視点位置を特定するための情報を含み、
前記非注目領域推定部は、所定時間内において、前記視聴者情報で特定される前記第１の視聴者の視点が、予め定められた停留時間以上停留した前記表示画面上の位置を全て含む所定の領域の外側の領域を、前記非注目領域と推定する
請求項６又は７に記載のコンテンツ再生装置。
【請求項９】
前記視聴者情報は、前記表示画面上における前記第１の視聴者の視点位置を特定するための情報を含み、
前記有効視野領域推定部は、前記視聴者情報で特定される前記第１の視聴者の視点位置を中心とする予め定められた領域を、前記有効視野領域と推定する
請求項６〜８のいずれか１項に記載のコンテンツ再生装置。
【請求項１０】
前記視聴者コンテンツ取得部は、現在、該コンテンツ再生装置で前記視聴対象コンテンツを視聴している前記第１の視聴者を撮像し、当該撮像した画像を前記視聴者コンテンツとして出力する撮像部を備え、
前記視聴者情報取得部は、前記撮像部で撮像された画像から前記第１の視聴者の視点位置を特定するための情報を抽出する
請求項８又は９に記載のコンテンツ再生装置。
【請求項１１】
前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含み、
該コンテンツ再生装置は、さらに、前記視聴対象コンテンツを前記表示画面に表示させた後、所定の時間経過してから前記視聴者コンテンツを前記表示画面に表示させる表示制御部を備え、
前記表示制御部は、
前記表示画面上において、複数の前記第１の視聴者それぞれが注目している領域である注目領域を推定する注目領域推定部と、
前記注目領域推定部で推定された前記第１の視聴者それぞれの前記注目領域の一致度である注目領域一致度を算出する注目領域一致度算出部と、
前記注目領域一致度算出部で算出された注目領域一致度が高いほど、前記所定の時間を長くする表示時間制御部とを備える
請求項２〜１０のいずれか１項に記載のコンテンツ再生装置。
【請求項１２】
前記注目領域一致度算出部は、
２以上の前記第１の視聴者の前記注目領域が互いに重なり合っている領域それぞれについて、重なり合っている領域の面積、重なり合っている時間の長さ、及び当該領域に注目している前記第１の視聴者の人数の積に基づいて、前記注目領域一致度を算出する
請求項１１に記載のコンテンツ再生装置。
【請求項１３】
前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含み、
該コンテンツ再生装置は、さらに、前記視聴者コンテンツ選択部で複数の前記視聴者コンテンツが選択された場合において、前記複数の視聴者コンテンツそれぞれの表示開始時間をずらして前記表示画面に表示させる表示制御部を備え、
前記表示制御部は、
前記表示画面上において、前記視聴者情報取得部で取得された前記視聴者情報に基づいて、複数の前記第１の視聴者が注目している領域である注目領域を推定し、前記複数の視聴者コンテンツそれぞれに対応付けられた前記視聴者情報に基づいて、前記第２の視聴者の注目領域を推定する注目領域推定部と、
前記注目領域推定部で推定された前記第１の視聴者の注目領域と前記第２の視聴者の注目領域との一致度である注目領域一致度を算出する注目領域一致度算出部と、
前記複数の視聴者コンテンツのうち、前記注目領域一致度の高い前記視聴者コンテンツから順に前記表示画面に表示されるように、前記複数の視聴者コンテンツそれぞれの表示開始時間を決定する表示時間制御部とを備える
請求項２〜１２のいずれか１項に記載のコンテンツ再生装置。
【請求項１４】
該コンテンツ再生装置は、さらに、前記視聴者コンテンツ選択部で選択された前記視聴者コンテンツの再生時間を調整し、前記再生時間が調整された前記視聴者コンテンツを前記コンテンツ再生部に再生させる制御部を備え、
前記制御部は、前記第１の視聴者による前記視聴対象コンテンツの視聴時間を推定し、前記推定された視聴対象コンテンツの視聴時間に近づくように、前記視聴者コンテンツの再生時間を延長又は短縮する
請求項２〜１３のいずれか１項に記載のコンテンツ再生装置。
【請求項１５】
前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含み、
前記視聴者コンテンツ選択部は、前記視聴対象コンテンツに対応付けられた１以上の前記視聴者コンテンツそれぞれから、当該視聴者コンテンツの中で最も盛り上がっている部分を静止画として抽出し、前記抽出された１以上の静止画を前記視聴者コンテンツとして出力し、
前記コンテンツ再生部は、前記視聴者コンテンツを再生するのに先立って、前記視聴者コンテンツとしての前記１以上の静止画を、前記表示画面にスライドショー表示又はサムネイル表示する
請求項１に記載のコンテンツ再生装置。
【請求項１６】
前記視聴者コンテンツ選択部は、前記視聴対象コンテンツと同一のコンテンツを、前記第１の視聴者と異なる場所で、且つ前記第１の視聴者と同時に視聴する前記第２の視聴者から取得された前記視聴者コンテンツを選択する
請求項１に記載のコンテンツ再生装置。
【請求項１７】
視聴者に視聴対象コンテンツを視聴させるコンテンツ再生装置におけるコンテンツ再生方法であって、
前記コンテンツ再生装置が、前記視聴対象コンテンツを取得する視聴対象コンテンツ取得ステップと、
前記コンテンツ再生装置が、取得された前記視聴対象コンテンツを再生する第１コンテンツ再生ステップと、
前記コンテンツ再生装置が、再生中の前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出し、時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出ステップで検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択し、選択した前記視聴者コンテンツを取得する視聴者コンテンツ取得ステップと、
前記コンテンツ再生装置が、前記視聴対象コンテンツ取得ステップで取得された前記視聴対象コンテンツと、前記視聴者コンテンツ取得ステップで取得された前記視聴者コンテンツとを再生する第２コンテンツ再生ステップとを含む
コンテンツ再生方法。
【請求項１８】
視聴者に視聴対象コンテンツを視聴させるコンピュータで実行されるプログラムであって、
前記視聴対象コンテンツを取得する視聴対象コンテンツ取得ステップと、
前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出ステップと、
時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出ステップで検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択ステップと、
前記視聴対象コンテンツ取得ステップで取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択ステップで選択された前記視聴者コンテンツとを再生するコンテンツ再生ステップとをコンピュータに実行させる
プログラム。
【請求項１９】
視聴者に視聴対象コンテンツを視聴させる集積回路であって、
前記視聴対象コンテンツを取得する視聴対象コンテンツ取得部と、
前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出部と、
時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出部で検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択部と、
前記視聴対象コンテンツ取得部で取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択部で選択された前記視聴者コンテンツとを再生するコンテンツ再生部とを備える
集積回路。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ディスプレイ又はスクリーン上で再生された視聴対象コンテンツを複数人で視聴する視聴者の様子を、視聴者コンテンツとして記録し、当該視聴者コンテンツを視聴対象コンテンツとともに再生するコンテンツ再生装置に関するものである。
【背景技術】
【０００２】
近年、テレビ画面又はパソコンディスプレイの大画面化、あるいはプロジェクタ又はそれを投影するスクリーンの高機能化が進んでいる。これに伴い、家庭においても手軽にコンテンツを大きく表示し、また、複数個のコンテンツ、文字、コンテンツの関連情報等を、子画面を用いて同時に表示することが可能となってきている。また、デジタルカメラ又はビデオカメラの普及により、視聴者自身が日常の出来事やイベントを記録したコンテンツを作成することが容易になっている。そして、これらの記録された個人コンテンツを大画面テレビ又はスクリーンに表示し、複数人で同時に視聴しやすい環境が整いつつある。【０００３】
さらに、コンテンツを視聴する視聴者の様子を記録し、その記録したものを新たなコンテンツとして元のコンテンツとともに表示し、視聴者間のコミュニケーションを活性化させる、あるいは視聴者のコンテンツに対する思い出を記録する、といった娯楽性を高める効果を狙った装置が開発されている。【０００４】
例えば、コンテンツを視聴する視聴者の活動の様子を記録し、コンテンツとともに表示するシステムが開発されている。コンテンツを複数人で視聴する場合、コンテンツに対する視聴者の思いや考え、さらに、コンテンツ撮影現場に視聴者自身が存在した場合には、撮影当時の出来事にまつわる思い出が語られる。また、楽しい時や盛り上がっている時には笑顔が表れ、何かを伝えたい時や注目箇所を示す時にはジェスチャや指差しなどが行われる。【０００５】
このように、コンテンツ視聴中には、視聴者のコンテンツに対する思いが会話や表情、態度等に表れる。このため、このような視聴者間のコミュニケーションは、利用価値の高いコンテンツのメタデータとして利用できると考えられる。従って、視聴者間コミュニケーションをコンテンツメタデータとして記録し、記録したコンテンツメタデータをコンテンツとともに再生すれば、コンテンツの娯楽性を高める新たなコンテンツになると考えられる。【０００６】
このような装置の一例として、視聴者の歓声が検知されると、視聴者の映像を記録し、元映像再生時にその視聴者コンテンツを合成して再生するものがある（例えば、特許文献１参照）。【０００７】
また、再生コンテンツの音量、音の高さ、映像の明るさ、色味が一定値以上変化した時、視聴者の様子を撮影する装置がある（例えば、特許文献２参照）。【０００８】
さらに、複数人での写真スライドショー閲覧時の視聴者の行動を記録し、スライドショーに対応付けて再生することで、メタデータの付与又はナレーション付スライドショーの生成を行うシステムがある（例えば、非特許文献１参照）。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特許第３６８８２１４号公報
【特許文献２】特開２００６−７４６２２号公報
【非特許文献】
【００１０】
【非特許文献１】ヒューマンインタフェース学会誌、PhotoLoop：写真閲覧時の自然な語らいを活かしたスライドショーの拡張、Vol.11 No.1、2009、pp.69-70
【発明の概要】
【発明が解決しようとする課題】
【００１１】
コンテンツは複数回にわたり繰り返して視聴されることが一般的なので、上記のような装置では、一つの視聴対象コンテンツに対して複数の視聴者コンテンツを記録する必要が生じる。【００１２】
しかしながら、上記の従来技術では、ある一つの視聴対象コンテンツに対して複数の視聴者コンテンツが記録された場合、当該複数の視聴者コンテンツを適切に表示する方法については考慮されていない。例えば、視聴者コンテンツが非常に数多く記録されている場合、一度に全ての視聴者コンテンツを視聴対象コンテンツとともに表示しても、視聴者は全てを視聴するためには膨大な時間がかかるという問題が生じる。【００１３】
さらに、この問題を解決するためには、視聴する視聴者コンテンツを複数の視聴者コンテンツの中から選択し、視聴する視聴者コンテンツの数を減らさなければならない。しかし、複数の視聴者コンテンツは、各回において常に同じ視聴者グループで視聴されているとは限らず、視聴者によって個性、性格、特徴が異なる。このため、当然、視聴対象コンテンツへの注目対象、興味度合い、視聴時間など、視聴対象コンテンツの見方も異なった視聴者コンテンツが記録されている。それゆえ、現在の視聴者グループにとって適切な視聴者コンテンツを選択することは難しい。さらに、保存されている視聴者コンテンツの数が多いほど、視聴する視聴者コンテンツを選択すること自体にも多大な時間を要することになる。【００１４】
本発明は、上述の点に鑑み、従来技術の課題を解決するもので、一つの視聴対象コンテンツに対応付けられた複数の視聴者コンテンツの中から、現在の視聴者の属性又は行動に基づいて適切な視聴者コンテンツを選択し、再生するコンテンツ再生装置を提供することを目的とする。
【課題を解決するための手段】
【００１５】
本発明の一形態に係るコンテンツ再生装置は、視聴者に視聴対象コンテンツを視聴させる。具体的には、前記視聴対象コンテンツを取得する視聴対象コンテンツ取得部と、該コンテンツ再生装置で前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出部と、時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出部で検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択部と、前記視聴対象コンテンツ取得部で取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択部で選択された前記視聴者コンテンツとを再生するコンテンツ再生部とを備える。【００１６】
上記構成によれば、現在の視聴者（第１の視聴者）に対して適切な視聴者映像を再生することができる。その結果、より娯楽性の高いコンテンツ再生装置を得ることができる。また、第１の視聴者にとって興味があると考えられる視聴者コンテンツのみを選択的に再生するので、全ての視聴者コンテンツを再生する場合と比較して、コンテンツ再生装置の処理負荷を軽減することができる。【００１７】
より具体的には、上記のコンテンツ再生装置によれば、複数の視聴者コンテンツの中から、現在の視聴者との共通点の量を示す一致度が高い視聴者コンテンツが選択され再生される。そのため、視聴者自身の属性、視聴対象コンテンツの見方又は嗜好性などにおいて共通の特徴をもった視聴者コンテンツを優先的に見ることができる。その結果、全ての視聴者コンテンツを見る必要はなく多大な時間を必要としない。【００１８】
また、前記視聴者検出部は、現在、該コンテンツ再生装置で前記視聴対象コンテンツを視聴している前記第１の視聴者の映像又は音声の情報を含む前記視聴者コンテンツを取得する視聴者コンテンツ取得部と、前記視聴者コンテンツ取得部で取得された前記視聴者コンテンツから、前記第１の視聴者に関する情報である視聴者情報を取得する視聴者情報取得部とを備えてもよい。該コンテンツ再生装置は、さらに、過去に取得された前記第２の視聴者の視聴者コンテンツと、当該視聴者コンテンツから取得された前記第２の視聴者の視聴者情報とを対応付けて記憶する記憶部を備えてもよい。そして、前記視聴者コンテンツ選択部は、前記視聴者検出部で検出された前記第１の視聴者の視聴者情報と、前記記憶部に記憶されている前記第２の視聴者の視聴者情報との前記一致度を算出し、前記記憶部に記憶されている前記第２の視聴者の前記視聴者コンテンツのうち、前記一致度が前記閾値を上回る視聴者情報に対応付けられた前記視聴者コンテンツを選択してもよい。【００１９】
これにより、視聴者コンテンツと同一のコンテンツを過去に視聴した第２の視聴者の視聴者コンテンツから、第１の視聴者に対して適切な視聴者コンテンツを選択することが可能となる。【００２０】
また、前記視聴者情報は、対応する前記視聴者コンテンツに含まれる１以上の視聴者それぞれを特定する視聴者ＩＤを含んでもよい。そして、前記視聴者コンテンツ選択部は、前記記憶部に記憶されている前記第２の視聴者の視聴者情報のうち、前記第１の視聴者の視聴者情報に含まれる視聴者ＩＤを、最も多く含む前記視聴者情報に対応付けられた視聴者コンテンツを選択してもよい。【００２１】
さらに、前記視聴者コンテンツ選択部は、前記記憶部に記憶されている前記第２の視聴者の視聴者情報のうち、前記第１の視聴者の視聴者情報に含まれない視聴者ＩＤを、最も少なく含む前記視聴者情報に対応付けられた視聴者コンテンツを選択してもよい。【００２２】
さらに、前記記憶部は、前記視聴者の視聴者ＩＤと、当該視聴者の顔画像とを対応付けて予め記憶してもよい。そして、前記視聴者情報取得部は、前記視聴者コンテンツから前記第１の視聴者の顔画像を抽出し、前記記憶部に記憶されている前記顔画像のうち、前記抽出された顔画像に一致する顔画像に対応付けられた前記視聴者ＩＤを、前記視聴者情報として取得してもよい。【００２３】
また、前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含んでもよい。該コンテンツ再生装置は、さらに、前記視聴対象コンテンツを前記表示画面に表示させ、前記視聴者コンテンツを前記視聴対象コンテンツの一部に重畳するように表示させる表示制御部を備えてもよい。そして、前記表示制御部は、前記表示画面上において、前記第１の視聴者が注目している領域の外側の領域である非注目領域を推定する非注目領域推定部と、前記表示画面上において、前記第１の視聴者の有効視野領域を推定する有効視野領域推定部とを備え、前記非注目領域内で、且つ前記有効視野領域内に前記視聴者コンテンツを表示させてもよい。【００２４】
これにより、視聴対象コンテンツの視聴を妨げることなく、且つ第１の視聴者にとって見やすい位置に視聴者コンテンツを表示することが可能となる。例えば、一致度の高い視聴者コンテンツが複数選択された場合に、各視聴者コンテンツが表示画面上の適切な位置に表示される。具体的には、視聴者コンテンツは、表示画面の非注目領域かつ有効視野領域に表示される。そのため、視聴者の注目箇所に重なることなく、かつ、気づきやすく見やすい位置に表示される。【００２５】
また、前記表示制御部は、前記視聴者コンテンツ選択部で複数の前記視聴者コンテンツが選択された場合において、前記複数の視聴者コンテンツのうち、前記一致度の高い前記視聴者コンテンツから順に表示位置を決定してもよい。【００２６】
また、前記視聴者情報は、前記表示画面上における前記第１の視聴者の視点位置を特定するための情報を含んでもよい。そして、前記非注目領域推定部は、所定時間内において、前記視聴者情報で特定される前記第１の視聴者の視点が、予め定められた停留時間以上停留した前記表示画面上の位置を全て含む所定の領域の外側の領域を、前記非注目領域と推定してもよい。【００２７】
また、前記視聴者情報は、前記表示画面上における前記第１の視聴者の視点位置を特定するための情報を含んでもよい。そして、前記有効視野領域推定部は、前記視聴者情報で特定される前記第１の視聴者の視点位置を中心とする予め定められた領域を、前記有効視野領域と推定してもよい。【００２８】
また、前記視聴者コンテンツ取得部は、現在、該コンテンツ再生装置で前記視聴対象コンテンツを視聴している前記第１の視聴者を撮像し、当該撮像した画像を前記視聴者コンテンツとして出力する撮像部を備えてもよい。そして、前記視聴者情報取得部は、前記撮像部で撮像された画像から前記第１の視聴者の視点位置を特定するための情報を抽出してもよい。【００２９】
また、前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含んでもよい。該コンテンツ再生装置は、さらに、前記視聴対象コンテンツを前記表示画面に表示させた後、所定の時間経過してから前記視聴者コンテンツを前記表示画面に表示させる表示制御部を備えてもよい。そして、前記表示制御部は、前記表示画面上において、複数の前記第１の視聴者それぞれが注目している領域である注目領域を推定する注目領域推定部と、前記注目領域推定部で推定された前記第１の視聴者それぞれの前記注目領域の一致度である注目領域一致度を算出する注目領域一致度算出部と、前記注目領域一致度算出部で算出された注目領域一致度が高いほど、前記所定の時間を長くする表示時間制御部とを備えてもよい。【００３０】
これにより、例えば、第１の視聴者間で会話が弾んでいると判断できる場合（注目領域一致度が高い）には視聴者コンテンツの表示タイミングを遅らせ、第１の視聴者間で会話が弾んでいないと判断できる場合（注目領域一致度が低い）には視聴者コンテンツの表示タイミングを早めることができる。【００３１】
例えば、一致度の高い視聴者コンテンツが複数選択された場合に、各視聴者コンテンツが適切なタイミングで表示される。具体的には、現在の視聴者間の注目領域の一致度が高い程、視聴者コンテンツは遅れて表示される。このように、視聴を阻害することなく、表示時間を遅らせることで、視聴者コンテンツが適切なタイミングで表示される。【００３２】
また、前記注目領域一致度算出部は、２以上の前記第１の視聴者の前記注目領域が互いに重なり合っている領域それぞれについて、重なり合っている領域の面積、重なり合っている時間の長さ、及び当該領域に注目している前記第１の視聴者の人数の積に基づいて、前記注目領域一致度を算出してもよい。【００３３】
また、前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含んでもよい。該コンテンツ再生装置は、さらに、前記視聴者コンテンツ選択部で複数の前記視聴者コンテンツが選択された場合において、前記複数の視聴者コンテンツそれぞれの表示開始時間をずらして前記表示画面に表示させる表示制御部を備えてもよい。そして、前記表示制御部は、前記表示画面上において、前記視聴者情報取得部で取得された前記視聴者情報に基づいて、複数の前記第１の視聴者が注目している領域である注目領域を推定し、前記複数の視聴者コンテンツそれぞれに対応付けられた前記視聴者情報に基づいて、前記第２の視聴者の注目領域を推定する注目領域推定部と、前記注目領域推定部で推定された前記第１の視聴者の注目領域と前記第２の視聴者の注目領域との一致度である注目領域一致度を算出する注目領域一致度算出部と、前記複数の視聴者コンテンツのうち、前記注目領域一致度の高い前記視聴者コンテンツから順に前記表示画面に表示されるように、前記複数の視聴者コンテンツそれぞれの表示開始時間を決定する表示時間制御部とを備えてもよい。【００３４】
これにより、例えば、選択された視聴者コンテンツのうち、第１の視聴者がより共感できる視聴者コンテンツから順に表示させることができる。より具体的には、複数の視聴者コンテンツが選択された場合に、現在の視聴者間の注目領域と、選択された各視聴者コンテンツにおける視聴者の注目領域とを比較し、一致度が高い視聴者コンテンツから順に表示される。そのため、視聴者は共通して注目する箇所が多い視聴者コンテンツから先に視聴することができる。【００３５】
さらに、該コンテンツ再生装置は、前記視聴者コンテンツ選択部で選択された前記視聴者コンテンツの再生時間を調整し、前記再生時間が調整された前記視聴者コンテンツを前記コンテンツ再生部に再生させる制御部を備えてもよい。そして、前記制御部は、前記第１の視聴者による前記視聴対象コンテンツの視聴時間を推定し、前記推定された視聴対象コンテンツの視聴時間に近づくように、前記視聴者コンテンツの再生時間を延長又は短縮してもよい。【００３６】
これにより、視聴対象コンテンツの再生時間に合わせて、視聴者コンテンツを効率的に再生することができる。より具体的には、視聴対象コンテンツの視聴時間を推定し、その時間に近づくように視聴者コンテンツの再生時間を延長又は短縮する。そのため、延長する場合には、視聴対象コンテンツを見ている間は視聴者コンテンツが途切れず常に表示される。一方、短縮する場合には、視聴対象コンテンツを見終えると推定される時間に視聴者コンテンツの再生が終わるため、効率的に視聴者コンテンツを視聴できる。【００３７】
また、前記コンテンツ再生部は、前記視聴対象コンテンツ及び前記視聴者コンテンツに含まれる画像データを表示する表示画面を含んでもよい。前記視聴者コンテンツ選択部は、前記視聴対象コンテンツに対応付けられた１以上の前記視聴者コンテンツそれぞれから、当該視聴者コンテンツの中で最も盛り上がっている部分を静止画として抽出し、前記抽出された１以上の静止画を前記視聴者コンテンツとして出力してもよい。そして、前記コンテンツ再生部は、前記視聴者コンテンツを再生するのに先立って、前記視聴者コンテンツとしての前記１以上の静止画を、前記表示画面にスライドショー表示又はサムネイル表示してもよい。【００３８】
これにより、実際に視聴対象コンテンツを見る前に視聴者静止画を表示することにより、視聴者コンテンツを視聴した第２の視聴者の様子を、予め俯瞰的に見ることできる。より具体的には、視聴対象コンテンツを再生する前に、視聴者コンテンツの中で最も盛り上がっていると推定される部分の静止画をスライドショー又はサムネイルで表示する。そのため、過去に視聴対象コンテンツを視聴した全視聴者の様子又は反応を視聴前に効率的に把握することができる。【００３９】
また、前記視聴者コンテンツ選択部は、前記視聴対象コンテンツと同一のコンテンツを、前記第１の視聴者と異なる場所で、且つ前記第１の視聴者と同時に視聴する前記第２の視聴者から取得された前記視聴者コンテンツを選択してもよい。【００４０】
本発明の一形態に係るコンテンツ再生方法は、視聴者に視聴対象コンテンツを視聴させる方法である。具体的には、前記視聴対象コンテンツを取得する視聴対象コンテンツ取得ステップと、前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出ステップと、時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出ステップで検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択ステップと、前記視聴対象コンテンツ取得ステップで取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択ステップで選択された前記視聴者コンテンツとを再生するコンテンツ再生ステップとを含む。【００４１】
本発明の一形態に係るプログラムは、視聴者に視聴対象コンテンツを視聴させるコンピュータで実行される。具体的には、前記視聴対象コンテンツを取得する視聴対象コンテンツ取得ステップと、前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出ステップと、時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出ステップで検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択ステップと、前記視聴対象コンテンツ取得ステップで取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択ステップで選択された前記視聴者コンテンツとを再生するコンテンツ再生ステップとをコンピュータに実行させる。【００４２】
本発明の一形態に係る集積回路は、視聴者に視聴対象コンテンツを視聴させる。具体的には、前記視聴対象コンテンツを取得する視聴対象コンテンツ取得部と、前記視聴対象コンテンツを視聴する視聴者である第１の視聴者を検出する視聴者検出部と、時間的又は空間的に異なる条件の下で取得された、前記視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者の映像又は音声の情報を含む視聴者コンテンツのうち、前記視聴者検出部で検出された前記第１の視聴者と前記第２の視聴者との共通点の量を示す一致度が所定の閾値を上回る前記視聴者コンテンツを選択する視聴者コンテンツ選択部と、前記視聴対象コンテンツ取得部で取得された前記視聴対象コンテンツと、前記視聴者コンテンツ選択部で選択された前記視聴者コンテンツとを再生するコンテンツ再生部とを備える。
【発明の効果】
【００４３】
本発明のコンテンツ再生装置によれば、複数の視聴者コンテンツの中から、現在の視聴者との一致度に基づいて視聴者コンテンツを選択し、再生することが可能となる。
【図面の簡単な説明】
【００４４】
【図１】図１は、本発明の実施の形態１に係るコンテンツ再生装置の外観の一例を示す図である。
【図２Ａ】図２Ａは、本発明の実施の形態１に係るコンテンツ再生装置の概略構成を示すブロック図である。
【図２Ｂ】図２Ｂは、本発明の実施の形態１に係るコンテンツ再生装置の詳細構成を示すブロック図である。
【図３Ａ】図３Ａは、本発明の実施の形態１に係るコンテンツ保存部で保存される情報の一例を示す図である。
【図３Ｂ】図３Ｂは、図３Ａに示されるコンテンツのデータ構造の一例を示す図である。
【図３Ｃ】図３Ｃは、図３Ａに示されるコンテンツメタ情報のデータ構造の一例を示す図である。
【図４Ａ】図４Ａは、本発明の実施の形態１に係る視聴者属性情報のデータ構造の一例を示す図である。
【図４Ｂ】図４Ｂは、本発明の実施の形態１に係る身体情報のデータ構造の一例を示す図である。
【図５】図５は、本発明の実施の形態１に係るヘッダー情報の一例を示す図である。
【図６】図６は、本発明の実施の形態１に係るコンテンツ再生装置の外観の一例を示す図である。
【図７Ａ】図７Ａは、本発明の実施の形態１に係るメタ情報のデータ構造の一例を示す図である。
【図７Ｂ】図７Ｂは、本発明の実施の形態１に係るメタ情報のデータ構造の他の例を示す図である。
【図８】図８は、本発明の実施の形態１に係る視聴者情報保存部の構成の一例を示す図である。
【図９】図９は、本発明の実施の形態１に係る視聴者情報の構成の一例を示す図である。
【図１０】図１０は、本発明の実施の形態１に係る視聴者コンテンツ選択部の動作例を示す図である。
【図１１Ａ】図１１Ａは、本発明の実施の形態１に係る映像表示画面に視聴対象コンテンツと視聴者コンテンツとを並べて表示する例を示す図である。
【図１１Ｂ】図１１Ｂは、本発明の実施の形態１に係る映像表示画面に、視聴対象コンテンツに視聴者コンテンツを重畳させて表示する例を示す図である。
【図１１Ｃ】図１１Ｃは、本発明の実施の形態１に係る映像表示画面に、視聴者コンテンツに視聴対象コンテンツを重畳させて表示する例を示す図である。
【図１２】図１２は、本発明の実施の形態１に係るコンテンツ再生装置の処理動作の例を示すフローチャートである。
【図１３】図１３は、本発明の実施の形態２に係るコンテンツ再生装置の構成を示すブロック図である。
【図１４Ａ】図１４Ａは、本発明の実施の形態２において、非注目領域を推定する方法の一例を示す図である。
【図１４Ｂ】図１４Ｂは、本発明の実施の形態２において、有効視野領域を推定する方法の一例を示す図である。
【図１４Ｃ】図１４Ｃは、本発明の実施の形態２において、視聴者コンテンツ表示推奨領域を決定する方法の一例を示す図である。
【図１５】図１５は、本発明の実施の形態２に係る非注目領域推定部で視聴者の注目領域を推定する手順の一例を示す図である。
【図１６】図１６は、本発明の実施の形態２に係る有効視野領域推定部で視聴者の有効視野領域を推定する手順の一例を示す図である。
【図１７】図１７は、本発明の実施の形態２に係る有効視野領域推定部で視聴者の有効視野領域を推定する手順の一例を示す図である。
【図１８】図１８は、本発明の実施の形態２に係る表示制御部で視聴者コンテンツの表示パラメータを算出する手順の一例を示す図である。
【図１９】図１９は、本発明の実施の形態２に係るコンテンツ再生装置の処理動作の例を示すフローチャートである。
【図２０】図２０は、本発明の実施の形態３に係るコンテンツ再生装置の構成を示すブロック図である。
【図２１Ａ】図２１Ａは、本発明の実施の形態３において、視聴者グループＡの注目領域一致度を算出する手順の一例を示す図である。
【図２１Ｂ】図２１Ｂは、本発明の実施の形態３において、視聴者グループＢの注目領域一致度を算出する手順の一例を示す図である。
【図２２Ａ】図２２Ａは、本発明の実施の形態３において、視聴者グループＡに対して表示する視聴者コンテンツの表示パラメータを算出する手順の一例を示す図である。
【図２２Ｂ】図２２Ｂは、本発明の実施の形態３において、視聴者グループＢに対して表示する視聴者コンテンツの表示パラメータを算出する手順の一例を示す図である。
【図２３Ａ】図２３Ａは、本発明の実施の形態３において、視聴者グループＡに対して表示する視聴者コンテンツの表示タイミングの例を示す図である。
【図２３Ｂ】図２３Ｂは、本発明の実施の形態３において、視聴者グループＢに対して表示する視聴者コンテンツの表示タイミングの例を示す図である。
【図２４】図２４は、本発明の実施の形態３に係るコンテンツ再生装置の処理動作の例を示すフローチャートである。
【図２５】図２５は、本発明の実施の形態４に係る視聴者コンテンツ選択部で選択された視聴者コンテンツの一例を示す図である。
【図２６Ａ】図２６Ａは、本発明の実施の形態４において、視聴者グループＡの注目領域一致度を算出する手順の一例を示す図である。
【図２６Ｂ】図２６Ｂは、本発明の実施の形態４において、視聴者グループＢの注目領域一致度を算出する手順の一例を示す図である。
【図２７】図２７は、本発明の実施の形態４に係る注目領域一致度算出部で注目領域一致度を算出する手順の一例を示す図である。
【図２８Ａ】図２８Ａは、現在の視聴者情報と過去の２つの視聴者情報との間で算出された注目領域一致度が同一となる場合の例を示す図である。
【図２８Ｂ】図２８Ｂは、現在の視聴者情報と過去の２つの視聴者情報との間で算出された注目領域一致度が相違する場合の一例を示す図である。
【図２８Ｃ】図２８Ｃは、現在の視聴者情報と過去の２つの視聴者情報との間で算出された注目領域一致度が相違する場合の他の例を示す図である。
【図２８Ｄ】図２８Ｄは、図２８Ａ〜図２８Ｃの各場合における視聴者コンテンツの表示タイミングを示す図である。
【図２９Ａ】図２９Ａは、本発明の実施の形態５に係る視聴者情報保存部に保存された過去のヘッダー情報の一例を示す図である。
【図２９Ｂ】図２９Ｂは、本発明の実施の形態５に係るヘッダー作成部で作成された現在のヘッダー情報の一例を示す図である。
【図３０】図３０は、本発明の実施の形態５に係るコンテンツ再生装置の処理動作の例を示すフローチャートである。
【図３１Ａ】図３１Ａは、本発明の実施の形態６における視聴対象コンテンツのデータ構造の一例を示す図である。
【図３１Ｂ】図３１Ｂは、本発明の実施の形態６における各視聴者コンテンツにおいて、視聴者静止画の抽出タイミングを示す図である。
【図３１Ｃ】図３１Ｃは、本発明の実施の形態６における視聴者コンテンツ及び視聴対象コンテンツの再生順序を示す図である。
【図３２】図３２は、本発明の実施の形態６に係るコンテンツ再生装置の処理動作の例を示すフローチャートである。
【発明を実施するための形態】
【００４５】
以下本発明の実施の形態について、図面を参照しながら説明する。
【００４６】
（実施の形態１）
実施の形態１に係るコンテンツ再生装置は、視聴対象コンテンツとともに表示する視聴者コンテンツを、視聴者情報の一致度に基づいて選択する。具体的には、視聴者に視聴対象コンテンツを視聴させるコンテンツ再生装置であって、視聴対象コンテンツを取得する視聴対象コンテンツ取得部と、現在、該コンテンツ再生装置で視聴対象コンテンツを視聴している視聴者である第１の視聴者を検出する視聴者検出部と、時間的又は空間的に異なる条件下で、視聴対象コンテンツと同一のコンテンツを視聴する視聴者である第２の視聴者から取得された視聴者コンテンツのうち、第１の視聴者と第２の視聴者との共通点を示す一致度が所定の閾値を上回る視聴者コンテンツを選択する視聴者コンテンツ選択部と、視聴対象コンテンツ取得部で取得された視聴対象コンテンツと、視聴者コンテンツ選択部で選択された視聴者コンテンツとを再生するコンテンツ再生部とを備える。
【００４７】
以降では、本コンテンツ再生装置を使用して視聴対象コンテンツを視聴する可能性のある人物をユーザと呼び、実際に視聴対象コンテンツを視聴するユーザを視聴者と呼ぶ。
【００４８】
＜外観＞
図１は、本発明のコンテンツ再生装置１００に設けられる各種入出力装置の外観の一例を示す図である。コンテンツ再生装置１００は、視聴者撮影カメラ１０１と、音声入力マイク１０２と、音声出力スピーカ３０２と、映像表示画面３０１とを所定の位置に設置して構成される。なお、図１には、視聴者撮影カメラ１０１、音声入力マイク１０２、及び音声出力スピーカ３０２をそれぞれ２台ずつ設置し、映像表示画面３０１を１台設置している例を示しているが、各構成要素の数は上記に限定されない。
【００４９】
前提として、視聴者は映像表示画面３０１の前におり、映像表示画面３０１に表示される視聴対象コンテンツを視聴するものとする。
【００５０】
なお、各構成要素の位置は、図１に限定されない。例えば、音声入力マイク１０２は、映像表示画面３０１の前方中央に設置してもよい。また、音声出力スピーカ３０２は、天井から吊り下げてもよい。
【００５１】
＜構成＞
図２Ａは、本発明の実施の形態１に係るコンテンツ再生装置１００の概略構成を示すブロック図である。コンテンツ再生装置１００は、図２Ａに示されるように、視聴対象コンテンツ取得部２０と、視聴者検出部１０と、視聴者コンテンツ選択部２０４と、コンテンツ再生部３０とを主に備える。
【００５２】
視聴対象コンテンツ取得部２０は、視聴対象コンテンツを取得する。視聴対象コンテンツの具体的な取得方法は特に限定されないが、典型的には、視聴者によって指定された視聴対象コンテンツを選択する。また、取得する視聴対象コンテンツは、コンテンツ再生装置１００内に記録されているものであってもよいし、外部記録媒体に記録されているものであってもよい。さらには、外部のコンテンツサーバ等に記録されている視聴対象コンテンツを、通信ネットワークを介して取得してもよい。
【００５３】
視聴者検出部１０は、現在、コンテンツ再生装置１００で視聴対象コンテンツを視聴している視聴者（第１の視聴者）を検出する。具体的には、例えば、視聴者の様子を撮影したり、視聴者の発話を収音したり、視聴者のリモコン操作を受け付けたりすることが含まれる。
【００５４】
視聴者コンテンツ選択部２０４は、現在の視聴者にとって適切な視聴者コンテンツを選択する。なお、視聴者コンテンツとは、視聴対象コンテンツと同一のコンテンツを、時間的又は空間的に異なる条件下で視聴する視聴者（第２の視聴者）から取得されたコンテンツである。より具体的には、第２の視聴者の様子を撮影して得られる映像データ、及び／又は、第２の視聴者の発話を収音して得られる音声データ等が含まれる。そして、視聴者コンテンツ選択部２０４は、選択可能な視聴者コンテンツのうち、第１の視聴者と第２の視聴者との共通点を示す一致度が所定の閾値を上回る視聴者コンテンツを選択する。
【００５５】
コンテンツ再生部３０は、視聴対象コンテンツ取得部２０で取得された視聴対象コンテンツと、視聴者コンテンツ選択部２０４で選択された視聴者コンテンツとを再生する。なお、「再生する」とは、コンテンツに含まれる映像（画像）データを表示すること、及びコンテンツに含まれる音声データを出力すること等が含まれる。
【００５６】
また、視聴者検出部１０は、現在、コンテンツ再生装置１００で視聴対象コンテンツを視聴している第１の視聴者から視聴者コンテンツを取得する視聴者コンテンツ取得部（図示省略）と、視聴者コンテンツ取得部で取得された視聴者コンテンツから、第１の視聴者に関する情報である視聴者情報を取得する視聴者情報取得部（図示省略）とを備える。また、コンテンツ再生装置１００は、過去に取得された第２の視聴者の視聴者コンテンツと、当該視聴者コンテンツから取得された第２の視聴者の視聴者情報とを対応付けて記憶する記憶部４０（図２Ａでは図示省略）を備える。そして、視聴者コンテンツ選択部は、視聴者検出部１０で検出された第１の視聴者の視聴者情報と、記憶部４０に記憶されている第２の視聴者の視聴者情報との一致度を算出し、記憶部４０に記憶されている第２の視聴者の視聴者コンテンツのうち、一致度が閾値を上回る視聴者情報に対応付けられた視聴者コンテンツを選択する。
【００５７】
次に、図２Ｂは、本発明の実施の形態１に係るコンテンツ再生装置１００の詳細構成を示すブロック図である。コンテンツ再生装置１００は、図２Ｂに示されるように、視聴者検出部１０と、視聴者コンテンツ選択部２０４と、表示制御部２０５と、コンテンツ再生部３０と、記憶部４０とを備える。なお、図２Ａと図２Ｂとで共通する構成要素には、同一の参照番号を付加している。また、図２Ａに示される視聴対象コンテンツ取得部２０の機能は、図２Ｂの表示制御部２０５に含まれるものとする。
【００５８】
視聴者検出部１０は、視聴者撮影カメラ１０１と、音声入力マイク１０２と、視聴者入力受付部１０３と、視聴者同定部２０１と、ヘッダー情報作成部２０２と、メタ情報作成部２０３とを備える。このうち、視聴者撮影カメラ１０１、音声入力マイク１０２、及び視聴者入力受付部１０３は、視聴者コンテンツ取得部としても機能する。また、視聴者同定部２０１、ヘッダー情報作成部２０２、及びメタ情報作成部２０３は、視聴者情報取得部としても機能する。
【００５９】
視聴者撮影カメラ（撮像部）１０１は、コンテンツ再生装置１００で視聴対象コンテンツを視聴している視聴者を撮影する。音声入力マイク１０２は、コンテンツ再生装置１００で視聴対象コンテンツを視聴している視聴者の発話を収音する。視聴者入力受付部１０３は、視聴者のリモコン等を用いて入力する指示を受け付ける。
【００６０】
視聴者同定部２０１は、視聴者撮影カメラ１０１で取得された映像、および音声入力マイク１０２で取得された音声を含む視聴者コンテンツ、及び／又は、視聴者入力受付部１０３で受け付けた視聴者のリモコン操作の情報に基づいて、視聴者数をカウントし、現在、視聴対象コンテンツを視聴している視聴者が誰かを同定する。
【００６１】
より具体的には、記憶部４０は、視聴者の視聴者ＩＤと、当該視聴者の顔画像とを対応付けて予め記憶している。そして、視聴者情報取得部として動作する視聴者同定部２０１は、視聴者コンテンツから第１の視聴者の顔画像を抽出し、記憶部４０に記憶されている顔画像のうち、抽出された顔画像に一致する顔画像に対応付けられた視聴者ＩＤを、視聴者情報として取得する。
【００６２】
ヘッダー情報作成部２０２は、視聴者同定部２０１での同定結果に加え、視聴日時などの視聴者コンテンツについての基本的な情報であるヘッダー情報を作成する。また、メタ情報作成部２０３は、視聴者コンテンツに基づいて視聴者の行動又は態度等の特徴を規定するメタ情報を作成する。そして、このように取得または作成された視聴者コンテンツと、ヘッダー情報およびメタ情報を含む視聴者情報とは、互いに対応付けられて視聴者情報保存部４０２に保存される。
【００６３】
視聴者属性情報保存部４０３には、視聴者の属性及び身体情報に関する視聴者属性情報が保存されている。新たにユーザが増える場合、又は既存のユーザの情報に変更が生じた場合には、適宜、視聴者入力受付部１０３でユーザによる変更の入力を受け付けるか、または視聴者コンテンツに基づいて、視聴者属性情報が更新される。そして、ヘッダー情報は、視聴者属性情報へのポインタを持ち、同定した視聴者の視聴者属性情報を参照することができる。
【００６４】
視聴者コンテンツ選択部２０４は、視聴者情報保存部４０２に保存された過去の視聴者コンテンツのうち、同一の視聴対象コンテンツが視聴された時の視聴者コンテンツの中から、現在再生中の視聴対象コンテンツとともに表示する視聴者コンテンツを、ヘッダー情報またはメタ情報（すなわち、視聴者情報）に基づいて選択する。
【００６５】
より具体的には、視聴者情報は、対応する視聴者コンテンツに含まれる１以上の視聴者それぞれを特定する視聴者ＩＤを含む。そして、視聴者コンテンツ選択部２０４は、記憶部４０に記憶されている第２の視聴者の視聴者情報のうち、第１の視聴者の視聴者情報に含まれる視聴者ＩＤを、最も多く含む視聴者情報に対応付けられた視聴者コンテンツを選択する。さらに、視聴者コンテンツ選択部２０４は、記憶部４０に記憶されている第２の視聴者の視聴者情報のうち、第１の視聴者の視聴者情報に含まれない視聴者ＩＤを、最も少なく含む視聴者情報に対応付けられた視聴者コンテンツを選択する。
【００６６】
表示制御部２０５は、視聴者入力受付部１０３からの入力または所定の値に基づいて、視聴者コンテンツと視聴対象コンテンツとの表示位置又は表示サイズなどの表示パラメータを設定する。そして、表示制御部２０５は、設定した表示パラメータに従って、視聴者コンテンツ選択部２０４で選択された視聴者コンテンツと、コンテンツ保存部４０１から取得した視聴対象コンテンツとを、コンテンツ再生部３０に出力する。
【００６７】
コンテンツ再生部３０は、表示制御部２０５から取得した視聴対象コンテンツ及び視聴者コンテンツを再生する。具体的には、コンテンツ再生部３０は、取得したコンテンツのうちの映像（画像）データを表示する映像表示画面３０１と、取得したコンテンツのうちの音声データを出力する音声出力スピーカ３０２とで構成される。
【００６８】
＜記憶部４０＞
記憶部４０は、コンテンツ保存部４０１と、視聴者情報保存部４０２と、視聴者属性情報保存部４０３とを備える。コンテンツ保存部４０１には、視聴対象コンテンツの候補となる１以上のコンテンツが保存されている。視聴者情報保存部４０２には、視聴者検出部１０で取得された過去の視聴者コンテンツと視聴者情報とが対応付けて保存されている。視聴者属性情報保存部４０３には、コンテンツ再生装置１００を利用する視聴者の情報が保存されている。
【００６９】
＜コンテンツ保存部４０１＞
図３Ａ〜図３Ｃは、視聴対象コンテンツの候補であるコンテンツの一例を説明する図である。
【００７０】
コンテンツ保存部４０１は、図３Ａに示されるように、視聴対象コンテンツの候補となるコンテンツと、当該コンテンツに関する情報であるコンテンツメタ情報とを、対応付けて保存する。図３Ｂに示される例では、３つのコンテンツＡ、Ｂ、Ｃがコンテンツ保存部４０１に保存されている。そして、コンテンツＡは写真１０枚（Ａ１〜Ａ１０）、コンテンツＢは写真７枚（Ｂ１〜Ｂ７）、コンテンツは写真９枚（Ｃ１〜Ｃ９）から構成される。
【００７１】
なお、複数の写真（静止画）で構成されるスライドショーコンテンツを視聴対象コンテンツとして、以降の各例を説明する。また、このスライドショーコンテンツは、典型的には、視聴者の指示（例えば、視聴者入力受付部１０３を介した視聴者の指示）に従って、写真が順次切り替わっていくようなコンテンツを想定している。つまり、スライドショーコンテンツを構成する各写真の視聴時間及びスライドショーコンテンツ全体の視聴時間は、視聴者によって異なることが前提となる。
【００７２】
コンテンツメタ情報は、図３Ｃに示されるように、撮影日時、撮影機器の機種、焦点距離、又は撮影モードなど、一般的にコンテンツ撮影時に撮影装置で取得される情報である。さらに、撮影機器にＧＰＳ、指紋認証、顔認識技術といった機能が備えられていれば、撮影場所、コンテンツに写された人物の数（被写体人数）、さらにはコンテンツには写っていないが、当該コンテンツ撮影時にその場にいた人物（撮影者、同行者等）等を、コンテンツメタ情報として取得することができる。
【００７３】
なお、コンテンツは写真に限らず、テレビ放送番組、映画、インターネット上のデジタルコンテンツ、公告、またはそれらの組み合わせでもよい。
【００７４】
＜視聴者情報保存部４０２＞
視聴者情報保存部４０２には、図８に示すように、視聴者コンテンツと、ヘッダー情報およびメタ情報を含む視聴者情報とが、互いに対応付けられて保存されている。具体的には、図９に示すように、コンテンツＡの構成要素（写真Ａ１〜Ａ１０）に対応付けて各視聴者情報が保存される。視聴者コンテンツＡ−ｎは、コンテンツＡが視聴された回数を基準にして、コンテンツＡがｎ回目に視聴された時に取得されたデータであることを示す。
【００７５】
コンテンツＡに含まれる写真Ａ１が１回目に視聴された時に作成された視聴者コンテンツは、映像Ａ１−１と音声Ａ１−１として保存される。同様に、コンテンツＡに含まれる写真Ａ１がｎ回目に視聴された時に作成された視聴者コンテンツは、映像Ａ１−ｎと音声Ａ１−ｎとして保存される。さらに、視聴者コンテンツＡ−ｎには、ヘッダー情報Ａ−ｎ、およびメタ情報Ａ−ｎが対応付けられている。視聴者情報保存部４０２には、各コンテンツについて視聴された回数分の視聴者コンテンツ及び視聴者情報が保存される。
【００７６】
＜視聴者属性情報保存部４０３＞
視聴者属性情報保存部４０３では、ユーザの属性情報を取得し、保存する。
【００７７】
視聴者属性情報は、ユーザの中から視聴者を識別することができる情報である。例えば、図４Ａに示すように、顔画像、声紋、性別、年齢、生年月日、視聴者間の関係、社会的属性、身体情報などであり、視聴者ＩＤに対応付けられて保存されている。さらに、上記の情報に加えて、氏名があってもよい。また、身体情報は、例えば図４Ｂに示すように、身長、座高、目の高さ、視力、利き手、腕の長さなど、視聴者の身体的特徴である。
【００７８】
視聴者属性情報は、視聴者検出部１０で取得する。例えば、性別、生年月日、親子又は友人などの視聴者間の関係は、ユーザからの情報の入力を視聴者入力受付部１０３で受け付ける。また、顔画像は視聴者撮影カメラ１０１で、声紋は音声入力マイク１０２で取得する。
【００７９】
なお、視聴者属性情報はこれらの例に限らず、視聴者を識別可能な情報であれば他の情報であってもよい。
【００８０】
また、ユーザは、コンテンツ再生装置１００の利用可能性がある人物であるため、例えば、コンテンツ再生装置１００の所有者の子供、両親、又は友人などの視聴者属性情報がさらに保存されていてもよい。
【００８１】
視聴者属性情報は更新が必要な場合、必要に応じて更新される。
【００８２】
次に、図１、図５〜図７Ｂ、及び図１０〜図１２を参照して、実施の形態１に係るコンテンツ再生装置１００の動作を説明する。
【００８３】
＜視聴者検出部１０＞
まず、視聴者検出部１０は、現在、コンテンツ再生装置１００で視聴対象コンテンツを視聴している視聴者から視聴者コンテンツを取得する（Ｓ１００）。具体的には、視聴者撮影カメラ１０１は、現在、コンテンツ再生装置１００で、視聴対象コンテンツを視聴する視聴者を撮影する。音声入力マイク１０２は、現在、コンテンツ再生装置１００で、視聴対象コンテンツを視聴する視聴者の会話の音声を取得する。以降では、視聴者撮影カメラ１０１で取得した映像および音声入力マイク１０２で取得した音声の一方又は両方を視聴者コンテンツと呼ぶ。
【００８４】
例えば、図１に示すように、視聴者撮影カメラ１０１が２台あれば、ステレオ視の原理によって視聴者の三次元位置を算出することができる。視聴者位置が算出されれば、画像処理技術を利用することで、全視聴者の上半身が一画面に入る最大の大きさとなるように、視聴者撮影カメラ１０１が自動的に適切な角度と画角とを算出し、設定することも可能である。
【００８５】
なお、視聴者の検出と位置の算出には、映像に限らず、２台の音声入力マイク１０２で得られる音声データを利用し、音源位置を特定する方法を用いてもよい。また、図１には示していないが、視聴者入力受付部１０３として、サーモグラフィ又は床センサなどの各種センサを備えてもよい。この場合、熱分布画像又は圧力分布などのセンサ情報を利用して視聴者を検出し、視聴者の位置を算出することも可能である。
【００８６】
＜視聴者同定部２０１＞
次に、視聴者検出部１０で取得された視聴者コンテンツ中に視聴者が検出されると（Ｓ１０１でＹｅｓ）、視聴者同定部２０１は、視聴者が視聴者属性情報保存部４０３に登録されている視聴者ＩＤのうち、どの視聴者であるかを同定する（Ｓ１０２）。同定は、視聴者が視聴者入力受付部１０３を用いて入力した情報、あるいは視聴者コンテンツから取り出した顔画像又は声紋が、視聴者属性情報保存部４０３に保存された視聴者属性情報と一致するかを判断し、一致すると判断された視聴者ＩＤ、あるいは一致度が最も高いと判断された視聴者ＩＤを出力することで行う。
【００８７】
例えば、視聴者同定部２０１は、視聴者が視聴者入力受付部１０３を介して生年月日「１９７１年２月１日」を入力すると、視聴者属性情報保存部４０３を参照し、一致する生年月日をもつ視聴者ＩＤ「Ｕｓｅｒ２」を出力し、視聴者はＵｓｅｒ２であると同定する。他の例として、視聴者同定部２０１は、視聴者コンテンツからテンプレートマッチング法などの画像処理技術により顔画像を切り出し、視聴者属性情報保存部４０３に保存されている顔画像との特徴量が一致すると判断された視聴者ＩＤ、または一致度が最も高いと判断された顔画像をもつ視聴者ＩＤを出力し、視聴者と同定することもできる。
【００８８】
また、視聴対象コンテンツ視聴中に視聴者が増減した場合、視聴者同定部２０１は、その都度視聴者を同定する処理を実行し、同定した視聴者ＩＤを出力する。
【００８９】
なお、視聴者が入力する視聴者属性情報は、生年月日に限らず、性別又は年齢等であってもよい。さらに、一人の視聴者が同定されている場合は、「母」といったその視聴者との社会的関係性を入力してもよい。また、視聴者コンテンツの音声から声紋を取り出し、登録されている声紋と照合することで視聴者を同定してもよい。
【００９０】
なお、視聴者属性情報に登録されていない人物が視聴者に含まれる場合、同定することができないため、ゲストＩＤを出力する。
【００９１】
＜ヘッダー情報作成部２０２＞
ヘッダー情報作成部２０２は、視聴者コンテンツのヘッダー情報を作成する（Ｓ１０３）。具体的には、ヘッダー情報作成部２０２は、図５に示すように、視聴対象コンテンツ、視聴者コンテンツ、視聴日時、視聴開始時刻、視聴時間、視聴者同定部２０１で同定したコンテンツの視聴者、及び視聴者数等を含むヘッダー情報を作成する。
【００９２】
図５に示す例では、ヘッダー情報は、コンテンツの最小単位である写真１枚につき１つ作成される。コンテンツＡの写真Ａ１が視聴者によって１回目に視聴された場合、視聴者コンテンツには、Ａ１−１という識別番号が付与される。同様に、コンテンツ（写真）Ａｎがｍ回目に視聴された場合、視聴者コンテンツには、Ａｎ―ｍという識別番号が付与される。視聴時間については、写真Ａ１の視聴が終了した時に記録する。
【００９３】
また、視聴者同定部２０１で視聴者の増減が検出された場合には、その都度、最新の視聴者ＩＤが出力されるため、ヘッダー情報を図５の写真Ａ１０の例に示すように、随時更新する。
【００９４】
なお、ヘッダー情報には視聴者ＩＤが保存されるため、視聴者属性情報保存部４０３に保存されている視聴者属性情報を参照することができる。
【００９５】
＜メタ情報作成部２０３＞
メタ情報作成部２０３は、視聴対象コンテンツに対して、視聴者が示す反応を特徴量化することで、視聴者コンテンツのメタ情報を作成する（Ｓ１０４）。視聴対象コンテンツに対する視聴者の反応は、視聴者の行動又は態度等に表れる。このため、メタ情報作成部２０３は、視聴者コンテンツに基づいて、画像認識又は音声認識技術を用いて、視聴者の行動又は態度等を特徴量化することによって、メタ情報を作成する。
【００９６】
図６は、３名の視聴者（視聴者ＩＤはＵｓｅｒ１、Ｕｓｅｒ２、Ｕｓｅｒ３）が、コンテンツ再生装置１００で視聴対象コンテンツであるコンテンツＡを視聴する様子を示す図である。Ｕｓｅｒ１とＵｓｅｒ３とは、映像表示画面３０１の前方のソファに座り、Ｕｓｅｒ２は立った状態で、コンテンツＡを視聴しようとしている。
【００９７】
このとき、メタ情報作成部２０３は、図７Ａ及び図７Ｂに示す例のように、各視聴者ＩＤについて、視聴位置、姿勢、頭部の向き、視線位置（映像表示画面３０１上の位置である。「視点位置」ともいう）などの情報を、メタ情報として作成する。視聴位置は、上述の視聴者検出部１０で算出された値を記録する。姿勢は、視聴者の顔位置を検出し、視聴者属性情報の身体情報と照合することで、起立状態か座っている状態かを判定する。頭部の向きは、顔の目の位置から判断する。視線位置は、頭部の向きと瞳孔の位置とから画像処理により検出し、映像表示画面３０１上の位置を推定する。メタ情報の算出方法はこれらの例に限らず、他の方法を用いてもよい。
【００９８】
そして、上記の処理（Ｓ１００〜Ｓ１０４）で作成された視聴者コンテンツと、ヘッダー情報及びメタ情報とは、互いに対応付けられて視聴者情報保存部４０２に保存される（Ｓ１０５）。なお、図５に示されるヘッダー情報と、図７Ａ及び図７Ｂに示されるメタ情報とは、一例であって、それぞれ他の情報を含んでもよいことは言うまでもない。また、図５に示されるヘッダー情報の一部がメタ情報に含まれていてもよいし、図７Ａ及び図７Ｂに示されるメタ情報の一部がヘッダー情報に含まれていてもよい。
【００９９】
＜視聴者コンテンツ選択部２０４＞
視聴者コンテンツ選択部２０４は、視聴者情報保存部４０２に複数の視聴者コンテンツ（今回取得した視聴者コンテンツは除く）が保存されている場合、視聴対象コンテンツとともに表示するための視聴者コンテンツを、視聴者の行動又は態度等に合わせて適切なものを選択する（Ｓ１０６、Ｓ１０７）。そのために、上述の視聴者情報のうち、視聴者の属性、行動、態度等を表すヘッダー情報またはメタ情報（すなわち、視聴者情報）に基づいて、視聴者コンテンツを選択する。
【０１００】
ヘッダー情報には、視聴者の属性又は好み等が表されている。また、メタ情報には、視聴対象コンテンツに対する行動又は態度等の特徴が表されている。視聴者コンテンツが複数保存されている場合、視聴者は、視聴対象コンテンツとともに全ての視聴者コンテンツを一度に視聴することは現実的に困難であるため、視聴者にとって適切と予想される視聴者コンテンツを選択する必要がある。
【０１０１】
そこで、同じ属性又は同じ嗜好性をもつ視聴者が視聴した視聴者コンテンツを見ることで、視聴対象コンテンツの視聴時の様子を共感しやすく、娯楽性を高められると考えられる。このため、現在の視聴者と過去の視聴者との間で、属性又は視聴対象コンテンツに対する反応が一致する、または一致度が高い視聴者コンテンツを選択する例を用いて説明する。
【０１０２】
具体的には、現在の視聴者と過去の視聴者との間でヘッダー情報またはメタ情報を比較することで、視聴者間の属性又は嗜好性等の共通点の量を示す一致度が高い視聴者コンテンツを判定し、現在の視聴者にとって適切な視聴者コンテンツを選択する。あるいは、逆に、異なる属性、嗜好性をもつ視聴者が視聴した映像を見ることで、視聴対象コンテンツに対する新しい見方や観点を取り入れることができると考えられるため、一致度の低い視聴者コンテンツを選択してもよい。
【０１０３】
視聴者コンテンツ選択部２０４のさらに具体的な動作の例として、視聴者情報の一致度を算出し、一致度が最も高い視聴者コンテンツを選択する場合について説明する。
【０１０４】
例えば、３名の視聴者（視聴者ＩＤはＵｓeｒ１、Ｕｓｅｒ２、Ｕｓｅｒ３）が視聴対象コンテンツとしてのコンテンツＡを視聴し始める。コンテンツＡは既に５回視聴されており、視聴者情報保存部４０２には、図１０に示されるように、コンテンツＡが１回目に視聴された際の視聴者コンテンツＡ−１から５回目に視聴された際の視聴者コンテンツＡ―５までが保存されている。
【０１０５】
まず、視聴者コンテンツ選択部２０４は、視聴者情報の一致度を算出する（Ｓ１０６）。簡単のため、ヘッダー情報における視聴者ＩＤの一致度を算出する例とする。視聴者情報の一致度を、現在の視聴者と過去の視聴者との間で、視聴者情報が一致または等しい度合いと定義すると、視聴者ＩＤの一致度とは、現在の視聴者と過去の視聴者とで同じ視聴者が存在する人数の多さと定義できる。
【０１０６】
図１０に示すように、視聴者情報保存部４０２に保存されている視聴者情報のうちのヘッダー情報から、視聴者コンテンツＡ−１の視聴者ＩＤはＵｓｅｒ１，２，３である。同様に視聴者コンテンツＡ−２、Ａ−３、Ａ−４、Ａ−５の視聴者ＩＤはそれぞれＵｓｅｒ１，４、Ｕｓｅｒ２，３、Ｕｓｅｒ１，２，３，４、Ｕｓｅｒ２，５，６である。一方、現在の視聴者はＵｓｅｒ１，２，３の３名であるから、視聴者ＩＤの一致度は、視聴者コンテンツＡ−１では３名、視聴者コンテンツＡ−２では１名、視聴者コンテンツＡ−３では２名、視聴者コンテンツＡ−４では３名、視聴者コンテンツＡ−５では１名となる。従って、視聴者ＩＤの一致度が最も高いのは、視聴者コンテンツＡ−１及び視聴者コンテンツＡ−４となる。そこで、視聴者コンテンツ選択部２０４は、これらのうちの一方又は両方を、視聴者コンテンツとして選択する（Ｓ１０７）。
【０１０７】
但し、視聴者が視聴中に増減した場合、ヘッダー情報の視聴者ＩＤは更新されるため、視聴者ＩＤの一致度を算出して視聴者コンテンツを再選択することは可能である。しかしながら、それまで視聴していた視聴者にとって視聴者コンテンツが変わることは望ましいとは言えない。このため、再選択したい場合には、コンテンツ再生装置１００に対して視聴者コンテンツを再選択するように、視聴者が明示的に通知するのが望ましい。
【０１０８】
なお、視聴者ＩＤの一致度を算出したが、その他のヘッダー情報、あるいはメタ情報を用いて算出してもよい。
【０１０９】
なお、上述の例では、視聴者情報の一致度が最も高い視聴者コンテンツを選択したが、選択する視聴者コンテンツの数を初期値、または視聴者によって指定された値に従って、一致度が高い順に視聴者コンテンツを選択してもよい。
【０１１０】
例えば、図１０の例では、視聴者ＩＤの一致度が最も高いのは、視聴者コンテンツＡ−１と視聴者コンテンツＡ−４である。選択する視聴者コンテンツの選択数が１の場合、さらに視聴者ＩＤが一致しない数も求めて一致度の精度を高める。具体的には、視聴者コンテンツＡ−１は、視聴者ＩＤが全員一致する。一方、視聴者コンテンツＡ−４は、１名（Ｕｓｅｒ４）が一致しない。つまり、視聴者コンテンツＡ−１の一致度の方がより高いと判断し、視聴者コンテンツＡ−１を選択する。また、その他の視聴者情報の一致度について、視線位置又は頭部の動きなどのように時間経過とともに情報が変化し、更新される場合は、ある時間内の平均又は標準偏差などの統計値を算出し、それを視聴者情報として比較することで一致度を算出すればよい。
【０１１１】
なお、視聴者コンテンツを選択する数は一つを例としたが、二つ以上であってもよい。
【０１１２】
なお、視聴者情報の一致度を一つの指標（視聴者ＩＤ）から算出した例を示したが、複数の指標から一致度を算出してもよい。この場合、視聴者情報ｎの一致度をｉ（ｎ）、視聴者情報の重み係数をａｎとおくと、式１で複数の視聴者情報から一致度を算出することができる。また、重み係数ａｎのバランスを調整することにより、どの視聴者情報の一致度を重視して視聴者コンテンツを選択するのかを制御できる。
【０１１３】
【数１】
0005474062.tif 000002
【０１１４】
＜表示制御部２０５＞
表示制御部２０５は、コンテンツ保存部４０１から取得した視聴対象コンテンツと、視聴者コンテンツ選択部２０４で選択された視聴者コンテンツとを、コンテンツ再生部３０で再生するための表示パラメータを設定する（Ｓ１０８）。表示パラメータとは、視聴対象コンテンツと視聴者コンテンツとをコンテンツ再生部３０で再生する位置、サイズ、時間等の情報を含む。また、視聴対象コンテンツと視聴者コンテンツとを映像表示画面３０１上に重ねて表示す場合はそれらの前後関係、透過性などの情報を含んでもよい。さらに、視聴者コンテンツの音声を音声出力スピーカ３０２から出力するか否か、出力する場合はその音量の情報を含んでもよい。
【０１１５】
図１１Ａ〜図１１Ｃは、視聴対象コンテンツと視聴者コンテンツとを映像表示画面３０１に表示した場合の位置関係の一例を説明する図である。図１１Ａは、視聴対象コンテンツと二つの視聴者コンテンツとを、互いに重ならないように並べて表示する例である。また、図１１Ｂは、視聴対象コンテンツ上に三つの視聴者コンテンツを重ねて表示する例である。さらに、図１１Ｃは、視聴者コンテンツ上に視聴対象コンテンツを重ねて表示する例である。
【０１１６】
映像表示画面３０１に表示される視聴者コンテンツの数は、視聴者が視聴者入力受付部１０３を介して任意に変更することができる。
【０１１７】
＜コンテンツ再生部３０＞
コンテンツ再生部３０は、表示制御装置２３で設定された表示パラメータに従って、視聴対象コンテンツおよび視聴者コンテンツに含まれる映像データを映像表示画面３０１に表示し、音声データを音声出力スピーカ３０２に出力する（Ｓ１０９）。なお、上述の実施の形態１及び後述する実施の形態２〜５において、視聴対象コンテンツと視聴者コンテンツとは並行して再生される。しかしながら、視聴者コンテンツを選択するために必要となる視聴者情報を取得する期間は、視聴対象コンテンツのみが再生されるので、視聴者コンテンツの再生開始は少し遅れることになる。
【０１１８】
＜効果＞
かかる構成によれば、同じ視聴対象コンテンツを視聴した際に取得された過去の視聴者コンテンツの中から、視聴者情報又はコンテンツメタ情報の一致度に基づいて視聴者コンテンツを選択する。これにより、視聴者の属性、視聴対象コンテンツの見方又は嗜好性といった特徴などに応じて視聴者コンテンツを優先的に選択し、表示することができる。また、視聴者の増減に応じて視聴者情報の一致度を更新し、視聴者の変化に対応して視聴者コンテンツを選択することができる。
【０１１９】
（実施の形態２）
本発明の実施の形態２に係るコンテンツ再生装置２００について説明する。
【０１２０】
実施の形態２に係るコンテンツ再生装置２００は、視聴対象コンテンツ上に視聴者コンテンツを重ねて表示する場合において、視聴者の視線位置と視聴位置とに基づいて、視聴者コンテンツの表示サイズと表示位置とを決定する。より具体的には、コンテンツ再生部は、視聴対象コンテンツ及び視聴者コンテンツに含まれる画像データを表示する表示画面を含む。コンテンツ再生装置は、さらに、視聴対象コンテンツを表示画面の全域に表示させ、視聴者コンテンツを視聴対象コンテンツの一部に重畳するように表示させる表示制御部を備える。表示制御部は、表示画面上において、第１の視聴者が注目している領域の外側の領域である非注目領域を推定する非注目領域推定部と、表示画面上において、第１の視聴者の有効視野領域を推定する有効視野領域推定部とを備える。そして、表示制御部は、非注目領域内で、且つ有効視野領域内に視聴対象コンテンツを表示させる。
【０１２１】
図１３は、本発明の実施の形態２に係るコンテンツ再生装置２００の構成を示すブロック図である。実施の形態２に係るコンテンツ再生装置２００は、実施の形態１に係るコンテンツ再生装置１００とほぼ同様の構成を備えているため、同様の機能を有する構成要素については、同一の符号を用いて詳細説明を省略する。
【０１２２】
＜構成＞
コンテンツ再生装置２００は、視聴者検出部１０と、記憶部４０と、視聴者コンテンツ選択部２０４と、表示制御部２０５と、コンテンツ再生部３０とを備える。このうち、表示制御部２０５以外の構成要素は、実施の形態１と同様の機能を有するため説明を省略する。
【０１２３】
表示制御部２０５は、非注目領域推定部２０６と、有効視野領域推定部２０７と、視聴者コンテンツ表示推奨領域決定部２０８とを備える。非注目領域推定部２０６は、視聴者情報に基づき、現在の各視聴者の視線位置又はその遷移から注目領域（非注目領域）を推定する。有効視野領域推定部２０７は、視聴者情報に基づいて、現在の各視聴者の有効視野領域を推定する。視聴者コンテンツ表示推奨領域決定部２０８は、全視聴者にとって視聴者コンテンツを表示するのに適切な映像表示画面３０１上の表示領域を決定する。
【０１２４】
さらに、表示制御部２０５は、表示サイズ算出部２０９と、表示位置算出部２１０とを備える。表示サイズ算出部２０９は、視聴者コンテンツ表示推奨領域決定部２０８で決定された表示領域上における視聴者コンテンツの表示サイズを算出する。表示位置算出部２１０は、視聴者コンテンツ表示推奨領域決定部２０８で決定された表示領域上における視聴者コンテンツの表示位置を算出する。そして、表示制御部２０５は、算出された表示サイズ及び表示位置等を含むパラメータに従って視聴者コンテンツと視聴対象コンテンツとを、コンテンツ再生部３０に出力する。
【０１２５】
図６を用いて、視聴者Ｕｓｅｒ１、Ｕｓｅｒ２、Ｕｓｅｒ３の３名がコンテンツを視聴する場面を例として、表示制御部２０５の動作を詳しく説明する。
【０１２６】
視聴者コンテンツ取得部として動作する視聴者撮影カメラ（撮像部）１０１は、現在、コンテンツ再生装置２００で視聴対象コンテンツを視聴している第１の視聴者を撮影し、当該撮像した画像を視聴者コンテンツとして出力する。視聴者同定部２０１は、実施の形態１と同じ動作により、視聴者ＩＤがＵｓｅｒ１、Ｕｓｅｒ２、Ｕｓｅｒ３の３名の視聴者を同定する。視聴者の視聴位置は、実施の形態１と同様の方法で算出され、メタ情報として視聴者情報保存部４０２に保存される。視聴者情報取得部として動作するメタ情報作成部２０３は、視聴者撮影カメラ１０１で撮影された画像から第１の視聴者の視点位置を特定するための情報を抽出する。
【０１２７】
＜視聴者コンテンツ選択部２０４＞
視聴者コンテンツ選択部２０４は、視聴者入力受付部１０３からの入力、あるいは、所定ルール（例えば、最新の視聴者コンテンツを選択する）に従って視聴者コンテンツを選択する。または、実施の形態１と同様に、視聴者情報の一致度に基づいて視聴者コンテンツを選択する。
【０１２８】
＜表示制御部２０５＞
表示制御部２０５は、視聴者の行動又は態度等に応じて、視聴対象コンテンツと視聴者コンテンツとを、視聴者にとって見やすく表示するために、視聴者コンテンツ選択部２０４で選択された視聴者コンテンツの表示パラメータを、ヘッダー情報作成部２０２で作成されたヘッダー情報またはメタ情報作成部２０３で作成されたメタ情報（すなわち、現在の視聴者の視聴者情報）に基づいて算出する。一例として、メタ情報のうち視聴者の視線位置に基づいて、表示パラメータを算出する方法について説明する。
【０１２９】
例えば、図１１Ａに示す表示例では、視聴者コンテンツを視聴対象コンテンツ上に重ねて表示していないため、それぞれの画面の全てを見ることができる。一方、図１１Ｂ及び図１１Ｃに示す表示例では、視聴者コンテンツと視聴対象コンテンツとを重ねて表示するため、表示制御部２０５は、視聴対象コンテンツと視聴者コンテンツとの両方を見やすく表示するために、視聴者の視線位置又はその遷移に基づいて、表示パラメータを算出する。
【０１３０】
まず、表示制御部２０５は、視聴対象コンテンツを見やすく表示するために、視聴対象コンテンツにおいて視聴者が注目していない領域（以降ではこれを非注目領域と呼ぶ）を推定し、当該非注目領域を視聴者コンテンツの表示対象領域とする。特に映像表示画面３０１が非常に大きい場合、表示制御部２０５は、さらに視聴者の有効視野領域を推定し、非注目領域と有効視野領域との共通部分を視聴者コンテンツの表示対象領域としてもよい。
【０１３１】
これを実現するために、表示制御部２０５は、視聴者情報のメタ情報から視聴者の視聴位置と頭部の向きとを抽出し、（１）コンテンツ上で視聴者が注目していない「非注目領域」を推定し、（２）視聴者の「有効視野領域」を推定し、（３）視聴者コンテンツ表示推奨領域を決定し、（４）視聴者コンテンツの表示パラメータ（表示サイズ、表示位置）を算出する。
【０１３２】
以下では、図１４Ａ〜図１９を参照して、実施の形態２に係るコンテンツ再生装置２００の動作について説明する。なお、図１９のＳ２００〜Ｓ２０６までの各処理は、図１３のＳ１００〜Ｓ１０７の各処理に対応するので、説明は省略する。但し、図１９のＳ２０６では、一致度以外のパラメータに基づいて視聴者コンテンツを選択してもよい。
【０１３３】
（１）非注目領域の推定
非注目領域推定部２０６は、現在、視聴対象コンテンツを視聴している視聴者の非注目領域を推定する（Ｓ２０７）。非注目領域とは、視聴対象コンテンツに対してどの視聴者も注目していない領域であり、各視聴者が注目する領域である注目領域から推定する。
【０１３４】
より具体的には、視聴者情報は、映像表示画面３０１上における第１の視聴者の視点位置を特定するための情報を含む。そして、非注目領域推定部２０６は、所定時間内において、視聴者情報で特定される第１の視聴者の視点が、予め定められた停留時間以上停留した映像表示画面３０１上の位置を全て含む所定の領域の外側の領域を、非注目領域と推定する。
【０１３５】
図１４Ａ〜図１４Ｃ、および図１５に示す例を用いて、非注目領域の推定方法の一例を説明する。
【０１３６】
メタ情報作成部２０３は、視聴者コンテンツから画像処理によって視聴者の顔、および目の領域を切り出して、眼球の向きを検出し、視聴者の視線位置をリアルタイムで推定している。
【０１３７】
視線位置、および視線位置から視聴者の注目領域を推定する方法は様々にあり、一例として所定時間における視線位置の遷移と停留とに基づき、各視聴者の注目領域を推定する方法を図１５に示す。
【０１３８】
映像表示画面３０１上において、ある視聴者の視線位置が予め定められた停留時間（ｘ秒間）以上停留した位置を注目点として、所定時間（Ｔ秒間）に７箇所の注目点が検出されたとする。任意の注目点を直線で結んでできる多角形のうち、全ての注目点を含み、かつ面積が最大となる多角形を作る（図１５では五角形）。さらに多角形の外周に距離ｙを足してできる多角形を視聴者の注目領域として推定する。なお、ｙは視線位置の推定誤差を考慮するためである。
【０１３９】
この例での視聴者はＵｓｅｒ１、Ｕｓｅｒ２、Ｕｓｅｒ３の３名であり、全ての視聴者について所定時間（Ｔ秒間）での注目領域が図１４Ａに示すように推定された場合、非注目領域は全視聴者の注目領域の和集合を基に式２を用いて推定する。なお、式２において、表示領域は映像表示画面３０１の表示領域を、Ｎは視聴者数を、「＋」は論理和を示す。
【０１４０】
【数２】
0005474062.tif 000003
【０１４１】
なお、所定時間Ｔの長さは、任意に定めてよい。例えば、視線位置の遷移回数が所定の値以下に落ち着くまで、すなわち視線位置が安定するまでの時間の平均値を用いてもよい。この時間は、視聴者情報保存部４０２に保存された同一の視聴対象コンテンツの視聴時に推定された視線位置の情報から算出してもよい。
【０１４２】
また、停留時間ｘの長さも任意に定めてよく、例えば、ある一注目点での平均停留時間から算出してもよい。
【０１４３】
なお、視線位置に基づく注目領域の推定方法は様々な方法が存在し、この方法に限らず、他の方法を用いてもよい。
【０１４４】
（２）有効視野領域の推定
有効視野領域推定部２０７は、視聴者の映像表示画面３０１上での有効視野領域を推定する（Ｓ２０８）。有効視野領域とは、視聴者が頭部を動かすことなく目で認識できる範囲であり、心理状態によって変化すると言われているが、一般的には、視点を中心とする水平方向に約３０度、垂直方向に約２０度の範囲内とされている。
【０１４５】
より具体的には、視聴者情報は、映像表示画面３０１上における第１の視聴者の視点位置を特定するための情報を含む。そして、有効視野領域推定部２０７は、視聴者情報で特定される第１の視聴者の視点位置を中心とする予め定められた領域を、有効視野領域と推定する。
【０１４６】
視聴者と映像表示画面３０１との距離が一定の場合、映像表示画面３０１の表示領域が大きいほど、有効視野領域でない領域も大きくなる。有効視野領域の外に視聴者コンテンツを表示すると、視聴者は表示されたこと自体に気づかない可能性が高い。また、気づいたとしても、視聴者は頭部又は上半身を動かさなければならず、姿勢変化量又は移動量が増加して視聴者の負担が増加する。このため、可能な限り有効視野領域の内側に表示することが望ましい。
【０１４７】
有効視野領域は、視聴者の位置と頭部の向きとから推定することができる。これらの情報はメタ情報作成部２０３で作成されているため、視聴者情報保存部４０２を参照して取得するか、又はメタ情報作成部２０３から直接取得することができる。例えば、図１６に示すように、視聴者の位置、視聴者と映像表示画面３０１との距離、頭部の向き、予め定められた有効視野の範囲から、映像表示画面３０１上における各視聴者の有効視野領域を推定する。
【０１４８】
各視聴者の有効視野領域が図１７に示すように推定された場合、この視聴者グループの有効視野領域を全視聴者の有効視野領域の積集合として、式３を用いて推定し、図１４Ｂに示す例のような領域を得る。なお、式３において、Ｎは視聴者数を、「×」は論理積を示す。
【０１４９】
【数３】
0005474062.tif 000004
【０１５０】
（３）視聴者コンテンツ表示推奨領域の決定
視聴者コンテンツ表示推奨領域決定部２０８は、視聴対象コンテンツの非注目領域内で、かつ可能な限り有効視野領域内となる領域を、視聴者コンテンツを表示するのに適した領域である視聴者コンテンツ表示推奨領域（以下「表示推奨領域」と表記する）とする（Ｓ２０９）。図１４Ｃに示すように、視聴者コンテンツの表示推奨領域は、式２で推定された非注目領域と、式３で推定された有効視野領域とに基づいて、式４を用いて決定する。なお、式４において、「×」は論理積を表す。
【０１５１】
【数４】
0005474062.tif 000005
【０１５２】
なお、図１３の構成図には示していないが、非注目領域推定部２０６、有効視野領域推定部２０７、視聴者コンテンツ表示推奨領域決定部２０８で推定または決定された各種情報は、視聴者情報に基づいて求められるため、視聴者情報として視聴者情報保存部４０２に保存してもよい。
【０１５３】
（４）視聴者コンテンツの表示パラメータの算出
視聴者コンテンツの表示パラメータのうち、表示サイズを表示サイズ算出部２０９で、表示位置を表示位置算出部２１０で算出する（Ｓ２１０）。
【０１５４】
図１８は、視聴対象コンテンツ上に視聴者コンテンツを重ねて表示する一例を示す図である。視聴者コンテンツ選択部２０４で、二つの視聴者コンテンツＢ―１、Ｂ―２が選択されたとする。次に視聴者コンテンツの表示優先度を決定する。表示優先度の高い視聴者コンテンツから順に見やすい位置又は大きさに表示することが目的である。表示優先度は、視聴者が任意に決定してもよく、実施の形態１のように視聴者情報に基づいて決定してもよい。仮に、視聴者コンテンツの表示優先度が視聴者コンテンツＢ−１、Ｂ−２の順に決定されたとすれば、視聴者コンテンツＢ−１を最も見やすい位置と大きさで表示し、視聴者コンテンツＢ−２の表示位置を次に決定する。
【０１５５】
つまり、表示制御部２０５は、視聴者コンテンツ選択部２０４で複数の視聴者コンテンツが選択された場合において、複数の視聴者コンテンツのうち、一致度の高い視聴者コンテンツから順に表示位置及び表示サイズを決定する。
【０１５６】
表示サイズ算出部２０９は、図１８に示すように、視聴者コンテンツ表示推奨領域決定部２０８で決定された表示推奨領域において、視聴者コンテンツＢ−１が映像の縦横比を変えずに最大の面積で表示できる領域の大きさを算出する。表示位置算出部２１０は、その領域の位置座標を算出する。次に、視聴者コンテンツ表示推奨領域から視聴者コンテンツＢ−１が表示される領域を除く領域において、視聴者コンテンツＢ−１と同様に視聴者コンテンツＢ−２の表示サイズおよび表示位置を算出する。
【０１５７】
なお、視聴者コンテンツが三つ以上の場合においても同様の手順で表示サイズおよび表示位置を算出する。この時、表示推奨領域に視聴者コンテンツを表示する領域が視聴者にとって見にくいサイズと判断された場合、有効視野領域の外側の領域に表示してもよい。
【０１５８】
その他の表示パラメータ（表示時間、コンテンツとの前後関係、透過性、音量など）は、予め設定された初期値、あるいは視聴者が視聴者入力受付部１０３を介して任意に入力する値に基づいて決定してもよい。
【０１５９】
なお、視線位置の推定が正しくない場合が生じる可能性を考慮し、算出された表示サイズと表示位置とは、視聴者コンテンツを表示した後、視聴者が視聴者入力受付部１０３を介して任意に変更することができるようにしてもよい。
【０１６０】
以上の動作によって、視聴者情報に基づいて、視聴者コンテンツが視聴者にとって見やすく表示されるように、表示パラメータを算出することができる。
【０１６１】
＜出力装置＞
コンテンツ再生部３０である映像表示画面３０１と音声出力スピーカ３０２とは、算出された表示パラメータに従って、視聴対象コンテンツおよび視聴者コンテンツを再生する（Ｓ２１１）。
【０１６２】
なお、画像処理による視線位置の検出には様々な手法があり、本手法に限らない。
【０１６３】
なお、注目領域の算出手法は、本方法に限らない。
【０１６４】
また、表示制御部２０５では、表示推奨領域内に視聴者コンテンツを表示したが、視聴者コンテンツの表示最小面積を予め設定し、表示サイズ算出部２０９で表示最小面積を下回る表示サイズが算出された場合、有効視野領域推定部２０７で推定された有効視野領域の外側の領域に視聴者コンテンツの一部を重ねて表示してもよい。
【０１６５】
＜効果＞
かかる構成によれば、視聴者情報に基づき注目領域を推定することで、視聴者が注目している領域を妨げず、かつ視聴位置を考慮した位置に視聴者コンテンツを表示することができる。また、視聴者にとって、視聴対象コンテンツとともに視聴者コンテンツを見やすい位置に表示することができる。
【０１６６】
（実施の形態３）
本発明の実施の形態３に係るコンテンツ再生装置３００について説明する。
【０１６７】
実施の形態３に係るコンテンツ再生装置３００は、視聴者情報に基づいて視聴対象コンテンツとともに表示する視聴者コンテンツの表示開始時間を決定する。より具体的には、コンテンツ再生部は、視聴対象コンテンツ及び視聴者コンテンツに含まれる画像データを表示する表示画面を含む。コンテンツ再生装置３００は、さらに、視聴対象コンテンツを表示画面に表示させた後、所定の時間経過してから視聴者コンテンツを表示画面に表示させる表示制御部を備える。そして、表示制御部は、表示画面上において、複数の第１の視聴者それぞれが注目している領域である注目領域を推定する注目領域推定部と、注目領域推定部で推定された第１の視聴者それぞれの注目領域の一致度である注目領域一致度を算出する注目領域一致度算出部と、注目領域一致度算出部で算出された注目領域一致度が高いほど、所定の時間を長くする表示時間制御部とを備える。
【０１６８】
図２０は、本発明の実施の形態３に係るコンテンツ再生装置３００の構成を示すブロック図である。なお、実施の形態３に係るコンテンツ再生装置３００は、実施の形態１および実施の形態２に係るコンテンツ再生装置１００、２００とほぼ同様の構成を備えているため、同様の機能を有する構成要素については、同一の符号を用いて詳細説明を省略する。
【０１６９】
＜構成＞
実施の形態３に係るコンテンツ再生装置３００は、視聴者検出部１０と、記憶部４０と、視聴者コンテンツ選択部２０４と、表示制御部２０５と、コンテンツ再生部３０とを備える。このうち、表示制御部２０５以外の構成要素は、実施の形態１、２と同様の機能を有するため説明を省略する。
【０１７０】
表示制御部２０５は、注目領域推定部２１１と、注目領域一致度算出部２１２とを備える。注目領域推定部２１１は、視聴者情報に基づき視聴者の視線位置又はその遷移から注目領域を推定する。注目領域一致度算出部２１２は、現在の全視聴者の注目領域の一致度を推定する。
【０１７１】
さらに表示制御部２０５は、表示サイズ算出部２０９と、表示位置算出部２１０と、表示時間制御部２１３とを備える。表示時間制御部２１３は、注目領域一致度算出部２１２で算出した注目領域の一致度に基づき、表示パラメータのうち視聴者コンテンツの表示開始時間を算出する。表示サイズ算出部２０９及び表示位置算出部２１０の動作は、実施の形態２と共通するので、説明は省略する。そして、表示制御部２０５は、算出された表示パラメータに従って視聴者コンテンツと視聴対象コンテンツとを、コンテンツ再生部３０に出力する。
【０１７２】
視聴者同定部２０１は、実施の形態１と同じ動作により視聴者を同定する。ヘッダー情報作成部２０２でヘッダー情報を、メタ情報作成部２０３でメタ情報を作成し、視聴者コンテンツとともに視聴者情報を視聴者情報保存部４０２に保存する。
【０１７３】
視聴者コンテンツ選択部２０４は、視聴者入力受付部１０３からの入力、あるいは、所定ルール（例えば、最新の視聴者コンテンツを選択する）に従って視聴者コンテンツを選択する。または、実施の形態１と同様に、視聴者情報の一致度に基づいて視聴者コンテンツを選択する。
【０１７４】
＜表示制御部２０５＞
表示制御部２０５は、視聴者の行動又は態度等に応じて、視聴対象コンテンツと視聴者コンテンツとを見やすく表示するために、実施の形態２と同様に、視聴者コンテンツ選択部２０４で選択された視聴者コンテンツの表示パラメータを、ヘッダー情報またはメタ情報に基づいて算出する。実施の形態３では、表示パラメータのうち、特に視聴者コンテンツの表示開始時間を算出する方法ついて、詳しく説明する。
【０１７５】
視聴者コンテンツを表示する目的の一つは、視聴者コンテンツを通じて過去の視聴者から視聴対象コンテンツに関する話題を提供するためである。そして、それによって現在の視聴者の会話を促し、視聴対象コンテンツをより楽しく視聴させることである。そのためには、視聴者に視聴者コンテンツを表示するタイミングも重要である。そこで、実施の形態３では、視聴対象コンテンツに対する注目領域が視聴者間で一致する度合いを算出し、視聴者コンテンツを表示する適切なタイミングを算出する。
【０１７６】
視聴対象コンテンツに対する注目領域が現在の視聴者の間で一致する傾向にある場合、その注目領域に対して会話が生じる可能性が高いと判断し、視聴者コンテンツの表示タイミングを遅らせる。逆に注目領域が一致しない傾向にある場合、注目対象が異なり共通性の高い会話が生じる可能性が低いと判断し、視聴者コンテンツの表示タイミングを早める。
【０１７７】
これを実現するために、視聴者情報に基づいて、（１）視聴対象コンテンツ上で視聴者が注目する注目領域を推定し、（２）視聴者間の注目領域一致度を算出し、（３）視聴者コンテンツの表示パラメータ（表示開始時間）を算出する。
【０１７８】
以下、図２１Ａ〜図２４を参照して、実施の形態３に係るコンテンツ再生装置３００の動作について説明する。なお、図２４のＳ３００〜Ｓ３０６の各処理は、図１９のＳ２００〜Ｓ２０６の各処理に対応するので、説明は省略する。
【０１７９】
（１）注目領域の推定
注目領域推定部２１１は、現在の各視聴者の注目領域を推定する（Ｓ３０７）。注目領域とは、視聴対象コンテンツに対して視聴者が注目している領域である。実施の形態２の非注目領域推定部２０６では、非注目領域を推定するために、まず注目領域を推定した。これと同様の方法により、視聴者の注目領域を推定すればよい。
【０１８０】
なお、注目領域の推定方法は本方法に限らず、他の方法を用いてもよい。
【０１８１】
（２）注目領域一致度の算出
注目領域一致度算出部２１２は、注目領域推定部２１１で推定された各視聴者の注目領域が一致する度合いを算出する（Ｓ３０８）。注目領域一致度をＭとすると、少なくとも２人以上の視聴者の注目領域が少しでも重なる注目領域について、それぞれ一致度を算出する。
【０１８２】
注目領域一致度は、注目領域が一致する面積、その領域が視聴される時間、さらにその領域に注目する人数の各値が大きいほど、視聴対象コンテンツに対する視聴者間での注目度合いが一致する傾向が高いと判断できる。そこで、このような場合を、注目領域一致度の値が高いと定義する。
【０１８３】
つまり、注目領域一致度算出部２１２は、２以上の第１の視聴者の注目領域が互いに重なり合っている領域それぞれについて、重なり合っている領域の面積、重なり合っている時間の長さ、及び当該領域に注目している第１の視聴者の人数の積に基づいて、注目領域一致度を算出する。
【０１８４】
まず、注目領域の面積を算出する。
【０１８５】
図２１Ａは、視聴者グループＡがコンテンツＣの写真Ｃ１（図３Ｂ参照）を視聴する例を示す図である。ＳＡ（１）は、Ｕｓｅｒ１、２、３の３名が注目する領域の面積を示す。ＳＡ（２）〜ＳＡ（５）は、それぞれ３人のうち２人が注目する領域の面積を示す。但し、定義を参照すれば明らかなように、１人のみが注目する領域は、注目領域一致度算出の対象外となる。注目領域の面積ＳＡ（ｉ）（ｉ＝１〜５）が、ｓを定数として、ＳＡ（１）＝４ｓ、ＳＡ（２）＝２ｓ、ＳＡ（３）＝ＳＡ（４）＝ｓ、ＳＡ（５）＝２ｓのように推定されたとする。
【０１８６】
次に、注目領域ＳＡ（ｉ）（ｉ＝１〜５）が視聴者に注目された時間を測定し、各注目領域について、視聴時間の積ＴＡ（ｉ）（ｉ＝１〜５）が、ｔを定数として、ＴＡ（１）＝ＴＡ（２）＝ＴＡ（３）＝ＴＡ（４）＝ＴＡ（５）＝ｔのように算出されたとする。
【０１８７】
次に、２人以上の注目領域が重なるｊ個の注目領域について、各注目領域ｉの一致度Ｍ（ｉ）は、一致する注目領域の面積Ｓ（ｉ）と、その注目領域が視聴者によって注目された時間の積Ｔ（ｉ）と、その領域に注目する人数Ｎ（ｉ）との積を、全視聴者数ｎで除算して算出する。そして、所定時間Ｔ秒間における注目領域の一致度Ｍは、ｊ個の注目領域一致度Ｍ（ｉ）の和として算出する。この考えに基づき注目領域一致度Ｍを、式５で定義する。
【０１８８】
【数５】
0005474062.tif 000006
【０１８９】
視聴者グループＡの注目領域一致度ＭＡは、ＳＡ（ｉ）、ＴＡ（ｉ）（ｉ＝１〜５）の値を式５に当てはめると、式６のように算出される。
【０１９０】
【数６】
0005474062.tif 000007
【０１９１】
図２１Ｂは、視聴者Ｂ（Ｕｓｅｒ４、５、６）が視聴者グループＡとは別の場面でコンテンツＣに含まれる写真Ｃ１を視聴する例を示す図である。
【０１９２】
視聴者グループＢについて、ＳＢ（１）は、Ｕｓｅｒ４、５、６の３名が注目する領域の面積を示す。ＳＢ（２）〜ＳＡ（４）は、それぞれ３人のうち２人が注目する領域の面積を示す。注目領域の面積ＳＢ（ｉ）（i＝１〜４）が、視聴者グループＡと同様に、ｓを定数として、ＳＢ（１）＝ｓ、ＳＢ（２）＝ＳＢ（３）＝ＳＢ（４）＝２ｓのように推定されたとする。
【０１９３】
次に、注目領域ＳＢ（ｉ）（ｉ＝１〜４）が視聴者に注目された時間を測定し、各注目領域について視聴時間の積ＴＢ（ｉ）（ｉ＝１〜４）が、ｔを定数として、ＴＢ（１）＝ＴＢ（２）＝ＴＢ（３）＝ＴＢ（４）＝ｔのように算出されたとする。
【０１９４】
視聴者グループＢの注目領域一致度ＭＢは、ＳＡ（ｉ）、ＴＡ（ｉ）（ｉ＝１〜５）の値を式５に当てはめると、式７のように算出される。
【０１９５】
【数７】
0005474062.tif 000008
【０１９６】
上記の結果、視聴者グループＡは、視聴者グループＢより視聴対象コンテンツに対する注目領域一致度が高い値（ＭＡ＞ＭＢ）となるので、視聴者グループＡの方が視聴者グループＢより同じ領域に注目している度合いが高いと判断できる。
【０１９７】
なお、注目領域一致度は、上述の例では、一致する注目領域の面積と、その視聴時間と、それに注目する視聴者数とに比例した値を基に算出したが、この方法に限らない。例えば、各パラメータの重みを変えて、注目領域の面積の二乗など任意の累乗に比例して算出してもよい。
【０１９８】
（３）視聴者コンテンツの表示パラメータの算出
表示パラメータのうち、表示サイズを表示サイズ算出部２０９で、表示位置を表示位置算出部２１０で、表示時間を表示時間制御部２１３でそれぞれ算出する（Ｓ３０９）。
【０１９９】
視聴者コンテンツの表示サイズおよび表示位置は、実施の形態１と同様に、視聴者が視聴者入力受付部１０３を介して任意に設定してもよく、表示する視聴者コンテンツの数に応じて設定した初期値に従ってもよい。あるいは、図２０の構成図には示していないが、実施の形態２と同様に、視聴者情報に基づいて算出してもよい。いずれかの方法によって、選択された視聴者コンテンツＣ１−１の表示サイズと表示位置とが図２２Ａ及び図２２Ｂに示す例のように算出されたとする。
【０２００】
表示時間制御部２１３は、注目領域一致度算出部２１２で算出された注目領域一致度に基づいて、視聴対象コンテンツ表示後を基準とした視聴者コンテンツの表示開始時間を算出する。
【０２０１】
コンテンツの写真Ｃ１について、視聴者グループＡ、Ｂの注目領域一致度はそれぞれ式６でＭＡ、式７でＭＢと算出された。注目領域一致度が高い場合は、一致する注目領域について視聴者に会話する時間を長く与えるために、視聴者コンテンツの表示を遅くする。逆に注目領域一致度が低い場合は、視聴者に視聴者コンテンツを話題として提供するために、視聴者コンテンツの表示を早くする。
【０２０２】
この考えに基づいて、視聴者コンテンツＣｉの表示後に視聴者コンテンツを表示するまでの時間、すなわち視聴者コンテンツ表示開始時間Ｔ（Ｃｉ）を、式８で定義する。なお、Ｃｉは視聴対象コンテンツＣを構成する最小単位を示す。式８において、視聴対象コンテンツＣは複数の写真で構成されるスライドショーであり、Ｃｉは１枚の写真である。また、Ｔは注目領域を推定するために必要となる時間であり、α、βは予め定められた定数である。
【０２０３】
【数８】
0005474062.tif 000009
【０２０４】
式８のＴは、実施の形態３では、実施の形態２で説明したように、視聴者の視線位置を所定時間（Ｔ秒間）継続して監視し、停留時間（ｘ秒間）以上視線位置が停留した位置を注目点として、注目点の集合を基に注目領域を推定する。このため、少なくとも注目領域を推定するために必要な時間Ｔ秒間だけ視聴者コンテンツの表示が遅れることを表す。
【０２０５】
また、式６により、視聴者グループＡの注目領域一致度はＭＡ（Ｃ１）＝ａｂｓｔ２（４ｔ＋４）と算出され、式７により視聴者グループＢの注目領域一致度はＭＢ（Ｃ１）＝ａｂｓｔ２（ｔ＋４）と算出されている。
【０２０６】
視聴者グループＡ、視聴者グループＢの視聴対象コンテンツＣに含まれる写真Ｃ１に対する視聴者コンテンツ表示開始時間ＴＡ(Ｃ１)、ＴＢ（Ｃ１）は、それぞれ式９及び式１０で算出される。
【０２０７】
【数９】
0005474062.tif 000010
【０２０８】
【数１０】
0005474062.tif 000011
【０２０９】
ＭＡ（Ｃ１）＞ＭＢ（Ｃ１）であるから、ＴＡ（Ｃ１）＞ＴＢ（Ｃ１）となる。その結果、図２３Ａ及び図２３Ｂに示すように、注目領域一致度が高い視聴者グループＡの方が、視聴者グループＢに比べて、視聴者コンテンツＣ１−１が遅く表示されることになる。
【０２１０】
なお、上記の例では、表示開始時間の算出を、視聴者の視線位置に基づく注目領域一致度から算出したが、視聴者ＩＤ、コンテンツの視聴時間、あるいは視聴者の発話時間の長さや声の大きさ、などその他の視聴者情報から算出してもよい。さらに、視聴者情報に加えて、図２０の構成図には示していないが、コンテンツ撮影日時からの経過時間など、コンテンツメタ情報を考慮してもよい。
【０２１１】
その他の視聴者コンテンツの表示パラメータ（視聴対象コンテンツとの前後関係、透過性、音量など）は、予め設定された初期値、あるいは視聴者が視聴者入力受付部１０３を介して任意に入力する値に基づいて決定してもよい。
【０２１２】
なお、視線位置の推定が正しくない場合が生じる可能性を考慮し、算出された表示サイズと表示位置とは、視聴者コンテンツを表示した後、視聴者が視聴者入力受付部１０３を介して任意に変更することができるようにしてもよい。
【０２１３】
＜出力装置＞
コンテンツ再生部３０である映像表示画面３０１と音声出力スピーカ３０２とは、算出された表示パラメータに従って、視聴対象コンテンツおよび視聴者コンテンツを再生する（Ｓ３１０）。
【０２１４】
＜効果＞
かかる構成によれば、視聴者情報に基づいて、視聴対象コンテンツに対する各視聴者間の注目領域一致度に比例して視聴者コンテンツの表示開始時間を算出する。このため、注目領域一致度が高い場合は、視聴者コンテンツの表示を遅らせることで視聴対象コンテンツのみの表示時間が長くなり、一致する注目領域について会話させる時間を長く与えることができる。逆に、注目領域一致度が低い場合は、視聴者コンテンツの表示を早めることで視聴対象コンテンツのみの表示時間が短くなり、現在の視聴者に視聴者コンテンツ（他の視聴者の話題）を話題として提供することができる。
【０２１５】
そもそも視聴者にまず視聴対象コンテンツのみに対する会話を行わせた後に、視聴者コンテンツを表示することで、視聴者は、過去の視聴者の会話と、視聴対象コンテンツのみが表示されている間に自分たちがした会話とを比較することができ、より娯楽性を高めたコンテンツ視聴を提供することができる。
【０２１６】
（実施の形態４）
本発明の実施の形態４に係るコンテンツ再生装置３００について説明する。
【０２１７】
実施の形態４に係るコンテンツ再生装置３００は、実施の形態３と同様に、視聴者情報に基づいて、視聴対象コンテンツとともに表示する視聴者コンテンツの表示開始時間を決定する。特に、表示する視聴者コンテンツが複数ある場合の制御を行う。より具体的には、コンテンツ再生部は、視聴対象コンテンツ及び視聴者コンテンツに含まれる画像データを表示する表示画面を含む。コンテンツ再生装置３００は、さらに、視聴者コンテンツ選択部で複数の視聴者コンテンツが選択された場合において、複数の視聴者コンテンツそれぞれの表示開始時間をずらして表示画面に表示させる表示制御部を備える。そして、表示制御部は、表示画面上において、視聴者情報取得部で取得された視聴者情報に基づいて、複数の前記第１の視聴者が注目している領域である注目領域を推定し、複数の視聴者コンテンツそれぞれに対応付けられた視聴者情報に基づいて、第２の視聴者の注目領域を推定する注目領域推定部と、注目領域推定部で推定された第１の視聴者の注目領域と第２の視聴者の注目領域との一致度である注目領域一致度を算出する注目領域一致度算出部と、複数の視聴者コンテンツのうち、注目領域一致度の高い視聴者コンテンツから順に表示画面に表示されるように、複数の視聴者コンテンツそれぞれの表示開始時間を決定する表示時間制御部とを備える。
【０２１８】
本発明の実施の形態４に係るコンテンツ再生装置３００の構成を示すブロック図は、図２０に示した実施の形態３と同じであるため省略する。
【０２１９】
視聴者コンテンツ選択部２０４で視聴者コンテンツが二つ選択されたとする。例えば、視聴者コンテンツが無音声の区間の場合、あるいは視聴者コンテンツの一方の音量レベルを下げる場合には、二つの視聴者コンテンツを同時に視聴することは比較的難しくない。しかし、二つの視聴者コンテンツにおける各視聴者グループが、視聴対象コンテンツのうちの異なる領域に注目して会話していた場合は、現在の視聴者グループにとって二つの視聴者コンテンツの音声を聞き分け、二つの視聴者コンテンツを一度に視聴することは難しい。そこで、視聴者コンテンツが二つ以上の場合、視聴者情報を基に視聴者コンテンツの表示優先度を決定し、表示開始時間を算出して一つずつ順に表示する。
【０２２０】
現在の視聴者グループＣがコンテンツＣを視聴している。視聴者コンテンツ選択部２０４で、図２５に示すコンテンツＣの視聴者コンテンツＣ−１と視聴者コンテンツＣ−２とが選択されたとする。視聴者コンテンツＣ−１の視聴者は視聴者グループＡ、視聴者コンテンツＣ−２は視聴者グループＢであったとする。
【０２２１】
＜表示制御部２０５＞
表示制御部２０５は、実施の形態３と同様に以下の手順で視聴者コンテンツの表示パラメータ（表示優先度、表示開始時間）を算出する。
【０２２２】
具体的には、（１）コンテンツ上で視聴者が注目する注目領域を推定し、（２）視聴者グループ間の注目領域一致度を算出し、（３）視聴者コンテンツの表示パラメータ（表示優先度、表示開始時間）を算出する。
【０２２３】
以下、図２６Ａ〜図２８Ｄを参照して、実施の形態４に係るコンテンツ再生装置３００の動作について説明する。なお、処理の流れは図２４の通りであり、Ｓ３０９における表示開始時間の決定方法が異なるだけである。
【０２２４】
（１）注目領域の推定
注目領域推定部２１１は、実施の形態３と同様に、写真Ｃ１について現在の視聴者グループＣの所定時間（Ｔ秒間）における注目領域を推定する。また、選択された二つの視聴者コンテンツＣ−１、Ｃ−２における過去の視聴者であった視聴者グループＡ、Ｂについても注目領域をそれぞれ推定する。
【０２２５】
（２）注目領域一致度の算出
注目領域一致度算出部２１２は、実施の形態３では、図２４のＳ３０８において、現在の視聴者グループ内における視聴者間の注目領域一致度を算出した。一方、実施の形態４では、現在の視聴者グループと過去の視聴者グループとの間の注目領域一致度を算出する点で、実施の形態３と異なる。
【０２２６】
第一に現在の視聴者グループＣと視聴者コンテンツＣ−１に対応付けられた過去の視聴者グループＡとの間、及び第二に視聴者グループＣと視聴者コンテンツＣ−２に対応付けられた過去の視聴者グループＢとの間の注目領域一致度を算出する。そして、表示優先度は、算出された注目領域一致度の値が高い視聴者グループに対応する視聴者コンテンツから順に高い値を設定する。
【０２２７】
過去にコンテンツＣの写真Ｃ１を視聴した視聴者グループＡの注目領域が図２６Ａに示すように推定され、過去にコンテンツＣの写真Ｃ１を視聴した視聴者グループＢの注目領域が図２６Ｂに示すように推定され、現在、コンテンツＣの写真Ｃ１を視聴している視聴者グループＣの注目領域が図２７に示すように推定されたとする。
【０２２８】
視聴者グループＡについて、図２６Ａに示されるように、視聴者３名の注目領域が一致するのがＳＡ（１）の一箇所、視聴者２名の注目領域が一致するのがＳＡ（２）、ＳＡ（３）、ＳＡ（４）、ＳＡ（５）の４箇所と推定されたとする。視聴者グループＢについて、図２６Ｂに示されるように、視聴者３名の注目領域が一致するのがＳＢ（１）の一箇所、視聴者２名の注目領域が一致するのがＳＢ（２）、ＳＢ（３）、ＳＢ（４）の３箇所と推定されたとする。また、現在の視聴者グループＣについて、図２７に示されるように、視聴者３名の注目領域が一致するのがＳＣ（１）の一箇所、視聴者２名の注目領域が一致するのがＳＣ（２）、ＳＣ（３）の２箇所と推定されたとする。
【０２２９】
現在の視聴者グループと過去の視聴者グループとの間の注目領域一致度は、実施の形態３の視聴者グループ内での注目領域一致度の算出（式５）と同様に、視聴者グループＣの各視聴者の注目領域と、視聴者グループＡまたは視聴者グループＢの注目領域との注目領域の面積、注目領域が視聴された時間、及びその領域に注目する人数の三つのパラメータから算出する。
【０２３０】
まず、視聴者グループＣの注目領域ＳＣ（１）と、視聴者グループＡの注目領域ＳＡ（１）との一致度Ｍを式１１を用いて算出する。すなわち、一致する注目領域の面積の論理積（すなわち、共通部分）と、その注目領域が各視聴者グループに注目された時間の積と、その領域に注目する各グループの視聴者数の積とを乗算し、全視聴者数で除算する。
【０２３１】
【数１１】
0005474062.tif 000012
【０２３２】
同様に、視聴者グループＣの注目領域ＳＣ（１）と、視聴者グループＡのその他の注目領域（ＳＡ（２）〜ＳＡ（５））との一致度をそれぞれ求める。視聴者グループＣの注目領域ＳＣ（１）について、このように算出された視聴者グループＡの５箇所の注目領域ＳＡ（ｉ）（ｉ＝１〜５）との一致度の和を、視聴者グループＣの注目領域ＳＣ（１）と視聴者グループＡの注目領域一致度と定義し、式１２に示す。
【０２３３】
【数１２】
0005474062.tif 000013
【０２３４】
視聴者グループＣのその他の注目領域ＳＣ（２）、ＳＣ（３）についても式１２と同様に、視聴者グループＡとの注目領域一致度を算出することができる。
【０２３５】
そして、式１３に示すように、視聴者グループＣの注目領域毎に算出された注目領域一致度を加算すると、視聴者グループＣと視聴者グループＡとの注目領域一致度が算出できる。
【０２３６】
【数１３】
0005474062.tif 000014
【０２３７】
同様に、視聴者グループＣと視聴者グループＢとの注目領域一致度は、式１４で算出される。
【０２３８】
【数１４】
0005474062.tif 000015
【０２３９】
以上の手順により、コンテンツＣの写真Ｃ１について、現在の視聴者である視聴者グループＣと、過去の視聴者であった視聴者グループＡとの注目領域一致度と、現在の視聴者である視聴者グループＣと過去の視聴者であった視聴者グループＢとの注目領域一致度とがそれぞれ算出される。
【０２４０】
なお、注目領域一致度は、上述の例で説明したように、一致する注目領域の面積、その領域が視聴された時間、その領域が注目された視聴者数に比例した値を基に算出した。しかしながら、この方法に限らず、例えば、注目領域の面積の二乗など任意の累乗に比例して算出してもよい。
【０２４１】
（３）視聴者コンテンツの表示パラメータの算出
表示パラメータのうち、表示サイズを表示サイズ算出部２０９で、表示位置を表示位置算出部２１０で、表示時間を表示時間制御部２１３でそれぞれ算出する。
【０２４２】
実施の形態３と同様の方法で表示サイズ及び表示位置が算出されたものとし、表示サイズ算出部２０９および表示位置算出部２１０の説明は省略する。
【０２４３】
表示時間制御部２１３は、注目領域一致度算出部２１２で算出された注目領域一致度に基づいて、視聴者コンテンツの表示優先度を決定し、視聴対象コンテンツ表示後を基準とした視聴者コンテンツの表示開始時間を算出する。
【０２４４】
注目領域一致度の算出方法から明らかなように、注目領域一致度が高い視聴者コンテンツの方が、現在の視聴者グループにとってより興味が高いと判断することができる。このため表示優先度は、注目領域一致度の値が大きい順に高く設定し、第一の視聴者コンテンツの表示が終わった後に、第二の視聴者コンテンツの表示が開始されるように、表示開始時間を算出する。なお、第一に表示する視聴者コンテンツの表示開始時間Ｔ（Ｃｉ）は、実施の形態３の式８で算出することができる。
【０２４５】
例えば、図２８Ａに示すように、写真Ｃ１について、視聴者グループＣと視聴者グループＡとの間の注目領域一致度と、視聴者グループＣと視聴者グループＢとの間の注目領域一致度とが等しい場合、視聴者コンテンツの表示優先度は同じとなる。この場合、視聴者グループＡに対応付けられた視聴者コンテンツＣ１−１と、視聴者グループＢに対応付けられた視聴者コンテンツＣ１−２とを同時に表示する。
【０２４６】
また、図２８Ｂに示すように、写真Ｃ２について、視聴者グループＣと視聴者グループＡとの間の注目領域一致度が、視聴者グループＣと視聴者グループＢとの間の注目領域一致度より高い場合、視聴者グループＡに対応付けられた視聴者コンテンツＣ２−１を先に表示し、視聴者コンテンツＣ２−１の表示終了後に、視聴者グループＢに対応付けられた視聴者コンテンツＣ２−２を表示する。
【０２４７】
さらに、図２８Ｃに示すように、写真Ｃ９について、視聴者グループＣと視聴者グループＢとの間の注目領域一致度が、視聴者グループＣと視聴者グループＡとの間の注目領域一致度より高い場合、視聴者グループＢに対応付けられた視聴者コンテンツＣ９−２を先に表示し、視聴者コンテンツＣ９−２の表示終了後に、視聴者グループＡに対応付けられた視聴者コンテンツＣ９−１を表示する。
【０２４８】
以上の手順により、視聴者コンテンツが二つの場合、表示優先度を決定し、表示時間を算出することができる。
【０２４９】
なお、視聴者コンテンツが二つ選択された場合を一例として説明したが、視聴者コンテンツが複数選択された場合についても、それぞれについて注目領域一致度を算出し、それに基づいて表示優先度を決定し、表示時間を算出することができる。
【０２５０】
なお、注目領域一致度が高い視聴者コンテンツを先に表示したが、逆にその値が低い視聴者コンテンツを先に表示してもよい。
【０２５１】
なお、表示開始時間の算出には、視聴者の視線位置に基づく注目領域一致度を用いたが、その他に視聴者ＩＤ、コンテンツの視聴時間、あるいは視聴者の発話時間の長さや声の大きさなど、その他の視聴者情報から算出してもよい。さらに、視聴者情報に加えて図２０の構成図には示していないが、コンテンツ撮影日時からの経過時間など、コンテンツメタ情報を考慮してもよい。
【０２５２】
その他の視聴者コンテンツの表示パラメータ（視聴対象コンテンツとの前後関係、透過性、音量など）は、予め設定された初期値、あるいは視聴者が視聴者入力受付部１０３を介して任意に入力する値に基づいて決定する。
【０２５３】
なお、視線位置の推定が正しくない場合が生じる可能性を考慮し、算出された表示サイズと表示位置とは、視聴者コンテンツを表示した後、視聴者が視聴者入力受付部１０３を介して任意に変更することができるようにする。
【０２５４】
＜効果＞
かかる構成によれば、視聴者情報に基づいて、現在の視聴者と、表示する視聴者コンテンツにおける過去の視聴者グループとの視聴対象コンテンツに対する注目領域一致度を算出し、その値に基づいて複数の視聴者コンテンツの表示優先度および表示開始時間を算出する。このため、注目領域一致度が高い視聴者コンテンツ、つまり、共感度の高い視聴者コンテンツを先に表示することができる。あるいはその逆でもよく、注目領域一致度が低い視聴者コンテンツを先に表示することができる。後者の場合、現在の視聴者が注目する領域とは異なる領域についての話題を提供することができる。
【０２５５】
（実施の形態５）
本発明の実施の形態５に係るコンテンツ再生装置３００について説明する。
【０２５６】
実施の形態５に係るコンテンツ再生装置３００は、実施の形態３、実施の形態４に係るコンテンツ再生装置３００と同様に、視聴対象コンテンツとともに表示する視聴者コンテンツの表示時間を視聴者情報に基づいて制御する。特に、視聴者コンテンツの再生時間（表示時間の長さ）を短縮または延長する制御を行う。より具体的には、コンテンツ再生装置３００は、さらに、視聴者コンテンツ選択部で選択された視聴者コンテンツの再生時間を調整し、再生時間が調整された視聴者コンテンツを前記コンテンツ再生部に再生させる制御部を備える。そして、制御部は、第１の視聴者による視聴対象コンテンツの視聴時間を推定し、推定された視聴対象コンテンツの視聴時間に近づくように、視聴対象コンテンツの再生時間を延長又は短縮する。
【０２５７】
実施の形態５に係るコンテンツ再生装置３００は、図２０に示した実施の形態３と同じであるため省略する。
【０２５８】
視聴者コンテンツの再生時間は、過去の視聴者がコンテンツを視聴した時間であり、視聴者コンテンツの撮影時間とも等しい。視聴者グループによって盛り上がりや見方が異なるため、コンテンツの視聴時間は、会話が多く盛り上がる場合は比較的長く、逆に会話が少ない場合は比較的短くなると考えられる。このように、視聴者グループによって視聴対象コンテンツの視聴時間は異なり、現在の視聴者グループのコンテンツ視聴時間が視聴者コンテンツの再生時間と異なる可能性は十分ある。
【０２５９】
そこで、現在の視聴者グループの視聴対象コンテンツの視聴時間に比べて視聴者コンテンツの再生時間が長い傾向にある場合、視聴者コンテンツを短縮して効率的に視聴させる。反対に、現在の視聴者グループの視聴対象コンテンツの視聴時間に比べて視聴者コンテンツの再生時間が短い傾向にある場合、視聴者コンテンツの再生終了とともに改めて別の視聴者コンテンツを選択し、再生する。これにより、視聴時間を擬似的に延長する。このようにして、現在の視聴者の視聴傾向に応じて、視聴者コンテンツの再生時間を制御する方法について説明する。
【０２６０】
視聴者グループＣがコンテンツＡを視聴し、視聴者コンテンツ選択部２０４で視聴者コンテンツＡ−１が選択されたとする。
【０２６１】
コンテンツＡは、図３Ｂに示したように、写真Ａ１〜写真Ａ１０の写真１０枚で構成される。コンテンツＡはこれまでに５回視聴され、その時に撮影された視聴者コンテンツＡ−１〜Ａ−５と、視聴者コンテンツＡ−１〜Ａ−５それぞれに対応するヘッダー情報およびメタ情報とが視聴者情報保存部４０２に保存されているとする。
【０２６２】
コンテンツＡは視聴者グループＣによって６回目に視聴されることになる。視聴者グループＣは、視聴対象コンテンツとしてのコンテンツＡを、視聴者コンテンツＡ―１とともに視聴している。視聴者グループＣは、既に写真Ａ９まで視聴し終え、次に写真Ａ１０を視聴しようとしているとする。
【０２６３】
＜表示制御部２０５＞
以下、図２９Ａ〜図３０を参照して、実施の形態５に係るコンテンツ再生装置３００の動作について説明する。なお、図３０のＳ５００〜Ｓ５０６の各処理は、図２４のＳ３００〜Ｓ３０６の各処理に対応するので、説明は省略する。
【０２６４】
表示制御部２０５は、表示サイズ算出部２０９と、表示位置算出部２１０と、表示時間制御部２１３とで構成される。実施の形態３、４と同様に、表示サイズ算出部２０９および表示位置算出部２１０で視聴者コンテンツの表示サイズと表示位置とが算出されたとする（Ｓ５０７）。次に、表示時間制御部２１３でコンテンツの視聴時間に基づいて視聴者コンテンツの再生時間を短縮または延長する制御を行う手順について説明する。
【０２６５】
コンテンツＡの各写真の視聴時間は視聴者コンテンツの撮影時間と等しく、図５に一例を示したように、視聴者コンテンツＡ−１〜Ａ−５それぞれについて、視聴者情報保存部４０２にヘッダー情報として記録されている。まず、図２９に示すヘッダー情報から、視聴者コンテンツＡ−１の写真Ａ１〜Ａ１０の写真１０枚について視聴時間の平均Ｔａ（Ａ−１）を算出する。また、現在視聴中の視聴者グループＣが既に視聴した写真Ａ１〜Ａ９までの写真９枚の視聴時間の平均Ｔａ（Ａ−６）を算出する。
【０２６６】
そして、表示時間制御部２１３は、視聴者グループＣの視聴時間の平均Ｔａ（Ａ−６）と、視聴者コンテンツＡ−１に対応付けられた過去の視聴者グループの視聴時間の平均Ｔａ（Ａ−１）との時間の長さを比較し、その結果を基に写真Ａ１０とともに表示する視聴者コンテンツの再生時間を制御する（Ｓ５０８、Ｓ５０９）。
【０２６７】
（１）Ｔａ（Ａ−６）＜Ｔａ（Ａ−１）の場合
すなわち、現在、視聴対象コンテンツを視聴中の視聴者グループＣの視聴時間の平均が、視聴者コンテンツＡ−１に対応付けられた視聴者グループの視聴時間の平均に比べて小さい場合、視聴者グループＣは、視聴者コンテンツＡ−１の再生時間より短い時間で、視聴対象コンテンツを視聴し終える可能性が高いと判断できる。そこで、視聴者コンテンツＡ１０−１（写真Ａ１０が１回目に視聴された時の視聴者コンテンツ）の表示時間を短縮する。視聴者コンテンツを短縮する具体的な方法は、例えば、視聴者コンテンツのうちの一部の区間をスキップ、するまたは早送りすることで行う。スキップ、早送りの方法を次に説明する。
【０２６８】
（１．１）スキップする場合
視聴者コンテンツのうちのスキップする区間を、視聴者コンテンツＡ１０−１のメタ情報を基に決定する。例えば、視聴者コンテンツの音声レベルに基づくと、音声レベルがある閾値以下の区間の映像を抽出することができる。あるいは、実施の形態３で算出した視聴者間の注目領域一致度に基づくと、一致度がある閾値以下の区間の映像を抽出することができる。このように抽出した区間をスキップ区間とすれば、視聴者コンテンツＡ１０−１で視聴者が会話している区間や、視聴者グループ間で注目する領域の一致度が高い区間のみを再生することができる。
【０２６９】
次に、スキップ区間を決定するための閾値を求める。例えば、視聴者グループＣが写真Ａ１０を視聴する時間ｔ（秒）が、図２９Ａ及び図２９Ｂに示したコンテンツ視聴時間の平均値に比例すると仮定すると、式１５が成立する。そして、時間tは式１６のように算出される。
【０２７０】
【数１５】
0005474062.tif 000016
【０２７１】
【数１６】
0005474062.tif 000017
【０２７２】
スキップ区間を決定するための閾値は、式１７で推定した視聴者グループＣが写真Ａ１０を視聴すると推定される時間ｔと、視聴者コンテンツＡ１０−１の再生時間３１秒とが等しく、あるいは近づくように決定する。
【０２７３】
これにより、視聴者コンテンツが現在の視聴者グループの推定視聴時間より長く表示される可能性を減らすことができる。
【０２７４】
なお、推定視聴時間tは、式１７に限らず、別の式を用いて算出してもよく、例えば、図２９Ａ及び図２９Ｂに示す視聴者コンテンツＡ１０−ｉ（ｉ＝１〜５）の視聴時間の平均値をＴａ（Ａ−１）の代わりに用いてもよい。
【０２７５】
（１．２）早送りする場合
視聴者コンテンツを早送りする区間を、スキップ区間を求めた方法と同様の方法で決定し、その区間を早送りする。早送り速度は任意に設定してよい。または、視聴者コンテンツＡ１０−１の再生時間を、式１７に示した現在の視聴者グループＣが写真Ａ１０を視聴する推定時間と一致させるように、早送り速度を求めてもよい。但し、早送りしても視聴者が聞き取れる再生速度を最大速度とすることを前提とし、最大速度を超える場合は、式１７で推定した再生時間を超えてもよい。
【０２７６】
（１）の方法によって、現在の視聴者グループＣが次のコンテンツ（例では写真）の視聴者コンテンツを視聴する場面において、視聴者コンテンツの再生時間が推定視聴時間より長くなる場合は、視聴者情報に基づいて視聴者コンテンツを短縮して再生することができ、視聴者コンテンツを効率的に表示することができる。
【０２７７】
なお、スキップ区間や早送り区間を決定する方法はこれらの方法に限らず、他の視聴者情報を用いてもよい。例えば、視聴者が笑顔である区間、視聴者の身振り手振りが大きい、頭部が動いた、映像表示画面に近づいたといった、視聴者の動作量が多い区間などを画像処理によって抽出し、これをメタ情報として利用してもよい。
【０２７８】
（２）Ｔａ（Ａ−６）＞Ｔａ（Ａ−１）
すなわち、現在、視聴対象コンテンツを視聴者中の視聴者グループＣの視聴時間の平均が、視聴者コンテンツＡ−１に対応付けられた視聴者グループの視聴時間の平均に比べて大きい場合、視聴者グループＣは、視聴対象コンテンツを視聴し終えるのに、視聴者コンテンツＡ−１の再生時間より長い時間かかる可能性が高いと判断する。この場合、実際にそうなった時に、視聴者コンテンツＡ１０−１の再生終了後に、別の視聴者コンテンツを改めて選択して表示する。
【０２７９】
次の視聴者コンテンツを即座に表示するために、事前処理として視聴者コンテンツ選択部２０４で次に表示する視聴者コンテンツを選択しておくのが望ましい。視聴者コンテンツは、実施の形態１〜４で説明した方法と同様の方法で求めることができる。すなわち、視聴者情報に基づいて選択する、あるいは、視聴者が視聴者入力受付部１０３を介して任意に選択する。
【０２８０】
なお、改めて選択された視聴者コンテンツを推定視聴時間内に全て視聴することができないと推定される場合は、（１）で述べた視聴者コンテンツを短縮する方法を適用して、再生時間を短縮してもよい。
【０２８１】
この方法によって、視聴者グループＣが写真Ａ１０を視聴している最中に、視聴者コンテンツの表示が終了した場合には、続けて別の視聴者コンテンツを表示することができる。
【０２８２】
コンテンツ再生部３０は、表示制御部２０５で決定された表示パラメータに従って、視聴対象コンテンツと視聴者コンテンツとに含まれる映像データを映像表示画面３０１に表示し、音声データを音声出力スピーカ３０２から出力する（Ｓ５１０）。
【０２８３】
なお、視聴対象コンテンツとともに表示する視聴者コンテンツを一つの場合を例として説明したが、二つ以上の場合も同様の方法を用いれば再生時間を短縮または延長することができる。
【０２８４】
なお、視聴時間を推定する必要があるため、コンテンツの最初の構成要素（例では写真Ａ１−ｉ）については、視聴者コンテンツの再生時間制御は適用されない。
【０２８５】
＜効果＞
かかる構成によれば、視聴者コンテンツの再生時間に比べて現在の視聴者の視聴対象コンテンツの視聴時間が短いと推定される場合、視聴者コンテンツを短縮して表示することができ、視聴者コンテンツを効率的に表示することができる。あるいは、視聴者コンテンツの再生時間に比べて現在の視聴者の視聴対象コンテンツの視聴時間が長いと推定される場合、視聴者コンテンツを延長して表示することができ、視聴者コンテンツを見終わった後にも続けて別の視聴者コンテンツを表示することができる。すなわち、視聴対象コンテンツの視聴に要すると推定される視聴時間と同じまたはそれに近い時間になるように、視聴者コンテンツの再生時間が短縮又は延長されるため、視聴者の視聴ペースに合わせた時間で視聴者コンテンツを再生することができる。
【０２８６】
（実施の形態６）
本発明の実施の形態６に係るコンテンツ再生装置１００について説明する。
【０２８７】
実施の形態６に係るコンテンツ再生装置１００は、視聴者情報に基づいて、視聴者コンテンツから静止画を抽出する。以降ではこの静止画を視聴者静止画と呼ぶ。視聴者静止画を、同一の視聴対象コンテンツに対応付けられた全ての視聴者コンテンツから少なくとも１枚以上抽出する。抽出した全ての視聴者静止画をコンテンツ表示前にスライドショー形式またはサムネイル形式で表示し、その後に視聴対象コンテンツの表示を開始する。
【０２８８】
より具体的には、コンテンツ再生部は、視聴対象コンテンツ及び視聴者コンテンツに含まれる画像データを表示する表示画面を含む。視聴者コンテンツ選択部は、視聴対象コンテンツに対応付けられた１以上の視聴者コンテンツそれぞれから、当該視聴者コンテンツ中で最も盛り上がっていると判定される部分を静止画として抽出し、抽出された１以上の静止画を視聴者コンテンツとして出力する。そして、コンテンツ再生部は、視聴者コンテンツを再生するのに先立って、視聴者コンテンツとしての１以上の静止画を、表示画面にスライドショー表示又はサムネイル表示する。
【０２８９】
実施の形態１〜５に係るコンテンツ再生装置１００、２００、３００では、視聴対象コンテンツとともに視聴者コンテンツを表示するが、実施の形態６では、視聴者コンテンツから抽出した視聴者静止画を、視聴対象コンテンツを表示するのに先立って表示する。
【０２９０】
本発明の実施の形態６に係るコンテンツ再生装置１００の構成を示すブロック図は、図２Ｂに示した実施の形態１と同じであるため省略する。
【０２９１】
以下、図３１Ａ〜図３２を参照して、実施の形態６に係るコンテンツ再生装置１００の動作について説明する。なお、図３２のＳ６００〜Ｓ６０５の各処理は、図１２のＳ１００〜Ｓ３０５の各処理に対応するので、説明は省略する。また、視聴者グループＡが視聴対象コンテンツとしてのコンテンツＡを視聴する場合を例として説明する。
【０２９２】
＜メタ情報作成部２０３＞
メタ情報作成部２０３は、Ｓ６０４において、さらに視聴者コンテンツから視聴者静止画を抽出するためのメタ情報を算出する。例えば、コンテンツＡの視聴時に最も盛り上がったと判定される場面を視聴者静止画として抽出する場合は、盛り上がり度を算出する。
【０２９３】
メタ情報作成部２０３は、コンテンツＡを対象とする各視聴者コンテンツについて、視聴者グループが盛り上がった場面を音声処理技術と画像処理技術とを用いて判定する。例えば、盛り上がりの指標を、視聴者の発話音声の大きさが最大で、かつ笑顔と判定された視聴者数が最多となる場面とする。一つの視聴者コンテンツから盛り上がり度の値が最も大きい場面が複数抽出された場合は、さらに新たな指標を加える。例えば、目又は口の形状変化量に基づいて笑顔の大きさを定義し、全視聴者の笑顔の大きさの和が最大となるという条件を加えて、再度盛り上がり度を算出する。
【０２９４】
なお、盛り上がりを判定する指標はこれらに限らず、別の指標を用いてもよい。
【０２９５】
なお、視聴者静止画を抽出する指標は盛り上がりに限らず、別の指標であってもよい。
【０２９６】
例えば、図３１Ａに示されるように、コンテンツＡは、写真Ａ１〜Ａ１０までの１０枚の写真で構成されている。また、図３１Ｂに示されるように、コンテンツＡに対応付けられた視聴者映像Ａ−１〜Ａ−４は、コンテンツＡの写真Ａ１〜Ａ１０それぞれに対応する複数の部分Ａ１−ｎ〜Ａ１０−ｎ（ｎ＝１〜４）に区切られているとする。
【０２９７】
このような場合において、視聴者静止画は、写真Ａ１〜Ａ１０に対応する部分の再生時間の長さを指標としてもよい抽出してもよい。具体的には、視聴者コンテンツＡ１〜Ａ４のうちの写真Ａ１に対応する部分Ａ１−１〜Ａ１−４について、最も再生時間の長い部分から任意の場面、例えば、視聴者の動作変化量が最も大きい場面を視聴者静止画として抽出してもよい。
【０２９８】
あるいは、視聴者グループＡの視聴者情報に基づいて視聴者静止画を選択してもよい。例えば、視聴者情報保存部４０２を参照し、コンテンツＡの各写真Ａ１〜Ａ１０の被写体から人物を同定する。写真Ａ６には視聴者グループＡの３名全員が写されており、その他の写真は２名以下であるという結果を得たとする。視聴者コンテンツＡ１〜Ａ４のうち、現在の視聴者グループが最も被写体として多く含まれている写真Ａ６に対応する部分Ａ６−ｎ（ｎ＝1、２、３、４）を、視聴者静止画を抽出する部分にしてもよい。あとはその中から任意の場面の静止画を抽出すればよい。
【０２９９】
このように、コンテンツＡを対象とする全ての視聴者コンテンツから、視聴者情報に基づいて、例えば最も盛り上がった場面を判定し、その場面の時間をメタ情報として作成する（Ｓ６０６）。図３１Ｂに示す例では、視聴者コンテンツＡ―１では写真Ａ１に対応する部分Ａ１−１に、視聴者コンテンツＡ−２では写真Ａ４に対応する部分Ａ４−２に、視聴者コンテンツＡ−３では写真Ａ３に対応する部分Ａ３−３に、視聴者コンテンツＡ−４では写真Ａ６に対応する部分Ａ６−４に、最も盛り上がったと場面があると判定され、メタ情報としてその時間ｔ（Ａ−１）、ｔ（Ａ−２）、ｔ（Ａ−３）、ｔ（Ａ−４）を記録する。
【０３００】
＜視聴者コンテンツ選択部２０４＞
視聴者コンテンツ選択部２０４は、視聴者コンテンツＡ−１〜Ａ−４それぞれから、メタ情報作成部２０３で作成されたメタ情報に基づいて、視聴者静止画を抽出する（Ｓ６０７）。図３１Ｂに示す例では、メタ情報として各視聴者コンテンツＡ−１〜Ａ−４で最も盛り上がった場面が、視聴者コンテンツＡ−１では時間ｔ（Ａ−１）、視聴者コンテンツＡ−２では時間ｔ（Ａ−２）、視聴者コンテンツＡ−３では時間ｔ（Ａ−３）、視聴者コンテンツＡ−４では時間ｔ（Ａ−４）であり、各区間から視聴者静止画Ａ−１、視聴者静止画Ａ−２、視聴者静止画Ａ−３、視聴者静止画Ａ−４を抽出する。
【０３０１】
＜表示制御部２０５＞
表示制御部２０５は、視聴者コンテンツ選択部２０４で選択された視聴者静止画および視聴対象コンテンツの表示位置、表示サイズ、表示時間、表示順序などの表示パラメータを算出する（Ｓ６０８）。
【０３０２】
視聴者静止画の表示パラメータの初期値は予め設定する。表示位置および表示サイズについては、映像表示画面３０１の全画面表示とする。また、表示時間（ここではスライドショー形式で表示する）の初期値は任意の時間Ｔとし、表示順序として、まず視聴者静止画をスライドショー形式で表示し、その後に視聴対象コンテンツを表示する。なお、視聴者静止画の表示順序は、視聴者静止画が抽出された元の視聴者コンテンツの撮影日時が古い順とする。
【０３０３】
表示パラメータがこの初期値の場合、図３１Ｃに示す例では、コンテンツ再生部３０は、まず視聴者静止画Ａ−１からＡ−４の順に再生時間Ｔのスライドショー形式で表示し、その後、視聴対象コンテンツであるコンテンツＡを表示する（Ｓ６０９）。
【０３０４】
なお、表示パラメータを視聴者が視聴者入力受付部１０３を介して初期値から任意に変更してよい。
【０３０５】
また、表示パラメータは、視聴者情報に基づいて決定してもよく、例えば、視聴者静止画の表示順序を、メタ情報作成部２０３で算出した盛り上がり度の高い順としてもよい。
【０３０６】
また、視聴者静止画をスライドショー形式で表示したが、サムネイルで一度に表示してもよい。
【０３０７】
＜効果＞
かかる構成によれば、視聴者はこれから視聴しようとする視聴対象コンテンツについて、過去に同一の視聴対象コンテンツを視聴した全視聴者の様子を、全視聴者コンテンツから視聴者情報に基づいて抽出した視聴者静止画によって俯瞰的に見ることできる。これにより、コンテンツに対する視聴時の様子や反応を効率的に把握することができる。
【０３０８】
なお、上記の各実施の形態１〜６においては、視聴対象コンテンツとしてスライドショーコンテンツの例を示したが、これに限定されない。例えば、映画等の映像コンテンツであってもよい。この場合、視聴対象コンテンツと視聴者コンテンツとは、同期して再生されるのが望ましい。これにより、視聴者は、視聴対象コンテンツの各場面における他の視聴者の反応を知ることができる。
【０３０９】
また、上記の各実施の形態１〜６においては、過去に取得された視聴者コンテンツの例を示したが、これに限定されない。例えば、視聴者コンテンツ選択部は、視聴対象コンテンツと同一のコンテンツを、第１の視聴者と異なる場所で、且つ第１の視聴者と同時に視聴する第２の視聴者から取得された視聴者コンテンツを選択してもよい。つまり、視聴者コンテンツは、時間的又は空間的に異なる条件の下で取得されたものであればよい。
【０３１０】
（その他変形例）
なお、本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されないのはもちろんである。以下のような場合も本発明に含まれる。
【０３１１】
上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。ＲＡＭまたはハードディスクユニットには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。
【０３１２】
上記の各装置を構成する構成要素の一部または全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されているとしてもよい。システムＬＳＩは、複数の構成要素を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。ＲＡＭには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、システムＬＳＩは、その機能を達成する。
【０３１３】
上記の各装置を構成する構成要素の一部または全部は、各装置に脱着可能なＩＣカードまたは単体のモジュールから構成されているとしてもよい。ＩＣカードまたはモジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。ＩＣカードまたはモジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、ＩＣカードまたはモジュールは、その機能を達成する。このＩＣカードまたはこのモジュールは、耐タンパ性を有するとしてもよい。
【０３１４】
本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、コンピュータプログラムからなるデジタル信号であるとしてもよい。
【０３１５】
また、本発明は、コンピュータプログラムまたはデジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ（Ｂｌｕ−ｒａｙ  Ｄｉｓｃ）、半導体メモリなどに記録したものとしてもよい。また、これらの記録媒体に記録されているデジタル信号であるとしてもよい。
【０３１６】
また、本発明は、コンピュータプログラムまたはデジタル信号を、電気通信回線、無線または有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。
【０３１７】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、メモリは、上記コンピュータプログラムを記憶しており、マイクロプロセッサは、コンピュータプログラムにしたがって動作するとしてもよい。
【０３１８】
また、プログラムまたはデジタル信号を記録媒体に記録して移送することにより、またはプログラムまたはデジタル信号をネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
【０３１９】
上記実施の形態及び上記変形例をそれぞれ組み合わせてもよい。
【０３２０】
以上、図面を参照してこの発明の実施形態を説明したが、この発明は、図示した実施形態のものに限定されない。図示した実施形態に対して、この発明と同一の範囲内において、あるいは均等の範囲内において、種々の修正や変形を加えることが可能である。
【産業上の利用可能性】
【０３２１】
本発明にかかるコンテンツ再生装置は、複数のコンテンツとともに適切な視聴者コンテンツを視聴者にとって見やすく表示するため、複数人で視聴する大画面ディスプレイに有用である。また、親しい関係性をもつ複数人、例えば家族や友人に対して、プライベートコンテンツの娯楽性を高めるコンテンツ作成装置としても有用である。
【符号の説明】
【０３２２】
１０      視聴者検出部
２０      視聴対象コンテンツ取得部
３０      コンテンツ再生部
４０      記憶部
１００，２００，３００  コンテンツ再生装置
１０１    視聴者撮影カメラ
１０２    音声入力マイク
１０３    視聴者入力受付部
２０１    視聴者同定部
２０２    ヘッダー情報作成部
２０３    メタ情報作成部
２０４    視聴者コンテンツ選択部
２０５    表示制御部
２０６    非注目領域推定部
２０７    有効視野領域推定部
２０８    視聴者コンテンツ表示推奨領域決定部
２０９    表示サイズ算出部
２１０    表示位置算出部
２１１    注目領域推定部
２１２    注目領域一致度算出部
２１３    表示時間制御部
３０１    映像表示画面
３０２    音声出力スピーカ
４０１    コンテンツ保存部
４０２    視聴者情報保存部
４０３    視聴者属性情報保存部
【図１】
0005474062.tif 000018
【図２Ａ】
0005474062.tif 000019
【図２Ｂ】
0005474062.tif 000020
【図３Ａ】
0005474062.tif 000021
【図３Ｂ】
0005474062.tif 000022
【図３Ｃ】
0005474062.tif 000023
【図４Ａ】
0005474062.tif 000024
【図４Ｂ】
0005474062.tif 000025
【図５】
0005474062.tif 000026
【図６】
0005474062.tif 000027
【図７Ａ】
0005474062.tif 000028
【図７Ｂ】
0005474062.tif 000029
【図８】
0005474062.tif 000030
【図９】
0005474062.tif 000031
【図１０】
0005474062.tif 000032
【図１１Ａ】
0005474062.tif 000033
【図１１Ｂ】
0005474062.tif 000034
【図１１Ｃ】
0005474062.tif 000035
【図１２】
0005474062.tif 000036
【図１３】
0005474062.tif 000037
【図１４Ａ】
0005474062.tif 000038
【図１４Ｂ】
0005474062.tif 000039
【図１４Ｃ】
0005474062.tif 000040
【図１５】
0005474062.tif 000041
【図１６】
0005474062.tif 000042
【図１７】
0005474062.tif 000043
【図１８】
0005474062.tif 000044
【図１９】
0005474062.tif 000045
【図２０】
0005474062.tif 000046
【図２１Ａ】
0005474062.tif 000047
【図２１Ｂ】
0005474062.tif 000048
【図２２Ａ】
0005474062.tif 000049
【図２２Ｂ】
0005474062.tif 000050
【図２３Ａ】
0005474062.tif 000051
【図２３Ｂ】
0005474062.tif 000052
【図２４】
0005474062.tif 000053
【図２５】
0005474062.tif 000054
【図２６Ａ】
0005474062.tif 000055
【図２６Ｂ】
0005474062.tif 000056
【図２７】
0005474062.tif 000057
【図２８Ａ】
0005474062.tif 000058
【図２８Ｂ】
0005474062.tif 000059
【図２８Ｃ】
0005474062.tif 000060
【図２８Ｄ】
0005474062.tif 000061
【図２９Ａ】
0005474062.tif 000062
【図２９Ｂ】
0005474062.tif 000063
【図３０】
0005474062.tif 000064
【図３１Ａ】
0005474062.tif 000065
【図３１Ｂ】
0005474062.tif 000066
【図３１Ｃ】
0005474062.tif 000067
【図３２】
0005474062.tif 000068