(57)【特許請求の範囲】
【請求項１】
再生速度が変換された映像に所定量の遅延を加えて、複数の表示部のうちの第１の表示部以外の表示部に出力する遅延部と、
与えられた変数に基づいて入力映像の再生速度を変換して、前記第１の表示部及び前記遅延部に出力する再生速度変換部と、
ユーザの視線の位置を検出する視線検出部で検出された視線の位置が、前記複数の表示部の第２の表示部の画面上にあるか否かを判定して判定結果を出力する視線位置判定部と、
前記視線位置判定部で検出された視線の位置が前記第１の表示部の画面上にあると判断した場合には、前記再生速度を早くする変数を前記再生速度変換部に出力し、前記視線検出部で検出された視線の位置が前記第１の表示部の画面上にないと判断した場合には、前記再生速度を遅くする変数を前記再生速度変換部に出力する再生速度決定部とを備え、
前記第１の表示部と前記第２の表示部は同一である
情報提示装置。
【請求項２】
再生速度が変換された映像に所定量の遅延を加えて、複数の表示部のうちの第１の表示部以外の表示部に出力する遅延部と、
与えられた変数に基づいて入力映像の再生速度を変換して、前記第１の表示部及び前記遅延部に出力する再生速度変換部と、
ユーザの視線の位置を検出する視線検出部で検出された視線の位置が、前記複数の表示部の第２の表示部の画面上にあるか否かを判定して判定結果を出力する視線位置判定部と、
前記視線位置判定部での判定結果に応じて前記再生速度を決定し、前記再生速度に応じた変数を前記再生速度変換部に出力する再生速度決定部とを備え、
前記第１の表示部と前記第２の表示部は同一であり、
前記再生速度決定部は、前記視線検出部で検出された視線の位置が前記第１の表示部の画面上にあると判断した場合には、前記再生速度変換部に変数を出力しない
情報提示装置。
【請求項３】
再生速度が変換された映像に所定量の遅延を加えて、複数の表示部のうちの第１の表示部以外の表示部に出力する遅延部と、
与えられた変数に基づいて入力映像の再生速度を変換して、前記第１の表示部及び前記遅延部に出力する再生速度変換部と、
ユーザの視線の位置を検出する視線検出部で検出された視線の位置が、前記複数の表示部の第２の表示部の画面上にあるか否かを判定して判定結果を出力する視線位置判定部と、前記視線位置判定部での判定結果に応じて前記再生速度を決定し、前記再生速度に応じた変数を前記再生速度変換部に出力する再生速度決定部とを備え、
前記複数の表示部は、前記第１の表示部を先頭として、前記第１の表示部との奥行き方向の距離が徐々に離れるように所定の間隔を置いて配置され、
前記視線位置判定部は、前記視線が前記第１の表示部の位置から奥行き方向に移動していることを検出した場合又は、前記視線が前記複数の表示部のうち奥行き方向で一番奥の位置に配置された表示部の画面上にあると判断した場合に、前記再生速度を遅くする変数を前記再生速度変換部に出力する
情報提示装置。
【請求項４】
請求項３記載の情報提示装置において、
前記遅延部が前記映像に加える遅延の量は、前記複数の表示部の配置の順序に応じて設定される
情報提示装置。
【請求項５】
再生速度が変換された映像に所定量の遅延を加えて、複数の表示部のうちの第１の表示部以外の表示部に出力する遅延部と、
与えられた変数に基づいて入力映像の再生速度を変換して、前記第１の表示部及び前記遅延部に出力する再生速度変換部と、
ユーザの視線の位置を検出する視線検出部で検出された視線の位置が、前記複数の表示部の第２の表示部の画面上にあるか否かを判定して判定結果を出力する視線位置判定部と、前記視線位置判定部での判定結果に応じて前記再生速度を決定し、前記再生速度に応じた変数を前記再生速度変換部に出力する再生速度決定部とを備え、
前記複数の表示部は、前記第１の表示部を先頭として、所定の間隔を置いて順次配置され、
前記再生速度決定部は、前記視線検出部で検出された視線の位置が、前記第２の表示部の画面上になく、かつ前記視線の位置が前記第１の表示部が配置された方向に配置された表示部の画面上にあると判断した場合には、前記再生速度を早くする変数を前記再生速度変換部に出力し、前記視線検出部で検出された視線の位置が、前記第２の表示部の画面上になく、かつ前記視線の位置が前記第１の表示部が配置された方向以外の方向に配置された表示部の画面上にあると判断した場合には、前記再生速度を遅くする変数を前記再生速度変換部に出力する
情報提示装置。
【請求項６】
請求項５記載の情報提示装置において、前記再生速度決定部は、前記視線検出部で検出された視線の位置が、前記第２の表示部の画面上にあると判断した場合には、前記再生速度変換部に変数を出力しない
情報提示装置。
【請求項７】
再生速度が変換された映像に所定量の遅延を加えて、複数の表示部のうちの第１の表示部以外の表示部に出力する遅延部と、
与えられた変数に基づいて入力映像の再生速度を変換して、前記第１の表示部及び前記遅延部に出力する再生速度変換部と、
ユーザの視線の位置を検出する視線検出部で検出された視線の位置が、前記複数の表示部の第２の表示部の画面上にあるか否かを判定して判定結果を出力する視線位置判定部と、前記視線位置判定部での判定結果に応じて前記再生速度を決定し、前記再生速度に応じた変数を前記再生速度変換部に出力する再生速度決定部と、
前記映像を蓄積する蓄積部と、
前記入力映像を符号化して前記蓄積部に出力する処理及び、前記蓄積部に蓄積された映像の復号を行って出力する処理を行う符号化・復号処理部とを備え、
前記再生速度決定部は、前記視線検出部で検出された視線の位置が前記第１の表示部の画面上にないと判断した場合には、判定を行った時点で前記複数の表示部のうちの所定の表示部に表示されていた映像のフレーム番号及び前記再生速度を遅くする変数を、前記符号化・復号処理部及び前記再生速度変換部に出力し、
前記符号化・復号処理部は、前記再生速度決定部から出力されたフレーム番号に対応するフレームを前記蓄積部から読み出して前記再生速度変換部に出力し、
前記再生速度変換部は、前符号化・復号処理部から出力されたフレームの再生速度を、前記再生速度決定部から出力された前記再生速度を遅くする変数に基づいて変換して、前記第１の表示部に出力する
情報提示装置。
【請求項８】
請求項７記載の情報提示装置において、
前記所定の表示部とは、前記第１の表示部との距離が、一番離れた位置に配置された表示部である
情報提示装置。
【請求項９】
請求項７記載の情報提示装置において、
前記所定の表示部とは、前記視線検出部が検出した視線の位置に配置されている前記第１の表示部以外の表示部である
情報提示装置。
【請求項１０】
請求項７記載の情報提示装置において、
前記再生速度決定部が出力する前記フレーム番号を記憶する再提示情報記憶部と、
前記再提示情報記憶部に前記フレーム番号が記憶されている場合に、前記所定の表示部に表示されていた映像のフレーム番号を格納する再生位置記憶部とを備え、
前記再生速度決定部は、前記第１の表示部上に前記再生速度決定部から出力されたフレーム番号に対応するフレームが表示されていない場合で、かつ前記再提示情報記憶部に前記フレーム番号が記憶されている場合には、前記所定の表示部に表示されている映像のフレーム番号を前記再生位置記憶部に出力するとともに、前記再提示情報記憶部に記憶されているフレーム番号を読み出して前記符号化・復号処理部に出力する
情報提示装置。
【請求項１１】
請求項１０記載の情報提示装置において、
前記再生速度決定部は、前記再生速度決定部から出力されたフレーム番号に対応するフレームが前記第１の表示部上に表示されている場合で、かつ前記再提示情報記憶部に前記フレーム番号が記憶されていない場合には、前記再生位置記憶部に記憶されている前記フレーム番号を読み出して前記符号化・復号処理部に出力する
情報提示装置。
【請求項１２】
請求項１記載の情報提示装置において、
前記再生速度変換部は、前記入力映像を構成するフレームを所定の間隔で間引くことにより前記再生速度の変換を行う
情報提示装置。
【請求項１３】
請求項１記載の情報提示装置において、
前記再生速度変換部は、前記入力映像のフレームレートを変えることにより前記再生速度の変換を行う
情報提示装置。
【請求項１４】
請求項１記載の情報提示装置において、
前記再生速度変換部は、前記入力映像の各フレームにおける、隣接画素との画素値の差が所定の値以上となる画素の総数を算出し、前記算出した総数が大きいフレームから順番に所定フレーム数出力することにより、前記再生速度の変換を行う
情報提示装置。
【請求項１５】
請求項１記載の情報提示装置において、
前記表示部は、一つの画面を複数の領域に分割した場合の、分割されたそれぞれの領域である
情報提示装置。
【請求項１６】
再生速度が変換された映像を、複数の表示部のうちの第１の表示部に表示する手順と、
入力映像に所定のフレーム周期単位の遅延を加えて、前記第１の表示部以外の前記表示部に出力する手順と、
ユーザの視線の位置を検出して検出結果を出力する手順と、
前記検出された視線の位置が、前記複数の表示部の第２の表示部の画面上あるか否かを判定して判定結果を出力する手順と、
前記検出された視線の位置が前記第１の表示部の画面上にあると判断した場合には、前記再生速度を早くする変数を出力し、前記検出された視線の位置が前記第１の表示部の画面上にないと判断した場合には、前記再生速度を遅くする手順とを備えた、
情報提示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば複数の表示装置を利用して情報を提示するのに好適な情報提示装置及び情報提示方法に関する。
【背景技術】
【０００２】
従来、表示装置等で再生中の映像等から情報を効率よく取得しようとする場合、早回しでの再生等が行われる。早回しで再生することにより、単位時間内に取得可能な情報量を増やすことができる。ところが、早回しで再生したものを視聴する場合には、ユーザ（視聴者）は必要な情報を取り逃すことも多い。
【０００３】
情報を取り逃してしまった場合には、再生位置を巻き戻す操作をすればよいが、取り逃しの度に操作を行う必要があり、手間がかかるという問題があった。また、このような操作は、かえって情報の取得効率を落としてしまうことになり兼ねない。
【０００４】
このため、再生する映像において、動きの少ない場面では再生速度を落とし、動きの多い場面では再生速度を上げるといったように、映像の特徴に応じて再生速度を自動的に調整することも行われている。
【０００５】
特許文献１には、動画像と音声を含む映像の中の映像特徴を検出し、この映像特徴に応じ自動的に再生速度を調整しながら、映像を再生することについて開示してある。
【特許文献１】特開平１０−２４３３５１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところが、動きの多い場面であっても映像の再生速度を上げて再生したいユーザも存在する。つまり、ユーザが映像の再生速度を落としたり上げたりしたい場面は、ユーザのそれぞれが置かれた状態やユーザの能力、嗜好によって異なるものであるといえる。
【０００７】
つまり、ユーザの置かれた状態やユーザの能力、嗜好に合わせて情報提供の量を最適化することができれば、ユーザは、再生映像の中から効率よく必要な情報を取得できるようになると考えられる。しかし、ユーザの状態や能力や嗜好に合わせて情報提供の量を最適化するには、まずユーザの状態や能力を計測する必要があり、このようなデータの計測には、脳波計や心電図、ＮＩＲＳ（Near-Infrared Spectroscopy）等の大掛かりな装置を用いる必要がある。すなわちコストがかさんでしまうため、情報提示システムの実現が難しい場合が多かった。
【０００８】
このような装置を用いずに、ユーザの状態や能力、嗜好等の内部状態を取得するには、これらの情報をユーザに自己申告させるという手法も考えられる。しかし、キー入力などの煩雑な操作をユーザに行わせるとなると、ユーザにかかる負担は増大し、そのことがかえって、ユーザの効率的な情報取得の妨げとなってしまうことが予想される。
【０００９】
本発明はかかる点に鑑みてなされたものであり、容易な方法で、ユーザに提供する情報量を適応的に調整することを目的とする。
【課題を解決するための手段】
【００１０】
本発明は、再生速度が変換された映像に所定量の遅延を加えて、複数の表示部のうちの第１の表示部以外の表示部に出力する遅延部と、与えられた変数に基づいて入力映像の再生速度を変換して、第１の表示部及び遅延部に出力する再生速度変換部とを備えた。そして、ユーザの視線の位置を検出する視線検出部で検出された視線の位置が、第１の表示部の画面上あるか否かを判定して判定結果を出力する視線位置判定部と、視線位置判定部で検出された視線の位置が第１の表示部の画面上にあると判断した場合には、再生速度を早くする変数を再生速度変換部に出力し、視線検出部で検出された視線の位置が第１の表示部の画面上にないと判断した場合には、再生速度を遅くする変数を再生速度変換部に出力する再生速度決定部とを備えたものである。
【００１１】
このようにしたことで、第１の表示部に表示された情報をユーザが取り逃して、映像に遅延が加えられている他の表示部に視線を動かしたときに、その視線の位置情報が視線位置判定部から再生速度決定部に出力されるようになる。そして再生速度決定部では、視線位置判定部から出力された判定結果に応じて再生速度が決定され、決定された再生速度に応じた変数が、再生速度決定部から再生速度変換部に出力されるようになる。
【発明の効果】
【００１２】
本発明によると、ユーザの視線の位置情報に基づいて再生速度が調整されるため、ユーザに提供する情報量が適応的に調整されるようになる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明の第１の実施の形態を、添付図面を参照して説明する。本実施の形態におけるシステムの構成例を、図１（ａ）に示してある。図１（ａ）に示したシステムは、画像や映像等を例えば２倍速等の再生速度で再生する再生装置１と、再生映像を表示する表示装置２Ａ，表示装置２Ｂ，表示装置２Ｃ，表示装置２Ｄ，表示装置２Ｅと、ユーザＵの視線Ｌ１の位置をユーザＵの目の位置によって検出する視線検出装置３とで構成される。表示装置２Ａ〜２Ｅ及び視線検出装置３は、ケーブル４によって再生装置１と接続してある。なお、本例では表示装置を５台用いた場合に適用してあるが、台数はこれに限定されるものではない。
【００１４】
図１（ｂ）には、図１（ａ）に示した表示装置２Ａ〜２Ｅ及びそれを見ているユーザＵを、側面の方向から見た場合の図を示してある。表示装置２Ａ〜２Ｅは、例えば液晶パネル等で構成してあり、図１（ｂ）に示されるように、奥行き方向及び垂直方向の配置位置が互いに段違いになるように配置してあり、ユーザＵからは縦一列に配置されているように見えるようになる。奥行き方向の一番手前側かつ垂直方向の一番下側には、表示装置２Ａを配置してある。
【００１５】
そして、表示装置２Ａの配置位置に対して奥行き方向の奥側、及び垂直方向の上側には表示装置２Ｂを配置してある。以降、奥行き方向においては奥側の方向、垂直方向においては上側の方向に少しずつ位置をずらしながら、表示装置２Ｃ，２Ｄ，２Ｅを配置してある。つまり、ユーザＵにとって一番手前側に配置されているのは表示装置２Ａとなり、一番奥側に配置されているのは表示装置２Ｅとなる。なお、図１（ａ）及び（ｂ）においては表示装置２Ａ〜２Ｅを保持する構造体の図示を省略してあるが、構造体としては、表示部を搭載する階段状の台や各表示部を支える支柱等を用いるものとする。
【００１６】
表示装置２Ａ〜２Ｅには、後述する再生装置１内の蓄積部３０から読み出した同一の素材の映像が表示されるが、再生装置１には図示せぬ遅延部を設けてあり、表示装置２Ａ〜２Ｅに表示される映像は、表示装置の配置位置が奥側になるにつれて少しずつ遅延されるようにしてある。よって、ユーザＵには、映像が表示装置の手前側から奥側に移動しているような錯覚がもたらされる。
【００１７】
視線検出装置３はユーザＵの視線Ｌ１の位置を検出する装置であり、例えばユーザＵと対面する位置等、ユーザＵの視線Ｌ１を検出しやすい位置に配置してある。なお、本例においては、視線検査装置３として据え置き型の装置を用いるようにしたが、ユーザＵに着用させるタイプの視聴検出用の眼鏡を用いるようにしてもよい。もしくは、遠方に設置した監視カメラによってユーザＵの視線Ｌ１の位置を検出させるようにしてもよい。
【００１８】
ユーザＵは、通常は表示装置２Ａに表示された映像を視聴しているが、情報を取り逃した場合には取り逃した情報を追いかけるために、表示装置２Ａに表示された映像より遅延した映像を示している表示装置に視線を移すことになる。つまりこの場合、ユーザＵの視線Ｌ１は表示装置２Ａから奥側の方向に移動することになる。視線検出装置３は、このような場合におけるユーザＵの視線Ｌ１の動き又は視線Ｌ１の位置を検出し、検出結果を再生装置１に送出する。
【００１９】
次に、システムの内部構成例について図２に示すブロック図を参照して説明する。再生装置１には、映像入力部１０と、符号化・復号処理部２０と、蓄積部３０と、視線位置判定部としての情報取り逃し検出部４０と、再生速度決定部５０と、再生速度変換部６０と、遅延部７０Ａ，７０Ｂ，７０Ｃ，７０Ｄと、が含まれる。図２において、蓄積部３０に記録される記録映像は破線で示してあり、表示装置上に再生される再生映像は一点鎖線で、データは実線で示してある。
【００２０】
映像入力部１０は、入力端子等を介して再生装置１内に映像信号を取り込み、信号レベルの変換処理を行う。符号化・復号処理部２０は、映像入力部１０から入力された映像信号を符号化し、記録映像として蓄積部３０に出力する処理を行う。又は、蓄積部３０に蓄積された圧縮映像データを復号し、再生映像として再生速度変換部６０に出力する処理を行う。符号化レートは、映像入力部１０から入力された映像のフレームレートと同一のレートを用いるものとし、復号は、後述する再生速度決定部７０から送信される再生速度Ｖｋ（単位：倍速）に基づいて行うようにしてある。再生速度Ｖｋは、再生速度決定部７０で生成されて再生速度変換部６０に伝送される。そして再生速度変換部６０において、現在の（その時点での）再生速度Ｖを、再生速度決定部７０から出力された再生速度Ｖｋに変換する処理が行われる。蓄積部３０は、例えばＨＤＤ（Hard Disc Drive）で構成してあり、符号化・復号処理部２０で符号化された映像を蓄積する。
【００２１】
情報取り逃し検出部４０は、視線検出装置３から入力される検出結果に基づいて、ユーザＵの視線位置と表示装置２Ａ〜２Ｅの配置位置とを対応付け、ユーザＵの視線Ｌ１が表示装置２Ａ以外の位置にあると判断した場合には、ユーザによる情報の取り逃しが発生していると判定して、検出結果を再生速度決定部５０に送信する。ユーザＵの視線Ｌ１が表示装置２Ａに注視されたままであると判断した場合には、ユーザＵによる情報の取り逃しはないとの判断結果を再生速度決定部５０に送信する。
【００２２】
再生速度決定部５０は、現在の再生速度Ｖを早めるための変数Ｐｉｎｃと、現在の再生速度Ｖを遅くするための変数Ｐｄｅｃを有しており、情報取り逃し検出部４０から送信された検出結果に応じて、変数Ｐｉｎｃと変数Ｐｄｅｃのいずれを適用するかを決定する。変数Ｐｉｎｃとしては例えば１．５、変数Ｐｄｅｃとしては例えば０．５等の数値を用いるものとする。再生速度決定部５０は、いずれかの変数を現在の再生速度Ｖに乗算することで、再生速度Ｖｋを算出する。Ｐｉｎｃの値は、１より大きい値であればいずれの値でもよく、Ｐｄｅｃの値は、０より大きく１より小さい値であればいずれの値でもよい。そして、算出した再生速度Ｖｋを、再生速度変換部６０に出力する。情報取り逃し検出部４０及び再生速度決定部５０の処理の詳細については、後述する。
【００２３】
再生速度変換部６０は、映像処理部６１と音声処理部６２とで構成される。映像処理部６１は、符号化・復号処理部２０から出力された映像の再生速度Ｖが、再生速度決定部７０から入力される再生速度Ｖｋになるように、再生速度を変換する処理を行う。そして再生速度が変換された映像を、表示装置２Ａに供給するとともに、遅延部７０Ａと、遅延部７０Ｂと、遅延部７０Ｃと、遅延部７０Ｄに供給する。音声処理部６２は、音声信号のうち無音の部分や音声的な特徴が連続した部分は削除する等の手法で、ピッチを変えることなく再生速度を変換する処理を行う。音声の再生速度変換の具体的な処理については、一例として特開２０００−９９０９７号公報に記載がある。再生速度変換部６０（映像処理部６１）の処理の詳細については後述する。
【００２４】
遅延部７０Ａは、再生速度変換部６０から出力された映像にＤ秒の遅延量を加えて、表示装置２Ｂと遅延部７０Ｂに送出する。Ｄ秒とは、例えば２秒等であり、表示装置２の台数やユーザの情報取得能力や嗜好に応じて任意の値を設定可能であるものとする。遅延部７０Ｂは、遅延部７０Ａから伝送された映像に更にＤ秒の遅延を加えて、表示装置２Ｃと遅延部７０Ｃに出力する。遅延部７０Ｃは、遅延部７０Ｂから伝送された映像に更にＤ秒の遅延を加えて、表示装置２Ｄと遅延部７０Ｄに出力する。遅延部７０Ｄは、遅延部７０Ｃから伝送された映像に更にＤ秒の遅延を加えて、表示装置２Ｅに出力する。つまり表示装置２Ｅには、表示装置２Ａに表示された映像より４Ｄ秒遅延された映像が表示されることになる。
【００２５】
次に、図３のフローチャートを参照して、情報取り逃し検出部４０の処理例について説明する。情報取り逃し検出部４０はまず、視線検出装置３から入力される視線位置情報に基づいて、ユーザＵの視線が一番手前側の画面、つまり表示装置２Ａ上にあるか否かの判断を行う（ステップＳ１）。ユーザＵの視線Ｌ１が表示装置２Ａ上にあると判断した場合には、ユーザＵによる情報の取り逃しが発生していないものとみなし（ステップＳ２）、「取り逃しなし」として検出結果を出力する（ステップＳ４）。ユーザＵの視線が、表示装置２Ａ上にないと判断した場合には、ユーザＵによる情報の取り逃しがあったものとみなし（ステップＳ３）、「取り逃しあり」として検出結果を出力する。
【００２６】
なお、図３に示した例では、ユーザＵの視線Ｌ１の位置が一番手前側の表示装置２Ａ上にあるか否かを基準に、ユーザＵによる情報の取り逃しの有無を判断するようにしたが、その他の基準を用いて判断するようにしてもよい。例えば、視線Ｌ１の位置情報とともに、視線Ｌ１の動きの情報も考慮するようにしてもよい。図４に、その場合の処理例について示してある。
【００２７】
図４において、情報取り逃し検出部４０はまず、ユーザＵの視線Ｌ１が一番手前、つまり表示装置２Ａの配置位置から奥に移動している最中であるか否かの判断を行う（ステップＳ１１）。ユーザＵの視線Ｌ１が奥側に移動していると判断した場合には、ユーザＵによる情報の取り逃しがあったとみなし、「取り逃しあり」と判断して（ステップＳ１２）、検出結果（判断結果）を出力する（ステップＳ１３）。ユーザＵの視線Ｌ１が、表示装置２Ａの配置位置から奥に移動していないと判断した場合には、次に、ユーザＵの視線Ｌ１は最も奥の画面、つまり表示装置２Ｅ上にあるか否かの判断を行う（ステップＳ１４）。
【００２８】
ユーザＵの視線Ｌ１が表示装置２Ｅ上にあると判断した場合には、ユーザＵによる情報の取り逃しがあったとみなし（ステップＳ１２）、「取り逃しあり」として検出結果を出力する（ステップＳ１３）。ユーザＵの視線Ｌ１が表示装置２Ｅ上にはないと判断した場合には、ユーザＵによる情報の取り逃しが発生していないものとみなし（ステップＳ１５）、「取り逃しなし」として検出結果を出力する（ステップＳ１３）。
【００２９】
次に、図５のフローチャートを参照して、再生速度決定部５０の処理例について説明する。再生速度決定部５０はまず、情報取り逃し検出部４０から送信された検出結果に基づいて、ユーザＵによる情報の取り逃しがあったか否かを判断する（ステップＳ２１）。情報取り逃し検出部４０から送信された検出結果が、「取り逃しあり」だった場合には、その時点での再生速度Ｖに変数Ｐｄｅｃを乗算して、再生速度Ｖｋを算出する（ステップＳ２２）。Ｐｄｅｃが０．５であり、その時点での再生速度Ｖが１倍速であった場合には、再生速度Ｖｋは０．５（Ｐｄｅｃ）×１（Ｖ）＝０．５倍速となる。つまり、ユーザＵによる情報の取り逃しがあったと判断された場合には再生速度を遅くする処理が行われる。なお、再生速度Ｖが１倍速の場合とは、蓄積部３０に記録された映像のフレームレートを保ったまま再生を行っている場合をいう。
【００３０】
情報取り逃し検出部４０から送信された検出結果が、「取り逃しなし」だった場合には、その時点での再生速度Ｖに変数Ｐｉｎｃを乗算して、再生速度Ｖｋを算出する（ステップＳ２３）。Ｐｉｎｃが１．５であり、再生速度Ｖが１倍速であった場合には、再生速度Ｖｋは１．５×１＝１．５倍速となる。そして、ステップＳ２２又はステップＳ２３で算出された再生速度Ｖｋは、符号化・復号処理部２０と再生速度変換部６０に出力される（ステップＳ２４）。つまり、ユーザＵによる情報の取り逃しはなかったと判断された場合には、ユーザＵの情報取得にまだ余裕があると判断して、再生速度を早くする処理が行われる。
【００３１】
再生速度Ｖｋは、再生速度変換部６０においては、再生速度変換がされる先の値となる。再生速度変換部６０では、その時点での再生速度Ｖを再生速度Ｖｋに変換する処理、つまり、再生速度Ｖｋを新たな再生速度Ｖとする処理が行われる。よって、再生速度Ｖは再生速度Ｖｋに基づいて都度変更されることになる。例えば再生速度Ｖが１．５倍だった場合で、ステップＳ２１の判断で情報の取り逃しがあったと判断された場合には、ステップＳ２２で０．５（Ｐｄｅｃ）×１．５（再生速度Ｖ）の計算が行われ、再生速度Ｖｋは０．７５とされる。そして、再生速度変換部６０による再生速度変換処理により、再生速度Ｖｋ＝再生速度Ｖ＝０．７５倍速となる。
【００３２】
次に、図６を参照して、再生速度変換部６０の処理例について説明する。図６（ａ）には、再生速度変換部６０に入力されるフレームを、時系列に左から順に並べた状態を示してあり、図６（ｂ）には、再生速度変換部６０から出力される各フレームを、同じく時系列に左から順に並べた状態を示してある。図６では、それぞれのフレームにｆ１〜ｆｎ（ｎは自然数）のフレーム番号を付与してある。
【００３３】
再生速度変換部６０に入力されるフレーム数は、再生速度Ｖｋ×ブロックサイズＢで求められる。ブロックサイズＢは、再生速度変換部６０のルーチンが実施される時間の間隔Ｔに、蓄積部３０に蓄積された映像のフレームレートｆｒを乗算することで算出される。例えば再生速度変換部６０のルーチンが実施される時間の間隔Ｔが１秒であり、蓄積部３０に蓄積された映像のフレームレートｆｒが３０ｆｐｓであった場合には、ブロックサイズＢは、１（Ｔ）×３０（Ｂ）＝３０（フレーム）となる。そして、再生速度Ｖｋが３であった場合には、再生速度変換部６０に入力されるフレーム数は、３０×３＝９０（フレーム）となる。
【００３４】
再生速度変換部６０に入力されるフレーム数とは、つまり符号化・復号処理部２０が蓄積部３０から抽出したフレーム数である。符号化・復号処理部２０は、再生速度決定部５０から入力された再生速度Ｖｋと、蓄積部３０に記録された映像のフレームレートｆｒと、再生速度変換部６０のルーチンが実施される時間の間隔Ｔを基に、蓄積部３０から抽出するフレーム数を算出する。そして、算出したフレーム数分だけ蓄積部３０からフレームを抽出して再生速度変換部６０に出力する。
【００３５】
図６（ａ）には、再生速度変換部６０に９０フレームの映像が入力された例を示してある。再生速度変換部６０では、取得したフレームをブロックサイズＢ以内に収めるよう、一定のサンプリング間隔でフレームを間引くことによって、再生速度の変換を行う。たとえばブロックサイズＢが３０である場合には、取得した９０フレームを３フレーム単位で間引いて、３０フレームとする処理を行う。図６（ｂ）には、３０フレームに間引きされた後のフレームを示してあり、間引きされた３０フレームが、符号化・復号処理部２０から入力されたフレームの中の、フレーム番号ｆ１、ｆ４、ｆ７、ｆ１０…ｆ８８で構成されていることを示してある。図６に示した例においては、このような処理を行うことにより、再生速度を３倍としている。この手法は、複雑な構成を用いることなく実現可能であるため、この手法を用いることでハードウェアの規模を抑えることができるようになる。
【００３６】
なお、図６に示した例では、符号化・復号処理部２０から入力されたフレームを一定のサンプリング間隔で間引くことによって、再生速度の変換を行う場合を示したが、フレームレート自体を変換することにより再生速度を変換するようにしてもよい。例えば、図７（ａ）に示した９０フレームのフレームレートを、３０ｆｐｓから９０ｆｐｓに変換することにより、図７（ｂ）に示したように、９０ｆｐｓのフレームレートの映像を９０フレーム分出力するようにしてもよい。このように処理することで、入力されたフレームのすべてが出力されるようになるため、出力映像におけるちらつきが少なくなり、高品質の映像を得ることができる。
【００３７】
もしくは、符号化・復号処理部２０から入力されたフレームのうち、情報量の多いフレームのみを抽出して再生用のフレームとすることで、速度変換を行うようにしてもよい。この場合の処理例を図８のフローチャートに示してある。図８に示した処理は、１秒間隔で行われるものとする（つまり、Ｔ＝１）。まず、符号化・復号処理部２０によって、再生速度Ｖｋ×ブロックサイズＢ分のフレームが蓄積部３０から取得され（ステップＳ３１）、次にフレーム番号ｆｘ（ｘは１からｎの間の所定の数を示す）のフレームにおいて、注目画素とその隣接画素との画素値の差を算出した上で、隣接画素との画素値の差が閾値Ｔｈ以上になる画素の総数Ｓｉを算出する（ステップＳ３２）。つまり、符号化・復号処理部２０から入力されたすべてのフレームにおいて、上述した画素の総数Ｓｉが算出されるようになる。
【００３８】
ステップＳ３１では、例えば再生速度Ｖｋが１．５、ブロックサイズが３０の場合には、１．５×４０＝４５フレームが取得される。よって、ステップＳ３２で処理されるフレーム番号は、ｆ１〜ｆ４５となる。ステップＳ３２で用いる閾値Ｔｈとしては、例えば５０等の数値を設定するものとする。
【００３９】
ステップＳ３２の処理は、ステップＳ３１で取得したすべてのフレームに対して行われるものであり、ステップＳ３３では、取得したすべてのフレームの処理が完了したか否かの判断を行う。すべてのフレームにおいて処理が完了したと判断された場合には、次に、隣接画素との画素値の差が閾値Ｔｈ以上になる画素の総数Ｓｉの大きいフレームをブロックサイズ分だけ抽出し、フレーム番号順に出力する処理を行う（ステップＳ３４）。
【００４０】
図９に、このような処理を行った場合の例を示してある。図９（ａ）には、再生速度変換部６０に入力された４５フレームを、フレーム番号の若い順に左から並べた状態を示してある。この４５フレームの中から、隣接画素との画素値の差が閾値Ｔｈ以上になる画素の総数であるＳｉが大きいフレームを、ブロックサイズである３０フレーム分だけ抽出し、フレーム番号順に並べた状態を、図９（ｂ）に示してある。図９（ｂ）には、再生速度変換部６０から出力される３０フレームが、フレーム番号ｆ２，ｆ３，ｆ５，ｆ７，ｆ９，ｆ１０…ｆ２５で構成されていることを示してある。つまり、図８及び図９に示した方法によれば、情報量の多いフレームのみを抽出することにより、再生速度を早める（図８、図９の例では１．５倍）ことができる。またこのような処理によれば、入力フレームのうち、テロップ等の文字情報が多く含まれる可能性が高いフレームを残すことができるため、速度変換処理によって、ユーザが必要とする情報を削除してしまうようなことがなくなる。これにより、ユーザＵは効率的に情報を取得することができるようになる。
【００４１】
以上説明した本実施の形態の構成及び処理によると、ユーザＵの視線Ｌ１の位置情報や視線Ｌ１の時間方向の遷移情報を基に、ユーザＵによる情報の取り逃しの有無が判断され、取り逃しがあったと判断された場合には再生速度を遅くする処理が行われる。これによりユーザＵは、情報を取り逃がした場合にも、取り逃した情報を、奥側に配置された表示装置の画面上で余裕を持って確認することができるようになる。
【００４２】
また、取り逃がしは発生していないと判断された場合には、ユーザＵの情報取得にまだ余裕があると判断されて再生速度が速くなるため、ユーザＵはより効率的に情報を取得することができるようになる。
【００４３】
さらに、ユーザＵによる情報の取り逃しの有無が自動的に判断されるため、ユーザＵにその内部状態を自己申告してもらう必要がなくなる。よって、ユーザＵに負担がかかることがなくなり、ユーザＵは、情報取得に集中することができるようになる。
【００４４】
なお、表示装置２Ａ〜２Ｅに再提示する情報は映像でなくてもよく、静止画像やテロップ等の文字情報のみであってもよいものとする。
【００４５】
また、上述した実施の形態では、表示装置２Ａ上にユーザＵの視線Ｌ１がある場合には、映像の再生速度を上げる構成としてあるが、表示装置２Ａ上にユーザＵの視線Ｌ１がある間は再生速度の変更を行わない構成としてもよい。
【００４６】
また、上述した実施の形態では表示装置２Ａ〜２Ｅを縦方向（奥行き方向）に配列した場合を例に挙げたが、横方向に配列してもよい。この場合のシステム構成例を、図１０に示してある。図１０において、図１と対応する部分には同一の符号を付してある。図１０の右端には表示装置２Ａを配置してあり、表示装置２Ａの左隣には所定の間隔を空けて表示装置２Ｂを配置してある。以下同様に、表示装置２Ｂの左隣には表示装置２Ｃを、表示装置２Ｃの左隣には表示装置２Ｄを、表示装置２Ｄの左隣には表示装置２Ｅを配置してある。
【００４７】
このシステムの内部構成については、図２に示した構成と同一としてある。つまり、表示装置２Ａは再生速度変換部６０と直接接続してあるのに対して、表示装置２Ｂ〜２Ｅには、それぞれ遅延部７０Ａ〜７０Ｄを接続してある。このため、表示装置２Ａには遅延が加えられていない映像が表示され、表示装置２Ｂには表示装置２Ａに表示される映像より２Ｄ遅延された映像が表示され、一番左端に配置された表示装置２Ｅには、表示装置２Ａに表示される映像より４Ｄ秒遅延された映像が表示される。このためユーザＵには、各表示装置２に表示される映像が、右から左へ、つまり表示装置２Ａ側から表示装置２Ｅ側に移動しているような錯覚がもたらされる。
【００４８】
図１０に示したシステムにおいて、ユーザＵは、中央に配置された表示装置２Ｃ（第２の表示部）を視聴している状態でテロップ等の情報を取り逃してしまった場合には、取り逃した情報を再度確認するために、表示装置２Ｃより時間的に遅延した映像を表示している表示装置２Ｄ又は表示装置２Ｅに視線を移動させることになる。つまり、情報を取り逃した場合には、視線を左方向に移動させるようになる。また、ユーザＵは、表示装置２Ｃに表示されている映像の未来の映像を見たくなった場合には、表示装置２Ｃにこれから表示される映像を既に表示した、表示装置２Ｂや表示装置２Ａに視線を移動させることになる。つまり情報の取り逃しがなく、情報の取得にまだ余裕がある場合には、視線を右方向に移動させるようになる。図１１には、この場合のユーザＵの動作の模式図を示してある。ユーザＵは、図１１に示したように、見逃した映像を再度確認したい場合には視線を左方向（矢印Ａ１の方向）に移し、時間的に先の映像を見たい場合には視線を右方向（矢印Ａ２の方向）に移すようになる。
【００４９】
図１０に示した例では、ユーザＵの視線が中央の表示装置２Ｃ上にある場合には再生速度の変換を行わず、視線が右側に移動した場合には再生速度を上げ、視線が左側に移動したときには再生速度を遅くする処理を行うようにしてある。この場合の情報取り逃し検出部４０（図２参照）の処理の例について、図１２を参照して説明する。情報取り逃し検出部４０はまず、視線検出装置３から送信された情報に基づいて、ユーザＵの視線が中央の表示装置２Ｃの画面にあるか否かの判断を行う（ステップＳ４１）。ユーザＵの視線Ｌ１が中央の画面（表示装置２Ｃの画面）にあると判断した場合には、何も行わずに処理を終了する。
【００５０】
ユーザＵの視線Ｌ１が中央の画面にないと判断した場合には、次に、ユーザＵの視線Ｌ１が表示装置２Ｃの左側に配置された表示装置の画面にあるか否かの判断を行う（ステップＳ４２）。ユーザＵの視線Ｌ１が左側の画面にあると判断した場合には、ユーザＵによる情報の取り逃しが発生したと判断して（ステップＳ４３）、「取り逃しあり」との検出結果を再生速度決定部５０（図１参照）に送信する（ステップＳ４４）。
【００５１】
ステップＳ４２において、ユーザＵの視線Ｌ１が左側の画面にはないと判断した場合には、次にユーザＵの視線Ｌ１が右側の画面にあるか否かの判断を行う（ステップＳ４５）。ユーザＵの視線Ｌ１が右側の画面にないと判断した場合には処理を終了し、ユーザＵの視線Ｌ１が右側の画面にあると判断した場合には、ユーザＵによる情報の取り逃しは発生していないと判断して（ステップＳ４６）、「取り逃しなし」との検出結果を再生速度決定部５０に出力する（ステップＳ４４）。
【００５２】
再生速度決定部５０は、図５のフローチャートに記載された処理を行うものであり、情報取り逃し検出部４０から送信された検出結果が、「取り逃しあり」だった場合には、その時点での再生速度Ｖに変数Ｐｄｅｃを乗算して再生速度Ｖｋを算出し（ステップＳ２２）、算出した再生速度Ｖｋを符号化・複合処理部２０と再生速度変換部６０に出力する（ステップＳ２４）。情報取り逃し検出部４０から送信された検出結果が、「取り逃しなし」だった場合には、その時点での再生速度Ｖに変数Ｐｉｎｃを乗算して、再生速度Ｖｋを算出し（ステップＳ２３）、算出した再生速度Ｖｋを、符号化・復号処理部２０と再生速度変換部６０に出力する（ステップＳ２４）。
【００５３】
前述した通り、変数Ｐｉｎｃは再生速度Ｖを早くするための変数であり、変数Ｐｄｅｃは再生速度Ｖを遅くするための変数である。そして再生速度変換部６０で、その時点での再生速度Ｖが、変数Ｐｉｎｃ又は変数Ｐｄｅｃが乗算された再生速度Ｖｋに変換される。つまり、ユーザＵの視線Ｌ１が中央より右側に配置された表示装置上にある場合には、情報の取り逃しが発生していないと判断して、映像の再生速度を速くする処理が行われる。また、ユーザＵの視線Ｌ１が中央より左側に配置された表示装置上にある場合には、情報の取り逃しが発生していると判断して、映像の再生速度を遅くする処理が行われる。
【００５４】
このような処理が行われることにより、例えばユーザＵが視線Ｌ１を右側の表示装置に移動させた場合には再生速度Ｖが速くなるが、速くなった再生速度がユーザＵにとって最適であれば、ユーザＵは中央に配置された表示装置２Ｃ上で映像を視聴するようになる。ユーザＵの視線Ｌ１が表示装置２Ｃ上にある間は、再生速度は変更されないため、ユーザＵは表示装置２Ｃ上に表示された映像を視聴し続けることで、好みの再生速度を維持することができる。
【００５５】
またユーザＵは、再生速度が速くなったことにより情報を取り逃してしまった場合には、取り逃した情報を追いかけて視線Ｌ１を左へ左へと移動させるようになる。そして、視線Ｌ１が中央より左側の表示装置上に移動した場合には再生速度Ｖは遅くなる。このような視線の移動が繰り返されることにより、中央に配置された表示装置２Ｃ上で、ユーザＵにとっての最適な再生速度での表示が行われるようになる。つまり、図１３に示したように、ユーザＵの視線が左側（矢印Ａ１の方向）に移った場合には映像の再生速度を落とし、ユーザＵの視線が右側（矢印Ａ２の方向）に移った場合には映像の再生速度を速める処理を行うことで、ユーザＵの視線Ｌ１が自然と中央に配置された表示装置２Ｃ上に集まるようになる。すなわち、ユーザＵの情報取得能力や使用状況、嗜好に応じて情報提示量が適応的に調整されるようになる。
【００５６】
なお、図１０に示した例では、遅延が加えられていない映像を表示する表示装置２Ａを一番右側に配置する場合を例に挙げたが、表示装置２Ａを左端に配置し、配置位置が右に進むにつれて、各表示装置上に表示される映像が遅延していくような形態に適用してもよい。
【００５７】
次に、本発明の第２の実施の形態について、図１４〜図１６を参照して説明する。本実施の形態においては、ユーザＵによる情報の取り逃しがあったと判断した場合に、ユーザＵが取り逃した情報を、ユーザＵに対して一番手前側に配置した表示装置２Ａ上に再提示する処理を行う。表示装置２Ａ〜２Ｅの配置は、図１に示した配置であるものとする。
【００５８】
図１４は、本実施の形態におけるシステムの構成例を示すブロック図である。図１４において、図２に対応する部分には同一の符号を付してある。図１４に示したシステムは、再生装置１′と、再生映像を表示する表示装置２Ａ，表示装置２Ｂ，表示装置２Ｃ，表示装置２Ｄ，表示装置２Ｅと、ユーザＵの視線Ｌ１の位置を検出する視線検出装置３とで構成される。
【００５９】
まず再生装置１′の構成から説明すると、再生装置１′には、映像入力部１０と、符号化・復号処理部２０と、蓄積部３０と、情報取り逃し検出部４０と、再生速度・再生位置決定部８０と、再生速度変換部６０と、遅延部７０Ａ，７０Ｂ，７０Ｃ，７０Ｄとが含まれる。映像入力部１０、符号化・復号処理部２０、蓄積部３０、情報取り逃し検出部４０、再生速度変換部６０、遅延部７０Ａ〜７０Ｄの各部の構成については、第１の実施の形態における構成と同一であるため説明を省略する。再生速度・再生位置決定部８０には、再提示情報記憶部としての再提示キュー８１と、再生位置記憶部としてのメモリ８２とを接続してある。
【００６０】
再生速度・再生位置決定部８０は、変数Ｐｉｎｃと変数Ｐｄｅｃを有しており、情報取り逃し検出部４０から送信された検出結果に応じて、変数Ｐｉｎｃと変数Ｐｄｅｃのいずれを適用するかを決定する。ここまでは第１の実施の形態で説明した再生速度決定部５０と同様の処理となる。情報取り逃し検出部４０では、第１の実施の形態で説明したように、ユーザＵの視線Ｌ１が表示装置２Ａ上にない場合や、表示装置２Ａより奥側に移動している場合、一番奥側に配置した表示装置２Ｅ上にある場合に、ユーザＵによる情報の取り逃しがあったと判断する。
【００６１】
再生速度・再生位置決定部８０は、情報取り逃し検出部４０から送信された検出結果が、ユーザＵによる情報の取り逃がしがあったことを示すものであった場合には、表示装置２Ｅで表示中の映像のフレーム番号（再生位置情報）を再提示キュー８１に記憶するとともに、再生位置情報を符号化・復号処理部２０に送信する。再提示キュー８１は、ＦＩＦＯ（First In First Out）型のメモリ等で構成してある。なお本例では、一番奥側に配置した表示装置２Ｅで表示中のフレームのフレーム番号を、再提示キュー８１に記憶させるようにしたが、視線Ｌ１が位置している表示装置で表示中のフレームを、記憶させるようにしてもよい。
【００６２】
再生速度・再生位置決定部８０は、再提示キュー８１に再生位置情報が蓄積されているか否かを所定の間隔で確認するようにしてあり、再提示キュー８１に再生位置情報があった場合には、再生位置情報として記憶されたフレーム番号を、符号化・復号処理部２０に渡すようにしてある。表示装置２Ａ上に、ユーザＵが取り逃がした情報が再提示されている最中であり、再提示キュー８１に再生位置情報が蓄積されている場合には、その時点で表示装置２Ｅ上に表示されているフレームのフレーム番号を、メモリ８２に記憶させる処理を行う。
【００６３】
符号化・復号処理部２０では、再生速度・再生位置決定部８０から送られたフレーム番号に対応するフレームを蓄積部３０から読み出し、再生速度変換部６０に出力する。そして、再生速度変換部６０では、入力されたフレームを所定の再生速度に変換して表示装置２Ａに出力する処理を行う。このよう構成することで、ユーザＵが取り逃した情報が、ユーザＵに一番近い位置にある表示装置２Ａ上に再提示されるようになる。ユーザＵによる情報取り逃しが発生していない場合には、蓄積部３０に蓄積されている未提示の映像が、表示装置２Ａ〜２Ｅに出力されるようになる。なお、表示装置２Ａに再提示する情報は映像でなくてもよく、テロップ等の文字情報のみであってもよいものとする。
【００６４】
次に、再生速度・再生位置決定部８０の処理の詳細について、図１５のフローチャートを参照して説明する。まず、情報取り逃し検出部４０から送られた検出結果において、ユーザＵによる情報の取り逃しがあったか否かの判断を行う（ステップＳ５１）。情報の取り逃しがあったと判断した場合には、再提示キュー８１に現在の表示位置（表示装置２Ｅで表示中のフレームのフレーム番号）を追加するとともに（ステップＳ５２）、現在の再生速度Ｖに変数Ｐｄｅｃを乗算したものを、新たな再生速度Ｖｋとする処理を行う（ステップＳ５３）。
【００６５】
ステップＳ４１で、情報の取り逃しはなかったと判断された場合には、現在の再生速度Ｖに変数Ｐｉｎｃを乗算したものを、新たな再生速度Ｖｋとする処理を行う（ステップＳ５４）。そして次に、表示装置２Ａにおいて、ユーザＵが取り逃した情報が再提示されている最中であるか否かの判断を行う（ステップＳ５５）。再提示中でないと判断した場合には、再提示キュー８１に再生位置情報が蓄積されているかの判断を行い（ステップＳ５６）、蓄積されていない場合には、処理を終了する。
【００６６】
表示装置２Ａにおいて、ユーザＵが取り逃した情報が再提示されている最中であり、再提示キュー８１に再生位置情報が蓄積されている場合には、表示装置２Ｅで表示中のフレームを、現在の再生位置としてメモリ８２に保存する（ステップＳ５７）。そして、再提示キュー８１に蓄積されている再生位置情報を、現在の再生位置情報として符号化・復号処理部２０に出力する（ステップＳ５８）。
【００６７】
ステップＳ５５で、取り逃し情報の再提示中ではないと判断された場合には、再提示キュー８１に再生位置情報が蓄積されているか否かの判断を行う（ステップＳ５９）。再提示キュー８１に再生位置情報が蓄積されていると判断した場合には、ステップＳ５８に進み、再提示キュー８１に蓄積されている再生位置情報を、現在の再生位置情報として符号化・復号処理部２０に出力する処理を行う。ステップＳ５９で、再提示キュー８１に再生位置情報が蓄積されていないと判断された場合には、メモリ８２に記憶されている再生位置情報を読み出して、符号化・復号処理部２０に出力する処理を行う（ステップＳ６０）。
【００６８】
このような処理を行うことで、ユーザＵが取り逃した情報が表示装置２Ａ上に再提示されるとともに、情報再提示中においても映像の再生位置情報がメモリ８２に記憶されるようになる。そして、情報再提示処理終了後にメモリ８２に記憶された再生位置情報に対応する映像が読み出されるようになるため、表示装置２Ａ上には再提示前に表示されていた映像の続きが表示されるようになる。
【００６９】
図１６には、情報再提示処理について説明した図を示してある。図１６（ａ）に示したように、ユーザＵが表示装置２Ａに表示されたテロップ等の重要情報を見逃してしまった場合には、ユーザＵの視線Ｌ１はテロップを追いかけて奥側の方向に移動することになる（図１６（ｂ）参照）。つまり、視線Ｌ１が表示装置２Ａ上にないことになる。よって、視線検出装置３からの検出結果を受けた情報取り逃し検出部４０は、ユーザＵによる情報の取り逃しがあったと判断する。判断結果は再生速度・再生位置決定部８０に出力され、その時点で表示装置２Ｅに表示されていたフレームのフレーム番号が再提示キュー８１に追加されるとともに、再生速度Ｖに変数Ｐｄｅｃが乗算されて、新たな再生速度Ｖｋが算出される。再提示キュー８１に記憶させるフレーム番号と、再生速度Ｖｋとは、符号化・復号処理部２０と再生速度変換部６０にも出力される。
【００７０】
符号化・復号処理部２０では、再生速度・再生位置決定部８０から出力されたフレーム番号に対応するフレームを、蓄積部３０から読み出す処理が行われる。蓄積部３０から読み出されたフレームは再生速度変換部６０に入力され、再生速度変換部６０で再生速度がＶｋに変換される。そして、再生速度がＶｋに変換された映像は表示装置２Ａに出力されるようになる。つまり、表示装置２Ａ上に、ユーザＵが取り逃したテロップ等の情報が再提示されるようになる（図１６（ｃ）参照）。
【００７１】
以上説明した本実施の形態の構成及び処理によると、ユーザＵの視線Ｌ１が表示装置２Ａ上にない場合に、ユーザＵによる情報の取り逃しが発生しているとみなされ、そのときにユーザＵが見ていた映像が、表示装置２Ａ上に再提示されるようになる。このため、ユーザＵによる情報の取り逃しを、確実に防ぐことができるようになる。
【００７２】
なお、ここまで説明した実施の形態では、表示装置２を複数台用いた構成を例に挙げて説明したが、一台の表示装置２の画面を複数の領域に分割し、分割した各領域に対して映像を出力するようにしてもよい。図１７（ａ）には表示装置２の画面を縦方向に５つに分割した場合の例を示してあり、図１７（ｂ）には表示装置２の画面を横方向に５つに分割した場合の例を示してある。このような表示装置２を用いることによっても、上述した実施の形態における効果と同様の効果を得ることができる。
【図面の簡単な説明】
【００７３】
【図１】本発明の第１の実施の形態によるシステムの構成例を示す説明図である。
【図２】本発明の第１の実施の形態によるシステムの内部構成例を示すブロック図である。
【図３】本発明の第１の実施の形態による情報取り逃し検出部の処理例を示すフローチャートである。
【図４】本発明の第１の実施の形態による情報取り逃し検出部の別の処理例を示すフローチャートである。
【図５】本発明の第１の実施の形態による再生速度決定部の処理例を示すフローチャートである。
【図６】本発明の第１の実施の形態による再生速度変換部の処理例を示す説明図であり、（ａ）は入力フレームを示し、（ｂ）は出力フレームを示す。
【図７】本発明の第１の実施の形態による再生速度変換部の別の処理例を示す説明図であり、（ａ）は入力フレームを示し、（ｂ）は出力フレームを示す。
【図８】本発明の第１の実施の形態による情報の多いフレームを残す場合の処理例を示すフローチャートである。
【図９】本発明の第１の実施の形態による再生速度変換部の別の処理例を示す説明図であり、（ａ）は入力フレームを示し、（ｂ）は出力フレームを示す。
【図１０】本発明の第１の実施の形態の他の形態によるシステムの構成例を示す説明図である。
【図１１】本発明の第１の実施の形態の他の形態によるユーザの動作の例を示す模式図である。
【図１２】本発明の第１の実施の形態の他の形態による情報取り逃し検出部の処理例を示すフローチャートである。
【図１３】本発明の第１の実施の形態の他の形態による再生速度の変換処理とユーザの動作との関連の例を示す模式図である。
【図１４】本発明の第２の実施の形態によるシステムの内部構成例を示すブロック図である。
【図１５】本発明の第２の実施の形態による再生速度・再生位置決定部の処理例を示すフローチャートである。
【図１６】本発明の第２の実施の形態による情報再提示の処理例を示す説明図である。
【図１７】本発明の他の形態による表示装置の構成例を示す説明図である。
【符号の説明】
【００７４】
１…再生装置、２Ａ〜２Ｅ…表示装置、３…視線検出装置、１０…映像入力部、２０…符号化・復号処理部、３０…蓄積部、４０…情報取り逃し検出部、５０…再生速度決定部、６０…再生速度変換部、７０Ａ〜７０Ｄ…遅延部、８０…再生速度・再生位置決定部、８１…再提示キュー、８２…メモリ
【図１】
0005115150.tif 000002
【図２】
0005115150.tif 000003
【図３】
0005115150.tif 000004
【図４】
0005115150.tif 000005
【図５】
0005115150.tif 000006
【図６】
0005115150.tif 000007
【図７】
0005115150.tif 000008
【図８】
0005115150.tif 000009
【図９】
0005115150.tif 000010
【図１０】
0005115150.tif 000011
【図１１】
0005115150.tif 000012
【図１２】
0005115150.tif 000013
【図１３】
0005115150.tif 000014
【図１４】
0005115150.tif 000015
【図１５】
0005115150.tif 000016
【図１６】
0005115150.tif 000017
【図１７】
0005115150.tif 000018