(57)【要約】  ＡＶ機器から供給されるリニアコンテンツと、ノンリニアコンテンツとを同一画面に表示してプレゼンテーション等を行う場合において、その後それぞれのコンテンツを正しく同期して再生できるように、各コンテンツの画面表示の状態および機能を適切に記録できる記録再生システムを実現する。  リニアコンテンツの映像と、ノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録手段と、リニアコンテンツ及びノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段と、ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段と、操作履歴及びファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ記録手段と、シナリオに基づいて、指定された所定の時点からリニアコンテンツ及びノンリニアコンテンツの再生を開始するコンテンツ再生手段と、を備える。
2007138702.tif 000002
【特許請求の範囲】
【請求項１】
再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録手段と、
前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段と、
前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段と、
前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、
前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生手段と、
を備えることを特徴とする記録再生システム。
【請求項２】
前記映像記録手段は、前記コンテンツ再生手段により再生された前記リニアコンテンツ及び／又は前記ノンリニアコンテンツに対して、その映像を再帰的に記録することを特徴とする請求項１に記載の記録再生システム。
【請求項３】
前記コンテンツ再生手段は、前記リニアコンテンツ及び／又は前記ノンリニアコンテンツの少なくともその一部分の再生を行うことができない場合、前記映像記録手段に記録された映像から前記再生を行うことができない時間に関わる映像部分を検索し、前記シナリオに基づいた再生と同期するように映像部分の再生を行うことを特徴とする請求項１に記載の記録再生システム。
【請求項４】
再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録ステップと、
前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成ステップと、
前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成ステップと、
前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録ステップと、
前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生ステップと、
を含むことを特徴とするコンテンツの記録再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像や静止画像、音声、描画やテキスト、起動したアプリケーションなど、画面上に表示される各種データに対する操作および表示の履歴を、当該時点における機能を維持しながら記録、再生する記録再生システムに関する。
【背景技術】
【０００２】
従来、パーソナルコンピュータ上で起動したアプリケーションプログラムなどに関して、ユーザーの操作履歴を記録する装置が提案されている（例えば、特許文献１、非特許文献１参照）。このような装置によれば、操作履歴を動画で再生したり、文書作成ソフトウェアや描画ソフトウェアなどで操作履歴を利用することにより文書作成や描画を迅速に行うことができる。また、同じく操作履歴を利用することにより、同一のプレゼンテーションを再現することができる装置も提案されている（例えば、特許文献２参照）。【０００３】
一方、最近はパーソナルコンピュータを中核としてテレビチューナーやオーディオ・ビデオ機器（ＡＶ機器）などを複合させた製品（以下、複合製品と称する）も多数開発されている。これらの複合製品によれば、例えば、パーソナルコンピュータ上で起動したアプリケーションプログラムの画像、インターネットを介して取得したＷｅｂサイトの画像、テレビチューナーやＡＶ機器を介して取得したテレビ放送やビデオ映像などを同一画面に表示させることが可能となる。【０００４】
このような製品の応用例として、図１に示すような電子黒板装置がある。この電子黒板装置は、プラズマディスプレイなどを用いた大型の表示部２００を黒板として装備し、接続するパーソナルコンピュータ３０１やＡＶ機器４０１、ペン入力装置３０２を用いて画像やテキスト、描画などを表示する。【０００５】
例えば、上記の電子黒板装置を用いてプレゼンテーションやエデュケーション（教室内での授業など）を行う場合、パーソナルコンピュータで起動させたアプリケーションプログラムの画像、接続するＡＶ機器から取得したビデオ映像、手書き入力した描画、インターネット上のＷｅｂサイトから取得した画像など多くのデータを同一画面に表示することができる。【０００６】
図２のディスプレイ表示例を用いてエデュケーションの場合を例に具体的に説明する。例えば、アプリケーションプログラムでテキスト２１１（教科書など）を表示しながら手書き入力で板書２１４を行う任意の授業において、授業の教材としてビデオ映像２１２やＷｅｂページの画像２１３を同一画面２１０上の別領域に表示させたりする状況が想定される。このような複合製品においても、プレゼンテーションやエデュケーションの履歴を記録し、プレゼンテーションや授業を再現できることが好ましい。例えば、授業などの場合、履歴の再現を活用してより効率的な授業を行うことができるからである。【０００７】
ところが、上記に開示した操作履歴を記録する従来の装置では、パーソナルコンピュータ内部（複数のアプリケーション）の操作履歴は参照できるが、画面表示の状態までは参照（再現）できないという課題があった。つまり、上記の授業例で説明すると、従来の装置では、アプリケーションプログラムの表示や描画の履歴は記録できるが、途中で再生したビデオ映像やＷｅｂページの表示に関して、データ（コンテンツ）のソースが何であるか程度は記録できたとしても、当該コンテンツのどの部分がどの程度の時間に渡って表示されたかなどの履歴を記録することはできなかった。【０００８】
例えば、過去の授業で、当日の天気予報に関するホームページを表示させたシーンを再利用したいような場合、当該ホームページは通常は更新されているので、前回と全く同じ状態を維持して授業を再現することはできないという問題が生じる。従って、従来の装置では、操作や画面表示の過去の履歴を時刻指定で再生することもできなかった。【０００９】
一方、この問題を解決する手段として授業状況をビデオ録画するという方策も考えられるが、この場合は、今度は過去の任意の状態に戻って授業をやり直すことができないという問題が生じる。具体的には、例えば、過去の授業の操作履歴を再利用して授業を行う際に、その過去の授業において板書（ペン入力装置による手書き入力）に間違いがあったような場合、好ましいのは間違いが発生する直前までは各種機器の操作や画面表示の履歴を再現し、間違いが発生した時点から起動中の（テキスト表示やペン入力の）アプリケーションをそのまま利用して、板書をやり直して修正を行うことである。【００１０】
しかし、録画映像のみを再生する方法では、アプリケーションの起動状態や画面表示の状態が再現されていないため、途中から授業の修正（正確には、修正するための分岐動作）を行うことはできなかった。【００１１】
【特許文献１】特開２０００−１６３６０２号公報（第２頁−第５頁、図１）
【特許文献２】特開平５−６７１５０号公報（第２頁−第５頁、図１）
【非特許文献１】俺デスク  次世代履歴情報検索ツール、［online］、［平成１８年５月８日検索］、インターネット＜ＵＲＬ：http//oredesk.com＞
【発明の開示】
【発明が解決しようとする課題】
【００１２】
本発明が解決しようとする課題としては、ＡＶ機器（ビデオレコーダやデジタルカメラなど）から供給される動画データのような時系列で内容が変化するリニアコンテンツと、文書作成アプリケーションプログラムで表示するテキストデータのような時系列で内容が変化しないノンリニアコンテンツとを同一画面に表示してプレゼンテーション等を行う場合において、その後それぞれのコンテンツを正しく同期して再生できるように、各コンテンツの画面表示の状態および機能を適切に記録できる記録再生システムを実現することが一例として挙げられる。
【課題を解決するための手段】
【００１３】
上記課題を解決するために、請求項１に記載の記録再生システムは、再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録手段と、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段と、前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段と、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生手段と、を備えることを特徴とする。【００１４】
また、上記課題を解決するために、請求項４に記載のコンテンツの記録再生方法は、再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録ステップと、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成ステップと、前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成ステップと、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録ステップと、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生ステップと、を含むことを特徴とする。
【発明を実施するための最良の形態】
【００１５】
本発明の実施の形態に係る記録再生システムは、下記（１）〜（６）の手段を備えることを特徴とすることをその最良の形態とするものである。
（１）  再生内容が時系列で変化するリニアコンテンツの映像と、再生内容が時系列で変化しないノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する映像記録手段。
（２）  前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成する操作履歴生成手段。
（３）  前記ノンリニアコンテンツの使用ファイルの履歴を生成するファイル使用履歴生成手段。
（４）  前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ生成記録手段と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するコンテンツ再生手段。【００１６】
本発明の実施の形態における記録再生システムは、表示映像の記録だけでなく、操作およびそれに伴う機能までの記録と再生を行う。具体的には、例えば、授業やプレゼンテーションの開始から終了まで全ての表示映像の記録に加え、同時に、機器操作に係る履歴を映像の記録と同期させて全て記録する。使用したファイルの途中経過も随時記録され、この経過も再利用することができる。【００１７】
つまり、表示映像を元に戻して再生するときには、当該映像を供給する機器の機能も元に戻されるため、過去のその時点におけるのと同様の状況が再現され、機器の操作が可能となる。さらに、表示映像を元に戻した場合、その画面からの経過時間とその後の操作も新しい情報として記録される。従って、システムを利用している間は常時表示映像が記録され、再利用できるコンテンツ（即ち、授業やプレゼンテーションに係るまとまりのある記録）が蓄積されていく。【００１８】
(実施例)
以下、本発明の実施の形態に係る記録再生システムの具体的な実施例について図面を参照して詳細に説明する。
図３は、本発明の実施の形態に係る記録再生システムの実施例の概略構成を示す図である。記録再生システムは、主に、記録再生装置１００と、それに接続するプラズマディスプレイなどの表示部２００、パーソナルコンピュータ（以降、ＰＣシステムと称する）３００、周辺ＡＶ機器４００で構成される。【００１９】
図４は、本実施例の記録再生システムにおける記録再生装置の内部構成を示す図である。記録再生装置１００は、主に、ＩＲ信号受信部１１、ＡＶ機器状態取得部１２、ＡＶ機器状態計算部１３、ＡＶ機器状態復元部１４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ操作取得部２１、ＰＣ状態取得部２２、ＰＣ状態計算部２３、ＰＣ状態復元部２４、ＰＣ状態設定部２５、ＰＣ操作発信部２６、コマンドテーブル２７、シナリオ作成部３１、シナリオ記録部３２、シナリオ記録データベース（ＤＢ）３３、シナリオ取得部３４、シナリオ復元部３５、動画記録部４１、動画記録データベース（ＤＢ）４２、動画取得／再生部４３、記録／再生管理部５０、時刻発生装置６０、で構成される。【００２０】
ＩＲ信号受信部１１は、周辺ＡＶ機器４００を操作するためのＩＲ信号を受信する。また、ＡＶ機器状態取得部１２は、周辺ＡＶ機器４００の状態に関する情報を取得する。【００２１】
なお、ＩＲ信号はＡＶ機器に付属のリモコン装置から発信される信号等であり、周辺ＡＶ機器に対する操作情報が取得可能な信号、または周辺ＡＶ機器に対する操作が可能な信号であればその他の種類の信号であってもかまわない。【００２２】
また、ＡＶ機器状態計算部１３は、受信したＩＲ信号及びＡＶ機器状態取得部１２で取得した状態に関する情報に基づいて、周辺ＡＶ機器４００の状態を計算する。そして、この受信したＩＲ信号の履歴と取得したＡＶ機器状態とを合わせて記録しておくことにより、周辺ＡＶ機器に対する操作履歴生成手段として機能する。【００２３】
一方、ＡＶ機器状態復元部１４は、画面表示を再生する際に、周辺ＡＶ機器４００の状態を再現するための情報を生成する。ＡＶ機器状態設定部１５は、周辺ＡＶ機器４００に対してＡＶ機器状態復元部１４で生成した情報の設定を行う。【００２４】
ＩＲ信号発信部１６は、画面表示を再生する際に、周辺ＡＶ機器４００を操作するためのＩＲ信号を発信する。【００２５】
ＰＣ操作取得部２１は、マウスやキーボードなどから入力されたＰＣシステム３００を操作するための信号を取得する。ＰＣ状態取得部２２は、ＰＣシステム３００の状態に関する情報を取得する。【００２６】
また、ＰＣ状態計算部２３は、ＰＣ状態取得部２２で取得した状態に関する情報に基づいてＰＣシステム３００の状態を計算する。【００２７】
一方、ＰＣ状態復元部２４は、画面表示を再生する際に、ＰＣシステム３００の状態を再現するための情報を生成する。【００２８】
ＰＣ状態設定部２５は、ＰＣシステム３００に対してＰＣ状態復元部２４で生成した情報の設定を行う。ＰＣ操作発信部２６は、画面表示を再生する際に、ＰＣシステム３００を操作するための信号を発信する。【００２９】
なお、ＰＣシステムの状態に関する情報とは、具体的には、起動しているアプリケーション名や、アプリケーションの表示位置／表示状態、処理ファイル名などで、編集中のファイルの途中の状態（経過）などを含めてもよい。【００３０】
シナリオ作成部３１は、シナリオデータを作成する。シナリオデータとは、ＡＶ機器状態計算部１３とＰＣ状態計算部２３で計算した周辺ＡＶ機器およびＰＣシステムの状態に係る情報を、後述する時刻発生装置６０から取得したタイムスタンプ情報に関連付けて構成した情報である。【００３１】
シナリオ記録部３２は、作成したシナリオデータをシナリオ記録データベース３３に記録する。【００３２】
シナリオ取得部３４は、シナリオ記録データベース３３に格納された特定のシナリオデータを取得する。【００３３】
シナリオ復元部３５は、画面表示を再生する際に、周辺ＡＶ機器４００やＰＣシステム３００の状態を再現するための情報を、取得したシナリオデータから生成する。【００３４】
動画記録部４１は、周辺ＡＶ機器４００から供給される映像データを動画記録データベース４２に記録する。【００３５】
なお、本実施の形態において、周辺ＡＶ機器４００はＡＶセレクターとしての機能を担っており、ＰＣシステム３００で起動しているアプリケーションが画面に表示する画像などもこの周辺ＡＶ機器４００を介して動画記録部４１に記録される。【００３６】
つまり、表示部２００に表示される映像（表示映像）が時系列でそのまま記録される。動画取得／再生部４３は、画面表示を再生する際に、上述のシナリオ復元部３５で生成された再現用のシナリオデータに基づいて、動画記録データベース４２に記録されている該当部分の映像データを取得し、ＡＶセレクターとしての機能を担う周辺ＡＶ機器４００へ送出する。送出された映像データは、動画記録部４１を介して表示部２００で再現映像として再生される。この再現映像として再生された映像は、動画記録データベース４２に再帰的に記録される。【００３７】
記録／再生管理部５０は、上記の記録再生装置１００各部の記録／再生動作を統括管理する。記録再生装置１００への入力部（図示省略）を介して外部より入力される画面表示データの記録開始／終了要求コマンドや、記録した画面表示データの再生開始／終了要求コマンドは、記録／再生管理部５０を介して動画記録部４１やシナリオ記録部３２に伝達される。【００３８】
時刻発生装置６０は、絶対時刻または最初の時刻生成要求があったときからの相対時刻に関する情報を生成する。記録される表示画面データにこの時刻情報がリンクされることにより、画面表示を再生する際に、ＰＣシステム３００は勿論、周辺ＡＶ機器４００への操作やその状態を的確に再現することができる。【００３９】
次に、本実施例の記録再生システムの動作について説明する。
はじめに、操作履歴の記録動作について説明する。図５は、記録再生装置の内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。【００４０】
また、図６は本実施例における記録再生システムの操作履歴記録動作手順を示すフローチャートである。
はじめに、ＰＣ操作取得部２１が、キーボード入力やマウス入力、タイマー処理など、トリガーとなる操作信号を取得すると（ステップＳ１０１）、ＰＣ状態計算部２３が、共通のインターフェースの有無を確認し（ステータス１０２）、共通のインターフェースがある場合には当該共通インターフェースにて、起動しているアプリケーションの状態を取得する（ステップＳ１０３）。【００４１】
状態に係る情報の取得は、ＰＣ状態取得部２２で行う。ＰＣ状態計算部２３は、取得した情報をシナリオ作成部３１へ伝送する。シナリオ作成部３１は、伝送された情報と、ＡＶ機器状態計算部１３から伝送されたＡＶ機器の状態に係る情報とをリンクさせ、時刻発生装置６０から取得した時刻情報に関連付けてシナリオデータを作成する（ステップＳ１０４）。作成したシナリオデータは、シナリオ記録データベース３３に格納される。【００４２】
一方、ステップＳ１０２の判断において共通インターフェースがない場合、次に、ＰＣ状態計算部２３は、個別の状態を取得するための方法がコマンドテーブルに保存されているか否かを判断する（ステップＳ１０５）。【００４３】
保存されている場合、コマンドテーブルに記載されている方法で起動しているアプリケーションの状態を取得する（ステップＳ１０６）。状態に係る情報の取得は、ＰＣ状態取得部２２で行う。ＰＣ状態計算部２３は、取得した情報をシナリオ作成部３１へ伝送する。【００４４】
シナリオ作成部３１は、伝送された情報と、ＡＶ機器状態計算部１３から伝送されたＡＶ機器の状態に係る情報とをリンクさせ、時刻発生装置６０から取得した時刻情報に関連付けてシナリオデータを作成する（ステップＳ１０７）。作成したシナリオデータは、シナリオ記録データベース３３に格納される。【００４５】
一方、ステップＳ１０５の判断においてコマンドが保存されていない場合、次に、ＰＣ状態計算部２３は、キーボードやマウス、ＡＶ機器のリモコン装置などのＩＲ装置からの操作入力の有無を判断する（ステップＳ１０８）。【００４６】
操作入力がある場合、当該操作入力に係るシナリオデータを作成する（ステップＳ１０９）。操作入力がない場合、操作履歴の記録に係るスレッドを終了する（ステップＳ１１０）。【００４７】
次に、画面表示を過去に遡って再生する画面表示の再現動作について説明する。図７は、記録再生装置の内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。【００４８】
また、図８は、本実施例における記録再生システムの画面表示の再現動作手順を示すフローチャートである。はじめに、記録／再生管理部５０は、画面表示の再生を開始する基点となる復元ポイントの要求入力を受け（ステップＳ２０１）、復元ポイントへ直接復元できる情報の有無を判断する（ステップＳ２０２）。直接復元できる情報がある場合、記録／再生管理部５０は、後述する復元処理を行う（ステップＳ２０３）。【００４９】
直接復元できる情報がない場合、記録／再生管理部５０は、さらに過去に遡って復元ポイントがあるか否かを判断する（ステップＳ２０４）。復元ポイントがない場合、記録／再生管理部５０は、当該復元ポイントからの動画再生処理を行う（ステップＳ２０５）。動画再生処理とは、動画記録データベースに記録されている画面表示の映像を再生する処理である。【００５０】
記録／再生管理部５０は、シナリオ取得部３４、シナリオ復元部３５を介して動画取得／再生部４３に、動画記録データベースに格納された動画データを取得させる。【００５１】
一方、ステップＳ２０４の判断において復元ポイントがある場合、当該復元ポイントから復元処理を行う（ステップＳ２０６）。そして、入力処理の再現を行い（ステップＳ２０７）、当初の復元ポイントに到達するまで入力処理の再現を繰り返す（ステップＳ２０８）。ステップＳ２０８において復元ポイントに到達した場合、処理を終了する。【００５２】
次に、上記の復元処理の詳細について説明する。図９は、本実施例における記録再生システムの復元処理手順を示すフローチャートである。【００５３】
はじめに、記録／再生管理部５０は、復元ポイントの指定を受けて（ステップＳ３０１）、シナリオ記録データベース３３に記録のあったプロセスを起動させる（ステップＳ３０２）。次に、使用ファイルの有無を判断し（ステップＳ３０３）、使用ファイルがある場合、プロセスへ使用ファイルの通知を行う（ステップＳ３０４）。【００５４】
ステップＳ３０３の判断において使用ファイルがない場合、次に、共通インターフェースにて再現可能な情報であるか否かを判断する（ステップＳ３０５）。再現可能な情報である場合、プロセスへ表示ページなどの表示状態の通知を行って（ステップＳ３０６）、復元処理を完了する。【００５５】
一方、ステップＳ３０５の判断において再現可能な情報でない場合、個別のアプリケーションの状態遷移コマンドを取得し（ステップＳ３０７）、プロセスへ表示ページなどの表示状態の通知を行って（ステップＳ３０８）、復元処理を完了する。【００５６】
画面表示の再現は、具体的には、シナリオ取得部３４が該当するシナリオをシナリオ記録データベース３３から取得してシナリオ復元部３５へ伝送し、シナリオ復元部３５、ＡＶ機器状態復元部１４およびＰＣ状態復元部２４を介してＰＣシステム３００および周辺ＡＶ機器４００の状態を復元した画面表示が表示部２００で再生されて行われる。【００５７】
ところで、図１０は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの構成および処理やデータの流れを示す図である。【００５８】
また、図１１は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。【００５９】
さらに、図１２は、ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。【００６０】
ここでは、各部の機能および動作については周辺ＡＶ機器４００がＡＶセレクターの機能を担う場合と同じであるため、詳細な説明を省略する。【００６１】
なお、上記の実施例において、記録モードから再生モードに常時切り替えられるが、各記録動作は継続される。表示部２００モニターの入力切り替えはＰＣシステム３００で制御するが、周辺ＡＶ機器４００に付属のリモコン装置でも切り替え可能である。【００６２】
上記の実施例では、動画記録部４１および動画記録データベース４２が映像記録手段としての役割を担う。また、ＩＲ信号受信部１１とＡＶ機器状態取得部１２およびＡＶ機器状態計算部１３とがリニアコンテンツに対する操作履歴生成手段として、ＰＣ操作取得部２１がノンリニアコンテンツに対する操作履歴生成手段として、ＰＣ状態取得部２２がファイル使用履歴生成手段としての役割を担う。さらに、シナリオ作成部３１、シナリオ記録部３２がシナリオ生成記録手段としての役割を担う。【００６３】
また、シナリオ取得部３４、シナリオ復元部３５、ＡＶ機器状態復元部１４、ＰＣ状態復元部２４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ状態設定部２５、ＰＣ操作発信部２６がコンテンツ再生手段としての役割を担う。【００６４】
以上、上記実施例において詳述したように、本発明の実施の形態に係る記録再生システムは、再生内容が時系列で変化する（動画像データなどの）リニアコンテンツの映像と、再生内容が時系列で変化しない（テキストデータなどの）ノンリニアコンテンツの映像とを含む映像を表示装置の画面に表示して、当該映像を記録する動画記録部４１と、前記リニアコンテンツ及び前記ノンリニアコンテンツに対する操作信号を取得して操作履歴を生成するＰＣ操作取得部２１と、前記ノンリニアコンテンツの使用ファイルの履歴を生成するＰＣ状態取得部２２と、前記操作履歴及び前記ファイル使用履歴を時間軸で関連付けたシナリオを生成して記録するシナリオ作成部３１と、前記シナリオに基づいて、指定された所定の時点から前記リニアコンテンツ及び前記ノンリニアコンテンツの再生を開始するシナリオ取得部３４、シナリオ復元部３５、ＡＶ機器状態復元部１４、ＰＣ状態復元部２４、ＡＶ機器状態設定部１５、ＩＲ信号発信部１６、ＰＣ状態設定部２５、ＰＣ操作発信部２６を含むコンテンツ再生機能部とを備える。【００６５】
これにより、プレゼンテーションや授業などにおいて、コンテンツの過去の画面表示を忠実に再現でき、これを再利用することができる。また、過去の任意時刻における状態から画面表示を再生することも可能である。【００６６】
つまり、パーソナルコンピュータ内部のアプリケーションだけでなく、ＡＶ機器などから提供されるリニアコンテンツの利用履歴も保持するので、過去の状態に戻って、その時点からやり直し（分岐）を行うことができる。
【図面の簡単な説明】
【００６７】
【図１】従来の電子黒板装置の構成を示す図である。
【図２】従来の電子黒板装置におけるディスプレイ表示例を模式的に示す図である。
【図３】本発明の実施の形態における記録再生システムの概略構成を示す図である。
【図４】本発明の実施の形態における記録再生システムの、記録再生装置の内部構成を示す図である。
【図５】記録再生装置の内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図６】本発明の実施の形態における記録再生システムの操作履歴記録動作手順を示すフローチャートである。
【図７】記録再生装置の内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図８】本発明の実施の形態における記録再生システムの画面表示の再現動作手順を示すフローチャートである。
【図９】本発明の実施の形態における記録再生システムの復元動作手順を示すフローチャートである。
【図１０】ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの構成および処理やデータの流れを示す図である。
【図１１】ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、操作履歴の記録動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【図１２】ＰＣシステムがＡＶセレクター相当の機能を担う場合における記録再生システムの内部構成のうち、画面表示の再現動作に関与する機能部分を抽出し、処理やデータの流れを示した図である。
【符号の説明】
【００６８】
１１  ＩＲ信号受信部
１２  ＡＶ機器状態取得部
１３  ＡＶ機器状態計算部
１４  ＡＶ機器状態復元部
１５  ＡＶ機器状態設定部
１６  ＩＲ信号発信部
２１  ＰＣ操作取得部
２２  ＰＣ状態取得部
２３  ＰＣ状態計算部
２４  ＰＣ状態復元部
２５  ＰＣ状態設定部
２６  ＰＣ操作発信部
３１  シナリオ作成部
３２  シナリオ記録部
３３  シナリオ記録データベース（ＤＢ）
３４  シナリオ取得部
３５  シナリオ復元部
４１  動画記録部
４２  動画記録データベース（ＤＢ）
４３  動画取得／再生部
５０  記録／再生管理部
６０  時刻発生装置
１００  記録再生装置
２００  表示部
３００、３０１  ＰＣシステム
３０２  ペン入力装置
３１０  マウスやキーボードによる入力
４００、４０１  ＡＶ機器
４１０  ＩＲ入力
【図１】
2007138702.tif 000003
【図２】
2007138702.tif 000004
【図３】
2007138702.tif 000005
【図４】
2007138702.tif 000006
【図５】
2007138702.tif 000007
【図６】
2007138702.tif 000008
【図７】
2007138702.tif 000009
【図８】
2007138702.tif 000010
【図９】
2007138702.tif 000011
【図１０】
2007138702.tif 000012
【図１１】
2007138702.tif 000013
【図１２】
2007138702.tif 000014
【国際調査報告】
2007138702.tif 000015
2007138702.tif 000016