(57)【要約】【課題】  記録された情報の提示を容易にする。【解決手段】  情報ストリームは、興味のイベントの発生の情報ストリーム内の時間の点をメモするために、イベントマーカで”ブックマーク”される。イベントの繰り返しの発生が、同じイベントマーカでメモされる。興味のイベントは、演繹的に決定される必要はない。実際には、予想されないイベントが容易くメモされる。【選択図】      図１
2005033767.tif 000002
【特許請求の範囲】
【請求項１】
情報ストリームへのアクセスを提供する方法であって、
複数のタイムスタンプを取得し、各タイムスタンプは情報ストリームの時間ラインに関して参照される関連するイベントマーカと関連する時間索引を有し、２つ又はそれ以上のタイムスタンプは同じイベントマーカに関連することができ、
情報ストリームのセグメント発生し、各セグメントは、タイムスタンプに関連しそして、タイムスタンプに関連する時間索引に基づいて決定され、
セグメントのグループを形成し、各グループは、タイムスタンプが同じイベントマーカに関連する情報ストリームのそれらのセグメントを有し、
各イベントマーカの表現とセグメントのその関連するグループの表現を表示し、表示は配置フォーマットに従って、配置される、方法。
【請求項２】
前記配置フォーマットは、ユーザの提供する配置情報なしで、自動的に決定される、請求項１に記載の方法。
【請求項３】
前記イベントマーカの各々は、シート上に唯一に表現され、前記配置フォーマットは、シート上のイベントマーカの配置に従って決定される、請求項１に記載の方法。
【請求項４】
各イベントマーカは、ユーザ動作により発生された情報であり、各関連する時間索引はユーザ動作の発生の時間である、請求項１に記載の方法。
【請求項５】
前記ユーザ動作はバーコードの走査であり、前記マーカは走査されたバーコードを表し、一度より多いバーコードの走査は、バーコードに関連する１つ又はそれ以上の時間索引を発生する、請求項４に記載の方法。
【請求項６】
前記ユーザ動作は、フレーズを話すことであり、前記イベントマーカはフレーズのディジタル表現を表し、一度より多くフレーズを話すことは、フレーズのディジタル表現に関連する１つ又はそれ以上の時間索引を発生する、請求項４に記載の方法。
【請求項７】
前記ユーザ動作は、入力装置で視覚要素を選択することであり、前記イベントマーカは、視覚要素を表し、一度より多く視覚要素を選択することは、視覚要素に関連する１つ又はそれ以上の時間索引を発生する、請求項４に記載の方法。
【請求項８】
各タイムスタンプは、更に、記録装置と関連し、この方法は同じ記録装置に関連するそれらのタイムスタンプのみに適用される、請求項１に記載の方法。
【請求項９】
前記情報ストリームのセグメントは、関連する時間索引に対する時間の期間にわたる、請求項１に記載の方法。
【請求項１０】
更に、情報ストリームを記録することを含み、タイムスタンプは情報ストリームの記録の時間において記録される、請求項１に記載の方法。
【請求項１１】
前記情報ストリームは、前の記録であり、この方法は更に、情報ストリームの再生中にタイムスタンプを記録することを含む、請求項１に記載の方法。
【請求項１２】
前記情報ストリームは、1つの連続する情報と離散的な情報を有する、請求項１に記載の方法。
【請求項１３】
表示するステップは、表示装置上に画像を発生することを含む、請求項１に記載の方法。
【請求項１４】
表示するステップは、印刷可能な媒体上に画像を発生することを含む、請求項１に記載の方法。
【請求項１５】
情報ストリームへアクセスを提供する方法であって、
複数のタイムスタンプを取得し、各タイムスタンプは情報ストリームの時間ラインに関して参照される関連するイベントマーカと関連する時間索引を有し、２つ又はそれ以上のタイムスタンプは同じイベントマーカに関連することができ、
情報ストリームのセグメントを発生し、各セグメントは、タイムスタンプに関連しそして、タイムスタンプに関連する時間索引に基づいて決定され、
セグメントのグループを形成し、各グループは、タイムスタンプが同じイベントマーカに関連する情報ストリームのそれらのセグメントを有し、
イベントマーカと各イベントマーカに最も近い注釈情報の画像を有するソース画像を受信し、
ソース画像内に含まれる各イベントマーカについて、イベントマーカの画像を含む複数の画像を表示し、画像はイベントマーカに関連するセグメントのグループを示し、且つ、注釈情報の画像はイベントマーカに最も近く、複数の画像は共にグループ化されている、方法。
【請求項１６】
情報ストリームへアクセスする方法であって、
情報ストリームを受信し、
複数のマーカの中から第１のマーカを受信し、
第１のマーカの時間値を決定し、
第１のマーカの時間値に基づいて、第１のマーカと情報ストリーム内の時間の第１の点を関連させ、
少なくとも第２のマーカを受信し、
第２のマーカの時間値を決定し、
第２のマーカの時間値に基づいて、第２のマーカと情報ストリーム内の時間の第２の点を関連させ、
時間の第１及び第２の点において情報ストリームをアクセスし、
情報ストリーム内の時間の追加の点は、複数のマーカの他のマーカについてアクセスされることができ、
同じマーカは複数のマーカ内に一度より多く現われることができる、
方法。
【請求項１７】
情報ストリームを受信することは、前に作成された記録物を再生することを含む、請求項１６に記載の方法。
【請求項１８】
情報ストリームへアクセスすることは、情報ストリーム内の時間の点の代表画像を発生し、印刷可能な媒体上に画像を形成することを含む、請求項１６に記載の方法。
【請求項１９】
１つ又はそれ以上のマーカは、装置識別子に関連し、情報ストリームはそれと情報ストリームが発生された記録装置と関連され、本方法は更に、記録装置と一致する関連する装置識別子を有するそれらのマーカのみを使用することを含む、請求項１６に記載の方法。
【請求項２０】
請求項１６に記載の方法ステップを実行するように構成されたデータ処理要素を有する、情報ストリームをアクセスする装置。
【請求項２１】
情報ストリームをアクセスする装置であって、
タイミング情報を供給するように動作するタイミング要素を有し、
イベントマーキング動作の指示を受信するように動作する入力要素を有し、入力要素は更にイベントマーキング動作に関連するマーカーデータを発生するように動作し、
マーカデータとイベントマーキング動作の時間を示すタイミング情報を受信するように動作するデータ記憶要素を有し、データ記憶要素は、
マーカデータが既に記憶されているかどうかを決定するステップと、
マーカデータがまだ記憶されていない場合には、マーカデータを記憶し、タイミング情報をマーカデータと関連付けするステップと、
マーカデータが既に記憶されている場合には、タイミング情報をマーカデータと関連付け、このように、マーカデータと関連する複数のタイミング情報を累積するステップと、
を実行するように動作する、装置。
【請求項２２】
前記マーカデータとその関連するタイミング情報は、装置から分離された記憶要素へ送信される、請求項２１に記載の装置。
【請求項２３】
更に、記憶要素を有し、マーカデータとそれに関連するタイミング情報は、記憶要素に記憶される、請求項２１に記載の装置。
【請求項２４】
前記入力要素は、更に、再生要求の指示を受信するように動作し、前記マーカデータは再生装置による受信のために送信される、請求項２１に記載の装置。
【請求項２５】
前記タイミング要素は、タイミング情報と記録装置により発生された情報ストリームを同期させるために、情報記録装置からタイミング情報を受信するように構成されるタイミング入力を有する、請求項２１に記載の装置。
【請求項２６】
前記タイミング信号は、情報ストリーム内の先頭点を示すＳＴＡＲＴ信号を有し、時間索引は、先頭点により識別される情報ストリームの一部分と関連する、請求項２５に記載の装置。
【請求項２７】
前記タイミング信号は更に、情報ストリームの終了点を示すＳＴＯＰ信号を有し、時間索引は、開始点と終了点の間の情報ストリームの部分に関連する、請求項２６に記載の装置。
【請求項２８】
前記入力要素は、バーコードスキャナであり、前記マーカデータは走査されたバーコードを表す、請求項２１に記載の装置。
【請求項２９】
前記入力要素は、音声入力装置であり、前記マーカデータは、話されたフレーズの表現である、請求項２１に記載の装置。
【請求項３０】
前記入力要素は、視覚要素を選択するように動作する入力要素であり、前記マーカデータは選択された視覚要素の表現である、請求項２１に記載の装置。
【請求項３１】
前記情報ストリームは前に記録され、タイミング要素は、再生装置からのタイミング信号を受信するように構成されたタイミング入力を有し、前記タイミング情報は、再生装置での情報ストリームの再生動作中に情報ストリームと同期される、請求項２１に記載の装置。
【請求項３２】
前記情報ストリームは、連続するデータのストリームと離散的なデータのストリームの１つを含む、請求項２１に記載の装置。
【請求項３３】
情報ストリームをアクセスする装置であって、
タイミング情報を供給するように動作するタイミング要素を有し、
イベントマーキング動作の指示を受信するように動作する入力要素を有し、入力要素は更にイベントマーキング動作に関連するマーカーデータとイベントマーキング動作に関連するモード選択インジケータを発生するように動作し、
マーカデータとイベントマーキング動作の時間を示すタイミング情報を受信するように動作する、イベント処理要素を有し、
モード選択インジケータが第１モードを示す場合には、イベント処理要素は再生装置による受信のための信号を送信し、信号はマーカデータを示し、それにより再生装置はマーカデータに基づいて情報ストリームをアクセスでき、
モード選択インジケータが第２モードを示す場合には、イベント処理要素はマーカデータと関連するタイミング情報を記憶する、装置。
【請求項３４】
前記信号は、関連するマーキングイベントの発生の前の時間を表し、再生装置は情報ストリームにアクセスできる、請求項３３に記載の装置。
【請求項３５】
少なくとも第１の情報ストリームを受信するステップと、
第１のイベントマーカに関連するタイミング情報を有する、複数の第１のイベントマーカを受信するステップと、
イベントマーカに関連するタイミング情報に基づいて第１の情報ストリーム内の時間の点を識別し且つ第１の情報ストリーム内の時間の点を第１のイベントマーカと関連させることを含む、第１のイベントマーカで第１の情報ストリームにタイムスタンプを付すステップと、
媒体セグメントの１つ又はそれ以上のグループを発生するために、同じイベントマーカでタイムスタンプを付された第１の情報ストリーム内の時間のそれらの点を共にグループ化するステップと、
媒体セグメントのグループを表示するステップと、
を実行するように動作するデータ処理要素を含む情報ストリームへアクセスを提供するプロセッサ。
【請求項３６】
前記第１のイベントマーカは更に、それに関連する装置情報を有し、装置情報は第１の情報ストリームを発生した装置を示し、グループ化するステップは同じ装置情報に関連するそれらの第１のイベントマーカについて実行される、請求項３５に記載のプロセッサ。
【請求項３７】
媒体セグメントのグループを表示することは、媒体セグメントの各グループについて、各媒体セグメントを表す画像を発生し且つ印刷可能な媒体上に画像を形成することを含む、請求項３５に記載のプロセッサ。
【請求項３８】
前記イベントマーカは、走査されたバーコードを表す、請求項３５に記載のプロセッサ。
【請求項３９】
前記イベントマーカは、選択されたグラフィクスを表す、請求項３５に記載のプロセッサ。
【請求項４０】
前記イベントマーカは、話されたフレーズを表す、請求項３５に記載のプロセッサ。
【請求項４１】
情報ストリームにアクセスする方法であって、
マーカを読み出す第１の動作を検出し、
マーカを表す第１の情報を記憶し、
第１の動作の時間を表す第１の時間値を第１の情報と関連付けし、
マーカを読み出す第２の動作を検出し、
第１の時間値に基づいている、情報ストリームのセグメントをアクセスし、
セグメントを表示する、
方法。
【請求項４２】
更に、マーカを読み出す第３の動作を検出し、それに応じて第２の時間値を第１の情報と関連付けし、第２の時間値は第３の動作の時間を表し、マーカを読み出す第４の動作を検出し、それに応じて第２の時間値に基づいて情報ストリームの他のセグメントにアクセスしそしてそれを表示する、ことを含む、請求項４１に記載の方法。
【請求項４３】
情報ストリームをアクセスする方法であって、
第１のマーカーを読み出す第１の動作を受信し、そして、それに応答して、
第１のマーカに関連する第１の時間値を識別し、
情報ストリームの第１のセグメントをアクセスし、第１のセグメントは第１の時間値に基づいて決定され、
第１のセグメントを表す第１の画像を形成し、
第１のマーカを読み出す少なくとも第２の動作を受信し、そして、それに応答して、
第１のマーカに関連する第２の時間値を識別し、
情報ストリームの第２のセグメントをアクセスし、第２のセグメントは第２の時間値に基づいて決定され、
第２のセグメントを表す第２の画像を形成し、
第２のマーカを読み出す第３の動作を受信し、そして、それに応答して、
第３のマーカに関連する第３の時間値を識別し、
情報ストリームの第３のセグメントをアクセスし、第３のセグメントは第３の時間値に基づいて決定され、
第３のセグメントを表す第３の画像を形成する、
方法。
【請求項４４】
形成するステップは、形成されたそれぞれの画像を表示する、請求項４３に記載の方法。
【請求項４５】
情報ストリームにアクセスする装置であって、
第１の時間情報を有する、情報ストリームを発生するように動作する記録装置と、
イベントマーキング動作を検出し、それに応答してイベントマーキング動作に関連するイベントマーカを示すマーキング情報を発生し、イベントマーキング動作の発生を示す、第２の時間情報を、マーキング情報と関連させるように動作する、イベント検出器と、
マーキング情報と各イベントマーキング動作ついての第２の時間情報を記憶する記憶媒体とを有し、
複数のイベントマーキング動作は、同じイベントマーカに関連しているがしかし異なる発生の時間を有する、幾つかのイベントマーキング動作を記憶でき、
第２の時間情報は、各イベントマーカが情報ストリームの一部分に関連するようになされることができるように、第１の時間に関連する、装置。
【請求項４６】
前記第１の時間情報は、情報ストリームの先頭を示す開始信号であり、第２の時間情報は、開始信号に関して測定された、相対的な時間である、請求項４５に記載のシステム。
【請求項４７】
前記第１の時間情報は、情報ストリーム内に含まれる絶対時間を含み、第２の時間情報は絶対時間を含む、請求項４５に記載のシステム。
【請求項４８】
前記第１の時間情報は、情報ストリーム内に含まれる絶対時間を含み、第２の時間情報は相対的な時間を含む、請求項４５に記載のシステム。
【請求項４９】
更に、情報ストリームとイベントマーキング動作を受信するように結合された出力要素を含み、出力要素は、
イベントマーキング動作の発生の時間に基づいて、情報ストリームの一部分を取得するステップと、
情報ストリームの一部分の表現を発生するステップと、
視聴に適する方法で表現をレンダリングするステップとを実行するように動作し、
前記ステップは、イベントマーキング動作の複数の発生について繰り返される、
請求項４５に記載のシステム。
【請求項５０】
前記レンダリングするステップは、ビデオ表示装置上に表示を発生することを含む、請求項４９に記載のシステム。
【請求項５１】
前記レンダリングするステップは、印刷可能な媒体上に画像を生成することを含む、請求項４９に記載のシステム。
【請求項５２】
前記イベントマーカは、バーコードであり、前記イベントマーキング動作は、バーコードの走査である、請求項４５に記載のシステム。
【請求項５３】
前記イベントマーカは、話されたフレーズの表現であり、前記イベントマーキング動作は、フレーズを話すことである、請求項４５に記載のシステム。
【請求項５４】
前記イベントマーカは、視覚要素であり、前記イベントマーキング動作は、視覚要素の選択である、請求項４５に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、一般的には情報ストリームを処理することに関連し特に、情報ストリームの一部分を提示することに関連する。
【０００２】
関連出願の相互参照
本出願は、以下の一般的に所有され且つ未決定の米国特許出願に関連し、全ての目的のために参照によりここに組み込まれる。
【０００３】
弁護士名簿番号０１５３５８−００９３００ＵＳ、名称”データストリームレコーダへの関連するイベントマーカの伝送（Ｔｒａｎｓｍｉｓｓｉｏｎ  ｏｆ  Ａｓｓｏｃｉａｔｅｄ  Ｅｖｅｎｔ  Ｍａｒｋｅｒｓ  ｔｏ  Ｄａｔａ  Ｓｔｒｅａｍ  Ｒｅｃｏｒｄｅｒ）”。
【０００４】
２００２年６月１８日に出願された、名称”マルチメディアペーパ文書を発生する装置（Ｄｅｖｉｃｅ  Ｆｏｒ  Ｇｅｎｅｒａｔｉｎｇ  Ａ  Ｍｕｌｔｉｍｅｄｉａ  Ｐａｐｅｒ  Ｄｏｃｕｍｅｎｔ）”の米国特許出願番号１０／１７５，５４０。
【０００５】
２００１年１１月１９日に出願された、名称”マルチメディア情報についてのペーパベースのインターフェース（Ｐａｐｅｒ−Ｂａｓｅｄ  Ｉｎｔｅｒｆａｃｅ  Ｆｏｒ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｆｏｒｍａｔｉｏｎ）”の米国特許出願番号１０／００１，８９５。
【０００６】
２００１年１１月１９日に出願された、名称”ペーパベースのインターフェースを使用するマルチメディア情報を検索する技術（Ｔｅｃｈｎｉｑｕｅｓ  ｆｏｒ  Ｒｅｔｒｉｅｖｉｎｇ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｕｓｉｎｇ  Ａ  Ｐａｐｅｒ−Ｂａｓｅｄ  Ｉｎｔｅｒｆａｃｅ  ）”の米国特許出願番号１０／００１，８９４。
【０００７】
２００１年１１月１９日に出願された、名称” マルチメディア情報についてのペーパベースのインターフェースのためのカバーシートを発生する技術（Ｔｅｃｈｎｉｑｕｅｓ  ｆｏｒ  Ｇｅｎｅｒａｔｉｎｇ  Ａ  Ｃｏｖｅｒｓｈｅｅｔ  Ｆｏｒ  Ａ  Ｐａｐｅｒ−Ｂａｓｅｄ  Ｉｎｔｅｒｆａｃｅ  Ｆｏｒ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｆｏｒｍａｔｉｏｎ）”の米国特許出願番号１０／００１，８９３。
【０００８】
２００１年１１月１９日に出願された、名称”複数のマルチメディア文書により記憶されるマルチメディア情報についてのペーパベースのインターフェース（Ｐａｐｅｒ−Ｂａｓｅｄ  Ｉｎｔｅｒｆａｃｅ  ｆｏｒ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｓｔｏｒｅｄ  ｂｙ  Ｍｕｌｔｉｐｌｅ  Ｍｕｌｔｉｍｅｄｉａ  Ｄｏｃｕｍｅｎｔｓ）”の米国特許出願番号１０／００１，８９１。
【０００９】
２００１年１１月１９日に出願された、名称”マルチメディア情報を通知する技術（Ｔｅｃｈｎｉｑｕｅｓ  ｆｏｒ  Ａｎｎｏｔａｔｉｎｇ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｆｏｒｍａｔｉｏｎ）”の米国特許出願番号１０／００１，８４９。
【背景技術】
【００１０】
本発明は、一般的には情報ストリームを処理することに関連し特に、情報ストリームの一部分を提示することに関連する。
【００１１】
しばしば、情報ストリームに索引（インデックス）を付し、そして、後に、その索引活動に基づいて情報ストリームにアクセスすることができることが望ましい。設定が市場調査の努力である具体的な例と考える。
【００１２】
市場調査に関係する社会学者は、しばしば、ふるまいを理解するために、焦点のグループを観測する。彼らは、活動期間中のビデオ記録の補足として、メモをとる。従来は、司会者（モデレータ、ｍｏｄｅｒａｔｏｒ）は焦点のグループの振舞いを研究する。司会者は、ビデオを見直すときに、観測とメモを、ビデオ記録物に関連させることができるように、時計をビデオ時間に同期させる。
【００１３】
１つのシナリオでは、市場調査者は、試作品のパッケージを開ける、焦点のグループのメンバを観測する。活動期間中に、焦点のグループの司会者は、パッケージを開ける間の、参加者の動作のビデオを記録し、重要なイベントのノートをとりそして後に見直すためにそれらにフラグを付する。例えば、司会者は、”はさみを使用し”、”ホイルを取り除く”等のようなあるイベントを見ることを予想する。焦点のグループのメンバが、パッケージを開けるのに”はさみを使用する”度に、１人又はそれ以上の司会者は、ノートブックに活動の時間をメモする。焦点のグループのメンバが、”ホイルを取り除く”場合には、その活動の発生の時間がノートブックにメモされる。
【００１４】
ビデオ記録物と司会者のメモの後の見直しは、情報を順序正しくまとめそして組織化する実質的な労力を必要とする。この労力は、種々のノートブックに記録されたメモされたイベントを関連させることも必要な場合には、特に単調でたいくつである。これは、多くの司会者からのノートブックにメモされたイベントの時間に対応するビデオの小部分を得る為に、潜在的に多くの時間の１つ又はそれ以上のビデオ記録物を通して検索することを必要としうる。
【発明の開示】
【発明が解決しようとする課題】
【００１５】
従って、記録された情報の提示を容易にする必要が発生する。記録された情報内のメモされたイベントを識別する能力と、メモされたイベントに対応する時間において記録された情報へアクセスする能力についての必要がある。
【課題を解決するための手段】
【００１６】
本発明の種々の面に従って、情報ストリーム（媒体ストリーム）は、情報ストリーム内での興味の点を示すために、イベントマーカでタイムスタンプが付される。情報ストリーム内の興味のイベントの繰り返しの発生は、同じマーカでタイムスタンプが付される。タイムスタンプの付された情報ストリームは、同じマーカを有する情報ストリームのセグメントが、情報ストリームの後の見直しを容易にするためにともにグループ化されることが可能である適する媒体上に表示される。
【００１７】
本発明の理解は、以下の説明と共に添付の図面により提供される。
【発明を実施するための最良の形態】
【００１８】
図１は、本発明の種々の面を示す、イベントマーキングシステムの高レベルブロック図である。情報レコーダ１０２は、”何か”の記録を発生する。”何か”は、例えば、互いに相互に対話する人々のグループの活動の記録物のような、オーディオビジュアル記録物である。この記録物は一連の画像である。ある者は、例えば、処理プラント内の力変換器は、圧力、負荷力、及び記録されるべき一連のセンサの読出しを発生するような同様なものを、監視するのに使用されうる、センサの出力を記録してもよい。情報ストリームは、従って、オーディオ、ビデオ、生のデータ（センサデータ）又は、他の時間に基づく媒体のような、任意の形式のデータでもよい。
【００１９】
上で暗示されているように、情報レコーダ１０２は情報（媒体）ストリームを発生する。オーディオビジュアル記録物等の場合には、情報ストリームは連続するストリームである。代わりに、情報ストリームは、一連の画像を発生するディジタルカメラの例の場合のように、離散的な情報を含みうる。センサの例では、情報ストリームは、センサの瞬時の読出しの連続する記録であり、又は、情報ストリームは離散時間間隔でとられた読出しの離散データ表現である。
【００２０】
以下の説明では、用語”情報”は、ディジタル情報又はアナログ情報にかかわらず、処理されている情報の記録されたストリームを参照するのに使用される。一般的な情報ストリームは、オーディオビジュアル情報を含む、メディア（マルチメディア）ストリームである。しかしながら、本発明は、オーディオ又はビジュアルデータ以外の情報のストリームへも、等しく適用可能である。上述のように、センサデータは、目的を監視するための時間の期間をわたり記録されることが可能である。通常はマルチメディアデータストリームに関連していないが、そのようなデータはタイムタンプが付され且つ本発明に従って処理されるデータストリームとして扱われうる。
【００２１】
イベントマーカ１０４は、イベントの発生を示すために、ユーザにより使用される。ユーザが、注目すべきイベントを観測するときには、ユーザはイベントマーカをトリガする（”イベントをマークする”）ために予め定められた方法で動作する。応答では、イベントマーカは、何のイベントが発生しそしていつイベントが発生したかを示す、タイムスタンプの付されたマーカを発生するために、適するタイミング情報と共に、トリガリング動作の発生をマークする。複数の記録装置の場合には、イベントマーカが関連する特定の記録装置を示す情報は、タイムスタンプの付されたマーカ内に含まれている。以下に更に詳細に説明するように、１つのそのようなトリガ動作は、バーコードの走査である。他のトリガリング動作は、ユーザがフレーズを話すこと、視覚的ディスプレイ上でコンピュータグラフィックの選択をすること、又は、ある検出可能なしぐさをすることである。本発明の一面に従って、注目すべきイベントの繰り返しの発生は、同じトリガリング動作によりマークされる。例えば、人が部屋に入るたびに、そのイベントは同じバーコードを走査することにより、又は、同じフレーズを話すこと等により、マークされることができる。
【００２２】
トリガ動作は、特定のトリガ動作の表現を記録し（例えば、バーコードが番号により示される）そしてそのトリガリングイベントの発生の時間索引又は他の適する時間情報を記録することにより、メモされることが可能である。タイミング情報１１６は、情報レコーダ１０２とイベントマーカ１０４に共通のタイミング源である。代わりに、タイミング情報は、情報レコーダによりそして互いに独立のイベントマーカにより得られることが可能であり、例えば、各装置はそれ自身のクロックを有してもよい。イベントマーカ１０４は、装置内に設けられた記憶装置にタイムスタンプの付されたマーカ（タイムスタンプ）を記録するように構成され、そして、記録中に情報レコーダと何の相互動作も要求しない。代わりに、イベントマーカが適する記憶装置に装備されていない場合には、イベントマーカは、通信リンク１１４を介して情報レコーダへか又は、遠隔記録装置構成要素（図示していない）へ、タイムスタンプを通信するように構成されうる。
【００２３】
表示エンジン１０６は、情報レコーダ１０２から情報ストリーム１１２ａを、そして、イベントマーカ１０４から（又は、記憶構成要素から）タイムスタンプ１１２ｂの組を受信する。この表示エンジンは、各トリガリングイベントと情報ストリームの一部分を関連させるために、情報ストリームとタイムスタンプを同期させる。表示エンジンはそして、タイムスタンプにより識別される、情報ストリームの１つ又はそれ以上の部分の適する表示１３２を発生する。代わりに、イベントマーカ１０４は、例えば、タイムスタンプファイル等内の、記憶構成要素１０８へタイムスタンプ情報を記憶することができる。表示エンジンは、タイムスタンプファイルから、タイムスタンプ情報へアクセスできる。
【００２４】
表示１３２は、印刷可能な媒体上に形成されることが可能である。代わりに、表示は、コンピュータ端末上又は携帯装置上のような、視覚的表示装置上になされることが可能である。表示は、仮想的であることが可能であり、例えば、ヘッドアップディスプレイのような仮想現実装置が表示を投影するのに使用されることが可能である。
【００２５】
図１Ａは、本発明の他の面を示し、１より多くの情報記録装置１０２’が設けられうる。この構成では、情報ストリーム１１２ａ’は、各情報記録装置からの情報ストリームを表す、１つ又はそれ以上の別々のストリームを有する。代わりに、幾つかの情報記録装置は、単一のストリームを生成するために、それらの出力を結合するように構成されうる。
【００２６】
図１Ａは、１つ又はそれ以上のイベントマーカ１０４’を使用する１人又はそれ以上のユーザが記録されるべきイベントをトリガできる、本発明の更なる面も示す。フロー１１２ｂ’は、１つ又はそれ以上のイベントマーカからのタイムスタンプの付されたマーカの１つ又はそれ以上のストリームを表す。更に詳細に説明するように、タイムスタンプの付されたマーカは、タイムスタンプの付されたマーカを生成した特定のイベントマーカ１０４’を識別する追加の情報を含む。
【００２７】
図２は、特定の実行の例を示す、イベントマーキングシステムの例示的な実施例を示す。記録装置２０２は、連続する情報ストリーム２１２ａを多機能周辺装置（ＭＦＰ）２０６へ供給する、ディジタル記録装置である。代わりに、記録装置は、ＭＦＰへ画像の離散情報ストリームを供給するディジタルカメラでも可能である。
【００２８】
図２に示された特定の実施例に従って、イベントは、タイムスタンプの付されたマーカの組を生成するためにバーコード２０４ｂを走査入力するために、バーコード読取器２０４ａを使用してマークされることが可能である。最初に、ユーザは、予め印刷されたバーコード２０４ｂのシートが提供され、これは、唯一であり任意のイベント又は状況に演繹的に関連せず；バーコードは最初は”ブランク”である。
【００２９】
ユーザが準備完了しているときに、ユーザはイベント名を、所定の特定の使用に従って、各バーコードに割当てることができる。例えば、新たなパッケージの製品テストグループの観測者は、”人がパッケージを開けるのにはさみを使用した”又は、”
人がパッケージからホイルを取り除いた”というようなイベントを研究するのに興味を持っている。ユーザは、図２に示されたように、各イベントをバーコード２１４ａ、２１４ｂに割当てる。図に示されたように、観測者は幾つかのバーコードを割当てしないまま残すことが可能である。
【００３０】
観測セッション中に、参加者の活動は、そのセッションの記録物を生成するために、適する記録装置で記録される。観測者が、誰かがパッケージを開けるのにはさみを使用していることに気付くときは、観測者は、イベントをマーキングすることによりその発生を示すために、そのイベントに関連するバーコード２１４ａを走査できる。同様に、パッケージから誰かがホイルを外していることの発生は、”ホイルを取り除いた”イベントに関連するバーコード２１４ｂを走査することにより、示される。このように、情報ストリーム（ここでは、記録されたセッション）は、実質的に、バーコードでタイムスタンプが付される。本発明の一面に従って、イベントの繰り返しの発生は、そのイベントに関連するバーコードの繰り返しの走査により、示される。従って、所定のバーコードは、タイムスタンプの付された情報ストリーム内で１回より多く現われうる。
【００３１】
走査されたバーコードは、データストリームへ変換されそして、適するタイミング情報と共にバーコード読取器２０４ａへ格納されうる。タイミング情報と共にデータストリームは、後に、データ収集局へ通信される。代わりに、データは、収集されたままで通信される。特定のバーコード読取器が、適切な長期間記憶容量を欠く場合には、データストリームと任意の必要なタイミング情報は、別々のデータ収集局（図示していない）へ（例えば、無線で）通信される。以下に示されたように、タイミング情報は、相対的な又は絶対的なタイミング情報である。
【００３２】
本発明の一面従って、バーコードの意味は、観測セッションに先立ち提供されている必要はない。例えば、観測者は、誰かが歯で袋を開けるというような、予期しない振舞いを目撃しうる。観測者は、予期しない振舞いを見ると、割当されていないバーコード２１６の１つを走査し、そして、その点から同じバーコードの走査で、毎回”歯を使用する”振舞いが観測される。観測者は、新たな振舞いを識別するために、図に示されたように、イベント名”歯”でバーコード２０４ａをマークできる。本発明のこの面の更なる詳細と変形を、以下に説明する。
【００３３】
ＭＦＰ２０６は、記録装置から情報ストリーム２１２ａを受信しそして、同様に、バーコード読取器２０４ａにより収集された走査されたバーコード２１２ｂを受信する。ＭＦＰは、バーコードで情報ストリームに”タイムスタンプを付する”ために、情報ストリームを処理する。走査されたバーコードは、”タイムスタンプの付されたマーカ”の特定の例を示す。走査されたバーコードを情報ストリーム内の時間の点に関連付けする動作は、情報ストリームに”タイムスタンプを付する”特定の例を示す。本発明のこの面の更なる詳細と変形を、以下に説明する。
【００３４】
バーコードシート２０４ｂが、ＭＦＰに送られるときに、ＭＦＰは、タイムスタンプが付された情報ストリームの表示２３２を発生できる。例えば、図２の例に示された画像は、研究セッション中に集められたタイムスタンプが付されたマーカを表す。図２に示された特定の実施例では、表示２３２は、”ビデオペーパ”出力である。ビデオペーパは、オーディオ−ビジュアル情報を紙のような印刷可能な媒体上に表示する技術である。この技術は、１つ又はそれ以上の上述の未決定の出願に更に詳細に示されている。ビデオペーパ表示２３２は、タイムスタンプの付された情報ストリームの一部分の代表的なサムネール画像２５２ａ，２５２ｂを含む。同じバーコードでタイムスタンプの付された情報ストリームのそれらの部分は、ビデオペーパ上に共に”グループ化”される。
【００３５】
グループの配置は、任意の幾つかの方法により示される。１つの場合には、幾つかの自動レイアウトで単純なグループ化が使用されることが可能であり、配置はユーザからの配置情報の任意の入力なしでなされる。例えば、バーコードの特定の集合に特定ではない単純なリスティングである。他の場合には、オリジナルのバーコードを含んだ文書のフォーマットの電子表現は、発生された出力をフォーマットすることを指示するために使用され得る。この電子フォーマットは、クリップの挿入のための明白な空間を含む。更に他の場合には、ペーパ上の他のマークと共にバーコードを含むユーザにより準備されたペーパは、配置を指示するために使用されることが可能である。ペーパは、走査されそして、走査された画像の新たな版が、ペーパ内のバーコードの位置に依存して、挿入されたクリップと共に発生される。
【００３６】
オーディオ−ビジュアル情報ストリームの場合には、代表的なサムネール画像は、ビデオのフレームである。従って、イベント”はさみを使用する”に関連する画像２６２は、共にグループ化されて示される。同様に、イベント”ホイルを取り除く”に関連する画像２６４は、共にグループ化されて示される。同様に、予期しないイベント”歯”に関連する画像２６６は、共にグループ化されて示される。”歯を使用する”イベントは予想されなかったが、しかし、本発明は、それにも関わらず、ユーザが、情報ストリーム内の予期しないイベントの発生を識別しそして、後に予期しないイベントの発生を共にグループ化することを可能とすることを思い出して欲しい。
【００３７】
グループを識別するのに使用されるビデオペーパの現われるラベルは、バーコードシート２０４ｂから取られることが可能である。ＭＦＰ２０６は、予期しないイベントの名称を含む、ユーザが提供したイベント名を含むセグメントを得る為に、バーコードシートの走査入力された画像の予め定められた位置について単純に”切り取り”動作を実行する。続いて、図に示されたように、ビデオペーパ上にグループラベルを提供するために、ビデオペーパ画像に、”貼り付け”動作が実行される。光学的文字認識（ＯＣＲ）処理は、予め定められた位置に書き込まれたテキストを抽出するために適用される可能であることは、理解されよう。しかしながら、切り取り−及び−貼り付けのアプローチは、テキストに加えてユーザが作成しうる非テキストのマーキングを保存する。
【００３８】
例えば、切り取り−及び−貼り付け技術の実行に従って、（そのユーザの提供したマーキングを伴なう）走査されたバーコードシートの画像は、良く知られた一致アルゴリズムを使用して、元々印刷されていたシートの電子画像と比較される。差を含む任意の領域が抽出されそして印刷されるべきシート上で位置が決められ、この差はユーザの作ったマーキングである。
【００３９】
代わりの実施例では、出力画像（例えば、ビデオペーパ画像）は、ユーザによりマークされたバーコードシートの走査入力された画像に基づいて、発生される。ＭＦＰ２０６は、走査されたバーコードシート内の各バーコードの位置を決め、そして、各バーコードのすぐ下に、バーコードに関連する全てのクリップを収容するために出力画像内に十分な空間を挿入することができる。走査されたバーコードシートの画像の残りの部分は、この空間を作るために”押し下げ”られる。ページの段落の空きを再配置するような、新たなフローは、出力画像の適切なフォーマットとして使用できる。
【００４０】
ビデオペーパ２３２の特徴は、ユーザが、続いて、サムネール画像により表されている情報ストリームの部分にアクセスできることである。これは、動作の再生モードを構成する。簡単に、ビデオペーパ上に形成された各サムネール画像は、バーコード２５４のような、グラフィックのしるしとそれを関連させる。ユーザがバーコードを走査するときには、バーコードｉｄが再生装置（図示していない）に伝送される。再生装置は、情報ストリームにアクセスしそして、サムネール画像に関連する情報ストリームの部分を再生する。ビデオペーパのこの面に関する更なる詳細は、１つ又はそれ以上の述の引用出願に記載されている。本発明のこの特定の実施例のビデオペーパ要素は、情報ストリームへのアクセスを更に容易にする追加の情報を生成し、記憶しそして、管理するのに使用される可能であることは理解されよう。
【００４１】
図２は、表示がビデオ表示装置２３４上になされることが可能であることを示す。適するユーザインターフェースは、ユーザが、同じバーコードでタイムスタンプの付された情報ストリームのそれらの部分をアクセスすることを可能とするために設けられることは、理解されよう。例えば、ビデオペーパ２３２上に現われる画像に似た表示は、ビデオ表示装置上に表示されることが可能である。適切な入力装置を使用して、ユーザは、サムネール画像を選択しそして、情報ストリームの対応する部分を見ることが可能である。例えば、情報ストリームの１０秒の小部分は、再生されることが可能である。代わりに、ユーザインターフェースは、選択されたサムネール画像に関連するタイムスタンプに基づいて決定される位置から開始する情報ストリームの再生を可能としうる。本発明のこれらのそして他の面を、以下に更に詳細に説明する。
【００４２】
イベントマーカ
本発明の実施例に従って情報ストリームにタイムスタンプを付すステップは、図５に強調されている。幾つかのステップはフローチャートに示された順序で実行される必要はないことは説明から理解されよう。このステップは、単に説明の便宜のためのフローチャートフォーマットで配置されている。
【００４３】
一般的には、イベントマーカの組は、ブランクマーカのソースのような、イベントマーカのシート上に設けられる。本発明のこの面の特定の実施例のステップ５０２では、イベントマーカは、唯一の予め印刷されたバーコードの組である。予め印刷されたバーコードは、製造されそして、それをエンドユーザへ売る、小売店へ配布される。バーコードは、ペーパ２０４ｂの予め印刷されたシート（図２）として設けられ、ロールのステッカー上に設けられ、ノートブックフォーマット内に設けられることができる、等である。
【００４４】
上述のように、バーコードは、本発明のこの面の特定の実行で使用され、そして、情報ストリームは、それらのイベントに対応するバーコードを走査入力することにより興味のイベントにマークするために、”タイムスタンプが付される”。しかしながら、短く説明したように、マーカの他のフォーマットも可能である。
【００４５】
本発明の特定の実施例では、バーコードは、下にある技術（ステップ５０４）について適する形式で示される。従って、ソフトウェアベースの実施例の場合には、マーカは唯一の番号（マーカＩＤ）、例えば、Ｎ−ビットデータ、としてソフトウェアにより表示されそうである。
【００４６】
唯一に識別されたマーカが好ましい１つの理由は、衝突を避けるためである。例えば、同じ走査装置が異なる２つのプロジェクトに使用される場合には、プロジェクトＡのタイムスタンプの付されたイベントとプロジェクトＢのタイムスタンプの付されたイベントを混同する危険はない。また、追加のマーカは、現在あるマーカと衝突する懸念なしに、いつでも、追加することができる。唯一のマーカの使用は、マーカが入力装置に結合しているなら可能ではない制限のないＩＤ空間を可能とする。例えば、３−ボタンマウスのボタンに対応するマーカを発生することは、ＩＤ空間を３つの異なるマーカに、そして、従って、３つのイベントに、制限する。全キーボードは、約１００の唯一のマーカについて提供するが、しかし、使用するのに幾分非実際的であり、そして、更にイベントの数が非常に制限される。
【００４７】
唯一の識別可能なバーコードを使用する第２の理由は、紙の特定の部分をイベントマーカと関連付けるのに使用されることが可能であることである。例えば、特定の警察官の調査ノートブックのページとイベントマーカを結び付ける能力は、特定のイベントにおいて警察官の存在を確立するのに有益である。幾つかのマーカがそのようなノートブックの各ページ上に配置されるならば、状況内のそれらの存在は、警察官が真に特定のイベントをマークした人であることという強い証拠を提供する。マークとバーコードは証拠が得られた実世界のイベントと”深くかかわり合う”ので、それらは、特定の人が特定のイベントをマークしたという証拠の強い連鎖を提供する。
【００４８】
バーコード以外の唯一に識別可能な”マーカ”は、情報ストリームにタイムスタンプを付すのに使用されることは理解されよう。例えば、ユーザは、例えば、タブレットＰＣのようなビデオ装置上に、視覚的インターフェースが提供される。視覚的インターフェースは、チェックボックスの組のような、グラフィックスの組を有してもよい。各チェックボックスは、唯一に識別される。ユーザは、それらのチェックボックスの幾つかを、例えば、”ゲートを開く”、”人が部屋に入る”、”ねずみが穀物を食べる”、”ねずみがチーズを食べる”等の、研究される観測に特定のイベントと関連付けることができる。例えば、インターフェースは、チェックボックスに関連されることが可能であるイベントについての記述的な情報を入力することをユーザに可能とする、入力スクリーンを提供できる。
【００４９】
イベントが観測される度に、対応するチェックボックスは、適する入力装置を使用して”選択され”ることができ、このようにイベントをマーキングする。インターフェースは、チェックボックスの特定の身元を記録し、そして、特定のチェックボックスが選択されたときを示すタイミング情報を関連させ、これにより、タイムスタンプの付されたマーカを生成する。この情報は、チェックボックス識別子で対応する情報ストリームにタイムスタンプを付す基準を提供する。バーコードでのように、ユーザは幾つかのチェックボックスを割当てずに残しておくことが可能である。割当てられていないチェックボックスは、そして、予期しないイベントが発生したときに進行中に割当てられる。
【００５０】
前述の実施例では、予め定められたマーカの組がユーザへ供給される。例えば、予め印刷されたバーコードが提供されねばならず又は、グラフィックユーザインターフェース上のチェックボックスは、ユーザに提示された。これらの予め定められたマーカは、イベントとの関連を行う視覚的な合図として働く。
【００５１】
本発明のこの面の代わりの実施例に従って、音声に基づくイベントマーカが、情報ストリームにタイムスタンプを付すために使用され得る。本発明のこの特定の実施例は、予め定められた、予め印刷されたマーカの使用を不必要にし、マーカは、観測セッション中に、進行中に定義されうる。観測者は、単に、例えば、”はさみを使用する”、”ホイルをはずす”、”歯！”等の、ある特定の振舞い（イベント）が発生するときに特定のフレーズを話す。適する音声認識処理は、音声を補足し、それを分析し、そして、唯一の識別子を認識された音声と関連させるのに適用されることが可能である。従って、ユーザが、”はさみを使用する”と話す度に、音声認識処理は、情報に関連する必要なタイムスタンプと共に、同じ唯一の識別子を発生し且つ記憶することができる。このように、情報ストリームは、話されたことばでタイムスタンプが付されることが可能である。
【００５２】
本発明の更なる面は、イベントがマークされるときにタイムスタンプの付されたマーカと共に関連する情報を符号化することである。そして、イベントがマークされるときにマーカ（例えば、バーコード）を唯一に識別する識別子（マーカＩＤ）を記憶するのに加えて、特定の記録装置を示す装置識別子（装置ＩＤ）がマーカＩＤに関連される。１つの実行に従って、装置識別子は、記録装置に関連するバーコードを走査することにより決定されうる。装置を識別するバーコードは、記録装置それ自身で形成される。ユーザは単に、記録装置上のバーコードを走査する。装置を識別するバーコードは、記録装置に関連する操作者のマニュアルに印刷され又は、記録装置に関連するバーコードのシート上に印刷される。他の実行に従って、装置を識別するバーコードは、走査装置上でなされるキーの押下のシーケンスとして手動で入力される。更に他の実行も可能であることは、理解されよう。例えば、他の実行に従って、装置識別子は、工場で記録装置にプログラムされることが可能である。
【００５３】
記録装置識別子を記録することは、タイムスタンプの付されたマーカ（タイムスタンプ）と記録装置の間の関連を生成する。本発明のこの面は、情報ストリームの複数のソースとタイムスタンプの複数の組がＭＦＰ２０６装置に表示されうる場合に、特に有益である。ＭＦＰ（又は、他の同様な装置）は、どの情報ストリームがどの組のタイムスタンプに属するかを手動で示すことを要求することなしに、所定の組のタイムスタンプに関連する装置ＩＤに基づいて適切な情報ストリームにアクセスできる。
【００５４】
他の関連する情報は、ユーザを識別する情報を含む。これは、ＭＦＰが、特定のユーザによりタイムスタンプの付された情報ストリームの一部分にアクセスすることを可能とする。更に他の有益な情報がタイムスタンプと関連することは理解されよう。
【００５５】
図４は、注釈を付けることが、各イベントマーカに関連することができることを示す。このように、特定の実施例では、図２のバーコードシート２０４ｂと同様なバーコードシート４０４ｂは、特定のイベントマーカに関連する観測者によりなされた、注釈４１２を含むことが可能である。図４は、”はさみを使用する”についてのイベントマーカに関連することを示す。注釈は、注釈を付されたイベントマーカに対応するアイコンのグループに関連する注釈情報４１４としてビデオペーパ印刷４３２ａに表示される。上述のように、ＭＦＰ２０６は、ユーザが注釈を作ることができるバーコードシートの画像の予め定められた領域内で”切り取り”動作を実行できる。後続の”貼り付け”動作は、注釈をビデオペーパ印刷４３２ａに配置するためになされうる。
【００５６】
図４は、バーコードシート４０４ｂ内の注釈領域がＮの部分に分割される代わりの実施例を示す。この実施例に従って、各部分（例えば、テキストのライン）は、マーカに対応するイベントの発生に関連する注釈である。しかしながら、明白な物理的な制限により、イベントのＮの発生についての十分な空間のみがある。バーコードシート４０４ｂでは、Ｎは３であるとする。ビデオペーパは、出力４３２ｂのように見える。イベント”はさみを使用する”についての最初の３つのサムネール４６２は注釈を付されるが、しかし、イベントの後続の発生は、注釈が付されない。
【００５７】
情報ストリームにタイムスタンプを付すこと
図５を参照すると、ステップ５０６は、”バーコードを関連させる”ことが示されている。本発明の一面は、イベントマーカで情報ストリームに”タイムスタンプを付すこと”の概念である。本発明の更なる面は、情報ストリーム内の典型的には、”同じ”イベントの発生を示すために同じイベントマーカでタイムスタンプが付されることが可能であるということである。この時点で、”同一性”の考えは、ユーザにより定義され、そして、情報ストリームの内容のシステムにより、任意の演繹的な決定又は評価を必要としないことは、注意する価値がある。上述のように、これは、ユーザが、予期しないイベントの発生をマークするために、”割当てられていない”マーカで情報ストリームをマークすることを可能とする。実際には、音声で起こるマーカでマーキングする考えは、マーカそれら自身は予め定められる必要がない、本発明の面を強調する。
【００５８】
図２の特定の例では、イベントマーカはバーコードであり、特に、唯一の数のようなバーコードの適する表現である。しかしながら、上述のように、他の”マーカ”も使用できる。本発明に従って、マーカは唯一に識別され、そして、ある形式のタイミング情報は、各マーカに関連する。これは、マーカが、情報ストリームと時間に関して関連することを可能とする。これは、マーカの各発生を情報ストリーム内の時間の点と関連させる情報を生成する。情報ストリームをマーカと関連させること（ステップ５０６）は、このように、効果的に、マーカで情報ストリームに”タイムスタンプを付す”。
【００５９】
図３を参照すると、例えば、マークM1が時間ｔ１でタイムスタンプが付されたと；即ち、第１のバーコードが時間ｔ１で走査され、又は、第１のフレーズが時間ｔ１で話された仮定する。更に、マークM２が時間ｔ２でタイムスタンプが付されそして、マークM1が時間ｔ３で再びタイムスタンプが付されたとする。本発明に従って、マークM1は時間ｔ１で情報ストリームと関連し（３０２ａ）、時間ｔ３で情報ストリームと関連する（３０２ｂ）。同様に、マークM２は時間ｔ２で情報ストリームと関連する（３０４）。
【００６０】
マークと１つ又はそれ以上の時間の関連付けは、多くの方法で表現されることが可能である。例えば、一実施例では、マーク対時間関連付けが以下のデータ構造を有することが可能である：
Ｍ１：１２：３２：０５，１２：３５：２２，１２：３８：１４
Ｍ２：１２：３４：１９，等
代わりに、マーク対時間関連付けが以下のデータ構造を有することが可能である：
Ｍ１：１２：３２：０５
Ｍ１：１２：３５：２２
Ｍ１：１２：３８：１４
Ｍ２：１２：３４：１９、等
当業者は、更に他の表現する構造が使用できることは、容易く理解するであろう。
【００６１】
前述の説明から、当業者は、幾つかの方法で、本発明のこの面を、容易く実現できる。本発明の特定の実施例では、ＭＦＰ２０６は、情報ストリーム及びタイムスタンプの”ストリーム”（即ち、適するタイミング情報を有するマーカ）を受信しそして、例えば、ビデオペーパ２３２出力を発生するために、情報ストリームとタイムスタンプを進行中に関連させる。代わりに、各タイムスタンプについての情報ストリームファイルへのポインタを供給するテーブルが維持される。この内部表現は、タイムスタンプの付された情報ストリームのビデオ表示表現を容易にし、繰り返して情報ストリームを再度索引を付すことについての必要を不要にする。
【００６２】
本発明のこの面の特定の実行に従って、データ構造は、各マークされたイベント（タイムスタンプ）について生成される。データ構造は、マーカのｉｄ、イベントの時間、情報ストリーム（媒体）へのポインタ、及び再生の開始及び終了点を含む。開始及び終了点は、ビデオペーパが印刷された後にさえ後のときにおいて修正されることが可能である。
【００６３】
上述のように、幾つかの形式のタイミング情報が、マーカと関連する。この情報は、情報ストリームがマーカと同期されることを可能とすることは理解されよう。本発明の一実施例に従って、絶対時間が使用され得る。従って、情報ストリームは、それに関連する絶対時間値を有することが可能である。ディジタルカメラからの画像のような、離散的な媒体の場合には、各画像は時間値に関連することが可能である。記録装置２０２は、情報ストリームと時間値を関連させるクロック又は他の適する時間基準を有しうる。
【００６４】
同様に、バーコードスキャナ２０４ａのようなイベントマーキング装置は、各マーキングイベントについて、装置は、マーカを表すデータ（例えば、バーコード又はディジタル化されたスピーチ等を表す唯一の番号）と、マーク（例えば、走査されたバーコード、離されたスピーチ）が作られた時間を表すデータを発生するために、クロックを有する。この特定の実施例では、情報ストリームと対応する時間値を有するマーカの組は、集合的に、タイムスタンプの付された情報ストリームを表す。この技術は、連続及び離散的な情報ストリームの両方に、適用可能であり、特に離散的な媒体については、各”フレーム”が時間値でマークされているので、適用可能である。タイムスタンプを付す処理は、そして、各マーカに関連する時間値と情報ストリーム内の時間値の一致となる。実際には、正確な一致は、イベントマーカ（例えば、バーコードスキャナ）の時間基準と記録装置の時間基準の間のクロックスキューにより保証されない。従って、誤差のマージンが、供給されるべきであり、誤差の量は、ミリ秒、秒、分等に関わらず、記録されている主題の性質に依存する。
【００６５】
連続する情報ストリームを同期させる更に適切な技術は、基準点に対して時間が測定できる、時間基準点を確立することである。例えば、情報ストリームは、イベントマーキング装置（例えば、バーコードスキャナ）内のタイマを”ゼロにする”ために使用されうる先頭で基準点を含みうる。特別な信号は、システム（例えば、ＭＦＰ）が検出できる媒体の先頭に挿入される。従って、タイマがゼロになった５分後に発生するマーキングイベントは、特別な信号から測定された情報ストリームへ５分である情報ストリーム内の点に対応する。更なる基準点が、タイミングが重大な場合にはクロックドリフトをカウントするために、記録装置内のクロック及びイベントマーキング装置を周期的に再同期させるために設けられる。追加の情報は、クロック再同期の発生を示すために必要とされることは理解されよう。
【００６６】
情報ストリームを一連のイベントマーカに同期させる他の技術は、ＳＴＡＲＴ−ＳＴＯＰインジケータの使用である。このシナリオでは、ＳＴＡＲＴとラベル付けされたバーコードが、記録装置が開始されたのとほぼ同じ時に走査される。バーコードデータとビデオが併合されるときに、システムはＳＴＡＲＴインジケータを認識し、そして関連する時間をビデオの先頭にマップする。このように、この時間から他のバーコードに関連するタイムスタンプまでのオフセットが、ビデオ記録物に索引を付しそして、適切なビデオクリップを引き出すのに使用される。選択的に、ＳＴＯＰコードは記録物が完了すると走査され得る。これは、特に、幾つかの記録セッションが、例えば、単一のビデオテープのような、単一の情報ストリーム内に含まれる場合には、特に有益である。その場合には、あるＳＴＯＰインジケータと次のＳＴＡＲＴインジケータの間の情報ストリームの部分は、タイムスタンプＩＤからビデオへの索引の付加のときに、ファクタ化される。
【００６７】
代わりに、”ＳＴＡＲＴマーキングイベント”インジケータと”ＳＴＯＰマーキングイベント” インジケータが使用されうる。興味の各イベントは、インジケータのこれらの対により、範囲を定められる。更に、各範囲を定められたイベントの周辺の状況は、情報ストリームのセグメントを有する各範囲を定められたイベントの先頭及び／又は最後をパディング（ｐａｄｄｉｎｇ）することにより提供される。これらの周囲の状況は、例えば、再生中に提供されうる。
【００６８】
図５は、”バーコード記憶装置”のステップ５０８を示す。本発明の一面に従って、タイムスタンプ情報は、それ自身イベントマーカ装置１０４（図１）に記憶されうる。従って、本発明の特定の実施例では、バーコードスキャナは、タイムスタンプを記憶する適するメモリ要素を有するように構成される。メモリ要素は、装置がデータを収集中にターンオン及びオフされる場合には、不揮発性メモリの形式である。ディスクドライブユニットが設けられうる。タイムスタンプ情報は、走査されたバーコードに加えて各バーコードが走査されたときを示す幾つかのタイミング情報を有しうる。追加の情報は、各バーコードが走査された回数のようなメトリックを含みうる。
【００６９】
バーコードスキャナ（及び更に一般的には、イベントマーキング装置１０４）は、後続の処理のために適する記憶装置へ記憶されたタイムスタンプを通信する。代わりに、イベントマーカ装置は、それを受信するとすぐにタイムスタンプを送信するように構成され得、これにより、イベントマーカ装置自身内に、タイムスタンプについての適する記憶装置を設ける必要を回避する。
【００７０】
このステップ５０８内の典型的な処理は：
・走査されたバーコード、選択されたグラフィック、ディジタル化された話されたフレーズ等のようなマーカを受信しそして、マーカを適する内部表現（例えば、唯一の番号）に変換し、
・マーカが前に受信されていない場合には、マーカを記憶し、そして、タイミング情報をその受信時間を示すマーカと関連させ、
・マーカが前に受信されていた場合には、単にタイミング情報を受信のその時間を示すマーカと関連させる。
当業者は、バーコードスキャナのような、適するイベントマーカ装置１０４内で前述したものを容易に実行できる。
【００７１】
タイムスタンプの付された情報ストリームの操作
図５は、”ビデオペーパを生成する”ステップ５１０をも示す。図２では、本発明のこの面の２つの実施例が、タイムスタンプの付された媒体をアクセスすることに関連して説明される。ビデオペーパ２３２は、サムネール画像の1つに関連するバーコード２５４を選択することにより情報ストリームの一部分へアクセスするのに使用され得る。図２は、タイムスタンプの付された情報ストリームを再生するためのビデオ表示装置２３４をも示す。ビデオ表示装置は、多くの数の選択と情報ストリームをアクセスする制御をユーザに提供する。
【００７２】
図５は、”表示すること”のステップ５１２を示す。本発明のこの面に従って、”再生”の考えは、情報ストリームの一部分を再生することを含む。例えば、図３に示された媒体セグメント３１２は、タイムスタンプM１に関連するセグメントである。代わりに、情報ストリームは、選択されたタイムスタンプの時間に基づい時間から開始して再生される。図３は、情報ストリームの再生は、タイムスタンプM1より前の時間３１４で又は、タイムスタンプに続く時間３１６で、開始する。
【００７３】
しかしながら、タイムスタンプの付された情報ストリームの再生は、ビデオペーパのプリントアウト２３２から再生を開始する代わりに、バーコードシート２０４ｂ（図２）それ自身から開始されることは理解されよう。バーコードシートスキャナは、望ましい再生機能を実行するために、ケーブル又は無線接続を介して適するように構成された再生装置と共に共同するように構成されうる。再生装置と記録装置は、１つで且つ同一でもよいことに注意する。
【００７４】
ユーザは、バーコードシート上のバーコードを走査することにより再生を開始できる。このように、第１”打”（走査）”の歯を使用する”バーコードは、例えば、イベントに対応するバーコードでタイムスタンプの付された情報ストリーム内の時間に第１の点の再生を発生する。同じバーコードの第２打は、第２のタイムスタンプで情報ストリームの再生を発生する等である。同じバーコードの連続する走査は、結果的に、情報ストリームが”重なる”ことを発生しそしてタイムスタンプの第１の発生から再生を開始する。
【００７５】
代わりに、バーコードに関連する全てのクリップは、バーコードの単一打で再生されることが可能である。例えば、ユーザが”歯を使用する”バーコードをたたくときには、バーコードに関連する各クリップは再生されることが可能である。各クリップの間の適切な遅延は、１つのクリップからつぎへの変化として提供される。
【００７６】
更にそして他の実施例に従って、ＩＤの走査は単にそのＩＤに関連する全てのクリップのリストを表示する。例えば、各クリップについての、１つ又はそれ以上のそれぞれのサムネール画像が、表示されることが可能である。これは、ユーザが任意のビデオペーパを印刷させることなしに書いた任意のノートの状況で、元のバーコードシートのクリップオフを再生するのに有益である。
【００７７】
本発明の一実施例では、イベントマーキング装置２０４ａ（図２）は、単一ボタンのバーコードスキャナである。ボタンを押すことは、走査動作を活性化し、そして、装置がバーコードを読みそしてタイミング情報と共に対応するＩＤを記憶する事を起こす。装置がＭＦＰ２０６に接続されているときには、ＩＤとタイムスタンプはバーコードスキャナからＭＦＰへ送られ、そして、記録されたストリーム２１２ａにタイムスタンプを付すのに使用される。タイムスタンピング情報と共に、ＭＦＰは続く再生のために情報内に各タイムスタンプと関連するＩＤを有する。バーコードスキャナは、情報ストリームを再生するために、上述の参照された未決定の出願の１つ又はそれ以上のに記載されたように、適するように構成された表示システムに接続されている。走査動作を活性化することは、装置が、バーコードを読みそして、対応するＩＤを表示システムに送ることを発生する。識別子の受信に際して、表示システムはそのＩＤを有する１つ又はそれ以上のタイムスタンプの位置を捜し、そして記録された媒体の対応する部分を表示する。同じＩＤの追加の実体を受信することは、システムが次の対応するタイムスタンプへスキップすることを発生する。
【００７８】
同じ装置は記録されたイベントに関連する情報ストリームにタイムスタンプを付すのと、受信された識別子に応答してストリームの一部分を表示することの両方に使用され得ることに注意すべきである。この場合には、装置（例えば、ＭＦＰ）は、”関連”モードと”再生”モードの間で切り換える方法を有しなければならない。これは、装置に関する制御により又は、特別な”モードスイッチ”識別子を送ることによりなされうる。
【００７９】
代わりの実施例では、バーコード走査装置は、２つのボタン、ＲＥＣＯＲＤボタンとＰＬＡＹボタンの、２つのボタンが装備される。ＲＥＣＯＲＤボタンを押すことは、走査動作を開始しそして、続いて、走査されたＩＤは、前のように関連するタイミング情報と共に記憶装置へ格納される。ＰＬＡＹボタンを押すことも、走査動作を開始する。更に、装置は、同じＩＤを有する前に記録されたイベントについてそのローカルメモリを検索する。イベントが見つかる場合には、ＩＤとそのイベントに関連するタイミング情報は、表示システムへ送られる。走査装置は、どのイベントがＩＤについて表示されたかを示す”ＰＲＥＶＩＯＵＳ”ポインタを記憶する。１つより多くのイベントが見つかりそして”ＰＲＥＶＩＯＵＳ”ポインタが存在する場合には、このＩＤについての次のイベント（例えば、後のタイムスタンプ）が、表示システムへ送られる。イベントが見つからない場合には、ＩＤは、これは再生要求であるという指示と共に表示システムへ送られそして、表示システムに他の実施例でのように記録されたストリームの位置を捜し且つ表示することを発生する。
【００８０】
本発明の他の面に従って、”再生”動作は、タスクに特定のマーカの使用により制御されることが可能である。本発明のこの面の特定の実施例では、再生装置はＤＶＤプレーヤ又は、オーディオ増幅器である。”再生”、”巻戻し”又は、”標準の音量”のような、適切な再生制御を表しうる、特別の”再生制御”バーコードが、設けられる。これらのバーコードは、それにより紙のシート上のバーコードが特別化された”遠隔制御カード”を構成するように配置された、ステッカーか又は幾つかの他のマーキング法である。このように、ビデオペーパの場合には、印刷はその上に印刷された再生制御バーコードを有する。元のバーコードシート（例えば、図２の２０４）からの再生が望ましい場合には、予め定められた機能性を有するバーコードステッカーは、再生制御を提供するために、シート上に貼り付けられる。代わりに、予め印刷されたシートも、予め印刷され”再生制御”バーコードを含みうる。
【００８１】
例えば、図２のビデオペーパ２３２は、単純に適切な制御バーコードを打つことにより再生装置を動作させるための制御バーコードを含むことが可能である。これは、バーコードスキャナが、媒体が複数の再生装置内に記憶されているような、既にタイムスタンプの付された媒体を再生するために使用される場合には、便利である。ユーザは、ユーザの再生環境をアクセスするために、バーコード読取器と幾つかの異なる遠隔制御装置の任意の１つの間で、常に、切り換える必要はない。１つ又はそれ以上のＴＶモニタが、１つ又はそれ以上のＤＶＤプレーヤ、ＣＤプレーヤのバンク、ビデオカセットレコーダ（ＶＣＲ）等を含む、複数のソース供給に接続されうる非常に似たシナリオを考えると、ＤＶＤからのビデオは例えばＶＣＲへ送られるように、幾つかの装置はデイジーチェインで接続される。望ましいソースを望ましいモニタへ接続するために過剰な遠隔制御装置の過剰な操作することは、非常に苦しい経験である。
【００８２】
しかしながら、装置がコンピュータ作動のスイッチが設けられている場合には、適切な制御バーコードを有するビデオペーパは、再生タスクを大きく単純化できる。ユーザは単に、望みの動作に対応するバーコードを打つ。打たれたバーコードは、ユーザのディスプレイへのアクセスされた媒体を含む媒体再生装置を接続するために、従って、装置を活性化するために、適する制御ソフトウェアにより検出されうる。このように、例えば、再生装置Ａ上の媒体に対応するバーコードが打たれた場合には、制御ソフトウェアは、ユーザのディスプレイへ再生装置Ａを接続するために適切なスイッチ制御できる。ユーザが次に関連する媒体が再生装置Ｂ上にあるバーコードを打つ場合には、制御ソフトウェアは、ユーザのディスプレイと再生装置Ｂを共に接続することが可能である。
【００８３】
複数のディスプレイが設けられる場合には、ビデオペーパは、選択されたタイムスタンプの付された媒体セグメントが表示される、ディスプレイを示すバーコードを含むことが可能である。例えば、表示装置Ａに関連するバーコードを打つことは、ユーザが異なる形式の装置についてのバーコードを打つまでは、タイムスタンプの付された媒体の全ての後続の打は表示装置Ａに表示されていることの指示であることが可能である。
【００８４】
タスクに特定のマーカは、”誕生パーティー”をフィルムに写すような特定の目的について一般的に使用されるマーカＩＤの組である。全ての誕生パーティーページは、”ろうそくを消す”、”ケーキを食べる”等について使用される同じＩＤを有しうる。各タスクについての特別フォーマットは、プリントアウトを発生するのに使用され得る。これらの特別なＩＤと種々の動作の間の関連（例えば、印刷フォーマット）は、ウェブサイト又は、他の公共的な貯蔵所で有効になされる。ＩＤそれ自身は、そのような情報についてのアドレス内のコードである。
【００８５】
本発明の他の面に従って、タイムスタンプを付すことは、再生されている情報ストリームに実行されうる。本発明の前述の説明した面は、記録されている情報ストリームに適用される。即ち、情報ストリームは、記録処理中にタイムスタンプが付されている。
【００８６】
しかしながら、本発明は、続いて見直される前に記録された情報ストリームに、等しく適用可能である。ユーザは前に記録された情報ストリームを再生しながら、ユーザは、ストリームのタイムスタンプを発生するために再生中に観測するイベントをマークするために、イベントマーカ１０２（例えば、バーコードスキャナ）を使用できる。これらのタイムスタンプは、上述と同じ方法で、前に記録された情報ストリームと同期されることが可能である。従って、タイムスタンプを付す活動は、記録がなされている間に発生する必要はないが、しかし、記録の後のときに、実行されることが可能であることは理解されよう。
【００８７】
本発明の更に他の面は、前にタイムスタンプの付された情報ストリームにタイムスタンプを付すことである。前にタイムスタンプの付された情報ストリームの見直し中に、ユーザは情報ストリームに更にタイムスタンプを付すためにイベントマーカを使用できる。ユーザがタイムスタンプの付された情報ストリームをブラウジングしている、例えば、１分のクリップを見ている、ことを考える。ユーザは、クリップ内のなにか興味のあるものにマークするために、クリップそれ自身にタイムスタンプを付す。更に一般的には、前にタイムスタンプの付された情報ストリームの任意の部分は、追加のタイムスタンプで注釈が付される。
【図面の簡単な説明】
【００８８】
【図１】本発明の面を説明する高レベルの一般的なブロック図である。
【図１Ａ】複数の情報ストリーム及び／又は複数のイベントマーカストリームが発生されうる本発明の一面を示す。
【図２】本発明の例示的な実施例の一般的なブロック図である。
【図３】情報ストリームへのタイムスタンプの付加を示す。
【図４】紙表示のための種々の実施例を示す。
【図５】本発明の特定の実装のステップを強調するフローチャートである。
【符号の説明】
【００８９】
１０２      情報レコーダ
１０４      イベントマーカ
１０４’    イベントマーカ
１０６      表示エンジン
１１２ａ    情報ストリーム
１１２ａ’  情報ストリーム
１１２ｂ    タイムスタンプ
１１２ｂ’  フロー
１１４      通信リンク
１１６      時間情報
１３２      表示
２０２      記録装置
２０４ｂ    バーコード
２０４ａ    バーコード読取器
２０６      多機能周辺装置
２１２ａ    連続する情報ストリーム
２３２      ビデオペーパ
２３４      ビデオ表示装置
３０２ａ、３０２ｂ、３０４  マーク
４０４ｂ    バーコードシート
４１２      注釈
４３２ａ    ビデオペーパ
４３２ｂ    ビデオペーパ
【図１】
2005033767.tif 000003
【図１Ａ】
2005033767.tif 000004
【図２】
2005033767.tif 000005
【図３】
2005033767.tif 000006
【図４】
2005033767.tif 000007
【図５】
2005033767.tif 000008