(57)【要約】開示する方法は、第1のデバイス上のオブジェクトの状態を決定することと、オブジェクトの状態の標示子を遠隔デバイスに送信することとを含み、標示子は、遠隔デバイスがオブジェクトの状態を提示することを可能にするように構成される。遠隔デバイスとのオーディオおよびビデオ通信を確立することをさらに含んでもよい。遠隔デバイスとのオーディオおよびビデオ通信は、ネットワーク上で確立されてもよい。オブジェクトは、書籍であってもよく、状態は、書籍のページ番号と関連付けられてもよい。前述の方法は、オブジェクトの決定された状態に基づいて、アニメーションのコンテンツを表示することをさらに含んでもよい。アニメーションのコンテンツを表示することは、オブジェクトと関連付けられたコンテンツに関連する解説を提供する、または質問を行う、アニメーションのキャラクタを表示することを含んでもよい。【選択図】図４
2013511856.tif 000002
【特許請求の範囲】
【請求項１】
第１のデバイス上のオブジェクトの状態を決定することと、
前記オブジェクトの前記状態の標示子を遠隔デバイスに送信することであって、前記標示子は、前記遠隔デバイスが前記オブジェクトの前記状態を提示することを可能にするように構成される、前記送信することと、
を含む、方法。
【請求項２】
前記遠隔デバイスとのオーディオおよびビデオ通信を確立することをさらに含む、請求項１に記載の方法。
【請求項３】
前記オーディオおよびビデオ通信は、ビデオ会議セッションの一部である、請求項２に記載の方法。
【請求項４】
前記遠隔デバイスとの前記オーディオおよびビデオ通信は、ネットワーク上で確立される、請求項２に記載の方法。
【請求項５】
前記オブジェクトは、物理的オブジェクトである、請求項１に記載の方法。
【請求項６】
前記オブジェクトは、書籍であり、前記状態は、前記書籍のページ番号と関連付けられる、請求項５に記載の方法。
【請求項７】
前記オブジェクトは、仮想オブジェクトである、請求項１に記載の方法。
【請求項８】
前記オブジェクトは、電子書籍である、請求項７に記載の方法。
【請求項９】
前記状態は、前記オブジェクトの物理的状態である、請求項１に記載の方法。
【請求項１０】
前記オブジェクトは、書籍であり、前記状態は、前記書籍のページ番号である、請求項１に記載の方法。
【請求項１１】
前記オブジェクトは、書籍であり、前記状態は、前記書籍の中の選択されたコンテンツである、請求項１に記載の方法。
【請求項１２】
前記オブジェクトの前記決定された状態に基づいて、アニメーションのコンテンツを表示することをさらに含む、請求項１に記載の方法。
【請求項１３】
アニメーションのコンテンツを表示することは、前記オブジェクトと関連付けられたコンテンツに関連する解説を提供する、または質問を行う、アニメーションのキャラクタを表示することを含む、請求項１２に記載の方法。
【請求項１４】
遠隔デバイスでオブジェクトの状態の標示子を受信することと、
前記受信した標示子に基づいて、前記遠隔デバイスで前記オブジェクトの状態を決定することと、
前記オブジェクトの前記状態をユーザに提示することと、
を含む、方法。
【請求項１５】
前記オブジェクトの前記決定された状態に基づいて、アニメーションのコンテンツを表示することをさらに含む、請求項１４に記載の方法。
【請求項１６】
アニメーションのコンテンツを表示することは、前記オブジェクトと関連付けられたコンテンツに関連する解説を提供する、または質問を行う、アニメーションのキャラクタを表示することを含む、請求項１５に記載の方法。
【請求項１７】
少なくとも１つのプロセッサと、
コンピュータプログラムコードを含む、少なくとも１つのメモリと、
を備える、装置であって、前記少なくとも１つのメモリおよび前記コンピュータコードは、前記少なくとも１つのプロセッサと連動し、少なくとも、
第１のデバイス上のオブジェクトの状態を決定することと、
前記オブジェクトの前記状態の標示子を遠隔デバイスに送信することであって、前記標示子は、前記遠隔デバイスが前記オブジェクトの前記状態を提示することを可能にするように構成される、前記送信することと、
を前記装置に行わせるように構成される、装置。
【請求項１８】
前記オブジェクトは、書籍であり、前記装置は、書籍をその中で綴じるためのバインダ綴じ具をさらに備える、請求項１７に記載の装置。
【請求項１９】
前記書籍の前記状態を決定するように構成される、１つ以上のセンサを備える、請求項１７に記載の装置。
【請求項２０】
１つ以上の時点で第１のデバイス上のオブジェクトの状態を決定することと、
前記１つ以上の時点で前記状態の標示子をセッションとして記録することと、
前記セッションを遠隔デバイスに送信することであって、前記セッションの前記標示子は、前記遠隔デバイスが前記オブジェクトの前記状態を決定することを可能にするように構成される、前記送信することと、
を含む、方法。
【請求項２１】
前記セッションは、オーディオおよびビデオコンテンツをさらに含む、請求項２０に記載の方法。
【請求項２２】
遠隔デバイスから記録されたセッションを受信することであって、前記セッションは、オブジェクトの１つ以上の状態の標示子を含み、前記セッションは、前記オブジェクトの前記１つ以上の状態のそれぞれと関連付けられたオーディオおよびビデオコンテンツをさらに含む、前記受信することと、
前記オブジェクトの現在の状態を検出することと、
前記オブジェクトの前記検出された現在の状態と関連付けられた前記オーディオおよびビデオコンテンツを再生することと、
を含む、方法。
【請求項２３】
オブジェクトに関連するオーディオおよびビデオコンテンツを記録することと、
前記オーディオおよびビデオコンテンツのうちの１つ以上の部分のそれぞれを、前記オブジェクトの状態と関連付けることと、
前記オーディオおよびビデオコンテンツ、ならびに前記オーディオおよびビデオコンテンツの前記関連付けを記憶媒体に記憶することと、
を含む、方法。
【請求項２４】
前記オーディオおよびビデオコンテンツの記録中に、前記オブジェクトの前記状態を検出することをさらに含む、請求項２３に記載の方法。
【請求項２５】
オブジェクトの現在の状態を検出することと、
記録されたオーディオおよびビデオコンテンツの一部分との前記検出された現在の状態の関連付けを決定することと、
前記オブジェクトの前記検出された現在の状態と関連付けられた前記オーディオおよびビデオコンテンツの前記一部分を再生することと、
を含む、方法。
【発明の詳細な説明】
【発明の背景】
【０００１】
本発明は、概して、電子通信の分野に関し、より具体的には、オブジェクトと関連付けられた遠隔通信のためのデバイスおよび方法に関する。
【発明の概要】
【０００２】
本発明の一側面は、第1のデバイス上のオブジェクトの状態を決定することと、オブジェクトの状態の標示子を遠隔デバイスに送信することとを含み、標示子は、遠隔デバイスがオブジェクトの状態を提示することを可能にするように構成される、方法に関する。
【０００３】
一実施形態において、前述の方法は、遠隔デバイスとのオーディオおよびビデオ通信を確立することをさらに含む。オーディオおよびビデオ通信は、ビデオ会議セッションの一部であってもよい。遠隔デバイスとのオーディオおよびビデオ通信は、ネットワーク上で確立されてもよい。
【０００４】
別の実施形態において、前述の方法は、オーディオおよびビデオコンテンツを記録することと、後にこのコンテンツを遠隔デバイスと通信することとをさらに含む。オーディオおよびビデオコンテンツは、記録された映画の一部であってもよい。記録されたコンテンツは、ネットワーク上で遠隔デバイスに通信されてもよい。
【０００５】
一実施形態において、前述のオブジェクトは、物理的オブジェクトである。オブジェクトは書籍であってもよく、状態は、書籍のページ番号と関連付けられてもよい。
【０００６】
一実施形態において、前述のオブジェクトは、仮想オブジェクトである。オブジェクトは、電子書籍であってもよい。
【０００７】
一実施形態において、前述の状態は、オブジェクトの物理的状態である。
【０００８】
一実施形態において、前述のオブジェクトは、書籍であり、状態は、書籍のページ番号である。
【０００９】
一実施形態において、前述のオブジェクトは、書籍であり、状態は、書籍の中の選択されたコンテンツである。
【００１０】
一実施形態において、前述の方法は、オブジェクトの決定された状態に基づいて、アニメーションのコンテンツを表示することをさらに含む。アニメーションのコンテンツを表示することは、オブジェクトと関連付けられたコンテンツに関連する解説を提供する、または質問を行う、アニメーションのキャラクタを表示することを含んでもよい。
【００１１】
本発明の他の側面において、前述の方法は、遠隔デバイスでオブジェクトの状態の標示子を受信することと、受信した標示子に基づいて、遠隔デバイスでオブジェクトの状態を決定することと、オブジェクトの状態をユーザに提示することとを含む。
【００１２】
別の側面において、本発明は、少なくとも1つのプロセッサと、コンピュータプログラムコードを含む少なくとも1つのメモリとを備える、装置に関する。少なくとも1つのメモリおよびコンピュータコードは、少なくとも1つのプロセッサと連動し、少なくとも、第1のデバイス上のオブジェクトの状態を決定することと、オブジェクトの状態の標示子を遠隔デバイスに送信することであって、標示子は、遠隔デバイスがオブジェクトの状態を提示することを可能にするように構成される、送信することとを装置に行わせるように構成される。
【００１３】
一実施形態において、前述のオブジェクトは書籍であり、前述の装置は、書籍をその中で綴じるためのバインダ綴じ具をさらに備える。
【００１４】
一実施形態において、前述の装置は、書籍の状態を決定するように構成される、1つ以上のセンサを備える。
【００１５】
本発明の他の側面において、1つ以上の時点で第1のデバイス上のオブジェクトの状態を決定することと、1つ以上の時点で状態の標示子をセッションとして記録することと、セッションを遠隔デバイスに送信することであって、セッションの標示子は、遠隔デバイスがオブジェクトの状態を決定することを可能にするように構成される、前述の送信することとを含む、方法に関する。1つの実施形態において、セッションは、オーディオおよびビデオコンテンツをさらに含む。
【００１６】
別の側面において、遠隔デバイスから記録されたセッションを受信することであって、セッションは、オブジェクトの1つ以上の状態の標示子を含み、セッションは、オブジェクトの1つ以上の状態のそれぞれと関連付けられたオーディオおよびビデオコンテンツをさらに含む、前述の受信することと、オブジェクトの現在の状態を検出することと、オブジェクトの検出された現在の状態と関連付けられたオーディオおよびビデオコンテンツを再生することとを含む、方法に関する。
【００１７】
別の側面において、本発明は、オブジェクトに関連するオーディオおよびビデオコンテンツを記録することと、オーディオおよびビデオコンテンツのうちの1つ以上の部分のそれぞれを、オブジェクトの状態と関連付けることと、オーディオおよびビデオコンテンツ、ならびにオーディオおよびビデオコンテンツの関連付けを記憶媒体に記憶することとを含む、方法に関する。一実施形態において、方法は、オーディオおよびビデオコンテンツの記録中に、オブジェクトの状態を検出することをさらに含む。
【００１８】
別の側面において、オブジェクトの現在の状態を検出することと、記録されたオーディオおよびビデオコンテンツの一部分との検出された現在の状態の関連付けを決定することと、オブジェクトの検出された現在の状態と関連付けられたオーディオおよびビデオコンテンツの一部分を再生することとを含む、方法に関する。
【図面の簡単な説明】
【００１９】
【図１】本発明の実施形態による例示的な装置を例示する図である。
【図２】図1の装置とともに使用する書籍を例示する図である。
【図３】図1の装置の概略図である。
【図４】図2の書籍とともに機能する図1の装置を例示する図である。
【図５】本発明の別の実施形態による装置を例示する図である。
【図６】本発明の実施形態によるプロセスを例示するフローチャートである。
【図７】本発明の種々の実施形態が実装され得るシステムの概観図である。
【図８】本発明の種々の実施形態に従って利用され得る例示的な電子デバイスに含まれ得る、回路の概略図である。
【好適な実施形態の詳細な説明】
【００２０】
遠距離家族は、しばしば、遠隔の共有された体験を介して接続することを望む。現在、若者および中高年者が共有された会話または娯楽を介して、距離を隔てて接続するために、電話およびテレビ会議技術が使用されている。
【００２１】
例えば、ユーザインターフェースは、他の参加者の文書の物理的状態に関連する情報を提供してもよい。その際、テレビ会議システムは、文書の状態を共有するために、物理的文書リーダおよび通信システムが組み込まれてもよい。さらに、幼児の発育段階に対応するように、ユーザインターフェースによって、アニメーションのキャラクタ（例えば、セサミストリート（登録商標）のエルモ）等の対話型ソフトウェアエージェントが提供されてもよい。
【００２２】
本発明の実施形態は、全年齢のユーザのための遠隔地学習等の、種々の遠距離協同活動に適用してもよい。本発明の実施形態は、例えば、文書の状態を感知して、感知した状態の標示子を、遠隔デバイス上に文書を表示するための遠隔デバイスに伝送する。
【００２３】
ここで、図1を参照すると、本発明の実施形態による、例示的な装置が例示されている。例示された装置100は、書籍をその中で綴じるためのバインダ綴じ具112を伴う、書籍フレーム110を含む。書籍フレーム110は、木、プラスチック、または他のそのような材料等の、種々の材料から形成されてもよい。さらに、書籍フレーム110は、書籍に類似した様式で折り畳み可能であってもよい。
【００２４】
バインダ綴じ具112は、書籍の綴じ部を綴じるように構成される。その際、バインダ綴じ具112は、例えば、対応する書籍の綴じ部の螺旋またはリングを綴じるように、一連の溝を含んでもよい。バインダ綴じ具112および溝は、例えば、ある書籍に適応させるようにサイズ決定されてもよい。
【００２５】
書籍フレーム110には、バインダ綴じ具112の中に位置付けられる書籍の状態を検出するための機構が提供されてもよい。例示された実施形態において、この機構は、書籍フレーム110の本体内に埋め込まれた、一連の磁気センサ114を備える。磁気センサ114は、以下に詳述するように、書籍の中の対応する磁石を感知するように構成される。
【００２６】
本発明の種々の実施形態において、装置100は、書籍フレーム110に動作可能に連結される、1つ以上のビデオディスプレイ116、118をさらに含む。例示された実施形態では、2つのビデオディスプレイ116、118が提供される。他の実施形態では、より少ない、またはより多い数のそのようなディスプレイが提供されてもよい。種々の実施形態において、ビデオディスプレイ116、118は、タッチを通してユーザからの入力を受信するように構成される、タッチ画面を備える。他の実施形態では、1つ以上のキー等のユーザ入力を受信するための他の機構が提供されてもよい。
【００２７】
ここで、図2を参照すると、図1の装置とともに使用する書籍の実施形態が例示されている。書籍200は、その上に印刷されるテキスト、グラフィックス、または他のコンテンツを伴う、複数のページ210を含む。ページ210は、例えばリングまたは螺旋を備えてもよい綴じ部212によって、相互に固定される。
【００２８】
複数のページ210の中の各ページは、その中に埋め込まれる1つ以上の磁石214を含んでもよい。磁石214は、書籍200の開かれているページを一意的に識別するように構成される。
【００２９】
図3は、図1の装置の概略図を提供する。装置100は、装置100の動作を制御するように構成される、中央プロセッサ120を含む。中央プロセッサ120は、状態検出122モジュールに連結される。状態検出モジュール122は、例えば磁気センサ114に連結されてもよく、そして、磁気センサ114からの入力を使用して、例えば書籍の識別子、書籍の開かれているページ、または他のそのような情報を決定してもよい。
【００３０】
中央プロセッサ120は、ビデオディスプレイ116、118にさらに連結される。その際、中央プロセッサ120は、ビデオディスプレイ116、118上に表示されるコンテンツ（例えば、画像、ビデオ、グラフィックス等）を制御してもよい。さらに、ビデオディスプレイ116、118がタッチ画面を含む場合、中央プロセッサ120は、ビデオディスプレイ116、118を通して受信される入力を受信および処理するように構成されてもよい。他の実施形態において、中央プロセッサ120は、キーボード等の他の入力デバイスに連結されてもよい。
【００３１】
装置100は、装置100が1つ以上の他の電子部品デバイスと通信することを可能にするように構成される、無線インターフェース124およびアンテナ126をさらに含んでもよい。ここでも、無線インターフェース124は、中央プロセッサ120が通信を制御し、かつ入力および出力通信信号を処理することを可能にするように、中央プロセッサ120に連結される。
【００３２】
ここで、図4を参照すると、図1の装置100が図2の書籍200とともに機能するように例示されている。前述のように、書籍200は、書籍の綴じ部をバインダ綴じ具の中に位置付けることによって、書籍フレーム110によって受容される。本発明の実施形態によれば、装置100は、別の通信デバイスと通信し、それによって、遠隔デバイスのユーザが書籍の読み取りに参加することを可能にしてもよい。したがって、例えば、外出中の親または遠隔の祖父母は、子供と対話しながら書籍を読むことが可能になる。
【００３３】
一実施形態において、通信セッションは、装置100と1つ以上の遠隔デバイスとの間に確立されてもよい。遠隔デバイスは、図5を参照して以下に説明されるように、装置100に類似していてもよく、または完全に異なる種類のデバイスであってもよい。通信セッションは、例えば、テレビ会議セッション等の種々のセッションのうちのいずれかであってもよい。
【００３４】
通信セッションが確立されると、装置100のユーザは、ビデオディスプレイ116上の遠隔ユーザ132を見ることが可能になってもよい。種々の実施形態において、装置100は、遠隔ユーザが装置100のユーザを閲覧することを可能にするために、カメラ（図示せず）を含んでもよい。いくつかの実施形態では、遠隔ユーザ132のライブ画像の代わりに、遠隔ユーザの写真が表示されてもよい。写真は、装置に事前に記憶されてもよく、または遠隔デバイスまたは別の供給源から装置によってアクセスされてもよい。
【００３５】
遠隔ユーザ132の画像に加えて、ビデオディスプレイ116はまた、遠隔ユーザによって閲覧されているページを示す画像134を提示してもよい。図4に例示される実施形態において、この画像134は、ページのグラフィック画像である。他の実施形態において、画像134は、遠隔ユーザによって閲覧されているコンテンツのページ番号または別の標示子であってもよい。
【００３６】
さらに、ビデオディスプレイ116は、ユーザが別の機能にアクセスするか、またはそれを実行することを可能する、アイコン136を含んでもよい。例えば、図4に例示される実施形態において、アイコン136は、ユーザが通信セッションを遮断または中断することを可能にしてもよい。そのようなアイコンを通して利用可能な他の機能は、選択された遠隔ユーザと通信セッションを開始すること、または通信セッションの確立のための遠隔デバイスからの招待を受け入れること含んでもよい。その際、遠隔ユーザの選択のために、連絡先リストを利用できるようにしてもよい。
【００３７】
例示された実施形態の実施形態によれば、ビデオディスプレイ118は、キャラクタ142の表示をユーザに提供してもよい。キャラクタ142は、アニメーションのキャラクタ、実写のキャラクタ、任意の他のそのようなキャラクタのパペットであってもよいが、本明細書では総称してアニメーションのキャラクタと称する。キャラクタ142は、静止画像、または好ましくは、例えばビデオクリップからの、動画として表されてもよい。加えて、ビデオディスプレイ118は、機能を選択することをユーザが選択するための、星または電球等の、アイコン144を提供してもよい。一実施形態において、アイコン144は、書籍200の感知されたコンテンツまたは状態に基づいて、種々の時点で現れてもよい。アイコン144の選択は、キャラクタ142のビデオクリップを起動させてもよい。
【００３８】
図2〜図4は、物理的書籍200を伴う装置100を例示する。他の実施形態において、書籍200は、電子書籍等の仮想オブジェクトと置換してもよい。そのような1つの実施形態を図5に例示する。図5の実施形態において、装置100は、ラップトップコンピュータ300等のコンピューティングデバイスと置換される。当業者は、任意の他のコンピューティングまたは通信デバイスが使用されてもよく、それが本発明の範囲内にあることが意図されることを理解するであろう。
【００３９】
図5の実施形態において、ラップトップコンピュータ300上で動作するソフトウェアアプリケーションは、モニタ302上に表示されるデジタルまたは電子書籍310の使用を提供してもよい。デジタル書籍は、例えば、種々のワード処理ユーティリティのうちのいずれかで、物理的書籍、スクロール、または文書のグラフィカルイメージとして表示されてもよい。さらに、図2および図4の実施形態の磁気センサの代わりに、図5の実施形態は、書籍310の状態を決定するために、ソフトウェアを使用してもよい。前述のように、状態は、例えば、書籍の識別子、書籍のページ番号、または閲覧されているコンテンツを示す他のパラメータを含んでもよい。
【００４０】
電子書籍310に加えて、ユーザには、遠隔ユーザ332の視覚的提示、およびウィンドウ316の中の遠隔ユーザによって閲覧されているコンテンツ334が提示されてもよい。さらに、キャラクタ342およびアイコン344、336は、書籍310と連動してモニタ302上に表示されてもよい。
【００４１】
したがって、本発明の実施形態によれば、通信セッションは、子供が、外出中の親または遠隔の祖父母等の遠隔ユーザとともに書籍を読むために装置を使用することを可能にしてもよい。その際、本発明の実施形態は、2人のユーザが、相互に、および書籍等のオブジェクトと遠隔で対話することを可能にする。
【００４２】
一実施形態において、本発明は、遠隔ユーザとローカルユーザとの間のライブの通信セッションを可能にする。別の実施形態において、本発明は、遠隔ユーザとローカルユーザとの間の非同期通信セッションを可能にする。この実施形態において、遠隔ユーザは、ローカルユーザのために書籍を読むこと等のセッションの記録を作成して、後に、この記録をローカルユーザデバイスに送信してもよい。ローカルユーザは、次いで、遠隔ユーザのセッションの記録を見てもよく、および／または聞いてもよい。別の実施形態において、本発明は、ローカル書籍オブジェクトの状態に対する変化に基づいて、記録を再生させてもよい。例えば、個々の書籍のページの記録は、ローカルユーザが自分の書籍のページを異なるページにめくった時に再生されてもよい。
【００４３】
その際、ローカルデバイスは、遠隔デバイスから記録されたセッションを受信してもよい。セッションは、各標示子がオブジェクトの異なる状態に対応する、一連の標示子を含んでもよい。例えば、各標示子は、書籍の異なるページに対応してもよい。記録されたセッションは、オブジェクトの1つ以上の状態のそれぞれと関連付けられたオーディオおよびビデオコンテンツをさらに含んでもよい。このオーディオおよびビデオコンテンツは、例えば、書籍を読んでいる、または書籍の特定のページについてコメントしている大人を含んでもよい。ローカルデバイスは、ローカルオブジェクトの現在の状態を検出してもよく、故に、オブジェクトの検出された現在の状態と関連付けられたオーディオおよびビデオコンテンツを再生してもよい。
【００４４】
別の実施形態において、本発明は、ローカルモードの動作を可能にする。この実施形態において、ユーザは、以前に記録されたセッションにアクセスしてもよい。その際、朗読のオーディオおよびビデオセッションは、後の応答のためにデバイスに記録されていてもよい。その際、最初の朗読では、親は、子供に対して読んでもよく、または単独で読んでもよい。いずれの場合も、本発明の実施形態は、子供が後に閲覧することを可能にする。最初の朗読中に、朗読のオーディオおよびビデオコンテンツが記録されていてもよい。オーディオおよびビデオコンテンツの異なる部分は、マークされる、タグが付けられる、または別様に書籍の状態（例えば、ページ番号）と関連付けられてもよい。前述のように、関連付けは、書籍の状態の検出を含んでもよい。一実施形態において、オーディオおよびビデオコンテンツは、例えば、異なるページと関連付けられた異なる部分を伴う単一のセッションとして記録される。
【００４５】
子供が後に大人とともに本を読むことを望んだ時、デバイスは、ローカルモードで動作して、記録されたオーディオおよびビデオコンテンツを再生してもよい。ここでも、書籍の状態が検出されて、検出された状態と関連付けられたオーディオおよびビデオコンテンツの一部分が再生されてもよい。
【００４６】
ここで、図6を参照すると、フローチャートは、本発明の実施形態による、プロセス400を例示する。プロセス400は、書籍フレーム110および書籍200を伴う装置100、または図5に示されるように、電子書籍を伴う別の通信デバイスに適用されてもよい。例示されたプロセス400は、あるステップを示す。しかしながら、当業者は、プロセス400の前に、プロセス400の後に、またはプロセス400の種々のステップ間に、他のステップが実行されてもよいことを理解するであろう。
【００４７】
例えば、図6に例示される実施形態では、2つのデバイス間の通信セッションを確立するステップが、プロセス400の前に実装されてもよい。プロセス400において、第1のデバイスは、オブジェクトの状態を決定する（ブロック410）。その際、第1のデバイスは、子供によって操作される書籍フレーム110等のローカル装置であってもよい。さらに、オブジェクトは書籍200であってもよく、オブジェクトの状態は、本の識別子、書籍の開かれているページ番号、またはユーザによって閲覧されているコンテンツの別の識別子であってもよい。状態の決定は、種々の様式で達成されてもよい。例えば、図1〜図4に関して前述したように、書籍200のページの中に位置する磁石に基づいて書籍の状態を検出するために、磁気センサが、書籍フレーム110の中に置かれてもよい。他の実施形態では、磁石の代わりに、無線周波数識別（RFID）タグおよびセンサ、磁気スイッチ（リードスイッチ）、ホール効果センサ、近距離無線通信（NFC）タグおよびセンサ、または光センサが使用されてもよい。さらに他の実施形態では、ユーザによって閲覧されているコンテンツの画像を取り込むために、または書籍もしくはページのバーコードを読み込むために、書籍に方向付けられたカメラが使用されてもよい。取り込まれた画像は、閲覧されているコンテンツを識別する（または検出する）ために使用されてもよい。当業者は、オブジェクトの状態を決定する数多くの他の方法が可能であり、それが本発明の範囲内にあることが意図されることを理解するであろう。
【００４８】
一実施形態では、一群の書籍の中から一意的に書籍を識別するために、1つ以上の磁石およびセンサが使用されてもよい。その際、3つ以上の可能な書籍の間で区別するために、書籍の最後のページ上に2つ以上のセンサおよび磁石が確保されてもよい。
【００４９】
他の実施形態では、書籍を識別するために、既知のIDを伴うRFIDタグが使用されてもよい。さらに他の実施形態では、画像を取り込むためにカメラが使用されてもよく、そして、ソフトウェアが、異なるページの視覚的外観を一群の既知の書籍ページと比較してもよい。
【００５０】
ブロック412で、オブジェクトの状態が変化したかどうかについて決定が行われてもよい。その際、決定は、状態の連続的な、または定期的な監視に基づいて行われてもよい。代替として、オブジェクトの状態の変化に応じて、トリガーが起動されてもよい。ブロック412でいかなる状態の変化もが起こらなかったという決定が行われた場合、プロセスは、ブロック410に戻ってもよい。一方で、状態が変化したという決定が行われた場合、プロセスは、ブロック414に進む。
【００５１】
ブロック414で、第1のデバイスは、決定されたオブジェクトの状態の標示子を送る。通信セッションは、WiFi、Bluetooth、GSM、またはイーサネット等の有線通信等の、種々の形式およびプロトコルのうちのいずれかであってもよい。さらに、実際の状態（例えば、閲覧されているコンテンツ）を伝送するよりも、むしろ第2のデバイスに送信される標示子が、第2のデバイスがオブジェクトの状態を可能にするのに十分であってもよい。例えば、標示子は、閲覧されているコンテンツと関連付けられた、ページ番号、行番号、またはブックマーク番号であってもよい。遠隔デバイスは、標示子を既知の書籍およびページと関連付けられた画像のデータベースに相関させることによって、遠隔に表示されたページの画像を表示することが可能であってもよい。既知の書籍およびページのデータベースは、共有されて（例えば、ネットワークサーバ上に記憶されて）もよく、またはデータベースの複数のコピーが、接続されているデバイス上に遠隔に存在してもよい。デジタル書籍の場合、書籍IDおよびページID情報は、デジタル書籍の状態を表して制御するプログラムのソフトウェア状態を決定することによって感知されてもよい。
【００５２】
第2のデバイスが標示子を受信すると、第2のデバイスは、第1のデバイスによって決定されたオブジェクトの状態を決定してもよい（ブロック416）。その際、第2のデバイスは、第2のデバイスが状態を決定するために受信した標示子を使用することを可能にするように、ソフトウェア、データ、またはデータベースを含んでもよく、またはそれへのアクセスを有してもよい。図1〜図5に例示される実施形態において、第1のデバイス（子供によって操作される）は、書籍の標示子、書籍の一部分、書籍のページ番号、または閲覧されているコンテンツと関連付けられた別のパラメータを、第2のデバイス（遠隔の大人によって操作される）に伝送してもよい。第2のデバイスは、次いで、子供によって閲覧されているコンテンツを決定するために、標示子を使用してもよい。
【００５３】
次いで、状態が第2のデバイスのユーザに提示されてもよい（ブロック418）。その際、大人には、画像134（図4）または画像334（図5）等の子供によって閲覧されている書籍ページの画像が提示されてもよい。他の実施形態において、第2のデバイスは、単にページ番号を大人に提示するだけでもよい。大人は、次いで、提示されたページ番号まで、物理的または仮想の書籍のページを手動でめくってもよい。当然、閲覧されているコンテンツと関連付けられた他のパラメータがユーザに提示されてもよく、それらは、本発明の範囲内であることが意図される。
【００５４】
前述のように、セサミストリート（登録商標）のエルモ等のアニメーションのキャラクタ142、342がユーザに提示されてもよい。その際、書籍を読んでいる子供による対話を可能にして促すために、ソフトウェアエージェントが実装されてもよい。ソフトウェアエージェントは、親しみのあるキャラクタで子供たちに口頭で指示することによって、子供たちに対して直感的なユーザインターフェースの側面を作製するために、アニメーションのキャラクタを使用してもよい。さらに、1つ以上の他のデバイスとの通信セッション中に、アニメーションのキャラクタのインスタンスを全てのデバイス上で同期させてもよい。その際、アニメーションのキャラクタのインスタンスの標示子が、そのような同期を可能にするために、遠隔デバイスに送信されてもよい。標示子は、例えば、デバイス上に記憶されたアニメーションのキャラクタのビデオクリップを示してもよい。
【００５５】
アニメーションのキャラクタのライブアクションビデオ映像が、ソフトウェアプログラムの表示要素として使用されてもよい。アニメーションのキャラクタは、通信セッションを確立するために、電話をかける、電話に応答する等の、ユーザインターフェースのアクションを通してユーザを誘導してもよい。さらに、アニメーションのキャラクタは、ユーザによって閲覧または読まれているコンテンツに関する質問を行う等の、ユーザへのプログラム的フィードバックを提供してもよい。例えば、アニメーションのキャラクタは、子供が読んでいる書籍に関する質問を行ってもよい。システムは、子供がどのページを読んでいるのかを知っているので、アニメーションのキャラクタは、現在閲覧されているコンテンツに関する質問を行って、コメントしてもよい。
【００５６】
アニメーションのキャラクタは、ユーザインターフェースの要素であってもよく、ユーザに話しかけて視覚的にキューを提供することによって、ソフトウェアの状態を表す。1つの例示的な実施形態では、アニメーションのキャラクタの種々のライブアクションビデオ映像を含む、単一の映画が提供されてもよい。ソフトウェアは、異なるソフトウェア状態に応じてビデオ映像の異なるクリップを動的に再生してもよい。例えば、書籍が開かれた時に、ユーザに「こんにちは、さあ本を読みましょう。」と言うアニメーションのキャラクタを示す、ビデオクリップが再生されてもよい。
【００５７】
1つの実施例において、子供は、遠隔の祖父母と読むために、書籍フレーム110上の書籍200を開く（図4を参照）。書籍を開いた時に、ソフトウェアエージェントは、ローカルの非同期モードであり、アニメーションのキャラクタがローカルの入力およびローカルのソフトウェア状態だけに反応する。例えば、アニメーションのキャラクタは、「今日は、誰と一緒に読みたいですか？」と尋ねてもよい。子供には、遠隔ユーザの選択肢が提供されてもよいが、例えばタッチ画面上の一連の画像である。子供は、自分の祖母の写真にタッチしてもよく、そして、祖父母に対するビデオ通話を開始する。電話の着信について、アニメーションのキャラクタは、子供に「電話に出ましょう」と指示してもよい。その際、発信者（例えば、祖母）の写真が子供に提示されてもよい。通信セッションが確立された時、アニメーションのキャラクタは、「がんばって、みんなで一緒に読みましょう」と言ってもよい。
【００５８】
別の実施例において、前述の方法は、ローカルオブジェクトとのスカフォールディング（scaffolding）の対話のために、ソフトウェアエージェントを使用して非ネットワーク化モードで使用されてもよい。例えば、子供は、書籍を読んでもよく、アニメーションのキャラクタは、書籍に関するコメントを子供にするか、または子供に書籍を読んでもよい。
【００５９】
通信セッションが確立されると、ソフトウェアエージェントシフトは、アニメーションのキャラクタが、双方の接続されたシステムの入力およびソフトウェア状態に反応する、同期モードに移行する。その際、通信セッションのデバイスのそれぞれは、情報（例えば、標示子）の交換を可能にして、同期モードで機能することを可能にするように、適切なソフトウェアを提供してもよいことに留意されたい。一実施形態において、単一のアニメーションのキャラクタ（ローカルデバイス上のもの、または遠隔デバイス上のもの）への入力は、どちらのアニメーションのキャラクタにも同じ結果を出力させる。種々の時点で、ソフトウェアエージェントは、アニメーションのキャラクタを起動してもよいことを示すように、星144（図4）または電球等の、アイコンを提示してもよい。ユーザがアイコンにタッチした場合、通信セッションにある全てのデバイス上のアニメーションのキャラクタは、それらのそれぞれのユーザに同じことを言ってもよい。その際、同じビデオクリップが各デバイスで再生されてもよい。例えば、各デバイスは、「このページに結び目がいくつあるか数えられますか？」と尋ねるアニメーションのキャラクタを示す、ビデオクリップを再生してもよい。
【００６０】
ユーザが同一のインターフェースを有しなくてもよい場合であっても、接続されたエージェントは、類似した結果を出力する。例えば、一方のユーザは、物理的書籍を有してもよい一方で、もう一方のユーザは、仮想電子書籍を有してもよい。
【００６１】
種々の実施形態において、異なるユーザは、異なる入力コントローラを有してもよい。例えば、大人は、大人のユーザが、子供ができないような方法でアニメーションのキャラクタを操作することを可能にする、「パペット操作」コントロールを有してもよい。例えば、大人のユーザは、子供がエルモに対して行った質問に応じて、エルモに「はい」または「いいえ」と言わせるように、ボタンを押すことが可能であってもよい。大人のユーザはまた、アニメーションのキャラクタに質問を行い、次いで、アニメーションのキャラクタが同期した様式で「はい」と応えるようにトリガーすることを可能にしてもよい。子供は、「はい」コントロールへのアクセスを有しないので、大人のユーザは、アニメーションのキャラクタが知的に動作しているイリュージョンを作成することができる。
【００６２】
一実施形態において、ソフトウェアエージェントは、個々のデバイスに配信される単一のソフトウェアエージェントの複数のコピーを含む。単一のエージェントは、一方のデバイスがもう一方のデバイスと通信していない時に自律行動を有してもよく、複数のエージェントがネットワーク上で通信している時にエージェントの出力が他のエージェントと同期状態になる。ソフトウェアエージェントのシステムは、単一のエージェントの2つ以上のコピーを含んでもよい。本明細書で使用される場合、ソフトウェアエージェントは、アニメーションのキャラクタを特色とするユーザインターフェースを含んでもよい。本明細書で使用される場合、「アニメーションのキャラクタ」は、キャラクタ（例えば、パペット）のライブアクションビデオ、人のライブアクションビデオ、漫画のキャラクタ、オーディオコンテンツ（キャラクタの声）、音声出力用のスピーカを埋め込んだキャラクタ相当の物理的オブジェクト（例えば、人形、ビロードの玩具、顔の描かれた枕等）であってもよい。
【００６３】
種々の実施形態において、ソフトウェアの単一のコピーは、ローカル入力および状態情報をローカルエージェントから遠隔エージェントに転送してもよい。例えば、ユーザがローカルエージェントを起動させた時、ソフトウェアは、あるエージェント応答がトリガーされると決定し、次いで、あるエージェント応答がトリガーされるという情報を遠隔エージェントに伝送する。ローカルエージェントは、データを転送するのを待ち、次いで、応答をローカルに再生する。遠隔エージェントは、データを受信し、同じ応答を遠隔デバイスに同期再生する。これは、分散したユーザの中で、全てのユーザが同じエージェントと対話している感覚を作り出す。
【００６４】
複数のデバイスが通信セッションに接続されると、単一のエージェントに対するユーザ入力は、ユーザの単一エージェントの閲覧、および接続されたユーザの接続されたエージェントの閲覧に、同じ結果を出力させてもよい。
【００６５】
ユーザインターフェースにおけるソフトウェアエージェントの使用は、任意のユーザ（幼児または読み書きできないユーザであっても）がデバイスを使用することをサポートする。複数の接続されたエージェントの状態の同期は、複数のユーザが、単一のエージェントの閲覧として複数のエージェントを処理することを可能にする。ローカルデータは、エージェントの挙動をリアルタイムで協調させるために低帯域幅が使用されるように、複数のデバイス上にローカルにキャッシュされてもよい。
【００６６】
システムはまた、当事者間のスカフォールディング（scaffolding）対話（例えば、論議）に、対話型エージェントも使用する。これは、ユーザの注目を共有された活動または文書に絞り込むことを援助することができる。
【００６７】
図7は、1つ以上のネットワークを通して通信することができる複数の通信デバイスを備える、本発明の種々の実施形態を利用することができる、システム10を示す。システム10は、携帯電話ネットワーク、無線ローカルエリアネットワーク（LAN）、Bluetoothパーソナルエリアネットワーク、イーサネットLAN、トークンリングLAN、ワイドエリアネットワーク、インターネット等が挙げられるが、これらに限定されない、有線または無線ネットワークの任意の組み合わせを備えてもよい。システム10は、有線および無線のどちらの通信デバイスを含んでもよい。
【００６８】
例示のために、図7に示されるシステム10は、携帯電話ネットワーク11と、インターネット28とを含む。インターネット28に対する接続性には、長距離無線接続、短距離無線接続、および種々の有線接続（電話線、ケーブル線、電力線等が挙げられるが、これらに限定されない）が挙げられるが、これらに限定されない。
【００６９】
システム10の例示的な通信デバイスは、携帯電話の形態の電子デバイス12、携帯情報端末（PDA）および携帯電話の組み合わせ14、PDA 16、一体型メッセージングデバイス（IMD）18、デスクトップコンピュータ20、ノートパソコン22等を含んでもよいが、これらに限定されない。通信デバイスは、固定式であってもよく、または移動している個人によって携持される時のように携帯式であってもよい。通信デバイスはまた、自動車、トラック、タクシー、バス、電車、ボート、飛行機、自転車、オートバイ等が挙げられるが、これらに限定されない、輸送手段の中に位置してもよい。通信デバイスのいくつかまたは全ては、通話およびメッセージを送信および受信してもよく、基地局24への無線接続25を通してサービスプロバイダと通信してもよい。基地局24は、携帯電話ネットワーク11とインターネット28との間の通信を可能にする、ネットワークサーバ26に接続されてもよい。システム10は、異なる種類の付加的な通信デバイスおよび通信デバイスを含んでもよい。
【００７０】
通信デバイスは、符号分割多重アクセス（CDMA）、グローバルシステムフォーモバイルコミュニケーションズ（GSM）、汎用モバイル通信システム（UMTS）、時分割多重アクセス（TDMA）、周波数分割多重アクセス（FDMA）、伝送制御プロトコル／インターネットプロトコル（TCP/IP）、ショートメッセージサービス（SMS）、マルチメディアメッセージサービス（MMS）、電子メール、インスタントメッセージングサービス（IMS）、Bluetooth、IEEE 802.11等が挙げられるが、これらに限定されない、種々の伝送技術を使用して通信してもよい。本発明の種々の実施形態を実装する際に関与する通信デバイスは、無線、赤外線、レーザ、ケーブル接続等が挙げられるが、これらに限定されない、種々の媒体を使用して通信してもよい。
【００７１】
図8は、本発明の種々の実施形態に従ってネットワークノードとして使用されてもよい、1つの代表的な電子デバイスを示す。しかしながら、本発明の範囲を1つの特定の種類のデバイスに限定することを意図していないことを理解されたい。図8の電子デバイスは、筐体と、液晶ディスプレイの形態のディスプレイと、キーパッド34と、マイクロホン36と、イヤホン38と、バッテリと、赤外線ポート42と、アンテナ44と、一実施形態によればUICCの形態のスマートカード46と、カードリーダ48と、無線インターフェース回路52と、コーデック回路54と、コントローラ56と、メモリ58とを含む。前述の構成要素は、電子デバイスが、本発明の種々の実施形態によるネットワーク状にあってもよい他のデバイスと種々のメッセージを送信／受信することを可能にする。個々の回路および要素は、例えばNokia社製の携帯電話といった、当技術分野でよく知られている全ての種類である。
【００７２】
本明細書に記載される種々の実施形態は、方法ステップまたはプロセスの一般的な状況において説明されており、一実施形態では、ネットワーク化された環境においてコンピュータによって実行されるプログラムコード等のコンピュータで実行可能な命令を含む、コンピュータが読み取り可能な媒体で具現化される、コンピュータプログラム製品によって実装されてもよい。コンピュータが読み取り可能な媒体は、リードオンリーメモリ（ROM）、ランダムアクセスメモリ（RAM）、コンパクトディスク（CD）、デジタル多用途ディスク（DVD）等が挙げられるが、これらに限定されない、可撤性および非可撤性記憶デバイスを含んでもよい。一般に、プログラムモジュールは、特定のタスクを行う、または特定の抽象データ型を実装する、ルーチン、プログラム、オブジェクト、コンポーネント、データ構造等を含んでもよい。コンピュータで実行可能な命令、関連するデータ構造、およびプログラムモジュールは、本明細書に開示する方法のステップを実行するためのプログラムコードの例を表す。そのような実行可能な命令の特定のシーケンス、または関連するデータ構造は、そのようなステップまたはプロセスにおいて記載される機能を実装するための対応する動作の例を表す。
【００７３】
本発明の実施形態は、ソフトウェア、ハードウェア、アプリケーション論理、またはソフトウェア、ハードウェアおよびアプリケーション論理の組み合わせで実装されてもよい。ソフトウェア、アプリケーション論理、および／またはハードウェアは、例えば、チップセット、モバイルデバイス、デスクトップ、ラップトップ、またはサーバ上にあってもよい。種々の実施形態のソフトウェアおよびウェブ実装は、種々のデータベース検索ステップまたはプロセス、相関ステップまたはプロセス、比較ステップまたはプロセス、および決定ステップまたはプロセスを達成するために、ルールベースの論理および他の論理を伴う標準的なプログラミング技術で達成することができる。また、種々の実施形態が、ネットワーク要素またはモジュール内に完全または部分的に実装されてもよい。「構成要素」および「モジュール」という語は、本明細書および以下の特許請求の範囲で使用される場合、1行以上のソフトウェアコード、および／またはハードウェア実装、および／または手動入力を受信するための機器を使用した実装を含むことを意図していることに留意されたい。
【００７４】
本発明の実施形態の前述の説明は、例示および説明のために示したものである。本発明を網羅的とすること、または開示された厳密な形態に制限することを目的としたものではなく、種々の修正例および変更例は、上述の教示に照らして可能であるか、または本発明の実践によって獲得されてもよい。実施形態は、当業者が意図される特定の用途に適した様々な変更を様々な実施形態に加えて本発明を利用できるように、本発明の原理およびその実際の応用を説明するために選ばれて記載されている。
【図１】
2013511856.tif 000003
【図２】
2013511856.tif 000004
【図３】
2013511856.tif 000005
【図４】
2013511856.tif 000006
【図５】
2013511856.tif 000007
【図６】
2013511856.tif 000008
【図７】
2013511856.tif 000009
【図８】
2013511856.tif 000010
【手続補正書】
【提出日】平成24年4月20日(2012.4.20)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１のデバイス上のオブジェクトの状態を決定することと、
前記オブジェクトの前記状態の標示子を遠隔デバイスに送信することであって、前記標示子は、前記遠隔デバイスが前記オブジェクトの前記状態を提示することを可能にするように構成される、前記送信することと、
を含む、方法。
【請求項２】
前記遠隔デバイスとのオーディオおよびビデオ通信を確立することをさらに含む、請求項１に記載の方法。
【請求項３】
前記オーディオおよびビデオ通信は、ビデオ会議セッションの一部である、請求項２に記載の方法。
【請求項４】
前記遠隔デバイスとの前記オーディオおよびビデオ通信は、ネットワーク上で確立される、請求項２に記載の方法。
【請求項５】
前記オブジェクトは、物理的オブジェクトである、請求項１に記載の方法。
【請求項６】
前記オブジェクトは、書籍であり、前記状態は、前記書籍のページ番号と関連付けられる、請求項５に記載の方法。
【請求項７】
前記オブジェクトは、仮想オブジェクトである、請求項１に記載の方法。
【請求項８】
前記オブジェクトは、電子書籍である、請求項７に記載の方法。
【請求項９】
前記状態は、前記オブジェクトの物理的状態である、請求項１に記載の方法。
【請求項１０】
前記オブジェクトは、書籍であり、前記状態は、前記書籍のページ番号である、請求項１に記載の方法。
【請求項１１】
前記オブジェクトは、書籍であり、前記状態は、前記書籍の中の選択されたコンテンツである、請求項１に記載の方法。
【請求項１２】
前記オブジェクトの前記決定された状態に基づいて、アニメーションのコンテンツを表示することをさらに含む、請求項１に記載の方法。
【請求項１３】
アニメーションのコンテンツを表示することは、前記オブジェクトと関連付けられたコンテンツに関連する解説を提供する、または質問を行う、アニメーションのキャラクタを表示することを含む、請求項１２に記載の方法。
【請求項１４】
遠隔デバイスでオブジェクトの状態の標示子を受信することと、
前記受信した標示子に基づいて、前記遠隔デバイスで前記オブジェクトの状態を決定することと、
前記オブジェクトの前記状態をユーザに提示することと、
を含む、方法。
【請求項１５】
前記オブジェクトの前記決定された状態に基づいて、アニメーションのコンテンツを表示することをさらに含む、請求項１４に記載の方法。
【請求項１６】
アニメーションのコンテンツを表示することは、前記オブジェクトと関連付けられたコンテンツに関連する解説を提供する、または質問を行う、アニメーションのキャラクタを表示することを含む、請求項１５に記載の方法。
【請求項１７】
少なくとも１つのプロセッサと、
コンピュータプログラムコードを含む、少なくとも１つのメモリと、
を備える、装置であって、前記コンピュータコードは、前記少なくとも１つのプロセッサによって実行されると、少なくとも、
第１のデバイス上のオブジェクトの状態を決定することと、
前記オブジェクトの前記状態の標示子を遠隔デバイスに送信することであって、前記標示子は、前記遠隔デバイスが前記オブジェクトの前記状態を提示することを可能にするように構成される、前記送信することと、
を前記装置に行わせるように構成される、装置。
【請求項１８】
前記オブジェクトは、書籍であり、前記装置は、書籍をその中で綴じるためのバインダ綴じ具をさらに備える、請求項１７に記載の装置。
【請求項１９】
前記書籍の前記状態を決定するように構成される、１つ以上のセンサを備える、請求項１７に記載の装置。
【請求項２０】
１つ以上の時点で第１のデバイス上のオブジェクトの状態を決定することと、
前記１つ以上の時点で前記状態の標示子をセッションとして記録することと、
前記セッションを遠隔デバイスに送信することであって、前記セッションの前記標示子は、前記遠隔デバイスが前記オブジェクトの前記状態を決定することを可能にするように構成される、前記送信することと、
を含む、方法。
【請求項２１】
前記セッションは、オーディオおよびビデオコンテンツをさらに含む、請求項２０に記載の方法。
【請求項２２】
遠隔デバイスから記録されたセッションを受信することであって、前記セッションは、オブジェクトの１つ以上の状態の標示子を含み、前記セッションは、前記オブジェクトの前記１つ以上の状態のそれぞれと関連付けられたオーディオおよびビデオコンテンツをさらに含む、前記受信することと、
前記オブジェクトの現在の状態を検出することと、
前記オブジェクトの前記検出された現在の状態と関連付けられた前記オーディオおよびビデオコンテンツを再生することと、
を含む、方法。
【請求項２３】
オブジェクトに関連するオーディオおよびビデオコンテンツを記録することと、
前記オーディオおよびビデオコンテンツのうちの１つ以上の部分のそれぞれを、前記オブジェクトの状態と関連付けることと、
前記オーディオおよびビデオコンテンツ、ならびに前記オーディオおよびビデオコンテンツの前記関連付けを記憶媒体に記憶することと、
を含む、方法。
【請求項２４】
前記オーディオおよびビデオコンテンツの記録中に、前記オブジェクトの前記状態を検出することをさらに含む、請求項２３に記載の方法。
【請求項２５】
オブジェクトの現在の状態を検出することと、
記録されたオーディオおよびビデオコンテンツの一部分との前記検出された現在の状態の関連付けを決定することと、
前記オブジェクトの前記検出された現在の状態と関連付けられた前記オーディオおよびビデオコンテンツの前記一部分を再生することと、
を含む、方法。
【請求項２６】
コンピュータプログラムコードを含むコンピュータプログラムであって、
前記コンピュータコードは、装置の少なくとも１つのプロセッサによって実行されると、請求項１から１６および２０から２５の何れかに記載の方法を前記装置に行わせるように構成される、コンピュータプログラム。
【請求項２７】
少なくとも１つのプロセッサと、
コンピュータプログラムコードを含む、少なくとも１つのメモリと、
を備える、装置であって、前記コンピュータコードは、前記少なくとも１つのプロセッサによって実行されると、請求項１から１６および２０から２５の何れかに記載の方法を前記装置に行わせるように構成される、装置。
【国際調査報告】
2013511856.tif 000011
2013511856.tif 000012
2013511856.tif 000013
2013511856.tif 000014