(57)【要約】【課題】提案された環境あるいは動作で感覚的な表現あるいはシミュレーションを行うようにテレビ番組のビデオ及びオーディオ構成品で環境変更子及びアクチュエータを同期させる方法及び装置。【解決手段】いずれの及び／または全ての環境変更子（アクチュエータ）の制御データを受信する視聴家庭にある中央装置を含む装置であって、テレビあるいは付属構成品に内蔵しても良く、また完全に独立していても良い。この装置は、使用可能な情報源からの制御信号を受信し、付属の周辺機器あるいは構成品に適切な制御データあるいは制御信号を送信する。
2005523612.tif 000002
【特許請求の範囲】
【請求項１】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のために前記コードから複数の環境アクチュエータ制御信号を生成し、
複数の調整された環境アクチュエータ制御信号を生成する前記中央環境制御信号内に含まれるアクチュエータ強度レベル制御装置を使用して前記複数の環境アクチュエータ制御信号を個別に変更し、
前記複数の調整された環境アクチュエータ制御信号を複数の環境アクチュエータに送信し、
ビデオディスプレイと対応するように前記複数の環境アクチュエータでオーディオ及びビデオ表示位置の前記テレビ視聴環境を変更する
ことを特徴とするテレビ視聴環境を拡張させる方法。
【請求項２】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
前記複数の環境アクチュエータ制御信号をセットボックス内のユーザプリファレンスデータベースから提供されたユーザプリファレンスデータと照合し、
さらに複数の個別環境アクチュエータ制御信号を生成するために前記ユーザプリファレンスデータに基づいて前記複数の調整された環境アクチュエータ制御信号を変更し、
前記複数の個別環境アクチュエータ制御信号を複数の環境アクチュエータに送信し、
ビデオディスプレイと対応するように前記複数の環境アクチュエータでオーディオ及びビデオ表示位置の前記テレビ視聴環境を変更する
ことを特徴とするテレビ視聴環境を拡張させる方法。
【請求項３】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から前記複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性を検出し、
前記テレビ視聴環境の現在の状態を検出し、
前記テレビ視聴環境の前記現在の状態と、前記複数の環境アクチュエータ制御信号と、前記中央環境制御装置と接続される前記複数の環境アクチュエータの存在と特性とに基づいて複数のカスタマイズ環境アクチュエータ制御信号を生成し、
前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信し、
ビデオディスプレイに対応して前記複数の環境アクチュエータでオーディオ及びビデオディスプレイ位置の前記テレビ視聴環境を変更する
ことを特徴とするテレビ視聴環境の拡張方法。
【請求項４】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
複数の調整された環境アクチュエータ制御信号を生成する前記中央環境制御装置内に含まれるアクチュエータ強度レベル制御装置を使用して前記複数の環境アクチュエータ制御信号を個別に変更し、
前記複数の調整された環境アクチュエータ環境信号をセットトップボックス内のユーザプリファレンスデータベースから供給されたユーザプリファレンスデータと照合し、
複数の個別環境アクチュエータ制御信号を生成するように前記ユーザプリファレンスデータに基づいて前記複数の調整された環境アクチュエータ制御信号を更に変更し、
前記複数の個別環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信し、
ビデオディスプレイと対応するように前記複数の環境アクチュエータでオーディオ及びビデオディスプレイ位置の前記テレビ視聴環境を変更する
ことを特徴とするテレビ視聴環境の拡張方法。
【請求項５】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
複数の調整された環境アクチュエータ制御信号を生成する前記中央環境制御装置内に含まれるアクチュエータ強度レベル制御装置を使用して前記複数の環境アクチュエータ制御信号を個別に変更し、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性を検出し、
前記テレビ視聴環境の現在の状態を検出し、
前記テレビ視聴環境の前記現在の状態と、前記複数の調整された環境アクチュエータ制御信号と、前記中央環境制御装置と接続される前記複数の環境アクチュエータの存在と特性とに基づいて複数のカスタマイズ環境アクチュエータ制御信号を生成し、
前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信し、
ビデオディスプレイに対応して前記複数の環境アクチュエータでオーディオ及びビデオディスプレイ位置の前記テレビ視聴環境を変更する
ことを特徴とするテレビ視聴環境の拡張方法。
【請求項６】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
前記複数の環境アクチュエータ制御信号をセットトップボックス内のユーザプリファレンスデータベースから供給されたユーザプリファレンスデータと照合し、
複数の個別環境アクチュエータ制御信号を生成するように前記ユーザプリファレンスデータに基づいて前記複数の環境アクチュエータ制御信号を更に変更し、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性を検出し、
前記テレビ視聴環境の現在の状態を検出し、
前記テレビ視聴環境の前記現在の状態と、前記複数の個別環境アクチュエータ制御信号と、前記中央環境制御装置と接続する前記複数の環境アクチュエータの前記存在と特性と、に基づいて複数のカスタマイズ環境アクチュエータ制御信号を生成し、
前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信し、
ビデオディスプレイと対応するように前記複数の環境アクチュエータでオーディオ及びビデオディスプレイ位置の前記テレビ視聴環境を変更する
テレビ視聴環境の拡張方法。
【請求項７】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
複数の調整された環境アクチュエータ制御信号を生成する前記中央環境制御装置内に含まれるアクチュエータ強度レベル制御装置を使用して前記複数の環境アクチュエータ制御信号を個別に変更し、
前記複数の調整された環境アクチュエータ制御信号をセットトップボックス内のユーザプリファレンスデータベースから供給されたユーザプリファレンスデータと照合し、
複数の個別環境アクチュエータ制御信号を生成するように前記ユーザプリファレンスデータに基づいて前記複数の調整された環境アクチュエータ制御信号を更に変更し、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性を検出し、
前記テレビ視聴環境の現在の状態を検出し、
前記テレビ視聴環境の前記現在の状態と、前記複数の個別環境アクチュエータ制御信号と、前記中央環境制御装置と接続する前記複数の環境アクチュエータの前記存在と特性と、に基づいて複数のカスタマイズ環境アクチュエータ制御信号を生成し、
前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信し、
ビデオディスプレイと対応するように前記複数の環境アクチュエータでオーディオ及びビデオディスプレイ位置の前記テレビ視聴環境を変更するテレビ視聴環境の拡張方法。
【請求項８】
テレビ視聴環境を拡張させる方法であって、
テレビデコーダと中央環境制御装置とを含むセットトップボックスを利用してオーディオ信号やビデオ信号や複数の環境拡張装置のためのコードを含む入力信号を受信し、
前記テレビデコーダを使用して前記入力信号から前記ビデオ信号を抽出し、
前記テレビデコーダを使用して前記ビデオ信号をビデオディスプレイ装置に送信し、
前記テレビデコーダを使用して前記入力信号から前記オーディオ信号を抽出し、
前記テレビデコーダを使用して前記オーディオ信号をオーディオ出力装置から送信し、
前記中央環境制御装置を使用して前記入力信号から前記複数の環境拡張装置のための前記コードを抽出し、
前記中央環境制御装置を使用して前記複数の環境拡張装置のための前記コードから複数の環境アクチュエータ制御信号を生成し、
複数の調整された環境アクチュエータ制御信号を生成する前記中央環境制御装置内に含まれるアクチュエータ強度レベル制御装置を使用して前記複数の環境アクチュエータ制御信号を個別に変更し、
前記複数の調整された環境アクチュエータ制御信号をセットトップボックス内のユーザプリファレンスデータベースから供給されたユーザプリファレンスデータと照合し、
複数の個別環境アクチュエータ制御信号を生成するように前記ユーザプリファレンスデータに基づいて前記複数の調整された環境アクチュエータ制御信号を更に変更し、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性を検出し、
前記テレビ視聴環境の現在の状態を検出し、
前記テレビ視聴環境の前記現在の状態と、前記複数の個別環境アクチュエータ制御信号と、前記中央環境制御装置と接続する前記複数の環境アクチュエータの前記存在と特性と、に基づいて複数のカスタマイズ環境アクチュエータ制御信号を生成し、
前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信し、
ビデオディスプレイと対応するように前記複数の環境アクチュエータで前記オーディオ及びビデオディスプレイ位置の前記テレビ視聴環境を変更する
テレビ視聴環境の拡張方法。
【請求項９】
前記複数の調整された環境アクチュエータ制御信号を生成する前記中央環境制御装置内に含まれる前記アクチュエータ強度レベル制御装置を使用して前記複数の環境アクチュエータ制御信号を個別に変更する前記方法を備える請求項１，４，５，７，８のいずれかに記載の方法。
【請求項１０】
オーディオ信号やビデオ信号や複数の環境拡張装置のためのビデオコードを含む入力信号を受信するように中央環境制御装置を有するセットトップボックスを利用してテレビ視聴環境を拡張させる方法を備える請求項１乃至９のいずれかに記載の方法。
【請求項１１】
ユーザプリファレンスデータを記憶し、提供する、受信器に配置されたユーザプリファレンスデータベースと、
中央環境制御装置と通信するアクチュエータ強度レベル制御装置であって、前記中央環境制御装置は、調整された環境アクチュエータ制御信号を生成する環境アクチュエータ制御信号を個別に変更するアクチュエータ強度レベル制御装置とを備え、
前記中央環境制御装置は、
コードを抽出し、前記コードから環境アクチュエータ制御信号を生成する信号抽出器と、
前記ユーザプリファレンスデータに基づいて前記調整された環境アクチュエータ制御信号を更に変更し、個別環境アクチュエータ制御信号を生成する、ユーザプリファレンスデータベースと通信するユーザプリファレンスフィルタと、
少なくとも前記調整された環境アクチュエータ制御信号と前記個別環境アクチュエータ制御信号の一つに基づいてカスタマイズ環境アクチュエータ制御信号を生成するアクチュエータ出力制御装置と、
を備え、
前記アクチュエータ出力制御装置は、
テレビ視聴環境を変更するようにビデオディスプレイ装置のビデオディスプレイと対応して前記複数のカスタマイズ環境アクチュエータ制御信号を複数の環境アクチュエータに送信する装置。
【請求項１２】
ユーザプリファレンスデータを記憶し、提供する、受信器に配置されたユーザプリファレンスデータベースと、
中央環境制御装置と通信し、テレビ視聴環境の現在の状態を提供する複数の環境状態センサと、
を備える装置であって、
前記中央環境制御装置は、
複数の環境拡張装置のための前記コードを抽出し、前記コードから環境アクチュエータ制御信号を生成する信号抽出器と、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性とを検出する検出器と、
少なくとも前記テレビ視聴環境の前記現在のステータスと、前記複数の環境アクチュエータの存在と特性と、前記環境アクチュエータ制御信号のうちのひとつに基づいてカスタマイズ環境アクチュエータ制御信号を生成するアクチュエータ出力制御装置と、を備え、
前記アクチュエータ出力制御装置は、
テレビ視聴環境を変更するようにビデオディスプレイ装置のビデオディスプレイと対応して前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信する装置。
【請求項１３】
ユーザプリファレンスデータを記憶し、提供する、受信器に組み込まれたユーザプリファレンスデータベースと、
中央環境制御制御装置と通信するアクチュエータ強度レベル制御装置であって、前記中央環境制御装置は、調整された環境アクチュエータ制御信号を生成する環境アクチュエータ制御信号を個別に変更するアクチュエータ強度レベル制御装置と、
前記中央環境制御装置と通信し、テレビ視聴環境の現在の状態を提供する複数の環境状態センサとを備える装置であって、
前記中央環境制御装置は、
複数の環境拡張装置のためのコードを抽出し、前記コードから環境アクチュエータ制御信号を生成する信号抽出器と、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性とを検出する検出器と、
個別環境アクチュエータ制御信号を生成する前記ユーザプリファレンスデータに基づいて前記調整された環境アクチュエータ制御信号を更に変更する、前記ユーザプリファレンスデータベースと通信するユーザプリファレンスフィルタと、
少なくとも前記テレビ視聴環境の前記現在の状態と、前記複数の環境アクチュエータの存在と特性と、前記調整された環境アクチュエータ制御信号と、前記個別環境アクチュエータ制御信号のうちのひとつに基づいてカスタマイズ環境アクチュエータ制御信号を生成するアクチュエータ出力制御装置と、を備え、
前記アクチュエータ出力制御装置は、
前記テレビ視聴環境を変更するようにビデオディスプレイ装置のビデオディスプレイと対応して前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信する装置。
【請求項１４】
テレビ視聴環境を拡張させる方法であって、
中央環境制御装置を備え、ビデオ信号、オーディオ信号、複数の環境拡張装置のためのコードを含む入力信号を受信する受信器と、
前記テレビデコーダと接続し、前記受信器から送信された、復調オーディオ信号を受信するビデオディスプレイ装置と、
前記テレビデコーダと接続し、前記受信器から送信された、復調オーディオ信号を受信するオーディオ出力装置と、
ユーザプリファレンスデータを記憶し提供する、前記受信器に配置されたユーザプリファレンスデータベースと、
前記中央環境制御装置と通信し、調整された環境アクチュエータ制御信号を生成する前記環境アクチュエータ制御信号を個別に変更するアクチュエータ強度レベル制御装置と、
前記中央環境制御装置と通信し、前記テレビ視聴環境の現在の状態を提供する複数の環境状態センサと、を備える方法であって、
前記中央環境制御装置は、
前記複数の環境拡張装置のための前記コードを抽出し、前記コードから環境アクチュエータ制御信号を生成する信号抽出器と、
前記中央環境制御装置と接続する複数の環境アクチュエータの存在と特性とを検出する検出器と、
個別環境アクチュエータ制御信号を生成する前記ユーザプリファレンスデータに基づいて前記調整された環境アクチュエータ制御信号を更に変更する、前記ユーザプリファレンスデータベースと通信するユーザプリファレンスフィルタと、
少なくとも前記テレビ視聴環境の現在の状態と、前記複数の環境アクチュエータの存在及び特性と、前記調整された環境アクチュエータ制御信号と、前記個別環境アクチュエータ制御信号とのうちのひとつに基づいてカスタマイズ環境アクチュエータ制御信号を生成するアクチュエータ出力制御装置と、
前記テレビ視聴環境を変更するように前記ビデオディスプレイ装置のビデオディスプレイに対応して前記複数のカスタマイズ環境アクチュエータ制御信号を前記複数の環境アクチュエータに送信する前記アクチュエータ出力制御装置と、を備える。
【請求項１５】
前記アクチュエータ強度レベル制御装置は、電気機械式のインタフェースである請求項１１，１３，１４のいずれかに記載の装置。
【請求項１６】
前記アクチュエータ強度レベル制御装置は、前記ビデオディスプレイに表示されるグラフィカルユーザーインターフェースである請求項１１，１３，１４のいずれかに記載の装置。
【請求項１７】
前記装置は、オーディオ信号やビデオ信号や複数の環境拡張装置のためのコードを含む入力信号を受信する、中央環境制御装置を備えた受信器を利用してテレビ視聴環境を拡張させるための装置を備える請求項１１乃至１６のいずれかに記載の装置。
【請求項１８】
ビデオストリーム内に環境インジケータを自動的に挿入する方法であって、
ビデオ内容を認識し、ビデオ内容ラベルを生成するためにビデオ認識装置で前記ビデオストリームを分析し、
前記ビデオ内容ラベルに基づいて内容ＩＤ信号を生成し、
前記分析されたビデオストリームのためのセグメント分割マーカーを生成し、
前記認識されたビデオ内容に対応して前記内容ＩＤ信号を標準環境内容識別タグのデータベースと比較し、
前記割り当てられた環境タグ及びマーカーを前記ビデオストリームで再同期化し、
前記遅延ビデオストリームを前記生成された環境タグ及びマーカーデータでコード化する方法。
【請求項１９】
ビデオストリーム内に環境インジケータを自動的に挿入する方法であって、
前記ビデオストリームのビデオ内容に対応する環境内容識別タグ及びセグメント分割マーカーを生成するために前記ビデオストリームを分析するビデオ認識アナライザと、
データベースに記憶される標準環境内容識別タグと、
標準環境内容識別タグを前記環境内容識別信号と比較する比較器と、
前記割り当てられた環境内容識別タグの挿入と前記ビデオストリームの前記分割マーカーとを同期させる時間同期装置と、
前記ビデオストリームを前記環境内容識別タグと前記分割マーカーとでコード化するエンコーダとを備える装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、一般的に高機能テレビジョンに関し、特には、テレビ視聴環境を拡張させるための方法及び装置に関する。本開示は、拡張されたテレビ視聴環境を容易にするためのデータ受信器及びデータ制御装置の方法及び装置について説明する。
【背景技術】
【０００２】
今日のハイテクデジタル時代にもかかわらず、テレビは受動媒体のままである。ＨＤＴＶとサラウンド音が付加されても、人間は受身的な環境の中にいるままである。人間をテレビと対話させるようにする現在の技術である双方向テレビは、実際にはテレビではないが、限定された対話のインタフェースのために提供されるテレビのためのコンピュータを拡張したものである。テレビがその進化の道で次の段階へ進むためには、単純な双方向コンピュータあるいはゲームステーションの技術を越えて進出し、非双方向の視聴者を含む視聴者と関係しなくてはならない。
【０００３】
サラウンド音の設備及びホームシアターの設備は、ホームテレビジョンシアターに聴覚及び空間の方向性を取り入れる。これは、表示されている環境に聴覚入力を対応づけることによって視聴者が現実的な感覚を受けるようにすることが可能である。しかし、これらのシステムは聴覚上の拡張に限定されてきた。
【０００４】
なお、本願は、２００２年４月２２日に出願されたThomas Lemmonsの米国特許仮出願番号６０／３７４，８９８（”Method and Apparatus for a Data Receiver and Controller for the Facilitation of an Enhanced Television Viewing Environment”）に基づく優先権を主張するものであり、その内容全体を本願に援用する。
【発明の開示】
【課題を解決するための手段】
【０００５】
本発明は、テレビ番組のビデオやオーディオ構成要素で広範囲の環境変更子及び環境アクチュエータを同期させ、与えられた環境あるいは動作の感覚表現や感覚シミュレーションを発生させる方法及び装置を提供することによって先行技術の欠点と限定とを解決するものである。この装置は、視聴家庭に配置され、いずれの及び／または全ての環境変更子（アクチュエータ）の制御データを受信する中央環境制御装置を含む。この装置は、テレビあるいは付属構成品に内蔵されても良く、また完全に独立していても良い。この装置は、テレビ信号を送信する同じ情報源で、付属の周辺機器あるいは構成品に適切な制御データあるいは制御信号を送信するといった使用可能な情報源からの制御信号を受信する。制御データは、テレビ信号と同期させることができ、あるいはサイト上で再同期を可能にするタイミング識別子で個別に送信されても良い。この装置は、複数のユーザに種々のアクチュエータを所有可能にするカスタマイゼーション特性を有しても良い。制御装置は、そのシステムをテストし、使用可能な装置を認識して制御データあるいは制御信号を存在する装置にのみ再配分する性能を持つ。
【０００６】
従って本発明は、オーディオ信号やビデオ信号や複数の環境拡張装置のためのコードを含む入力信号を受信するように中央環境制御装置を有するセットトップボックスを利用することによってテレビ視聴環境を拡張させる方法を備えるものであって、前記複数の環境拡張装置は、中央環境制御装置を使用して入力信号から複数の環境拡張装置のためのコードを抽出し、中央環境制御装置を使用して複数の環境拡張装置のためのコードから複数の環境アクチュエータ制御信号を生成し、複数の調整された環境アクチュエータ制御信号を発生させる中央環境制御装置内に含まれるアクチュエータ強度レベル制御装置を使用して複数の環境アクチュエータ制御信号を個別に変更し、複数の調整された環境アクチュエータ制御信号を複数の環境アクチュエータに送信し、ビデオディスプレイと対応するように複数の環境アクチュエータでオーディオ及びビデオディスプレイの位置のテレビ視聴環境を変更する複数の環境拡張装置である。
【０００７】
本発明はまた、オーディオ信号やビデオ信号や複数の環境拡張装置のためのコードを含む入力信号を受信する中央環境制御装置を備える受信器を利用してテレビ視聴環境を拡張させるための装置を備えても良く、前記複数の環境拡張装置は、ユーザプリファレンスデータを記憶及び提供する受信器内に配置されるユーザプリファレンスデータベースと、中央環境制御装置と通信するアクチュエータ強度レベル制御装置と、調整された環境アクチュエータ制御信号を発生させるように環境アクチュエータ制御信号を個別に変更する中央環境制御装置と、を備え、中央環境制御装置は、複数の環境拡張装置のためにコードを抽出し、そのコードから環境アクチュエータ制御信号を生成する信号抽出器と、調整された環境アクチュエータ制御信号を更に変更し、個別環境アクチュエータ制御信号を発生させるユーザプリファレンスデータベースと通信するユーザプリファレンスフィルタと、少なくとも変更された環境アクチュエータ制御信号のうちのひとつに基づくカスタマイズ環境アクチュエータ制御信号を生成するアクチュエータ出力制御装置と、アクチュエータ出力制御装置がテレビ視聴環境を変更するようにビデオディスプレイ装置のビデオディスプレイと対応して複数のカスタマイズ環境アクチュエータ制御信号を複数の環境アクチュエータに送信した個別環境アクチュエータ制御信号とを備える。
【０００８】
本発明はまた、ビデオストリームに環境インジケータを自動的に挿入する方法を備えても良く、該方法は、ビデオ内容を認識してビデオ内容ラベルを生成するようにビデオ認識装置でビデオストリームを分析し、そのビデオ内容ラベルに基づいて内容ＩＤ信号を生成し、分析されたビデオストリームのためのセグメント分割マーカーを生成し、内容ＩＤ信号を認識されたビデオ内容に応じた標準環境内容識別タグのデータベースと比較し、割り当てられた環境タグとマーカーをビデオストリームと再同期させ、遅延ビデオストリームを生成された環境タグとマーカーのデータでコード化することを備える。
【０００９】
本発明はまた、ビデオストリーム内に環境インジケータを自動的に挿入する装置を備えても良く、該装置は、データベースに記憶される標準環境内容識別タグであるビデオストリームのビデオ内容に対応する環境内容識別タグ及びセグメント分割マーカーを生成するようにビデオストリームを分析するビデオ認識アナライザと、標準環境内容識別タグを環境内容識別信号と比較する比較器と、割り当てられた環境内容識別タグの挿入と、ビデオストリーム内の分割マーカーとを同期させる時間同期装置と、ビデオストリームを環境内容識別タグと分割マーカーにコード化するエンコーダと、を備える。
【００１０】
本発明の利点は、表示画面に表示される内容に対応する種々の環境検出器を製作し協働させる機能であって、視聴者により現実的な感覚の体験を提供することにある。受動的なビデオの事象に対応する種々の環境変更を加えることによって、参加者は大きな現実的感覚と参加を体験できる。
【００１１】
本発明の多数の利点と特徴は、以下の本発明の詳細な説明とその実施形態と発明の詳細が本明細書に一部に完全に開示してある特許請求の範囲と、添付図面とから容易に明確になるであろう。
【発明を実施するための最良の形態】
【００１２】
図１は本発明の一実施形態の略ブロック図である。図１に示すように、セットトップボックス１０５は、環境拡張コード１０４と結合されるテレビ（ビデオ／オーディオ）信号１０２を含む入力信号１００を受信する。セットトップボックス１０５は、環境拡張装置全体を管理する中央環境制御装置１０８と結合する標準テレビ（ビデオ／オーディオ）コンバータボックス１０６を含む。セットボックス１０５内に配置されるコンバータボックス１０６は、標準的テレビ（ビデオ／オーディオ）信号１１０を従来の方法で適切な装置に直接送信する（テレビ１２８及びステレオオーディオ１１８）。環境拡張コード１０４は、セットトップボックス１０５内の中央環境制御装置１０８で認識される。アクチュエータ制御信号１１２は、個々の環境アクチュエータ１３０乃至１４２に送出される種々の環境制御装置による認識のために復調される。
【００１３】
アクチュエータ制御信号は、ビデオ信号のＶＢＩあるいは共に“ビデオタグ及びビデオマーカー”と題される２００１年２月１２日付けで出願された米国仮出願番号６０／２６８，３５０である２００２年２月１２日付けで出願された米国特許出願のように開示される他の方法で組み込まれても良い。これについては全ての開示及び教示を引用して援用する。
【００１４】
個々の制御における具体的な機能及び強度は、セットトップボックス１０５内の中央制御装置１０８と電子通信１１４しているユーザプリファレンス／強度制御入力装置１１６により調整しても良い。中央環境制御装置１０８は、ユーザプリファレンス／強度制御入力装置１１６からの入力と、予めプログラムされたユーザプリファレンスとリアルタイムのユーザプリファレンスとの組合せに基づいて、テレビのビデオディスプレイ１２８に映し出された視覚的状態と一致する所望の効果に対応する具体的な信号を個々の環境アクチュエータに送出する。
【００１５】
例えば、予めプログラムされた環境拡張された映像シーンは、入力信号１００としてコンバータボックス１０６においてテレビ１２８およびステレオ１１８で認識可能な形式に変換されてテレビ（ビデオ／オーディオ）信号１０２と共に受信される。この「海に浮かぶ救命ボートのシーン（ocean lifeboat scene）」の環境コード１０４は、中央環境制御装置１０８によって処理され、ユーザプリファレンス／強度制御入力装置１１６からの入力に基づいて、各環境アクチュエータにアクチュエータ制御信号１１２を発信する。この「海に浮かぶ救命ボートのシーン」には、例えば、ソファが体感させる波のような動き、霧の発生、風、雷（雷光及び低周波オーディオ）及び海の匂いが含まれても良い。
【００１６】
図１に示すように、中央で制御された周辺環境変調器（アクチュエータ）は、現実感のある環境をユーザのために創造するように、テレビあるいはホームシアターシステムに組み込んでも良い。双方向テレビあるいは高機能化テレビに提供される現在のデータチャネルを使用することで、データには、テレビの外部で発生するその他の感覚あるいは環境動作を提供するように周辺機器を制御するテレビ信号が含まれても良い。例えば、芳香発生器といった装置は、視覚環境において匂いを提供するのに使用しても良い。これらの香りは、例えば、映画や番組あるいはコマーシャルで観られる食品といったスクリーンに存在するものに対応しても良い。食品以外のものも同様に見ている場所へ匂いを加えることで拡張される。例えば、花、植物、香水、海の霧、交通渋滞等といった多彩な香りは、視聴者により強い現実的な感覚と体験を与えるように対応する映像シーンに加えたりもする。
【００１７】
振動アクチュエータは、スクリーンに映し出される視覚的状態に対応する動きをシミュレートするように椅子、ソファあるいは他の家具の見る場所の付近に備え付けてもよい。例えば、波の動きは、海のシーンの時に椅子に取り付けられた振動アクチュエータでシミュレートしても良い。種々の溶液を組み合わせ、それを視聴者の口に配置される不活性又は食用のマトリックスに付着させることにより、味覚を生み出すことが可能な装置は、開示の発明と共に使用される。例えば、パン作りの番組では、拡張されたテレビ信号において特定の食品の味覚コードを送出することによって、視聴者にデジタル化された味覚をダウンロードすることが可能である。
【００１８】
扇風機、暖房器具、加湿器、冷房器具あるいは他の空気処理装置はまた、気象あるいは目でとらえた他の環境に応じた条件をシミュレートするのに使用される。雷、震動、騒音等といったその他の環境要素は、これらの要素それぞれに対して特定のアクチュエータで利用可能である。超低周波および超音波の振動は、視聴者に環境刺激をシミュレートするのに使用しても良い。空気の圧力波は、例えば雨や他の触感による感覚といった、他の手段では実現不可能な感覚の効果をシミュレートするのに使用しても良い。
【００１９】
セットトップボックスに内蔵される高度な環境制御装置は、ビデオ、ＤＶＤあるいは他のあらかじめ記録された記憶装置でローカルに生成されるもの、あるいはラジオ、ケーブル、インターネット、衛星等といった放送信号として得られるもの、あるいはその組合せであるアナログあるいはデジタルの入力信号を処理するのに利用しても良い。各プログラムは、制御データあるいは環境周辺機器のスクリプトを含むフィード（例えばアナログチャンネルにおける放送電波の隙間）に組み込まれたデータを有する。システム制御装置は、制御信号を復調し、特定のスクリーンに表示された事象と一致する方法でこの制御データを選択された周辺機器を作動し、管理するために配信する。
【００２０】
図２は、本発明に基づく環境アクチュエータを制御するように環境拡張コードでビデオ信号を利用した実施例の一つを図示した略ブロック図である。図２に示すように、テレビ放送の電波の隙間（ＶＢＩ）にて環境拡張コードでコード化されたビデオ信号２００は、セットトップボックス２０２に受信される。ＶＢＩデコーダ２０６は、ビデオ信号２０８から環境拡張インジケータ２１０を分離して、次にビデオディスプレイ信号で環境拡張信号の再同期化をするために信号にタイムコードを挿入する。ビデオ信号２０８は、標準的な方式でケーブル／衛星デコーダ２１２に入力される。環境拡張インジケータ２１０は、中央環境制御装置２０４に送信され、環境コードデータベース２２２に含まれる既知の環境コードと照合される。いったんインジケータ２１０が、中央制御装置２０４で採用可能な対応するデータベースコードと一致すると、特定の時間に特定のユーザによって要求される特定の環境拡張コードを選択するように、適合する環境拡張コード２２４をユーザプリファレンスフィルタ２２６でフィルタされる。ユーザプリファレンス／強度制御入力装置２３６は、ユーザプリファレンス信号２２８をユーザプリファレンスプリフィルタ２２６に入力するのに使用され、また強度制御信号２３４をアクチュエータ出力制御装置２３０に入力するのにも使用される。
【００２１】
アクチュエータ出力制御装置２３０は、ユーザプリファレンスフィルタ２２６から個別環境コード２４０を受信し、強度制御信号２３４から特定のアクチュエータのための出力強度を特定し、アクチュエータ出力をビデオ／オーディオ出力信号２４２と同期させる。この同期は、２つの信号パス２０８及び２１０のタイムコードリーダ２１４によりコード化されるタイムコードを一致させることによって行われる。事象同期装置２２８はタイムコードリーダ２１４からビデオタイムコード２１６を受信し、アクチュエータ制御／ステータス信号２３２の出力と（アクチュエータ出力制御装置で）ビデオ／オーディオ出力信号２４２とを同期させる。アクチュエータ制御／ステータス信号２３２は、オーディオ／ビデオ出力と共に同期環境効果を生じさせるためにアクチュエータ２３８を駆動し、使用可能なアクチュエータの存在とタイプを確立するために、中央環境制御装置２０４と通信する。この装置はまた、映像環境の現在のステータスと状態を確立するようにフィードバック機構を含むこともできる。これは、周辺装置の性能を最大限に引き出すとともに、予めプログラムされたユーザからの制約及びユーザプリファレンスに対応して、周辺装置の動作を調整するために行われる。複数の環境ステータスセンサ２４８は、映像環境の現在の状態を提供するように中央環境制御装置２０４と通信可能である。例えば、特定の環境条件が前のアクチュエータシミュレーション（すなわち暴走シーンでの牛のにおい）から続いている場合、フィードバック機構は、次のアクチュエータシミュレーションの強度（すなわち次の馬小屋のシーンでの馬のにおい）を特定したときに効果が持続することを考慮することができる。
【００２２】
これらの環境拡張コードの強度はいずれも、それぞれの環境周辺機器の個別の調節を提供するように、中央環境制御装置２０４に内蔵の、あるいは分離したユーザプリファレンス／強度制御入力装置２３６によって修正されても良い。これは例えば、特定の周囲機器の強度を０から１００％の間で調節する連続するスライダーコントロールによって行われる。これらの制御装置は、図３に示すように分離された機械制御であってもよいし、あるいは図４に示すようにグラフィカルユーザインターフェース（ＧＵＩ）で表され、マイクロプロセッサによって制御されて画面に表示される。
【００２３】
図３は、環境制御アクチュエータを個別に制御し、ユーザプリファレンスデータを入力するための入力装置を具体化したひとつの概略図である。ユーザプリファレンス／強度制御入力装置３００は、ユーザコミュニケーション信号及びユーザ制御信号を回線３２２及び３２６を介してセットトップボックス３１４内の中央環境制御装置３１６に供給する。セットトップボックス３１４は、環境コード３１２付きのビデオ信号を受信し、アクチュエータ制御信号３２８をアクチュエータ群３２４に供給するためにユーザプリファレンス信号３２２及び強度制御信号３２６を利用する。セットトップボックス３１４はまた、ビデオ／オーディオ信号を処理し、それをビデオディスプレイ３１８及びステレオオーディオ出力３２０に送信する。ユーザプリファレンス／強度制御入力装置３００は、主電源３１０によって制御され、個々のアクチュエータ群３２４の強度を別々に調節するための機能を有する。個々の強度レベル調整装置３０４は、識別しやすいように環境アクチュエータラベル３０６で示される。強度は、ユーザの好みによって０％（オフ）から１００％まで調整可能である。キーボード３０２は、セットトップボックス３１４がユーザプリファレンスデータベース３４４に格納可能なユーザプリファレンス及びユーザプロファイルの入力を提供するのに使用され、また、特定のユーザあるいは環境による環境効果をカスタマイズ及びフィルタリングするのに使用される。アクチュエータの状態及び文字は入力装置表示画面３３０に表示される。
【００２４】
ユーザプリファレンス／強度制御装置はまた、テレビスクリーン上のグラフィカルユーザーインターフェースで実現可能で、遠隔制御装置を使用して操作可能である。
【００２５】
拡張された環境制御コードを含まないローカルのあるいは放送ビデオ信号については、これらのコード（すなわちタグ及びマーカー）は、再生現場で生成され、本発明に基づいてデータベース装置を使用した自動化された方法あるいは同時あるいはほぼ同時（遅延）方法によって挿入しても良い。本発明では、ビデオストリーム内のタグ及びマーカーを簡単かつ容易な方法で供給可能で、それは、
制御信号を生成して種々の異なる方法で環境制御装置を作動するために使用可能なタグ及びマーカーである。適切な識別タグあるいはマーカーを含まないあるいは有さない入力信号に対してオーディオ／ビデオ認識技術を使用することによって、エンドユーザのサイトに使用可能な拡張された環境制御を供給することができる。
【００２６】
タグ及びマーカーは、制御信号を生成する簡単且つ容易な方法を提供するためにＸＭＬ言語で実現可能である。もちろん、タグ及びマーカーを実現するためには、いかなる任意の形式を使用しても良い。例えば、ビデオセグメントが海のシーンを有する場合、認識アナライザは、その特定の事象を標準の事象のデータベースと照合し、対応するプログラムされた応答コードは、適切な環境応答を作動させるように中央制御装置に送信することができる。同様の方法で、オーディオ信号及びキーワードを、特定の音声あるいは音が認識された場合に環境応答させるために、データベースにプログラミングしておいてもよい。
【００２７】
図４は、環境制御アクチュエータを個別に制御し、グラフィカルユーザーインターフェースでユーザプリファレンスデータを入力するための入力装置の一つの実現例の概略図である。ユーザプリファレンス／強度制御入力装置のためのグラフィカルユーザーインターフェース４００は、ユーザコミュニケーション信号及び制御信号を図３に示すセットトップボックス３１４内の中央環境制御装置３１６に供給する。ＧＵＩ４００は、図３の電気機械式ユーザプリファレンス／強度制御入力装置３００と同様の動作をする。アクチュエータ制御信号は、ビデオディスプレイ装置によって表示されるＧＵＩ内のアクチュエータ設定値制御装置４０４から生成される。現在のアクチュエータステータス４０８はまた、現在のアクチュエータの有無と状態を示すように表示される。ＧＵＩプリファレンス／強度制御入力装置４００は、主電源４１０によって制御され、個々のアクチュエータの強度を別々に調節する機能を有する。個々の強度レベル制御装置４０４は、容易に認識できるように、環境アクチュエータラベル４０６で示される。アクチュエータの強度は、ユーザの好みによって０％（オフ）から１００％の間で調整可能である。図３の電気機械式ユーザプリファレンス／強度制御入力装置３００と同様の方法で、グラフィカルキーパッド４０２は、セットトップボックスが記憶可能なユーザプリファレンス及びユーザプロファイルのための入力を供給するために使用され、また、特定のユーザあるいは環境のための環境効果をカスタマイズ及びフィルタリングするのにも使用される。アクチュエータステータスと文字は、テキスト表示領域４１２といった種々の領域に表示されても良い。
【００２８】
ＧＵＩユーザプリファレンス／強度制御装置４００はまた、遠隔制御装置あるいは配線のあるキーパッドを使用して操作しても良い。
【００２９】
図５は、外部ビデオ信号５００から環境を変更する一具体例を示す略ブロック図である。図５に示すように、外部ビデオ信号入力５０２は、テレビ／オーディオ５１０の出力であるビデオテレビ信号５０６と、オーディオ信号５０８と、を除去するテレビデコーダ５０４に受信される。入力信号５０２に存在する環境拡張コード５１２は、除去され、アクチュエータ制御信号ジェネレータ５１４に入力される。アクチュエータ制御信号（ＡＣＳ）は、アクチュエータ制御信号ジェネレータ５１４から出力され、調整後ＡＣＳ５２０として個々のアクチュエータに独立した制御装置を備えるようにアクチュエータ強度制御装置５１８によって変更される。調整後ＡＣＳ５２０は、個別ＡＣＳ５２４を生成するためにユーザプリファレンス制御装置５２２においてユーザプリファレンスデータベース５４４と比較される。個別ＡＣＳ５２４は、アクチュエータ出力５３２に送信され、複数のアクチュエータ５３４に配信されるカスタマイズＡＣＳ出力５３０を特定するためにアクチュエータ状態制御装置５２６と現在環境状態制御装置５２８に入力される。アクチュエータ状態制御装置５２６及び現在環境状態制御装置５２８は、追加の環境刺激を入力したときに現在の環境とアクチュエータの状態を考慮されるようにフィードバック機構としての機能を果たす。例えば、特定の環境状態が直前のアクチュエータシミュレーション（すなわち暴走シーンの牛のにおい）から継続している場合、フィードバック機構は、次のアクチュエータシミュレーション強度（すなわち次の馬小屋シーンの馬のにおい）を特定するときに漂う効果を考慮することができる。これらの環境拡張コードのうちのいずれの強度も、ユーザプリファレンス（すなわち馬あるいは牛のにおいなし）を含むユーザプリファレンスデータベース５４４によって変更することもできる。
【００３０】
図６は、自動化された入力装置を採用して、環境制御タグ及びマーカーが遅延ビデオストリームに自動的に挿入可能な方法を示す略ブロック図である。図６に示すように、ビデオソース６００はビデオ認識アナライザ６０４及び遅延装置６０６に適用されるビデオ信号６０２を発生する。遅延装置６０６は、遅延ビデオ信号６０８を発生させるために数秒あるいは数分という所定の期間でビデオ信号６０２を遅らせる。遅延ビデオ信号はまた、エンコーダ６１２に入力される。
【００３１】
ビデオ認識アナライザは、ビデオ信号６０２の内容を内容コード、グラフィック認識、フレッシュトーン、オーディオキーワード等といった様々な技術を介して確立するために機能する。ビデオの内容がいったん識別されると、内容ＩＤ信号６０５は、比較器６１８に送信される。比較器６１８は、内容ＩＤ信号６０５を除去するようにデータベース６１４にアクセスし、データベース６１４から標準環境制御タグ及びマーカー６１６に内容を割り当てる。環境制御タグ及びマーカー６２０は次に、時間同期装置６１０で遅延ビデオ６０８と同期される。同期された環境制御タグ及びマーカー６２４は、エンコーダ６１２によって遅延ビデオ信号６０８に挿入され、環境制御タグ及びマーカーコード化した遅延ビデオ６２１として出力される。
【００３２】
図６を参照して説明したように、ビデオ認識アナライザ６０４はビデオ信号６０２の内容を識別するのに利用される。比較器６１８は、ビデオ認識アナライザ６０４によって分析されたビデオセグメントの内容を説明するタグを生成する。これはデータベース６１４から標準タグ６１６にアクセスすることにより実現される。例えば、タグは、特定のビデオセグメントの内容（天気、海、交通渋滞等）あるいは標準タグとしてデータベース６１４によって提供されるいくつかの記述されるキーワードを示しても良い。比較器は、これらの環境制御タグ及びマーカー６２０が時間同期装置６１０によって遅延ビデオ６０８と再同期化された後、エンコーダ６１２に適用する。環境制御タグ及びマーカー６２１でコード化された遅延ビデオは次に、環境制御タグ及びマーカーデータを利用可能なセットトップボックスに送信しても、あるいはビデオ記憶装置に記憶しても、あるいは所望の方法で使用しても良い。上記の説明は、ビデオ信号の分割あるいは遅延及び再同期化しない同様の方法によってビデオ信号で実現可能である。
【００３３】
いずれのタイプの環境制御信号も本発明の精神に基づく所望の目的でビデオストリーム内にインジケータとして挿入することが可能である。
【００３４】
タグを記述するひとつの実現例は、下記に示すようなＸＭＬファイルである。
【表１】
2005523612.tif 000003
【００３５】
マーカーを記述するひとつの実現例は、下記に示すようなＸＭＬファイルである。
【表２】
2005523612.tif 000004
【００３６】
なお、マーカーはタグと同じＩＤを持ち、互いにリンクすることとする。
【００３７】
環境制御タグ及びマーカーを記述する別の実現例を、定義されたフィールドおよびチェックサムのあるＡＳＣＩＩ文字列として下記に示す。
【表３】
2005523612.tif 000005
【００３８】
タグ及びマーカーを記述する他の実現例は、バイナリデータ、ビットマスキング・データあるいは他のタイプのインジケータを記述するデータを含んでも良い。
【００３９】
本開示は、提案された環境つまり行動の感覚的な表現あるいはシミュレーションを発生させるために環境変更子及びアクチュエータをテレビ番組のビデオ及びオーディオの構成要素で同期化する方法及び装置を説明する。装置の実施形態には、いずれの及び／又は全ての環境変更子（アクチュエータ）の制御データを受信する視聴家庭内の中央装置が含まれる。この装置はテレビあるいは付属の構成要素に組み込まれてもよく、あるいは完全に独立しても良い。この装置は、いずれかの使用可能な情報源から制御信号を受信し、適切な制御データあるいは信号を付属の周辺機器あるいは構成要素に送信する。
【００４０】
上記の発明についての説明は、図及び説明を目的として提示したものであり、開示された厳密な方法で本発明を網羅的にあるいは限定するものではなく、また、前述の教示に鑑みて変形及び変更は可能である。実施形態は、発明の理念を最適に説明するために選択され説明されたものであり、その実用分野は当業者が使用可能なように、特定の用途に適していると考慮された種々の実施形態及び変形例において本発明を最適に利用するように説明されたものである。付記されたクレームは先行技術によって限定されない限り、本発明の他の実施形態を含むように解釈されても良い。
【図面の簡単な説明】
【００４１】
【図１】本発明の全体のシステムの一実施形態の概略図である。
【図２】本発明に基づいて環境アクチュエータを制御するように環境拡張コードとビデオ信号を利用した実現例の一つを示す略ブロック図である。
【図３】環境制御アクチュエータを個々に制御し、ユーザプリファレンスデータを入力するための入力装置の一実現例の概略図である。
【図４】環境制御アクチュエータを個々に制御し、グラフィカルユーザーインターフェースでユーザプリファレンスデータを入力するための入力装置の一実現例の概略図である。
【図５】外部ビデオ信号から環境を変更するための一実現例の略ブロック図である。
【図６】延長ビデオ信号に自動的に環境制御インジケータを挿入する一実現例の略ブロック図である。
【符号の説明】
【００４２】
１００ 入力信号
１０２ 標準テレビ／ビデオ／オーディオ信号
１０４ 環境拡張コード
１０５ セットトップボックス
１０６ 標準テレビ／ビデオ／オーディオコンバータボックス
１０８ 中央環境制御装置
１１６ ユーザプリファレンス強度制御入力装置
１１８ オーディオステレオ
１２０ フロントオーディオチャンネル
１２２ センターオーディオチャンネル
１２４ サブウーファーオーディオ
１２６ リアチャンネルオーディオ
１２８ テレビ／ビデオ
１３０ 低周波／超音波アクチュエータ
１３２ 芳香発生器
１３４ 振動アクチュエータ(ソファ下部)
１３６ 赤外線ヒーター／クーラー
１３８ 風動アクチュエータ
１４０ 霧発生器
１４２ 改良照明
【図１】
2005523612.tif 000006
【図２】
2005523612.tif 000007
【図３】
2005523612.tif 000008
【図４】
2005523612.tif 000009
【図５】
2005523612.tif 000010
【図６】
2005523612.tif 000011
【国際調査報告】
2005523612.tif 000012
2005523612.tif 000013
2005523612.tif 000014