(57)【要約】【課題】サラウンド・ビデオ合成用のコンテンツに基づく索引作成および検索方法。【解決手段】入力画像に関係するサラウンド・ビジュアル・フィールドを合成するシステムおよび方法が説明される。一実施形態で、サラウンド・ビジュアル・フィールドは表示される入力画像を囲み、または部分的に囲む領域で表示される。一実施形態で、このサラウンド・ビジュアル・フィールドは表示される入力画像に関係する１つの特徴または複数の特徴に基づき静止画像および／あるいはビデオ画像のデータベースから選択された複数の画像を含むことができる。【選択図】図５
2008033315.tif 000002
【特許請求の範囲】
【請求項１】
関連画像のサラウンド・フィールドを表示するシステムで、
少なくとも１つの特徴に基づいて選択的に検索可能な画像データベースと、
入力画像の特徴を取得し、前記画像のデータベースから前記入力画像の前記特徴に関係する少なくとも１つの画像を受信し、前記少なくとも１つの画像を含むサラウンド・ビジュアル・フィールドを生成するサラウンド・ビジュアル・フィールド・コントローラと、
サラウンド・ビジュアル・フィールド・コントローラに通信可能に接続され、第１領域において前記入力画像を表示し、少なくとも部分的に前記第１領域を囲む第２領域においてサラウンド・ビジュアル・フィールドを表示する表示装置と、を含むシステム。
【請求項２】
前記サラウンド・ビジュアル・フィールド・コントローラは前記入力画像を分析することにより前記入力画像の特徴を取得する、請求項１に記載されるシステム。
【請求項３】
前記画像の前記特徴は前記入力画像のコンテンツに関係する、請求項２に記載されるシステム。
【請求項４】
前記のデータベースはビデオ画像および静止画像を含む、請求項１に記載されるシステム。
【請求項５】
前記データベースはコンテンツに基づく索引作成および検索データベースで、コンテンツに基づく特徴に基づき選択的に検索可能なデータベースである、請求項４に記載されるシステム。
【請求項６】
前記コンテンツに基づく特徴は、テキストに基づく情報、補足情報、視覚的特長情報、色情報、運動ベクトル、圧縮ドメイン特長、領域形状、エッジ配向分布、メタデータ情報、時間情報、日付情報、およびカメラの動きを含むグループから選択された少なくとも１つである、請求項５に記載されるシステム。
【請求項７】
前記表示装置は前記入力画像を前記第１領域に表示する第１表示装置と前記第２領域にサラウンド・ビジュアル・フィールドを表示する第２表示装置を含む、請求項１に記載されるシステム。
【請求項８】
入力画像に関係する少なくとも１つの画像を含むサラウンド・ビジュアル・フィールドを生成する方法で、
前記入力画像を分析して前記入力画像の特徴を取得するステップと、
画像のデータベースを選択的に検索して前記入力画像の前記特徴に関係する少なくとも１つの画像を取得するステップと、
前記少なくとも１つの画像をサラウンド・ビジュアル・フィールドに合成するステップと、
入力画像を第１領域において表示し、前記第１領域を少なくとも部分的に囲む第２領域において前記サラウンド・ビジュアル・フィールドを表示するステップとを含む方法。
【請求項９】
前記入力画像を分析して前記入力画像の特徴を取得するステップは、
コンテンツに基づく分析手法を用いてコンテンツに基づく特徴を前記特徴として取得するステップを含む、請求項８に記載される方法。
【請求項１０】
前記コンテンツに基づく特徴は、テキストに基づく情報、補足情報、視覚的特長情報、色情報、運動ベクトル、圧縮ドメイン特長、領域形状、エッジ配向分布、メタデータ情報、時間情報、日付情報、およびカメラの動きを含むグループから選択された少なくとも１つである、請求項９に記載される方法。
【請求項１１】
前記画像のデータベースはコンテンツに基づく索引作成および検索データベースである、請求項１０に記載される方法。
【請求項１２】
前記入力画像の特徴に関係する前記少なくとも１つの画像は順位付けされる、請求項８記載される方法。
【請求項１３】
前記サラウンド・ビジュアル・フィールドを更新するために前記ステップが繰り返される、請求項８に記載される方法。
【請求項１４】
１つ以上のプロセッサで実行されると前記１つ以上のプロセッサをして少なくとも請求項８における方法を実施せしめる１つ以上の命令シーケンスを搭載するコンピュータ読み取り可能な媒体。
【請求項１５】
サラウンド・ビジュアル・フィールド・コントローラで、
入力画像を受信するように通信可能に接続され、前記入力画像を分析して前記入力画像の少なくとも１つの特徴を取得する入力画像分析モジュールと、
前記入力画像の少なくとも１つの前記特徴を受信するように通信可能に接続され、前記特徴を用いて画像のデータベースから前記入力画像特徴に関係する少なくとも１つの画像を取得するデータベース・インタフェースと、
前記入力画像特徴に関係する前記少なくとも１つの画像を受信するように通信可能に接続され、前記入力画像特徴に関係する前記少なくとも１つの前記画像を含むサラウンド・ビジュアル・フィールドを合成するサラウンド・ビジュアル・フィールド・ジェネレータで、サラウンド・ビジュアル・フィールドは前記入力画像の表示を少なくとも部分的に囲む領域において表示されるもの、を含むサラウンド・ビジュアル・フィールド・コントローラ。
【請求項１６】
前記画像のデータベースはビデオ画像および静止画像を含む、請求項１５に記載されるコントローラ。
【請求項１７】
前記画像のデータベースはコンテンツに基づく索引作成および検索データベースで、コンテンツに基づく特徴に基づき選択的に検索可能なデータベースである、請求項１６に記載されるコントローラ。
【請求項１８】
前記入力画像分析モジュールはコンテンツ分析手法を用いてコンテンツに基づく前記特徴を取得することにより前記入力画像の特徴を取得する、請求項１５に記載されるコントローラ。
【請求項１９】
前記サラウンド・ビジュアル・フィールド・ジェネレータは前記入力画像特徴に関係する前記少なくとも１つの画像を修正することによりサラウンド・ビジュアル・フィールドを合成する、請求項１５に記載されるコントローラ。
【請求項２０】
前記入力画像特徴に関係する前記少なくとも１つの画像は、伸長操作、回転操作、他の画像とのタイリング操作、前記少なくとも１つの画像の一部の選択操作、および透過性の付与操作を含むグループから選択された少なくとも１つにより修正される、請求項１９に記載されるコントローラ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は一般的に音声／ビデオ・プレゼンテーションの視覚的向上に関わり、より具体的には１つおよび／あるいはより多い静止画像またはオーディオ／ビジュアル画像を含むサラウンド・ビジュアル・フィールドを合成し表示できるシステムおよび方法に関わる。
【背景技術】
【０００２】
オーディオ／ビジュアル娯楽産業における各種の技術進歩によりメディア・コンテンツを視聴する個人の体験を向上させている。これら技術進歩のいくつかはテレビ、映画上映システム、コンピュータ、携帯ビデオ装置、および類似するその他のデバイスなどの装置で表示されるビデオの質を改良している。他の進歩はメディア・コンテンツの表示中個人に提供される音声の質を改良している。オーディオ／ビジュアル・プレゼンテーション技術におけるこれらの進歩はこのメディア・コンテンツを視聴する個人の楽しさを向上させることが目的であった。
【０００３】
【特許文献１】米国特許出願公開第２００５０１６３３７８号明細書
【発明の開示】
【発明が解決しようとする課題】
【０００４】
オーディオ／ビジュアル・プレゼンテーションを向上させるこれらの試みは単一の音声／ビデオ・プレゼンテーションの表示に的を絞っている。現行表示技術は関連コンテンツの複数の画像を表示し、関連コンテンツを効率的かつ効果的に表示する没入的体験を作り出すことに取り組んでいない。マルチメディア・コンテンツが急増により、個人は関連コンテンツ項目をいくつか同時に見たいかもしれない。しかし、そのようなコンテンツを効果的に表示できるシステムは存在しない。いくつかの装置は画像内の画像を表示する機能を有するかもしれないが、このような装置も関連コンテンツの複数の入力ストリームを表示する機能を有しない。従って、上述の制限に対応したシステム、装置、および方法が望まれる。
【課題を解決するための手段】
【０００５】
本発明の一実施形態は表示されるオーディオ／ビジュアルな入力画像コンテンツに関連するサラウンド・ビジュアル・フィールドを提供する。発明の一実施形態で、サラウンド・ビジュアル・フィールドは合成され、入力コンテンツを表示する装置を部分的または完全に囲む表面に映写される。このサラウンド・ビジュアル・フィールドは表示されるコンテンツの視聴体験をさらに向上させることを意図している。従ってサラウンド・ビジュアル・フィールドは表示されるコンテンツの特性の１つまたはいくつかを増強、拡張、または別の形で補足することができる。当業者はサラウンド・ビジュアル・フィールドが入力画像の１つ以上の特性に関連し得ることを理解しよう。入力画像の特性とは入力画像コンテンツ、メタデータ、視覚的特長、動き、色、輝度、音声、ジャンル、および活動を含むがこれらに限定されない表示コンテンツに関連する１つ以上の特性を含むと解釈される。
【０００６】
発明の一実施形態で、サラウンド・ビジュアル・フィールドは音声／ビデオ・コンテンツのプレゼンテーション中に映写または表示される。このサラウンド・ビジュアル・フィールドのサイズ、場所、および形状はビジュアル・フィールドの制作者により定義されることができ、表示されるコンテンツに関連することができ、または別途定義されることができる。実施形態において、サラウンド・ビジュアル・フィールドは別途空きの表示領域の１つ以上の部分に表示されることができる。当業者であれば各種オーディオ／ビジュアルまたは映写システムを用いてサラウンド・ビジュアル・フィールドを生成し制御することができることを理解しよう。これらのシステムはすべて本発明の範囲に入ることが意図される。
【０００７】
発明の代表的な一実施形態において、サラウンド・ビジュアル・フィールドは入力画像を分析して入力画像の特性の１つまたはいくつかを得ることにより合成することができる。一実施形態で、入力画像の特性を得るために入力画像を分析する処理は１つ以上の内容に基づく分析手法を用い、その特性として内容に基づく特性を得ることが含まれ得る。入力画像の特性を用いて、画像のデータベース（ビデオ画像の静止画像）を選択的に検索し、該当特性に関連する１つ以上の画像を得ることができる。これらの画像を次に合成し、入力画像の表示を少なくとも部分的に囲む領域に表示することができる。一実施形態で、画像のデータベースは内容に基づいた索引作成および検索のデータベースであって良い。
【０００８】
本発明の、関連画像のサラウンド・フィールドを表示するシステムは、少なくとも１つの特徴に基づいて選択的に検索可能な画像データベースと、入力画像の特徴を取得し、前記画像のデータベースから前記入力画像の前記特徴に関係する少なくとも１つの画像を受信し、前記少なくとも１つの画像を含むサラウンド・ビジュアル・フィールドを生成するサラウンド・ビジュアル・フィールド・コントローラと、サラウンド・ビジュアル・フィールド・コントローラに通信可能に接続され、第１領域において前記入力画像を表示し、少なくとも部分的に前記第１領域を囲む第２領域においてサラウンド・ビジュアル・フィールドを表示する表示装置とを含む。また、前記サラウンド・ビジュアル・フィールド・コントローラは前記入力画像を分析することにより前記入力画像の特徴を取得する。また、前記画像の前記特徴は前記入力画像のコンテンツに関係する。また、前記のデータベースはビデオ画像および静止画像を含む。また、前記データベースはコンテンツに基づく索引作成および検索データベースで、コンテンツに基づく特徴に基づき選択的に検索可能なデータベースである。また、前記コンテンツに基づく特徴は、テキストに基づく情報、補足情報、視覚的特長情報、色情報、運動ベクトル、圧縮ドメイン特長、領域形状、エッジ配向分布、メタデータ情報、時間情報、日付情報、およびカメラの動きを含むグループから選択された少なくとも１つである。また、前記表示装置は前記入力画像を前記第１領域に表示する第１表示装置と前記第２領域にサラウンド・ビジュアル・フィールドを表示する第２表示装置を含む。
【０００９】
本発明の、入力画像に関係する少なくとも１つの画像を含むサラウンド・ビジュアル・フィールドを生成する方法は、前記入力画像を分析して前記入力画像の特徴を取得するステップと、画像のデータベースを選択的に検索して前記入力画像の前記特徴に関係する少なくとも１つの画像を取得するステップと、前記少なくとも１つの画像をサラウンド・ビジュアル・フィールドに合成するステップと、入力画像を第１領域において表示し、前記第１領域を少なくとも部分的に囲む第２領域において前記サラウンド・ビジュアル・フィールドを表示するステップとを含む。また、前記入力画像を分析して前記入力画像の特徴を取得するステップは、コンテンツに基づく分析手法を用いてコンテンツに基づく特徴を前記特徴として取得するステップを含む。また、前記コンテンツに基づく特徴は、テキストに基づく情報、補足情報、視覚的特長情報、色情報、運動ベクトル、圧縮ドメイン特長、領域形状、エッジ配向分布、メタデータ情報、時間情報、日付情報、およびカメラの動きを含むグループから選択された少なくとも１つである。また、前記画像のデータベースはコンテンツに基づく索引作成および検索データベースである。また、前記入力画像の特徴に関係する前記少なくとも１つの画像は順位付けされる。また、前記サラウンド・ビジュアル・フィールドを更新するために前記ステップが繰り返される。
【００１０】
本発明のコンピュータ読み取り可能な媒体は、１つ以上のプロセッサで実行されると前記１つ以上のプロセッサをして少なくとも本発明における方法を実施せしめる１つ以上の命令シーケンスを搭載する。本発明のサラウンド・ビジュアル・フィールド・コントローラは、入力画像を受信するように通信可能に接続され、前記入力画像を分析して前記入力画像の少なくとも１つの特徴を取得する入力画像分析モジュールと、前記入力画像の少なくとも１つの前記特徴を受信するように通信可能に接続され、前記特徴を用いて画像のデータベースから前記入力画像特徴に関係する少なくとも１つの画像を取得するデータベース・インタフェースと、前記入力画像特徴に関係する前記少なくとも１つの画像を受信するように通信可能に接続され、前記入力画像特徴に関係する前記少なくとも１つの前記画像を含むサラウンド・ビジュアル・フィールドを合成するサラウンド・ビジュアル・フィールド・ジェネレータで、サラウンド・ビジュアル・フィールドは前記入力画像の表示を少なくとも部分的に囲む領域において表示されるもの、を含む。また、前記画像のデータベースはビデオ画像および静止画像を含む。また、前記画像のデータベースはコンテンツに基づく索引作成および検索データベースで、コンテンツに基づく特徴に基づき選択的に検索可能なデータベースである。また、前記入力画像分析モジュールはコンテンツ分析手法を用いてコンテンツに基づく前記特徴を取得することにより前記入力画像の特徴を取得する。また、前記サラウンド・ビジュアル・フィールド・ジェネレータは前記入力画像特徴に関係する前記少なくとも１つの画像を修正することによりサラウンド・ビジュアル・フィールドを合成する。また、前記入力画像特徴に関係する前記少なくとも１つの画像は、伸長操作、回転操作、他の画像とのタイリング操作、前記少なくとも１つの画像の一部の選択操作、および透過性の付与操作を含むグループから選択された少なくとも１つにより修正される。
【００１１】
発明の特長と利点はこの要約部分および続く実施形態の関連する詳細な説明の部分において全般的に説明されるが、発明の範囲はこれら特定の実施形態に限定されるものではないことが理解されよう。当業者であれば本出願の図面、明細書、およびクレームに照らし、さらに多くの特長および利点が明らかになろう。
【発明を実施するための最良の形態】
【００１２】
発明の実施形態について言及され、それらの例が添付図面に示される。これらの図面は限定ではなく例示を目的としている。発明は全般的にこれら実施形態に関連して説明されるが、発明の範囲をこれら特定の実施形態に限定する意図ではない。
【００１３】
ビデオ画像および／あるいは静止画像を含む画像のデータベースと併せて用い同時に関連コンテンツを提示することができるサラウンド・ビジュアル・フィールドを提供するシステム、装置、および方法が説明される。一実施形態で、画像のサラウンド・ビジュアル・フィールドは入力画像の提示と併せて合成され表示される。一実施形態で、サラウンド・ビジュアル・フィールド内の画像は入力画像に関連すると特性を１つまたはいくつか有し、視聴体験を補足することができる。当業者であればサラウンド・ビジュアル・フィールドと入力画像は多数の方法で関連付けされ個人に視覚的に提示することができ、これらすべて本発明の範囲に入ることが理解されよう。
【００１４】
以下の叙述において、説明の目的から、発明を理解させるために具体的な詳細が記載される。しかし当業者であれば発明がこれらの詳細なしに実施できることを理解しよう。当業者であれば、以下にいくつか説明される本発明の実施形態は映写システム、劇場システム、テレビ、家庭用娯楽システム、コンピュータ、携帯装置、および他種マルチメディア・システムを含むいくつかの異なったシステムおよび装置に組み入れることができることを理解しよう。本発明の実施形態はまたソフトウェア、ハードウェア、ファームウェア、またはこれらの組み合わせに存在し得る。ブロック図で以下に示される構造および装置は発明の代表的実施形態を図示し、発明を分かりにくくすることを避けることを意図している。さらに、図内の構成要素および／あるいはモジュール間の接続は直接接続に限定する意図はない。これらの構成要素およびモジュール間のデータは中間的構成要素およびモジュールにより修正、再フォーマット、またはその他変更することができる。
【００１５】
明細書において「一実施形態」または「ある実施形態」への言及はその実施形態に関連して説明される特定の特性、構造、特徴、または機能が発明の少なくとも１つの実施形態に含まれることを意味する。明細書の各種個所で「一実施形態で」または「ある実施形態で」という句の出現は必ずしも皆同じ実施形態に言及しているものではない。
【００１６】
サラウンド・ビジュアル・フィールド表示システム
図１は発明の一実施形態によるサラウンド・ビジュアル・フィールド表示システムを示す。図１に示す実施形態において、システム１００は画像を表示する表示装置１２０を含み、画像は第１または中央領域１１０および第１領域を囲む第２領域１３０におけるサラウンド・ビジュアル・フィールド内のビデオ画像および／あるいは静止画像を含むと理解される。サラウンド・ビジュアル・フィールドは必ずしも第１領域１１０の周囲に映写される必要はない。むしろ、この第２領域は１３０は第１領域１１０を部分的に囲み、第１領域１１０に隣接し、または他の方法で個人の視野内に映写する事ができる。
【００１７】
映写機は単独の通常の映写機、単独のパノラマ映写機、複数の集成映写機、ミラー・プロジェクタ、パノラマ映写フィールドを有する新規映写機、これらの映写機の任意の混成、またはサラウンド・ビジュアル・フィールドを表示し得る他の任意の映写機であることができる。広角光学を用いることにより、１つ以上の映写機により広い視野を映写することができる。これを達成する方法は魚眼レンズの使用および曲面ミラー、コーン・ミラーまたは鏡面ピラミッドの使用が係わる反射屈折システムを含むがこれらに限定されない。第２領域１３０に映写されるサラウンド・ビジュアル・フィールドは各種サイズおよび属性を有する不連続的要素を含み得る各種の画像、パターン、形状、色、およびテクスチャを含むことができ、第１領域１１０に表示される画像の１つ以上の特性に関連することができる。
【００１８】
発明の一実施形態で、サラウンド・ビジュアル・フィールドは第２領域１３０に映写されるが、入力画像が表示されている第１領域１１０内には映写されない。発明の別の実施形態でサラウンド・ビジュアル・フィールドは第１領域１１０にも映写され、または第１領域１１０および第２領域１３０双方に映写されることもできる。一実施形態で、サラウンド・ビジュアル・フィールドが第１領域１１０に映写される場合、表示されるビデオ・コンテンツの特定面がサラウンド・ビジュアル・フィールドによって際立てられ、強調され、またはその他補足されることができる。
【００１９】
図２は発明の一実施形態による、テレビ受信機に対するサラウンド・ビジュアル・フィールドを示す。明確な視聴画面２１０を有するテレビ受信機がテレビ受信機の後にある壁の表面２３０に映写されるサラウンド・ビジュアル・フィールドで補足される。例えば、大型テレビ受信機、または映写画像もしくは表示もしくは表示のセットを表示するための壁を含むビデオ・ウォールを用いてサラウンド・フィールド２３０を表示することができる。この表面２３０はサイズおよび形状においてさまざまで良く、単独の壁に限定されることなく、部屋の中で好ましいだけの領域に広げることができる。さらに、表面２３０は必ずしも図示のようにテレビ受信機を囲む必要がなく、テレビ受信機を部分的に囲み、または壁もしくは複数の壁の他の場所に位置することができる。上述のように、サラウンド・ビジュアル・フィールド内の画像はテレビ受信機画面２１０に表示される画像に関連する各種特性を有することができる。サラウント・ビジュアル・フィールドを壁またはテレビ受信機の表面に映写するために発明の各種実施形態を用いることができる。以下に２つの例が説明されるが、当業者であれば他の実施形態も本発明の範囲内であることを理解しよう。
【００２０】
図３はテレビ受信機３１０または他の表面に表示されるコンテンツを補足するためにサラウンド・ビジュアル・フィールドが直接一領域３３０に映写される一実施形態を示す。領域３３０は１つの壁にのみ示されるように図示されているが、使用される映写機３２０および／あるいは部屋の構成により複数の壁、天井、または床に広がることができる。映写機３２０はサラウンド・ビジュアル・フィールドを制御する装置（図示されず）に統合されるか接続される。一実施形態で、この装置にテレビ画面３１０に表示される入力画像を提供することができ、これは音声／ビデオ入力画像ストリームであることができる。別の実施形態でこの装置はテレビ画面３１０に表示されるコンテンツにサラウンド・ビジュアル・フィールドを映写に同期化するように制作されたデータを含むことができる。発明の各種実施形態において、入力画像はサラウンド・ビジュアル・フィールドがテレビ画面３１０に表示されるコンテンツに関係するよう具現化するために１つ以上特性に関し分析される。
【００２１】
一実施形態で、サラウンド・ビジュアル・フィールド・システム内のコンポーネントにセンサを配置し、コンポーネント間の正しい位置合わせおよび較正が維持されるようにし、システムがその特定の環境に適用し、および／あるいは入力を提供するために使用することができる。例えば、図３に例示されるシステムにおいて、映写機３２０はテレビが位置する映写フィールド部分を特定できるかもしれない。この特定により映写機３２０が、（１）テレビ受信機の画面３１０を中央にしてサラウンド・ビジュアル・フィールドを（領域３３０内で）その周りに配置すること、（２）望ましい場合サラウンド・ビジュアル・フィールドがテレビに映写されるのを防ぐこと、および／あるいは（３）サラウンド・ビジュアル・フィールドのパターンが表示３１０に確実にはめ合わせられる助けとなること、を可能にする。
【００２２】
一実施形態で、センサは映写または表示の光学素子とは別に実装することができる。別の実施形態で、センサは例えばビーム・スプリッタを用いることにより映写機または表示の光学パスを少なくとも１つ共有するよう設計することができる。
【００２３】
発明の一実施形態で、ビデオ表示とサラウンド・ビジュアル・フィールドがテレビ受信機、コンピュータ・モニタ、ラップトップ・コンピュータ、携帯装置、ゲーム機等々表示装置の境界内で表示することができる。この特定の実施形態ではサラウンド・ビジュアル・フィールドようの映写装置は必要でないかもしれない。従来の表示装置は必ずしもその表示能力をすべて利用していない。例えば、レターボックス形式で入力画像を表示する場合、ディスプレーと入力画像間のアスペクト比の差により表示領域で使用されない部分ができるかもしれない。従って本発明の一態様ではこの未使用、または空きの、表示領域を利用してサラウンド・ビジュアル・フィールドを表示することに関わる。
【００２４】
図４は発明の別の実施形態による、サラウンド・ビジュアル・フィールドを提供する反射システムを示す。システム４００はサラウンド・ビジュアル・フィールドを生成する単独の映写機または複数の映写機４４０を含むことができる。発明の一実施形態では複数の光映写機４４０がビジュアル・フィールドを生成し、鏡面ピラミッド４２０に反射されて事実上バーチャル映写機を作り出す。複数の光映写機４４０は同じ映写機のハウジングに統合されるか、または別々のハウジングに収納されることができる。鏡面ピラミッド４２０はサラウンド・ビジュアル・フィールドの表示に好ましい領域に映写機からの光を反射することができる複数の反射面を有する。鏡面ピラミッド４２０のデザインはビジュアル・フィールドの表示に望まれる領域およびシステム内で使用される映写機の種類と台数によって異なることができる。さらに、映写機からのビジュアル・フィールドを望まれる表面に反射させるために他種の反射装置もシステム内で用いることができる。別の実施形態で、鏡面ピラミッド４２０の１つの反射面を使用し、事実上平面鏡を用いる単独の映写機を用いることができる。単独の映写機はまた鏡面ピラミッド４２０の複数面に映写することもでき、この場合複数のバーチャル光心が作られる。
【００２５】
発明の一実施形態で、単独または複数の映写機４４０はテレビ４１０の後にある壁４５０の表面に反射され映写されるサラウンド・ビジュアル・フィールド４３０を映写する。上述のように、このサラウンド・ビジュアル・フィールドはテレビ４１０に表示される画像に何らかの形で関係する各種画像を含むことができる。
【００２６】
当業者であれば、サラウンド・ビジュアル・フィールドにおいて各種の効果を達成するためにシステム４００の中で各種の反射装置および構成を用いることができることを理解しよう。さらに、映写機４４０または複数の映写機はテレビ４１０またはテレビ４１０を収納する家具に統合されることができる。
【００２７】
当業者であればさらに入力画像およびサラウンド・フィールドを表示するために、単独表示またはタイル表示のような表示セットを含むがこれらに限定されず１つ以上の表示を利用することができることを理解しよう。
【００２８】
サラウンド・ビジュアル・ディスプレー・システムおよびコンテンツに基づく索引作成および検索
本発明の一実施形態で、サラウンド・ビジュアル・フィールドはコンテンツに基づく索引作成および検索（ＣＢＩＲ）手法またはシステムと統合されまたは併せて用いてサラウンド・ビジュアル・フィールドを生成することができる。さらに詳しく後述するように、入力ストリームのコンテンツを分析し、１つ以上の画像データベース（静止画像、ビデオ画像、または双方）の索引を作成しまたはクエリーするために用いることができる。次にデータベースから検索された画像を用いてサラウンド・ビジュアル・フィールドを合成することができる。
【００２９】
コンテンツに基づく索引作成および検索は広く研究されている分野である。データの索引作成および検索システムは記録の効率的な保管と検索を扱う。英数字的な記録は容易に索引が作成でき一致するパターンを検索し易いため、従来のデータベース手法はこのような記録に関する用途では良く機能する。これらの方法のいくつかは、画像に、より具体的には画像に結び付いた英数字語句に、利用することができる。しかし、データそのものに基づき画像の索引作成および検索を行なうためには画像分析およびパターン認識などさらに追加的な手法が用いられる。コンテンツに基づく索引作成および検索方法は１つ以上の方法を用いて画像の特徴、カラー・ヒストグラム、オブジェクトの形状、空間的エッジ分布、空間的色分布、テクスチャ情報、および他の特徴に基づき画像を比較する。例示の目的から以下の説明はコンテンツに基づく索引作成および検索の手法のいくつかを取り上げるが、当業者であれば他の方法、システム、実施、および使用も本発明の範囲内にあることを理解しよう。
【００３０】
テキストに基づく索引作成はコンテンツに基づく索引作成および検索の一方法である。写真画像またはビデオ画像は画像に関連するデータでタグまたはリンクすることができる。例えば、動物の写真は写真に示される動物の名前および／あるいは画像が撮影された場所に関する情報を含むことができる。このテキスト情報をデータベースの索引作成および検索に用いることができる。一実施形態で、画像またはビデオのヘッダ領域に含まれる情報を索引作成に用いることができる。
【００３１】
コンテンツに基づく索引作成および検索の手助けとして、形式によってさらに説明ツールが含まれる。例えばＭＰＥＧ−７形式は低レベル特長の情報（時間、色、テクスチャ、音声特長等々）、動き、カメラの動き、構造的情報（シーン・カット、領域のセグメント化等々）、および概念情報を含む、画像コンテンツに関連する各種の情報を含む。
【００３２】
コンテンツに基づく索引作成および検索の別の方法は補助情報と呼ぶことができる。補助情報は画像に関連する追加情報を指す。例えば、最新のデジタル・カメラの殆どは取り込まれる画像に関し多種類の有用な補助情報を格納している。このような情報の例としては日付および時間の情報が含まれるがこれらに限定されない。この情報は通常機械読み取り可能な形式で格納されるので、索引作成および検索に容易に利用できる。
【００３３】
写真画像またはビデオ画像に含まれる画像の視覚的コンテンツを索引作成に用いることができる。索引作成用の視覚的コンテンツ手法はカラー・ヒストグラム、運動ベクトル、圧縮ドメイン特徴、領域形状、およびエッジ配向分布などの画像特徴の使用を含むが、これらに限定されない。これらの特徴は索引作成および検索に用いることができ、さらに画像間の類似度を測定するのに用いることができる。
【００３４】
関連分野にビデオ・ショットのセグメント化があり、ここで顕著な遷移がショット境界またはシーン遷移として識別される。例えば、連続ビデオ・フレームに現れる色が非常に異なっている場合、２つのフレームの間にマーカーを配置し、２つの異なったショットに属することを示すことができる。ビデオのセグメント化手法の例はUllas Gargi、Rangachar Kasturi、およびSusan H. Strayer により、「ビデオ・ショット変化検出方法の性能の特徴づけ」（「Performance characterization of video-shot change detection methods」）、IEEE Transactions on Circuits and Systems for Video Technology、１０(１):１−１３、２０００年２月、において開示され、引用により全体として本明細書に組み入れられる。当業者に知られる事象検出手法およびビデオ・ストリームにおいて目覚しい事象を識別する方法も用いることができる。一実施形態で、サラウンド・ビジュアル・フィールドはショット変化または事象が検出されると再度索引作成され、またはリフレッシュされることができる。例えば、シーン変化が検出されると、入力画像を分析して入力画像の１つ以上の特徴を取得することができる。これら特徴の１つ以上を用いて画像のデータベースから関連画像を取得することができ、これらの戻された画像を用いてサラウンド・ビジュアル・フィールドをリフレッシュして新たに変化した入力画像にサラウンド・ビジュアル・フィールドを関係させることができる。
【００３５】
コンテンツに基づく索引作成に関する技術文献の包括的な調査がArnold W. M. Smeulders、Marcel Worring、Simone Santini、Amarnath Gupta、および Ramesh Jainにより、「初期末期時点のコンテンツに基づく画像検索」（「Content-based image retrieval at the end of the early years」）、IEEE Transactions on Pattern Analysis and Machine Intelligence, ２２(１２):１３４９−１３８０、２０００年１２月、において実施され、引用により全体として本明細書に組み入れられる。しかし、本発明にとって特定なコンテンツに基づく索引作成および検索システムのいずれも不可欠ではないことが特記される。当業者であれば多数の異なった方法を用いてコンテンツに基づく索引作成および検索結果を達成できることを理解しよう。
【００３６】
サラウンド・フィールド・コントローラ
図５は発明の一実施形態により、コンテンツに基づく索引作成および検索システムまたは画像のデータベースとインタフェースし、サラウンド・ビジュアル・フィールドを合成する代表的なサラウンド・フィールド・コントローラ５００を示す。コントローラ５００は表示装置（ＣＲＴディスプレー、ＬＣＤディスプレー、映写装置等々を含むがこれらに限定されることなく、任意の種類の表示装置を意味するとみなされる）内に統合され、表示装置に接続され、または別途表示領域に表示されるサラウンド・ビジュアル・フィールドを制御できるようになっている。コントローラ５００はソフトウェア、ハードウェア、ファームウェア、またはこれらの組み合わせとして実施することができる。当業者であれば上述の要素またはモジュールのいくつかは物理的、および／あるいは機能的にサブモジュールに分けられ、またはいっしょに組み合わせられることを理解しよう。一実施形態で、コントローラ５００は１つ以上の入力信号を受信し、次にこれを処理して少なくとも１つのサラウンド・ビジュアル・フィールドを合成する。
【００３７】
図５に描かれるように、入力画像分析モジュール５２０が接続され、入力画像５１０を受信する。モジュール、装置、またはシステムのいずれに関して用いられるにせよ、「接続される」または「通信上接続される」の用語は、直接接続、１つ以上の中間装置経由の間接接続、および無線接続を含むものと理解されることが特記される。入力画像分析モジュール５２０は上述の分析手法を１つ以上用いて関連画像を求めるのに用いられる特徴を１つまたは複数抽出または取得する。例えば、入力画像分析モジュール５２０は入力画像が車であることを判定するために空間的エッジ情報を、日付および時間情報を示すメタデータを、および車の色を判定するために色分析を利用することができる。これらの特徴の１つ以上をコンテンツに基づく索引作成および検索（ＣＢＩＲ）インタフェース５２２に供給することができる。
【００３８】
入力分析モジュール５２０により取得された特性の１つまたは複数はコンテンツに基づく索引作成および検索（ＣＢＩＲ）インタフェース５２２に提供され、後者はこれらを用いて１つ以上の関連画像を取得する。一実施形態で、ＣＢＩＲインタフェース５２２はＣＢＩＲシステム５４０に通信上接続されている。一実施形態で、システム５４０は完全なＣＢＩＲシステムである、あるいはＣＢＩＲシステム５４０は検索可能な画像のデータベースであり得る。
【００３９】
「データベース」という言葉は本明細書で用いられる場合、任意のメディアの収集から完全なデータベース・パッケージまで、２つ以上の画像の任意の収集を含むことが特記される。例えば、映画のＤＶＤに含まれる付加的なコンテンツを「データベース」とみなすことができ、インターネットからの画像のようなデジタル画像の自由な収集もそうみなすことができる。もちろん包括的なデータベースのソフトウェア・パッケージを用いることもできる。さらにデータベースのデータは１つ以上のことなった媒体に所在することができ、フラッシュ・メモリに基づく媒体、ディスク・ドライブに基づく媒体、サーバに基づく媒体、磁気的媒体、光学的媒体等々が含まれるがこれらに限定されないことが理解されよう。
【００４０】
一実施形態で、入力画像およびサラウンド・ビジュアル・フィールドのコンテンツを１つ以上のデータベースから検索することができる。別の実施形態では、サラウンド・ビジュアル・フィールドのコンテンツのみを１つ以上のデータベースから検索することができる。当業者であればいくつかの索引作成および表示構成が可能であることを理解しよう。可能な組み合わせは以下を含むがこれらに限定されない。（i）第１領域、または中央表示部分、をデータベースの索引作成に用い、得られた画像を用いてサラウンド・ビジュアル・フィールドを表示する、（ii）サラウンド・ビジュアル・フィールドを用いてデータベースの索引作成に用い、中央表示部分を用いて検索メディアを表示する、および（iii）中央表示部分およびサラウンド・ビジュアル・フィールドを交互にデータベースの索引作成に用いる。
【００４１】
前記のとおり、特定なＣＢＩＲシステム５４０のいずれも本発明に不可欠ではない。一実施形態で、ＣＢＩＲインタフェース５２２は入力画像特徴の１つ以上を用いてＣＢＩＲシステム５４０にクエリーを出すことができ、ＣＢＩＲシステム５４０は関連画像を返送する。一実施形態で、返送画像はクエリーの特徴への類似性に従って順位付けすることができる。
【００４２】
一実施形態で、入力画像５１０とサラウンド・ビジュアル・フィールドのコンテンツ５３０は関係していてもいなくても良い。画像のデータベースを利用する１つの利点は多数の高画質画像をアクセスできることである。一実施形態で、以下の例のようにフィールドは間接的に関係することができる。一例において、入力画像は写真のセットを表示する一方、サラウンドは同じ場所ではあるが、場合によっては異なった時間または異なった展望から撮影されたビデオ・クリップのセットを表示する。別の例示において、中央領域は動物園で撮影した動物のビデオ・クリップのセットを表示する一方、サラウンド・ビジュアル・フィールドは自然の野生動物生息地の写真のセットを表示する。あるいは、入力画像とサラウンド・ビジュアル・フィールドの画像は例えばランダムな画像を表示することにより抽象的に関係していることができる（すなわち画像間は直接関係がないという関係である）。
【００４３】
返送画像はＣＢＩＲインタフェース５２２により受信され、これはさらにサラウンド・ビジュアル・フィールド・シンセサイザ５２４に通信上接続されている。サラウンド・ビジュアル・フィールド・シンセサイザ５２４は返送画像を用いて入力画像５１０と併せて表示されるサラウンド・ビジュアル・フィールド５３０を作成または合成する。一実施形態で、サラウンド・ビジュアル・フィールド・シンセサイザ５２４は画像をサラウンド・ビジュアル・フィールドに引き伸ばし、寄せ集め、および／あるいはタイル張りにすることができる。一実施形態で、コントローラ５００は画像分析、画像データベースへのクエリー、および／あるいはサラウンド・ビジュアル・フィールドの合成の時間を与えるためにバッファ機能を含むことができる。
【００４４】
図６は入力画像６１０およびサラウンド・ビジュアル・フィールド６３０の実施形態を描く。描かれた実施形態において、入力画像６１０は第１、または中央、領域に表示され、サラウンド・ビジュアル・フィールド６３０を形成し第２領域に表示される画像６３０Ａ〜６３０Ｊで囲まれる。画像６３０Ａ〜６３０ＪはＣＢＩＲデータベース５４０から返送された、１つ以上の特徴に基づき入力画像６１０に関係する画像を表す。画像６３０Ａ〜６３０Ｊはサラウンド・ビジュアル・フィールドに合成され、この場合画像は同等または種々の面積を占めることができる。
【００４５】
コントローラ５００のいずれの特定構成も本発明にとって不可欠ではないことが特記される。当業者であれば他の構成および機能がコントローラから除外され、またはコントローラに含まれ得、そのような構成は発明の範囲内にあることを理解しよう。
【００４６】
サラウンド・ビジュアル・フィールドの代表的合成方法
図７に移ると、画像のデータベースを用いてサラウンド・ビジュアル・フィールドを合成する代表的な方法が表示される。描かれた実施形態において、入力画像が分析され入力画像について１つ以上の特徴が抽出または取得される（７１０）。例えば、特徴の１つまたは複数を抽出または取得するのに１つ以上の分析手法を用いることができる。抽出された特徴は関連画像を取得する手段を提供する。
【００４７】
入力画像の抽出特徴を１つ以上用いて画像のデータベースにクエリーを出すことができる（７２０）。一実施形態で、ユーザはクエリーに関し以下のような情報を提供することができるが、これらに限定されない。検索にどの特徴を用いることができるか、特徴をどのように順位付けするか、追加的特徴の提供、特徴の変更、排除的特徴の提供、ブール検索関係の指示、画像が有すべき［類似］度の設定等々。
【００４８】
クエリーに一致し、または充分に一致する１つ以上の画像が画像のデータベースから返送され（７３０）、これはコンテンツに基づく索引作成および検索（ＣＢＩＲ）システムであることができる。一実施形態で、返送結果はクエリーの特徴に基づいて類似度に従い順位付けされることができる。多数の画像が返送された場合、サラウンド・ビジュアル・フィールドに用いる返送画像の数を限定するために順位レベルの閾値を設定することができる。あるいは返送画像の設定数を選択することができる。例えば、サラウンド・ビジュアル・フィールドの合成に上位１０位の画像を用いることができる。返送画像、またはそこから選抜されたもの、は次にサラウンド・ビジュアル・フィールドに合成することができる（７４０）。画像を組み合わせて第２領域を埋め、または部分的に埋めることにより画像をサラウンド・ビジュアル・フィールドに合成することができる。実施形態において、この過程は一定間隔で、シーンの変化時に、または事象が検出された際、連続的に繰り返し、表示される入力画像に対しサラウンド・ビジュアル・フィールドの再度索引作成または更新を行なうことができる。
【００４９】
当業者であればサラウンド・ビジュアル・フィールドを合成するにはいくつかの方法があることを理解しよう。一実施形態で、１つまたは複数の画像全体がサラウンド・ビジュアル・フィールドに提示されることができる。一実施形態で、画像は引き伸ばされることができる。図８は２つの画像８３０Ａおよび画像８３０Ｂを含むサラウンド・ビジュアル・フィールド８３０の実施形態を描く。描かれた実施形態において、画像８３０Ａおよび画像８３０Ｂは画像のデータベースから取得された２つの画像を表し、サラウンド・ビジュアル・フィールドのより多くの部分を埋めるように引き伸ばされている。一実施形態で、画像はサラウンド・ビジュアル・フィールドの全部を埋め、または画像８３０Ａのようにある寸法全体（サラウンド・ビジュアル・フィールドの高さなど）を埋めるように引き伸ばすことができる。あるいは画像８３０Ｂで示すように、画像はサラウンド・ビジュアル・フィールドのある部分までのみ引き伸ばすことができる。
【００５０】
一実施形態で、１つまたは複数の画像の一部を表示することができる。１つ以上の画像セグメント化手法を適用して検索画像を分解することができる。分解された部分はサラウンド・ビジュアル・フィールドで用いることができる。一実施形態で、１つ以上のオブジェクト検出または認識方法を用いて検索画像から特定な種類のオブジェクトを抽出することができる。例えば、顔検出またはオブジェクト検出（例えば車など）を用いて画像の一部を抽出することができる。図９はサラウンド・ビジュアル・フィールドの実施形態を描く。この図示された例において、画像のデータベースから取得された画像９３０Ａ〜９３０Ｋは切り抜かれた形状など部分的に提示することができる。一実施形態で、画像または画像部分はサラウンド・ビジュアル・フィールド内でランダムに配置することができる。画像は、画像９３０Ｅが画像９３０Ｆの一部を覆うように、他の画像を遮蔽または遮断し得ることが特記される。画像または画像部分は入力画像９１０により遮蔽されることができる。一実施形態で、画像および／あるいは入力画像は様々なレベルの透明度／不透明度を有することができる。一実施形態で、画像または画像部分は例えば画像９０３Ｂのように回転することができる。当業者であれば、画像のデータベースからの画像を合成するいずれの方法も本発明に不可欠ではないことを理解しよう。むしろ当業者であれば、画像をサラウンド・ビジュアル・フィールドに合成するいくつかの方法を用いることができ、これらの方法は本発明の範囲に含まれることを理解しよう。
【００５１】
補足的用途例
例示の目的から、コンテンツに基づく索引作成および検索方法をどのように用いてサラウンド・ビデオ・コンテンツを合成するかの補足例を以下に記載する。当業者であればさらなる用途で、本発明の範囲に含まれるものを理解しよう。
【００５２】
ビデオ駆動のスライド・ショー
本発明の一用途例はビデオ駆動のスライド・ショーである。この用途では、デジタル画像の収集がデータベースに存在しており、入力ビデオ・ストリームが上映されるにつれデータベースから画像が検索されサラウンド・ビジュアル・フィールドで表示される。一実施形態で、画像はランダムに検索することができる。別の実施形態で、サラウンド・ビジュアル・フィールドの画像はある程度入力ビデオ・ストリームに関係することができる。
【００５３】
例えば、データベースは自然風景の画像の収集であり得る。入力ビデオが上映されるにつれ、表示される入力ビデオ・フレームに最も類似した特長を有する１つまたは複数の画像を検索し表示することができる。入力ストリームが青系統の色に支配される場合、同様に青系統の色に支配される１つまたは複数の画像を表示することができる。
【００５４】
本発明はさらにあるイベントの画像を同時に表示するのに便利である。例えば、結婚式では写真、ビデオ双方で通常大量の画像が撮影される。ビデオ駆動のスライド・ショーを用い、入力画像に関係する画像（写真および／あるいはビデオ）を表示しながらビデオを表示することができる。当業者であれば、写真／ビデオのタイム・スタンプ、カラー・ヒストグラム、メタデータ、または他の特長を含むがこれらに限定されず、入力画像をサラウンド画像に関連付けるコンテンツに基づくいくつかの方法を認知するであろう。
【００５５】
一実施形態で、圧縮ドメイン特長を用いて類似画像の検索ができる。例えば、特定の画像または画像にグループに対し、デジタル画像の高速検索のために特長セットを画像コンテンツに基づく管理／検索方法／アルゴリズムに組み入れることができる。検索される各デジタル画像および検索クエリー画像から、その画像に関する具体的な情報を含む特長セットを抽出することができる。クエリー画像の特長セットを画像のデータベースにおける画像の特長セットと比較して、クエリー画像に類似したすべての画像を識別することができる。一実施形態で、画像はＥＸＩＦ形式のサムネイルのカラー画像であることができ、特長セットはこの形式に基づく圧縮ドメインの特長セットであることができる。特長セットはヒストグラムまたは瞬間に基づくことができる。ヒストグラムに基づく実施形態で、特長セットは画像を定義するために特定ＥＸＩＦサムネイルのカラー画像の離散コサイン変換（ＤＣＴ）係数から引き出された数個の統計のヒストグラムを含み、これらは（i）色の特長、（ii）エッジの特長、および（iii）テクスチャの特長を含み、後者にはテクスチャの種類、テクスチャの倍率、およびテクスチャのエネルギーがある。このような方法の例は本発明の譲受人に譲渡され、Jau-Yuen Chenを発明者として記載する「コンテンツ・エンジン向けのＥＸＩＦに基づく画像特長セット」（「EXIF-based imaged feature set for content engine」）と題する米国特許出願１０／７６２４４８号明細書に開示され、引用により全体として本明細書に組み入れられる。
【００５６】
例えば、一実施形態において、選択的に検索できる画像のデータベースを簡易する方法はデータベース内の画像を分析することが係わるかもしれない。分析される各デジタル画像に対し、方法はそのデジタル画像を複数のブロックで、各ブロックは複数の変換係数を含むブロックに分割し、そのデジタル画像の変換係数から引き出された特長セットを抽出することを有してなり、特長セットは色の特長、エッジの特長、およびテクスチャの種類、テクスチャの倍率、およびテクスチャのエネルギーを含むテクスチャの特長を含む。
【００５７】
一実施形態で、分析されたデジタル・カラー画像は具体的にフォーマットされたサムネイルのカラー画像であって良い。
【００５８】
一実施形態で、分割工程は分析されるデジタル・カラー画像の各原色要素を分割することを含む。色およびエッジの特長はそのデジタル・カラー画像の各原色に対し別個の色およびエッジの特長を含むことができる。別個の色の特長は各原色に対し別個のヒストグラムで表すことができ、別個のエッジの特長も同様に表すことができる。テクスチャの種類の特長、テクスチャの倍率の特長、およびテクスチャのエネルギーの特長も各々のヒストグラムで表すことができる。
【００５９】
この方法はクエリー画像に類似した画像を検索するのに用いることができ、クエリー画像は入力画像のような新規画像でも良く、収集の中に既に存在する画像でも良い。前者の場合、方法はさらにクエリー画像として用いられる新規デジタル画像に分割および抽出工程に適用し、クエリー画像の特長セットを収集の少なくともサブセットにおける各デジタル画像の特長セットと比較し、クエリー画像の特長セットに類似した特長セットを有する収集内の各デジタル画像を識別することを含む。
【００６０】
前以て分析され、特長セットが抽出された画像がクエリー画像として用いられる場合、収集内の特定画像をクエリー画像として選択することができる。次に、選択されたクエリー画像の特長セットを収集の少なくともサブセットにおける各デジタル画像の特長セットと比較することができ、収集内で選択されたクエリー画像の特長セットに類似した特長セットを有する各画像を識別することができる。
【００６１】
ある実施形態では、現在のビデオ・フレームに一致する１つまたは複数の画像を１つまたは複数のデータベースから定期的に検索し、サラウンド・ビジュアル・フィールドで表示することができる。
【００６２】
ＤＶＤの付加的なコンテンツの索引作成
本発明は映画といった既存のマルチメディア品など、他の用途に利用することができる。現在ＤＶＤ形式で格納される映画またはビデオの多くは、上演作品に関係する付加的なコンテンツを相当提供している。ＤＶＤ形式はテキストの字幕（しばしば複数の言語で）などの意味上のコンテンツ、配役／撮影陣の経歴／映画作品、さらにはシーンの拡大バージョンまたはトリビア情報などの付加的なコンテンツへの映画内からのリンクさえも格納することができる。これら含まれるすべての付加的なコンテンツは上演作品向けに制作され、これに関係する「データベース」とみなすことができる。この付加的なコンテンツのデータベースから関連コンテンツを検索し、例えば主要作品が中央表示領域に表示される間サラウンド・ビジュアル・フィールドに表示することができる。
【００６３】
他種のサラウンド・ビデオ・アニメーションの向上
ショット境界検出およびシーン遷移検出用のコンテンツに基づく索引作成および検索手法もサラウンド・ビジュアル・フィールド表示を向上させるために用いることができる。例えば、ショット境界が検出されると、例えば星空アニメーションのようなアニメーションをビデオ・コンテンツの変化に直ちに反応させることができる。これによりアニメーションはより敏感になり、シーンの動きにおける急な変化を見逃す可能性が減る。サラウンド・ビジュアル・フィールド内のアニメーションはカーハン・タンおよびアヌープ・Ｋ・バッタチャルジャを発明者として記載し２００５年１２月５日に申請された「没入型サラウンド・ビジュアル・フィールド」（「IMMERSIVE SURROUND VISUAL FIELDS」）と題する米国特許出願１１／２９４０２３号明細書で説明され、引用により全体として本明細書に組み入れられる。
【００６４】
当業者であれば、さまざまな種類およびスタイルのサラウンド・フィールドを描くことができ、本発明の範囲内であることを理解しよう。当業者であれば特定なサラウンド・フィールド構成、コンテンツに基づく索引作成および検索システムまたは方法のいずれも本発明に不可欠ではないことを理解しよう。さらにサラウンド・フィールドの要素とはサラウンド・フィールド、またはピクセル、ピクセルの集合、および描かれた画像もしくはオブジェクト、または描かれた画像もしくはオブジェクトのグループを含むがこれらに限定されず、サラウンド・フィールドの任意の部分を意味すると理解される。
【００６５】
本発明の実施形態はさらに各種コンピュータ実施の操作を実行するためのコンピュータ・コードを有するコンピュータ読み取り可能な媒体を有するコンピュータ製品に関係することができることが特記される。媒体およびコンピュータ・コードは本発明の目的のために特別に設計され構成されたものであり得、または関連技術に熟練した者が知り、利用できる種類のものであり得る。コンピュータ読み取り可能な媒体の例は、ハード・ディスク、フロッピー（登録商標）・ディスク、および磁気テープなどの磁気媒体、ＣＤ−ＲＯＭおよびホログラフィー装置などの光媒体、光磁気媒体、および特定用途向け集積回路（ＡＳＩＣ）、プログラマブル論理デバイス（ＰＬＤ）、フラッシュ・メモリ・デバイス、およびＲＯＭとＲＡＭデバイスなど、プログラム・コードを格納し、または格納して実行するように特別に構成されたハードウェア・デバイスを含むが、これらに限定されない。コンピュータ・コードの例はコンパイラにより作成されるように機械コード、およびインタープリタを用いてコンピュータが実行する高レベル・コードを含む。
【００６６】
発明は各種の変更や別の形態があり得るが、その具体的な例が図面に示され、本明細書で詳しく説明された。しかし発明は開示された特定の携帯に限定されるものではなく、逆に発明は添付クレームの精神および範囲に含まれるすべての変更、同等物、および代替物が含まれることを理解しよう。
【図面の簡単な説明】
【００６７】
【図１】発明の一実施形態による、表示装置を含むサラウンド・ビジュアル・フィールド・システムを示す。
【図２】発明の一実施形態による、サラウンド・ビジュアル・フィールドを有するテレビ受信機を示す。
【図３】発明の一実施形態による、映写機からのサラウンド・ビジュアル・フィールドを有するテレビ受信機を示す。
【図４】発明の一実施形態による、映写機および反射装置からのサラウンド・ビジュアル・フィールドを有するテレビ受信機を示す。
【図５】発明の一実施形態による、映写されたサラウンド・ビジュアル・フィールドが表示内容内の動きに関係する、典型的なサラウンド・ビジュアル・フィールド・コントローラのブロック図である。
【図６】発明の一実施形態による、入力画像に併せて表示される複数の画像を含む典型的なサラウンド・ビジュアル・フィールドである。
【図７】発明の一実施形態による、コンテンツに基づく索引作成および検索方法を用いてサラウンド・ビジュアル・フィールドを生成する典型的な方法である。
【図８】発明の一実施形態による、入力画像の表示に併せて表示される複数の画像を含む典型的なサラウンド・ビジュアル・フィールドである。
【図９】発明の一実施形態による、入力画像の表示に併せて表示される複数の画像を含む典型的なサラウンド・ビジュアル・フィールドである。
【符号の説明】
【００６８】
５１０…入力画像、５００…サラウンド・ビジュアル・フィールド・コントローラ、５２０…入力画像分析、５２２…ＣＢＩＲインタフェース、５２４…サラウンド・ビジュアル・フィールド・シンセサイザ、５３０…サラウンド・ビジュアル・フィールド、５４０…コンテンツに基づく索引作成および検索（ＣＢＩＲ）システム。
【図１】
2008033315.tif 000003
【図２】
2008033315.tif 000004
【図３】
2008033315.tif 000005
【図４】
2008033315.tif 000006
【図５】
2008033315.tif 000007
【図６】
2008033315.tif 000008
【図７】
2008033315.tif 000009
【図８】
2008033315.tif 000010
【図９】
2008033315.tif 000011