(57)【要約】本発明は、装置を制御するためのユーザ操作可能な制御手段と、物体を検出し前記物体の識別を決定する検出手段と、制御用選択項目を前記識別と関連付ける関連付け手段とを有し、前記制御手段は前記物体を検出し識別する前記検出手段に応じて前記制御用選択項目を適用するように動作可能である装置に関する。
2004520648.tif 000002
【特許請求の範囲】
【請求項１】
装置を制御するユーザ操作可能な制御手段と、物体を検出し前記物体の識別を決定する検出手段と、制御用選択項目を前記識別と関連付ける関連付け手段とを有し、前記制御手段は前記物体を検出し識別する前記検出手段に応じて前記制御用選択項目を適用するように動作可能である装置。
【請求項２】
前記制御手段は、少なくとも１人のユーザのためのユーザプロファイルを保持するユーザプロファイル手段を有し、前記制御手段は、前記物体を検出し識別する前記検出手段に応じて前記ユーザプロファイルに従って制御用選択項目を適用するように動作可能である、請求項１に記載の装置。
【請求項３】
複数の情報単位から選択された情報単位を表示する表示手段を有し、前記物体の検出及び識別に関して適用された前記制御用選択項目は前記複数の情報単位の選択である、請求項１又は２に記載の装置。
【請求項４】
前記情報単位は音響若しくは映像のコンテンツ又は静止画を構成する、請求項３に記載の装置。
【請求項５】
前記検出手段は前記物体のパラメータを認識するように構成される、請求項１に記載の装置。
【請求項６】
前記パラメータは重さ及び視覚的な外観、又は重さ若しくは視覚的な外観である、請求項５に記載の装置。
【請求項７】
前記検出手段は前記物体に取り付けられた応答器のタグを利用する、請求項１に記載の装置。
【請求項８】
請求項１乃至７のいずれか一項に記載の装置及び物体のシステム。
【請求項９】
物体を検出するステップと、前記物体の識別を決定するステップと、制御用選択項目を前記識別と関連付けるステップと、前記物体を検出し識別する検出手段に応じて前記制御用選択項目を適用するステップとを有する、装置を制御する方法。
【請求項１０】
複数の情報単位から選択された情報単位を表示するステップを有し、前記物体の検出及び識別に関して適用された前記制御用選択項目が前記複数の情報単位の選択で確立する、請求項９に記載の方法。
【請求項１１】
適切なコンピュータ装置上で実行される場合に、前記コンピュータ装置を請求項１乃至３のいずれか一項に記載の装置として機能させることを可能にするコンピュータプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、装置を制御するユーザ操作可能な制御手段を有する前記装置に関する。
【０００２】
本発明は更に、前記装置を制御する方法に関する。
【０００３】
本発明は更に、適切なコンピュータ上で実行されるとき、前記コンピュータが前記装置として機能することを可能とするコンピュータプログラムに関する。
【０００４】
【従来の技術】
データ圧縮、記録容量及びブロードバンドネットワークにおける最近の発展は、消費者が多種の大量な情報にアクセスできることを可能にした。例えば、写真のデータベース又は圧縮された音楽ファイルは、パーソナルコンピュータ又は専用装置のハードディスク上に保存され、ユーザによってブラウズされる。他の例として、ワールドワイドウェブは、ウェブブラウザによってブラウズされることができる全ての種類の情報の巨大な源泉を構成する。更に他の例として、絶えず増えていくＴＶ及びラジオのチャンネルはケーブル又は衛星のネットワークを通じて受信されることができる。
【０００５】
【発明が解決しようとする課題】
巨大な情報単位の集合からの情報単位の選択は、ユーザが現代の消費者用装置の能力を十分に利用することを妨げる、複雑なタスクである。
【０００６】
本発明の目的は、情報単位への簡単なアクセスを可能にする、最初の段落において定義された型の改良されたシステム及び方法を提供することにある。この目的のため、本発明による装置は、物体を検出し前記物体の識別を決定する検出手段と、前記識別と制御用選択項目を関連付ける関連付け手段と、前記物体を検出し識別する前記検出手段に応じて前記制御用選択項目を適用するように動作可能な制御手段とを有する。
【０００７】
【課題を解決するための手段】
家庭やオフィスで見出されることができるいずれの型の物体も、電子装置のインタフェースとしての物体として利用されることができる。大きくて重い物は前記ユーザによって容易に運ばれることができないので、最も重要な制限は、恐らく大きさと重さである。適切な物体の例は、びん、ペン、土産品、金物類、芸術作品、陶磁器、おもちゃ、紙、箱、装飾品といった自由に移動され得るもの全てである。それぞれの面で異なる機能を持つサイコロ型の物体のような組み立てられた物体も利用することができ、このことは持つ物体が多すぎるという問題を克服する。
【０００８】
例えばギリシャで購入した花瓶といったような物体は記憶の集合、この場合ギリシャで作成されたたくさんの画像へのショートカットとして利用されることができる。実際に物体は、スイッチからビデオクリップ、音声、画像、香り及び経験といった全てのタイプのメディアへの、殆ど全てのものへのショートカットとして利用されることができる。例えばティッシュの箱は、あるメロドラマを録画したＶＣＲの上に該箱を置いた場合、該ＶＣＲへのリンクとなることができる。又、古い誕生日プレゼントは、部屋の特定の場所に該プレゼントを置くことによって、該特定の誕生日の雰囲気を再現することができる。
【０００９】
２以上の人物が、同一の物体を該人物の記憶又は感覚を象徴するものとすることも可能である。本発明によるシステムの実施例において前記装置は、前記装置が、どの人物が前記物体を適所に置くかを決定し、続いて前記特定の人物に関連した前記制御用選択項目に従って前記装置を制御することを可能にする、人物認識手段を更に有する。例えば、家族の異なるメンバが同一の土産品に異なる休日の画像を関連付け、前記装置の近くにおける前記土産品の配置に応じてこれらの写真を表示するように本発明による前記装置を制御する。
【００１０】
インタフェースに物体を利用する理由は、大量の未来の情報がビット及びバイトの形で我々に届くであろうから（例えばデジタルカメラの動向を見よ）、前記物体は複雑なタスクを簡単にし（例えば、生涯の写真データベースにおける特定の写真を見つけようと試みることは、物体によって非常に容易になる）、仮想的な情報を物理的及び従ってより理解し易いものにするからである。物体は応答器（ｔｒａｎｓｐｏｎｄｅｒ）を利用することによって検出されることができるが、映像認識又は重さによっても可能である。物体の検出は装置の最上部、装置の付近、部屋の特定の場所、又はタスクが行われることが望まれる場所の近くで行われることができる。前記特定の場所は、例えばテーブルクロス、テープ、光の輝き（前記物体を光の中に置く必要がある）などによって目印を付けられても良い。
【００１１】
応答器技術が利用される場合は、殆ど全ての物体がタグづけされることができ、かくしてユーザは該ユーザ自身の物体及び該ユーザが利用したい量を選択することができる。重さ又は映像認識を利用する場合は、タグは全く必要とされない。
【００１２】
本発明の以上の及び他の態様は、非制限的な例を用いて、以下に記述される実施例を参照しながら明らかとなり説明されるであろう。
【００１３】
【発明の実施の形態】
多くの人は、通常はアルバム（ｐｈｏｔｏ ｂｏｏｋ）の中の写真の集合として保存された、画像の集合を持っている。しかしアルバムの中の写真をブラウズすることは、本質的に線形の処理であるため、非常に時間のかかることである。フォトＣＤのビューア及びコンピュータのような装置により多くの人がアクセスできるようになるにつれて、該写真が前記コンピュータ又はテレビジョンの画面上で管理、保存及びブラウズされることが可能なように該写真をデジタル化することは必然的なことに思える。いくつかの写真現像店は既に現像された写真のデジタル版を収録したＣＤ−ＲＯＭを作成するサービスを提供している。
【００１４】
該デジタル画像は画像ブラウズ装置を利用してブラウズされることができる。該装置は単独型の装置でも良いし、他の装置の一部分であっても良い。例えば、汎用コンピュータ上で動作し、ＣＤ−ＲＯＭから画像を読み込み前記コンピュータの表示装置上で該画像を表示することができるコンピュータプログラムであっても良い。
【００１５】
利用可能な画像をユーザに表示するため、画像ブラウズ装置は典型的に前記画像集合中の画像のサムネイル又は他の表現を利用して動作する。このような表現は通常実際の画像よりも小さく、そのため一度に１つ又は２つの画像ではなく、前記表現のシーケンス全体が一度に前記コンピュータ又はテレビジョンの画像上に表示される。ユーザはマウス、キーボード又は他の入力装置を利用して前記シーケンスから前記表現を選択し、その後対応する画像を観ることができる。
【００１６】
図１は、前記表現のシーケンス１０２をブラウズ領域１０３に表示するブラウズ手段１０１を有する、画像集合をブラウズするための装置１００を示す。ここで、それぞれの前記表現は前記画像集合からの画像、又は例えば「設定」といった前記装置の制御用選択項目に対応する。装置１００は前記画像集合から画像を表示領域１０６に表示する表示手段１０４を更に有する。ユーザがシーケンス１０２から選択１０５を作成したときには、選択された前記表現に対応する前記画像が表示領域１０６に表示される。
【００１７】
前記画像集合は写真、絵又は図の集合を有することができ、それぞれの写真、絵又は図面について表現が提示される。該表現はアイコン又はサムネイルであっても良く、ソフトウェアによって自動的に生成されるか又はユーザ若しくはオペレータによって手動で生成される。前記画像集合は１以上のビデオストリームをも有しても良い。この場合、前記表現はビデオストリームの一部分に対応するキーフレームであっても良い。その場合には表現の選択は、表示される対応する動画即ちビデオストリームの対応する一部分に帰着する。
【００１８】
ブラウズ領域１０３及び表示領域１０６は例えばコンピュータ画面上の２つのグラフィカルなウィンドウ、又は同一のウィンドウの一部であっても良い。２つの分離したウィンドウを利用することは、それぞれのサイズ及び位置の独立した操作を可能にする。デジタルカメラのようなハンドヘルド型装置においては、制限された表示画面のスペースのみが利用可能なため、そこでは同一の表示画面がブラウズ領域１０３及び表示領域１０６の両方のために利用され、互いに次に表示される。ブラウズ領域１０３と表示領域１０６とを全体が又は一部分が重なった様式で表示することも有用となり得る。
【００１９】
ブラウズ手段１０１は、ブラウズ領域１０３におけるシーケンス１０２の連続的なスクロール１０７によってシーケンス１０２を表示するように構成される。シーケンス１０２は通常、ブラウズ領域１０３に完全に収まるには大きすぎる。このことは、ブラウズ領域１０３に収まらないシーケンス１０２の一部を点線で示すことにより、図１に示されている。スクロール１０７はやがて表示される該一部に帰着する。
【００２０】
デフォルトでは、前記画像ブラウザは全ての利用可能な画像からランダム的に選択された画像を表示し、又はユーザが明示的に個々の画像、特定の画像のカテゴリー又は予め編集された画像の部分集合を選択することを可能としても良い。前記ユーザの選択は、本発明によれば、前記画像ブラウザの近くに物体１１０を置くことにより更に達成される。例えば、物体１１０は最近の休暇旅行の間に購入した土産品であっても良い。前記画像ブラウザは、前記画像ブラウザの近くにある物体１１０の存在を検出する物体検出部１０８を有する。前記土産品を検出すると、前記画像ブラウザは当該特定の休暇旅行の休暇画像を表示し始める。
【００２１】
図２はハンドヘルド型のタッチスクリーン装置として実装化された装置１００と、装置１００の近くに置かれた土産品１１０とを示す。画像ブラウザ１００によって検出されるように応答器が前記土産品に取り付けられている。左部には「ネガのロール」が見られ、一方中央部には拡大された画像を見出すことができ、大きな画面向けのアイコン２０１と右上部に物体向けのアイコン２０２とが見出される。ヤシの木の物体が、前記携帯型の装置が該物体を検出するように前記装置の近くに置かれており、前記物体のアイコンとして示されている。
【００２２】
タグを持つ全ての物理的な物体は、携帯型の写真ブラウズ装置のために利用されることができる。その着想は、前記タッチスクリーンの近くのどこかに前記物体を配置し、画像の表示されたロールの内容が前記物体に依存して、前記部屋の中に居る人（例えば前記装置の近くに居る人）に従って変化され、そして前記ブラウズ装置は音のフィードバックを提供する（図２に示されたヤシの木の場合、鳥が歌い始める）、というものである。前記ロールが変わると、前記物体を取り除くことができるが、前記ロールはその内容を保持し、自動的に元のものに戻らず、人が、例えば「戻る」という表示のある黒いフレーム又は他の適切なコマンドといった制御用選択項目に対応するフレームを押下したときにのみ行う。前記タッチスクリーンは、物体が受信器の検出範囲内に配置されたと分ったとき、音のフィードバックを提供する。
【００２３】
物体が特定の画像にリンクされていない場合は、前記ロールは「戻る」のみを表示する。
【００２４】
前記物体が特定の画像にリンクされている場合は、以下のサムネイルが利用可能となる：「戻る」（黒いフレーム）及びリンクされた画像のサムネイルを含む全てのフレーム（青いフレーム）。
【００２５】
ユーザに物体の存在を思い出させるため、「提案」に次のテキストを伴うフレームを追加することは有用になり得る：「物体をテーブルの上に置いてみてください」。
【００２６】
前記タグの着想は、ユーザが該タグを該ユーザが望む全ての物体に貼り付けることができ、該ユーザが該タグにリンクを追加することができる、というものである。どのような理由のためであっても、該タグが取り除かれ他の物体に配置された場合、該リンクは残る。前記ユーザは該リンクの内容を変更することができ、それ故該ユーザが管理できる。
【００２７】
拡大された画像を前記物体の前記アイコンへドラッグすることにより前記物体の画像を追加することができる。この方法においては、ユーザは前記ユーザが前記物体に追加したい画像を予め決定し、該画像を拡大し、前記タッチスクリーンの近くに前記物体を配置し、前記物体のアイコンに前記拡大された画像をドラッグする必要がある。更に画像を追加したい場合は、前記物体を取り除き、「戻る」を押下し、他の画像を拡大する（他の拡大された画像が以前のものの下部から現れるように、このことはスタックの最上部にある拡大された画像を取り除くことによっても実現され得る）。物体に画像を追加する他の方法は、前記拡大された画像を元のロールから前記物体のアイコンへ直接ドラッグすることによる。
【００２８】
画像へのリンクの消去は前記ユーザによって明示的に行われることができる。代替としては、前記システムは特定の画像をいつ消去させるかを決定し、前記ユーザに警告なしに該消去を行う。例えば、誰かが最近該物体をたくさん利用しているが、該物体にリンクされている前記画像の拡大を行っていない場合である。該システムのエージェントが該画像を前記ユーザに提案し、前記ユーザがその後依然該画像を拡大しない場合には、前記物体から前記画像は消去されるが、ロールを動かす前記携帯型装置から入力されることができる元のデータベースの中には残る。
【００２９】
上述の例においては、物体に関しては、常に最近の画像のセットに該物体自身を関連付けさせることも非常に有用になり得、かくして前記物体は「新しい写真」を意味する（全ての撮られた写真は時間と場所の刻印を持つため、デジタルカメラにおいてはこのことは将来何の問題もない可能性がある）。他の物体は「全てのアンの写真」を表すことができる。アンが友人に該物体を持っていった場合、アンは該物体をそこで利用すること又は該友人のための贈り物として利用することができる。該友人はその後前記リンクを維持し、場合によると新しいリンクを追加又は古いリンクを削除することを決定することができる。物体は関連する画像のセットの表示における特定の好みを表すこともできる。例えば、箱型の前記物体は、該箱の中に置いた前記物体に関連する全ての画像の、大きな画面上でのスライドショーを表示するために利用されることができる。前記携帯型装置の変わりに物体の集合を利用することさえできる。１つの投射スクリーンだけが必要となるが、テレビジョンセット又は将来のポスターフレームであっても良い。
【００３０】
物体を利用する第２の方法は（リンク又は関連付けの他に）、フィルターとしての利用である。例えば写真ブラウザの場合、ユーザは特定の画像又は画像のセットの検索を絞り込むために物体を利用することもできる。このとき、前記ヤシの木は「ヤシの木を中に含む全ての画像を検索せよ、又は晴れた場所の画像を検索せよ」を意味するであろう。前記ユーザが第２の物体を追加した場合（もし第２の物体がおもちゃの車であったなら）、検索は例えばヤシの木と車を中に含む全ての画像、といった２つの制約条件を持つことになる。この実装化は映像認識システムによって行われることができる。
【００３１】
本発明は画像をブラウズする応用に限定されない。他の実施例においては、本発明による装置は、複数のテレビチャンネルを受信すること又は記録装置（例えばハードディスク、ＤＶＤプレイヤー／レコーダ又はＶＣＲ）からテレビ番組を再生することができるテレビジョン受信機である。前記テレビジョン受信機の近くのタグ付けされた物体の検出と同時に、前記検出された物体と該物体をそこに置いた人物とに従って特定のユーザプロファイルが起動されても良い。該起動は特定のチャンネルを、利用できるチャンネル又はフィルタリングされるべき番組から、特定の好みに従って一時的に除外する。
【００３２】
物理的な物体は、以下のシナリオで本発明による装置を制御するために応用されても良い。
（１）システム及び仮想的な物体の状態を表す物体。電子ゲームのタブレットの近くに物体を置くと、中断されたゲームの状態が表示される。再度該ゲームが中断された場合、新たな状態が同一の又は他の物体に記録されることができる。
（２）スマートキャンドル物体（例えばライトの設定といったコマンド又は機能を表す）、物体の位置決め及び位置に依存した起動。例として、ユーザは物体をディナーテーブル上に置くことができ、すると即座にテーブルの上の照明が薄暗くなり、前記テーブルの上及び近くの他のスマートキャンドルが光り始める。ディナーが終わると、「この付近のくつろぎ光モード」に関連した前記物体は取り除かれることができ、照明を以前の設定に戻す。
（３）記憶を表す及び記憶になる、又はユーザが購入する何かと共にある、プレゼントとしての物体。ユーザは物体に写真日記又は他の任意の型のメディアを関連付け、その後プレゼントとして該物体を誰かに渡すことができる。前記プレゼントの受取人は前記物体を使って行いたいことを決定できる。例えば該受取人は抜粋、コピー又は新たなメディアのコンテンツの追加ができる。
（４）コンテキストに依存して住人に反応するため、生きているように見える物体。例えば、ユーザの音楽の選択に依存して、前記物体は前記音楽のビートに合わせて動く及び／又は光る。
【００３３】
本発明は特定の説明的な実施例を参照しながら説明されてきたが、発明の概念の範囲内で変形及び修正が可能である。かくして例えば応答器技術、Ｂｌｕｅｔｏｏｔｈ、Ｆｉｒｅｆｌｙといった、物理的な物体及び人物と通信し物理的な物体及び人物を検出するいずれの適切な技術も利用されて良い。動詞「有する（ｃｏｍｐｒｉｓｅ）」及びその語形変化の使用は、請求項において定義されたもの以外の構成要素又はステップの存在を除外しない。請求項において括弧内に付されたいずれの参照記号も請求項を限定するものとして解釈されるべきではない。本発明は幾つかの別個の要素を有するハードウェアによって、及び適切にプログラムされたコンピュータによって実装化されることができる。幾つかの手段を列挙する装置の請求項において、該手段の幾つかは１つの同一のハードウェアのものによって実装化されることができる。「コンピュータプログラム」は、フロッピ（Ｒ）ディスクのようなコンピュータによって読み取り可能な媒体に記録された、インターネットのようなネットワークを介してダウンロードすることができる、又は他のあらゆる方法で売買のできるソフトウェアを意味するものとして理解されるべきである。
【図面の簡単な説明】
【図１】本発明による装置を模式的に示す。
【図２】本発明を実施化する装置としての画像ブラウザを示す。
【図１】
2004520648.tif 000003
【国際公開パンフレット】
2004520648.tif 000004
2004520648.tif 000005
2004520648.tif 000006
2004520648.tif 000007
2004520648.tif 000008
2004520648.tif 000009
2004520648.tif 000010
2004520648.tif 000011
2004520648.tif 000012
2004520648.tif 000013
2004520648.tif 000014
【国際公開パンフレット（コレクトバージョン）】
2004520648.tif 000015
【国際調査報告】
2004520648.tif 000016
2004520648.tif 000017
2004520648.tif 000018