(57)【要約】本発明は、セマンティックブラウジングオプションを作成するデバイスに関する。当該デバイスは、複数のイメージを含む入力データベース（２）から最初のイメージセット（９）を選択する手段を有しており、当該各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされるセマンティックインフォメーションサブスペースを定める手段を有しており、当該デバイスはさらに、前記サブスペースから低減されたサブスペースを選択する手段（４）と、当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成する手段（４）と、前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージ（１０）を表示する手段（７）とをさらに有している。
2005535948.tif 000002
【特許請求の範囲】
【請求項１】
セマンティックブラウジングオプションを作成するデバイスであって、
・複数のイメージを含む入力データベース（２）から最初のイメージセット（９）を選択する手段を有しており、当該各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、
・前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされるセマンティックインフォメーションサブスペースを定める手段を有している形式のデバイスにおいて、
・前記サブスペースから低減されたサブスペースを選択する手段（４）と、
・当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成する手段（４）と、
・前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示する手段（７）とをさらに有している、
ことを特徴とするデバイス。
【請求項２】
最初のイメージセットを選択する前記手段は、
・固定されたバーンイン選択
・ランダム選択
・データベースの内容をあらわす系統的な選択
・グラフィカルユーザインターフェースを用いた対話式選択
・ユーザプロファイルを考慮した選択
の中から選択される、請求項１記載のデバイス。
【請求項３】
前記入力データベース（２）は、静止画像のセットおよび少なくとも１つのビデオシーケンスから抜き出されたイメージのセットおよびコミュニケーションリンクを通じて受信されたイメージのセットから選択される、請求項１または２記載のデバイス。
【請求項４】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、事前に定められた判断基準に従って前記低減されたサブスペースを選択するように構成されている、請求項１から３までのいずれか１項に記載のデバイス。
【請求項５】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、ユーザプロファイルに従って選択された、事前に定められた判断基準に従って、前記低減されたサブスペースを選択するように構成されている請求項４記載のバイス。
【請求項６】
前記サブスペースから低減されたサブスペースを選択する前記手段は、ユーザとの対話に基づいて前記事前に定められた判断基準を修正するように構成されている、請求項４または５記載のデバイス。
【請求項７】
前記ユーザとの対話は、前記最初のイメージセットのイメージのうちの少なくとも１つを選択することであり、低減されたサブスペースを選択する前記手段は、前記選択されたイメージと関連付けされているセマンティックインフォメーションによってあらわされる低減されたサブスペースを選択する、請求項６記載のデバイス。
【請求項８】
前記ユーザとの対話は、前記最初のイメージセットのイメージのうちの少なくとも１つを選択することであり、前記手段（４）は、前記選択されたイメージと関連付けられたセマンティックインフォメーションを引いた、前記最初のイメージセットと関連付けされた前記セマンティックインフォメーションによってあらわされる低減されたサブスペースを選択する、請求項６記載のデバイス。
【請求項９】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、前記サブスペースのセマンティックインフォメーショのクラスター分析および主なコンポーネントの分析およびヒストグラム分析から選択された方法によって、前記低減されたサブスペースを選択するように構成されている、請求項１から８までのいずれか１項記載のデバイス。
【請求項１０】
セマンティッククラスのラベルおよびワードおよびワードの組合せから選択されたエンティティが前記セマンティックインフォメーションスペースを定める、請求項１から９までのいずれか１項記載のデバイス。
【請求項１１】
前記低減されたサブスペースは、前記セマンティックインフォメーションサブスペースの少なくとも１つのディメンションを含み、前記デバイスは、
・前記サブスペースのディメンションの少なくとも１つを選択する手段と、
・各選択されたディメンションに対して、データベースの少なくとも１つのイメージを選択する手段を有しており、ここで当該イメージの関連付けされたセマンティックインフォメーションは、選択されたディメンションにおいて強い、請求項１から１０までのいずれか１項記載のデバイス。
【請求項１２】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、前記セマンティックインフォメーションスペースのディメンション間のセマンティッリンクを含むセマンティックグラフを用いるように構成されている、請求項１１記載のデバイス。
【請求項１３】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、セマンティック構造およびオントロジーおよび文法および他の言語関連知識から選択された情報構造化を用いて、セマンティックグラフをセットアップするように構成されている、請求項１２記載のデバイス。
【請求項１４】
前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示する前記手段（７）は、前記イメージをイメージボタン（Ａ１−Ａ６）の形で表示するように構成されており、
各イメージボタン（Ａ１−Ａ６）はデータベースのイメージに対するブラウジングオプションを提示し、当該イメージの関係付けされたセマンティックインフォメーションは、前記イメージボタン（Ａ１−Ａ６）と関係付けされたのと同じディメンションにおいて強い、請求項１１から１３までのいずれか１項に記載されたデバイス。
【請求項１５】
前記選択された最初のイメージセットおよび前記低減されたサブスペースのセマンティックインフォメーションに関係付けされたデータベースのイメージは、ディスプレイ（７）の少なくとも２つのウィンドウを用いて同時に表示される、請求項１から１４までのいずれか１項記載のデバイス。
【請求項１６】
前記選択された最初のイメージセットは、前記低減されたサブスペースのセマンティックインフォメーションに関係づけされたデータベースのイメージ（１０）によって置き換えられる、請求項１から１４までのいずれか１項記載のデバイス。
【請求項１７】
セマンティックブラウジングオプションを作成する方法であって、
・複数のイメージを含む入力データベースから最初のイメージセットを選択するステップを有しており、前記各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、
・前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされたセマンティックインフォメーションサブスペースを定めるステップを有している形式の方法において、さらに、
・前記サブスペースから低減されたサブスペースを選択するステップと、
・当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成するステップと、
・前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示するステップとを有しており、
有利には請求項１から１６のいずれか１項に従ったデバイスにおいて実行される、
ことを特徴とする方法
【請求項１８】
請求項１７に記載されたセマンティックブラウジングオプション作成方法のステップを実行するためのプログラムインストラクションを含むコンピュータプログラム製品であり、前記プログラムはコンピュータ上にロードされている、コンピュータプログラム製品。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、セマンティックブラウジングオプションを作成する方法およびデバイスに関する。
【０００２】
再書込み可能な記憶デバイス（例えばハードディスクおよびＤＶＤ）の容量の増加並びに消費者ビデオ市場および写真市場におけるデジタル化に押されて、デジタル資料管理の問題は、職業的な市場から消費者市場に移っている。
【０００３】
ビデオおよび写真資料管理の課題の１つは、メディアからセマンティックインフォメーション（意味情報）を集めてデータアクセスを容易にすることである。職業的な市場では、最初の製品はセマンティックアクセスを提供する。
【０００４】
本発明は、消費者市場に対する個人的なビデオおよび写真資料へのセマンティックアクセスの問題に取り組む。
【０００５】
イメージブラウジングに対する公知の消費者ツールは通常、使用できるメタデータ（例えばデジタル化のデータおよびフィルム番号）または手動で加えられたキーワードおよび注釈（例えば出所／作者または場所／時間）に基づいている。第１のタイプのメタデータは、低い検索能力しか与えられず、第２のタイプのメタデータはマニュアルで挿入されなければならず、結果として生じる検索性能は、メタデータの質および量に強く依存する。
【０００６】
イメージブラウジングに対する消費者ツールの性能を高める１つの方法は、最近の専門的なツールから既知のように、自動的に識別されるセマンティックエレメント（例えば「人」または「室内シーン」または「山」）を加えることである。しかしこのような中心的な解決方法は、消費者電子製品に不慣れなユーザには向いていない。この市場ではイメージアクセスは、常に、明確な対象または事前に定められた作業の流れによって導かれるのではない。専門的なユーザは、明確に室内シーンにおける人物を探すが、経験のないユーザは初めに人物の写真を探し、幾つかの人物の写真を見た後に山のイメージを探す。なぜなら、これらの人物はユーザに山への旅行を思い出させるからである。テレビ鑑賞時の「ザッピング（zapping）」のように、ユーザはビデオ検索および写真検索を気晴らしのような感覚で認識している。当初の検索対象物は、検索のあいだに変わる。
【０００７】
本発明は、容易に理解できる視覚的な方法でユーザにセマンティックブラウジングオプションを提供する新しいデバイスに関する。
【０００８】
本発明は、セマンティックブラウジングオプションを作成するデバイスであり、
当該デバイスは、
・複数のイメージを含む入力されているデータベースから最初のイメージセットを選択する手段を有しており、ここで当該各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、
・前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされるセマンティックインフォメーションのサブスペースを定める手段を有している形式のデバイスにおいて、
・前記サブスペースから低減されたサブスペースを選択する手段と、
・当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成する手段と、
・前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示する手段とをさらに有していることを特徴とする。
【０００９】
「人物」のイメージまたは「室内シーン」のイメージまたは「山」のイメージを明確に検索することが提案される代わりに、「人物」、「室内」または「山」等の特定のセマンティッククラスをそれぞれ代表するイメージの自動選択によって、ブラウジングオプションがあらわされ、表示される。
【００１０】
このようなオプションは、イメージによって視覚的な暗黙の方法でユーザに提示されるので、ユーザはセマンティッククラスまたはカテゴリーまたはテーマを明確に選択することなく、オプションに従うことができる。このようなデバイスは、内容が知られていないイメージの検索において非常に有利であり、いかなる目的もなく、ただ楽しむためにイメージを見る場合に殊に便利である。
【００１１】
有利な実施形態では、最初のイメージセットを選択する手段は以下の手段の中から選ばれる。すなわち：
・固定されたバーンイン選択
・ランダム選択
・データベースの内容をあらわす系統的な選択
・グラフィカルユーザインターフェースを用いた対話式選択
・ユーザプロファイルを考慮した選択
の中から選ばれる。
【００１２】
従って、例えばユーザが特定のテーマに関連したイメージまたはプロファイルに従ったイメージを見たい場合、ユーザは最初のイメージセットに作用を及ぼすことができる。ユーザは例えば、自身の個人的な趣向、趣味を入力することができる。
【００１３】
これらの異なったモードは、同じアプリケーション内での選択であり、ユーザは例えばこれらのモードのうちの１つをボタンを選択することによって選ぶことができる。
【００１４】
有利な実施形態では、入力されたデータベースは、静止画像のセット、少なくとも１つのビデオシーケンスから抜き出されたイメージのセットおよびコミュニケーションリンクを通じて受信されたイメージのセットから選ばれる。
【００１５】
有利な実施形態では、低減されたサブスペース（reduced sub-space）を前記サブスペースから選択する手段は、前記低減されたサブスペースを事前に定められた判断基準に従って選択するように構成されている。
【００１６】
事前に定められた判断基準は、例えば優位ラベル（dominant labels）である。この判断基準は、ある実施形態では、直ぐにまたは適切に固定される。
【００１７】
この判断基準は、例えばユーザによって選択される。
【００１８】
有利な実施形態では、低減されたサブスペースを前述のサブスペースから選択する手段は、ユーザプロファイルに従って選択された事前に定められた判断基準に従って前記低減されたサブスペースを選択するように構成される。
【００１９】
ユーザは例えば、自身の特定の趣向または願望をいつでも、または一度、入力することができる。
【００２０】
有利な実施形態では、低減されたサブスペースを前記サブスペースから選択する手段は、前記事前に定められた判断基準をユーザとの対話に基づいて修正するように構成されている。
【００２１】
有利な実施形態では、このようなユーザとの対話とは、最初のイメージセットから少なくとも１つのイメージを選択することであり、低減されたサブスペースを選択する手段は、前記選択されたイメージと関連付けされているセマンティックインフォメーションによってあらわされた低減されたサブスペースを選択するように構成されている。
【００２２】
この種の実施桁形態はユーザとの対話を可能にし、デバイスはユーザの入力無しには完全に自動的に作動しない。
【００２３】
ユーザはイメージ（例えば特定のテーマまたは特定の人物に関連したイメージ）を選択することによって趣向を示すことができる。
【００２４】
「人物」または「室内シーン」または「山」等の検索キーワードを明確に示すことを提案する代わりに、ユーザは検索しているものに相応する複数のイメージをクリックすることができる。サーチ機能の機能性を確実にするために、このシステムはセマンティックラベル（例えば「人物」または「室内」）を自動的にデータベースのイメージに関連付けすることができる。
【００２５】
イメージをクリックすることによって、ユーザには、妥当なクラスネームの代わりに視覚的な刺激が与えられる。さらに、セマンティッククラスとは相通じない主観的な関連がユーザにイメージをクリックさせることがある。
【００２６】
有利な実施形態では、ユーザとの対話は、最初のイメージセットから少なくとも１つのイメージを選択することであり、低減されたサブスペースを選択する手段は、選択されたイメージと関連付けされているセマンティックインフォメーションを引いた、前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされている低減されたサブスペースを選択するように構成されている。
【００２７】
趣向を示す代わりに、ユーザは表示させたくないイメージを選択することができる。ユーザが願望を有しているが、最初のイメージセット内で、検索したいイメージを見つけることができない場合にこれは非常に有利である。
【００２８】
有利な実施形態では、前記サブスペースから低減されたサブスペースを選択する手段は、前記サブスペースのセマンティックインフォメーションのクラスター分析および主なコンポーネントの分析およびヒストグラム分析から選択された方法によって、前記低減されたサブスペースを選択するようにされている。
【００２９】
この種の手段によって、最初のイメージセットのイメージに関係付けされたセマンティックインフォメーションが分析される。この分析によって、セマンティックインフォメーションの低減されたサブスペースが作成される。低減されたサブスペースのセマンティックインフォメーションに関係付けされた新たなイメージセットが作成される。
【００３０】
有利な実施形態では、セマンティッククラスのラベル、ワードおよびワードの組合せの中から選択されたエンティティがセマンティックインフォメーションスペースを規定する。
【００３１】
有利な実施形態では、低減されたサブスペースは、前記セマンティックインフォメーションサブスペースの少なくとも１つのディメンション（dimension）を有しており、この実施形態に相応するデバイスは、
・前記サブスペースのディメンションの少なくとも１つを選択する手段
・選択された各ディメンションに対して、少なくとも１つのデータベースのイメージを選択する手段を有しており、ここではこのイメージの関係づけされたセマンティックインフォメーションは、選択されたディメンションにおいて強い。
【００３２】
有利な実施形態では、前記サブスペースから低減されたサブスペースを選択する手段は、セマンティックグラフを使用するように構成されている。このセマンティックグラフはセマンティックインフォメーションスペースのディメンション間のセマンティックリンクを含む。
【００３３】
有利な実施形態では、前記サブスペースから低減されたサブスペースを選択する手段は、セマンティックグラフをセットアップするように構成されている。これはセマンティック構造、オントロジー、文法および他の言語関連知識から選択された情報構造化を用いて行われる。
【００３４】
有利な実施形態では、前記低減されたサブスペースのセマンティックインフォメーションに関係付けされたデータベースの少なくとも１つのイメージを表示する手段は、イメージボタンの形でイメージを表示するように構成されている。ここで各イメージボタンはデータベースのイメージに対する検索オプションを提供する。このイメージの関係づけされたセマンティックインフォメーションは、イメージボタンに関係付けされたのと同じディメンションにおいて強い。
【００３５】
この提案の種類はイメージボタンと称される。明確に示されたセマンティッククラスに対して決定を下す代わりに、経験のないユーザは、関心のある具体的なイメージに対して決定を下す。
【００３６】
ユーザの選択は、イメージのセマンティッククラスの名前だけでなく、より多くのものに基づくことが可能である。イメージボタンを表示することによって、ユーザは妥当なクラスネームの代わりに視覚的に刺激される。さらに、セマンティッククラスとは相通じない主体的な関連が、ユーザにイメージボタンによってあらわされたブラウジングオプションを選択させる。
【００３７】
イメージボタンの自動選択におけるエラーが目立たないということもこのようなシステムの利点である。例えばエラーによって、「山」のイメージボタンであったのに、「室内」イメージが表示されてしまっても、このエラーは目立たない。なぜならユーザは「山」のイメージボタンを予期していないからである。さらにイメージボタンに対するイメージの誤ったイメージ選択でさえも、前述したようにユーザに刺激を与えることがある。
【００３８】
有利な実施形態では、選択された最初のイメージセットおよび前記低減されたサブスペースのセマンティックインフォメーションに関連付けられているデータベースのイメージがディスプレイの少なくとも２つのウィンドウを用いて同時に表示される。
【００３９】
有利な実施形態では、選択された最初のイメージセットが、前記低減されたサブスペースのセマンティックインフォメーションに関係付けされているデータベースのイメージに置き換えられる。
【００４０】
すなわち本発明は、セマンティックブラウジングオプションを作成する方法に関しており、
・複数のイメージを含む入力データベースから最初のイメージセットを選択するステップを有しており、前記各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、
・前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされたセマンティックインフォメーションサブスペースを定めるステップを有している形式の方法において、さらに、
・前記サブスペースから低減されたサブスペースを選択するステップと、
・当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成するステップと、
・前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示するステップとを有していることを特徴とする。
【００４１】
前記方法は有利には、本発明に従ったデバイスのあらゆる実施形態において実行される。
【００４２】
すなわち本発明は、本発明に従ってセマンティックブラウジングオプションを作成する方法のステップを実行するためのプログラムインストラクチャーを含むコンピュータプログラム製品に関し、この場合に前記プログラムはコンピュータ上にロードされている。
【００４３】
本発明の他の特徴および利点は、添付図面によって示されている、本発明の実施形態（これは本発明を制限するものではない）の説明に記載されている。
【００４４】
図１には本発明のある実施形態を実現するシステムが示されており、
図２には本発明の他の実施形態を実現するシステムが示されており、
図３には本発明の実施形態を実現するグラフィカルユーザインターフェースを示すディスプレイの例が示されている。
【００４５】
イメージ索引付けおよびクラス分け手段１は、データベース２に接続されている。このデータベースは静止画像およびテキストメタデータを含んでいる。
【００４６】
データベース２は、静止画像およびビデオイメージまたはコミュニケーションリンクを通じて受信されたイメージのセットを蓄積することができる。このデータベースは例えばネットワーク内に分散されていてもよい。このデータベースは２つのデータベース（１つはイメージ用、１つはメタデータ用）から成っていてもよい。
【００４７】
メタデータは、種々異なるタイプであってもよい。メタデータはイメージによって運搬されるフリーテキストであり得る。メタデータは手動で編集されたキーワードであってもよい。メタデータは、オフラインまたはオンラインで索引および分類手段１によって作成されたセマンティッククラスラベル（例えば「室内」または「室外」または「人」または「山」または「街」）を含むことができる。このセマンティッククラスラベルは、索引付けおよびクラス分け手段１によってオフラインまたはオンラインで作成される。１つより多いクラスラベルを１つのイメージに割り当ててもよい。メタデータは、例えばクラスラベルナンバーにコード化可能である。用語「セマンティックインフォメーション」はこの文献において今後、メタデータをあらわすのに用いられる。
【００４８】
イメージ索引付けおよびクラス分け手段は、セマンティックインフォメーションをデータベース２内に蓄積されているデータに関係付ける役割を担っている。
【００４９】
データベース内に蓄積されているデータと関係付けされているセマンティックインフォメーションはセマンティックインフォメーションスペースをあらわす。
【００５０】
セマンティッククラスのセマンティックインフォメーションラベルまたはワードまたはワード組合せは、セマンティックインフォメーションスペースを定める。
【００５１】
データベース２は、最初のイメージセットを作成することができるモジュール３にも接続されている。最初のイメージセットを作成するモジュール３は、データベースから最初のイメージセットを選択することを可能にする。
【００５２】
有利な実施形態では、最初のイメージセットを作成するモジュール３は、データベース２のイメージの自動選択であり得る。この場合にこの選択は、例えばランダムな選択であり得る。これはユーザに分かり易い。
【００５３】
別の形態では、最初のイメージセットを作成するモジュール３は、ユーザがデータベース２の幾つかのイメージを選択することを可能にするユーザインターフェース内で実現される。このユーザインターフェースは良く知られており、ここではデータベースのイメージが表示され、マウスまたはキーパッドを用いてイメージのうちの幾つかをユーザが選択することができる。前記イメージ表示はグループに、またはイメージのディレクトリに編成され、より多くの数のイメージを扱うことが可能である。この場合には、最初の選択はイメージのグループまたはディレクトリである。
【００５４】
別の形態では、この選択は半自動化されている；すなわち、ユーザは、キーワードを示すことで幾つかのイメージテーマを選択することができる。
【００５５】
最初のデータセットと称される、選択されたデータと関連付けされたセマンティックインフォメーションは、データベースのセマンティックインフォメーションスペース全体のセマンティックインフォメーションのサブスペースをあらわす。
【００５６】
セマンティックリンクを作成するモジュール４は、最初のイメージセットを作成するモジュール３と接続されている。
【００５７】
このモジュールは、サブスペースから低減されたサブスペースを選択する。
【００５８】
低減されたサブスペースを選択するために、このモジュールは幾つかの方法を使用することができる。
【００５９】
第１の実施形態では、このモジュールは前記サブスペースと関係付けされたセマンティックインフォメーションのクラスター分析を行うことができる。
【００６０】
クラスター分析は、セマンティックインフォメーション内に含まれている言葉の別個の場所で実行される。クラスタは１つのワードまたはワード組合せ上に作成されたヒストグラムの計算によって見つけられる。
【００６１】
関係の無い要素を止める、または削除する等の事前処理も使用可能である。
【００６２】
優位なワードまたは優位なワード組合せがヒストグラムから抜き出される。この抜き出しは、セマンティックインフォメーションの構造を示すグラフによってガイドされる。セマンティックインフォメーションが階層的なクラスラベルから成る場合、このグラフは階層的であり得る。別の実施形態では、いかなる相互のセマンティックカバリングも有していない明確なクラスラベルの場合、このグラフはリンクを含まない。
【００６３】
セマンティックインフォメーションがフリーテキストを含む場合、このグラフはワードおよび／またはワード組合せ間にセマンティックリンクをあらわす。最終的に抜き出されたワードおよび／またはワード組合せは、低減されたインフォメーションサブスペースのディメンションを定める。
【００６４】
このモジュール４は、データベースのイメージへのセマンティックリンクを作成する。このイメージの関係付けされたセマンティックインフォメーションは、前記低減されたサブスペースのうちの１つと同じディメンションにおいて強い。
【００６５】
低減されたサブスペースに最も相応するデータベースのイメージがデータベースから抜き出される。一致対応（correspondence）は、距離測定によって形成され（formulated）、様々な方法で実現される。
【００６６】
有利な実施形態では、一致対応はデータベースのイメージを選択することによって形成される。これの関係づけされたセマンティックインフォメーションは前記低減されたサブスペースの全てのディメンションにおいて強い。表示されるべきイメージの数が多すぎる場合、ランダム選択またはランク付けが行われる。距離測定は、検索キーワードに関する選択されたイメージの関連性を定める少なくとも１つのパラメータを用いた精度の表記を含む。
【００６７】
モジュール４は、イメージボタンを作成するモジュール５と接続されている。このモジュールは、前記低減されたサブスペースのセマンティックインフォメーションと関連するデータベースのイメージに対する（図３のＡ１〜Ａ６によってあらわされている）イメージボタンを作成する。
【００６８】
イメージボタン作成モジュール５は、グラフィカルユーザインターフェース６と接続されている。このユーザインターフェース６はイメージボタンをディスプレイ７上に表示する役割を担っている。ディスプレイ７は、最初のイメージセットも表示することができる。最初のイメージセットおよびイメージボタンは、ディスプレイ７の同じウインドウ上に表示される。
【００６９】
最適な実施形態では、最初のイメージセットもイメージボタンも同時に表示される。この場合には、イメージボタンの選択は自動であり、ユーザはイメージの選択に相互作用を及ぼさない。
【００７０】
別の実施形態では、グラフィカルユーザインターフェースは最初のイメージセットをイメージボタンによって置き換える。
【００７１】
イメージボタンは、データベースのイメージに対する検索オプションを提供する。このイメージの関連するセマンティックインフォメーションは、イメージボタンに関連付けされたのと同じディメンションにおいて強い。
【００７２】
ユーザはイメージボタンのうちの１つを、例えば単純なマウスクリックによって選択する。その後、データベースのイメージが表示される。このイメージの関係付けされたセマンティックインフォメーションは、イメージボタンと関連付けされているのと同じディメンションにおいて強い。
【００７３】
本発明のこのような実施形態によって、ユーザは明確な目的がなく、自由な方法でイメージを検索することができる。なぜならデバイスは、ユーザにいかなるパラメータを入力することも要求せずに完全に自動的にコントロールを行うことができるからである。
【００７４】
図２には、本発明の別の実施形態が示されている。
【００７５】
この種の実施形態によって、ユーザは表示したいテーマのフィードバック選択をすることができる。これは最初のイメージセットの幾つかのイメージを選択することによって行われる。
【００７６】
イメージのフィードバック選択モジュール８によって、低減されたサブスペースを選択する幾つかの判断基準を与えるために、ユーザは最初のイメージセットのうちの幾つかのイメージを選択することができる。ユーザはキーワードを入力する代わりに単純にイメージをクリックすることによってイメージを選択する。これによってシステムを容易に使用することができる。
【００７７】
関連するフィードバックシステムが存在する場合、色、テキストイメージレイアウトまたは形状のメジャーを用いて視覚的な相似性によってイメージ検索が行われる。本発明では、検索はテキスト形式のメタデータ（例えばワード「人物」または「山」）に基づいている。テキスト形式のメタデータを用いることによって、サーチ形式および検索の計算コストを格段に減らすことができる。
【００７８】
このような選択によってユーザは、最初のイメージセットのイメージの中で表示させたいテーマに関連した幾つかのイメージを選択することができる。
【００７９】
例えば、最初のイメージセットは山をあらわす画像、人物をあらわす別の画像、スイミングプールをあらわす別の画像、乳児をあらわす別の画像、山の中でゴルフをする人をあらあわす別の画像から成る。
【００８０】
ユーザがこれらのイメージの中から、乳児とゴルフをする人を選択した場合、イメージの低減されたサブスペースは例えば人物から成る。この選択はセマンティックインフォメーションに基づいており、イメージの選択において容易に行われる。低減されたサブスペースは、選択されたイメージと関連するセマンティックインフォメーションに基づいて、例えば上述したようなクラスター分析の技術を用いて作成される。
【００８１】
例えばユーザが、これらのイメージの中から、山をあらわす画像とゴルフをする人をあらわす画像を選択した場合、低減されたサブスペースは例えば山での人物を表示することである。
【００８２】
図３にはディスプレイ７の実施形態が示されている。
【００８３】
図３の上方には図示のように、ディスプレイ７上に表示されるべき第１の画像が示されている。
【００８４】
イメージボタンＡ１またはＡ２またはＡ３のうちの１つが選択されると、図示のように図３の下方部分がディスプレイ７上に表示される。
【００８５】
最初のイメージセット９、並びに一連のイメージボタンＡ１, Ａ２, Ａ３がディスプレイ７上に表示される。
【００８６】
イメージの数およびイメージボタンの数は説明用のものであって、詳細なものではない。
【００８７】
図１に相応する本発明の第１の実施形態において、イメージボタンＡ１、Ａ２、Ａ３は、第１のイメージセットが作成されるとすぐに表示される。
【００８８】
その後ユーザは、ユーザインターフェースを用いて（ここではマウス１１によってあらわされている）、イメージボタンＡ１、Ａ２、Ａ３のうちの１つを選択することができる。
【００８９】
ユーザがイメージボタンＡ３を選択すると、図３の下方で示されているように、新たな内容１０がディスプレイ７上に表示される。
【００９０】
イメージの新たなセット１０がディスプレイ７上に表示される。これらのイメージはデータベースのイメージである。このイメージの関係付けされたセマンティックインフォメーションは、示されているイメージボタンＡ３と関係付けされているのと同じディメンションにおいて強い。
【００９１】
新たなイメージボタンＡ４、Ａ５、Ａ６も作成される。これらのイメージボタンは、イメージセット１０から作成された低減されたサブスペースに関連付けされたセマンティックインフォメーションをあらわす。従って、ユーザは繰り返して新しいイメージセットおよび関連するイメージボタンを得ることができる。
【００９２】
このようなイメージは種々異なる判断基準に従って、ランダムに、特定のテーマに従って、ユーザの願望に従って配列される。
【００９３】
他のボタン、例えばビデオの選択、静止画像の選択、テーマの表示がディスプレイ７上に設けられてもよい。
【図面の簡単な説明】
【００９４】
【図１】本発明のある実施形態を実現するシステムを示す図である。
【００９５】
【図２】本発明の他の実施形態を実現するシステムを示す図である。
【００９６】
【図３】本発明の実施形態を実現するグラフィカルユーザインターフェースを示すディスプレイの例を示す図である。
【図１】
2005535948.tif 000003
【図２】
2005535948.tif 000004
【図３】
2005535948.tif 000005
【手続補正書】
【提出日】平成16年8月10日(2004.8.10)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
セマンティックブラウジングオプションを作成するデバイスであって、
・複数のイメージを含む入力データベース（２）から最初のイメージセット（９）を選択する手段を有しており、当該各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、
・前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされるセマンティックインフォメーションサブスペースを定める手段を有している形式のデバイスにおいて、
・前記サブスペースから低減されたサブスペースを選択する手段（４）と、
・当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成する手段（４）と、
・前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージを表示する手段（７）と、
・当該表示されたイメージのうちの１つを選択する手段（６）をさらに有しており、前記最初のイメージセットに代わる別のイメージセットの表示をトリガさせ、前記入力データベースを繰り返しブラウジングすることを可能にする、
ことを特徴とするデバイス。
【請求項２】
最初のイメージセットを選択する前記手段は、
・固定されたバーンイン選択
・ランダム選択
・データベースの内容をあらわす系統的な選択
・グラフィカルユーザインターフェースを用いた対話式選択
・ユーザプロファイルを考慮した選択
の中から選択される、請求項１記載のデバイス。
【請求項３】
前記入力データベース（２）は、静止画像のセットおよび少なくとも１つのビデオシーケンスから抜き出されたイメージのセットおよびコミュニケーションリンクを通じて受信されたイメージのセットから選択される、請求項１または２記載のデバイス。
【請求項４】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、事前に定められた判断基準に従って前記低減されたサブスペースを選択するように構成されている、請求項１から３までのいずれか１項に記載のデバイス。
【請求項５】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、ユーザプロファイルに従って選択された、事前に定められた判断基準に従って、前記低減されたサブスペースを選択するように構成されている請求項４記載のバイス。
【請求項６】
前記サブスペースから低減されたサブスペースを選択する前記手段は、ユーザとの対話に基づいて前記事前に定められた判断基準を修正するように構成されている、請求項４または５記載のデバイス。
【請求項７】
前記ユーザとの対話は、前記最初のイメージセットのイメージのうちの少なくとも１つを選択することであり、低減されたサブスペースを選択する前記手段は、前記選択されたイメージと関連付けされているセマンティックインフォメーションによってあらわされる低減されたサブスペースを選択する、請求項６記載のデバイス。
【請求項８】
前記ユーザとの対話は、前記最初のイメージセットのイメージのうちの少なくとも１つを選択することであり、前記手段（４）は、前記選択されたイメージと関連付けられたセマンティックインフォメーションを引いた、前記最初のイメージセットと関連付けされた前記セマンティックインフォメーションによってあらわされる低減されたサブスペースを選択する、請求項６記載のデバイス。
【請求項９】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、前記サブスペースのセマンティックインフォメーショのクラスター分析および主なコンポーネントの分析およびヒストグラム分析から選択された方法によって、前記低減されたサブスペースを選択するように構成されている、請求項１から８までのいずれか１項記載のデバイス。
【請求項１０】
セマンティッククラスのラベルおよびワードおよびワードの組合せから選択されたエンティティが前記セマンティックインフォメーションスペースを定める、請求項１から９までのいずれか１項記載のデバイス。
【請求項１１】
前記低減されたサブスペースは、前記セマンティックインフォメーションサブスペースの少なくとも１つのディメンションを含み、前記デバイスは、
・前記サブスペースのディメンションの少なくとも１つを選択する手段と、
・各選択されたディメンションに対して、データベースの少なくとも１つのイメージを選択する手段を有しており、ここで当該イメージの関連付けされたセマンティックインフォメーションは、選択されたディメンションにおいて強い、請求項１から１０までのいずれか１項記載のデバイス。
【請求項１２】
前記サブスペースから低減されたサブスペースを選択する前記手段（４）は、前記セマンティックインフォメーションスペースのディメンション間のセマンティッリンクを含むグラフを用いるように構成されている、請求項１１記載のデバイス。
【請求項１３】
前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示する前記手段（７）は、前記イメージをイメージボタン（Ａ１−Ａ６）の形で表示するように構成されており、
各イメージボタン（Ａ１−Ａ６）の選択はデータベースのイメージに対するブラウジングオプションを提示し、当該イメージの関係付けされたセマンティックインフォメーションは、前記イメージボタン（Ａ１−Ａ６）と関係付けされたのと同じディメンションにおいて強い、請求項１１から１２までのいずれか１項に記載されたデバイス。
【請求項１４】
前記選択された最初のイメージセットおよび前記低減されたサブスペースのセマンティックインフォメーションに関係付けされたデータベースのイメージは、ディスプレイ（７）の少なくとも２つのウィンドウを用いて同時に表示される、請求項１から１３までのいずれか１項記載のデバイス。
【請求項１５】
セマンティックブラウジングオプションを作成する方法であって、
・複数のイメージを含む入力データベースから最初のイメージセットを選択するステップを有しており、前記各イメージはセマンティックインフォメーションスペースからのセマンティックインフォメーションに関連付けされており、
・前記最初のイメージセットと関連付けされているセマンティックインフォメーションによってあらわされたセマンティックインフォメーションサブスペースを定めるステップを有している形式の方法において、さらに、
・前記サブスペースから低減されたサブスペースを選択するステップと、
・当該低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースのイメージへのセマンティックリンクを作成するステップと、
・前記低減されたサブスペースのセマンティックインフォメーションと関連付けされたデータベースの少なくとも１つのイメージを表示するステップとを有しており、
有利には請求項１から１４のいずれか１項に従ったデバイスにおいて実行される、
ことを特徴とする方法
【請求項１６】
請求項１５に記載されたセマンティックブラウジングオプション作成方法のステップを実行するためのプログラムインストラクションを含むコンピュータプログラム製品であり、前記プログラムはコンピュータ上にロードされている、コンピュータプログラム製品。
【国際調査報告】
2005535948.tif 000006
2005535948.tif 000007
2005535948.tif 000008