(57)【要約】本発明は、特に、ユーザ自身が質問を構築する必要がなく、ユーザがマルチメディアコンテンツに興味を抱かせる対象を検索するための前記マルチメディアコンテンツを利用することを可能にすることを目的とする。この目的のために、選択ツール（例えば、キー）は、ユーザが利用している間に、コンテンツのパッセージを選択することを可能にする。ユーザが選択したとき、コンテキストデータはコンテンツ（例えば、現時点の読み出し時間）から抽出される。このコンテキストデータは、次いで、前記コンテンツを記述する文書（例えば、ＭＰＥＧ−７文書）における１つまたはそれ以上の記述に対して用いられる。回収された記述は、最終的に、サーチエンジンに送信されることを目的とする質問を自動的に構築するために用いられる。
2005501343.tif 000002
【特許請求の範囲】
【請求項１】
記述を有する文書に記述されるマルチメディアコンテンツを読み出すための読み出し手段を有する電子装置であって：
ユーザが前記マルチメディアコンテンツにおいて選択することを可能にするユーザコマンド；
前記選択に関連する１つまたはそれ以上のコンテキストデータを前記マルチメディアコンテンツから抽出するための抽出手段；
前記コンテキストデータから前記文書における１つまたはそれ以上の記述を回収するための手段；並びに
回収された記述に基づく、サーチエンジンに送信されることを目的とする質問についての自動構築手段；
を有することを特徴とする電子装置。
【請求項２】
請求項１に記載の電子装置であって、前記マルチメディアコンテンツは読み出し時間に関連する複数のマルチメディアエンティティを有し、前記文書は、読み出し時間から回収されることができる１つまたはそれ以上のマルチメディアエンティティに関連する記述を有し、選択の瞬間における現時点の読み出し時間がコンテキストデータを形成する、ことを特徴とする電子装置。
【請求項３】
請求項１に記載の電子装置であって、前記マルチメディアコンテンツは対象識別子により識別される対象を有し、前記文書は対象識別子により回収されることができる１つまたはそれ以上の対象に関連する記述を有し、前記ユーザコマンドは対象選択ツールを有し、前記選択された対象の前記対象識別子はコンテキストデータを形成する、ことを特徴とする電子装置。
【請求項４】
請求項１に記載の電子装置であって、前記文書は、１つまたはそれ以上の記述子の例である１つまたは種々の記述を有する親ノードおよび子ノードのツリー状構造であり、親ノードにおけるコンテンツ記述は、前記親ノードから前記子ノードにおいて同じ記述子の例である他の記述を有する他のノードがないとき、子ノードに対して有効であり、前記記述回収手段は前記コンテキストデータを前記ツリー状構造においてノードを選択し且つこのノードに対してまた有効である他の記述を回収するために回収記述子と呼ばれる１つまたはそれ以上の記述子の例と比較する、ことを特徴とする電子装置。
【請求項５】
ユーザがマルチメディアコンテンツを用いているサーチエンジンに送信されることを目的として質問を構築する方法であって、前記マルチメディアコンテンツは記述を有する文書において記述される、方法であり：
前記マルチメディアコンテンツにおいてユーザにより選択される段階；
前記選択に関連する１つまたはそれ以上のコンテキストデータを前記マルチメディアコンテンツから抽出するための抽出段階；
前記コンテキストデータから前記文書における１つまたはそれ以上の記述を回収する段階；並びに
回収された記述から前記質問を自動的に構築する段階；
を有することを特徴とする質問を構築する方法。
【請求項６】
請求項５に記載の質問を構築する方法であって、前記マルチメディアコンテンツは読み出し時間に関連する複数のマルチメディアエンティティを含み、前記文書は、読み出し時間から回収されることが可能である、前記マルチメディアエンティティの１つまたはそれ以上と関連する表示を含み、現時点の読み出し時間は前記選択の瞬間におけるコンテキストデータを有する、ことを特徴とする質問を構築する方法。
【請求項７】
請求項５に記載の質問を構築する方法であって、前記マルチメディアコンテンツは対象識別子により識別される対象を有し、前記文書は対象識別子により回収されることが可能である１つまたはそれ以上の対象に関連する記述を有し、前記選択段階は対象選択を有し、前記選択された対象の前記対象識別子はコンテキストデータを有する、ことを特徴とする質問を構築する方法。
【請求項８】
請求項５に記載の質問を構築する方法であって、前記文書は１つまたはそれ以上の記述子の例である１つまたは種々の記述を有する親ノードおよび子ノードのツリー状構造であって、親ノードにおけるコンテンツ記述は、他のノード同じ記述子の例である他の記述を有する前記親ノードから前記子ノードにおける他のノードがないとき、子ノードに対して有効であり、そして、前記記述回収手段は、前記ツリー状構造におけるノードを選択し且つこのノードに対してまた有効である他の記述を回収するために前記コンテキストデータを回収記述子と呼ばれる１つまたはそれ以上の記述子の例と比較する、ことを特徴とする質問を構築する方法。
【請求項９】
プロセッサにより実行されるとき、請求項５に記載の方法を実行するためのプログラムコード命令を有することを特徴とするプログラム。
【請求項１０】
請求項５に記載の方法を実行するための装置を有するシステムであって：
遠隔サーチエンジンに前記質問を送信するためおよび前記遠隔サーチエンジンから来る前記質問への応答を受信するためのトランシーバ手段；並びに
サーチエンジンと、前記装置から前記サーチエンジンへの前記質問を送信するためおよび前記サーチエンジンから前記装置への前記応答を送信するための送信手段と；
を有する、ことを特徴とするシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記述を含む文書に記載されているマルチメディアコンテンツを読み出すための読み出し手段を有する電子装置に関する。本発明はまた、そのような装置を有するシステムに関する。
【０００２】
本発明は、さらに、マルチメディアコンテンツがユーザにより用いられる間に、サーチエンジンに送信されることを目的とされる質問を作成する方法であって、前記マルチメディアコンテンツは、記述を含む文書に記述されている、方法に関する。
【背景技術】
【０００３】
１９９９年６月に、ＩＳＯ／ＩＥＣ  ＪＴＣ１／ＳＣ２９／ＷＧ１１／Ｎ２８６１と呼ばれる、ＩＳＯにより出版された文書“ＭＰＥＧ−７コンテキスト、目的および技術ロードマップ”に示されているように、ＭＰＥＧ−７は、マルチメディアコンテンツを記述するための基準である。マルチメディアコンテンツは、例えば、前記マルチメディアコンテンツにおける検索を実行することを可能にするために、前記コンテンツを記述するＭＰＥＧ−７文書と関連されることが可能である。
【発明の開示】
【課題を解決するための手段】
【０００４】
本発明の目的は、特に、情報検索を考慮して、マルチメディアコンテンツを記述するＭＰＥＧ−７文書を利用する新しいアプリケーションを提供することである。
【０００５】
本発明に従い且つ冒頭で述べたような装置は、ユーザに前記コンテンツにおける選択の実行を可能にするユーザコマンド、前記選択に関する１つまたはそれ以上のコンテキストデータを前記マルチメディアコンテンツから抽出するための抽出手段、前記コンテキストデータからの前記文書における１つまたはそれ以上の記述を回収するための手段、およびサーチエンジンに送信されることを目的とする質問についての、元に戻された記述に基づく自動構築手段、を有することを特徴とする。
【０００６】
本発明は、マルチメディアコンテンツを読んでいるユーザが、サーチエンジンに送信される質問をユーザ自身で構築する必要がなく、ユーザがマルチメディアコンテンツにおいて読んでいるマルチメディアコンテンツに関する検索を始めることを可能にする。本発明に従って、ユーザがしなければならない唯一のことは、マルチメディアコンテンツにおいて選択をすることである。次いで、この選択は、マルチメディアコンテンツを記述する文書から回収された記述を用いることにより質問を構築するために自動的に用いられる。
【０００７】
それ故、本発明のお陰で、ユーザは、
−  一般に十分複雑なユーザの検索に対して関連するキーワードを選択する必要がなく（一般に、複数のキーワードの種々の組み合わせを伴う種々の試みは、満足のいく結果を得るために、非専門家のユーザに対して必要である）、
−  可能な場合は、例えば、テレビデコーダ、パーソナルアシスタント、携帯電話等をもつアルファベット文字のキーボードを有しない装置を用いて、困難である。また、ユーザ検索のために用いられるキーワードを捉える必要がない。
【０００８】
さらに、問われる質問はマルチメディアコンテンツを記述する文書から構築され、それは特に適切であり、それは特によい品質の検索結果を得ることを可能にする。
【０００９】
本発明の第１実施形態において、マルチメディアコンテンツは、読み出し時間に関連する複数のマルチメディアエンティティを有し、文書は、選択フォームコンテキスト情報のときに読み出す時間および現時点の読み出す時間から回収されることが可能である１つまたは種々のマルチメディアエンティティに関する記述を有する。
【００１０】
マルチメディアコンテンツは、例えば、ビデオにより形成される。ユーザが、例えば、この目的のために提供されたキーを押すことにより、ビデオパッセージを選択するとき、ビデオの現時点の読み出し時間は元の状態に戻される。この現時点の読み出し時間は、ユーザにより選択されたビデオのパッセージに関連する文書の記述を見つけるために用いられる。
【００１１】
マルチメディアコンテンツは対象識別子により識別される対象を含む本発明の第２実施形態において、文書は、対象識別子から回収されることが可能である１つまたは種々の対象に関連する記述を有し、ユーザコマンドは対象選択ツールを有し、選択された対象についての対象識別子はコンテキスト情報を形成する。
【００１２】
マルチメディアコンテントは、例えば、マウスタイプの選択ツールを用いて、またはタッチスクリーンのためのスタイラスを用いて、ユーザが選択することができる種々の対象を含む画像である。ユーザが対象を選択するとき、この対象の識別子はマルチメディアコンテンツから回収され、それは選択された対象に関する文書の記述を見つけるために用いられる。
【００１３】
有利な方法において、前記文書は１つまたはそれ以上の記述子の例である１つまたはそれ以上の記述を有する親ノードおよび子ノードのツリー構造であって、親ノードから子ノードにおいて同じ記述子の他の例の記述を有する他のノードがないとき、親ノードに含まれる記述が子ノードに対して有効であり、前記記述回収手段は、ツリー状構造においてノードを選択するために回収記述子と呼ばれる１つまたはそれ以上の記述子の例をもつコンテキスト情報を有する、前記文書であって、また、このノードのために有効である他の記述を回収する。
【００１４】
この実施形態は、マルチメディアコンテンツがビデオにより形成されるとき、および文書が次の方法であって、第１階層水準（ツリー構造のルート）のノードが全体的なビデオに対応し、第２階層水準のソードがビデオの種々のシーンに対応し、第３階層水準のノードが種々のシーンのショットに対応する、等の方法で構造化されるとき、有利である。親ノードに対して有効な記述は、それ故、その子ノードに対して有効である。本発明は、スタートノードを検索する段階、次いで、このスタートノードに対しても有効である他の記述を回収する段階、まだ回収された例を有しない記述子の例である各々の階層水準における回収のために漸次的にツリーを戻る段階を有する。スタートノードは、回収記述子の例であって、コンテキスト情報と適合する記述を有するノードである。
【００１５】
種々のツリーノードからの記述を回収することにより、本発明は質問を洗練し、それ故、検索によりよい焦点を絞ることを可能にする。
【００１６】
本発明の以上のおよび他の側面は、以下に説明する本発明の実施形態を参照して、非制限的例から明白になり、理解されるであろう。
【発明を実施するための最良の形態】
【００１７】
図１には、本発明に従った装置の例についての機能図を示している。図１により、本発明に従った装置は：
−  マルチメディアコンテンツＣを読み出すためのコンテンツリーダＤＥＣ−Ｃ、
−  マルチメディアコンテンツＣが読み出されているとき、マルチメディアコンテンツからの選択Ｓを実行するためのユーザコマンドＣＤＥ、
−  選択Ｓに関連する１つまたはそれ以上のデータＸｉをコンテンツリーダＤＥＣ−Ｃから受信し、これらのコンテンツデータＸｉに関連する記述Ａｊを供給するために、マルチメディアコンテンツＣを記述する文書Ｄを読み出すためのコンテンツデータＸｉを用いる、文書リーダＤＥＣ−Ｄ、並びに
−  文書Ｄにおける記述Ａｊの読み出しに基づいて質問Ｋを構築するための質問を自動的に構築するためのツールＱＵＥＳＴ、
を有する。
【００１８】
例として、マルチメディアコンテンツＣはＭＰＥＧ−４ビデオであり、コンテンツリーダＤＥＣ−ＣはＭＰＥＧ−４デコーダであり、文書ＤはＭＰＥＧ−７文書であり、文書リーダＤＥＣ−ＤはＭＰＥＧ−７デコーダである。
【００１９】
マルチメディアコンテンツがビデオであるとき、読み出し時間はマルチメディアコンテンツにおける各々の画像に関連する。ユーザコマンドは、例えば、単純なボタンにより構成される。ユーザがこのボタンを押すとき、コンテンツリーダＤＥＣ−Ｃはビデオの現時点の読み出し時間を提供する（現時点の読み出し時間は、選択のときに読み出される画像を伴うマルチメディアコンテンツにおいて関連する読み出し時間である）。この現時点の読み出し時間は、次いで、ユーザにより選択されるビデオのパッセージに関連する文書の記述を見つけるためにコンテキスト情報として用いられる。
【００２０】
マルチメディアコンテンツが対象を有する画像であるとき、対象識別子はマルチメディアコンテンツにおける各々の対象に関連する。ユーザコマンドは、例えば、マウスにより形成される。ユーザがマウスを用いて画像の対象を選択するとき、コンテンツリーダＤＥＣ−Ｃはマルチメディアコンテンツにおいて選択された対象に関連する対象識別子を提供する。この対象識別子は、次いで、選択された対象に関連する文書の記述を見つけるためにコンテキスト情報として用いられる。
【００２１】
マルチメディアコンテンツが、特定の画像が少なくとも特定の対象を有するビデオであるとき、ユーザコマンドは、例えば、ユーザがビデオ画像における対象を選択することを可能にするマウスである。ユーザがビデオの画像の対象を選択するとき、現時点の読み出し時間および対象識別子はコンテキストデータとして有利に用いられる。
【００２２】
図２において、マルチメディアコンテンツＣの文書Ｄのツリー状構造の例を示している。図２に従って、このツリー状構造は：
−  全体的なマルチメディアコンテンツを表すルートノードＮ０を有する第１階層水準Ｌ１、
−  マルチメディアコンテンツの第１、第２および第３部分を表す３つのノードＮ１乃至Ｎ３を有する第２回想水準Ｌ２（例えば、マルチメディアコンテンツがビデオであるとき、各々の部分はビデオの異なるシーンに対応する）、並びに
−  それぞれ、ノードＮ２の子ノードである２つのノードＮ２１とＮ２２、並びにノードＮ３の子ノードである３つの他のノードＮ３１、Ｎ３２およびＮ３３とを有する第３階層水準、
を有する。ノードＮ３１、Ｎ３２およびＮ３３は、マルチメディアコンテンツの第１部分、第２部分および第３部分をそれぞれ表す。例えば、マルチメディアコンテンツがビデオであるとき、各々の部分はビデオのシーンのショットに対応する。
【００２３】
ツリー状構造のノードは、記述の例である記述を有利に有する（記述子は、全てのまたは一部のマルチメディアコンテンツの特性の表示である）。それ故、コンテキストデータは、マルチメディアコンテンツを記述する文書において用いられる記述子の１つの例のコンテンツと比較されることができるようである必要がある。この比較のために用いられる記述は回収記述と呼ばれる。
【００２４】
ＭＰＥＧ−７規格は、特定の数の記述子であって、例えば、ビデオセグメントの開始時間と終了時間および意味論的記述であって、例えば、＜＜ｗｈｏ＞＞、＜＜ｗｈａｔ＞＞、＜＜ｗｈｅｎ＞＞、＜＜ｈｏｗ＞＞等の記述子を表す記述子＜＜ＭｅｄｉａＴｉｍｅ＞＞を、特に定義している。用いられる文書がＭＰＥＧ−７文書であるとき、現時点の読み出し時間は、選択されたセグメントに対応するノードをその文書において見つけるために現時点の読み出し時間と比較される記述子＜＜ＭｅｄｉａＴｉｍｅ＞＞の例である記述のコンテンツとコンテキスト情報として有利に用いられる。次いで、記述子＜＜ｗｈｏ＞＞、＜＜ｗｈａｔ＞＞、＜＜ｗｈｅｎ＞＞および＜＜ｈｏｗ＞＞の例である記述が、質問の構築のために回収される。
【００２５】
ＭＰＥＧ−４規格とＭＰＥＧ−７規格はまた、対象記述子であって、特に、対象識別記述子を定義する。マルチメディアコンテンツの対象は、この対象識別記述子の例である記述により前記マルチメディアコンテンツにおいて識別される。この記述はまた、ＭＰＥＧ−７文書に含まれる。このようにして、この記述は、ユーザが対象を選択するとき、コンテキスト情報として用いられることができる。その場合、回収記述子が対象識別記述子により形成される。
【００２６】
さらに一般に、親ノードに含まれる記述はまた、その子ノードに対して有効である。例えば、全体的ビデオに関連する記述子＜＜ｗｈｅｒｅ＞＞の例は、全てのシーンおよび全てのビデオショットに対して有効のまま保たれる。しかしながら、さらに正確な記述であって、同じ記述子の例は、子ノードのために与えられることが可能である。これらのさらに正確な記述は、全体的なビデオのためには有効ではない。例えば、記述＜＜Ｆｒａｎｃｅ＞＞が全体のビデオに対して有効であるとき、記述＜＜Ｐａｒｉｓ＞＞は、シーンＳＣＥＮＥ１に対して有効であり、記述＜＜Ｍｏｎｔｍａｒｔｒｅ＞＞と＜＜Ｐａｌａｉｓ  Ｒｏｙａｌ＞＞は、シーンＳＣＥＮＥ１の第１ショットＳＨＯＴ１と第２ショットＳＣＯＴ２に対して有効である。
【００２７】
正確な質問を構築できるように、各々の利用可能な記述子のための最も正確な記述を用いることが好ましい。従って、本発明の好適な実施形態において、ツリー状構造は、開始ノードである子ノードから親ノードへと辿る。そして、各々の階層水準に対して、同じ記述子の他の例がまだ回収されない場合にのみ、記述は回収される。ユーザがショットＳＨＯＴ１を選択するときに前の例を挙げる場合、それは質問を構築するために用いられる記述＜＜Ｍｏｎｔｍａｒｔｒｅ＞＞である。そして、ユーザが、記述子＜＜ｗｈｅｒｅ＞＞の例を有しない、シーンＳＣＥＮＥ１の第３ショットＳＨＯＴ３を選択するとき、記述＜＜Ｐａｒｉｓ＞＞が用いられる。
【００２８】
図３において、サーチエンジンに送信されることを目的とする質問を構築する本発明に従った方法の詳細な過程をまとめた図を示している。
【００２９】
段階１において、ユーザは、ビデオＶのパッセージを選択するために、選択キーＣＤＥを押す。段階２において、選択の瞬間における現時点の読み出し時間が回収される。現時点の読み出し時間Ｔはコンテキスト情報となる。段階３において、現時点の読み出し時間Ｔが含まれる時間範囲を規定する開始時間Ｔｉと終了時間Ｔｆとを有する回収記述子＜＜Ｍｅｄｉａｔｉｍｅ＞＞の例の記述を有するノードは、文書Ｄにおいて検索される。図３において、この条件に適合するノードはノードＮ３１である。段階４において、ノードＮ３１を支えるブランチＢ１は、記述子＜＜ｗｈｏ＞＞、＜＜ｗｈａｔ＞＞および＜＜ｗｈｅｒｅ＞＞ｎｏ例である記述Ｄ１、Ｄ２およびＤ３を回収するために、ノードＮ３１からルートＮ０まで辿る。段階５において、記述Ｄ１、Ｄ２およびＤ３が、質問Ｋを生成するために用いられる。
【００３０】
図４において、本発明に従ったシステムの例を示している。そのようなシステムは、サーバＳＶに収容される遠隔サーチエンジンＳＥを有する。選択されたパッセージに対する検索を始めるように、読み出しの間にマルチメディアコンテンツからの選択を実行するために、ユーザがマルチメディアコンテンツＣを読み出すことを可能にするＥＱＴと呼ばれる、また、本発明に従ったユーザ向け装置を有する。装置ＥＱＴは、サーチエンジンＳＥに質問Ｋを送信し且つサーチエンジンＳＥからもたらされる応答Ｒを受信するために、図１を参照してすでに説明した構成要素に追加して、トランシーバＥＸ／ＲＸを有する。
【００３１】
実際には、ソフトウェア手段を用いて本発明を実行する。この目的のために、本発明に従った装置は、１つまたはそれ以上のプロセッサと１つまたはそれ以上のプログラム記憶装置を有し、前記プログラムは、前記プロセッサにより実行されるとき、まさに記述された機能を実行するための命令を含む。
【００３２】
本発明は、用いられるビデオフォーマットに依存しない。例として、ＭＰＥＧ−１、ＭＰＥＧ−２およびＭＰＥＧ−４フォーマットに特に適用可能である。
【図面の簡単な説明】
【００３３】
【図１】本発明に従った装置の例を示すブロック図である。
【図２】本発明に従った文書の例のツリー状構造を示す図である。
【図３】本発明の原理を説明する図である。
【図４】本発明に従ったシステムの例の機能図である。
【国際公開パンフレット】
2005501343.tif 000003
2005501343.tif 000004
2005501343.tif 000005
2005501343.tif 000006
2005501343.tif 000007
2005501343.tif 000008
2005501343.tif 000009
2005501343.tif 000010
2005501343.tif 000011
2005501343.tif 000012
2005501343.tif 000013
2005501343.tif 000014
2005501343.tif 000015
【国際調査報告】
2005501343.tif 000016
2005501343.tif 000017
2005501343.tif 000018