(57)【要約】【課題】  画像に関連する補足的な情報を得る。【解決手段】  画像と該画像に関連する情報とを相関させる方法であって、該画像の画像メタデータを特定するステップ５０５であって、該画像メタデータが画像取り込み時の状況に関連する情報を含むものである特定するステップと、前記画像メタデータ内のパラメータを使用して１以上の情報ソースを探索するステップ５０６であって、それによって該情報ソースから推論情報を収集するものである探索するステップとを含んでなる方法およびシステムを提供する。【選択図】        図５
2005149511.tif 000002
【特許請求の範囲】
【請求項１】
画像と該画像に関連する情報とを相関させる方法であって、
該画像の画像メタデータを特定するステップであって、該画像メタデータが画像取り込み時の状況に関連する情報を含むものである特定するステップと、
前記画像メタデータ内のパラメータを使用して１以上の情報ソースを探索するステップであって、それによって該情報ソースから推論情報を収集するものである探索するステップと
を含んでなる方法。
【請求項２】
選択された推論情報を特定する１以上の入力をユーザから受け取るステップと、
前記選択された推論情報を前記画像の画像ファイルに付加するステップと
をさらに含む請求項１に記載の方法。
【請求項３】
選択された推論情報を特定する１以上の入力をユーザから受け取るステップと、
前記選択された推論情報を、前記画像にリンクされた推論メタデータファイルに付加するステップと
をさらに含む請求項１に記載の方法。
【請求項４】
前記画像と前記画像メタデータと選択された推論情報とをプリントするステップをさらに含む請求項１に記載の方法。
【請求項５】
前記画像メタデータを使用して第１のデータベースを探索して、前記推論情報を特定するものである第１のデータベースを探索するステップと、
前記推論情報を使用して第２のデータベースを探索してさらなる推論情報を特定するものである第２のデータベースを探索するステップと
をさらに含む請求項１に記載の方法。
【請求項６】
画像データと画像メタデータとを含む画像ファイルを受け取る手段と、
該画像メタデータを使用して情報ソースを探索して、画像推論情報を特定する手段と
を含んでなる、推論情報を画像に相関させるシステム。
【請求項７】
前記画像推論情報をユーザに表示する手段と、
選択された推論情報を特定する１以上の入力を前記ユーザから受け取る手段と、
前記選択された推論情報を、前記画像にリンクされた推論メタデータファイルに付加する手段と
をさらに含む請求項６に記載のシステム。
【請求項８】
前記画像と前記画像メタデータと選択された推論情報とをプリントする手段をさらに含む請求項６に記載のシステム。
【請求項９】
前記画像メタデータを使用して第１のデータベースを探索して、前記推論情報を特定する手段と、
前記推論情報を使用して第２のデータベースを探索して、さらなる推論情報を特定する手段と
をさらに含む請求項６に記載のシステム。
【請求項１０】
前記画像取り込み装置の場所が変更されている間に撮影された一連の画像が前記画像メタデータに関連付けられるものである請求項６に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、一般的には、外部ソースから得られた情報で画像に注釈を付けることに関し、特に、画像メタデータを使用して画像についての情報を推論することに関する。
【背景技術】
【０００２】
デジタルカメラやデジタルビデオレコーダによって生成される画像のように、画像はデジタルフォーマットで記憶することができる。デジタル画像は、画像または一連の画像のピクセルに関する情報またはデータを含む。デジタル画像ファイルは、多くの場合、ピクセル情報の他にメタデータまたはタグ付けデータを含む。メタデータは、通常、写真が撮影された日時や、写真が撮影された場所の全地球測位システム（ＧＰＳ）データ等の情報からなる。メタデータは、画像ファイルのヘッダ情報に記憶することができる。ＧＰＳデータをそれぞれの画像に組み込むデジタルカメラは、カメラに内蔵されたＧＰＳ装置を有する場合もあれば、カメラに取り付けることが可能な装置を有する場合もある。
【０００３】
画像データのソートと記憶と検索と索引付けとの際に、メタデータは有用である。画像に記憶することができるメタデータと他の注釈情報とが多いほど、画像を秩序立てたフォーマットで記憶することが容易になる。
【０００４】
撮影者が画像に示されているシーンについての詳細を思い出す助けとして、注釈または他の説明的なメモを画像に手動で付ける必要があることが多い。このような注釈は、多くの場合、プリントされた画像の裏面に書かれ、写真アルバムまたは写真フレームの中に保存される。書き込みは時間の経過に伴って色あせしやすく、読み取りが難しくなる。さらに、書き込まれたメモから特定の詳細が抜け落ちる場合もある。画像のラベル付けに使用される説明的情報を選択して作成するにはかなりのユーザ入力が必要であり、これには非常に時間がかかり得る。したがって、負担の少ない様式で画像の注釈付けを助けるシステムが必要である。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明の目的は、個人が、画像に関連し、画像取り込み装置により作成されたメタデータを使用して、データベースやインターネット等の外部情報ソースからの画像に関連する補足的な情報を得ることができるシステムおよび方法を作成することにある。このシステムは、補足情報を使用して画像をラベル付けする現行のシステムを大幅に改良するものである。
【課題を解決するための手段】
【０００６】
本発明の実施形態において、画像に関連する情報を画像に相関させる方法は、画像の画像メタデータを特定するステップであって、画像メタデータが画像取り込み時の状況に関連する情報を含むものである特定するステップと、画像メタデータ内のパラメータを使用して１以上の情報ソースを探索するステップであって、それによって情報ソースから推論情報（inference information）を収集するものである探索するステップと、推論情報をユーザに表示するステップとを含んでなる。
【０００７】
本発明の別の実施形態において、推論情報を画像に相関させるシステムは、画像データと画像メタデータとを含む画像ファイルを受け取る手段と、画像メタデータを使用して情報ソースを探索して、画像推論情報を特定する手段とを含んでなる。
【０００８】
本発明のさらなる実施形態では、画像ファイル情報を記憶する記憶装置は、取り込まれた画像のピクセルを表す画像データを記憶するメモリフィールドと、画像取り込み時の状況に関連するデータを表す画像メタデータを記憶するメモリフィールドと、画像メタデータの少なくとも一部を使用して情報データベースを探索することによって生成されるデータを表す推論メタデータを記憶するメモリフィールドとを含む。
【発明を実施するための最良の形態】
【０００９】
本発明は、様々な外部ソースから得られた情報を画像メタデータに相関させるシステムおよび方法を対象とする。本明細書に記載のシステムおよび方法は、静止画像すなわち単一の画像ファイルと、ビデオ画像すなわち一連の画像ファイルとを併せて使用することができる。ＧＰＳ場所情報や時刻や日付や気温や画像センサの向き等の得られた情報または他のデータが、画像取り込み時にメタデータとして画像ファイルに付加される。メタデータとは、画像ファイルに関連付けられる記述的なヘッダである。メタデータは、画像ファイルの一部として組み込まれる場合もあり、この場合、このようなメタデータは画像の冒頭に配置されるか、またはメタデータは画像とは別個に記憶され、あるタイプの識別子またはポインタを介して画像に関連付けられる場合もある。
【００１０】
画像メタデータは、録画時刻や画像の場所や録画時のカメラの向く方向や傾斜角等の情報からなることができる。画像メタデータは、後処理中に画像ファイルに付加される追加情報を得る際に使用される。この追加情報は推論情報（inference information）として分類される。画像メタデータは、外部ソースから推論情報を見つける際に使用される。推論情報は、画像の内容をさらに特定または規定するために使用することができる。
【００１１】
推論情報を得るために、ユーザは、画像ファイルをコンピュータやサーバ等の装置にアップロードする。アプリケーションが、画像のＧＰＳ位置や方向や傾斜角や日時情報等の画像メタデータを検索し、このようなパラメータを使用して、全国天気サービスやニュースソースや米国地質調査所や他の様々な情報ソース等の他のソースから情報を得る。画像メタデータを使用して、適合する情報または関連する情報の外部ソースが探索される。たとえば、ＧＰＳ経緯度等のメタデータ内の場所パラメータを使用して、米国地質調査所のウェブサイトまたはデータベースを探索し、画像取り込み時、またはその前後の地上の特徴が求められる。そして、地上の特徴についてのさらなる情報に関して他のデータベース探索を行うことができる。
【００１２】
この推論情報（inference information）がユーザに表示されて、ユーザは、推論メタデータとして情報を画像ファイルに追加する選択肢をもつ。画像の内容の特定を助けるため、そしてユーザが画像に関連するイベントを思い出すのを助けるために、選択された推論メタデータは画像ファイルとともに保持される。推論メタデータは、ユーザが画像視野内の被写体を特定できるようにし、撮影者が画像に関連する「一部始終」を思い出して伝えられるようにする等という利点もユーザに提供する。
【００１３】
図１は、本発明の実施形態による画像メタデータに推論情報（inference information）を付与するシステム１００のブロック図である。コンピュータ１０１は、様々な要素間での通信を可能にするシステムバス１０２を含む。コンピュータ１０１は、現在既知のタイプまたは後に開発される任意のタイプのプロセッサでありうるプロセッサ１０３も含む。キーボード１０４とマウス１０５とスキャナ１０８とにより、ユーザはコンピュータ１０１に情報を入力することができる。情報は、モニタ１０６を通してユーザに表示される。コンピュータ１０１により使用されるプログラムおよびデータを記憶するために、記憶装置１０７が使用される。記憶装置１０７は、ランダムアクセスメモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）、ハードドライブ、または大容量記憶装置等の任意の形の電子メモリ装置でありうる。
【００１４】
通信インタフェース１０９により、コンピュータ１０１はデジタルカメラ１１０やコンピュータネットワーク１１１等の外部装置と通信することができる。コンピュータシステムは、オペレーティングシステム１１３と、スキャナソフトウェア１１４や第１のソフトウェアアプリケーション１１５や第２のソフトウェアアプリケーション１１６等のアプリケーションソフトウェアとを収容したメモリ１１２も含みうる。本発明のいくつかの実施形態では、第１のソフトウェアアプリケーション１１５および第２のソフトウェアアプリケーション１１６は、ハードドライブ、ＣＤ−ＲＯＭ、フロッピー（登録商標）ディスク、または記憶装置１０７として通常使用される他のコンピュータに読み取り可能な媒体に記憶することができる。第１および第２のアプリケーション１１５および１１６は、ネットワーク１１１上にあるファイルを見るためのブラウザプログラムやカメラ１１０からの画像ファイルを見るための写真編集プログラム等のコンピュータ１０１上で実行されるいずれのプログラムでありうる。
【００１５】
図２は、本発明の実施形態を実施するにあたって使用される画像取り込み装置２００のブロック図である。画像取り込み装置２００は、写真画像データの取り込みと記憶と表示とに使用される。ＣＰＵまたはプロセッサ２０１が画像取り込み装置２００の動作を制御する。画像取り込み装置２００は、シーン２１１の取り込みに使用される電荷結合素子（ＣＣＤ）等のセンサ２０２からなる。写真画像データは、シーン２１１に焦点を合わせる能力を有するレンズ２０３を通して得られる。センサ２０２はシーン２１１を表すデジタル情報を取り込み、画像取り込み装置２００はそのデータを記録媒体２０８に記憶する。記録媒体２０８は、たとえば６４メガバイト以上のデジタルデータ記憶容量を提供するＳＭＡＲＴＭＥＤＩＡ（登録商標）フラッシュメモリカード、ＣＯＭＰＡＣＴＦＬＡＳＨ（登録商標）カード、ＭＥＭＯＲＹ  ＳＴＩＣＫ（登録商標）カード、またはＳＤ  ＳＥＣＵＲＥＤ  ＤＩＧＩＴＡＬ（登録商標）メモリカード等の取り外し可能な記憶媒体を含みうる。
【００１６】
装置２００は、画像メタデータの生成に使用される場所装置２０４と、時刻装置２０５と、角度装置２０６と、方向装置２０７も含む。場所装置２０４は、たとえばＧＰＳ受信器であることができ、画像取り込み時の画像取り込み装置２００の場所の判定に使用される。この位置データは、画像取り込み装置２００の少なくとも緯度および経度からなる。通常、取り込み装置２００が画像を取り込むと、画像データは、場所や日時情報等のパラメータとともに記憶媒体２０８に記憶される。このようなパラメータは、交換可能画像ファイルフォーマット（ＥＸＩＦ）フォーマット等の様々なフォーマットで記憶することができる。
【００１７】
時刻装置２０５は、原子時計またはデジタル時計からなることができ、画像取り込み時の判定に使用される。時刻装置２０５は、一連のデジタル画像またはビデオの開始時刻および停止時刻の特定にも使用することができる。角度装置２０６は、傾斜計であってもよく、画像取り込み装置２００が画像取り込み中に向けられていた角度の判定に使用される。たとえば、角度装置２０６は、画像取り込み装置が録画中に水平線に対して向けられていた角度を判定する。方向装置２０７は、３Ｄコンパスからなり、画像取り込み装置２００が画像取り込み時に向けられていた方向の判定に使用される。装置２０４〜２０７によって得られる情報は、画像ファイルとともに画像メタデータとして記憶することができる。
【００１８】
画像取り込み装置２００は、画像取り込み装置のＣＰＵ２０１に画像データ２１１の取り込みを通知する際に使用されるトリガ２０９も含む。ＣＰＵ２０１は、画像データ２１１と、場所装置２０４や時刻装置２０５や角度装置２０６や方向装置２０７からのデータ等の関連するすべての画像メタデータとを記録媒体２０８に記録する。
【００１９】
画像取り込み装置２００は、コンピュータ１０１等の他の装置と直接通信する際に使用される通信ポート２１０も含む。通信ポート２１０は、コンピュータ１０１とインタフェースし、様々な接続を使用して画像データおよび画像特徴情報をＥＸＩＦデータの形で転送する。たとえば、ユニバーサルシリアルバス（ＵＳＢ）もしくはＦＩＲＥＷＩＲＥ（登録商標）ケーブルおよびインタフェースの提供によるもの等の直接電気接続により、またはワイヤレス伝送パスにより、データ転送をサポートすることができる。データは、コンピュータ１０１に接続された適切なリーダに物理的に挿入される取り外し可能な記録媒体２０８を使用して転送することもできる。
【００２０】
図３は、本発明の実施形態と併せて使用することができるフォーマットのグラフィカル画像データとともに取り込まれたメタデータの例示的な一実施形態である。画像メタデータは、取り込み時に画像データとともに記憶される。図３に示すメタデータフィールドは排他的ではない。他のフィールドも使用することができ、取り込まれた任意特定の画像のフィールドによっては空である場合もあることが理解されよう。
【００２１】
画像ファイル３００は、ユーザにより入力された名前であるか、または画像取り込み装置によって自動的に生成される名前でありうる画像名３０１を含む。時刻フィールド３０２は、画像がいつ取り込まれたかを特定する日時情報を含む。場所フィールド３０３は、画像が取り込まれたときにカメラがどこにあったかを特定する緯度および経度情報を含む。角度フィールド３０４および方向フィールド３０５は、画像が取り込まれたときにカメラが向けられていた傾斜角および方向に関する情報をそれぞれ含む。レンズタイプフィールド３０６およびＦストップフィールド３０７は、画像の取り込みに使用されたレンズのタイプに関する情報と、画像の取り込みに使用された口径等の他のレンズおよびカメラのパラメータとを含む。
【００２２】
さらなるメタデータをフィールド３０８に記憶することができる。この追加情報は、画像取り込み時、または後に画像ファイルを処理する間に追加することができる。実際に取り込まれた画像を表す画像データはフィールド３０９に記憶される。
【００２３】
図４は、本発明の実施形態による、画像メタデータを使用して推論情報を得るシステムである。ネットワークシステム４００は、画像ファイルを保持する画像記憶装置４０１を備える。カメラまたは他の画像取り込み装置からこのような画像ファイルをアップロードすることができる。画像記憶装置は、スタンドアロン大容量記憶装置であっても、またはコンピュータ４０４等のユーザコンピュータに接続される記憶装置であってもよい。図１および図２に関連して上に述べたように、ワイヤライン接続またはワイヤレス接続を介してコンピュータにカメラを接続することができ、画像ファイルをコンピュータに転送することができる。そして、このような画像ファイルをコンピュータによって処理することができる。
【００２４】
一実施形態では、ネットワーク４０３は画像記憶装置４０１をコンピュータ４０４に接続する。ネットワーク４０３は、ローカルエリアネットワーク（ＬＡＮ）、広域ネットワーク（ＷＡＮ）、イントラネット、インターネット、または他の任意のワイヤラインまたはワイヤレスのネットワークでありうる。コンピュータ４０４は、本発明による推論マッチングアプリケーションの実行に使用することができる。たとえば、ユーザは、コンピュータ４０４を使用して、画像メタデータに関連する補足データを探索することができる。コンピュータ４０４上で実行されるアプリケーションを使用して、画像ファイルが選択される。アプリケーションは、図３のフィールド３０２〜３０８に表される情報等の画像ファイル内のメタデータを特定する。そして、このメタデータは、外部データベース中の他の情報とマッチングされる。
【００２５】
たとえば、ユーザは画像ファイルを画像記憶装置４０１にアップロードする。コンピュータ４０４は、画像ファイルからのメタデータを特定し、場所フィールド情報を選択する。そして、コンピュータ４０４は、ネットワーク４０３を介してサーバ４０２に接続する。一実施形態では、サーバ４０２は、米国地質調査所等の地理的マッピングサービスのウェブサイトを運営している。コンピュータ４０４は場所情報をサーバ４０２に提供し、サーバ４０２は、場所データベース４０５を照会した後に、場所情報によって特定されたエリアについての情報を返す。たとえば、画像ファイル場所メタデータが北緯４５度３６分および西経１２２度３６分を含んでいた場合には、サーバ４０２はオレゴン州ポートランドの場所を特定する。この情報はユーザのコンピュータ４０４に返される。そして、ユーザは、この推論情報を使用して画像ファイルにさらに注釈を付けるか否かを判定することができる。大半のユーザは経緯度だけを容易に理解することはできないため、たとえば図３のフィールド３０８の一部として、場所名を画像ファイルに追加することができる。同様に、他の推論メタデータも画像ファイルに追加することができる。
【００２６】
別の実施形態では、推論マッチングアプリケーションは、選択された画像ファイルに関連する補足的な推論データの探索実行専用のサーバ４０２上で実行される。この実施形態では、サーバ４０２と同じ場所であるか、または離れた場所でありうる画像記憶装置４０１にユーザが画像ファイルをアップロードすることができ、サーバ４０２によって画像が処理される。
【００２７】
探索が実行された上で、サーバ４０２は、画像メタデータを特定し、関連する情報について様々な外部ソースを探索する。外部ソースは、全国天気サービスと、ニュースサービスと、前のマッチングから共同的に合体された関連メタデータと、ＵＳＧＳ等の関連メタデータを有する他の画像データベースまたは画像ファイルメタデータを使用して照会することができる他の任意のサイトとからなることができる。たとえば、特定の時刻および場所に関して全国天気サービスを探索すると、画像が取り込まれた時刻および場所での天気状況が返され得る。この情報は、画像ファイルメタデータに追加することができる。
【００２８】
様々なことを画像ファイルメタデータに追加することもできる。たとえば、場所データベースは、基本的な都市および州の情報の他に、特定の場所についてのより詳細な情報を提供することができる。たとえば、画像がワシントンＤ．Ｃ．にあるホワイトハウスの場合、画像の経緯度情報を使用しての探索により、ホワイトハウスからの距離またはワシントンＤ．Ｃ．エリアの他の地理的特徴を特定することができる。さらに探索により、画像メタデータは録画された時刻を提供することから、録画された時刻のホワイトハウスでの天気を返すことができる。そして、サーバ４０２またはコンピュータ４０４は、推論メタデータとして推論情報を画像に付与または併合することができる。推論メタデータは、最終的に、画像の内容の特定を助けるために使用される。追加情報が画像にマークアップされた後、推論マークアップを有する画像データとして画像が分類される。補足的な推論情報の探索が完了した後、画像の更新、マークアップがある画像もしくは無い画像のプリント、コンピュータ４０４、データベース４０１、またはサーバ４０２への推論マークアップがある画像データもしくは無い画像データの記憶を、ユーザが選択することができる。
【００２９】
本発明は、ユーザがインターネットまたは共有データベースの共同的性質を利用できるようにする。画像が処理されると、他のユーザによる使用または参照のために画像記憶装置４０１等の中央データベースに画像を記憶することができる。たとえば、第１のユーザが、任意のメタデータを含む処理済みの画像を画像記憶装置４０１に保存することができる。後に第２のユーザが関連画像を処理するときに、第１のユーザの画像をその他の画像の処理に使用することができる。第２のユーザの画像は、第１のユーザの画像と同じイベントに関連付けることができる。その結果、場所名や天気状況や付近のサイト等の一般的なメタデータの多くが両方のユーザの画像に付与される。第２のユーザは、自分の画像に追加すべきメタデータの部分を選択することができる。さらに、画像が画像記憶装置４０１に記憶される場合には、第１または第２のユーザは、後にこれら画像の処理を更新することができる。その結果、画像が最初に処理されたときには利用することができなかった情報を、第２または後続の処理中に見つけることができる。
【００３０】
図５は、本発明の実施形態の動作の概観を表すフローチャートである。５０１では、画像が録画される。５０２では、録画と同時にメタデータが画像ファイルに添付される。このメタデータは、場所、日付、時刻、指向角度、または取り込まれた画像に関連する他の関連情報を含みうる。録画されると、５０３では、推論マッチングのために、プロセッサまたはコンピュータに画像がアップロードされる。５０４では、画像からのメタデータが、たとえば図４に関連して上に述べたように他の情報とマッチングされる。
【００３１】
プロセス５０５では、統計確率に基づく確信度（confidence factor）が計算され、マッチングするメタデータに関連付けられる。確信度は、たとえば、特定のメタデータが処理中の画像にどの程度マッチングしているかを格付けするために使用することができる。マッチングが完了した後、５０６では、推論情報および関連する確信度格付けが画像メタデータと組み合わせられる。
【００３２】
図６は、本発明の一実施形態において使用される方法を示すフローチャートである。６０１では、画像が処理のためにアップロードされる。６０２では、メタデータが画像ファイルから読み出される。画像メタデータが読み出されると、６０３〜６０６に示すように、推論データの探索が様々な探索基準に基づいて行われる。たとえば、画像の場所および画像時刻に基づいた照会を６０３に示し、画像の場所のみに基づいた照会を６０４に示す。探索は、カメラの視野内のエリアすなわち可視領域に基づくこともできる。６０５では、カメラによりカバーされるエリアすなわち可視領域が計算される。６０６では、可視領域を用いて推論情報が探索される。
【００３３】
適切な探索基準が選択された後、６０７では探索が処理される。探索の処理に必要な時間は、発見された推論データの量に応じて様々である。探索処理の後、６０８では、すべての推論データマッチがソートされて優先度が付けられる。推論データマッチは、ステップ６０３〜６０６において選択された被選択探索基準への最も近いマッチングに基づいて優先度が付けられてソートされる。推論データマッチに優先度が付けられた後、６０９では、ユーザは、推論データで画像を更新すべきか否かを選択する。画像は、自動的に更新されても、ユーザの監督の下で更新されてもよい。
【００３４】
ユーザが画像更新を監督すると決めた場合には、６１０において、ユーザが推論情報を見て画像ファイルに追加すべき情報を選択することができるようなユーザインタフェースが作成され、ユーザに表示される。一実施形態では、インタフェースは、画像および関連する推論情報を表示する１以上のウィンドウからなり、ユーザは、マウスやキーボード等の入力装置を使用して、画像ファイルに追加すべき情報を選択する。６１１では推論がユーザに提示され、６１２ではユーザが所望のデータを選択する。６１０〜６１２に示される監督付きプロセスにより、ユーザは、重複する情報をなくし、関連のない情報または不要な情報が画像ファイルに追加されるのを防ぐことができる。たとえば、ユーザは、国定史跡や取り込まれた画像の記録場所付近の関心のある場所等の場所に基づいた推論情報を保持することを決めることができる。しかし、ユーザは、録画時の天気に関連する情報の拒絶を選択することもできる。ユーザが所望の推論データを選択した後、６１３では、このデータは画像ファイルに追加される。６１３では、確信度および監督者識別子を画像に追加することもできる。
【００３５】
６０８においてユーザが自動画像更新の選択を決めた場合には、６１３では、６０３〜６０６における探索基準によってマッチングしたすべての推論データが、画像ファイルに自動的に追加される。監督付き更新であるかそれとも自動更新であるかの選択は、ユーザが各画像ファイルに対して選択を行う必要がないように予め設定、すなわちデフォルト設定されていてもよい。６１４では、更新された画像ファイルがレビューのためにユーザに提示されるが、これは、メタデータ、画像、または両方の表示であってもよい。６１５では、ユーザは、画像ファイルに満足するか否かを判定し、満足した場合は、６１６において画像および／またはメタデータをプリントする選択肢をもつ。６１５においてユーザが画像ファイルに満足しない場合には、６１１において推論情報が再び表示され、ユーザは選択を変更する選択肢をもつ。６１５において画像ファイルが承認された後、６１７では、ユーザはデータベースに画像を保存することができる。
【００３６】
図７は、本発明の実施形態と併せて使用することができるフォーマットの一連の画像に関して取り込まれたメタデータ７００の例示的な一実施形態である。いくつかの実施形態では、一連の写真またはビデオクリップ等の関連する一連の画像は単一ファイルとして記憶することができる。図７に示すように、これらファイルにメタデータを付与することもできる。エリアフィールド７０１は、複数の場所を含み、一連の画像中の各画像の場所を表すことができる。別法として、フィールド７０１は、ビデオクリップの開始場所および終了場所、および／または、ビデオ取り込み中の特定の時刻でのカメラの場所でありうる。持続時間フィールド７０２は、一連の画像またはビデオクリップの開始日時および終了日時を含む。別法として、持続時間フィールド７０２は、一連の画像中の各画像の日時エントリを有していてもよい。メタデータフィールド７０３は、本発明を使用して追加される推論情報や画像に関連する他のデータ等の一連の画像またはビデオクリップに関連する他の情報を含む。画像の取り込みに使用されたＦストップや口径等のカメラパラメータを含む他のフィールドを画像ファイル７００に追加できることが理解されるであろう。画像データフィールド７０４は、一連中の各画像またはビデオクリップの実際の画像データの記憶に使用される。
【００３７】
図８は、本発明の実施形態と併せて使用するために生成された画像および推論メタデータを含む画像の一例である。表示８００は、静止画像、写真、一連の画像、一連の画像のサムネイルビュー、ビデオクリップ、または他の任意の画像表示でありうる画像８０１を含む。画像８０１は、たとえば、図３および図７の画像データフィールド３０９または７０４から生成される。画像メタデータ８０２は、カメラにより画像取り込み時に記憶されるデータである。画像メタデータ８０２は、たとえば、図３および図７のフィールド３０２〜３０７または７０１〜７０２に記憶することができる。
【００３８】
画像メタデータ８０２は、本発明では、画像８０１に関連する推論情報の特定に使用される。日時メタデータ８０３は、画像がいつ取り込まれたかを特定する。場所メタデータ８０４は画像がどこで取り込まれたかを特定し、画像の場所または画像付近の場所の特徴を特定するために使用することができる。カメラ方向メタデータ８０５およびカメラ角度／焦点距離／口径設定／レンズタイプメタデータ８０６は、画像取り込み時にカメラが向けられていた方向を特定し、カメラの視野がカバーしたエリアを特定するために使用することができる。他のメタデータは、焦点距離８１８と、レンズタイプ８１９と、口径設定８２０とを含みうる。
【００３９】
画像メタデータ８０２を使用して、本発明では推論メタデータ８０７を生成する。たとえば、国立公園やビーチや観光の名所等の付近のランドマーク（８０８）を場所メタデータ８０４から特定することができる。画像の場所がわかると、画像が取り込まれた場所に対して、時刻と、天気（８０９）と、日の出／日の入り（８１０）と、他の大気状況とを求めることができる。場所名等の推論データをさらに処理して、さらなる推論情報を特定することができる。たとえば、場所を有名なビーチであると特定した後、ビーチで見つけることができる植物相（flora）や動物相(fauna)（８１１、８１２）等のその場所についての他の情報も求めることができる。
【００４０】
視野メタデータ８０５、８０６とともに場所メタデータ８０４を使用すると、取り込まれた画像に見られたエリアを求めることができる。この情報を使用して、画像または画像の背景（８１３）で見ることができる被写体またはイベントを求めることができる。たとえば、画像が日の入りの時刻近くで撮影され、視野により、カメラが西を向いていたことが示される場合には、推論情報は夕日が取り込まれたことを示唆することができる。視野により、山等の地理的なランドマークが画像内に見えるかもしれないことが示される場合には、考えられる背景被写体（８１３）としてそのランドマークが特定される。
【００４１】
推論メタデータ８０７はユーザに提示され、そして、ユーザは、画像ファイルに追加またはリンクすべき情報を選択する。図３および図７のフィールド３０８または７０３に情報を追加する等により推論情報が画像ファイルに追加されると、ユーザが画像を見るときまたは画像ファイルを開くときはいつでも、この情報を利用することができる。ユーザはまた、写真中の人々の名前（８１４）、示されているイベント（８１５）、画像の目的（８１６）、または画像撮影者（８１７）等の他の情報を推論メタデータ８０７に追加することもできる。
【図面の簡単な説明】
【００４２】
【図１】本発明の実施形態による画像メタデータに推論情報を付与するシステムのブロック図である。
【図２】本発明の実施形態を実施するにあたって使用される画像取り込み装置のブロック図である。
【図３】本発明の実施形態と併せて使用することができるフォーマットのグラフィカル画像データとともに取り込まれたメタデータの例示的な一実施形態である。
【図４】本発明の実施形態による、画像メタデータを使用して推論情報を得るシステムである。
【図５】本発明の実施形態の動作の概観を表すフローチャートである。
【図６】本発明の一実施形態において使用される方法を示すフローチャートである。
【図７】本発明の実施形態と併せて使用することができるフォーマットの一連の画像に関して取り込まれたメタデータの例示的な一実施形態である。
【図８】本発明の実施形態と併せて使用するために生成された画像および推論メタデータを含む画像の一例である。
【符号の説明】
【００４３】
１０２  システムバス
１０９  通信インタフェース
１１１  ネットワーク
１１２  メモリ
１１３  オペレーティングシステム
１１４  スキャナソフトウェア
１１５  第１のソフトウェアアプリケーション
１１６  第２のソフトウェアアプリケーション
【図１】
2005149511.tif 000003
【図２】
2005149511.tif 000004
【図３】
2005149511.tif 000005
【図４】
2005149511.tif 000006
【図５】
2005149511.tif 000007
【図６】
2005149511.tif 000008
【図７】
2005149511.tif 000009
【図８】
2005149511.tif 000010