(57)【要約】【課題】画像等のコンテンツをデータベースに登録する際に、多面的で高精度な検索が可能なキーワードを自動的に付与する。【解決手段】タグ生成部２３は、画像入力部２２から入力された画像ファイルを解析して、特徴色、時間情報、位置情報等の特徴を抽出する。ワードテーブル３０は、様々な特徴と、その特徴を表すキーワードとを関連づけて記録しており、キーワード選択部３１は、抽出された特徴に基づいてワードテーブル３０を検索し、該当するキーワードを選択する。関連語取得部２５は、シソーラス２４を検索してキーワードの関連語を検索し、スコア取得部２６はキーワードと関連語の関連度合いを表すスコアを取得する。画像データベース５には、キーワードが記述されたタグ、関連語、スコアが付加された画像ファイルが登録される。【選択図】図３
2008165303.tif 000002
【特許請求の範囲】
【請求項１】
コンテンツを入力するコンテンツ入力手段と、
前記コンテンツの特徴を表すキーワードが記述されたタグを自動的に生成するタグ生成手段と、
語句を意味的類似により分類・配列したシソーラスと、
前記シソーラスを検索して前記キーワードの関連語を取得する関連語取得手段と、
前記シソーラスを用いて前記キーワードに対する前記関連語の関連度合いを表すスコアを取得するスコア取得手段と、
前記コンテンツに、前記タグ、前記関連語及び前記スコアを関連付けて登録するコンテンツデータベースを備えることを特徴とするコンテンツ登録装置。
【請求項２】
前記タグ生成手段は、前記コンテンツ、または前記コンテンツに付加されているメタデータを解析してキーワードとなり得る特徴を抽出する特徴抽出部と、
前記特徴と、キーワードとして用いられる語句とが関連付けられたワードテーブルと、
前記ワードテーブルを検索して前記特徴に該当する語句を選択し、前記タグに記述するキーワード選択部を有することを特徴とする請求項１記載のコンテンツ登録装置。
【請求項３】
前記特徴抽出部は、前記コンテンツが画像であるときに前記画像の特徴色を少なくとも１つ抽出し、
前記ワードテーブルには、前記特徴色と色名とが関連付けて記録されており、
前記キーワード選択部は、前記ワードテーブルを検索して前記特徴色に該当する色名を選択し、前記タグに記述することを特徴とする請求項２記載のコンテンツ登録装置。
【請求項４】
前記タグ生成手段は、前記画像内の物体の種類または形状等を識別する画像識別部と、
前記物体の種類または形状と、物体名または形状名とが関連づけられた物体名テーブルを有し、
前記キーワード選択部は、前記物体名テーブルを検索して前記物体の種類または形状に該当する物体名または形状名を選択し、前記タグに記述することを特徴とする請求項３記載のコンテンツ登録装置。
【請求項５】
前記タグ生成手段は、前記物体名または形状名と、その物体独自の色の名称である独自色名と、前記独自色名に該当する一般的な色名とが関連付けられた色名変換テーブルを有し、
前記キーワード選択部は、前記物体名または形状名、及び前記特徴色の色名に基づいて前記色名変換テーブルを検索し、該当する前記独自色名を選択して前記タグに記述することを特徴とする請求項４記載のコンテンツ登録装置。
【請求項６】
前記タグ生成手段は、複数の色の組み合わせと、前記色の組み合わせから得られる色彩イメージとが関連づけられた色彩イメージテーブルを有し、
前記キーワード選択部は、前記特徴色抽出部によって抽出された複数の特徴色に基づいて前記色彩イメージテーブルを検索し、該当する色彩イメージを選択して前記タグに記述することを特徴とする請求項３記載のコンテンツ登録装置。
【請求項７】
前記特徴抽出部は、前記コンテンツの作成日時等の時間情報を抽出し、
前記ワードテーブルには、日付や時間に関連する語句が記録されており、
前記キーワード選択部は、前記ワードテーブルを検索して前記時間情報に関連する語句を選択し、前記タグに記述することを特徴とする請求項２〜６いずれか記載のコンテンツ登録装置。
【請求項８】
イベントの名称と、前記イベントの予定日時とを入力するイベント入力手段と、
前記イベントの名称と予定日時とを関連づけて記憶するイベント記憶手段とを有するスケジュール管理手段を備え、
前記タグ生成手段は、前記時間情報に基づいてイベント記憶手段を検索し、前記時間情報に該当する予定日時のイベントの名称を前記タグに記述するスケジュール連係部を有することを特徴とする請求項７記載のコンテンツ登録装置。
【請求項９】
前記特徴抽出部は、前記コンテンツの作成場所等の位置情報を抽出し、
前記ワードテーブルには、位置や場所に関連する語句が記録されており、
前記キーワード選択部は、前記ワードテーブルを検索して前記位置情報に関連する語句を選択し、前記タグに記述することを特徴とする請求項２〜８いずれか記載のコンテンツ登録装置。
【請求項１０】
前記シソーラスは、語句が概念の広狭に応じてツリー構造に配列されており、前記スコア取得手段は、前記キーワードと前記関連語との間に存在する語句の数に応じてスコアを付与することを特徴とする請求項１〜９いずれか記載のコンテンツ登録装置。
【請求項１１】
前記キーワードに重み付けを行なう重み付け手段を設けたことを特徴とする請求項１〜１０いずれか記載のコンテンツ登録装置。
【請求項１２】
前記重み付け手段は、コンテンツデータベース内における前記キーワードの存在数に応じて重み付けを行なうことを特徴とする請求項１１記載のコンテンツ登録装置。
【請求項１３】
コンテンツを入力するステップと、
前記コンテンツの特徴を表すキーワードが記述されたタグを自動的に生成するステップと、
語句を意味的類似により分類・配列したシソーラスを検索して前記キーワードの関連語を取得するステップと、
前記シソーラスを用いて前記キーワードに対する前記関連語の関連度合いを表すスコアを取得するステップと、
前記コンテンツに、前記タグ、前記関連語及び前記スコアを関連付けてコンテンツデータベースに登録するステップを備えることを特徴とするコンテンツ登録方法。
【請求項１４】
コンテンツを入力するステップと、
前記コンテンツの特徴を表すキーワードが記述されたタグを自動的に生成するステップと、
語句を意味的類似により分類・配列したシソーラスを検索して前記キーワードの関連語を取得するステップと、
前記シソーラスを用いて前記キーワードに対する前記関連語の関連度合いを表すスコアを取得するステップと、
前記コンテンツに、前記タグ、前記関連語及び前記スコアを関連付けてコンテンツデータベースに登録するステップをコンピュータに実行させることを特徴とするコンテンツ登録プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンテンツ登録装置、及びコンテンツ登録方法、及びコンテンツ登録プログラムに関し、更に詳しくは、コンテンツに検索用のタグを付けて登録するコンテンツ登録装置、及びコンテンツ登録方法、及びコンテンツ登録プログラムに関する。
【背景技術】
【０００２】
従来、画像等のコンテンツを管理するデータベースでは、コンテンツにキーワード等のメタデータを関連付けて記憶しておき、キーワードによって検索することで目的のコンテンツが得られるようにしている。しかし、キーワードの入力は、コンテンツの登録者が行なう必要があるため、コンテンツ数が多くなると作業が煩雑になる。また、登録されるキーワードは登録者の主観、検索に用いられるキーワードは検索者の主観によって選択されるため、登録者と検索者のコンテンツに対する認識が異なる場合、目的とするコンテンツが容易に得られないという問題もある。
【０００３】
上記問題を解決するため、例えば特許文献１記載の発明では、入力画像の部分領域を解析し、その部分の形状、色、大きさ、テクスチャ等から、例えば「木」、「人の顔」などのキーワードを抽出し、画像に関連づけて登録している。また、特許文献２記載の発明では、画像等のコンテンツのメタデータと特徴量とを分けて管理し、新たに入力された画像の特徴量と類似した特徴量を有する画像に付与されているメタデータを入力された新たな画像に付与し、管理している。
【特許文献１】特開平１０−０４９５４２号公報
【特許文献２】特開２００２−２５９４１０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１記載の発明では、キーワードを自動的に抽出することができるので、その抽出方法を理解していればキーワードを類推することができ、検索のヒット率を向上させることができる。しかし、キーワードが画像から抽出されるものだけであるため多面的な検索を行なうことができないという問題がある。
【０００５】
また、特許文献２記載の発明では、予め入力されているメタデータを新たに入力されたコンテンツに流用するため、相当数のコンテンツが蓄積されていないと適切なメタデータの流用を行なうことができず、検索精度が向上しない。
【０００６】
本発明は、上記問題を解決するために、蓄積数が少なくても多面的で、高精度な検索が可能なキーワードを自動的に付与することができるコンテンツ登録装置、及びコンテンツ登録方法、及びコンテンツ登録プログラムを提供する。
【課題を解決するための手段】
【０００７】
上記課題を解決するために本発明のコンテンツ登録装置は、コンテンツを入力するコンテンツ入力手段と、コンテンツの特徴を表すキーワードが記述されたタグを自動的に生成するタグ生成手段と、語句を意味的類似により分類・配列したシソーラスと、シソーラスを検索してキーワードの関連語を取得する関連語取得手段と、シソーラスを用いてキーワードに対する関連語の関連度合いを表すスコアを取得するスコア取得手段と、コンテンツに、タグ、関連語及びスコアを関連付けて登録するコンテンツデータベースとを備えるものである。
【０００８】
また、前記タグ生成手段は、コンテンツまたはコンテンツに付加されているメタデータを解析してキーワードとなり得る特徴を抽出する特徴抽出部と、特徴とキーワードとして用いられる語句とが関連付けられたワードテーブルと、ワードテーブルを検索して特徴に該当する語句を選択し、タグに記述するキーワード選択部を有するものである。
【０００９】
更に、特徴抽出部は、コンテンツが画像であるときに画像の特徴色を少なくとも１つ抽出し、キーワード選択部では、特徴色と色名とが関連付けられたワードテーブルを検索して特徴色に該当する色名を選択し、タグに記述するようにしたものである。
【００１０】
また、タグ生成手段に、画像内の物体の種類または形状等を識別する画像識別部と、物体の種類または形状と、物体名または形状名とが関連づけられた物体名テーブルを設けるとともに、キーワード選択部では、物体名テーブルを検索して物体の種類または形状に該当する物体名または形状名を選択し、タグに記述するようにしたものである。
【００１１】
また、タグ生成手段に、物体名または形状名と、その物体独自の色の名称である独自色名と、独自色名に該当する一般的な色名とが関連付けられた色名変換テーブルを設け、キーワード選択部では、物体名、形状名、特徴色の色名に基づいて色名変換テーブルを検索し、該当する独自色名を選択してタグに記述するようにしたものである。
【００１２】
また、タグ生成手段に、複数の色の組み合わせと、色の組み合わせから得られる色彩イメージとが関連づけられた色彩イメージテーブルを設け、キーワード選択部では、特徴色抽出部によって抽出された複数の特徴色に基づいて色彩イメージテーブルを検索し、該当する色彩イメージを選択してタグに記述するようにしたものである。
【００１３】
また、特徴抽出部は、コンテンツの作成日時等の時間情報を抽出し、キーワード選択部では、日付や時間に関連する語句が記録されたワードテーブルを検索して時間情報に関連する語句を選択し、タグに記述するようにしたものである。
【００１４】
また、イベントの名称と、イベントの予定日時とを入力するイベント入力手段と、イベントの名称と予定日時とを関連づけて記憶するイベント記憶手段とを有するスケジュール管理手段を設け、タグ生成手段には、時間情報に基づいてイベント記憶手段を検索し、時間情報に該当する予定日時のイベントの名称をタグに記述するスケジュール連係部を設けたものである。
【００１５】
また、特徴抽出部は、コンテンツの作成場所等の位置情報を抽出し、ワードテーブルには、位置や場所に関連する語句を記録し、キーワード選択部では、ワードテーブルを検索して位置情報に関連する語句を選択し、タグに記述するようにしたものである。
【００１６】
また、シソーラスは、概念の広狭に応じて語句がツリー構造に配列されており、スコア取得手段は、キーワードと関連語との間に存在する語句の数に応じてスコアを付与するようにしたものである。
【００１７】
また、キーワードに重み付けを行なう重み付け手段を設けてもよい。この重み付け手段としては、コンテンツデータベース内におけるキーワードの存在数に応じて重み付けを行なうことが好ましい。
【００１８】
また、本発明のコンテンツ登録方法は、コンテンツを入力するステップと、コンテンツの特徴を表すキーワードが記述されたタグを自動的に生成するステップと、語句を意味的類似により分類・配列したシソーラスを検索してキーワードの関連語を取得するステップと、シソーラスを用いてキーワードに対する関連語の関連度合いを表すスコアを取得するステップと、コンテンツに、タグ、関連語及びスコアを関連付けてコンテンツデータベースに登録するステップとを含むものである。
【００１９】
また、本発明のコンテンツ登録プログラムは、コンテンツを入力するステップと、コンテンツの特徴を表すキーワードが記述されたタグを自動的に生成するステップと、語句を意味的類似により分類・配列したシソーラスを検索してキーワードの関連語を取得するステップと、シソーラスを用いてキーワードに対する関連語の関連度合いを表すスコアを取得するステップと、コンテンツに、タグ、関連語及びスコアを関連付けてコンテンツデータベースに登録するステップとをコンピュータに実行させるようにしたものである。
【発明の効果】
【００２０】
本発明によれば、コンテンツ登録時に自動的にキーワードを付与するので、コンテンツ登録時の手間を省くことができる。また、予め決められた規則に従ってキーワードが選択されるので、登録者と検索者との主観の違いによるキーワードの相違が発生しないため、検索精度、ヒット率を向上させることができる。
【００２１】
また、キーワードとともに関連語を自動的に選択して登録するので、曖昧なキーワードでも検索が可能となり、多面的な検索を行なうことができる。更に、関連語のスコアや、キーワードの重みも登録されるので、キーワードと関連語との関連度合い、キーワードの重要度等に基づいて高精度な検索を行なうことができる。
【００２２】
キーワードは、コンテンツから抽出される特徴色、時間情報、位置情報、画層識別による物体の種類、形状、製品独自の独自色名、色の組み合わせによる色彩イメージ等、多種多用な特徴から導き出されるので、多面的な検索を行なうことができる。更に、スケジュール管理手段に記録されたイベント名をキーワードにすることもできるので、ユーザーの個人情報に則した検索も行なうことができる。
【発明を実施するための最良の形態】
【００２３】
図１に示す画像管理装置２は、画像データベースへの画像の登録に本発明のコンテンツ登録装置を用いている。画像管理装置２は、各部を制御するＣＰＵ３、画像管理プログラム４及び画像データベース５等を記憶するハードディスクドライブ（ＨＤＤ）６、ＨＤＤ６からプログラムやデータがロードされるＲＡＭ７、各種操作に用いるキーボード８及びマウス９、画像管理用のグラフィックユーザインタフェース（ＧＵＩ）を表示するモニタ１０、モニタ１０にＧＵＩや画像を出力する表示制御部１１、スキャナ等の画像入力装置１２や、デジタルカメラ１３等の外部機器から画像を入力するＩ／Ｏインタフェース１４等を備えている。なお、画像管理装置２にネットワークアダプタ等を接続し、ネットワーク経由で画像を入力することもできる。
【００２４】
図２（Ａ）に示すように、ＤＣＦ（Design rule for Camera File system）規格に準拠するデジタルカメラで生成された画像ファイル１７は、画像データ１８とＥＸＩＦデータ１９から構成されている。ＥＸＩＦデータ１９には、撮影日時の他、シャッタ速度、絞り、感度等の撮影条件、撮影機種名等の情報が記録されている。また、ＧＰＳ（Global Positioning System ）機能を備えたデジタルカメラで生成された画像ファイル１７のＥＸＩＦデータ１９には、撮影場所の緯度、経度等の撮影位置情報も記録される。
【００２５】
ＣＰＵ３は、画像管理プログラム４に基づいて動作することにより、図３に示す画像登録部２１として動作する。画像登録部２１は、画像入力部２２、タグ生成部２３、シソーラス２４、関連語取得部２５、スコア取得部２６を有し、画像データベース５に画像の登録を行なう。画像入力部２２は、Ｉ／Ｏインタフェース１４等から画像ファイルを受け付け、タグ生成部２３及び画像データベース５に入力する。
【００２６】
タグ生成部２３は、特徴抽出部２９、ワードテーブル３０、キーワード選択部３１から構成されている。タグ生成部２３は、図２（Ｂ）に示す解析後画像ファイル３４のように、データ検索用のタグ３５を生成して画像データ１８に付加する。
【００２７】
特徴抽出部２９は、入力された画像ファイル１７を解析してキーワードになり得る特徴を抽出する。例えば、特徴抽出部２９は、画像データ１８から画像の特徴色を抽出し、ＥＸＩＦデータ１９から撮影日時等の時間情報や、緯度及び経度等の位置情報を取得する。特徴色の抽出は、例えば、最も画素数の多い色、最も密度の高い色等を選択する。また、特開平１０−１４３６７０号公報に記載の発明のように、色見の出現頻度等に基づいて特徴色を抽出してもよい。なお、特徴色は１色に限定されず、複数の特徴色を抽出してもよい。
【００２８】
ワードテーブル３０には、特徴抽出部２９によって抽出された特徴と、キーワードとして用いられる語句とが関連付けて記録されている。図４に示すように、ワードテーブル３０には、例えば特徴色テーブル４０、時間情報テーブル４１、位置情報テーブル４２等が設けられている。特徴色テーブル４０には、赤色、緑色、青色の配分を００〜ＦＦの１６進数で記述したＲＧＢ値と、その色名とが関連づけて記録されている。この特徴色テーブル４０には、例えば、ＨＴＭＬ文書の作成で用いられているＮｅｔｓｃａｐｅ色パレットや、ＨＴＭＬ３．２の基本１６色パレット等を用いてもよい。また、時間情報テーブル４１には、日付や時間に対応する季節、祝日、時間帯等の語句が、位置情報テーブル４２には、緯度及び経度に対応する都市名や国名、ランドマーク名等が記録されている。
【００２９】
キーワード選択部３１は、特徴抽出部２９から入力された特徴色、時間情報、位置情報に基づいてワードテーブル３０を検索し、該当する語句を選択する。そして、その語句がキーワードとして記述されたタグ３５を生成し、関連語取得部２５に入力する。
【００３０】
関連語取得部２５は、タグ３５に記述されているキーワードに関連する関連語をシソーラス２４から検索し、スコア取得部２６に入力する。シソーラス２４は、語句を意味的類似により分類・配列したもので、各語句は、その意味の広狭に応じてツリー状に配列されている。図５に示すように、例えば、キーワードが「Ｒｅｄ」であるとき、この語句は「色名」、「赤」という語句の下に配置されており、「Ｒｅｄ」と同レベルには、「赤」に関連する語句として「紅」、「朱」等の語句が配置されている。また、「Ｒｅｄ」には、「Ｐｉｎｋ」，「Ｏｒａｎｇｅ」等の類似する色名も関連づけて記録されている。
【００３１】
関連語取得部２５で選択された関連語は、図２（Ｂ）に示すように、解析後画像ファイル３４に関連語データ３６として付加される。なお、関連語として取得する範囲は、特に限定されるものではなく、関連語データ３６の記録領域等に応じて適宜設定することができる。
【００３２】
スコア取得部２６は、シソーラス２４を用いてキーワードに対する関連語の関連度合いを表すスコアを取得する。図５に示すように、例えば、キーワードが「Ｒｅｄ」、関連語が「Ｐｉｎｋ」であるとき、２つのノード間の距離である「１」をスコアとして取得する。また、「紅」が関連語であるときには、スコアは「２」となる。スコア取得部２６で選択されたスコアは、図２（Ｂ）に示すように、解析後画像ファイル３４にスコアデータ３７として付加される。なお、スコアの取得方法としては、ノード間の距離以外に、階層が異なるごとにスコアを変化させる等、その他の取得方法、計算方法を用いることもできる。
【００３３】
次に、上記実施形態の作用について、図６及び７のフローチャートを参照しながら説明する。ＣＰＵ３は、画像管理プログラム４に基づいて画像入力部２２、タグ生成部２３、シソーラス２４、関連語取得部２５、スコア取得部２として動作する。画像入力部２２は、Ｉ／Ｏインタフェース１４等から画像ファイル１７を受け付け、タグ生成部２３に入力する。
【００３４】
特徴抽出部２９は、画像ファイル１７の画像データ１８から特徴色を抽出し、ＥＸＩＦデータ１９から撮影時間等の時間情報、撮影位置等位置情報を抽出する。キーワード選択部３１は、特徴抽出部２９で抽出された特徴に基づいてワードテーブル３０を検索し、特徴に該当するキーワードを選択する。
【００３５】
例えば、画像データ１８の特徴的な色が「赤」であるとき、特徴色テーブル４０から色名「Ｒｅｄ」が選択される。また、時間情報が「１月１日」であるとき、時間情報テーブル４１から「睦月」や「元日」等のキーワードが選択される。更に、位置情報の緯度、経度に基づいて、位置情報テーブル４２から「札幌市」等の都市名が選択される。キーワード選択部３１は、選択したキーワードが記述されたタグを生成し、関連語取得部２５に入力する。
【００３６】
関連語取得部２５は、入力されたタグのキーワードに基づいてシソーラス２４を検索し、関連語を選択する。例えば、キーワード「Ｒｅｄ」からは、「赤」、「紅」、「朱」等の関連語や、「Ｐｉｎｋ」や「Ｏｒａｎｇｅ」等の類似する色名が選択される。同様に、「睦月」、「元日」等のキーワードからは、「元旦」、「新春」、「正月」等の関連語が、「札幌市」からは「北海道」、「道央」等の関連語がそれぞれ選択される。この関連語とタグは、スコア取得部２６に入力される。
【００３７】
スコア取得部２６は、シソーラス２４を用いてキーワードに対する関連語の関連度合いを表すスコアを取得する。このスコアは、キーワードと関連語とのノード間の距離を用いるため、例えば、キーワード「Ｒｅｄ」に対する関連語「赤」のスコアが「１」となり、「紅」のスコアは「２」となる。このスコアは、タグ、関連語とともに画像データベース５に入力される。
【００３８】
画像データベース５は、画像入力部２２から入力された画像ファイル１７にタグ、関連語、スコアを付加して解析後画像ファイル３４を生成し、これを所定の記憶領域に記憶する。
【００３９】
以上のように、入力画像の特徴を表すキーワードが自動的に付与されるので、従来の画像データベースのように、画像登録時に登録者がキーワードを入力する必要がなく、簡単に画像登録を行なうことができる。また、予め決められている規則にしたがってキーワードが選択されるので、キーワードの類推が容易になり、精度、ヒット率が向上する。また、木ワードだけでなく関連語でも検索を行なうことができるので、多面的な画像検索を行なうことができる。更に、スコアによる重み付けを行なって検索結果を出力すれば、より精度の高い画像検索を行なうことができる。
【００４０】
なお、上記実施形態では、画像データ１８から特徴色を抽出したが、画像内の物体の種類や形状等を識別してキーワードにしてもよい。例えば、図８に示すように、タグ生成部２３に画像データ１８内の物体や形状の識別を行なう画像識別部５０と、物体の種類や形状と、物体名、形状名等が関連づけて記録された物体名テーブル５１とを設ける。そして、図９のフローチャートに示すように、特徴抽出部２９での特徴抽出の前後、または特徴抽出と並行して画像識別部５０で画像識別を行ない、キーワード選択部３１でワードテーブル３０とともに物体名テーブル５１を検索し、該当する物体名を選択してタグに記述する。これにより、画像内の物体名や形状名でも画像検索を行なうことができる。
【００４１】
また、各種製品では、その製品のイメージに合せて独自の色名を用いていることがあり、この独自色名を用いて画像検索を行なえるようにすることもできる。例えば、図１０に示すように、タグ生成部２３に、物体名または形状名と、その物体独自の色の名称である独自色名と、独自色名に該当する一般的な色名とが関連付けられた色名変換テーブル５４を設ける。そして、図１１のフローチャートに示すように、キーワード選択部３１により、特徴色の色名、物体名または形状名等を用いて色名変換テーブル５４を検索し、その製品独自の独自色名を選択してタグに記述する。これによれば、より多面的な画像検索を行なうことができる。
【００４２】
また、画像管理プログラム４を汎用のパーソナルコンピュータ（ＰＣ）上で動作させることが考えられる。更に、ＰＣにスケジュール管理プログラムをインストールしてスケジュールを管理することも一般的であり、スケジュール管理プログラムに入力されているスケジュールを画像管理に利用することも考えられる。
【００４３】
図１２に示すように、例えば、イベント名を入力するイベント入力部５７と、イベント名と予定日時とを関連付けて記憶するイベント記憶部５８とを有するスケジュール管理プログラムがＰＣにインストールされている場合、タグ生成部２３に、特徴抽出部２９で抽出した時間情報に基づいてイベント記憶部を検索し、時間情報に該当する予定日時のイベント名をキーワードとして取得するスケジュール連係部６０を設ける。そして、図１３のフローチャートに示すように、スケジュール連係部で取得されたイベント名はキーワード選択部に入力し、他のキーワードとともにタグに記述する。これにより、より多面的な画像検索を行なうことができる。
【００４４】
また、複数の色の組み合わせから様々な色彩イメージが得られることが知られている。例えば、明度の低い赤系と青系を中心にした配色では、「格調高い」というイメージを得ることができ、中明度のグレイ系統の色を中心とした配色では、「ナチュラル」または「エコロジカル」等イメージを得ることができる。この色彩イメージを画像検索に用いることもできる。
【００４５】
図１４に示すように、例えば、複数の色の組み合わせと、その組み合わせから連想される色彩イメージを関連づけて記録した色彩イメージテーブル６３をタグ生成部２３に設ける。そして、図１５のフローチャートに示すように、キーワード選択部３１により、特徴抽出部２９で抽出された複数の特徴色に基づいて該当する色彩イメージを検索し、選択した色彩イメージをタグに記述する。これによれば、画像の持つイメージから画像検索を行なうことができ、より多面的な画像検索が可能となる。
【００４６】
また、キーワードに重み付けを行なってもよい。図１６に示すように、例えば、タグ生成部２３に、キーワード選択部３１で選択されたキーワードに重み付けを行なう重み付け部６６を設け、キーワードとともにその重みもタグに記述する。図１７のフローチャートに示すように、重み付け部６６は、画像データベース５内における該当キーワードの数を検索し、その検索結果に応じて重みを変更する。例えば、画像データベース５内に多数記憶されているキーワードの重みを重くしたり、逆に少ないキーワードの重みを重くする。
【００４７】
そして、画像検索結果の表示では、重みの大きなキーワードを有する画像ほど上位に表示する。これによれば、その画像の重要度が検索結果に反映されることになるので、より多面的な画像検索を行なうことができる。なお、画像データベース５内のキーワードの数によって重み付けを行なう場合、画像の登録ごとに重みが変動することになる。そのため、画像登録時に全キーワードの重みを再評価するのが好ましい。なお、キーワードの重みは、関連語のスコアとは別に記録されるが、何らかの計算手法を用いて重みとスコアとを結合してもよい。
【００４８】
上記実施形態では、画像管理装置を例に説明したが、デジタルカメラやプリンタ等、画像を扱う装置に付加してもよい。また、画像だけではなく、音声データ等、その他の形式のデータを合せて管理するコンテンツ管理装置に用いることもできる。
【図面の簡単な説明】
【００４９】
【図１】本発明を実施した画像管理装置の構成を示すブロック図である。
【図２】画像管理装置に入力される画像ファイルと登録時の画像ファイルの構成を示す説明図である。
【図３】画像登録部の機能的構成を示す機能ブロック図である。
【図４】ワードテーブルの一例を示す説明図である。
【図５】シソーラスの一部を示す説明図である。
【図６】画像登録の手順を示すフローチャートである。
【図７】タグ生成の手順を示すフローチャートである。
【図８】物体形状等の画像識別機能を備えたタグ生成部の構成を示す機能ブロック図である。
【図９】物体名等を取得する手順を示すフローチャートである。
【図１０】製品固有の独自色名を取得する機能を備えたタグ生成部の構成を示す機能ブロック図である。
【図１１】独自色名を取得する手順を示すフローチャートである。
【図１２】スケジュール管理プログラムからイベント名を取得する機能を備えたタグ生成部の構成を示す機能ブロック図である。
【図１３】イベント名を取得する手順を示すフローチャートである。
【図１４】複数の特徴色から色彩イメージを取得する機能を備えたタグ生成部の構成を示す機能ブロック図である。
【図１５】色彩イメージを取得する手順を示すフローチャートである。
【図１６】キーワードに重み付けを行なう機能を備えたタグ生成部の構成を示す機能ブロック図である。
【図１７】キーワードに重み付けを行なう手順を示すフローチャートである。
【符号の説明】
【００５０】
２  画像管理装置
４  画像登録プログラム
５  画像データベース
１７  画像ファイル
１８  画像データ
１９  ＥＸＩＦデータ
２１  画像登録部
２２  画像入力部
２３  タグ生成部
２４  シソーラス
２５  関連語取得部
２６  スコア取得部
２９  特徴抽出部
３０  ワードテーブル
３１  キーワード選択部
３５  タグ
３６  関連語データ
３７  スコアデータ
４０  特徴色テーブル
４１  時間情報テーブル
４２  位置情報テーブル
５０  画像識別部
５１  物体名テーブル
５４  色名変換テーブル
５９  スケジュール管理プログラム
５７  イベント入力部
５８  イベント記憶部
６０  スケジュール連係部
６３  色彩イメージテーブル
６６  重み付け部
【図１】
2008165303.tif 000003
【図２】
2008165303.tif 000004
【図３】
2008165303.tif 000005
【図４】
2008165303.tif 000006
【図５】
2008165303.tif 000007
【図６】
2008165303.tif 000008
【図７】
2008165303.tif 000009
【図８】
2008165303.tif 000010
【図９】
2008165303.tif 000011
【図１０】
2008165303.tif 000012
【図１１】
2008165303.tif 000013
【図１２】
2008165303.tif 000014
【図１３】
2008165303.tif 000015
【図１４】
2008165303.tif 000016
【図１５】
2008165303.tif 000017
【図１６】
2008165303.tif 000018
【図１７】
2008165303.tif 000019