(57)【要約】【課題】より広い範囲の画像データに適用可能な画像検索装置を提供すること。【解決手段】複数の画像データを蓄積する画像データ蓄積部１１と、画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの配色感覚言語データに対応する配色パターンデータに基づいて算出され、画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部１３と、配色感覚言語データを入力するための配色感覚言語データ入力部１２と、配色感覚言語データが入力された際、配色感覚言語データに対するそれぞれの画像データに紐付けられた配色感覚点数データに基づいて、画像データ蓄積部１１に蓄積された画像データを抽出する画像データ抽出部１４とを備えた、画像検索装置である。【選択図】図１
2012108721.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの前記配色感覚言語データに対応する配色パターンデータに基づいて算出され、前記画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部と、
前記配色感覚言語データを入力するための配色感覚言語データ入力部と、
前記配色感覚言語データが入力された際、前記配色感覚言語データに対するそれぞれの前記画像データに紐付けられた前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置。
【請求項２】
請求項１記載の画像検索装置の前記配色感覚点数データ蓄積部のデータベースを作成するデータベース作成装置であって、
複数の前記配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部と、
画像データを入力する画像データ入力部と、
入力された前記画像データについて、それぞれの前記配色感覚言語データに対して、それぞれの前記配色パターンデータに基づいて前記配色感覚点数データを算出する蓄積用配色感覚点数データ算出部とを備えた、データベース作成装置。
【請求項３】
複数の画像データを蓄積する画像データ蓄積部と、
複数の、配色に関連する感覚的な配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部と、
前記配色感覚言語データを入力するための配色感覚言語データ入力部と、
前記配色感覚言語データが入力された際、その配色感覚言語データの前記配色パターンデータに基づいて、それぞれの前記画像データの配色感覚点数データを算出する配色感覚点数データ算出部と、
それぞれの前記画像データの前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置。
【請求項４】
前記配色パターンデータとは、前記配色感覚言語データに対応する配色を構成する複数の色と、前記複数の色の配色比率のデータである、請求項１又は３記載の画像検索装置。
【請求項５】
前記配色感覚点数データは、
前記配色感覚言語データに対応する配色を構成する複数の色について、各々の色を基準として、その色と同色とみなす色範囲内に、前記画像データを形成する色が含まれている割合が点数化されて算出される、請求項１又は３記載の画像検索装置。
【請求項６】
前記色範囲とは、
２色間の距離が知覚的な色差に比例するL*a*b*表色系又はL*C*h表色系の均等色空間において、
L*a*b*表色系の色差を用いて設定された、前記配色感覚言語データに対応した配色パターンデータを構成する複数の各色と同色とみなす範囲を、立体で表現したL*a*b*表色系又はL*C*h表色系等に反映した球状空間内のことである、請求項５記載の画像検索装置。
【請求項７】
前記配色感覚点数データは、
前記画像データの１ピクセル毎に、そのピクセルに含まれる色が、前記色範囲内に含まれているか否かが判断され、含まれている場合に点数が加算されることによって、前記配色を構成する複数の色の各々の点数が算出され、算出されたそれぞれの点数が合計されて求められる、請求項５記載の画像検索装置。
【請求項８】
前記配色感覚点数データは、
前記各々の色の点数の上限が、対応する前記配色感覚言語データの配色比率となるようにして求められる、請求項７記載の画像検索装置。
【請求項９】
前記配色感覚点数データは、
前記画像データの１ピクセルに含まれる色が、前記色範囲内に含まれている場合であっても、前記基準とする色との色差が大きい程加算する点数を小さくして計算される、請求項７記載の画像検索装置。
【請求項１０】
前記複数の色とは、前記配色パターンデータに対応する画像データに対して設定された複数の配色領域のそれぞれについて、ＲＧＢ値に基づいて算出された平均色である、請求項４記載の画像検索装置。
【請求項１１】
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、色調に関連する感覚的な色調感覚言語データに対して、それぞれの前記色調感覚言語データに対応する色調パターンデータに基づいて算出され、前記画像データに紐付けられた色調感覚点数データを蓄積する色調感覚点数データ蓄積部と、
前記色調感覚言語データを入力するための色調感覚言語データ入力部と、
前記色調感覚言語データが入力された際、前記色調感覚言語データに対するそれぞれの前記画像データに紐付けられた前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置。
【請求項１２】
請求項１１記載の画像検索装置の前記色調感覚点数データ蓄積部のデータベースを作成するデータベース作成装置であって、
複数の前記色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部と、
画像データを入力する画像データ入力部と、
入力された前記画像データについて、それぞれの前記色調感覚言語データに対して、それぞれの前記色調パターンデータに基づいて前記色調感覚点数データを算出する蓄積用色調感覚点数データ算出部とを備えた、データベース作成装置。
【請求項１３】
複数の画像データを蓄積する画像データ蓄積部と、
複数の、色調に関連する感覚的な色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部と、
前記色調感覚言語データを入力するための色調感覚言語データ入力部と、
前記色調感覚言語データが入力された際、その色調感覚言語データの前記色調パターンデータに基づいて、それぞれの前記画像データの色調感覚点数データを算出する色調感覚点数データ算出部と、
それぞれの前記画像データの前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置。
【請求項１４】
前記色調パターンデータとは、前記色調感覚言語データに対応する色調と、前記色調を基準として、その色調と同じ色調とみなす色調範囲のデータである、請求項１１又は１３記載の画像検索装置。
【請求項１５】
前記色調感覚点数データは、
前記画像データを形成する色調が、前記色調感覚言語データに対応する色調範囲内に含まれる割合が点数化されて算出される、請求項１４記載の画像検索装置。
【請求項１６】
前記色調感覚点数データは、
前記画像データの１ピクセル毎に、そのピクセルに含まれる色調が前記色調範囲内に含まれているか否かが判断され、含まれている場合に点数が加算されて算出される、請求項１５記載の画像検索装置。
【請求項１７】
前記色調感覚点数データは、
前記画像データの１ピクセルに含まれている色調が、前記色調範囲内に含まれている場合であっても、前記基準とする色調との差が大きい程加算する点数が小さくなるようにして算出される、請求項１６記載の画像検索装置。
【請求項１８】
前記色調とは、明度及び彩度であり、
前記色調範囲とは、
色相、明度及び彩度の色の３属性によって形成され、前記色相を一定とした場合に前記明度及び前記彩度の面が形成される色空間において、
いずれかの前記明度及び前記彩度の面内でL*a*b*表色系の色差を用いて設定された、前記色調感覚言語データに対応した色調と同じ色調とみなす範囲を、前記色相を含めた立体に反映したリング状空間内のことである、請求項１４記載の画像検索装置。
【請求項１９】
前記色空間とは、マンセル、L*C*h、ＨＳＶ、及びＨＬSのうちのいずれかから選択された空間である、請求項１８記載の画像検索装置。
【請求項２０】
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの前記配色感覚言語データに対応する配色パターンデータに基づいて算出され、前記画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記配色感覚言語データを入力するための配色感覚言語データ入力ステップと、
前記配色感覚言語データが入力された際、前記配色感覚言語データに対するそれぞれの前記画像データに紐付けられた前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法。
【請求項２１】
複数の画像データを蓄積する画像データ蓄積部と、
複数の、配色に関連する感覚的な配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記配色感覚言語データを入力するための配色感覚言語データ入力ステップと、
前記配色感覚言語データが入力された際、その配色感覚言語データについて、対応する前記配色パターンデータに基づいて、それぞれの前記画像データの配色感覚点数データを算出する配色感覚点数データ算出ステップと、
それぞれの前記画像データの前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法。
【請求項２２】
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、色調に関連する感覚的な色調感覚言語データに対して、それぞれの前記色調感覚言語データに対応する色調パターンデータに基づいて算出され、前記画像データに紐付けられた色調感覚点数データを蓄積する色調感覚点数データ蓄積部とを備えた画像検索装置を用いた画像検索方法であって、
前記色調感覚言語データを入力するための色調感覚言語データ入力ステップと、
前記色調感覚言語データが入力された際、前記色調感覚言語データに対するそれぞれの前記画像データに紐付けられた前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法。
【請求項２３】
複数の画像データを蓄積する画像データ蓄積部と、
複数の、色調に関連する感覚的な色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記色調感覚言語データを入力するための色調感覚言語データ入力ステップと、
前記色調感覚言語データが入力された際、その色調感覚言語データの前記色調パターンデータに基づいて、それぞれの前記画像データの色調感覚点数データを算出する色調感覚点数データ算出ステップと、
それぞれの前記画像データの前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法。
【請求項２４】
請求項２０から２３のいずれかの画像検索方法の前記各ステップをコンピュータに実行させるプログラム。
【請求項２５】
請求項２４記載のプログラムを記録した記録媒体であって、コンピュータにより処理可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像検索装置、及び画像検索方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタル画像処理ソフトの普及により、個人若しくは企業のコンピュータハードディスクやインターネット上のハードディスクに写真、デザイン画像などの画像データが大量に蓄積されている。
【０００３】
このような大量に蓄積されている画像データから、感性語を用いて目的の画像の検索を行う方法が提示されている。
【０００４】
例えば、あらかじめ被写体の持つ印象を表す感性語を付与しておき、画像から被写体を識別したときには、対応する感性語を自動付与させることで、感性語による検索を実現しているものがある（例えば、特許文献１参照）。
【０００５】
また、既存にある感性語と対応した配色パターンのデータベースを利用して、配色パターンと画像から抽出した代表色との近似を計算し、感性語による画像検索を実現しているものもある（例えば、非特許文献1、２参照。）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００４−５５３４号公報
【非特許文献】
【０００７】
【非特許文献１】木本晴夫「感性語による画像検索とその精度評価」情報処理学会論文誌、1999
【非特許文献２】小林重順、日本カラーデザイン研究所編「カラーイメージスケール改訂版」講談社、2000
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかし、特許文献１の画像検索装置では、被写体「山林」に対して「すがすがしい」といった感性語キーワードが対応付けられており、被写体の持つ印象が明確である場合に限られ、模様のようなデザイン素材の場合、感性語が抽出できないため、より広い範囲の画像データに適用出来ず検索性能が不十分であった。
【０００９】
また、通常、JIS Z 8721（物体色の色名）における系統色においては、「明るい」「つよい」「こい」「うすい」「やわらかい」「くすんだ」と言った色彩にもっとも関係の深い形容詞（感性語）は、「有彩色の明度及び彩度に関する修飾語」（それらの色の範囲は色調、もしくはトーンと呼ぶ）に対応させており、JISが参考にした全米色彩協議会（Inter-Society CoorCouncil、ISCC）と米国標準局（National Beureau of Standards、NBS）によるISCC-NBS色名法においても同様である。
【００１０】
しかしながら、従来、非特許文献２のように、感性語と配色パターンが対応されているが画像検索は行われておらず、非特許文献１は、非特許文献２の感性語と配色パターンを用いて画像検索が行われているが、配色比率は含まれていなかった。また、予め色彩の専門家によって決められた感性語と配色パターンを用いることを前提としており、新たな組み合わせを作成することができなかった。さらに、感性語と色調を用いた検索は行われていなかった。
【００１１】
本発明は、上記従来の画像検索装置を考慮して、より広い範囲の画像データに適用可能な画像検索装置、そのデータベース作成装置、及び画像検索方法を提供することを目的とする。
【００１２】
又、本発明は、上記従来の画像検索装置の課題を考慮して、色調を用いた画像検索装置、そのデータベース作成装置、及び画像検索方法を提供することを目的とする。
【課題を解決するための手段】
【００１３】
上記目的を達成するために、第１の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの前記配色感覚言語データに対応する配色パターンデータに基づいて算出され、前記画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部と、
前記配色感覚言語データを入力するための配色感覚言語データ入力部と、
前記配色感覚言語データが入力された際、前記配色感覚言語データに対するそれぞれの前記画像データに紐付けられた前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。
【００１４】
第２の本発明は、
第１の本発明の画像検索装置の前記配色感覚点数データ蓄積部のデータベースを作成するデータベース作成装置であって、
複数の前記配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部と、
画像データを入力する画像データ入力部と、
入力された前記画像データについて、それぞれの前記配色感覚言語データに対して、それぞれの前記配色パターンデータに基づいて前記配色感覚点数データを算出する蓄積用配色感覚点数データ算出部とを備えた、データベース作成装置である。
【００１５】
第３の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、配色に関連する感覚的な配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部と、
前記配色感覚言語データを入力するための配色感覚言語データ入力部と、
前記配色感覚言語データが入力された際、その配色感覚言語データの前記配色パターンデータに基づいて、それぞれの前記画像データの配色感覚点数データを算出する配色感覚点数データ算出部と、
それぞれの前記画像データの前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。
【００１６】
第４の本発明は、
前記配色パターンデータとは、前記配色感覚言語データに対応する配色を構成する複数の色と、前記複数の色の配色比率のデータである、第１又は３の本発明の画像検索装置である。
【００１７】
第５の本発明は、
前記配色感覚点数データは、
前記配色感覚言語データに対応する配色を構成する複数の色について、各々の色を基準として、その色と同色とみなす色範囲内に、前記画像データを形成する色が含まれている割合が点数化されて算出される、第１又は３の本発明の画像検索装置である。
【００１８】
第６の本発明は、
前記色範囲とは、
２色間の距離が知覚的な色差に比例するL*a*b*表色系又はL*C*ｈ表色系の均等色空間において、
L*a*b*表色系の色差を用いて設定された、前記配色感覚言語データに対応した配色パターンデータを構成する複数の各色と同色とみなす範囲を、立体で表現したL*a*b*表色系又はL*C*ｈ表色系等に反映した球状空間内のことである、第５の本発明の画像検索装置である。
【００１９】
第７の本発明は、
前記配色感覚点数データは、
前記画像データの１ピクセル毎に、そのピクセルに含まれる色が、前記色範囲内に含まれているか否かが判断され、含まれている場合に点数が加算されることによって、前記配色を構成する複数の色の各々の点数が算出され、算出されたそれぞれの点数が合計されて求められる、第５の本発明の画像検索装置である。
【００２０】
第８の本発明は、
前記配色感覚点数データは、
前記各々の色の点数の上限が、対応する前記配色感覚言語データの配色比率となるようにして求められる、第７の本発明の画像検索装置である。
【００２１】
第９の本発明は、
前記配色感覚点数データは、
前記画像データの１ピクセルに含まれる色が、前記色範囲内に含まれている場合であっても、前記基準とする色との色差が大きい程加算する点数を小さくして計算される、第７の本発明の画像検索装置である。
【００２２】
第１０の本発明は、
前記複数の色とは、前記配色パターンデータに対応する画像データに対して設定された複数の配色領域のそれぞれについて、ＲＧＢ値に基づいて算出された平均色である、第４の本発明の画像検索装置である。
【００２３】
第１１の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、色調に関連する感覚的な色調感覚言語データに対して、それぞれの前記色調感覚言語データに対応する色調パターンデータに基づいて算出され、前記画像データに紐付けられた色調感覚点数データを蓄積する色調感覚点数データ蓄積部と、
前記色調感覚言語データを入力するための色調感覚言語データ入力部と、
前記色調感覚言語データが入力された際、前記色調感覚言語データに対するそれぞれの前記画像データに紐付けられた前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。
【００２４】
第１２の本発明は、
第１１の本発明の画像検索装置の前記色調感覚点数データ蓄積部のデータベースを作成するデータベース作成装置であって、
複数の前記色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部と、
画像データを入力する画像データ入力部と、
入力された前記画像データについて、それぞれの前記色調感覚言語データに対して、それぞれの前記色調パターンデータに基づいて前記色調感覚点数データを算出する蓄積用色調感覚点数データ算出部とを備えた、データベース作成装置である。
【００２５】
第１３の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、色調に関連する感覚的な色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部と、
前記色調感覚言語データを入力するための色調感覚言語データ入力部と、
前記色調感覚言語データが入力された際、その色調感覚言語データの前記色調パターンデータに基づいて、それぞれの前記画像データの色調感覚点数データを算出する色調感覚点数データ算出部と、
それぞれの前記画像データの前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出部とを備えた、画像検索装置である。
【００２６】
第１４の本発明は、
前記色調パターンデータとは、前記色調感覚言語データに対応する色調と、前記色調を基準として、その色調と同じ色調とみなす色調範囲のデータである、第１１又は１３の本発明の画像検索装置である。
【００２７】
第１５の本発明は、
前記色調感覚点数データは、
前記画像データを形成する色調が、前記色調感覚言語データに対応する色調範囲内に含まれる割合が点数化されて算出される、第１４の本発明の画像検索装置である。
【００２８】
第１６の本発明は、
前記色調感覚点数データは、
前記画像データの１ピクセル毎に、そのピクセルに含まれる色調が前記色調範囲内に含まれているか否かが判断され、含まれている場合に点数が加算されて算出される、第１５の本発明の画像検索装置である。
【００２９】
第１７の本発明は、
前記色調感覚点数データは、
前記画像データの１ピクセルに含まれている色調が、前記色調範囲内に含まれている場合であっても、前記基準とする色調との差が大きい程加算する点数が小さくなるようにして算出される、第１６の本発明の画像検索装置である。
【００３０】
第１８の本発明は、
前記色調とは、明度及び彩度であり、
前記色調範囲とは、
色相、明度及び彩度の色の３属性によって形成され、前記色相を一定とした場合に前記明度及び前記彩度の面が形成される色空間において、
いずれかの前記明度及び前記彩度の面内でL*a*b*表色系の色差を用いて設定された、前記色調感覚言語データに対応した色調と同じ色調とみなす範囲を、前記色相を含めた立体に反映したリング状空間内のことである、第１４の本発明の画像検索装置である。
【００３１】
第１９の本発明は、
前記色空間とは、マンセル、L*C*h、ＨＳＶ、及びＨＬSのうちのいずれかから選択された空間である、第１８の本発明の画像検索装置である。
【００３２】
第２０の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、配色に関連する感覚的な配色感覚言語データに対して、それぞれの前記配色感覚言語データに対応する配色パターンデータに基づいて算出され、前記画像データに紐付けられた配色感覚点数データを蓄積する配色感覚点数データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記配色感覚言語データを入力するための配色感覚言語データ入力ステップと、
前記配色感覚言語データが入力された際、前記配色感覚言語データに対するそれぞれの前記画像データに紐付けられた前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。
【００３３】
第２１の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、配色に関連する感覚的な配色感覚言語データと、それぞれの前記配色感覚言語データに対応する配色パターンデータとを蓄積する配色感覚言語データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記配色感覚言語データを入力するための配色感覚言語データ入力ステップと、
前記配色感覚言語データが入力された際、その配色感覚言語データについて、対応する前記配色パターンデータに基づいて、それぞれの前記画像データの配色感覚点数データを算出する配色感覚点数データ算出ステップと、
それぞれの前記画像データの前記配色感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。
【００３４】
第２２の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
前記画像データ毎に、複数の、色調に関連する感覚的な色調感覚言語データに対して、それぞれの前記色調感覚言語データに対応する色調パターンデータに基づいて算出され、前記画像データに紐付けられた色調感覚点数データを蓄積する色調感覚点数データ蓄積部とを備えた画像検索装置を用いた画像検索方法であって、
前記色調感覚言語データを入力するための色調感覚言語データ入力ステップと、
前記色調感覚言語データが入力された際、前記色調感覚言語データに対するそれぞれの前記画像データに紐付けられた前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。
【００３５】
第２３の本発明は、
複数の画像データを蓄積する画像データ蓄積部と、
複数の、色調に関連する感覚的な色調感覚言語データと、それぞれの前記色調感覚言語データに対応する色調パターンデータとを蓄積する色調感覚言語データ蓄積部とを備えた、画像検索装置を用いた画像検索方法であって、
前記色調感覚言語データを入力するための色調感覚言語データ入力ステップと、
前記色調感覚言語データが入力された際、その色調感覚言語データの前記色調パターンデータに基づいて、それぞれの前記画像データの色調感覚点数データを算出する色調感覚点数データ算出ステップと、
それぞれの前記画像データの前記色調感覚点数データに基づいて、前記画像データ蓄積部に蓄積された前記画像データを抽出する画像データ抽出ステップとを備えた、画像検索方法である。
【００３６】
第２４の本発明は、
第２０から２３のいずれかの本発明の画像検索方法の前記各ステップをコンピュータに実行させるプログラムである。
【００３７】
第２５の本発明は、
第２４の本発明のプログラムを記録した記録媒体であって、コンピュータにより処理可能な記録媒体である。
【発明の効果】
【００３８】
本発明によれば、より広い範囲の画像データに適用可能な画像検索装置、データベース作成装置、及び画像検索方法を提供することが出来る。
【００３９】
又、本発明によれば、色調を用いた画像検索装置、そのデータベース作成装置、及び画像検索方法を提供することが出来る。
【図面の簡単な説明】
【００４０】
【図１】本発明にかかる実施の形態１における画像検索装置及びそのデータベース作成装置の構成図
【図２】本発明にかかる実施の形態１における配色感覚言語データベースを示す図
【図３】本発明にかかる実施の形態１における配色感覚言語データベースを作成するフローを示す図
【図４】本発明にかかる実施の形態１における配色パターン抽出インタフェースを示す図
【図５】本発明にかかる実施の形態１における配色感覚点数データベースを作成するフローを示す図
【図６】本発明にかかる実施の形態１における配色感覚言語データベースを示す図
【図７】本発明にかかる実施の形態１における配色感覚言語データの配色パターンの一例を示す図
【図８】本発明にかかる実施の形態１における色補正のメンバーシップ関数を示す図
【図９】本発明にかかる実施の形態１における画像検索方法のフローを示す図
【図１０】本発明にかかる実施の形態２における画像検索装置の構成図
【図１１】本発明にかかる実施の形態２における画像検索方法のフローを示す図
【図１２】本発明にかかる実施の形態３における画像検索装置及びそのデータベース作成装置の構成図
【図１３】本発明にかかる実施の形態３における色調感覚言語データベースを作成するフローを示す図
【図１４】本発明にかかる実施の形態３における色相を無視して明度―彩度で決定される色空間断面を示す図
【図１５】本発明にかかる実施の形態３における色調感覚言語データベースを示す図
【図１６】本発明にかかる実施の形態３における色調感覚空間を示す図
【図１７】本発明にかかる実施の形態３における色調感覚点数データベースを作成するフローを示す図
【図１８】本発明にかかる実施の形態３における色補正のメンバーシップ関数を示す図
【図１９】本発明にかかる実施の形態３における色調感覚点数データベースを示す図
【図２０】本発明にかかる実施の形態３における画像検索方法のフローを示す図
【図２１】本発明にかかる実施の形態４における画像検索装置の構成図
【図２２】本発明にかかる実施の形態４における画像検索方法のフローを示す図
【図２３】本発明にかかる実施の形態の画像検索装置をコンピュータに適用した構成を示す図
【図２４】本発明にかかる実施の形態画像検索装置を用いた画像検索システムの構成を示す図
【発明を実施するための形態】
【００４１】
以下に、本発明にかかる実施の形態について図面を参照しながら説明する。
【００４２】
（実施の形態１）
以下に、本発明にかかる実施の形態１の画像検索装置及びデータベース作成装置について説明する。本実施の形態１の画像検索装置は、配色感覚言語を用いて画像の検索を行う装置であり、配色感覚言語は、後述する色調感覚言語とともに感性語に含まれる。
【００４３】
図１は、本実施の形態１の画像検索装置及びデータベース作成装置の構成図である。図１に示すように、本実施の形態１の画像検索装置１０は、複数の画像データが蓄積された画像データ蓄積部１１と、例えば「あたたかな」、「スタイリッシュな」等の配色に関する配色感覚言語データを入力する配色感覚言語データ入力部１２と、それぞれの画像データについて配色感覚言語データ毎に算出され、それぞれの画像データと画像データＩＤによって紐付けられた点数のデータベースが蓄積された配色感覚点数データ蓄積部１３とを備えている。又、入力された配色感覚言語データについて、その配色感覚言語データに対する各画像データの配色感覚点数データに基づいて、表示する画像データを抽出する画像データ抽出部１４と、抽出された画像データを表示する表示部１５が設けられている。尚、配色感覚点数データに基づいて画像データを抽出するとは、例えば、配色感覚点数データの降順にソートをかけて、例えば点数の高い順に上位１０以内を抽出するということである。
【００４４】
また、配色感覚点数データ蓄積部１３のデータベースを作成するデータベース作成装置２０は、配色感覚点数データ蓄積部１３の配色感覚点数データベースを作成するための画像データを入力する画像データ入力部２２と、入力された画像データについて、夫々の配色感覚言語データに対する配色感覚点数データを算出する蓄積用配色感覚点数データ算出部２３とを備えている。更に、データベース作成装置２０は、複数の配色感覚言語データ、それぞれの配色感覚言語データに対応する配色を構成する複数の色、及び夫々の色の配色比のデータベースが蓄積された配色感覚言語データ蓄積部２１と、配色感覚言語データ蓄積部２１に、配色感覚言語データ及びそれに対する画像データを入力してデータベースを作成する配色感覚言語データ作成用入力部２５と、入力された画像データの配色の解析を行って、その配色を構成する複数の色の配色比を算出する画像データ解析部２４とを備えている。
【００４５】
次に、本実施の形態１のデータベース作成装置２０の動作について説明する。
【００４６】
本実施の形態１のデータベース作成装置２０は、画像検索装置１０の配色感覚点数データ蓄積部１３に蓄積されている配色感覚点数データベースを作成する装置であるが、このデータベースを作成する方法を説明する前に、データベース作成装置２０内の配色感覚言語データ蓄積部２１に蓄積されている配色感覚言語データベースの作成方法について説明する。
【００４７】
図２は、配色感覚言語データ蓄積部２１の配色感覚言語データベース２１１の表を示す図である。図２に示すように、配色感覚言語データ毎に、その配色感覚言語データに対応する配色パターンを構成する複数の色（本実施の形態では３色に設定）のＲＧＢ平均色と、それぞれの色の配色比率からなる配色パターンデータが示されている。例えば、「暖かい」という配色感覚言語データの場合、その配色パターンは、色１（Ｒ２５２、Ｇ１５５、Ｂ４１）、色２（Ｒ２１５、Ｇ３４、Ｂ１１０）、色３（Ｒ２１７、Ｇ２１、Ｂ４８）の３色から構成されており、それぞれの配色比率は、色１＝４１％、色２＝２２％、色３＝３７％となっている。
【００４８】
この配色感覚言語データベース２１１に配色パターンデータを蓄積する方法について説明する。図３は、本実施の形態１の配色感覚言語データ蓄積部２１に配色パターンデータを蓄積するためのフローチャートである。
【００４９】
はじめに、Ｓ１０において、配色感覚言語データ作成用入力部２５から画像データαが入力され、その画像データαに対応する配色感覚言語データＡがユーザにより選択される。
【００５０】
次に、Ｓ１１において、画像データ解析部２４によって画像データαから配色領域１が選択される。そして、Ｓ１２において、配色領域１の１ピクセルごとにＲＧＢ値を算出して全てのピクセルの合計を出し、その合計を配色領域１に該等するピクセル数で割り算することによって、ＲＧＢ平均色が算出される。
【００５１】
同様に、Ｓ１３において画像データαから配色領域２が選択される。そして、Ｓ１４において、配色領域２の１ピクセルごとにＲＧＢ値を算出して合計を出し、その合計を配色領域２に該等するピクセル数で割り算することによって、ＲＧＢ平均色が算出される。
【００５２】
同様に、Ｓ１５において画像データαから配色領域３が選択される。そして、Ｓ１６において配色領域３の１ピクセルごとにＲＧＢ値を算出して合計を出し、その合計を配色領域３に該等するピクセル数で割り算することによって、ＲＧＢ平均色が算出される。
【００５３】
次に、Ｓ１７において、配色領域１、２、３から、配色領域の配色比が算出される。
【００５４】
最後にＳ１８において、上述のようにして算出された、配色感覚言語データＡと、それに対応した配色パターンを構成する各色のＲＧＢ平均色の色値、及び各色の配色比率からなる配色パターンデータが配色感覚言語データ蓄積部２１に保存される。
【００５５】
以下に、配色感覚言語データ蓄積部の蓄積方法の実施例を用いて、より具体的に説明する。
【００５６】
配色感覚言語データ作成用入力部２５から入力された画像データ、あるいは、あらかじめ蓄積されている画像データ蓄積部１１から抽出した画像データから任意の配色領域を選択する。本発明では一つの配色パターンを構成する色は三種類とみなし、配色領域数は３つとする。
【００５７】
図４は、配色パターンを抽出するインターフェースの一例を示す図である。図４に示すように、本実施の形態では、下方から見上げてビルを撮影した画像データが、配色感覚言語データ作成用入力部２５から読み込まれたとする。
【００５８】
配色領域の選択は、マウスで画像の任意の一点をクリックする。クリックされたピクセルのＲＧＢ色値を画像データ解析部２４が読み取り、抽出したＲＧＢ色値と同色の範囲を色差のレベル調整によって判断し、一つの配色領域として認識する。配色領域は配色パターンを構成する数だけ選択するが、ここでは、配色パターンは３色から構成されるので、配色領域１〜３まで選択される。
【００５９】
まず、配色領域１として、空の部分を選択する。そして、選択した配色領域は、L*a*b*表色系の色差を用いて、同色と感じられる領域を指定し、一ピクセルごとのＲＧＢ値を平均することでＲＧＢ平均色値が算出される。それを配色領域２、配色領域３の全ピクセルに対して繰り返し、画像データから三色から構成される配色パターンを求める。なお、選択結果が配色領域１の表示部分２５１に表示される。
【００６０】
すなわち、配色領域２として、右側のビルの部分（黄土色）を選択し、同様に配色領域２のＲＧＢ平均色値が算出される。なお、選択結果が配色領域２の表示部分２５２に表示される。
【００６１】
次に、配色領域３として、左側のビルの部分（灰色）を選択し、同様に配色領域３のＲＧＢ平均色値が算出される。なお、選択結果が配色領域３の表示部分２５３に表示される。
【００６２】
また配色パターンに含まれる三色について、それぞれの色が配色パターンに占める配色比率を算出する。配色比率は、例えば配色領域１から算出された配色１が１４００ピクセル、配色２が４００ピクセル、配色３は２００ピクセルの場合、配色１、配色２、配色３の配色比率は、７０％：２０％：１０％と計算される。
【００６３】
そして、配色パターンと配色比率の組み合わせである配色パターンデータに、配色感覚言語データが対応される。配色感覚言語データは、例えば、「はなやかな」「穏やかな」「愉しい」等の形容詞でもかまないし、「和風」や「エスニック」等の名詞でもかまわない。
【００６４】
上記、配色感覚言語データと、対応する配色パターンを構成する各色のＲＧＢ平均色値、及び各色の配色比率から構成される配色パターンデータが配色感覚言語データ蓄積部２１に格納される。
【００６５】
以下に、本実施の形態１のデータベース作成装置２０によって、画像検索装置１０の配色感覚点数データ蓄積部１３に蓄積されている配色感覚点数データベースを作成する方法について説明する。
【００６６】
図５は、本発明にかかる実施の形態１におけるデータベース作成装置２０がデータベースを作成するために、画像データ入力部２２から入力した画像データβのなかに、ある配色感覚言語データに対応する配色パターンに含まれる色がどれくらいの割合で存在するかを解析するフローである。
【００６７】
画像データ入力部２２から画像データが入力されると、図２の配色感覚言語データベースに蓄積されている複数の配色感覚言語データのうち１つの配色感覚言語データＢが選択される（Ｓ２０）。
【００６８】
まず、Ｓ２１において画像データβのある１ピクセルの色情報（ＲＧＢ値）が取得される。
【００６９】
次に、Ｓ２２において、配色感覚言語データＢに対応する配色パターンＰ１を構成している色１のＲＧＢ平均色値と色差（詳しくは後述する）から、取得したＲＧＢ値の色感覚点数ｘ1が算出される。
【００７０】
次に、Ｓ２３において、配色パターンＰ１を構成している色２の色値と色差から、取得したＲＧＢ値の色感覚点数ｙ１が算出される。
【００７１】
次に、Ｓ２４において配色パターンＰ１を構成している色３の色値と色差から、取得したＲＧＢ値の色感覚点数ｚ１が算出される。
【００７２】
上記Ｓ２１からＳ２４までの制御は、画像データβの全てのピクセル（ピクセル数Ｎとする）について、色１、色２、色３に対する色感覚点数が算出されるまで繰り返される（Ｓ２５）。すなわち、色１については、Ｎ個のピクセル数の色感覚点数ｘ１、ｘ２・・・ｘＮが得られる。
【００７３】
次に、Ｓ２６において、色１、色２、色３の各色感覚点数に対して、配色パターンＰ１を構成する色の配色比率が上限として設定される。
【００７４】
続いて、Ｓ２７において、上限の設定された色１、色２、色３の合計が求められ、配色感覚点数データｖが算出される。
【００７５】
次に、他の配色感覚言語データＣについて、その配色感覚言語データＣに対応する配色パターンＰ２を構成する色１〜３について、上記制御Ｓ２０〜Ｓ２７が行われて配色感覚点数データｖが決定され、配色感覚言語データベース２１１に蓄積されている全ての配色感覚言語データのそれぞれについて配色感覚点数データｖが決定される（Ｓ２８）。
【００７６】
そして、画像データβに関する各配色感覚言語データに対する配色感覚点数データが、配色感覚点数データ蓄積部１３に蓄積され、配色感覚点数データベース１３１に登録される（Ｓ２９）。
【００７７】
図６は、配色感覚点数データベース１３１を示す図である。図６に示すように、複数の画像データβ、γ・・・の各々について、各配色感覚言語データに対する配色感覚点数データｖが算出されている。尚、配色感覚点数データベース１３１には、画像データβ、γ自体ではなく、画像データのＩＤが記憶されており、この画像データＩＤによって、各配色感覚言語データに対する配色感覚点数データが、画像データ蓄積部１１に蓄積されている画像データβ、γに紐付けられている。
【００７８】
次に、配色感覚点数データベース１３１を作成する方法について実施例に基づいて、より詳しく説明する。
【００７９】
第一段階として、配色パターンＰ１を構成する各色が、画像データβに含まれている各々の割合が算出される。上記と同様に、本実施の形態では配色パターンは三色（色１、色２、色３）から構成されるものとする。
【００８０】
次に、色１、色２、色３の各色について、L*a*b*表色系の色差を用いて同色とみなすことが出来る色範囲が定められる。ここで、色範囲は、L*a*b*表色系においては、均等色空間のため、完全な球体状になる。そして、球体の大きさ小ささと色範囲の広さ狭さは比例する。
【００８１】
色の品質管理では、同色と感じる色差は、ΔE*ab0.5以内程度とされているが、それは人の目で見て見分けが付かないというレベルであり、ΔE*ab0.5という数値をデジタル画像に適応すると人の目には同じ色と感じる色でも差異があるとコンピュータが判断してしまう。そのため、デジタル画像における同色と感じる色範囲は、もっと大きく例えばΔE*ab20程度に設定する。
【００８２】
しかしながら、色の感覚は個人差があるため、色差の数値をユーザが任意に設定できるようにする方がより好ましい。図７は、「安定した」という配色感覚言語データに対応する配色パターンを構成する色１、色２、色３の色範囲をL*a*b*表色系において示した図である。「安定した」という配色感覚言語データを構成する濃い青（図中、符号７０参照）、それよりも薄い青（図中、符号７１参照）、一番薄い青（図中、符号７２参照）が、図のように示されている。
【００８３】
そして、上記球体の中心部の色と周辺部の色では色感覚が異なるので、色値に点数差を設ける。例えば、球体の中心点の色値は１点、球体枠の色値は０点とし、その間を補完するメンバーシップ関数を作る。図８は、メンバーシップ関数を示す図である。
【００８４】
画像データβの中で、各色（色１、色２、色３）がどの程度含まれるか、画像データβのすべてのピクセルに対して色感覚点数を算出し、全色感覚点数を合計した値を全ピクセル数で除算して、配色に含まれる各色の色感覚点数を算出する。このように各色の色感覚点数が算出された後に、配色感覚点数データが算出される。
【００８５】
尚、色感覚点数は、すべてその色であれば100点となる。すなわち、画像データβのピクセル数を、例えば３２０×２４０（＝７６８００）とした場合、全てのピクセルの色点数の合計値をｘ´とすると、色感覚点数ｘは、ｘ＝（ｘ´／７６８００）×１００として求めることが出来る。
【００８６】
現実的にはほとんどあり得ないが３色配色の場合の最高点は300点である。
【００８７】
それらを配色数の３で割って平均値を出し、配色感覚点数データの上限を100点にするという方法も考えられるが、平均値が下がり人間の感覚からもずれるのでその方法は採用しない。
【００８８】
また、配色感覚言語データに対応する配色比率が等分であるならば、例えば2色配色の場合、50点と50点ならば100点にするという計算方法もある。
【００８９】
しかし、配色感覚言語データに対応する配色比率は非等分の方が多いので、非等分の配色比率を想定した計算方法にする必要がある。
【００９０】
そのために、配色感覚言語データに対応する配色パターンを登録する際に加えた配色比率を計算に加え、各色の感覚点数は、配色比率の上限を超えないように設定する。
【００９１】
例えば、配色パターンＰ１の色１の比が70％の場合、色感覚点数が80点の場合でも70点とし、配色比率を各色感覚点数の上限値として設定する。それらの合計得点を、配色感覚点数データとし、最高得点は100点とする。
【００９２】
すなわち、「暑苦しい」という配色感覚言語データについて、図２に示すように、「暑苦しい」に対応する配色パターンを構成する３色の配色比が、色１が６２％、色２が２９％、色３が９％となっている。画像データβについて、この「暑苦しい」という配色感覚言語データに対する配色感覚点数データを作成する場合、色１、色２、色３の色感覚点数が３０点、２０点、５０点とすると、配色比６２％、２９％、９％に基づいて設定された上限値から、各色感覚点数は３０点、２０点、９点となる。そして、これらの点を合計した５９点が、画像データβの「暑苦しい」という配色感覚言語データに対する配色感覚点数データとして算出される。
【００９３】
以上のようにして、所定の画像データの所定の配色感覚言語データに対する配色感覚点数データが算出される。上記と同様の手順を他の配色感覚言語データに対しても繰り返すことによって、所定の画像データに対して、複数の配色感覚言語データのそれぞれに対する配色感覚点数データが求められる。このようにして求められた所定の画像データに対する配色感覚言語データ別の配色感覚点数データが、配色感覚点数データ蓄積部１３内の配色感覚点数データベース１３１に登録される。
【００９４】
次に、本実施の形態の画像検索装置１０による検索方法について説明するとともに、本発明の画像検索方法の一例についても同時に述べる。
【００９５】
図９は、本実施の形態の画像検索装置１０の画像検索のフローチャートを示す図である。
【００９６】
Ｓ３０において配色感覚言語データ入力部１２から出力される信号、すなわち入力された配色感覚言語データ（たとえば、あたたかな、スタイリッシュなという配色感覚言語データ）が入力されると、画像データ抽出部１４は、Ｓ３１において、入力された配色感覚言語データに対する各画像データの配色感覚点数データを配色感覚点数データ蓄積部１３の配色感覚言語データベース１３１から取得する。このＳ３０が、本発明の配色感覚言語データ入力ステップの一例に相当する。
【００９７】
そして、Ｓ３２において、画像データ抽出部１４は、取得した配色感覚点数データで、降順で画像データをソートして上位画像データＩＤを抽出する。尚、上位画像は例えば、１位〜１０位までのように適宜抽出すればよい。このＳ３２が、本発明の画像データ抽出ステップの一例に相当する。
【００９８】
次に、Ｓ３３において、表示部１５は、ソートした順に抽出された画像データを、その画像データＩＤ（図６参照）に基づいて、画像データ蓄積部１１から抽出して表示する。
【００９９】
以上のように、配色感覚点数データの高い順に画像データを表示することで、入力した配色感覚言語データに対応した画像データを発見しやすくなり、検索性を向上させることが出来る。
【０１００】
尚、図５において説明したように、配色パターンを構成する各色の色感覚点数の上限値を設定しているが、この理由について以下に説明する。
【０１０１】
上述したように、ある画像データθについて、「暑苦しい」という配色感覚言語データに対応する配色パターンを構成する色１、色２、色３の各色感覚点数が６０点、２０点、５点とする。一方、上述したように、他の画像データδについて、「暑苦しい」という配色感覚言語データに対応する配色パターンを構成する色１、色２、色３の各色の色感覚点数が３０点、２０点、５０点とする。この場合、上限を設定せずに各色感覚点数を合計すると、画像データθが８５点、画像データδが１００点となり、画像データδの点数が高くなる。ところが、図２のデータベースの色１と色３の配色比に近い配色比を有している画像データはθである。すなわち、より「暑苦しい」という感覚に近い画像順に並ばず、逆転する可能性がある。
【０１０２】
そこで、「暑苦しい」の配色パターンを構成する色１、色２、色３の配色比６２％、２９％、９％を上限とすることにより、画像データθの点数は８５点となり、画像データδの点数は５９点となり、画像データθの方がより上位に表示されることになる。このように、配色比を上限値とすることにより、配色感覚言語データにより合った画像データ順に表示することが出来、検索性能が向上する。
【０１０３】
尚、本実施の形態では、画像データ蓄積部１１内に画像データが蓄積されており、その画像データと画像データＩＤによって紐付けられた配色感覚点数データが、配色感覚点数データ蓄積部１３に蓄積されていたが、画像データ蓄積部１１が設けられておらず、配色感覚点数データ蓄積部１３に画像データが蓄積されていてもよい。
【０１０４】
（実施の形態２）
次に、本発明にかかる実施の形態２における画像検索装置について説明する。本実施の形態２の画像検索装置では、実施の形態１の画像検索装置と異なり、予め各画像データについて算出された配色感覚点数データがデータベースとして蓄積されておらず、配色感覚言語データが入力された際に、その配色感覚言語データについて各画像データの配色感覚点数データが算出される。
【０１０５】
図１０は、本発明にかかる実施の形態２における画像検索装置３０の構成図である。尚、実施の形態１と同様の構成については同一の符号を付している。
【０１０６】
図１０に示すように、本実施の形態２では、実施の形態１と異なり、データベースを作成するためのデータベース作成装置２０が設けられていない。そして、実施の形態１では、データベース作成装置２０に設けられていた配色感覚言語データ蓄積部２１、画像データ解析部２４、及び配色感覚言語データ作成用入力部２５が、本実施の形態２では、画像検索装置３０に設けられている。また、配色感覚点数データ蓄積部１３が設けられていない。
【０１０７】
更に、実施の形態１の蓄積用配色感覚点数データ算出部２３に代わり、配色感覚点数データ算出部３１が設けられており、この配色感覚点数データ算出部３１が、配色感覚言語データ入力部１２に配色感覚言語データが入力された際に、各画像データの配色感覚点数データを算出する。尚、配色感覚言語データ蓄積部２１は、実施の形態１と同様の配色感覚言語データベース２１１を有している。
【０１０８】
次に、本実施の形態の画像検索装置３０の検索方法について説明する。
【０１０９】
尚、配色感覚言語データ蓄積部２１の配色感覚言語データベースの作成については、実施の形態１と同様であるため説明を省略する。
【０１１０】
図１１は、本実施の形態２の画像検索装置３０による検索方法のフローチャートを示す図である。
【０１１１】
図１１に示すように、Ｓ４０において配色感覚言語データ入力部１２から出力される信号、すなわち入力された配色感覚言語データ（たとえば、あたたかな、スタイリッシュなという配色感覚言語データ）が入力される。このＳ４０が、本発明の配色感覚言語データ入力ステップの一例に相当する。
【０１１２】
すると、Ｓ４１において、配色感覚点数データ算出部３１は、配色感覚言語データベース２１１を参照して、入力された配色感覚言語データについて、それに対応する配色パターンを構成する色１、色２、色３のＲＧＢ平均色値及びその配色比のデータを取得する。
【０１１３】
次に、Ｓ４２において、画像データ蓄積部１１内の複数の画像データから１つを選択し、その画像データについて、取得した色１、色２、色３、及びその配色比のデータを用いて、入力された配色感覚言語データに対する配色感覚点数データを算出する。尚、この算出方法については、実施の形態１のＳ２１〜Ｓ２７と同様であるため省略する。このＳ４２が、本発明の配色感覚点数データ算出ステップの一例に相当する。
【０１１４】
上記Ｓ４２の制御が、画像データ蓄積部１１内の全ての画像データについて行われる（Ｓ４３）。
【０１１５】
そして、Ｓ４４において、画像データ抽出部１４は、算出された配色感覚点数データで、降順で画像データをソートして上位の画像データを抽出する。このＳ４４が、本発明の画像データ抽出ステップの一例に相当する。
【０１１６】
次に、Ｓ４５において、表示部１５は、ソートした順に上位の画像データを画像データ蓄積部１１から抽出して表示する。
【０１１７】
以上のように、本実施の形態２では、蓄積されている画像データについて、予め配色感覚点数データが算出されておらず、検索のために配色感覚言語データが入力されてから、配色感覚点数データが算出される。
【０１１８】
尚、上記実施の形態１、２では、配色感覚言語データの配色パターンを構成する色を３色としているが、変更しても良い。
【０１１９】
又、上記実施の形態１、２では、メンバーシップ関数を用いて中心と球体枠における色感覚点数に差を設けているが、設けなくても良い。但し、点数に差を設けた方が、より細かく順位付けをすることが出来る。
【０１２０】
又、上記実施の形態１、２では、配色比を各色の色感覚点数の上限としているが、上限を設定しなくても良い。上限を設定しない場合、設定した場合と比べると検索の質は劣ることになるが、上限値を加える計算が減るので検索速度は向上する。
【０１２１】
（実施の形態３）
以下に、本発明にかかる実施の形態３における画像検索装置及びデータベース作成装置について説明する。本実施の形態３の画像検索装置では、実施の形態１の画像検索装置と異なり、配色感覚言語データを用いず色調感覚言語データを用いて画像データの検索が行われる。
【０１２２】
図１２は、本発明にかかる実施の形態３における画像検索装置４０及びそのデータベースを作成するデータベース作成装置５０の構成図である。
【０１２３】
図１２に示すように、本実施の形態３の画像検索装置４０は、複数の画像データが蓄積された画像データ蓄積部４１と、例えば、「あかるい」、「くすんだ」等の色調に関する色調感覚言語データを入力する色調感覚言語データ入力部４２と、それぞれの画像データについて色調感覚言語データ毎に算出された色調感覚点数データが蓄積された色調感覚点数データ蓄積部４３とを備えている。又、入力された色調感覚言語データについて、その色調感覚言語データに対する各画像データの色調感覚点数データに基づいて表示する画像データを抽出する画像データ抽出部４４と、抽出された画像データを表示する表示部４５が設けられている。尚、色調感覚点数データに基づいて画像データを抽出するとは、例えば、色調感覚点数データの降順にソートをかけて、点数の高い順に上位１０以内を抽出するということである。
【０１２４】
また、色調感覚点数データ蓄積部４３を作成するデータベース作成装置５０は、色調感覚言語データ蓄積部５１の色調感覚点数データベースを作成するための画像データを入力する画像データ入力部５２と、入力された画像データについて、夫々の色調感覚言語データに対する色調感覚点数データを算出する蓄積用色調感覚点数データ算出部５３とを備えている。又、データベース作成装置５０は、複数の色調感覚言語データ、及びそれぞれの色調感覚言語データに対応する色調感覚空間のデータベースが蓄積された色調感覚言語データ蓄積部５１と、色調感覚言語データ蓄積部５１内の色調感覚言語データベースを作成するために色感覚言語データを入力する色調感覚言語データ作成用入力部５５と、入力された色調感覚言語データに対する色調感覚空間を決定する色調空間決定部５４とを備えている。
【０１２５】
次に、本実施の形態３のデータベース作成装置５０の動作について説明する。
【０１２６】
本実施の形態３のデータベース作成装置５０は、画像検索装置４０の色調感覚点数データ蓄積部４３に蓄積されているデータベースを作成する装置であるが、その説明の前に、データベース作成装置５０内の色調感覚言語データ蓄積部５１に蓄積されているデータベースの作成方法について説明する。
【０１２７】
図１３は、本発明の色調パターンデータ蓄積部に色調パターンデータを蓄積するためのフローチャートである。
【０１２８】
はじめに、Ｓ５０において、色調感覚言語データ作成用入力部５５から、作成しようとする色調感覚言語データを入力する。
【０１２９】
次に、Ｓ５１において、色調空間決定部５４によってマンセル、L*C*h、ＨＳＶ、ＨＬＳ等のうちから一つの色空間が選択される。そして、Ｓ５２において、色相を無視して、明度−彩度で決定される色空間断面上から、明度値、彩度値を指定することで、中心点座標が決定される。
【０１３０】
続いて、Ｓ５３において、明度−彩度で決定される色空間断面上で、同一の色調と認識する範囲を示す色差が決定される。このように、色相を無視して、明度―彩度で決定される色空間断面上から決定された中心点座標及び色差が図１４に示されている。ここで、円５４１が同一の色調と認識する範囲内として決定されている。すなわち、色差とは、円５４１の半径に相当することになる。
【０１３１】
最後に、Ｓ５４において、色調感覚言語データと、中心座標及び色差からなる色調パターンデータが色調感覚言語データ蓄積部５１内に保存される。このようにして、色調感覚言語データ蓄積部５１内に色調感覚言語データベースが作成される。図１５は、色調感覚言語データベース５１１を示す図である。
【０１３２】
次に、色調感覚言語データ蓄積部５１の色調パターンデータベースを作成する方法について実施例を用いて、より具体的に説明する。
【０１３３】
色相を一定にした明度、彩度面によって、色調感覚空間の選択が行われる。色調とは色の調子のことでありトーンとも呼ぶ。分類の仕方はいろいろであるが、「明るい」、「暗い」、「あざやかな」、「くすんだ」などの感性語が使われることが多い。色調感覚空間の選択を行う明度、彩度面の元となる色空間としては、マンセル色立体、L*C*h、ＨＳＶ、ＨＬＳ等を用いることが出来るが、それぞれの色空間は色相、彩度、明度の色の三属性によって成り立っており、色相軸を一定にした際、明度、彩度面ができるものを前提とする。
【０１３４】
本図では、トーンにおける明度値と彩度値をL*C*h表色系のL*（明度）、*h（彩度）で作成しているが、色調を選択する際、いずれかの色空間の明度、彩度面の中から、各色調の代表点が選択される。
【０１３５】
色調の代表点から、色調感覚空間を作成するために、L*a*b*表色系の色差を用いて、同色調と感じられる範囲が指定される（図１４の円５４１参照）。
【０１３６】
そうすると、彩度、色相面で定めた色調の範囲が、各色相にも反映され、色相も含めた立体に戻すと、L*a*b*表色系、L*C*h表色系においては円筒形でリング状の色調感覚空間が出来る。図１６は、「明るい」という色調感覚言語に対する色調感覚空間を示す図である。このように、色調感覚空間は、各色立体上で表示できるようにされ、色調感覚が直感的にわかるようにされる。
【０１３７】
作成された色調感覚空間（具体的には上記、明度値、彩度値による中心座標及び色差）に、色調感覚言語データを付与して、色調感覚言語データ蓄積部５１に格納される。
【０１３８】
以上のように、それぞれの色調感覚言語データに対する色調感覚空間が決定されたデータベースが、色調感覚言語データ蓄積部５１内に保存されることになる。
【０１３９】
以下に、本実施の形態３のデータベース作成装置５０によって、画像検索装置４０の色調感覚点数データ蓄積部４３に蓄積されているデータベースを作成する方法について説明する。
【０１４０】
図１７は、本発明にかかる実施の形態３におけるデータベース作成装置５０がデータベースを作成するフローチャートを示す図である。
【０１４１】
はじめに、Ｓ６０において、蓄積用色調感覚点数データ算出部５３によって、画像データ入力部５２から入力された画像データεのある１ピクセルの彩度と明度が取得される。次に、Ｓ６１において、色調感覚言語データ蓄積部５１から任意に色調感覚言語データＤに対応する色調空間が選択され、その色調空間の中心点座標と色差が抽出される。
【０１４２】
次に、Ｓ６２において、中心点座標と、画像データεのある１ピクセルの彩度と明度の示す座標との距離を算出した結果、色差よりも小さければ該当ピクセルは色調空間に含まれていると判断され、色調空間に含まれていると判断された場合には、色調感覚点数データが算出される。
【０１４３】
ここで、色相を一定とした場合、中心座標の色調と周辺部の色調では色調感覚が異なるので、色調感覚点数データに点数差が設けられる。例えば、図１４の円５４１の中心座標５４１ａの色調感覚点数が１点、外周５４１ｂの枠の色調感覚点数は０点とし、その間を補完するメンバーシップ関数が作られている。図１８は、メンバーシップ関数を示す図である。
【０１４４】
続いて、画像データεのすべてのピクセルについて、同様に色調感覚点数データが算出され、最後まで算出されたら、色調感覚点数データを合計して、色調感覚言語データＤに対応する色調感覚点数データが算出される。
【０１４５】
尚、この場合も、色調感覚点数データが、全てその色調であれば、１００点となる。すなわち、画像データεのピクセル数を例えば３２０×２４０（＝７６８００）とした場合、全てのピクセルの色調感覚色点数データの合計値をｓ´とすると、色調色感覚点数データｓは、ｓ＝（ｓ´／７６８００）×１００として求めることが出来る。
【０１４６】
以上と同様に、色調感覚言語データ蓄積部５１から、別の色調感覚言語データの色調空間を選択して、同様の手順で、色調感覚点数データが算出される。
【０１４７】
色調感覚言語データ蓄積部５１内の全ての色調感覚言語データに対応した色調空間に対して検証がおわれば、画像データεに対する各色調感覚言語データの色調感覚点数データが決定し、色調感覚点数データ蓄積部４３に蓄積され、色調感覚点数データベース４３１として登録される（Ｓ６６）。図１９は、色調感覚点数データベース４３１の一例を示す図である。色調感覚点数データベース４３１では、例えば、画像データεに対して「あざやか」「明るい」「くすんだ、及び「暗い」の色に対して、７５点、６０点、１０点、５点の色調感覚点数データが算出されている。ここで、色調感覚点数データベース４３１内には、画像データε自体は記憶されておらず、画像データＩＤが記憶されており、この画像データＩＤによって画像データ蓄積部に蓄積されている画像データに色調感覚点数データが紐付けられている。
【０１４８】
次に、本実施の形態の画像検索装置４０による検索方法について説明するとともに、本発明の画像検索方法の一例についても同時に述べる。
【０１４９】
図２０は、本実施の形態の画像検索装置４０の画像検索のフローチャートを示す図である。
【０１５０】
Ｓ７０において色調感覚言語データ入力部４２から出力される信号、すなわち入力された色調感覚言語データ（たとえば、「あざやか」、「暗い」という色調感覚言語）が入力されると、画像データ抽出部４４は、Ｓ７１において、入力された色調感覚言語データに対する各画像データの色調感覚点数データを色調感覚点数データ蓄積部４３内の色調感覚点数データベース４３１から取得する。このＳ７１が、本発明の色調感覚言語データ入力ステップに相当する。
【０１５１】
そして、Ｓ７２において、画像データ抽出部４４は、取得した色調感覚点数データで、降順で画像データをソートし、上位の画像データＩＤを抽出する。このＳ７２が、本発明の画像データ抽出ステップの一例に相当する。
【０１５２】
次に、Ｓ７３において、表示部４５は、ソートした順に画像データＩＤに基づいて画像データを画像データ蓄積部４１から抽出して表示する。
【０１５３】
以上のように、色調感覚点数データの高い順に画像データを表示することで、入力した色調感覚言語データに対応した画像データを発見しやすくなり、検索性を向上させることが出来る。
【０１５４】
尚、本実施の形態では、画像データ蓄積部４１内に画像データが蓄積されており、その画像データについての色調感覚点数データが、色調感覚点数データ蓄積部４３に蓄積されていたが、画像データ蓄積部４１が設けられておらず、色調感覚点数データ蓄積部４３に画像データが蓄積されていてもよい。
【０１５５】
（実施の形態４）
次に、本発明にかかる実施の形態４における画像検索装置について説明する。本実施の形態４の画像検索装置は、実施の形態３の画像検索装置と異なり、予め各画像データについて算出された色調感覚点数データが蓄積されておらず、色調感覚言語データが入力された際に、その色調感覚言語データについて各画像データの色調感覚点数データを算出する。
【０１５６】
図２１は、本発明にかかる実施の形態４における画像検索装置６０の構成図である。尚、実施の形態３と同様の構成については同一の符号を付している。
【０１５７】
図２１に示すように、本実施の形態４では、実施の形態３と異なり、データベース作成装置５０が設けられていない、そして、実施の形態３では、データベース作成装置５０に設けられていた色調感覚言語データ蓄積部５１、色調空間決定部５４、及び色調感覚言語データ作成用入力部５５が、本実施の形態３では、画像検索装置６０に設けられている。また、実施の形態３の色調感覚点数データ蓄積部４３が設けられていない。更に、実施の形態３の蓄積用色調感覚点数データ算出部５３に代わり、色調感覚点数データ算出部６１が設けられており、この色調感覚点数データ算出部６１が、色調感覚言語データ入力部４２に色調感覚言語データが入力された際に、各画像データの色調感覚言語点数データを算出する。尚、色調感覚言語データ蓄積部５１は、実施の形態３と同様の色調感覚言語データベース５１１を有している。
【０１５８】
次に、本実施の形態の画像検索装置６０の検索方法について説明する。
【０１５９】
尚、色調感覚言語データ蓄積部５１の色調感覚言語データベースの作成については、実施の形態３と同様であるため説明を省略する。
【０１６０】
図２２は、本実施の形態４の画像検索装置６０による検索方法のフローチャートを示す図である。
【０１６１】
画像検索を行うために、Ｓ８０において色調感覚言語データ入力部４２から出力される信号、すなわち入力された色調感覚言語データ（たとえば、あかるい、くすんだ、などという色調感覚言語）がユーザにより入力される。このＳ８０が、本発明の色調感覚言語データ入力ステップの一例に相当する。
【０１６２】
すると、Ｓ８１において、色調感覚点数データ算出部６１は、色調感覚言語データ蓄積部５１を参照して、入力された色調感覚言語データに対する色調感覚空間に関するデータを、色調感覚言語データ蓄積部５１から抽出する。具体的には、色相を一定にした明度―彩度面上における中心座標と色差が抽出される。
【０１６３】
そして、Ｓ８２において、画像データ蓄積部４１に保存されている複数の画像データのそれぞれについて、抽出された中心座標と色差から色調感覚点数データが算出される。この色感覚点数データの算出については、実施の形態３のＳ６０〜Ｓ６４と同様であり、画像データの１ピクセルの彩度と明度の示す座標と抽出された中心座標との距離を算出し、その距離が色差よりも小さい場合には、その距離に基づいてメンバーシップ関数を利用し、１ピクセル毎の色調感覚点数が求められる。求められた全てのピクセルの色調感覚点数を合計し、ピクセル数で除算し、１００点満点に換算することによって、１つの画像データに対する色調感覚点数データが算出される。このＳ８２が、本発明の色調感覚点数データ算出ステップの一例に相当する。
【０１６４】
上記Ｓ８２の制御が、画像データ蓄積部４１内の全ての画像データについて行われる（Ｓ８３）。
【０１６５】
そして、Ｓ８４において、画像データ抽出部４４は、算出された色調感覚点数データで、降順で画像データをソートし、上位の画像データを抽出する。このＳ８４が、本発明の画像データ抽出ステップの一例に相当する。
【０１６６】
次に、Ｓ８５において、表示部４５は、ソートした順に抽出された画像データを画像データ蓄積部４１から抽出して表示する。
【０１６７】
以上のように、本実施の形態４では、蓄積されている画像データについて、予め色調感覚点数データが算出されておらず、検索のために色調感覚言語データが入力されてから、色調感覚点数データが算出される。
【０１６８】
尚、上記実施の形態３、４では、メンバーシップ関数を用いて基準となる色調（中心座標）と同じ色調とみなす色調範囲において、基準となる色調からの距離に応じて色調感覚点数データに差を設けているが、設けなくても良い。但し、点差を設けた方が、より細かく順位付けを行うことが出来、より検索性能を向上させることが出来る。
【０１６９】
尚、上記実施の形態１、２の画像検索装置では、配色感覚言語データが用いられており、上記実施の形態３、４の画像検索装置では、色調感覚言語データが用いられているが、実施の形態１と実施の形態３、又は実施の形態２と実施の形態４を組み合わせて、配色感覚言語データ及び色調感覚言語データの双方が画像検索に用いられてもよい。
【０１７０】
このような場合、配色感覚言語データ及び色調感覚言語データのそれぞれを入力し、配色感覚点数データと色調感覚点数データの合計点数の高い順にソートを行い、所定の上位の数だけ、画像データを抽出し、表示するという制御を行うことが出来、より検索性を向上させることが出来る。
【０１７１】
図２３は、上記実施の形態２、４を組み合わせた画像検索装置を実現する際の構成図である。図２３に示す画像検索装置１００は、配色感覚言語データと色調感覚言語データの双方を用いて検索を行うことが可能な検索装置である。尚、配色感覚言語データと色調感覚言語データのいずれか一方のみを用いて検索を行っても良い。
【０１７２】
画像検索装置１００は、コンピュータ１０１と、配色感覚言語データ入力装置１０２と、色調感覚言語データ入力装置１０３と、画像データ入力装置１０４と、出力装置１０５と、主記憶装置１０６と、中央演算装置１０７と、及びバス１０８とを備えている。
【０１７３】
主記憶装置１０６は、配色パターンデータ解析プログラム、色調パターンデータ解析プログラム、画像データ色情報解析プログラムを格納した画像検索処理プログラム格納部１０９と、配色感覚言語データ蓄積部１１０と、色調感覚言語データ蓄積部１１１と、画像データ蓄積部１１２とから構成されている。
【０１７４】
又、中央演算装置１０７は、配色パターンデータ解析演算部１１３と、色調パターンデータ解析演算部１１４と、画像データ蓄積演算部１１５と、画像データ色情報解析演算部１１６と、配色感覚空間出力演算部１１７と、色調感覚空間出力演算部１１８と、画像データ出力演算部１１９とから構成されている。
【０１７５】
図２４は、画像検索装置１００を用いた画像検索システム１の全体図である。
【０１７６】
配色感覚言語データと色調感覚言語データによる画像検索システム１は、配色感覚言語データ蓄積部１１０から取得した配色感覚言語データと配色パターンデータを基に、画像データ上に設定した配色領域の配色感覚点数データを計算し、ソートすることで、配色感覚言語データによる画像データ検索が容易であり、さらに、色調感覚言語データ蓄積部１１１から取得した色調感覚言語データと色調パターンデータを基に、画像データの色調感覚点数データを計算し、ソートすることで、色調感覚言語データによる画像データ検索が容易にできる配色感覚言語データと色調感覚言語データによる画像データ検索システムである。
【０１７７】
配色感覚言語データと色調感覚言語データによる画像検索システム１は、配色感覚言語データと色調感覚言語データによる画像検索装置１００、通信ネットワーク２、第１のデータベースとして配色感覚言語データ蓄積部１１０、第２のデータベースとして色調感覚言語データ蓄積部１１１、第３のデータベースとして画像データ蓄積部１１２、ユーザ端末６（複数可能）等を含む。
【０１７８】
配色感覚言語データと色調感覚言語データによる画像検索システム１は、商品のモデル画像データや個人的に楽しむために撮影した画像データ、配色感覚言語データ、配色パターンデータ、色調感覚言語データ、色調パターンデータ、検索に必要な文字情報などの入出力手段を備えたコンピュータ機器である。たとえば、キーボード、マウス、USBメモリ、デジタルカメラ、スキャナー、モニター、テレビ、プリンターなどの装置に接続可能なインターフェースを持つコンピュータ機器を、配色感覚言語データと色調感覚言語データによる画像検索装置１００として使用することが可能である。
【０１７９】
配色感覚言語データと色調感覚言語データによる画像検索装置１００は前記三つのデータベースを備えているが、別々のコンピュータに分散させてもよい。その場合、配色感覚言語データと色調感覚言語データによる画像検索装置１００は、別々のコンピュータに備えられているデータベースを連結して処理する手段を備える。
【０１８０】
また、図示していないが、配色感覚言語データと色調感覚言語データによる画像検索装置１００には通信ネットワークとの接続を可能にする通信制御装置が含まれている。
【０１８１】
配色感覚言語データ蓄積部１１０は、配色感覚言語データの一覧を構成する色情報を蓄積する。たとえば、感性語名称と、感性語名称に対応した配色パターンを構成する色値、配色パターンを構成する各々の色が配色パターンに占める割合、などの情報を含む。
【０１８２】
色調感覚言語データ蓄積部１１１は、色調感覚言語の一覧を構成する色情報を蓄積する。たとえば、感性語名称と、感性語名称に対応した明度値、彩度値、色差、などの情報を含む。
【０１８３】
また、配色感覚言語データと色調感覚言語データによる画像検索装置１００の配色感覚空間出力演算部１１７及び色調感覚空間出力演算部１１８を用いて画像データの配色領域の配色パターンや色調を検索して色立体に表示してもよく、そのための膨大な画像データが画像データ蓄積部１１２に蓄積されていてもよい。
【０１８４】
通信ネットワーク２は、配色感覚言語データと色調感覚言語データによる画像検索装置１００、配色感覚言語データ蓄積部１１０、色調感覚言語データ蓄積部１１１、画像データ蓄積部１１２を相互に接続可能なコンピュータネットワークである。通信ネットワーク２はローカルエリアネットワークでもよく、インターネット等広域ネットワークでもよい。
【０１８５】
ユーザ端末６はたとえば、通信ネットワーク２に接続可能なネットワークインターフェースを備えた末端装置である。任意であり、一つでも複数でも構わない。ユーザ端末６は、通信ネットワーク２を介して配色感覚言語データと色調感覚言語データによる画像検索装置１００の備える第１から第３のデータベースにアクセスして、配色感覚言語データと色調感覚言語データによる画像検索装置１００が備える画像データの配色領域を検索して、配色幾何学を色立体に表示した結果や、画像データの色調を検索して、色調感覚空間に表示した結果を取得して閲覧することが可能である。すなわち、ユーザは、検索のための配色感覚言語データや色調感覚言語データを入力する際、ユーザ端末６を通じて、配色感覚言語データ入力装置１０２、及び色調感覚言語データ入力装置１０３が操作することになる。尚、図２４に示す画像検索装置１００では、配色感覚言語データ蓄積部１１０、色調感覚言語データ蓄積部１１１、及び画像データ蓄積部１１２以外の構成については省略している。
【０１８６】
尚、図２３の配色感覚言語データ入力装置１０２は、上記配色感覚言語データ入力部１２及び配色感覚言語データ作成用入力部２５の双方を兼ねている。色調感覚言語データ入力装置１０３は、上記色調感覚言語データ入力部４２及び色調感覚言語データ作成用入力部５５の双方を兼ねている。画像データ入力装置１０４は、上記画像データ入力部２２、５２の双方を兼ねている。出力装置５は、上記表示部１５、４５の双方を兼ねている。配色感覚言語データ蓄積部１１０は、上記配色感覚言語データ蓄積部２１に相当する。色調感覚言語データ蓄積部１１１は、上記色調感覚言語データ蓄積部５１に相当する。画像データ蓄積部１１２は、上記画像データ蓄積部１１、４１に相当する。配色パターンデータ解析演算部１１３は、上記画像データ解析部２４の一部に相当する。色調パターンデータ解析演算部１１４は、上記色調空間決定部５４の一部に相当する。画像データ色情報解析演算部１１６は、上記配色感覚点数データ算出部３１と色調感覚点数データ算出部６１の双方を兼ねている。配色感覚空間出力演算部１１７は、図７に示すような配色感覚空間を出力するための演算部である。色調感覚空間出力演算部１１８は、図１６に示すような色調感覚空間を出力するための演算部である。画像データ出力演算部１１９は、上記画像データ抽出部１４、４４の双方を兼ねている。
【０１８７】
以上のように、本発明によれば、デジタルカメラやデジタル画像処理ソフトの普及により、個人もしくは企業のコンピュータハードディスクやインターネット上のハードディスクに大量に蓄積されている写真やデザイン画像を、画像の配色特徴からの配色感覚言語データの自動付与と配色感覚点数データをつけ、あるいは、色調の特徴からの色調感覚言語データの自動付与と色調感覚点数データをつけて、感性語による画像検索を行うことが出来る。
【０１８８】
又、本発明によれば、個人や企業が保有する大量のデジタル画像に自動的に配色感覚に適応した感性語等の配色感覚言語データや、色調に対応した感性語等の色調感覚言語データを付与し、画像検索することで、一つ一つ探す手間を大幅に削減することが可能になる。
【０１８９】
例えば、商業目的で使われる場合、ストックフォトやデザイン素材を販売する企業では、大量にデジタル画像を蓄積しているが、それらをデザイナーや広告代理店が探すとき、被写体やシーンなどが明確な場合もあるが、感覚的な言葉にしかならない漠然としたイメージのときも多い。その場合、感性語で検索することができれば、非常に効果的である。
【０１９０】
更に、本発明では配色パターンに対応した配色感覚言語データや、色立体に対応した色調感覚言語データを簡単に作ることができるため、例えば、地域別に複数の人数で作成してもらうことにより、デザイン画像を配色感覚言語データや、色調感覚言語データで検索することで感性的な傾向が把握できるようになる。
【０１９１】
また、個人の収集したデジタル画像でも、時間、場所とも不明確であるとともに、写真にタイトルやキーワードを付与していない場合がほとんどである。そのような場合も、感性語を手がかりに検索することで目的の画像を発見することが可能になる。
【０１９２】
尚、本発明のプログラムは、上述した本発明の画像検索方法の少なくとも、各ステップの動作をコンピュータにより実行させるプログラムであって、コンピュータと協働して動作するプログラムである。
【０１９３】
又、本発明の記録媒体は、上述した本発明の画像検索方法の各ステップの全部又は一部の動作をコンピュータにより実行させるプログラムを記録した記録媒体であり、コンピュータにより読み取り可能且つ、読み取られた前記プログラムが前記コンピュータと協動して前記動作を実行する記録媒体である。
【０１９４】
又、本発明の上記「各ステップの動作」とは、前記ステップの全部又は一部の動作を意味する。
【０１９５】
又、本発明のプログラムの一利用形態は、コンピュータにより読み取り可能な、ＲＯＭ等の記録媒体に記録され、コンピュータと協働して動作する態様であっても良い。
【０１９６】
又、本発明のプログラムの一利用形態は、インターネット等の伝送媒体、光・電波・音波等の伝送媒体中を伝送し、コンピュータにより読みとられ、コンピュータと協働して動作する態様であっても良い。
【０１９７】
又、上述した本発明のコンピュータは、ＣＰＵ等の純然たるハードウェアに限らず、ファームウェアや、ＯＳ、更に周辺機器を含むものであっても良い。
【０１９８】
尚、以上説明した様に、本発明の構成は、ソフトウェア的に実現しても良いし、ハードウェア的に実現しても良い。
【産業上の利用可能性】
【０１９９】
本発明の画像検索装置は、より広い範囲の画像データに適用可能な効果を有し、又、色調を用いた画像検索を行うことが可能な効果を有し、個人もしくは企業のコンピュータハードディスクやインターネット上のハードディスクに大量に蓄積されている写真やデザイン画像等の検索装置として有用である。
【符号の説明】
【０２００】
１  画像検索システム
２  通信ネットワーク
６  ユーザ端末
１０、３０、４０、６０、１００  画像検索装置
１１、４１  画像データ蓄積部
１２  配色感覚言語データ入力部
１３  配色感覚点数データ蓄積部
１４  画像データ抽出部
１５  表示部
２０、５０  データベース作成装置
２１  配色感覚言語データ蓄積部
２２  画像データ入力部
２３  蓄積用配色感覚点数データ算出部
２４  画像データ解析部
２５  配色感覚言語データ作成用入力部
３１  配色感覚点数データ算出部
４２  色調感覚言語入力部
４３  色調感覚点数データ蓄積部
４４  画像データ抽出部
４５  表示部
５４  色調空間決定部
５５  色調感覚言語データ作成用入力部
６１  色調感覚点数算出部
１０１  コンピュータ
１０２  配色感覚言語データ入力装置
１０３  色調感覚言語データ入力装置
１０４  画像データ入力装置
１０５  出力装置
１０６  主記憶装置
１０７  中央演算装置
１０８  バス
１０９  画像検索処理プログラム格納部
１１０  配色感覚言語データ蓄積部
１１１  色調感覚言語データ蓄積部
１１２  画像データ蓄積部
１１３  配色パターンデータ解析演算部
１１４  色調パターンデータ解析演算部
１１５  画像データ蓄積演算部
１１６  画像データ色情報解析演算部
１１７  配色感覚空間出力演算部
１１８  色調感覚空間出力演算部
１１９  画像データ出力演算部
【図１】
2012108721.tif 000003
【図２】
2012108721.tif 000004
【図３】
2012108721.tif 000005
【図５】
2012108721.tif 000006
【図６】
2012108721.tif 000007
【図８】
2012108721.tif 000008
【図９】
2012108721.tif 000009
【図１０】
2012108721.tif 000010
【図１１】
2012108721.tif 000011
【図１２】
2012108721.tif 000012
【図１３】
2012108721.tif 000013
【図１５】
2012108721.tif 000014
【図１７】
2012108721.tif 000015
【図１８】
2012108721.tif 000016
【図１９】
2012108721.tif 000017
【図２０】
2012108721.tif 000018
【図２１】
2012108721.tif 000019
【図２２】
2012108721.tif 000020
【図２３】
2012108721.tif 000021
【図２４】
2012108721.tif 000022
【図４】
2012108721.tif 000023
【図７】
2012108721.tif 000024
【図１４】
2012108721.tif 000025
【図１６】
2012108721.tif 000026