(57)【要約】【課題】画像や音楽などの情報（コンテンツ）にタグ情報を付与する場合に、効率的にタグを収集するとともに、収集されるタグも多岐にわたることが可能なコンテンツタグ収集方法を得る。【解決手段】検索対象コンテンツに対するタグ情報を複数のユーザから収集するタグ情報収集方法において、共通するタグが付与されたコンテンツを複数個選択し、前記複数のコンテンツを前記共通するタグとともに各ユーザに示し、一方のユーザに前記検索対象コンテンツを明示的に示した上で、該検索対象コンテンツに関連するタグ情報を入力させるとともに、他方のユーザに入力された前記タグ情報を提示し、検索対象コンテンツを選択させる処理を行うことで前記タグ情報を前記検索対象コンテンツのタグ情報とする。【選択図】図１
2011076366.tif 000002
【特許請求の範囲】
【請求項１】
検索対象コンテンツに対するタグ情報を複数のユーザから収集するタグ情報収集方法において、
共通するタグが付与されたコンテンツを複数個選択し、前記複数のコンテンツを前記共通するタグとともに各ユーザに示し、
一方のユーザに前記検索対象コンテンツを明示的に示した上で、該検索対象コンテンツに関連するタグ情報を入力させるとともに、
他方のユーザに入力された前記タグ情報を提示し、検索対象コンテンツを選択させる処理を行うことで前記タグ情報を前記検索対象コンテンツのタグ情報とする
ことを特徴としたコンテンツタグ収集方法。
【請求項２】
前記コンテンツは画像である請求項１に記載のコンテンツタグ収集方法。
【請求項３】
タグ情報の収集処理はネットワーク経由で行う請求項１に記載のコンテンツタグ収集方法。
【請求項４】
請求項１乃至請求項３のいずれか１項に記載のコンテンツタグ収集方法をコンピュータに実行させるためのコンテンツタグ収集用プログラム。
【請求項５】
検索対象コンテンツに対するタグ情報を複数のユーザから収集するコンテンツタグ収集システムにおいて、
タグを付与するための複数のコンテンツが格納されたコンテンツデータベースと、
前記各コンテンツにタグを付与する初期タグ情報収集手段と、
前記各コンテンツに付与されたタグを格納するタグデータベースと、
前記初期タグ情報収集手段により付与されたタグ情報を分析し共通するタグが付与されているコンテンツ群を前記コンテンツデータベースから抽出する共通タグ情報抽出手段と、
前記共通タグ情報抽出手段により抽出された前記共通するタグが付与されたコンテンツ群を対象に、一方のユーザには前記コンテンツ群を示した上で、前記コンテンツ群の中の１つのタグ付与対象コンテンツに関連するタグ情報を入力させ、他方のユーザには入力されたタグ情報を前記コンテンツ群及び共通するタグ情報とともに提示し、前記タグ付与対象コンテンツを選択させることで新たなタグ情報を得る拡張タグ情報収集手段と
を具備することを特徴とするコンテンツタグ収集システム。
【請求項６】
前記コンテンツは画像である請求項５に記載のコンテンツタグ収集システム。
【請求項７】
検索対象コンテンツに対するタグ情報を複数のユーザから収集し、前記タグ情報を基にコンテンツを検索するコンテンツ検索システムにおいて、
タグを付与するための複数のコンテンツが格納されたコンテンツデータベースと、
前記各コンテンツにタグを付与する初期タグ情報収集手段と、
前記各コンテンツに付与されたタグを格納するタグデータベースと、
前記初期タグ情報収集手段により付与されたタグ情報を分析し共通するタグが付与されているコンテンツ群を前記コンテンツデータベースから抽出する共通タグ付与コンテンツ抽出手段と、
前記共通タグ付与コンテンツ抽出手段により抽出された前記共通するタグが付与されたコンテンツ群を対象に、一方のユーザには前記コンテンツ群を示した上で、前記コンテンツ群の中の１つのタグ付与対象コンテンツに関連するタグ情報を入力させ、他方のユーザには入力されたタグ情報を前記コンテンツ群及び共通するタグ情報とともに提示し、前記タグ付与対象コンテンツを選択させることで新たなタグ情報を得る拡張タグ情報収集手段と、
前記初期タグ情報収集手段及び拡張タグ情報収集手段により収集された各コンテンツのタグ情報を検索キーとしてユーザが入力するキーワードとの照合によりコンテンツを検索するコンテンツ検索手段と
を具備することを特徴とするコンテンツ検索システム。
【請求項８】
前記コンテンツ検索手段は、前記初期タグ情報収集手段によりタグ情報が付与されていないコンテンツが存在する場合に、タグが付与されていないコンテンツに対して、タグが付与されているコンテンツとの類似性を判断し、タグを類推して検索のためのキーワードを自動的に付与して検索対象コンテンツに含める機能を有する請求項７に記載のコンテンツ検索システム。
【請求項９】
前記コンテンツは画像である請求項７又は請求項８に記載のコンテンツ検索システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、商品・広告等の画像や音楽などの情報（コンテンツ）を直観的なキーワードで検索する場合に、所望のコンテンツの検索を実現するため画像や音楽などのコンテンツに付与されるタグを収集するコンテンツタグ収集方法、コンテンツタグ収集用プログラム及びコンテンツタグ収集システム、並びに、この技術を用いて収集されたタグ情報を基に画像や音楽などのコンテンツを検索するコンテンツ検索システムに関する。
【背景技術】
【０００２】
ユーザがWeb上で商品・広告等の画像や音楽などの情報（コンテンツ）を検索する場合、キーワードを入力することで各コンテンツ内容との照合により検索が行われる。コンテンツが画像である場合、画像解析技術により画像の特徴（色、テクスチャなど）を解析し、画像を検索するためのキーワード情報を各コンテンツ内容として抽出することが行われている。
【０００３】
このような画像解析技術は数多く開発され、例えば、非特許文献１には、画像の特徴を利用した画像の検索技術が多数紹介されている。
こうした既存研究の多くでは、学習データ（カテゴリ名称が付与された画像データ）に基づき、各画像の分類対象となるカテゴリごとに、分類器を構築する手法が主流となっている。
【０００４】
画像検索に際して、画像に既に付与されている関連情報（メタ情報）を活用する技術も存在する。特許文献１の「画像データに応じた情報検索」によれば、画像に付与されている位置情報に基づいて地図検索を行い、その結果（当該位置近傍の建物などの名称）を当該画像のメタ情報として付与する手法（メタ情報活用方式）が提案されている。この手法により、例えば「建物の名称」を検索クエリとして、画像検索を行うことができる。
【０００５】
また、特許文献２の「画像検索システム、画像検索プログラムおよびサーバ装置」によれば、インターネット上で公開されている位置情報付画像を解析した結果を利用し、ユーザが撮影した画像の対象物を推測し、その推測結果に基づく画像検索・整理技術が提案されている。この手法においても、画像に付与されている位置情報が利用されている。
【０００６】
上述した画像解析技術を実現するためには、大量の学習データが必要となるが、人手で良質な学習データを集めることは困難である。そこで、Web上で公開されている画像に付与されているタグ情報を利用して、画像検索システムや画像分類器を構築する手法（ソーシャルタグ方式）が近年増加している。
【０００７】
具体的には、非特許文献２に示されるFlickrなど、Web上の画像共有サイトにおいて、公開されている画像ならびにタグ情報を利用し、たとえば「リンゴ」「風景」などといったタグが付与されている画像を収集することができる。更に、これらのキーワードに基づいて得られた画像群を、学習データとして活用する例が数多く見られる。
【０００８】
また、画像に対し効率的に精度の高いタグ情報を収集するための仕組みとして、非特許文献３及び非特許文献４に示される"Games with a Purpose"（以下、「GWAPアプリ」と称する）という手法が提案されている。
このGWAPアプリは、ランダムに選ばれた２人１組のユーザ（プレイヤー）に対し、共通の画像を提示し、提示された画像から想起されるキーワードを各プレイヤーが入力し、両プレイヤーが入力したキーワードが１つでも一致すれば、当該画像を「クリア」として次の画像を表示するゲーム形式のアプリケーションである。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００６−２８５５２６
【特許文献２】特願２００９−１５３４５２
【非特許文献】
【００１０】
【非特許文献１】A. W. M. Smeulders, et al.: Content-based image retrieval at the end of the early years, IEEE Trans. Pattern Analysis and Machine Intelligence, Vol. 22, No. 12, pp. 1349-1380, 2000.
【非特許文献２】http://flickr.com/
【非特許文献３】L. von Ahn,: "Games with a purpose", IEEE Computer, 39(6), 92-94, 2006.
【非特許文献４】L. von Ahn, L. Dabbish: "Labeling images with a computer game", Proc. of the SIGCHI conference on human factors in computing systems, pp. 319-326, 2004.
【発明の概要】
【発明が解決しようとする課題】
【００１１】
メタ情報を使用してWeb上で商品・広告等の画像や音楽などの情報（コンテンツ）を検索する場合、入力されたキーワードと各コンテンツに付与されているタグ情報とを比較することで検索が行われる。この場合、的確な検索が行われるためには、ユーザが入力する可能性が高いタグ情報がコンテンツ側に付与されていることが必要となる。
【００１２】
上述した画像解析技術では、画像の特徴から推測できる対象物は限られ、また、推測対象物ごとに大量の学習データを収集する必要があるため、広範な検索を実現することが難しい。
【００１３】
メタ情報活用方式の場合、画像に付与されているメタ情報が上記の例で示した位置情報や撮影時刻の情報が限られているため、検索のキーワードと成り得る情報の抽出についても、例えば場所に対応づけられるランドマーク名称などに限定されてしまう。そのため、これらの方式では、汎用的な検索キーワードを利用した画像検索を実現することは困難である。
【００１４】
ソーシャルタグ方式の場合、画像コンテンツを公開したユーザ、もしくはその画像を閲覧したユーザが自由にタグを付与するため、同じ情報を表わすタグであっても、表記ゆれなどにより、その画像を検索したいと考えているユーザが入力した検索キーワードとの間で齟齬が発生し、所望の画像が検索されにくいという問題点がある。また、そもそも付与されるタグ情報が誤っている場合、当該画像コンテンツが検索できないという問題点を有している。
【００１５】
上述したGWAPアプリでは、個々のユーザが画像に対してタグ情報を付与する前述のソーシャルタグ形式と異なり、組まされたパートナーとの合意が必要となるため、誤ったタグ情報が付与されにくいという利点がある。すなわち、タグを付与する際に、アプリケーションにおけるパートナーとの合意を必要とするため、上記のソーシャルタグ方式と比べると、タグの正確性は高い。
【００１６】
その一方、合意を必要とするゆえ、画像に対して付与されるタグ情報が極端に偏るという傾向がある。例えば、示された画像の色を表わすキーワードは、容易に合意が得られやすいため、GWAPアプリのプレイヤーが頻繁に入力しがちなキーワードであるが、同アプリに習熟していくにつれ、色情報のみをキーワードとして入力して、パートナーがそのキーワードを入力するまで待機するプレイヤーが増える傾向がみられる。
その結果、検索対象画像コンテンツに、実質、色情報を表わすタグのみが付与される傾向に陥ってしまい、そのタグ情報を利用した検索システムの利便性が下がるという問題点がある。
【００１７】
これらの問題を解決するための手段として、頻繁に入力されるキーワードを自動的に抽出し、ＮＧワード（当該画像に対し、入力が禁じられるキーワード）として指定する手法が提案されている。しかしながら、この手法を単純に適用しただけでは、次の偏重キーワードが導出されるだけの効果しか得られない。したがって、発散したタグ情報の収集という目的を果たすには非効率的である。
【００１８】
本発明は上記事情に鑑みて提案されたもので、画像や音楽などの情報（コンテンツ）にタグ情報を付与する場合に、効率的にタグを収集するとともに、収集されるタグも多岐にわたることが可能なコンテンツタグ収集方法、コンテンツタグ収集用プログラム、コンテンツタグ収集システム、及び、この技術を用いて収集されたタグ情報を基に直観的な検索キーワードに基づく画像検索等のコンテンツ検索の実現を可能とするコンテンツ検索システムを提供することを目的とする。
【課題を解決するための手段】
【００１９】
上記目的を達成するため本発明のコンテンツタグ収集方法（請求項１）は、検索対象コンテンツに対するタグ情報を複数のユーザから収集するタグ情報収集方法において、共通するタグが付与されたコンテンツを複数個選択し、前記複数のコンテンツを前記共通するタグとともに各ユーザに示し、
一方のユーザに前記検索対象コンテンツを明示的に示した上で、該検索対象コンテンツに関連するタグ情報を入力させるとともに、
他方のユーザに入力された前記タグ情報を提示し、検索対象コンテンツを選択させる処理を行うことで前記タグ情報を前記検索対象コンテンツのタグ情報とする
ことを特徴としている。
【００２０】
請求項２は、請求項１のコンテンツタグ収集方法において、前記コンテンツは画像であることを特徴としている。
【００２１】
請求項３は、請求項１のコンテンツタグ収集方法において、タグ情報の収集処理はネットワーク経由で行うことを特徴としている。
【００２２】
請求項４は、請求項１乃至請求項３のいずれか１項に記載のコンテンツタグ収集方法をコンピュータに実行させるためのコンテンツタグ収集用プログラムであることを特徴としている。
【００２３】
本発明のコンテンツタグ収集システム（請求項５）は、検索対象コンテンツに対するタグ情報を複数のユーザから収集するコンテンツタグ収集システムにおいて、
タグを付与するための複数のコンテンツが格納されたコンテンツデータベースと、
前記各コンテンツにタグを付与する初期タグ情報収集手段と、
前記各コンテンツに付与されたタグを格納するタグデータベースと、
前記初期タグ情報収集手段により付与されたタグ情報を分析し共通するタグが付与されているコンテンツ群を前記コンテンツデータベースから抽出する共通タグ情報抽出手段と、
前記共通タグ情報抽出手段により抽出された前記共通するタグが付与されたコンテンツ群を対象に、一方のユーザには前記コンテンツ群を示した上で、前記コンテンツ群の中の１つのタグ付与対象コンテンツに関連するタグ情報を入力させ、他方のユーザには入力されたタグ情報を前記コンテンツ群及び共通するタグ情報とともに提示し、前記タグ付与対象コンテンツを選択させることで新たなタグ情報を得る拡張タグ情報収集手段と
を具備することを特徴としている。
【００２４】
請求項６は、請求項５のコンテンツタグ収集システムにおいて、前記コンテンツは画像であることを特徴としている。
【００２５】
本発明のコンテンツ検索システム（請求項７）は、検索対象コンテンツに対するタグ情報を複数のユーザから収集し、前記タグ情報を基にコンテンツを検索するコンテンツ検索システムにおいて、
タグを付与するための複数のコンテンツが格納されたコンテンツデータベースと、
前記各コンテンツにタグを付与する初期タグ情報収集手段と、
前記各コンテンツに付与されたタグを格納するタグデータベースと、
前記初期タグ情報収集手段により付与されたタグ情報を分析し共通するタグが付与されているコンテンツ群を前記コンテンツデータベースから抽出する共通タグ付与コンテンツ抽出手段と、
前記共通タグ付与コンテンツ抽出手段により抽出された前記共通するタグが付与されたコンテンツ群を対象に、一方のユーザには前記コンテンツ群を示した上で、前記コンテンツ群の中の１つのタグ付与対象コンテンツに関連するタグ情報を入力させ、他方のユーザには入力されたタグ情報を前記コンテンツ群及び共通するタグ情報とともに提示し、前記タグ付与対象コンテンツを選択させることで新たなタグ情報を得る拡張タグ情報収集手段と、
前記初期タグ情報収集手段及び拡張タグ情報収集手段により収集された各コンテンツのタグ情報を検索キーとしてユーザが入力するキーワードとの照合によりコンテンツを検索するコンテンツ検索手段と
を具備することを特徴としている。
【００２６】
請求項８は、請求項７のコンテンツ検索システムにおいて、前記コンテンツ検索手段は、前記初期タグ情報収集手段によりタグ情報が付与されていないコンテンツが存在する場合に、タグが付与されていないコンテンツに対して、タグが付与されているコンテンツとの類似性を判断し、タグを類推して検索のためのキーワードを自動的に付与して検索対象コンテンツに含める機能を有することを特徴としている。
【００２７】
請求項９は、請求項７又は請求項８のコンテンツ検索システムにおいて、前記コンテンツは画像であることを特徴としている。
【発明の効果】
【００２８】
本発明によれば、一方のユーザに検索対象コンテンツを明示的に示した上で、該検索対象コンテンツに関連するタグ情報を入力させるとともに、他方のユーザに入力された前記タグ情報を提示し、検索対象コンテンツを選択させる処理を行うことでタグ情報を収集するので、従来型のGWAPアプリと同様に、Web上に公開されたアプリケーションにより多数のユーザからコンテンツのタグ情報を効率的に収集することができる。
また、共通するタグが付与されたコンテンツを複数個選択した上で、新たなタグ情報を拡張して収集するので、多岐にわたるタグを収集することができる。
【００２９】
また、拡張して収集されたタグ情報を基にコンテンツを検索することで、直観的な検索キーワードに基づくコンテンツ検索の実現を可能とすることができる。
【図面の簡単な説明】
【００３０】
【図１】本発明の画像タグ収集システム（コンテンツタグ収集システム）の実施の一例を示すブロック図である。
【図２】本発明の画像タグ収集システムにおける初期タグ情報収集モジュールで行われるＧＷＡＰ形式により各ユーザに表示される画面を示す説明図である
【図３】本発明の画像タグ収集システムにおける共通タグ付与画像抽出モジュールで行われる画像抽出処理を示すフローチャート図である。
【図４】（ａ）及び（ｂ）は、本発明の画像タグ収集システムにおける拡張タグ情報収集モジュールで行われる画像タグ収集処理で各ユーザに表示される各画面の説明図である。
【図５】本発明の画像検索システム（コンテンツ検索システム）の実施の一例を示すブロック図である。
【発明を実施するための形態】
【００３１】
本発明のコンテンツタグ収集システムの実施の形態の一例について、図面を参照しながら説明する。
図１に示したコンテンツタグ収集システムは、複数のユーザ端末１からの操作によりネットワーク２を介して接続された画像タグ収集装置８により、画像に対してタグ情報を収集し、画像に対して付与するものである。
各ユーザ端末１は、入力部、表示部、記憶部、中央演算処理部等を備えた一般的なＰＣにより構成されている。
画像タグ収集装置８は、例えばネットワーク２に接続されたサーバ内に構築されている。サーバは、基本プログラムや各種の基本デバイスが記憶されたROMと、各種のプログラムションやデータが記憶されるハードディスクドライブ装置(HDD)と、CR-ROMやDVD等の記憶媒体からプログラムやデータを読み出すメディアドライブ装置と、プログラムを実行するCPUと、このCPUにワークエリアを提供するRAMなどを備えて構成され、画像タグ収集用プログラム（コンテンツタグ収集用プログラム）がメディアドライブ装置で読み取られてHDDに予め記憶されることで、画像タグ収集のための各種処理が実行される。
【００３２】
すなわち、画像タグ収集装置８は、タグ付与の対象となる画像データに初期タグを付与する初期タグ情報収集モジュール１１と、共通の初期タグが付与された複数画像の抽出を行う共通タグ付与画像抽出モジュール１２と、初期タグが付与された画像にさらに別のタグ（拡張タグ）を付与する拡張タグ情報収集モジュール１３と、タグ付与の対象となる画像データを格納した画像データベース１４と、画像データベース１４内の画像に対して付与されるタグ情報を格納したタグデータベース１５を有して構成されている。
【００３３】
初期タグ情報収集モジュール１１は、画像データベース１４からタグを付与する対象となる画像を順次取り込み、インターネット上の各ユーザ端末１に提示し、GWAPアプリ形式で当該画像に対するタグ情報を収集するモジュールである。
【００３４】
共通タグ付与画像抽出モジュール１２は、初期タグ情報収集モジュール１１によって得られた個々の画像に対して付与されているタグ情報を分析し、偏って付与されているタグ、ならびに、共通のタグが付与されている画像群を、画像データベース１４から抽出する処理を行うモジュールである。
【００３５】
拡張タグ情報収集モジュール１３は、共通タグ付与画像抽出モジュール１２によって抽出された、共通のタグ情報が付与された画像群を対象に、後述の方法により、拡張タグ情報を収集する処理を行うモジュールである。
【００３６】
次に、画像タグ収集装置８により画像に対するタグ情報を収集する手順について、図２〜図４を参照しながら説明する。
【００３７】
初期タグ情報収集モジュール１１において適用するGWAPアプリの画面構成例を図２に示す。図２は、GWAPアプリのプレイヤーとなる２人１組のユーザのうちの一方のユーザに示される画面２０の例を示している。中央の画像２１は、双方のユーザの画面に表示されており、各ユーザは、この画像２１から想起されるキーワードを、画像２１の下のフォーム２３から入力する。画像右側（「入力済ワード」）には、本画面を見ているユーザが入力したキーワードの一覧表２２が示されている。
【００３８】
一方のユーザの一覧表２２に表示されたキーワードのいずれかが、他方のユーザ（パートナー）が入力したキーワードと一致した場合、この画像は「クリア」となり、次の画像が示される…という流れのゲームである。そして、各画像に対し、両ユーザが入力したキーワードは、当該画像２１に対するタグ情報として、全てタグデータベース１５に格納される。
【００３９】
この基本的なGWAPアプリを用いることにより、画像データベース１４内の格納された各画像に対する「初期タグ」は収集できる。しかしながら、初期タグ情報収集モジュール１１だけでキーワードを収集した場合、入力されるタグ情報に偏りが生じる場合が多い（図２のスニーカ―の画像が黄色である場合、色に関連するキーワード（この例の場合、「黄色」）が入力されることが多い）。
【００４０】
本発明の画像タグ収集装置８では、初期タグ情報収集モジュール１１に加えて、共通タグ付与画像抽出モジュール１２及び拡張タグ情報収集モジュール１３を設けることで、画像データベース１４内の各画像に対してさらに別のタグ（拡張タグ）を付与することが行われる。
【００４１】
すなわち、共通タグ付与画像抽出モジュール１２では、初期タグ情報収集モジュール１１により各画像について一定数以上のタグ情報が付与された画像の中から、特に付与されているタグ情報が偏っている複数画像を抽出する処理を行う。共通タグ付与画像抽出モジュール１２における処理について、図３を参照しながら説明する。
【００４２】
先ず、画像データベース１４に格納されている全ての画像を対象に、画像に付与されているタグの集合を数１で表し（ステップ３１）、タグtiが画像iに付与されている件数を｜ti,j｜と表す。
【００４３】
次に、画像iに付与されているタグの中で、｜ti, j｜が最大のタグの出現確率を、スコア値として数２により算出する（ステップ３２）。
全タグについてスコア値を算出し（ステップ３３）、スコア値が最大となるタグを抽出する（ステップ３４）。
【００４４】
【数１】
2011076366.tif 000003
【００４５】
【数２】
2011076366.tif 000004
【００４６】
数２で算出された出現確率が、予め定められた閾値（ｔmax）以上であるかどうかを判断し（ステップ３５）、閾値以上である画像とタグの組合せを共通タグ付与対象画像候補として抽出する（ステップ３６）。
全画像について上述の処理が行われた場合に（ステップ３７）、処理を終了する。
【００４７】
拡張タグ情報収集モジュール１３では、上記の処理の結果、抽出された画像群の中から、共通のタグが付与されている画像を複数個選択する。そして、２人１組のユーザに、選択された複数画像を提示して、一方のユーザ（以下、「タグ付与ユーザ」）にはタグ付与対象の画像を１つ示した上で、その画像を表すタグを入力してもらう。他方のユーザ（以下、「画像選択ユーザ」）には、選択された複数の画像と、タグ付与ユーザが入力したキーワードを提示した上で、タグ付与ユーザがタグを付与している画像を選択させる形式で、拡張タグ情報を収集する。
【００４８】
図４（ａ）（ｂ）に、拡張タグ情報収集モジュール１３のアプリケーションでのタグ付与ユーザ向け及び画像選択ユーザ向けの具体的な画面構成の例を示す。
図４（ａ）はタグ付与ユーザ（プレーヤーＡ）に示される画面４０であり、中央に示される４つの複数画像４１は、例えば「シューズ」「黄色」という共通タグが高い確率で付与されている画像群の中から選択されている状況を示している。
【００４９】
そして、タグ付与ユーザは、システムによって矢印４２で指示された画像（この例では左から２番目）に対して想起されるキーワードをキーワード入力窓４５に入力する。ここで、共通のタグが付与されている複数の画像が示されていることにより、タグ付与ユーザは、共通のキーワードである「シューズ」「黄色」以外のキーワードで、かつ矢印４２で指示された画像を特徴的に表すキーワードを入力する必要があることがわかる。この効果により、タグ付与対象画像に対する特徴的かつ拡張的なキーワードを収集することができる。
【００５０】
共通のキーワードである「シューズ」「黄色」は、入力できないＮＧワード４３として表示されている。また、既にタグ付与ユーザにより入力されたキーワードは、入力済ワード４４として表示される。
【００５１】
図４（ｂ）に、画像選択ユーザ（プレーヤーＢ）に示される具体的な画面構成例を示す。
画面５０では、図４（ａ）の画面４０でタグ付与ユーザに提示されている複数画像４１と同じ４つの画像を含む複数画像５１が表示されている。ただし、例えばタグ付与ユーザが「一番右」といった画像自体とは無関係なキーワードを入力することを防ぐために、複数画像４１に対して複数画像５１の表示順は変更することが望ましい。そして、タグ付与ユーザが入力したキーワードが入力済ワード５２（入力済ワード４４と同じワード）として随時表示される。
【００５２】
画像選択ユーザは、ここで表示されるキーワードをヒントとして、タグ付与ユーザが着目している画像（タグの付与を行っている画像）について、画像下の各選択窓５３をクリックすることで選択する。タグ付与ユーザが着目している画像が表示された入力済ワード５２で解らない場合は、「パスする」と表示されたパス窓５４をクリックすることで、タグ付与ユーザに対してキーワード入力窓４５への新たなキーワードの入力を促す。
【００５３】
この際、でたらめに選択ボタンを押すなどの行為を防止するため、選択できる回数は１回とし、選択した画像が不正解の場合は、減点するなどのペナルティを与えた上で、次の画像群に移るなどのルールを採用する。
【００５４】
上記の各アプリケーションをWeb上に公開し、多数のユーザから画像のタグ情報を収集することにより、画像データベース１４に格納されている各画像に対する多種多様なタグ情報を、効率的に収集することが可能になる。
【００５５】
次に上述の画像タグ収集装置を利用した画像検索装置９について、図５を参照しながら説明する。図中、図１と同じ構成をとる部分については同一符号を付して説明を省略する。
【００５６】
画像検索装置９では、画像タグ収集装置の構成に加えて、タグデータベース１５とユーザ端末３との間に画像検索モジュール１９を介在させている。
ユーザ端末３は、入力部、表示部、記憶部、中央演算処理部等を備えた一般的なＰＣにより構成されている。画像検索モジュール１９に画像検索のアクセスするユーザ（ユーザ端末３）は、タグ情報収集モジュールを利用するユーザ（GWAPアプリにおける「プレイヤー」）とは異なるユーザであってもよい。
画像検索モジュール１９は、初期タグ情報収集モジュール１１及び拡張タグ情報収集モジュール１３によって収集された、画像へのタグ情報を検索キーとして、ユーザ端末３から画像を検索するモジュールである。
【００５７】
画像検索モジュール１９の画像検索処理では、上記の各処理によって集められたタグ情報を検索キーワードとして、画像データベース１４内の各画像を検索する処理を行い、検索結果をユーザ端末３側に表示する。
具体的には、画像検索モジュール１９にアクセスするユーザ端末３によって入力された任意のキーワードと、タグデータベース１５内のキーワードとの照合による検索のほか、タグデータベース１５に含まれるタグ情報のうち、入力数が上位のキーワードをメニュー形式でユーザ端末３に示すなどといった形態が望ましい。
【００５８】
画像検索モジュール１９は、初期タグ情報収集モジュール１１によりタグ情報が付与されていない画像が存在する場合に、タグが付与されていない画像に対して、タグが付与されている画像（タグ付与済画像）との類似性を判断し、タグを類推して検索のためのキーワードを自動的に付与して検索対象画像に含める機能を有するようにしてもよい。
【００５９】
検索のためのキーワードを自動的に付与するやり方としては、例えば、ある特定のキーワードが付与されやすい画像のジャンルが存在する場合、同ジャンルに属する他の画像にも同じキーワードを付与することで行う。また、特定のキーワードが付与されている画像に共通した視覚的特徴量（色情報など）が見られる場合、同様の特徴を有する画像に対し、同じキーワードを付与することで行う。
タグが付与されていない画像について、他の画像との比較において「同ジャンルに属するか否か」及び「共通した視覚的特徴量が存在するかどうか」は、各画像特徴量を算出して比較して類似性を判断する既存技術を適用することで実現することができる。
【００６０】
上述した画像タグ収集装置８及び画像検索装置９においては、説明を簡易化するため、タグ収集対象や検索対象コンテンツを画像に限定したが、画像以外のコンテンツ（例えば、動画や音楽など）へ適用することも可能である。
例えば、タグ収集装置を動画コンテンツに適用する場合、画面２０の画像２１、画面４０の複数画像４１及び画面５０の複数画像５１にそれぞれ動画が表示されるようにする。
また、タグ収集装置を音楽コンテンツに適用する場合は、画面２０の画像２１部分、画面４０の複数画像４１の各画像部分、画面５０の複数画像５１の各画像部分をクリックすることでユーザ端末１のスピーカ部より音源が再生されるようにする。
【００６１】
上述した画像タグ収集装置８によれば、従来型のGWAPアプリと同様に、Web上に公開されたアプリケーションにより多数のユーザから画像のタグ情報を収集するができるので、効率的にタグが収集できる。また、拡張タグ情報収集モジュール１３によりタグの収集を拡張するため、収集されるタグも多岐にわたる効果が見込まれる。
その結果、この技術を用いて収集されたタグ情報を基に画像を検索する画像検索装置９を構成した場合に、従来技術では実現が困難な直観的な検索キーワードに基づく画像検索の実現が可能になる。
【符号の説明】
【００６２】
１…ユーザ端末、  ２…ネットワーク、  ３…ユーザ端末、  ８…画像タグ収集装置（コンテンツタグ収集システム）、  ９…画像検索装置（コンテンツ検索システム）、  １１…初期タグ情報収集モジュール（初期タグ情報収集手段）、  １２…共通タグ付与画像抽出モジュール（共通タグ付与コンテンツ抽出手段）、  １３…拡散タグ情報収集モジュール（拡散タグ情報収集手段）、  １４…画像データベース（コンテンツデータベース）、  １５…タグデータベース、  １９…画像検索モジュール。
【図１】
2011076366.tif 000005
【図３】
2011076366.tif 000006
【図５】
2011076366.tif 000007
【図２】
2011076366.tif 000008
【図４】
2011076366.tif 000009