(57)【特許請求の範囲】
【請求項１】
処理制御装置と、該処理制御装置に接続された記憶装置とを備えたペア画像投稿検索装置であって、
前記記憶装置は、少なくとも画像データ及びメタ情報を記録する画像データベースを備えており、
前記処理制御装置は、投稿のために入力された問題の知識に関する単体画像の画像データとメタ情報とを、投稿のために入力された解決の知識に関する単体画像の画像データとメタ情報とを、又は、投稿のために入力され投稿の後に検索されるペア画像を構成する問題及び解決の知識に関する単体画像の画像データとメタ情報とを、前記画像データベースに記録する投稿処理手段と、
検索のために入力されたキー画像と、問題の知識に関する単体画像、解決の知識に関する単体画像、又は問題及び解決の知識に関するペア画像を検索する指示検索種類とに基づいて、前記画像データベースに記録されている画像データ及びメタ情報から検索出力画像の検索を行う検索処理手段と、
を備えていることを特徴とするペア画像投稿検索装置。
【請求項２】
前記検索処理手段が、前記検索のために入力されたキーワードと、問題及び解決の知識に関するペア画像を検索する指示検索種類とに基づいて、前記画像データベースに記録されている画像データ及びメタ情報から検索出力画像の検索を行う手段を含むことを特徴とする請求項１に記載のペア画像投稿検索装置。
【請求項３】
前記記憶装置が、少なくとも投稿及び検索処理における評価情報を記録する評価情報データベースをさらに備えており、
前記投稿処理手段が、投稿のために入力された問題の知識に関する単体画像のメタ情報を、投稿のために入力された解決の知識に関する単体画像のメタ情報を、又は、投稿のために入力され投稿の後に検索されるペア画像を構成する問題及び解決の知識に関する単体画像のメタ情報を要素分解し、得られたメタタグを前記画像データベースに記録するメタタグ化手段を備えており、
前記検索処理手段が、前記検索のために入力されたキーワード又はキー画像と、前記画像データベースに記録されている画像データ及びメタタグと、前記評価情報データベースに記録されている評価情報とに基づいて、検索出力画像候補を決定する検索出力画像候補決定手段と、前記検索のために入力されたキーワード又はキー画像と、前記検索のために入力された指示検索種類と、前記画像データベースに記録されている画像データ及びメタタグと、前記評価情報データベースに記録されている評価情報とに基づいて、前記決定した検索出力画像候補から検索出力画像を決定する検索出力画像決定手段とを備えていることを特徴とする請求項１又は２に記載のペア画像投稿検索装置。
【請求項４】
前記検索出力画像候補決定手段が、前記評価情報データベースに記録されている評価情報であるメタタグ類似度データを読み出し、メタタグ類似度の高い画像を検索出力画像候補として探索する手段を備えていることを特徴とする請求項３に記載のペア画像投稿検索装置。
【請求項５】
前記検索出力画像候補決定手段が、前記評価情報データベースに記録されている評価情報である検索頻度データを読み出し、検出頻度の高い画像を検索出力画像候補として探索する手段を備えていることを特徴とする請求項３又は４に記載のペア画像投稿検索装置。
【請求項６】
前記検索出力画像決定手段が、前記探索した検索出力画像候補を対象として、指示検索種類の検索優先順１位２位の画像種類に応じて検索出力画像を決定する手段を備えていることを特徴とする請求項４又は５に記載のペア画像投稿検索装置。
【請求項７】
前記検索出力画像決定手段が、前記探索した検索出力画像候補を対象として、メタタグ類似度及び検索頻度を算出する手段と、該算出したメタタグ類似度及び検索頻度に応じて検索出力画像を決定する手段とを備えていることを特徴とする請求項５又は６に記載のペア画像投稿検索装置。
【請求項８】
前記検索処理手段が、前記検索のために入力された問題の知識に関するキーワードに基づいて解決の知識に関する単体の検索出力画像検索（ＫＷ１)を行う、解決の知識に関するキーワードに基づいて問題の知識に関する単体の検索出力画像検索（ＫＷ２)を行う、又は問題及び解決の知識に関するペアのキーワードに基づいて問題及び解決の知識に関するペアの検索出力画像検索（ＫＷ３)を行う、手段を備えていることを特徴とする請求項１から７のいずれか１項に記載のペア画像投稿検索装置。
【請求項９】
前記検索処理手段が、検索のために入力された解決の知識に関するキー画像に基づいて問題の知識に関する単体の検索出力画像検索（ＫＧ１)を行う、検索のために入力された問題の知識に関するキー画像に基づいて解決の知識に関する単体の検索出力画像検索（ＫＧ２)を行う、検索のために入力された問題の知識に関するキー画像に基づいて問題の知識に関する単体の検索出力画像検索（ＫＧ３)を行う、検索のために入力された解決の知識に関するキー画像に基づいて解決の知識に関する単体の検索出力画像検索（ＫＧ４)を行う、検索のために入力された問題及び解決の知識に関するペアのキー画像に基づいて問題若しくは解決の知識に関する検索出力画像検索（ＫＧ５)を行う、検索のために入力された問題及び解決の知識に関するペアのキー画像に基づいて問題若しくは解決の知識に関するペアの検索出力画像検索（ＫＧ６)を行う、又は検索のために入力された問題及び解決の知識に関するペアのキー画像に基づいて問題及び解決の知識に関するペアの検索出力画像検索（ＫＧ７)を行う手段を備えていることを特徴とする請求項１から７のいずれか１項に記載のペア画像投稿検索装置。
【請求項１０】
コンピュータを、
処理制御装置と、該処理制御装置に接続された記憶装置とを備えたペア画像投稿検索装置であって、
前記記憶装置は、少なくとも画像データ及びメタ情報を記録する画像データベースを備えており、
前記処理制御装置は、投稿のために入力された問題の知識に関する単体画像の画像データとメタ情報とを、投稿のために入力された解決の知識に関する単体画像の画像データとメタ情報とを、又は、投稿のために入力され投稿の後に検索されるペア画像を構成する問題及び解決の知識に関する単体画像の画像データとメタ情報とを、前記画像データベースに記録する投稿処理手段と、検索のために入力されたキー画像と、問題の知識に関する単体画像、解決の知識に関する単体画像、又は問題及び解決の知識に関するペア画像を検索する指示検索種類とに基づいて、前記画像データベースに記録されている画像データ及びメタ情報から検索出力画像の検索を行う検索処理手段とを備えているペア画像投稿検索装置として機能させるためのペア画像投稿検索プログラム。
【請求項１１】
前記検索処理手段が、前記検索のために入力されたキーワードと、問題及び解決の知識に関するペア画像を検索する指示検索種類とに基づいて、前記画像データベースに記録されている画像データ及びメタ情報から検索出力画像の検索を行う手段を含むことを特徴とする請求項１０に記載のペア画像投稿検索プログラム。
【請求項１２】
前記記憶装置が、少なくとも投稿及び検索処理における評価情報を記録する評価情報データベースをさらに備えており、
前記投稿処理手段が、投稿のために入力された問題の知識に関する単体画像のメタ情報を、投稿のために入力された解決の知識に関する単体画像のメタ情報を、又は、投稿のために入力され投稿の後に検索されるペア画像を構成する問題及び解決の知識に関する単体画像のメタ情報を要素分解し、得られたメタタグを前記画像データベースに記録するメタタグ化手段を備えており、
前記検索処理手段が、前記検索のために入力されたキーワード又はキー画像と、前記画像データベースに記録されている画像データ及びメタタグと、前記評価情報データベースに記録されている評価情報とに基づいて、検索出力画像候補を決定する検索出力画像候補決定手段と、前記検索のために入力されたキーワード又はキー画像と、前記検索のために入力された指示検索種類と、前記画像データベースに記録されている画像データ及びメタタグと、前記評価情報データベースに記録されている評価情報とに基づいて、前記決定した検索出力画像候補から検索出力画像を決定する検索出力画像決定手段とを備えているペア画像投稿検索装置として機能させるための請求項１０又は１１に記載のペア画像投稿検索プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、問題及び解決の知識にそれぞれ関する２種類の画像を単位として投稿及び検索視聴するためのペア画像投稿検索装置及びペア画像投稿検索プログラムに関する。
【背景技術】
【０００２】
近年の記憶媒体の大容量化や、インターネット上での静止画像及び動画像検索サービスの普及に伴い、ユーザーは大量の画像を入手することが可能となった。その代表的な画像検索サービスとして、静止画像検索視聴サービスであるグーグル社の画像検索サイト（http://www.google.com/）や、動画像検索視聴サービスである同じくグーグル社のユーチューブの動画検索サイト（http://www.youtube.com/）が良く知られている。これらの画像検索視聴サービスは、キーワード検索による検索方式を採用している。
【０００３】
キー画像検索という画像による画像の検索方式に関連するサービス例として、モーラウィン社音楽ダウンロードサイト（http://morawin.jp/）が存在する。この音楽配信サイトにおいては、音楽のジャケット画像を検索視聴させ、ジャケット画像からジャケット画像へ関連画像を検索表示する機能を提供している。
【０００４】
また、問題及び解決の知識に関する情報の検索視聴サービスとして、質問文という質問文書を利用して、これに関連する回答文書を関連付け、問題に対する解答回答知識という付加価値を提供するサービスがある。その代表例としてオーケーウェブなどのＱ＆Ａサービスが存在する（http://okwave.jp/）。この質問サイトでは、回答投稿者が、個々の質問に対し回答を投稿することにより、問題及び解決の組み合わせが決定される。
【０００５】
キーワードという文字以外のメディアをキーとして用いる検索サービスとして、統合検索視聴サービス、即ち検索キーを様々なソースのそれと組み合わせて横断検索できる検索視聴サービスがある。この統合検索視聴サービスの代表例として、ネイバー統合検索サイト（http://www.naver.jp/）がある。このネイバー統合検索サイトによれば、画像、ウェブ、ブログ、クチコミ、人物、映画、話題のまとめなどを一度に検索可能である。この機能は、より必要とする画像を検索視聴するためにどのようなキーワードがあるか又は適切かを画像に加えた複数のメディア検索により、理解することができる。
【０００６】
他の画像検索方法として、特許文献１には、クエリ画像及び検索対象画像の類似性を各特徴点の局所特徴量の類似性を考慮して評価する画像検索方法及びシステムが開示されている。この方法は、画像投稿者装置及びペア画像投稿検索プログラムの利用者により与えられたメタタグに代表される文章情報に基づく類似性ではなく、画質、即ちデジタル表示信号上のデータの類似性を利用している。
【０００７】
ウェブページ検索システムとして、非特許文献１には、従来の文章による形式知に依存した「自然言語知」、「メタデータ」に「動画知」を加えた「動画知」、及び「メタデータ」の３項組によるアーカイブ情報を利用して検索することが提案されている。
【０００８】
この非特許文献１によれば、動画や静止画に含まれる暗黙知は、文章による形式知よりも直感的に人間の記憶に植え付ける手段として力を発揮し、自分や他人の状態を理解する手がかりとして利用価値が高いとしている。ここでは、まず、一般のテキスト検索によりウェブページ内にあるテキスト情報及びそれが言及すると思われる同ページ内にある動画や静止画の画像の組み合わせを複数検索して参照し、次に、その中でも直感にあうと思われる画像の指定及び求める情報についての「質問文章」というテキスト情報を検索キーとして再度検索し、より望まれるテキスト情報と画像のセットを検索する方法を提案している。即ち、テキスト検索という自然言語知及び形式知に基づく検索方法に、画像指定による動画知及び暗黙知に基づく検索方法を追加し、さらに、質問文章を入力させ、より望ましい情報への絞り込みを図る検索を実現しようとしている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１１−００８５０７号公報
【非特許文献】
【００１０】
【非特許文献１】澤井  進、“３項組知識表現〈“動画知”、“自然言語知”、“メタデータ”〉とその知識創造支援活動への応用（博士論文）”、［online］、２００６年１２月、北陸先端化学技術大学院大学 知識科学研究科、［２０１１年８月２０日検索］、インターネット〈URL：https://dspace.jaist.ac.jp/dspace/handle/10119/3455〉
【発明の概要】
【発明が解決しようとする課題】
【００１１】
しかしながら、上述した従来の画像検索方法のいずれにも、以下のような問題点が存在していた。
（１）画像検索視聴者の、検索を望む問題及び／又は解決に関する知識不足に起因するキーワード検索の困難性、
（２）問題及び解決の知識に関する絞り込みによる検索視聴機能及びインターフェイスの欠如による問題、
（３）問題及び解決の知識の、問題解決知識として補完しあう異なった知識の存在に起因する相互検索の困難性、
（４）問題及び解決の区別なき投稿及び検索視聴プロセスによる、問題解決知識の増加による非効率性。
【００１２】
まず、（１）の問題点について説明する。単体の静止画像や単体の動画等の画像に関する現行の投稿検索視聴サービスにおいては、画像投稿者は、画像を問題及び解決の区別なく投稿し、画像検索視聴者は、画像を問題及び解決の区別なく検索視聴する。この状況において、画像検索視聴者が問題及び解決の知識の画像をそろって検索しようとする場合、問題及び解決の知識がそろって含まれる単体画像が十分に存在する状況が望まれる。その状況が期待できない場合、検索したい問題及び解決のいずれか一方の知識を含む画像が十分に存在する状況が望まれる。このような場合においても、検索したい問題及び解決のいずれか一方の知識に関する特徴又は要約としてのキーワードである文字情報を発想して検索する必要がある。しかしながら、検索するということは、通常、知識が不足しているという動機から始まっており、この場合、画像を検索するためのキーワードである文字情報を発想すること自体が一般的に困難である。従って、キーワードとする文字情報を十分に発想する知識が不足している状況においては、多くのキーワードを繰り返して入力し、検索を行わなければならない。
【００１３】
次に、（２）の問題点について説明する。単体の静止画像や単体の動画等の画像に関する現行の検索視聴サービスにおけるキーワード検索では、問題及び解決の知識に関して絞り込み検索視聴する機能及びインターフェイスが存在しない。このため、問題及び解決、又はこれに類する知識の種類を示すメタタグが画像に含まれ、画像検索視聴者により認識されていない限りにおいては、問題及び解決それぞれの知識に関して確実に絞り込みを行い、検索視聴することが困難である。
【００１４】
次に、（３）の問題点について説明する。問題及び解決それぞれの知識に関する単体画像が十分に存在する状況において、問題及び解決の画像を投稿及び検索視聴の単位とする検索方式、並びに問題及び解決それぞれの知識に関して絞り込み検索視聴する機能及びインターフェイスによっても、問題及び解決の知識に関する画像が相互に問題解決知識として補完しあう異なった知識情報をもつがために、メタタグを共有しない場合、又は共通のキーワードが見出せない場合がある。このような場合、単体の静止画像や単体の動画等の画像の現行の検索視聴サービスが採用する、キー側と検索出力側とのメタタグの類似性に関する指標及び検索出力側の単体画像としての検索頻度に関する指標により主に構成される検索出力優先基準においては、問題の画像からの解決の画像検索、解決の画像からの問題の画像検索という異なる知識情報をもつ画像間の検索が確実になされる可能性は小さい。
【００１５】
最後に（４）の問題点について説明する。キーワード検索による単体の静止画像や単体の動画等の画像の現行の投稿検索視聴サービスにおいて、画像投稿者は画像を問題及び解決の区別なしに投稿し、画像検索視聴者は画像を問題及び解決の区別なしに検索視聴するため、画像投稿者による問題若しくは解決の知識の提供シーズ、検索視聴者による問題若しくは解決の知識の利用ニーズ、又はこれら２つをあわせた問題解決知識のシーズ及びニーズに応じて、問題及び解決の知識に関する情報が、画像として効率的に増加する可能性は小さい。
【００１６】
従って、本発明の目的は、問題及び解決の両方の知識獲得の観点から、問題若しくは解決の一方の知識に偏る画像検索視聴者の、不足するもう一方の知識に関する検索を支援するために、キーワード検索の困難性を解消できるペア画像投稿検索装置及びペア画像投稿検索プログラムを提供することにある。
【００１７】
本発明の他の目的は、問題及び解決の知識に関する絞り込みによる検索視聴機能及びインターフェイスが欠如することによる問題を解消できるペア画像投稿検索装置及びペア画像投稿検索プログラムを提供することにある。
【００１８】
本発明のさらに他の目的は、問題及び解決の知識の、問題解決知識として補完しあう異なった知識の存在に起因する相互検索の困難性を解消できるペア画像投稿検索装置及びペア画像投稿検索プログラムを提供することにある。
【００１９】
本発明のまたさらに他の目的は、問題及び解決の区別なき投稿及び検索視聴プロセスによる問題解決知識の増加の非効率性を解消できるペア画像投稿検索装置及びペア画像投稿検索プログラムを提供することにある。
【課題を解決するための手段】
【００２０】
本発明によれば、ペア画像投稿検索装置は、処理制御装置と、この処理制御装置に接続された記憶装置とを備えている。記憶装置は、少なくとも画像データ及びメタ情報を記録する画像データベースを備えている。処理制御装置は、投稿のために入力された問題の知識に関する単体画像の画像データとメタ情報とを、投稿のために入力された解決の知識に関する単体画像の画像データとメタ情報とを、又は、投稿のために入力され投稿の後に検索されるペア画像を構成する問題及び解決の知識に関する単体画像の画像データとメタ情報とを、画像データベースに記録する投稿処理手段と、検索のために入力されたキー画像と、問題の知識に関する単体画像、解決の知識に関する単体画像、又は問題及び解決の知識に関するペア画像を検索する指示検索種類とに基づいて、画像データベースに記録されている画像データ及びメタ情報から検索出力画像の検索を行う検索処理手段とを備えている。
【００２１】
検索処理手段が、検索のために入力されたキーワードと、問題及び解決の知識に関するペア画像を検索する指示検索種類とに基づいて、画像データベースに記録されている画像データ及びメタ情報から検索出力画像の検索を行う手段を含むことが好ましい。
【００２２】
画像投稿者は、画像を問題及び／又は解決の種別を指定して投稿し、画像検索視聴者は、画像を問題及び／又は解決の種別を指定して検索視聴することができ、さらに、検索視聴においては、キーワード検索とキー画像検索とがあり、キーワード検索においては、キーワード入力に加え、問題の画像、解決の画像、並びに問題及び解決のペアの画像を指定して検索視聴することができる。即ち、本発明によれば、キーワード検索においては、問題、解決どちらか一方の知識（暗喩）に基づくキーワードを入力して、ペア画像検索するか、又は検索に利用した知識でないほうの画像を検索する場合において、検索を望む知識に関する知識不足に起因するキーワード検索の困難性を解消することができる。また、キー画像検索においては、問題から解決、若しくは解決から問題の画像を、問題若しくは解決の一方の画像によるペア画像を検索する場合において、検索を望む知識に関する知識不足に起因するキー画像検索の困難性を解消することができる。
【００２３】
また、キー画像検索においては、キー側の画像を問題の画像、解決の画像、問題及び解決の画像に投稿して、検索出力側の画像を問題の画像、解決の画像、問題及び解決の画像に指定して検索視聴する機能を備えているため、問題及び解決それぞれの知識の特徴となる文字情報を発想しなくとも、問題及び解決それぞれの画像を確実に検索視聴することが容易となる。
【００２４】
さらに、画像検索視聴者は、画像を問題及び／又は解決の種別を指定して検索視聴する。画像投稿者による問題又は解決の知識の提供シーズ、検索視聴者による問題又は解決の知識の利用ニーズ、この２つをあわせた問題及び解決の知識のシーズ及びニーズに応じて、問題及び解決の知識に関する情報が画像として効率的に増加する可能性が大きくなる。いま、問題及び解決の知識がそろって含まれる又はいずれか一方の知識が偏って含まれる単体画像のみ存在する状況と、全ての画像が問題及び解決いずれかの知識に関する画像に規定され、組み合わせができる本発明のペア画像投稿検索装置による状況との２つの状況があり、問題及び解決の知識の総量が同じであると想定すると、後者の状況がより多くの問題解決知識を形成する可能性がある。この理由として、例えば、先の２つの状況それぞれにおいて、問題知識Ａ及び解決知識Ａにより構成する問題解決知識Ａ、問題知識Ｂ及び解決知識Ｂにより構成する問題解決知識Ｂの２つがあるとし、問題知識Ａ及び解決知識Ｂ、問題知識Ｂ及び解決知識Ａは、問題解決知識としてそれぞれ補い合うペアの関係である場合、前者の問題解決知識の数はＡとＢとの２つにとどまるが、後者の状況においては、この２つに加え、問題知識Ａ及び解決知識Ｂ、問題知識Ｂ及び解決知識Ａで構成する問題解決知識が新たに２つ追加されて合計４つとなり、全ての知識は１回づつ再利用されることになる。従って、問題又は解決の知識の提供シーズ、検索視聴者による問題又は解決の知識の利用ニーズに基づき必要な分の問題及び解決の知識に関する画像が増加する可能性が高い。これにより、問題及び解決の区別ない投稿及び検索視聴プロセスによる問題解決知識の増加の非効率性を解消することができる。
【００２５】
記憶装置が、少なくとも投稿及び検索処理における評価情報を記録する評価情報データベースをさらに備えており、投稿処理手段が、投稿のために入力された問題の知識に関する単体画像のメタ情報を、投稿のために入力された解決の知識に関する単体画像のメタ情報を、又は、投稿のために入力され投稿の後に検索されるペア画像を構成する問題及び解決の知識に関する単体画像のメタ情報を要素分解し、得られたメタタグを前記画像データベースに記録するメタタグ化手段を備えており、検索処理手段が、検索のために入力されたキーワード又はキー画像と、画像データベースに記録されている画像データ及びメタタグと、評価情報データベースに記録されている評価情報とに基づいて、検索出力画像候補を決定する検索出力画像候補決定手段と、検索のために入力されたキーワード又はキー画像と、検索のために入力された指示検索種類と、画像データベースに記録されている画像データ及びメタタグと、評価情報データベースに記録されている評価情報とに基づいて、決定した検索出力画像候補から検索出力画像を決定する検索出力画像決定手段とを備えていることが好ましい。
【００２６】
この場合、検索出力画像候補決定手段が、評価情報データベースに記録されている評価情報であるメタタグ類似度データを読み出し、メタタグ類似度の高い画像を検索出力画像候補として探索する手段を備えていることがより好ましい。
【００２７】
さらに、検索出力画像決定手段が、探索した検索出力画像候補について、指示検索種類の検索優先順１位２位の画像種類に応じて検索出力画像を決定する手段を備えていることがより好ましい。
【００２８】
さらに、検索出力画像決定手段が、探索した検索出力画像候補について、メタタグ類似度及び検索頻度を算出する手段と、算出したメタタグ類似度及び検索頻度に応じて検索出力画像を決定する手段とを備えていることがより好ましい。
【００２９】
検索処理手段が、検索のために入力された問題の知識に関するキーワードに基づいて解決の知識に関する単体の検索出力画像検索（ＫＷ１)を行う、解決の知識に関するキーワードに基づいて問題の知識に関する単体の検索出力画像検索（ＫＷ２)を行う、又は問題及び解決の知識に関するペアのキーワードに基づいて問題及び解決の知識に関するペアの検索出力画像検索（ＫＷ３)を行う、手段を備えていることも好ましい。
【００３０】
検索処理手段が、検索のために入力された解決の知識に関するキー画像に基づいて問題の知識に関する単体の検索出力画像検索（ＫＧ１)を行う、検索のために入力された問題の知識に関するキー画像に基づいて解決の知識に関する単体の検索出力画像検索（ＫＧ２)を行う、検索のために入力された問題の知識に関するキー画像に基づいて問題の知識に関する単体の検索出力画像検索（ＫＧ３)を行う、検索のために入力された解決の知識に関するキー画像に基づいて解決の知識に関する単体の検索出力画像検索（ＫＧ４)を行う、検索のために入力された問題及び解決の知識に関するペアのキー画像に基づいて問題若しくは解決の知識に関する検索出力画像検索（ＫＧ５)を行う、検索のために入力された問題及び解決の知識に関するペアのキー画像に基づいて問題若しくは解決の知識に関するペアの検索出力画像検索（ＫＧ６)を行う、又は検索のために入力された問題及び解決の知識に関するペアのキー画像に基づいて問題及び解決の知識に関するペアの検索出力画像検索（ＫＧ７)を行う手段を備えていることも好ましい。
【００３１】
このように、キー画像検索における異種画像検索、即ち、問題から解決の画像検索、解決から問題の画像検索を可能としている。この画像検索にあたり、異種画像間のメタタグ類似性の他に、異種画像間のペア画像検索におけるキー画像としての組み合わせの利用頻度も指標とするため、メタタグを十分共有しない問題及び解決の画像間の検索においても、メタタグ類似性の指標重みの調整によりメタタグを共有していなくとも適切な異種画像が検索できる。また、ペア画像検索により、メタタグを結合し共有するペアとしての同種画像と異種画像とを同時に検索できるため、キー画像のメタタグが、検索したい異種画像とメタタグを共有せずとも、一方の同種画像のメタタグと共有することで、その仲介により異種画像を検索できる。さらに、同種画像検索を繰り返し、検索した同種画像をキーとして異種画像検索を繰り返すことで、異種の画像を検索できる。
【００３２】
このように、問題及び解決の知識に関する画像は、問題解決知識として補完しあう異なった知識情報をもつがために、メタタグを共有しない、又は共通のキーワードが見出せない関係があろうとも、異種画像間のペア画像検索におけるキー画像としての組み合わせの利用頻度を利用した異種画像検索、同種と異種の画像のメタタグを結合したペア画像検索における同種画像のメタタグを仲介した異種画像検索、同種画像検索の繰り返しにより検索した同種画像をキーとする異種画像検索を繰り返しによる異種画像検索を実現し、問題及び解決との知識の橋渡しとする検索を可能とする。その結果、問題及び解決の知識の、問題解決知識として補完しあう異なった知識ゆえの相互検索の困難性が解消される。
【００３３】
本発明によれば、さらに、コンピュータを、上述のペア画像投稿検索装置として機能させるためのペア画像投稿検索プログラムが提供される。
【発明の効果】
【００３４】
本発明によれば、画像検索視聴者の、検索を望む知識に関する知識不足に起因するキーワード検索の困難性を解消でき、問題及び解決の知識に関する絞り込みによる検索視聴機能及びインターフェイスが欠如することによる問題を解消でき、問題及び解決の知識の、問題解決知識として補完しあう異なった知識の存在に起因する相互検索の困難性を解消でき、さらに、問題及び解決の区別なき投稿及び検索視聴プロセスによる問題解決知識の増加の非効率性を解消することができる。
【図面の簡単な説明】
【００３５】
【図１】本発明のペア画像投稿検索装置の一実施形態のハードウェアの構成を概略的に示すブロック図である。
【図２】図１の実施形態における中央処理制御装置及び記憶装置の構成を概略的に示す機能ブロック図である。
【図３】ペア画像の例（道具で留める）を説明する図である。
【図４】図１の実施形態における投稿操作の一例のフロー図である。
【図５ａ】図１の実施形態における検索操作の一例のフロー図である。
【図５ｂ】図１の実施形態における検索操作の他の例のフロー図である。
【図６】図１の実施形態における画像投稿画面の例を示す図である。
【図７】図１の実施形態における画像検索画面の例を示す図である。
【図８】図１の実施形態の画像検索画面におけるキーワード検索により検索した検索出力画像をキー画像としてキー画像トレイに設置する状況を示す図である。
【図９】図１の実施形態における画像検索待機画面の例を示す図である。
【図１０】図１の実施形態における画像検索待機画面内の画像検索待機トレイ上の画像のリンクを、キー画像として画像検索画面内のキー画像トレイに設置複製する状況を示す図である。
【図１１】図１の実施形態の画像検索画面における検索結果を表示した画面状態を示す図である。
【図１２】図１の実施形態における検索の種類を示す図である。
【図１３】図１の実施形態におけるキーワード検索の３種の内容を示す図である。
【図１４】図１の実施形態におけるキー画像検索の７種の内容を示す図である。
【図１５】図１の実施形態におけるキーワード検索のＡ１．単体画像検索のＫＷ１．問題画像検索における画面状態を示す図である。
【図１６】図１の実施形態におけるキーワード検索のＡ１．単体画像検索のＫＷ２．解決画像検索における画面状態を示す図である。
【図１７】図１の実施形態におけるキーワード検索のＡ２．ペア（問題・解決）画像検索のＫＷ３．ペア（問題・解決）画像検索における画面状態を示す図である。
【図１８】図１の実施形態におけるキー画像検索のＢ１．単体画像検索の異種検索のＫＧ１解決画像検索（Ｋ（問題）→Ｔ（解決））の画面状態を示す図である。
【図１９】図１の実施形態におけるキー画像検索のＢ１．単体画像検索の同種検索のＫＧ３問題画像検索（Ｋ（問題）→Ｔ（問題））の画面状態を示す図である。
【図２０】図１の実施形態におけるキー画像検索のＢ２．ペア画像検索の単体キー画像検索のＫＧ５ペア画像検索（Ｋ（問題）→Ｔ（問題・解決））の画面状態を示す図である。
【図２１】図１の実施形態におけるキー画像検索のＢ２．ペア画像検索のペアキー画像検索のＫＧ７ペア画像検索（Ｋ（問題・解決）→Ｔ（問題・解決））の画面状態を示す図である。
【図２２】図１の実施形態における画像の投稿・検索処理のライフサイクルを示す図である。
【図２３】図１の実施形態における投稿処理のフロー図である。
【図２４】図１の実施形態における検索処理のフロー図である。
【図２５】図１の実施形態における検索出力画像決定の対象データの取得及び算出に関する処理のフロー図である。
【図２６】図１の実施形態における全検索１０種の検索優先順の一覧を示す図である。
【図２７】図１の実施形態におけるキーワード検索の３種の検索優先順の設定例を示す図である。
【図２８】図１の実施形態におけるキー画像検索の７種の検索優先順の設定例を示す図である。
【図２９】図１の実施形態における検索出力画像候補決定処理のフロー図である。
【図３０】図１の実施形態における処理実績データベースの構成例を示す図である。
【図３１】図１の実施形態におけるメタタグ類似度算出処理のフロー図である。
【図３２】図１の実施形態における検索頻度算出処理のフロー図である。
【図３３】図１の実施形態における検索出力画像決定処理のフロー図である。
【図３４】図１の実施形態におけるメタタグ類似度算出処理の詳細なフロー図である。
【図３５】図１の実施形態におけるメタタグ類似度算出処理の対象データと構成を示す図である。
【図３６】図１の実施形態における時間調整処理のフロー図である。
【図３７】図１の実施形態における時間調整パラメータの概念図である。
【図３８】図１の実施形態における検索出力優先度算出処理のフロー図である。
【図３９】図１の実施形態における検索出力優先度算出例における検索仕様と対象画像とを表す図である。
【図４０】図１の実施形態における検索出力優先度算出例を表す図である。
【図４１】本発明のペア画像投稿検索装置の他の実施形態のハードウェアの構成を概略的に示すブロック図である。
【図４２】本発明のペア画像投稿検索装置のさらに他の実施形態のハードウェアの構成を概略的に示すブロック図である。
【発明を実施するための形態】
【００３６】
以下、図面を参照して、本発明の実施形態を説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。
【００３７】
［ペア画像投稿検索装置のハードウェア構成］
図１は本発明のペア画像投稿検索装置の一実施形態のハードウェアの構成を概略的に示しており、図２は図１に示す中央処理制御装置及び記憶装置の構成を概略的に示している。本実施形態は、図２に示す中央処理制御装置及び記憶装置から主として構成されるスタンドアローン型のペア画像投稿検索装置の場合である。
【００３８】
図１に示すように、本実施形態のペア画像投稿検索装置は、バス１１０を介して互いに接続されている、中央処理制御装置１０１と、読み出し専用メモリであるプログラムメモリ１０２と、読み出し及び書き込みメモリであるキャッシュメモリ１０３と、入出力インターフェイス１０９とを備えている。さらに、入出力インターフェイス１０９に接続された、入力装置１０４と、画面表示装置１０５と、通信制御装置１０６と、記憶装置１０７と、画像取込み周辺装置１０８とを備えている。
【００３９】
中央処理制御装置１０１は、入力装置１０４からの入力信号に基づいてプログラムメモリ１０２からペア画像投稿検索装置を起動するためのブートプログラムを読み出して実行し、さらに、記憶装置１０７に記憶されたオペレーティングシステムを読み出すように構成されている。
【００４０】
また、中央処理制御装置１０１は、入力装置１０４や通信制御装置１０６の入力信号に基づいて、各種装置の制御を行い、また、キャッシュメモリ１０３や記憶装置１０７に記憶されたデータを読み出して再びキャッシュメモリ１０３にロードすると共に、キャッシュメモリ１０３から読み出されたプログラムのコマンドに基づいて、データの計算又は加工を行う後述する一連の処理を実現するように構成されている。中央処理制御装置１０１の構成については、後述する。
【００４１】
入力装置１０４は、画像投稿者又は画像検索視聴者である利用者が各種の操作を入力するキーボード及びマウスなどの入力デバイスにより構成されており、利用者の操作に基づいて入力信号を生成する。生成された入力信号は、入出力インターフェイス１０９及びバス１１０を介して中央処理制御装置１０１に送信される。
【００４２】
画面表示装置１０５は、ＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）ディスプレイや液晶ディスプレイなどであり、中央処理制御装置１０１からバス１１０及び入出力インターフェイス１０９を介して表示装置１０５において表示させる出力信号を受信し、例えば、中央処理制御装置１０１の処理結果等を表示する。
【００４３】
通信制御装置１０６は、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ)カードやモデムなどの装置であり、ペア画像投稿検索装置をインターネットやＬＡＮなどの通信ネットワークに接続するように構成されている。通信制御装置１０６を介して通信ネットワークと送受信したデータは入力信号又は出力信号として、入出力インターフェイス１０９及びバス１１０を介して中央処理制御装置１０１に送受信される。
【００４４】
記憶装置１０７は半導体記憶装置や磁気ディスク装置であり、中央処理制御装置１０１で実行されるプログラムやデータが記憶されている。この記憶装置１０７の構成については、後述する。
【００４５】
画像取込み周辺装置１０８は、画像データを装置の外部から取り込む装置である光（磁気）ディスクやフレキシブルディスクのドライブ、及びＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）メモリ等の可搬電子記憶媒体の装置上のポートやデジタルスキャナであり、この画像取込み周辺装置１０８によって読み取り取り込まれた画像データは、デジタル信号として、入出力インターフェイス１０９及びバス１１０を介して中央処理制御装置１０１に送受信される。
【００４６】
本実施形態のペア画像投稿検索装置の記憶装置１０７には、前述したように、ペア画像投稿検索プログラムが記憶されている。この記憶装置１０７は、さらに、図２に示すように、Ａ．画像データベース１１と、Ｂ．処理実績データベース１２と、Ｃ．評価情報データベース１３とを備えている。
【００４７】
Ａ．画像データベース１１には、投稿された全ての画像（ワード）ＩＤ（Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）（画像ＩＤ、ペア画像ＩＤ、ワードＩＤ）、画像データ、画像プロフィールデータ（投稿画像種類、画像名、画像コメント）、画像メタタグ（画像メタ情報、画像メタタグ、ペア画像メタ情報(結合済み)、ペア画像メタタグ(結合済み)）、及びワードメタタグ（ワードメタ情報、ワードメタタグ）等が記憶される。
【００４８】
Ｂ．処理実績データベース１２には、投稿及び検索を主とする処理実績に関する処理実績データが記憶される。
【００４９】
Ｃ．評価情報データベース１３には、メタタグ類似度データ、検索頻度データ、ペア検索頻度データ、検索出力優先度データ、並びに各種パラメータである、検索出力優先度算出式、これを構成する検索出力優先度算出式を構成する３つの評価に関する重みづけ、指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み、（検索頻度の）時間調整パラメータ、メタタグ類似度及び検索頻度の各種しきい（切捨て）値が記録される。
【００５０】
また、ペア画像投稿検索プログラムがペア画像投稿検索装置の中央処理制御装置１０１に読み込まれ実行されることにより、中央処理制御装置１０１には、図２に示すように、画像投稿部２１と、画像検索部２２と、評価部２３と、検索出力部２７とが、さらに、評価部２３の下位機能部として、メタタグ類似度算出部２４と、検索頻度算出部２５と、検索出力優先度算出部２６とが実装される。
【００５１】
これらの各要素は、記憶装置１０７に記憶されているデータを利用して、投稿処理及び検索視聴処理を行う。ここで、投稿処理とは、画像投稿者による投稿画像の問題か若しくは解決かの画像種類の指定と、メタ情報の入力と、問題か若しくは解決かの単体の画像、又は問題及び解決のペア画像を後に構成する問題及び解決の２つの単体画像の投稿とを行う処理であり、検索視聴処理とは、これら投稿画像を、画像検索視聴者による問題か若しくは解決かの単体の画像、又は問題及び解決のペアとしての２つの画像の検索を行い、その後、視聴させる処理である。
【００５２】
なお、本実施形態において、「画像」とは静止画像又は動画を含む可視画像を指す。また、可視画像としての文字情報や色、さらに、静止画像又は動画の再生に伴う音声情報についても、「画像」情報を補完する情報として含めるものとする。また、「ペア画像」の「ペア」とは、組み合わせにより問題解決の知識となる、又は問題解決の知識となるように補完しあう２つの画像の対、若しくは組み合わせを指す。
【００５３】
ペアとなる２つの画像間の関係としては、この「問題と解決」や「問題と解決策」のほか、「ニーズとシーズ」、「原因と結果」、「理由と結論主張」、「改善前と改善後」、及び「欠点と長所」などがあり、これらの関係は、全て組み合わせにより問題解決の知識として補完される関係をもつ。
【００５４】
また、本実施形態のペア画像投稿検索装置が対象とするペア画像の意味は、「問題と解決」又は「問題と解決策」をはじめとする組み合わせにより問題解決の知識として補完される関係をもつ２つの画像の組み合わせとする。
【００５５】
図３に「道具で留める」をテーマとしてペア画像の例を示す。図内左列の画像群には、全て何かに留められる道具（プラスねじＳ、プラスねじＡ、マイナスねじＤ、ナットＣ、クギＢ）が表示されており、これらは全て、留めるための道具を必要としている問題の画像群とみなす。図内右列の画像群には、全て、留められる対象を留めるための道具（プラスドライバＡ、プラスドライバＣ、マイナスドライバＦ、ボルトＥ、カナヅチＣ）が表示されており、これらを解決の画像群とみなす。そして、左列の問題の画像群と右列の解決の画像群との間を結線されている組み合わせが、ペア画像となる可能性がある２つの画像であるとみなす。
【００５６】
以降、説明のために、ペアとなる２つの画像をそれぞれ問題の画像及び解決の画像とし、これら２つを組み合わせることで問題解決に利用するものとする。
【００５７】
本実施形態において提供するキーワード検索とキー画像検索とのうち、キーワード検索におけるキーワードとは、キー又はクエリ（問い合わせ）を行う文字情報を指す。また、キー画像検索におけるキー画像とは、キー又はクエリ（問い合わせ）を行う画像を指す。
【００５８】
本実施形態において、検索出力画像とは、キーワード検索若しくはキー画像検索のいずれかにより検索出力された画像、又は検索出力の目標とする画像を指す。そして、検索出力画像候補とは、検索処理全体において、検索出力される検索出力画像の候補として絞り込まれていく画像群を指す。
【００５９】
［機能ブロック図に基づく投稿処理及び検索処理の概要］
以下、図２に示す機能ブロック図を参照して、本実施形態のペア画像投稿検索装置における投稿処理及び検索処理の概要を説明する。
【００６０】
投稿処理において、画像投稿部２１は、投稿された画像データ及びメタ情報等を、記憶装置１０７内のＡ．画像データベース１１に記録する。
【００６１】
一方、検索処理において、画像検索部２２は、記憶装置１０７内のＡ．画像データベース１１に記録されている画像データ及びメタ情報等を読み出し、画像ＩＤをレコードキーとして、画像メタタグ及びワードメタタグを中心にキャッシュメモリ１０３に書き出すと共に、評価部２３へ転送する。
【００６２】
評価部２３は、メタタグ類似度算出部２４、検索頻度算出部２５及び検索出力優先度算出部２６において、検索処理の下位処理であるメタタグ類似度算出、検索頻度算出及び検索出力優先度算出を行う。
【００６３】
検索処理全工程において、これら各下位処理の評価結果を用いて、検索出力画像候補を絞り込み、最終的に検索出力画像を決定する。検索出力部２７は、得られる検索出力画像ＩＤから記憶装置１０７内のＡ．画像データベース１１に記憶されている画像データ等を読み出し、画像プロフィールデータ（投稿画像種類、画像名及び画像コメント）と共に出力し、画像検索画面に表示する。
【００６４】
これら各処理の評価の結果は、記憶装置１０７内のＣ．評価情報データベース１３に、メタタグ類似度データ、検索頻度データ、ペア検索頻度データ及び検索出力優先度データとして記録される。さらに、記憶装置１０７内のＢ．処理実績データベース１２に、その処理実績が記録される。
【００６５】
［ペア画像投稿検索装置における操作内容］
次に、本実施形態のペア画像投稿検索装置における、画像投稿者及び画像検索視聴者による操作の内容について説明する。
【００６６】
本実施形態のペア画像投稿検索装置の操作は、大きくは、投稿操作と検索操作との２つに分類でき、その利用者は画像投稿者と画像検索視聴者との２者とする。
【００６７】
［投稿操作］
初めに、図４に示す投稿操作の一例のフロー図を参照して、本実施形態のペア画像投稿検索装置における投稿操作を説明する。なお、本実施形態において、図４は投稿操作、図５ａは検索操作のフロー図である。また、図５ｂは本実施形態の変更態様における検索操作のフロー図である。
【００６８】
画像投稿者は、まず、投稿する画像をペア画像投稿検索装置の記憶装置１０７内に準備する（ステップＳ１）。
【００６９】
この投稿する画像のデータは、画像取込み装置１０８による取込み、又はＵＳＢなどの電子記憶媒体若しくはインターネットを経由して取り込むものとする。
【００７０】
次に、画像投稿者は、ペア画像投稿検索プログラムの起動を行う（ステップＳ２）。
【００７１】
これにより、図６に例示する画像投稿画面が開かれる（ステップＳ３）。この画像投稿画面例において、上部に問題及び解決の２つの画像投稿トレイがあり、下部に画像名入力欄、投稿画像に対するコメント入力欄、この投稿画像を検索視聴してもらうためのメタ情報入力欄があり、画像投稿画面の右上に投稿ボタンが配置されている。
【００７２】
画像投稿者は、ステップＳ１において記憶装置１０７内に準備した投稿する画像を、図６に示す画像投稿トレイの問題又は解決のいずれか一方に設置する（ステップＳ４）。
【００７３】
画像投稿者は、次に、図６に示す画像名欄、コメント欄及びメタ情報欄に、画像情報である画像名、コメント及びメタ情報をそれぞれ入力する（ステップＳ５）。
【００７４】
最後に、画像投稿者は、図６に示す投稿ボタンを押し（クリックし）、投稿する画像を投稿する（ステップＳ６）。
【００７５】
［検索操作］
次に、図５ａに示す検索操作の一例のフロー図を参照して、本実施形態のペア画像投稿検索装置による検索操作処理を説明する。
【００７６】
ここでは、キーワード検索により一旦画像を検索し、それをキー画像として検索出力画像を検索する手続きを想定して説明する。なお、投稿手続きとこの検索手続きとの一連の作業について、図２２には、画像の投稿・検索処理のライフサイクルが示されている。
【００７７】
画像検索視聴者は、まず、ペア画像投稿検索プログラムの起動を行う（ステップＳ１１）。
【００７８】
これにより、図７に示す画像検索画面が開かれる（ステップＳ１２）。この画像検索画面において、上部を検索キー入力領域、下部を検索画像出力領域とし、上部の検索キー入力領域に、キーワード入力欄、問題及び解決の２つのキー画像トレイがあり、５つの検索ボタンが配置されている。
【００７９】
画像検索視聴者は、図７に示すキーワード入力欄にキーワードを入力し、キー画像とする画像を検索して決定する（ステップＳ１３）。この場合、キー画像とする画像候補は、図８に示すように、画像検索画面の下部の検索画像出力領域に表示される。図７の例では、画像検索視聴者は、キーワードとして「ねじをまわす」を入力し、これにより、キー画像候補として「プラスねじＳ」、「マイナスねじＤ」及び「コマＸ」が検索出力され、画像検索視聴者は、このうちから１つをキー画像として決定する。
【００８０】
次に、画像検索視聴者は、ステップＳ１３で検索した画像をキー画像として利用して、検索出力画像の検索を行う。このために、キー画像を図７に示すキー画像トレイに設置する（ステップＳ１４）。図８はこの場合の画面状態を示している。即ち、画像検索視聴者は、決定したキー画像である「マイナスねじＤ」を「問題」のキー画像トレイに設定する。
【００８１】
その後、画像検索視聴者は、図７及び図８に示す５つの検索ボタンのいずれかを押すことにより、検索出力画像の検索を行い（ステップＳ１５）、また、目標とする検索出力画像が見つかるまでステップＳ１３〜Ｓ１５の一連の作業を繰り返して実行し、画像の検索を完了する（ステップＳ１６）。図１１は画像検索画面における検索結果が表示された画面状態を示している。この場合、図１１に示すように、（３．同種：Ｋ問題→Ｔ問題）の検索ボタンが押されたことになる。
【００８２】
次に、本実施形態のペア画像投稿検索装置による検索操作処理の変更態様を、図５ｂに示す検索操作の他の例のフロー図を参照して、説明する。
【００８３】
ここでは、複数のキー画像をあらかじめ準備しておき、続けて繰り返し検索に利用している。なお、投稿手続きとこの検索手続きとの一連の作業について、図２２に、画像の投稿・検索処理のライフサイクルが示されている。
【００８４】
画像検索視聴者は、まず、ペア画像投稿検索プログラムの起動を行う（ステップＳ１１）。
【００８５】
これにより、図７に示す画像検索画面が開かれる（ステップＳ１２）。この画像検索画面において、上部を検索キー入力領域、下部を検索画像出力領域とし、上部の検索キー入力領域に、キーワード入力欄、問題及び解決の２つのキー画像トレイがあり、５つの検索ボタンが配置されている。
【００８６】
次に、画像検索視聴者は、図９に示す画像検索待機画面を開き、候補とする複数のキー画像を画像検索待機トレイに設置する（ステップＳ１７）。図１０は、この画像検索待機画面の画像検索待機トレイ上の画像（プラスねじＡ）を、キー画像として、図７に示した画像検索画面内のキー画像トレイに設置して複製する状況を示している。
【００８７】
その後、画像検索視聴者は、図７に示す５つの検索ボタンのいずれかを押すことにより、検索出力画像の検索を行い（ステップＳ１５）、また、目標とする検索出力画像が見つかるまでステップＳ１７及びステップＳ１５の一連の作業を繰り返して実行し、画像の検索を完了する（ステップＳ１６）。図１１は、図７の画像検索画面において、検索結果が表示された画面状態を示している。この場合、（３．同種：Ｋ問題→Ｔ問題）の検索ボタンが押されたことになる。
【００８８】
［検索の分類：キーワード検索及びキー画像検索］
上述したように、本実施形態のペア画像投稿検索装置における検索には、キーワード検索とキー画像検索との２つの方式がある。
【００８９】
キーワード検索とは、図７の画像検索画面の例に示すように、キーワードを入力した上で検索ボタンを押すことにより、最終的に検索出力画像を検索する方法であり、キー画像検索とは、図１１の画像検索画面の例に示すように、キーとなる画像をキー画像トレイに設置した上で検索ボタンを押すことにより検索出力画像を検索する方法である。
【００９０】
検索の種類としては、図１２に示すように、キーワード検索には３種、キー画像検索には７種の計１０種がある。
【００９１】
［検索の分類：異種検索、同種検索及びペア検索］
本実施形態のペア画像投稿検索装置におけるキー画像検索には、単体画像の異種画像検索、単体画像の同種画像検索、及びペア画像検索の３種がある。
【００９２】
単体画像の異種画像検索及び同種画像検索の２種は、設置するキー画像トレイに設置されるキー画像の画像種類からみて、検索する検索出力画像の画像種類が異種か同種かを表す、検索の種類名称である。
【００９３】
単体画像の異種画像検索は、問題の画像又は解決の画像をキーとして、解決の画像又は問題の画像である検索出力画像の検索を行うものであり、単体画像の同種画像検索は、問題の画像又は解決の画像をキーとして、問題の画像又は解決の画像である検索出力画像の検索を行うものであり、ペア画像検索は、問題、解決、又はペア画像即ち問題及び解決の画像のペアをキーとして、ペア画像、即ち問題及び解決の画像のペアである検索出力画像の検索を行うものである。
【００９４】
［検索ボタンへの各検索種類機能の割り当て］
本実施形態のペア画像投稿検索装置における検索ボタンは、図７の画像検索画面に示すように５つある。
【００９５】
以後、キー画像検索の種類の表現として、キー画像及び検索出力画像の画像種類を、「キー画像が問題又は解決いずれかの画像種類→検索出力画像が問題又は解決いずれかの画像種類」の意味において、「Ｋ（画像種類）→Ｔ（画像種類）」として表現する。
【００９６】
この表現に基づくと、図７の画像検索画面に示す５つの検索の検索ボタンによるキー画像及び検索出力画像の画像種類は、１．単体異種：Ｋ（問題）→Ｔ（解決）、２．単体異種：Ｋ（解決）→Ｔ（問題）、３．単体同種：Ｋ（問題）→Ｔ（問題）、４．単体同種：Ｋ（解決）→Ｔ（解決）、５．ペア：Ｋ（問題）→Ｔ（問題・解決）、Ｋ（解決）→Ｔ（問題・解決）、Ｋ（問題・解決）→Ｔ（問題・解決）となる。
【００９７】
［キーワード検索］
本実施形態のペア画像投稿検索装置におけるキーワード検索は、図１３に示す３種のキーワード検索内容の各々に関する３つの検索ボタンを利用する。なお、図１３においては、検索操作された検索ボタンが丸で囲まれて示されている。
【００９８】
これら３種のキーワード検索について、Ａ１．単体画像検索であるＫＷ１問題画像検索、Ａ１．単体画像検索であるＫＷ２解決画像検索、及びＡ２．ペア画像検索であるＫＷ３ペア（問題・解決）画像検索とし、これらをＫＷ１、ＫＷ２及びＫＷ３の記号によりそれぞれ表わす。
【００９９】
これら３種のキーワード検索における画面の状態を図１５〜図１７にそれぞれ示す。図１５はキーワード検索のＡ１．単体画像検索のＫＷ１問題画像検索における画面状態を示しており、図１６はキーワード検索のＡ１．単体画像検索のＫＷ２解決画像検索における画面状態を示しており、図１７はキーワード検索のＡ２．ペア画像検索のＫＷ３ペア（問題・解決）画像検索における画面状態を示している。
【０１００】
［キー画像検索］
本実施形態のペア画像投稿検索装置におけるキー画像検索は、図１４に示す７種のキー画像検索内容の各々に関する５つの検索ボタンを利用する。なお、図１４においては、検索操作された検索ボタンが丸で囲まれて示されている。
【０１０１】
これら７種のキー画像検索について、Ｂ１．単体画像検索の異種画像検索であるＫＧ１解決画像検索Ｋ（問題）→Ｔ（解決）、Ｂ１．単体画像検索の異種画像検索であるＫＧ２問題画像検索Ｋ（解決）→Ｔ（問題）、Ｂ１．単体画像検索の同種画像検索であるＫＧ３問題画像検索Ｋ（問題）→Ｔ（問題）、Ｂ１．単体画像検索の同種画像検索であるＫＧ４解決画像検索Ｋ（解決）→Ｔ（解決）、Ｂ２．ペア画像検索の単体キー画像（問題画像）検索であるＫＧ５ペア画像検索Ｋ（問題）→Ｔ（問題・解決）、Ｂ２．ペア画像検索の単体キー画像（解決画像）検索であるＫＧ６ペア画像検索Ｋ（解決）→Ｔ（問題・解決）、Ｂ２．ペア画像検索のペアキー画像検索であるＫＧ７ペア画像検索Ｋ（問題・解決）→Ｔ（問題・解決）であり、これらをＫＧ１、ＫＧ２、ＫＧ３、ＫＧ４、ＫＧ５、ＫＧ６及びＫＧ７の記号によりそれぞれ表わす。
【０１０２】
これら７種うちの４種のキー画像検索における画面の状態を図１８〜図２１にそれぞれ示す。図１８はキー画像検索のＢ１．単体画像検索の異種検索のＫＧ１解決画像検索（Ｋ（問題）→Ｔ（解決））における画面状態を示しており、図１９はキー画像検索のＢ１．単体画像検索の同種検索のＫＧ３問題画像検索（Ｋ（問題）→Ｔ（問題））における画面状態を示しており、図２０はキー画像検索のＢ２．ペア画像検索の単体キー画像（問題画像）検索のＫＧ５ペア画像検索（Ｋ（問題）→Ｔ（問題・解決））における画面状態を示しており、図２１はキー画像検索のＢ２．ペア画像検索のペアキー画像検索のＫＧ７ペア画像検索（Ｋ（問題・解決）→Ｔ（問題・解決））における画面状態を示している。
【０１０３】
［キーワード検索及びキー画像検索の同時処理の扱い］
図７の画像検索画面に示すキーワード入力欄へのキーワード入力に加え、キー画像トレイ上の問題若しくは解決のいずれか又は両方にもキー画像が設置されている場合、エラーを返し処理を中断するか、キーワードのメタタグとキー画像のメタタグとを結合する処理をして、キー画像処理として処理する方法が考えられる。本実施形態のペア画像投稿検索装置においては、具体的な処理内容を説明していないが、エラーを返し処理を中断するように構成する。
【０１０４】
［画像トレイへの画像の移動設置の処理内容］
本実施形態のペア画像投稿検索装置において、画像トレイへの画像の移動設置の処理内容、具体的には、キー画像のキー画像トレイへの移動設置や、キー画像候補の画像検索待機トレイへの移動設置の処理の内容は、該当画像の各種データへのアクセスをするリンク先情報を、これら画像トレイ上に表示するように複製し、当該リンク先から画像を呼び出し、表示することにある。このリンクは、具体的には、図２に示す記憶装置１０７のＡ．画像データベース１１の画像ＩＤを先頭とし、画像データ、並びに画像プロフィールデータ（これには投稿画像種類、画像名及び画像コメントがある）を含む全てのデータにアクセスし表示可能とするリンクである。
【０１０５】
［メタタグの抽出］
キーワード及びキー画像のメタタグは検索質問に利用する検索語であり、検索出力画像のメタタグは検索対象文書に相当する。
【０１０６】
メタタグの抽出とは、キーワード又はキー画像に付属するメタ情報及び検索出力画像候補に付属するメタ情報より、テキストデータの要素にインデクシング（要素分解）することを指す。
【０１０７】
このメタ情報は、投稿時に、図６に示す画像投稿画面の下方にあるメタ情報の入力欄に入力される情報から取得する。
【０１０８】
このメタ情報は、キーワード又はキー画像の検索語と検索出力画像の検索対象文書との類似の度合い、即ち、情報検索における適合性についての度合いを算出するためのテキストデータとして利用される。
【０１０９】
キーワード検索は、ユーザーが直接キーボード等により入力した文字列を検索のキーとして検索質問をし、目標とする検索出力画像を、それに付属するメタ情報からインデクシングした、即ち要素として分解したメタタグを検索対象文書として照合し検索する方法である。
【０１１０】
キー画像検索は、画像投稿者が、画像投稿時に入力したメタ情報からインデクシングしたメタタグをキーとして検索質問をし、目標とする検索出力画像を、同じくそれに付属するメタ情報からインデクシングしたメタタグを対象として照合して検索する方法である。
【０１１１】
なお、このインデクシングには、一般的な情報検索に利用されるステミング、即ち語形変化の部分を取り去り、同一の表現に変換する処理等をも含むものとする。
【０１１２】
［メタタグ類似度］
メタタグ類似度とは、キー側のワード又は画像のメタタグと、検索出力側の画像のメタタグとの類似度を指し、検索出力優先度算出に利用する評価指標である。このメタタグ類似度は、キーワード又はキー画像のメタタグと、検索出力画像候補のメタタグとの文字コード順に基づく並び替えの後、これら２つのメタタグの照合により算出される。
【０１１３】
［検索実績］
本実施形態のペア画像投稿検索装置における検索実績とは、各画像がキー画像として検索出力画像の検索出力に利用されたという実績及び検索出力画像として検索出力されたという実績の２つを指す。
【０１１４】
［検索頻度］
検索頻度とは、この検索実績を得るための特定時間間隔における処理の回数であると共に、検索出力優先度算出に利用する評価指標であり、各画像がキー画像として検索出力画像の検索出力に利用された頻度及び検索出力画像として検索出力された頻度の２つを指す。
【０１１５】
前者のキー画像として検索出力画像の検索出力に利用された頻度は、一度、キーワード又はキー画像により検索出力画像として検索出力された画像が、検索視聴者に改めて選択され、キー画像として利用されたことを意味しており、この頻度が高い場合は、ユーザーに適合文書として直接的に評価された画像とみなすことができる。
【０１１６】
一方、後者の検索出力画像として検索出力された頻度が高い場合は、ユーザーが望む問題、解決の知識に関するメタタグを含む人気度の高い画像とみなすことができる。
【０１１７】
［検索優先順］
次に、本実施形態のペア画像投稿検索装置における検索優先順について説明する。図２６は全検索種類１０種の画像の種類と検索優先順との一覧を示しており、同図における検索優先順の欄の付番の小大が検索優先順の先後を表している。図２７はキーワード検索の３種の検索優先順の設定例を示しており、同図における検索ボタン上の付番の小大が検索優先順の先後を表している。図２８はキー画像検索の７種の検索優先順の設定例を示しており、同図における検索ボタン上の付番の小大が検索優先順の先後を表している。
【０１１８】
検索優先順とは、全１０種の各検索種類において、検索出力画像候補及び検索出力画像を、問題、解決、並びに問題及び解決のペアのいずれの画像種類について、その検索実績に基づいて優先して検索する順序である。
【０１１９】
本実施形態のペア画像投稿検索装置において、画像検索視聴者は、画像投稿者により図６に示す画像投稿トレイへの移動設置により投稿された画像を、その際に指定した画像種類に拘わらず、問題のキー画像トレイ及び解決のキー画像トレイに自由に設置できる。よって、投稿された画像は、問題、解決、及びペア画像の片方としての問題の画像と、ペア画像の片方としての解決の画像との４種における検索実績をもつこととなる。
【０１２０】
キーワード検索の３種の検索優先順の設定例としては、図２７に示すように、
Ａ１．単体画像検索であるＫＷ１問題画像検索では、１．問題→２．解決、
Ａ１．単体画像検索であるＫＷ２解決画像検索では、１．解決→２．問題、
Ａ２．ペア画像検索であるＫＷ３ペア画像検索では、１．ペア画像のみ
がある。
【０１２１】
キー画像検索の７種の検索優先順の設定例としては、図２８に示すように、
Ｂ１．単体画像検索の異種画像検索であるＫＧ１解決画像検索では、１．解決→２．問題、
Ｂ１．単体画像検索の異種画像検索であるＫＧ２問題画像検索では、１．問題→２．解決、
Ｂ１．単体画像検索の同種画像検索であるＫＧ３問題画像検索では、１．問題→２．問題、
Ｂ１．単体画像検索の同種画像検索であるＫＧ４解決画像検索では、１．解決→２．解決、
Ｂ２．ペア画像検索の単体キー画像（問題画像）検索であるＫＧ５ペア画像検索では、１．ペア画像→２．問題、２．解決、
Ｂ２．ペア画像検索の単体キー画像（解決画像）検索であるＫＧ６ペア画像検索では、１．ペア画像→２．問題、２．解決、
Ｂ２．ペア画像検索のペアキー画像検索であるＫＧ７ペア画像検索では、１．ペア画像のみ
がある。
【０１２２】
［ペア画像投稿検索装置の処理手順］
以下、本実施形態のペア画像投稿検索装置の行う処理の手順について説明する。
【０１２３】
［投稿処理］
図２３に示す投稿処理のフロー図を参照して、本実施形態のペア画像投稿検索装置における投稿処理手順を説明する。なお、本実施形態においては、図２３のみに投稿処理のフロー図が示されている。
【０１２４】
画像投稿者が、図６に示す画像投稿画面上の問題又は解決いずれかの画像投稿トレイに画像を設置し、画像名、コメント及びメタ情報の入力欄のいずれかへ入力を開始すると、その画像に対して仮の画像ＩＤが配布される。
【０１２５】
次に、画像投稿者が、図６に示す画像投稿画面上の投稿ボタンをクリックする（押す）と、ペア画像投稿検索装置は、入力情報チェック機能を起動して入力情報のチェックを行う（ステップＳ１０１）。
【０１２６】
チェック内容としては、画像、画像名、コメント及びメタ情報の全ての入力欄への入力を必須とした場合に、「空欄がある」や、「キー画像が設置されていない」や、「２つの画像が、問題の画像投稿トレイ及び解決の画像投稿トレイにそれぞれ同時に設置されている」などの異常状態のチェックがある。
【０１２７】
チェックの結果、これらの異常状態のいずれかを認識したかどうか判別し（ステップＳ１０２）、異常状態を認識した場合は、エラー又は警告を返して処理を中断する（ステップＳ１０３）。異常状態がない、即ち、正常状態を認識した場合は、次のステップＳ１０４へ進む。
【０１２８】
ステップＳ１０４からステップＳ１０８までは、投稿された画像データの記録処理を行う。
【０１２９】
まず、投稿画像に配布されていた仮の画像ＩＤを正式の画像ＩＤへ置き換え、その正式の画像ＩＤを、図２に示す記憶装置１０７のＡ．画像データベース１１の画像（ワード）ＩＤ領域に記録する（ステップＳ１０４）。
【０１３０】
次に、画像データを、記憶装置１０７のＡ．画像データベース１１の画像データ領域に記録する（ステップＳ１０５）。
【０１３１】
次に、画像プロフィールデータである投稿画像の問題か解決かの画像種類、図６に示す画像投稿画面を介して入力された画像名及びコメントを、記憶装置１０７のＡ．画像データベース１１の画像プロフィールデータ領域に記録する（ステップＳ１０６）。
【０１３２】
次に、図６に示す画像投稿画面を介して入力されたメタ情報をインデクシングし、この時、複数のメタタグが抽出される場合、本実施形態のペア画像投稿検索装置が採用する文字コード体系の文字コード順に基づいて全てのメタタグの並び替え処理を行う（ステップＳ１０７）。
【０１３３】
次に、画像メタ情報と、この画像メタ情報をインデクシングし並べ替え処理して得られた画像メタタグとを、記憶装置１０７のＡ．画像データベース１１の画像メタタグ領域に記録する（ステップＳ１０８）。
【０１３４】
以上のステップＳ１０４からステップＳ１０８までに記録された投稿画像のデータは、ステップＳ１０４において記録された画像ＩＤに関係付けられて、記憶装置１０７のＡ．画像データベース１１の画像データ領域に記録される。
【０１３５】
最後に、投稿処理の処理実績を、記憶装置１０７のＢ．処理実績データベース１２に記録する（ステップＳ１０９）。
【０１３６】
［検索処理］
図２４に示す検索処理のフロー図を参照して、本実施形態のペア画像投稿検索装置における検索処理手順を説明する。この図２４のフロー図は検索処理の主要な流れを示すものである。
【０１３７】
まず、検索出力画像候補の決定処理を行う（ステップＳ１１１）。これは、処理実績データにおける今回の検索処理におけるキー画像のメタタグについてのメタタグ類似度実績を利用するものであり、以前のメタタグ類似度の高い画像のＩＤを図２の記憶装置１０７のＢ.処理実績データベース１２から読み出し、検索出力画像候補とする。本ステップは、検索処理の開始時点において、メタタグ類似度を基準とした検索出力画像候補を準備、確保するステップである。この検索出力画像候補の決定処理については、図２９のフロー図を用いて後に詳細に説明する。
【０１３８】
次に、検索出力画像候補について、メタタグ類似度を算出する（ステップＳ１１２）。これは、キーワード又はキー画像のキー側のメタタグと、全ての検索出力画像候補のメタタグとを照合し、メタタグの類似度合いを算出することである。このメタタグ類似度算出処理については、図３１のフロー図を用いて後に詳細に説明する。
【０１３９】
次に、検索頻度算出処理を行う（ステップＳ１１３）。これは、全ての検索出力画像候補の現時点までの検索頻度を算出することである。この検索頻度算出処理については、図３２のフロー図を用いて後に詳細に説明する。
【０１４０】
次に、時間調整処理を行う（ステップＳ１１４）。これは、ステップＳ１１３において算出した検索頻度を、直近の検索傾向を反映するため、時間で重みづけ修正することである。この時間調整処理については、図３６のフロー図を用いて後に詳細に説明する。
【０１４１】
次に、検索出力画像を決定する処理を行う（ステップＳ１１５）。これは、全ての検索出力画像候補について、これらのメタタグ類似度及び検索頻度等を総合的に評価する検索出力優先度算出基準を利用し、検索出力優先度を算出して、検索出力画像を決定する処理である。本処理では、検索出力優先度算出基準の観点から、メタタグ類似度及び検索頻度について総合的に高いものから、検索出力画像として決定する。この検索出力画像決定処理については、図３３のフロー図を用いて後に詳細に説明する。
【０１４２】
最後に、検索出力画像の表示を行う（ステップＳ１１６）。これは、決定した検索出力画像を、図７に示す検索画像出力領域に出力表示することである。
【０１４３】
以上の検索処理の工程により、検索出力画像を決定する。
【０１４４】
［検索出力画像決定の対象データの取得及び算出］
次に、本実施形態のペア画像投稿検索装置における検索の処理のうち、検索出力画像決定の対象データの取得及び算出に関する処理について、図２５に示す検索出力画像決定の対象データの取得及び算出に関する処理フロー図を参照して説明する。なお、この図２５のフロー図は、図２４のステップＳ１１５の処理に対応するものである
【０１４５】
検索出力画像決定の対象データの取得及び算出は、検索出力優先度算出基準である、後の［４．検索出力画像候補の検索出力優先度の算出］の項で説明する検索出力優先度算出式に、検索出力画像候補の検索出力優先度算出対象データを取込み、検索出力画像候補の検索出力優先度を計算するための主要なステップである。
【０１４６】
この検索出力優先度算出対象データとは、検索出力優先度算出に利用される実績及び評価データを構成するデータを指している。具体的には、検索出力画像候補のメタタグ類似度データ、検索頻度データ、ペア検索頻度データ、検索出力優先度データ、並びに、各種パラメータである、検索出力優先度算出式を構成する３つの評価に関する重みづけ、指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み、（検索頻度の）時間調整パラメータ、メタタグ類似度及び検索頻度の各種しきい（切捨て）値などである。これらは、指示された検索種類（指示検索種類）に基づく検索出力画像候補以外の過去の全画像のそれらデータと共に、Ｃ．評価情報データベース１３に記録されている。
【０１４７】
［１．検索出力画像候補のメタタグ類似度（現時点のメタタグに基づくキー画像との類似度）の設定（図２５のステップＳ１２１）］
まず、図３１に示すメタタグ類似度算出処理のステップＳ１１０７で実行される、しきい（切捨て）値：メタタグ類似度を下回るメタタグ類似度検索出力画像候補の切捨て処理の後に、検索出力画像候補のメタタグ類似度（Ｍ−Ｔｇｔ）を設定する。
【０１４８】
［２．検索出力画像候補のキー画像としての検索頻度の設定（図２５のステップＳ１２２）］
次に、図３２に示す検索頻度算出処理のステップＳ１２０７で実行される、しきい（切捨て）値：検索頻度を下回る検索出力画像候補の切捨て処理の後に、検索出力画像候補のキー画像としての検索頻度（Ｓ−Ｋｅｙ）を設定する。
【０１４９】
この設定は、まず、今回の検索種類に基づく検索優先順１位２位の画像種類をそれぞれ（ｉｍｇ１）及び（ｉｍｇ２）とする。次に、これら画像種類における検索出力画像候補のキー画像としての検索頻度を、それぞれ（Ｓ−Ｋｅｙ_ｉｍｇ１）（検索出力画像候補ＩＤ）及び（Ｓ−Ｋｅｙ_ｉｍｇ２）（検索出力画像候補ＩＤ）として設定する。
【０１５０】
［３．検索出力画像候補の検索出力画像としての検索頻度の設定（図２５のステップＳ１２３）］
また、同じく、図３２に示す検索頻度算出処理のステップＳ１２０７で実行されるしきい（切捨て）値：検索頻度を下回る検索出力画像候補の切捨て処理の後に、検索出力画像候補の検索出力画像としての検索頻度（Ｓ−Ｔｇｔ）を設定する。
【０１５１】
この設定は、まず、今回の検索種類に基づく検索優先順１位２位の画像種類をそれぞれ（ｉｍｇ１）及び（ｉｍｇ２）とする。次に、これら画像種類における検索出力画像候補のキー画像としての検索頻度を、それぞれ（Ｓ−Ｔｇｔ_ｉｍｇ１）（検索出力画像候補ＩＤ）及び（Ｓ−Ｔｇｔ_ｉｍｇ２）（検索出力画像候補ＩＤ）として設定する。
【０１５２】
［４．検索出力画像候補の検索出力優先度の算出（図２５のステップＳ１２４）］
次に、図３３に示す検索出力画像決定処理のステップＳ１３０３で算出する検索出力優先度を、下記の検索出力優先度算出式を用いて算出する。
【０１５３】
本実施形態の検索出力優先度算出式は、検索出力画像候補の３つの評価である、メタタグ類似度評価（現時点のメタタグに基づくキー画像との類似度）と、キー画像としての検索頻度評価と、検索出力画像としての検索頻度評価との各重み付けによる合計を求めるものである。即ち、各検索出力画像候補のＡ．メタタグ類似度評価（現時点のメタタグに基づくキー画像との類似度）である（ｗＭ-Ｔｇｔ・Ｍ−Ｔｇｔ）と、Ｂ．キー画像としての検索頻度評価である（ｗＳ−Ｋｅｙ・ｗＳ-Ｋｅｙ_ＰＲ_ｉｍｇ［１ｏｒ２］・Ｓ−Ｋｅｙ_ｉｍｇ［１ｏｒ２］）と、Ｃ．検索出力画像としての検索頻度評価である（ｗＳ−Ｔｇｔ・ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ［１ｏｒ２］・Ｓ−Ｔｇｔ_ｉｍｇ［１ｏｒ２］）との合計により算出する。
【０１５４】
本実施形態の検索出力優先度算出式に入力する検索出力優先度算出対象データとしては、図３１に示すメタタグ類似度算出処理において記録されるメタタグ類似度と、図３２に示す検索頻度算出処理においてキャッシュメモリに、最終的に、Ｃ．評価情報データベース１３に記録される指示検索種類の検索優先順１位２位の画像種類における検索頻度の各実績と、同じく、Ｃ．評価情報データベース１３からの、検索出力画像候補のメタタグ類似度及び指示検索種類の検索優先順１位２位の画像種類における検索頻度の各実績と、各種パラメータである３つの評価の重みと、指示検索種類の検索優先順１位２位の画像種類に基づく評価の重みとがある。
【０１５５】
検索出力優先度の算出は、まず、Ａ〔１−１−１〕メタタグ類似度（現時点のメタタグに基づくキー画像との類似度）である（Ｍ−Ｔｇｔ）と、Ｂ〔１−１−１〕キー画像としての検索頻度（指示検索種類の検索優先順１位２位の画像種類としての検索頻度）である（Ｓ−Ｋｅｙ_ｉｍｇ〔１ｏｒ２〕）と、Ｃ〔１−１−１〕検索出力画像としての検索頻度（指示検索種類の検索優先順１位２位の画像種類としての検索頻度）である（Ｓ−Ｔｇｔ_ｉｍｇ〔１ｏｒ２〕）とを設定する。
【０１５６】
この時、（Ｍ−Ｔｇｔ）≧０、（Ｓ−Ｋｅｙ_ｉｍｇ〔１ｏｒ２〕）≧０、（Ｓ−Ｔｇｔ_ｉｍｇ〔１ｏｒ２〕）≧０であり、また、（Ｓ−Ｋｅｙ_ｉｍｇ〔１〕）≧（Ｓ−Ｋｅｙ_ｉｍｇ〔２〕）、（Ｓ−Ｔｇｔ_ｉｍｇ〔１〕）≧（Ｓ−Ｔｇｔ_ｉｍｇ〔２〕）である。
【０１５７】
次に、指示検索種類の検索優先順１位２位の画像種類に基づく評価の重みである、Ｂ〔１−１〕キー画像としての検索頻度評価における指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み（ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔１ｏｒ２〕）と、Ｃ〔１−１〕検索出力画像としての検索頻度評価における指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み（ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔１ｏｒ２〕）とを設定する。
【０１５８】
この時、（ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔１ｏｒ２〕）≧０、（ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔１ｏｒ２〕）≧０、（ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔１〕）≧（ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔２〕）、（ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔１〕）≧（ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔２〕）である。
【０１５９】
また、検索種類のうち、ペア画像のみ検索し検索優先順１位２位の画像種類の区別がないＫＷ３、ＫＧ７については、重みは考慮しないものとする。
【０１６０】
次に、評価の重みである、Ａ〔１〕メタタグ類似度評価（現時点のメタタグに基づくキー画像との類似度）の重み（ｗＭ−Ｔｇｔ）と、Ｂ〔１〕キー画像としての検索頻度評価の重み（ｗＳ−Ｋｅｙ）と、Ｃ〔１〕検索出力画像としての検索頻度評価の重み（ｗＳ−Ｔｇｔ）とを設定する。
【０１６１】
この時、（ｗＭ−Ｔｇｔ）≧０、（ｗＳ−Ｋｅｙ）≧０、（ｗＳ−Ｔｇｔ）≧０である。
【０１６２】
最後に、検索出力優先度算出式であるＡ．メタタグ類似度評価（現時点のメタタグに基づくキー画像との類似度）（ｗＭ−Ｔｇｔ・Ｍ−Ｔｇｔ）と、Ｂ．キー画像としての検索頻度評価（ｗＳ−Ｋｅｙ・ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔１ｏｒ２〕・Ｓ−Ｋｅｙ_ｉｍｇ〔１ｏｒ２〕）と、Ｃ．検索出力画像としての検索頻度評価（ｗＳ−Ｔｇｔ・ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔１ｏｒ２〕・Ｓ−Ｔｇｔ_ｉｍｇ〔１ｏｒ２〕）との３項の合計を算出する。
【０１６３】
（ｉｍｇ〔１ｏｒ２〕）として表わす（ｉｍｇ１）又は（ｉｍｇ２）は、キー画像若しくは検索出力画像として、指示検索種類の検索優先順１位又は指示検索種類の検索優先順２位の画像種類における検索頻度の実績を算入することを指す。
【０１６４】
図３９は、検索出力優先度算出例における検索仕様に基づいて、３つの検索出力画像候補を対象として検索出力優先度を算出し、検索出力順を決定することを目的とした検索仕様と対象画像とを示す。
【０１６５】
［検索仕様］
検索仕様については、指示検索種類をＫＧ１、即ち、単体画像検索の解決画像検索（キー画像が問題の画像であり、検索出力画像が解決の画像、Ｋ〔問題〕→Ｔ〔解決〕で示す）とし、検索優先順画像種類は、１位を解決の画像として（ｉｍｇ１）の画像種類とし、２位を問題の画像として（ｉｍｇ２）の画像種類とする。
【０１６６】
［対象画像］
キー画像の画像名称は「プラスねじＳ」、検索出力画像候補（１）の画像名称は「プラスドライバＡ」、検索出力画像候補（２）の画像名称は「マイナスドライバＦ」、検索出力画像候補（３）の画像名称は「プラスねじＡ」とする。そして、これらの画像は、図３に示す画像１をキー画像として、画像２、画像３及び画像４を検索出力画像候補としたものである。
【０１６７】
図３９には、対象画像の情報として、検索出力画像候補ＩＤ、画像自体、投稿時付与画像種類、メタタグ、及びメタタグ類似度が示されている。
【０１６８】
検索出力画像候補（１）から（３）の投稿時付与画像種類は、それぞれ「解決」、「解決」、「問題」である。
【０１６９】
検索出力画像候補（１）から（３）のメタタグ類似度については、後述するように、共通するメタタグの数、即ち共通要素数を採用して算出し、それぞれ、「１」、「０」、「２」となっている。
【０１７０】
なお、本算出例においては、図３２の検索頻度の時間調整工程（ステップＳ１２０４）に示す検索頻度の時間調整は実施しないものとし、算出対象のメタタグは、コメントからの取込みなく、投稿時のそれから一定であるとする。そして、メタタグ類似度、検索頻度、検索出力優先度のしきい値による削除は適用しないものとする。
【０１７１】
［検索出力優先度及び検索出力表示順の算出］
次に、図４０に示す検索出力優先度算出例を参照して、上述した検索仕様と対象画像とによる検索出力優先度の算出及び検索出力表示順の決定のプロセスについて説明する。
【０１７２】
図４０は、検索出力画像候補（１）から（３）の１．〈メタタグ類似度及び指示検索種類の検索優先順１位２位の画像種類における検索頻度の各実績〉、２．〈指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み〉、３．〈（各実績の）評価の重み〉の数値例を示している。
【０１７３】
ここで、（Ｍ−Ｔｇｔ）はメタタグ類似度、（Ｓ−Ｋｅｙ）はキー画像としての検索頻度、（Ｓ−Ｔｇｔ）は検索出力画像としての検索頻度についての各実績及び各実績に付加する重みづけ変数名の主部を示すものとする。
【０１７４】
図４０において、１．〈メタタグ類似度及び指示検索種類の検索優先順１位２位の画像種類における検索頻度の各実績〉のうち、メタタグ類似度であるＡ〔１−１−１〕．（Ｍ−Ｔｇｔ）は、各検索出力画像候補について、投稿時のメタタグを対象とするため、指示検索種類の検索優先順１位２位の画像種類に拘わらず、１種の実績を利用し、指示検索種類の検索優先順１位２位の画像種類における検索頻度であるＢ〔１−１−１〕．（Ｓ−Ｋｅｙ_ｉｍｇ〔１ｏｒ２〕）及びＣ〔１−１−１〕．（Ｓ−Ｔｇｔ_ｉｍｇ〔１ｏｒ２〕）については、指示検索種類の検索優先順１位２位の画像種類についての２種の実績を利用する。
【０１７５】
なお、キー画像及び検索出力画像としての検索頻度の実績は、一般的に、各投稿時付与画像種類と同じ画像種類において高いとして数値を設定している。
【０１７６】
次に、２．〈指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み〉のＢ〔１−１〕．（ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔１ｏｒ２〕）、及びＣ〔１−１〕．（ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔１ｏｒ２〕）についても、指示検索種類の検索優先順１位２位の画像種類についての２種の重みを設定する。本例では、指示検索種類ＫＧ１による検索優先順画像種類が解決であることから、同じくキー画像及び検索出力画像としての検索頻度について、解決の画像について問題の画像よりも重みを大きくするのが一般的とし、検索優先順１位の画像種類である検索出力画像候補（１）及び検索出力画像候補（２）が、検索優先順２位の画像種類である検索出力画像候補（３）の２倍（２．０）と設定している。
【０１７７】
次に、３．〈（各実績の）評価の重み〉のＡ〔１〕．（ｗＭ−Ｔｇｔ）、Ｂ〔１〕．（ｗＳ−Ｋｅｙ）、Ｃ〔１〕．（ｗＳ−Ｔｇｔ）については、各１種を設定する。本例では、Ａ〔１〕．（ｗＭ−Ｔｇｔ）のメタタグ類似度が、Ａ〔１〕．（ｗＭ−Ｔｇｔ）より相当数値が大きいＢ〔１〕．（ｗＳ−Ｋｅｙ）及びＣ〔１〕．（ｗＳ−Ｔｇｔ）の各検索頻度を考慮し、Ａ〔１〕．（ｗＭ−Ｔｇｔ）のメタタグ類似度を１００倍（１００）と設定している。
【０１７８】
なお、図４０に示す検索出力優先度算出例をはじめとして、メタタグ類似度及び、指示検索種類の検索優先順１位２位の画像種類における検索頻度とは、一般にスケール（規模）が異なるため、評価対象全画像のメタタグ類似度及び検索頻度のそれぞれにおいて、順位比や標準偏差を用いるなどして、正規化してから、各実績の評価の重みを設定しても良い。
【０１７９】
次に、検索出力順の決定までを説明する。
【０１８０】
図４０の検索出力優先度算出例に示した、検索出力画像候補（１）から（３）の１．〈メタタグ類似度及び指示検索種類の検索優先順１位２位の画像種類における検索頻度の各実績〉に、２．〈指示検索種類の検索優先順１位２位の画像種類に基づく評価の重み〉及び３．〈（各実績の）評価の重み〉を加重することで、４．〈Ａ、Ｂ、Ｃの各評価〉、即ち、Ａ．（ｗＭ−Ｔｇｔ・Ｍ−Ｔｇｔ）（メタタグ類似度）、Ｂ．（ｗＳ−Ｋｅｙ・ｗＳ−Ｋｅｙ_ＰＲ_ｉｍｇ〔１ｏｒ２〕・Ｓ−Ｋｅｙ_ｉｍｇ〔１ｏｒ２〕）（キー画像としての検索頻度）、Ｃ．（ｗＳ−Ｔｇｔ・ｗＳ−Ｔｇｔ_ＰＲ_ｉｍｇ〔１ｏｒ２〕・Ｓ−Ｔｇｔ_ｉｍｇ〔１ｏｒ２〕）（検索出力画像としての検索頻度）を合計し、検索出力優先度とする。
【０１８１】
その結果、検索出力画像候補（１）、検索出力画像候補（２）、検索出力画像候補（３）の検索出力優先度は、それぞれ、「５８０」、「１６５」、「５２８」となり、検索出力順は、検索出力画像候補（１）、検索出力画像候補（３）、検索出力画像候補（２）の順となる。
【０１８２】
［５．検索出力画像の決定（図２５のステップＳ１２５）］
上述の過程により、全ての検索出力画像候補の検索出力優先度が算出され、図３３に示す検索出力画像決定処理フローのステップＳ１３０９における検索出力画像を決定することとなる。
【０１８３】
［各処理の詳細手順］
本実施形態のペア画像投稿検索装置による各処理の詳細手順について、以下説明する。
【０１８４】
［検索出力画像候補決定処理］
図２９に示す検索出力画像候補決定処理のフロー図を参照して、本実施形態のペア画像投稿検索装置における検索出力画像候補の決定処理を説明する。なお、この図２９のフロー図は図２４のステップＳ１１１の処理に対応するものである。
【０１８５】
まず、画像検索視聴者によって指示された検索種類（指示検索種類）の認識を行う（ステップＳ１００１）。キーワード検索の場合は図１２及び図１３に示す３種の状態、キー画像検索の場合は図１２及び図１４に示す７種の状態のいずれかであり、図７に示す画像検索画面上の押された検索ボタンの認識と、キーワード入力欄への文字情報の入力状況と、キー画像トレイ上の画像設置状況とからこれを判断する。
【０１８６】
図１２〜図１４以外の状態に関しては、本実施形態のペア画像投稿検索装置においては、エラーを返して処理を中断する。
【０１８７】
次に、入力情報の読み取りを行う（ステップＳ１００２）。入力情報とは、画像検索視聴者が検索ボタンを押すことにより、図２に示す中央処理制御装置１０１の画像検索部２２が、検索出力画像候補を決定するために、図１に示すキャッシュメモリ１０３に関して読み取り及び／又は一時的に書き込む情報である。
【０１８８】
この入力情報の読み取りは、詳細には、検索種類ＫＷ１〜ＫＷ３（３種）の場合に、図２に示す記憶装置１０７のＡ．画像データベース１１に記憶されるワードＩＤ及びワードメタタグの読み取りと書き込みであり、検索種類ＫＧ１〜ＫＧ６（６種）の場合に、記憶装置１０７のＡ．画像データベース１１に記憶される画像ＩＤ及び画像メタタグの読み取りと書き込みであり、検索種類ＫＧ７の場合に、記憶装置１０７のＡ．画像データベース１１に記憶される２つの画像のペア画像ＩＤ及びペア画像メタタグの読み取りと書き込みである。
【０１８９】
次に、検索実績のない次の２つのケース（第１のケース及び第２のケース）における補足処理として、入力情報の読み取りを行う（ステップＳ１００３）。
【０１９０】
第１のケースは、検索種類ＫＷ１〜ＫＷ３（３種）の場合における入力キーワードによる検索実績がないケースの補足処理である。
【０１９１】
詳細には、入力キーワードに、新規にワードＩＤを付与して、記憶装置１０７のＡ．画像データベース１１の画像（ワード）ＩＤに記録し、キーワードのメタタグ化の手続きであるカンマ区切り分割、インデクシング処理、及び文字コード順に基づく並べ替え整理等を行う。
【０１９２】
その後、このキーワードのメタタグを記憶装置１０７のＡ．画像データベース１１の画像（ワード）ＩＤとワードメタタグとを関係づけて記録する。
【０１９３】
第２のケースは、検索種類ＫＧ７の場合における問題及び解決の２つの画像がペアとしてのキー画像検索実績がないケースの補足処理である。
【０１９４】
詳細には、この２つの画像ＩＤを１組にして新規にペア画像ＩＤを付与し、記憶装置１０７のＡ．画像データベース１１の画像（ワード）ＩＤに記録し、２つの画像のメタ情報のメタタグ化の手続きであるカンマ区切り分割、インデクシング処理、２つの画像のメタタグの結合、及び文字コード順に基づく並べ替え整理等を行う。
【０１９５】
その後、記憶装置１０７のＡ．画像データベース１１のペア画像（ワード）ＩＤとペア画像メタタグとを関係づけて記録する。
【０１９６】
次に、ステップＳ１００３の入力情報の読み取り（補足処理）により新規に取得したメタタグを記録する（ステップＳ１００４）。
【０１９７】
詳細には、検索種類ＫＷ１〜ＫＷ３（３種）の場合のキーワードのメタタグ、検索種類ＫＧ７の場合のペア画像メタタグを、記憶装置１０７のＡ．画像データベース１１の画像メタタグに記録する。
【０１９８】
次に、キーワード又はキー画像の入力情報を、図１に示すキャッシュメモリ１０３に書き込む（ステップＳ１００５）。即ち、上記までの処理で取得確定した各検索処理におけるキーワード又はキー画像の入力情報をキャッシュメモリ１０３に一時的に書き込む。
【０１９９】
本処理における入力情報とは、検索種類ＫＷ１〜ＫＷ３（３種）の場合は、記憶装置１０７のＡ．画像データベース１１にあるワードＩＤ及びワードメタタグであり、検索種類ＫＧ１〜ＫＧ６（６種）の場合は、記憶装置１０７のＡ．画像データベース１１にある画像ＩＤ及び画像メタタグであり、検索種類ＫＧ７の場合は、記憶装置１０７のＡ．画像データベース１１にあるペア画像ＩＤ及びペア画像メタタグ（結合済み）である。
【０２００】
次に、探索する検索出力画像候補ＩＤの画像種類に関する探索の優先度を指定するため、各検索種類について検索優先順の読み取りを行う（ステップＳ１００６）。
【０２０１】
次に、検索出力画像候補ＩＤの探索を行う（ステップＳ１００７）。本実施形態のペア画像投稿検索装置においては、記憶装置１０７のＡ．画像データベース１１の画像（ワード）ＩＤから画像メタタグを直接検索し探索することに加え、記憶装置１０７のＢ．処理実績データベース１２においてメタタグ類似度が高い検索出力画像ＩＤを探索することで、指示検索種類に基づく検索出力画像候補として望ましい画像ＩＤを効率的に探索する。
【０２０２】
最後に、検索出力画像候補ＩＤを決定し、キャッシュメモリ１０３に書き込む（ステップＳ１００８）。
【０２０３】
［処理実績データベース］
図２に示す記憶装置１０７のＢ．処理実績データベース１２は、投稿・検索の処理を含む本実施形態のペア画像投稿検索装置における全処理の実績データ又は履歴のデータを蓄積しており、このデータは、検索出力画像候補の決定に利用される。
【０２０４】
以下、図３０に示す処理実績データベースのデータ構成例を参照して、本実施形態のペア画像投稿検索装置における処理実績データベースについて説明する。
【０２０５】
記憶装置１０７のＢ．処理実績データベース１２のデータの構成例としては、処理ＩＤ、処理時間（検索出力時）、検索の種類（ＫＷ１〜ＫＷ３、ＫＧ１〜ＫＧ７）、検索出力画像及びキー（ワード）画像のプロフィールである検索出力画像及びキーワード又はキー画像のＩＤとメタタグ、検索出力結果である検索出力画像種類（問題、解決、問題（ペアのうち）、解決（ペアのうち））及び検索出力順位、評価である検索出力優先度などがある。
【０２０６】
処理実績データベース１２には、検索出力優先度算出対象データのうち、検索出力画像候補のメタタグ類似度データ、検索頻度データ、ペア検索頻度データ、検索出力優先度データ、決定した検索出力順位等が、検索処理の過程において、記憶装置１０７の評価情報データベース１３内に記録される実績が履歴として記録される。
【０２０７】
［メタタグ類似度算出処理］
図３１に示すメタタグ類似度算出処理フロー図を参照して、本実施形態のペア画像投稿検索装置におけるメタタグ類似度算出処理を以下説明する。なお、この図３１のフロー図は図２４のステップＳ１１２の処理に対応するものである。
【０２０８】
本処理は、検索出力画像候補ＩＤ及びメタタグのキャッシュメモリへの書き込み工程と、メタタグ類似度算出工程との２つの工程に大きく分かれる。
【０２０９】
検索出力画像候補ＩＤ及びメタタグのキャッシュメモリへの書き込み工程において、検索出力画像候補のメタタグと、図２９の検索出力画像候補決定処理のステップＳ１００５においてキャッシュメモリ１０３に書き込まれたキーワード又はキー画像のメタタグとは、次の処理工程であるメタタグ類似度算出工程において照合され、メタタグ類似度を算出する準備が行われる。
【０２１０】
まず、検索出力画像候補ＩＤとメタタグとをキャッシュメモリ１０３へ書き込む（ステップＳ１１０１）。
【０２１１】
検索種類ＫＷ１、ＫＷ２、ＫＧ１〜ＫＧ６（６種）の場合には、図２９のステップＳ１００８においてキャッシュメモリ１０３に書き込まれた検索出力画像候補ＩＤを読み取り、その検索出力画像候補ＩＤをキーに、記憶装置１０７のＡ．画像データベース１１の画像メタタグの該当部分から検索出力画像候補メタタグを複製し、キャッシュメモリ１０３に書き込む。
【０２１２】
検索種類ＫＷ３、ＫＧ５、ＫＧ６（３種）の場合には、ステップＳ１００８においてキャッシュメモリ１０３に書き込まれた検索出力ペア画像候補ＩＤを読み取り、その検索出力画像候補ＩＤをキーに、記憶装置１０７のＡ．画像データベース１１のペア画像メタタグの該当部分から検索出力ペア画像候補ＩＤのペア画像メタタグ（結合済み）を読み取り複製し、キャッシュメモリ１０３に書き込む。
【０２１３】
検索種類ＫＧ７の場合には、検索種類ＫＷ３、ＫＧ５、ＫＧ６（３種）の場合と同じく、ステップＳ１００８においてキャッシュメモリ１０３に書き込まれた検索出力候補ペア画像ＩＤを読み取り、その検索出力画像候補ＩＤをキーに、記憶装置１０７のＡ．画像データベース１１のペア画像メタタグの該当部分から検索出力ペア候補画像ＩＤのペア画像メタタグ（結合済み）を読み取り複製し、キャッシュメモリ１０３に書き込む。
【０２１４】
次に、図２９の検索出力画像候補決定処理のステップＳ１００８においてキャッシュメモリ１０３に書き込まれたキーワード又はキー画像のＩＤとメタタグとを読み取る（ステップＳ１１０２）。
【０２１５】
これらは、検索種類ＫＷ１〜ＫＷ３（３種）の場合はキーワードＩＤとキーワードメタタグであり、検索種類ＫＧ１〜ＫＧ６（６種）の場合はキー画像ＩＤとキー画像メタタグであり、検索種類ＫＧ７の場合はキーペア画像ＩＤとキーペア画像メタタグ（結合済み）である。
【０２１６】
次に、キャッシュメモリ１０３にステップＳ１１０１において書き込まれた次の検索出力画像候補のＩＤとメタタグとを読み取る（ステップＳ１１０３）。
【０２１７】
次に、ステップＳ１１０２とステップＳ１１０３で読み取ったキーワード又はキー画像のメタタグと検索出力画像候補のメタタグとを照合し、メタタグ類似度を算出する（ステップＳ１１０４）。
【０２１８】
次に、算出したメタタグ類似度を記録する（ステップＳ１１０５）。ステップＳ１１０４において算出された全検索出力画像候補（ＩＤ）のメタタグ類似度をキャッシュメモリ１０３に書き込むと同時に、記憶装置１０７のＣ．評価情報データベース１３のメタタグ類似度データへ複製及び記録する。
【０２１９】
次に、図１に示すプログラムメモリ１０２にあるしきい（切捨て）値：メタタグ類似度を読み取る（ステップＳ１１０６）。
【０２２０】
次に、しきい（切捨て）値：メタタグ類似度を下回る検索出力画像候補の切捨て（削除）を行う（ステップＳ１１０７)。
【０２２１】
これは、キャッシュメモリ１０３にある検索出力画像候補のメタタグ類似度の順に並べたものを対象として、しきい（切捨て）値：メタタグ類似度未満の検索出力画像候補ＩＤを削除するものである。
【０２２２】
ここで、図３３に示す検索出力画像決定処理フローのステップＳ１３０３における検索出力画像候補の検索出力優先度算出のため、図２５に示す検索出力画像決定処理におけるステップＳ１２１の検索出力画像候補のメタタグ類似度の設定を行う。
【０２２３】
最後に、残った全ての検索出力画像候補について、次の図３２に示す検索頻度算出処理フロー図に示す検索頻度算出処理に進む。なお、もしこの時点において、検索出力画像候補が残っていない場合、検索処理を終了し、図７に示す画像検索画面において検索出力画像がない旨を画像検索視聴者に伝える。
【０２２４】
［メタタグ類似度算出処理の詳細］
以下、図３４に示すメタタグ類似度算出処理本体の詳細フロー図を参照し、本実施形態のペア画像投稿検索装置におけるメタタグ類似度算出処理の詳細を説明する。
【０２２５】
図３４のメタタグ類似度算出処理本体の詳細フロー図は、図２４のステップＳ１１２の処理に対応し、図３１に示すメタタグ類似度算出処理フローのステップＳ１１０４のメタタグ類似度算出ステップを詳細化したものである。
【０２２６】
まず、キー側のメタタグの整列とコード化とを行い、キャッシュメモリ１０３に書き込む（ステップＳ１４０１）。
【０２２７】
ここで、整列とは、検索出力側のコードを比較する際に望まれる位置の決定である。整列の方法は、メタタグ類似度算出式及び計算方式に基づく。また、コード化とは、メタタグの文字列を、本実施形態のペア画像投稿検索装置が有する文字コード体系においてコードとして、メタタグ類似度の算出に即利用できるよう認識することを示す。
【０２２８】
次に、検索出力側のメタタグの整列とコード化とを行い、リストを作成して画像ＩＤ又はペア画像ＩＤと共に書き込む（ステップＳ１４０２）。
【０２２９】
図３５は、ステップＳ１４０１及びステップＳ１４０２においてコード化したメタタグの構成を、各検索種類のキー側のメタタグと検索出力側のメタタグとして示している。
【０２３０】
キーワード検索であるＫＷ１、ＫＷ２及びＫＷ３について、キー側のメタタグはワードメタタグであり、検索出力側のメタタグはＫＷ１及びＫＷ２について単体画像検索であるため画像メタタグであるが、ＫＷ３についてはペア画像検索であるため、ペア画像メタタグ（結合済み）である。
【０２３１】
一方、キー画像検索であるＫＧ１、ＫＧ２、ＫＧ３及びＫＧ４について、キー側のメタタグは画像メタタグであり、検索出力側のメタタグは画像メタタグである。ＫＧ５及びＫＧ６についてはペア画像検索であるため、検索出力側のメタタグはペア画像メタタグ（結合済み）となる。同じくキー画像検索であるＫＧ７について、キー側のメタタグはペア画像であるため、ペア画像メタタグ（結合済み）であり、検索出力側のメタタグもペア画像検索であるため、ペア画像メタタグ（結合済み）である。
【０２３２】
次に、キー側と検索出力側とのメタタグの照合を行う（ステップＳ１４０３）。即ち、キャッシュメモリ１０３からステップＳ１４０１で書き込んだキー側のメタタグコードを読み取り、検索出力側の検索出力画像候補数分のメタタグコードをステップＳ１４０２において作成したリスト内において上から順に読み取り照合していく。
【０２３３】
次に、メタタグコード類似度を算出する（ステップＳ１４０４）。
【０２３４】
本実施形態のペア画像投稿検索装置が採用するメタタグ類似度の算出は、キー側と検索出力側との２つの集合の要素間の一致度を示すものとする。
【０２３５】
メタタグ類似度の算出式の例として、キー側及び検索出力側のメタタグの集合を、それぞれＫ及びＴとして、両集合が有するメタタグを、それぞれ（ｋ１，ｋ２，．．，ｋｌ）、（ｔ１，ｔ２，．．，ｔｍ）とし、両集合の共通のメタタグをＫ∪Ｔとして、（ｚ１，ｚ２，．．，ｚｎ）とする。ｌ，ｍ，ｎ≧０、ｌ，ｍ≧ｎとする。
【０２３６】
メタタグ類似度の算出式の他の例として、ＫとＴの共通要素数を少なくとも一方にある要素の総数で割ったもので、メタタグ類似度＝｜Ｋ∩Ｔ｜／｜Ｋ∪Ｔ｜で表わすジャッカード係数がある。
【０２３７】
また、ＫとＴの共通要素数を各集合の要素数の平均で割ったもので、メタタグ類似度＝２×｜Ｋ∩Ｔ｜／（｜Ｋ｜＋｜Ｔ｜）で表わすダイス係数がある。
【０２３８】
また、ＫとＴの共通要素数を各集合の要素数の最小値で割ったもので、メタタグ類似度＝｜Ｋ∩Ｔ｜／ｍｉｎ（｜Ｋ｜，｜Ｔ｜）で表わすシンプソン係数がある。
【０２３９】
ジャッカード係数、ダイス係数、及びシンプソン係数は、それぞれ、共通するメタタグの数をキー側と検索出力側とのいずれか多いほうのメタタグの数で除したもの、平均のメタタグの数で除したもの、少ないほうのメタタグの数で除したものである。
【０２４０】
また、共通するメタタグの数即ち共通要素数をそのまま係数として利用することも検討できる。
【０２４１】
他にも集合の類似性指標があり、例えば、ユークリッド距離に代表するｎ次元空間上のベクトル間の幾何学的距離を表わす指標として利用できる。
【０２４２】
ここで、本実施形態のペア画像投稿検索装置においては、上述した係数のいずれかを採用できるが、キー側のうち、特にキーワードの場合は一般にメタタグが少ないと想定されること、また、検索出力画像候補によっては、メタタグが極端に多いことが想定されることから、共通するメタタグの数即ち共通要素数をそのまま係数として利用するものとする。
【０２４３】
従って、本実施形態のペア画像投稿検索装置が採用するメタタグ類似度は、単純にキー側と検索出力側との共通要素数とする。
【０２４４】
次に、メタタグコード類似度に基づく並び替えを行う（ステップＳ１４０５）。
【０２４５】
ステップＳ１４０２において作成した検索出力画像候補数分の画像ＩＤ又はペア画像ＩＤ、及びメタタグコードを書き込んだリストに、類似度を追記した後、類似度の大きいものから順に上から並べ替えを行う。
【０２４６】
最後に、メタタグ類似度及び照合履歴を記録する（ステップＳ１４０６）。即ち、ステップＳ１４０５において作成したリスト上のデータである、検索出力画像候補数分の画像ＩＤ又はペア画像ＩＤ、メタタグコード、及び類似度を、記憶装置１０７のＢ．処理実績データベース１２のメタタグ類似度データとして追記する。
【０２４７】
ステップＳ１４０６の処理を終えると、図３１に示すメタタグ類似度算出処理フローのステップＳ１１０５のメタタグ類似度の記録へと移行する。
【０２４８】
［検索頻度算出処理］
次に、図３２に示す検索頻度算出処理フロー図を参照して、本実施形態のペア画像投稿検索装置における検索頻度算出処理を説明する。なお、この図３２のフロー図は図２４のステップＳ１１３の処理に対応するものである。
【０２４９】
本処理は、大きくは、ステップＳ１２０１のデータの読み取り工程と、ステップＳ１２０２からステップＳ１２０５までの検索頻度算出の工程とに分かれる。
【０２５０】
まず、データの読み取りを行う（ステップＳ１２０１）。これは、前工程である図３１に示すメタタグ類似度算出処理を経て、キャッシュメモリ１０３に書き込まれている高メタタグ類似度検索出力画像候補ＩＤに関する検索処理実績の部分を、図２に示す記憶装置１０７のＢ．処理実績データベース１２の処理実績データにアクセスし、検索頻度算出の対象データとして読み取るものである。
【０２５１】
次に、検索頻度を算出する（ステップＳ１２０２）。
【０２５２】
検索種類ＫＷ１、ＫＷ２、ＫＧ１〜ＫＧ４(６種)の場合は、記憶装置１０７のＢ．処理実績データベース１２の処理実績データの単体検索処理分について、検索種類ＫＷ３、ＫＧ５〜ＫＧ７(４種)の場合は、記憶装置１０７のＢ．処理実績データベース１２のペア画像としてのペア検索処理分及びペア画像を構成する問題又は解決の各単体としての単体検索処理分を対象とし、各間隔の検索頻度を全ての高メタタグ類似度検索出力画像候補について計算する。
【０２５３】
次に、算出された検索頻度をキャッシュメモリへ書き込む（ステップＳ１２０３）。
【０２５４】
全ての高メタタグ類似度検索出力画像候補の指定対象期間における指定時間間隔の検索頻度をキャッシュメモリ１０３に一時的に書き込む。
【０２５５】
次に、算出された検索頻度の時間調整を行う（ステップＳ１２０４）。
【０２５６】
次に、検索頻度について直近の検索実績を重視したい場合において、検索頻度の時間調整（重みづけ修正）を行う。
【０２５７】
この処理の前に、あらかじめ、図３６に示す時間調整処理フロー図に従い、図３７に示す時間調整パラメータの概念図に基づく時間調整パラメータである現在時間及び対象期間開始時点の重み（ＷＥＩＧＨＴ（Ｗｔ０，Ｗｔｎ））と検索時点Ｘの重み（ＷｔｐｒｏｃＸ）を記憶装置１０７のＣ．評価情報データベース１３から読み込み、キャッシュメモリ１０３にある全ての高メタタグ類似度検索出力画像候補（単体・ペア）の指定対象期間における指定時間間隔の検索頻度を読み出し、各時間間隔の検索頻度の時間調整（重み付け修正）をする。
【０２５８】
次に、検索頻度を記録する（ステップＳ１２０５）。
【０２５９】
時間調整（重み付け修正）した検索頻度データはここで一度データベースに記録される。
【０２６０】
検索種類ＫＷ１、ＫＷ２、ＫＧ１〜ＫＧ４(６種)の場合は、記憶装置１０７のＣ．評価情報データベース１３の検索頻度データ（時間調整済み）へ、検索種類ＫＷ３、ＫＧ５〜ＫＧ７(４種)の場合は、記憶装置１０７のＣ．評価情報データベース１３のペア検索頻度データ（時間調整済み）へ記録される。
【０２６１】
次に、プログラムメモリ１０２にあるしきい（切捨て）値：検索頻度を読み取る（ステップＳ１２０６）。
【０２６２】
最後に、しきい（切捨て）値：検索頻度を下回る検索出力画像候補の切捨て（削除）を行う（ステップＳ１２０７）。
【０２６３】
これは、キャッシュメモリ１０３にある全ての検索出力画像候補（ＩＤ）の検索頻度の順に並べたものを、しきい（切捨て）値：検索頻度未満のものを削除することである。
【０２６４】
最後に、残った全ての検索出力画像候補は図３３に示す検索出力画像決定処理に進む。なお、検索出力画像候補が残っていない場合は、検索処理を終了し、図７に示す画像検索画面において検索処理終了若しくは検索画像がない旨を画像検索視聴者に伝える。
【０２６５】
ここで、図３３に示す検索出力画像決定処理フローのステップＳ１３０３における検索出力画像候補の検索出力優先度算出のため、図２５に示す検索出力画像決定の対象データ取得と算出に関する処理フローに示すステップＳ１２３の検索出力画像候補のキー画像としての検索頻度の設定を行う。
【０２６６】
［時間調整処理］
以下、図３６に示す時間調整処理フロー図を参照して、本実施形態のペア画像投稿検索装置における時間調整処理を説明する。なお、この図３６のフロー図は図２４のステップＳ１１４の処理に対応し、また、図３２に示す検索頻度算出処理フロー図のステップＳ１２０４における検索頻度の時間調整の処理に対応し、詳細に示すものである。
【０２６７】
時間調整処理は、図２に示す中央処理制御装置１０１の検索頻度算出部２５により実行される。
【０２６８】
まず、現在時間を変数（ｔ０）に設定する（ステップＳ１５０１）。
【０２６９】
次に、時間調整パラメータのうち、時間調整の期間の変数（ＴＥＲＭ）を読み込み、時間調整の対象期間（ｔ０，ｔｎ（ｔ０−ＴＥＲＭ））を設定する（ステップＳ１５０２）。
【０２７０】
これは、記憶装置１０７のＣ．評価情報データベース１３から時間調整パラメータのうちの（ＴＥＲＭ）を読み込み、時間調整の対象期間の開始時点（ｔｎ）に、現在時間（ｔ０）から時間調整の期間（ＴＥＲＭ）をさかのぼった時点（ｔ０−ＴＥＲＭ）を設定するものである。
【０２７１】
次に、記憶装置１０７のＣ．評価情報データベース１３の時間調整パラメータのうち現在時間及び対象期間開始時点の重みの２つの変数である（ＷＥＩＧＨＴ（Ｗｔ０））と（ＷＥＩＧＨＴ（Ｗｔｎ））とを読み込む（ステップＳ１５０３）。
【０２７２】
次に、ステップＳ１５０１からステップＳ１５０３までで算出した全ての変数を、及び処理Ｘである（ｐｒｏｃＸ）の処理時点（ｔ−ｐｒｏｃＸ）の重みである（Ｗｔ−ｐｒｏｃＸ）を、その計算式である（（Ｗｔ０−Ｗｔｎ）／ｔｎ）（ｔｎ−ｔ−ｐｒｏｃＸ）＋Ｗｔｎ）に算入して計算し、キャッシュメモリ１０３に一時的に書き込む（ステップＳ１５０４）。
【０２７３】
次に、記憶装置１０７のＢ．処理実績データベース１２から、時間調整の対象期間（ｔ０−ｔｎ）におけるキー画像としての検索処理行を読み取り、処理時間をキーとして検索する準備をする（ステップＳ１５０５）。
【０２７４】
最後に、ステップＳ１５０５で検索した全ての検索出力画像候補の処理時間に基づく検索頻度を算出し、その後、検索頻度の時間調整を行う（ステップＳ１５０６）。
【０２７５】
［時間調整パラメータの概念図］
以下、図３７に示す時間調整パラメータの概念図を参照して、本実施形態のペア画像投稿検索装置における時間調整パラメータの内容を説明する。
【０２７６】
現在の時間を（ｔ０）とし、時間調整の期間を（ＴＥＲＭ）とすると、時間調整の対象期間は、（ｔ０，ｔｎ（ｔ０−ＴＥＲＭ））となる。
【０２７７】
対象期間の開始時点即ち（ｔｎ）と終了時点即ち（ｔ０）の重み比率とをそれぞれ（Ｗｔｎ）と（Ｗｔ０）とする。
【０２７８】
本実施形態のペア画像投稿検索装置においては検索頻度の評価は直近のものほど重みをつけ重視する。
【０２７９】
そして、前述したように、処理Ｘである（ｐｒｏｃＸ）の対象時点（ｔｐｒｏｃＸ）の重み（ＷｔｐｒｏｃＸ）は、（（Ｗｔ０−Ｗｔｎ）／ｔｎ）（ｔｎ−ｔ−ｐｒｏｃＸ）＋Ｗｔｎ）で算出される。
【０２８０】
検索頻度の時間調整は、各検索出力画像候補の過去の検索処理即ち全ての検索Ｘを対象に、（Σ（検索時点Ｘの重み（Ｗｔ−ｐｒｏｃＸ）×検索Ｘ時点の検索処理数（ｔ−ｐｒｏｃＸ）））を算出する。なお、（Σ）は合計を表す。
【０２８１】
［検索出力画像決定処理］
以下、図３３に示す検索出力画像決定処理フロー図を参照して、本実施形態のペア画像投稿検索装置における検索出力画像の決定処理を説明する。なお、この図３３のフロー図は図２４のステップＳ１１５の処理に対応するものである。
【０２８２】
検索出力画像決定処理は、検索出力画像候補の検索出力優先度算出用データの読み取り工程と、検索出力優先度算出工程との２つの工程に分かれる。
【０２８３】
検索出力優先度算出対象データのうち、図２５の検索出力画像決定処理のフロー図におけるステップＳ１２１において、検索出力画像候補のメタタグ類似度（検索優先順１位２位の画像種類としてのメタタグ類似度）を、同じく図２５のステップＳ１２２において、検索出力画像候補のキー画像としての検索頻度（検索優先順１位２位の画像種類としての検索頻度）を、同じく図２５のステップＳ１２３において、検索出力画像候補の検索出力画像としての検索頻度（検索優先順１位２位の画像種類としての検索頻度）が、前工程までの図２９に示す検索出力画像候補決定処理、図３１に示すメタタグ類似度算出処理、図３２に示す検索頻度算出処理を経て、キャッシュメモリ１０３に書き込まれている。
【０２８４】
前者の検索出力画像候補の検索出力優先度算出用データの読み取り工程においては、キャッシュメモリ１０３に書き込まれているこれらの検索出力優先度算出対象データを読み取り、後者の検索出力優先度算出工程においては、さらに、記憶装置１０７のＣ．評価情報データベース１３にある、その他の検索出力優先度算出対象データである、各種パラメータである検索出力優先度算出式、これを構成する検索出力優先度算出式を構成する３つの評価に関する重みづけ、指示検索種類の検索優先順１位２位の画像種類に基づく評価の重みのデータを読み取り、これらをあわせ、全ての検索出力画像候補の検索出力優先度を算出し、検索出力画像を決定し、図７に示す画像検索画面に出力表示する。
【０２８５】
図３３に示す検索出力画像決定処理フロー図において、まず、キャッシュメモリ１０３から、検索出力優先度算出対象データの読み取りを行う（ステップＳ１３０１）。
【０２８６】
次に、記憶装置１０７のＣ．評価情報データベース１３から検索出力優先度算出式を読み取る（ステップＳ１３０２）。
【０２８７】
次に、前のステップＳ１３０１及びステップＳ１３０２で読み取った図４０に示す全ての検索出力優先度算出対象データと、前述した検索出力優先度算出式とを利用し、全ての検索出力画像候補の検索出力優先度を算出する（ステップＳ１３０３）。
【０２８８】
次に、検索出力優先度算出により算出された検索出力優先度及び検索出力順を、検索出力画像候補ＩＤと関係づけて記録する（ステップＳ１３０４）。
【０２８９】
次に、全ての検索出力画像候補の検索出力優先度及び検索出力順をキャッシュメモリ１０３に書き込む（ステップＳ１３０５）。
【０２９０】
次に、全ての検索出力画像候補の検索出力優先度を記憶装置１０７のＣ．評価情報データベース１３の検索出力優先度データとして記録する（ステップＳ１３０６）。
【０２９１】
次に、プログラムメモリ１０２にあるしきい（切捨て）値：検索出力数を読み取る（ステップＳ１３０７）。
【０２９２】
次に、しきい（切捨て）値：検索出力数を超える検索出力画像候補の切捨て（削除）を行う（ステップＳ１３０８）。キャッシュメモリ１０３にある全検索出力画像候補（ＩＤ）の検索出力順に並べたものを、しきい（切捨て）値：検索出力数に１を加えた順以降を削除する。なお、もしこの時点において、検索出力画像候補が残っていない場合、検索処理を終了し、図７に示す画像検索画面において検索出力画像がない旨を画像検索視聴者に伝える。
【０２９３】
最後に、出力する検索出力画像を決定し（ステップＳ１３０９）、検索出力画像を検索出力優先度の順位に基づき、図７に示す画像検索画面の下方に示す検索画像出力領域に出力表示する（ステップＳ１３１０）。詳細には、検索出力優先度の高い順に並び替えられた検索出力画像候補の画像ＩＤを、検索出力優先度の高い順に読み取り、記憶装置１０７のＡ．画像データベース１１に記録される画像ＩＤから、これら関係づけられた、同じくＡ．画像データベース１１に記録される画像データ、画像プロフィールデータ及び画像メタタグを読み出し、図７に示す検索画像出力領域において、検索出力優先度の高い順に上から出力表示する。
【０２９４】
［検索出力優先度算出処理］
以下、図３８に示す検索出力優先度算出処理フロー図を参照して、本実施形態のペア画像投稿検索装置における検索出力優先度算出処理を説明する。なお、この図３８のフロー図は図２５のステップＳ１２４の処理に対応するものである
【０２９５】
本処理は、図３３に示す検索出力画像決定処理フロー図のうち、ステップＳ１３０３の検索出力優先度算出処理を詳細に示すものである。
【０２９６】
この検索出力優先度算出処理は、中央処理制御装置１０１の検索出力優先度算出部２６により実行される。
【０２９７】
検索出力優先度算出処理の工程は、まず、４つの変数列である検索出力画像候補ＩＤ、検索出力画像候補のメタタグ類似度データ、検索頻度データ（時間調整済み）、及び検索出力優先度をリスト化したものを準備する（ステップＳ１６０１）。
【０２９８】
次に、検索出力優先度算出対象データを、キャッシュメモリ１０３から読み取り、リストに書き出す（ステップＳ１６０２）。
【０２９９】
次に、記憶装置１０７のＣ．評価情報データベース１３から検索出力優先度算出式を読み取る（ステップＳ１６０３）。
【０３００】
次に、検索出力優先度計算を行う（ステップＳ１６０４）。
【０３０１】
前述した検索出力優先度算出式に、全ての検索出力画像候補ＩＤの図３９に示す検索出力優先度算出対象データを取込み、検索出力優先度を算出する。
【０３０２】
次に、算出した全ての検索出力画像候補の検索出力優先度を、ステップＳ１６０１において作成したリスト上の検索出力優先度の変数列に書き込む（ステップＳ１６０５）。
【０３０３】
最後に、全ての検索出力画像候補に関する４つの変数列データをリスト上の検索出力優先度の高い順に上から並び替える（ステップＳ１６０６）。
【０３０４】
その後、以上のごとく検索して得た検索出力画像を画面表示装置１０５（図１参照）に表示する。以下、この出力処理について説明する。
【０３０５】
リスト上の検索出力優先度の高い順に上から並び替えられた検索出力画像候補ＩＤの検索出力優先度を参照し、図７に示す画像検索画面上に、画像及び画像以外の情報を検索出力優先順に出力表示する。
【０３０６】
［画像検索画面上の出力形態］
本実施形態のペア画像投稿検索装置が採用する画像検索画面上の出力形態は、キーワード検索のＡ１．単体画像検索のＫＷ１．問題画像検索、又は、Ａ１．単体画像検索のＫＷ２．解決画像検索の場合、画像検索画面上の問題又は解決の画像トレイ上の下に、検索出力優先順の第１位から順に検索出力画像を表示する。
【０３０７】
キーワード検索のＡ２．ペア（問題・解決）画像検索のＫＷ３．ペア（問題・解決）画像検索の場合、画像検索画面上の問題及び解決の画像トレイ上の下に、検索出力優先順の第１位から順に検索出力画像を表示する。
【０３０８】
キー画像検索のＢ１．単体画像検索の異種検索のＫＧ１解決画像検索（Ｋ（問題）→Ｔ（解決））、又は、Ｂ１．単体画像検索の異種検索のＫＧ２問題画像検索（Ｋ（解決）→Ｔ（問題））の場合、検索する対象である一方の知識である画像検索画面上の解決又は問題の画像トレイ上に、検索出力優先順の第１位の検索出力画像を表示し、問題又は解決の画像トレイ上の下には、検索出力優先順の第２位以降の検索出力画像を表示する。
【０３０９】
キー画像検索のＢ１．単体画像検索の同種検索のＫＧ３問題画像検索（Ｋ（問題）→Ｔ（問題））又はＢ１．単体画像検索の同種検索のＫＧ４解決画像検索（Ｋ（解決）→Ｔ（解決））の場合、画像検索画面上の画像が表示されていない問題又は解決の画像トレイ上の下に、検索出力優先順の第１位から順に検索出力画像を表示する。
【０３１０】
キー画像検索のＢ２．ペア画像検索の単体キー画像検索のＫＧ５ペア画像検索（Ｋ（問題）→Ｔ（問題・解決））又はＢ２．ペア画像検索の単体キー画像検索のＫＧ６ペア画像検索（Ｋ（解決）→Ｔ（問題・解決））の場合、画像検索画面上の問題又は解決の画像トレイ上の下に、検索出力優先順の第１位から順に検索出力画像を表示する。
【０３１１】
キー画像検索のＢ２．ペア画像検索のペアキー画像検索のＫＧ５ペア画像検索（Ｋ（問題）→Ｔ（問題・解決））又はＢ２．ペア画像検索の単体キー画像検索のＫＧ６ペア画像検索（Ｋ（解決）→Ｔ（問題・解決））の場合、画像検索画面上の問題又は解決の画像トレイ上の下に、検索出力優先順の第１位から順に検索出力画像を表示する。
【０３１２】
キー画像検索のＢ２．ペア画像検索のペアキー画像検索のＫＧ７ペア画像検索（Ｋ（問題・解決）→Ｔ（問題・解決））の場合、画像検索画面上の問題及び解決の画像トレイ上の下に、検索出力優先順の第１位から順に検索出力画像を表示する。
【０３１３】
［出力処理］
出力処理は、該当画像の各種データへのアクセスをするリンク先情報を、画像検索画面上に表示するように複製し、このデータを、画像検索画面上の出力形態に基づき、当該領域に、出力表示する。このリンク先は、図２に示す記憶装置１０７のＡ．画像データベース１１の画像ＩＤを先頭とし、画像データ、並びに画像プロフィールデータ（これには投稿画像種類、画像名及び画像コメントがある）であり、図７に示す画像検索画面上の該当箇所に表示する。
【０３１４】
本実施形態の変更態様として、ペア画像投稿検索装置は、図２に示すように、スタンドアローン型の単一のハードウェア上に構成されても良いし、その機能や処理数に応じて複数のハードウェア上に構成されても良い。また、既存の情報システム上に実現されても良い。
【０３１５】
また、さらなる変更態様として、上述の実施形態のペア画像投稿検索装置において、図６に示す画像投稿画面、図７に示す画像検索画面、及び図９に示す画像検索待機画面における各種操作において、図１の入力装置１０４に示すキーボード及びマウス、並びに画面表示装置１０５であるモニターにより主に構成する端末としては、携帯電話、携帯端末及びパッド型端末といったパネル上に表示されるオブジェクトを直接的に指でタッチし、動かすことにより直接操作する機種がある。これら機種においては、指により画像を直接操作したり、検索ボタンを押すなどの操作をいっても良い。
【０３１６】
さらにまた、図６に示す画像投稿画面に示す画像投稿トレイには、投稿する画像を問題及び解決のいずれか一方に設置し投稿するほか、問題の画像及び解決の画像のペアを設置して同時に投稿する機能も適用可能である。この場合、投稿の直後、これらの２つの画像の組み合わせにペア画像ＩＤが配布され、キー画像としてペア画像の検索頻度に同じく、本投稿実績をペア画像としての検索出力優先度へ反映するようにしても良い。
【０３１７】
図６に示す画像投稿画面の例における問題と解決の投稿画像トレイによる投稿時、及び、図７に示す画像検索画面における問題と解決のキー画像トレイによる検索時において、問題と解決との関係性に基づく投稿若しくは検索に加え、「ニーズとシーズ」を表わす、ｎｓ（ｎｅｅｄｓ  ＆  ｓｅｅｄｓ）、「原因と結果」を表わす、ｃｒ（ｃａｕｓｅ  ＆  ｒｅｓｕｌｔ）、「入力と出力」を表わす、ｉｏ（ｉｎｐｕｔ  ＆  ｏｕｔｐｕｔ）、「原材料とできあわがり」を表わす、ｍｆ（ｍａｔｅｒｉａｌ  ＆  ｆｉｎｉｓｈ）、「理由と結論主張」を表わす、ｒｃ（ｒｅａｓｏｎ  ＆  ｃｏｎｃｌｕｓｉｏｎ）、「改善前と改善後」を表わす、ｂａ（ｂｅｆｏｒｅ  ＆  ａｆｔｅｒ）、「賛成と反対」を表わす、ｐｃ（ｐｒｏｓ  ＆  ｃｏｎｓ）、「長所と短所」を表わす、ｇｂ（ｇｏｏｄ  ＆  ｂａｄ）、対戦を表わす、ｖｓ（ｖｅｒｓｕｓ）、「北と南」、「西と東」を表わす、ｎｓ（ｎｏｒｔｈ  ＆  ｓｏｕｔｈ）、ｗｅ（ｗｅｓｔ  ＆  ｅａｓｔ）、「昔と今」、「現代と未来」を表わす、ｂｐ（ｂａｃｋｗａｒｄ  ＆  ｐｒｅｓｅｎｔ）、ｐｆ（ｐｒｅｓｅｎｔ  ＆  ｆｕｔｕｒｅ）、「ペア」を表わす、ｐｒ（ｐａｉｒ）等の追加指定により、問題と解決の関係性に新たな関係性を加えて、投稿させ、検索出力優先度算出式においては、当該オプション指定に基づく検索頻度の実績が、キー画像及び検索出力画像としての検索頻度の実績として加算されるようにしても良い。
【０３１８】
さらに、図７の画像検索画面に示すキーワード入力欄にキーワードが入力され、かつ、キー画像トレイ上の問題及び解決のいずれか又は両方にもキー画像が設置されている場合、エラーを返し処理を中断するか、キーワードのメタタグとキー画像のメタタグとを結合する処理をいって、キー画像処理として処理する方法も適用可能である。なお、前述の実施形態のペア画像投稿検索装置においては、エラーを返し処理を中断するものとしている。
【０３１９】
また、画像のメタタグは、画像投稿者が、画像投稿時に入力したメタ情報からインデクシングしたものとするが、画像投稿者により指定された画像名や画像投稿者及び画像検索視聴者により入力されたコメントなども画像のメタ情報として追加し、メタタグとして取り込むことも可能である。
【０３２０】
この場合、メタタグ類似度評価（現時点のメタタグに基づくキー画像との類似度）においては、投稿以降、追記されるコメントの取込みによりメタ情報及びメタタグが変化し、検索頻度評価と同様、指示検索種類の検索優先順１位２位の画像種類としての実績を重み付けし算出することで、問題か解決かの画像種類により異なるメタタグの変化を反映した類似度評価、これに基づく検索機能を実現できる。
【０３２１】
さらに、メタタグ類似度の計算において、キー側と検索出力側とのメタタグの共通要素数という数だけでなく、各メタタグの他の全ての検索出力画像候補のメタタグを事前に調査することを前提とした文字としての希少性を重視する方法も適用可能である。
【０３２２】
検索実績として、画像が動画である場合に、検索出力動画の再生回数、ダウンロード回数といった動画検索後のユーザーによる明示的な処理の実績を追加することも可能である。
【０３２３】
画像投稿者による投稿画像に対する画像種類の指定意図を反映する場合、投稿時付与画像種類に基づく検索出力画像としての評価を重く評価することも可能である。具体的には、検索出力画像としての検索頻度評価について、投稿画像としての投稿辞付与画像種類が一致する指示検索種類の検索優先順１位か２位のいずれかの画像種類における評価の項を重く評価することである。
【０３２４】
ペア画像検索のうち単体キー画像（問題画像及び解決画像）検索のＫＧ５及びＫＧ６の場合は、画像検索視聴者は問題及び解決の両方の知識を必要としているとし、検索優先順について、ペア画像を１位に、問題の画像と解決の画像を同等に２位としている。この検索優先順について、ペア画像を１位に、キーとしている問題の画像と解決の画像のいずれか一方を２位、他方を３位とすることもできる。
【０３２５】
時間調整処理の関数は、比例計算であるが、２次関数を用いるなど、直近ほど有利に評価する、又はある一定期間前のものは全般的に低めにするといった関数への変更も可能である。
【０３２６】
検索出力優先度算出基準については、検索出力結果の精度を、例えば、その結果、どの程度キー画像として再度利用されたかといった指標に基づき評価し、当該基準において設定した各重みを自動調整する、即ち、各種人工知能技術等を利用したソフトコンピューティングアプローチにより自動制御する方法などが適用可能である。
【０３２７】
また、検索出力優先度算出基準に算入するメタタグ類似度、検索頻度等の実績データは、いずれも検索優先順１位と２位とのみについて算入されているが、装置利用の初期段階において、検索出力画像候補の全般の実績データが蓄積されていない状況においては、検索優先順１位２位以外の実績データを利用することなどが適用できる。
【０３２８】
図４１は、本発明のペア画像投稿検索装置の他の実施形態のハードウェアの構成を概略的に示している。本実施形態は、構内ネットワーク（ＬＡＮ)によって相互に接続されるクライアント端末２０１とサーバ装置２０２とを備えたペア画像投稿検索装置の場合である。
【０３２９】
クライアント端末２０１にはペア画像投稿検索プログラムのクライアント用ソフトウェア２０３がインストールされており、サーバ装置２０２には画像、メタタグ等の各種データを保管するデータベースサーバアプリケーション、画像の表示、再生及び検索に利用する画像表示・再生サーバアプリケーション、及びペア画像投稿検索プログラムがインストールされている。クライアント端末２０１にはこのサーバ装置２０２からＬＡＮを介してサービスが提供される。
【０３３０】
なお、サーバ装置２０２のペア画像投稿検索プログラムがウェブアプリケーションの場合、サーバ装置にはウェブサーバ２０４がインストールされ、クライアント端末２０１にはウェブブラウザ２０５がインストールされる。
【０３３１】
図４２は、本発明のペア画像投稿検索装置のさらに他の実施形態のハードウェアの構成を概略的に示している。本実施形態は、インターネットを介して相互に接続されるクライアント端末２１１とサーバ装置２１２とを備えたペア画像投稿検索装置の場合である。
【０３３２】
クライアント端末２１１にはペア画像投稿検索プログラムのクライアント用ソフトウェア２１３がインストールされており、サーバ装置２１２には画像、メタタグ等の各種データを保管するデータベースサーバアプリケーション、画像の表示、再生及び検索に利用する画像表示・再生サーバアプリケーション、及びペア画像投稿検索プログラムがインストールされている。クライアント端末２１１にはこのサーバ装置２１２からインターネットを介してサービスが提供される。
【０３３３】
なお、サーバ装置２１２のペア画像投稿検索プログラムがウェブアプリケーションの場合、サーバ装置にはウェブサーバ２１４がインストールされ、クライアント端末２１１にはウェブブラウザ２１５がインストールされる。
【０３３４】
以上、本発明を特定の実施形態により記載したが、この開示の一部をなす論述及び図面はこの発明を限定するものではなく、ここでは記載していない様々な実施形態等を含むと理解すべきである。従って、本発明の技術的範囲は特許請求の範囲に係る発明特定事項によってのみ定められる。そして、本発明の開示から様々な変更態様及び運用技術が明らかとなり、これらも、特許請求の範囲に係る発明特定事項によって定められるものとなる。
【符号の説明】
【０３３５】
１１  画像データベース
１２  処理実績データベース
１３  評価情報データベース
２１  画像投稿部
２２  画像検索部
２３  評価部
２４  メタタグ類似度算出部
２５  検索頻度算出部
２６  検索出力優先度算出部
２７  検索出力部
１０１  中央処理制御装置
１０２  プログラムメモリ
１０３  キャッシュメモリ
１０４  入力装置
１０５  画面表示装置
１０６  通信制御装置
１０７  記憶装置
１０８  画像取込み周辺装置
１０９  入出力インターフェイス
１１０  バス
２０１、２１１  クライアント端末
２０２、２１２  サーバ装置
２０３、２１３  クライアント用ソフトウェア
２０４、２１４  ウェブサーバ
２０５、２１５  ウェブブラウザ
【図１】
0005307258.tif 000002
【図２】
0005307258.tif 000003
【図３】
0005307258.tif 000004
【図４】
0005307258.tif 000005
【図５ａ】
0005307258.tif 000006
【図５ｂ】
0005307258.tif 000007
【図６】
0005307258.tif 000008
【図７】
0005307258.tif 000009
【図８】
0005307258.tif 000010
【図９】
0005307258.tif 000011
【図１０】
0005307258.tif 000012
【図１１】
0005307258.tif 000013
【図１２】
0005307258.tif 000014
【図１３】
0005307258.tif 000015
【図１４】
0005307258.tif 000016
【図１５】
0005307258.tif 000017
【図１６】
0005307258.tif 000018
【図１７】
0005307258.tif 000019
【図１８】
0005307258.tif 000020
【図１９】
0005307258.tif 000021
【図２０】
0005307258.tif 000022
【図２１】
0005307258.tif 000023
【図２２】
0005307258.tif 000024
【図２３】
0005307258.tif 000025
【図２４】
0005307258.tif 000026
【図２５】
0005307258.tif 000027
【図２６】
0005307258.tif 000028
【図２７】
0005307258.tif 000029
【図２８】
0005307258.tif 000030
【図２９】
0005307258.tif 000031
【図３０】
0005307258.tif 000032
【図３１】
0005307258.tif 000033
【図３２】
0005307258.tif 000034
【図３３】
0005307258.tif 000035
【図３４】
0005307258.tif 000036
【図３５】
0005307258.tif 000037
【図３６】
0005307258.tif 000038
【図３７】
0005307258.tif 000039
【図３８】
0005307258.tif 000040
【図３９】
0005307258.tif 000041
【図４０】
0005307258.tif 000042
【図４１】
0005307258.tif 000043
【図４２】
0005307258.tif 000044