(57)【要約】【課題】インターネットを介して提示される第２の広告主による広告を、第１の広告主による紙媒体利用の広告に関連させて提示する。【解決手段】登録部は、画像に含まれる第１の広告主が広告するオブジェクトを検索するための索引に対して第２の広告主が広告する広告情報を関連付けて登録する。オブジェクト検索部は、受信部で受信した撮像画像から抽出したオブジェクトと、索引によって検索されるオブジェクトとの類似度を求め、類似度に基づき格納部から１以上のオブジェクトを検索する。提示部は、オブジェクト検索部に検索されたオブジェクトに対応する索引に関連付けられた広告情報を、撮像画像の送信元に対して提示する。【選択図】図８
2014182405.tif 000002
【特許請求の範囲】
【請求項１】
画像に含まれる第１の広告主が広告するオブジェクトを検索するための索引に対して第２の広告主が広告する広告情報を関連付けて登録する登録部と、
撮像画像を受信する受信部と、
前記撮像画像から抽出したオブジェクトと、前記索引によって検索されるオブジェクトとの類似度を求め、該類似度に基づき前記格納部から１以上のオブジェクトを検索するオブジェクト検索部と、
前記オブジェクト検索部に検索されたオブジェクトに対応する索引に関連付けられた前記広告情報を前記撮像画像の送信元に対して提示する提示部と
を有する
ことを特徴とする電子広告システム。
【請求項２】
前記第１の広告主を識別する第１の識別情報によりアクセスが許可され、前記広告情報を前記登録部により登録するための条件を設定する設定部をさらに有する
ことを特徴とする請求項１に記載の電子広告システム。
【請求項３】
前記第２の広告主を識別する第２の識別情報によりアクセスが許可され、前記条件を検索する条件検索部をさらに有し、
前記登録部は、
前記条件検索部の検索結果に応じて、前記第２の広告主による購入指示を受け付けた場合に、前記広告情報の登録を許可する
ことを特徴とする請求項２に記載の電子広告システム。
【請求項４】
前記設定部は、
前記条件として、少なくとも前記第２の広告主の業種を示す情報と組織体を示す情報とを設定する
ことを特徴とする請求項２または請求項３に記載の電子広告システム。
【請求項５】
第１の広告主が広告するオブジェクトは、紙媒体に印刷されて提供される
ことを特徴とする請求項１乃至請求項４の何れか１項に記載の電子広告システム。
【請求項６】
前記広告情報は、画像情報を含む
ことを特徴とする請求項１乃至請求項５の何れか１項に記載の電子広告システム。
【請求項７】
前記広告情報は、リンク情報を含む
ことを特徴とする請求項１乃至請求項６の何れか１項に記載の電子広告システム。
【請求項８】
前記登録部は、
前記第１の広告主が広告する他の広告情報を前記索引にさらに関連付ける
ことを特徴とする請求項１乃至請求項７の何れか１項に記載の電子広告システム。
【請求項９】
前記登録部は、
１の前記第２の広告主に対して複数の前記広告情報を登録可能である
ことを特徴とする請求項１乃至請求項８の何れか１項に記載の電子広告システム。
【請求項１０】
画像に含まれる第１の広告主が広告するオブジェクトを検索するための索引に対して第２の広告主が広告する広告情報を関連付けて登録する登録ステップと、
撮像画像を受信する受信ステップと、
前記撮像画像から抽出したオブジェクトと、前記索引によって検索されるオブジェクトとの類似度を求め、該類似度に基づき前記格納部から１以上のオブジェクトを検索するオブジェクト検索ステップと、
前記検索ステップにより検索されたオブジェクトに対応する索引に関連付けられた前記広告情報を前記撮像画像の送信元に対して提示する提示ステップと
を有する
ことを特徴とする電子広告提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、インターネットを介して広告を提示する電子広告システムおよび電子広告提供方法に関する。
【背景技術】
【０００２】
紙媒体への広告掲載は、多額の費用を必要とする。特に宣伝効果の高い新聞や雑誌などへの広告掲載は、限られた紙面スペースを割くため、大口広告主が主となって商品・サービスの広告に利用しており、そのスペースの利用権は、大口広告主が保持するのに留まっている。そのため、その主となる広告対象物に関する付帯商品・サービスを保有する第三者の小口広告主は、当該紙面スペースを容易に利用することが困難である。そこで、付帯商品・サービスを保有する第三者の小口広告主が宣伝するための広告手段として、インターネットを介して広告を提示するインターネット広告が既に知られている。
【０００３】
特許文献１には、包材の一部に印刷などの情報表示スペースを設け、インターネットなど通信ネットワークを介して第三者にこのスペースを提供して広告を募り、登録された媒体情報および広告商品情報から、広告によって得られる相乗効果を評価し、広告掲載を許可する側と広告掲載を希望する側との包材広告売買を仲介するようにした構成が開示されている。特許文献１の構成によれば、包材の表示スペースの有効利用をはかり、それぞれの広告対象商品の販売相乗効果を得ることができる。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来のインターネット広告では、第三者である小口広告主が付帯商品・サービスの広告をインターネットを介して提示できるものの、大口広告主の紙媒体を使った広告とは繋がらない場所での単体の広告となっていた。したがって、付帯商品・サービスを保有する第三者の小口広告主は、主となる商品・サービスの広告効果を相乗効果として利用したインターネット広告を行うことが困難であるという問題があった。
【０００５】
この、小口広告主がインターネットを介して提示する付帯商品・サービスの広告が、大口広告主の紙媒体を使った広告と繋がらず、単体の広告になっているという問題点は、特許文献１においても解決できていない。
【０００６】
本発明は、上記に鑑みてなされたものであって、インターネットを介して提示される第２の広告主による広告を、第１の広告主による紙媒体利用の広告に関連させて提示することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明は、画像に含まれる第１の広告主が広告するオブジェクトを検索するための索引に対して第２の広告主が広告する広告情報を関連付けて登録する登録部と、撮像画像を受信する受信部と、撮像画像から抽出したオブジェクトと、索引によって検索されるオブジェクトとの類似度を求め、類似度に基づき格納部から１以上のオブジェクトを検索するオブジェクト検索部と、オブジェクト検索部に検索されたオブジェクトに対応する索引に関連付けられた広告情報を撮像画像の送信元に対して提示する提示部とを有することを特徴とする。
【０００８】
本発明によれば、インターネットを介して提示される第２の広告主による広告を、第１の広告主による紙媒体利用の広告に関連させて提示させることが可能となる効果を奏する。
【図面の簡単な説明】
【０００９】
【図１】図１は、実施形態に係る画像検索システムの一例の構成を示す図である。
【図２】図２は、実施形態に係るＤＢに格納される索引データの元となる画像データの例を示す図である。
【図３】図３は、実施形態に係るＤＢの一例の構成を示す図である。
【図４】図４は、実施形態に係るＸＭＬコードの一例を示す図である。
【図５】図５は、実施形態に係るサーバの動作の例を示すフローチャートである。
【図６】図６は、実施形態に係る索引の連携情報の提示処理の例を示すフローチャートである。
【図７】図７は、実施形態に係る、複数の索引から１を選択する処理を、ユーザが行うように促す場合の一例の処理を示すフローチャートである。
【図８】図８は、実施形態に係る電子広告システムの構成を概略的に示す図である。
【図９】図９は、実施形態に係る広告権利売買仲介システムの一例の構成をより詳細に示すブロック図である。
【図１０】図１０は、第１の広告主が実施形態に係る電子広告システムに広告権利を登録する登録画面の一例の構成を示す図である。
【図１１】図１１は、実施形態に係る広告権利販売設定画面の例を示す図である。
【図１２】図１２は、実施形態に係る、業者名と業種とを関連付けたテーブルを示す図である。
【図１３】図１３は、実施形態に係る広告登録処理の一例を示すフローチャートである。
【図１４】図１４は、実施形態による広告権利の購入方法の例を示すフローチャートである。
【図１５】図１５は、実施形態に係る、端末装置に表示される広告権利検索画面の一例を示す図である。
【図１６】図１６は、実施形態に係る、携帯端末を用いて広告情報を表示させる例を説明するための図である。
【図１７】図１７は、実施形態に係る、携帯端末を用いて広告情報を表示させる例を説明するための図である。
【図１８】図１８は、ＭＦＰで印刷物の画像を読み取り、読み取った画像に関連する他の広告情報および広告情報を印刷出力する例を説明するための図である。
【図１９】図１９は、ＭＦＰで印刷物の画像を読み取り、読み取った画像に関連する他の広告情報および広告情報を印刷出力する例を説明するための図である。
【発明を実施するための形態】
【００１０】
以下に添付図面を参照して、電子広告システムおよび電子広告提供方法の実施形態を詳細に説明する。
【００１１】
（実施形態に適用可能な画像検索システム）
実施形態の説明に先んじて、理解を容易とするために、実施形態に適用可能な画像検索システムについて説明する。この画像検索システムは、撮像装置で撮像された撮像画像からオブジェクトを抽出し、抽出したオブジェクトと、データベースに予め格納されたオブジェクトとを比較して、データベースに格納されたオブジェクトのうち、撮像画像から抽出したオブジェクトに対して最も類似度の高いオブジェクトを特定する。そして、特定されたオブジェクトに予め関連付けられた商用サイトのリンク情報などを、ユーザに提示する。
【００１２】
図１は、実施形態に係る画像検索システムの一例の構成を示す図である。ネットワーク１０に対して、画像認識サーバ１１および端末装置２０が接続される。ネットワーク１０は、例えばインターネットであって、通信プロトコルとしてＴＣＰ／ＩＰ(Transmission  Control  Protocol/Internet  Protocol)が適用される。ネットワーク１０は、互いにネットワークで接続される複数のコンピュータを含み、外部からは、その内部が隠蔽されたブラックボックスとして入出力のみが示されるネットワーク・グループであるネットワーククラウドであってもよい。
【００１３】
ネットワーク１０に対して、さらに、複数の商用サイト３０Ａおよび３０Ｂが接続される。これら商用サイト３０Ａおよび３０Ｂは、ネットワーク１０を介してなされた注文に応じて商品の発送などを行うことができる。
【００１４】
端末装置２０は、無線または有線によってネットワーク１０との間で通信を行うことができる。端末装置２０は、ネットワーク１０を介して受信した命令に従った動作を行うことができると共に、表示装置と入力装置とを含むＵＩ（ユーザインタフェース）に対してネットワーク１０を介して受信した画像などの表示や、ＵＩに対してなされたユーザ操作に従いネットワーク１０に向けてデータを送信することができる。
【００１５】
また、端末装置２０は、撮像機能を有し、ＵＩに対する撮像指示操作に応じて被写体の撮像を行うことができるようにされている。端末装置２０は、撮像により得られた撮像画像をネットワーク１０に向けて送信することができる。
【００１６】
画像認識サーバ１１は、データベース（ＤＢ）１２が接続され、ネットワーク１０を介して受信した要求に従い、ＤＢ１２に対して検索処理を行うことができる。ここでは、ＤＢ１２には複数の画像データ５０Ａおよび５０Ｂを検索するための各索引データが、それぞれ連携情報と関連付けられて格納される。索引データは、画像データのバイナリを解析して得られたデータであって、画像データを、検索のための構造に変換したデータである。
【００１７】
なお、ＤＢ１２に対して、画像データを直接的に格納することも可能である。画像データのファイル名およびパスをＤＢ１２に格納してもよい。
【００１８】
画像認識サーバ１１は、ネットワーク１０を介して画像データを受信し、受信した当該画像データに基づきＤＢ１２を検索して、当該画像データに対応する連携情報を検索結果として取得する。サーバは、この検索結果として取得された連携情報を、画像データの送信元に返す。
【００１９】
なお、画像認識サーバ１１は、ＣＰＵ(Central  Processing  Unit)と、ＲＡＭ(Random  Access  Memory)と、ＲＯＭ(Read  Only  Memory)と、ハードディスクドライブなどのストレージ装置とを含む、一般的なコンピュータ装置により構成することができる。また、画像認識サーバ１１は、１台のコンピュータ装置で構成されるのに限らず、例えば複数のコンピュータ装置上で分散的に動作する構成としてもよい。
【００２０】
図２は、ＤＢ１２に格納される索引データの元となる画像データ５０Ａおよび５０Ｂの例を示す。ここで、画像データに含まれるオブジェクトについて定義する。オブジェクトとは、画像データによる画像内において主となる対象物の画像を指し、当該主となる対象物の背景画像や、画像内における当該主となる対象物の付随情報などとは区別される画像である。
【００２１】
一例として、画像データ５０Ａおよび５０Ｂは、それぞれカタログ雑誌の中身である内容ページと、当該カタログ雑誌の表紙である表紙ページであるものとする。図２（ａ）は、内容ページの画像１３０Ａによる画像データ５０Ａの例を示し、図２（ｂ）は、表紙ページの画像１３０Ｂによる画像データ５０Ｂの例を示す。
【００２２】
図２（ａ）は、画像１３０Ａの中央部に１のオブジェクト１３１が配置された例である。画像１３０Ａにおいて、オブジェクト１３１に対して、オブジェクト１３１を含む対象領域１３４が設定される。この図２（ａ）は、対象領域１３４のサイズに対するオブジェクト１３１のサイズの比率が小さい場合の例である。カタログ雑誌の場合、内容ページは、商品の紹介を行うのが目的であるため、商品を示す画像であるオブジェクト１３１は、内容ページに対して大きく表示される。
【００２３】
図２（ｂ）は、画像１３０Ｂに対して複数のオブジェクト１３２および１３３が配置された例である。ここでは、オブジェクト１３２は、図２（ａ）に示すオブジェクト１３１を縮小した画像であり、オブジェクト１３３は、他の画像である。画像１３０Ｂに対してさらに多くのオブジェクトを配置してもよい。この例では、表示ページは、カタログ雑誌の内容を要約して示すように、内容ページに含まれる各オブジェクト１３２および１３３が縮小されサムネイルとして表示されている。画像１３０Ｂにおいて、対象領域１３５は、オブジェクト１３２および１３３を含むと共に、表示ページ（画像データ１３０Ｂ）の全体に及ぶように設定されている。
【００２４】
なお、対象領域１３４および１３５は、オブジェクト１３１、ならびに、オブジェクト１３２および１３３をそれぞれ認識するための指標として用いられる。対象領域は、オブジェクトの全体を含み、且つ、オブジェクトを含む画像の全体より小さい任意のサイズにそれぞれ設定可能である。
【００２５】
連携情報について説明する。連携情報は、例えば、画像に含まれるオブジェクトに連携する機能を示す情報であって、より具体的には、当該オブジェクトの属性情報にアクセスするアクセス方法を含む情報である。したがって、連携情報は、実際には、画像に含まれるオブジェクトに対して関連付けられてＤＢ１２に格納されると考えることができる。
【００２６】
一例として、内容ページの画像１３０Ａに含まれるオブジェクト１３１において、連携情報は、オブジェクト１３１が示す商品を取り扱う例えば商用サイト３０ＡのＵＲＬ(Uniform  Resource  Locator)や、当該商品の購入設定を行う購入ページのＵＲＬである。これらに限らず、連携情報として、当該商品を取り扱う店舗の電話番号やメールアドレスを用いてもよい。さらに、当該商品の情報などを含むデータファイルをダウンロードするための情報を、連携情報として用いてもよい。なお、ＤＢ１２において、１のオブジェクトに対して複数の連携情報を関連付けることができる。
【００２７】
別の例として、表紙ページの画像１３０Ｂに含まれる各オブジェクト１３２および１３３に対して、連携情報として、例えば、当該表紙ページを含むカタログ雑誌そのものを紹介するネットワーク１０上のサイトなどのＵＲＬを用いることができる。
【００２８】
このような構成において、ユーザは、端末装置２０を用いて例えばカタログ雑誌のページを撮像し、撮像画像４０Ａや撮像画像４０Ｂを得る。この例では、撮像画像４０Ａおよび４０Ｂは、それぞれ、カタログ雑誌の内容ページおよび表紙ページを撮像した撮像画像であるものとする。ユーザは、例えば撮像画像４０Ａを、ネットワーク１０を介して画像認識サーバ１１に送信する。
【００２９】
撮像画像４０Ａは、画像認識サーバ１１に受信される。画像認識サーバ１１は、受信した撮像画像４０Ａの特徴点を検出し、特徴点に基づきオブジェクトを抽出する。さらに、画像認識サーバ１１は、検出した特徴点に基づき、撮像画像４０Ａに含まれるオブジェクトと、ＤＢ１２に格納される各索引によって検索される各オブジェクトとの類似度を算出する。この算出結果に基づきＤＢ１２に対して索引の検索を行う。そして、画像認識サーバ１１は、検索出力に基づきＤＢ１２から連携情報を取り出し、撮像画像４０Ａの送信元である端末装置２０に提示する。
【００３０】
ユーザは、画像認識サーバ１１から端末装置２０に対して提示された連携情報に基づき、例えば商用サイト３０Ａにアクセスして、撮像画像４０Ａに含まれるオブジェクトが示す商品を購入などすることができる。
【００３１】
ここで、例えば図２（ａ）に画像１３０Ａに含まれるオブジェクト１３１に酷似したオブジェクトを含む画像が、端末装置２０で撮像画像４０Ａとして撮像されたものとする。また、ＤＢ１２には、オブジェクト１３１を含む画像１３０Ａと、オブジェクト１３１を縮小したオブジェクト１３２を含む画像１３０Ｂとが格納されているものとする。
【００３２】
この場合、撮像画像４０Ａの特徴点の検出結果から算出した類似度に基づく検索の結果、画像１３０Ａではなく、画像１３０Ｂが検索されてしまう可能性がある。この場合、ユーザは、所望の連携情報を得ることができなくなってしまう。このような事態を防ぐために、対象領域（撮像範囲）とオブジェクトとのサイズの比率に基づき、ＤＢ１２に格納される画像の検索を行う。
【００３３】
図２を用いて、より具体的に説明する。図２（ａ）に例示される画像１３０Ａでは、オブジェクト１３１が画像１３０Ａに対して大きなスペースを占めるように配置され、オブジェクト１３１に対して、オブジェクト１３１のサイズよりやや大きめのサイズで、対象領域１３４が設定されている。一方、図２（ｂ）に例示される画像１３０Ｂでは、オブジェクト１３１が縮小されたオブジェクト１３２が配置されると共に、対象領域１３５が画像１３０Ｂの全面に対して、すなわち、オブジェクト１３２のサイズに対して十分大きなサイズで設定されている。
【００３４】
画像１３０Ａにおいて、対象領域１３４のサイズに対するオブジェクト１３１のサイズの第１の比率を、例えばそれぞれの面積に基づき求めた値が１／２であるとする。これに対して、画像１３０Ｂにおいて、対象領域１３５のサイズに対するオブジェクト１３２のサイズの第２の比率を面積で求めた値は、例えば１／１６となり、画像１３０Ａの場合と比べて大きく異なる。なお、サイズの比率は、面積に基づき求める方法に限られない。このような、サイズの比率を示す情報は、予め求め、索引に含めてＤＢ１２に格納することが考えられる。
【００３５】
さらに、端末装置２０から受信された撮像画像４０Ａについては、抽出されたオブジェクトのサイズと、撮像画像４０Ａ自体のサイズとの比率を求めることが考えられる。例えば撮像画像４０Ａが図２（ａ）に画像１３０Ａで示されるような画像とし、撮像画像４０Ａのサイズに対するオブジェクト（オブジェクト１３１とする）のサイズの第３の比率が例えば１／４であるとする。
【００３６】
この場合、第３の比率は、上述した第１の比率および第２の比率のうち、第１の比率により近い。したがって、画像認識サーバ１１は、撮像画像４０Ａに対する検索結果として画像１３０Ａに対応する索引を出力する。画像認識サーバ１１は、この画像１３０Ａに対応する索引に関連付けられた連携情報を、端末装置２０に対して提示する。このように、オブジェクトのサイズの画像サイズに対する比率に基づき索引の選択を行うことで、より的確に所望の索引を選択することができる。
【００３７】
図３は、このような、オブジェクトのサイズの比率に基づき画像を検索する処理を実現するためのＤＢ１２の一例の構成を示す。図３（ａ）は、ＤＢ１２に格納される各索引データを識別するための索引テーブル１２０の例を示す。各索引データは、図３（ａ）に例示されるように、ＩＤと、索引データのバイナリデータとが関連付けられてＤＢ１２に格納される。
【００３８】
また、ＩＤは、ＤＢ１２に格納される各索引データを識別可能であれば、形式は特に限定されない。ＤＢ１２に格納される各索引データがカタログ雑誌の各ページのオブジェクトを検索するためのものである場合、ＩＤとして当該オブジェクトが掲載されるページ番号を含む値を用いることができる。
【００３９】
図３（ｂ）は、画像のＩＤと対象領域とを関連付ける対象領域テーブル１２１の一例を示す。この例では、対象領域は、タグを用いてデータの意味や構造を定義して記述するマークアップ言語の一種であるＸＭＬ(Extensible  Markup  Language)を用いて記述される。後述するが、この対象領域の記述に対して、連携情報の記述も埋め込まれる。対象領域が記述されるＸＭＬコードは、この対象領域テーブル１２１のフィールドに直接的に格納してもよいし、当該ＸＭＬコードを別途ファイルに記述し、当該フィールドにはこのファイル名とパスを記述してもよい。
【００４０】
図４は、図３（ｂ）に示されるＸＭＬコード１４０の一例を示す。この図４に示されるＸＭＬコード１４０は、カタログ雑誌のある内容ページの対象領域を記述する例である。最も外側のタグ「<page>」および「</page>」に挟まれた部分により、ページが定義される。各部分１４１1、１４１2において、タグ「<hotspot>」および「</hotspot>」に挟まれた部分により、それぞれ１の対象領域が定義される。このように、１のページに対して複数の対象領域を定義することができる。
【００４１】
部分１４１1において、最初の行１４２は、タグ「<area>」および「</area>」に挟まれた部分により、対象領域のページ内での範囲が例えば左上隅の座標（ｘ１，ｙ１）および右下隅の座標（ｘ２，ｙ２）で定義される。
【００４２】
各部分１４３1、１４３2において、タグ「<link>」および「</link>」に挟まれた部分により、それぞれ１の連携情報が定義される。このように、１の対象領域に対して複数の連携情報を定義することができる。各部分１４３1において、タグ「<title>」および「</title>」に挟まれた部分により連携情報のタイトルが定義される。タグ「<type>」および「</type>」に挟まれた部分によりこの連携情報のタイプが定義される。また、この例では、連携情報として、タグ「<URI>」および「</URI>」に挟まれた部分により、ネットワーク１０上でのアドレス情報が定義されている。
【００４３】
このように、ＸＭＬコード１４０により、ページ内の対象領域および当該対象領域における連携情報を定義しているため、ページ内の当該対象領域に含まれるオブジェクトに関連付けられる連携情報による機能を実行することができる。
【００４４】
図５は、画像認識サーバ１１の動作の例を示すフローチャートである。先ず、端末装置２０で撮像されて得られた例えば撮像画像４０Ａが、ネットワーク１０を介して画像認識サーバ１１に対して送信される。ステップＳ１００で、画像認識サーバ１１は、この撮像画像４０Ａを受信する。次のステップＳ１０１で、画像認識サーバ１１は、受信された撮像画像４０Ａに対して画像解析を行い特徴点を検出してオブジェクトの抽出を行う。
【００４５】
次のステップＳ１０２で、画像認識サーバ１１は、撮像画像４０Ａのサイズに対するオブジェクトのサイズの比率を算出する。なお、ＤＢ１２に格納される各画像について、対象領域のサイズに対するオブジェクトのサイズの比率は、予め算出されているものとする。このＤＢ１２に格納される各画像の比率を示す情報は、上述したＸＭＬコード１４０に埋め込んでおくことができる。
【００４６】
次のステップＳ１０３で、画像認識サーバ１１は、撮像画像４０Ａから抽出されたオブジェクトと、ＤＢ１２に格納される各索引によって検索されるオブジェクととを比較する。より具体的には、画像認識サーバ１１は、撮像画像４０Ａに含まれるオブジェクトと、ＤＢ１２に格納される各索引によって検索されるオブジェクトとの各類似度を算出する。
【００４７】
次のステップＳ１０４で、画像認識サーバ１１は、ステップＳ１０３で算出した類似度に基づき、ＤＢ１２に格納された索引のうち、撮像画像４０Ａに含まれるオブジェクトと合致するオブジェクトが検索される索引が有るか否かを判定する。この例では、ＤＢ１２に含まれる索引に検索されるオブジェクトのうち、類似度が閾値以上であるオブジェクトを、撮像画像４０Ａに含まれるオブジェクトと合致するオブジェクトが検索される索引であると判定するものとする。
【００４８】
若し、ステップＳ１０４でオブジェクトが合致する索引が有ると判定した場合、画像認識サーバ１１は、処理をステップＳ１０５に移行させる。ステップＳ１０５で、画像認識サーバ１１は、ＤＢ１２に格納される索引のうち、オブジェクトが複数の索引で合致しているか否かを判定する。若し、１の索引のみでオブジェクトが合致していると判定した場合、画像認識サーバ１１は、当該１の索引を検索出力として、処理を後述するステップＳ１０７に移行させる。一方、複数の索引でオブジェクトが合致していると判定した場合、画像認識サーバ１１は、処理をステップＳ１０６に移行させる。
【００４９】
ステップＳ１０６で、画像認識サーバ１１は、当該複数の索引それぞれによって検索される複数のオブジェクトのサイズの、対象領域のサイズに対する比率を各々求める。この複数のオブジェクトに関する比率は、予め求めておきＤＢ１２に格納しておいてもよい。それと共に、画像認識サーバ１１は、撮像画像４０Ａについて、撮像画像４０Ａのサイズに対するオブジェクトのサイズの比率を求める。そして、当該複数のオブジェクトのそれぞれについて求めた比率のうち、撮像画像４０Ａについて求めた比率に最も近い比率を求め、求めた比率に対応するオブジェクトを検索するための索引を選択して検索出力とし、処理をステップＳ１０７に移行させる。
【００５０】
ステップＳ１０７で、画像認識サーバ１１は、検索出力の索引に対応付けられた連携情報をＤＢ１２から取り出す。そして、画像認識サーバ１１は、取り出した連携情報の、撮像画像４０Ａの送信元の端末装置２０に対する提示を行う。そして、図５のフローチャートによる一連の処理が終了される。
【００５１】
なお、上述したステップＳ１０４で合致する索引がないと判定した場合、処理がステップＳ１０８に移行され、画像認識サーバ１１により、合致する索引がＤＢ１２に格納されていない旨を示すメッセージが、端末装置２０に対して提示される。そして、図５のフローチャートによる一連の処理が終了される。
【００５２】
図６は、図５におけるステップＳ１０７の、索引の連携情報の提示処理の例を示すフローチャートである。画像認識サーバ１１は、先ずステップＳ２００で、ステップＳ１０５による検索出力の索引によって検索されるオブジェクトにおける、撮像画像４０Ａに対応する対象領域を特定する。次のステップＳ２０１で、画像認識サーバ１１は、ＤＢ１２を参照し、特定した対象領域に関連付けられた連携情報が有るか否かを判定する。若し、有ると判定した場合、画像認識サーバ１１は、処理をステップＳ２０２に移行させ、当該対象領域に複数の連携情報が関連付けられているか否かを判定する。
【００５３】
画像認識サーバ１１は、ステップＳ２０２で、当該対象領域に対して複数の連携情報が関連付けられていると判定した場合、処理をステップＳ２０３に移行させる。ステップＳ２０３で、画像認識サーバ１１は、この複数の連携情報による各機能を示す機能リストを作成し、機能リストから１の機能を選択するための選択画面を端末装置２０に対して提示する。例えば、特定された対象領域に対して、連携情報としてＵＲＬおよび電話番号が関連付けられている場合、ＵＲＬに示されるアドレスにアクセスする機能と、電話番号への電話機能とを選択するための選択画面を生成し、端末装置２０に対して提示する。そして、図６のフローチャートによる一連の処理が終了される。
【００５４】
一方、ステップＳ２０２で、画像認識サーバ１１は、当該対象領域に対して１の連携情報のみが関連付けられていると判定した場合は、処理をステップＳ２０４に移行させる。ステップＳ２０４では、この１の連携情報による機能を実行させるような画面を生成し、端末装置２０に対して提示する。そして、図６のフローチャートによる一連の処理が終了される。
【００５５】
なお、上述のステップＳ２０１において、ステップＳ２００で特定された対象領域に対して連携情報が関連付けられていないと判定した場合、処理をステップＳ２０５に移行させる。ステップＳ２０５で、画像認識サーバ１１は、予め定められた特定の画面を、端末装置２０に対して提示する。そして、図６のフローチャートによる一連の処理が終了される。
【００５６】
上述では、ステップＳ１０６において、画像認識サーバ１１側で、複数の索引から１の索引を選択しているが、これはこの例に限定されない。すなわち、複数の索引から１の索引を選択する処理を、ユーザが行うように促すことができる。
【００５７】
図７は、ステップＳ１０５の検索出力による複数の索引から１を選択する処理を、ユーザが行うように促す場合の一例の処理を示すフローチャートである。上述した図５のステップＳ１０５で、撮像画像４０Ａに含まれるオブジェクトに対して複数の索引で合致していると判定した場合、画像認識サーバ１１は、処理を図７に示すステップＳ１０６’に移行させる。
【００５８】
処理がステップＳ１０６’に移行されると、画像認識サーバ１１は、ステップＳ３００で、合致していると判定された複数の索引を示す情報をユーザに提示するための画面を生成し、端末装置２０に対して提示する。例えば、画像認識サーバ１１は、複数の索引それぞれによって検索される各オブジェクトの画像を表示させる画面を生成して、端末装置２０に対して提示することが考えられる。
【００５９】
画像認識サーバ１１は、端末装置２０からの、複数の索引（オブジェクト画像）から１の索引（オブジェクト画像）が選択された選択結果が受信されるのを待機する（ステップＳ３０１）。端末装置２０から、ステップＳ３００で提示した複数の索引から１の索引を選択した旨を受信すると、画像認識サーバ１１は、ステップＳ３０２で、索引が合致していると判定された複数のオブジェクト画像から、受信結果に応じて１を選択する。そして、選択されたオブジェクトが検索される索引に関連付けられた連携情報をＤＢ１２から取り出して、端末装置２０に対して提示する。
【００６０】
このように、複数の画像をユーザに提示することによっても、ユーザは、より的確に所望の画像を選択することができる。
【００６１】
（実施形態による電子広告システム）
次に、実施形態による電子広告システムについて説明する。実施形態による電子広告システムでは、上述した画像検索システムを用い、第１の広告主が紙媒体にて提供する広告上のオブジェクト（画像）を検索するための索引データを、第２の広告主から提供される広告情報と関連付けて登録しておく。
【００６２】
実施形態では、これにより、第１の広告主が紙媒体で提供する広告を撮像した撮像画像から、第２の広告主による広告情報が検索される。したがって、例えば大口の広告主である第１の広告主による紙媒体の広告に対して、小口の広告主である第２の広告主による広告情報を容易に関連付けることができる。
【００６３】
さらに、第１の広告主は、紙媒体で提供する広告上のオブジェクトを検索するための索引に、第２の広告主が広告情報を関連付ける広告権利を、第２の広告主に対して販売することで、収益を上げることが可能である。
【００６４】
図８は、実施形態に係る電子広告システムの構成を概略的に示す。図８において、電子広告システムは、広告権利売買仲介システム１と、コンテンツ管理サーバ４と、画像検索システム５とを有する。画像検索システム５は、図１〜図７を用いて説明した画像検索システムに対応する。また、コンテンツ管理サーバ４は、図１のＤＢ１２を含む。広告権利売買仲介システム１は、第１の広告主２による、広告に対して情報を関連付ける広告権利の販売と、第２の広告主３による当該広告権利の購入との仲介を行う。
【００６５】
第１の広告主２は、雑誌など紙媒体に対して広告を掲載し、当該広告上のオブジェクトを検索するための索引データに第三者が広告情報を関連付ける権利（以下、広告権利と呼ぶ）を、広告権利売買仲介システム１に対して登録する（ステップＳ１）。このとき、第１の広告主２は、当該広告権利を検索するための検索条件、当該広告権利の販売方法、当該広告権利の希望販売価格などを、パラメータとして広告権利売買仲介システム１に対して登録する。
【００６６】
第２の広告主３は、広告権利売買仲介システム１にアクセスして、第２の広告主３が提供する広告情報を関連付ける広告権利の検索を行う（ステップＳ２）。第２の広告主３は、所望の広告権利が検索された場合には、当該広告権利を購入することができる。購入決定を示す情報は、広告権利売買仲介システム１に送信される。
【００６７】
第２の広告主３は、広告権利を購入すると、広告権利を購入した索引に関連付ける広告情報を広告権利売買仲介システム１に仮登録する（ステップＳ３）。広告情報は、画像データやテキストデータであってもよいし、ＵＲＬ(Uniform  Resource  Locator)によるリンク情報などでもよい。広告権利売買仲介システム１は、仮登録された広告情報を一時的に保持する。
【００６８】
広告権利売買仲介システム１は、ステップＳ３で仮登録された広告情報を確認すると、当該広告情報をコンテンツ管理サーバ４に送信し、当該広告情報を本登録する（ステップＳ４）。このとき、広告権利売買仲介システム１は、当該広告情報を第１の広告主２に提示して、当該広告情報の索引データに対する関連付けを承認するか否かを問い合わせることができる（ステップＳ５）。承認結果が「否」を示している場合は、その旨を第２の広告主３に通知し、広告情報の本登録を行わない。
【００６９】
広告権利売買仲介システム１は、広告情報を本登録すると、その旨を第２の広告主３に通知する（ステップＳ６）。
【００７０】
このように電子広告システムを構成することで、例えば第１の広告主２および第２の広告主３と異なるユーザが、第１の広告主２が紙媒体で提供する広告を撮像した撮像画像を画像検索システム５に送信する。画像検索システム５は、図１〜図７を用いて説明したように、当該撮像画像からオブジェクトを抽出し、抽出したオブジェクトに対応する索引をコンテンツ管理サーバ４から検索する（ステップＳ７）。画像検索システム５は、索引が検索されると、検索された索引に関連付けられている広告情報をコンテンツ管理サーバ４から取得し（ステップＳ８）、ユーザに送信する。ユーザは、第１の広告主２による紙媒体の広告に基づき、第２の広告主３による広告情報を取得することができる。
【００７１】
図９は、実施形態に係る広告権利売買仲介システム１の一例の構成をより詳細に示す。広告権利売買仲介システム１は、売買管理部２００と、広告権利管理部２１０と、売買情報データベース（ＤＢ）２２０と、広告権利ＤＢ２２１と、コンテンツＤＢ２２２と、通信部２２３とを有する。また、広告権利売買仲介システム１は、ネットワーク２３０を介してコンテンツ管理サーバ４および画像検索システム５と接続されると共に、課金システム２３１と接続される。
【００７２】
通信部２２３は、第１の広告主２や第２の広告主３が用いる端末装置との通信を行う。通信部２２３は、第１の広告主２や第２の広告主３の端末装置からの通信要求を受けると、図示されない認証サーバと通信を行なって、当該端末装置の認証処理を行う。
【００７３】
例えば、通信部２２３は、端末装置と広告権利売買仲介システム１との間で通信を行う際に、端末装置に対してユーザ（第１の広告主２、第２の広告主３）を識別するためのユーザ識別情報の入力を要求する。通信部２２３は、端末装置から送信されたユーザ識別情報により認証サーバとの間で認証処理を行い、認証が成功した場合に、当該ユーザ識別情報が送信された端末装置から広告権利売買仲介システム１へのアクセスを許可する。
【００７４】
売買管理部２００は、購入管理部２０１と、販売管理部２０２とを有する。売買管理部２００は、売買される広告権利に関する情報を売買情報ＤＢ２２０に格納して管理する。販売管理部２０２は、広告権利を販売する第１の広告主２を示す情報と、第１の広告主２が販売する広告権利に関連する情報とを管理する。広告権利に関連する情報は、例えば、広告権利に対応する索引データを示す情報、広告権利の希望販売価格、広告権利の販売方法（競売、オファー）、広告権利の販売対象となる業種や組織体を示す情報を含む。
【００７５】
購入管理部２０１は、広告権利の購入を希望する第２の広告主３の情報と、第２の広告主３が購入した広告権利に関する情報とを管理する。例えば、第２の広告主３は、購入管理部２０１に対して自らの情報を予め登録しておく。広告権利の購入は、購入管理部２０１に登録された第２の広告主３のみが実行可能とすることができる。
【００７６】
広告権利管理部２１０は、広告権利生成部２１１と、価値判定部２１２と、ログ管理部２１３とを有する。広告権利生成部２１１は、第１の広告主２の紙媒体による広告上のオブジェクトを検索するための索引データを画像検索システム５から参照し、参照した索引データに広告情報を関連付けるための広告権利を示す情報を生成する。この情報は、例えば、当該索引データの所在を示す情報や、当該索引データに対する広告情報の関連付けを許可するか否かを示す情報を含む。生成された広告権利を示す情報は、広告権利ＤＢ２２１に格納される。
【００７７】
コンテンツＤＢ２２２は、第１の広告主２の紙媒体による広告上のオブジェクトを検索するための索引データに関連付けられる、第２の広告主３による広告情報が管理される。上述したように、これら他の広告情報および広告情報は、例えばＵＲＬである。ログ管理部２１３は、他の広告情報および広告情報が示すＵＲＬに対するアクセスに関するログ情報を取得し管理する。価値判定部２１２は、ログ管理部２１３に管理されるログ情報に基づき、広告情報の価値を判定する。
【００７８】
課金システム２３１は、第２の広告主３が、第１の広告主２の紙媒体による広告上のオブジェクトを検索するための索引データに広告情報を関連付ける広告権利を購入した際の、課金処理を行う。また、課金システム２３１は、ログ管理部２１３に管理されるログ情報に基づき、広告情報が示すＵＲＬのアクセス数に応じて、第２の広告主３に対して課金処理を行うこともできる。さらに、課金システム２３１は、ログ情報に基づき、他の広告情報が示すＵＲＬや、広告情報が示すＵＲＬへのアクセス数に応じて、第１の広告主２や第２の広告主３に対して課金処理を行うこともできる。
【００７９】
次に、実施形態に係る、広告権利を登録する処理について説明する。図１０は、第１の広告主２が実施形態に係る電子広告システムに広告権利を登録する際に用いる登録画面の一例の構成を示す。図１０に示される広告登録画面３００は、例えば広告権利売買仲介システム１の広告権利管理部２１０内の広告権利生成部２１１により生成される。例えば、広告権利生成部２１１は、ＨＴＭＬ(HyperText  Markup  Language)などを用いて広告登録画面３００を端末装置に表示させるための表示制御情報を生成する。例えば、第１の広告主２は、上述したように、端末装置で通信部２２３と通信して認証処理を行うことで、この表示制御情報にアクセスできるようになる。
【００８０】
図１０において、広告登録画面３００は、コンテンツ表示部３０１と、リンク設定ボタン３２０と、コンテンツ設定ボタン３２１と、広告権利販売設定ボタン３２２と、決定ボタン３２３とが配置される。また、コンテンツ表示部３０１は、コンテンツ表示部３１０Ａおよび３１０Ｂと、広告情報表示部３１１と、他の広告情報表示部３１２とが配置されて、端末装置上に表示される。
【００８１】
コンテンツ表示部３１０Ａおよび３１０Ｂは、第１の広告主２によるコンテンツすなわち紙媒体により広告されるオブジェクトが表示される。広告情報表示部３１１は、コンテンツ表示部３１０Ａおよび３１０Ｂに表示されるオブジェクトを検索するための索引データに関連付けられる、第２の広告主３により登録される広告情報が表示される。また、他の広告情報表示部３１２は、当該索引データに関連付けられる、第１の広告主２による他の広告情報が表示される。このように、実施形態によれば、第２の広告主３の広告情報の他に、第１の広告主２の他の広告情報を、当該索引データに関連付けることができる。
【００８２】
リンク設定ボタン３２０は、他の広告情報表示部３１２に表示される他の広告情報を入力および編集するためのボタンである。このリンク設定ボタン３２０を操作することで、他の広告情報を入力および編集するための編集画面（図示しない）が表示される。他の広告情報は、コンテンツ表示部３１０Ａおよび３１０Ｂに表示されるコンテンツ＃１およびコンテンツ＃２を検索するための検索データに関連付けられて、コンテンツＤＢ２２２に格納される。
【００８３】
コンテンツ設定ボタン３２１は、第１の広告主２により広告されるオブジェクトを設定するボタンである。一例として、このコンテンツ設定ボタン３２１を操作すると、端末装置や端末装置にネットワークなどで接続される環境におけるファイル表示画面が表示される（図示しない）。ファイル表示画面は、フォルダを用いた階層構造で表示させてもよい。第１の広告主２は、このファイル表示画面から所望のファイル（画像データ）を選択することで、選択されたファイルが端末装置から広告権利売買仲介システム１に送信され、ファイルのアップロードがなされる。
【００８４】
ファイルが正常にアップロードされると、コンテンツ表示部３１０Ａ、３１０Ｂの表示が更新され、アップロードされたファイルによる画像（オブジェクト）がコンテンツ表示部３１０Ａ、３１０Ｂに表示される。
【００８５】
広告権利販売設定ボタン３２２は、コンテンツ表示部３１０Ａおよび３１０Ｂに表示されるオブジェクトに係る広告権利を販売する際の条件などのパラメータを設定するためのボタンである。図１１は、広告権利販売設定ボタン３２２が操作された際に表示される、実施形態に係る広告権利販売設定画面の例を示す。図１１において、広告権利販売設定画面３３０は、販売方法選択部３３１と、業種設定部３３２と、業者名設定部３３３と、決定ボタン３３４とが配置されて、端末装置上に表示される。
【００８６】
販売方法選択部３３１は、広告権利の販売方法を選択する。図１１の例では、競売とオファーとが互いに排他的に選択可能になっている。販売方法選択部３３１は、デフォルトの状態で競売およびオファーのうち一方が予め設定された状態となっている。オファーを選択した場合、希望販売価格を入力するための入力画面がさらに表示される（図示しない）。この入力画面は、広告権利販売設定画面３３０に追加して表示させてもよい。
【００８７】
業種設定部３３２は、広告権利の販売対象となる第２の広告主３として希望する業種を設定する。業種は、洋服、鞄、家庭電化製品、不動産など、商品の大きな分類に基づき設定することが考えられる。これに限らず、例えば家庭電化製品であれば、ＡＶ(Audio/Visual)機器、白物家電、健康器具など、細分化した分類に基づき設定してもよい。業種の情報は、例えば予め設定しておき、第１の広告主２が業種設定部３３２の右端に配置されるボタンを操作することで、一覧が表示されるように構成することができる。また、図１１の例では、１の広告権利に対して２の業種を設定可能となっている。このように、広告権利の販売対象の業種を設定可能とすることで、広告情報として、第１の広告主２が紙媒体にて広告する商品と関連する情報を設定することができ、広告の効果が向上することが期待される。
【００８８】
業者名設定部３３３は、第２の広告主３の業者名を具体的に設定する。第２の広告主３の業者名は、１の広告権利に対して複数を設定可能となっている。業種の情報は、例えば予め設定しておき、第１の広告主２が業者名設定部３３３の右端に配置されるボタンを操作することで、一覧が表示されるように構成することができる。
【００８９】
また、図１２に例示されるように、業者名と業種とを関連付けたテーブルを予め作成しておくようにしてもよい。このテーブルを用いることで、業者名を選択すると自動的に業種が決定され、業種設定部３３２における設定操作を省略することができる。このテーブルには、その他情報として、各情報に対してコメントなどを登録してもよい。
【００９０】
決定ボタン３３４は、操作することで、上述した販売方法選択部３３１、業種設定部３３２および業者名設定部３３３で設定された内容を決定し、決定された設定内容を広告権利売買仲介システム１に送信する。設定内容は、広告権利売買仲介システム１に受信され、売買管理部２００に渡され、売買情報ＤＢ２２０に格納される。
【００９１】
図１３は、上述の広告登録画面３００および広告権利販売設定画面３３０を用いてなされる、実施形態に係る広告登録処理の一例を示すフローチャートである。この図１３のフローチャートによる処理の実行に先立って、第１の広告主２は、端末装置から通信部２２３と通信し、認証処理を行う。認証が成功すると、端末装置に対する所定の操作により、端末装置に対して広告登録画面３００が表示される。
【００９２】
先ず、ステップＳ１０で、第１の広告主２によりコンテンツ設定ボタン３２１が操作され、第１の広告主２が紙媒体で提供する広告に用いるオブジェクト（画像データ）の、広告権利生成部２１１に対する登録処理がなされる。例えばファイル表示画面から選択されたオブジェクトは、端末装置から広告権利売買仲介システム１に対して送信され、広告権利生成部２１１に供給される。広告権利生成部２１１は、登録されたオブジェクトに対して識別情報を付与する。
【００９３】
なお、このオブジェクトを検索するための索引データは、画像検索システム５のＤＢ１２に対して、予め、若しくは、ステップＳ１０にて登録されるものとする。
【００９４】
次のステップＳ１１で、第１の広告主２により広告権利販売設定ボタン３２２が操作され、図１１に例示した広告権利販売設定画面３３０が端末装置に表示される。第１の広告主２は、この広告権利販売設定画面３３０の表示に従い、広告権利を販売するための各パラメータを設定する。決定ボタン３３４が操作されることで、設定された設定内容が広告権利売買仲介システム１に送信されて売買管理部２００に渡されて、第１の広告主２を識別する識別情報と、登録されたオブジェクトを識別する識別情報とに関連付けられて売買情報ＤＢ２２０に格納され、売買情報として登録される（ステップＳ１２）。
【００９５】
ステップＳ１２で売買情報が登録されると、次のステップＳ１３で、広告権利生成部２１１は、第１の広告主２の紙媒体による広告上のオブジェクトを検索するための索引データを画像検索システム５から参照し、参照した索引データに広告情報を関連付けるための広告権利を示す情報を生成する。広告権利を示す情報は、例えば、上述した、第１の広告主２を識別する識別情報と、登録されたオブジェクトを識別する識別情報と、当該オブジェクトを検索するための索引データに対して第２の広告主３による広告情報を関連付けることを了承することを示す情報とを含む。広告権利生成部２１１は、次のステップＳ１４で、ステップＳ１３で生成された広告権利を示す情報を広告権利ＤＢ２２１に格納し、広告権利を登録する。
【００９６】
次に、第２の広告主３による、広告権利の購入方法について説明する。図１４は、実施形態による広告権利の購入方法の例を示すフローチャートである。この図１４のフローチャートによる処理の実行に先立って、第２の広告主３は、端末装置から通信部２２３と通信し、認証処理を行う。認証が成功すると、端末装置に対する所定の操作により、端末装置に対して広告権利検索画面が表示される。
【００９７】
図１５は、実施形態に係る、端末装置に表示される広告権利検索画面３４０の一例を示す。広告権利検索画面３４０は、業者名を入力する業者名入力部３４１と、業種を入力する業種入力部３４２と、検索開始を指示する検索ボタン３４３とが配置される。第２の広告主３は、業者名入力部３４１および業種入力部３４２のうち少なくとも一方への入力を行った後に、検索ボタン３４３を操作する。なお、業者名入力部３４１および業種入力部３４２は、予め登録された業者名および業種から選択することができるようにしてもよい。
【００９８】
検索ボタン３４３が操作されると、業者名入力部３４１および業種入力部３４２に入力された情報と、検索開始の指示とが端末装置から広告権利売買仲介システム１に送信され、通信部２２３に受信される。通信部２２３は、受信した業者名および業種、ならびに、検索開始指示を売買管理部２００に渡す。売買管理部２００は、検索開始指示に従い、業者名および業種により売買情報ＤＢ２２０から広告権利を検索する（ステップＳ２０）。
【００９９】
売買管理部２００は、検索結果に応じて、例えば図１０に示した広告登録画面３００におけるコンテンツ表示部３０１の表示内容と、購入決定を指示するボタンとを伴った購入決定画面を表示するための表示制御情報を生成する。この表示制御情報は、通信部２２３から端末装置に送信される。端末装置は、受信した表示制御信号に従い購入決定画面を表示する。
【０１００】
購入決定画面において、図１０の広告情報表示部３１１に相当する部分は、第２の広告主３による広告情報を入力することができるようになっている。例えば、第２の広告主３は、この広告情報表示部３１１に相当する部分に対して、広告情報のＵＲＬを入力することができる。このとき、広告情報のＵＲＬが画像データの所在を示している場合には、広告情報表示部３１１に相当する部分に、当該画像データを表示させることができる。
【０１０１】
次のステップＳ２１で、売買管理部２００は、端末装置から購入決定指示が送信されるのを待機する。売買管理部２００は、端末装置からの購入決定指示を受け取ると、処理をステップＳ２２に移行させ、広告権利の仮登録を行う。広告権利の仮登録は、例えば、売買管理部２００は、第２の広告主３を識別する識別情報と、ステップＳ２０で検索された業者名および業者を示す情報と、広告情報のＵＲＬとを含む仮登録権利情報とを、広告権利管理部２１０に渡す。広告権利管理部２１０は、渡された仮登録権利情報を、広告権利ＤＢ２２１に一時的に保持する。
【０１０２】
なお、販売方法が競売の場合には、広告権利の検索結果として販売価格がさらに表示され、販売価格が第２の広告主３が納得する価格になるまで、ステップＳ２０およびステップＳ２１の処理が繰り返されることになる。
【０１０３】
売買管理部２００は、ステップＳ２２で広告権利の仮登録が完了すると、処理を次のステップＳ２３に移行させる。ステップＳ２３で、売買管理部２００は、第１の広告主２に対して、広告権利の購入希望があった旨が通知される。この通知は、例えば電子メールを用いることができる。第１の広告主２は、この通知を受け取ると、仮登録された広告情報を確認する。一例として、通知を電子メールを用いて行う場合、当該電子メールに対して、広告情報表示部３１１に広告情報が表示された広告登録画面３００へのリンク情報を埋め込んでおくことが考えられる。このとき、広告情報表示部３１１に対して、広告権利の購入を希望した第２の広告主３の情報（識別情報、業者名および業種など）を表示させると、より好ましい。
【０１０４】
第１の広告主２は、この広告情報表示部３１１に広告情報が表示された広告登録画面３００を確認して、広告権利の購入希望を了承するか否かを、広告権利売買仲介システム１に対して通知する（ステップＳ２４）。広告権利売買仲介システム１は、若し、了承しない旨の通知を受け取った場合には、図１４のフローチャートによる一連の処理を終了する。このとき、広告権利の購入を希望した第２の広告主３に対して、購入希望が了承されなかった旨を通知することが好ましい。
【０１０５】
一方、広告権利売買仲介システム１は、ステップＳ２４で広告権利の購入希望を了承した旨の通知を受け取った場合には、処理をステップＳ２５に移行させる。ステップＳ２５で、広告権利売買仲介システム１は、ステップＳ２２で仮登録された広告権利を、本登録する。ここでは、広告権利管理部２１０が、広告情報のＵＲＬを、第１の広告主２によるオブジェクトを検索するための索引データに関連付けてコンテンツＤＢ２２２に格納することで、広告権利の本登録が行われる。
【０１０６】
次のステップＳ２６で、売買情報ＤＢ２２０に対する情報の登録がなされる。すなわち、広告権利売買仲介システム１において、広告権利管理部２１０は、ステップＳ２２で広告権利ＤＢ２２１に一時的に保持した仮登録権利情報の売買情報を売買管理部２００に渡す。売買管理部２００は、渡された仮登録権利情報を、売買情報ＤＢ２２０に格納する。
【０１０７】
次のステップＳ２７で、広告権利売買仲介システム１が第２の広告主３に対して課金処理を設定し、図１４のフローチャートによる一連の処理が終了する。
【０１０８】
次に、実施形態の適用例について説明する。図１６および図１７は、携帯端末を用いて広告情報を表示させる例を示す。図１６に示されるように、撮像機能および通信機能を有する携帯端末４００を用いて、第１の広告主２による、紙媒体の広告の画像４０１を撮像する（図１６（ａ）参照）。撮像された画像の画像データは、画像検索システム５に送信される。画像検索システム５は、上述したようにして、画像データからオブジェクトを抽出して対応する索引データを検索する。検索された索引データは、図１７に経路２４０で示されるように、広告権利ＤＢ２２１およびコンテンツＤＢ２２２に渡される。広告権利ＤＢ２２１に送られた索引データは、例えばログ情報として保持される。
【０１０９】
広告権利管理部２１０は、コンテンツＤＢ２２２から、当該索引データに関連付けられた他の広告情報および広告情報を取得する。広告権利管理部２１０は、取得した他の広告情報および広告情報を画像検索システム５に返す。画像検索システム５は、これら他の広告情報および広告情報を携帯端末４００に送信する。これにより、携帯端末４００に、第１の広告主２による他の広告情報と、第２の広告主３による広告情報とが表示される。
【０１１０】
図１６の例では、第１の広告主２によるオブジェクトを検索するための索引データに対して、複数の広告情報４０２が関連付けられている（図１６（ｂ）参照）。ユーザは、携帯端末４００からこれら複数の広告情報４０２に対して適宜選択して操作することで、複数の広告情報４０２に関連付けられた情報４０３Ａ、４０３Ｂおよび４０３Ｃを見ることができる（図１６（ｃ）参照）。
【０１１１】
実施形態の別の適用例について説明する。図１８および図１９は、ＭＦＰ(Multi  Function  Printer)で印刷物の画像を読み取り、読み取った画像に関連する他の広告情報および広告情報を印刷出力する例である。図１８において、ＭＦＰ２５０は、印刷機能、スキャナ機能、ＦＡＸ機能などが１の筐体で実行可能とされたものである。また、ＭＦＰ２５０は、通信機能およびブラウザ機能を有し、ＵＲＬを受信した場合、受信したＵＲＬにアクセスして、そのＵＲＬにより表示される画像を印刷することができるようになっている。
【０１１２】
ユーザは、図１８（ａ）に示される、第１の広告主２によるオブジェクトが配置された印刷物４１０（例えば雑誌の１ページ）を、ＭＦＰ２５０のスキャナ機能を利用して読み取る（図１８（ｂ）参照）。読み取られた画像のスキャン画像データは、図１９に示されるように、画像検索システム５に送信される。
【０１１３】
画像検索システム５は、上述したようにして、画像データからオブジェクトを抽出して対応する索引データを検索する。検索された索引データは、図１９に経路２４０で示されるように、広告権利ＤＢ２２１およびコンテンツＤＢ２２２に渡される。広告権利ＤＢ２２１に送られた索引データは、例えばログ情報として保持される。
【０１１４】
広告権利管理部２１０は、コンテンツＤＢ２２２から、当該索引データに関連付けられた他の広告情報および広告情報を取得する。広告権利管理部２１０は、取得した他の広告情報および広告情報を画像検索システム５に返す。画像検索システム５は、これら他の広告情報および広告情報をＭＦＰ２５０に送信する。ＭＦＰ２５０は、これらの他の広告情報および広告情報に示されるＵＲＬにアクセスし、当該ＵＲＬにより表示される画像を、広告画像４１０’および４１１として印刷出力する（図１８（ｃ）参照）。なお、ＭＦＰ２５０において、他の広告情報および広告情報に示されるＵＲＬの画像のうち何れを選択するかをユーザに指定させることも可能である。
【０１１５】
なお、上述の実施形態は、本発明の好適な実施の例ではあるがこれに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変形による実施が可能である。
【符号の説明】
【０１１６】
１  広告権利売買仲介システム
２  第１の広告主
３  第２の広告主
４  コンテンツ管理サーバ
５  画像検索システム
１１  画像認識サーバ
１２  ＤＢ
２００  売買管理部
２０１  購入管理部
２０２  販売管理部
２１０  広告権利管理部
２１１  広告権利生成部
２２０  売買情報ＤＢ
２２１  広告権利ＤＢ
２２２  コンテンツＤＢ
２２３  通信部
３００  広告登録画面
３３０  広告権利販売設定画面
【先行技術文献】
【特許文献】
【０１１７】
【特許文献１】特開２００３−１０８８６２号公報
【図１】
2014182405.tif 000003
【図２】
2014182405.tif 000004
【図３】
2014182405.tif 000005
【図４】
2014182405.tif 000006
【図５】
2014182405.tif 000007
【図６】
2014182405.tif 000008
【図７】
2014182405.tif 000009
【図８】
2014182405.tif 000010
【図９】
2014182405.tif 000011
【図１０】
2014182405.tif 000012
【図１１】
2014182405.tif 000013
【図１２】
2014182405.tif 000014
【図１３】
2014182405.tif 000015
【図１４】
2014182405.tif 000016
【図１５】
2014182405.tif 000017
【図１６】
2014182405.tif 000018
【図１７】
2014182405.tif 000019
【図１８】
2014182405.tif 000020
【図１９】
2014182405.tif 000021