(57)【要約】【課題】ネットワーク経由で落とし物の情報を集中管理可能なシステムにおいて、「落とし物画像の撮影」という最小限の労力のみによって、「落とし物情報の入力」を自動的または半自動的に行う。【解決手段】  本発明によると、落とし物を撮影した画像から自動的にタグづけをし、落とし物の画像を当該タグをキーに検索・管理できるデータベースを構築できる。よって、手作業によりいちいち落とし物ごとにラベルづけをするような手間が省ける。また、そのタグをキーに落とし主が自分の落とした落とし物をデータベースから検索できる。さらに、落とし主の指定した検索条件と合致する落とし物情報が検索されても、それをそのまま出力するのではなく、部分画像とダミー画像の中から部分画像を選ばせるという認証を経て落とし物情報を提示するため、落とし主になりすました者が不正に落とし物情報を閲覧することを防げる。【選択図】  図１
2010204733.tif 000002
【特許請求の範囲】
【請求項１】
落とし物を被写体として撮像した落とし物画像と前記落とし物の拾得状況に関する情報と前記落とし物の拾い主に関する情報とを入力する入力部と、
前記入力部の入力した落とし物画像から画像に関する特徴量を抽出する特徴量抽出部と、
前記特徴量抽出部により抽出された特徴量に基づいて、前記落とし物画像に対応するタグを付与するアノテーション部と、
前記画像入力部の入力した落とし物画像から画像的特徴部分を抽出することで部分画像を作成する部分画像作成部と、
前記落とし物の拾得状況に関する情報と前記落とし物の拾い主に関する情報と前記落とし物画像と前記タグと前記部分画像とを対応づけた落とし物情報をデータベースに登録する登録部と、
を備える落とし物情報管理装置。
【請求項２】
前記落とし物情報の検索条件を入力する検索条件入力部と、
前記検索条件入力部から入力された検索条件に合致するタグが付与された落とし物画像を含む落とし物情報を前記データベースから検索する検索部と、
前記検索部が検索した落とし物情報に対応する検索結果情報を出力する出力部と、
を備える請求項１に記載の落とし物情報管理装置。
【請求項３】
前記検索結果情報は前記落とし物情報から前記落とし物画像および／または前記落とし物の拾い主に関する情報を除いた情報を含む請求項２に記載の落とし物情報管理装置。
【請求項４】
前記出力部に出力された検索結果情報の中から、所望の検索結果情報の選択を受け付ける検索結果情報選択部を備え、
前記出力部は、前記検索結果情報選択部から選択された検索結果情報に対応する落とし物情報に含まれる部分画像と、所定のダミー画像とを混在させて出力する請求項２または３に記載の落とし物情報管理装置。
【請求項５】
前記出力部の出力した部分画像およびダミー画像の中から、所望の画像の選択を受け付ける画像選択部と、
前記画像選択部から選択された画像が部分画像か否かに応じて、画像の選択者が真正な落とし物の落とし主であるか否かを認証する認証部と、
を備える請求項４に記載の落とし物情報管理装置。
【請求項６】
前記出力部は、前記認証部が、前記画像の選択者が真正な落とし物の落とし主であると認証したことに応じ、前記選択された検索結果情報に対応する落とし物情報に含まれる拾い主に関する情報を出力する請求項５に記載の落とし物情報管理装置。
【請求項７】
前記ダミー画像の特徴量と前記部分画像との特徴量の差は所定の閾値を超える請求項４〜６のいずれかに記載の落とし物情報管理装置。
【請求項８】
前記特徴量抽出部の抽出する特徴量は、被写体の形状または色に関する情報を表現する請求項１〜７のいずれかに記載の落とし物情報管理装置。
【請求項９】
前記登録部が登録する落とし物情報の落とし物の拾得状況に関する情報は、前記落とし物画像の撮影日時、撮影場所その他の付帯情報を含む請求項１〜８のいずれかに記載の落とし物情報管理装置。
【請求項１０】
前記落とし物管理情報の登録時または前記落とし物の拾得状況に関する情報に含まれる前記落とし物の拾得日時を起点にした経過時間を算出する算出部と、
前記算出部が算出した経過時間が所定の時間を超えた場合、所定の相手方に所定の情報を通知する通知部と、
を備える請求項１〜９のいずれかに記載の落とし物情報管理装置。
【請求項１１】
コンピュータが、
落とし物を被写体として撮像した落とし物画像と前記落とし物の拾得状況に関する情報と前記落とし物の拾い主に関する情報とを入力するステップと、
前記入力した落とし物画像から画像に関する特徴量を抽出するステップと、
前記特徴量抽出部により抽出された特徴量に基づいて、前記落とし物画像に対応するタグを付与するステップと、
前記入力した落とし物画像から画像的特徴部分を抽出することで部分画像を作成するステップと、
前記落とし物の拾得状況に関する情報と前記落とし物の拾い主に関する情報と前記落とし物画像と前記タグと前記部分画像とを対応づけた落とし物情報をデータベースに登録するステップと、
を実行する落とし物情報管理方法。
【請求項１２】
請求項１１に記載の落とし物情報管理方法をコンピュータに実行させるためのプログラム。
【請求項１３】
請求項１〜１０のいずれかに記載の落とし物情報管理装置の入力部に対し、前記落とし物画像、前記落とし物の拾得状況に関する情報および前記落とし物の拾い主に関する情報を入力する第１の端末と、
前記落とし物情報管理装置の検索条件入力部に対して前記検索条件を入力するとともに、前記落とし物情報管理装置の出力部から出力された情報を再生する第２の端末と、
を備える落とし物情報管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、遺失物（いわゆる落とし物）の情報を管理する技術に関する。
【背景技術】
【０００２】
落とし物の情報を効率的に管理するためのシステムが従来開発されている。
【０００３】
特許文献１では、拾得者が第１の端末装置を用いて拾得物情報管理サーバに拾得物情報を送信すると、拾得物届出処理手段により、拾得物情報の一部を非公開の特定情報として、拾得物情報が拾得物情報データベースに登録される。その後、遺失者が第２の端末装置を用いて拾得物情報管理サーバに拾得物情報の参照要求を送信すると、情報公開手段により、拾得物情報データベースに登録されている拾得物情報が、特定情報を除いて第２の端末装置に送信される。そして、遺失者が第２の端末装置を用いて拾得物情報管理サーバに遺失物情報を送信すると、整合性判定手段により、遺失物情報と拾得物情報データベース内の特定情報との整合性が判定され、第２の端末装置に対して判定結果が返される。
【０００４】
特許文献２では、遺失物情報を取得する遺失者端末と、拾得物情報を取得する拾得者端末と、遺失物・拾得物管理装置とが、通信回線により接続され、遺失物・拾得物管理装置は、遺失者端末の使用者を認証する認証処理部と、拾得物情報を格納する記憶手段と、遺失物情報に基づいて、拾得物情報を照合し、照合結果の拾得物情報の一覧表示画面を作成する照合部と、拾得物を選択する情報に対応する拾得物情報に含まれる特定情報に対応する質問文を表示する表示画面を作成し、質問文に対する回答情報を受信し、この回答情報と特定情報とを照合する受渡妥当性チェック部とから構成される遺失物・拾得物管理システムを開示している。
【０００５】
特許文献３、４は、画像にＲＯＩ（Region of Interest）を設定する技術の一例を示す。特許文献３は画像の動き情報等からＲＯＩ領域を決定する技術を開示している。特許文献４は、カメラの操作手段にてＲＯＩを設定する技術を開示している。
【０００６】
特許文献５は、画像の解析結果からアノテーション情報を生成する技術の一例を開示している。ここでは、画像ファイルに対応する情報であって、該画像ファイルとは別体で用意されるアノテーション情報を生成するためのアノテーション情報生成装置であって、画像ファイルを解析して、該画像ファイルの表す画像の特徴を抽出する画像解析部と、少なくとも抽出した特徴に基づいて、該特徴に対応したラベルを導き出すラベル導出部と、導き出したラベルを含むアノテーション情報を生成するアノテーション情報生成部と、を備えるアノテーション情報生成装置を開示している。
【０００７】
特許文献６は、物体認識技術の一例であり、モデル特徴量抽出部は、モデル画像のエッジ上の点であって、モデル画像の特徴量であるモデル画像特徴量を抽出するための点である特徴点の近傍の、１つの特徴点に対して複数の特徴量抽出領域のそれぞれにおいて、モデル画像特徴量を抽出し、マッチング部は、特徴点に対応する入力画像のエッジ上の点における入力画像の特徴量である入力画像特徴量と、特徴点における複数のモデル画像特徴量のそれぞれとのマッチングを行う。
【０００８】
特許文献７は、画像内に設定されたブロックの特徴量算出の一例を示す。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００４−３０４８５号公報
【特許文献２】特開２００６−３１３３８号公報
【特許文献３】特開２００７−３２９７８８号公報
【特許文献４】特開２００１−２３０９４７号公報
【特許文献５】特開２００８−３３９５４号公報
【特許文献６】特開２００８−２４３１７５号公報
【特許文献７】特開２００９−２７６６４号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
特許文献１や２によると、ネットワークに接続されたコンピュータ端末を利用して、拾い主が落とし物情報を登録管理し、一方で「なりすまし」を防ぎながら一般の落とし主に落とし物情報を検索させることが可能になる。
【００１１】
しかし、特許文献１や２では、落とし物情報全般の入力、とりわけ、なりすまし防止に必要な、落とし主を確実に識別するための情報の入力をどのように行うか、換言すれば、落とし主しか知り得ないはずの「落とし物情報」をどうやって選別するかについて何も言及されていない。一般に、こうした情報の選別や入力は非常に煩雑かつ慎重を要するものであり、その点が解決されていない現状においては、システム運営者側（つまり拾得者側）の負担は依然高い状態といえる。
【００１２】
そこで本発明では、ネットワーク経由で落とし物の情報を集中管理可能なシステムにおいて、「落とし物画像の撮影」という最小限の労力のみによって、「落とし物情報の入力」を自動的または半自動的に行うことを目的とする。また、望ましくは、本発明は、「なりすまし防止のための落とし主の識別」という作業を自動的に行うことで、こうしたシステムの安全性と利便性を飛躍的に向上させることを目的とする。
【課題を解決するための手段】
【００１３】
本発明に係る落とし物情報管理装置は、落とし物を被写体として撮像した落とし物画像と落とし物の拾得状況に関する情報と落とし物の拾い主に関する情報とを入力する入力部と、入力部の入力した落とし物画像から画像に関する特徴量を抽出する特徴量抽出部と、特徴量抽出部により抽出された特徴量に基づいて、落とし物画像に対応するタグを付与するアノテーション部と、画像入力部の入力した落とし物画像から画像的特徴部分を抽出することで部分画像を作成する部分画像作成部と、落とし物の拾得状況に関する情報と落とし物の拾い主に関する情報と落とし物画像とタグと部分画像とを対応づけた落とし物情報をデータベースに登録する登録部と、を備える。
【００１４】
好ましくは、落とし物情報の検索条件を入力する検索条件入力部と、検索条件入力部から入力された検索条件に合致するタグが付与された落とし物画像を含む落とし物情報をデータベースから検索する検索部と、検索部が検索した落とし物情報に対応する検索結果情報を出力する出力部と、を備える。
【００１５】
好ましくは、検索結果情報は落とし物情報から落とし物画像および／または落とし物の拾い主に関する情報を除いた情報を含む。
【００１６】
好ましくは、出力部に出力された検索結果情報の中から、所望の検索結果情報の選択を受け付ける検索結果情報選択部を備え、出力部は、検索結果情報選択部から選択された検索結果情報に対応する落とし物情報に含まれる部分画像と、所定のダミー画像とを混在させて出力する。
【００１７】
好ましくは、出力部の出力した部分画像およびダミー画像の中から、所望の画像の選択を受け付ける画像選択部と、画像選択部から選択された画像が部分画像か否かに応じて、画像の選択者が真正な落とし物の落とし主であるか否かを認証する認証部と、を備える。
【００１８】
好ましくは、出力部は、認証部が、画像の選択者が真正な落とし物の落とし主であると認証したことに応じ、選択された検索結果情報に対応する落とし物情報に含まれる拾い主に関する情報を出力する。
【００１９】
好ましくは、ダミー画像の特徴量と部分画像との特徴量の差は所定の閾値を超える。
【００２０】
好ましくは、特徴量抽出部の抽出する特徴量は、被写体の形状または色に関する情報を表現する。
【００２１】
好ましくは、登録部が登録する落とし物情報の落とし物の拾得状況に関する情報は、落とし物画像の撮影日時、撮影場所その他の付帯情報を含む。
【００２２】
好ましくは、落とし物管理情報の登録時または落とし物の拾得状況に関する情報に含まれる落とし物の拾得日時を起点にした経過時間を算出する算出部と、算出部が算出した経過時間が所定の時間を超えた場合、所定の相手方に所定の情報を通知する通知部と、を備える。
【００２３】
本発明に係る落とし物情報管理方法は、コンピュータが、落とし物を被写体として撮像した落とし物画像と落とし物の拾得状況に関する情報と落とし物の拾い主に関する情報とを入力するステップと、入力した落とし物画像から画像に関する特徴量を抽出するステップと、特徴量抽出部により抽出された特徴量に基づいて、落とし物画像に対応するタグを付与するステップと、入力した落とし物画像から画像的特徴部分を抽出することで部分画像を作成するステップと、落とし物の拾得状況に関する情報と落とし物の拾い主に関する情報と落とし物画像とタグと部分画像とを対応づけた落とし物情報をデータベースに登録するステップと、を実行する。
【００２４】
この落とし物情報管理方法をコンピュータに実行させるためのプログラムも本発明に含まれる。
【００２５】
本発明に係る落とし物管理システムは、上記の落とし物情報管理装置の入力部に対し、落とし物画像、落とし物の拾得状況に関する情報および落とし物の拾い主に関する情報を入力する第１の端末と、落とし物情報管理装置の検索条件入力部に対して検索条件を入力するとともに、落とし物情報管理装置の出力部から出力された情報を再生する第２の端末と、を備える。
【発明の効果】
【００２６】
本発明によると、落とし物を撮影した画像から自動的にタグづけをし、落とし物の画像を当該タグをキーに検索・管理できるデータベースを構築できる。よって、手動によりいちいち落とし物ごとにラベルづけをするような手間が省ける。また、そのタグをキーに落とし主が自分の落とした落とし物をデータベースから検索できる。さらに、落とし主の指定した検索条件と合致する落とし物情報が検索されても、それをそのまま出力するのではなく、部分画像とダミー画像の中から部分画像を選ばせるという認証を経て落とし物情報を提示するため、落とし主になりすました者が不正に落とし物情報を閲覧することを防げる。
【図面の簡単な説明】
【００２７】
【図１】落とし物情報管理システムの概略構成図
【図２】管理サーバのブロック図
【図３】落とし物情報登録処理のフローチャート
【図４】落とし物情報検索処理のフローチャート
【発明を実施するための形態】
【００２８】
図１は本発明の好ましい実施形態に係る落とし物情報管理システム１００の概略構成図である。このシステムは、拾い主端末１、管理サーバ２、落とし主端末３を含む。拾い主端末１、管理サーバ２、落とし主端末３はそれぞれ単独のコンピュータ（ＣＰＵ，ＲＡＭ，ＲＯＭなど演算処理に必要な回路、データ入出力回路、表示回路、操作装置、通信回路などを備えたもの）で構成されるが、拾い主端末１と落とし主端末３の間に本質的な機器構成の相違はなく、ユーザが落とし物を拾った者（拾い主）か、あるいは拾った者（落とし主）かで区別される。拾い主端末１と落とし主端末３は、市販の情報端末、例えばパソコン、携帯電話、ＰＤＡをそのままこれらの端末とできる。これらの各装置が同じ場所に一体的に設置される必要はない。
【００２９】
この図では拾い主端末１および落とし主端末３は１つしか示されていないが、複数存在していてもよい。
【００３０】
拾い主端末１は、落とし物の拾い主が、その落とし物についての情報を、インターネットなどのネットワーク経由で管理サーバ２に接続して登録するための端末である。カメラ４は、拾い主が落とし物の画像を撮影するためのものであり、典型的にはデジタル画像データをメモリカードなどの電子的記録媒体に記録するデジタルカメラである。ただし、カメラ４の代わりに、被写体像を記録したアナログフィルムをスキャンしてデジタルデータに変換するフイルムスキャナを用いることもできる。
【００３１】
拾い主端末１は、カメラ４ないしその代替物から画像（静止画または動画）を入力するインターフェース、例えばＵＳＢポートを備えている。拾い主端末１に入力される画像の被写体は、落とし物である。この落とし物が被写体の画像を落とし物画像と呼ぶ。同一の拾い主端末１から、同一の落とし物に対応して入力される落とし物画像の数は単数でも複数でもよい。
【００３２】
拾い主端末１は、ＬＡＮ、インターネットその他のネットワークを介して管理サーバ２と接続されており、落とし物画像と当該画像以外の画像付帯情報とを含む落とし物情報を管理サーバ２に送信する。画像付帯情報は、拾い主に一意的に付与されたＩＤ（メールアドレスで代替可能）、拾い主の氏名およびその住所や電話番号やメールアドレスなどの連絡先のような拾い主に関する情報（拾い主関連情報）、落とし物を拾った日時および場所などを示す落とし物の取得状況に関する情報（取得状況関連情報）、落とし物の品目、落とし物に記載された所有者名などの記名およびその住所や電話番号などの連絡先、落とし物の保管場所（保管場所は拾い主自身の下でもよいし、遺失物の届け出先である公共機関（駅など）の施設管理者や警察署でもよい）のような落とし物に関する情報（落とし物関連情報）、落とし主が落とし物の検索条件とマッチングさせるキーとして使用しうる各種の情報を含む。
【００３３】
落とし物の品目、落とした場所は、大分類、小分類のように階層化されていてもよい。例えば、携帯電話を大分類、Ａ社製の携帯電話、Ｂ社製の携帯電話・・を品目の小分類とする。あるいは、落とした場所の大分類は「路上」、「店舗」、「官公庁」などとし、小分類はその住所とする。
【００３４】
なお、当然ながら、拾い主による落とし物の取扱は法律の定めによるべきであるが、本システムでは落とし物そのものの保管場所が画像付帯情報に含まれていれば足り、本システム自体が落とし物の物理的保管に関知することはない。
【００３５】
管理サーバ２は、ネットワークを介して拾い主端末１および落とし主端末３と接続されている。落とし主端末３は、落とし主が自身の落とし物に関係する落とし物情報の検索条件を管理サーバ２に入力して検索を依頼し、その検索結果を受信して表示装置やプリンタなどに出力するための装置である。落とし主端末３は、落とし主自身が保有するパソコンでもよいが、管理サーバ２とＬＡＮで接続された端末でもよい。
【００３６】
図２に示すように、管理サーバ２は、落とし物ＤＢ２１、画像入力装置２２、入力装置２３、画像解析装置２４、登録装置２５、検索装置２６、表示装置２７、操作装置２８を備える。また、各装置のコンピュータで実行されるプログラムモジュールで代替することもでき、必ずしも特定のハードウェア構成を要求するのではない。
【００３７】
これらの装置は１つのコンピュータに一体的に構成されていてもよいが、各々の装置を単独のコンピュータで構成し、かつそれらをネットワークで接続することで管理サーバ２を構成してもよい。
【００３８】
さらに、これらの装置の一部が拾い主端末１や落とし主端末３に含まれていてもよい。例えば、画像入力装置２２、入力装置２３、画像解析装置２４を拾い主端末１に設け、検索装置２６、表示装置２７、操作装置２８は落とし主端末３に設けて、管理サーバ２は検索装置２６と落とし物ＤＢ２１を備えていてもよい。こうすると、画像の解析から落とし物情報の登録までを落とし主端末３で制御でき、管理サーバ２は落とし主端末３からのネットワークを経由した制御に応じて落とし物情報を落とし物ＤＢ２１に格納するだけになる。あるいは、
管理サーバ２の落とし物ＤＢ２１の内容の閲覧や、操作装置２８を介した落とし物ＤＢ２１の内容の追加、削除、変更、更新は、ユーザＩＤやパスワードなどで認証された権限のある管理者によってのみ可能とする。
【００３９】
画像入力装置２２は、拾い主端末１から落とし物画像を入力して画像解析装置２４に転送する。入力装置２３は拾い主端末１から画像付帯情報を入力して登録装置２５に転送する。画像入力装置２２および入力装置２３は、ともに拾い主端末１にネットワーク経由で接続ネットワークアダプタなどで構成することができる。あるいは、カメラやフイルムスキャナーそのものであってもよい。
【００４０】
画像解析装置２４は、拾い主端末１から入力した落とし物画像から落とし物の特徴部分を解析して特定し、その特定された特徴部分を示す特徴領域を落とし物画像から抽出し、その部分画像を登録装置２５に出力する。また、部分画像の特徴量データを画像解析によって取得し、登録装置２５に出力する。
【００４１】
特徴領域の解析と部分画像抽出の方法は任意だが、例えば特許文献３のようにして動画像から自動的にＲＯＩを決定し、そのＲＯＩに含まれる画像（ワンポイント刺繍、模様、アクセサリー、ストラップのマスコット、待ち受け画面、かばんの傷など）を部分画像とする。あるいは、特許文献４のようにして、カメラ４、拾い主端末１あるいはキーボードやマウスなどで構成された操作装置２８からユーザ操作により設定されたＲＯＩに含まれる画像を部分画像とする。
【００４２】
また、部分画像の特徴量データとは、画像情報の特徴を示す値であり、例えば、特許文献７の段落００１３に示すような、ＲＧＢ３色の周波数成分、画素値のヒストグラム、ダイナミックレンジ（部分画像内の最大画素値から最小画素値までの広さ）、色数（階調数）、エントロピー、分散などを含む。さらに、部分画像の特徴量データは、画素値の平均値、分散、最大値、最小値、輝度ヒストグラムのような画素値に関するもの以外に、輪郭の円形度やモーメント、半径、体積、面積のような形状に関する特徴量を含んでもよい。
【００４３】
画像解析装置２４は、自動的に特定された特徴領域を表示装置２７に提示し、その中から操作装置２８を介した権限のある管理者の選択操作により任意に選択された１または複数の特徴領域のみを、最終的な部分画像としてそれぞれ抽出してＲＡＭに確保しておき、選択されなかった特徴領域は部分画像として抽出せず消去してもよい。こうすることで部分画像が落とし物を真の落とし主に認識させるのに適切な内容であるか否かを事前に人の目を通してチェックできる。
【００４４】
部分画像は、真正な落とし主に落とし物が自己のものであるか否かを落とし物画像を提示せずに認識させる役割がある。そのため、部分画像は複数存在してもよい。例えば、手提げかばんの把持部分が赤く、またそこに黄色いマスコットが取り付けられていれば、部分画像として「かばんの赤い把持部分」と「黄色いマスコット」が抽出されるであろう。
【００４５】
ただし、部分画像の全てを組み合わせることで落とし物画像そのものが再現できるとなると、真正でない落とし主でない者が落とし物の全体を把握できてしまう。よって、同一の落とし物画像から抽出された１または複数の部分画像は、落とし物画像の全体を再現する情報を有しない、換言すると落とし物画像から部分画像の抽出の際に情報の喪失が必ず生じるものとする。抽出すべき部分画像のサイズは、操作装置２８から任意に設定できてもよい。また、抽出すべき部分画像の条件や個数（例えば１６×１６ピクセル以上）を操作装置２８から任意に設定しておき、この条件に合致する部分画像を抽出してもよい。
【００４６】
また、画像解析装置２４は、落とし物画像の特徴解析結果に基づくアノテーション（タグ付け）を行う。これは、例えば、落とし物画像の特徴解析結果の取りうる全パターンに対応したタグを予め落とし物ＤＢ２１に用意しておき、画像解析装置２４による落とし物画像の実際の解析結果に対応するタグを落とし物ＤＢ２１から特定して、該特定されたタグを、当該解析された落とし物画像に対応するアノテーション情報とする。アノテーション情報は複数存在してもよい。
【００４７】
落とし物画像の特徴解析の内容は任意であり、例えば、特許文献６のような、事前に用意した被写体ごとのモデル特徴量と画像の実際の特徴量とのマッチングによる物体認識、当該物体の色認識、物体の表面に印字された製造社名ロゴやモデル名の文字認識などが挙げられる。また、落とし物ＤＢ２１に用意する解析結果パターンに対応するタグとしては、「傘」、「携帯電話」、「かばん」、「財布」など物体認識で特定された被写体の種類ないし形状に関するものや、「赤」、「ライトブルー」など色認識で特定された被写体の色に関するもの、「Ａ社製」、「Ｂ社製」など落とし物の製造元（メーカー）に関するものなどが挙げられる。
【００４８】
また、落とし物画像の解析が正常に完了したならば、アノテーション情報は、落とし物画像の解析結果に基づくタグを含むが、アノテーション情報は、落とし物画像の解析結果に基づかないその他の情報を含んでもよい。例えば、周知のように、カメラ４が画像ファイルのメタ情報に記載する撮影日時や撮影場所（ＧＰＳ）をアノテーション情報に含めてもよい。また、メタ情報そのものでなく、メタ情報を解析した結果をアノテーション情報に含めてもよい。例えば、撮影日時が午前に属するならば「午前」、撮影日時が午後に属するならば「午後」をアノテーション情報に含める。あるいは、撮影日時が予め落とし物ＤＢ２１に設定された夏休み期間（例えば７／２１〜８／３１）に属するならば「夏休み」をアノテーション情報に含める。また、操作装置２８から入力されたコメントを記述したテキスト情報その他の補足情報をアノテーション情報に含めてもよい。
【００４９】
落とし物ＤＢ２１はハードディスクなどの大容量記憶媒体で構成されている。登録装置２５は、落とし物ＤＢ２１への落とし物情報の格納、削除、更新、変更、追加その他の管理を司るデータベースエンジンである。登録装置２５は、入力装置２３から出力された画像付帯情報と画像解析装置２４から出力された部分画像とアノテーション情報とを対応づけて落とし物ＤＢ２１に格納する。落とし物画像と部分画像と部分画像の特徴データと画像付帯情報（拾い主関連情報と落とし物関連情報を含む）とアノテーション情報とを対応づけたこれらの情報の組を落とし物情報と呼ぶ。登録された落とし物情報は、操作装置２８からの指示に応じて表示装置２７に表示され、その中身を確認できてもよい。
【００５０】
落とし物ＤＢ２１に格納されたアノテーション情報の一部となったタグ、メタ情報、テキスト情報は、操作装置２８や拾い主端末１から任意に追加、修正、削除、および変更できてもよい。
【００５１】
検索装置２６は、落とし主端末３の操作手段または操作装置２８から指定された検索条件と落とし物ＤＢ２１の落とし物情報に含まれる各情報をマッチングし、指定された検索条件に該当する落とし物情報を特定し、その特定された落とし物情報を液晶ディスプレイなどで構成された表示装置２７に出力する。あるいは、落とし主端末３の操作手段から検索条件が指定された場合は、特定された落とし物情報をネットワーク経由で落とし主端末３に送信してもよい。検索装置２６と登録装置２５のデータベースエンジンは共通でも別々でもよい。
【００５２】
以下、図３および図４を参照し、本システムで実行される処理を説明する。
【００５３】
図３は、管理サーバ２のＣＰＵ（あるいは拾い主端末１のＣＰＵ。図３の説明について以下同様。）が実行を制御する落とし物情報登録処理のフローチャートを示す。この処理を管理サーバ２に実行させるためのプログラムは管理サーバ２あるいは拾い主端末１のＲＯＭに記憶されており、管理サーバ２あるいは拾い主端末１のＣＰＵがそのプログラムを解釈して以下の処理を実行する。
【００５４】
Ｓ１では、カメラ４などで得られた落とし物画像を、画像入力装置２２を介して画像解析装置２４へ入力する。また、画像付帯情報を、入力装置２３を介して登録装置２５へ入力する。
【００５５】
Ｓ２では、画像解析装置２４が、入力された落とし物画像を基にアノテーション情報を作成する。
【００５６】
Ｓ３では、画像解析装置２４が、入力された落とし物画像から特徴領域を特定する。
【００５７】
Ｓ４では、画像解析装置２４が、特定された特徴領域を落とし物画像から抽出することで部分画像を作成する。また、特徴領域の特徴データを抽出する。
【００５８】
Ｓ５では、登録装置２５は、落とし物画像と部分画像と部分画像の特徴データと画像付帯情報（拾い主関連情報と落とし物関連情報を含む）とアノテーション情報とを対応づけて落とし物情報を作成する。
【００５９】
Ｓ６では、登録装置２５は、落とし物情報を落とし物ＤＢ２１に格納する。
【００６０】
図４は、管理サーバ２のＣＰＵ（あるいは落とし主端末３のＣＰＵ。図４の説明について以下同様。）が実行を制御する落とし物情報検索処理のフローチャートを示す。この処理を管理サーバ２に実行させるためのプログラムは管理サーバ２あるいは落とし主端末３のＲＯＭに記憶されており、管理サーバ２あるいは落とし主端末３のＣＰＵがそのプログラムを解釈して以下の処理を実行する。
【００６１】
Ｓ１１では、落とし主端末３がキーボードなどの操作手段を介して検索条件の指定を受け付け、管理サーバ２に接続して、受け付けた検索条件を送信する。管理サーバ２は、入力装置２３を介して検索条件を落とし主端末３から受信し、これを検索装置２６に入力する。あるいは、操作装置２８が受け付けた検索条件を検索装置２６に入力してもよい。
【００６２】
検索条件は以下のようなものが考えられる。
【００６３】
落とし物の種類（品名）が何か。例えば「傘」、「携帯電話」、「かばん」など。
【００６４】
落とし物の主要な色は何か。例えば「青」、「オレンジ」など。カラーパレット（色見本）を落とし主端末３のディスプレイに表示し、その中から所望の色を選択することで検索条件の色を指定できてもよい。
【００６５】
落とした場所。交通機関、駅、店舗名、住所など。これらはテキストで指定できてもよいし、地図上で指定できてもよい。
【００６６】
落とした日時。何年何月何日など。日時の範囲が指定できてもよい。
【００６７】
落とした金額。ただし、落とし物の種類が貴重品（現金、有価証券、運転免許証、携帯電話など）の場合にのみ指定できるものとする。
【００６８】
検索条件の入力方法は任意であり、直接の文字入力でもよいし、あるいはドロップダウンリストなどの選択肢の中からいずれかの項目を選択する形式でもよい。
【００６９】
Ｓ１２では、検索装置２６は、入力された検索条件をキーに、落とし物ＤＢ２１の落とし物情報を検索する。検索条件の入力元が落とし主端末３の場合、検索の結果抽出された落とし物情報は、落とし主端末３に送信され、そのディスプレイで表示される。検索条件の入力元が操作装置２８の場合、検索の結果抽出された落とし物情報は、表示装置２７に表示される。
【００７０】
ただし、落とし物情報のうち、落とし主になりすました者（詐称落とし主）が落とし物を一意に特定できるような情報は表示させずまた落とし主端末３に送信させない。詐称落とし主が他人の落とし物を不正に取得することを防止するためである。
【００７１】
具体的には、落とし物情報のうち、落とし物画像、部分画像ならびに拾い主関連情報のような詐称落とし主が落とし物そのものを特定可能にする情報（クリティカル情報）は送信・表示しない。その代わり、落とし物情報からクリティカル情報を除いた情報で落とし物を具体的に絞り込みやすくする情報（検索結果表示情報）、 例えば「品名」＋「落とした日時」＋「落とした場所（大分類のみ）」＋「落とし物の色」などを送信・表示する。
【００７２】
なお、指定した検索条件に該当する落とし物情報を抽出できなかった場合、さらに検索条件を追加したり、検索条件の指定をやり直すことができるとよい。
【００７３】
以下、情報の表示先は、上記と同様、検索条件の入力元に対応して落とし主端末３のディスプレイか表示装置２７であるとし、逐一記載しない。また、ディスプレイによる映像表示の代わりに、音声再生装置による音声出力やプリンタによるプリントアウトとすることもでき、情報の再生出力形態は映像表示に限らない。
【００７４】
Ｓ１３では、検索装置２６は、表示された検索結果表示情報の中から、落とし物を探すユーザが自己の落とし物に関すると考えるものを落とし主端末３か操作装置２８にて選択させる。ここで、以下に説明するように、選択された検索結果表示情報に対応する落とし物情報の内容を詳細に表示する前に、検索条件を指定してきた落とし主が真正であるか否かの認証を行う。
【００７５】
Ｓ１４では、検索装置２６は、選択された検索結果表示情報を包含する落とし物情報に含まれる部分画像群の全部または一部を表示する。また、検索装置２６は、その部分画像群の中に、落とし物情報とは無関係に落とし物ＤＢ２１に予め蓄積されたダミー画像群から、所定個数のダミー画像をランダムに選び、選んだダミー画像を落とし物情報に含まれる部分画像群と混在させて表示する。ダミー画像と部分画像の配置はランダム（規則性がない）とする。例えば、４×４のマス目の中からランダムに選択されたマス目に部分画像を配置し、余ったマス目にダミー画像を配置する。なお、ランダム性の基準となる乱数の生成は、公知の手法に従いＣＰＵやチップセットで発生した擬似乱数を用いる。
【００７６】
ダミー画像群は、落とし物画像の解析パターンを網羅するよう、各解析パターンに対応したダミー画像が落とし物ＤＢ２１に用意されている。例えば、「傘」、「携帯電話」、「かばん」、「財布」など物体認識で特定された被写体の種類に対応するダミー、例えば「傘のダミー」、「携帯電話のダミー」、「かばんのダミー」、「財布のダミー」や、該被写体の種類に対応し、かつ「赤」、「ライトブルー」など色認識で特定された被写体の色に対応するダミー、例えば「赤い傘のダミー」、「ライトブルーのかばんのダミー」などがある。
【００７７】
検索装置２６によって選ばれるダミー画像の特徴量データは、選択された検索結果表示情報に対応する落とし物情報の部分画像の特徴量データと異なっている。両者が何も違わなければ、ダミー画像と落とし物の部分画像の違いが落とし主であっても視覚的に分からないからである。逆に、その両者の違いは、落とし主が、落とし主を実際に目にしている場合に限り認識できるレベル、すなわち実物を見たことのない詐称落とし主には認識できないレベルである必要がある。例えば、検索装置２６は、「赤い傘」の部分画像に対しては、その部分画像のＲＧＢ３色の周波数成分とは異なる周波数成分を持つダミー画像「青い傘のダミー画像」あるいは「黄色い傘のダミー画像」を選択する。あるいは「握り柄がＪ型の赤い傘」の部分画像に対しては、「握り柄がＬ型の赤い傘のダミー画像」を選択する。あるいは、「傘」の部分画像に対して、財布やかばんのように部分画像の物体の種類と全く異なる種類のダミーを選択してもよい。部分画像と選択すべきダミー画像間でどのような特徴量を異ならせるかを操作装置２８を介して権限のある管理者が任意に設定できてもよい。
【００７８】
一般的には、検索装置２６は、色差、輝度差、形状差など、部分画像の特徴量データとダミー画像の特徴量データとの差（相違度）が、所定の閾値を超えるようなダミー画像を選択する。画素値に関する相違度だけ、形状に関する相違度だけ、あるいはその両方の相違度がともに対応する所定の閾値を超えるようなダミー画像を選択してもよい。画素値・形状のうちいずれの属性の相違度を所定の閾値と比較するかをランダムに決定してもよい。
【００７９】
さらに、あからさまに部分画像の特徴量と異なるダミー画像を表示してもそれが部分画像でないと詐称落とし主に見破られる可能性が高いため、部分画像を基準にした相違度が、所定の第１の閾値を超えるが所定の第２の閾値に満たないものとなるダミー画像を選択してもよい。
【００８０】
なおダミー画像は、部分画像と同等のサイズであり、大きさの違いを目視することによってダミー画像と部分画像の違いを認識することはできないものとする。
【００８１】
選択するダミー画像の個数は部分画像群の数に応じて決定するとよい。例えば、部分画像の個数の３倍を上回らない最大の整数をダミー画像の選択個数とする。部分画像よりも極端に多いダミー画像を表示させるといたずらに混乱を招くからである。各部分画像を基準にして、所定の第１の閾値を超えるが所定の第２の閾値に満たない相違度となるダミー画像を、部分画像と同数選択してもよい。
【００８２】
Ｓ１５では、検索装置２６は、表示した部分画像およびダミー画像の中から、ユーザの落とし物に関係する部分画像であるとユーザ自身が判断する画像を落とし主端末３または操作装置２８などから選択させる。部分画像そのものを直接的に選ばせる代わりに、ダミー画像を排除候補として選ばせ、排除候補に選ばれず残った画像を部分画像とみなすことで部分画像を間接的に選ばせてもよい。
【００８３】
Ｓ１６では、検索装置２６は、Ｓ１５で選択された画像の中にダミー画像が含まれているか否かを判断する。Ｎｏの場合（ダミー画像が１つも含まれていない場合）は真正なユーザからのアクセスを認証した（認証ＯＫ）と判断してＳ１７に進み、Ｙｅｓの場合（ダミー画像が１つでも含まれている場合）は真正でないユーザからのアクセスを認証した（認証ＮＧ）と判断してＳ１３に戻る。認証ＮＧの場合Ｓ１２に戻って検索条件の再設定を促してもよい。なお、認証ＮＧと判断した回数をカウントしておき、この回数が所定の閾値（例えば３回）に達した場合、このユーザは真正でないユーザであることが確定したと判断し、Ｓ１３に戻らず本処理を終え、「認証に失敗しました」などのメッセージを表示し、以降、Ｓ１５で画像を選んだのと同一の落とし主端末３からのアクセスを制限してもよい。真正でないユーザが何回も画像を選んでいるうちに部分画像を見破ることを防止するためである。
【００８４】
Ｓ１７では、落とし物情報に含まれる各情報の全部または一部、例えば落とし物画像を表示する。拾い主関連情報は、落とし主が拾い主に連絡をとって落とし物をしかるべき保管場所へ取りに行くことができるようにする限度で表示すれば足りる。例えば、拾い主のメールアドレスだけを表示し、拾い主の氏名や住所は表示しなくてもよい。認証済みのユーザに落とし物情報のどの項目を表示させるかを予め拾い主端末１から指定できてもよい。
【００８５】
落とし主が表示された落とし物情報を確認し、その情報に従って落とし主に連絡をとって、拾い主あるいはその他の物が保管している落とし物を取りに行くことができる。
【００８６】
なお、管理サーバ２に設けられた図示しないＲＴＣ（リアルタイムクロック）により、落とし物情報の登録日時や落とし物を拾った日時からの経過時間を計時し、この経過時間が所定期間を超過した場合、当該落とし物情報は遺失者の名乗り出ない落とし物に関するとみなし、その旨あるいはその落とし物情報を図示しないオークションサーバに通知して落とし物の売却を開始したり、あるいはその落とし物情報に対応する拾い主関連情報を基に拾い主端末４に接続し、拾い主が所有者となった旨の通知を送信してもよい。こうすると、遺失者の名乗り出ない落とし物が容易になる。
【符号の説明】
【００８７】
１：拾い主端末、２：管理サーバ、３：落とし主端末、４：カメラ
【図１】
2010204733.tif 000003
【図２】
2010204733.tif 000004
【図３】
2010204733.tif 000005
【図４】
2010204733.tif 000006