(57)【要約】【課題】ユーザが撮像した被写体についての情報を提供する際に、外観の類似する被写体を区別し、的確な被写体情報を提供する。【解決手段】画像情報サーバ１００は、電子虫眼鏡１０で撮影した画像を受信し（ステップＳ１１）、画像を解析して画像中の被写体の特徴を抽出し（ステップＳ１２）、抽出した特徴に基づいてデータベース１０３を検索する（ステップＳ１３）。データベース内に被写体の候補が複数存在する場合は、複数の候補の相違点を抽出し、ユーザにその相違点が判別できるような画像の撮影を行わせるための再撮影指示を、電子虫眼鏡１０に送信する（ステップＳ１５）。ユーザは、この再撮影指示に従って再撮影を行い、画像情報サーバ１００は、再撮影された画像に基づいて、被写体を特定する。【選択図】  図５
2009259096.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置とサーバとからなる画像情報提供システムにおいて、
前記撮像装置は、
被写体を画像信号に変換する撮像手段と、
前記画像信号を前記サーバに送信する第１の送信手段と、
前記サーバから送信された前記被写体の名称を含む被写体情報を受信する第１の受信手段と、
前記受信した被写体情報を表示する表示手段と、を備え、
前記第１の受信手段は、前記サーバから送信された被写体を特定するための追加情報の入力指示を受信し、
前記第１の送信手段は、前記入力指示に基づいてユーザが入力した追加情報を前記サーバに送信し、
前記サーバは、
前記撮像装置から送信された画像信号を受信する第２の受信手段と、
前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出手段と、
前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索手段と、
前記検索した被写体情報を前記撮像装置に送信する第２の送信手段と、を備え、
前記第２の送信手段は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、前記画像中の被写体を特定するための追加情報の入力指示を前記撮像装置に送信し、
前記検索手段は、前記第２の受信手段が受信した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする画像情報提供システム。
【請求項２】
前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいて、前記被写体を特定可能に撮像した画像信号であることを特徴とする請求項１に記載の画像情報提供システム。
【請求項３】
前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいた文字情報であることを特徴とする請求項１に記載の画像情報提供システム。
【請求項４】
前記検索手段は、前記画像信号の日時情報と位置情報に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索することを特徴とする請求項１から３のいずれかに記載の画像情報提供システム。
【請求項５】
他の機器から送信された画像信号を受信する受信手段と、
前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出手段と、
前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索手段と、
前記検索した被写体情報を前記他の機器に送信する送信手段と、を備え、
前記送信手段は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、前記画像中の被写体を特定するための追加情報の入力指示を前記他の機器に送信し、
前記特定手段は、前記受信手段が受信した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする画像情報サーバ。
【請求項６】
被写体を画像信号に変換する撮像手段と、
前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出手段と、
前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索手段と、
前記検索した被写体情報を表示する表示手段と、を備え、
前記検索手段は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、ユーザに対して前記画像中の被写体を特定するための追加情報の入力指示を行い、ユーザが入力した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする撮像装置。
【請求項７】
前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいて、前記被写体を特定可能に撮像した画像信号であることを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいた文字情報であることを特徴とする請求項６に記載の撮像装置。
【請求項９】
前記検索手段は、前記画像信号の日時情報と位置情報に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索することを特徴とする請求項６から８のいずれかに記載の撮像装置。
【請求項１０】
撮像装置において、被写体を画像信号に変換する撮像工程と、
前記画像信号を前記サーバに送信する第１の送信工程と、
前記サーバにおいて、前記撮像装置から送信された画像信号を受信する第２の受信工程と、
前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出工程と、
前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索工程と、
前記検索した被写体情報を前記撮像装置に送信する第２の送信工程と、
前記撮像装置において、前記サーバから送信された前記被写体の名称を含む被写体情報を受信する第１の受信工程と、
前記受信した被写体情報を表示する表示工程と、を備え、
前記第２の送信工程は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、前記画像中の被写体を特定するための追加情報の入力指示を前記撮像装置に送信し、
前記第１の受信工程は、前記サーバから送信された被写体を特定するための追加情報の入力指示を受信し、
前記第１の送信工程は、前記入力指示に基づいてユーザが入力した追加情報を前記サーバに送信し、
前記検索工程は、前記第２の受信工程が受信した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする画像情報提供方法。
【請求項１１】
被写体を画像信号に変換する撮像工程と、
前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出工程と、
前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索工程と、
前記検索した被写体情報を表示する表示工程と、を備え、
前記検索工程は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、ユーザに対して前記画像中の被写体を特定するための追加情報の入力指示を行い、ユーザが入力した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする画像情報提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像情報提供システム、画像情報サーバ、撮像装置、及び画像情報提供方法に係り、特に、ユーザが撮像した被写体についての情報を提供する際に、外観の類似する被写体を区別し、的確な被写体の情報を提供する画像情報提供システム、画像情報サーバ、撮像装置、及び画像情報提供方法に関する。
【背景技術】
【０００２】
デジタルカメラ等で撮影を行う場合、未知の被写体や、より詳細が知りたい被写体に出会ったときに、その被写体に対する詳細な情報を取得したい場合が多々考えられる。このような課題に対して、特許文献１には、被写体の画像データ、撮影位置情報、及び距離情報をセンタに送出する携帯端末と、これらの情報に基づいて検索用データベースを検索し、検索結果を携帯端末に送出するセンタから構成される情報提供システムについて記載されている。この技術によれば、ユーザは、被写体を撮影して撮影した画像データを送出するだけで被写体の情報の検索結果を得ることができ、出先等で興味のある、あるいは調べたい被写体の情報を、携帯端末を用いて得ることが可能となる。
【特許文献１】特開２００３−３２３４４０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、特許文献１のように、撮影画像を自動認識して画像データベース照会するだけでは、照合精度に限界があり、同じ時間、同じ場所で観察できる可能性がある類似の被写体を区別することが難しく、正しい情報提供ができないという問題点があった。
【０００４】
本発明はこのような事情に鑑みてなされたもので、ユーザが撮像した被写体についての情報を提供する際に、外観の類似する被写体を区別し、的確な被写体の情報を提供する画像情報提供システム、画像情報サーバ、撮像装置、及び画像情報提供方法を提供することを目的とする。
【課題を解決するための手段】
【０００５】
前記目的を達成するために請求項１に記載の画像情報提供システムは、撮像装置とサーバとからなる画像情報提供システムにおいて、前記撮像装置は、被写体を画像信号に変換する撮像手段と、前記画像信号を前記サーバに送信する第１の送信手段と、前記サーバから送信された前記被写体の名称を含む被写体情報を受信する第１の受信手段と、前記受信した被写体情報を表示する表示手段とを備え、前記第１の受信手段は、前記サーバから送信された被写体を特定するための追加情報の入力指示を受信し、前記第１の送信手段は、前記入力指示に基づいてユーザが入力した追加情報を前記サーバに送信し、前記サーバは、前記撮像装置から送信された画像信号を受信する第２の受信手段と、前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出手段と、前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索手段と、前記検索した被写体情報を前記撮像装置に送信する第２の送信手段とを備え、前記第２の送信手段は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、前記画像中の被写体を特定するための追加情報の入力指示を前記撮像装置に送信し、前記検索手段は、前記第２の受信手段が受信した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする。
【０００６】
請求項１に記載の画像情報提供システムによれば、データベース内に画像中の被写体に対応する被写体情報の候補が複数存在する場合に、被写体を特定するための追加情報の入力指示を行い、ユーザに追加情報を入力させるようにしたので、類似する被写体情報を区別し、的確な被写体情報を提供することが可能となる。
【０００７】
請求項２に示すように請求項１に記載の画像情報提供システムにおいて、前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいて、前記被写体を特定可能に撮像した画像信号であることを特徴とする。
【０００８】
これにより、複数の被写体情報の候補の中から的確に被写体情報を特定することができる。
【０００９】
請求項３に示すように請求項１に記載の画像情報提供システムにおいて、前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいた文字情報であることを特徴とする。
【００１０】
これにより、複数の被写体情報の候補の中から的確に被写体情報を特定することができる。
【００１１】
請求項４に示すように請求項１から３のいずれかに記載の画像情報提供システムにおいて、前記検索手段は、前記画像信号の日時情報と位置情報に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索することを特徴とする。
【００１２】
これにより、的確に被写体を特定することができる。
【００１３】
前記目的を達成するために請求項５に記載の画像情報サーバは、他の機器から送信された画像信号を受信する受信手段と、前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出手段と、前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索手段と、前記検索した被写体情報を前記他の機器に送信する送信手段とを備え、前記送信手段は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、前記画像中の被写体を特定するための追加情報の入力指示を前記他の機器に送信し、前記特定手段は、前記受信手段が受信した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする。
【００１４】
これにより、類似する被写体を区別し、的確な被写体情報を提供することができる。
【００１５】
前記目的を達成するために請求項６に記載の撮像装置は、被写体を画像信号に変換する撮像手段と、前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出手段と、前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索手段と、前記検索した被写体情報を表示する表示手段とを備え、前記検索手段は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、ユーザに対して前記画像中の被写体を特定するための追加情報の入力指示を行い、ユーザが入力した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする。
【００１６】
これにより、類似する被写体を区別し、的確な被写体情報を提供することができる。
【００１７】
請求項７に示すように請求項６に記載の撮像装置において、前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいて、前記被写体を特定可能に撮像した画像信号であることを特徴とする。
【００１８】
これにより、複数の被写体情報の候補の中から的確に被写体情報を特定することができる。
【００１９】
請求項８に示すように請求項６に記載の撮像装置において、前記追加情報は、前記画像中の被写体に対応する被写体情報の複数の候補の相違点に基づいた文字情報であることを特徴とする。
【００２０】
これにより、複数の被写体情報の候補の中から的確に被写体情報を特定することができる。
【００２１】
請求項９に示すように請求項６から８のいずれかに記載の撮像装置において、前記検索手段は、前記画像信号の日時情報と位置情報に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索することを特徴とする。
【００２２】
これにより、的確に被写体を特定することができる。
【００２３】
前記目的を達成するために請求項１０に記載の画像情報提供方法は、撮像装置において、被写体を画像信号に変換する撮像工程と、前記画像信号を前記サーバに送信する第１の送信工程と、前記サーバにおいて、前記撮像装置から送信された画像信号を受信する第２の受信工程と、前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出工程と、前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索工程と、前記検索した被写体情報を前記撮像装置に送信する第２の送信工程と、前記撮像装置において、前記サーバから送信された前記被写体の名称を含む被写体情報を受信する第１の受信工程と、前記受信した被写体情報を表示する表示工程とを備え、前記第２の送信工程は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、前記画像中の被写体を特定するための追加情報の入力指示を前記撮像装置に送信し、前記第１の受信工程は、前記サーバから送信された被写体を特定するための追加情報の入力指示を受信し、前記第１の送信工程は、前記入力指示に基づいてユーザが入力した追加情報を前記サーバに送信し、前記検索工程は、前記第２の受信工程が受信した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする。
【００２４】
これにより、類似する被写体を区別し、的確な被写体情報を提供することができる。
【００２５】
前記目的を達成するために請求項１１に記載の画像情報提供方法は、被写体を画像信号に変換する撮像工程と、前記画像信号に基づいて画像中の被写体の特徴を抽出する抽出工程と、前記抽出された画像中の被写体の特徴に基づいて、複数の被写体情報が記録されたデータベースから前記画像中の被写体に対応する被写体情報を検索する検索工程と、前記検索した被写体情報を表示する表示工程とを備え、前記検索工程は、前記データベース内に前記画像中の被写体に対応する被写体情報の候補が複数存在する場合に、ユーザに対して前記画像中の被写体を特定するための追加情報の入力指示を行い、ユーザが入力した追加情報に基づいて、前記複数の被写体情報の候補の中から１つの被写体情報を特定することを特徴とする。
【００２６】
これにより、類似する被写体を区別し、的確な被写体情報を提供することができる。
【発明の効果】
【００２７】
本発明によれば、データベース内に画像中の被写体に対応する被写体情報の候補が複数存在する場合に、被写体を特定するための追加情報の入力指示を行い、ユーザに追加情報を入力させるようにしたので、類似する被写体を区別し、的確な被写体情報を提供することが可能となる。
【発明を実施するための最良の形態】
【００２８】
以下、添付図面に従って本発明を実施するための最良の形態について説明する。
【００２９】
＜第１の実施の形態＞
図１は、本発明が適用された画像情報提供システム１のシステム構成図である。本発明の画像情報提供システム１は、電子虫眼鏡１０と画像情報サーバ１００とから構成され、これらはインターネット網５０、無線ＬＡＮアクセスポイント５１を介してデータの送受信を行うことが可能である。
【００３０】
インターネット網５０は、公衆通信網及び専用回線からなる通信ネットワークであり、無線ＬＡＮアクセスポイント５１は、図示しないルータを介してインターネット網５０と通信可能に接続されている。無線ＬＡＮアクセスポイント５１は、ユーザ宅内に設置されたアクセスポイントに限られず、公衆の無線ＬＡＮスポットであってもよい。
【００３１】
電子虫眼鏡１０は、撮像素子で撮像した被写体を表示装置に表示することにより、被写体の拡大観察が可能な装置である。
【００３２】
図２は、電子虫眼鏡１０の電気的構成を示すブロック図である。同図に示すように、電子虫眼鏡１０は、操作部１１、制御部１２、通信部１３、撮像部１４、及び表示部１５から構成される。
【００３３】
操作部１１は、ユーザが所望の機能を使用するための操作部材であり、図示しないズームボタン、撮影ボタン、各種入力キー等から構成されている。
【００３４】
通信部１３は、変復調、周波数変換など所定の通信処理を行い、無線ＬＡＮアクセスポイント５１との間で無線ＬＡＮ通信を行う。電子虫眼鏡１０は、無線ＬＡＮアクセスポイント５１を介してインターネット網５０に接続し、所定のプロトコルで画像情報サーバ１００とデータの送受信を行うことが可能である。
【００３５】
撮像部１４は、図示しない撮像レンズや撮像素子、アナログ信号処理回路、及びデジタル信号処理回路等から構成される。撮像レンズにより結像した被写体像は撮像素子によりアナログの画像信号に変換され、アナログ信号処理回路、及びデジタル信号処理回路により所定の画像処理が施され、デジタルの画像信号が生成される。この画像信号は、通信部１３によりインターネット網５０を介して画像情報サーバ１００に送信することが可能である。また、この画像信号を図示しない不揮発性メモリに記録するように構成してもよい。
【００３６】
表示部１５は、撮像部１４によって生成された画像信号に基づいて、画像の表示を行う液晶ディスプレイである。また、図示しない不揮発性メモリに記録された画像や、後述する画像情報サーバ１００から送信された被写体情報の表示も行う。表示部１５は、有機ＥＬディスプレイ等の表示装置で構成してもよい。
【００３７】
これらの構成要素は、制御部１２により統括制御される。制御部１２は、図示しないＣＰＵと周辺回路から構成されている。
【００３８】
図３は、画像情報サーバ１００の電気的構成を示すブロック図である。同図に示すように、画像情報サーバ１００は、入出力部１０１、制御部１０２、データベース１０３、検索部１０４、及び画像解析部１０５から構成されている。
【００３９】
制御部１０２は、図示しないＣＰＵと周辺回路から構成されており、画像情報サーバ１００の各部を統括制御する。
【００４０】
入出力部１０１は、インターネット網５０とのインターフェースであり、所定のプロトコルを用いて、インターネット網５０を介して電子虫眼鏡１０と通信を行う。
【００４１】
データベース１０３は、様々な被写体についての情報を記録した記録部であり、データ構造の詳細については後述する。なお、データベース１０３は、ハードディスク装置などの大容量記憶装置で構成されるものであるが、記録媒体は特に限定されない。
【００４２】
画像解析部１０５は、入出力部１０１から入力された画像を解析し、画像中の被写体の各部位ごとの色や形状の特徴を抽出し、抽出したこれらの特徴を制御部１０２に出力する。
【００４３】
検索部１０４は、制御部１０２の指令に基づいてデータベース１０３を検索し、検索結果を出力する。
【００４４】
図４は、データベース１０３のデータ構造の一例を示す図であり、植物に関するデータ構造の一例を示している。
【００４５】
同図に示すように、データベース１０３の植物に関するデータは、目、亜目、科、及び固体の分類単位ごとに階層構造を形成している。
【００４６】
最上位のディレクトリは、目で構成されており、それぞれの目コード、目名称が記録されている（データＤ１）。それぞれの目の下には、亜目毎にディレクトリが構成され、それぞれの亜目コード、亜目名称が記録されている（データＤ２）と共に、それぞれの亜目の下には、科毎にディレクトリが構成されている。
【００４７】
科についても同様に、それぞれの科コード、科名称が記録されている（データＤ３）と共に、それぞれの科の下には、固体毎にディレクトリが構成されている。
【００４８】
各個体には、固体コード、固体名称、外観、解説、大きさのデータが記録されている（データＤ４）他、地域、時期、及び部位についてのディレクトリが構成されている。地域ディレクトリの下には、生息する地域の地域コード、地域名称、及び類似地域コードのデータが記録されており（データＤ５−１）、同様に、時期ディレクトリの下には、生息する時期の時期コード、時期名称、及び類似時期コードのデータが記録されている（データＤ５−２）。また、部位ディレクトリの下には、各部位の部位コード、部位名称が記録されており（データＤ５−３）、色、形状、及びにおいのディレクトリが構成されている。
【００４９】
さらに、色ディレクトリの下には、色コード、色名称、及び類似色コードが（データＤ６−１）、形状ディレクトリの下には、形状コード、形状名称、及び類似形状コードが（データＤ６−２）、においディレクトリの下には、においコード、におい名称、及び類似においコードが（データＤ６−３）記録されている。
【００５０】
このように、データベース１０３は、各個体の生息地域、生息時期、各部位の色、形状、及びにおいについて、類似するもののコードが記録されている。
【００５１】
次に、画像情報提供システム１の動作について、図５、図６を用いて説明する。
【００５２】
最初に、ユーザは、電子虫眼鏡１０を用いて、詳細な情報を知りたい被写体を撮影する（ステップＳ１）。被写体の撮影は、電子虫眼鏡１０の図示しない撮像レンズを被写体に向けることにより行う。ここで撮影した画像を、図６（ａ）とする。
【００５３】
次に、ユーザは、操作部１１を操作し、撮影した画像を画像情報サーバ１００に送信する（ステップＳ２）。このとき、撮影場所情報と撮影日時情報も合わせて送信する。これらの情報は、ユーザが操作部１１を操作して入力する。なお、撮影した場所は、電子虫眼鏡１０にＧＰＳモジュールを内蔵し、複数のＧＰＳ衛星からＧＰＳ信号を受信することにより撮影位置を特定してもよい。また、日時についても、内蔵した時計機能やＧＰＳモジュールから取得した現在時刻を用いてもよい。
【００５４】
画像情報サーバ１００は、電子虫眼鏡１０から送信された画像、撮影場所情報、及び撮影日時情報を、入出力部１０１を介して受信する（ステップＳ１１）。受信した画像は画像解析部１０５に入力され、画像解析部１０５は画像中の被写体について解析を行い、被写体の部位毎の色や形状等の特徴の抽出を行う（ステップＳ１２）。
【００５５】
次に、検索部１０４は、画像解析部１０５が抽出した被写体の特徴に基づいて、データベース１０３を検索する（ステップＳ１３）。データベース１０３の検索は、画像解析部１０５の解析結果に基づいて、被写体の種類に応じたデータについて検索する。ここでは、図６（ａ）の画像から、画像解析部１０５は、被写体の種類を植物であると特定する。
【００５６】
検索部１０４は、図４に示す植物のデータ群から、まず、受信した撮影場所情報と一致する地域コードを持つ個体データ（データＤ４）の抽出を行う。次に、抽出された固体データの中から、受信した撮影日時情報と一致する時期コードを持つ固体データの抽出を行う。
【００５７】
さらに、抽出された固体データの中から、部位毎に、画像解析部１０５が抽出した色、形状の特徴と一致するコードを持つ個体を抽出する。例えば、図６（ａ）の画像において、花びら全体という部位に対して、画像解析部１０５が抽出した色と一致する色コード、形状が一致する形状コードを持つ個体を抽出する。
【００５８】
固体の抽出が終了すると、この検索部１０４の検索結果に基づいて、制御部１０２は被写体の候補が複数であるか否かを判定する（ステップＳ１４）。
【００５９】
被写体の候補が複数ある場合は、複数の候補の相違点を抽出する。例えば、図６（ａ）の画像において、「ハナショウブ」と「カキツバタ」の２つの候補が抽出された場合は、これらの各部位データ（データＤ５−３）から、相違点を抽出する。ここで、「ハナショウブ」と「カキツバタ」の相違点は、花中心部の色であり、「ハナショウブ」の花中心部の色は黄色、「カキツバタ」の花中心部の色は白であるとする。
【００６０】
「ハナショウブ」と「カキツバタ」は、花全体の部位については、それぞれの色コードはお互いの類似色コード、それぞれの形状コードはお互いの類似形状コードとなっており、相違点が見つからない。しかし、花中心部の部位については、それぞれの色コードと類似色コードが異なるため、相違点として抽出される。このように、類似するもののコードは、データベースの絞込みの際に相違点を抽出する際に使用する。
【００６１】
画像情報サーバ１００は、複数の候補の相違点を抽出すると、ユーザにその相違点が判別できるような画像の撮影を行わせるための再撮影指示を、電子虫眼鏡１０に送信する（ステップＳ１５）。この再撮影指示を受信した電子虫眼鏡１０は、表示部１５に再撮影指示の表示を行う（ステップＳ３）。例えば、「ハナショウブ」と「カキツバタ」の相違点は、花中心部の色コードであるので、再撮影指示は花中心部の撮影を行う旨の指示となり、表示部１５には、「花中心部を拡大撮影してください」と表示される。この再撮影指示は、図示しない音声出力部によって行なってもよい。
【００６２】
ユーザは、表示部１５に表示された再撮影指示に従って、再撮影を行う（ステップＳ４）。このとき、電子虫眼鏡１０は、再撮影に適した撮影モードに自動的に移行してもよい。例えば、この例の場合の再撮影は花の中心部を拡大撮影するものであるので、自動的にズーム倍率を上げてもよい。再撮影を行った画像を、図６（ｂ）とする。
【００６３】
電子虫眼鏡１０は、再撮影した画像を画像情報サーバ１００に送信する（ステップＳ５）。
【００６４】
画像情報サーバ１００は、この画像を受信し（ステップＳ１１）、受信した画像を解析し（ステップＳ１２）、解析結果に基づいて再びデータベース１０３を検索する（ステップＳ１３）。この例の場合は、画像中の花の中心部の色について解析し、「ハナショウブ」と「カキツバタ」の花中心部の色コードと比較し、一致する固体を抽出する。図６（ｂ）に示す画像では花の中心部が黄色であるので、「ハナショウブ」が抽出される。
【００６５】
固体の抽出が終了すると、被写体の候補が複数であるか否かを判定する（ステップＳ１４）。被写体の候補が複数ある場合は、複数の候補の相違点を抽出し、同様の処理を繰り返す。
【００６６】
被写体の候補が１つとなり、被写体が特定できた場合は、特定した被写体に関する情報をデータベース１０３から読み出し、被写体情報を電子虫眼鏡１０に送信する（ステップＳ１６）。この例の場合は、「ハナショウブ」の固体情報（データＤ４）と、「ハナショウブ」の属する目（データＤ１）、亜目（データＤ２）、科（データＤ３）について、電子虫眼鏡１０に送信する。
【００６７】
電子虫眼鏡１０は、この被写体情報を受信し、表示部１５に被写体情報を表示する。図７は、電子虫眼鏡１０の表示部１５に表示された被写体情報を示す図である。同図に示すように、表示部１５には、ユーザが撮像した画像２００の他、画像解析結果２１０、及び被写体の詳細情報２２０が表示される。
【００６８】
画像２００の中には、ユーザが撮像した画像において被写体を特定するために用いた部位を示す枠２０１が示される。画像解析結果２１０には、画像解析部１０５が算出したそれぞれの固体に対する評価値が確からしさとして表示される。詳細情報２２０は、複数の候補が画像解析結果２１０に示されている場合には、カーソル位置の固体情報が表示される。
【００６９】
このように、データベース内に被写体の候補が複数ある場合に、複数の被写体候補の相違点を抽出し、相違点が判別可能な画像を得るようにユーザに再撮影指示を行うことで、類似した被写体が存在しても正確な被写体情報を提供することが可能となる。
【００７０】
本実施の形態では、画像情報サーバ１００は、複数の被写体候補の相違点を判別するためにユーザに再撮影指示を送信したが、再撮影ではなく、被写体の特徴を入力させてもよい。例えば、被写体のにおいの情報や手触りの情報について、操作部１１や図示しない音声入力部を用いて入力させ、この入力された情報を受信し、被写体の特徴としてデータベース１０３を検索してもよい。においの情報や手触りの情報は、複数の被写体候補のにおいの情報や手触りの情報を電子虫眼鏡１０に提示し、ユーザは、提示されたにおいの情報や手触りの情報の中から、最も近いものを選択するように構成してもよい。
【００７１】
また、本実施の形態においては、電子虫眼鏡１０は、無線ＬＡＮを用いてインターネット網５０に通信接続を行ったが、有線でインターネット網５０に接続してもよい。また、インターネット網５０に接続する方法は、ＬＡＮに限られず、図８に示すように、携帯通信キャリア５２を用いてインターネット網５０に接続してもよい。この場合は、電子虫眼鏡１０の通信部１３は、キャリア通信アダプタを備えておけばよい。
【００７２】
さらに、図９に示すように、携帯電話５３を介してインターネット網５０に通信接続してもよい。電子虫眼鏡１０と携帯電話５３は、例えばＢｌｕｅｔｏｏｔｈやＩｒＤＡを用いて通信を行う。この場合は、電子虫眼鏡１０の通信部１３にＢｌｕｅｔｏｏｔｈモジュールやＩｒＤＡモジュールを備えておけばよい。携帯電話５３は、携帯通信キャリア５２を介してインターネット網５０と通信可能であり、電子虫眼鏡１０は、これらを介して画像情報サーバ１００と通信することができる。
【００７３】
＜第２の実施の形態＞
第２の実施の形態の電子虫眼鏡１０は、スタンドアローン型に構成され、画像情報サーバ１００と通信を行わずに被写体情報を得ることができる。
【００７４】
図１０は、第２の実施の形態の電子虫眼鏡１０の電気的構成を示すブロック図である。なお、図２に示すブロック図と共通する部分には同一の符号を付し、その詳細な説明は省略する。同図に示すように、第２の実施の形態の電子虫眼鏡１０は、画像解析部１７、検索部１８、及びデータベース１９を備えたところが異なっている。
【００７５】
画像解析部１７は、撮像部１４で撮像された画像を解析し、画像中の被写体の各部位ごとの色や形状の特徴を抽出する。
【００７６】
データベース１９は、様々な被写体についての情報を記録した記録部である。記録されているデータの構造については、図４に示したデータ構造と同様となっている。
【００７７】
検索部１８は、制御部１２の指令に基づいてデータベース１９を検索し、検索結果を出力する。
【００７８】
次に、電子虫眼鏡１０の動作について、図１１、図１２を用いて説明する。
【００７９】
まず、ユーザは、電子虫眼鏡１０を用いて詳細な情報を知りたい被写体を撮影する（ステップＳ２１）。ここで撮影した画像を、図１２（ａ）とする。また、撮影場所情報や撮影日時情報について、操作部１１を用いて入力する。第１の実施の形態と同様に、ＧＰＳ等を用いて撮影場所情報と撮影日時情報を取得してもよい。
【００８０】
次に、画像解析部１７は、撮影画像中の被写体について解析を行い、被写体の各部位の色や形状等の特徴の抽出を行う（ステップＳ２２）。検索部１８は、画像解析部１７が抽出した被写体の特徴に基づいて、データベース１９を検索する（ステップＳ２３）。データベース１９の検索は、第１の実施の形態と同様に、被写体の種類に応じたデータについて、部位毎に、抽出した被写体の特徴と一致する色、形状を持つ個体データを抽出する。
【００８１】
固体の抽出が終了すると、この検索部１８の検索結果に基づいて、被写体の候補が複数であるか否かを判定する（ステップＳ２４）。
【００８２】
被写体の候補が複数ある場合は、複数の候補の相違点を抽出する。例えば、図１２（ａ）の画像において、「ハナショウブ」と「カキツバタ」の２つの候補が抽出された場合は、これらの各部位データ（データＤ５−３）から、相違点を抽出する。前述のように、「ハナショウブ」と「カキツバタ」の相違点は、花中心部の色コードである。
【００８３】
相違点を抽出すると、ユーザにその相違点が判別できるような画像の撮影を行わせるための再撮影指示を、表示部１５に表示する（ステップＳ２５）。第１の実施の形態と同様に、表示部１５には、「花中心部を拡大撮影してください」と表示される。
【００８４】
ユーザは、表示部１５に表示された再撮影指示に従って、再撮影を行う（ステップＳ２６）。このとき、再撮影に適した撮影モードに自動的にモード移行してもよい。再撮影を行った画像を、図１２（ｂ）とする。
【００８５】
再撮影が行われると、画像解析部１７は撮影した画像を解析し（ステップＳ１２）、再び解析結果に基づいてデータベース１９を検索する（ステップＳ１３）。この例の場合は、画像中の花の中心部の色について解析し、「ハナショウブ」と「カキツバタ」の花中心部の色コードと比較し、一致する固体を抽出する。図１２（ｂ）に示す画像では花の中心部が白色であるので、「カキツバタ」が抽出される。
【００８６】
固体の抽出が終了すると、被写体の候補が複数であるか否かを判定する（ステップＳ２４）。被写体の候補が複数ある場合は、複数の候補の相違点を抽出し、同様の処理を繰り返す。
【００８７】
被写体の候補が１つとなり、被写体が特定できた場合は、特定した被写体に関する情報をデータベース１９から読み出し、被写体情報を表示部１５に表示する（ステップＳ２７）。
【００８８】
このように、画像解析部１７、検索部１８、及びデータベース１９を電子虫眼鏡１０に内蔵した場合であっても、類似した被写体が存在しても正確な被写体情報を提供することが可能となる。
【００８９】
なお、本明細書においては、植物の情報を取得する例を用いて説明したが、本発明において提供可能な情報は植物に限られるものではない。例えば、動物や昆虫、魚等の生物を撮影し、これらの生態についての情報を提供することも可能である。また、自動車や飛行機等の乗り物を撮影してメーカーやエンジン性能等の情報を提供したり、ビル等の建築物を撮影して住所等の情報を提供してもよい。
【図面の簡単な説明】
【００９０】
【図１】図１は、本発明が適用された画像情報提供システム１を示す構成図である。
【図２】図２は、電子虫眼鏡１０の電気的構成を示すブロック図である。
【図３】図３は、画像情報サーバ１００の電気的構成を示すブロック図である。
【図４】図４は、データベース１０３のデータ構造の一例を示す図である。
【図５】図５は、画像情報提供システム１の動作について示したフローチャートである。
【図６】図６は、電子虫眼鏡１０で撮影した画像の一例を示す図である。
【図７】図７は、電子虫眼鏡１０の表示部１５に表示された被写体情報を示す図である。
【図８】図８は、画像情報提供システム１の他の実施の形態を示す構成図である。
【図９】図９は、画像情報提供システム１の他の実施の形態を示す構成図である。
【図１０】図１０は、第２の実施の形態の電子虫眼鏡１０の電気的構成を示すブロック図である。
【図１１】図１１は、第２の実施の形態の電子虫眼鏡１０の動作について示したフローチャートである。
【図１２】図１２は、電子虫眼鏡１０で撮影した画像の一例を示す図である。
【符号の説明】
【００９１】
１…画像情報提供システム、１０…電子虫眼鏡、１１…操作部、１２…制御部、１３…通信部、１４…撮像部、１５…表示部、１７、１０５…画像解析部、１８、１０４…検索部、１９、１０３…データベース、１０１…入出力部、１０２…制御部、５０…インターネット網、５１…無線ＬＡＮアクセスポイント、５２…携帯通信キャリア、５３…携帯電話、１００…画像情報サーバ、２００…撮像画像、２０１…枠、２１０…画像解析結果、２２０…被写体の詳細情報
【図１】
2009259096.tif 000003
【図２】
2009259096.tif 000004
【図３】
2009259096.tif 000005
【図４】
2009259096.tif 000006
【図５】
2009259096.tif 000007
【図６】
2009259096.tif 000008
【図７】
2009259096.tif 000009
【図８】
2009259096.tif 000010
【図９】
2009259096.tif 000011
【図１０】
2009259096.tif 000012
【図１１】
2009259096.tif 000013
【図１２】
2009259096.tif 000014