(57)【要約】【課題】  高速に被写体とデータの照合を行うことのできる撮像装置および撮像方法を提供する。【解決手段】  撮影動作を開始するための第１レリーズの動作に応答して（Ｓ７）、被写体を撮像して画像データに変換し（Ｓ９）、被写体を撮像して得られた画像データの特徴を表す特徴データを抽出し（Ｓ１１）、特徴データに基づいて、図や写真などを中心に事物を系統的に解説したデータが記憶されている図鑑データ５５ａの中から、被写体に対応するデータの候補を検索し（Ｓ１５）、このデータを表示し（Ｓ１７）、第２レリーズスイッチの動作に応答して被写体を撮像し、この撮像によって得られた画像データを記録する（Ｓ３１）。  【選択図】  図２
2009147481.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して第１画像データまたは第２画像データに変換する撮像部と、
図や写真などを中心に事物を系統的に解説した図鑑データが記憶されたデータベースと、
撮影動作を開始するための第１レリーズスイッチと、
上記第１レリーズスイッチの動作に応答して、上記第１画像データの特徴を表す特徴データに基づいて、上記被写体に対応する図鑑データの候補を上記データベースの中から検索する画像検索部と、
上記画像データを記録するために上記第１レリーズスイッチの動作の後に動作する第２レリーズスイッチと、
上記第２レリーズスイッチの動作に応答して、上記撮像部により被写体を撮像して得られた上記第２画像データを記録する画像記録部と、
を備えたことを特徴とする撮像システム。
【請求項２】
上記画像検索部によって検索された図鑑データの候補を表示する表示部を有することを特徴とする請求項１に記載の撮像システム。
【請求項３】
上記画像記録部は上記画像データのタグ情報として上記図鑑データを記録することを特徴とする請求項１に記載の撮像システム。
【請求項４】
上記画像検索部は、検索の信頼度の高い図鑑データを複数検索し、上記検索を行うたびに上記信頼度の高い順に並び替えることを特徴とする請求項１に記載の撮像システム。
【請求項５】
上記並び替えられた上記図鑑データのうち、上位の図鑑データを表示部に表示することを特徴とする請求項４に記載の撮像システム。
【請求項６】
上記並び替えられた上記図鑑データのうち、上位の図鑑データを上記画像データのタグ情報として記録することを特徴とする請求項４に記載の撮像システム。
【請求項７】
上記第１画像データは上記撮像部を構成する撮像素子の画素データを間引いて得られたデータであることを特徴とする請求項１に記載の撮像システム。
【請求項８】
上記画像検索部は、上記第２レリーズスイッチの動作後に、上記第２画像データに基づいて上記被写体に対応する図鑑データの候補を上記データベースの中から検索することを特徴とする請求項１に記載の撮像システム。
【請求項９】
上記画像検索部は、上記第２レリーズスイッチの動作後に、上記第２画像データの内、ＡＦ合焦領域の画像データに基づいて上記被写体に対応する図鑑データの候補を上記データベースの中から検索することを特徴とする請求項１に記載の撮像システム。
【請求項１０】
被写体を撮像して第１画像データまたは第２画像データに変換する変換ステップと、
撮影動作を開始するための第１レリーズスイッチの動作に応答して、被写体を撮像して得られた第１画像データの特徴を表す特徴データを抽出する抽出ステップと、
上記特徴データに基づいて、図や写真などを中心に事物を系統的に解説した図鑑データが記憶されているデータベースの中から、上記被写体に対応する図鑑データの候補を検索する検索ステップと、
上記画像データを記録するために上記第１レリーズスイッチの動作の後に動作する第２レリーズスイッチの動作に応答して、上記被写体を撮像して得られた上記第２画像データを記録する記録ステップと、
を備えたことを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像システムおよび撮像方法に関し、詳しくは、撮影された静止画像の図鑑情報を表示もしくは記録する撮像システムおよび撮像方法に関する。
【背景技術】
【０００２】
デジタルカメラ等の撮像装置によって、動植物等を撮影することがしばしばなされている。撮影時に、動植物等の名称が分かると、撮影の楽しみが増えることから、撮影した画像の名称を検索し、これを表示する撮像装置が提案されている。例えば、特許文献１には、撮影した正面画像と側面画像を用い、サイズや色の構成、配列等からなる特徴情報を記憶するデータを検索し、この検索結果を表示するデジタルカメラが開示されている。
【特許文献１】特開２００２−２４７４３６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
特許文献１に開示のデジタルカメラでは、正面画像と側面画像の２回撮影を行ってから、データの検索を行っている。しかし、検索に当たって行う画像認識には時間がかかり、また、照合するデータが大きくなればなるほど、照合に時間がかかってしまう。このため、現実的な図鑑カメラの実現は困難となってしまう。
【０００４】
本発明は、このような事情を鑑みてなされたものであり、高速に被写体とデータの照合を行うことのできる撮像装置および撮像方法を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するため第１の発明に係わる撮像システムは、被写体を撮像して第１画像データまたは第２画像データに変換する撮像部と、図や写真などを中心に事物を系統的に解説した図鑑データが記憶されたデータベースと、撮影動作を開始するための第１レリーズスイッチと、上記第１レリーズスイッチの動作に応答して、上記第１画像データの特徴を表す特徴データに基づいて、上記被写体に対応する図鑑データの候補を上記データベースの中から検索する画像検索部と、上記画像データを記録するために上記第１レリーズスイッチの動作の後に動作する第２レリーズスイッチと、上記第２レリーズスイッチの動作に応答して、上記撮像部により被写体を撮像して得られた上記第２画像データを記録する画像記録部と、を備える。
【０００６】
第２の発明に係わる撮像システムは、上記第１の発明において、上記画像検索部によって検索された図鑑データの候補を表示する表示部を有する。
また、第３の発明に係わる撮像システムは、上記第１の発明において、上記画像記録部は上記画像データのタグ情報として上記図鑑データを記録する。
【０００７】
さらに、第４の発明に係わる撮像システムは、上記第１の発明において、上記画像検索部は、検索の信頼度の高い図鑑データを複数検索し、上記検索を行うたびに上記信頼度の高い順に並び替える。
さらに、第５の発明に係わる撮像システムは、上記第４の発明において、上記並び替えられた上記図鑑データのうち、上位の図鑑データを表示部に表示する。
さらに、第６の発明に係わる撮像システムは、上記第４の発明において、上記並び替えられた上記図鑑データのうち、上位の図鑑データを上記画像データのタグ情報として記録する。
【０００８】
さらに、第７の発明に係わる撮像システムは、上記第１の発明において、上記第１画像データは上記撮像部を構成する撮像素子の画素データを間引いて得られたデータである。
さらに、第８の発明に係わる撮像システムは、上記第１の発明において、上記画像検索部は、上記第２レリーズスイッチの動作後に、上記第２画像データに基づいて上記被写体に対応する図鑑データの候補を上記データベースの中から検索する。
さらに、第９の発明に係わる撮像システムは、上記第１の発明において、上記画像検索部は、上記第２レリーズスイッチの動作後に、上記第２画像データの内、ＡＦ合焦領域の画像データに基づいて上記被写体に対応する図鑑データの候補を上記データベースの中から検索する。
【０００９】
第１０の発明に係わる撮像方法は、被写体を撮像して第１画像データまたは第２画像データに変換する変換ステップと、撮影動作を開始するための第１レリーズスイッチの動作に応答して、被写体を撮像して得られた第１画像データの特徴を表す特徴データを抽出する抽出ステップと、上記特徴データに基づいて、図や写真などを中心に事物を系統的に解説した図鑑データが記憶されているデータベースの中から、上記被写体に対応する図鑑データの候補を検索する検索ステップと、上記画像データを記録するために上記第１レリーズスイッチの動作の後に動作する第２レリーズスイッチの動作に応答して、上記被写体を撮像して得られた上記第２画像データを記録する記録ステップと、を備える。
【発明の効果】
【００１０】
本発明によれば、高速に被写体とデータの照合を行うことのできる撮像装置および撮像方法を提供することができる。
【発明を実施するための最良の形態】
【００１１】
以下、図面に従って本発明を適用したデジタルカメラを用いて好ましい実施形態について説明する。このデジタルカメラは、レリーズ釦の半押しを行うと、測光や測距等の撮影準備動作を行い、レリーズ釦の全押しを行うと、被写体像を画像データに変換して記録媒体に記録可能である。また、このデジタルカメラは、撮影に先立って、撮像素子で撮像した被写体像を液晶モニタ等の表示装置に表示することができる。さらに、このデジタルカメラは、動植物等の図鑑データを格納しており、レリーズ釦の半押しを行うと、そのとき取得した撮像画像に基づいて、図鑑データから関連情報を検索し、動植物等の名称等の表示を行う。
【００１２】
図１は本発明の第１実施形態に係わるデジタルカメラの構成を示すブロック図である。このデジタルカメラ内には、被写体像を結像させるためのレンズ１が配置されており、このレンズ１の結像位置付近にＣＣＤ（電荷結合素子：Charge Coupled Device）３が設けられている。なお、このＣＣＤ３の他にＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサ等の二次元撮像素子を用いてもよい。
【００１３】
ＣＣＤ３の出力は、画像信号の読み出しや増幅等を行う撮像回路５に接続されている。撮像回路５の出力は、アナログデジタル変換を行うＡ／Ｄ（Analog Digital）変換器７に接続されている。Ａ／Ｄ変換器７はデータバス９に接続されており、このデータバス９には、フレームメモリ１１、第２のＣＰＵ（Central Processing Unit）１３、記録バッファ１７およびＦＩＦＯ（First In First Out）メモリ２３が接続されている。
【００１４】
フレームメモリ１１は、Ａ／Ｄ変換器７から出力される画像データ等の一時記憶用のメモリであり、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）等のメモリによって構成される。
【００１５】
記録バッファ１７は、記録媒体Ｉ／Ｆ（インターフェース）１９に接続されており、また、記録媒体Ｉ／Ｆ１９は記録媒体２１に接続されている。記録媒体２１は、カメラ本体に内蔵、またはカメラ本体に対して装着自在であり、画像データの記録媒体である。記録バッファ１７および記録媒体Ｉ／Ｆ１９は、画像データの記録・制御を行う。
【００１６】
ＦＩＦＯメモリ２３は、フレームメモリ１１や記録媒体２１に記憶されている画像データを表示する際に使用されるタイミング調整用のメモリである。画像データの表示にあたって、特にタイミング調整が必要なければ、省略してもよい。ＦＩＦＯメモリ２３の出力は、ビデオ出力回路２５とＴＦＴ（Thin Film Transistor）液晶駆動回路３１に接続されている。
【００１７】
ビデオ出力回路２５は、外部出力用のビデオ信号を生成する回路であり、この出力はビデオ出力端子２７に接続されている。外部画像表示装置２９は、記録媒体２１等に記録されている画像データの表示装置であり、外部画像表示装置２９の入力端子はビデオ出力端子２７に接続可能である。
【００１８】
ＴＦＴ液晶駆動回路３１の出力は液晶表示モニタであるＴＦＴパネル３３に接続されており、ＦＩＦＯメモリ２３を通じて入力した画像データは、ＴＦＴパネル３３に表示される。記録媒体２１等に記録されている被写体像は、このＴＦＴパネル３３で再生表示される。また、スルー画（ライブビュー）が表示され、構図決定用のファインダ表示としても使用される。ＴＦＴパネル３３の近傍には、照明用のバックライトユニット３５が配置されている。
【００１９】
カメラ内には、電源の供給源となる電池３９が配置されており、この電池３９の出力は電池状態検出回路３７に接続されている。この電池状態検出回路３７は、電池３９の出力電圧を検出し、この検出結果を第１のＣＰＵ１５に出力する。電池３９は電源回路４１に接続されており、この電源回路４１から各回路に電源が供給される。また、電源回路４１にはバックアップ電源４３が接続されている。バックアップ電源４３は、図示されない時計回路等に電源を供給するための電源である。
【００２０】
第１のＣＰＵ１５には、電源回路４１、ＬＣＤ（Liquid Crystal Display）表示回路４５、キーマトリックス４９、外部有線データＩ／Ｆ５１、ＥＥＰＲＯＭ（Electrically Erasable
Programmable ROM）５５、およびレンズ用のアクチュエータ駆動回路５７が接続されている。ＬＣＤ表示回路４５は、ＬＣＤパネル４７に接続されている。このＬＣＤパネル４７には、第１のＣＰＵ１５から出力されるシャッタ速度や絞り値等の露出制御値や撮影モード等のカメラ制御に関連する情報が表示される。
【００２１】
キーマトリックス４９は、カメラ本体に設けられている各種操作釦、ダイヤル、検出用の各種スイッチ等を含み、ユーザーによる操作状態やカメラの状態を検出するためのスイッチ群である。このスイッチ群の中にレリーズ釦の半押しによってオンとなる１ｓｔレリーズスイッチや、全押しによってオンとなる２ｎｄレリーズスイッチが含まれている。また、メニューモード設定用の操作スイッチ類や、撮影モード設定用のダイヤルや、ＴＦＴパネル３３に記録画像の再生表示を行う再生モードを指示する再生釦に連動するスイッチ等も、スイッチ群に含まれる。外部有線データＩ／Ｆ５１は、ＵＳＢ（Universal Serial Bus）等の外部機器との接続用のデータ端子である。
【００２２】
ＥＥＰＲＯＭ５５は、電気的に書き換え可能な不揮発性メモリであり、フラッシュＲＯＭ等から構成されている。このＥＥＰＲＯＭ５５には、カメラの各種調整値や、第１および第２のＣＰＵ１３、１５の制御用のプログラムが記憶されている。また、後述するように、動植物の図鑑データ５５ａが記憶されている。この図鑑データ５５ａ内には、動植物の画像、特徴データ、名称等、種々の関連情報が記憶されている。
【００２３】
レンズ用アクチュエータ駆動回路５７はアクチュエータ５９に接続されている。アクチュエータ５９は、レンズ１の焦点調節やズーミングを行うためのアクチュエータであり、ＤＣモータ、超音波モータ等によって構成される。
【００２４】
第１のＣＰＵ１５は、このカメラの主としてシステムコントロール機能１５ａを果たしており、カメラ全体の基本動作の制御を行う。また、第１のＣＰＵ１５は、図鑑データ管理機能１５ｂ、検索結果絞込み機能１５ｃ、および検索機能１５ｄ等の機能も有する。
【００２５】
図鑑データ管理機能１５ｂは、ＥＥＰＲＯＭ５５内に格納されている図鑑データ５５ａを管理する機能である。検索機能１５ｄは、ＣＣＤ３によって取得された画像と一致度の高い画像を図鑑データ５５ａから検索する機能である。また、検索結果絞込み機能１５ｃは、検索機能１５ｄによって検索された図鑑データを更に絞り込むための機能である。
【００２６】
第２のＣＰＵ１３は、このカメラの主として画像処理関係の制御を行うＣＰＵであり、画像認識機能１３ａ、画像圧縮伸張機能１３ｂ、図鑑データとの照合機能１３ｃ、および記録媒体アクセス機能１３ｄ等の各種機能を有している。
【００２７】
画像認識機能１３ａは、ＣＣＤ３によって取得された画像の画像認識を行う機能であり、画像の輪郭等の特徴点の抽出を行う。図鑑データとの照合機能１３ｃは、画像認識機能１３ａによって抽出された画像の特徴点を用いて図鑑データと照合を行う。
【００２８】
画像圧縮伸張機能１３ｂは、フレームメモリ１１に記憶された画像データを記録媒体２１に記録するにあたって画像データを圧縮処理する。また、この機能１３ｂは、記録媒体２１に記録されている圧縮形式の画像データをＴＦＴパネル３３に再生表示するにあたって、画像データを伸張処理する。記録媒体アクセス機能１３ｄは、記録媒体２１への画像データの記録および再生のための読み出しを行う。
【００２９】
以上の如く構成された第１実施形態に係わるデジタルカメラの動作について、図２および図３に示すフローチャートを用いて説明する。なお、このデジタルカメラは、スルー画表示、露出制御、自動焦点調節、撮影動作等の種々の制御を行うが、ここでは図鑑データの検索と、その検索結果の表示に関係する処理を中心に説明する。
【００３０】
まず、撮影モードについて、図２に示すフローチャートを用いて説明する。この撮影モードに入ると、図鑑参照撮影モードが設定されているか否かを判定する（Ｓ１）。判定の結果、図鑑参照撮影モードが設定されていなかった場合には、ステップＳ３に進み、通常の撮影のための処理を実行する。
【００３１】
一方、判定の結果、図鑑参照撮影モードが設定されていた場合には、検索候補リストを初期化する（Ｓ５）。検索候補リストは、ＣＣＤ３によって取得された画像と図鑑データ５５ａとを照合・検索し、一致度の高い図鑑データを、一致度の高い順に複数記憶しておくためのリストである。
【００３２】
次に、レリーズ釦が半押しされたか、すなわち、１ｓｔレリーズが押されたか否かの判定を行う（Ｓ７）。判定の結果、押されていなかった場合には、操作されるまで待つ待機状態となり、一方、操作されると次にスルー画を静止画として取得する（Ｓ９）。ＣＣＤ３から取得した画像をＴＦＴパネル３３にスルー画として表示するが、このとき得られた画像データ（以下、静止画という）を用いて、ステップＳ１１以下において図鑑データ５５ａとの照合・検索を行う。
【００３３】
次に、ステップＳ９において取得した静止画を画像解析し、被写体の特徴点を抽出する（Ｓ１１）。被写体の特徴点の抽出としては、種々の方法を採用しても良いが、ここでは、輪郭線の抽出を行う。続いて、レンズ情報から被写体の大きさの推測を行う（Ｓ１３）。すなわち、デジタルカメラのレンズ１の焦点距離情報、ピント位置およびＣＣＤ３上での大きさ等に基づいて、被写体の大きさの推定を行う。
【００３４】
ステップＳ１１において抽出した被写体の特徴点、およびステップＳ１３において推測した被写体の大きさの情報を用い、図鑑データ５５ａの中からステップＳ９で取得した画像と照合度の高い図鑑データを検索し、検索候補リストの作成を行う（Ｓ１５）。この検索候補リストの作成の詳細については、図３を用いて後述する。
【００３５】
検索候補リストの作成が終わると、次に、検索候補リストの中から一致度の高い上位３つの図鑑データを、図５に示すように、ＴＦＴパネル３３上に表示する（Ｓ１７）。すなわち、ＴＦＴパネル３３には、ＣＣＤ３によって周期的に取得される被写体像がスルー画表示部３３ａに動画表示され、また、スルー画表示部３３ａの左側の候補表示部３３ｂ、３３ｃ、３３ｄに、検索候補リストの上位３つの図鑑データが表示される。この図鑑データとしては、候補の画像およびその説明が表示される。
【００３６】
続いて、レリーズ釦が全押しされたか、すなわち、２ｎｄレリーズが押されたか否かの判定を行う（Ｓ１９）。判定の結果、押されていなかった場合には、１ｓｔレリーズが再度、押されたか否かの判定を行う（Ｓ２１）。判定の結果、再度、押されていなかった場合、すなわち、１ｓｔレリーズが押されたままである場合には、撮影モードが終了か否かを判定する（Ｓ２５）。判定の結果、撮影モードが終了でない場合には、ステップＳ９に戻り、前述のステップを繰り返し、一方、撮影モードが終了の場合には、元のフローにリターンする。
【００３７】
ステップＳ２１における判定の結果、１ｓｔレリーズが再度、押された場合には、検索候補リストの初期化（リセット）を行い（Ｓ２３）、前述した撮影モードが終了か否かの判定を行う（Ｓ２５）。また、ステップＳ１９における判定の結果、２ｎｄレリーズが操作された場合には、撮影動作を行う（Ｓ３１）。撮影動作は、ＣＣＤ３上に結像した被写体像を光電変換し、この光電変換信号に基づく画像データを取得し、記録媒体２１に記録を行う。撮影動作が終わると、前述のステップＳ２３に進み、検索候補リストのリセットを行い、撮影モードが終了していなければ、ステップＳ９に戻り、一方、撮影モードが終了であれば元のフローにリターンする。
【００３８】
このように、１ｓｔレリーズが押されると（Ｓ７）、取得した静止画に基づいて被写体の特徴点を抽出し、被写体の大きさを推測し、これらの情報に基づいて図鑑データ５５ａの中から一致度の高い動植物等の図鑑データを検索し、検索候補リストを作成する（Ｓ１５）。１ｓｔレリーズが押されている限り、ステップＳ９に戻り、静止画を更新し、更新された静止画に基づいて検索を繰り返す。また、１ｓｔレリーズが、再度、押されると、検索候補リストをリセットし（Ｓ２３）、ステップＳ９に戻り、再度、検索を繰り返す。
【００３９】
次に、ステップＳ１５における検索候補リスト作成のサブルーチンについて、図３に示すフローチャートと、図４に示す検索候補リスト作成のイメージ図を用いて説明する。まず、検索候補リストが初期化されているか否かについて判定する（Ｓ５１）。前述したように、ステップＳ７またはステップＳ２３において、検索候補リストが初期化されるので、この直後にステップＳ１５を実行する場合には、検索候補リストは初期化されていると判定される。
【００４０】
ステップＳ５１における判定の結果、初期化されていた場合には、被写体の大きさ情報と特徴点（輪郭情報）を使用して図鑑データ５５ａと照合を行う（Ｓ５３）。ここでは、図鑑データ５５ａとして登録されている全てのデータ（例えば、登録件数として１００００件程度）と、ステップＳ９において取得した静止画との照合を行う（図４参照）。この後、ここで照合された結果を用いて、同一性を数値化する（Ｓ５５）。数値化にあたっては、同一性が高い場合ほど、数値が大きくなるようにする。
【００４１】
次に、同一可能性の数値が大きいもののリストを生成する（Ｓ５７）。すなわち、同一性の数値の順に上位から複数（例えば、１００件程度）を選択し、数値の順に並べる。すなわち、候補の絞込みを行う。ここで、選択された図鑑データを初期検索候補リスト５５ｂとして、カメラ内のメモリ（例えば、ＥＥＰＲＯＭ５５、または第１のＣＰＵ内のＲＡＭ等）に保持する（Ｓ５９）。カメラ内のメモリに保持すると、元のフローにリターンする。
【００４２】
ステップＳ５１における判定の結果、検索候補リストが初期化されていなかった場合、すなわち、少なくとも一度、ステップＳ１５における検索候補リスト作成のサブルーチンを実行した場合には、被写体の大きさ情報と特徴点（輪郭情報）を使用して検索候補リスト内のデータと照合する（Ｓ６３）。ここでは、初期検索候補リスト５５ｂまたは検索候補リスト５５ｃ内のデータと、ステップＳ９で取得した静止画との照合を行う。続いて、ステップＳ５５と同様に、照合結果の同一可能性を数値化する（Ｓ６５）。
【００４３】
次に、今回求めた同一可能性の数値を、これまで得た数値に加算する（Ｓ６７）。そして、更新された同一可能性の数値を大きい順番に並び替えリストを修正する（Ｓ６９）。すなわち、検索候補リスト５５ｃ内において、候補の並び替えを行う。リストの修正が終わると、元のフローにリターンする。
【００４４】
前述したように、図３に示す検索候補リスト作成は、図２に示すフローにおいて、１ｓｔレリーズが押されている限り、ステップＳ９において静止画を取得するたびに、繰り返し実行される。そして、検索候補リスト作成のサブルーチンが繰り返されるたびに、検索候補リスト５５ｃ内の候補の並び替えが行われる。
【００４５】
このように、２ｎｄレリーズが操作される前に、図鑑データと一致度の高い候補の検索を繰り返し行なうので、精度の高い検索が可能となり、被写体と一致度の高い図鑑データの表示が可能となる。
【００４６】
なお、本実施形態においては、ステップＳ１７において、上位３つの図鑑データを表示するようにしていたが、これは例示であり、上位１つ若しくは２つ、または４つ以上の図鑑データを表示するようにしても良い。また、ステップＳ１１の特徴点の抽出として輪郭線を抽出するようにしていたが、これに限らず、例えば、昆虫なら目、羽、足の位置等、対象物によって異なるようにしても良い。
【００４７】
次に、本発明の第２実施形態について、図６および図７を用いて説明する。第１実施形態においては、検索された候補の図鑑データをＴＦＴパネル３３に表示していたが、第２実施形態においては、検索された候補をタグ情報として生成し、これを画像データと共に記録媒体２１に記録するようにしている。
【００４８】
第２実施形態は、図１に示す第１実施形態の構成と同様であり、図２に示した撮影モードのフローチャートを図６に示すフローチャートに置き換える点が相違しているだけであるので、相違点を中心に説明する。なお、図６のフローチャートにおいて、図２と同様の処理を行うステップについては、同一のステップ番号を付し、詳しい説明は省略する。
【００４９】
撮影モードに入ると、被写体認識撮影モードか否かの判定を行う（Ｓ２）。この被写体認識撮影モードは、メニューモード設定釦等の操作によって選択され、このステップにおいては、メニューモードとして被写体認識撮影モードが設定されているか否かを判定する。判定の結果、被写体認識撮影モードが設定されていなかった場合には、第１実施形態と同様に、通常行われる通常撮影モードを実行する（Ｓ３）。
【００５０】
ステップＳ２において、被写体認識撮影モードが設定されていた場合には、第１実施形態のステップＳ５からステップＳ１５と同様の処理を行う。なお、ステップＳ１５の検索候補リスト作成のサブルーチンは、第１実施形態と同様、図３に示すフローチャートである。
【００５１】
続いて、候補の上位３つの候補をタグ情報として生成する（Ｓ１８）。タグ情報は、画像データと共に記録され、画像を検索する際に使用される。タグ情報の生成が終わると、次に、第１実施形態と同様に、ステップＳ１９、ステップＳ２１、ステップＳ２５等が実行される。すなわち、２ｎｄレリーズが押されず、１ｓｔレリーズが押され続けている限り、取得した静止画に基づいて図鑑データとの一致度が検索される。そして、検索結果に基づいて候補の順番の並び替えがなされる。また、１ｓｔレリーズスイッチが再度押されなおされると、検索候補リストをリセットしてから（Ｓ２３）、図鑑データとの一致度が検索される。
【００５２】
ステップＳ１９における判定の結果、２ｎｄレリーズが押された場合には、第１実施形態におけるステップＳ３１と同様に撮影動作が行われる。撮影動作が終わると、続いてタグ情報を記録画像に埋め込みファイルを媒体に記録する（Ｓ３５）。すなわち、ステップＳ１８において生成されたタグ情報が画像データと共に画像ファイルを構成する。この画像ファイルには、図７（Ａ）に示すように、ファイルヘッダ部７１ａに図鑑データ５５ａから検索された上位３つの被写体情報が記録され、画像データ部７１ｂに画像データが記録される。
【００５３】
なお、図７（Ｂ）はタグ情報として記録される被写体情報（図鑑データ）の例を示している。第１の例は、被写体の画像が花の場合であり、被写体候補１として「朝顔」、被写体候補２として「ユリ」、被写体候補３として「ハイビスカス」を候補として検索した例である。第２の例は、被写体の画像が昆虫の場合であり、被写体候補１として「カブトムシ（メス）」、被写体候補２として「カナブン」、被写体候補３として「カメムシ」を候補として検索した例である。
【００５４】
画像ファイルの記録が終了すると、ステップＳ２３において検索候補リストをリセットし、撮影モードが終了したかを判定し（Ｓ２５）、撮影モードが終了していなければ、ステップＳ９に戻り、一方、判定の結果、撮影モードが終了であれば、元のフローにリターンする。
【００５５】
このように、第２実施形態においては、第１実施形態と同様に、１ｓｔレリーズが押されている限り、ステップＳ９において静止画を取得するたびに、検索候補リスト作成が繰り返し実行される。検索候補リスト作成のサブルーチンが繰り返されるたびに、検索候補リスト５５ｃ内の候補の並び替えが行われる（図４参照）。
【００５６】
複数回に亘って検索が行われることから、１回しか検索を行わない場合に比較し、精度の高い検索を行うことができる。この検索結果がタグ情報として記録され、撮影後、記録されたタグ情報を使用することにより、容易に画像検索を行うことができる。すなわち、図７（Ｂ）の例で説明すると、「朝顔」、「ユリ」、または「ハイビスカス」の検索ワードを入れることにより、第１の例の被写体の画像を検索することができ、また、「カブトムシ（メス）」、「カナブン」、または「カメムシ」の検索ワードを入れることにより、第２の例の被写体の画像を検索することができる。
【００５７】
なお、第２実施形態においても、第１実施形態のステップＳ１７と同様に、１ｓｔレリーズが押され、撮影動作準備中に、検索結果を表示するようにしてもよい。このステップを追加することにより、検索結果に基づいたタグ情報（被写体情報）を記録媒体２１に記録すると共に、候補の画像がＴＦＴパネル３３に表示されることから、撮影者は記録されるタグ情報を確認することができ便利である。
【００５８】
次に、本発明の第３実施形態について、図８および図９を用いて説明する。第１実施形態および第２実施形態においては、取得された静止画の全データを用いて検索を行っていたが、第３実施形態においては、２ｎｄレリーズが押される前までは、間引いた静止画の画像データを用いて、検索を行うようにしている。
【００５９】
第３実施形態は、図１に示す第１および第２実施形態の構成を図８に示す構成に置き換え、図６に示した撮影モードのフローチャートを図８に示すフローチャートに置き換える点が相違している。両実施形態は同一の部分もあることから、相違点を中心に説明する。
【００６０】
図８は、第３実施形態に係わるデジタルカメラの構成を示すブロック図である。図１に示したブロック図と同一の構成については同一の符号を付し、詳しい説明は省略する。相違しているのは、第１のＣＰＵ１５内にＡＦ合焦エリア判別機能１５ｅが追加され、また第２のＣＰＵ１３内に輪郭抽出機能１３ｅと、画像縮小機能１３ｆが追加されている点である。
【００６１】
ＡＦ合焦エリア判別機能１５ｅは、ピントの合っている領域を判別する機能であり、高周波成分の高い領域か否かに基づいて判別する。輪郭抽出機能１３ｅは、静止画から輪郭線のみを抽出する機能であり、第１および第２実施形態においては、画像認識機能１３ａが兼用していた。画像縮小機能１３ｆは、静止画から画像データを間引き、画素数を少なくした画像を生成する機能である。これら以外の構成については、図１に示した第１および第２実施形態の構成と同様である。
【００６２】
このように構成された第３実施形態の動作を図９に示すフローチャートを用いて説明する。前述したように図６に示したフローチャートを図９に示すフローチャートに置き換えただけであるので、図６に示したフローチャートとの相違点を中心に説明する。ステップＳ２〜ステップＳ９までは図６のフローと同様である。続いて、画像縮小機能１３ｅによって静止画を間引いて高速処理用画像を生成する（Ｓ１０）。このあと、ステップＳ１１〜ステップＳ２５までも図６のフローと同様である。
【００６３】
ステップＳ１９における判定の結果、２ｎｄレリーズが押された場合、ステップＳ３１で撮影動作を行い、ステップＳ３５においてタグ情報を記録画像に埋め込みファイルを記録媒体２１に記録することは、図６のフローと同様である。ただ、第３実施形態においては、ステップＳ３１とステップＳ３５の間に、最終撮影画像に基づいて上位候補を絞り込むようにしている（Ｓ３３）点が相違している。このステップでは、最終撮影画像の全画像データを用い、ステップＳ１１、Ｓ１３、Ｓ１５と同様に特徴点や大きさ情報を取得し、図鑑データ５５ａと照合・検索を行い、検索候補のリストを作成する。
【００６４】
このようなフローであるので、第３実施形態においても、１ｓｔレリーズが押されている限り、ステップＳ９において取得した静止画をステップＳ１０において間引き高速処理用画像を生成し、この生成された画像を用いて、第１および第２実施形態と同様にして、図鑑データ５５ａと一致度の高い図鑑データの検索を行っている。
【００６５】
このため２ｎｄレリーズが押されるまでは、繰り返し検索が行われ、精度の高い図鑑データを検出することができる。また、検索にあたっては、画像を間引いていることから、画素数が少なくなり高速に検索を行うことができる。
【００６６】
また、本実施形態においては、２ｎｄレリーズが押された後は、最終撮影画像を用いて検索を行い、上記候補を絞り込むようにしている。２ｎｄレリーズが押されるまでは、高速用に間引いた画像を用いていたが、最終的には画素数の多い画像を用いて検索を行うことから、精度の高い検索結果を得ることができる。
【００６７】
なお、第３実施形態においても、第１実施形態と同様に、検索結果に基づいて候補の表示を行うようにしても良い。候補の表示を行うことにより記録媒体２１に記録されるタグ情報の内容を確認することができ、便利である。
【００６８】
次に、本発明の第４実施形態について、図１０を用いて説明する。第３実施形態においては、２ｎｄレリーズが押された後に、最終撮影画像の全体を用いて検索の上位候補の絞込みを行っていたが、第４実施形態においては、２ｎｄレリーズが押された後に、ＡＦ合焦領域の画像のみを用いて検索の上位候補の絞込みを行うようにしている。
【００６９】
第４実施形態は、図８に示す第３実施形態の構成と同様であり、図９に示した撮影モードのフローチャートを図１０に示すフローチャートに置き換える点が相違しているだけであるので、相違点を中心に説明する。なお、図１０のフローチャートにおいて、図９と同様の処理を行うステップについては、同一のステップ番号を付し、詳しい説明は省略する。
【００７０】
図１０に示すフローにおいて、ステップＳ２〜ステップＳ２５は、図９と同様であり、１ｓｔレリーズが押され、２ｎｄレリーズが押されるまでは、静止画を間引いて生成された高速処理用画像を用いて、被写体と一致する図鑑データの検索を行う。ステップＳ１９において、２ｎｄレリーズが押されたと判定されると、第３実施形態と同様に撮影動作を実行し（Ｓ３１）、撮影動作が終わると、最終撮影画像のＡＦ合焦領域のみの画像に基づいて上位候補の絞込みを行う（Ｓ３４）。この絞込みが終わると、第３実施形態と同様に、ステップＳ３５以下を実行する。
【００７１】
このようなフローであるので、第４実施形態においても、１ｓｔレリーズが押されている限り、ステップＳ９において取得した静止画をステップＳ１０において間引き高速処理用画像を生成し、この生成された画像を用いて、第１〜第３実施形態と同様にして、図鑑データ５５ａと一致度の高い図鑑データの検索を行っている。
【００７２】
また、２ｎｄレリーズが押されると、最終撮影画像のＡＦ合焦領域のみの画像に基づいて、一致度の高い図鑑データの検索を行っている。ＡＦ合焦領域には主被写体があることから、この主被写体について図鑑データを検索すればよく、また、画像の領域を絞ることにより、より高精度でかつ高速に処理することができる。
【００７３】
なお、第４実施形態においても、第１実施形態と同様に、検索結果に基づいて候補の表示を行うようにしても良い。候補の表示を行うことにより記録媒体２１に記録されるタグ情報の内容を確認することができ、便利である。
【００７４】
以上説明したように、本発明の各実施形態においては、1ｓｔレリーズの動作に応答して、ＣＣＤ３から取得した画像の特徴を表す特徴点情報に基づいて、被写体に対応する図鑑データの候補をデータベースの中から検索するようにしている。実際の撮影動作を開始させる２ｎｄレリーズが操作される前から図鑑データの候補を検索していることから、高速に被写体とデータの照合を行うことができる。
【００７５】
また、本発明の各実施形態においては、１ｓｔレリーズの動作後、２ｎｄレリーズの動作までの間、被写体に対応する図鑑データの候補をデータベースの中から、繰り返し検索を行っている。繰り返し検索を行うことにより、１回しか検索を行わない場合に比較し、精度の高い検索を行うことができる。
【００７６】
なお、本発明の各実施形態においては、撮像装置として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、また、携帯電話や携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラ等の撮像装置でも勿論構わない。
【００７７】
本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、各実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【００７８】
【図１】本発明の第１実施形態に係わるデジタルカメラの構成を示すブロック図である。
【図２】本発明の第１実施形態に係わるデジタルカメラの撮影モードを示すフローチャートである。
【図３】本発明の第１実施形態に係わるデジタルカメラの検索候補リスト生成のサブルーチンを示すフローチャートである。
【図４】本発明の第１実施形態に係わるデジタルカメラにおける検索候補リスト生成を説明するためのイメージ図である。
【図５】本発明の第１実施形態に係わるデジタルカメラにおいて、図鑑表示の一例を示す図である。
【図６】本発明の第２実施形態に係わるデジタルカメラの撮影モードを示すフローチャートである。
【図７】本発明の第２実施形態に係わるデジタルカメラにおいて、タグ情報を説明する図であって、（Ａ）は画像ファイル構造を示し、（Ｂ）はファイルヘッダに記録される被写体情報（タグ情報）の例を示す図である。
【図８】本発明の第３実施形態に係わるデジタルカメラの構成を示すブロック図である。
【図９】本発明の第３実施形態に係わるデジタルカメラの撮影モードを示すフローチャートである。
【図１０】本発明の第４実施形態に係わるデジタルカメラの撮影モードを示すフローチャートである。
【符号の説明】
【００７９】
１・・・レンズ、３・・・ＣＣＤ、５・・・撮像回路、７・・・Ａ／Ｄ変換器、９・・・データバス、１１・・・フレームメモリ、１３・・・第２のＣＰＵ、１３ａ・・・画像認識機能、１３ｂ・・・画像圧縮伸張機能、１３ｃ・・・図鑑データとの照合機能、１３ｄ・・・記録媒体アクセス機能、１３ｅ・・・輪郭抽出機能、１３ｆ・・・画像縮小機能、１５・・・第１のＣＰＵ、１５ａ・・・システムコントロール機能、１５ｂ・・・図鑑データ管理機能、１５ｃ・・・検索結果絞込み機能、１５ｄ・・・検索機能、１５ｅ・・・ＡＦ合焦エリア判別機能、１７・・・記録バッファ、１９・・・記録媒体Ｉ／Ｆ、２１・・・記録媒体、２３・・・ＦＩＦＯメモリ、２５・・・ビデオ出力回路、２７・・・ビデオ出力端子、２９・・・外部画像表示装置、３１・・・ＴＦＴ液晶駆動回路、３３・・・ＴＦＴパネル、３３ａ・・・スルー画表示部、３３ｂ・・・候補表示部、３３ｃ・・・候補表示部、３３ｄ・・・候補表示部、３５・・・バックライトユニット、３７・・・電池状態検出回路、３９・・・電池、４１・・・電源回路、４３・・・バックアップ電源、４５・・・ＬＣＤ表示回路、４７・・・ＬＣＤパネル、４９・・・キーマトリックス、５１・・・外部優先データＩ／Ｆ、５５・・・ＥＥＰＲＯＭ、５５ａ・・・図鑑データ、５７・・・レンズ用アクチュエータ駆動回路、５９・・・アクチュエータ、７１ａ・・・ファイルヘッダ部、７１ｂ・・・画像データ部
【図１】
2009147481.tif 000003
【図２】
2009147481.tif 000004
【図３】
2009147481.tif 000005
【図４】
2009147481.tif 000006
【図５】
2009147481.tif 000007
【図６】
2009147481.tif 000008
【図７】
2009147481.tif 000009
【図８】
2009147481.tif 000010
【図９】
2009147481.tif 000011
【図１０】
2009147481.tif 000012