(57)【要約】【課題】  撮影者の画像や音声をもとに情報を検索する際において、認識間違いの少ない画像表示装置、撮影装置、画像検索システム、画像検索方法、プログラム及び記録媒体を提供する。【解決手段】  被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得ステップと、情報取得手段で取得した被写体画像と、第２の画像又は音声データの少なくとも一方とを記憶し管理する管理ステップと、被写体画像の縮小画像と、第２の画像あるいはその縮小画像又は音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、インデックス表示手段で表示されたインデックスを選択するインデックス選択ステップと、インデックス選択手段で選択されたインデックスに対応した被写体画像を表示する画像表示ステップとをコンピュータに実行させるための画像検索プログラムである。【選択図】    図１２
2006195556.tif 000002
【特許請求の範囲】
【請求項１】
被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得手段と、
前記情報取得手段で取得した前記被写体画像と、前記第２の画像又は前記音声データの少なくとも一方とを記憶し管理する管理手段と、
前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示手段と、
前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択手段と、
インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示手段と、
を有することを特徴とする画像表示装置。
【請求項２】
前記第２の画像は、前記被写体画像を撮影した撮影者を撮影した画像であり、
前記音声データは、前記被写体画像を撮影した撮影者が発生した音声であることを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記管理手段は、
複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出手段と、
前記類似度算出手段が算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索手段とを有し、
前記インデックス表示手段は、前記検索手段で並べ替えられたインデックスを表示することを特徴とする請求項２に記載の画像表示装置。
【請求項４】
前記類似度算出手段は、前記第２の画像の縮小画像を用いて第１の類似度を算出する第１の類似度算出手段と、前記音声データの波形情報を用いて第２の類似度を算出する第２の類似度算出手段とを更に有し、
前記検索手段は、前記第１の類似度又は第２の類似度のいずれかに基づいて、前記インデックスを並び替えることを特徴とする請求項３の画像表示装置。
【請求項５】
被写体を撮影する第１の撮影手段と、
撮影者を撮影する第２の撮影手段と、
撮影者の音声を録音する録音手段と、
前記第１の撮影手段で撮影した第１の画像と、前記第２の撮影手段で撮影した第２の画像と、前記録音手段で録音した音声データとを送信する送信手段とを有し、
前記第２の撮影手段は、前記第１の撮影手段が被写体を撮影した後所定の時間以内に画像を撮影し、
前記録音手段は、前記第１の撮影手段が被写体を撮影した後所定の時間の間だけ音声を録音することを特徴とする撮影装置。
【請求項６】
撮影装置と画像表示装置とを備えた画像検索システムであって、
前記撮影装置は、
被写体を撮影する第１の撮影手段と、
撮影者を撮影する第２の撮影手段と、
撮影者の音声を録音する録音手段と、
前記第１の撮影手段で撮影した第１の画像と、前記第２の撮影手段で撮影した第２の画像と、前記録音手段で録音した音声データとを送信する送信手段とを有し、
前記画像表示装置は、
前記撮影装置から、前記第１の画像である被写体画像と、その被写体画像の撮影者の画像である前記第２の画像又はその被写体画像の撮影者の音声である前記音声データとを取得する情報取得手段と、
前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示手段と、
前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択手段と、
インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示手段とを有すること、
を特徴とする画像検索システム。
【請求項７】
前記画像表示装置は、
複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出手段と、
前記類似度算出手段が算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索手段とを有し、
前記インデックス表示手段は、前記検索手段で並べ替えられたインデックスを表示することを特徴とする請求項６に記載の画像検索システム。
【請求項８】
画像表示プログラムにおいて、
被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得ステップと、
前記情報取得手段で取得した前記被写体画像と、前記第２の画像又は前記音声データの少なくとも一方とを記憶し管理する管理ステップと、
前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、
前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択ステップと、
インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示ステップと、
をコンピュータに実行させるためのプログラム。
【請求項９】
前記第２の画像は、前記被写体画像を撮影した撮影者を撮影した画像であり、
前記音声データは、前記被写体画像を撮影した撮影者が発生した音声であることを特徴とする請求項８に記載のプログラム。
【請求項１０】
前記管理ステップは、
複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出ステップと、
前記類似度算出ステップで算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索ステップとを有し、
前記インデックス表示ステップは、前記検索ステップで並べ替えられたインデックスを表示することを特徴とする請求項９に記載のプログラム。
【請求項１１】
前記類似度算出ステップは、前記第２の画像の縮小画像を用いて第１の類似度を算出する第１の類似度算出ステップと、前記音声データの波形情報を用いて第２の類似度を算出する第２の類似度算出ステップとを更に有し、
前記検索ステップは、前記第１の類似度又は第２の類似度のいずれかに基づいて、前記インデックスを並び替えることを特徴とする請求項１０に記載のプログラム。
【請求項１２】
被写体を撮影する第１の撮影ステップと、
撮影者を撮影する第２の撮影ステップと、
撮影者の音声を録音する録音ステップと、
前記第１の撮影ステップで撮影した第１の画像と、前記第２の撮影ステップで撮影した第２の画像と、前記録音ステップで録音した音声データとを送信する送信ステップと
をコンピュータに実行させるための撮影装置のプログラムであって、
前記第２の撮影ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間以内に画像を撮影し、
前記録音ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間の間だけ音声を録音することを特徴とするプログラム。
【請求項１３】
画像表示プログラムを記録した記録媒体において、
被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得ステップと、
前記情報取得手段で取得した前記被写体画像と、前記第２の画像又は前記音声データの少なくとも一方とを記憶し管理する管理ステップと、
前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、
前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択ステップと、
インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示ステップと、
をコンピュータに実行させるためのプログラムを記録した記録媒体。
【請求項１４】
前記第２の画像は、前記被写体画像を撮影した撮影者を撮影した画像であり、
前記音声データは、前記被写体画像を撮影した撮影者が発生した音声であることを特徴とする請求項１３に記載の記録媒体。
【請求項１５】
前記管理ステップは、
複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出ステップと、
前記類似度算出ステップで算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索ステップとを有し、
前記インデックス表示ステップは、前記検索ステップで並べ替えられたインデックスを表示することを特徴とする請求項１４に記載の記録媒体。
【請求項１６】
前記類似度算出ステップは、前記第２の画像の縮小画像を用いて第１の類似度を算出する第１の類似度算出ステップと、前記音声データの波形情報を用いて第２の類似度を算出する第２の類似度算出ステップとを更に有し、
前記検索ステップは、前記第１の類似度又は第２の類似度のいずれかに基づいて、前記インデックスを並び替えることを特徴とする請求項１５に記載の記録媒体。
【請求項１７】
被写体を撮影する第１の撮影ステップと、
撮影者を撮影する第２の撮影ステップと、
撮影者の音声を録音する録音ステップと、
前記第１の撮影ステップで撮影した第１の画像と、前記第２の撮影ステップで撮影した第２の画像と、前記録音ステップで録音した音声データとを送信する送信ステップと
をコンピュータに実行させるための撮影装置のプログラムを記録した記録媒体であって、
前記第２の撮影ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間以内に画像を撮影し、
前記録音ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間の間だけ音声を録音することを特徴とする記録媒体。
【請求項１８】
被写体を撮影する第１の撮影ステップと、
撮影者を撮影する第２の撮影ステップと、
撮影者の音声を録音する録音ステップと、
前記第１の撮影ステップで撮影した第１の画像である被写体画像と、前記第２の撮影ステップで撮影した第２の画像であるその被写体画像の撮影者の画像と、前記録音ステップで録音した音声データであるその被写体画像の撮影者の音声とを取得する情報取得ステップと、
前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、
前記インデックス表示ステップで表示された前記インデックスを選択するインデックス選択ステップと、
インデックス選択ステップで選択された前記インデックスに対応した前記被写体画像を表示する画像表示ステップとを有すること、
を特徴とする画像検索方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像などの情報を検索する技術に関し、特に撮影者の画像や音声を基に情報を検索する方法に関する。
【背景技術】
【０００２】
従来、デジタルカメラなどで撮影され、コンピュータに記憶された大量の画像から所望の画像を検索して表示するには、記憶されている画像のインデックス画像の一覧を表示させて探したり、画像のファイル名や撮影日時の情報や撮影した画像にキーワードを付与してそのキーワードで検索することが一般的であった。
【０００３】
しかしながら、画像に適切なキーワードを付与することは面倒である。そのため、画像管理ソフトがキーワード検索機能を有していたとしても、業務で画像を管理する場合を除いては、その機能は利用されていない場合が多く見受けられた。また、ファイル名や撮影日付情報を利用して検索する方法では、ファイル名や撮影日付を覚えておく必要があり、長期間にわたって保存された画像を検索するには不適当であった。
【０００４】
また、インデックス画像を一覧する場合は、識別のためにはインデックス画像のサイズをあまり小さくできず、ディスプレー画面に一度に表示できる画像数が限られるので、画像数があまり多くない場合には有効であるが、大量の画像から検索するには目的の画像を見つけ出すには何度も表示を更新する必要があり、非効率的であった。
【０００５】
特許文献１には、撮影時に撮影者を特定しその情報を画像に付与して検索に利用するシステムが提案されている。このシステムでは、撮影時に撮影者を撮影しその画像から撮影者を特定したり、撮影時に発せられた音声から撮影者を特定しその特定情報を画像に関連付けて記憶する。
【特許文献１】特開２００１−３３３３６０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１記載のシステムを使用すると、撮影者に基づいて検索することができる。しかし、一般に自然画像や音声の認識率は、制御された環境以外の環境下では低い。従って、同システムを使用しても撮影者を間違って特定する可能性が高い。そして、撮影者を誤って認識する確率が高いと、結果として誤検索の確率も大きくなる。
【０００７】
本発明は係る事情に鑑みてなされたものであって、撮影者の画像や音声をもとに情報を検索する際において、認識間違いの少ない画像表示装置、撮影装置、画像検索システム、画像検索方法、プログラム及び記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するための、本発明に係る請求項１に記載の画像表示装置は、被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得手段と、前記情報取得手段で取得した前記被写体画像と、前記第２の画像又は前記音声データの少なくとも一方とを記憶し管理する管理手段と、前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示手段と、前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択手段と、インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示手段と、を有する。
【０００９】
また、本発明に係る請求項２に記載の画像表示装置は、上記記載の発明である画像表示装置において、前記第２の画像は、前記被写体画像を撮影した撮影者を撮影した画像であり、前記音声データは、前記被写体画像を撮影した撮影者が発生した音声である。
【００１０】
また、本発明に係る請求項３に記載の画像表示装置は、上記記載の発明である画像表示装置において、前記管理手段は、複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出手段と、前記類似度算出手段が算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索手段とを有し、前記インデックス表示手段は、前記検索手段で並べ替えられたインデックスを表示する。
【００１１】
また、本発明に係る請求項４に記載の画像表示装置は、上記記載の発明である画像表示装置において、前記類似度算出手段は、前記第２の画像の縮小画像を用いて第１の類似度を算出する第１の類似度算出手段と、前記音声データの波形情報を用いて第２の類似度を算出する第２の類似度算出手段とを更に有し、前記検索手段は、前記第１の類似度又は第２の類似度のいずれかに基づいて、前記インデックスを並び替える。
【００１２】
また、本発明に係る請求項５に記載の撮影装置は、被写体を撮影する第１の撮影手段と、  撮影者を撮影する第２の撮影手段と、撮影者の音声を録音する録音手段と、前記第１の撮影手段で撮影した第１の画像と、前記第２の撮影手段で撮影した第２の画像と、前記録音手段で録音した音声データとを送信する送信手段とを有し、前記第２の撮影手段は、前記第１の撮影手段が被写体を撮影した後所定の時間以内に画像を撮影し、前記録音手段は、前記第１の撮影手段が被写体を撮影した後所定の時間の間だけ音声を録音する。
【００１３】
また、本発明に係る請求項６に記載の画像検索システムは、撮影装置と画像表示装置とを備えた画像検索システムであって、前記撮影装置は、被写体を撮影する第１の撮影手段と、撮影者を撮影する第２の撮影手段と、撮影者の音声を録音する録音手段と、前記第１の撮影手段で撮影した第１の画像と、前記第２の撮影手段で撮影した第２の画像と、前記録音手段で録音した音声データとを送信する送信手段とを有し、前記画像表示装置は、    前記撮影装置から、前記第１の画像である被写体画像と、その被写体画像の撮影者の画像である前記第２の画像又はその被写体画像の撮影者の音声である前記音声データとを取得する情報取得手段と、前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示手段と、前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択手段と、インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示手段とを有する。
【００１４】
また、本発明に係る請求項７に記載の画像検索システムは、上記記載の発明である画像検索システムであって、前記画像表示装置は、複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出手段と、前記類似度算出手段が算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索手段とを有し、前記インデックス表示手段は、前記検索手段で並べ替えられたインデックスを表示する。
【００１５】
また、本発明に係る請求項８に記載のプログラムは、画像表示プログラムにおいて、被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得ステップと、前記情報取得手段で取得した前記被写体画像と、前記第２の画像又は前記音声データの少なくとも一方とを記憶し管理する管理ステップと、  前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択ステップと、インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示ステップと、をコンピュータに実行させる。
【００１６】
また、本発明に係る請求項９に記載のプログラムは、上記記載の発明である画像表示プログラムにおいて、前記第２の画像は、前記被写体画像を撮影した撮影者を撮影した画像であり、前記音声データは、前記被写体画像を撮影した撮影者が発生した音声である。
【００１７】
また、本発明に係る請求項１０に記載のプログラムは、上記記載の発明である画像表示プログラムにおいて、前記管理ステップは、複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出ステップと、前記類似度算出ステップで算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索ステップとを有し、前記インデックス表示ステップは、前記検索ステップで並べ替えられたインデックスを表示する。
【００１８】
また、本発明に係る請求項１１に記載のプログラムは、上記記載の発明である画像表示プログラムにおいて、前記類似度算出ステップは、前記第２の画像の縮小画像を用いて第１の類似度を算出する第１の類似度算出ステップと、前記音声データの波形情報を用いて第２の類似度を算出する第２の類似度算出ステップとを更に有し、前記検索ステップは、前記第１の類似度又は第２の類似度のいずれかに基づいて、前記インデックスを並び替える。
【００１９】
また、本発明に係る請求項１２に記載のプログラムは、被写体を撮影する第１の撮影ステップと、撮影者を撮影する第２の撮影ステップと、撮影者の音声を録音する録音ステップと、前記第１の撮影ステップで撮影した第１の画像と、前記第２の撮影ステップで撮影した第２の画像と、前記録音ステップで録音した音声データとを送信する送信ステップとをコンピュータに実行させるための撮影装置のプログラムであって、前記第２の撮影ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間以内に画像を撮影し、前記録音ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間の間だけ音声を録音する。
【００２０】
また、本発明に係る請求項１３に記載の記録媒体は、画像表示プログラムを記録した記録媒体において、被写体画像と、その被写体画像に関連付けられた第２の画像又は音声データの少なくとも一方とを取得する情報取得ステップと、前記情報取得手段で取得した前記被写体画像と、前記第２の画像又は前記音声データの少なくとも一方とを記憶し管理する管理ステップと、前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、前記インデックス表示手段で表示された前記インデックスを選択するインデックス選択ステップと、インデックス選択手段で選択された前記インデックスに対応した前記被写体画像を表示する画像表示ステップと、をコンピュータに実行させるためのプログラムを記録した。
【００２１】
また、本発明に係る請求項１４に記載の記録媒体は、上記記載の発明である記録媒体において、前記第２の画像は、前記被写体画像を撮影した撮影者を撮影した画像であり、前記音声データは、前記被写体画像を撮影した撮影者が発生した音声である。
【００２２】
また、本発明に係る請求項１５に記載の記録媒体は、上記記載の発明である記録媒体において、前記管理ステップは、複数の前記第２の画像間の類似度、又は前記音声データ間の類似度を算出する類似度算出ステップと、前記類似度算出ステップで算出した類似度をもとに、前記インデックスを類似度順に並べ替える検索ステップとを有し、前記インデックス表示ステップは、前記検索ステップで並べ替えられたインデックスを表示する。
【００２３】
また、本発明に係る請求項１６に記載の記録媒体は、上記記載の発明である記録媒体において、前記類似度算出ステップは、前記第２の画像の縮小画像を用いて第１の類似度を算出する第１の類似度算出ステップと、前記音声データの波形情報を用いて第２の類似度を算出する第２の類似度算出ステップとを更に有し、前記検索ステップは、前記第１の類似度又は第２の類似度のいずれかに基づいて、前記インデックスを並び替える。
【００２４】
また、本発明に係る請求項１７に記載の記録媒体は、被写体を撮影する第１の撮影ステップと、撮影者を撮影する第２の撮影ステップと、撮影者の音声を録音する録音ステップと、前記第１の撮影ステップで撮影した第１の画像と、前記第２の撮影ステップで撮影した第２の画像と、前記録音ステップで録音した音声データとを送信する送信ステップとをコンピュータに実行させるための撮影装置のプログラムを記録した記録媒体であって、前記第２の撮影ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間以内に画像を撮影し、前記録音ステップは、前記第１の撮影ステップで被写体を撮影した後所定の時間の間だけ音声を録音する。
【００２５】
また、本発明に係る請求項１８に記載の画像検索方法は、被写体を撮影する第１の撮影ステップと、撮影者を撮影する第２の撮影ステップと、撮影者の音声を録音する録音ステップと、前記第１の撮影ステップで撮影した第１の画像である被写体画像と、前記第２の撮影ステップで撮影した第２の画像であるその被写体画像の撮影者の画像と、前記録音ステップで録音した音声データであるその被写体画像の撮影者の音声とを取得する情報取得ステップと、前記被写体画像の縮小画像と、前記第２の画像あるいはその縮小画像又は前記音声データを波形として表した波形画像をインデックスとして並べて表示するインデックス表示ステップと、前記インデックス表示ステップで表示された前記インデックスを選択するインデックス選択ステップと、インデックス選択ステップで選択された前記インデックスに対応した前記被写体画像を表示する画像表示ステップとを有する。
【発明の効果】
【００２６】
本発明によれば、撮影者の画像や音声をもとに情報を検索する際において、認識間違いを少なくすることができる。
【発明を実施するための最良の形態】
【００２７】
［第１の実施の形態］
本発明の第１の実施の形態に係る情報検索システムは、画像を撮影する撮影装置と撮影された画像を検索する検索装置で構成されている。以下、撮影装置と検索装置のそれぞれの構成と動作を説明する。
【００２８】
図１は、本発明の第１の実施の形態に係る撮影装置１の構成を模式的に示す断面図である。この撮影装置１には、被写体を撮影する手段に加え、更に撮影者を撮影する手段及び撮影者の音声を記録する手段が設けられている。
【００２９】
撮影レンズ２は、被写体の光像を装置内部に導く。第１のシャッタ３は、被写体光の透過／遮断を実行する。第１の撮像素子４は被写体の光像を光電変換する。背面撮影レンズ５は、撮影者側の光像を装置内部に導く。第２のシャッタ６は、撮影者側からの光の透過／遮断を実行する。第２の撮像素子７は撮影者側の光像を光電変換する。レリーズボタン８は、撮影動作の開始を指示する。ＬＣＤ（液晶ディスプレー）９は、撮影した静止画像などを表示する。マイク１０は、撮影者側からの音声を収集する。ファインダ１１を覗くことによりユーザは被写体像を観察することができる。
【００３０】
図２は、撮影装置１の内部の構成を示すブロック図である。
【００３１】
撮影装置は、通信部２１、第１の撮像部２２、第２の撮像部２３、マイク部２４、表示部２５、操作部２６、プログラムメモリ２７、画像メモリ２８及び処理部２９を備えている。
【００３２】
通信部２１は外部装置（不図示）と情報授受を行うための通信インターフェースである。第１及び第２の撮像部（２２、２３）は撮影光束をそれぞれ第１及び第２の撮像素子（４、７）に導いて画像データを生成する。マイク部２４は、マイク１０から入力される撮影者の音声を取り込むためのインターフェースである。表示部２５は、被写体の画像等をＬＣＤ９に表示する。操作部２６は、レリーズボタン８、十字操作ボタン（不図示）、モード切換スイッチ（不図示）からの操作内容を取り込む。プログラムメモリ２７は、撮影装置１のプログラムを格納する。画像メモリ２８は、撮影した画像データの他種々のデータを記憶する。処理部２９は、撮影装置１を統括して制御する。
【００３３】
続いて、本実施の形態に係る撮影装置１の動作について説明する。図３は、撮影装置１の撮影時における信号の流れを示す図であり、図４は、撮影処理手順を示すフロー図である。図３及び図４を参照しつつ撮影動作について説明する。
【００３４】
図４のステップＳ０１において、レリーズボタン８が操作されたことを操作部２６を介して検出すると、ステップＳ０２において、処理部２９は、第１の撮像部２２を制御して被写体を撮影し、被写体の画像データを第１の画像バッファ３１に記憶する。また、ステップＳ０３において、レリーズボタン８が操作されたタイミングから遅延部３２を介して所定時間遅延した後、処理部２９は、第２の撮像部２３を制御して撮影者を撮影し、撮影者の画像データを第２の画像バッファ３４に記憶する。そして、ステップＳ０４において、縮小画像生成部３５が、第１及び第２の画像バッファ３１、３４に記憶されている被写体画像及び撮影者画像の縮小画像を生成する。
【００３５】
一方、ステップＳ０５において、レリーズボタン８が操作されたタイミングからタイマ部３７を介して所定時間後、ゲート部３８を開としてマイク部２４からの音声の録音を開始する。そして、更に所定時間経過後、ステップＳ０６において、ゲート部３８を閉として録音を終了して、音声バッファ３９に記憶する。これにより、レリーズ操作後の所定期間、例えば、撮影した画像がＬＣＤ９に表示されたときから１０秒間の音声を録音することができる。
【００３６】
そして、ステップＳ０７〜Ｓ０８において、画像バッファ３１、３４に記憶されている被写体画像に、音声バッファ３９に記憶されている音声データ、被写体画像の縮小画像及び撮影者画像の縮小画像を関連付けて画像メモリ２８に記憶する。そして、画像バッファ３１、３４と音声バッファ３９とをクリアする。
【００３７】
以上の手順によって、撮影画像に撮影者の画像と撮影者の音声データが関連付けられて記憶された。なお、ステップＳ０３において、所定時間遅延した後、第２の撮像部２３が撮影者を撮影したが、遅延部３２に替えて、例えば、超音波センサを設けて、撮影者が所定位置にいることを検知して第２の撮像部２３が撮影者を撮影しても良い。
【００３８】
［第１の実施の形態の変形例］
図５は、本発明の第１の実施の形態の変形例に係る撮影装置１の構成を模式的に示す断面図である。第１の実施の形態と同一の部位には同一の符号を付してその詳細の説明は省略する。
【００３９】
第１の実施の形態では、第１及び第２の撮像素子を備えていたが、図５では、１つの撮像素子１２を備えている。そして、背面撮影レンズ５によって導かれた撮影者側の光像も、ミラー１３によって光路を変えられ、第２のシャッタ１４を介してこの撮像素子１２上に結像する。
【００４０】
続いて第１の実施の形態の変形例に係る撮影装置１の内部の構成について説明する。変形例に係る撮影装置１の内部の構成は、図２に示す第１の実施の形態の構成において、第１及び第２の撮像部２２、２３に代えて、撮像部４０が設けられている点が異なっている。したがって、その図示は省略する。  
次に、第１の実施の形態の変形例に係る撮影装置１の動作について説明する。図６は、撮影装置１の撮影時における信号の流れを示す図である。なお、撮影処理手順を示すフローは図４と同一である。図４及び図６を参照しつつ撮影動作について説明する。
【００４１】
図４のステップＳ０１において、レリーズボタン８が操作されたことを操作部２６を介して検出すると、ステップＳ０２において、処理部２９は、第１のシャッタ３と撮像部４０を制御して被写体を撮影する。そして、第１のゲート４１を開いて被写体の画像データを第１の画像バッファ３１に記憶する。また、ステップＳ０３において、レリーズボタン８が操作されたタイミングから遅延部３２を介して所定時間遅延した後、処理部２９は、第２のシャッタ１４と撮像部４０を制御して撮影者を撮影する。そして、第２のゲート４２を開いて撮影者の画像データを第２の画像バッファ３４に記憶する。そして、ステップＳ０４において、縮小画像生成部３５が、第１及び第２の画像バッファ３１、３４に記憶されている被写体画像の縮小画像及び撮影者画像の縮小画像を生成する。
【００４２】
一方、ステップＳ０５において、レリーズボタン８が操作されたタイミングからタイマ部３７を介して所定時間後、ゲート部３８を開としてマイク部２４からの音声の録音を開始する。そして、更に所定時間経過後、ステップＳ０６において、ゲート部３８を閉として録音を終了して、音声バッファ３９に記憶する。これにより、レリーズ操作後の所定期間、音声データを録音することができる。
【００４３】
そして、ステップＳ０７〜Ｓ０８において、画像バッファ３１、３４に記憶されている被写体画像に、音声バッファ３９に記憶されている音声データ、被写体画像の縮小画像及び撮影者画像の縮小画像を関連付けて画像メモリ２８に記憶する。そして、画像バッファ３１、３４と音声バッファ３９とをクリアする。
【００４４】
次に検索装置の構成と動作について説明する。
【００４５】
図７は、検索装置５０の構成を示すブロック図である。この検索装置は例えば、情報処理装置を用いて構成することができる。
【００４６】
検索装置５０は、通信部５１、表示部５２、音声再生部５３、操作部５４、管理データベース５５、情報メモリ５６、プログラムメモリ５７及び処理部５８を備えている。
【００４７】
通信部５１は、例えば撮影装置１等の外部装置（不図示）との間で画像データ等の情報を通信により授受するためのインターフェースである。表示部５２は、画像等を表示するＣＲＴまたはＴＦＴ液晶ディスプレイである。音声再生部５３は、音声データを再生する。操作部５４は、使用者からの操作指示入力を受取るためのキーボード、マウス等の入力デバイスである。
【００４８】
情報メモリ５６は、画像データと音声データを記憶する記憶媒体であり、画像データと音声データとの関連付け情報を記憶する情報管理データベース５５を含む。プログラムメモリ５７は、検索装置５０の各機能を制御するプログラムを保存する。処理部５８は、検索装置５０の動作を統括的に制御する。
【００４９】
続いて本発明の実施の形態に係る検索装置を用いて画像を検索する方法について説明する。ユーザは、検索装置の表示部に表示される情報管理画面に基づいて、画像の検索操作を実行する。
【００５０】
図８は、情報管理画面の構成を示す図である。
【００５１】
情報管理画面６０は、ツールバーエリア６１及びインデックスエリア６２で構成されている。ツールバーエリア６１には、画像を検索する操作を行うための各種ボタンが設けられている。インデックスエリア６２には、ユーザが行った検索処理結果のインデックス画像が表示される。
【００５２】
ツールバーエリア６１には、画像取得ボタン７１、表示設定ボタン７２、ソート選択リスト７３及び終了ボタン７４が設けられている。また、表示設定ボタン７２には、被写体ボタン７２ａ、撮影者ボタン７２ｂ、音声ボタン７２ｃが備えられている。
【００５３】
画像取得ボタン７１を操作すると、検索装置５０と接続する撮影装置１から画像を取り込む。表示設定ボタン７２は、インデックスエリア６２に表示するインデックス画像の種類を指定する。被写体ボタン７２ａ、撮影者ボタン７２ｂ、音声ボタン７２ｃは、オールタネイト式のボタンであり、押すたびにその設定の有効／無効を切替えることができる。
【００５４】
ソート選択リスト７３には、「撮影時間順」、「撮影者類似順」、「音声類似順」のリストも受けられ、ユーザがこのうちのいずれかを操作すると、インデックスエリア６２のインデックス画像が指定された順序に並び替えられる。終了ボタン７４を操作すると、情報管理画面６０に基づく検索処理を終了する。
【００５５】
図８は、被写体ボタン７２ａが操作され、ソート選択リスト７３の「撮影時間順」が選択された状態を示している。インデックスエリア６２には、被写体サムネール７６が撮影時間順に表示されている。なお、１画面に表示し切れない場合は、スクロールバー７５を操作することにより表示をスクロールして見ることができる。また、サムネール画像の１つをダブルクリックすると、その画像が拡大して表示される。
【００５６】
図９は、被写体ボタン７２ａと撮影者ボタン７２ｂが操作され、ソート選択リスト７３の「撮影者類似順」が選択された状態を示している。インデックスエリア６２には、被写体サムネール７６と共に撮影者サムネール７７が撮影者類似順に表示されている。ここで、撮影者類似順は、例えば、インデックスエリア６２の左上の撮影者サムネールを基準として、この撮影者の画像に類似している画像が類似順に左から右、上から下に並べて表示されている。
【００５７】
図１０は、被写体ボタン７２ａと音声ボタン７２ｃが操作され、ソート選択リスト７３の「音声類似順」が選択された状態を示している。インデックスエリア６２には、被写体のサムネール７６と共に音声の波形を画像として表示する音声波形サムネール（音声サムネール）７８が音声類似順に表示されている。ここで、音声類似順は、例えば、インデックスエリア６２の左上の音声波形サムネール７８を基準として、この音声波形画像に類似している画像が類似順に左から右、上から下に並べて表示されている。
【００５８】
図１１は、被写体ボタン７２ａ、撮影者ボタン７２ｂ及び音声ボタン７２ｃが操作され、ソート選択リスト７３の「音声類似順」が選択された状態を示している。インデックスエリア６２には、被写体サムネール７６と共に撮影者サムネール７７、音声波形サムネール７８が音声類似順に表示されている。ここで、音声類似順は、例えば、インデックスエリア６２の左上の音声波形サムネール７８を基準として、この音声波形画像に類似している画像が類似順に左から右、上から下に並べて表示されている。
【００５９】
次に、画像検索処理の概略の手順を図１２〜図２０を参照しつつ説明する。なお、以下に説明する処理は、画像検索処理機能の内主な機能に関する処理である。従って、以下の説明に記載されていない機能であっても、図７乃至図１１の説明に記載された機能は画像検索処理機能に含まれる。
【００６０】
ユーザが検索装置５０の操作部５４を操作して、情報管理プログラムを起動すると、図１２のステップＳ１１において、当該プログラムは情報管理データベース５５が情報メモリ５６に存在するかどうかを調べる。そして、ステップＳ１１でＮｏの場合、即ち、情報管理データベース（情報管理ＤＢ）５５が存在しない場合は、ステップＳ１２に示す情報管理データベース（情報管理ＤＢ）構築処理（図１３）を実行する。
【００６１】
図１３のステップＴ０１において、情報メモリ５６に記憶されている全ての被写体画像を特定し、それらの画像の記憶場所のアドレスを情報管理データベース５５に登録する。続いて、ステップＴ０２において、被写体画像の縮小画像、撮影者画像の縮小画像をそれぞれ被写体サムネール、撮影者サムネールとして被写体画像に関連付けて情報管理ＤＢ５５に登録する。
【００６２】
次に、ステップＴ０３〜Ｔ０４において、各被写体画像に関連付けられている音声データから音声波形のサムネールを作成し、音声データのアドレスと音声波形のサムネールを被写体画像に関連付けて情報管理ＤＢ５５に登録する。
【００６３】
続いて、ステップＴ０５において、各種のフラグを初期化する。表示設定ボタン７２の状態フラグ（Ｆ１、Ｆ２、Ｆ３）を被写体ボタン７２ａが選択されている状態（Ｆ１＝１）とし、ソート選択リスト７３のフラグ（Ｓ）を「撮影日時順」が選択されている状態（Ｓ＝１）として、これらのフラグを情報管理データベース５５にある設定メモリに保存してメインルーチンにリターンする。
【００６４】
図１２に戻り、ステップＳ１３〜Ｓ１５において、情報管理データベース５５にある設定メモリに記憶されているフラグの設定情報を読み込み、その設定情報に応じて情報管理画面を構成して表示する。そして、ユーザからの操作入力を待機する。なお、情報管理画面の表示更新処理については後述する。
【００６５】
ステップＳ２０において、画像取得ボタン７１が押されたときは、ステップＳ２１に示す画像取得処理（図１４）を実行する。
【００６６】
図１４のステップＴ１０において、撮影装置１が接続されているかどうかを調べる。ステップＴ１０でＮｏの場合、即ち、撮影装置１が接続されていない場合は、ステップＴ１１において、撮影装置１が接続されていないことを知らせる警告を表示してメインルーチンにリターンする。
【００６７】
ステップＴ１０でＹｅｓの場合、即ち、撮影装置１が接続されている場合は、ステップＴ１２〜Ｔ１３において、被写体画像と、被写体画像に関連付けられた被写体画像の縮小画像、撮影者画像の縮小画像、音声データを撮影装置１から読み込み、それらを関連付けて情報メモリ５６に記憶する。そして、被写体画像の記憶アドレスを情報管理ＤＢ５５に登録する。
【００６８】
次に、ステップＴ１４において、被写体画像の縮小画像、撮影者画像の縮小画像をそれぞれ被写体サムネール、撮影者サムネールとして被写体画像に関連付けて情報管理ＤＢ５５に登録する。そして、ステップＴ１５〜Ｔ１６において、音声データから音声波形サムネールを作成し、音声データのアドレスと音声波形サムネールを被写体画像に関連付けて情報管理ＤＢ５５に登録する。
【００６９】
ステップＴ１７でＮｏのときは、ステップＴ１８において次の被写体画像に対して、以上のステップＴ１２〜Ｔ１６の処理を繰り返して実行し、ステップＴ１７でＹｅｓのとき、即ち、全ての画像を撮影装置１から読み込んだときはメインルーチンにリターンする。
【００７０】
図１２に戻り、ステップＳ２２において、表示設定ボタン７２が押されたときは、ステップＳ２３に示す表示設定処理（図１５）を実行する。
【００７１】
図１５のステップＴ２１でＹｅｓの場合、即ち、”被写体ボタン”７２ａが操作されたときは、フラグＦ１の値を設定する。ここで、フラグＦ１は、”被写体”の選択状態を表すフラグであり、Ｆ１＝１は選択されていることを表し、Ｆ１＝０は選択が解除されていることを表している。そこで、ステップＴ２２〜Ｔ２４において、被写体ボタン７２ａが操作される毎にオールタネイトの動作を行うように、フラグの状態を切替える。
【００７２】
ステップＴ２５でＹｅｓの場合、即ち、”撮影者”ボタン７２ｂが操作されたときは、フラグＦ２の値を設定する。ここで、フラグＦ２は、”撮影者”の選択状態を表すフラグであり、Ｆ２＝１は選択されていることを表し、Ｆ２＝０は選択が解除されていることを表している。そこで、ステップＴ２６〜Ｔ２８において、”撮影者”ボタン７２ｂが操作される毎にオールタネイトの動作を行うように、フラグの状態を切替える。
【００７３】
ステップＴ２９でＹｅｓの場合、即ち、”音声”ボタン７２ｃが操作されたときは、フラグＦ３の値を設定する。ここで、フラグＦ３は、”音声”の選択状態を表すフラグであり、Ｆ３＝１は選択されていることを表し、Ｆ３＝０は選択が解除されていることを表している。そこで、ステップＴ３０〜Ｔ３２において、”音声”ボタン７２ｃが操作される毎にオールタネイトの動作を行うように、フラグの状態を切替える。そして、ステップＴ３５に示す表示更新処理（図１９）を実行してメインルーチンにリターンする。
【００７４】
図１２に戻り、ステップＳ２４において、ソート選択リスト７３が選択されたときは、ステップＳ２５に示すソート選択処理（図１６）を実行する。
【００７５】
このソート選択処理では、フラグＳにソート選択リスト７３で選択された項目を表す数字を設定する。図１６のステップＴ４１でＹｅｓの場合、即ち、”撮影日時順”が選択されたときは、ステップＴ４２において、フラグＳに１を設定する。ステップＴ４３でＹｅｓの場合、即ち、”撮影者類似”が選択されたときは、ステップＴ４４において、フラグＳに２を設定する。ステップＴ４５でＹｅｓの場合、即ち、”音声類似”が選択されたときは、ステップＴ４６において、フラグＳに３を設定する。そして、ステップＴ４６に示す表示更新処理（図１９）を実行してメインルーチンにリターンする。
【００７６】
図１２に戻り、ステップＳ２６において、情報管理画面のインデックスエリア６２のサムネールが操作されたことを検出したときは、ステップＳ２７に示す検索処理（図１７）を実行する。
【００７７】
図１７のステップＴ５１でＹｅｓの場合、即ち、被写体サムネールがマウスでダブルクリックされたときは、ステップＴ５２において、選択された被写体サムネールに対応する被写体画像を別ウインドウに表示する。そして、メインルーチンにリターンする。
【００７８】
ステップＴ５３でＹｅｓの場合、即ち、撮影者サムネール又は音声サムネールがマウスでダブルクリックされたときは、ステップＴ５４に示す表示更新処理（図１９）を実行してメインルーチンにリターンする。
【００７９】
ステップＴ５５でＹｅｓの場合、即ち、音声波形のサムネールがマウスでクリックされたときは、ステップＴ５６〜Ｔ５７において、マウスクリックされた音声波形のサムネールに対応する音声データを再生する。そして、古い選択状態を解除して、マウスクリックされたサムネールを選択状態にしてメインルーチンにリターンする。
【００８０】
ステップＴ５８でＹｅｓの場合、即ち、被写体サムネール又は撮影者サムネールがマウスでクリックされたときは、ステップＴ５７において、古い選択状態を解除して、マウスクリックされたサムネールを選択状態にしてメインルーチンにリターンする。
【００８１】
図１２に戻り、ステップＳ２８において、情報管理画面の終了ボタン７４が操作されたことを検出したときは、ステップＳ２９に示す終了処理（図１８）を実行する。
【００８２】
図１８のステップＴ６０では、フラグＦ１、Ｆ２、Ｆ３の状態と、Ｓの値を情報管理ＤＢに記憶して情報管理プログラムによる処理を終了する。このステップＴ６０の処理によって、次回プログラムが起動されて表示される情報管理画面６０のツールバーエリア６１の表示設定ボタン７２及びソート選択リスト７３の選択内容は、終了時の内容が再現される。
【００８３】
次に、図１９の表示更新処理について説明する。この処理は、情報管理画面の表示内容を最新の状態に更新する。
【００８４】
ステップＰ０１において、ソート選択リスト７３のフラグＳの状態を調べる。ステップＰ０１においてＳ＝１の場合は、ステップＰ０２〜Ｐ０３において、情報管理画面のソート選択リスト７３を”撮影日時順”が選択された状態に表示更新する。そして、被写体画像を撮影日時の古い順に順序付ける。
【００８５】
ステップＰ０１においてＳ＝２の場合は、ステップＰ０５において、情報管理画面のソート選択リスト７３を”撮影者類似順”が選択された状態に表示更新する。そして、ステップＰ０６において、被写体サムネール、撮影者サムネール、音声サムネールのいずれかが選択されているかどうかを調べる。
【００８６】
ステップＰ０６でＹｅｓの場合、即ち、いずれかのサムネールが選択されているときは、ステップＰ０７において、選択されているサムネールに対応する被写体画像に関連付けられている撮影者サムネールを基準画像とする。ステップＰ０８〜Ｐ０９において、記憶されている各被写体画像の撮影者サムネールと基準画像との類似度を計算して、被写体画像を類似度の高い順序に並び替える。ここで、基準画像との類似度は、例えば撮影者が撮影された基準の撮影者サムネールと比較対象の被写体サムネールそれぞれから色彩情報をもとに顔面部分を抽出し、それら顔面部分が同一面積となるように一方の画像を拡大又は縮小し、さらに両眼を結ぶ直線が重なるように一方の画像を回転する。そして、顔の輪郭や目や鼻などのパーツそれぞれについて相関度を求め、それら相関度の和を類似度として算出しても良い。
【００８７】
ステップＰ０６でＮｏの場合、即ち、いずれのサムネールも選択されていないときは、ステップＰ１０において、インデックスエリア６２のサムネールが選択されていないことを警告する。そして、ステップＰ０２〜Ｐ０３において、情報管理画面のソート選択リスト７３を”撮影日時順”が選択された状態に表示更新して、被写体画像を撮影日時の古い順に順序付ける。
【００８８】
ステップＰ０１においてＳ＝３の場合は、ステップＰ１１において、情報管理画面のソート選択リスト７３を”音声類似順”が選択された状態に表示更新する。そして、ステップＰ１２において、被写体サムネール、撮影者サムネール、音声サムネールのいずれかが選択されているかどうかを調べる。
【００８９】
ステップＰ１２でＹｅｓの場合、即ち、いずれかのサムネールが選択されているときは、ステップＰ１３において、選択されているサムネールに対応する被写体画像に関連付けられている音声サムネールを基準画像とする。ステップＰ１４〜Ｐ１５において、記憶されている各被写体画像の音声波形と基準画像との類似度を計算して、被写体画像を類似度の高い順序に並び替える。ここで、基準画像との類似度は、例えば音声波形に対してエンベロープ（包絡線）処理を施し、一方の波形を時間軸に沿って平行移動して、２つの音声波形の包絡線の相関が最も大きくなる位置での相関度を類似度として算出しても良い。
【００９０】
ステップＰ１２でＮｏの場合、即ち、いずれのサムネールも選択されていないときは、ステップＰ１６において、インデックスエリア６２のサムネールが選択されていないことを警告する。そして、ステップＰ０２〜Ｐ０３において、情報管理画面のソート選択リスト７３を”撮影日時順”が選択された状態に表示更新して、被写体画像を撮影日時の古い順に順序付ける。
【００９１】
以上の被写体画像の順序付け処理が終わると、インデックスエリア６２の表示をクリアして、Ｐ２１に示すインデックスエリア表示処理（図２０）を実行する。
【００９２】
ステップＱ０１において、表示設定ボタン７２の状態フラグＦ１が１になっているかどうかを調べ、ステップＱ０１でＹｅｓの場合、即ち、被写体ボタン７２ａが押されているときは、ステップＱ０２において、被写体画像の順序付けに従って、被写体サムネールをインデックスエリア６２に表示する。
【００９３】
ステップＱ０３において、表示設定ボタン７２の状態フラグＦ２が１になっているかどうかを調べ、ステップＱ０３でＹｅｓの場合、即ち、撮影者ボタン７２ｂが押されているときは、ステップＱ０４において、被写体画像の順序付けに従って、撮影者サムネールをインデックスエリア６２に表示する。
【００９４】
ステップＱ０５において、表示設定ボタン７２の状態フラグＦ３が１になっているかどうかを調べ、ステップＱ０５でＹｅｓの場合、即ち、撮影者ボタン７２ｃが押されているときは、ステップＱ０６において、被写体画像の順序付けに従って、音声波形のサムネールをインデックスエリア６２に表示する。
【００９５】
そして、ステップＱ０７において、インデックスエリア６２のサムネールの選択状態を解除して表示更新処理にリターンする。
【００９６】
［実施の形態の効果］
以上説明したように、上述の実施の形態によれば、撮影時に撮影者の画像や音声を取得し、その取得した画像や音声データをもとに、撮影者画像間又は音声波形間の類似度が高い順に並び替えられた被写体画像一覧から、利用者が目視により所望の画像を選択するので、画像認識や音声認識を使用した自動検索で起こる認識間違いのような決定的なミスを防ぐことができる。
【００９７】
なお、上述の実施の形態で説明した各機能は、ハードウエアを用いて構成しても良く、また、ソフトウエアを用いて各機能を記載したプログラムをコンピュータに読み込ませて実現しても良い。また、各機能は、適宜ソフトウエア、ハードウエアのいずれかを選択して構成するものであっても良い。
【００９８】
更に、各機能は図示しない記録媒体に格納したプログラムをコンピュータに読み込ませることで実現させることもできる。ここで本実施の形態における記録媒体は、プログラムを記録でき、かつコンピュータが読み取り可能な記録媒体であれば、その記録形式は何れの形態であってもよい。
【００９９】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【０１００】
【図１】本発明の第１の実施の形態に係る撮影装置の構成を模式的に示す断面図。
【図２】撮影装置の内部の構成を示すブロック図。
【図３】撮影装置の撮影時における信号の流れを示す図。
【図４】撮影処理手順を示すフロー図。
【図５】本発明の第１の実施の形態の変形例に係る撮影装置の構成を模式的に示す断面図。
【図６】撮影装置の撮影時における信号の流れを示す図。
【図７】検索装置の構成を示すブロック図。
【図８】情報管理画面を示す図。
【図９】情報管理画面を示す図。
【図１０】情報管理画面を示す図。
【図１１】情報管理画面を示す図。
【図１２】画像検索処理の概略の手順を示すフロー図。
【図１３】情報管理ＤＢ構築処理の手順を示すフロー図。
【図１４】画像取得処理の手順を示すフロー図。
【図１５】表示設定処理の手順を示すフロー図。
【図１６】ソート選択処理の手順を示すフロー図。
【図１７】検索処理の手順を示すフロー図。
【図１８】終了処理の手順を示すフロー図。
【図１９】表示更新処理の手順を示すフロー図。
【図２０】インデックスエリア表示処理の手順を示すフロー図。
【符号の説明】
【０１０１】
１…撮影装置、２１…通信部、２２…第１の撮像部、２３…第２の撮像部、２４…マイク部、２５…表示部、２６…操作部、２８…画像メモリ、３２…遅延部、３５…縮小画像生成部、３７…タイマー部、５０…検索装置、５１…通信部、５２…表示部、５３…音声再生部、５４…操作部、５５…情報管理データベース、５６…情報メモリ、６０…情報管理画面、６２…インデックスエリア、７６…被写体サムネール、７７…撮影者サムネール、７８…音声波形サムネール。
【図１】
2006195556.tif 000003
【図２】
2006195556.tif 000004
【図３】
2006195556.tif 000005
【図４】
2006195556.tif 000006
【図５】
2006195556.tif 000007
【図６】
2006195556.tif 000008
【図７】
2006195556.tif 000009
【図８】
2006195556.tif 000010
【図９】
2006195556.tif 000011
【図１０】
2006195556.tif 000012
【図１１】
2006195556.tif 000013
【図１２】
2006195556.tif 000014
【図１３】
2006195556.tif 000015
【図１４】
2006195556.tif 000016
【図１５】
2006195556.tif 000017
【図１６】
2006195556.tif 000018
【図１７】
2006195556.tif 000019
【図１８】
2006195556.tif 000020
【図１９】
2006195556.tif 000021
【図２０】
2006195556.tif 000022