(57)【要約】【課題】画像の一部の領域に注釈情報を付与する撮像装置であって、既に記録されている画像に限らず、これから撮影する画像にも注釈情報を付与することが可能な能率のよいものを提供する。【解決手段】これから撮影する画像と記録媒体中の画像のいずれを注釈情報を付与する親画像とするかを指定するための画面を表示して（＃６５）、前者が指定されたときは親画像を撮影し（＃６７）、後者が指定されたときは既存のどの画像を選択するかを指定するための画面を表示して、指定された画像を親画像とする（＃６６）。注釈情報を付与する領域を親画像に設定した後（＃６８）、注釈情報とする画像の撮影（＃７０）または音声の録音（＃７１）を行う。【選択図】      図２７
2005020654.tif 000002
【特許請求の範囲】
【請求項１】
画像を撮影する撮像部と、撮影された画像を記録媒体に記録する記録部と、前記記録媒体に記録されている画像を表示する表示部を備えるとともに、前記表示部に画像を表示して、その画像の一部の領域に対して注釈情報を付与する動作モードを有する撮像装置において、
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とするか、前記撮像部によって新たに撮影される画像を注釈情報を付与する画像とするかを、与えられる指示に応じて切り替えることを特徴とする撮像装置。
【請求項２】
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、注釈情報を付与する画像を選択するための選択画面を前記表示部に表示することを特徴とする請求項１に記載の撮像装置。
【請求項３】
注釈情報を付与する画像として選択された画像を表示している間に、その画像が前記記録媒体から消去されたとき、注釈情報を付与する画像を選択するための前記選択画面を前記表示部に表示することを特徴とする請求項２に記載の撮像装置。
【請求項４】
使用者によって操作される操作部材を備え、注釈情報を付与する画像として選択された画像を表示している間に、前記操作部材が操作されたとき、表示している画像に既に付与されている注釈情報を再生することを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、画像が選択される前に、前回選択された画像を選択された画像として表示することを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、画像が選択される前に、既に注釈情報が付与されている画像を選択された画像として表示することを特徴とする請求項１に記載の撮像装置。
【請求項７】
前記撮像部によって新たに撮影される画像を注釈情報とすることを特徴とする請求項１から請求項６までのいずれか１項に記載の撮像装置。
【請求項８】
音声を録音する録音部を備え、前記録音部によって録音された音声を注釈情報とすることを特徴とする請求項１から請求項７までのいずれか１項に記載の撮像装置。
【請求項９】
画像の一部の領域に対して注釈情報を付与する方法において、
既に撮影されている画像の中から選択された画像を注釈情報を付与する画像とするか、新たに撮影される画像を注釈情報を付与する画像とするかを、与えられる指示に応じて切り替えることを特徴とする注釈情報を付与する方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、撮影した画像の一部の領域に対して注釈情報を付与する撮像装置、およびその方法に関する。
【０００２】
【従来の技術】
デジタルカメラで撮影した画像の全体または一部の領域に注釈情報を付与して、画像が有する情報伝達の機能を高めたり、画像の管理を容易にしたりすることが提案されている。注釈情報と画像およびその一部領域との対応付けは使用者の手動操作によって行われ、使用者が、注釈情報を付与すべき画像を選択して表示し、その中の一部の領域を指定するのが一般的である。
【０００３】
特開２００２−５５７４８号公報では、画像データベース中の多数の画像に能率よく注釈情報を付与するために、各々注釈情報に関連している複数のアイコンを画像と共に表示し、付与する注釈情報に関連するアイコンを、画像のうちの注釈情報を付与する領域上にドラッグしてドロップすることにより、画像およびその一部領域と注釈情報との対応付けを行うようにしている。
【０００４】
【特許文献１】特開２００２−５５７４８号公報
【０００５】
【発明が解決しようとする課題】
デジタルカメラのような撮像装置で画像に注釈情報を付与する場合、使用者が、これから画像を撮影して、その画像に対して注釈情報を付与したいと希望することがある。ところが、注釈情報を付与する画像は、例えば上記公報のように、既に撮影されて記録されている画像に限られており、これから撮影する画像に注釈情報を付与することについては考慮が払われていない。注釈情報を付与すべき画像を撮影して記録すれば、従来どおり注釈情報を付与することは可能であるが、記録している画像の中から注釈情報を付与すべき画像を選択する必要が生じて、能率がよくない。
【０００６】
本発明はこのような問題点に鑑みてなされたもので、既に記録されている画像に限らず、これから撮影する画像にも注釈情報を付与することが可能な能率のよい撮像装置、およびその方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記目的を達成するために、本発明では、画像を撮影する撮像部と、撮影された画像を記録媒体に記録する記録部と、前記記録媒体に記録されている画像を表示する表示部を備えるとともに、前記表示部に画像を表示して、その画像の一部の領域に対して注釈情報を付与する動作モードを有する撮像装置において、前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とするか、前記撮像部によって新たに撮影される画像を注釈情報を付与する画像とするかを、与えられる指示に応じて切り替えるようにする。
【０００８】
この撮像装置では、使用者は、既に撮影して記録している画像に注釈情報を付与することと、これから撮影する画像に注釈情報を付与することを、状況に応じて選択することができる。これから撮影する画像に注釈情報を付与することを指示した場合は、その画像を撮影して直ちに注釈情報を付与することが可能であり、記録媒体中の画像の中からその画像を選択する操作は不要である。
【０００９】
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、注釈情報を付与する画像を選択するための選択画面を前記表示部に表示するようにするとよい。このようにすると、画像の選択を直ちに開始することができて能率が向上する。
【００１０】
ここで、注釈情報を付与する画像として選択された画像を表示している間に、その画像が前記記録媒体から消去されたとき、注釈情報を付与する画像を選択するための前記選択画面を前記表示部に表示するようにするとよい。このようにすると、消去した画像に注釈情報を付与しようとする矛盾した操作を未然に回避することができる。
【００１１】
使用者によって操作される操作部材を備え、注釈情報を付与する画像として選択された画像を表示している間に、前記操作部材が操作されたとき、表示している画像に既に付与されている注釈情報を再生するようにしてもよい。どのような注釈情報が付与されているかが使用者に判り、同一の画像に同一または類似の注釈情報を付与する無駄を避けることができる。
【００１２】
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、画像が選択される前に、前回選択された画像を選択された画像として表示するようにするとよい。前回選択された画像は、注釈情報を付与する画像として選択される可能性が高く、これを選択された画像としてデフォルトで表示することで、能率が向上する。
【００１３】
前記記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、画像が選択される前に、既に注釈情報が付与されている画像を選択された画像として表示するようにしてもよい。既に注釈情報が付与されている画像は、再度注釈情報を付与される可能性が高く、これを選択された画像としてデフォルトで表示することで、能率が向上する。
【００１４】
前記撮像部によって新たに撮影される画像を注釈情報とすることができる。使用者は、これから撮影する画像に注釈情報を付与することを指示した場合は、その画像を撮影した後に、注釈情報とする画像を撮影すればよい。音声を録音する録音部を備え、前記録音部によって録音された音声を注釈情報とすることもできる。
【００１５】
前記目的を達成するために、本発明ではまた、画像の一部の領域に対して注釈情報を付与する方法において、既に撮影されている画像の中から選択された画像を注釈情報を付与する画像とするか、新たに撮影される画像を注釈情報を付与する画像とするかを、与えられる指示に応じて切り替えるようにする。
【００１６】
この方法では、使用者は、既に撮影した画像に注釈情報を付与することと、これから撮影する画像に注釈情報を付与することを、状況に応じて選択することができる。これから撮影する画像に注釈情報を付与することを指示した場合は、その画像を撮影して直ちに注釈情報を付与することが可能であり、既に撮影した画像の中から注釈情報を付与する最新の画像を選択する操作は不要になる。
【００１７】
【発明の実施の形態】
以下、本発明の一実施形態であるデジタルカメラについて、図面を参照しながら説明する。本実施形態のデジタルカメラ１００の外観を図１の斜視図および図２の背面図に示す。デジタルカメラ１００は、上面に電源ボタン１、およびシャッターボタン２、前面にファインダー前窓３、マイクロフォン４、および撮影レンズ５、側面に記録媒体６装着用の挿入口７、および外部機器接続端子８、背面にファインダー後窓１１、モード切り替えダイヤル１２、４つの方向キー１３、液晶表示器１４、５つの操作ボタン１５、１６、１７、１８、２０、およびスピーカー１９を備えている。
【００１８】
デジタルカメラ１００は、ＣＣＤエリアセンサ３２（図５参照）を内蔵しており、撮影対象からの光を撮影レンズ５でセンサ３２上に結像させることにより画像を撮影する。撮影した画像は記録媒体６に記録され、また、表示器１４に表示される。記録媒体６に記録している画像を表示器１４に再生表示することも可能である。
【００１９】
デジタルカメラ１００は、画像の一部領域に注釈情報（アノテーション）を付与する機能を有する。以下、この機能をアノテーション機能とよび、アノテーション機能を実行する動作モードをアノテーションモードとよぶ。アノテーションには画像および音声の２種があり、アノテーションとしての画像をアノテーション画像、アノテーションとしての音声をアノテーション音声とよぶ。また、アノテーションを付与される画像およびアノテーションを付与された画像を親画像ともよぶ。
【００２０】
マイクロフォン４は、アノテーション音声の録音に用いられ、スピーカー１９はアノテーション音声の再生に用いられる。操作ボタン１５〜１８、２０は、アノテーションモードにおいて、画像の選択、画像の一部の領域の指定等のために操作される。操作ボタン１５、１６、１７、１８、２０をそれぞれ、メインメニューボタン、クイックビューボタン、削除ボタン、決定ボタン、領域サイズ変更ボタンとよぶ。
【００２１】
デジタルカメラ１００のアノテーション機能について、図３を参照して説明する。図３（ａ）は、アノテーションを付与される親画像の例であり、この親画像２１の一部の領域（１つまたは複数）に、アノテーションが付与される。画像２１には２つの領域が設定されており、各領域を示す領域枠２２、２３が表示されている。これらの領域にはそれぞれアノテーションが付与されている。なお、領域枠２２、２３は表示器１４上での表示に際して加えられたものであり、画像２１自体が領域枠２２、２３を表す像を有するのではない。
【００２２】
図３（ｂ）は、親画像２１に付与されたアノテーション画像の例である。この画像２４は、領域枠２２内の少女の父親を撮影したものである。領域枠２３に対しては、例えば、「この男の子は太郎君です」というアノテーション音声が付与されている。
【００２３】
アノテーション画像２４のファイルと上記アノテーション音声のファイルは画像２１のファイルに関連付けられており、その関連付けは所定のファイルに記されている。このファイルを関連付けファイルとよぶ。これらのファイルを全てパーソナルコンピュータに伝送してパーソナルコンピュータ上で閲覧することも可能であり、これにより、親画像２１に対する理解を深めたり、コミュニケーションの向上を図ったりすることができる。
【００２４】
関連付けファイルの内容を表１に示す。
＜表１＞  関連付けファイル
項目    内容
１    親画像ファイル名
２    親画像ファイル作成日時
３    アノテーション領域位置情報（左上角の座標）
４    アノテーション領域サイズ情報（縦方向および横方向の幅）
５    アノテーションファイル名
６    アノテーションファイル作成日時
【００２５】
なお、項目３〜６は、親画像に付与されているアノテーションの数だけ存在する。また、関連付けファイルは、新規アノテーションの追加、ファイルの削除等、関連付け情報の変更の必要が発生したときに更新する。
【００２６】
デジタルカメラ１００におけるファイルフォルダーの構成を図４に示す。この例では、Ｐｉｃｔ０００１．ｊｐｇとＰｉｃｔ０００４．ｊｐｇとが親画像のファイルとなっている。これらのファイルはＤＣＦ（デジタルカメラフォーマット）フォルダーである１００ＭＬＴ０９内に置かれており、さらにアノテーションフォルダーＡｎｎ０００１とＡｎｎ０００４がフォルダー１００ＭＬＴ０９内に存在する。アノテーションフォルダーの番号０００１、０００４はそれぞれ、親画像のファイルＰｉｃｔ０００１．ｊｐｇ、Ｐｉｃｔ０００４．ｊｐｇの番号部分と同じであり、これにより親画像とアノテーションフォルダーとの対応付けがなされている。
【００２７】
各アノテーションフォルダー内には、関連付けファイル、アノテーション画像ファイル、アノテーション音声ファイルが格納されている。例えば、フォルダーＡｎｎ０００１については、Ａｎｎ０００１．ｔｘｔが関連付けファイルであり、Ａｎｎ０００１．ｊｐｇとＡｎｎ０００２．ｊｐｇの２つがアノテーション画像ファイル、Ａｎｎ０００１．ｗａｖ、Ａｎｎ０００２．ｗａｖの２つがアノテーション音声ファイルである。
【００２８】
デジタルカメラ１００は、静止画像の撮影に関し、通常撮影モード、文書撮影モード、画像アノテーション撮影モード、音声アノテーション撮影モードの４つのモードを有する。通常撮影モードは、通常のデジタルカメラとしての撮影に使用する。文書撮影モードは、文書、白板等の文字被写体の撮影に使用する。画像アノテーション撮影モードは、親画像にアノテーション画像を付与する場合に使用する。音声アノテーション撮影モードは、親画像にアノテーション音声を付与する場合に使用する。前述のアノテーションモードには、画像アノテーション撮影モードと音声アノテーション撮影モードが含まれる。
【００２９】
撮影された画像や録音された音声の撮影モード情報は、ファイルのタグ（ヘッダー）に記録する。撮影モード情報は、画像の再生表示および音声の再生において、どのようなモードで撮影あるいは録音されたものであるかが判るような表示をする際に参照する。撮影モード情報はタグ内の１バイトの領域に記される。表２にその領域の各ビットと、ビットの値が１のときの意味を示す。
【００３０】
＜表２＞  撮影モード情報
ビット  意味
０    通常撮影モードで撮影された画像
１    文書撮影モードで撮影された画像
２    画像アノテーション撮影モードの親画像
３    画像アノテーション撮影モードで撮影されたアノテーション画像
４    音声アノテーション撮影モードの親画像
５    音声アノテーション撮影モードで録音されたアノテーション音声
６    動画像
７    アノテーション音声以外の音声
【００３１】
各ビットは、画像が撮影されたとき、アノテーションが付与されたとき等、変更の必要が発生したときに更新する。複数のビットの値を同時に１に設定することもできる。例えば、通常撮影モードで撮影した画像を音声アノテーション撮影モードの親画像として使用したときは、ビット０とビット４を値１にする。
【００３２】
デジタルカメラ１００の回路構成を図５に模式的に示す。ＣＣＤセンサ３２の出力信号は、データ処理部３３で画像を表すデジタルの画像データとされて、液晶表示器１４に表示され、また、指示に応じて記録媒体６に記録される。マイクロフォン４の出力信号は、データ処理部３３によってデジタルの音声データとされて、記録媒体６に記録される。記録媒体６に記録されている画像は、データ処理部３３を通して表示器１４に表示することが可能であり、記録媒体６に記録されている音声も、データ処理部３３を通してスピーカー１９より出力することができる。このような動作全体をＣＰＵ３１が制御する。
【００３３】
電力供給開始時の撮影モードの設定に関する処理の流れを図６に示す。デジタルカメラ１００は、電力供給停止時にその時点での撮影モードを記憶しておき、電力供給開始時（ステップ＃１）には記憶している撮影モードに設定する（ステップ＃２〜＃６）。
【００３４】
表示器１４には、画像のほか、撮影モードの切り替え等の操作を案内する種々のメニュー画面を表示する。表示器１４に表示するメインメニューを図７に示す。メインメニューでは、前述の４つの撮影モードを選択することができる。図７の例では、通常撮影モードが選択されている。モードの選択は４つの方向キー１３の操作によって行われ、決定ボタン１８の操作で確定する。このメインメニューには、メインメニューボタン１５を操作することにより移行することができる。
【００３５】
メインメニューで撮影モードを変更するときの処理の流れを図８に示す。決定ボタン１８が操作された時点で選択されているモードに、撮影モードが設定される（＃１１〜＃１５）。
【００３６】
図６のステップ＃３または図８のステップ＃１２で通常撮影モードに設定されているときは、通常のデジタルカメラとしての撮影処理に従って動作し、撮影終了後に、画像ファイルを作成して、そのタグに撮影モード情報を書き込む。
【００３７】
図６のステップ＃４または図８のステップ＃１３で文書撮影モードに設定されているときは、通常のデジタルカメラとしての撮影処理に従って動作するが、環境の明暗にかかわらず、デフォルトでのフラッシュの発光を行わない。撮影終了後に、画像ファイルを作成して、そのタグに撮影モード情報を書き込む。
【００３８】
図６のステップ＃５または図８のステップ＃１４で画像アノテーション撮影モードに設定されているときの処理の流れを図９に示す。電力供給開始後初めてこのモードに入った場合（ステップ＃２１）、関連付けファイルの更新（＃２２）と、撮影モード情報の更新（＃２３）を行う。これは、外部機器で記録媒体６内のファイルが更新されている場合に対処するためである。これらの更新を終了したら、親画像選択画面を表示する（＃２４）。
【００３９】
親画像選択画面の例を図１０に示す。親画像選択画面には、記録媒体６に記録されているファイルの画像と音声がサムネイル画像として表示される。なお、音声そのものを表示することはできないので、音声ファイルについては、音符を表したサムネイル画像４３を表示する。使用者は、表示された画像の中から親画像を選択する。図１０の例では、縁を太い線で表した画像４１が選択されている。選択は４つの方向キー１３の操作により行い、決定ボタン１８の操作で確定する。
【００４０】
サムネイル画像４１に接して表示されている「Ａ１」は、そのファイルの画像が、既に画像アノテーション撮影モードにおいて親画像として用いられたことを意味する。また、サムネイル画像４４に接して表示されている「Ａ２」は、そのファイルの画像が、既に音声アノテーション撮影モードにおいて親画像として用いられたことを意味する。このように、撮影モード情報に基づいて画像の属性を表示して、親画像の選択の一助とする。なお、「Ｍ」が重ねて表示されているサムネイル画像４２は、そのファイルの画像が動画であることを意味している。
【００４１】
親画像を選択する際の処理の流れを図１１に示す。まず、サムネイル画像を表示し（ステップ＃４１）、前回親画像として選択された画像があれば、その画像を選択されている状態にし、なければ、最も新しく撮影された画像を選択されている状態にする（＃４２〜＃４４）。使用者が前回親画像として選択した画像を親画像とする可能性は高いので、前回親画像として選択された画像を選択されている状態にすることで、選択のための操作を軽減することができる。
【００４２】
また、デジタルカメラ１００は、無駄な電力消費を抑えるために、所定時間にわたって操作がなされないときに電力供給を自動的に停止するオートパワーオフの機能を有しており、使用者が親画像を選択した状態で操作を中断している間に、オートパワーオフの機能が働くこともある。そのような場合でも、使用者は、親画像を選択する操作をすることなく、処理を継続することができる。なお、前回親画像として選択された画像の有無にかかわらず、最も新しく撮影された画像を選択されている状態にしてもよい。
【００４３】
さらに、前回親画像として選択された画像に代えて、既にアノテーションが付与されている画像を選択されている状態としてもよい。使用者が既にアノテーションを付与した画像に別のアノテーションを付与する可能性は高いから、このようにすることで、選択のための操作を軽減することができる。この場合、既にアノテーションが付与されている画像のうち、最も新しく撮影された画像を選択されている状態とするようにしてもよいし、最も新しくアノテーションが付与された画像を選択されている状態としてもよい。
【００４４】
次いで、方向キー１３による画像の選択を受け付けて、決定ボタン１８が操作されたときに選択されている画像を親画像とする（＃４５）。そして、決定した画像が親画像として使用し得るものであるか否かを判定する（＃４６〜＃４８）。具体的には、親画像に付与し得るアノテーションの数の制限を超えないか（この例では１０個までとしている）、および、動画像または音声を選択していないかである。これらに該当するときは、図１２に示すように警告を表示して（＃４９）、ステップ＃４５に戻る。
【００４５】
親画像の選択が終了すると、親画像のうちのアノテーション画像を付与する領域の位置および大きさを設定する領域設定画面を表示する（図９、ステップ＃２５）。この領域設定画面の初期状態の例を図１３に示す。領域設定画面では、選択された親画像を表示するとともに、その画像の中央に位置する領域枠５１をデフォルトで表示する。使用者は、この領域枠５１を、アノテーションを付与したい位置に移動させる。移動は４つの方向キー１３の操作により行う。使用者はまた、アノテーションを付与する領域の大きさを変更したいときは、領域枠５１を拡大または縮小させる。拡大縮小は領域サイズ変更ボタン２０の操作によって行う。位置を変更した領域枠５２を含む領域設定画面の例を図１４に示し、大きさも変更した領域枠５３を含む領域設定画面の例を図１５に示す。
【００４６】
領域設定画面にデフォルトで領域枠５１を表示する領域は、親画像の撮影に際して焦点調節に用いた領域としてもよい。デジタルカメラ１００では、画像のコントラストが高まる方向に撮影レンズ５の焦点を変化させて、最もコントラストが高くなる位置に撮影レンズ５の焦点を定めるサーボ方式の自動焦点調節を採用している。そのコントラストを検出する領域として、画像全体および画像の一部が選択可能であり、画像の一部については、画像の中央に位置するものをはじめ複数の領域が用意されている。これらのうち、実際に親画像の撮影に際して焦点調節に用いた領域をデフォルトの領域とすることで、使用者が撮影に際して特に関心をもっていた部分に容易にアノテーションを付与することができるようになる。なお、焦点調節に用いた領域は、画像ファイルのタグに記しておく。
【００４７】
選択した親画像に既にアノテーションが付与されている場合の領域選択画面を図１６に示す。領域枠５４が既に付与されているアノテーションに対応したものであり、領域枠５５が新たなアノテーションのためにデフォルトで表示するものである。領域枠５４と領域枠５５は、色、線の種類、線の太さ等を違えて異なる態様で表示される。既に付与されているアノテーションが複数あるときは、全てのアノテーションに対応する領域枠の表示態様を異ならせる。
【００４８】
領域設定の処理の流れを図１７に示す。まず、既存のアノテーションが存在すればその領域枠を表示し（ステップ＃５１）、次いで、新たに付与するアノテーションのためのデフォルトの領域枠を表示する（＃５２）。そして、使用者の操作を受け付けて、決定された位置および大きさを採用する（＃５３）。
【００４９】
図９に戻って、画像アノテーション撮影モードでの処理の説明を続ける。領域設定画面を表示してアノテーションを付与する領域を設定した後、アノテーション画像を撮影して（ステップ＃２６）、関連付けファイルの更新（＃２７）と、撮影モード情報の更新（＃２８）を行う。そして、親画像に付与したアノテーションの総数が上限値（ここでは前述のように１０個）に達しているか否かを判定する（＃２９）。総数が上限値に達しているときは、新たな親画像を選択するためにステップ＃２４に戻り、達していないときは、同じ親画像に新たに付すアノテーションのの領域を設定するためにステップ＃２５に戻る。
【００５０】
なお、使用者は、アノテーションの総数が１０個に達していない状態で新たな親画像を選択したいときは、メインメニューボタン１５の操作によって、ステップ＃２５から＃２４に戻ることができる。ステップ＃２４においてメインメニューボタン１５を操作すれば、撮影モードを選択する前述のメインメニューが表示される。
【００５１】
図６のステップ＃５または図８のステップ＃１４で音声アノテーション撮影モードに設定されているときの処理の流れを図１８に示す。図９のアノテーション画像を撮影する処理（ステップ＃２６）に代えて、アノテーション音声を録音する処理（ステップ＃２６Ｓ）が挿入されている。
【００５２】
関連付けファイルの更新および撮影モード情報の更新は、以下の（１）〜（４）の時点で、以下の規則に従って行う。
（１）アノテーション画像の撮影およびアノテーション音声の録音の終了時
▲１▼親画像に既存のアノテーションが存在しなければ、新規にアノテーションフォルダーと関連付けファイルとを作成し、関連付けファイルにアノテーション情報を書き込む。また、親画像ファイルの撮影モード情報を更新するとともに、生成したアノテーション画像ファイル、アノテーション音声ファイルに撮影モード情報を書き込む。
▲２▼親画像に既存のアノテーションが存在すれば、関連付けファイルにアノテーション情報を追記する。また、親画像ファイルの撮影モード情報を更新するとともに、生成したアノテーション画像ファイル、アノテーション音声ファイルに撮影モード情報を書き込む。
【００５３】
（２）電力供給開始後初めて画像アノテーション撮影モードまたは音声アノテーション撮影モードに入った時
▲１▼アノテーションフォルダー内の関連付けファイルに記述されている親画像、アノテーション画像、アノテーション音声のファイルが、そのアノテーションフォルダーに実際に存在するか否かを調べる。そして、存在しなければ、関連付けファイルの該当部分の記述を削除する。
▲２▼関連付けファイルに記述されているアノテーション画像、アノテーション音声のファイルが全て存在しない場合は、その関連付けファイルおよびアノテーションフォルダーを消去する。
▲３▼親画像のファイルが存在しない場合は、その関連付けファイル、アノテーションフォルダー（その中のアノテーション画像、アノテーション音声のファイルを含む）を消去する。
▲４▼関連付けファイルが存在しない場合は、アノテーションフォルダー（その中のアノテーション画像、アノテーション音声のファイルを含む）を消去する。
▲５▼上記の▲１▼〜▲４▼に処理に応じて、親画像ファイル、アノテーション画像ファイル、アノテーション音声ファイルの撮影モード情報を更新する。
▲６▼上記の▲１▼〜▲５▼の処理を全てのアノテーションフォルダーに対して実施する。
【００５４】
（３）電力供給中に記録媒体が装着された時
上記（２）と同じ処理を行う。
（４）電力供給中に外部機器との接続が解かれた時
上記（２）と同じ処理を行う。
【００５５】
上記（１）の処理の流れを図１９に示し、上記（２）の処理の流れを図２０に示す。また、上記（３）の処理の流れを図２１に示し、上記（４）の処理の流れを図２２に示す。
【００５６】
デジタルカメラ１００は、撮影モードにおいて記録媒体６に記録されている画像または音声の再生を行うクイックビューの機能を有する。通常撮影モード、文書撮影モード、画像アノテーション撮影モード、音声アノテーション撮影モードのいずれにおいても、クイックビューを利用することができる。クイックビューの開始は、クイックビューボタン１６の操作によって指示される。
【００５７】
クイックビューにおける処理の流れを図２３に示す。クイックビューボタン１６が操作されると、最も新しく撮影または録音された画像、動画像、音声が再生される（ステップ＃８１）。再生中に４つの方向キー１３のうちの左方向キーまたは右方向キーを操作することにより、再生する画像または音声を切り替えることができる。また、再生中に削除ボタン１７が操作されると（＃８２）、再生中の画像または音声のファイルが削除される（＃８３）。
【００５８】
クイックビューの終了（＃８４）は、クイックビューボタン１６の再操作によって指示される。クイックビューの終了に際し、領域設定画面（図９、ステップ＃２５）以外からクイックビューに入っていたときは、元の画面の表示に戻る。また、領域設定画面を表示している状態でクイックビューに入っていたときは、領域を設定しようとしていた親画像がクイックビューでの再生中に削除されたか否かを判定し（＃８６）、削除されていなければ元の領域設定画面の表示に戻る。親画像が削除されていれば、その親画像を選択していることに意味がないので、親画像選択画面（図９、ステップ＃２４）の表示に戻る。
【００５９】
ステップ＃８３のファイル削除の処理の流れを図２４に示す。削除ボタン１７の操作に応じて、再生中の画像、動画像、音声のファイルを削除する（ステップ＃９１）。そして、削除したファイルが親画像、アノテーション画像、またはアノテーション音声のものであるか否かを判定し（＃９２）、該当するときは、表１、表２に従って、関連付けファイルおよび撮影モード情報を更新する（＃９３、＃９４）。
【００６０】
領域設定画面を表示している状態からクイックビューを開始する別の処理の流れを図２５に示す。この処理では、選択されている親画像に付与されているアノテーション画像およびアノテーション音声のみが再生される（ステップ＃９６）。ファイルの削除も選択されている親画像に付与されているアノテーション画像およびアノテーション音声のもののみが可能である。このようにすると、親画像にどのようなアノテーションが付与されているかが判り易く、また、親画像に関係のないファイルを誤って削除する可能性をなくすことができる。
【００６１】
これまで述べてきたデジタルカメラ１００のアノテーションモードは、画像アノテーション撮影モードと音声アノテーション撮影モードを別の処理とし、メインメニュー（図７）でいずれかを選択するものであった。これは、親画像に複数のアノテーション画像を連続して付与する場合や複数のアノテーション音声を連続して付与する場合に、便利な設定である。その反面、親画像にアノテーション画像とアノテーション音声とを付与する場合には、メインメニューに戻って撮影モードを切り替える必要があり、操作がやや煩雑になる。
【００６２】
また、これまでに述べた方法では、アノテーションを付与する画像を記録媒体６に既に記録されている画像のみに限っている。このため、使用者がこれから画像を撮影して、その画像にアノテーションを付与したいときには、メインメニューにおいて通常撮影モードに設定し、画像を撮影して記録し、さらに、メインメニューでアノテーション画像撮影モードまたはアノテーション音声モードに設定して、アノテーション画像の撮影またはアノテーション音声の録音をする必要があり、やはり操作がやや煩雑である。
【００６３】
以下、異種（画像と音声）のアノテーションを連続して付与する場合や、これから撮影する画像にアノテーションを付与する場合に、能率のよいモード設定方法について述べる。この方法におけるメインメニューを図２６に示す。画像アノテーション撮影モードと音声アノテーション撮影モードに代えて、単一のアノテーション撮影モードが設けられており、これが通常撮影モードと文書撮影モードと並列に表示されている。
【００６４】
アノテーション撮影モードにおける処理の流れを図２７に示す。まず、電力供給開始後初めてこのモードに入ったときは、関連付けファイルの更新と撮影モード情報の更新を行う（ステップ＃６２〜＃６４）。これらの処理は前述の図９のステップ＃２１〜＃２３と同じである。次いで、図２８に示す画面を表示して、これから撮影する画像を親画像とするか、記録媒体６に記録されている既存の画像を親画像とするかを、使用者が選択できるようにする（ステップ＃６５）。使用者は方向キー１３の操作でいずれかを選択し、決定ボタン１８の操作で選択を確定する。
【００６５】
これから撮影する画像を親画像とする指示を与えられたときはステップ＃６７に進み、既存の画像を親画像とする指示を与えられたときはステップ＃６６に進む。ステップ＃６６では前述の図１１に示した一連の処理を行い、ステップ＃６７では、通常の画像の撮影と同じようにして、親画像とする画像を撮影する。
【００６６】
こうして親画像が定まると、図９のステップ＃２５と同様に領域設定画面を表示して、アノテーションを付与する領域の位置および大きさを設定する（＃６８）。領域設定後、図２９に示す画面を表示して、アノテーションを画像と音声のいずれにするかを使用者が選択できるようにする（＃６９）。使用者は方向キー１３の操作でいずれかを選択し、決定ボタン１８の操作で選択を確定する。
【００６７】
その選択に応じて、アノテーション画像の撮影（＃７０）またはアノテーション音声の録音（＃７１）を行い、図９のステップ＃２７、＃２８と同様に、関連付けファイルの更新と撮影モード情報の更新を行う（ステップ＃７２、＃７３）。そして、その親画像に付与されているアノテーションの総数が上限値（ここでは１０個としている）に達しているか否かを判定し（＃７４）、達していれば、既存の画像とこれから撮影する画像のいずれを親画像とするかの選択を受け付けるステップ＃６５に戻り、達していなければ、領域の位置および大きさを設定するステップ＃６８に戻る。
【００６８】
このモード設定方法においても、電力供給停止時にその時点での撮影モードを記憶しておき、次の電力供給開始時には記憶している撮影モードに設定する。電力供給開始時の撮影モード設定の処理の流れを図３０に示す。また、メインメニューで撮影モードが選択されたときの、モード切り替えの処理の流れを図３１に示す。
【００６９】
このモード設定方法では、これから撮影する画像にアノテーションを付与することを使用者が望む場合には、その画像を撮影して直ちにアノテーションを付す処理を行うことができるので、能率がよい。また、同一の親画像にアノテーション画像とアノテーション音声を連続して付与する場合に、途中で親画像を選択する処理をする必要がなく、この点でも能率がよい。
【００７０】
なお、ここでは、これから撮影する画像を親画像とするか記録媒体６に記録されている既存の画像を親画像とするかの選択のための表示と、記録媒体６中の既存の画像を選択するための表示とを、別のステップとして順に行うようにしているが（図２７、ステップ＃６５、＃６６）、これらの表示を一度に行うようにしてもよい。このための表示画面の例を図３２に示す。
【００７１】
この画面は、前述の図１０のものと同様に、記録媒体６中のファイルのサムネイル画像を並べて表示したものであるが、さらに、これから撮影する画像を親画像とすることを示す「親画像撮影」を記した像４５も表示している。使用者は、この像４５を選択することで、これから撮影する画像を親画像とすることを指示することができ、像４５以外のサムネイル画像を選択することで、既存の画像を親画像とすることを指示するとともに、既存のどの画像を親画像とするかを指示することができる。このようにすると、画面の切り替えの回数が少なくなって、能率が一層向上する。
【００７２】
【発明の効果】
画像を撮影する撮像部と、撮影された画像を記録媒体に記録する記録部と、記録媒体に記録されている画像を表示する表示部を備えるとともに、表示部に画像を表示して、その画像の一部の領域に対して注釈情報を付与する動作モードを有する撮像装置において、本発明のように、記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とするか、撮像部によって新たに撮影される画像を注釈情報を付与する画像とするかを、与えられる指示に応じて切り替えるようにすると、使用者は画像を撮影してその画像に直ちに注釈情報を付与することが可能になり、能率がよい。
【００７３】
記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、注釈情報を付与する画像を選択するための選択画面を表示部に表示するようにすると、画像の選択を直ちに開始することができて能率が向上する。
【００７４】
ここで、注釈情報を付与する画像として選択された画像を表示している間に、その画像が記録媒体から消去されたとき、注釈情報を付与する画像を選択するための選択画面を表示部に表示するようにすると、消去した画像に注釈情報を付与しようとする矛盾した操作を未然に回避することができる。
【００７５】
使用者によって操作される操作部材を備え、注釈情報を付与する画像として選択された画像を表示している間に、その操作部材が操作されたとき、表示している画像に既に付与されている注釈情報を再生するようにすると、どのような注釈情報が付与されているかが使用者に判り、同一の画像に同一または類似の注釈情報を付与する無駄を避けることができる。
【００７６】
記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、画像が選択される前に、前回選択された画像を選択された画像として表示するようにすると、注釈情報を付与する画像として選択される可能性の高い画像をデフォルトで表示することになり、能率が向上する。
【００７７】
記録媒体に記録されている画像の中から選択された画像を注釈情報を付与する画像とする指示を与えられたとき、画像が選択される前に、既に注釈情報が付与されている画像を選択された画像として表示するようにすると、注釈情報を付与される可能性の高い画像をデフォルトで表示することになり、能率が向上する。
【００７８】
画像の一部の領域に対して注釈情報を付与する方法において、本発明のように、既に撮影されている画像の中から選択された画像を注釈情報を付与する画像とするか、新たに撮影される画像を注釈情報を付与する画像とするかを、与えられる指示に応じて切り替えるようにすると、使用者は画像を撮影してその画像に直ちに注釈情報を付与することが可能になり、能率がよい。
【図面の簡単な説明】
【図１】本発明の一実施形態のデジタルカメラの斜視図。
【図２】上記デジタルカメラの背面図。
【図３】上記デジタルカメラがアノテーションを付与した親画像の例（ａ）と、付与されたアノテーション画像の例（ｂ）を示す図。
【図４】上記デジタルカメラのファイルフォルダーの構成を示す図。
【図５】上記デジタルカメラの回路構成を模式的に示す図。
【図６】上記デジタルカメラにおける電力供給開始時の撮影モードの設定に関する処理の流れを示すフローチャート。
【図７】上記デジタルカメラが撮影モードの選択のために表示するメインメニューを示す図。
【図８】上記デジタルカメラにおける撮影モードの変更の処理の流れを示すフローチャート。
【図９】上記デジタルカメラの画像アノテーション撮影モードでの処理の流れを示すフローチャート。
【図１０】上記デジタルカメラがアノテーションを付与する親画像の選択のために表示する画面の例を示す図。
【図１１】上記デジタルカメラにおける親画像の選択の処理の流れを示すフローチャート。
【図１２】上記デジタルカメラが親画像として不適当な画像が選択されたときに表示する警告の例を示す図。
【図１３】上記デジタルカメラが親画像の領域設定のために表示する初期画面の例を示す図。
【図１４】上記デジタルカメラにおける位置変更後の領域を含む画面の例を示す図。
【図１５】上記デジタルカメラにおける位置および大きさ変更後の領域を含む画面の例を示す図。
【図１６】上記デジタルカメラが既にアノテーションが付与されている画像の領域設定のために表示する画面の例を示す図。
【図１７】上記デジタルカメラにおける親画像の領域設定の処理の流れを示すフローチャート。
【図１８】上記デジタルカメラの音声アノテーション撮影モードでの処理の流れを示すフローチャート。
【図１９】上記デジタルカメラにおけるアノテーション画像の撮影およびアノテーション音声の録音の終了時の処理の流れを示すフローチャート。
【図２０】上記デジタルカメラにおける電力供給開始後初めて画像アノテーション撮影モードまたは音声アノテーション撮影モードに入った時の処理の流れを示すフローチャート。
【図２１】上記デジタルカメラにおける電力供給中に記録媒体が装着された時の処理の流れを示すフローチャート。
【図２２】上記デジタルカメラにおける電力供給中に外部機器との接続が解かれた時の処理の流れを示すフローチャート。
【図２３】上記デジタルカメラにおけるクイックビューの処理の流れを示すフローチャート。
【図２４】上記デジタルカメラにおけるクイックビューでのファイル削除の処理の流れを示すフローチャート。
【図２５】上記デジタルカメラにおける領域設定用画面を表示した状態からクイックビューを開始する別の処理の流れを示すフローチャート。
【図２６】上記デジタルカメラが撮影モードの選択のために表示する別のメインメニューを示す図。
【図２７】上記デジタルカメラのアノテーション撮影モードでの処理の流れを示すフローチャート。
【図２８】上記デジタルカメラがこれから撮影する画像を親画像とするか既存の画像を親画像とするかの選択のために表示する画面を示す図。
【図２９】上記デジタルカメラが親画像に付与するアノテーションを画像とするか音声とするかの選択のために表示する画面を示す図。
【図３０】上記デジタルカメラにおける電力供給開始時の撮影モードの設定に関する処理の流れを示すフローチャート。
【図３１】上記デジタルカメラにおける撮影モードの変更の処理の流れを示すフローチャート。
【図３２】上記デジタルカメラが、これから撮影する画像を親画像とするか既存の画像を親画像とするかの選択のため、および既存のどの画像を親画像とするかの選択するために表示する画面の例を示す図。
【符号の説明】
１００    デジタルカメラ
１    電源ボタン
２    シャッターボタン
３    ファインダー前窓
４    マイクロフォン
５    撮影レンズ
６    記録媒体
７    記録媒体挿入口
８    外部機器接続端子
１１    ファインダー後窓
１２    モード切り替えダイヤル
１３    方向キー
１４    液晶表示器
１５    メインメニューボタン
１６    クイックビューボタン
１７    削除ボタン
１８    決定ボタン
１９    スピーカー
２０    領域サイズ変更ボタン
２１    親画像
２２、２３  領域枠
２４    アノテーション画像
３１    ＣＰＵ
３２    ＣＣＤエリアセンサ
３３    データ処理部
４１〜４４  サムネイル画像
５１〜５５  領域枠
【図１】
2005020654.tif 000003
【図２】
2005020654.tif 000004
【図３】
2005020654.tif 000005
【図４】
2005020654.tif 000006
【図５】
2005020654.tif 000007
【図６】
2005020654.tif 000008
【図７】
2005020654.tif 000009
【図８】
2005020654.tif 000010
【図９】
2005020654.tif 000011
【図１０】
2005020654.tif 000012
【図１１】
2005020654.tif 000013
【図１２】
2005020654.tif 000014
【図１３】
2005020654.tif 000015
【図１４】
2005020654.tif 000016
【図１５】
2005020654.tif 000017
【図１６】
2005020654.tif 000018
【図１７】
2005020654.tif 000019
【図１８】
2005020654.tif 000020
【図１９】
2005020654.tif 000021
【図２０】
2005020654.tif 000022
【図２１】
2005020654.tif 000023
【図２２】
2005020654.tif 000024
【図２３】
2005020654.tif 000025
【図２４】
2005020654.tif 000026
【図２５】
2005020654.tif 000027
【図２６】
2005020654.tif 000028
【図２７】
2005020654.tif 000029
【図２８】
2005020654.tif 000030
【図２９】
2005020654.tif 000031
【図３０】
2005020654.tif 000032
【図３１】
2005020654.tif 000033
【図３２】
2005020654.tif 000034