(57)【要約】【課題】撮影した画像と共に注釈を記録する撮像装置であって、画像の中のどの部位についての注釈であるかが判り易く、しかも煩雑さを伴うことなく注釈を入力することが可能なものを提供する。【解決手段】撮像素子（１２）の一部の領域に撮影対象からの光が結像するように撮影レンズ（１１）の焦点を調節する自動焦点調節機能をデジタルカメラにもたせ、撮影された画像のうち結像状態の判定に用いる撮像素子の基準領域で撮影された領域を、注釈を付す注釈領域とする。撮影した画像と、注釈領域の位置および大きさを示す情報と、マイクロフォン（４１）を介して音声として入力された注釈とを対応づけて、メモリカード（６１）に記録する。記録した画像の再生に際しては、画像を表示部（２０）に表示し、これに重ねて注釈領域を表す画像を表示して、注釈をスピーカ（４２）より音声として出力する。【選択図】      図２
2004180181.tif 000002
【特許請求の範囲】
【請求項１】
撮影した画像に関する注釈を入力され、入力された注釈を撮影した画像と共に記録する撮像装置において、
撮影対象からの光を受けて画像を撮影する撮像素子と、
撮影対象からの光を撮像素子に導く撮影光学系と、
撮像素子の一部の領域を基準領域として、撮影対象からの光が基準領域に結像するように撮影光学系の焦点を調節する調節手段と、
画像を表示する表示手段と、
画像を記録媒体に記録する記録手段と、
注釈の入力を受け付ける入力手段と、
撮影した画像のうち基準領域で撮影された領域を注釈領域として、注釈領域を表す画像を生成する生成手段とを備えて、
撮像素子が画像を撮影したときに、表示手段が撮影した画像と注釈領域を表す画像を重ねて表示し、入力手段が注釈の入力を受け付け、記録手段が撮影した画像と注釈領域を示す情報と入力された注釈とを対応づけて記録媒体に記録する
ことを特徴とする撮像装置。
【請求項２】
表示手段が注釈領域を表示しているときに、使用者からの指示に応じて注釈領域を変更する変更手段を備えることを特徴とする請求項１に記載の撮像装置。
【請求項３】
使用者からの指示に応じて基準領域を設定する設定手段を備えることを特徴とする請求項１に記載の撮像装置。
【請求項４】
撮影対象からの光が基準領域に結像したときに調節手段に撮影光学系の焦点の調節を停止させる停止手段と、
撮像素子と撮影対象との相対位置の変化を検出して、変化前に基準領域に対応していた撮影対象の部位に対応する変化後の撮像素子の領域を合焦領域として検出する検出手段とを備えて、
停止手段が調節手段に撮影光学系の焦点の調節を停止させた状態で撮像素子が画像を撮影したときに、検出手段が合焦領域を検出し、生成手段が、基準領域で撮影された領域を注釈領域とすることに代えて、合焦領域で撮影された領域を注釈領域とすることを特徴とする請求項１に記載の撮像装置。
【請求項５】
画像の部位の指定を受け付ける指定手段を備えて、
使用者からの指示に応じて、記録手段が記録媒体から画像を読み出し、表示手段が読み出した画像を表示し、指定手段が画像の部位の指定を受け付け、生成手段が指定された画像の部位に対応する撮像素子の領域を注釈領域として注釈領域を表す画像を生成し、表示手段が読み出した画像に重ねて注釈領域を表す画像を表示し、入力手段が注釈の入力を受け付け、記録手段が注釈領域を示す情報と入力された注釈とを読み出した画像に対応づけて記録媒体に記録することを特徴とする請求項１に記載の撮像装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像を撮影するとともに、注釈を入力されて、撮影した画像と共に注釈を記録する撮像装置に関する。
【０００２】
【従来の技術】
撮影した画像に関する使用者の注釈を入力されて、入力された注釈を撮影した画像と共に記録するデジタルカメラが提案されている。例えば、特開２０００−１８４２５８号公報には、音声によって注釈を入力するようにしたデジタルカメラが開示されている。
【０００３】
撮影した画像と共に注釈を記録すると、後に画像を鑑賞する際に、注釈によって撮影時の印象等を思い出すことができて、使用者にとって便利である。また、注釈を画像と共に他の人（のカメラやパーソナルコンピュータ）に提供することで、画像のみを提供する場合よりも詳しい情報の伝達が可能になり、情報伝達というカメラの本質的な機能が一層強化される。
【０００４】
【特許文献１】特開２０００−１８４２５８号公報
【０００５】
【発明が解決しようとする課題】
ところが、従来のデジタルカメラでは、画像全体に対して注釈を入力するようにしており、画像の特定の部位についての注釈を入力しても、他の人や後に画像を鑑賞する使用者自身にとって、どの部位についての注釈であるかが判り難い。注釈の中に部位を特定する表現（例えば「右上の・・・」等）を含めれば、この不都合は避けられるが、そのようにすると注釈の入力が煩雑になる。また、画像の中の注釈を付したい部位のみを別途撮影することでも上記の不都合を避けることはできるが、そのようにすると複数の画像を撮影しなければならなくなって、やはり煩雑さが伴う。しかも、撮影レンズの焦点距離等の制約によって、注釈を付したい部位のみを撮影することが不可能なことも多い。
【０００６】
本発明はこのような問題点に鑑みてなされたもので、画像の中のどの部位についての注釈であるかが判り易く、しかも、煩雑さを伴うことなく注釈を入力することが可能な撮像装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記目的を達成するために、本発明では、撮影した画像に関する注釈を入力され、入力された注釈を撮影した画像と共に記録する撮像装置において、撮影対象からの光を受けて画像を撮影する撮像素子と、撮影対象からの光を撮像素子に導く撮影光学系と、撮像素子の一部の領域を基準領域として、撮影対象からの光が基準領域に結像するように撮影光学系の焦点を調節する調節手段と、画像を表示する表示手段と、画像を記録媒体に記録する記録手段と、注釈の入力を受け付ける入力手段と、撮影した画像のうち基準領域で撮影された領域を注釈領域として、注釈領域を表す画像を生成する生成手段とを備えて、撮像素子が画像を撮影したときに、表示手段が撮影した画像と注釈領域を表す画像を重ねて表示し、入力手段が注釈の入力を受け付け、記録手段が撮影した画像と注釈領域を示す情報と入力された注釈とを対応づけて記録媒体に記録するようにする。
【０００８】
この撮像装置は、調節手段を備えており、撮影対象に対して撮影光学系の焦点を自動的に合わせる自動焦点調節（ＡＦ）の機能を有する。ただし、撮影対象までの距離は部位によって異なるため、自動焦点調節は、撮像素子のうちの一部の領域である基準領域で撮影される部位に対して行う。この撮像装置はまた、使用者から注釈を入力されて、注釈を撮影した画像の一部の領域に対応づけて記録する。注釈を対応づける注釈領域は自動焦点調節に用いる基準領域で撮影された領域である。使用者は撮影対象のうち特に関心をもっている部位を注視し、その部位を基準領域に合わせて鮮明に撮影しようとするから、注釈は撮影対象のうち使用者が特に関心をもっている部位に対して付されることになる。
【０００９】
記録する注釈領域を示す情報には位置や大きさを含めておく。記録媒体から画像を読み出して表示するときに、注釈領域を示す情報も読み出してその像を表示することにより、注釈が画像のどの部位に対するものかを確実に知ることができる。また、撮影された画像の中で注釈領域が最も鮮明になるから、注釈領域の像を表示しなくても、鮮明さによって注釈領域は判り、したがって、注釈がどの部位に対するものであるかが判る。なお、注釈の入力は音声によって行うようにしてもよいし、キー操作等の他の方法で行うようにしてもよい。
【００１０】
上記の撮像装置は、表示手段が注釈領域を表示しているときに、使用者からの指示に応じて注釈領域を変更する変更手段を備える構成とすることができる。この構成では、注釈を付す部位を使用者が任意に定めることができて、使い易さが向上する。
【００１１】
使用者からの指示に応じて基準領域を設定する設定手段を備える構成とすることもできる。この構成では、自動焦点調節に用いる基準領域を変えることができるため、撮影に際して構図の制約が少なくなる。しかも、注釈領域は基準領域に連動して変わるため、注釈を付す部位を使用者が定めることができるようになる。基準領域を複数設定することも可能であり、これにより、撮影対象の中に使用者が特に関心をもつ部位が複数存在するときに、それらの部位全てを鮮明に撮影することができる。また、それらの部位それぞれに対して注釈を付すこともできる。
【００１２】
撮影対象からの光が基準領域に結像したときに調節手段に撮影光学系の焦点の調節を停止させる停止手段と、撮像素子と撮影対象との相対位置の変化を検出して、変化前に基準領域に対応していた撮影対象の部位に対応する変化後の撮像素子の領域を合焦領域として検出する検出手段とを備えて、停止手段が調節手段に撮影光学系の焦点の調節を停止させた状態で撮像素子が画像を撮影したときに、検出手段が合焦領域を検出し、生成手段が、基準領域で撮影された領域を注釈領域とすることに代えて、合焦領域で撮影された領域を注釈領域とするようにしてもよい。
【００１３】
この構成では、撮影対象からの光が一旦基準領域に結像した後は、自動焦点調節を止めてその結像状態を維持する、いわゆる合焦ロックの機能を有することになる。撮影対象からの光が基準領域に結像した後に使用者が装置の向きを変えて構図を変化させると、撮影対象のうち基準領域に対応していた部位、つまり合焦していた部位は、もはや基準領域には対応しなくなる。このとき、基準領域に対応していた撮影対象の部位に対応する撮像素子の領域を検出し、この合焦領域を注釈領域とすることで、注釈は使用者が特に関心をもっている部位に対して付されることになる。
【００１４】
さらに、画像の部位の指定を受け付ける指定手段を備えて、使用者からの指示に応じて、記録手段が記録媒体から画像を読み出し、表示手段が読み出した画像を表示し、指定手段が画像の部位の指定を受け付け、生成手段が指定された画像の部位に対応する撮像素子の領域を注釈領域として注釈領域を表す画像を生成し、表示手段が読み出した画像に重ねて注釈領域を表す画像を表示し、入力手段が注釈の入力を受け付け、記録手段が注釈領域を示す情報と入力された注釈とを読み出した画像に対応づけて記録媒体に記録するようにしてもよい。このようにすると、使用者は、撮影をしないときに、記録されている画像を表示させ、その中の所望の部位を指定してその部位に対して注釈を付すことができるようになる。
【００１５】
【発明の実施の形態】
以下、本発明の撮像装置の一実施形態のデジタルカメラについて、図面を参照しながら説明する。本実施形態のデジタルカメラ１の外観を図１に模式的に示す。図１において（ａ）は一部を透視して表した正面図、（ｂ）は背面図である。デジタルカメラ１は、前面に撮影レンズ１１、内部にＣＣＤエリアセンサから成る撮像素子１２を備えており、撮影対象からの光を撮影レンズ１１によって撮像素子１２に導いて撮像素子１２上に結像させ、撮像素子１２で光電変換を行うことによって画像を撮影する。前面にはフラッシュ光を発するフラッシュ部１３が設けられており、環境が暗いときには、フラッシュ部１３よりフラッシュ光を発して撮影対象を照明する。
【００１６】
画像の撮影は略一定の周期（例えば１／３０秒）で繰り返し行う。撮影した画像は、後述するファインダに順次表示され、また、使用者からの指示に応じて着脱可能な記憶媒体であるメモリカードに記録される。
【００１７】
デジタルカメラ１は、撮影対象に対して撮影レンズ１１の焦点を自動的に合わせる自動焦点調節（ＡＦ）機能を有している。自動焦点調節は、撮像素子１２の出力信号からコントラストを検出しながら、コントラストが高くなる方向に撮影レンズ１１の焦点を移動させるサーボ方式によって行う。コントラストの検出には撮像素子１２の一部の領域からの出力信号を用いる。以下、自動焦点調節に用いる撮像素子１２のこの領域を基準領域という。基準領域は撮像素子１２の中央に所定の大きさで設定されているが、基準領域の位置と大きさは変更可能である。なお、環境が暗く自動焦点調節ができないときに撮影対象に向けて補助光を発するための補助光部１４が設けられている。
【００１８】
デジタルカメラ１は、また、撮影対象の明るさに応じて撮像素子の露光量を自動的に調節する自動露光制御（ＡＥ）機能を有している。自動露光制御は、撮像素子１２の光電変換時間、つまりシャッター速度を調節することで行う。自動露光制御も自動焦点調節のための基準領域からの出力信号に基づいて行うが、使用者が指定する領域の出力信号に基づいて行うように変更することもできる。
【００１９】
背面には、電子ビューファインダ（ＥＶＦ）１５、表示部２０、メインスイッチ３１、および複数の操作キー３５、３６が設けられている。電子ビューファインダ１５は、液晶表示装置より成り、繰り返し撮影される最新の画像をライブビューとして表示する。使用者は、ファインダ１５に表示されるライブビューを観察しながら、構図を決定することができる。表示部２０は、大型の液晶表示装置より成り、画像を表示し、また種々の情報を表示する。
【００２０】
メインスイッチ３１はスライド式であり、各部への電力供給と動作モードの切り替えの指示に用いられる。メインスイッチ３１が「ＯＦＦ」と記された位置に設定されているとき、電力供給はなされず、デジタルカメラ１は動作をしない状態となる。メインスイッチ３１が「ＲＥＣ」と記された位置に設定されているとき、デジタルカメラ１は画像を撮影する撮影モードとなり、その間に撮影した画像をメモリカードに記録することができる。メインスイッチ３１が「ＰＬＡＹ」と記された位置に設定されているとき、デジタルカメラ１はメモリカードに記録されている画像を読み出して表示する再生モードとなる。再生モードにおける画像の表示は、表示部２０によって行われる。また、記録する画像も表示部２０に表示される。
【００２１】
操作キー３５、３６は、後述の注釈に関する指示を与えるために操作される。操作キー３５には各キーの機能を表す「確定」等の記号が付されており、４つの操作キー３６にはそれぞれ上下左右の方向を示す三角形の記号が付されている。以下、操作キー３５を、付されている記号で表して、例えば確定キーとよび、操作キー３６を、付されている記号の方向で表して、例えば右方向キーとよぶ。
【００２２】
上面には、レリーズボタン３２、操作ダイアル３３、およびアノテーションボタン３４が設けられている。レリーズボタン３２は２段階のストロークで動作し、半押しで撮影と自動焦点調節の開始を指示するＳ１信号を生成し、全押しで画像の記録を指示するＳ２信号を生成する。操作ダイアル３３は、自動焦点調節および自動露光制御に関する指示、例えば基準領域の変更の指示のために操作される。
【００２３】
デジタルカメラ１は、撮影モードにおいて、撮影した画像に注釈を付して記録する機能と、再生モードにおいて、再生表示する画像にさらに注釈を付したり注釈を編集したりする機能を有しており、アノテーションボタン３４は、これらの機能を実行するアノテーションモードへの移行の指示のために操作される。撮影モードで注釈を付すモードを撮影アノテーションモードといい、再生モードで画像に注釈を付したり注釈を編集したりするモードを再生アノテーションモードという。再生モードにおいては、画像だけでなく注釈も再生することが可能である。
【００２４】
注釈の入力と再生は音声によって行う。音声入力のために、デジタルカメラ１の上面にはマイクロフォン４１が設けられており、音声出力のために背面にはスピーカ４２が設けられている。
【００２５】
デジタルカメラ１の回路構成を図２に模式的に示す。デジタルカメラ１は上述の各部に加えて、画像処理部５０、記録部６０、制御部７０および圧電ジャイロ８１を備える。なお、操作部３０は、メインスイッチ３１、レリーズボタン３２、操作キー３５、３６等、使用者によって操作される構成要素の総称である。画像処理部５０は、撮像素子１２の出力信号にデジタル化、ホワイトバランス調整、γ補正等の諸処理を施して、撮影した画像を表す画像データを生成する。記録部６０は、画像（画像データ）と注釈をメモリカード６１に記録するとともに、メモリカード６１に記録されている画像と注釈を読み出す。制御部７０は、各部を制御して、デジタルカメラ１全体の動作を制御する。自動焦点調節や注釈に関する制御も制御部７０が行う。
【００２６】
圧電ジャイロ８１は角加速度を検出する。圧電ジャイロ８１の検出結果は制御部７０に与えられ、制御部７０は与えられる角加速度を２回積分して角度を算出し、これを使用者の手振れに起因するデジタルカメラ１の回動量とする。そして、回動量に応じた補正処理を行うように画像処理部５０に指示を与えて、振れの除去された画像データを生成させる。
【００２７】
撮影モードでは、レリーズボタン３２の操作（Ｓ１信号）に応じて撮像素子１２によって撮影を行いながら、画像処理部５０が生成した画像データに基づいて自動焦点調節を行う。また、画像処理部５０が基準領域を表す画像を生成して撮影した画像と合成し、合成後の画像を電子ビューファインダ１５に表示する。ファインダ１５にはライブビューである画像と基準領域を表す画像が重なって表示され、これにより、使用者は撮影対象のどの部位に撮影レンズ１１の焦点が合うのかを知ることができる。
【００２８】
さらなるレリーズボタン３２の操作（Ｓ２信号）によって画像の記録が指示されたときは、画像データに基づいて自動露光制御を行い、その後に撮影した画像を記録部６０によってメモリカード６１に記録する。記録した画像についてはアフタービューとして表示部２０にも表示し、基準領域を表す画像も表示部２０に表示する。
【００２９】
撮影アノテーションモードでは、撮影した画像のうち基準領域で撮影された領域を注釈を付す対象の注釈領域とする。したがって、撮影対象の中の最も鮮明に撮影される部位、換言すれば使用者が最も関心をもっている部位に対して、注釈が付されることになる。撮影アノテーションモードでは、注釈領域を表す画像を基準領域を表す画像とは異なる態様で電子ビューファインダ１５や表示部２０に表示する。ただし、注釈領域は基準領域に対応しているから、撮影領域を表す画像の色、線種等を変えるだけで、注釈領域を撮影領域とは異なる態様で表すことができる。
【００３０】
使用者は、記録した画像と注釈領域を表す画像が表示部２０に表示されると、操作キー３５の中の音声キーを操作して注釈の入力を開始することを制御部７０に示し、続いて注釈を音声でマイクロフォン４１を介して入力し、さらに確定キーを操作して注釈の入力の終了を示す。
【００３１】
入力された注釈は注釈領域を示す情報と共に、画像に対応づけられてメモリカード６１に記録される。注釈領域を示す情報には、注釈領域の中心の位置と大きさとが含まれる。メモリカード６１に記録するデータ構造を図３に模式的に示す。図３において、画像１、画像２の注釈１は撮影アノテーションモードで記録されたものであり、画像２の注釈２は再生アノテーションモードで記録されたものである。注釈内容は入力された音声のデータである。画像２の注釈２には、２つの内容１、２が含まれており、この注釈領域には注釈が２つ付されている。
【００３２】
図４に、撮影アノテーションモードで表示部２０に表示される注釈領域の画像の例を示す。この例では、基準領域は正方形として撮像素子１２の中央に定められており、注釈領域を表す画像Ａも正方形であって、表示部２０に表示される画像の中央に位置する。
【００３３】
撮影アノテーションモードにおける注釈領域は、使用者が変更することが可能である。注釈領域は、図４に矢印Ｈ、Ｖで示すように位置を変えることができるし、矢印Ｅで示すように大きさを変えることもできる。位置の変更は、４つの方向キー３６の操作により行い、大きさの変更は、確定キーにより位置を確定した後、上方向キーと下方向キーの操作により行う。位置および大きさを変更した注釈領域の画像を含む表示部２０の表示の例を図５に示す。
【００３４】
デジタルカメラ１では、レリーズボタン３２が半押しされている間（Ｓ１信号が生成されている間）、常に自動焦点調節を行うコンティニュアスＡＦと、撮影対象からの光が基準領域に結像（合焦）した後は、Ｓ１信号の生成が再び開始されるまで、自動焦点調節を停止する合焦ロックＡＦとを選択することができる。そして、撮影アノテーションモードで合焦ロックＡＦが選択されているときは、圧電ジャイロ８１の出力より合焦時からのカメラ１の回動量を求め、合焦時に基準領域に対応していた撮影対象の部位に対応する撮像素子の領域、つまり撮影対象からの光が結像している合焦領域を検出し、撮影した画像のうち合焦領域で撮影された領域を注釈領域とする。この場合、表示部２０には、合焦領域に対応する位置に注釈領域を表示する。この注釈領域も上述のようにして変更することができる。
【００３５】
コンティニュアスＡＦと合焦ロックＡＦの切り替えはダイヤル３３の操作により行う。なお、圧電ジャイロ８１の出力に基づいて合焦領域を検出することに代えて、画像認識によって合焦領域を検出してもよい。すなわち、合焦時に撮影した画像と比較することによって、合焦時に基準領域で撮影された領域と同一内容の領域を見出し、これを合焦領域とする。
【００３６】
再生モードでは、メモリカード６１から画像と注釈領域を示す情報と注釈を読み出して、読み出した画像を表示部２０に表示する。また、注釈領域を示す情報に基づいて注釈領域を表す画像を生成し、その画像を表示部２０に表示している画像に重ねて表示する。１つの画像に対応して複数の注釈領域が記録されているときは、全ての注釈領域の画像を表示する。この表示の例を図６に示す。注釈領域を示す情報と共に注釈が記録されているときは、所定の記号Ｓ（ここでは音符）を注釈領域の画像Ａに加え、注釈領域を示す情報が記録されながら注釈が記録されてないときは、所定の記号Ｓを加えない。これで注釈の有無が判る。
【００３７】
注釈領域を表す画像Ａのほかに、４つの方向キーの操作に連動して移動するポインタＰ（ここでは十字線）を表示する。使用者が、方向キー３６の操作によっていずれかの注釈領域の画像Ａ上にポインタＰを位置させた状態で、音声キーを操作すると、その注釈領域に対応する注釈がスピーカ４２より音声として出力される。前述の図５の例で注釈を付した場合に、再生モードで表示部２０に表示される画像を図７に示す。
【００３８】
再生アノテーションモードでも、図６の例と同様の表示を表示部２０にする。ただし、このモードでは注釈を再生するだけでなく、注釈領域の追加および注釈の編集を行うことができる。４つの方向キー３６でポインタＰをいずれかの注釈領域の画像Ａ上に位置させた状態で、編集キーを操作すると、その注釈領域が選択される。選択された注釈領域の画像は、色、線種等が異なる態様で表示される。
【００３９】
使用者は、注釈領域を選択した状態で、音声キーを操作することにより注釈を再生し、追加キーを操作することにより注釈を追加し、取消キーを操作することにより注釈を削除することができる。編集によって注釈がなくなったときは、注釈領域の画像Ａに加えられていた記号Ｓは表示から除かれ、注釈のない注釈領域に注釈が加えられたときは、その注釈領域の画像Ａに記号Ｓが加えられる。
【００４０】
使用者は、注釈領域を選択した状態で４つの方向キー３６を操作することにより、注釈領域の位置を変更することができ、確定キーの操作により位置を確定した後、さらに上方向キーと下方向キーを操作することにより、注釈領域の大きさを変えることができる。大きさの確定も確定キーにより行う。位置や大きさの変更は表示した注釈領域の画像に反映される。
【００４１】
使用者はまた、いずれの注釈領域も選択しない状態で追加キーを操作することにより、新たな注釈領域を加えることもできる。この新たな注釈領域はポインタＰが存在する位置に生成され、その大きさは標準の基準領域と同じである。表示には追加した注釈領域の画像Ａも加えられる。追加した注釈領域は、既存の注釈領域と同様に扱われ、位置や大きさを変更したり、対応する注釈を付したりすることが可能である。さらに、ポインタをいずれかの注釈領域上に位置させた状態で、編集キーを操作することなく取消キーを操作することにより、その注釈領域を削除することができる。削除された注釈領域の画像Ａは表示から除かれる。
【００４２】
撮影アノテーションモードにおける処理の流れを図８に示す。まず、Ｓ１信号の有無を判定し、Ｓ１信号がなければレリーズボタン３２の半押しによるＳ１信号の生成を待つ（ステップ＃１０５）。Ｓ１信号があれば、画像を撮影して、撮影した画像をライブビューとして電子ビューファインダ１５に表示し、その画像に基準領域を表す画像を重ねて表示する（＃１１０）。
【００４３】
次いで、合焦ロック（撮影レンズ１１の焦点調節の停止）をするか否かを判定し（＃１１５）、合焦ロックをしないときは、撮影した画像のうち基準領域で撮影された部位のコントラストに基づいて、撮影レンズ１１の焦点調節を行う（＃１２０）。なお、Ｓ１信号の生成直後には合焦ロックをしないように設定されており、撮影対象からの光が基準領域に結像するまでは、ステップ＃１１５の判定結果は偽となって、ステップ＃１２０の焦点調節が行われる。
【００４４】
続いて、撮影対象からの光が基準領域に結像（合焦）したか否かを判定し（＃１２５）、合焦していなければステップ＃１０５に戻る。合焦していれば、合焦ロックＡＦが選択されているか否かを判定し（＃１３０）、選択されていれば、合焦ロックを行うようにする（＃１３５）。合焦ロックＡＦが選択されているときは、この後、ステップ＃１１５の判定結果は真となり、ステップ＃１２０は実行されない。なお、コンティニュアスＡＦが選択されているときは、ステップ＃１３５は実行されず、ステップ＃１１５の判定結果は常に偽となる。
【００４５】
次いで、Ｓ２信号の有無を判定し（＃１４０）、Ｓ２信号がなければステップ＃１０５に戻る。レリーズボタン３２の全押しによりＳ２信号が生成されたときは、画像を撮影し（＃１４５）、撮影した画像をメモリカード６１に記録する（＃１５０）。さらに、その画像をアフタービューとして表示部２０に表示し、これに重ねて注釈領域を表す画像を表示する（＃１５５）。
【００４６】
その後、音声キーが操作されたか否かを判定する（＃１６０）。音声キーが操作されたときは、マイクロフォン４１を介して音声で入力される注釈を受け付け（＃１６５）、確定キーが操作されるのを待って（＃１７０）、入力された注釈をメモリカード６１に記録する（＃１７５）。
【００４７】
注釈の記録後、または、ステップ＃１６０の判定で音声キーが操作されなかったときは、４つの方向キー３６の操作の有無を判定し（＃１８０）、操作されなければ、所定時間が経過するまで操作を待つ（＃１９５）。所定時間内にいずれかの方向キーが操作されたときは、それに応じて注釈領域の位置を変更し（＃１８５）、確定キーの操作の有無を判定して（＃１９０）、確定キーが操作されなければステップ＃１８０に戻る。
【００４８】
ステップ＃１９０の判定で確定キーが操作されたときは、上方向キーと下方向キーのいずれかが操作されたか否かを判定し（＃２００）、操作されなければ、所定時間が経過するまで操作を待つ（＃２１５）。所定時間内にこれらの方向キーのいずれかが操作されたときは、それに応じて注釈領域を拡大または縮小し（＃２０５）、確定キーの操作の有無を判定して（＃２１０）、確定キーが操作されなければステップ＃２００に戻る。
【００４９】
ステップ＃２１０の判定で確定キーが操作されたとき、ステップ＃１８０、＃１９５の判定で所定時間内にいずれの方向キーも操作されなかったとき、または、ステップ＃２００、＃２１５の判定で所定時間内に上方向キーまたは下方向キーが操作されなかったときは、注釈領域の位置および大きさを注釈領域を示す情報としてメモリカード６１に記録する（＃２２０）。なお、ステップ＃２２０の後に、ステップ＃１６０から＃１７５までの処理と同様にして、注釈の入力を受け付けて記録するようしてもよい。
【００５０】
このような処理により、撮影対象のうち使用者が関心をもつ部位を鮮明に撮影し、その部位に対して注釈を入力することができる。
【００５１】
再生アノテーションモードにおける処理の流れを図９に示す。まず、メモリカード６１から読み出した画像と、注釈領域を表す全ての画像を表示部２０に表示する（ステップ＃３０５）。このとき、前述のポインタも表示する。次いで、４つの方向キー３６が操作されたか否かを判定する（＃３１０）。いずれかの方向キーが操作されたときは、それに応じて表示しているポインタを移動させ（＃３１５）、ステップ＃３０５に戻る。ステップ＃３０５の２回目以後の処理では、ポインタや注釈領域を表す画像を最新の状態に更新する。
【００５２】
ステップ＃３１０の判定で方向キー３６が操作されないときは、操作キー３５の中の追加キーが操作されたか否かを判定する（＃３２０）。追加キーが操作されたときは、ポインタの位置に対応する注釈領域を生成し、その注釈領域を示す情報をメモリカード６１に追加記録する（＃３２５）。そして、ステップ＃３０５に戻る。
【００５３】
ステップ＃３２０の判定で追加キーが操作されないときは、取消キーが操作されたか否かを判定し（＃３３０）、取消キーが操作されたときは、ポインタがいずれかの注釈領域上に位置するか否かを判定する（＃３３５）。ポインタが注釈領域上に位置するときは、その注釈領域を示す情報をメモリカード６１の記録から削除し（＃３４０）、ステップ＃３０５に戻る。ポインタがいずれの注釈領域上にも位置しないときは、直接ステップ＃３０５に戻る。
【００５４】
ステップ＃３３０の判定で取消キーが操作されないときは、編集キーが操作されたか否かを判定する（＃３４５）。編集キーが操作されたときは、ポインタがいずれかの注釈領域上に位置するか否かを判定し（＃３５０）、ポインタがいずれの注釈領域上にも位置しないときは、ステップ＃３０５に戻る。
【００５５】
ポインタがいずれかの注釈領域上に位置するときは、その注釈領域の画像の表示態様を変えて、その注釈領域が選択されたことを示す（＃３５５）。そして、その注釈領域に注釈が付加されているか否かを判定し（＃３６０）、１つの注釈が付加されていればその注釈を、複数の注釈が付加されていれば最初の注釈を選択する（＃３６５）。その際、選択した注釈の番号と付加されている注釈の数とを表示に加えておく。次いで、上方向キーまたは下方向キーが操作されたか否かを判定して（＃３７０）、その操作に応じて選択した注釈を切り替える（＃３６５）。
【００５６】
注釈を選択した後、またはステップ＃３６０の判定で注釈がないときは、音声キーが操作されたか否かを判定し（＃３７５）、音声キーが操作されたときは選択した注釈の有無を判定する（＃３８０）。そして、選択した注釈があれば、その注釈をスピーカ４２より音声として出力し（＃３８５）、ステップ＃３０５に戻る。
【００５７】
ステップ＃３７５の判定で音声キーが操作されないとき、または、ステップ＃３８０の判定で選択した注釈がないときは、追加キーが操作されたか否かを判定する（＃３９０）。追加キーが操作されたときは、確定キーが操作されるまで（＃４００）、マイクロフォン４１を介して音声として入力される注釈を受け付ける（＃３９５）。そして、入力された注釈を選択している注釈領域に対応させてメモリカード６１に追加記録し（＃４０５）、ステップ＃３０５に戻る。
【００５８】
ステップ＃３９０の判定で追加キーが操作されなかったときは、取消キーが操作されたか否かを判定し（＃４１０）、取消キーが操作されたときは選択した注釈の有無を判定する（＃４１５）。選択した注釈があるときはその注釈をメモリカード６１の記録内容から削除し（＃４２０）、ステップ＃３０５に戻る。
【００５９】
ステップ＃４１０の判定で取消キーが操作されないとき、または、ステップ＃４１５の判定で選択した注釈がないときは、４つの方向キー３６が操作されたか否かを判定し（＃４２５）、いずれかの方向キーが操作されたときは、それに応じて表示部２０上の選択している注釈領域の画像を移動させる（＃４３０）。そして、確定キーが操作されたか否かを判定し（＃４３５）、操作されないときはステップ＃４２５に戻る。ステップ＃４２５の判定で方向キーが操作されないときは、ステップ＃４３５に進む。
【００６０】
ステップ＃４３５の判定で確定キーが操作されたときは、上方向キーまたは下方向キーが操作されたか否かを判定し（＃４４０）、いずれかが操作されたときは、それに応じて表示部２０上の選択している注釈領域の画像を拡大または縮小する（＃４４５）。そして、確定キーが操作されたか否かを判定し（＃４５０）、操作されないときはステップ＃４４０に戻る。ステップ＃４４０の判定で方向キーが操作されないときは、ステップ＃４５０に進む。
【００６１】
ステップ＃４５０の判定で確定キーが操作されたときは、メモリカード６１に記録している選択している注釈領域の位置および大きさを、ステップ＃４３０および＃４４５での処理に応じた新しい値に更新して（＃４５５）、ステップ＃３０５に戻る。なお、再生アノテーションモードは、アノテーションボタン３４の操作によって終了する。
【００６２】
このような処理により、使用者は、撮影時の注釈領域とは別に任意の注釈領域を定めて、注釈を付加することができる。なお、ステップ＃３１０、＃３２０、＃３３０、＃３４５の判定、およびこれらの判定結果が真のときの処理は、任意の順序で行うことが可能である。また、ステップ＃３７５、＃３９０、＃４１０、＃４２５の判定、およびこれらの判定結果が真のときの処理も、任意の順序で行うことが可能である。
【００６３】
デジタルカメラ１では、注釈領域だけでなく、前述のように、撮影モードにおいて基準領域の位置や大きさも変更することができる。基準領域の変更は、ダイアル３３の操作によって変更を指示した後、操作キー３５、３６を用いて注釈領域の変更に準じて行う。基準領域の変更はライブビューと共にファインダ１５に表示される基準領域の画像に反映される。
【００６４】
基準領域が変更されると、制御部７０は、画像処理部５０が生成した画像データのうち変更後の基準領域からのものを用いて、自動焦点調節のためのコントラストを検出する。基準領域を可変とすることで、撮影時の構図に対する制約が少なくなる。合焦ロックＡＦでも構図を自由に設定することができるが、基準領域を可変とすれば、コンティニュアスＡＦを選択することも可能になる。これにより、例えば、撮影対象までの距離が変化し、しかもその撮影対象を画像の中の所望の位置に配したい場合でも、その撮影対象を確実に鮮明に撮影することができる。
【００６５】
基準領域を複数設定することもできる。これもダイアル３３の操作によって複数設定を指示した後、操作キー３５、３６を用いて注釈領域の変更に準じて行う。複数の基準領域を設定し得るようにすることで、撮影対象の中に使用者が特に関心をもつ部位が複数ある場合に、それらの部位を鮮明に撮影することが可能になる。その場合、撮影した画像のうち個々の基準領域で撮影された領域をそれぞれ注釈領域とする。これにより、撮影アノテーションモードで、使用者が関心をもつ複数部位それぞれに対して注釈を付すことができる。基準領域を２つ設定した場合の、表示部２０の表示例を図１０に示す。
【００６６】
基準領域を複数指定する撮影アノテーションモードにおける処理の流れを図１１に示す。この処理では、基準領域の位置および大きさも変更することができる。まず、標準の基準領域を表す画像をライブビュー画像と共に電子ビューファインダ１５に表示する（＃５０５）。次いで、４つの方向キー３６が操作されたか否かを判定し（＃５１０）、いずれかの方向キーが操作されたときは、それに応じて表示している基準領域の画像を移動させる（＃５１５）。そして、確定キーが操作されたか否かを判定し（＃５２０）、操作されないときはステップ＃５１０に戻る。ステップ＃５１０の判定で方向キーが操作されないときは、ステップ＃５２０に進む。
【００６７】
ステップ＃５２０の判定で確定キーが操作されたときは、上方向キーまたは下方向キーが操作されたか否かを判定し（＃５２５）、いずれかが操作されたときは、それに応じてファインダ１５上の基準領域の画像を拡大または縮小する（＃５３０）。そして、確定キーが操作されたか否かを判定し（＃５３５）、操作されないときはステップ＃５２５に戻る。ステップ＃５２５の判定で上方向キーまたは下方向キーが操作されないときは、ステップ＃５３５に進む。
【００６８】
ステップ＃５３５の判定で確定キーが操作されたときは、基準領域の位置および大きさを、ステップ＃５１５および＃５３０での処理に応じた新しい値に設定する（＃５４０）。そして、追加キーが操作されたか否かを判定し（＃５４５）、操作されたときは、新たな基準領域を加える（＃５５０）。そして、ステップ＃５０５に戻って、新たな基準領域に対してステップ＃５４０までの処理を行う。
【００６９】
ステップ＃５４５の判定で追加キーが操作されないときは、取消キーが操作されたか否かを判定する（＃５５５）。操作されたときは、基準領域を初期化して標準の基準領域のみとし（＃５６０）、ステップ＃５０５に戻る。
【００７０】
ステップ＃５５５の判定で取消キーが操作されないときは、Ｓ１信号が生成されたか否かを判定し（＃５６５）、Ｓ１信号がなければステップ＃５０５に戻る。Ｓ１信号が生成されたときは、撮像素子１２の全ての基準領域の画像データに基づいて撮影レンズ１１の焦点を調節する（＃５７０）。次いで、撮影対象からの光が全ての基準領域に結像（合焦）したか否かを判定し（＃５７５）、合焦していなければステップ＃５６５に戻る。合焦したときはＳ２信号が生成されたか否かを判定し（＃５８０）、Ｓ２信号がなければステップ＃５６５に戻る。
【００７１】
ステップ＃５８０の判定でＳ２信号が生成されたときは、画像を撮影し（＃５８５）、撮影した画像をメモリカード６１に記録する（＃５９０）。また、撮影した画像をアフタービューとしてと表示部２０に表示し、これに重ねて全ての基準領域に対応する注釈領域の画像を表示する（＃５９５）。次いで、注釈の入力を受け付けて入力された注釈をメモリカード６１に記録する処理を行う（＃６００）。この処理は、図８のステップ＃１６０からステップ＃２２０までと同じであり、１つの注釈領域について行う。なお、ステップ＃５５０で基準領域を追加していたときは、ステップ＃５４０で最初に設定した基準領域に対応する注釈領域について、この処理を最初に行う。
【００７２】
１つの注釈領域についてステップ＃６００の注釈入力処理を行った後、追加キーが操作されたか否かを判定し（＃６０５）。操作されなければ、所定時間が経過するまで操作を待つ（＃６３０）。所定時間内に追加キーが操作されたときは、４つの方向キー３６が操作されたか否かを判定し（＃６１０）、いずれかの方向キーが操作されたときは、それに応じて表示部２０に表示しているポインタを移動させる（＃６１５）。そして、確定キーが操作されたか否かを判定し（＃６２０）、操作されなければステップ＃６１０に戻る。ステップ＃６１０の判定でいずれの方向キーも操作されないときはステップ＃６２０に進む。
【００７３】
ステップ＃６２０の判定で確定キーが操作されたときは、ステップ＃６１５で移動させたポインタが位置する注釈領域を選択し（＃６２５）、ステップ＃６００に戻って、選択した注釈領域について注釈入力処理を行う。ステップ＃６０５および＃６３０の判定で所定時間内に追加キーが操作されないときは、処理を終了する。
【００７４】
このような処理により、使用者は基準領域を複数設定し、また各基準領域の位置や大きさを任意に定めて、画像を撮影することができる。さらに、各基準領域を注釈領域として、個別に注釈を付すこともできる。
【００７５】
なお、ここでは基準領域や注釈領域を正方形とした例について説明したが、基準領域や注釈領域は任意の形状としてかまわない。その場合、記録する注釈領域を示す情報には、形状も含めておく。例えば、注釈領域を長方形とする場合は、上下方向の大きさと左右方向の大きさを含める。長方形の基準領域や注釈領域は４つの方向キー３６を用いることで、上下方向と左右方向の大きさを独立に設定することができる。
【００７６】
また、デジタルカメラ１では電子ビューファインダ１５を備える構成として、実際に撮影した画像をライブビューとして表示するようにしているが、光学式のファインダを備えるようにしてもよい。その場合でも、表示部２０を利用することでライブビューの表示は可能である。また、電子ビューファインダ１５にはライブビュー画像のみを表示するようにしているが、電子ビューファインダ１５にアフタービューの画像も表示するようにしてもよい。
【００７７】
さらに、デジタルカメラ１では注釈を音声によって入力するようにしているが、注釈をキー操作や手書き操作によってよって入力するようにしてもよい。キー操作によって入力する場合、表示部２０に、五十音やアルファベットを表示し、操作キー３５、３６によって文字を選択して、仮名漢字変換によって注釈の文とすることができる。この場合の表示部２０の表示例を図１２に示す。いくつかの定型文を記憶しておき、これらを表示部２０に表示して、操作キー３５、３６によって文を選択するようにすることも可能である。この場合の表示部２０の表示例を図１３に示す。
【００７８】
キー操作によって注釈を入力する場合でも、注釈の再生は音声で行うことができる。逆に、音声で入力した注釈を、文字として記録し、文字として再生することもできる。これらは音声データと文字データを変換する公知技術で容易に実現される。注釈を文字として再生表示する場合の表示部２０の表示例を図１４に示す。ここでは、画像の下部に注釈を表示している。また、注釈領域に注釈が付されていることを示す記号Ｓとして、音符に代えて、文字（アルファベットのＴ）を表示している。
【００７９】
【発明の効果】
撮影した画像に関する注釈を入力され、入力された注釈を撮影した画像と共に記録する撮像装置において、本発明のように、撮影対象からの光を受けて画像を撮影する撮像素子と、撮影対象からの光を撮像素子に導く撮影光学系と、撮像素子の一部の領域を基準領域として、撮影対象からの光が基準領域に結像するように撮影光学系の焦点を調節する調節手段と、画像を表示する表示手段と、画像を記録媒体に記録する記録手段と、注釈の入力を受け付ける入力手段と、撮影した画像のうち基準領域で撮影された領域を注釈領域として、注釈領域を表す画像を生成する生成手段とを備えて、撮像素子が画像を撮影したときに、表示手段が撮影した画像と注釈領域を表す画像を重ねて表示し、入力手段が注釈の入力を受け付け、記録手段が撮影した画像と注釈領域を示す情報と入力された注釈とを対応づけて記録媒体に記録すると、画像の一部のみに注釈を付すことが可能である上、注釈を付す部位を使用者が指定する必要がなく、注釈の入力が容易である。
【００８０】
しかも、注釈は撮影対象のうち使用者が最も関心をもつ部位に対して付されることになるから、使用者が注釈を付したい部位に注釈が付される可能性が高い。
また、画像の中の最も鮮明な部位に対して注釈が付されるから、画像と注釈を再生する際に、注釈を付した部位が判り易い。記録した情報を用いて注釈を付した部位を明示することもできる。
【００８１】
表示手段が注釈領域を表示しているときに、使用者からの指示に応じて注釈領域を変更する変更手段を備える構成では、注釈を付す部位を使用者が任意に定めることができて、一層使い易い装置となる。
【００８２】
使用者からの指示に応じて基準領域を設定する設定手段を備える構成とすると、撮影に際して構図の制約が少なくなる上、注釈領域が基準領域に連動して変わるため、注釈を付す部位を使用者が定めることができるようになる。基準領域を複数設定すれば、撮影対象の中に使用者が特に関心をもつ部位が複数存在するときに、それらの部位全てを鮮明に撮影することが可能であり、また、それらの部位それぞれに対して注釈を付すこともできる。
【００８３】
撮影対象からの光が基準領域に結像したときに調節手段に撮影光学系の焦点の調節を停止させる停止手段と、撮像素子と撮影対象との相対位置の変化を検出して、変化前に基準領域に対応していた撮影対象の部位に対応する変化後の撮像素子の領域を合焦領域として検出する検出手段とを備えて、停止手段が調節手段に撮影光学系の焦点の調節を停止させた状態で撮像素子が画像を撮影したときに、検出手段が合焦領域を検出し、生成手段が、基準領域で撮影された領域を注釈領域とすることに代えて、合焦領域で撮影された領域を注釈領域とすると、使用者が特に関心をもつ部位を鮮明に撮影し得る状態で構図を変えることができ、しかも、その部位に対して注釈を付すことが可能になる。
【００８４】
画像の部位の指定を受け付ける指定手段を備えて、使用者からの指示に応じて、記録手段が記録媒体から画像を読み出し、表示手段が読み出した画像を表示し、指定手段が画像の部位の指定を受け付け、生成手段が指定された画像の部位に対応する撮像素子の領域を注釈領域として注釈領域を表す画像を生成し、表示手段が読み出した画像に重ねて注釈領域を表す画像を表示し、入力手段が注釈の入力を受け付け、記録手段が注釈領域を示す情報と入力された注釈とを読み出した画像に対応づけて記録媒体に記録するようにすると、撮影直後に限らず任意の時に、画像に注釈を付すことが可能になる。しかも、画像の中の所望の部位に対して注釈を付すことができる。
【図面の簡単な説明】
【図１】本発明の一実施形態のデジタルカメラの外観を模式的に示す（ａ）一部透視正面図および（ｂ）背面図。
【図２】上記デジタルカメラの回路構成を模式的に示すブロック図。
【図３】メモリカードに記録するデータ構造の例を模式的に示す図。
【図４】撮影アノテーションモードで表示する注釈領域の画像の例を示す図。
【図５】位置および大きさを変更した注釈領域の画像を含む表示の例を示す図。
【図６】１つの画像に対応して複数の注釈領域が記録されているときの、注釈領域の画像の表示の例を示す図。
【図７】図５の例で注釈を付した場合の再生モードで表示する画像を示す図。
【図８】撮影アノテーションモードにおける処理の流れを示すフローチャート。
【図９】再生アノテーションモードにおける処理の流れを示すフローチャート。
【図１０】基準領域を２つ設定した場合の注釈領域の画像を含む表示の例を示す図。
【図１１】基準領域を複数指定する撮影アノテーションモードにおける処理の流れを示すフローチャート。
【図１２】注釈をキー操作によって入力する場合に、入力補助のために表示する画像の例を示す図。
【図１３】注釈を定型文として記憶しておきキー操作によって選択する場合に、選択補助のために表示する画像の例を示す図。
【図１４】注釈を文字として再生表示する場合に表示する画像の例を示す図。
【符号の説明】
１    デジタルカメラ
１１    撮影レンズ
１２    撮像素子
１３    フラッシュ部
１４    補助光部
１５    電子ビューファインダ
２０    表示部
３０    操作部
３１    メインスイッチ
３２    レリーズボタン
３３    操作ダイアル
３４    アノテーションボタン
３５    操作キー
３６    方向キー
４１    マイクロフォン
４２    スピーカ
５０    画像処理部
６０    記録部
６１    メモリカード
７０    制御部
８１    圧電ジャイロ
【図１】
2004180181.tif 000003
【図２】
2004180181.tif 000004
【図３】
2004180181.tif 000005
【図４】
2004180181.tif 000006
【図５】
2004180181.tif 000007
【図６】
2004180181.tif 000008
【図７】
2004180181.tif 000009
【図８】
2004180181.tif 000010
【図９】
2004180181.tif 000011
【図１０】
2004180181.tif 000012
【図１１】
2004180181.tif 000013
【図１２】
2004180181.tif 000014
【図１３】
2004180181.tif 000015
【図１４】
2004180181.tif 000016