(57)【要約】【課題】  本発明の課題は、赤目が生じた画像を好適に赤目補正する光学装置及び撮影装置を提供することである。【解決手段】  本発明の光学装置（３０１）は、被写体を撮影する撮影装置（２０１）に取付け可能な取付け部（３１１）と、前記撮影装置との間で信号の送受信が可能な送受信部（３１０）と、前記取付け部に設けられ、前記送受信部を介して受信した信号に基づいて前記被写体の目の部分を含む第１画像を取得可能な第１画像取得部（３０２，３０３，３０４，３０５，３０６）と、前記第１画像を前記送受信部を介して前記撮影装置に送信するように前記第１画像取得部を制御可能な制御部（３０７）とを備えたことを特徴とする。【選択図】      図１
2010056883.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影する撮影装置に取付け可能な取付け部と、
前記撮影装置との間で信号の送受信が可能な送受信部と、
前記取付け部に設けられ、前記送受信部を介して受信した信号に基づいて前記被写体の目の部分を含む第１画像を取得可能な第１画像取得部と、
前記第１画像を前記送受信部を介して前記撮影装置に送信するように前記第１画像取得部を制御可能な制御部とを備えたことを特徴とする光学装置。
【請求項２】
請求項１に記載された光学装置であって、
前記送受信部は、前記撮影装置から前記被写体の目の位置に対応する信号及び撮影タイミングに対応する信号のうち少なくとも一方を受信することを特徴とする光学装置。
【請求項３】
請求項１又は請求項２に記載された光学装置であって、
前記第１画像の目の部分について赤目補正を行う赤目補正部を含み、
前記制御部は、前記赤目補正部で赤目補正された前記第１画像を前記送受信部から送信するように前記第１画像取得部を制御可能であることを特徴とする光学装置。
【請求項４】
被写体の目の部分を含む第１画像を取得可能な光学装置を取付け可能な取付け部と、
前記第１画像に含まれる前記被写体の目の部分を含む第２画像を取得可能な第２画像取得部と、
前記第１画像を用いて前記第２画像を補正する画像補正部とを備えたことを特徴とする撮影装置。
【請求項５】
請求項４に記載された撮影装置であって、
前記画像補正部は、前記第１画像の目の部分について赤目補正を行うことを特徴とする撮影装置。
【請求項６】
被写体の目の部分を含む第１画像を取得可能な第１画像取得部と、
前記第１画像に含まれる前記被写体の目の部分を含み前記第１画像よりも低画質な第２画像を取得可能な第２画像取得部と、
前記第１画像の目の部分について赤目補正を行う赤目補正部と、
前記赤目補正部で補正された前記第１画像の前記目の部分を用いて、前記第２画像を画像補正する画像補正部とを備えたことを特徴とする撮影装置。
【請求項７】
請求項６に記載された撮影装置であって、
前記第２画像の画角は、前記第１画像の画角よりも広いことを特徴とする撮影装置。
【請求項８】
請求項６又は請求項７に記載された撮影装置であって、
被写体の顔を認識する顔認識部を含み、
前記第１画像取得部は、前記顔認識部から出力された信号を用いて前記第１画像を取得可能であることを特徴とする撮影装置。
【請求項９】
請求項６から請求項８までの何れか１項に記載された撮影装置であって、
前記第１画像取得部が前記第１画像を取得するタイミングは、前記第２画像取得部が前記第２画像を取得するタイミングと略同一であることを特徴とする撮影装置。
【請求項１０】
請求項６から請求項９までの何れか１項に記載された撮影装置であって、
閃光を発生する閃光発生部を有し、
前記第１画像取得部は、像を形成するための第１光学系を有し、
前記第２画像取得部は、像を形成するための第２光学系を有し、
前記第２光学系は、前記第１光学系と前記閃光発光部との間に備えられていることを特徴とする撮影装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラなどの光学装置及び撮影装置に関するものである。
【背景技術】
【０００２】
従来から、目の領域や口の領域を他の画像から抽出される目の領域や口の領域と差し替え、被写体の顔の表情を変更する技術が提供されている（例えば、特許文献１参照）。特許文献１には、赤目が発生した画像の赤目の部分を、他の画像の目の部分と差し替えることで正常な画像に修正することが開示されている。
【０００３】
しかし、特許文献１においては、赤目が発生した画像と、差し替える他の画像とは撮影条件が大きく異なる。そのため、赤目が発生した画像の赤目の部分を他の画像の目の部分と差し替えただけでは、差し替えにより得られる画像が違和感の生じるものとなりやすい。
【特許文献１】特開２００２−２８８６８１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明の課題は、赤目が生じた画像を好適に赤目補正する光学装置及び撮影装置を提供することである。
【課題を解決するための手段】
【０００５】
本発明は、以下のような解決手段により前記課題を解決する。なお、理解を容易にするために、本発明の一実施例を示す図面に対応する符号を付して説明するが、これに限定されるものではない。なお、符号を付して説明した構成は適宜改良してもよく、また、少なくとも一部を他の構成物に代替してもよい。
【０００６】
本発明の光学装置（３０１）は、被写体を撮影する撮影装置（２０１）に取付け可能な取付け部（３１１）と、前記撮影装置との間で信号の送受信が可能な送受信部（３１０）と、前記取付け部に設けられ、前記送受信部を介して受信した信号に基づいて前記被写体の目の部分を含む第１画像を取得可能な第１画像取得部（３０２，３０３，３０４，３０５，３０６）と、前記第１画像を前記送受信部を介して前記撮影装置に送信するように前記第１画像取得部を制御可能な制御部（３０７）とを備えたことを特徴とする。
【０００７】
なお、好ましくは、前記送受信部は、前記撮影装置から前記被写体の目の位置に対応する信号及び撮影タイミングに対応する信号のうち少なくとも一方を受信しても良い。
【０００８】
また、好ましくは、前記第１画像の目の部分について赤目補正を行う赤目補正部（３０８）を含み、前記制御部は、前記赤目補正部で赤目補正された前記第１画像を前記送受信部から送信するように前記第１画像取得部を制御可能であっても良い。
【０００９】
第１の発明の撮影装置（２０１）は、被写体の目の部分を含む第１画像を取得可能な光学装置を取付け可能な取付け部（２１８）と、前記第１画像に含まれる前記被写体の目の部分を含む第２画像を取得可能な第２画像取得部（２０２，２０３，２０４，２０５，２０６）と、前記第１画像を用いて前記第２画像を補正する画像補正部（２０８）とを備えたことを特徴とする。
【００１０】
なお、好ましくは、前記画像補正部は、前記第１画像の目の部分について赤目補正を行っても良い。
【００１１】
第２の発明の撮影装置（１）は、被写体の目の部分を含む第１画像を取得可能な第１画像取得部（３）と、前記第１画像に含まれる前記被写体の目の部分を含み前記第１画像よりも低画質な第２画像を取得可能な第２画像取得部（２）と、前記第１画像の目の部分について赤目補正を行う赤目補正部（１７）と、前記赤目補正部で補正された前記第１画像の前記目の部分を用いて、前記第２画像を画像補正する画像補正部（１６）とを備えたことを特徴とする。
【００１２】
なお、好ましくは、前記第２画像の画角は、前記第１画像の画角よりも広くても良い。
【００１３】
また、好ましくは、被写体の顔を認識する顔認識部（８）を含み、前記第１画像取得部は、前記顔認識部から出力された信号を用いて前記第１画像を取得可能であっても良い。
【００１４】
また、好ましくは、前記第１画像取得部が前記第１画像を取得するタイミングは、前記第２画像取得部が前記第２画像を取得するタイミングと略同一であっても良い。
【００１５】
また、好ましくは、閃光を発生する閃光発生部（２２）を有し、前記第１画像取得部は、像を形成するための第１光学系（９）を有し、前記第２画像取得部は、像を形成するための第２光学系（４）を有し、前記第２光学系は、前記第１光学系と前記閃光発光部との間に備えられていても良い。
【発明の効果】
【００１６】
本発明の光学装置及び撮影装置によれば、好適に赤目補正を行うことが可能となる。
【発明を実施するための最良の形態】
【００１７】
（第１実施形態）
以下、図面を用いて本発明の第１実施形態について説明する。なお、第１実施形態では、本発明の撮影装置の一例として、デジタルカメラを用いて説明する。図１は、本発明の第１実施形態におけるデジタルカメラ１の構成を示すブロック図である。図２（ａ）は、本発明のデジタルカメラ１の外観を前面側から示す図である。
【００１８】
デジタルカメラ１は、図１に示すように、メインカメラ２、サブカメラ３、制御部１５、画像補正部１６、赤目補正部１７、メモリ１８、表示部１９、操作部２０、レリーズ釦２１、ストロボ装置２２、カードＩ／Ｆ２３、記録媒体２４を備える。
【００１９】
メインカメラ２とサブカメラ３とは、それぞれ制御部１５に接続されており、制御部１５の制御に基づいて、画像を撮像する。制御部１５は、デジタルカメラ１の各部を統括的に制御する。また、制御部１５は、ＡＦ処理、ＡＥ処理などを行う。画像補正部１６は、サブカメラ３により撮像した画像を用いて、メインカメラ２により撮像した画像に対する画像補正を行う。赤目補正部１７は、サブカメラ３により撮像した画像に対する赤目補正を行う。画像補正及び赤目補正の詳細については、後述する。表示部１９は、制御部１５の制御により各種の画像を表示する。表示部１９に表示される各種の画像は、メインカメラ２により撮像した画像、記録媒体２４に記録した画像、メニュー画像などを含む。
【００２０】
操作部２０は、上記のメニュー画像等での操作入力を受け付ける。レリーズ釦２１は、半押し操作によるＡＦ処理、ＡＥ処理などの指示入力と、全押し操作によるレリーズの指示入力とを受け付ける。操作部２０及びレリーズ釦２１の状態は、制御部１５により検知され、検知された釦の状態に基づいたシーケンスが実行される。ストロボ装置２２は、ＡＥ処理において、被写体輝度が予め設定された値以下である場合に、制御部１５の制御により被写体に向けてストロボ光を照射する。カードＩ／Ｆ２３は、記録媒体２４を接続するためのコネクタが形成される。このカードＩ／Ｆ部２３と記録媒体２４とが接続されることにより、記録媒体２４に対してデータの書き込み／読み出しを実行する。
【００２１】
メインカメラ２は、撮像レンズ４、撮像素子５、Ａ／Ｄ変換部６、画像バッファ７、メインカメラ画像処理部８を備える。撮像レンズ４は、撮像素子５の撮像面に被写体の像を結像する。撮像素子５は、撮像レンズ４を通過した光束による被写体の像を光電変換し、アナログの画像信号を出力する。Ａ／Ｄ変換部６は、撮像素子５から出力されるアナログの画像信号をＡ／Ｄ変換し、デジタルの画像信号に変換する。なお、このデジタルの画像信号は、１コマにまとめられ、画像データとして画像バッファ７に記録される。メインカメラ画像処理部８は、画像バッファ７に記録された画像データに対して画像処理を施す。なお、この画像処理としては、周知のホワイトバランス調整、色補間、階調変換処理、輪郭強調処理などが挙げられる。画像処理が施された画像データは、ＪＰＥＧ方式などの圧縮処理が施され、メモリ１８に記録される。また、メインカメラ画像処理部８は、画像データから人物の目及び目の位置を検出し、赤目か否かを判定する。
【００２２】
サブカメラ３は、撮像レンズ９、撮像素子１０、Ａ／Ｄ変換部１１、画像バッファ１２、サブカメラ画像処理部１３、レンズ駆動部１４を備える。撮像レンズ９は、撮像素子１０の撮像面に被写体の像を結像する。撮像素子１０は、撮像レンズ９を通過した光束による被写体の像を光電変換し、アナログの画像信号を出力する。Ａ／Ｄ変換部１１は、撮像素子１０から出力されるアナログの画像信号をＡ／Ｄ変換し、デジタルの画像信号に変換する。なお、このデジタルの画像信号は、１コマにまとめられ、画像データとして画像バッファ１２に記録される。サブカメラ画像処理部１３は、画像バッファ１２に記録された画像データに対して、メインカメラ画像処理部８と同様の画像処理及び圧縮処理を施す。その後、圧縮処理された画像データは、メモリ１８に記録される。また、サブカメラ画像処理部１３は、画像データから人物の目を検出し、赤目か否かを判定する。レンズ駆動部１４は、制御部１５の制御により撮像レンズ９のズームレンズの位置を動かし、撮像レンズ９を介して撮像する画像の画角を調整する。また、サブカメラ３は、不図示のフレーミング駆動部を備える。フレーミング駆動部は、制御部１５の制御によりサブカメラ３の筐体を上下左右方向に動かし、サブカメラ３の撮像方向を調整する。
【００２３】
なお、メインカメラ２により撮像した画像とサブカメラ３により撮像した画像とは、同一のアスペクト比であっても、異なるアスペクト比であっても良いものとする。
【００２４】
ところで、従来から、暗い中で大きく開いた瞳孔から光が入り、眼球内部の毛細血管が無数に走る脈絡膜層に光が反射して、黒目が赤く撮影される赤目現象が問題になっている。この赤目現象に対して、画像データから虹彩のエッジ検出及び瞳孔の輪郭線の検出し、検出された瞳孔の輪郭線の内側の領域の色情報を黒色の色情報に変更する、いわゆる赤目補正を行うデジタルカメラが知られる。
【００２５】
しかし、例えば、周囲が暗いとき、被写体にストロボ光が届かないとき、高感度撮像のとき、ズームアップにより絞り値が大きいときなどに撮像された画像は、不鮮明であり、画質が悪い。そのため、このような撮像環境が悪い状況下で得られた画像データにおいては、目の輪郭や虹彩の輪郭線を検出することが難しく、適切に赤目補正を行うことができない場合がある。
【００２６】
そこで、適切に赤目補正を行うことができるように、本発明のデジタルカメラ１は、被写体全体を撮像するメインカメラ２とは別に、被写体となる人物の目及び目周縁の領域を、高画質で撮像可能なサブカメラ３を備える。サブカメラ３は、人物の目及び目の周縁の領域を撮像範囲とすることから、サブカメラ３における撮像倍率はメインカメラ２における撮像倍率よりも高くなる。また、サブカメラ３の画角は、メインカメラ２の画角よりも狭くなる。詳細は後述するが、サブカメラ３により撮像した画像に対して赤目補正を行うことから、撮像素子１０の画素ピッチを撮像素子５の画素ピッチより広くして、撮像素子１０の受光面積を撮像素子５の受光面積より広くする。これにより、サブカメラ３により撮像した画像データは、メインカメラ２により撮像した画像データと比べてＳ／Ｎ比が高くなり、高品質な画像データとなる。
【００２７】
なお、赤目現象は、撮像レンズの光軸の中心とストロボ光の光軸とが一致すると発生する。そのため、赤目補正用のサブカメラ３の撮像レンズ９をストロボ装置２２から離れた位置に配置しても良い。例えば、ストロボ装置２２の位置とは異なる角にサブカメラ３の撮像レンズ９を配置する例を図２（ｂ）、（ｃ）に示す。
【００２８】
図３は、デジタルカメラ１における撮像時の制御部１５の動作を示すフローチャートである。なお、ストロボ装置２２を作動してストロボ光を被写体に照射する場合には、メインカメラ２により撮像した画像に赤目が発生する可能性が高い。そのため、以下、ストロボ装置２２を作動する場合について説明する。
【００２９】
ステップＳ１０１で、制御部１５は、撮像素子５を制御して、第１のスルー画像の撮像を開始するとともに、撮像素子１０を制御して、第２のスルー画像の撮像を開始する。
【００３０】
ステップＳ１０２で、制御部１５は、レリーズ釦２１が半押しされたか否かを判定する。レリーズ釦２１が半押しされた場合（ＹＥＳ側）には、ステップＳ１０３に進む。一方、レリーズ釦２１が半押しされない場合（ＮＯ側）には、半押しされるまで待機する。
【００３１】
ステップＳ１０３で、制御部１５は、メインカメラ２のＡＦ処理を行う。
【００３２】
ステップＳ１０４で、制御部１５は、レリーズ釦２１が全押しされたか否かを判定する。レリーズ釦２１が全押しされた場合（ＹＥＳ側）には、ステップＳ１０５に進む。一方、レリーズ釦２１が全押しされない場合（ＮＯ側）には、全押しされるまで待機する。
【００３３】
ステップＳ１０５で、制御部１５は、ストロボ装置２２を作動させるとともに、撮像素子５を制御して、第１の本画像、すなわち、被写体全体の画像を撮像する。そして、制御部１５は、メインカメラ画像処理部８を制御して、第１の本画像データに画像処理を施し、第１の本画像データをメモリ１８に記録する。
【００３４】
ステップＳ１０６で、制御部１５は、ステップＳ１０５でメモリ１８に記録した第１の本画像データを読み出し、メインカメラ画像処理部８を制御して、人物の目及び目の位置を検出する。
【００３５】
ステップＳ１０７で、制御部１５は、メインカメラ画像処理部８を制御して、目の位置に基づいて、人物の顔領域を認識する。そして、顔領域における赤色領域の度合いを求めることにより、人物の目が赤目か否かを判定する。赤目である場合（ＹＥＳ側）には、ステップＳ１０８に進む。一方、赤目でない場合（ＮＯ側）には、ステップＳ１０６で読み出した第１の本画像データを記録媒体２４に記録し、図３の処理を終了する。
【００３６】
ステップＳ１０８で、制御部１５は、撮像素子１０を制御して、第２の本画像、すなわち、目及び目周縁の画像を撮像する。第２の本画像の撮像については、後述する。
【００３７】
ステップＳ１０９で、制御部１５は、画像補正部１６を制御して、ステップＳ１０８で生成した第２の本画像データを用いて、図３のステップＳ１０６で読み出した第１の本画像データに対して画像補正を行う。画像補正については、後述する。
【００３８】
次に、図３のフローチャートのステップＳ１０８における第２の本画像の撮像について説明する。図４は、サブカメラ３における撮像時の制御部１５の動作を示すフローチャートである。
【００３９】
ステップＳ１１１で、制御部１５は、フレーミング駆動部を制御して、図３のステップＳ１０６で検出した目の位置に基づいて、目の方向へサブカメラ３の撮像方向を調整する。
【００４０】
ステップＳ１１２で、制御部１５は、レンズ駆動部１４を制御して、ズームアップを行い、サブカメラ３の撮像範囲を被写体の目及び目周縁を含む範囲に調整する。
【００４１】
ステップＳ１１３で、制御部１５は、レリーズ釦２１が半押しされたか否かを判定する。レリーズ釦２１が半押しされた場合（ＹＥＳ側）には、ステップＳ１１４に進む。一方、レリーズ釦２１が半押しされない場合（ＮＯ側）には、半押しされるまで待機する。
【００４２】
ステップＳ１１４で、制御部１５は、サブカメラ３のＡＦ処理を行う。
【００４３】
ステップＳ１１５で、制御部１５は、レリーズ釦２１が全押しされたか否かを判定する。レリーズ釦２１が全押しされた場合（ＹＥＳ側）には、ステップＳ１１６に進む。一方、レリーズ釦２１が全押しされない場合（ＮＯ側）には、全押しされるまで待機する。
【００４４】
ステップＳ１１６で、制御部１５は、撮像素子１０を制御して、第２の本画像を撮像する。なお、制御部１５は、サブカメラ３の各部を制御して、ストロボ光の発光量、シャッター速度、絞り値、及び撮像感度の少なくとも一つを、図３のステップＳ１０５における撮像条件と同一の値にする。また、第２の本画像の撮像においては、ストロボ装置２２を作動させても良いが、第１の本画像の撮像と第２の本画像の撮像とを数秒間隔で行う場合には、ストロボ装置２２を作動させる必要はない。その後、制御部１５は、サブカメラ画像処理部１３を制御して、第２の本画像データに画像処理を施し、画像処理した第２の本画像データをメモリ１８に記録する。
【００４５】
ステップＳ１１７で、制御部１５は、ステップＳ１１６でメモリ１８に記録した第２の本画像データを読み出し、サブカメラ画像処理部１３を制御して、人物の目を検出する。そして、制御部１５は、サブカメラ画像処理部１３を制御して、図３のステップＳ１０７と同様の処理により、検出した人物の目が赤目か否かを判定する。赤目である場合（ＹＥＳ側）には、ステップＳ１１８に進む。一方、赤目でない場合（ＮＯ側）には、図４の処理を終了する。
【００４６】
ステップＳ１１８で、制御部１５は、赤目補正部１７を制御して、ステップＳ１１７で読み出した第２の本画像データを用いて虹彩のエッジ検出を行った後、検出した虹彩の領域から瞳孔の輪郭線を検出する。そして、赤目補正部１７は、検出した瞳孔の輪郭線の内側の領域の色情報を黒色に変更する。これにより、第２の本画像に発生した赤目が黒目に補正される（図６参照）。なお、高画質な第２の本画像データに対して赤目補正を行うため、虹彩のエッジ検出や瞳孔の輪郭線の検出を容易に行うことができ、結果的に赤目補正を確実に行うことができる。
【００４７】
ステップＳ１１９で、制御部１５は、ステップＳ１１８で赤目補正を行った第２の本画像データをメモリ１８及び記録媒体２４に記録する。
【００４８】
次に、図３のフローチャートのステップＳ１０９における画像補正について説明する。図５は、デジタルカメラ１における画像補正時の制御部１５の動作を示すフローチャートである。
【００４９】
ステップＳ１２１で、制御部１５は、第１の本画像データに対する画像補正を開始する。まず、制御部１５は、図４のステップＳ１１７で赤目であると判定した場合（ＹＥＳ側）には、ステップＳ１１９でメモリ１８に記録した赤目補正後の第２の本画像データを読み出す。一方、制御部１５は、ステップＳ１１７で赤目でないと判定した場合（ＮＯ側）には、ステップＳ１１６でメモリ１８に記録した第２の本画像データを読み出す。次に、制御部１５は、図３のステップＳ１０５でメモリ１８に記録した第１の本画像から目及び目周縁を含む矩形の領域を差替領域３０として切り出す（図６参照）。なお、差替領域３０の縦横比は、第２の本画像の縦横比と同一とする。
【００５０】
上述したように、サブカメラ３により撮像した第２の本画像は、メインカメラ２により撮像した第１の本画像よりも高画質な画像である。そのため、第２の本画像をそのまま第１の本画像に合成すると、合成された画像は、第１の本画像の領域と第２の本画像の領域とで画質が異なり、違和感を生じてしまう。このため、ステップＳ１２２で、制御部１５は、画像補正部１６を制御して、ステップＳ１２１で読み出した第２の本画像データに対して、第１の本画像データの解像度と同一となるように解像度の変換処理を行う。これにより、第２の本画像の画質が調整され、低画質となる。なお、画質調整が行われた第２の本画像の大きさが差替領域３０の大きさと異なる場合がある。この場合には、制御部１５は、画像補正部１６を制御して、第２の本画像の大きさが差替領域３０の大きさと同一となるようにリサイズ処理を施す。
【００５１】
ステップＳ１２３で、制御部１５は、画像補正部１６を制御して、ステップＳ１２２で画質調整を行った第２の本画像を、ステップＳ１２１で差替領域３０を切り抜いた第１の本画像に嵌め込むことにより、第１の本画像と第２の本画像とを合成する。
【００５２】
この状態では、第１の本画像における目及び目周縁の領域のコントラスト比は、他の領域のコントラスト比よりも高くなることから、被写体の目及び目周縁の領域だけがはっきりとした画像、つまり不自然な画像となってしまう。このような不自然な画像になることを防止するために、ステップＳ１２４で、制御部１５は、画像補正部１６を制御して、ステップＳ１２３で合成した第１の本画像における目及び目周縁の領域のコントラスト比が他の領域のコントラスト比となるようにボカシ処理を行う。なお、このボカシ処理を行っても、不自然さが残る場合には、さらに第１の本画像全体にボカシ処理を行っても良い。
【００５３】
ステップＳ１２５で、制御部１５は、ステップＳ１２４でボカシ処理を行った第１の本画像データを記録媒体２４に記録し、一連の処理を終了する。
【００５４】
以上説明したように、第１実施形態のデジタルカメラ１は、メインカメラ２により撮像した画像に赤目が発生した場合には、サブカメラ３により撮像した高画質な画像を用いて、メインカメラ２により撮像した画像の赤目部分に嵌め込む。また、嵌め込みによる違和感を低減する。そのため、第１実施形態のデジタルカメラ１によれば、周囲が暗いとき、被写体にストロボ光が届かないとき、高感度撮像撮像のときなど、撮像環境が悪い状況下で得られた画像に対しても、その撮像環境に左右されずに確実に赤目補正を行うことができる。
【００５５】
なお、第１実施形態において、メインカメラ２が第１の本画像を取得してからサブカメラ３が第２の本画像を取得するまでの撮像間隔は、数秒から数十分の間であることが好ましい。第１の本画像と第２の本画像とを取得する際の撮像間隔が短いほど被写体の周囲の明るさ、構図などの変化が少なくなり、好適な赤目補正を行うことができる。
【００５６】
（第２実施形態）
以下、本発明の第２実施形態について説明する。第１実施形態ではメインカメラ２が被写体全体の画像を取得した後に、サブカメラ３が目及び目周縁の画像を取得する例を示した。第２実施形態ではメインカメラ２が被写体全体の画像を取得するタイミングと、サブカメラ３が目及び目周縁の画像を取得するタイミングとが同じである例を示す。ここで、第２実施形態におけるデジタルカメラカメラの構成は、図１に示す第１実施形態のデジタルカメラ１のブロック図と共通し、外観は、図２に示す第１実施形態のデジタルカメラ１の外観図と共通するので重複説明を省略する。
【００５７】
図７は、第２実施形態のデジタルカメラ１における撮像時の制御部１５の動作を示すフローチャートである。なお、以下、図３のフローチャートと同様の理由により、ストロボ装置２２を作動する場合について説明する。
【００５８】
ステップＳ１３１からステップＳ１３２において制御部１５は、図３のステップＳ１０１からステップＳ１０２と同様の処理を行う。
【００５９】
ステップＳ１３３で、制御部１５は、メインカメラ画像処理部８を制御して、ステップＳ１３１で撮像した第１のスルー画像から人物の目及び目の位置を検出する。
【００６０】
ステップＳ１３４で、制御部１５は、メインカメラ画像処理部８を制御して、ステップＳ１３３で検出した人物の目の位置に基づいて、人物の顔領域を認識する。そして、制御部１５は、認識した人物の顔領域に焦点が合うようにメインカメラ２のＡＦ処理を行う。
【００６１】
ステップＳ１３５で、制御部１５は、フレーミング駆動部を制御して、ステップＳ１３３で検出した目の位置に基づいて、目の方向へサブカメラ３の撮像方向を調整する。
【００６２】
ステップＳ１３６で、制御部１５は、レンズ駆動部１４を制御して、ズームアップを行い、サブカメラ３の撮像範囲を被写体の目及び目周縁を含む範囲に調整する。
【００６３】
ステップＳ１３７で、制御部１５は、サブカメラ３のＡＦ処理を行う。
【００６４】
ステップＳ１３８で、制御部１５は、レリーズ釦２１が全押しされたか否かを判定する。レリーズ釦２１が全押しされた場合（ＹＥＳ側）には、ステップＳ１３９及びステップＳ１４０に進む。一方、レリーズ釦２１が全押しされない場合（ＮＯ側）には、全押しされるまで待機する。
【００６５】
ステップＳ１３９で、制御部１５は、ストロボ装置２２を作動させるとともに、撮像素子５を制御して、第１の本画像、すなわち、被写体全体の画像を撮像する。そして、制御部１５は、メインカメラ画像処理部８を制御して、第１の本画像データに画像処理を施し、画像処理した第１の本画像データをメモリ１８に記録する。
【００６６】
ステップＳ１４０で、制御部１５は、撮像素子１０を制御して、第２の本画像、すなわち、目及び目周縁の画像を撮像する。なお、制御部１５は、サブカメラ３の各部を制御して、ストロボ光の発光量、シャッター速度、絞り値、及び撮像感度の少なくとも一つを、ステップＳ１３９における撮像条件と同一の値にする。そして、制御部１５は、サブカメラ画像処理部１３を制御して、第２の本画像データに画像処理を施し、画像処理した第２の本画像データをメモリ１８に記録する。
【００６７】
ステップＳ１４１で、制御部１５は、ステップＳ１３９でメモリ１８に記録した第１の本画像データを読み出し、メインカメラ画像処理部８を制御して、人物の目を検出する。そして、制御部１５は、メインカメラ画像処理部８を制御して、図３のステップＳ１０７と同様の処理により、検出した人物の目が赤目か否かを判定する。赤目である場合（ＹＥＳ側）には、ステップＳ１４２に進む。一方、赤目でない場合（ＮＯ側）には、読み出した第１の本画像データを記録媒体２４に記録し、図７の処理を終了する。
【００６８】
ステップＳ１４２で、制御部１５は、ステップＳ１４０でメモリ１８に記録した第２の本画像データを読み出し、サブカメラ画像処理部１３を制御して、人物の目を検出する。そして、制御部１５は、サブカメラ画像処理部１３を制御して、図３のステップＳ１０７と同様の処理により、検出した人物の目が赤目か否かを判定する。赤目である場合（ＹＥＳ側）には、ステップＳ１４３に進む。一方、赤目でない場合（ＮＯ側）には、ステップＳ１４４に進む。
【００６９】
ステップＳ１４３で、制御部１５は、赤目補正部１７を制御して、ステップＳ１４２で読み出した第２の本画像データに対して、図４のステップＳ１１８と同様の処理により、赤目補正を行う。そして、制御部１５は、赤目補正を行った第２の本画像データをメモリ１８及び記録媒体２４に記録する。
【００７０】
ステップＳ１４４で、制御部１５は、画像補正部１６を制御して、ステップＳ１４１で読み出した第１の本画像データに対して、図４のステップＳ１２１からステップＳ１２５と同様の処理により、画像補正を行う。
【００７１】
第２実施形態のデジタルカメラ１によれば、第１実施形態の場合と同様の効果を得ることができる。特に、第２実施形態のデジタルカメラ１は、メインカメラ２とサブカメラ３とが同じタイミングで画像を取得するため、被写体の周囲の明るさ、構図などの変化を少なくすることができる。また、第２実施形態のデジタルカメラ１によれば、１回のレリーズ操作により画像補正された被写体全体の画像を取得することができるため、ユーザにとって使い勝手が良い。
【００７２】
（第３実施形態）
以下、本発明の第３実施形態について説明する。第１実施形態及び第２実施形態では、
１つのデジタルカメラ１を用いて、メインカメラ２により被写体全体の画像と、サブカメラ３により目及び目周縁の画像とを取得する例を示した。第３実施形態では、被写体全体の画像と、目及び目周縁の画像とをそれぞれ独立して取得する装置の例を示す。なお、被写体全体の画像を取得する撮影装置をカメラ本体ユニット２０１、目及び目周縁の画像を取得する光学装置をサブカメラユニット３０１とする。また、サブカメラユニット３０１の画像は、カメラ本体ユニット２０１の画像より高画質とする。
【００７３】
図８は、カメラ本体ユニット２０１の外観を前面側から示す図である。カメラ本体ユニット２０１は、図８に示すように、撮像レンズ２０２、ストロボ装置２０９、レリーズ釦２１３、カメラ本体ユニット側信号送受信部２１６、ネジ穴２１７、被取付け部２１８を備える。
【００７４】
図９は、サブカメラユニット３０１の外観を前面側から示す図である。サブカメラユニット３０１は、図９に示すように、撮像レンズ３０２、レンズ駆動部３０９、サブカメラユニット側信号送受信部３１０、取付け部３１１、ネジ３１２を備える。レンズ駆動部３０９は、撮像レンズ３０２のフレーミングや焦点距離を調整する。サブカメラユニット側信号送受信部３１０は、カメラ本体ユニット側信号送受信部２１６と相互に接続可能である。取付け部３１１は、被取付け部２１８に対して所定の角度で取付け可能である。これにより、サブカメラユニット３０１がカメラ本体ユニット２０１に取り付けられたときに、撮像レンズ３０２の光軸と、撮像レンズ２０２の光軸との角度を所定の角度（例えば、略平行）にすることができる。ネジ３１２は、ネジ穴２１７に嵌合可能である。
【００７５】
図１０は、サブカメラユニット３０１にカメラ本体ユニット２０１を取り付けた例を示す図である。図８から図１０に示すように、サブカメラユニット３０１は、カメラ本体ユニット２０１に取り外し可能である。
【００７６】
図１１は、カメラ本体ユニット２０１及びサブカメラユニット３０１の構成を示すブロック図である。
【００７７】
カメラ本体ユニット２０１は、図１１に示すように、撮像レンズ２０２、撮像素子２０３、Ａ／Ｄ変換部２０４、画像バッファ２０５、メインカメラ画像処理部２０６、制御部２０７、画像補正部２０８、ストロボ装置２０９、メモリ２１０、表示部２１１、操作部２１２、レリーズ釦２１３、カードＩ／Ｆ２１４、記録媒体２１５、カメラ本体ユニット側信号送受信部２１６を備える。なお、撮像レンズ２０２から記録媒体２１５までは、それぞれ第１実施形態における撮像レンズ４、撮像素子５、Ａ／Ｄ変換部６、画像バッファ７、メインカメラ画像処理部８、制御部１５、画像補正部１６、ストロボ装置２２、メモリ１８、表示部１９、操作部２０、レリーズ釦２１、カードＩ／Ｆ２３、記録媒体２４と同じである。
【００７８】
サブカメラユニット３０１は、撮像レンズ３０２、撮像素子３０３、Ａ／Ｄ変換部３０４、画像バッファ３０５、サブカメラ画像処理部３０６、制御部３０７、赤目補正部３０８、レンズ駆動部３０９、サブカメラユニット側信号送受信部３１０を備える。なお、撮像レンズ３０２から画像バッファ３０５までは、それぞれ第１実施形態における撮像レンズ９、撮像素子１０、Ａ／Ｄ変換部１１、画像バッファ１２と同じである。サブカメラ画像処理部３０６は、画像バッファ３０５に記録された画像データに対して、メインカメラ画像処理部２０６と同様の画像処理及び圧縮処理を施す。また、サブカメラ画像処理部３０６は、画像データから人物の目及び目の位置を検出し、赤目か否かを判定する。赤目補正部３０８は、画像データに赤目補正を行う。制御部３０７は、サブカメラユニット側信号送受信部３１０、カメラ本体ユニット側信号送受信部２１６を介して、赤目補正された画像データを制御部２０７に出力する。
【００７９】
制御部２０７は、カメラ本体ユニット側信号送受信部２１６、サブカメラユニット側信号送受信部３１０を介して、被写体の目の位置に対応する信号、及び撮像タイミングに対応する信号を制御部３０７に出力する。上述したように、レンズ駆動部３０９は、被取付け部２１８に所定の角度で取付け可能であるため、被写体の目の位置に対応する信号及び撮像タイミングに対応する信号に基づいて、サブカメラユニット３０１の光学系の角度や、焦点距離を調整できる。
【００８０】
また、制御部２０７は、第１実施形態又は第２実施形態のデジタルカメラ１と同様の処理（図３，４，５，７のフローチャート参照）を行う。
【００８１】
第３実施形態のデジタルカメラによれば、第１実施形態又は第２実施形態の場合と同様の効果を得ることができる。
【００８２】
なお、第３実施形態において、赤目補正部３０８はサブカメラユニット３０１内にあり、サブカメラユニット３０１からカメラ本体ユニット２０１に赤目補正した画像データを送信したが、これに限らない。例えば、赤目補正部３０８は、カメラ本体ユニット２０１内にあっても良い。この場合、制御部３０７は、サブカメラユニット３０１により取得した画像データをそのままカメラ本体ユニット２０１に送信すれば良い。
【００８３】
（実施形態の補足）
第１実施形態において、制御部１５は、表示部１９を制御して、図４のステップＳ１１９で記録媒体２４に記録した赤目補正後の第２の本画像、及び図５のステップＳ１２５で記録媒体２４に記録した画像補正後の第１の本画像を表示することができる。
【００８４】
また、表示部１９に表示される第１の本画像は被写体の顔や目の領域が小さいことから、被写体の顔や、目及び目の周縁の領域を拡大した画像を、画像補正後の第１の本画像及び赤目補正後の第２の本画像と同時に表示することも可能である。また、画像補正後の第１の本画像、赤目補正後の第２の本画像の他に、赤目補正前の第２の本画像を同時に表示することも可能である。さらに、画像補正前の第１の本画像と、画像補正後の第１の本画像とを同時に表示することも可能である。また、第２実施形態及び第３実施形態についても同様とする。
【００８５】
また、第１実施形態において、画像補正部１６、赤目補正部１７、メインカメラ画像処理部８、サブカメラ画像処理部１３、制御部１５はそれぞれ別の構成としているが、これに限らない。例えば、画像補正部１６、赤目補正部１７の機能を、メインカメラ画像処理部８とサブカメラ画像処理部１３と制御部１５とのうち少なくとも一つの機能としても良い。また、第２実施形態についても同様とする。
【００８６】
また、第１実施形態から第３実施形態において、赤目が発生した人物が複数存在する場合であっても、赤目となる人物のそれぞれに対して、赤目補正を行うことができるとする。
【００８７】
また、第１実施形態から第３実施形態では、ズームレンズの位置を調整することにより、撮像倍率を変更する光学式ズームについて述べているが、これに限らない。例えば、電子ズームを用いることも可能である。
【００８８】
また、第１実施形態から第３実施形態では、画像に赤目が生じる撮像としてストロボ装置２２を作動させた撮像を挙げているが、これに限らない。例えば、自動車のライトなどが被写体に照射された場合などには、ストロボ装置２２を作動させなくても、赤目が生じる場合がある。このような場合にも本発明を同様に適用することができる。
【００８９】
また、第１実施形態から第３実施形態では、撮影装置として、デジタルカメラを例に挙げているが、これに限らない。例えば、スチルカメラ、ビデオカメラ、携帯電話機などにも本発明を同様に適用することができる。
【図面の簡単な説明】
【００９０】
【図１】第１実施形態におけるデジタルカメラ１の構成を示すブロック図である。
【図２】第１実施形態のデジタルカメラ１の外観を前面側から示す図である。
【図３】第１実施形態のデジタルカメラ１における撮像時の制御部１５の動作を示すフローチャートである。
【図４】第１実施形態のサブカメラ３における撮像時の制御部１５の動作を示すフローチャートである。
【図５】デジタルカメラ１における画像補正時の制御部１５の動作を示すフローチャートである。
【図６】第２の本画像を用いて第１の本画像を画像補正する流れを示す模式図である。
【図７】第２実施形態のデジタルカメラ１における撮像時の制御部１５の動作を示すフローチャートである。
【図８】第３実施形態におけるカメラ本体ユニット２０１の外観を前面側から示す図である。
【図９】第３実施形態におけるサブカメラユニット３０１の外観を前面側から示す図である。
【図１０】第３実施形態におけるサブカメラユニット３０１にカメラ本体ユニット２０１を取り付けた例を示す図である。
【図１１】第３実施形態におけるカメラ本体ユニット２０１及びサブカメラユニット３０１の構成を示すブロック図である。
【符号の説明】
【００９１】
１…デジタルカメラ、２…メインカメラ、３…サブカメラ、４…撮像レンズ、８…メインカメラ画像処理部、９…撮像レンズ、１５…制御部、１６…画像補正部、１７…赤目補正部、２２…ストロボ装置、２０１…カメラ本体ユニット、２０２…撮像レンズ、２０３…撮像素子、２０４…Ａ／Ｄ変換部、２０５…画像バッファ、２０６…メインカメラ画像処理部、２０８…画像補正部、２１８…被取付け部、３０１…サブカメラユニット、３０２…撮像レンズ、３０３…撮像素子、３０４…Ａ／Ｄ変換部、３０５…画像バッファ、３０６…カメラ画像処理部、３０７…制御部、３０８…赤目補正部、３１１…取付け部、３１０…サブカメラユニット側信号送受信部
【図１】
2010056883.tif 000003
【図２】
2010056883.tif 000004
【図３】
2010056883.tif 000005
【図４】
2010056883.tif 000006
【図５】
2010056883.tif 000007
【図６】
2010056883.tif 000008
【図７】
2010056883.tif 000009
【図８】
2010056883.tif 000010
【図９】
2010056883.tif 000011
【図１０】
2010056883.tif 000012
【図１１】
2010056883.tif 000013