(57)【要約】【課題】目領域を拡大した画像をスルー画像に重畳表示することで自分自身の瞳にキャッチライトがどのようにはいっているのか容易に視認することが可能となり最適なキャッチライト撮影が可能となる撮像装置を提供すること。【解決手段】撮像部と撮像部により得られたスルー画像を表示する表示部とを有する撮像装置であって、制御装置と、操作部と、主被写体の目領域を検出する目検出部とを有し、制御装置は、操作部に第１の操作がなされたことを検出した場合には、スルー画像に目検出部で検出された目領域の画像を所定の大きさに拡大した第１の画像を重畳した画像を表示部に表示することを特徴とする。【選択図】図８
2017120942.tif 000002
【特許請求の範囲】
【請求項１】
撮像部と前記撮像部により得られたスルー画像を表示する表示部とを有する撮像装置であって、
制御装置と、
操作部と、
前記制御装置は、
主被写体の目領域を検出し、
前記操作部に第１の操作がなされたことを検出した場合には、
スルー画像に前記目検出部で検出された目領域の画像を所定の大きさに拡大した第１の画像を重畳した画像を前記表示部に表示することを特徴とする撮像装置。
【請求項２】
前記制御装置は、主被写体の瞳領域を検出するとともに前記瞳領域にキャッチライトがあるか否かを検出し、前記操作部に第１の操作がなされたことを検出した場合には、スルー画像に前記キャッチライト検出部で検出されたキャッチライト有無情報を重畳した画像を表示部に表示することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記制御装置は、主被写体の顔領域を検出し、前記顔領域の範囲外に、前記第１の画像を重畳することを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記制御装置は、前記目領域の範囲外に、前記第１の画像を重畳することを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記制御装置は、前記目領域の大きさが所定の大きさ未満であった場合に、前記第１の画像を重畳することを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記制御装置は、前記操作部に第２の操作がなされたことを検出した場合には、目領域の画像を所定の大きさに拡大した第２の画像と縮小したスルー画像とを前記表示部に表示することを特徴とする請求項１に記載の撮像装置。
【請求項７】
前記第２の画像の大きさは、前記第１の画像の大きさよりも大きいことを特徴とする請求項６に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置に関し、特に自分撮りを行う際の表示に関する。
【背景技術】
【０００２】
近年、デジタルカメラなどの撮像装置で撮影者が自分自身を撮影する所謂自分撮りを行うユーザが増えている。また、被写体の瞳にキャッチライトと呼ばれる光を入れることで、人物の表情を生き生きとさせる撮影手法が知られている。
【０００３】
しかしながら、キャッチライト撮影には一般的にレフ板を用いて行われ、大がかりな機材が必要となるため、自分撮りの際に手軽に実施できるものではなかった。
【０００４】
そこで、特許文献１に開示されたように、撮像部と発光部とを備え撮像部の撮像方向と発光部の発光による光の投射方向とが異なる方向とすることで、キャッチライト撮影を簡単に行うことができる撮像装置が提案されている。
【０００５】
一方で、自分撮りの際にユーザは自分自身の瞳にキャッチライトが入っているか否かを撮像装置の表示部に表示されたスルー画像を視認しながら最適なキャッチライト撮影が可能な画角や撮影方向となるように撮像装置を操作し撮影を行う。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１４−１５３６６９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１に開示されているような小型の撮像装置の場合には表示部が小さく自分自身の瞳にキャッチライトがどのように入っているのか視認しにくいという課題があった。
【課題を解決するための手段】
【０００８】
上記の課題を解決するために、本発明に係る撮像装置は、
撮像部と撮像部により得られたスルー画像を表示する表示部とを有する撮像装置であって、制御装置と、操作部と、主被写体の目領域を検出する目検出部とを有し、制御装置は、操作部に第１の操作がなされたことを検出した場合には、スルー画像に目検出部で検出された目領域の画像を所定の大きさに拡大した第１の画像を重畳した画像を表示部に表示することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、目領域を拡大した画像をスルー画像に重畳表示することで自分自身の瞳にキャッチライトがどのようにはいっているのか容易に視認することが可能となり最適なキャッチライト撮影が可能となる撮像装置を提供することが可能となる。
【図面の簡単な説明】
【００１０】
【図１】実施形態のデジタルカメラの前面斜視図と背面斜視図
【図２】実施形態のデジタルカメラの構成例を示すブロック図
【図３】実施形態のデジタルカメラの目領域表示モードの表示例を示す図
【図４】実施形態のデジタルカメラの目領域表示モードの表示例を示す図
【図５】実施形態のデジタルカメラの目領域表示モードの表示例を示す図
【図６】実施形態のデジタルカメラのキャッチライト有無表示モードの表示例を示す図
【図７】実施形態のデジタルカメラの目領域分割表示モードの表示例を示す図
【図８】実施形態のデジタルカメラの表示モード移行処理を示すフローチャート
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の好適な実施形態を説明する。本発明の撮像装置の一例としてデジタルカメラを用いて説明する。
【００１２】
図１は本実施形態のデジタルカメラの斜視図である。
【００１３】
図１において、１００はデジタルカメラである。撮像レンズ１０３はズームレンズ、フォーカスレンズを含むレンズ群である。表示部２８は画像や各種情報を表示する表示部である。表示部２８の表示領域上にはタッチパネル７０が設けられタッチパネルディスプレイとして機能する。
【００１４】
モニタ１２８はヒンジ部１２９の回転軸を中心に回転可能に構成されている。例えば、ユーザが自分撮りを行う場合には、図１に示すように撮像レンズ１０３の撮像方向と表示部２８の表示方向が略同一となる位置にモニタ１２８を配置した状態で表示部２８の表示を確認しながら撮影を行う。
【００１５】
なお、撮像レンズ１０３の撮像方向と表示部２８の表示方向が略同一である構成であれば、モニタ１２８は回転可能な構成でなくともよい。
【００１６】
シャッターボタン６１は撮影指示を行うための操作部である。電源スイッチ７２は、電源オン、電源オフを切り替えるための押しボタンである。
【００１７】
図２は本実施形態のデジタルカメラ１００の構成例を示すブロック図である。
【００１８】
図２において、シャッター１０１は絞り機能を備えるシャッターである。撮像部２２は光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子である。Ａ／Ｄ変換器２３は、撮像部２２から出力されるアナログ信号をデジタル信号に変換するために用いられる。バリア１０２はデジタルカメラ１００の、撮影レンズ１０３を含む撮像系を覆うことにより、撮影レンズ１０３、シャッター１０１、撮像部２２を含む撮像系の汚れや破損を防止する。
【００１９】
画像処理部２４は、Ａ／Ｄ変換器２３からのデータ、又は、メモリ制御部１５からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部２４では、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてシステム制御部５０が露光制御、測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理が行われる。画像処理部２４では更に、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００２０】
Ａ／Ｄ変換器２３からの出力データは、画像処理部２４及びメモリ制御部１５を介して、或いは、メモリ制御部１５を介してメモリ３２に直接書き込まれる。
【００２１】
メモリ３２は、撮像部２２によって得られＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。また、メモリ３２は画像表示用のメモリ（ビデオメモリ）を兼ねている。
【００２２】
Ｄ／Ａ変換器１３は、メモリ３２に格納されている画像表示用のデータをアナログ信号に変換して表示部２８に供給する。こうして、メモリ３２に書き込まれた表示用の画像データはＤ／Ａ変換器１３を介して表示部２８により表示される。
【００２３】
表示部２８は、ＬＣＤ等の表示器上に、Ｄ／Ａ変換器１３からのアナログ信号に応じた表示を行う。
【００２４】
Ａ／Ｄ変換器２３によって一度Ａ／Ｄ変換されメモリ３２に蓄積されたデジタル信号をＤ／Ａ変換器１３においてアナログ変換し、表示部２８に逐次転送して表示することで、電子ビューファインダとして機能し、スルー画像表示（ライブビュー表示）を行える。
【００２５】
不揮発性メモリ５６は、電気的に消去・記録可能な記録媒体としてのメモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記憶される。ここで言う、プログラムとは、本実施形態にて後述する各種フローチャートを実行するためのコンピュータプログラムのことである。また、本実施形態では、後述する目領域表示処理で、表示部２８に表示させる目領域表示の複数の表示位置の候補が、目領域表示位置管理テーブルとして不揮発性メモリ５６に記憶されている。
【００２６】
システム制御部５０は、デジタルカメラ１００全体を制御する。前述した不揮発性メモリ５６に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。
【００２７】
システムメモリ５２には、ＲＡＭが用いられる。システムメモリ５２には、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等を展開する。また、システム制御部５０はメモリ３２、Ｄ／Ａ変換器１３、表示部２８等を制御することにより表示制御も行う。
【００２８】
システムタイマー５３は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。
【００２９】
第１シャッタースイッチ６２は、デジタルカメラ１００に設けられたシャッターボタン６１の操作途中、いわゆる半押し（撮影準備指示）でＯＮとなり第１シャッタースイッチ信号ＳＷ１を発生する。第１シャッタースイッチ信号ＳＷ１により、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作を開始する。
【００３０】
第２シャッタースイッチ６４は、シャッターボタン６１の操作完了、いわゆる全押し（撮影指示）でＯＮとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部５０は、第２シャッタースイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから記録媒体２００に画像データを書き込むまでの一連の撮影処理の動作を開始する。
【００３１】
電源制御部８０は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部８０は、その検出結果及びシステム制御部５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２００を含む各部へ供給する。
【００３２】
電源部３０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる。
【００３３】
記録媒体Ｉ／Ｆ１８は、メモリカードやハードディスク等の記録媒体２００とのインターフェースである。記録媒体２００は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや光ディスク、磁気ディスク等から構成される。
【００３４】
本実施形態のデジタルカメラ１００は、表示部２８に対する接触を検知可能なタッチパネル７０を有する。タッチパネルと表示部２８とは一体的に構成することができる。例えば、タッチパネルを光の透過率が表示部２８の表示を妨げないように構成し、表示部２８の表示面の上層に取り付ける。そして、タッチパネルにおける入力座標と、表示部２８上の表示座標とを対応付ける。これにより、あたかもユーザが表示部２８上に表示された画面を直接的に操作可能であるかのようなＧＵＩを構成することができる。システム制御部５０はタッチパネルへの以下の操作、あるいは状態を検出できる。
・タッチパネルを指やペンで触れたこと（以下、タッチダウンと称する）。
・タッチパネルを指やペンで触れている状態であること（以下、タッチオンと称する）。
・タッチパネルを指やペンで触れたまま移動していること（以下、ムーブと称する）。
・タッチパネルへ触れていた指やペンを離したこと（以下、タッチアップと称する）。
・タッチパネルに何も触れていない状態（以下、タッチオフと称する）。
【００３５】
これらの操作・状態や、タッチパネル上に指やペンが触れている位置座標は内部バスを通じてシステム制御部５０に通知され、システム制御部５０は通知された情報に基づいてタッチパネル上にどのような操作が行なわれたかを判定する。
【００３６】
タッチパネルは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネルのうちいずれの方式のものを用いても良い。
【００３７】
圧力センサ１７０はタッチパネル７０の接触圧力を検出可能なセンサである。システム制御部５０はタッチパネル７０に接触入力があり圧力センサで所定値以上の接触圧力を検出した場合にはプッシュ操作がなされた判定する。
【００３８】
上述したデジタルカメラ１００の顔検出機能について説明する。
【００３９】
システム制御部５０は顔検出対象の画像データを画像処理部２４に送る。システム制御部５０の制御下で画像処理部２４は、当該画像データに水平方向バンドパスフィルタを作用させる。また、システム制御部５０の制御下で画像処理部２４は処理された画像データに垂直方向バンドパスフィルタを作用させる。これら水平及び垂直方向のバンドパスフィルタにより、画像データよりエッジ成分が検出される。
【００４０】
その後、システム制御部５０は、検出されたエッジ成分に関してパターンマッチングを行い、目及び鼻、口、耳の候補群を抽出する。そして、システム制御部５０は、抽出された目の候補群の中から、予め設定された条件（例えば２つの目の距離、傾き等）を満たすものを、目の対と判断し、目の対があるもののみ目の候補群として絞り込む。そして、システム制御部５０は、絞り込まれた目の候補群とそれに対応する顔を形成する他のパーツ（鼻、口、耳）を対応付け、また、予め設定した非顔条件フィルタを通すことで、顔を検出する。このとき、システム制御部５０は瞳を検出し、瞳領域のキャッチライトの有無を判定する。システム制御部５０は、顔の検出結果に応じて上記顔情報を出力し、処理を終了する。
【００４１】
次に、デジタルカメラ１００の目領域表示モードの表示について説明する。
【００４２】
図３および図４は本実施形態のデジタルカメラにおける表示部２８への表示例を示す図である。
【００４３】
本実施形態において、デジタルカメラ１００で自分撮りを行うと図３（ａ）に示すように、撮像レンズ１０３で撮影された撮影者３０１の映像が表示部２８に表示される。この時、システム制御部５０は、画像データに対し顔検出処理を行い目、瞳、顔を判定し、さらに瞳領域のキャッチライトの有無を判定する。この状態で、ユーザが瞳にキャッチライトが入っているか否かを確認するために、目領域３１０ａ、３１０ｂの少なくとも１つにタッチすると、図３（ｂ）に示すように、目領域３１０ａ、３１０ｂを幅Ｗ１、高さＨ１に拡大した目領域表示３１１ａ、３１１ｂおよびキャッチライト有無表示３１２ａ、３１２ｂが重畳表示される。この時、目領域表示３１１ａ、３１１ｂおよびキャッチライト有無表示３１２ａ、３１２ｂは顔領域３３０の範囲外となる位置に表示される。例えば、図４に示すように撮影者３０１の顔が表示部２８の左上に表示される位置で撮影を行う場合には、顔領域３３０の範囲外となる表示部２８の下部領域に表示される。
【００４４】
目領域表示およびキャッチライト有無表示を顔領域の範囲外に表示することができない場合の表示について図５および図６を用いて説明する。
【００４５】
図５および図６に示すように顔を大きく撮影したい場合には、図３および図４を用いて説明したように目領域表示およびキャッチライト有無表示を顔領域の範囲外に表示することができない。その場合、システム制御部５０は目領域３１０ａ、３１０ｂの幅Ｗ２が所定値Ｗ３以上か否かおよび目領域３１０ａ、３１０ｂの高さＨ２が所定値Ｈ３以上か否かを判定する。所定値Ｗ３は目領域表示の幅Ｗ１以下であり、所定値Ｈ３は目表示領域の高さＨ１以下である。
【００４６】
目領域３１０ａ、３１０ｂの幅Ｗ２が所定値Ｗ３未満、かつ目領域３１０ａ、３１０ｂの高さＨ２が所定値Ｈ３未満であると判定された場合には、図５に示すように目領域表示３１１ａ、３１１ｂおよびキャッチライト有無表示３１２ａ、３１２ｂが目領域３１０ａ、３１０ｂの範囲外となる位置に表示される。
【００４７】
目領域３１０ａ、３１０ｂの幅Ｗ２が所定値Ｗ３以上、または目領域３１０ａ、３１０ｂの高さＨ２が所定値Ｈ３以上であると判定された場合にはキャッチライト有無表示モードとなり、図６に示すようにキャッチライト有無表示のみを表示する。
【００４８】
次に、撮像レンズ１０３で撮影された映像と目領域表示の分割表示を行う目領域分割表示モードについて図７を用いて説明する。
【００４９】
図３〜図６を用いて説明した目領域表示モードおよびキャッチライト有無表示モードでは、目領域表示およびキャッチライト有無表示を重畳表示することでスルー画像の一部分が見えなくなってしまう。そのため、ユーザが目領域３１０ａ、３１０ｂの少なくとも１つをプッシュすると目領域分割表示モードとなり、図７に示すように縮小したスルー画像３２８と目領域３１０ａ、３１０ｂを拡大した目領域表示３１１ａ、３１１ｂおよびキャッチライト有無表示３１２ａ、３１２ｂが表示部２８に分割表示される。このとき、目領域表示の幅Ｗ４はＷ１よりも大きく、高さＨ４はＨ１よりも大きいサイズで表示される。
【００５０】
このような構成を持つ本実施形態のデジタルカメラ１００の表示モード移行処理について、図８のフローチャートを用いて説明する。
【００５１】
ステップＳ８０１で、システム制御部５０は自分撮りであるか否かを判定する。自分撮りの判定方法としては、あらかじめポートレートモードや自分撮りモード等、複数の撮影モードをデジタルカメラに持たせておき、タッチパネル７０で設定した撮影モードが自分撮りモードであるか否かに応じて判定する方法がある。また、本実施形態のデジタルカメラにおいてはモニタ１２８の回転操作角度が所定の値以上となった場合に自分撮りとみなし、そうでない場合に通常撮影とみなすように判定してもよい。ステップＳ８０１で自分撮りと判定した場合には、ステップＳ８０２へ処理を移す。
【００５２】
ステップＳ８０２で、システム制御部５０は画像データに対し顔検出処理を行い目領域、瞳領域、顔領域を判定し、さらに瞳領域のキャッチライトの有無を判定する。
【００５３】
ステップＳ８０３で、システム制御部５０は目領域への接触入力を判定する。システム制御部５０は目領域にタッチされたと判定した場合にはステップＳ８０４へ処理を移す。
【００５４】
ステップＳ８０４で、システム制御部５０はタッチパネル７０がプッシュ操作されたか否かを判定する。具体的にはタッチパネル７０へのタッチダウンを検出してからタッチパネル７０からのタッチオフを検出するまでの間にプッシュ操作されたか否かを判定する。プッシュ操作されたと判定した場合には、ステップＳ８１０へ処理を映し、プッシュ操作されなかったと判定した場合には、ステップＳ８０５へ処理を移す。
【００５５】
ステップＳ８０５で、システム制御部５０は目領域のサイズを判定する。具体的には、システム制御部５０は目領域の幅Ｗ２が所定値Ｗ３以上か否かおよび目領域の高さＨ２が所定値Ｈ３以上か否かを判定する。目領域の幅Ｗ２が所定値Ｗ３未満、かつ目領域の高さＨ２が所定値Ｈ３未満である場合には所定サイズ未満と判定し、目領域の幅Ｗ２が所定値Ｗ３以上、または目領域高さＨ２が所定値Ｈ３以上である場合には所定サイズ以上と判定する。
【００５６】
ステップＳ８０６で、システム制御部５０は目領域表示を実行するか否かを判定する。ステップＳ８０５で、目領域のサイズが所定サイズ未満である場合には目領域表示を実行すると判定しステップＳ８０７へ処理を移す。目領域のサイズが所定サイズ以上である場合には目領域表示を実行しないと判定しステップＳ８０９へ処理を移す。
【００５７】
ステップＳ８０７で、システム制御部５０は目領域表示位置を判定する。システム制御部５０は、不揮発性メモリ５６に記憶されている目領域表示位置管理テーブルを参照し、目領域表示位置の複数の候補のうち顔領域の座標が含まれていない目領域表示位置があるか否かを判定する。顔領域の座標が含まれていない目領域表示位置があると判定した場合には、１つを目領域表示位置として決定する。顔領域の座標が含まれていない目領域表示位置がないと判定した場合には、目領域表示位置の複数の候補のうち目領域の座標が含まれていない目領域表示位置の１つを目領域表示位置として決定する。
【００５８】
ステップＳ８０８で、システム制御部５０はデジタルカメラを目領域表示モードに設定する。システム制御部５０は、表示する目領域表示データとキャッチライト有無表示データをメモリ３２に伝送し画像データに重畳させ、画像データをＤ／Ａ変換部１３に出力してＤ／Ａ変換処理を適用後、表示部２８に出力させる。
【００５９】
ステップＳ８０９で、システム制御部５０はデジタルカメラをキャッチライト有無表示モードに設定する。システム制御部５０は、キャッチライト有無表示データをメモリ３２に伝送し画像データに重畳させ、画像データをＤ／Ａ変換部１３に出力してＤ／Ａ変換処理を適用後、表示部２８に出力させる。
【００６０】
ステップＳ８１０で、システム制御部５０はデジタルカメラを目領域分割表示モードに設定する。システム制御部５０は、目領域表示データとキャッチライト有無表示データをメモリ３２に伝送し、表示する画像データを合成し、画像データをＤ／Ａ変換部１３に出力してＤ／Ａ変換処理を適用後、表示部２８に出力させる。
【００６１】
尚、本実施形態において目領域をプッシュすることで目領域分割表示モードへ移行すると説明したが、所定時間以上タッチオン操作された場合に目領域分割表示モードへ移行するように構成してもよい。
【符号の説明】
【００６２】
２８  表示部、５０  システム制御部、７０  タッチパネル、１００  デジタルカメラ、
３１０ａ，３１０ｂ  目領域、３１１ａ，３１１ｂ  目領域表示、
３１２ａ，３１２ｂ  キャッチライト有無表示、３２８  スルー画像表示、
３３０  顔領域
【図１】
2017120942.tif 000003
【図２】
2017120942.tif 000004
【図３】
2017120942.tif 000005
【図４】
2017120942.tif 000006
【図５】
2017120942.tif 000007
【図６】
2017120942.tif 000008
【図７】
2017120942.tif 000009
【図８】
2017120942.tif 000010