(57)【要約】      （修正有）【課題】複数の被写体が混合しているシーンの撮影の際に、ユーザーの意図通りに、かつ、不自然さのない撮影画像を取得することができる撮像装置を提供する。【解決手段】撮像した、一部、または、全部の画像に対し画像処理を施して出力画像を取得することができる撮像装置であって、撮像装置には画像を表示する表示装置が搭載されており、表示装置には撮像前であっても撮像予定の画像処理後の画像を表示することができ、表示装置に表示された画像に対し、明瞭画質エリア、かつ／または、不明瞭画質エリアを指定することができるエリア指定機構を有する。指定された明瞭画質エリア内及び不明瞭画質エリアに相当する明瞭画質エリア外における被写体状況により撮影条件を決定して撮像装置に設定し、操作部材を操作することにより、画像処理の度合いを任意に設定した画像を表示装置に表示させて、撮像する。【選択図】図１
2017126911.tif 000002
【特許請求の範囲】
【請求項１】
撮像した、一部、または、全部の画像に対し画像処理を施して出力画像を取得することができる撮像装置であって、前記撮像装置には画像を表示する表示装置が搭載されており、前記表示装置には撮像前であっても撮像予定の画像処理後の画像を表示することができる撮像装置であって、前記表示装置に表示された画像に対し、明瞭画質エリア、かつ／または、不明瞭画質エリアを指定することができるエリア指定機構を有し、前記エリア指定機構により指定された明瞭画質エリア内、及び、不明瞭画質エリアに相当する明瞭画質エリア外における被写体状況により撮影条件を決定して撮像装置に設定し、さらには、前記撮像装置には前記画像処理の度合いを任意に変化させることができる操作部材が搭載されており、前記操作部材を操作することにより、画像処理の度合いを任意に設定した画像を前記表示装置に表示させて、撮像することができることを特徴とする撮像装置。
【請求項２】
前記表示装置に表示させる画像において、画像処理を施す領域、及び、画像処理の度合いを認識できる表示方法により、前記表示装置に画像処理後の画像を表示させることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示方法は、画像処理を施す領域を特定の色で表し、画像処理の度合いを特定の色の濃度で表すことを特徴とする請求項１又は請求項２に記載の撮像装置。
【請求項４】
前記撮像装置には出力画像の確認のために前記表示装置に表示させることを指示するための確認操作部材を設け、前記表示方法で表示させて画像処理を施す領域、及び、画像処理の度合いを決定後、前記確認操作部材を操作することにより、所定の画像処理を施した最終出力画像を前記表示装置に表示させることを特徴とする請求項１乃至請求項３の何れか一項に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、鮮明にしたい被写体に対しては明瞭に、不鮮明にしたい被写体に対しては不明瞭に撮影し、ユーザーの意図通りの画像を取得することができる撮像装置に関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置を用いて撮影した画像を、ソーシャル・ネットワーキング・サービス（ＳＮＳ）などにより、ネットワーク上に公開したいというニーズが高まっている。
【０００３】
このとき、複数の被写体が混合して撮影された画像の場合、認識し易くさせたい被写体と認識しづらくしたい被写体とに切り分けて、画像を取得したいという要望がある。
【０００４】
しかし、この要望をあらゆるユーザーに対し満たすために、上述のように切り分けられたそれぞれの被写体に対し適した画像処理を施して、画像を取得することは困難であった。
【０００５】
例えば、上述の画像処理の一手段として背景ぼかし処理があるが、ネットワーク上に公開したくない被写体なのにぼかし不十分で認識できてしまう画像を取得してしまうことがある。逆に、ぼかしたくない被写体をぼかしてしまう画像を取得してしまう場合もあり、ユーザーが要望する画像が得られない場合が少なからず生じてしまい、確実にユーザーニーズを満たす画像が得られないという課題を有していた。
【０００６】
上述の課題を解決する手法として、特許文献１で記載の画像合成装置が開示されている。これによれば、主要被写体を含む主要被写体画像と背景被写体を含む背景画像を、それぞれ視認性が異なる画像が得られるように制御して撮影する。この二種類の画像を合成することにより、プライバシー保護にも配慮した画像を取得できることが記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１３−１３５３９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
特許文献１で記載の画像合成装置は、それぞれ異なる撮影条件（絞り、露光時間等）で主要被写体画像と背景画像の２枚の画像を取得して合成するため、必ずしもユーザーが望む自然な画像を取得することができなかった。
【０００９】
また、一つの光学系による一般的なカメラで実現しようと場合、主要被写体画像を撮影する時間と背景画像を撮影する時間の２ショット分の撮影時間を必要とし、主要被写体画像と背景画像を同時に撮影することが出来ない。故に、ユーザーが撮影開始操作をしてから、２ショット目の撮影開始までにタイムラグがあるため、シャッターチャンスを逃してしまうという課題もあった。
【課題を解決するための手段】
【００１０】
上記の課題を解決するために、本発明に係る撮像装置は、
撮像した、一部、または、全部の画像に対し画像処理を施して出力画像を取得することができる撮像装置であって、前記撮像装置には画像を表示する表示装置が搭載されており、前記表示装置には撮像前であっても撮像予定の画像処理後の画像を表示することができる撮像装置であって、前記表示装置に表示された画像に対し、明瞭画質エリア、かつ／または、不明瞭画質エリアを指定することができるエリア指定機構を有し、前記エリア指定機構により指定された明瞭画質エリア内、及び、不明瞭画質エリアに相当する明瞭画質エリア外における被写体状況により撮影条件を決定して撮像装置に設定し、さらには、前記撮像装置には前記画像処理の度合いを任意に変化させることができる操作部材が搭載されており、前記操作部材を操作することにより、画像処理の度合いを任意に設定した画像を前記表示装置に表示させて、撮像することができることを特徴とする。
【発明の効果】
【００１１】
本発明によれば、複数の被写体が混合しているシーンの撮影の際に、視認性を良くしたい被写体に対しては明瞭に、視認性を低下させたい被写体に対しては不明瞭に、ユーザーの意図通りに、かつ、不自然さのない撮影画像を取得することができる。また、上述の画像を１ショットの撮影で取得できるため、シャッターチャンスを逃さず、ユーザーの意図通りの撮影画像を取得することができる。
【図面の簡単な説明】
【００１２】
【図１】実施形態における撮像システムのＳＮＳモードに関するシーケンスを示した図
【図２】実施形態における図１のシーケンス上のサブプロセスＳ１０３に関するシーケンスを示した図
【図３】実施形態における撮像システムで撮影する被写体の例を示した模式図
【図４】実施形態における撮像システムのＥＶＦ上に、撮影被写体の明瞭画質エリアを指定した例を示した模式図
【図５】実施形態の撮像システムにおける、画像処理レベルに応じて切替るＥＶＦ表示の例を示した模式図
【図６】実施形態の撮像システムにおける、ユーザーが選択した画像処理レベルで画像処理を行った画像をＥＶＦに表示した場合のＥＶＦ表示例を示した模式図
【図７】実施形態におけるデジタルカメラの概略構成例を示すブロック図
【図８】実施形態の撮像システムの画像処理（階調変換処理）に用いられる、輝度の入出力特性（γ曲線）を示した模式図
【発明を実施するための形態】
【００１３】
以下、図面を参照して本発明の各実施形態を詳細に説明する。     
【００１４】
なお、本発明の技術的範囲は、特許請求の範囲によって確定されるのであって、以下の個別の実施形態によって限定されるわけではない。また、実施形態の中で説明されている特徴の組み合わせすべてが、本発明に必須とは限らない。
【００１５】
（第１の実施形態）
以下、本発明の第１の実施形態について、図面を参照しながら説明する。
【００１６】
図７は本実施形態におけるデジタルカメラ７００の概略構成例を示すブロック図である。
【００１７】
図７において、光学系７０１は、少なくともズームレンズ、フォーカスレンズ、防振レンズから構成されるレンズ群、絞り装置を備えている。この光学系７０１は、撮像素子７０２に到達する被写体像の倍率や、ピント位置、手振れなどによるブレ画像出力の抑制、あるいは、光量を調整している。
【００１８】
撮像素子７０２はＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサー等の光電変換素子であり、被写体像を電気信号に変換して画像信号を生成する。本実施形態では撮像素子７０２はＣＣＤで構成されているものとする。Ａ／Ｄ変換器７０３は、撮像素子７０２から出力されたアナログの画像信号をデジタルの画像信号に変換する。
【００１９】
画像処理回路７０４は、画像信号に対して、ホワイトバランス処理、ノイズ抑圧処理、階調変換処理、エッジ強調処理、ぼかし処理などを行い、画像信号を輝度信号Ｙおよび色差信号Ｕ、Ｖとして出力する。また、画像処理回路７０４は、画像信号から被写体の輝度値や被写体のピント状態を示す合焦値も算出する。
【００２０】
また、本実施形態では、ＳＮＳモードなる撮影モードを用意しており、所定の撮影シーンにおいて明瞭に映したい被写体と不明瞭に映したい被写体がある場合、ユーザーが指定した被写体に対し任意の画像処理を施して所望の画像を取得することができる。この時の画像処理も画像処理回路７０４を動作させて実施しており、詳細は後述する。
【００２１】
制御回路７０５は、本実施形態のデジタルカメラ７００を構成する各回路を制御して、デジタルカメラ７００の動作を統括し、光学系７０１や撮像素子７０２の駆動制御も行う。
【００２２】
表示メモリ７０６は、表示装置７０７に表示する画像の元になる画像信号を一時的に記憶するメモリである。表示装置７０７は、液晶ディスプレイや有機ＥＬ（Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイで構成され、撮像素子７０２で生成された画像信号や、記録媒体７０８から読み出した画像信号に係る画像を表示する。撮像素子７０２から読み出される連続した画像信号を、随時更新して表示することにより、電子的なビューファインダー（ＥＶＦ）として機能することが可能である。
【００２３】
また、記録媒体７０８は、デジタルカメラ７００に着脱可能に構成されたものであっても、デジタルカメラ７００に内蔵されたものであってもよい。
【００２４】
操作部材７０９は、ユーザーがデジタルカメラ７００に指示を送るために操作する部材である。本実施形態では、表示装置７０７はタッチパネル式の液晶ディスプレイとなっており、一部の操作に関して操作部材７０９としての役割も果たす。
【００２５】
バス７１０は、画像処理回路７０４、制御回路７０５、表示メモリ７０６、および記録媒体７０８の間で画像信号をやり取りするために用いられる。
【００２６】
次に、本実施形態におけるデジタルカメラ７００の静止画撮影時の動作の一例について説明する。
【００２７】
ユーザーによって操作部材７０９が操作され、撮影準備を開始する指示が入力されると、制御回路７０５がそれぞれの回路の動作の制御を開始する。
【００２８】
まず、撮像素子７０２は、光学系７０１を透過した被写体像を光電変換してアナログの画像信号を生成し、Ａ／Ｄ変換器７０３がアナログの画像信号をデジタル化する。画像処理回路７０４は、Ａ／Ｄ変換器７０３から出力された画像信号に対して、ホワイトバランス処理、ノイズ抑圧処理、階調変換処理、エッジ強調処理などを行う。
【００２９】
画像処理回路７０４で処理された画像信号は、表示メモリ７０６を介して、表示装置７０７に画像として表示される。上述したように、撮像素子７０２で連続的に画像信号を生成し、読み出される連続した画像信号を用いて、被写体の画像をリアルタイムで更新して表示装置７０７に表示することにより表示装置７０７はＥＶＦとして機能する。
【００３０】
そして、ユーザーが操作部材７０９に含まれるシャッターボタンを操作するまで、これらの処理を繰り返す。ユーザーがシャッターボタンを操作すると、制御回路７０５は画像処理回路７０４で得られた輝度値や合焦値に基づいて光学系７０１の動作を再調整して静止画の撮影を行う。そして、画像処理回路７０４が、この静止画の画像信号に対してぼかし処理やエッジ強調処理などの種々の画像処理を行い、記録媒体７０８には画像処理回路７０４から出力された画像信号が記録される。
【００３１】
以上が本実施形態におけるデジタルカメラ７００の静止画撮影の基本動作の説明であるが、本実施形態で特徴的なＳＮＳモードにおける動作について、以下に詳述する。
【００３２】
図１は前述した本実施形態の特徴とするＳＮＳモードで撮影する際の動作シーケンスを表した図であり、ユーザーが操作部材７０９に含まれるＳＮＳモード切替部材を所定の設定にすることにより、動作を開始する。
【００３３】
ＳＮＳモード開始操作後、Ｓ１０１に移り、ユーザーがＥＶＦで確認しながら明瞭画質（もしくは不明瞭画質）を得たいエリアを指定できる状態になる。例えば、図３で示す被写体に対し、図４中の点線枠で明瞭画質エリアと不明瞭画質エリアの境界を指定することができる。このとき、ユーザーがタッチパネル式の表示装置７０７上に指などで枠取りして点線枠を指定してもよいし、もしくは、デジタルカメラ７００が自動的に判別して点線枠を指定してもよい。本実施形態では前者の点線枠指定のやり方を採用しており、点線枠指定後、点線枠内の一部、あるいは、点線枠外の一部をユーザーがタッチすることにより、タッチした領域を明瞭画質エリアとして指定することができる。
【００３４】
次に、Ｓ１０２の条件分岐に移り、ユーザーが操作部材７０９のシャッターボタンを半押し（以後ＳＷ１と表記する）したかを判定する。ＳＷ１は、輝度値や合焦値に基づいて光学系７０１の動作を再調整して、デジタルカメラ７００の撮影準備開始を示すための動作となっている。Ｓ１０２でＳＷ１が確認されなければ再度Ｓ１０１に戻り、確認されれば次のＳ１０３に移る。
【００３５】
Ｓ１０３は、ＳＮＳモードに適した撮影条件を、被写体の状態に応じてデジタルカメラ７００に設定するサブプロセスとなっている。これに関し、図２を用いて以下に詳述する。
【００３６】
図１におけるＳ１０３の開始を確認すると、図２に記載されている通り、Ｓ２０１の条件分岐に移る。Ｓ２０１では、明瞭画質エリア外（図４で示す点線枠外）において、動体を検出しなかったかを確認する。
【００３７】
Ｓ２０１で動体を検出できた場合、Ｓ２０４に移り、デジタルカメラ７００の設定として、「ＩＳＯ感度：Ｓｖ１（低めの設定）、絞り：Ａｖ１（明瞭エリア内が適正露出となる設定）、シャッター速度：Ｔｖ１（遅めの設定）、γ曲線：γ１（通常設定）、手振れ補正：強」に各種設定をして、撮影準備状態となり、Ｓ１０３のサブプロセスを終了する。ここで、γ曲線とは、図８で示すような、画像処理回路７０４で実施する階調変換処理に用いる入力輝度に対する出力輝度の関係を表したものである。撮像素子７０２のＡ／Ｄ変換器７０３経由後の出力を入力輝度とした時、このγ曲線の関係に応じた出力輝度が画像処理回路７０４から出力される。本実施形態では、図８に示すように、３種類のγ曲線（γ１、γ２、γ３）が用意されており、撮影状況に応じて使い分けている。以上の設定により、撮影された画像としては、明瞭画質エリア外での被写体は動いているため、ぶれた画像として取得するため不鮮明な画像が得られ、明瞭画質エリア内では適正露出で撮影されているため鮮明な被写体画像として取得できる。
【００３８】
一方で、Ｓ２０１で、明瞭画質エリア外で動体を検出できなかった場合、次の条件分岐のＳ２０２に移る。ここでは、明瞭画質エリア内外の被写体の明るさに差がないかを判定する。ここで、差があると判定した場合、次の条件分岐Ｓ２０３に移り、一方、差がないと判定した場合はＳ２０５に移る。
【００３９】
Ｓ２０５では、デジタルカメラ７００の設定として、「ＩＳＯ感度：Ｓｖ２（明瞭エリア内が適正露出となる設定）、絞り：Ａｖ２（明瞭エリア内が適正露出となる設定）、シャッター速度：Ｔｖ２（明瞭エリア内が適正露出となる設定）、γ曲線：γ１（通常設定）、手振れ補正：通常」に各種設定をして、撮影準備状態となり、Ｓ１０３のサブプロセスを終了する。ここでの設定は、ＳＮＳモードに限って発動される特殊な設定ではなく、他の撮影モードでも設定し得る、通常の露出制御による設定となっている。
【００４０】
一方で、Ｓ２０２で明瞭画質エリア内外の被写体の明るさに差があると判定した場合、次の条件分岐Ｓ２０３に移る。ここでは、明瞭画質エリア内の被写体の明るさ（輝度）と明瞭画質エリア外の被写体の明るさを比較し、明瞭画質エリア内の被写体の方が明るいと判定した場合、Ｓ２０６に移る。一方で、明瞭画質エリア内の被写体の方が暗いと判定した場合、Ｓ２０７に移る。
【００４１】
Ｓ２０６では、デジタルカメラ７００の設定として、「ＩＳＯ感度：Ｓｖ３（低めの設定）、絞り：Ａｖ３（明瞭エリア内が適正露出となる設定）、シャッター速度：Ｔｖ３（明瞭エリア内が適正露出となる設定）、γ曲線：γ２、手振れ補正：通常」に各種設定をして、撮影準備状態となり、Ｓ１０３のサブプロセスを終了する。この設定で撮影することにより、明瞭画質エリア外の被写体をいわゆる黒潰れしやすくし、被写体を暗くして不鮮明にすることができる。一方で、明瞭画質エリア内では適正露出で撮影されているため鮮明な被写体画像として取得できる。
【００４２】
そして、Ｓ２０７では、デジタルカメラ７００の設定として、「ＩＳＯ感度：Ｓｖ４（高めの設定）、絞り：Ａｖ４（明瞭エリア内が適正露出となる設定）、シャッター速度：Ｔｖ４（明瞭エリア内が適正露出となる設定）、γ曲線：γ３、手振れ補正：通常」に各種設定をして、撮影準備状態となり、Ｓ１０３のサブプロセスを終了する。この設定で撮影することにより、明瞭画質エリア外の被写体をノイジー、かつ、いわゆる白とびしやすくし、被写体を不鮮明にすることができる。一方で、明瞭画質エリア内では適正露出で撮影されているため鮮明な被写体画像として取得できる。
【００４３】
以上が、本実施形態におけるサブプロセスＳ１０３の説明である。このＳ１０３で撮影条件を設定することにより、この撮影条件で撮影された画像に対し、撮影後の画像処理で過度な処理を施すことなく、自然に、鮮明にしたい被写体は鮮明に、不鮮明にしたい被写体は不鮮明にすることができる。ここで、上述の各撮影条件は一実施例を挙げたに過ぎず、明瞭画質エリア内と明瞭画質エリア外で被写体の明瞭さを変えることができる設定であれば、これに限るものではない。
【００４４】
以上のサブプロセスＳ１０３で各撮影シーンに応じた最適な撮影条件を決定した後に、Ｓ１０４に移る。Ｓ１０４では、画像処理効果（本実施形態ではぼかし処理）をユーザーが選択するステップとなっており、下記のようにして、ユーザーが希望する画像処理効果を選択する。
【００４５】
本実施形態では、図５で示すように、画像処理を実施するエリアに対し色付けなどをして、表示装置７０７のＥＶＦ上でも画像処理のエリアが認識できるように誇張して、ＳＷ１時の画像をＦＶＦ上に表示させる。このときの初期表示に対応する画像処理の度合い（画像処理レベル）としては、本実施形態では最も画像処理の効果が弱い設定としている。
【００４６】
また、操作部材７０９に含まれる画像処理レベル強弱設定ボタンが用意されており、これを１度押下すると、画像処理レベルが「弱設定⇒中設定⇒強設定⇒弱設定⇒…」と切替えることができる。
【００４７】
このとき、本実施形態では、画像処理レベル「弱設定⇒中設定⇒強設定⇒弱設定⇒…」に対応するように、図５で示すような「（ａ）⇒（ｂ）⇒（ｃ）⇒（ａ）⇒…」のようにして、画像処理エリアの色付けの色の濃さを変化させてＥＶＦに表示する。ここでのＥＶＦで表示されている色付け領域は画像処理を実施する領域を示しており、また、色の濃さは画像処理の度合いを表しており、濃いほど強く画像処理を施すことを表している。
【００４８】
そして、ユーザーが希望する画像処理レベルの表示になったときに、再度、画像処理レベル強弱設定ボタンを押下することにより、画像処理レベルが決定されてＳ１０５に移行する。
【００４９】
Ｓ１０５では、図６で示すような、Ｓ１０４で選択した画像処理レベルで実際に画像処理を行った画像をＥＶＦ上に表示させる。ユーザーはここで表示される画像処理後の画像を最終的に確認し、ユーザーが希望する画像であれば、Ｓ１０６でシャッターボタンを全押し（以後ＳＷ２と表記する）して画像を取得し、撮影を終了する。一方で、Ｓ１０５で所定の時間（本実施形態では５秒間）が経過してもＳＷ２動作が確認されなかった場合はＳ１０４に戻り、再度、ユーザーが画像処理効果を選択するためのＥＶＦの表示となる。
【００５０】
以上のＳ１０４、Ｓ１０５により、ユーザーが希望する画像処理レベルで画像処理を実施した撮影画像を取得することができ、ユーザーが意図する画像を取得することができる。
【符号の説明】
【００５１】
７００  デジタルカメラ、７０１  光学系、７０２  撮像素子、７０３  Ａ／Ｄ変換器、
７０４  画像処理回路、７０５  制御回路、７０６  表示メモリ、７０７  表示装置、
７０８  記録媒体、７０９  操作部材
【図１】
2017126911.tif 000003
【図２】
2017126911.tif 000004
【図３】
2017126911.tif 000005
【図４】
2017126911.tif 000006
【図５】
2017126911.tif 000007
【図６】
2017126911.tif 000008
【図７】
2017126911.tif 000009
【図８】
2017126911.tif 000010