(57)【要約】【課題】ピーキング表示において撮像装置の傾き状態をも撮影者に知らしめる【解決手段】撮像素子から得られた入力画像の画像信号に基づき、入力画像上の水平エッジ、垂直エッジ及び斜めエッジを分類して検出する。入力画像において、水平エッジ、垂直エッジ、斜めエッジの画像部分の色信号を、夫々、水色、黄色、緑色の色信号に置換し、この置換後の画像（出力画像）を表示する。【選択図】図７
2015177277.tif 000002
【特許請求の範囲】
【請求項１】
入射光に基づく入力画像の画像信号を出力する撮像素子と、
前記撮像素子の出力信号に基づき前記入力画像上のエッジを検出するエッジ検出部と、
表示画面と、
前記入力画像に基づく画像を前記表示画面にて表示する際、検出された前記エッジの画像部分に対して所定の色信号を適用する信号処理部と、を備え、
前記信号処理部は、検出された前記エッジの内、所定の第１方向における第１エッジと前記第１方向と異なる所定の第２方向における第２エッジとに対し、互いに異なる色信号を適用する
ことを特徴とする撮像装置。
【請求項２】
前記信号処理部は、検出された前記エッジの内、前記第１エッジと、前記第２エッジと、前記第１及び第２方向と異なる所定の第３方向における第３エッジとに対し、互いに異なる色信号を適用し、
前記第１、第２及び第３方向は、夫々、前記入力画像の水平方向、前記入力画像の垂直方向、前記水平及び垂直方向と異なる斜め方向である
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記信号処理部は、前記入力画像における前記第１、第２、第３エッジの画像部分の色信号を、夫々、互いに異なる所定の第１、第２、第３色信号に置換する、又は、前記入力画像における前記第１、第２、第３エッジの画像部分の色信号に、夫々、前記第１、第２、第３色信号を混合する
ことを特徴とする請求項２に記載の撮像装置。
【請求項４】
入射光に基づく入力画像の画像信号を出力する撮像素子と、
前記撮像素子の出力信号に基づき前記入力画像上のエッジを検出するエッジ検出部と、
検出された前記エッジの画像部分における前記画像信号を加工することで、前記入力画像から出力画像を生成する信号処理部と、
前記出力画像を表示する表示画面と、を備え、
前記信号処理部は、検出された前記エッジの内、所定の第１方向における第１エッジに対して所定の第１加工処理を適用し、前記第１方向と異なる所定の第２方向における第２エッジに対して前記第１加工と異なる所定の第２加工処理を適用する
ことを特徴とする撮像装置。
【請求項５】
前記信号処理部は、検出された前記エッジの内、前記第１及び第２方向と異なる所定の第３方向における第３エッジに対して、前記第１及び第２加工処理と異なる所定の第３加工処理を適用し、
前記第１、第２及び第３方向は、夫々、前記入力画像の水平方向、前記入力画像の垂直方向、前記水平及び垂直方向と異なる斜め方向である
ことを特徴とする請求項４に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置に関する。
【背景技術】
【０００２】
デジタルカメラ等の撮像装置において、合焦している画像部分（ピントの合っている画像部分）を色付け表示する等の方法により、合焦している画像部分を撮影者に知らせる機能が提案されている（例えば特許文献１及び２参照）。この機能は、一般に、ピーキング表示機能とも呼ばれる。ピーキング表示機能は、主に、マニュアルフォーカス調整時にどこにピントが合っているのかを確認する機能として利用され、該確認を経て撮影者によるフォーカシング操作が支援される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−６０３２８号公報
【特許文献２】特開２０１１−９１６０２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、被写界には、通常、鉛直線及び水平線に平行なエッジが多く含まれている。例えば、建造物、家具、直立姿勢の人物、地平線などを画像として捉えた場合、それらには鉛直線及び／又は水平線に平行なエッジが多く含まれている。一方において、撮影者は、それらを被写体に含めた撮影を行うことが多く、また、被写界上で水平又は垂直に伸びるものは、撮影画像上でも水平又は垂直に写るように撮影構図を決定することが多い。このような撮影構図の決定を支援するべく、撮像装置の傾きを水準器ガイドにて表示することも考えられる。しかし、別個独立に提示されるピーキング表示と水準器ガイド表示を同時に確認することは撮影者によって容易ではない。撮影者にとって利用しやすい、合焦状態及び撮影構図決定の支援方法が切望される。
【０００５】
そこで本発明は、合焦状態の確認支援及び撮影構図の決定支援を撮影者が利用しやすい形で実現可能な撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明に係る第１の撮像装置は、入射光に基づく入力画像の画像信号を出力する撮像素子と、前記撮像素子の出力信号に基づき前記入力画像上のエッジを検出するエッジ検出部と、表示画面と、前記入力画像に基づく画像を前記表示画面にて表示する際、検出された前記エッジの画像部分に対して所定の色信号を適用する信号処理部と、を備え、前記信号処理部は、検出された前記エッジの内、所定の第１方向における第１エッジと前記第１方向と異なる所定の第２方向における第２エッジとに対し、互いに異なる色信号を適用することを特徴とする。
【０００７】
入力画像に基づく画像を表示する際、エッジの画像部分に対して所定の色信号を適用することで、撮影者は表示画面上で合焦状態（合焦部分の位置や合焦の程度）を確認できる。このとき、第１及び第２方向間で適用色信号を変えることで、撮像装置の傾き状態をも撮影者に知らせることができる。つまり、撮影者は、色信号が適用された画像部分を見るだけで、容易に合焦状態だけでなく撮像装置の傾き状態も知ることができ、合焦状態の確認及び撮影構図の決定が支援される。
【０００８】
具体的には例えば、第１の撮像装置おいて、前記信号処理部は、検出された前記エッジの内、前記第１エッジと、前記第２エッジと、前記第１及び第２方向と異なる所定の第３方向における第３エッジとに対し、互いに異なる色信号を適用し、前記第１、第２及び第３方向は、夫々、前記入力画像の水平方向、前記入力画像の垂直方向、前記水平及び垂直方向と異なる斜め方向であると良い。
【０００９】
より具体的には例えば、第１の撮像装置おいて、前記信号処理部は、前記入力画像における前記第１、第２、第３エッジの画像部分の色信号を、夫々、互いに異なる所定の第１、第２、第３色信号に置換する、又は、前記入力画像における前記第１、第２、第３エッジの画像部分の色信号に、夫々、前記第１、第２、第３色信号を混合すると良い。
【００１０】
また例えば、第１の撮像装置おいて、前記第１及び第２方向は、前記入力画像の水平方向と、前記入力画像の垂直方向と、前記水平及び垂直方向と異なる斜め方向の内の、何れか２つである、又は、前記第１方向は前記水平及び垂直方向を含み且つ前記第２方向は前記斜め方向であっても良い。
【００１１】
また例えば、第１の撮像装置おいて、前記信号処理部は、前記入力画像における前記第１、第２エッジの画像部分の色信号を、夫々、互いに異なる所定の第１、第２色信号に置換する、又は、前記入力画像における前記第１、第２エッジの画像部分の色信号に、夫々、前記第１、第２色信号を混合すると良い。
【００１２】
本発明に係る第２の撮像装置は、入射光に基づく入力画像の画像信号を出力する撮像素子と、前記撮像素子の出力信号に基づき前記入力画像上のエッジを検出するエッジ検出部と、検出された前記エッジの画像部分における前記画像信号を加工することで、前記入力画像から出力画像を生成する信号処理部と、前記出力画像を表示する表示画面と、を備え、前記信号処理部は、検出された前記エッジの内、所定の第１方向における第１エッジに対して所定の第１加工処理を適用し、前記第１方向と異なる所定の第２方向における第２エッジに対して前記第１加工と異なる所定の第２加工処理を適用することを特徴とする。
【００１３】
入力画像を表示する際、エッジの画像部分の画像信号を加工してから表示することで、撮影者は表示画面上で合焦状態（合焦部分の位置や合焦の程度）を確認できる。このとき、第１及び第２方向間で加工処理を変えることで、撮像装置の傾き状態をも撮影者に知らせることができる。つまり、撮影者は、加工処理が適用された画像部分を見るだけで、容易に合焦状態だけでなく撮像装置の傾き状態も知ることができ、合焦状態の確認及び撮影構図の決定が支援される。
【００１４】
具体的には例えば、第２の撮像装置において、前記信号処理部は、検出された前記エッジの内、前記第１及び第２方向と異なる所定の第３方向における第３エッジに対して、前記第１及び第２加工処理と異なる所定の第３加工処理を適用し、前記第１、第２及び第３方向は、夫々、前記入力画像の水平方向、前記入力画像の垂直方向、前記水平及び垂直方向と異なる斜め方向であると良い。
【００１５】
或いは例えば、第２の撮像装置において、前記第１及び第２方向は、前記入力画像の水平方向と、前記入力画像の垂直方向と、前記水平及び垂直方向と異なる斜め方向の内の、何れか２つである、又は、前記第１方向は前記水平及び垂直方向を含み且つ前記第２方向は前記斜め方向であっても良い。
【００１６】
また例えば、第１又は第２の撮像装置において、前記エッジ検出部は、前記撮像素子の出力信号から前記入力画像の画素ごとに抽出した水平エッジ成分及び垂直エッジ成分に基づき、前記エッジを検出すると良い。
【発明の効果】
【００１７】
本発明によれば、合焦状態の確認支援及び撮影構図の決定支援を撮影者が利用しやすい形で実現可能な撮像装置を提供することが可能である。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施形態に係る撮像装置の構成ブロック図である。
【図２】図１の撮像部の内部構成図である。
【図３】図１のエッジ検出部の内部ブロック図を含む、撮像装置の一部ブロック図である。
【図４】本発明の実施形態に係る二次元画像を示す図である。
【図５】画像における、水平及び垂直方向、並びに、水平、垂直及び斜めエッジを示すための図である。
【図６】エッジ検出部で利用可能な水平及び垂直エッジ抽出フィルタの例を示す図である。
【図７】本発明の実施形態に係る入力画像及び出力画像の例を示す図である。
【図８】水平、垂直及び斜めエッジへの適用色の組み合わせ例（５つの例）を示す図である。
【図９】本発明の実施形態に係る撮像装置の動作フローチャートである。
【発明を実施するための形態】
【００１９】
以下、本発明の実施形態の例を、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。尚、本明細書では、記述の簡略化上、情報、信号、物理量、状態量又は部材等を参照する記号又は符号を記すことによって、該記号又は符号に対応する情報、信号、物理量、状態量又は部材等の名称を省略又は略記することがある。
【００２０】
図１は、本発明の実施形態に係る撮像装置１の構成ブロック図である。撮像装置１は、符号１１〜１５によって参照される各部位を備える。図２は、撮像部１１の内部構成図である。
【００２１】
撮像部１１は、撮像素子３３と、ドライバ３４と、光学系３５を備える。撮像素子３３は、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサなどから成る固体撮像素子である。光学系３５は、焦点距離の調整用のズームレンズ３０及び焦点合わせ用のフォーカスレンズ３１を含む複数のレンズと、撮像素子３３への入射光量を調整するための絞り３２と、を備える。ドライバ３４は、モータ等にて形成され、主処理部１２からの駆動制御信号に基づき、レンズ３０及び３１を移動させると共に絞り３２の開度を調整する。撮像素子３３に対し、光学系３５を介して撮影領域内からの光（被写体からの光）が入射する。撮像素子３３は、入射光に応じた被写体の画像信号を光電変換によって生成して出力する。つまり、撮像部１１は、撮像素子３３を用いて被写体（撮影対象）を撮影することで撮影画像の画像信号を生成及び出力する。
【００２２】
主処理部１２は、ＣＰＵ（Central Processing Unit）やＡＳＩＣ（application specific integrated circuit）を含む集積回路、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等にて形成され、撮像部１１の出力信号に対して各種の信号処理を施すと共に、操作部１５に入力された各種指示及び操作に従いつつ撮像装置１内の各部位の動作を統括的に制御する。主処理部１２に設けられるエッジ検出部４０及び画像加工部５０については後述する。
【００２３】
表示画面１３は、液晶ディスプレイパネル等から成り、任意の映像を表示する。主処理部１２によって、表示画面１３の表示内容の制御が行われる。記録媒体１４は、半導体メモリや磁気ディスク等にて形成された不揮発性の記録媒体であり、主処理部１２の制御の下、任意の信号及びデータを記録する。操作部１５は、機械式押しボタンスイッチやダイヤル等の機械式操作部材、及び／又は、表示画面１３に付随して設けられうるタッチパネルにて形成され、ユーザからの各種指示及び操作を受け付ける。ユーザとは、撮像装置１の操作者（撮影者を含む）である。
【００２４】
以下では、撮像素子３３の出力信号に基づく被写体の撮影画像を入力画像とも呼ぶ。また、表示画面１３に表示されている画像を、表示画像とも呼ぶ。主処理部１２は、任意の画像を表示画面１３に表示させることができる。表示画面１３に表示可能な画像には、入力画像そのもの、入力画像に基づく画像、及び、記録媒体１４に記録された画像が含まれる。
【００２５】
主処理部１２は、ユーザの手動操作に依らず、撮影画像上で被写体が合焦するようにフォーカスレンズ３１の位置を調整するＡＦ制御（オートフォーカス制御）を行うことができる。例えば、撮像素子３３の出力信号に基づきＡＦ制御を実現できる。一方で、主処理部１２は、ユーザによる操作部１５への入力操作に応じてフォーカスレンズ３１の位置を調整するＭＦ調整（マニュアルフォーカス調整）を行うこともできる。
【００２６】
また、主処理部１２は、ＭＦ調整時において特に有益なピーキング表示機能を有する。ピーキング表示機能により、表示画像において、合焦している画像部分（ピントの合っている画像部分）が他の画像部分と視覚的に識別可能となる。ここにおける識別可能とは、ユーザが識別可能であることを意味する。入力画像において、合焦している画像部分には、通常、比較的多くのエッジが現れる。この特性を利用し、エッジ検出部４０及び画像加工部５０を用いてピーキング表示機能を実現する。
【００２７】
エッジ検出部４０は、撮像素子３３の出力信号に基づき入力画像上のエッジを検出する。図３に、画像加工部５０と合わせて、エッジ検出部４０の内部ブロック図を示す。エッジ検出部４０は、符号４１〜４４によって参照される各部位を備える。
【００２８】
入力画像の画像信号中の輝度信号が水平エッジ抽出部４１及び垂直エッジ抽出部４３に入力される。水平エッジ抽出部４１は入力輝度信号の水平エッジ成分を算出し、垂直エッジ抽出部４１は入力輝度信号の垂直エッジ成分を算出する。ここで算出される水平及び垂直エッジ成分は、それらの絶対値であって、常にゼロ又は正の値を持つとする。抽出部４１及び４３は、水平及び垂直エッジ成分の算出を画素ごとに行う。
【００２９】
本明細書で取り扱う任意の画像３００（図４参照）は、特に記述無き限り、二次元画像であって、水平及び垂直方向の夫々に複数の画素がマトリクス状に配置されて構成される。画像３００は、例えば、入力画像、表示画像又は後述の出力画像であると考えて良い。画像３００において、所定の原点位置から見て、ｘ画素分だけ右側に位置し且つｙ画素分だけ下側に位置する画素を記号Ｐ［ｘ，ｙ］にて表す（ｘ及びｙは整数）。画像３００において、左右方向は水平方向と一致し、上下方向は垂直方向と一致する。そして、入力画像の画素Ｐ［ｘ，ｙ］に対して求められた水平エッジ成分及び垂直エッジ成分を、夫々、記号ＥH［ｘ，ｙ］及びＥV［ｘ，ｙ］にて表す。
【００３０】
エッジとは、濃淡変化（輝度信号の変化）が急峻な画像部分を指す。エッジとして、図５に示すような、種類が互いに異なる水平エッジ、垂直エッジ及び斜めエッジが存在する。水平エッジでは、水平方向の位置変化に対する濃淡変化（輝度信号の変化）が急峻となっており、垂直エッジでは、垂直方向の位置変化に対する濃淡変化（輝度信号の変化）が急峻となっている。斜めエッジでは、斜め方向の位置変化に対する濃淡変化（輝度信号の変化）が急峻となっている。斜め方向は、水平方向とも垂直方向とも異なる。但し、斜め方向は、水平方向の成分と垂直方向の成分を持つ方向である。故に、斜めエッジは水平エッジと垂直エッジが混合されたエッジである、と解釈することもできる。
【００３１】
水平エッジ成分は、水平方向の位置変化に対する空間周波数成分（水平方向の空間周波数成分）に応じた値を持ち、水平方向の位置変化に対する濃淡変化（輝度信号の変化）が大きくなるにつれて大きくなる。水平エッジ抽出部４１は、水平エッジ成分の抽出に適した空間フィルタ（ハイパスフィルタ等）を用いて水平エッジ成分を導出できる。例えば、図６（ａ）に示したような水平エッジ抽出フィルタを用いて、各画素の水平エッジ成分を求めることができる。図６（ａ）の水平エッジ抽出フィルタを用いた場合、 値“｜−Ｙ1＋２・ＹO−Ｙ2｜”が、注目画素の水平エッジ成分として求められる。ここで、ＹOは、注目画素の輝度信号値であり、Ｙ1及びＹ2は、注目画素に対して水平方向に隣接する２つの画素の輝度信号値である。
【００３２】
垂直エッジ成分は、垂直方向の位置変化に対する空間周波数成分（垂直方向の空間周波数成分）に応じた値を持ち、垂直方向の位置変化に対する濃淡変化（輝度信号の変化）が大きくなるにつれて大きくなる。垂直エッジ抽出部４３は、垂直エッジ成分の抽出に適した空間フィルタ（ハイパスフィルタ等）を用いて垂直エッジ成分を導出できる。例えば、図６（ｂ）に示したような垂直エッジ抽出フィルタを用いて、各画素の垂直エッジ成分を求めることができる。図６（ｂ）の垂直エッジ抽出フィルタを用いた場合、 値“｜−Ｙ3＋２・ＹO−Ｙ4｜”が、注目画素の垂直エッジ成分として求められる。ここで、ＹOは、注目画素の輝度信号値であり、Ｙ3及びＹ3は、注目画素に対して垂直方向に隣接する２つの画素の輝度信号値である。
【００３３】
比較器４２は、画素ごとに、水平エッジ成分ＥH［ｘ，ｙ］を所定の閾値ＴＨHと比較し、不等式“ＥH［ｘ，ｙ］≧ＴＨH”の成立時には“１”の水平判定信号ＳHを出力する一方で、不等式“ＥH［ｘ，ｙ］≧ＴＨH”の不成立時には“０”の水平判定信号ＳHを出力する。比較器４４は、画素ごとに、垂直エッジ成分ＥV［ｘ，ｙ］を所定の閾値ＴＨVと比較し、不等式“ＥV［ｘ，ｙ］≧ＴＨV”の成立時には“１”の垂直判定信号ＳVを出力する一方で、不等式“ＥV［ｘ，ｙ］≧ＴＨV”の不成立時には“０”の垂直判定信号ＳVを出力する。閾値ＴＨHと閾値ＴＨVの一致、不一致は問わない。上述の各不等式において、不等号“≧”を不等号“＞”に置き換えても良い。
【００３４】
画素Ｐ［ｘ，ｙ］について“（ＳH，ＳV）＝（１，０）”であるとき、画素Ｐ［ｘ，ｙ］は水平エッジ構成画素に分類される。
画素Ｐ［ｘ，ｙ］について“（ＳH，ＳV）＝（０，１）”であるとき、画素Ｐ［ｘ，ｙ］は垂直エッジ構成画素に分類される。
画素Ｐ［ｘ，ｙ］について“（ＳH，ＳV）＝（１，１）”であるとき、画素Ｐ［ｘ，ｙ］は斜めエッジ構成画素に分類される。
画素Ｐ［ｘ，ｙ］について“（ＳH，ＳV）＝（０，０）”であるとき、画素Ｐ［ｘ，ｙ］は非エッジ画素に分類される。
これらの分類は、エッジ検出部４０、画像加工部５０又は主処理部１２において行われる。
【００３５】
水平エッジ構成画素、垂直エッジ構成画素、斜めエッジ構成画素は、夫々、入力画像上で、水平エッジ、垂直エッジ、斜めエッジを構成する画素である。非エッジ画素は、水平、垂直及び斜めエッジの何れをも構成しない画素（即ち、水平、垂直及び斜めエッジの何れにも属さない画素）である。エッジ検出部４０は、１以上の水平エッジ構成画素から成るエッジを水平エッジとして検出し、１以上の垂直エッジ構成画素から成るエッジを垂直エッジとして検出し、１以上の斜めエッジ構成画素から成るエッジを斜めエッジとして検出する。
【００３６】
画像加工部５０は、入力画像を加工することで出力画像を生成する。この加工において、入力画像の画像信号の内、水平エッジの画像部分（即ち、１以上の水平エッジ構成画素から成る画像部分）に対して所定の加工処理ＨＨが施され、垂直エッジの画像部分（即ち、１以上の垂直エッジ構成画素から成る画像部分）に対して所定の加工処理ＶＶが施され、斜めエッジの画像部分（即ち、１以上の斜めエッジ構成画素から成る画像部分）に対して所定の加工処理ＤＤが施される。従って、入力画像に水平、垂直及び斜めエッジが含まれる場合、入力画像に、加工処理ＨＨ、ＶＶ及びＤＤを施して得られる画像が画像加工部５０の出力画像となる。非エッジ画素の画像信号に対しては何ら加工処理を施さなくて良い。即ち、出力画像における非エッジ画素の画像信号は、入力画像における非エッジ画素の画像信号と同じであって良い。
【００３７】
ピーキング表示機能において、主処理部１２は、画像加工部５０の出力画像を表示画像として表示画面１３に表示する。加工処理ＨＨ、ＶＶ及びＤＤが施される画素から成る画像部分が、ピーキング表示機能にて識別表示されるべき“合焦している画像部分”に相当する。
【００３８】
基本的には、加工処理ＨＨ、ＶＶ及びＤＤは互いに異なる。但し、加工処理ＨＨ、ＶＶ及びＤＤの内、任意の２つの加工処理が互いに同じであって、残りの１つの加工処理が他の２つの加工処理と異なっていても良い。また、上述の記載とは異なるが、加工処理ＨＨ、ＶＶ及びＤＤの内、１つの加工処理は実行されなくても良い。この場合、他の２つの加工処理は互いに異なる。
【００３９】
画像加工部５０の加工内容の具体例や撮像装置１の詳細動作例などを、以下の第１〜第４実施例の中で説明する。尚、以下では、加工処理の対象となる画素を加工対象画素と呼ぶ。加工処理ＨＨにおける加工対象画像は水平エッジ構成画素であり、加工処理ＶＶにおける加工対象画像は垂直エッジ構成画素であり、加工処理ＤＤにおける加工対象画像は斜めエッジ構成画素である。
【００４０】
＜＜第１実施例＞＞
第１実施例を説明する。第１実施例では、入力画像に、水平、垂直及び斜め構成画素が１以上ずつ含まれていることを想定する。
【００４１】
第１実施例に係る画像加工部５０は、加工処理ＨＨにおいては加工対象画像に対し所定の色信号ＣＳHを適用し、加工処理ＶＶにおいては加工対象画像に対し所定の色信号ＣＳVを適用し、加工処理ＤＤにおいては加工対象画像に対し所定の色信号ＣＳDを適用する。
【００４２】
色信号ＣＳHの適用とは、加工対象画素の色信号を色信号ＣＳHに置換する色置換処理、又は、加工対象画素の色信号に色信号ＣＳHを混合する色混合処理を意味する。色信号ＣＳV、ＣＳDの適用についても同様である。
【００４３】
色置換処理を用いる場合、画像加工部５０において、入力画像の水平エッジの画像部分の色信号、垂直エッジの画像部分の色信号、斜めエッジの画像部分の色信号は、夫々、色信号ＣＳH、ＣＳV、ＣＳDに置換され、その置換後の入力画像が出力画像となる。即ち、色置換処理では、入力画像における各水平エッジ構成画素、各垂直エッジ構成画素、各斜めエッジ構成画素の色信号が、夫々、色信号ＣＳH、ＣＳV、ＣＳDに置換される。
【００４４】
色混合処理を用いる場合、画像加工部５０において、入力画像の水平エッジの画像部分の色信号、垂直エッジの画像部分の色信号、斜めエッジの画像部分の色信号に、夫々、色信号ＣＳH、ＣＳV、ＣＳDが所定の比率で混合され、その混合後の入力画像が出力画像となる。即ち、色混合処理では、入力画像における各水平エッジ構成画素、各垂直エッジ構成画素、各斜めエッジ構成画素の色信号に、夫々、色信号ＣＳH、ＣＳV、ＣＳDが所定の比率にて混合される。
【００４５】
或る画素又は画像部分の色信号とは、当該画素又は当該画像部分の色を示す画像信号であって、例えば、ＹＵＶ信号方式における色差信号、又は、ＲＧＢ信号方式におけるＲ、Ｇ及びＢ信号に相当する。
【００４６】
第１実施例において、色信号ＣＳH、ＣＳV及びＣＳDは、互いに異なる色信号である（故に、加工処理ＨＨ、ＶＶ及びＤＤは互いに異なる）。従って、色信号ＣＳHの適用後における水平エッジ構成画素の色、色信号ＣＳVの適用後における垂直エッジ構成画素の色、及び、色信号ＣＳDの適用後における斜めエッジ構成画素の色は、互いに異なる（但し、色混合処理を用いた場合、それらが偶然一致する可能性も少ないながらある）。
【００４７】
色信号ＣＳH、ＣＳV及びＣＳDによって示される３つの色は、互いに異なる限り、任意の色であって良い。但し、任意の色空間において、色信号ＣＳDによって示される色は、色信号ＣＳHによって示される色と色信号ＣＳVによって示される色との間の色（例えば、それらのちょうど中間色）であると良い。色信号ＣＳDに対応する斜めエッジは、水平エッジと垂直エッジの中間的なエッジであるため、そのような色の選択は、ユーザにおける直感的なエッジ方向の理解に資すると考えられるからである。典型的には例えば、色信号ＣＳDの値は、色信号ＣＳHの値と色信号ＣＳVの値の平均であって良い。
【００４８】
ここでは、色信号ＣＳH、ＣＳV、ＣＳDによって示される色が、夫々、水色、黄色、緑色であるとする（水色は青色でも良い）。この場合、図７に示す如く、黒色の水平、垂直及び斜めエッジを含んだ入力画像３１０が得られたとすると、入力画像３１０に基づく出力画像（表示画像）３２０上では、水平、垂直及び斜めエッジが、夫々、水色、黄色、緑色にて表示されることになる（色置換処理の使用を想定）。
【００４９】
第１実施例によれば、ユーザは、加工処理により色付けされた画像部分を見るだけで、合焦部分の位置及び合焦の程度と共に、撮影構図の傾き状態も容易に認識できるようになる。傾き状態の認識により、水準器を用いたかのような効果が得られ、構図決定が支援される。
【００５０】
撮像装置１にとっての被写界を画像として捉えた場合、その被写界には、通常、鉛直線及び水平線に平行なエッジが多く含まれている。例えば、建造物、家具、直立姿勢の人物、地平線などを画像として捉えた場合、それらには鉛直線及び／又は水平線に平行なエッジが多く含まれている。一方において、ユーザは、それらを被写体に含めた撮影を行うことが多い。故に例えば、図７に示す如く、地平線に相当するエッジを黄色で表示したり、建造物の高さ方向の辺に相当するエッジを水色で表示したりすることで、ユーザは、撮影構図の傾き状態も視覚的に認識できるようになる。この際、斜めエッジについても色付けをすることで、合焦している画像部分を他の画像部分と視覚的に識別可能にするというピーキング表示の本来の機能も十分に達成される。
【００５１】
＜＜第２実施例＞＞
第２実施例を説明する。第２実施例では、図８を参照しつつ、第１実施例に対する変形技術を説明する。
【００５２】
第１実施例において、色信号ＣＳH及びＣＳVと色信号ＣＳDとを互いに異ならせつつ、色信号ＣＳH及びＣＳVを互いに同じにしても良い（これを、便宜上、変形技術Ｊ1と呼ぶ）。即ち、画像加工部５０は、水平エッジ及び垂直エッジの画像部分に対し共通の色信号（ＣＳH又はＣＳV）を適用し、斜めエッジの画像部分に対し、その共通の色信号と異なる色信号ＣＳDを適用しても良い。色信号の適用の意義は、第１実施例で述べた通りである（以下の変形技術Ｊ2〜Ｊ4についても同様）。変形技術Ｊ1を用いると、例えば、図７の出力画像３２０において、水平エッジ及び垂直エッジは共に水色となり、斜めエッジは黄色となる（図８も参照）。変形技術Ｊ1によっても、第１実施例と同様の効果が得られる。但し、水平エッジと垂直エッジを別の色で表示した方が、望ましい構図の決定がより促進されるものと思われる。
【００５３】
第１実施例において、加工処理ＶＶを不実行にすると共に、色信号ＣＳHと色信号ＣＳDを互いに異ならせても良い（これを、便宜上、変形技術Ｊ2と呼ぶ）。即ち、画像加工部５０は、水平エッジ及び斜めエッジの画像部分に対しては互いに異なる色信号を適用し、垂直エッジの画像部分に対しては、非エッジ画素の画像部分と同様、何ら加工処理を施さないようにしても良い。変形技術Ｊ2を用いると、例えば、図７の出力画像３２０において、水平エッジは水色となり、斜めエッジは黄色となり、垂直エッジの色は入力画像３１０のそれ（即ち黒色）と同じとなる。変形技術Ｊ2によっても、第１実施例と同様の効果が得られるが、垂直エッジの色付けが欠落する分、得られる効果は第１実施例のそれよりも幾分劣る。
【００５４】
第１実施例において、加工処理ＨＨを不実行にすると共に、色信号ＣＳVと色信号ＣＳDを互いに異ならせても良い（これを、便宜上、変形技術Ｊ3と呼ぶ）。即ち、画像加工部５０は、垂直エッジ及び斜めエッジの画像部分に対しては互いに異なる色信号を適用し、水平エッジの画像部分に対しては、非エッジ画素の画像部分と同様、何ら加工処理を施さないようにしても良い。変形技術Ｊ3を用いると、例えば、図７の出力画像３２０において、垂直エッジは水色となり、斜めエッジは黄色となり、水平エッジの色は入力画像３１０のそれ（即ち黒色）と同じとなる。変形技術Ｊ3によっても、第１実施例と同様の効果が得られるが、水平エッジの色付けが欠落する分、得られる効果は第１実施例のそれよりも幾分劣る。
【００５５】
第１実施例において、加工処理ＤＤを不実行にすると共に、色信号ＣＳHと色信号ＣＳVを互いに異ならせても良い（これを、便宜上、変形技術Ｊ4と呼ぶ）。即ち、画像加工部５０は、水平エッジ及び垂直エッジの画像部分に対しては互いに異なる色信号を適用し、斜めエッジの画像部分に対しては、非エッジ画素の画像部分と同様、何ら加工処理を施さないようにしても良い。変形技術Ｊ4を用いると、例えば、図７の出力画像３２０において、水平エッジは水色となり、垂直エッジは黄色となり、斜めエッジの色は入力画像３１０のそれ（即ち黒色）と同じとなる。変形技術Ｊ4によっても、第１実施例と同様の効果が得られるが、斜めエッジの色付けが欠落する分、得られる効果は第１実施例のそれよりも幾分劣る。特に、斜めエッジを多く含むような被写体を撮影する場合においては、合焦している画像部分を他の画像部分と視覚的に識別可能にするというピーキング表示の本来の機能が、第１実施例や変形技術Ｊ1〜Ｊ3よりも実現しにくくなる。故に、第１実施例又は変形技術Ｊ1〜Ｊ3を採用した方が好ましい。
【００５６】
上述の説明から明らかであるが、変形技術Ｊ1〜Ｊ4の何れにおいても、画像加工部５０は、第１方向における第１エッジと第２方向における第２エッジとに対し、互いに異なる色信号（第１色信号、第２色信号）を適用する。変形技術Ｊ2〜Ｊ4において、第１及び第２方向は、入力画像の水平方向、垂直方向及び斜め方向の内の何れか２つである（図８参照）。変形技術Ｊ1において、第１方向は入力画像の水平方向及び垂直方向を含み、第２方向は入力画像の斜め方向である（図８参照）。
【００５７】
＜＜第３実施例＞＞
第３実施例を説明する。加工処理ＨＨ、ＶＶ及びＤＤは、第１及び第２実施例で述べたもの以外の加工処理でも良い。
【００５８】
例えば、加工処理ＨＨ、ＶＶ、ＤＤは、夫々、水平、垂直及び斜めエッジを強調するエッジ強調処理でも良い。エッジ強調処理によって、強調対象となるエッジを含んだ画像部分の輪郭も強調される。エッジ強調処理は、ラプラシアンフィルタ等の鮮鋭化フィルタを用いて実現される。エッジ強調処理の特性を示すパラメータにエッジ強調度がある。エッジ強調度が異なれば、エッジ強調処理に用いられる鮮鋭化フィルタのフィルタ係数が異なり、エッジの強調度合も異なる。エッジ強調度が互いに異なる複数のエッジ強調処理は、互いに異なる加工処理である。
【００５９】
加工処理ＨＨ、ＶＶ及びＤＤがエッジ強調処理である場合、エッジ強調度を加工処理ＨＨ、ＶＶ及びＤＤ間で互いに異ならせると良い。これによっても、第１実施例と同様の効果が得られる。但し、エッジ強調度の違いで水平、垂直及び斜めエッジを表示画像上で見分けるよりも、色の違いでそれらを見分ける方が容易い。故に、第１又は第２実施例の方がより有益と考えられる。
【００６０】
加工処理ＨＨ、ＶＶ及びＤＤがエッジ強調処理である場合、変形技術Ｊ1に類似して（図８参照）、加工処理ＨＨ及びＶＶに共通のエッジ強調度を用い、加工処理ＤＤに該共通のエッジ強調度と異なるエッジ強調度を用いても良い。或いは、変形技術Ｊ2〜Ｊ4に類似して（図８参照）、加工処理ＨＨ、ＶＶ及びＤＤの内、何れか任意の１つの加工処理を不実行とし、残りの２つの加工処理を、互いに異なるエッジ強調度を用いたエッジ強調処理にしても良い。
【００６１】
また例えば、加工処理ＨＨ、ＶＶ、ＤＤは、夫々、水平、垂直及び斜めエッジの画像部分の輝度を変更する輝度変更処理でも良い。ここにおける輝度の変更は、エッジを視覚的に目立たせるために行われるため、輝度の増大であるとする（但し、輝度の減少にすることも可能）。輝度変更処理では、輝度変更の対象となる画像部分の輝度が増大するように、輝度変更の対象となる画像部分の輝度信号に所定の輝度変更係数を乗じる。輝度変更係数が異なれば、輝度の増大の程度も異なる。輝度変更係数が互いに異なる複数の輝度変更処理は、互いに異なる加工処理である。
【００６２】
加工処理ＨＨ、ＶＶ及びＤＤが輝度変更処理である場合、輝度変更係数を加工処理ＨＨ、ＶＶ及びＤＤ間で互いに異ならせると良い。これによっても、第１実施例と同様の効果が得られる。但し、輝度の違いで水平、垂直及び斜めエッジを表示画像上で見分けるよりも、色の違いでそれらを見分ける方が容易い。故に、第１又は第２実施例の方がより有益と考えられる。
【００６３】
加工処理ＨＨ、ＶＶ及びＤＤが輝度変更処理である場合、変形技術Ｊ1に類似して（図８参照）、加工処理ＨＨ及びＶＶに共通の輝度変更係数を用い、加工処理ＤＤに該共通の輝度変更係数と異なる輝度変更係数を用いても良い。或いは、変形技術Ｊ2〜Ｊ4に類似して（図８参照）、加工処理ＨＨ、ＶＶ及びＤＤの内、何れか任意の１つの加工処理を不実行とし、残りの２つの加工処理を、互いに異なる輝度変更係数を用いた輝度変更処理にしても良い。
【００６４】
また例えば、加工処理ＨＨ、ＶＶ、ＤＤは、夫々、水平、垂直及び斜めエッジの画像部分の彩度を変更する彩度変更処理でも良い。ここにおける彩度の変更は、エッジを視覚的に目立たせるために行われるため、彩度の増大であるとする（但し、彩度の減少にすることも可能）。彩度変更処理では、彩度変更の対象となる画像部分の彩度が増大するように、輝度変更の対象となる画像部分の色信号に所定の彩度変更係数を乗じる。彩度変更係数が乗じられる色信号は、画像の彩度を決定する色信号であり、例えば、ＹＵＶ信号における色差信号（Ｕ信号及びＶ信号）である。彩度変更係数が異なれば、彩度の増大の程度も異なる。彩度変更係数が互いに異なる複数の彩度変更処理は、互いに異なる加工処理である。
【００６５】
加工処理ＨＨ、ＶＶ及びＤＤが彩度変更処理である場合、彩度変更係数を加工処理ＨＨ、ＶＶ及びＤＤ間で互いに異ならせると良い。これによっても、第１実施例と同様の効果が得られる。但し、彩度の違いで水平、垂直及び斜めエッジを表示画像上で見分けるよりも、色の違いでそれらを見分ける方が容易い。故に、第１又は第２実施例の方がより有益と考えられる。
【００６６】
加工処理ＨＨ、ＶＶ及びＤＤが彩度変更処理である場合、変形技術Ｊ1に類似して（図８参照）、加工処理ＨＨ及びＶＶに共通の彩度変更係数を用い、加工処理ＤＤに該共通の彩度変更係数と異なる彩度変更係数を用いても良い。或いは、変形技術Ｊ2〜Ｊ4に類似して（図８参照）、加工処理ＨＨ、ＶＶ及びＤＤの内、何れか任意の１つの加工処理を不実行とし、残りの２つの加工処理を、互いに異なる彩度変更係数を用いた彩度変更処理にしても良い。
【００６７】
更に例えば、加工処理ＨＨ、ＶＶ及びＤＤは、互いに異なる種類の加工処理であっても良い。或いは例えば、加工処理ＨＨ、ＶＶ及びＤＤの内、任意の２つの加工処理は互いに異なる種類の加工処理であっても良い。上述の色置換処理、色混合処理、エッジ強調処理、輝度変更処理及び彩度変更処理は、互いに異なる種類の加工処理である。
【００６８】
＜＜第４実施例＞＞
第４実施例を説明する。図９は、第４実施例に係る撮像装置１の動作フローチャートである。図９の動作フローチャートに従う撮像装置１の動作手順は、第１〜第３実施例の何れに対しても適用できる。
【００６９】
まず、ステップＳ１１において、入力画像の画像信号が撮像部１１により取得される。続くステップＳ１２において、エッジ検出部４０は、入力画像の画像信号に基づき、入力画像上における水平、垂直及び斜めエッジを分類して検出する。そして、この検出結果に基づき、ステップＳ１３において、画像加工部５０は、入力画像に対して加工処理を施すことで出力画像を生成する。上述したように、加工処理は、加工処理ＨＨ、ＶＶ及びＤＤの内の全て又は２つを含む。生成された出力画像は、ステップＳ１４において表示画面１３に表示される。この後、ステップＳ１１に戻る。撮像部１１による入力画像の取得は、所定のフレームレートで周期的に実行される。従って、ステップＳ１１〜Ｓ１４から成る一連の処理は、当該フレームレートを周期として又は当該フレームレートの倍数を周期として繰り返し実行される。
【００７０】
＜＜変形等＞＞
本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。以上の実施形態は、あくまでも、本発明の実施形態の例であって、本発明ないし各構成要件の用語の意義は、以上の実施形態に記載されたものに制限されるものではない。上述の説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態に適用可能な注釈事項として、以下に、注釈１〜注釈３を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。
【００７１】
［注釈１］
画像加工部５０を用いた出力画像の表示は、ＭＦ調整時に特に有益に機能する。しかし、それ以外の場合に（例えば、ＡＦ制御の実行時に）出力画像の表示を行っても良い。
【００７２】
［注釈２］
撮像装置１を内蔵した任意の電子機器（携帯電話機、携帯情報端末、パーソナルコンピュータ、電子書籍リーダ、電子辞書、ゲーム機器又はナビゲーション装置等）を形成しても良い。尚、撮像装置１も電子機器の一種である。
【００７３】
［注釈３］
撮像装置１を、集積回路等のハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。撮像装置１にて実現される機能の全部又は一部である任意の特定の機能をプログラムとして記述して、該プログラムを撮像装置１に搭載可能なフラッシュメモリに保存しておいても良い。そして、該プログラムをプログラム実行装置（例えば、撮像装置１に搭載可能なマイクロコンピュータ）上で実行することによって、その特定の機能を実現するようにしてもよい。上記プログラムは任意の記録媒体に記憶及び固定されうる。上記プログラムを記憶及び固定する記録媒体は撮像装置１と異なる機器（サーバ機器等）に搭載又は接続されても良い。
【符号の説明】
【００７４】
１  撮像装置
１１  撮像部
１２  主処理部
１３  表示画面
３３  撮像素子
４０  エッジ検出部
５０  画像加工部
【図１】
2015177277.tif 000003
【図２】
2015177277.tif 000004
【図３】
2015177277.tif 000005
【図４】
2015177277.tif 000006
【図５】
2015177277.tif 000007
【図６】
2015177277.tif 000008
【図７】
2015177277.tif 000009
【図８】
2015177277.tif 000010
【図９】
2015177277.tif 000011