(57)【要約】【課題】ぼけ感が軽減された所望の画像を得ることができる技術を提供する。【解決手段】画像処理装置は、広角レンズを介して得られた被写体の画像データを処理する。画像処理装置は、歪み補正部と、視点変換部と、シャープネス処理部とを有する。歪み補正部は、画像データに対し、広角レンズにより生じた歪みを所定の補正条件で補正する。視点変換部は、補正が施された画像データに対し、所定の変換条件で視点変換を行う。シャープネス処理部は、視点変換が施された画像データに対し、当該画像データに基づく画像におけるぼけの度合いに応じた所定の処理条件でシャープネス処理を行う。【選択図】図２
2013179435.tif 000002
【特許請求の範囲】
【請求項１】
広角レンズを介して得られた被写体の画像データを処理する画像処理装置において、
前記画像データに対し、前記広角レンズにより生じた歪みを所定の補正条件で補正する歪み補正部と、
前記補正が施された画像データに対し、所定の変換条件で視点変換を行う視点変換部と、
前記視点変換が施された前記画像データに対し、当該画像データに基づく画像におけるぼけの度合いに応じた所定の処理条件でシャープネス処理を行うシャープネス処理部と、
を有することを特徴とする画像処理装置。
【請求項２】
前記シャープネス処理部は、前記ぼけの度合い及び前記画像データの明るさに基づく処理条件で前記シャープネス処理を行うことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記シャープネス処理がなされた画像データに基づく画像を表示させる表示部を有することを特徴とする請求項１又は２記載の画像処理装置。
【請求項４】
広角レンズと、
前記広角レンズを介して前記被写体を撮像するための撮像手段と、
請求項１から３のいずれかに記載の画像処理装置と、
を有することを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、画像処理装置及び撮像装置に関する。
【背景技術】
【０００２】
撮像装置には、その目的により監視カメラや車載用カメラ等、様々な種類が存在する。監視カメラや車載用カメラ等の撮像装置は、一つのカメラで広範囲の画像データを取得することが望まれる。そこで、このような撮像装置のレンズとしては、画角の広い広角レンズが用いられる。
【０００３】
しかし、広角レンズを用いた場合には、歪曲収差の問題が生じる。すなわち、広角レンズを用いて得られる画像データに基づく画像には、その中心部が膨らむような、所謂樽型の歪みが生じる。
【０００４】
この歪曲収差を解消するための処理として、歪み補正処理がある。歪み補正は、広角レンズのレンズ特性に対応したパラメータに基づいて、画像データの座標変換及び補間処理を行う。
【０００５】
一方、画像データに対して視点変換処理を行う場合もある。視点変換は、撮像装置による実際の撮像位置及び撮像方向とは異なる撮像位置及び撮像方向（仮想視点）における画像データを作成する処理である。視点変換は、任意の仮想視点に基づいて、画像領域の切り出し、切り出した画像データの座標変換及び補間処理を行う。
【０００６】
ここで、特許文献１における車両周囲俯瞰画像表示装置は、車両周辺の俯瞰画像を得るためにレンズ歪み補正手段［８１］及び視点変換手段［８２］を有している。レンズ歪み補正手段［８１］は、広角レンズにより生じる歪をレンズ歪み補正用の変換テーブル（Ｌｏｏｋ＿Ｕｐ＿Ｔａｂｌｅ、以下、「ＬＵＴ」という場合がある）を参照して補正する。視点変換手段［８２］は、視点変換用のＬＵＴを参照して、レンズ歪み補正処理後の画像を任意方向の画像（ここでは、車両上方向からの視点の画像）に変換する。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１０−２００２４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかし、歪み補正や視点変換を行うと、所望の画像を得ることが困難な場合がある。すなわち、歪み補正や視点変換では、補間処理を施して画像データを作成する。従って、この画像データに基づく画像は、ぼけの度合い（以下、「ぼけ感」という場合がある）が強くなる可能性が高い。特に、視点変換処理において、元の画像（視点変換処理前の画像）の端部を切り出す場合、元の画像の中央部を切り出す場合と比較して引き伸ばされた画像となる。従って、端部を切り出した画像は、ぼけ感がより強くなる。
【０００９】
この発明は上記問題点を解決するものであり、ぼけ感が軽減された所望の画像（画像データ）を得ることができる技術を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記課題を解決するために、請求項１記載の画像処理装置は、広角レンズを介して得られた被写体の画像データを処理する。画像処理装置は、歪み補正部と、視点変換部と、シャープネス処理部とを有する。歪み補正部は、画像データに対し、広角レンズにより生じた歪みを所定の補正条件で補正する。視点変換部は、補正が施された画像データに対し、所定の変換条件で視点変換を行う。シャープネス処理部は、視点変換が施された画像データに対し、当該画像データに基づく画像におけるぼけの度合いに応じた所定の処理条件でシャープネス処理を行う。
また、上記課題を解決するために、請求項２記載の画像処理装置は、請求項１記載の画像処理装置であって、シャープネス処理部は、ぼけの度合い及び画像データの明るさに基づく処理条件でシャープネス処理を行う。
また、上記課題を解決するために、請求項３記載の画像処理装置は、請求項１又は２記載の画像処理装置であって、シャープネス処理がなされた画像データに基づく画像を表示させる表示部を有する。
また、上記課題を解決するために、請求項４記載の撮像装置は、広角レンズと、撮像手段と、請求項１から３のいずれかに記載の画像処理装置とを有する。撮像手段は、広角レンズを介して被写体を撮像するために用いられる。
【発明の効果】
【００１１】
このように、本発明における画像処理装置（撮像装置）によれば、広角レンズを介して得られた被写体の画像データに対し、歪み補正、視点変換及びシャープネス処理を施すことにより、ぼけ感が軽減された所望の画像（画像データ）を得ることができる。
【図面の簡単な説明】
【００１２】
【図１】本実施形態に係る撮像装置を示すブロック図である。
【図２】本実施形態に係る画像処理部を示すブロック図である。
【図３Ａ】本実施形態に係る表示部に表示される画像を示す図である。
【図３Ｂ】本実施形態に係る表示部に表示される画像を示す図である。
【図３Ｃ】本実施形態に係る表示部に表示される画像を示す図である。
【図３Ｄ】本実施形態に係る表示部に表示される画像を示す図である。
【図３Ｅ】本実施形態に係る表示部に表示される画像を示す図である。
【図３Ｆ】本実施形態に係る表示部に表示される画像を示す図である。
【図４】本実施形態に係るテーブルを示す図である。
【図５】本実施形態に係る撮像装置の動作を示すフローチャートである。
【図６】変形例１に係るテーブルを示す図である。
【発明を実施するための形態】
【００１３】
＜実施形態＞
図１から図５を用いて実施形態に係る撮像装置１について説明する。撮像装置１は、車載カメラや監視カメラ等として用いることができる。なお、「画像」と「画像データ（画像信号）」は一対一に対応するので、本実施形態においては、これらを同一視する場合がある。
【００１４】
［撮像装置の構成］
図１に示すように、撮像装置１は、広角レンズ２と、撮像手段３と、アンプ４と、Ａ／Ｄ変換部５と、画像処理部６と、制御部７とを含んで構成されている。なお、撮像手段３、アンプ４、及びＡ／Ｄ変換部５は、ワンチップで構成されていてもよい。
【００１５】
広角レンズ２は、広範囲に亘る被写体を取り込むための画角が広いレンズである。広角レンズ２は、被写体の光像を取込み、撮像手段３に導く。広角レンズ２には、透過光量を調整するための絞りやシャッタ（いずれも図示なし）を設けることも可能である。
【００１６】
撮像手段３は、たとえば、複数の素子で構成されている。複数の素子は、広角レンズ２において結像された光像を光電変換して、光量に応じたレベルを有する色成分（たとえば、赤（Ｒ）、緑（Ｇ）、青（Ｂ））の画像信号を生成する。生成された画像信号は、アンプ４へ出力される。撮像手段３としては、ＣＯＭＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）イメージセンサ等を使用することができる。
【００１７】
アンプ４は、撮像手段３から出力された画像信号を増幅等する。アンプ４は、たとえば、画像信号の増幅を行うＡＧＣ（Ａｕｔｏ  Ｇａｉｎ  Ｃｏｎｔｒｏｌ）回路、画像信号に含まれるノイズ成分の除去を行うＣＤＳ（Ｃｏｒｒｅｌｌａｔｅｄ  Ｄｏｕｂｌｅ  Ｓａｍｐｌｉｎｇ）回路等を含む。増幅等された画像信号は、Ａ／Ｄ変換部５に出力される。
【００１８】
Ａ／Ｄ変換部５は、アンプ４により増幅された画像信号をデジタルの画像信号に変換する。Ａ／Ｄ変換された画像信号は、画像処理部６に出力される。
【００１９】
画像処理部６は、入力された画像信号に対して各種処理を実行する。画像処理部６の詳細については後述する。本実施形態において、画像処理部６が、「画像処理装置」の一例である。制御部７は、撮像装置１全体の動作制御を行う。
【００２０】
また、図１に示すように、本実施形態における撮像装置１には、表示部１０及び入力部２０が接続されている。本実施形態においては、表示部１０を含めて「画像処理装置」を構成してもよい。
【００２１】
表示部１０は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）等の任意の表示デバイスによって構成される。たとえば、撮像装置１が車載カメラの場合、車内に設置されるカーナビゲーション装置の表示装置を表示部１０として用いることが可能である。表示部１０には、画像処理部６で処理された画像データに基づく画像が表示される。
【００２２】
入力部２０は、撮像装置１に対する各種操作を行う入力デバイス（ジョイスティック、タッチパネル等）である。入力部２０に用いられる集積回路としては、シリアル通信を行うためのＵＡＲＴ（Ｕｎｉｖｅｒｓａｌ  Ａｓｙｎｃｈｒｏｎｏｕｓ  Ｒｅｃｅｉｖｅｒ  Ｔｒａｎｓｍｉｔｔｅｒ）やＩ２Ｃ（Ｉｎｔｅｒ−Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）が用いられる。
【００２３】
［画像処理部の構成］
図２に示すように、画像処理部６は、前処理部６１と、歪み補正部６２と、視点変換部６３と、シャープネス処理部６４と、出力部６５と、記憶部６６とを含んで構成されている。なお、図３Ａから図３Ｆは、表示部１０に表示された被写体の画像を示す。また、図３Ａから図３Ｆでは、横方向をｘ軸とし、縦方向をｙ軸とする。
【００２４】
前処理部６１は、Ａ／Ｄ変換された画像信号（画像データ）に対して所定の前処理を行う。前処理としては、たとえば、色信号を作るためのデモザイク処理、コントラスト調整のためのガンマ処理等を行う。
【００２５】
歪み補正部６２は、前処理が施された画像データに対し、広角レンズ２により生じた歪みを所定の補正条件で補正する（歪み補正）。歪み補正は、被写体の画像の歪みを補正し、歪みのない画像を得るための処理である。画像処理部６に入力される画像信号（画像データ）は、広角レンズ２を介して撮像手段３により撮像された画像信号（画像データ）をデジタル信号に変換したものである。従って、その画像データをそのまま表示部１０に表示した場合には、図３Ａに示すような樽型に歪曲した画像になる。そこで、歪み補正部６２は、広角レンズ２のレンズ特性に基づき、画像データの座標変換及び補間処理を行う。
【００２６】
歪み補正の具体例について述べる。広角レンズ２を介して得られる画像がどのように歪曲するかについては、広角レンズ２の特性により予め決まっている。従って、歪みの無い画像データを得るための補正条件は、広角レンズ２の特性に基づく関係式で示すことができる。関係式は、たとえば記憶部６６に記憶されている。
【００２７】
歪み補正部６２は、画像データをレンズ歪み補正用の変換テーブル（ＬＵＴ）に基づいて座標変換する。たとえば、図３Ａにおける点Ａの座標（ｘ１、ｙ１）をＬＵＴを参照して変換し、座標（Ｘ１、Ｙ１）を得る。同様に、歪み補正処理部６２は、点Ｂの座標（ｘ２、ｙ２）及び点Ｃの座標（ｘ３、ｙ３）をＬＵＴを参照して変換し、それぞれ座標（Ｘ２、Ｙ２）及び座標（Ｘ３、Ｙ３）を得る。更に、歪み補正処理部６２は、座標変換された画像データに対して補間処理を行う。その結果、歪みが補正された画像（画像データ）を得ることができる（図３Ｂ参照）。
【００２８】
ここで、歪み補正により、画像の歪みは補正されるが、補間処理に伴うぼけが生じる。歪み補正後の画像（図３Ｂ参照）では、歪み補正前の画像（図３Ａ参照）に比べ、ぼけが生じている。なお、図３Ａから図３Ｆにおいては、ぼけの度合い（ぼけ感）を線分の太さ（線分が太い＝ぼけ感が強い）で表している。また、実際の画像は、線分に囲まれた領域にもぼけが生じている。
【００２９】
視点変換部６３は、歪み補正部６２で補正が施された画像データに対し、所定の変換条件で視点変換を行う。視点変換は、撮像装置１によりある視点（以下、「実視点」という場合がある）で取得された画像を任意の仮想視点からみた画像に変換する処理である。視点変換は、変換条件に基づいて画像データを再構成することで新たな画像データ（視点変換がなされた画像データ）を取得する。変換条件は、画像データを所定の角度で変換するための条件である。変換条件は、たとえば、撮像装置１を基準とした視野角度、パン角度、チルト角度等である。
【００３０】
視点変換の具体例について述べる。まず、視点変換部６３は、入力部２０からのコマンドに基づいて表示モードを決定する。表示モードは、予め複数のパターンが設定されており、記憶部６６等に記憶されている。本実施形態において、各表示モードには、視野角度、パン角度、チルト角度、仮想パン角度及び仮想チルト角度が変換条件として設定されている。図４は、表示モードと変換条件とを対応付けたテーブルＴ１の一例である。パン角度は、撮像装置１の実視点の画像中心と変換後の画像中心の水平方向の回転量を示す角度である。チルト角度は、撮像装置１の実視点の画像中心と変換後の画像中心の垂直方向の回転量を示す角度である。仮想パン角度は、変換後の画像中心を支点とした撮像装置１の仮想的な移動量を示す水平方向の回転角度である。仮想チルト角度は、変換後の画像中心を支点とした撮像装置１の仮想的な移動量を示す垂直方向の回転角度である。なお、本実施形態の一例における広角レンズ２の視野角は、１１０°であるとする。
【００３１】
そして、視点変換部６３は、決定された表示モードに対応した変換条件で視点変換を行う。本実施形態において、撮像装置１は、視野角度１１０°、パン角度０°、チルト角度０°、仮想パン角度０°、仮想チルト角度０°で画像データを取得する（当該画像データを歪み補正した画像が、図３Ｂの画像に対応する）。視点変換部６３は、取得された画像データを、決定された表示モードに対応した視野角度、パン角度、チルト角度、仮想パン角度及び仮想チルト角度で変換する。たとえば、図３Ｃは、図３Ｂの画像を、テーブルＴ１の表示モード１で設定されている変換条件に基づいて変換した画像である。すなわち、図３Ｃの画像は、視野角度を狭くすることで、図３Ｂの画像の中央部を切り出して拡大した画像である。図３Ｄは、図３Ｂの画像を、テーブルＴ１の表示モード２で設定されている変換条件に基づいて変換した画像である。すなわち、図３Ｄの画像は、視野角度を狭くしつつ、撮像装置１を実視点から水平方向に仮想的に回転させることで、図３Ｂの画像の右側端部を切り出して拡大した画像である。図３Ｅは、図３Ｂの画像を、テーブルＴ１の表示モード３で設定されている変換条件に基づいて変換した画像である。すなわち、図３Ｅの画像は、視野角度を狭くしつつ、撮像装置１を実視点から水平方向及び垂直方向に仮想的に回転させることで、図３Ｂの画像の右上端部を切り出して拡大した画像である。
【００３２】
なお、変換条件の設定は、入力部２０からのコマンドによる表示モードの選択でなくともよい。たとえば、入力部２０で都度、視野角等の具体的な数値を入力し、その値に基づいて視点変換を行うことでもよい。或いは、表示部１０に表示された歪み補正後の画像に対して、入力部２０（マウス、タッチパネル等）で任意の範囲を選択する。そして、視点変換部６３は、選択された範囲を切り出して拡大することにより、視点変換を行った場合と同様の画像データを得ることができる。
【００３３】
視点変換により、任意の仮想視点からみた画像を得ることができる。一方、当該画像は、歪み補正後の画像（図３Ｂ参照）よりも更にぼけ感が強くなる（図３Ｃから図３Ｅ参照）。特に、図３Ｃの画像のように、歪み補正後の画像の中央部を拡大した画像に比べ、図３Ｄ及び図３Ｅのように、画像の端部を拡大した場合の画像のほうがぼけ感がより強くなる。このように画像の端部におけるぼけ感が強くなるのは、視点変換により画像の端部が引き伸ばされる傾向にあることに起因している。このように、ぼけが生じた画像では、画像の細部が分かり難い等の問題が生じる。
【００３４】
そこで、シャープネス処理部６４は、視点変換が施された画像データに対し、画像データに基づく画像のぼけ感に応じた所定の処理条件でシャープネス処理を行う。シャープネスとは、画像の鮮明さをいう。シャープネス処理は、ハイパスフィルタにより画像のエッジ部分を検出し、局部的にコントラスト差を強くし、輪郭強調する処理（すなわち、画像のぼけを解消する処理）である。視点変換が施された結果、ぼけ感が強くなった画像（図３Ｅ参照）に対し、シャープネス処理部６４がシャープネス処理を施すことにより、ぼけが解消された画像（画像データ）を得ることができる（図３Ｆ参照）。
【００３５】
シャープネス処理を行う処理条件は、たとえば、ぼけの度合い（ぼけ感）に対応したレベルとして決定される。各レベルには、所定の解像感が設定されている。ここでは、レベルが大きいほど解像感が高くなる。解像感とは、画像がどれくらい細かい部分まで描写できているかを示す値である。「解像感が高い」とは、細かい部分まで描写されているという意味である。本実施形態において、「解像感が高い」とは、「ぼけ感が弱い」と同義である。また、ぼけ感は表示モードに応じて決まる。従って、本実施形態において、レベルは表示モードと対応付けられている。
【００３６】
たとえば、上述の表示モード３で視点変換を行った画像は、ぼけ感が強くなっている（図３Ｅ参照）。従って、シャープネス処理部６４は、処理条件として大きいレベルを選択し、シャープネス処理を行う。その結果、得られる画像は、ぼけ感が解消された画像となる。
【００３７】
なお、ぼけ感を解消するためにレベルを大きくすると、それに応じてＳ／Ｎ比が悪化する可能性がある。従って、レベル設定を行う際には、Ｓ／Ｎ比を考慮することが望ましい。
【００３８】
出力部６５は、シャープネス処理がなされた画像データを表示用の信号に変換して出力する。たとえば、出力部６５は、デジタルの画像データ（画像信号）をＤ／Ａ変換等によりアナログのＮＴＳＣ信号に変換する。ＮＴＳＣ信号は、制御部７の制御に基づいて、表示部１０に出力される。なお、出力される信号としては、ＮＴＳＣ信号に限らず、表示部１０で画像表示できるフォーマットであればよい。たとえば、ＰＡＬ（Ｐｈａｓｅ  Ａｌｔｅｒｎａｔｉｎｇ  Ｌｉｎｅ）信号等であってもよい。
【００３９】
記憶部６６は、ＲＡＭやＲＯＭ等の半導体記憶装置によって構成される。記憶部６６は、画像データや、歪み処理部６２で用いる補正条件、視点変換部６３で用いる変換条件及びシャープネス処理部６４で用いる処理条件等を記憶する。
【００４０】
［動作］
図５を参照して、撮像装置１の動作について説明する。
【００４１】
入力部２０からの入力等により、撮像装置１を駆動させると、撮像手段３は、広角レンズ２において結像された光像を光電変換し、画像信号を生成する（Ｓ１０）。制御部７は、撮像手段３を制御し、生成された画像信号をアンプ４へ出力させる。
【００４２】
アンプ４は、Ｓ１０で生成された画像信号を増幅する（Ｓ１１）。制御部７は、アンプ４を制御し、増幅された画像信号をＡ／Ｄ変換部５に出力させる。
【００４３】
Ａ／Ｄ変換部５は、Ｓ１１で増幅された画像信号をデジタルの画像信号に変換する（Ｓ１２）。制御部７は、Ａ／Ｄ変換部５を制御し、Ａ／Ｄ変換された画像信号を前処理部６１に出力させる。
【００４４】
前処理部６１は、Ｓ１２でデジタル変換された画像信号に対して前処理を行う（Ｓ１３）。制御部７は、前処理部６１を制御し、前処理がなされた画像信号を歪み補正部６２に出力させる。
【００４５】
歪み補正部６２は、Ｓ１３で前処理された画像信号に対し、所定の補正条件で歪み補正を行う（Ｓ１４）。制御部７は、歪み補正部６２を制御し、歪み補正が施された画像信号を視点変換部６３に出力させる。
【００４６】
視点変換部６３は、Ｓ１４で歪み補正が施された画像信号に対し、入力部２０で選択された表示モードに対応する変換条件に基づいて、視点変換の処理を行う（Ｓ１５）。制御部７は、視点変換部６３を制御し、視点変換が施された画像信号をシャープネス処理部６４に出力させる。
【００４７】
シャープネス処理部６４は、Ｓ１５で視点変換が施された画像信号に対し、所定の処理条件でシャープネス処理を行う（Ｓ１６）。シャープネス処理が施された画像信号に基づく画像は、ぼけが解消された画像となる。制御部７は、シャープネス処理部６４を制御し、シャープネス処理が施された画像信号を出力部６５に出力させる。
【００４８】
出力部６５は、Ｓ１６でシャープネス処理が施された画像信号をＮＴＳＣ信号に変換する（Ｓ１７）。制御部７は、出力部６５を制御し、ＮＴＳＣ信号を表示部１０に出力させる。このＮＴＳＣ信号に基づいて、表示部１０にはＮＴＳＣ信号に基づく画像が表示される（Ｓ１８）。
【００４９】
なお、制御部７は、たとえば、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などの図示しない処理装置と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などの図示しない記憶装置とによって構成されている。記憶装置には、上記各ステップで行われる動作制御を実行するための制御プログラム等が記憶されている。ＣＰＵなどの処理装置が、記憶装置に記憶されている制御プログラムを実行することで上記各ステップの動作制御が実行される。
【００５０】
［作用・効果］
本実施形態の作用及び効果について説明する。
【００５１】
本実施形態における画像処理装置は、広角レンズ２を介して得られた被写体の画像データを処理する。画像処理装置は、歪み補正部６２と、視点変換部６３と、シャープネス処理部６４とを有する。歪み補正部６２は、画像データに対し、広角レンズ２により生じた歪みを所定の補正条件で補正する。視点変換部６３は、補正が施された画像データに対し、所定の変換条件で視点変換を行う。シャープネス処理部６４は、視点変換が施された画像データに対し、当該画像データに基づく画像におけるぼけの度合いに応じた所定の処理条件でシャープネス処理を行う。
【００５２】
また、画像処理装置は、シャープネス処理がなされた画像データに基づく画像を表示させる表示部１０を有していてもよい。
【００５３】
更には、本実施形態における画像処理装置を含む撮像装置１を構成することも可能である。撮像装置１は、広角レンズ２と、撮像手段３と、画像処理装置（画像処理部６）とを有する。撮像手段３は、広角レンズ２を介して被写体を撮像するために用いられる。
【００５４】
このように、本発明における画像処理装置（撮像装置）によれば、広角レンズ２を介して得られた被写体の画像データに対し、歪み補正、視点変換及びシャープネス処理を施すことにより、ぼけ感が軽減された所望の画像（画像データ）を得ることができる。また、当該画像を表示部１０に表示させることにより、画像の細部まで確認することができる。
【００５５】
＜変形例１＞
上記実施形態では、シャープネス処理を行う処理条件を、ぼけ感に対応したレベルとして決定した。一方、処理条件を、ぼけ感及び被写体を撮像する環境（明るさ）に対応したレベルとして決定してもよい。
【００５６】
たとえば、図６に示すようなテーブルＴ２を記憶部６６に記憶しておく。シャープネス処理部６４は、視点変換処理において選択された表示モード（ぼけ感）、及び被写体を撮像する明暗環境をテーブルＴ２に当てはめ、対応するレベルを処理条件として設定することも可能である。
【００５７】
テーブルＴ２は、ぼけ感と環境に対応したレベル設定がなされている。すなわち、テーブルＴ２は、ぼけ感を４段階、明暗環境を５段階で設定している。本変形例において、各レベルには、所定の解像感及びＳ／Ｎ比が設定されている。レベルが大きいほど解像感が高く、逆にＳ／Ｎ比は悪くなるものとする。テーブルＴ２における「ぼけ感：無」は、視点変換によるぼけがほとんど生じていないケース（視野角度が広角レンズ２の画角とほぼ変わらず、チルト角度等が０°の場合）を示している。また、「ほけ感：小」、「ぼけ感：中」、「ぼけ感：大」は、表示モード１〜３と関連付けられた分類である。たとえば、画像の中央部を切り出して拡大する場合（表示モード１）には、画像の端部を切り出して拡大する場合（表示モード２及び表示モード３）に比べ、ぼけ感が少なくなる。従って、「ぼけ感：小」と表示モード１とを関連付けている。また、画像の右側端部を切り出して拡大する場合（表示モード２）より、画像の右上端部を切り出して拡大する場合（表示モード３）のほうが、よりぼけ感が強くなる。従って、「ぼけ感：大」と表示モード３とを関連付けている。
【００５８】
また、暗い環境（テーブルＴ２における暗環境）で被写体を撮像する場合、得られる画像はノイズが多くなる。従って、暗環境では、ノイズを抑えるために小さいレベルを設定する。なお、暗環境においてぼけ感が強い場合には、ノイズが目立つため、特に小さいレベルを設定する。逆に、明るい環境（テーブルＴ２における明環境）で被写体を撮像する場合、得られる画像は、ノイズは少なくなる。従って、ぼけ感に応じて大きいレベルを設定する。
【００５９】
＜変形例２＞
視点変換を行った画像データに対し、シェーディング補正をおこなうシェーディング補正部（図示なし）を設けることも可能である。シェーディング補正は、広角レンズ２や撮像手段３の特性によって生じる輝度ムラを補正するための処理である。シェーディング補正を行う画像領域や補正量は、視点変換の変換条件に対応して異なる値が設定されている。
【符号の説明】
【００６０】
１  撮像装置
２  広角レンズ
３  撮像手段
４  アンプ
５  Ａ／Ｄ変換部
６  画像処理部
７  制御部
１０  表示部
２０  入力部
６１  前処理部
６２  歪み補正部
６３  視点変換部
６４  シャープネス処理部
６５  出力部
６６  記憶部
【図１】
2013179435.tif 000003
【図２】
2013179435.tif 000004
【図３Ａ】
2013179435.tif 000005
【図３Ｂ】
2013179435.tif 000006
【図３Ｃ】
2013179435.tif 000007
【図３Ｄ】
2013179435.tif 000008
【図３Ｅ】
2013179435.tif 000009
【図３Ｆ】
2013179435.tif 000010
【図４】
2013179435.tif 000011
【図５】
2013179435.tif 000012
【図６】
2013179435.tif 000013