(57)【要約】【課題】精度よくかつ容易に動きを検出して適正な画像処理を実行することを可能とする撮像装置及びその撮像方法を提供する【解決手段】現フレームの入力画像と前フレームの出力画像とに基づいて動きを検出し動き検出用信号値を算出する動き検出用信号値算出部６１と、動き検出用信号値に基づいて動き値を算出する動き検出部６２と、動き値に基づいて現フレームの入力画像に動き対応画像処理を施して現フレームの出力画像を生成する動き対応画像処理部６３と、を備える。動き検出用信号値算出部６１は、現フレームの入力画像の生成状況に応じたオフセットを低減した動き検出用信号値を算出し、出力する。【選択図】図２
2010245936.tif 000002
【特許請求の範囲】
【請求項１】
撮像により入力画像を順次生成する入力画像生成部と、
順次生成される前記入力画像間に生じた動きを示す動き検出用信号値を算出する動き検出用信号値算出部と、
前記動き検出用信号値に基づいた動き対応画像処理を前記入力画像に施して出力画像を生成する出力画像生成部と、を備え、
前記動き検出用信号値算出部が算出する前記動き検出用信号値が、前記入力画像の生成状況に応じた誤差成分を補正したものであることを特徴とする撮像装置。
【請求項２】
前記動き検出用信号値算出部が、
前記入力画像と、当該入力画像より前に前記入力画像生成部で生成された古入力画像または当該古入力画像に対して前記出力画像生成部が前記動き対応画像処理を施して生成された古出力画像と、の対応する位置の画素の差分値に基づいて画像比較信号値を算出する画像比較信号値算出部と、
前記画像比較信号値に含まれる前記誤差成分を推定した値である補正値を算出する補正値算出部と、
前記画像比較信号値から前記補正値を減算して前記動き検出用信号値を算出する補正部と、
を備えることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記補正値算出部が、前記入力画像または前記古入力画像もしくは前記古出力画像の画素値が大きいほど、前記補正値を大きくすることを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記入力画像生成部が、前記入力画像を生成する際の画素値の増幅度を大きくするほど、前記補正値算出部が、前記補正値を大きくすることを特徴とする請求項２または請求項３に記載の撮像装置。
【請求項５】
前記入力画像及び前記古出力画像が複数種類の画素値を備えるものであり、
前記動き検出用信号値算出部が、画素値の種類毎に前記動き検出用信号値を算出することを特徴とする請求項２〜請求項４のいずれかに記載の撮像装置。
【請求項６】
撮像により入力画像を生成する第１ステップと、
前記第１ステップの後の撮像によりさらに入力画像を生成する第２ステップと、
前記第１ステップと前記第２ステップとで生成された前記入力画像間の動きを示す動き検出用信号値を算出する第３ステップと、
前記第３ステップにより得られる前記動き検出用信号値に基づいた動き対応画像処理を、前記第２ステップで生成された前記入力画像に施して出力画像を生成する第４ステップと、を備え、
前記第３ステップで算出される前記動き検出用信号値が、前記入力画像の生成状況に応じた誤差成分を補正したものであることを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像により得られた画像に画像処理を施す撮像装置及びその撮像方法に関する。
【背景技術】
【０００２】
近年、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complimentary Metal Oxide Semiconductor）センサなどの固体撮像素子を備えたイメージセンサを用いて撮像を行うデジタルスチルカメラやデジタルビデオカメラなどの撮像装置が広く普及している。このような撮像装置の中には、撮像によって得られた画像に画像処理を施すものがある。
【０００３】
例えば、特許文献１には、撮像によって得られた現画像とその１フレーム前の画像処理後の画像と、の差分値に基づいて画像処理を施す画像処理装置が開示されている。この画像処理装置は、当該差分値から現画像に含まれるノイズ成分を算出し、現画像から当該ノイズ成分を減算することによってノイズを低減する。さらに、当該差分値を用いて動きがあった部分を検出し、動きとノイズとを区別して画像処理を施す。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２５８８４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上記文献に開示されるように、動きを検出し、それに対応した画像処理を実行することとすると、より適正な画像処理を実行することができるため好ましい。しかしながら、検出された動きが誤ったものであると、適正な画像処理を実行することが困難となるばかりか、かえって画像が劣化する場合も生じ得るため、問題となる。
【０００６】
特に、上記のように差分値を用いて動きを検出する場合、撮像素子の特性などに起因して差分値がばらつき、このばらつきに起因した誤差成分によって動きが誤検出されやすくなることが問題となる。
【０００７】
具体的に例えば、露光の有無に関係なく蓄積される電荷によって生じる暗電流ノイズ成分や、露光時に撮像素子の画素に当たる光子数や量子効率のばらつきによって生じる光ショットノイズ成分などに起因して、差分値にばらつきが生じる。そして、このばらつきに起因して発生する誤差成分によって、実際には動きがなくても動きがあるものと誤認識するために、動きの検出精度が劣化する。
【０００８】
なお、この誤差成分を考慮して動き検出を行えば、検出精度を改善させることは可能である。しかしながら、この誤差成分の大きさは処理対象となる画像の生成状況に応じて変化するため、誤差成分を一定の大きさとみなして動き検出を行ったとしても、検出精度の改善を図ることは困難である。一方、誤差成分の大きさの変化に対応するために、種々の状況に応じて動きの検出方法を異ならせることとすると、動きの検出動作が煩雑化して処理時間が長くなるなど、新たな問題が発生する。
【０００９】
そこで、本発明は、精度よくかつ容易に動きを検出して適正な画像処理を実行することを可能とする撮像装置及びその撮像方法を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するために、本発明における撮像装置は、撮像により入力画像を順次生成する入力画像生成部と、順次生成される前記入力画像間に生じた動きを示す動き検出用信号値を算出する動き検出用信号値算出部と、前記動き検出用信号値に基づいた動き対応画像処理を前記入力画像に施して出力画像を生成する出力画像生成部と、を備え、前記動き検出用信号値算出部が算出する前記動き検出用信号値が、前記入力画像の生成状況に応じた誤差成分を補正したものであることを特徴とする。
【００１１】
なお、以下に示す各実施形態においては、入力画像生成部の一例として撮像部、ＡＦＥ及び画像処理部を挙げ、出力画像生成部の一例として動き検出部及び動き対応画像処理部を挙げ、入力画像及び出力画像の一例として現フレームの入力画像及び現フレームの出力画像を挙げ、古入力画像及び古出力画像の一例として前フレームの入力画像及び前フレームの出力画像を挙げ、誤差成分の一例としてオフセットを挙げ、それぞれ説明している。
【００１２】
また、順次生成される入力画像間の動きを示す動き検出用信号値は、複数（例えば二つ）の入力画像を利用して直接的に算出されるものであっても構わないし、入力画像に基づいた画像（例えば、出力画像）を利用して間接的に算出されるものであっても構わない。また、入力画像と入力画像に基づいた画像とを利用して算出されるものであっても構わない。
【００１３】
また、上記構成の撮像装置において、前記動き検出用信号値算出部が、前記入力画像と、当該入力画像より前に前記入力画像生成部で生成された古入力画像または当該古入力画像に対して前記出力画像生成部が前記動き対応画像処理を施して生成された古出力画像と、の対応する位置の画素の差分値に基づいて画像比較信号値を算出する画像比較信号値算出部と、前記画像比較信号値に含まれる前記誤差成分を推定した値である補正値を算出する補正値算出部と、前記画像比較信号値から前記補正値を減算して前記動き検出用信号値を算出する補正部と、を備えることとしても構わない。
【００１４】
このように構成すると、二つの画像の差分値に基づいて得られる画像比較信号値から、誤差成分を推定した補正値を減算することによって、動きの検出に適した信号値である動き検出用信号値を算出することが可能となる。なお、二つの画像の差分値を絶対値化及び平滑化することにより、画像比較信号値を算出しても構わない。このように構成すると、二つの画像間の動きを示すとともにノイズの影響を抑制した画素比較信号値を算出することが可能となる。
【００１５】
なお、以下に示す各実施形態においては、画像比較信号値算出部の一例として、差分値算出部、絶対値化部及び平滑化部を挙げて説明している。
【００１６】
また、上記構成の撮像装置において、前記補正値算出部が、前記入力画像または前記古入力画像もしくは前記古出力画像の画素値が大きいほど、前記補正値を大きくすることとしても構わない。
【００１７】
このように構成すると、画素値が大きくなり誤差成分が大きくなる場合に、これに合わせて補正値を大きくすることとなる。そのため、補正値を精度よく算出することが可能となる。
【００１８】
また、上記構成の撮像装置において、前記入力画像生成部が、前記入力画像を生成する際の画素値の増幅度を大きくするほど、前記補正値算出部が、前記補正値を大きくすることとしても構わない。
【００１９】
このように構成すると、入力画像生成時の画素値の増幅度が大きくなり誤差成分が大きくなる場合に、これに合わせて補正値を大きくすることとなる。そのため、補正値を精度よく算出することが可能となる。
【００２０】
また、上記構成の撮像装置において、前記補正値算出部が、前記入力画像を撮像する際の露光時間が長いほど、前記補正値を大きくすることとしても構わない。
【００２１】
このように構成すると、露光時間が長くなり誤差成分が大きくなる場合に、これに合わせて補正値を大きくすることとなる。そのため、補正値を精度良く算出することが可能となる。
【００２２】
また、上記構成の撮像装置において、前記入力画像及び前記古出力画像が複数種類の画素値を備えるものであり、前記動き検出用信号値算出部が、画素値の種類毎に前記動き検出用信号値を算出することとしても構わない。
【００２３】
このように構成すると、動き検出用信号値算出部が、画素値の種類毎の特性に応じた補正値をそれぞれ算出することが可能となる。そのため、誤差成分を精度良く低減させた動き検出用信号値を算出することが可能となる。
【００２４】
また、上記構成の撮像装置において、前記入力画像生成部が、撮像して得た画像の画素値の種類毎に増幅または減衰処理を施して前記入力画像を生成し、前記補正値算出部が、前記入力画像生成部の前記増幅または減衰処理に応じて前記補正値を増減することとしても構わない。
【００２５】
このように構成すると、入力画像を生成する際に、ある種類の画素値だけを増幅または減衰させたとしても、これに応じてある種類の画素値に対応する補正値を増減させることが可能となる。そのため、誤差成分を精度良く低減させた動き検出用信号値を算出することが可能となる。
【００２６】
また、上記構成の撮像装置において、前記出力画像生成部が、前記動き検出用信号値算出部により算出される複数種類の前記動き検出用信号値を総合して、得られた１つの結果に基づいた前記動き対応画像処理を前記入力画像に施し、前記出力画像を生成することとしても構わない。
【００２７】
このように構成すると、入力画像の画素値の種類に関係なく、１つの動き対応画像処理が施されることとなる。そのため、特定の種類の画素値に対して特異な動き対応画像処理が施されることが抑制される。したがって、動き対応画像処理によって色ずれが発生することを抑制することが可能となる。
【００２８】
また、上記構成の撮像装置において、前記入力画像及び前記古出力画像が、１つの画素に１種類の画素値が備えられたベイヤ配列の画像としても構わない。
【００２９】
このように構成すると、色同時化処理を施す前のベイヤ配列の入力画像に対して、動き対応画像処理を行うことが可能となる。そのため、入力画像のある画素に含まれるノイズが、色同時化処理によって周囲の画素に広がる前に、動き対応画像処理を施すことによって当該ノイズを低減することが可能となる。
【００３０】
また、上記構成の撮像装置において、前記動き検出用信号値算出部が、それぞれの画素について複数種類の画素値を算出するとともに複数種類の前記動き検出用信号値を算出し、前記出力画像生成部が、当該複数種類の前記動き検出用信号値を総合して得られる１つの結果に基づいた前記動き対応画像処理を前記入力画像に施して、前記出力画像を生成することとしても構わない。
【００３１】
このように構成すると、色同時化処理によるノイズの周囲画素への拡散を抑制すると同時に、色ずれの発生をも抑制することが可能となる。
【００３２】
また、上記構成の撮像装置において、前記出力画像生成部が前記入力画像に施す前記動き対応画像処理が、前記入力画像から当該入力画像と前記古出力画像との差分を減算するものであり、前記動き検出用信号値に応じて減算の程度が制御されることとしても構わない。さらに、前記動き検出用信号値が大きいほど、前記動き対応画像処理の減算の程度が小さくなるものとしても構わない。
【００３３】
また、本発明の画像処理方法は、撮像により入力画像を生成する第１ステップと、前記第１ステップの後の撮像によりさらに入力画像を生成する第２ステップと、前記第１ステップと前記第２ステップとで生成された前記入力画像間の動きを示す動き検出用信号値を算出する第３ステップと、前記第３ステップにより得られる前記動き検出用信号値に基づいた動き対応画像処理を、前記第２ステップで生成された前記入力画像に施して出力画像を生成する第４ステップと、を備え、前記第３ステップで算出される前記動き検出用信号値が、前記入力画像の生成状況に応じた誤差成分を補正したものであることを特徴とする。
【００３４】
また、入力画像間の動きを示す動き検出用信号値は、第１ステップ及び第２ステップで生成された二つの入力画像を利用して直接的に算出されるものであっても構わないし、これらの入力画像に基づいた画像（例えば、出力画像）を利用して間接的に算出されるものであっても構わない。また、入力画像と入力画像に基づいた画像とを利用して算出されるものであっても構わない。
【発明の効果】
【００３５】
本発明の構成とすると、動き検出用信号値が、誤差成分が補正されたものとなるため、動き検出用信号値の精度を向上させることが可能となる。したがって、適正な動き対応画像処理を入力画像に施すことが可能となる。また、出力画像生成部が、誤差成分に応じた動きの検出を行う必要が無くなるため、動作の容易化を図ることが可能となる。
【図面の簡単な説明】
【００３６】
【図１】は、本発明の各実施形態における撮像装置の基本構成について示すブロック図である。
【図２】は、第１実施形態に係る撮像装置に備えられる画像処理部の要部の構成を示すブロック図である。
【図３】は、第１実施形態に係る撮像装置に備えられる画像処理部の要部の動作を示すフローチャートである。
【図４】は、画像比較信号値の算出方法を概念的に示したグラフである。
【図５】は、補正値の算出方法の一例を示すグラフである。
【図６】は、動き検出用信号値の算出方法の一例を示すグラフである。
【図７】は、動き対応画像処理部の構成の一例を示すブロック図である。
【図８】は、ノイズ値の算出方法の一例を示すグラフである。
【図９】は、動き値の算出方法の一例を示すグラフである。
【図１０】は、ベイヤ配列の一例を示す図である。
【図１１】は、第２実施形態に係る撮像装置に備えられる画像処理部の要部の構成を示すブロック図である。
【図１２】は、補正値の算出方法の一例を示すグラフである。
【図１３】は、補正値の算出方法の一例を示すグラフである。
【発明を実施するための形態】
【００３７】
以下、本発明における撮像装置の各実施形態について図面を参照して説明する。なお、最初に各実施形態において共通する撮像装置の基本構成及び基本動作について説明する。なお、以下では音声、動画及び静止画の記録が可能な撮像装置を例に挙げて説明する。
【００３８】
＜＜撮像装置＞＞
まず、本発明の各実施形態において共通する撮像装置の基本構成について、図１を参照して説明する。図１は、本発明の各実施形態における撮像装置の基本構成について示すブロック図である。
【００３９】
図１に示すように、撮像装置１は、入射される光学像を電気信号に変換するＣＣＤまたはＣＭＯＳセンサなどの固体撮像素子から成るイメージセンサ２と、被写体の光学像をイメージセンサ２に結像させるとともに光量などの調整を行うレンズ部３と、を備える。レンズ部３とイメージセンサ２とで撮像部Ｉが構成され、この撮像部Ｉによって画像信号が生成される。なお、レンズ部３は、ズームレンズやフォーカスレンズなどの各種レンズ（不図示）や、イメージセンサ２に入力される光量を調整する絞り（不図示）などを備える。
【００４０】
撮像装置１は、イメージセンサ２から出力されるアナログ信号である画像信号をデジタル信号に変換するとともにゲインの調整を行うＡＦＥ（Analog Front End）４と、入力される音声を電気信号に変換する集音部５と、ＡＦＥ４から出力されるデジタル信号の画像信号をＹ（輝度信号）Ｕ，Ｖ（色差信号）を用いた信号に変換したり画像信号に各種画像処理を施したりする画像処理部６と、集音部５から出力されるアナログ信号である音声信号をデジタル信号に変換する音声処理部７と、画像処理部６から出力される画像信号に対してＪＰＥＧ（Joint Photographic Experts Group）圧縮方式などの静止画用の圧縮符号化処理を施したり画像処理部６から出力される画像信号と音声処理部７からの音声信号とに対してＭＰＥＧ（Moving Picture Experts Group）圧縮方式などの動画用の圧縮符号化処理を施したりする圧縮処理部８と、圧縮処理部８で圧縮符号化された圧縮符号化信号を記録する外部メモリ１０と、画像信号を外部メモリ１０に記録したり読み出したりするドライバ部９と、ドライバ部９において外部メモリ１０から読み出した圧縮符号化信号を伸長して復号する伸長処理部１１と、を備える。
【００４１】
また、撮像装置１は、伸長処理部１１で復号された画像信号をディスプレイなどの表示装置（不図示）で表示可能な形式の信号に変換する画像出力回路部１２と、伸長処理部１１で復号された音声信号をスピーカなどの再生装置（不図示）で再生可能な形式の信号に変換する音声出力回路部１３と、を備える。
【００４２】
また、撮像装置１は、撮像装置１内全体の動作を制御するＣＰＵ（Central Processing Unit）１４と、各処理を行うための各プログラムを記憶するとともにプログラム実行時の信号の一時保管を行うメモリ１５と、撮像を開始するボタンや各種設定の決定を行うボタンなどのユーザからの指示が入力される操作部１６と、各部の動作タイミングを一致させるためのタイミング制御信号を出力するタイミングジェネレータ（ＴＧ）部１７と、ＣＰＵ１４と各部との間で信号のやりとりを行うためのバス回線１８と、メモリ１５と各部との間で信号のやりとりを行うためのバス回線１９と、を備える。
【００４３】
なお、外部メモリ１０は画像信号や音声信号を記録することができればどのようなものでも構わない。例えば、ＳＤ（Secure Digital）カードのような半導体メモリ、ＤＶＤなどの光ディスク、ハードディスクなどの磁気ディスクなどをこの外部メモリ１０として使用することができる。また、外部メモリ１０を撮像装置１から着脱自在としても構わない。
【００４４】
次に、撮像装置１の基本動作について図面を参照して説明する。まず、撮像装置１は、レンズ部３より入射される光をイメージセンサ２において光電変換することによって、電気信号である画像信号を取得する。そして、イメージセンサ２は、ＴＧ部１７から入力されるタイミング制御信号に同期して、所定のフレーム周期（例えば、１／３０秒）で順次ＡＦＥ４に画像信号を出力する。そして、ＡＦＥ４によってアナログ信号からデジタル信号へと変換された画像信号は、画像処理部６に入力される。画像処理部６は、階調補正や輪郭強調等の各種画像処理を施す。さらに、画像信号から動きを検出するとともに、当該動きに基づいた動き対応画像処理（詳細は後述）を施す。また、メモリ１５はフレームメモリとして動作し、画像処理部６が処理を行なう際に画像信号を一時的に保持する。
【００４５】
また、画像処理部６は、入力される画像信号に基づいて、レンズ部３における各種レンズの位置や絞りの開度、イメージセンサ２の増幅度（ゲイン）などを調整するための信号をＣＰＵ１４に出力する。ＣＰＵ１４は、入力されるこれらの信号に基づいてそれぞれの制御を行う。このレンズ部３やイメージセンサ２の調整は、それぞれ最適な状態となるように所定のプログラムに基づいて自動的に行われたり、ユーザの指示に基づいて手動で行われたりする。
【００４６】
動画を記録する場合であれば、画像信号だけでなく音声信号も記録される。集音部５において電気信号に変換されて出力される音声信号は音声処理部７に入力されてデジタル化されるとともにノイズ除去などの処理が施される。そして、画像処理部６から出力される画像信号と、音声処理部７から出力される音声信号と、はともに圧縮処理部８に入力され、圧縮処理部８において所定の圧縮方式で圧縮される。このとき、画像信号と音声信号とは時間的に関連付けられており、再生時に画像と音とがずれないように構成される。そして、圧縮された画像信号及び音声信号はドライバ部９を介して外部メモリ１０に記録される。
【００４７】
一方、静止画や音声のみを記録する場合であれば、画像信号または音声信号が圧縮処理部８において所定の圧縮方法で圧縮され、外部メモリ１０に記録される。なお、動画を記録する場合と静止画を記録する場合とで、画像処理部６において行われる処理を異なるものとしても構わない。
【００４８】
外部メモリ１０に記録された圧縮後の画像信号及び音声信号は、ユーザの指示に基づいて伸長処理部１１に読み出される。伸長処理部１１では、圧縮された画像信号及び音声信号を伸長し、画像信号を画像出力回路部１２、音声信号を音声出力回路部１３にそれぞれ出力する。そして、画像出力回路部１２や音声出力回路部１３において、表示装置やスピーカで表示または再生可能な形式の信号に変換されて出力される。
【００４９】
なお、表示装置やスピーカは、撮像装置１と一体となっているものでも構わないし、別体となっており、撮像装置１に備えられる端子とケーブル等を用いて接続されるようなものでも構わない。
【００５０】
また、画像信号の記録を行わずに表示装置などに表示される画像をユーザが確認する、いわゆるプレビューモードである場合に、画像処理部６から出力される画像信号を圧縮せずに画像出力回路部１２に出力することとしても構わない。また、動画の画像信号を記録する際に、圧縮処理部８で圧縮して外部メモリ１０に記録するのと並行して、画像出力回路部１２を介して表示装置などに画像信号を出力することとしても構わない。
【００５１】
＜＜第１実施形態＞＞
次に、本発明の撮像装置の第１実施形態について図面を参照して説明する。特に、図１に示した画像処理部６内の、動き対応画像処理が行われる要部の構成及び動作について中心に説明する。
【００５２】
図２は、第１実施形態に係る撮像装置に備えられる画像処理部の要部の構成を示すブロック図である。なお、以下では説明の具体化のために、動き対応画像処理が施される画像信号を画像として表現するとともに、「入力画像」と呼ぶこととする。また、入力画像に動き対応画像処理が施されて得られる画像信号を「出力画像」と呼ぶこととする。
【００５３】
また、順次処理される入力画像及び出力画像の順序を、フレームを用いて表現する。特に、動き対応画像処理が施される対象となる入力画像を現フレームの入力画像とし、この現フレームの入力画像に動き対応画像処理が施されて得られる出力画像を現フレームの出力画像とする。また、現フレームの入力画像の前に動き対応画像処理が施された入力画像を前フレームの入力画像とし、この前フレームの入力画像に動き対応画像処理が施されて得られた出力画像を前フレームの出力画像とする。
【００５４】
図２に示すように、画像処理部６は、現フレームの入力画像とフレームメモリ２０に記憶された前フレームの出力画像とに基づいて順次生成される入力画像間の動きを示す動き検出用信号値を算出し出力する動き検出用信号値算出部６１と、動き検出用信号値算出部から出力される動き検出用信号値から上記動きを検出し動き値として出力する動き検出部６２と、動き検出部６２から出力される動き値に基づいた画像処理である動き対応画像処理を現フレームの入力画像に施し現フレームの出力画像を生成する動き対応画像処理部６３と、を備える。なお、フレームメモリ２０を、図１に示したメモリ１５としても構わない。
【００５５】
動き検出用信号値算出部６１は、現フレームの入力画像と前フレームの出力画像との差分値を算出する差分値算出部６１１と、差分値算出部６１１から出力される差分値を絶対値化して出力する絶対値化部６１２と、絶対値化部６１２から出力される差分値の絶対値を平滑化して画像比較信号値として出力する平滑化部と６１３と、現フレームの入力画像と前フレームの出力画像とのいずれかを選択する画像選択部６１４と、画像選択部６１４によって選択された画像に含まれる画素の画素値の大きさを取得して出力する画素値取得部６１５と、画素値取得部６１５から出力される画素値の大きさと入力画像の生成状況（例えば画素値の増幅度や露光時間など）を示す入力画像生成状況情報とに基づいて補正値を算出して出力する補正値算出部６１６と、平滑化部６１３から出力される画像比較信号値を補正値に基づいて補正して動き検出用信号値を算出し出力する補正部６１７と、を備える。
【００５６】
図２に示す画像処理部６の要部の動作について図面を参照して説明する。図３は、第１実施形態に係る撮像装置に備えられる画像処理部の要部の動作を示すフローチャートである。
【００５７】
図３に示すように、動き対応画像処理を実行するため、最初に現フレームの入力画像及び前フレームの出力画像を取得する（ＳＴＥＰ１）。ここで、前フレームの出力画像は、フレームメモリ２０から取得する。
【００５８】
次に、ＳＴＥＰ１において取得した現フレームの入力画像及び前フレームの出力画像の信号値を用いて、画像比較信号値を算出する（ＳＴＥＰ２）。このＳＴＥＰ２の動作は、図２に示した差分値算出部６１１、絶対値化部６１２、平滑化部６１３によって行われる。このＳＴＥＰ２の動作について、以下図４を参照して説明する。
【００５９】
図４は、画像比較信号値の算出方法を概念的に示したグラフである。なお、図４（ａ）〜（ｃ）に示すグラフは、縦軸をそれぞれの信号値の大きさ、横軸を画素位置として、ある方向に整列した画素について示したものである。なお、図４（ａ）が差分値算出部６１１の算出結果、図４（ｂ）が絶対値化部６１２の算出結果、図４（ｃ）が平滑化部６１３の算出結果をそれぞれ示したものとなる。
【００６０】
差分値算出部６１１は、現フレームの入力画像及び前フレームの出力画像の対応する位置のそれぞれの画素値の差分を求めることで、差分値を算出する。差分値はどのような種類の画素値から算出しても構わないが、以下では説明の具体化のため、輝度値（例えば、画素値をＹＵＶで表現したときのＹに相当する値）から算出する場合について示すものとする。また、差分値算出部６１１によって算出される差分値は、図４（ａ）に示すように負の値を含んだものと成り得る。さらに、ノイズなどの影響によって、差分値は画素間で細かく変動したものと成り得る。
【００６１】
差分値算出部６１１から出力される差分値は、絶対値化部６１２によって絶対値化される。これにより、図４（ｂ）に示すように、図４（ａ）で負であった値が正の値に変換される。ただし、負であった全ての差分値が正になるのみで、この時点ではノイズなどに起因する細かな変動は残留したままである。
【００６２】
絶対値化部６１２から出力される絶対値化された差分値は、平滑化部６１３によって平滑化され、これによって画素比較信号値が算出される。図４（ｃ）に示すように、上記のノイズなどに起因する細かな変動は、平滑化されることにより低減される。そのため、画素比較信号値は、ノイズなどの影響が除外されることによって動きが明確に表された信号値となる。
【００６３】
しかしながら、この画像比較信号値には、図４（ｃ）に示すように上記の細かな変動を平滑化することによって生じるオフセットが含まれる。このオフセットを含んだまま動き検出を行うこととすると、動きが無い画素部分（図中左側）でも信号値が０にならないため、動きがあるものと誤認される可能性がある。そこで、このオフセットを推定した値である補正値を算出し（ＳＴＥＰ３）、当該補正値を画像比較信号値から減算することによって、動き検出用信号値を算出する（ＳＴＥＰ４）。以下、このＳＴＥＰ３及びＳＴＥＰ４について、図面を参照して説明する。
【００６４】
まず、ＳＴＥＰ３について説明する。ＳＴＥＰ３では最初に、画像選択部６１４が補正値を算出するために用いる画像の選択を行う。具体的には、現フレームの入力画像及び前フレームの出力画像のいずれか一方を選択して、選択した画像を後段の画素値取得部６１５に出力する。なお、選択する画像を、動き対応画像処理部６３の処理内容に応じて適宜決定することとしても構わない。また、この画像選択部６１４を設けず、どちらかの画像が必ず画素値取得部６１５に入力される構成としても構わない。
【００６５】
画素値取得部６１５は、入力される画像から補正値を算出するための画素値（輝度値）を取得し、補正値算出部６１６に出力する。補正値算出部６１６は、入力される入力画像生成状況情報と輝度値とに基づいて補正値を算出する。補正値算出部６１６による補正値の算出方法の具体例を図５に示す。図５は、補正値の算出方法の一例を示すグラフである。なお、横軸が輝度値、縦軸が算出される補正値の大きさをそれぞれ示している。
【００６６】
図５は、入力画像生成状況情報によって示されるイメージセンサ２の画素値の増幅度（例えば、ＩＳＯ感度）に応じた傾き及び切片を有する一次関数ｆL，ｆSと、画素値取得部６１５から出力される輝度値と、に応じて補正値が算出される場合について示したものである。図５では、ＩＳＯ感度が１６００である場合の関数ｆLと、ＩＳＯ感度が８００である場合の関数ｆSと、を合わせて示している。
【００６７】
関数ｆL，ｆSの切片は、輝度値が０である場合の補正値、即ち、暗電流ノイズ成分に起因するオフセットを補正する値について示したものとなる。また、関数ｆL，ｆSの傾きに応じた値（即ち、補正値の増加量）は、光ショットノイズ成分に起因するオフセットを補正する値であり、輝度値の増大とともに増大する値となる。また、ＩＳＯ感度が大きいほど、関数ｆL，ｆSの切片及び傾きが大きいものとなる。なお、図５に示す関数ｆL，ｆSは、実験的に求めることができる。そのため、撮像装置１の製造時にこれらの関数ｆL，ｆSを求めて、予めメモリ１５などに記録しておくこととすると、好ましい。
【００６８】
次に、ＳＴＥＰ４について説明する。図６は、動き検出用信号値の算出方法の一例を示すグラフである。なお、図６は図４（ｃ）に示す画像比較信号値を補正して得られる動き検出用信号値を示すグラフであり、図４（ｃ）に示したグラフと同様のものである。
【００６９】
図６に示すように、補正部６１７は、平滑化部６１３によって算出される画像比較信号値から、補正値算出部６１６によって算出される補正値を減算して、動き検出用信号値を算出する。これにより、オフセットを低減して、動きが無い画素部分の動き検出用信号値を０に近づけることが可能となる。
【００７０】
以上のようにして算出される動き検出用信号値を用いて動き検出部６２が動き検出を行い、動き値を算出する（ＳＴＥＰ５）。そして、算出された動き値を用いて、動き対応画像処理部６３が動き対応画像処理を現フレームの入力画像に施して、現フレームの出力画像を生成する（ＳＴＥＰ６）。
【００７１】
動き検出部６２による動き値の算出方法は、動き対応画像処理部６３による動き対応画像処理に応じたものとなる。なお、動き値の算出方法や動き対応画像処理部６３の構成及び動作の具体例について、以下図面を参照して説明する。図７は、動き対応画像処理部の構成の一例を示すブロック図である。
【００７２】
図７に示すように、動き対応画像処理部６３は、入力される現フレームの入力画像と前フレームの出力画像とからノイズ値を算出するノイズ値算出部６３１と、当該ノイズ値と動き検出部６２から出力される動き値とに基づいて除去値を算出するとともに現フレームの入力画像から除去値を減算するノイズ低減部６３２と、を備える。また、ノイズ低減部６３２は、ノイズ値に対して動き値を乗算して除去値を算出する乗算部ｍｕｌと、乗算部ｍｕｌから出力される除去値を現フレームの入力画像から減算する減算部ｓｕｂと、を備える。
【００７３】
ノイズ値算出部６３１は、例えば現フレームの入力画像から前フレームの出力画像を減算することによって、対応する位置の画素が備える画素値の差分値ｋを算出する。そして、当該差分値ｋを用いて図８に示すように、ノイズ値ｎ（ｋ）を算出する。図８は、ノイズ値の算出方法の一例を示すグラフである。なお、図８に示すようにノイズ値を設定する場合、ノイズ値ｎ（ｋ）は下記式（１）に示すものとなる。
【００７４】
【数１】
2010245936.tif 000003
【００７５】
上記式（１）に示されるノイズ値ｎ（ｋ）では、差分値ｋの絶対値が閾値ｔｈ（ｔｈ＞０）を超える場合、ノイズ値ｎ（ｋ）が抑制される。そのため、被写体や撮像装置１の動きなどによって画素値に大きな変動が生じた場合に、ノイズによる変動と誤認されてノイズ値が大きく設定されることが抑制される。
【００７６】
また、動き対応画像処理部６３を本例の構成とする場合、動き検出部６２は、例えば図９に示すように動き値を算出する。図９は、動き値の算出方法の一例を示すグラフである。図９に示すように、動き検出部６２は、動き検出用信号値がある閾値ｔｈａより小さい場合、所定の値である動き値Ｃmax（ただし、Ｃmax≦１）を出力する。また、ある閾値ｔｈｂ（ただし、ｔｈａ＜ｔｈｂ）より大きい場合、動き値Ｃ＝０を出力する。さらに、動き検出用信号値が閾値ｔｈａ以上閾値ｔｈｂ以下である場合、Ｃ＝Ｃmax×（ｔｈｂ−Ｍ）／（ｔｈｂ−ｔｈａ）となる動き値Ｃを出力する。即ち、動き検出部６２は、入力される動き検出用信号値Ｍが大きいほど（動きが生じている可能性が高いほど）、小さい動き値Ｃを出力する。
【００７７】
そして、ノイズ低減部６３２の乗算部ｍｕｌが、ノイズ値ｎ（ｋ）に動き値Ｃを乗算して除去値を算出する。また、減算部ｓｕｂが、現フレームの入力画像の画素値から除去値を減算する。これによって、現フレームの出力画像が生成される。
【００７８】
ノイズ値は差分値から得られ、差分値は主に現フレームの入力画像にランダムに発生したノイズを示したものとなる。しかしながら、差分値はノイズだけでなく、動きを示すものでもある。そこで、動きが発生したと見込まれる場合、ノイズ値に０に近い値となる動き値を乗算し、除去値を算出する。これにより、動きに起因して差分値及びノイズ値の絶対値が大きくなったとしても、除去値が０に近い値になるようにして、尾引きや残像の発生を抑制する。一方、動きが発生したと見込まれない場合、ノイズ値に大きい値となる動き値を乗算し、除去値を算出する。これにより、ノイズに起因して絶対値が大きくなったノイズ値を過剰に抑制することなく除去値を算出し、ノイズを効果的に低減する。
【００７９】
生成された現フレームの出力画像は、出力画像として出力されるとともに、フレームメモリ２０に記憶される（ＳＴＥＰ７）。なお、フレームメモリ２０に記憶された現フレームの出力画像は、次フレームの入力画像の処理に利用される。
【００８０】
そして、ＣＰＵ１４等から終了する指示が入力されているか否かを確認する（ＳＴＥＰ８）。終了する指示が入力されていない場合は（ＳＴＥＰ８、ＮＯ）、ＳＴＥＰ１に戻って次フレームの入力画像の処理を開始する。一方、終了する指示が入力されている場合は（ＳＴＥＰ８、ＹＥＳ）、終了する。
【００８１】
以上のように構成することによって、動き検出用信号値算出部６１から出力される動き検出用信号値が、オフセットが抑制されたものとなる。そのため、動き検出部６２が、精度よく動きを検出することが可能となる。特に、動き検出部６２が、オフセットによって動きがあると誤認することを抑制することが可能となる。したがって、より適正な動き対応画像処理を、現フレームの入力画像に施すことが可能となる。
【００８２】
さらに、動き検出部６２が、入力される動き検出用信号値のオフセットの影響を考慮して、検出方法を変更する（例えば、オフセットに応じて図９の閾値ｔｈａやｔｈｂを変更する）などの煩雑な動作をする必要がなくなる。そのため、一通りの検出動作によって、動きを検出することが可能となる。したがって、容易かつ迅速に動きを検出することが可能となる。
【００８３】
なお、全体的な動作として説明するために、画像単位でＳＴＥＰ１〜ＳＴＥＰ８の処理が実行されるように説明したが、現実的には、画素単位で（注目画素毎に）ＳＴＥＰ１〜ＳＴＥＰ８の処理が実行されることとしても構わない。ただし、少なくともＳＴＥＰ２において、注目画素の画像比較信号値の算出のために、注目画素の画素値（輝度値）だけでなく、その周辺の画素の画素値（輝度値）をも読み出して、利用することとする。
【００８４】
また、ＳＴＥＰ２とＳＴＥＰ３の動作の順を入れ替えても構わないし、並列的に処理しても構わない。また、絶対値化部６１２と平滑化部６１３とを入れ替え、それぞれの処理の前後を入れ替えても構わない。絶対値化部６１２と平滑化部６１３とを入れ替えたとしても、上記のオフセットは発生し得るため、本発明の効果を得ることができる。
【００８５】
また、入力画像生成状況情報が、複数の情報を含んでも構わない。例えば、図５に示したようなイメージセンサ２の画素値の増幅度の他に、撮像時の露光時間の情報などを含んでも構わない。なお、露光時間が長いと、暗電流ノイズ成分に起因するオフセットが大きくなる。そのため、露光時間を考慮して補正値を設定する場合は、露光時間が長いほど図５に示した関数ｆL，ｆSの切片を大きくすると好ましい。また、図５では補正値を算出するための関数ｆL，ｆSを一次関数としたが、他の関数としても構わないし、折れ線状などの複数の関数が接続されたものとしても構わない。
【００８６】
また、入力画像及び出力画像の各画素が、Ｒ（赤）Ｇ（緑）Ｂ（青）やＹＵＶなどの複数種類の画素値を備えるものとしても構わない。そして、動き検出用信号値算出部６１が、これらの画素値を用いて動き検出用信号値を算出するための画素値（上記例の輝度値）を算出するものとしても構わないし、これらの画素値のいずれかを直接的に用いて動き検出用信号値を算出することとしても構わない。
【００８７】
一方、入力画像及び出力画像が、図１０に示すようなベイヤ配列の画像であっても構わない。図１０は、ベイヤ配列の一例を示す図である。図１０では、画素位置を座標［ｘ，ｙ］で示しており、右方ほどｘの値が大きく下方ほどｙの値が大きくなるように示している。また、最も左上の画素の座標を［０，０］とし、［２（ｎ−１），２（ｍ−１）＋１］の画素に画素値Ｒ、［２（ｎ−１）＋１，２（ｍ−１）］の画素に画素値Ｂ、［２（ｎ−１），２（ｍ−１）］及び［２（ｎ−１）＋１，２（ｍ−１）＋１］の画素に画素値Ｇが、それぞれ備えられる（ただし、ｎ及びｍは自然数）。
【００８８】
本例の場合、動き検出用信号値算出部６１が、ある画素の動き検出用信号値を算出するための画素値（上記例の輝度値）を算出する際に、ある画素及びその周囲の画素の画素値を利用することとしても構わない。
【００８９】
また、動き対応画像処理部６３に、現フレームの入力画像と前フレームの出力画像とが入力される構成について説明したが、実行する動き対応画像処理の内容次第では、これ以外の構成としても構わない。例えば、現フレームの入力画像のみが、動き対応画像処理部６３に入力される構成であっても構わない。
【００９０】
また、動き検出用信号値算出部６１が、現フレームの入力画像と前フレームの出力画像とに基づいて動き検出用信号値を算出する構成について説明したが、前フレームの出力画像の代わりに、前フレームの入力画像を用いることとしても構わない。この場合、図２の破線の矢印で示すように、入力画像がフレームメモリ２０に記憶される構成として、動き検出用信号値算出部６１に前フレームの入力画像が読み出される構成としても構わない。
【００９１】
＜＜第２実施形態＞＞
次に、本発明の撮像装置の第２実施形態について図面を参照して説明する。なお、第１実施形態の説明と同様に、画像処理部６内の動き対応画像処理が行われる要部の構成及び動作について中心に説明する。なお、本実施形態は、所定の種類の画素値毎に（例えば、ＲＧＢ、ＹＵＶのそれぞれについて）動き検出用信号値を算出する点で、第１実施形態と異なる。そのため、以下この点について詳細に説明し、他の第１実施形態と同様となる部分については説明を省略する。なお、以下では説明の具体化のために、ＲＧＢのそれぞれの画素値毎に動き検出用信号値を算出する場合を例に挙げて説明する。
【００９２】
図１１は、第２実施形態に係る撮像装置に備えられる画像処理部の要部の構成を示すブロック図である。図１１に示すように、画像処理部６は、画素値Ｒから動き検出用信号値を算出する動き検出用信号値算出部６１Ｒと、画素値Ｇから動き検出用信号値を算出する動き検出用信号値算出部６１Ｇと、画素値Ｂから動き検出用信号値を算出する動き検出用信号値算出部６１Ｂと、それぞれの動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂから出力されるそれぞれの動き検出用信号値に基づいて動き値を算出して出力する動き検出部６２ａと、動き検出部６２ａから出力される動き値に対応した画像処理を現フレームの入力画像に施し現フレームの出力画像を生成する動き対応画像処理部６３ａと、を備える。
【００９３】
動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂのそれぞれの構成及び動作については、第１実施形態において説明した動き検出用信号値算出部６１（図２参照）と同様となるため、省略する。また、図１１に示す画像処理部６の要部の全体的な動作についても、第１実施形態において説明した動作（図３参照）と同様となるため、省略する。
【００９４】
本実施形態では、それぞれの動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂが、それぞれ特定の種類の画素値に基づいて動き検出用信号値を出力する。ただし、それぞれに備えられる補正値算出部６１６が、それぞれが処理する画素値の特性に応じた補正値を算出する。これについて、図面を参照して説明する。図１２は、補正値の算出方法の一例を示すグラフであり、第１実施形態について示した図５に相当するものである。
【００９５】
図１２は、ある入力画像生成状況（ＩＳＯ感度が８００）における、それぞれの画素値の補正値の算出方法を示している。図１２に示すように、画素値の増幅度を所定の値に設定しても、画素値の種類によって若干差異があるなどの理由により、補正値を算出するための関数ｆR，ｆG，ｆBが異なるものとなる。なお、これらの関数ｆR，ｆG，ｆBは、上述のように実験的に求めることが可能である。なお、図１２では関数ｆR，ｆG，ｆBの全てが異なる場合について示しているが、これらのいずれかまたは全てが偶然的に略同一となる場合があったとしても構わないものとする。
【００９６】
このように構成することで、それぞれの画素値の特性に応じた補正値を、それぞれ算出することが可能となる。そのため、オフセットをさらに精度良く低減させた動き検出用信号値を得ることが可能となる。したがって、さらに適正な動き対応画像処理を、現フレームの入力画像に施すことが可能となる。
【００９７】
また、入力画像が、ある種類の画素値だけ増幅または減衰させる処理（例えば、ホワイトバランス処理）が施されたものである場合の補正値の算出方法について、図１３を参照して説明する。図１３は、補正値の算出方法の一例を示すグラフであり、図１２に相当するものである。なお、図１３は、ある入力画像生成状況（ＩＳＯ感度が８００）で得られた画像に対して、画素値Ｒのみを増幅する処理が施されて生成された入力画像の補正値の算出方法の一例について示したものである。
【００９８】
図１３に示すように、ある画素値Ｒのみを増幅して生成された入力画像の補正値を算出する場合、例えば、増幅しなかった場合の関数ｆRの切片を大きくした関数ｆR＋を用いる。なお、関数ｆR、ｆR＋の傾きは、同様のものとしても構わない。また、減衰させる場合は、関数の切片を小さくしても構わない。なお、この画素値の種類毎の増幅または減衰の処理を、画像処理部６が行うこととしても構わない。
【００９９】
このように構成することで、ある種類の画素値だけを増幅または減衰させたとしても、これに応じてある種類の画素値の補正値を増減することが可能となる。そのため、オフセットをさらに精度良く低減させた動き検出用信号値を算出することが可能となる。したがって、さらに適正な動き対応画像処理を、現フレームの入力画像に施すことが可能となる。
【０１００】
なお、入力画像及び出力画像を、図１０に示したようなベイヤ配列の画像としても構わない。また、注目画素に含まれる画素値の種類に応じて、いずれかの動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂを駆動させ、いずれかの動き検出用信号値を算出することとしても構わない。この場合、注目画素と、その付近の画素であり注目画素の画素値と同じ種類の画素値を備える画素と、のそれぞれの画素値を用いて動き検出用信号値を算出することとしても構わない。
【０１０１】
このように構成すると、色同時化処理（補間処理などによりそれぞれの画素に複数種類の画素値を備えさせる処理）を施す前のベイヤ配列の入力画像に対して、動き対応画像処理を行うことが可能となる。そのため、入力画像のある画素に含まれるノイズが色同時化処理によって周囲の画素に広がる前に、当該入力画像に動き対応画像処理を施すことによって、当該ノイズを低減することが可能となる。
【０１０２】
また、入力画像及び出力画像を、各画素がＲＧＢの各画素値を備えた画像としても構わない。このような画像は、単板式のイメージセンサから得られたベイヤ配列の画像に色同時化処理を施したり、三板式などの複数のイメージセンサを備える撮像部を用いて撮像を行ったりすることで得ることができる。そして、注目画素の動き値を算出する際に、動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂのそれぞれを駆動させ、得られる３つの動き検出用信号値を総合した１つの結果（例えば、平均化や最大値選択、最小値選択などを行うことで得られる結果）から、１つの動き値を算出することとしても構わない。
【０１０３】
このように構成すると、入力画像の画素値の種類に関係なく、１つの動き対応画像処理が施されることとなる。そのため、特定の種類の画素値に対して特異な動き対応画像処理が施されることが抑制される。したがって、動き対応画像処理によって色ずれが発生することを抑制することが可能となる。
【０１０４】
さらに、入力画像及び出力画像がベイヤ配列の画像であっても、これと同様の構成として同様の効果を得ることが可能である。ただしこの場合、それぞれの動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂが、補間処理などによってそれぞれの画素に対応する画素値を算出し、それぞれの画素に対して３つの動き検出用信号値が算出されるものとする。
【０１０５】
また、上記説明では、一例として画素値の種類をＲＧＢとしたが、ＹＵＶなどの他の種類であっても構わない。また、第１実施形態において説明したように、動き対応画像処理部６３ａが実行する動き対応画像処理の内容次第で、動き対応画像処理部６３ａに入力させる画像の種類を適宜変更しても構わない。また、動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂが、前フレームの出力画像の代わりに前フレームの入力画像を用いて動き検出用信号値を算出する構成としても構わない。この場合、図１１の破線の矢印で示すように、入力画像がフレームメモリ２０に記憶される構成として、動き検出用信号値算出部６１Ｒ，６１Ｇ，６１Ｂに前フレームの入力画像が読み出される構成としても構わない。
【０１０６】
＜＜変形例＞＞
なお、上述した動き対応画像処理は、動画の撮像時のみならず、静止画の撮像時に利用することも可能である。静止画の撮像時に利用する場合、少なくとも複数フレームの画像を撮像することとする。
【０１０７】
また、撮像装置だけでなく、再生装置に適用することも可能である。即ち、入力画像が記録媒体から読み出されたものであっても構わない。ただし、入力画像生成状況情報が入力画像に関連付けられるなどして、再生時に利用可能であることとする。
【０１０８】
また、本発明の各実施形態において、画像処理部６の動作がマイコンなどの制御装置によって行われることとしても構わない。さらに、このような制御装置によって実現される機能の全部または一部をプログラムとして記述し、該プログラムをプログラム実行装置（例えばコンピュータ）上で実行することによって、その機能の全部または一部を実現するようにしても構わない。
【０１０９】
また、上述した場合に限らず、図１の撮像装置１、図２及び図１１の画像処理部６は、ハードウェア、あるいは、ハードウェアとソフトウェアの組み合わせによって実現可能である。また、ソフトウェアを用いて撮像装置１や画像処理部６を構成する場合、ソフトウェアによって実現される部位についてのブロック図は、その部位の機能ブロック図を表すこととする。
【０１１０】
以上、本発明の実施形態についてそれぞれ説明したが、本発明の範囲はこれに限定されるものではなく、発明の主旨を逸脱しない範囲で種々の変更を加えて実行することができるものである。
【産業上の利用可能性】
【０１１１】
本発明は、撮像により得られる画像に対して画像処理を施す撮像装置及びその撮像方法に適用可能である。
【符号の説明】
【０１１２】
１    撮像装置
２    イメージサンサ
３    レンズ部
４    ＡＦＥ
５    集音部
６    画像処理部
６１，６１Ｒ，６１Ｇ，６１Ｂ  動き検出用信号値算出部
６１１  差分値算出部
６１２  絶対値化部
６１３  平滑化部
６１４  画像選択部
６１５  画素値取得部
６１６  補正値算出部
６１７  補正部
６２，６２ａ  動き検出部
６３，６３ａ  動き対応画像処理部
７    音声処理部
８    圧縮処理部
９    ドライバ部
１０    外部メモリ
１１    伸長処理部
１２    画像出力回路部
１３    音声出力回路部
１４    ＣＰＵ
１５    メモリ
１６    操作部
１７    ＴＧ部
１８    バス
１９    バス
２０    フレームメモリ
Ｉ      撮像部
ｍｕｌ  乗算部
ｓｕｂ  減算部
【図１】
2010245936.tif 000004
【図２】
2010245936.tif 000005
【図３】
2010245936.tif 000006
【図４】
2010245936.tif 000007
【図５】
2010245936.tif 000008
【図６】
2010245936.tif 000009
【図７】
2010245936.tif 000010
【図８】
2010245936.tif 000011
【図９】
2010245936.tif 000012
【図１０】
2010245936.tif 000013
【図１１】
2010245936.tif 000014
【図１２】
2010245936.tif 000015
【図１３】
2010245936.tif 000016