(57)【要約】【課題】異なる距離にある複数の被写体を撮像して各被写体の鮮明な映像を形成する。【解決手段】異なる距離にある複数の被写体をそれぞれ合焦して撮像する映像入力手段と複数の異なる解像度レベルでの表現値集合を生成する変換手段とその表現値集合のテクスチャ特徴量を演算する手段とを持ち、その表現値集合のテクスチャ特徴量により最も鮮明な領域を判定する手段により最も鮮明な画素または領域を抽出し、この抽出した画素または領域を結合して被写体の映像を形成する手段を備えている。本発明の映像形成装置により形成される映像は、最も鮮明とされた画素から構成されているので全体にすべての距離にある被写体が鮮明に映し出される。【選択図】  図１
2005202907.tif 000002
【特許請求の範囲】
【請求項１】
異なる距離にある複数の被写体をそれぞれ合焦して撮像する映像入力手段１００と、各映像の画素値から各映像の複数の異なる解像度レベルでの表現値集合を生成する変換手段２００と、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量を演算する手段３００と、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量により各映像から最も鮮明な領域を判定する手段４００と、前記領域を結合して被写体の映像を形成する手段５００を備えたことを特徴とする映像形成装置。
【請求項２】
異なる距離にある複数の被写体をそれぞれ合焦して撮像する映像入力手段１００と、各映像を複数の領域に分割する手段６００と、前記分割手段により分割されたブロックの画素値から前記ブロックごとに複数の異なる解像度レベルでの表現値集合を生成する変換手段２００と、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量を演算する手段３００と、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量により各映像から最も鮮明な領域を判定する手段４００と、前記領域を結合して被写体の映像を形成する手段５００を備えたことを特徴とする映像形成装置。
【請求項３】
前記画素値は前記画素のＲＧＢのカラー値であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項４】
前記画素値は前記画素の輝度値または色差値であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項５】
前記画素値は前記画素の色相、彩度または明度値であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項６】
前記画素値を複数の異なる解像度レベルでの表現値集合を生成する変換手段はウェーブレット変換であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項７】
前記ウェーブレット変換手段は、離散値系ウェーブレット変換であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項８】
前記ウェーブレット変換手段は、ガボール・ウェーブレット関数に基づいた変換であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項９】
前記画素値を複数の異なる解像度レベルでの表現値集合を生成する変換手段はハー変換であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【請求項１０】
前記画素値を複数の異なる解像度レベルでの表現値集合を生成する変換手段はアダマール変換であることを特徴とする請求項１または請求項２に記載の映像形成装置。
【発明の詳細な説明】
【発明の詳細な説明】
【技術分野】
【０００１】本発明は、異なる距離にある被写体群を撮像した映像がら、合焦した各被写体の映像を形成する装置に関する。
【背景技術】
【０００２】光学式またはデジタルカメラやビデオカメラで被写体を撮像した場合、焦点距離の長いレンズを用いて近距離の被写体物を撮像し、それに合焦すれば得られた遠距離にある背景像はボケを生じて写しだされる。逆に遠距離の背景に合焦すれば近距離の被写体物はぼけた像になってしまう。このように有限の開口径をもつレンズで撮像した映像や画像には奥行きに関する情報がぼけとして現れる。この欠点を解消するために焦点距離の短い広角レンズを用いて近距離および遠距離の被写体の全てにピントを合わせる方法が考えられるが、この場合には用途に適さないことがあり、あらゆる場面で利用できる解決方法にならない。
【発明の開示】
【発明が解決しようとする課題】
【０００３】以上に述べた問題点を解消するために、同一の光学系で焦点を遂次ずらして画像メモリに入力し、画像処理をして全領域について焦点の合った画像を合成する手法が提案されている。しかしこのような手法を採った場合は逐次に焦点をあわせるための複雑な機構の開発が必要となる。【０００４】一方、特開平３−８０６７６号公報にあるように３つの異なる距離、すなわち近距離、中距離、それに遠距離に合焦した１つの撮影系を使ってそれぞれの被写体を撮像して、後で近距離、中距離、遠距離にピントのあった映像を各映像の高周波成分を利用して抽出し合成する方式も考えられている。【０００５】また、特開２００１−２９８６５７号公報に、近距離、中距離、それに遠距離の３つの異なる距離に合焦した撮影系を使ってそれぞれの被写体を撮像して、近距離、中距離、遠距離にピントのあった映像を各映像の輝度値とその移動平均値との差波形を利用して抽出し合成する方式も考えられている。【０００６】しかし、どちらの映像形成装置においてこのような方法を実現する上で種々の問題点が残されている。高周波成分の多い領域を各映像から抽出して合成する場合の問題点の一つは、ノイズ等の外乱を含む映像に対して良好な合焦した映像を得ることは難しいことである。それはノイズの高周波成分と合焦によるそれとが区別できないことに起因し、同じような欠点は各映像の輝度値とその移動平均値との差である差波形を利用した場合も残っている。【０００７】高周波成分の多い領域を各映像から抽出して合成する場合の第２の問題点は、周波数の算出に一般的に使われているＦＦＴあるいはＤＣＴは周波数の分離精度を良くするために分割するブロックサイズをある程度大きくする必要があり、そのためブロックサイズを一定以下に小さくすることができない。またこれらの計算方法では有限な領域から周波数成分の算出するため問題点も内包している。【０００８】本発明は、このような問題点を解決するためになされたもので、異なる距離にある被写体に合焦した複数の映像を容易にしかも正確に合成して異なる距離にある各被写体の鮮明な映画像を形成する映像形成装置を提供することをその課題とする。
【課題を解決するための手段】
【０００９】本発明は、異なる距離にある複数の被写体をそれぞれ合焦して撮像する映像入力手段１００と、各映像の画素値から各映像の複数の異なる解像度レベルでの表現値集合を生成する変換手段２００と、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量を演算する手段３００と、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量により各映像から最も鮮明な領域を判定する手段４００と、前記領域を結合して被写体の映像を形成する手段５００を備えたことを特徴としている。なお前記最も鮮明な領域の範囲は複数の画素と１画素の両方を含む。【００１０】  この映像形成装置より得られた映像は各画素それぞれが、異なる距離の映像のうち最も鮮明とされた映像の画素で構成されているので、全体としてすべての距離にある被写体が鮮明に映し出される。本発明に係る装置では、各画素値に対して複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量を各距離の映像に対して形成し、その表現値集合のテクスチャ特徴量に基づき各距離の映像の各画素のうちどれが最も鮮明であるかを判定しているので、複数の異なる解像度レベルでの表現値集合のもつ作用効果とテクスチャ特徴量による作用効果の相乗によりノイズなどの外乱が含まれていても正確に鮮明度の高い映像を形成することができる。【００１１】  本発明の装置における方法と、周波数の性質を利用した場合や各映像の輝度値とその移動平均値との差である差波形を利用した場合とを比較すると、周波数を求めるために多数のブロックに分割するが必要なくまた周波数の分離精度面から生じるブロック分割サイズの制限がない。【００１２】そして周波数成分や各映像の輝度値とその移動平均値との差波形を利用して合成する方法では映像に関する単一（または少数）の特徴情報しか持たないが、テクスチャ特徴量による場合は、映像や画像の粗さや細かさ、画像の明確さ、平坦度など画像の特徴を複合的または総合的に評価・判断できる指標を与えることができ、さまざまな周波数成分を含んだ自然画像の映像やノイズなどの外乱を含んだ映像に対しても効果的に鮮明度の高い映像の提供をすることができる。
【発明の実施するための最良の形態】
【００１３】以下に図面を参照して本発明を詳細に説明する。
図１は各距離の映像からピントの合った部分を抽出してすべての被写体に合焦した鮮明な映像を形成する本発明の映像形成装置の構成をブロック図で示したものである。本発明は、まず図１に示す映像入力手段１００により図１０に示すように異なる複数の距離にある被写体、すなわち近距離にある木Ｔ、中距離にある人物Ｐ、及び遠距離にある山Ｍ、をそれぞれ撮影して各被写体に合焦した各映像を出力する。
【００１４】次に映像入力手段１００によりメモリに取込まれた各映像に対して、複数の異なる解像度レベルでの表現値集合を生成する変換手段２００を実行し、前記表現値集合に対しテクスチャ特徴量を演算する手段３００を実行させる。前記テクスチャ特徴量は画素若しくはブロック単位で演算され、画素若しくはブロック単位の前記テクスチャ特徴量より各映像から最も鮮明な領域を判定する手段４００を用いて、最も鮮明な領域を判定する。当然に前記最も鮮明な領域の定義には複数の画素領域のみならず１つの画素も含んでいる。このようにして決定された画素若しくはブロックを結合して被写体の映像を形成する手段５００によって、全体としてすべての距離にある被写体が鮮明に映し出された映像を形成する。
【００１５】図２は異なる距離にある複数の被写体をそれぞれ合焦して撮像する映像入力手段１００から取込まれた各映像の情報容量が大きいため、一括の画像処理能力を越す場合に各距離の映像を分割して、ピントの合った部分を抽出してすべての被写体に合焦した鮮明な映像を形成する本発明の装置の構成をブロック図で示したものである。
【００１６】図５は１つ撮影系で近距離、中距離、それに遠距離の３つの異なる距離にある被写体に合焦する本発明の実施例１の映像入力手段１００の構成図を示している。この構成では近距離、中距離、それに遠距離の３つの異なる距離にある各被写体はビームスプリッタを介して３つの経路に分配される。分配された映像はレンズによりそれぞれ近距離、中距離、それに遠距離の３つの異なる距離にある主要な被写体に合焦した像を撮像する。３つの異なる合焦の操作は焦点調節機構１０３が担う。
【００１７】前記レンズを通過したそれぞれに近距離、中距離、それに遠距離の３つの異なる合焦した像はＣＣＤまたは２次元イメージセンサ１０４により電気的信号に変換され、映像処理１０５を経て各距離に合焦した図１０に示す近映像１、中映像２、遠映像３がメモリ１０６に記憶される。
【００１８】図１０は、図５のメモリ１０６に記憶された近距離にある木の被写体Ｔ、中距離にある人及び遠距離にある山の被写体をそれぞれＰ、Ｍを同時に撮像し、各距離に合焦した近映像１、中映像２、遠映像３を示している。
【００１９】図３は近距離、中距離、それに遠距離の３つの異なる距離ごとに合焦した撮影系の本発明の実施例２である。この実施例２では、映像入力手段１００と各映像の画素値を複数の異なる解像度レベルでの表現値集合を生成する変換手段２００と前記表現値集合のテクスチャ特徴量を演算する手段３００とは並列に動作する。
【００２０】図４は近距離、中距離、それに遠距離の３つの異なる距離ごとに合焦した撮影系を時分割に動作させる本発明の実施例３である。この実施例３では、映像入力手段１００と各映像の画素値を複数の異なる解像度レベルでの表現値集合を生成する変換手段２００と前記表現値集合のテクスチャ特徴量を演算する手段３００とは、一定時間間隔に切替わり動作する。
【００２１】なお、図面には記載していないが各映像の画素値から複数の異なる解像度レベルでの表現値集合を生成する変換手段２００の実行に先立ち、合焦した各映像は光学系の光軸のずれ、傾きあるいは倍率（大きさ、ひずみ）に相違があると、各映像の中心、傾き、大きさが相違することにより映像の合成ができない場合が生じたり或いは不正確な合成が生じたりするので、できればこれらの前処理を行なうことが望ましい。
【００２２】次に近距離、中距離、それに遠距離の３つの異なる距離に合焦した各映像の画素値から最も鮮明な領域（画素）を抽出し、合成することにより鮮明な映像を得るまでの過程を説明する。
図１または図２に示した本発明の前記複数の異なる解像度レベルでの表現値集合を生成する変換手段２００は、請求項６に記載のウェーブレット変換、請求項９に記載のハー変換、あるいは請求項１０に記載のアダマール変換である。ウェーブレット変換を適用する場合、請求項７に記載の離散値系ウェーブレット変換あるいは請求項８に記載のガボール・ウェーブレット関数に基づいた変換が適切である。
【００２３】画像処理分野でよく使用されるフーリエ変換を用いる手法では、映像の局所的な波の周波数成分はノイズ成分に埋もれてしまうが、請求項８に記載のガボール・ウェーブレット関数に基づいた変換は、この種の局所的な波の周波数成分を検出するのに適する。また、映像処理を実時間で行うには計算量の軽減が課題になるが、そのような場合は、精度を少し犠牲にすれば、請求項９に記載のハー変換、あるいは請求項１０に記載のアダマール変換を採用することで実時間の映像処理も可能となる。
【００２４】図６はメモリに取込まれた各映像に対し複数の異なる解像度レベルでの表現値集合を生成する変換手段２００として、ウェーブレット変換による多重解像度解析を適用した実施例４を模式的に表したものである。図６の左図が１段階のウェーブレット変換を示し、右図は第１段階ウェーブレット変換から生成されたサブバンド成分にさらに２段階、３段階のウェーブレット変換を施したものを示している。サブバンドＬＬ１成分には元映像における低周波成分が抽出され、ＨＬ１成分には元映像の水平方向の高周波成分が、ＬＨ１成分には元映像の垂直方向の高周波成分が、ＨＨ１成分には元映像の対角方向の高周波成分が抽出される。言い換えるならば、それぞれ水平方向、垂直方向、斜め方向に画素値の変動の大きな領域（エッジ情報）を抽出していることに相当している。このウェーブレット変換の性質は不連続な境界の精度よい抽出を可能にし、正確に鮮明な画素を決定するのに大きく寄与している。
【００２５】図１１は近距離、中距離、それに遠距離の３つの映像の画素値に対し、複数の異なる解像度レベルでの表現値集合を生成する変換手段２００として１段階の多重解像度解析を適用した実施例４をより詳細に表したものである。第１段階のサブバンド成分であるＬＬ１成分、ＨＬ１成分、ＬＨ１成分、ＨＨ１成分ごとのテクスチャ特徴量が求められ、このテクスチャ特徴量から各映像のうち最も鮮明な画素を決定していく。この図ではすべてのサブバンド成分のテクスチャ特徴量を演算して判定しているが、映像の特徴によっては、ＬＬ１成分のみで十分に最も鮮明な画素が決定できる場合もある。この場合、計算量は全体から決定する場合の４分の１に軽減され実時間の処理に適する。
【００２６】今度は前記表現値集合のテクスチャ特徴量を演算する手段３００について図７から図９までの図と、図１２を用いて説明する。前記表現値集合のテクスチャ特徴量を演算する手段３００、すなわち実施例４のサブバンド成分のテクスチャ特徴量を演算するには同時生起行列（または共起行列という）を必要とする。
【００２７】このために、まず図１２のステップＳ１でサブバンド成分のブロックサイズＬ、同時生起行列の演算に必要となる相対的な位置ｄ（方向と距離をもつベクトル量）、サブバンド成分を階調化するための量子化ステップ量を設定する。図７は、メモリに格納されてぃる近（中、遠）映像のウェーブレット変換による多重解像度解析から得られた符号２０１のサブバンド成分ＨＬ１に適用したものを示しており、テクスチャ特徴量の演算対象となるブロック４のサイズは３×３の大きさとしている。
【００２８】図１２のステップＳ３において、各映像のテクスチャ特徴量の演算対象ブロック４のサブバンド成分は量子化操作によってｑ階調のサブバンド成分量に変換される。このステップＳ３で最小量子化量以下のサブバンド成分値はゼロ（０）値となるため、自動的にノイズ成分は軽減・除去される効果が働く。次のステップＳ４では、図８に示すようなテクスチャ特徴量の演算対象ブロック４のｑ階調のサブバンド成分量から、階調値ｉの点から相対的な位置がｄである点の階調値がｊである割合Ｍｄ（ｉ，ｊ），（ｉ，ｊ＝０，１，・・・，ｑ−１）をｉｊ要素とする同時生起行列を求める。
【００２９】図９は、図８に示す３つの階調値（０、１、２）を持つ量子化された複数の異なる解像度レベルでの表現値集合（サブバンド成分）の階調値６から構成されるテクスチャ特徴量の演算対象ブロック４に対して、水平方向上にあって左から右にｄ＝１の相対距離をもつ表現値の階調値のみを考えて作成された生起行列の要素値Ｍｄ（ｉ，ｊ）の例を示している。点線で囲まれた階調値（２，１）の対は、図８では１組しか現れないので、図９の生起行列の（ｉ，ｊ）＝（２，１）の要素値７のＭｄ（２，１）は１となる。ここで、図９の符号５はテクスチャ特徴量の演算対象ブロックの局所座標、符号６は映像のサブバンド成分の量子化された階調値を表し、図９の符号７は同時生起行列の要素値Ｍｄ（ｉ，ｊ）である。
【００３０】次のステップＳ５では、図９に示す同時生起行列から複数個のテクスチャ特徴量を算出する。代表的なテクスチャ特徴量として角２次モーメント、コントラスト、エントロピ、相関、分散などを含め１３種類の選択が考えられる。しかしテクスチャ特徴量に基づき各距離の映像の画素若しくはブロックのうち最も映像が鮮明な領域を画素若しくはブロックごとに求める上で、これらのテクスチャ特徴量をすべて用いる必要はなく、映像の性質に応じて選択すればよい。一般的な映像の場合は角２次モーメント、コントラスト、エントロピを選択する。
【００３１】角２次モーメントｆ１は式１から計算され、表現値集合の変化の乏しい度合いを示す。この値は階調値の変化が乏しいと同時生起行列の要素値７のＭｄ（ｉ、ｊ）に偏りが生じてｆ１は大きな値になる。
【数１】
2005202907.tif 000003
コントラストｆ２は式２から計算され、ｆ２は局所的な変化が大きい場合に大きな値になる。
【数２】
2005202907.tif 000004
エントロピｆ３は式３から計算され、表現値集合の複雑さの測度を表し、表現値集合が偏りなく現れる場合は大きな値になる。
【数３】
2005202907.tif 000005
【００３２】相関ｆ４は式４から計算され、表現値集合に一様な部分が多いとｆ４は大きな値をとり、ランダムノイズのように広い帯域で不規則データが多く含まれる場合にｆ４は小さくなる。したがってステップ６の判定の項目に相関ｆ４を入れることでノイズなどの外乱の影響を少なくできる。
【数４】
2005202907.tif 000006
ここでそれぞれｉ、ｊ方向の平均階調値をμｘ、μｙで表し、数５及び数６から計算される。同様にｊ、ｊ方向の偏差をσｘ、σｙで表し、数７から計算される。
【数５】
2005202907.tif 000007
【数６】
2005202907.tif 000008
【数７】
2005202907.tif 000009
【００３３】ホモジニティｆ５は式８から計算し、局所的に変化に乏しいときに大きな値になる。
【数８】
2005202907.tif 000010
その他に分散、総和平均、総和分散、総和エントロピ、差分分散、差分エントロピ、相関情報測度のテクスチャ特徴量も選択できる。
【００３４】図１２のステップＳ６では各映像の画素若しくはブロックごとに求めた前記テクスチャ特徴量から、各映像の画素若しくはブロックから最も鮮明な映像を決定する。この決定は前記テクスチャ特徴量のうち１つの項目、例えばコントラストｆ２のみから決定してもよいし、あるいは角２次モーメントｆ１、コントラストｆ２とエントロピｆ３の３つの組合せのように複数個の項目から総合的に評価し決定してもよい。
【００３５】さらに各映像の鮮明な領域と映像がぼけており鮮明でない領域において、各映像の前記コントラストｆ２の前記テクスチャ特徴量分布を取りその分布状態を比較すると、後者の領域は平坦な分布やまばら分布を示し明らかに分布状態は異なる。この事実を利用すれば、このステップＳ６で前記テクスチャ特徴量の単独または複数の組合せにより各映像の画素若しくは領域のうち最も鮮明な映像を決定するだけでなく、画素と画素近傍、あるいは領域と領域近傍の前記テクスチャ特徴量の分布を求め、その分布も考慮して各映像の画素若しくは領域のうち最も鮮明な映像を決定すればいっそう正確度は向上する。
【００３６】また、ステップＳ６で求めた各画素若しくは領域のデータは、最も鮮明な各映像の画素若しくは領域の画素値を直接に表示用のメモリに格納してもよいが、各画素若しくは領域を識別する記号や数字に置換して、抽出された各画素若しくは領域に対応する識別記号や数字だけをメモリに記録し、合成するときその識別記号や数字を参照して対応する映像データを読み出すようにしてもよい。
【００３７】以上の説明は映像データが画素値（カラー画像であれば一般的にはＲ、Ｇ、Ｂ値）として述べてきたが、映像データが請求項４項の輝度値Ｙまたは色差値Ｉ、Ｑと請求項５項の明度値Ｖまたは色相、彩度である場合でも、前記複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量に基づいて最も鮮明な画素または領域を求める基本的な過程（プロセス）は変わらない。
【００３８】各映像の画素の輝度値Ｙの複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量から合焦した鮮明な画素または領域を求める場合、ＲＧＢのカラー画像のＲＧＢ画素値からＮＴＳＣ方式の輝度値Ｙを求めるには数２３が使われる。ここでＩとＱは色差値である。
【数２３】
2005202907.tif 000011
また請求項５項に記載の色相、彩度、明度値ＶについてはＲＧＢ画像からＨＳＶ値への変換はやや複雑ではあるけれども変換の式が考案されている。
【発明の効果】
【００３９】以上説明したように、本発明によれば各画素それぞれが、異なる距離の映像のうち最も鮮明とされた映像の画素で構成されているので、全体としてすべての距離にある被写体が鮮明に映し出される。本発明の装置では、各画素値に対して複数の異なる解像度レベルでの表現値集合のテクスチャ特徴量を各距離の映像に対して形成し、その表現値集合のテクスチャ特徴量に基づき各距離の映像の各画素のうちどれが最も鮮明であるかを判定しているので、複数の異なる解像度レベルでの表現値集合のもつ作用効果とテクスチャ特徴量による作用効果の相乗によりノイズなどの外乱が含まれていても正確に鮮明度の高い映像を形成することができる。
【００４０】本発明の装置における方法と周波数の性質を利用した場合や各映像の輝度値とその移動平均値との差である差波形を利用した場合とを比較すると、周波数を求めるために多数のブロックに分割する必要がなくまた周波数の分離精度面から生じるブロック分割サイズの制限がない。
【００４１】また周波数成分や各映像の輝度値とその移動平均値との差波形を利用して合成する方法では映像に関する単一（または少数）の特徴情報しか持たないが、テクスチャ特徴量による場合は映像や画像の粗さや細かさ、画像の明確さ、平坦度など画像の特徴を複合的または総合的に評価・判断できる指標を与えることができ、さまざまな周波数成分を含んだ自然画像の映像やノイズなどの外乱を含んだ映像に対しても効果的に鮮明度の高い映像の提供をすることができる。
【図面の簡単な説明】
【図１】各距離の映像からピントの合った部分を抽出してすべての被写体に合焦した鮮明な映像を形成する映像形成装置の構成をブロック図で示したものである
【図２】各距離の映像を分割してピントの合った部分を抽出してすべての被写体に合焦した鮮明な映像を形成する映像形成装置の構成をブロック図で示したものである。
【図３】近距離、中距離、それに遠距離の３つの異なる距離ごとに合焦した撮影系の実施例２を示したものである。
【図４】近距離、中距離、それに遠距離の３つの異なる距離ごとに合焦した撮影系を時分割に動作させる実施例３である。
【図５】１つ撮影系で近距離、中距離、それに遠距離の３つの異なる距離にある被写体に合焦する映像入力手段の実施例１の構成図を示している。
【図６】メモリに取込まれた各映像のウェーブレット変換による多重解像度解析を適用した実施例４を模式的に表したものである。
【図７】ウェーブレット変換による多重解像度解析がら得られた実施例４のサブバンド成分ＨＬ１のテクスチャ特徴量の演算対象ブロックを示している。
【図８】実施例４のサブバンド成分の階調値から水平方向について求めた同時生起行列の要素値７Ｍｄ（ｉ，ｊ）を説明した図である。
【図９】３つの階調値（０、１、２）のサブバンド成分の階調値６から作成された生起行列の要素値Ｍｄ（ｉ，ｊ）の例を示している。
【図１０】メモリ１０６に記憶された近距離の木の被写体Ｔ、中距離の人Ｐ及び遠距離にある山Ｍに合焦した近映像１、中映像２、遠映像３を示したものである。
【図１１】近距離、中距離、それに遠距離の３つの画素値にウェーブレット分解、テクスチャ特徴量演算、最も鮮明な領域の判定を適用した実施例４を示したものである。
【図１２】前記表現値集合のテクスチャ特徴量により各映像から最も鮮明な画素または領域を判定する手段を用いて最も鮮明な画素を判定し、すべての被写体が鮮明に映し出された映像を形成する流れの部分を示したフローチャート図である。
【符号の説明】
１      メモリ１０６に格納された近映像
２      メモリ１０６に格納された中映像
３      メモリ１０６に格納された遠映像
４      複数の異なる解像度レベルでの表現値集合の演算対象ブロック
５      局所座標
６      量子化された複数の異なる解像度レベルでの表現値集合の階調値
７      同時生起行列の要素値Ｍｄ（ｉ，ｊ）
２０１  ウェーブレット変換による多重解像度解析から得られたサブバンド成分ＨＬ１
【図１】
2005202907.tif 000012
【図２】
2005202907.tif 000013
【図３】
2005202907.tif 000014
【図４】
2005202907.tif 000015
【図５】
2005202907.tif 000016
【図６】
2005202907.tif 000017
【図７】
2005202907.tif 000018
【図８】
2005202907.tif 000019
【図９】
2005202907.tif 000020
【図１０】
2005202907.tif 000021
【図１１】
2005202907.tif 000022
【図１２】
2005202907.tif 000023