(57)【要約】  第１の視差調整部の出力の視差調整右目用信号、視差調整左目用信号のそれぞれの相関性または第１の視差調整部で算出された視差に基づいて、第１の乗算部、第２の乗算部において掛け合わせる係数Ｋ１、Ｋ２の値を制御する。これにより、フレームメモリを用いず、かつ、シーンチェンジの影響を受けずに、立体映像信号のノイズを効率よく低減する立体画像処理装置を提供する。
2010035492.tif 000002
【特許請求の範囲】
【請求項１】
立体映像信号の左目用信号を入力するための第１の入力端子と、
右目用信号を入力するための第２の入力端子と、
前記第１の入力端子および第２の入力端子から入力された左目用信号および右目信号の視差を調整し映像位置をずらす第１の視差調整部と、
前記第１の視差調整部から出力された視差調整左目用信号および視差調整右目用信号のノイズを低減するノイズ低減部と、
前記第１の視差調整部から出力される視差調整情報を受け取り、前記ノイズ低減部によりノイズ低減された前記視差調整左目用信号および前記視差調整右目用信号の視差を調整し映像位置をずらす第２の視差調整部と、を備え、
前記ノイズ低減部は、前記第１の視差調整部による視差をなくした前記視差調整左目用信号と前記視差調整右目用信号との信号レベルの差からノイズレベルを算出し、前記左目用信号と前記右目用信号の信号レベルからそれぞれ前記ノイズレベルを差し引いて立体映像信号中のノイズを低減させることを特徴とする立体画像処理装置。
【請求項２】
前記ノイズ低減部は、前記視差調整左目用信号、前記視差調整右目用信号の空間方向または時間方向の相関性を算出し、前記相関性が大きい場合には、ノイズ低減量を小さくし、前記相関性が小さい場合にはノイズ低減量を大きくすることを特徴とする請求項１に記載の立体画像処理装置。
【請求項３】
前記ノイズ低減部は、前記第１の視差調整部により算出される前記左目用信号および前記右目用信号の視差量が大きい場合には、ノイズ低減量を大きくし、前記視差量が小さい場合には、ノイズ低減量を小さくすることを特徴とする請求項１に記載の立体画像処理装置。
【請求項４】
前記ノイズ低減部は、
前記第１の視差調整部から出力された視差調整左目用信号の信号レベルから、前記第１の視差調整部から出力された視差調整右目用信号の信号レベルを差し引く第１の減算部と、
前記第１の減算部から出力された第１の減算信号に対して第１の係数を乗じる第１の乗算部と、
前記視差調整左目用信号の信号レベルから前記第１の乗算部から出力された第１の乗算信号の信号レベルを差し引く第２の減算部と、
前記視差調整右目用信号の信号レベルから前記視差調整左目用信号の信号レベルを差し引く第３の減算部と、
前記第３の減算部から出力された第２の減算信号に対して第２の係数を乗じる第２の乗算部と、
前記視差調整右目用信号の信号レベルから前記第２の乗算部から出力された第２の乗算信号の信号レベルを差し引く第４の減算部と、を備え、
前記第２の視差調整部は、前記第２の減算部の出力と前記第４の減算部の出力を入力とすることを特徴とする立体画像処理装置。
【請求項５】
前記第１の乗算部、第２の乗算部において掛け合わせる係数を、それぞれ前記視差調整左目用信号、前記視差調整右目用信号の空間方向または時間方向の相関性が大きい場合には小さな値に設定し、前記相関性が小さい場合には大きな値に設定することを特徴とする請求項４に記載の立体画像処理装置。
【請求項６】
前記第１の乗算部、第２の乗算部において掛け合わせる係数を、前記第１の視差調整部により算出される前記右目用信号および前記左目信号の視差量が大きい場合には大きな値に設定し、前記視差量が小さい場合には小さな値に設定することを特徴とする請求項４に記載の立体画像処理装置。
【請求項７】
立体映像信号の左目用信号および右目用信号の視差を調整し映像位置をずらす第１の視差調整ステップと、
前記第１の視差調整ステップで得られた視差調整左目用信号および視差調整右目用信号を用いてノイズ低減量を設定するノイズ低減量設定ステップと、
前記ノイズ低減量に基づいて、前記視差調整左目用信号および前記視差調整右目用信号のノイズを低減するノイズ低減ステップと、
前記第１の視差調整ステップで得られた視差調整情報を受け取り、前記ノイズ低減ステップにおいてノイズ低減された前記視差調整左目用信号および前記視差調整右目用信号の視差を調整し映像位置をずらす第２の視差調整ステップと、を備え、
前記ノイズ低減ステップは、前記第１の視差調整ステップで得られた視差をなくした前記視差調整左目用信号と前記視差調整右目用信号との信号レベルの差からノイズレベルを算出し、前記左目用信号と前記右目用信号の信号レベルからそれぞれ前記ノイズレベルを差し引いて立体映像信号中のノイズを低減させることを特徴とする立体画像処理装置のノイズ低減方法。
【請求項８】
前記ノイズ低減量設定ステップは、前記視差調整左目用信号、前記視差調整右目用信号の空間方向または時間方向の相関性を算出し、前記相関性が大きい場合には、ノイズ低減量を小さく設定し、前記相関性が小さい場合にはノイズ低減量を大きく設定することを特徴とする請求項７に記載の立体画像処理装置のノイズ低減方法。
【請求項９】
前記ノイズ低減量設定ステップは、前記第１の視差調整ステップで得られた前記左目用信号および前記右目用信号の視差量が大きい場合には、ノイズ低減量を大きく設定し、前記視差量が小さい場合には、ノイズ低減量を小さく設定することを特徴とする請求項７に記載の立体画像処理装置のノイズ低減方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体映像信号中のノイズを低減する立体画像処理装置および立体画像処理装置のノイズ低減方法に関するものである。
【背景技術】
【０００２】
一般に、２次元映像中のランダムノイズを主に対象としたノイズ低減装置は、図２に示すように、フレームメモリを持ち合わせ、入力信号レベルと出力信号レベルのフレーム差分をとり、入力信号レベルからフレーム差分のＫ倍を差し引くという巡回ノイズ低減装置が知られている（特許文献１）。【０００３】
ところが、この装置で立体映像信号として、左目用と右目用の２系統が並列に伝送される信号に対応しようとすると、左目用、右目用、それぞれについてノイズ低減装置が必要となり、特に、ノイズ低減を行う際に必要となるフレーム数の増加が見込まれる。【０００４】
また、立体映像信号に限らず、この種の装置では、シーンチェンジなどのフレームの前後で変化の大きい映像信号に対しては、フレーム差分が大きくなり、精度良いノイズ低減が実現できないことがある。【０００５】
つまり、従来の巡回型ノイズ低減装置では、立体映像信号に対応しようとすると、フレーム数の増加が見込まれる。また、シーンチェンジなどにフレーム差分が大きくなる場合では、精度良いノイズ低減が実現できないという課題があった。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許第３６１１７７３号公報
【発明の概要】
【０００７】
本発明の立体画像処理装置は、立体映像信号の左目用信号を入力するための第１の入力端子と、右目用信号を入力するための第２の入力端子と、第１の入力端子および第２の入力端子から入力された左目用信号および右目信号の視差を調整し映像位置をずらす第１の視差調整部と、第１の視差調整部から出力された視差調整左目用信号および視差調整右目用信号のノイズを低減するノイズ低減部と、第１の視差調整部から出力される視差調整情報を受け取り、ノイズ低減部によりノイズ低減された視差調整左目用信号および視差調整右目用信号の視差を調整し映像位置をずらす第２の視差調整部と、を備え、ノイズ低減部は、第１の視差調整部による視差をなくした視差調整左目用信号と視差調整右目用信号との信号レベルの差からノイズレベルを算出し、左目用信号と右目用信号の信号レベルからそれぞれノイズレベルを差し引いて立体映像信号中のノイズを低減させることを特徴とする。
【０００８】
このような構成により、左目用と右目用の２系統が並列に伝送される立体映像中のノイズ除去は、フレームメモリを用いず実現可能である。また、左目用と右目用の映像信号は、時間軸方向に同じタイミングで入力されるため、シーンチェンジなどの影響は受けにくい。これにより、効果的にノイズ低減を行うことが可能となる。
【０００９】
本発明の立体画像処理装置のノイズ低減方法は、立体映像信号の左目用信号および右目用信号の視差を調整し映像位置をずらす第１の視差調整ステップと、第１の視差調整ステップで得られた視差調整左目用信号および視差調整右目用信号を用いてノイズ低減量を設定するノイズ低減量設定ステップと、ノイズ低減量に基づいて、視差調整左目用信号および視差調整右目用信号のノイズを低減するノイズ低減ステップと、第１の視差調整ステップで得られた視差調整情報を受け取り、ノイズ低減ステップにおいてノイズ低減された視差調整左目用信号および視差調整右目用信号の視差を調整し映像位置をずらす第２の視差調整ステップと、を備え、ノイズ低減ステップは、第１の視差調整ステップで得られた視差をなくした視差調整左目用信号と視差調整右目用信号との信号レベルの差からノイズレベルを算出し、左目用信号と右目用信号の信号レベルからそれぞれノイズレベルを差し引いて立体映像信号中のノイズを低減させることを特徴とする。
【図面の簡単な説明】
【００１０】
【図１】図１は本発明の実施に形態における立体画像処理装置のノイズ低減に係わる部分のブロック図である。
【図２】図２は従来のノイズ低減装置のブロック図である。
【図３】図３は本発明の実施に形態における立体画像処理装置の視差量を補正する補正部のブロック図である。
【図４】図４は本発明の実施に形態における注目画素と周辺画素を示す図である。
【図５】図５は本発明の実施に形態における立体画像処理装置の補正係数を示す図である。
【図６】図６は本発明の実施に形態における立体画像処理装置のノイズ低減の動作を説明するための図である。
【図７Ａ】図７Ａは本発明の実施の形態における飛び出し領域を含む立体映像の左目用画像または右目用画像の例を示した図である。
【図７Ｂ】図７Ｂは本発明の実施の形態における画面の水平位置と立体映像の飛び出し量（視差）の関係を示した図である。
【図７Ｃ】図７Ｃは本発明の実施の形態における画面の水平位置と係数Ｋ１の関係を示した図である。
【図８】図８は本発明の実施の形態における立体画像処理装置のノイズ低減の手順を示すフローチャートである。
【発明を実施するための形態】
【００１１】
本発明の実施の形態について図面を用いて説明する。
【００１２】
（実施の形態）
図１に本発明の実施の形態における立体画像処理装置のノイズ低減に係わる部分のブロック図の一例を示す。この装置は、立体映像が左目用、右目用の２系統で入力されることを想定とする。本実施の形態における立体画像処理装置は、左目用信号と右目用信号の２つの映像信号をそれぞれ第１の入力端子である入力端子１と第２の入力端子である入力端子２の入力として、左目用信号と右目用信号の視差を調整する第１の視差調整部である視差調整部１０１と、視差調整部１０１から出力された視差の調整された視差調整左目用信号と視差調整右目用信号を入力とし、ノイズを低減するノイズ低減部１０９と、ノイズ低減部１０９でノイズが低減された視差調整左目用信号と視差調整右目用信号を入力とし、視差調整左目用信号と視差調整右目用信号の視差を調整する第２の視差調整部である視差調整部１０８とにより構成されている。またノイズ低減部１０９は、減算処理を行う減算部１０２、１０３と、減算部に接続され、入力された信号に所定の係数を乗算する乗算部１０４、１０５と、視差調整部１０１から出力された信号及び上述した乗算部１０４、１０５からの信号を入力として減算処理を行う減算部１０６、１０７と、減算部１０６、１０７とから構成されている。以下各構成について具体的に説明する。
【００１３】
まず、第１の視差調整部である視差調整部１０１について説明する。視差調整部１０１にて、左目用信号と右目用信号の映像位置を合わせるために、視差による右目用信号と左目信号との位置ずれを減少させ、ノイズがない場合に左目用と右目用との信号差分が０に限りなく近くなるようにする。
【００１４】
位置ずれを減少させる具体的な構成について図３を用いて説明する。図３は、本実施の形態における立体画像処理装置の視差量を補正する補正部のブロック図である。ラインメモリ３０１とラインメモリ３０２に、入力された左目用信号と右目用信号の信号データをそれぞれ格納する。左目用信号の格納された信号データを画面位置の左からＬ（１），Ｌ（２），…，Ｌ（ｎ）、右目用信号の格納された信号データを画面位置の右からＲ（１），Ｒ（２），…，Ｒ（ｎ）とすると（ｎは１ラインの画素数を表す）、右目用信号と左目用信号との位置ずれ量（視差）を求めるため、演算部３０３にて下記の相関性Ｓｐを求める式において最小となるｐを算出する。このｐは、上記位置ずれ量（画素）を意味する。
【００１５】
Ｓｐ  ＝  Σ｜Ｌ（ｉ）  −  Ｒ（ｉ＋ｐ）｜  （ｉ＝０，１，…，ｎ；  ｐ＝−ｉ，−ｉ＋１，…，ｎ−ｉ）
ラインメモリ３０４、３０５を用い、左目用信号に対して右目用信号の水平方向の位置をｐ画素ずらすことにより、視差調整が可能である。なお、上記で述べた視差調整部１０１は一例であり、例えば、ラインメモリ３０１、３０２を複数用いて相関性Ｓｐを算出することなどが考えられる。
【００１６】
次に、減算部１０２、１０３、１０６、１０７及び乗算部１０４、１０５の構成について説明する。視差調整左目用信号と、視差調整右目用信号について、それぞれ減算部１０２と減算部１０３で差分を算出し、乗算部１０４と乗算部１０５にて、所定の手段で算出された係数（Ｋファクター）Ｋ１，Ｋ２を上記差分に掛け合わせ、減算部１０６、１０７にて差し引くことにより、ノイズ低減を行う。ただし、減算部１０６，１０７の出力信号は、それぞれ視差調整部１０１の処理により位置が本来の立体映像の位置よりずれているため、視差調整部１０８にて位置を元に戻す。
【００１７】
ここで撮像系などに生じたランダムノイズは、左目用信号と右目用信号に相関がないため、差分を算出することによりノイズ成分を抽出することが可能となる。また、この差分、すなわちノイズレベルをそれぞれＫ１，Ｋ２倍し、左目用信号と右目用信号の信号レベルからそれぞれ差し引くことでノイズ低減が可能となる。
【００１８】
なお、この係数Ｋ１とＫ２は、処理画素ごとに変更可能であり、算出する方法の一例を以下に示す。図４は、本実施の形態における注目画素と周辺画素を示す図である。まず、左目用画素の注目画素Ｖｌ（ｘ，ｙ）における係数Ｋ１を算出するために、図４に示す注目画素Ｖｌ（ｘ，ｙ）の周囲８画素との相関性Ｓｖｌを例として以下の式から算出する。
【００１９】
Ｓｖｌ  ＝  Σ｜Ｖｌ（ｘ，ｙ）−Ｖｌ（ｘ＋ｓ，ｙ＋ｔ）｜  （ｓ＝１，−１  ｔ＝１，−１）
相関性がないと（Ｓｖｌが大きいと）、注目画素Ｖｌ（ｘ，ｙ）はノイズである可能性が高いため、例えば図５に示すようなルックアップテーブル変換を用いてＫ１を算出する。図５は、本実施の形態における立体画像処理装置の補正係数を示す図である。また、同様にして、右目用画素についてＫ２を算出する。以上により、ノイズである可能性が高い画素については、Ｋ１およびＫ２の値を大きくすることで、効果的にノイズを低減することが可能となる。
【００２０】
また、さらにノイズ低減の精度をあげるには、上記空間方向の相関性のみならず、別途フレームメモリを用意し、時間方向の相関性を用いても良い。
【００２１】
なお、図１では視差調整部１０１は左目用信号、右目用信号それぞれに対して処理を行ったが、例えば左目用信号のみ、または、右目用信号のみに対して処理を行ってもよい。また、図１の構成は一例であり、例えば減算部１０２、１０３を一つにし、減算部１０７を加算部に替えても実現は可能である。
【００２２】
次に、本実施の形態における立体画像処理装置のノイズ低減動作について、図６を用いて詳細に説明する。左目用画像６０１とノイズが含まれた右目用画像６０２が入力されたとすると、図１の視差調整部１０１で視差調整が行われ、左目用画像と右目用画像の位置が合わさった、左目用画像６０３および右目用画像６０４がそれぞれ得られる。さらに、減算部１０２、１０３でそれぞれ差分画像６０５，６０６が得られ、前述の周囲画素との相関性算出とルックアップテーブル変換により求められた係数Ｋ１と係数Ｋ２を差分画像６０５と差分画像６０６にそれぞれ乗じて差分画像６０７と差分画像６０８が得られる。その際、画素位置６１２における左目用画像６０３の画素と周囲画素との相関性は大きいため（Ｓｖｌが小さいため）ノイズの可能性が低く、Ｋ１は小さい値をとる。逆に、画素位置６１３における右目用画像６０４の画素と周囲画素は相関性が小さいため（Ｓｖ１が大きいため）、Ｋ２は大きい値をとる。したがって、差分画像６０７と差分画像６０８はノイズ成分を抽出した画像となり、左目用画像６０３，右目用画像６０４からそれぞれ差し引くことで、ノイズを低減した左目用画像６１０と右目用画像６０９が得られる。なお、右目用画像６０９については、視差を調整した状態であるため、視差調整部１０８にて元の視差状態に戻し、右目用画像６１１を得る。
【００２３】
次に、乗算部１０４と乗算部１０５の係数Ｋ１、Ｋ２の算出方法の他の例について説明する。以下、係数Ｋ１について説明するが、係数Ｋ２についても同様である。上述した係数Ｋ１の算出方法は、注目画素Ｖｌ（ｘ，ｙ）の周囲８画素との相関性Ｓｖｌを算出し、相関性が低い（Ｓｖ１が大きい）場合には、注目画素Ｖｌ（ｘ，ｙ）はノイズである可能性が高いと判断して、係数Ｋ１の値を大きくして、ノイズ低減量を大きくしている。しかしながら、相関性の判断が正しく行われなかった場合には、ノイズ低減処理により返って違和感のある映像になる場合もある。
【００２４】
ところで、立体映像の場合、背景よりも画面の前面に飛び出した映像領域に視聴者の視線は集中し、ノイズがより目立つことになる。そこで、この飛び出した映像領域に対してノイズの低減量を大きくし、ノイズがあまり目立たない背景領域ではノイズ低減量を小さくすることでより効率的なノイズ低減が可能となる。この映像の飛び出し量は、左右両眼の視差により計算することができる。すなわち、図１において、入力端子１から入力される左目用信号と入力端子２から入力される右目用信号との視差が視差調整部１０１において算出されるので、この算出された視差を元に上記係数Ｋ１を決定する。図３ではライン毎に視差を計算する方法を示したが、画素毎に視差を計算することにより、画素毎の飛び出し量が推定できるので、視差の大きさに応じて、映像領域毎にノイズ低減量、すなわち乗算部１０５の係数Ｋ１の値を制御することができる。
【００２５】
図７は、本実施の形態における立体画像処理装置において視差により係数Ｋ１の値を変える例を示した図である。図７Ａは、飛び出し領域を含む立体映像の左目用画像または右目用画像の例を示した図、図７Ｂは画面の水平位置と立体映像の飛び出し量（視差）の関係を示した図、図７Ｃは画面の水平位置と係数Ｋ１の関係を示した図である。
【００２６】
図７Ａにおいて画面７０１の映像領域７０２が背景領域７０３の前面に飛び出しているとすると、画面７０１の所定のライン７０３での映像の飛び出し量の変化は図７Ｂに示すようになる。そこで、係数Ｋ１を図７Ｃのように変化させる。すなわち、ノイズが目立つ飛び出し量の大きい映像領域７０２（前面）ではＫ１の値を大きくしてノイズ低減量を増加させ、逆にノイズが目立たない背景領域７０３ではＫ１の値を小さくしてノイズ低減量を減少させている。これにより、効率的なノイズの低減が可能となる。
【００２７】
次に、本実施の形態における立体画像処理装置のノイズ低減方法について説明する。図８は、立体画像処理装置のノイズ低減の手順を示すフローチャートである。図８において、まず視差調整部１０１において立体映像信号の左目用信号および右目信号の視差を調整し映像位置をずらす第１の視差調整を行う（ステップＳ１０１）。次にステップＳ１０１で得られた視差調整左目用信号および視差調整右目用信号を用いてノイズ低減量を設定する（ステップＳ１０２）。このノイズ低減量の設定は、前述したように、例えば視差調整左目用信号、視差調整右目用信号の空間方向または時間方向の相関性を算出し、相関性が大きい場合には、ノイズ低減量を小さくし設定し、相関性が小さい場合にはノイズ低減量を大きく設定してもよい。または、ステップＳ１０１で得られた左目用信号および右目用信号の視差量が大きい場合には、ノイズ低減量を大きく設定し、視差量が小さい場合には、ノイズ低減量を小さく設定してもよい。
【００２８】
次に、ステップＳ１０２で得られたノイズ低減量に基づいて、視差調整左目用信号および視差調整右目用信号のノイズを低減する（ステップＳ１０３）。すなわち、ステップＳ１０１で得られた視差をなくした視差調整左目用信号と視差調整右目用信号との信号レベルの差からノイズレベルを算出し、左目用信号と右目用信号の信号レベルからそれぞれノイズレベルを差し引いて立体映像信号中のノイズを低減させる。最後に、ステップＳ１０１で得られた視差調整情報を受け取り、ステップＳ１０３でノイズ低減された視差調整左目用信号および視差調整右目用信号の視差を調整し映像位置をずらしてもとの視差を伴った左目用信号と右目用信号を得る（ステップＳ１０４）。
【００２９】
以上説明したように、本実施の形態によれば、注目画素の周囲画素との相関性を算出して、注目画素がノイズか否かを判定してノイズ低減量を制御する。また、それに加えて、映像領域の飛び出し量（視差）に応じてもノイズ低減量を制御する。これにより、立体画像処理装置のノイズ低減効果を高めることができる。
【産業上の利用可能性】
【００３０】
本発明は、立体映像信号中のノイズを低減する立体画像処理装置に関するものであり、左目用と右目用の２系統が並列に伝送される立体映像中のノイズ除去に有用である。
【符号の説明】
【００３１】
１    第１の入力端子
２    第２の入力端子
１０１    視差調整部（第１の視差調整部）
１０２    減算部（第３の減算部）
１０３    減算部（第１の減算部）
１０４    乗算部（第２の乗算部）
１０５    乗算部（第１の乗算部）
１０６    減算部（第４の減算部）
１０７    減算部（第２の減算部）
１０８    視差調整部（第２の視差調整部）
１０９    ノイズ低減部
３０１，３０２，３０４，３０５    ラインメモリ
３０３    演算部
６０１，６０３，６１０    左目用画像
６０２，６０４，６０９，６１１    右目用画像
６０５，６０６，６０７，６０８    差分画像
６１２，６１３    画素位置
７０１    画面
７０２    映像領域
７０３    背景領域
７０４    ライン
【図１】
2010035492.tif 000003
【図２】
2010035492.tif 000004
【図３】
2010035492.tif 000005
【図４】
2010035492.tif 000006
【図５】
2010035492.tif 000007
【図６】
2010035492.tif 000008
【図７Ａ】
2010035492.tif 000009
【図７Ｂ】
2010035492.tif 000010
【図７Ｃ】
2010035492.tif 000011
【図８】
2010035492.tif 000012
【手続補正書】
【提出日】平成23年3月15日(2011.3.15)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
（実施の形態）
図１に本発明の実施の形態における立体画像処理装置のノイズ低減に係わる部分のブロック図の一例を示す。この装置は、立体映像が左目用、右目用の２系統で入力されることを想定とする。本実施の形態における立体画像処理装置は、左目用信号と右目用信号の２つの映像信号をそれぞれ第１の入力端子である入力端子１と第２の入力端子である入力端子２の入力として、左目用信号と右目用信号の視差を調整する第１の視差調整部である視差調整部１０１と、視差調整部１０１から出力された視差の調整された視差調整左目用信号と視差調整右目用信号を入力とし、ノイズを低減するノイズ低減部１０９と、ノイズ低減部１０９でノイズが低減された視差調整左目用信号と視差調整右目用信号を入力とし、視差調整左目用信号と視差調整右目用信号の視差を調整する第２の視差調整部である視差調整部１０８とにより構成されている。またノイズ低減部１０９は、減算処理を行う減算部１０２、１０３と、減算部に接続され、入力された信号に所定の係数を乗算する乗算部１０４、１０５と、視差調整部１０１から出力された信号及び上述した乗算部１０４、１０５からの信号を入力として減算処理を行う減算部１０６、１０７とから構成されている。以下各構成について具体的に説明する。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
位置ずれを減少させる具体的な構成について図３を用いて説明する。図３は、本実施の形態における立体画像処理装置の視差量を補正する補正部のブロック図である。ラインメモリ３０１とラインメモリ３０２に、入力された左目用信号と右目用信号の信号データをそれぞれ格納する。左目用信号の格納された信号データを画面位置の左からＬ（１），Ｌ（２），…，Ｌ（ｎ）、右目用信号の格納された信号データを画面位置の左からＲ（１），Ｒ（２），…，Ｒ（ｎ）とすると（ｎは１ラインの画素数を表す）、右目用信号と左目用信号との位置ずれ量（視差）を求めるため、演算部３０３にて下記の相関性Ｓｐを求める式において最小となるｐを算出する。このｐは、上記位置ずれ量（画素）を意味する。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
図７Ａ、７Ｂ、７Ｃは、本実施の形態における立体画像処理装置において視差により係数Ｋ１の値を変える例を示した図である。図７Ａは、飛び出し領域を含む立体映像の左目用画像または右目用画像の例を示した図、図７Ｂは画面の水平位置と立体映像の飛び出し量（視差）の関係を示した図、図７Ｃは画面の水平位置と係数Ｋ１の関係を示した図である。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
図７Ａにおいて画面７０１の映像領域７０２が背景領域７０３の前面に飛び出しているとすると、画面７０１の所定のライン７０４での映像の飛び出し量の変化は図７Ｂに示すようになる。そこで、係数Ｋ１を図７Ｃのように変化させる。すなわち、ノイズが目立つ飛び出し量の大きい映像領域７０２（前面）ではＫ１の値を大きくしてノイズ低減量を増加させ、逆にノイズが目立たない背景領域７０３ではＫ１の値を小さくしてノイズ低減量を減少させている。これにより、効率的なノイズの低減が可能となる。
【手続補正５】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
立体映像信号の左目用信号を入力するための第１の入力端子と、
右目用信号を入力するための第２の入力端子と、
前記第１の入力端子および第２の入力端子から入力された左目用信号および右目信号の視差を調整し映像位置をずらす第１の視差調整部と、
前記第１の視差調整部から出力された視差調整左目用信号および視差調整右目用信号のノイズを低減するノイズ低減部と、
前記第１の視差調整部から出力される視差調整情報を受け取り、前記ノイズ低減部によりノイズ低減された前記視差調整左目用信号および前記視差調整右目用信号の視差を調整し映像位置をずらす第２の視差調整部と、を備え、
前記ノイズ低減部は、前記第１の視差調整部による視差をなくした前記視差調整左目用信号と前記視差調整右目用信号との信号レベルの差からノイズレベルを算出し、前記左目用信号と前記右目用信号の信号レベルからそれぞれ前記ノイズレベルを差し引いて立体映像信号中のノイズを低減させることを特徴とする立体画像処理装置。
【請求項２】
前記ノイズ低減部は、前記視差調整左目用信号、前記視差調整右目用信号の空間方向または時間方向の相関性を算出し、前記相関性が大きい場合には、ノイズ低減量を小さくし、前記相関性が小さい場合にはノイズ低減量を大きくすることを特徴とする請求項１に記載の立体画像処理装置。
【請求項３】
前記ノイズ低減部は、前記第１の視差調整部により算出される前記左目用信号および前記右目用信号の視差量が大きい場合には、ノイズ低減量を大きくし、前記視差量が小さい場合には、ノイズ低減量を小さくすることを特徴とする請求項１に記載の立体画像処理装置。
【請求項４】
前記ノイズ低減部は、
前記第１の視差調整部から出力された視差調整左目用信号の信号レベルから、前記第１の視差調整部から出力された視差調整右目用信号の信号レベルを差し引く第１の減算部と、
前記第１の減算部から出力された第１の減算信号に対して第１の係数を乗じる第１の乗算部と、
前記視差調整左目用信号の信号レベルから前記第１の乗算部から出力された第１の乗算信号の信号レベルを差し引く第２の減算部と、
前記視差調整右目用信号の信号レベルから前記視差調整左目用信号の信号レベルを差し引く第３の減算部と、
前記第３の減算部から出力された第２の減算信号に対して第２の係数を乗じる第２の乗算部と、
前記視差調整右目用信号の信号レベルから前記第２の乗算部から出力された第２の乗算信号の信号レベルを差し引く第４の減算部と、を備え、
前記第２の視差調整部は、前記第２の減算部の出力と前記第４の減算部の出力を入力とすることを特徴とする請求項１に記載の立体画像処理装置。
【請求項５】
前記第１の乗算部、前記第２の乗算部において掛け合わせる係数を、それぞれ前記視差調整左目用信号、前記視差調整右目用信号の空間方向または時間方向の相関性が大きい場合には小さな値に設定し、前記相関性が小さい場合には大きな値に設定することを特徴とする請求項４に記載の立体画像処理装置。
【請求項６】
前記第１の乗算部、前記第２の乗算部において掛け合わせる係数を、前記第１の視差調整部により算出される前記右目用信号および前記左目信号の視差量が大きい場合には大きな値に設定し、前記視差量が小さい場合には小さな値に設定することを特徴とする請求項４に記載の立体画像処理装置。
【請求項７】
立体映像信号の左目用信号および右目用信号の視差を調整し映像位置をずらす第１の視差調整ステップと、
前記第１の視差調整ステップで得られた視差調整左目用信号および視差調整右目用信号を用いてノイズ低減量を設定するノイズ低減量設定ステップと、
前記ノイズ低減量に基づいて、前記視差調整左目用信号および前記視差調整右目用信号のノイズを低減するノイズ低減ステップと、
前記第１の視差調整ステップで得られた視差調整情報を受け取り、前記ノイズ低減ステップにおいてノイズ低減された前記視差調整左目用信号および前記視差調整右目用信号の視差を調整し映像位置をずらす第２の視差調整ステップと、を備え、
前記ノイズ低減ステップは、前記第１の視差調整ステップで得られた視差をなくした前記視差調整左目用信号と前記視差調整右目用信号との信号レベルの差からノイズレベルを算出し、前記左目用信号と前記右目用信号の信号レベルからそれぞれ前記ノイズレベルを差し引いて立体映像信号中のノイズを低減させることを特徴とする立体画像処理装置のノイズ低減方法。
【請求項８】
前記ノイズ低減量設定ステップは、前記視差調整左目用信号、前記視差調整右目用信号の空間方向または時間方向の相関性を算出し、前記相関性が大きい場合には、ノイズ低減量を小さく設定し、前記相関性が小さい場合にはノイズ低減量を大きく設定することを特徴とする請求項７に記載の立体画像処理装置のノイズ低減方法。
【請求項９】
前記ノイズ低減量設定ステップは、前記第１の視差調整ステップで得られた前記左目用信号および前記右目用信号の視差量が大きい場合には、ノイズ低減量を大きく設定し、前記視差量が小さい場合には、ノイズ低減量を小さく設定することを特徴とする請求項７に記載の立体画像処理装置のノイズ低減方法。
【手続補正６】
【補正対象書類名】図面
【補正対象項目名】図４
【補正方法】変更
【補正の内容】
【図４】
2010035492.tif 000013
【手続補正７】
【補正対象書類名】図面
【補正対象項目名】図５
【補正方法】変更
【補正の内容】
【図５】
2010035492.tif 000014
【国際調査報告】
2010035492.tif 000015
2010035492.tif 000016
2010035492.tif 000017
2010035492.tif 000018