(57)【要約】【課題】サイド・バイ・サイド方式の画像に対して画像処理を施した後にサイド・バイ・サイド方式で出力する装置におけるメモリの容量を削減する。【解決手段】画素位置補正部１２０は、サイド・バイ・サイド方式の入力画像における左目視点の画像と右目視点の画像の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える画素位置補正処理を行う。画像処理実行部１３０は、画素位置補正処理が施された左目視点の画像と右目視点の画像に対して画像処理を実行する。画素位置再補正部１４０は、画像処理が施された左目視点の画像と右目視点の画像の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える画素位置再補正処理を行って、サイド・バイ・サイド方式の出力画像Ｓ４を得る。【選択図】図１
2012114505.tif 000002
【特許請求の範囲】
【請求項１】
左目視点のオリジナル画像と右目視点のオリジナル画像に対して、奇数ラインの奇数列画素と偶数ライン偶数列画素の間引き、または、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きをして得た左目視点の画像と右目視点の画像であって、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置が、互いに１画素分ずれた前記左目視点の画像と右目視点の画像を含むサイド・バイ・サイド方式の入力画像に対して画像処理を行う画像処理装置であって、
奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換えて、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置を同様にする画素位置補正処理を、前記左目視点の画像と前記右目視点の画像に対して行う画素位置補正部と、
前記画素位置補正部により前記画素位置補正処理が施された前記左目視点の画像と右目視点の画像に対して前記画像処理を実行する画像処理実行部と、
奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える画素位置再補正処理を、前記画像処理実行部により前記画像処理が施された前記左目視点の画像と右目視点の画像に対して行って、前記サイド・バイ・サイド方式の出力画像を得る画素位置再補正部とを備えることを特徴とする画像処理装置。
【請求項２】
左目視点のオリジナル画像と右目視点のオリジナル画像に対して、奇数ラインの奇数列画素と偶数ライン偶数列画素の間引き、または、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きをして得た左目視点の画像と右目視点の画像であって、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置が、互いに１画素分ずれた前記左目視点の画像と右目視点の画像を含むサイド・バイ・サイド方式の入力画像に対して画像処理を行う画像処理方法において、
奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換えて、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置を同様にする画素位置補正処理を、前記左目視点の画像と前記右目視点の画像に対して行い、
前記画素位置補正処理が施された前記左目視点の画像と右目視点の画像に対して前記画像処理を実行し、
奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える画素位置再補正処理を、前記画像処理が施された前記左目視点の画像と右目視点の画像に対して行って、前記サイド・バイ・サイド方式の出力画像を得ることを特徴とする画像処理方法。
【請求項３】
左目視点のオリジナル画像と右目視点のオリジナル画像に対して、奇数ラインの奇数列画素と偶数ライン偶数列画素の間引き、または、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きをして得た左目視点の画像と右目視点の画像であって、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置が、互いに１画素分ずれた前記左目視点の画像と右目視点の画像を含むサイド・バイ・サイド方式の入力画像に対して、
奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換えて、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置を同様にする画素位置補正処理を、前記左目視点の画像と前記右目視点の画像に対して行い、
前記画素位置補正処理が施された前記左目視点の画像と右目視点の画像に対して所定の画像処理を実行し、
奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える画素位置再補正処理を、前記画像処理が施された前記左目視点の画像と右目視点の画像に対して行って、前記サイド・バイ・サイド方式の出力画像を得る手順をコンピュータに実行せしめることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理、具体的にはサイド・バイ・サイド方式の入力画像に対して画像処理を施す技術に関する。
【背景技術】
【０００２】
近年、映像表示の分野において、左右の眼の視差を利用して作成された左目視点の画像と右目視点の画像を、視聴者の左目と右目に別々に入射するように構成して立体的な表示を行う３次元（３Ｄ）表示が行われている（特許文献１、特許文献２）。
【０００３】
３Ｄ表示のための映像放送の方式として、サイド・バイ・サイド方式が知られている。サイド・バイ・サイド方式では、送信側は、画素数の１／２間引きにより、横幅だけをオリジナルの１／２に圧縮した左目視点の画像と右目視点の画像を横に並べて送信し、受信側は、補間により受信画像を横幅だけ２倍に伸長して左目視点の画像と右目視点の画像を得て表示する。サイド・バイ・サイド方式で送受信される画像は、以下「サイド・バイ・サイド方式」の画像という。
【０００４】
サイド・バイ・サイド方式の画像に含まれる左目視点の画像と右目視点の画像の間引き方式は、様々ある。図９を参照して一例を説明する。
【０００５】
図９において、小さな矩形は画素を示し、括弧内の２つの数字のうちの左側の数字は、該画素が元画像における縦方向の位置（例えば該画素が位置する行）を示し、右側の数字は、該画素が元画像における横方向の位置（例えば該画素が位置する列）の位置を示す。例えば、「（３，５）」は、元画像における「３行、５列」目の画素を示す。
【０００６】
図９の上部は、間引きされる前の左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０を示す。図示のように、この２つの画像の各ラインは、１列目、２列目、３列目、・・・、の各列の画素が含まれている。送信側は、このような２つの画像からサイド・バイ・サイド方式の画像Ｄ１を生成して送信する。
【０００７】
サイド・バイ・サイド方式の画像Ｄ１は、左目視点の元画像ＤＬ０に対して横方向の１／２間引きがなされて得た左目視点の画像ＤＬ１と、右目視点の元画像ＤＲ０に対して横方向の１／２間引きがなされて得た右目視点の画像ＤＲ１とが横に並べてある。
【０００８】
図示のように、左目視点の画像ＤＬ１の１行目、３行目、・・・、などの各奇数ラインは、１列目、３列目、５列目、・・・、などの奇数列の画素しか含まれておらず、２行目、４行目、・・・、などの偶数ラインは、２列目、４列目、６列目、・・・、などの偶数列の画素しか含まれておらず、奇数ラインと偶数ラインの同列の画素の、対応する元画像ＤＬ０における横方向の位置が、互いに１画素分ずれている。例えば、左目視点の画像ＤＬ１の１列目の画素のうち、奇数ラインの（１，１）、（３，１）、・・・などの各画素の、左目視点の元画像ＤＬ０における横方向の位置が「１列目」であるのに対して、偶数ラインの（２，２）、（４，２）、・・・などの各画素の、左目視点の元画像ＤＬ０における横方向の位置が「２列目」である。
【０００９】
右目視点の元画像ＤＲ０に対して横方向の１／２間引きがなされて得た右目視点の画像ＤＲ１も、同様である。
【００１０】
すなわち、この例では、サイド・バイ・サイド方式の画像Ｄ１を作成する際に、左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０に対して、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きがなされている。
【００１１】
図示の例以外に、サイド・バイ・サイド方式の画像を作成する際に、左目視点の元画像と右目視点の元画像に対して、奇数ラインの奇数列画素と偶数ラインの偶数列画像の間引きを行う場合もある。さらに、左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０に対して異なる間引きを行う場合もある。具体的には、左目視点の元画像ＤＬ０に対しては、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きを、右目視点の元画像ＤＲ０に対しては奇数ラインの奇数列画素と偶数ラインの偶数列画像の間引きを行う。または、左目視点の元画像ＤＬ０に対しては、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きを、右目視点の元画像ＤＲ０に対しては奇数ラインの奇数列画素と偶数ラインの偶数列画像の間引きを行う。
【００１２】
受信側は、上述したようなサイド・バイ・サイド方式の画像を受信し、３Ｄ表示するために、受信した画像に含まれる左目視点の画像と右目視点の画像の間引き方式に応じた補間を行って、奇数ラインと偶数ラインの同列の画素の、対応するオリジナル画像における位置を同様にする。例えば、図９に示す例のサイド・バイ・サイド方式の画像Ｄ１に対して、受信側は、奇数ラインに対して、元の画像における偶数列の画素を生成して挿入する補間を行い、偶数ラインに対して元の画像における奇数列の画素を生成して挿入する補間を行う。
【００１３】
図１０は、送信側における図９に示す例のサイド・バイ・サイド方式の画像Ｄ１の生成から、受信側における補間までの画像の遷移態様を、各画像における画素の位置関係が分かるように示した図である。図１０において、黒丸は、当該画像に存在し、オリジナル画像（図１０の上部に示す左目視点の元画像ＳＬ０または右目視点の元画像ＳＲ０）にも存在する画素を示し、白丸は、当該画像に存在しない画素を示す。また、斜線で塗りつぶされた丸は、補間により生成され、当該画像に存在する画素を示す。
【００１４】
図１０の上部は、左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０を示す。送信側は、このような左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０に対して、奇数ラインの偶数列画素と偶数ラインの奇数列画素を間引きしてから横に並べて、図１０の中央に示すサイド・バイ・サイド方式の画像Ｄ１を生成して送信する。
【００１５】
受信側は、受信したサイド・バイ・サイド方式の画像Ｄ１に対して、画素間に位置する画素を生成して挿入することにより補間を行うと共に、左視点と右視点の画像の分離を行って、左目視点の画像ＤＬ２と右目視点の画像ＤＲ２を得て、３Ｄ表示を行う。
【００１６】
図１０から分かるように、サイド・バイ・サイド方式の画像Ｄ１における左目視点の画像ＤＬ１と右目視点の画像ＤＲ１は、１ラインの画素数が、左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０の１ラインの画素数の１／２であり、縦方向の画素数が、左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０の１列の画素数と同様である。
【００１７】
また、受信側で補間後の左目視点の画像ＤＬ２と右目視点の画像ＤＲ２は、左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０と同様のサイズを有する。
【先行技術文献】
【特許文献】
【００１８】
【特許文献１】特表２００５−５２２９５８号公報
【特許文献２】ＷＯ９７／０４３８６３号公報
【発明の概要】
【発明が解決しようとする課題】
【００１９】
図１０に示す流れは、サイド・バイ・サイド方式の画像を受信した側において、画像処理を施さずに表示する場合の例である。ＳＴＢ（Ｓｅｔ  Ｔｏｐ  Ｂｏｘ）やＢｌｕ  Ｒａｙのプレイヤなどでは、受信したサイド・バイ・サイド方式の画像に対して何らかの画像処理を施してから表示装置に出力することが行われている。これらの画像処理は、例えばリサイズや、ＯＳＤ（Ｏｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ）による文字情報などの重畳、画質調整などが知られている。
【００２０】
前述したサイド・バイ・サイド方式の画像は、奇数ラインと偶数ラインの同列の画素の位置が１画素分ずれているため、そのままでは上述した画像処理を行うことができない。そのため、受信したサイド・バイ・サイド方式の画像に対して補間処理を行って、奇数ラインと偶数ラインの画素位置を揃えてから画像処理を施し、画像処理が施された後の画像に対して、送信側で行った同様の処理を行ってサイド・バイ・サイド方式の画像に変換してから表示装置に出力する手法が考えられる。
【００２１】
図１１は、この手法の流れの例を示す。図１１において、黒丸、白丸、斜線で塗りつぶされた丸は、図１０におけるこれらの図形と夫々同様の意味を有し、点で塗りつぶされた丸は、当該画像に含まれており、画像処理が施された画素を意味する。なお、図１１では、送信側が送信したサイド・バイ・サイド方式の画像は、図９において、送信側が送信したサイド・バイ・サイド方式の画像Ｄ１と同様のものである。
【００２２】
受信側は、このサイド・バイ・サイド方式の画像Ｄ１を受信すると、画像処理を施すために、画素間に位置する画素を生成して挿入することにより補間を行う。これにより、サイド・バイ・サイド方式の画像Ｄ１に含まれる左目視点の画像ＤＬ１と右目視点の画像ＤＲ１は、夫々横方向に２倍伸長されて左目視点の画像ＤＬ２と右目視点の画像ＤＲ２になる。
【００２３】
左目視点の画像ＤＬ２と右目視点の画像ＤＲ２は、画像処理が施されて、左目視点の画像ＤＬ３と右目視点の画像ＤＲ３になる。例えば、画像処理がリサイズである場合には、左目視点の画像ＤＬ３及び右目視点の画像ＤＲ３は、左目視点の画像ＤＬ２と右目視点の画像ＤＲ２とサイズが異なる。また、画像処理が平滑化処理などの画質調整処理である場合には、左目視点の画像ＤＬ３及び右目視点の画像ＤＲ３は、左目視点の画像ＤＬ２及び右目視点の画像ＤＲ２とサイズが同じであるが、画素値が異なる。また、画像処理がＯＳＤによる文字情報などの重畳処理である場合にも、左目視点の画像ＤＬ３及び右目視点の画像ＤＲ３は、左目視点の画像ＤＬ２及び右目視点の画像ＤＲ２とサイズが同じであるが、画素値が異なる。
【００２４】
そして、表示装置に出力するために、左目視点の画像ＤＬ３と右目視点の画像ＤＲ３は、サイド・バイ・サイド方式の画像Ｄ１を送信する側で行われた処理と同様な処理によって、サイド・バイ・サイド方式の画像Ｄ４に変換される。
【００２５】
サイド・バイ・サイド方式の画像Ｄ４を受信した表示装置は、画像Ｄ４に対して、画素間に位置する画素を生成して挿入することにより補間を行うと共に、左視点と右視点の画像の分離を行って、左目視点の画像ＤＬ５と右目視点の画像ＤＲ５を得て、３Ｄ表示を行う。
【００２６】
図１１から分かるように、この手法によれば、サイド・バイ・サイド方式の画像を受信して画像処理を施した後に、再びサイド・バイ・サイド方式で出力する際に、画像処理のためにサイド・バイ・サイド方式の画像Ｄ１に含まれる左目視点の画像ＤＬ１と右目視点の画像ＤＲ１をオリジナルのサイズに補間してから処理を施している。そのため、処理前後で画像サイズの変化が無い画像処理の場合において、処理前後の画像を格納するメモリは、オリジナルサイズの左目視点の画像ＤＬ２（またはＤＬ３）と右目視点の画像ＤＲ２（またはＤＲ３）を格納する容量が必要である。オリジナルサイズが大きいほど、必要なメモリ容量も大きくなる。また、画像処理が拡大処理である場合には、必要なメモリ容量がさらに大きい。
【００２７】
本発明は、上記事情を鑑みてなされたものであり、サイド・バイ・サイド方式の画像に対して画像処理を施した後にサイド・バイ・サイド方式で出力する装置におけるメモリの容量を削減する技術を提供する。
【課題を解決するための手段】
【００２８】
本発明の一つの態様は、サイド・バイ・サイド方式の入力画像に対して画像処理を行う画像処理装置であり、画素位置補正部と、画像処理実行部と、画素位置再補正部を備える。
【００２９】
上記入力画像は、左目視点のオリジナル画像と右目視点のオリジナル画像に対して、奇数ラインの奇数列画素と偶数ライン偶数列画素の間引き、または、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きをして得た左目視点の画像と右目視点の画像を含み、該左目視点の画像と右目視点の画像は、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置が、互いに１画素分ずれている。
【００３０】
画素位置補正部は、サイド・バイ・サイド方式の画像に含まれる左目視点の画像と右目視点の画像に対して画素位置補正処理を行う。画素位置補正処理は、奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換えて、奇数ラインと偶数ラインの同列の画素の、対応する前記オリジナル画像における横方向の位置を同様にする処理である。
【００３１】
画像処理実行部は、画素位置補正部により画素位置補正処理が施された左目視点の画像と右目視点の画像に対して前記画像処理を実行する。
【００３２】
画素位置再補正部は、画像処理実行部により画像処理が施された左目視点の画像と右目視点の画像に対して画素位置再補正処理を行って、入力画像と同様のサイド・バイ・サイド方式の出力画像を得る。画素位置再補正処理は、奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える処理である。
【００３３】
なお、上記態様の画像処理装置を方法やシステムなどに置き換えて表現したものや、コンピュータをこの画像処理装置として実行せしめるプログラムなども、本発明の態様としては有効である。
【発明の効果】
【００３４】
本発明にかかる技術によれば、サイド・バイ・サイド方式の画像に対して画像処理を施した後にサイド・バイ・サイド方式で出力する装置におけるメモリの容量を削減できる。
【図面の簡単な説明】
【００３５】
【図１】本発明の原理を説明するための画像処理システムを示す図である。
【図２】図１に示す画像処理システムにおいて、入力画像の生成から出力画像が得られるまでの各画像の遷移態様の例を示す図である。
【図３】図１１に対して、元画像の横方向の画素数を８とすると共に、当該画像において存在しない画素を表示しないようにした図である。
【図４】図２に対して、元画像の横方向の画素数を８とすると共に、当該画像において存在しない画素を表示しないようにした図である。
【図５】本発明の実施の形態にかかる画像処理システムを示す図である。
【図６】図５に示す画像処理システムによる処理の具体例を説明するための図である（その１）。
【図７】図５に示す画像処理システムによる処理の具体例を説明するための図である（その２）。
【図８】左目視点の画像と右目視点の画像を分離しないで処理する必要がある画像処理の例を説明するための図である。
【図９】本発明が対象とするサイド・バイ・サイド方式の画像の例を示す図である。
【図１０】サイド・バイ・サイド方式の映像放送の例を説明するための図である。
【図１１】サイド・バイ・サイド方式の画像の生成から、画像処理を経て、３Ｄ表示のための補間までの画像の遷移の例を示す図である。
【発明を実施するための形態】
【００３６】
説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。また、様々な処理を行う機能ブロックとして図面に記載される各要素は、ハードウェアは、ＣＰＵ、メモリ、その他の回路で構成することができ、ソフトウェアは、メモリにロードされたプログラムなどによって実現される。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは当業者には理解されるところであり、いずれかに限定されるものではない。なお、各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。
【００３７】
また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（ｔａｎｇｉｂｌｅ  ｓｔｏｒａｇｅ  ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  ＰＲＯＭ）、フラッシュＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【００３８】
具体的な実施の形態の前に、まず、図１を参照して、本発明にかかる技術の原理を説明する。
【００３９】
図１は、本発明の原理を説明するための画像処理システム１００を示す。画像処理システム１００は、画像処理装置１１０と表示装置１６０を備える。画像処理装置１１０は、サイド・バイ・サイド方式の画像Ｓ１が入力され、該画像Ｓ１に対して画像処理を行って、画像Ｓ１と同様のサイド・バイ・サイド方式の画像Ｓ４を表示装置１６０に出力する。表示装置１６０は、サイド・バイ・サイド方式の画像Ｓ４を用いて３Ｄ表示を行う。
【００４０】
画像Ｓ１は、例えば立体映像放送の送信側から送られてきたものである。画像処理装置１１０は、例えば立体映像放送の受信側におけるＳＴＢやプレイヤなどであり、画素位置補正部１２０、画像処理実行部１３０、画素位置再補正部１４０、メモリ１５０を備える。
【００４１】
サイド・バイ・サイド方式の画像Ｓ１は、まず、画像処理装置１１０のメモリ１５０に格納される。
【００４２】
画素位置補正部１２０は、メモリ１５０から画像Ｓ１を読み出して画素位置補正処理を行う。画素位置補正部１２０は、画素位置補正処理により得た画像Ｓ２をメモリ１５０に書き戻して、画像処理実行部１３０に供する。画素位置補正部１２０による画素位置補正処理の詳細については、後述する。
【００４３】
画像処理実行部１３０は、画素位置補正部１２０が画像Ｓ１に対して画素位置補正処理をして得た画像Ｓ２をメモリ１５０から読み出して画像処理を施して画像Ｓ３を得る。画像処理実行部１３０は、画像Ｓ３をメモリ１５０に書き戻して、画素位置再補正部１４０に供する。なお、画像処理実行部１３０により実行される画像処理は、ライン間で画素の位置のずれがない画像を対象とするものであり、例えば、平滑化するＬＰＦ（Ｌｏｗ  Ｐａｓｓ  Ｆｉｌｔｅｒ）処理、鮮鋭化するシャープネス処理、リサイズ処理、文字情報などを重畳するＯＳＤ処理などである。例として、画素位置再補正部１４０がシャープネス処理を行うものであるとする。
【００４４】
画素位置再補正部１４０は、画像処理実行部１３０が画像処理を施して得た画像Ｓ３をメモリ１５０から読み出して画素位置再補正処理を行って画像Ｓ４を得る。画素位置再補正部１４０は、画像Ｓ４をメモリ１５０に書き戻してメモリ１５０に供する。この画像Ｓ４は、サイド・バイ・サイド方式の画像である。なお、画素位置再補正部１４０による画素位置再補正処理の詳細については、後述する。
【００４５】
メモリ１５０に格納されたサイド・バイ・サイド方式の画像Ｓ４は、表示装置１６０に出力される。表示装置１６０は、画像Ｓ４に含まれる左目視点の画像（ＳＬ４とする）と右目視点の画像（ＳＲ４とする）を分離すると共に、夫々横方向に２倍のサイズになるように補間を行って、３Ｄ表示を行う。
【００４６】
具体例を用いて、画像処理システム１００の各機能ブロックの詳細を説明する。
図２は、送信側における、画像処理システム１００に入力されるサイド・バイ・サイド方式の画像Ｓ１の生成から、表示装置１６０における、３Ｄ表示するための左目視点の画像ＳＬ５と右目視点の画像ＳＲ５の生成までの、画像の態様の遷移の例を示す図である。  
【００４７】
図２の例において、送信側が生成して画像処理システム１００に送信した画像Ｓ１は、図１１の例におけるサイド・バイ・サイド方式の画像Ｄ１と同様の画像であり、画像Ｓ１を生成するための左目視点の元画像ＳＬ０と右目視点の元画像ＳＲ０は、画像Ｄ１を生成するための左目視点の元画像ＤＬ０と右目視点の元画像ＤＲ０と同様である。
【００４８】
なお、図２において、黒丸は、当該画像に含まれており、オリジナル画像（左目視点の元画像ＳＬ０または右目視点の元画像ＳＲ０）にも存在する画素を示す。白丸は、当該画像に含まれておらず、存在しない画素を示す。斜線で塗り潰された丸、点で塗り潰された丸、２重丸が意味する画素については、以下にて説明する。
【００４９】
図２に示すように、画像処理装置１１０に入力される画像Ｓ１は、送信側にて、左目視点の元画像ＳＬ０と右目視点の元画像ＳＲ０に対して、奇数ラインの偶数列画素と偶数ラインの奇数列画素を間引いてから横に並べて得たサイド・バイ・サイド方式の画像である。前述したように、画像Ｓ１において、奇数ラインと偶数ラインの同列の画素の、対応する元画像（左目視点の元画像ＳＬ０または右目視点の元画像ＳＲ０）における横方向の位置は、互いに１画素分ずれている。
【００５０】
画素位置補正部１２０は、画像Ｓ１に含まれる左目視点の画像ＳＬ１とＳＲ１に対して画素位置補正処理を行って、上記画素の位置のずれを補正する。画素位置補正処理は、具体的には、奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換えて、奇数ラインと偶数ラインの同列の画素の、対応する元画像における横方向の位置を同様にする処理である。
【００５１】
例えば、奇数ラインと偶数ラインの「片方」を奇数ラインとした場合には、画素位置補正部１２０は、左目視点の画像ＳＬ１の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該奇数ラインの各画素を夫々置き換える。この場合、画素位置補正処理後の画像Ｓ２における左目視点の画像ＳＬ２の画素の位置は、左目視点の元画像ＳＬ０における偶数列画素の位置になる。右目視点の画像ＳＲ１についても同様である。
【００５２】
また、奇数ラインと偶数ラインの「片方」を偶数ラインとした場合には、画素位置補正部１２０は、左目視点の画像ＳＬ１の各偶数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該偶数ラインの各画素を夫々置き換える。この場合、画素位置補正処理後の画像Ｓ２における右目視点の画像ＳＲ２の画素の位置は、左目視点の元画像ＳＬ０における奇数列画素の位置になる。右目視点の画像ＳＲ１についても同様である。
【００５３】
なお、中間画素の生成手法は、例えば、線形補間など、横方向の２倍補間により挿入される画素を生成する手法を用いることができるが、補間処理は、生成した画素を元の画素間に挿入するのに対して、本発明にかかる技術における画素位置補正処理は、生成した中間画素で元の画素を置き換えるようにしている。すなわち、横方向の２倍補間は、画像の横方向の画素数を２倍にするが、本発明にかかる技術における画素位置補正処理は、画素数を変化させない。
【００５４】
図２に示す例では、画素位置補正部１２０は、左目視点の画像ＳＬ１と右目視点の画像ＳＲ１の奇数ラインに対して画素位置補正処理を行う。すなわち、画素位置補正部１２０は、左目視点の画像ＳＬ１と右目視点の画像ＳＲ１の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該奇数ラインの各画素を夫々置き換える。図２において、左目視点の画像ＳＬ２と右目視点の画像ＳＲ２に含まれた、斜線で塗り潰された丸は、画素位置補正部１２０により生成された中間画素を示す。
【００５５】
画素位置補正部１２０による画素位置補正処理の結果、画像Ｓ２における左目視点の画像ＳＬ２は、奇数ラインが中間画素のみを有し、偶数ラインが左目視点の元画像ＳＬ０における偶数列の画素のみを有する。左目視点の画像ＳＬ２の同列の画素の横方向の位置は、同一になっている。
画像Ｓ２における右目視点の画像ＳＲ２についても、同様である。
【００５６】
図２から分かるように、画素位置補正部１２０が生成した、画像処理のための画像Ｓ２に含まれる左目視点の画像ＳＬ２と右目視点の画像ＳＲ２は、画像Ｓ１に含まれる左目視点の画像ＳＬ１と右目視点の画像ＳＲ１と同様のサイズを有する。
【００５７】
この画像Ｓ２は、画素位置補正部１２０によりメモリ１５０に格納され、画像処理実行部１３０によりメモリ１５０から読み出されて画像処理（ここの例では、シャープネス処理）が施される。画像処理実行部１３０は、シャープネス処理後の画像Ｓ３をメモリ１５０に書き戻す。
【００５８】
図２において、画像Ｓ３に含まれた、点線で塗り潰された丸は、画像処理実行部１３０によるシャープネス処理後の画素を示す。ここでは、例として、画像処理実行部１３０による画像処理が画像のリサイズを伴わないシャープネス処理であるため、画像Ｓ３に含まれる左目視点の画像ＳＬ３と右目視点の画像ＳＲ３のサイズは、左目視点の画像ＳＬ２と右目視点の画像ＳＲ２のサイズと同様である。
【００５９】
画素位置再補正部１４０は、メモリ１５０から画像Ｓ３を読み出し、画像Ｓ３に含まれる左目視点の画像ＳＬ３と右目視点の画像ＳＲ３に対して、画素位置再補正処理を行うことにより、画像Ｓ３をサイド・バイ・サイド方式の画像Ｓ４に変換する。画素位置再補正処理は、具体的には、奇数ラインと偶数ラインのうちの片方の各ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を夫々置き換える処理である。
【００６０】
例えば、奇数ラインと偶数ラインの「片方」を奇数ラインとした場合には、画素位置再補正部１４０は、左目視点の画像ＳＬ３の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該奇数ラインの各画素を夫々置き換える。右目視点の画像ＳＲ１についても同様である。
【００６１】
また、奇数ラインと偶数ラインの「片方」を偶数ラインとした場合には、画素位置再補正部１４０は、左目視点の画像ＳＬ３の各偶数ラインに対して、画素間に位置する中間画素を生成して、生成した各中間画素で該偶数ラインの各画素を夫々置き換える。右目視点の画像ＳＲ３についても同様である。
【００６２】
なお、画素位置再補正部１４０による中間画素の生成手法は、画素位置補正部１２０による中間画素の生成手法と同様である。
【００６３】
図２に示す例では、画素位置再補正部１４０は、左目視点の画像ＳＬ３と右目視点の画像ＳＲ３の奇数ラインに対して画素位置再補正処理を行う。すなわち、画素位置再補正部１４０は、左目視点の画像ＳＬ３と右目視点の画像ＳＲ３の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該奇数ラインの各画素を夫々置き換える。図２において、左目視点の画像ＳＬ４と右目視点の画像ＳＲ４における、斜線で塗りつぶされた画素は、画素位置再補正部１４０により生成された中間画素を示す。
【００６４】
画素位置再補正部１４０による画素位置再補正処理の結果、サイド・バイ・サイド方式の画像Ｓ４が得られる。図示のように、左目視点の画像ＳＬ３に存在していた各奇数ラインの画素は、中間画素により置き換えられ、左目視点の画像ＳＬ４に存在しない。
【００６５】
右目視点の画像ＳＲ３についても同様に、右目視点の画像ＳＲ３に存在していた各奇数ラインの画素は、中間画素により置き換えられ、右目視点の画像ＳＲ４に存在しない。
【００６６】
画素位置再補正部１４０により得られたサイド・バイ・サイド方式の画像Ｓ４は、メモリ１５０に書き戻され、表示装置１６０に供される。表示装置１６０は、サイド・バイ・サイド方式の画像Ｓ４に対して、画素間に位置する画素を生成して挿入することにより補間を行うと共に、左目視点の画像ＤＬ５と右目視点の画像ＤＲ５を得て、３Ｄ表示を行う。左目視点の画像ＤＬ５と右目視点の画像ＤＲ５において、２重丸は、表示装置１６０が補間により得られた画素を示す。
【００６７】
図２と図１１を比較すると分かるように、同様の入力画像（サイド・バイ・サイド方式の画像Ｓ１とＤ１）に対して、図２における、画像処理のために生成された左目視点の画像ＳＬ２の横方向のサイズは、図１１における、画像処理のために生成された左目視点の画像ＤＬ２の横方向のサイズの１／２である。右目視点の画像ＳＲ２と右目視点の画像ＤＲ２についても同様である。
【００６８】
また、画像処理後についても同様に、図２における、画像処理後の左目視点の画像ＳＬ３の横方向のサイズは、図１１における、画像処理後の左目視点の画像ＤＬ３の横方向のサイズの１／２である。右目視点の画像ＳＲ３と右目視点の画像ＤＲ３についても同様である。
【００６９】
視覚的により分かりやすいように、図１１と図２に対して、左目視点の元画像ＳＬ０と右目視点の元画像ＳＲ０における横方向の画素数を８にすると共に、当該画像に存在しない画素を表示しないようにすると、図３と図４が得られる。図３は図１１に対応し、図４は図２に対応する。図４における画像処理直前の左目視点の画像ＳＬ２の横方向の画素数が、図３における画像処理直前の左目視点の画像ＤＬ２の横方向の画素数の１／２であることは、明らかである。右目視点の画像ＳＲ２と右目視点の画像ＤＲ２についても同様である。さらに、画像処理直後の相対応する各画像に関しても、同様である。
【００７０】
すなわち、本発明にかかる技術によれば、図１１または図３に示すような、サイド・バイ・サイド方式の入力画像に対して画像処理を行うための補間を行う手法より、画像処理の直前と直後の画像を格納するメモリの必要な容量が小さい。
【００７１】
なお、図１に示す画像処理システム１００は、例として、各機能ブロックは、メモリ１５０を共用し、メモリ１５０から当該画像を読み出して処理を施してからメモリ１５０に書き戻して次段の機能ブロックに供するようにしている。各機能ブロックが、内部メモリを備え、上段の機能ブロックからの画像を内部メモリに格納し、該内部メモリに格納された画像に対して処理を施して直接次段の機能ブロックに出力するシステムにも、本発明の技術を適用することができる。また、適用することにより、上述した効果を得ることができる。
【００７２】
以上の説明を踏まえて、本発明にかかる技術を具現化したシステムの例を説明する。
図５は、本発明の実施の形態にかかる画像処理システム２００を示す。画像処理システム２００は、画像処理装置２１０と表示装置２９０を有する。画像処理装置２１０は、サイド・バイ・サイド方式の入力画像Ｑ１と、画像処理装置２１０による画像処理用のパラメータＰとが入力され、パラメータＰを用いて、入力画像Ｑ１に対して画像処理を施した後に、入力画像Ｑ１と同様のサイド・バイ・サイド方式の出力画像Ｑ４を得て表示装置２９０に出力する。表示装置２９０は、図１に示す画像処理システム１００における表示装置１６０と同様であり、サイド・バイ・サイド方式の画像Ｑ４に対して、横方向の２倍補間と、左目視点の画像と右目視点の画像の分離を行って、３Ｄ表示を行う。
【００７３】
画像処理装置２１０は、分離部２２０、画素位置補正部２３０、画像処理実行部２４０、画素位置再補正部２５０、合成部２６０を有する。画素位置補正部２３０は、第１の画素位置補正部２３２と第２の画素位置補正部２３４を備え、画像処理実行部２４０は、第１の画像処理実行部２４２と第２の画像処理実行部２４４を備える。また、画素位置再補正部２５０は、第１の画素位置再補正部２５２と第２の画素位置再補正部２５４を備える。
【００７４】
分離部２２０は、入力画像Ｑ１に対して、左目視点の画像と右目視点の画像の分離を行い、左目視点の画像ＱＬ１と右目視点の画像ＱＲ１を得て、第１の画素位置補正部２３２と第２の画素位置補正部２３４に夫々出力する。
【００７５】
第１の画素位置補正部２３２は、左目視点の画像ＱＬ１に対して画素位置補正処理を施して左目視点の画像ＱＬ２を得て第１の画像処理実行部２４２に出力する。第２の画素位置補正部２３４は、右目視点の画像ＱＲ２に対して画素位置補正処理を施して右目視点の画像ＱＲ２を得て第２の画像処理実行部２４４に出力する。
【００７６】
第１の画像処理実行部２４２は、パラメータＰを用いて左目視点の画像ＱＬ２に対して画像処理を行い、左目視点の画像ＱＬ３を得て第１の画素位置再補正部２５２に出力する。第２の画像処理実行部２４４は、パラメータＰを用いて右目視点の画像ＱＲ２に対して画像処理を行い、右目視点の画像ＱＲ３を得て第２の画素位置再補正部２５４に出力する。
【００７７】
なお、第１の画像処理実行部２４２と第２の画像処理実行部２４４の使用するパラメータが同様である場合には、第１の画像処理実行部２４２と第２の画像処理実行部２４４に同様のパラメータＰが入力される。一方、第１の画像処理実行部２４２と第２の画像処理実行部２４４の用いるパラメータが異なる場合には、パラメータＰは、第１の画像処理実行部２４２と２４４の使用するパラメータを含み、これらのパラメータは、第１の画像処理実行部２４２と第２の画像処理実行部２４４に夫々入力される。これらの場合における具体例については、後述する。
【００７８】
第１の画素位置再補正部２５２は、左目視点の画像ＱＬ３に対して画素位置再補正処理を行い、左目視点の画像ＱＬ４を得て合成部２６０に出力する。第２の画素位置再補正部２５４は、右目視点の画像ＱＲ３に対して画素位置再補正処理を行い、右目視点の画像ＱＲ４を得て合成部２６０に出力する。
【００７９】
合成部２６０は、左目視点の画像ＱＬ４と右目視点の画像ＱＲ４を横に並べて合成画像Ｑ４を生成して、表示装置２９０に出力する。合成画像Ｑ４は、サイド・バイ・サイド方式の画像である。
【００８０】
第１の画素位置補正部２３２と第２の画素位置補正部２３４が行う画素位置補正処理は、図１に示す画像処理システム１００における画素位置補正部１２０が行う画素位置補正処理と同様である。第１の画素位置再補正部２５２と第２の画素位置再補正部２５４が行う画素位置再補正処理は、画像処理システム１００における画素位置再補正部１４０が行う画素位置再補正処理と同様である。
【００８１】
なお、画像処理システム２００の各機能ブロックは、図示しない内部メモリを備え、上段の機能ブロックからの画像を内部メモリに格納し、該内部メモリに格納された画像に対して処理を施して次段の機能ブロックに出力する。
【００８２】
画像処理システム２００は、画素位置補正部２３０、画像処理実行部２４０、画素位置再補正部２５０が、分離された左目視点の画像と右目視点の画像に対して夫々処理を行う点を除き、処理の内容が、画像処理システム１００における画素位置補正部１２０、画像処理実行部１３０、画素位置再補正部１４０と同様である。すなわち、画像処理システム２００も、サイド・バイ・サイド方式の入力画像に対して画像処理を行って、サイド・バイ・サイド方式の出力画像を得る際に、補間の代わりに画素位置補正処理により画素位置のずれを補正してから画像処理を施し、そして画素位置再補正処理により、サイド・バイ・サイド方式の出力画像の画素を得る。従って、画像処理システム２００における画像処理装置２１０も、画像処理システム１００と同様に、画像処理前後の画像を格納するメモリ（ここでは内部メモリ）の容量を削減することができる。
【００８３】
以下、画像処理システム２００の処理内容について、いくつかの具体例を説明する。
＜第１の具体例＞
この具体例において、サイド・バイ・サイド方式の入力画像Ｑ１は、４行８列、すなわち８画素×４画素の左目視点の元画像ＱＬ０と右目視点の元画像ＱＲ０に対して、奇数ラインの偶数列画素と偶数ラインの奇数列画素の間引きを行ってから横に並べて得たものである。また、画素位置補正部２３０は、左目視点の画像ＱＬ１と右目視点の画像ＱＲ１の奇数ラインに対して画素位置補正処理を行うものであり、画素位置再補正部２５０は、左目視点の画像ＱＬ３と右目視点の画像ＱＲ３の奇数ラインに対して画素位置再補正処理を行う。また、画像処理実行部２４０は、左目視点の画像ＱＬ２と右目視点の画像ＱＲ２に対して、水平方向と垂直方向に夫々２倍にリサイズするものである。この場合、第１の画像処理実行部２４２と第２の画像処理実行部２４４には、水平方向の拡大率「２」、及び垂直方向の拡大率「２」を示す同様のパラメータＰが入力される。
【００８４】
図６を参照する。図６において、当該画像に存在しない画素を表示しないようにしている。また、黒丸は、当該画像に存在し、対応する元画像（左目視点の元画像ＱＬ０または右目視点の元画像ＱＲ０）にも存在すると共に、元画像において偶数列に位置する画素を示す。網状に塗り潰された丸は、当該画像に存在し、対応する元画像にも存在すると共に、元画像において奇数列に位置する画素を示す。また、斜線によりつぶされた丸は、画素位置補正処理または画素位置再補正処理により生成された中間画素を示す。点より塗り潰された丸は、第１の画像処理実行部２４２と第２の画像処理実行部２４４による画像処理（ここでは縦横に２倍に拡大する処理）の直後の画像（左目視点の画像ＱＬ３と右目視点の画像ＱＲ３）における奇数ラインの画素を示し、黒い矩形は、左目視点の画像ＱＬ３と右目視点の画像ＱＲ３における偶数ラインの画素を示す。
【００８５】
図６に示すように、入力画像Ｑ１に含まれる左目視点の画像ＱＬ１において、奇数ラインは、左目視点の元画像ＱＬ０における該ラインの奇数列画素のみを有し、偶数ラインは、左目視点の元画像ＱＬ０における偶数列画素のみを有する。そのため、左目視点の画像ＱＬ１は、４画素×４画素である。同様に、入力画像Ｑ１に含まれる右目視点の画像ＱＲ１において、奇数ラインは、右目視点の元画像ＱＲ０における該ラインの奇数列画素のみを有し、偶数ラインは、右目視点の元画像ＱＲ０における偶数列画素のみを有する。そのため、右目視点の画像ＱＲ１も、４画素×４画素である。
【００８６】
画像処理装置２１０の分離部２２０は、入力画像Ｑ１を分離して、上述した左目視点の画像ＱＬ１と右目視点の画像ＱＲ１を得る。
【００８７】
第１の画素位置補正部２３２は、左目視点の画像ＱＬ１の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を置き換える画素位置補正処理を行う。第２の画素位置補正部２３４も、右目視点の画像ＱＲ１に対して、画素間に位置する中間画素を生成し、生成した各画素で該ラインの各画素を置き換える。
【００８８】
図示のように、左目視点の画像ＱＬ２は、奇数ラインが中間画素により構成され、偶数ラインが、左目視点の元画像ＱＬ０における当該偶数ラインの偶数列画素により構成される。右目視点の画像ＱＲ２も同様に、奇数ラインが中間画素により構成され、偶数ラインが、右目視点の元画像ＱＲ０における当該偶数ラインの偶数列画素により構成される。左目視点の画像ＱＬ２と右目視点の画像ＱＲ２のサイズは、共に４画素×４画素である。
【００８９】
第１の画像処理実行部２４２は、左目視点の画像ＱＬ２を縦横共に２倍に拡大して８画素×８画素の左目視点の画像ＱＬ３を得る。第２の画像処理実行部２４４は、右目視点の画像ＱＲ２を縦横共に２倍に拡大して８画素×８画素の右目視点の画像ＱＲ３を得る。
【００９０】
第１の画素位置再補正部２５２は、左目視点の画像ＱＬ３の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各画素で該ラインの各画素を置き換える画素位置再補正処理を行う。第２の画素位置再補正部２５４も、右目視点の画像ＱＲ３の各奇数ラインに対して、画素間に位置する中間画素を生成し、生成した各中間画素で該ラインの各画素を置き換える。
【００９１】
図示のように、第１の画素位置再補正部２５２により得られた左目視点の画像ＱＬ４は、奇数ラインが中間画素により構成され、偶数ラインが、左目視点の画像ＱＬ３における当該偶数ラインの画素により構成される。第２の画素位置再補正部２５４により得られた右目視点の画像ＱＲ４も同様に、奇数ラインが中間画素により構成され、偶数ラインが、右目視点の画像ＱＲ３における当該偶数ラインの画素により構成される。左目視点の画像ＱＬ４と右目視点の画像ＱＲ４のサイズは、共に８画素×８画素である。
【００９２】
そして、合成部２６０は、左目視点の画像ＱＬ４と右目視点の画像ＱＲ４を横に並べて合成画像Ｑ４を得て表示装置２９０に出力する。この合成画像Ｑ４は、入力画像Ｑ１と同様のサイド・バイ・サイド方式の画像であり、入力画像Ｑ１のサイズ（８画素×４画素）の縦横共に２倍のサイズ（１６画素×８画素）を有する。
【００９３】
サイド・バイ・サイド方式の合成画像Ｑ４は、表示装置２９０により横方向の２倍補間で「３２画素×８画素」の画像にされ、さらに「１６画素×８画素」の左目視点の画像と右目視点の画像に分離され、３Ｄ表示に用いられる。
＜第２の具体例＞
【００９４】
この例において、画像処理実行部２４０による画像処理は、リサイズではなく、ＯＳＤによる文字情報の重畳処理である。この点を除き、上記第１の具体例と同様である。
【００９５】
この場合、パラメータＰには、左目視点の画像に重畳される文字情報と、右目視点の画像に重畳される文字情報とが含まれる。左目視点の画像に重畳される文字情報は、第１の画像処理実行部２４２に入力され、右目視点の画像に重畳される文字情報は、第２の画像処理実行部２４４に入力される。
【００９６】
図７を参照して説明する。左目視点の画像ＱＬ２と右目視点の画像ＱＲ２が生成されるまでは、図６に示す例と同様である。
【００９７】
第１の画像処理実行部２４２は、パラメータＰに含まれた、左目視点の画像に重畳される文字情報のデータを左目視点の画像ＱＬ２に合成して左目視点の画像ＱＬ３を得る。第２の画像処理実行部２４４は、パラメータＰに含まれた、右目視点の画像に重畳される文字情報のデータを右目視点の画像ＱＲ２に合成して右目視点の画像ＱＲ３を得る。左目視点の画像ＱＬ３と右目視点の画像ＱＲ３のサイズは、共に４画素×４画素である。
【００９８】
第１の画素位置再補正部２５２は、左目視点の画像ＱＬ３の各奇数ラインに対して画素位置再補正処理を施すことにより左目視点の画像ＱＬ４を得る。同様に、第２の画素位置再補正部２５４は、右目視点の画像ＱＲ３の各奇数ラインに対して画素位置再補正処理を施すことにより右目視点の画像ＱＲ４を得る。図示のように、左目視点の画像ＱＬ４は、奇数ラインが中間画素により構成され、偶数ラインが、左目視点の画像ＱＬ３における当該偶数ラインの画素により構成される。右目視点の画像ＱＲ４も同様に、奇数ラインが中間画素により構成され、偶数ラインが、右目視点の画像ＱＲ３における当該偶数ラインの画素により構成される。左目視点の画像ＱＬ４と右目視点の画像ＱＲ４のサイズも、共に４画素×４画素である。
【００９９】
そして、合成部２６０は、左目視点の画像ＱＬ４と右目視点の画像ＱＲ４を横に並べて合成画像Ｑ４を得て表示装置２９０に出力する。この合成画像Ｑ４は、入力画像Ｑ１と同様のサイド・バイ・サイド方式の画像であり、入力画像Ｑ１のサイズ（８画素×４画素）と同様のサイズを有すると共に、文字情報が重畳されている。
【０１００】
サイド・バイ・サイド方式の合成画像Ｑ４は、表示装置２９０により横方向の２倍補間で「１６画素×４画素」の画像にされ、さらに「８画素×４画素」の左目視点の画像と右目視点の画像に分離され、３Ｄ表示に用いられる。
【０１０１】
なお、文字情報の重畳に限らず、画像処理実行部２４０が実行する画像処理がリサイズを含まなければ、合成画像Ｑ４が得られるまでの各画像の遷移態様は、図７と同様である。
【０１０２】
このように、画像処理実行部２４０が実行される画像処理がリサイズを含むか否かに関わらず、画像処理システム２００によれば、画像処理前後の画像を格納するメモリの容量を削減することができる。
【０１０３】
なお、左目視点の画像と右目視点の画像を分離しないで処理する必要のある画像処理の場合には、画像処理システム１００における画像処理装置１１０の構成を用いればよい。このような画像処理の例としては、左目視点の画像と右目視点の画像の境界処理を含むものがある。
【０１０４】
これについて、図８を参照して、図１における機能ブロックと画像の符号を用いて説明する。また、入力画像Ｓ１に含まれる左目視点の画像ＳＬ１と右目視点の画像ＳＲ１の元画像（左目視点の元画像ＳＬ０と右目視点の元画像ＳＲ０）の画像のサイズが「８画素×４画素」であるとする。従って、画像Ｓ１のサイズは、「８画素×４画素」である。
【０１０５】
図８に示すように、画素位置補正部１２０は、画像Ｓ１に含まれる左目視点の画像ＳＬ１（４画素×４画素）と右目視点の画像ＳＲ１（４画素×４画素）に対して、奇数ラインの画素位置補正処理を行って画像Ｓ２を得る。図示のように、画像Ｓ２のサイズも、「８画素×４画素」である。また、画像Ｓ２に含まれる左目視点の画像ＳＬ２（４画素×４画素）は、奇数ラインが中間画素により構成され、偶数ラインが、左目視点の元画像ＳＬ０における該偶数ラインの偶数列画素により構成される。同様に、右目視点の画像ＳＲ２も、サイズが「４画素×４画素」であり、奇数ラインが中間画素により構成され、偶数ラインが、右目視点の元画像ＳＲ０における該偶数ラインの偶数列画素により構成される。
【０１０６】
画像処理実行部１３０は、画像Ｓ２に対して、左目視点の画像ＳＬ２と右目視点の画像ＳＲ２の境界処理を行ったうえで画質調整を行う。境界処理を行うことによって、左目視点の画像が右目視点の画像の影響を受けないように画質調整を行う。同様に、右目視点の画像が左目視点の画像の影響を受けないように画質調整を行う。
【０１０７】
画素位置再補正部１４０は、画像処理実行部１３０が得た画像Ｓ３に含まれる左目視点の画像ＳＬ３と右目視点の画像ＳＲ３に対して、奇数ラインの画素位置再補正処理を行って画像Ｓ４を得る。図示のように、画像Ｓ４のサイズも、「８画素×４画素」である。また、画像Ｓ４に含まれる左目視点の画像ＳＬ４は、奇数ラインが画素位置再補正部１４０により生成された中間画素により構成され、偶数ラインが、左目視点の画像ＳＬ３における該偶数ラインの各画素により構成される。同様に、右目視点の画像ＳＲ４も、奇数ラインが画素位置再補正部１４０により生成された中間画素により構成され、偶数ラインが、右目視点の画像ＳＲ３における該偶数ラインの各画素により構成される。
【０１０８】
このように、サイド・バイ・サイド方式の入力画像に対して行う画像処理が、左目視点の画像と右目視点の画像を分離しないで処理する必要のあるものであるか否か、リサイズを含むものであるか否かに関わらず、本発明に係る技術を適用することができる。
【０１０９】
以上、実施の形態をもとに本発明を説明した。実施の形態は例示であり、本発明の主旨から逸脱しない限り、上述した実施の形態に対してさまざまな変更、増減を行ってもよい。これらの変更、増減が行われた変形例も本発明の範囲にあることは当業者に理解されるところである。
【０１１０】
例えば、画像処理システム１００と画像処理システム２００において、画素位置補正処理と画素位置再補正処理が奇数ラインに対して行われるようになっている。画素位置補正処理と画素位置再補正処理を偶数ラインに対して行うようにしても、勿論よい。さらに、画素位置補正処理を奇数ラインに対して行い、画素位置再補正処理を偶数ラインに対して行うように、奇数ラインと偶数ラインの片方に対して画素位置補正処理を行い、他方に対して画素位置再補正処理を行うようにしてもよい。
【０１１１】
また、画像処理システム１００と２００において、画素位置補正処理は、左目視点の画像と右目視点の画像のいずれについても、奇数ラインに対して行われている。左目視点の画像と右目視点の画像のいずれについても、偶数ラインに対して行うようにしてもよい。さらに、左目視点の画像については、奇数ラインと偶数ラインの片方に対して画素位置補正処理を行う一方、右目視点の画像については、奇数ラインと偶数ラインの他方に対して画素位置補正処理を行うようにしてもよい。
画素位置再補正処理についても、同様である。
【符号の説明】
【０１１２】
１００  画像処理システム
１１０  画像処理装置
１２０  画素位置補正部
１３０  画像処理実行部
１４０  画素位置再補正部
１５０  メモリ
１６０  表示装置
２００  画像処理システム
２１０  画像処理装置
２２０  分離部
２３０  画素位置補正部
２３２  第１の画素位置補正部
２３４  第２の画素位置補正部
２４０  画像処理実行部
２４２  第１の画像処理実行部
２４４  第２の画像処理実行部
２５０  画素位置再補正部
２５２  第１の画素位置再補正部
２５４  第２の画素位置再補正部
２６０  合成部
２９０  表示装置
【図１】
2012114505.tif 000003
【図２】
2012114505.tif 000004
【図３】
2012114505.tif 000005
【図４】
2012114505.tif 000006
【図５】
2012114505.tif 000007
【図６】
2012114505.tif 000008
【図７】
2012114505.tif 000009
【図８】
2012114505.tif 000010
【図９】
2012114505.tif 000011
【図１０】
2012114505.tif 000012
【図１１】
2012114505.tif 000013