(57)【特許請求の範囲】
【請求項１】
パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理装置であって、
１つの視点での画像である少なくとも１つの視差画像を取得する視差画像取得部と、
視聴者の位置を取得する視聴者位置取得部と、
前記表示装置に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成部と、
を備えた画像処理装置。
【請求項２】
前記画像生成部は、前記パネルに対する前記視聴者の水平方向位置と、前記視聴者の視距離とに応じて前記パラメータを補正する、
請求項１に記載の画像処理装置。
【請求項３】
マッピング制御パラメータ算出部をさらに備え、
前記パラメータは、前記パネルと前記光学的開口部との位置ずれ量を表し、
前記マッピング制御パラメータ算出部は、前記パネルに対する前記視聴者の水平方向位置と、前記視聴者の視距離とに応じて補正量を算出し、
前記画像生成部は、前記パラメータを、前記補正量に基づいて補正する、
請求項２に記載の画像処理装置。
【請求項４】
前記画像生成部は、前記パネルに対する前記視聴者の垂直方向位置と、前記光学的開口部の幅に応じて、前記パラメータを補正する、
請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項５】
マッピング制御パラメータ算出部をさらに備え、
前記パラメータは、１つの光学的開口部に対応するパネル上の幅を表し、
前記マッピング制御パラメータ算出部は、前記パネルに対する前記視聴者の垂直方向位置と、前記光学的開口部の幅に応じて、補正量を算出し、
前記画像生成部は、前記パラメータを、前記補正量に基づいて補正する、
請求項４に記載の画像処理装置。
【請求項６】
前記視聴者位置取得部は、撮像機器により撮像された画像を解析することで顔を認識し、認識した顔をもとに前記視聴者の位置を取得する、
請求項１ないし５のいずれか一項に記載の画像処理装置。
【請求項７】
前記視聴者位置取得部は、視聴者の動きを検出するセンサにより検出された信号を処理することにより、前記視聴者の位置を取得する、
請求項１ないし５のいずれか一項に記載の画像処理装置。
【請求項８】
パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理方法であって、
１つの視点での画像である少なくとも１つの視差画像を取得する視差画像取得ステップと、
視聴者の位置を取得する視聴者位置取得ステップと、
前記表示装置に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成処理ステップと、
を備えた画像処理方法。
【請求項９】
パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理プログラムであって、
１つの視点での画像である少なくとも１つの視差画像を取得する視差画像取得ステップと、
視聴者の位置を取得する視聴者位置取得ステップと、
前記表示装置に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成処理ステップと、
をコンピュータに実行させるための画像処理プログラム。
【請求項１０】
パネルと光学的開口部とを有する表示部と、
１つの視点での画像である少なくとも１つの視差画像を取得する視差画像取得部と、
視聴者の位置を取得する視聴者位置取得部と、
前記表示部に対する前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示部に表示された時に前記視聴者に立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する画像生成部と、を備え、
前記表示部は、前記画像生成部により生成された画像を表示する
立体画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、画像処理装置、立体画像表示装置、画像処理方法および画像処理プログラムに関する。
【背景技術】
【０００２】
立体画像表示装置では、視聴者は特殊なメガネを使用せずに裸眼で立体画像を観察することができる。このような立体画像表示装置は、視点の異なる複数の画像（以下ではそれぞれの画像を視差画像とよぶ）を表示し、これらの視差画像の光線を、例えばパララックスバリア、レンチキュラレンズなどによって制御する。この際、表示する画像は、パララックスバリア、レンチキュラレンズなどを通して覗いた場合に意図した方向で意図した画像が観察されるように並びかえられたものである必要がある。この並べ替え方法を以下ではピクセルマッピングと呼ぶ。以上のように、パララックスバリア、レンチキュラレンズなどとそれに合わせたピクセルマッピングによって制御された光線は、視聴者の両眼に導かれ、視聴者の観察位置が適切であれば、視聴者は立体画像を認識できる。このように視聴者が立体画像を観察可能な領域を視域という。【０００３】
しかしながら、このような視域は限定的であるという問題がある。例えば、左目に知覚される画像の視点が、右目に知覚される画像の視点に比べて相対的に右側となり、立体画像を正しく認識できない観察領域である逆視領域が存在する。【０００４】
従来、視聴者の位置に応じて視域を設定する技術として、視聴者の位置を何らかの手段（例えばセンサなど）で検出し、視聴者の位置に応じて、ピクセルマッピング前の視差画像を入れ替えて、視域を制御する技術が知られている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】米国特許第６０６４４２４号
【非特許文献】
【０００６】
【非特許文献１】Image Preparation for 3D-LCD
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来技術のような視差画像の入れ替えでは、離散的にしか視域の位置を制御することができず、連続的に移り変わる視聴者の位置に、十分に合わせることができない。そのため、視点の位置によって画像の画質が変化するだけでなく、移り変わりの最中、具体的には視差画像を入れ替えるタイミングなどで、映像が突然切り替わるように見え、視聴者に違和感を与える。これは、各視差画像がどの位置で見えるかはパララックスバリア、レンチキュラレンズの設計と、パネルのサブピクセルとの位置関係によってあらかじめ決められており、その位置からずれた場合、どのように視差画像を入れ替えても対応することができないためである。【０００８】
本発明の一側面が解決しようとする課題は、視聴者の位置にかかわらず、画質の劣化をできるだけ抑制して、立体画像を視聴可能にすることである。
【課題を解決するための手段】
【０００９】
本発明の実施形態に係る画像処理装置は、パネルと光学的開口部とを有する表示装置に立体画像を表示するための画像処理装置であって、視差画像取得部と、視聴者位置取得部と、画像生成部と、を備える。【００１０】
前記視差画像取得部は、１つの視点での画像である少なくとも１つの視差画像を取得する。【００１１】
前記視聴者位置取得部は、視聴者の位置を取得する。【００１２】
前記画像生成部は、前記視聴者の位置に基づいて、前記パネルと光学的開口部との対応関係に関するパラメータを補正し、補正後のパラメータに基づいて、前記表示装置に表示されたときに前記視聴者に前記立体画像を可視可能なように前記視差画像の各ピクセルを割り当てた画像を生成する。
【図面の簡単な説明】
【００１３】
【図１】実施形態の画像処理装置を備えた立体画像表示装置の構成例を示す図。
【図２】光学的開口部および表示素子を示す図。
【図３】図１に示した画像処理装置の処理フローを示す図。
【図４】パネルおよびレンズ間の角度、ピクセルマッピング、および各種用語の意味を説明するための図。
【図５】パネルと光学的開口部との対応関係に関するパラメータと、視域との関係を説明するための図。
【図６】パネルの中心を原点としたＸ，Ｙ、Ｚ座標空間を表す図。
【発明を実施するための形態】
【００１４】
本実施形態の画像処理装置は、視聴者が裸眼で立体画像を観察可能なＴＶ、ＰＣ、スマートフォン、デジタルフォトフレーム等の立体画像表示装置に用いられ得る。立体画像とは、互いに視差を有する複数の視差画像を含む画像であり、視聴者はこの画像を、レンチキュラレンズや、パララックスバリア等の光学的開口部を介して観察することで、立体画像を視認できる。なお、実施形態で述べる画像は、静止画又は動画のいずれであってもよい。
【００１５】
図１は、本実施形態の立体画像表示装置の構成例を示すブロック図である。立体画像表示装置は、画像取得部１と、視聴位置取得部２と、マッピング制御パラメータ算出部３と、ピクセルマッピング処理部４と、表示部（表示装置）５とを備える。画像取得部１と、視聴位置取得部２と、マッピング制御パラメータ算出部３と、ピクセルマッピング処理部４は、画像処理装置７を形成する。マッピング制御パラメータ算出部３とピクセルマッピング処理部４は、画像生成部８を形成する。
【００１６】
表示部５は、立体画像を表示するための表示装置である。表示装置が表示する立体画像を視聴者が観察可能な範囲（領域）を視域と呼ぶ。
【００１７】
本実施形態では、図６に示すように、実空間上において、パネル表示面（ディスプレイ）の中心を原点とし、ディスプレイ面の水平方向にＸ軸、ディスプレイ面の鉛直方向にＹ軸、ディスプレイ面の法線方向にＺ軸を設定する。本実施形態では、高さ方向とはＹ軸方向を指す。ただし、実空間上における座標の設定方法はこれに限定されるものではない。
【００１８】
図２（Ａ）に示すように、表示装置は、表示素子２０と開口制御部２６とを含む。視聴者は、開口制御部２６を介して表示素子２０を観察することで、表示装置に表示される立体画像を視認する。
【００１９】
表示素子２０は、立体画像の表示に用いる視差画像を表示する。表示素子２０としては、直視型２次元ディスプレイ、例えば、有機ＥＬ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）やＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、ＰＤＰ（Ｐｌａｓｍａ  Ｄｉｓｐｌａｙ  Ｐａｎｅｌ）、投射型ディスプレイなどがある。
【００２０】
表示素子２０は、例えば、ＲＧＢ各色のサブピクセルを、ＲＧＢを１画素としてマトリクス状に配置した公知の構成であってよい（図２（Ａ）における表示素子２０の個々の小さな矩形は、ＲＧＢのサブピクセルを示す）。この場合、第１方向に並ぶＲＧＢ各色のサブピクセルが１画素を構成し、隣接する画素を視差の数だけ、第１方向に交差する第２方向に並べた画素群に表示される画像を要素画像３０と称する。第１方向は、例えば列方向（垂直方向、あるいはＹ軸方向）であり、第２方向は、例えば行方向（水平方向、あるいはＸ軸方向）である。表示素子２０のサブピクセルの配列は、他の公知の配列であっても構わない。また、サブピクセルは、ＲＧＢの３色に限定されない。例えば、４色であっても構わない。
【００２１】
開口制御部２６は、表示素子２０からその前方に向けて発散される光線を、開口部を介して所定方向に向けて出射させる（以下、このような機能を有する開口部を光学的開口部と呼ぶ）。光学的開口部２６としては、レンチキュラレンズや、パララックスバリア等がある。
【００２２】
光学的開口部は、表示素子２０の各要素画像３０に対応するように配置される。１つの光学的開口部が１つの要素画像に対応している。表示素子２０に複数の要素画像３０を表示すると、表示素子２０には、複数の視差方向に対応した視差画像群（多視差画像）が表示される。この多視差画像による光線は、各光学的開口部を透過する。そして、視域内に位置する視聴者３３は、要素画像３０に含まれる画素を、左目３３Ａおよび右目３３Ｂでそれぞれ観察することになる。このように、視聴者３３の左目３３Ａおよび右目３３Ｂに対し、視差の異なる画像をそれぞれ表示させることで、視聴者３３が立体画像を観察することができる。
【００２３】
本実施形態では、図２（Ｂ）の平面図および図４（Ａ）の斜視図に示すように、光学的開口部２６はパネル表示面と平行に配置され、その光学的開口部の延伸方向が表示素子２０の第１方向（Ｙ軸方向）に対して、所定の傾きθを有している。
【００２４】
以下、図１に示した立体画像表示装置の各ブロックを詳細に説明する。
【００２５】
[画像取得部１]
画像取得部１では、表示したい視差画像数（視差数）に応じて、１つまたは複数の視差画像を取得する。視差画像は、記録媒体から取得する。たとえばハードディスクやサーバ等にあらかじめ保存しておき、そこから取得してもよいし、カメラや、複数のカメラを連結させたカメラアレイ、ステレオカメラ等の入力デバイスから、直接取得するように構成してもよい。
【００２６】
[視聴位置取得部２]
視聴位置取得部２は、視聴領域内の実空間における視聴者の位置を３次元座標値として取得する。視聴者の位置の取得には、例えば、可視カメラ、赤外線カメラ等の撮像機器の他、レーダやセンサ等の機器を用いることができる。これらの機器で得られた情報（カメラの場合には撮影画像）から、公知の技術を用いて、視聴者の位置を取得する。
【００２７】
例えば、可視カメラを用いた場合には、撮像によって得た画像を画像解析することで、視聴者の検出および視聴者の位置の算出を行う。これによって、視聴位置取得部２は視聴者の位置を取得する。
【００２８】
また、レーダを用いた場合には、得られたレーダ信号を信号処理することで、視聴者の検出及び視聴者の位置の算出を行う。これによって、視聴位置取得部２は視聴者の位置を取得する。
【００２９】
また、人物検出・位置算出における視聴者の検出においては、顔、頭、人物全体、マーカーなど、人であると判定可能な任意の対象を検出してもよい。視聴者の目の位置を検出してもよい。なお、視聴者の位置の取得方法は、上記の方法に限定されるものではない。
【００３０】
[ピクセルマッピング処理部４]
ピクセルマッピング処理部４は、画像取得部１で取得した視差画像群の各サブピクセルを、視差数N、光学的開口部のY軸に対する傾きθ、光学的開口部とパネルとのX軸方向のずれ量（パネル換算シフト量）koffset、光学的開口部１つに対応するパネル上での幅Xn等の制御パラメータをもとに並べ替える（割り当てる）ことで、各要素画像３０を決定する。なお、以下では表示素子２０全体に表示する複数の要素画像３０を要素画像アレイと呼ぶ。要素画像アレイは、表示時に視聴者が立体画像を可視可能なように視差画像の各ピクセルを割り当てた画像である。
【００３１】
並べ替えには、まず要素画像アレイの各サブピクセルから射出される光線が、光学的開口部２６を通して飛ぶ方向を算出する。これには、例えば非特許文献１（Image Preparation for 3D-LCD）に記載の方法を用いることができる。
【００３２】
例えば、以下の式１を用いて、光線が飛ぶ方向を算出することができる。式中のsub_x, sub_yはそれぞれパネル左上隅を基準とした場合のサブピクセルの座標である。v(sub_x, sub_y)はsub_x, sub_yのサブピクセルから射出される光線が光学的開口部２６を通して飛ぶ方向である。
【数１】
0005881732.tif 000002
【００３３】
ここで求められる光線の方向とは、光学的開口部２６の延伸方向に対してX軸を基準とした場合の水平幅Xnの領域を定義し、その領域の最もX軸の負の方向に存在する境界線に対応する位置から射出される光が飛ぶ方向を0とし、その境界からXn/Nだけ離れた位置から射出される光が飛ぶ方向を1というように順に定義した場合に、各サブピクセルから出る光が光学的開口部２６を通して飛ぶ方向を表す番号のことである。さらなる詳細な説明については公知文献１を参照いただきたい。
【００３４】
そののち、サブピクセルごとに計算された方向と、取得した視差画像を対応付ける。例えば、視差画像群のうち、視差画像生成時の視点位置と光線の方向とが互いに最も近いものを選択する、中間の視点位置の視差画像を視差画像間の補間により生成するなどが考えられる。これにより、サブピクセルごとに、色を取得する視差画像（参照視差画像）が決定される。
【００３５】
図４（Ｂ）に、視差数N＝１２とし、各視差画像に０〜１１までの番号を割り当てた場合の参照視差画像の番号の一例を示す。紙面に沿って横方向にならぶ０，１，２，３，・・・は、サブピクセルのＸ軸方向の位置を表し、縦方向に並ぶ０，１，２，・・・は、Ｙ軸方向の位置を表す。紙面に沿って斜めに走る線は、Ｙ軸に対してθの角度で配置された光学的開口部を表している。矩形の各セル内に記載された数字が、参照視差画像の番号に対応するとともに、前述した光が飛ぶ方向に対応する。数字が整数の場合は、その整数は、同じ番号の視差画像に対応し、小数は、その数字を間に含む２つの番号の視差画像により補間した画像に対応する。たとえば数字が７．０であれば、番号７の視差画像を参照視差画像として用い、数字が６．７であれば、番号６および番号７の参照視差画像を用いて補間した画像を参照視差画像として用いる。最後に、要素画像アレイのサブピクセルごとに、参照視差画像を表示素子２０全体に対応させた場合に対応する位置のサブピクセルを割り当てる。以上により、表示装置における各表示画素の各サブピクセルに割り当てる値が決まる。なお、視差画像取得部１が１つの視差画像しか読み出していない場合は、当該１つの視差画像から他の視差画像を生成すればよい。たとえば上記の０番に相当する視差画像１つを読み出した場合は、当該視差画像から、１〜１１番に相当する視差画像を生成すればよい。
【００３６】
なお、ピクセルマッピング処理には必ずしも公知文献１を用いる必要はなく、パネルと光学的開口部との対応関係に関するパラメータ、上記の例では、パネルと光学的開口部の位置ずれを定義するパラメータ、および光学的開口部１つに対応するパネル上での幅を定義するパラメータ、に基づいたピクセルマッピング処理であれば、いずれの手法を用いてもよい。
【００３７】
ここで、本来、各パラメータはパネル２７と光学的開口部２６との関係によって決定され、ハードウェアを再設計しない限り変わることはない。本実施形態では、観察者の視点位置をもとに上記パラメータ（特に光学的開口部とパネルとのX軸方向のずれ量koffset、光学的開口部１つに対応するパネル上での幅Xn）を補正することにより、所望の位置に視域を移動させる。例えば非特許文献１の方法をピクセルマッピングに用いる場合は、以下の式２のようにパラメータを補正することで、視域の移動を実現する。
【数２】
0005881732.tif 000003
【００３８】
r_offsetは,koffsetに対する補正量を表す。r_XnはXnに対する補正量を表す。これらの補正量の算出方法については、後述する。
【００３９】
上記の式２では、koffsetを、光学的開口部に対するパネルのずれ量と定義した場合を示しているが、パネルに対する光学的開口部のずれ量と定義する場合は、以下の式３のようになる。なお、Xnに対する補正は、上記の式２と同じである。
【数３】
0005881732.tif 000004
【００４０】
[マッピング制御パラメータ算出部３]
マッピング制御パラメータ算出部３は、視域を観察者に合わせて移動させるための、補正パラメータ（補正量）を算出する。補正パラメータは、マッピング制御パラメータとも呼ばれる。本実施形態で、補正対象となるパラメータはkoffsetとXnの２つのパラメータである。
【００４１】
パネルおよび光学的開口部が図５（Ａ）に示す状態にあるときに、パネルと光学的開口部の位置関係を水平方向にずらすと、図５（Ｃ）に示すように、ずらした方向に視域が移動する。図５（Ｃ）の例では、光学的開口部を紙面に沿って左にシフトしたことで、光線がηだけ図５（Ａ）の場合よりも左に寄り、これによって視域も左に寄っている。これは、レンズの位置をもとの位置で固定して考えた場合、表示画像が逆方向に動くのと等価である。本来、このずれはピクセルマッピングの際にkoffsetとして与えられ、両者のずれを考慮してv(sub_x, sub_y)が決定される。これにより、両者が相対的にずれた場合でもパネル正面に視域が構成される。本実施形態では、これに対して工夫を加える。すなわち、視聴者の位置に応じて、パネルと光学的開口部のずれであるkoffsetを物理的なずれ量よりも増減させるように補正する。これにより、ピクセルマッピングによる視域の水平方向（X軸方向）の位置補正の程度を連続的に（細かく）でき、従来技術では視差画像の入れ替えにより離散的にしか変化させることができなかった水平方向（Ｘ軸方向）における視域の位置を、連続的に変化させることが可能となる。よって、視聴者が任意の水平位置（Ｘ軸方向の位置）にいる場合に、視聴者に対し適切に視域を合わせることが可能となる。
【００４２】
また、パネルおよび光学的開口部が図５（Ａ）に示す状態にあるときに、図５（Ｂ）に示すように、光学的開口部１つに対応するパネル上での幅Xnを広げると、視域はパネルに近くなる（つまり、図５（Ｂ）では図５（Ａ）よりも要素画像幅が大きくなっている）。したがって、Xnの値を、実際の値よりも増減させるように補正することで、ピクセルマッピングによる視域の垂直方向（Ｚ軸方向）の位置補正の程度を連続的に（細かく）できる。これにより、従来技術では視差画像の入れ替えにより離散的にしか変化させることができなかった垂直方向（Ｚ軸方向）における視域の位置を、連続的に変化させることが可能となる。よって、視聴者が任意の垂直位置（Ｚ軸方向の位置）にいる場合に、適切に視域を合わせることが可能となる。
【００４３】
以上より、パラメータkoffset、Xnを適切に補正することで、水平方向および垂直方向のいずれにも視域の位置を連続的に変化させることができる。よって、観察者が任意の位置にいる場合でも、その位置に合わせた視域を設定することが可能となる。
【００４４】
以下、koffsetに対する補正量r_koffset、Xnに対する補正量r_Xnの算出方法を示す。
【００４５】
・r_koffset
r_koffsetは、視聴位置のX座標から算出する。具体的には、現在の視聴位置のX座標と、視聴位置からパネル（あるいはレンズ）までの距離である視距離L、および光学的開口部（レンズの場合は主点Ｐ）とパネルとの距離であるギャップg（図４（Ｃ）参照）を用いて、以下の式４で、r_koffsetは算出される。なお、現在の視聴位置は、視聴位置取得部２により取得され、視距離Ｌは、当該現在の視聴位置から計算される。
【数４】
0005881732.tif 000005
【００４６】
・r_Xn
r_Xnは、視聴位置のZ座標から、以下の式５により算出される。なお、lens_width（図４（Ｃ）参照）は、光学的開口部をX軸方向（レンズの長手方向）に沿って切った場合の幅である。
【数５】
0005881732.tif 000006
【００４７】
[表示部５]
表示部５は前述したような、表示素子２０と光学的開口部２６とを含む表示装置である。視聴者は、光学的開口部２６を介して表示素子２０を観察することで、表示装置に表示される立体画像を観察する。
【００４８】
前述したように、表示素子２０としては、直視型２次元ディスプレイ、例えば、有機ＥＬ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）やＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、ＰＤＰ（Ｐｌａｓｍａ  Ｄｉｓｐｌａｙ  Ｐａｎｅｌ）、投射型ディスプレイなどがある。表示素子２０は、例えば、ＲＧＢ各色のサブピクセルを、ＲＧＢを１画素としてマトリクス状に配置した公知の構成であってよい。表示素子２０のサブピクセルの配列は、他の公知の配列であっても構わない。また、サブピクセルは、ＲＧＢの３色に限定されない。例えば、４色であっても構わない。
【００４９】
図３は、図１に示した画像処理装置の動作の流れを示すフローチャートである。
【００５０】
ステップS101において、視差画像取得部１が、記録媒体から１つまたは複数の視差画像を取得する。
【００５１】
ステップS102において、視聴位置取得部２が、撮像機器または、レーダやセンサ等の機器を用いて、視聴者の位置情報を取得する。
【００５２】
ステップS103において、マッピング制御パラメータ算出部３が、視聴者の位置情報に基づき、パネルと光学的開口部の対応関係に関するパラメータを補正するための補正量（マッピング制御パラメータ）を計算する。補正量の計算例は、式４および式５に示した通りである。
【００５３】
ステップS104において、ピクセルマッピング処理部４が、当該補正量に基づき、当該パネルと光学的開口部の対応関係に関するパラメータを補正する（式２、式３参照）。ピクセルマッピング処理部４が、補正後のパラメータに基づき、表示装置に表示されたときに視聴者が立体画像を可視可能なように、視差画像の各ピクセルを割り当てた画像を生成する（式１参照）。
【００５４】
この後、表示部５が、当該生成された画像がパネルに表示されるように各表示画素を駆動する。視聴者は、光学的開口部２６を介してパネルの表示素子を観察することで、立体画像を観察することができる。
【００５５】
以上に説明したように、本実施形態では、ピクセルマッピング時に、本来一意に決定されている物理的パラメータを観察者の位置に応じて補正することにより、視域を視聴者の方向に制御する。当該物理的パラメータには、パネルと光学的開口部の位置ずれ、および光学的開口部１つに対応するパネル上での幅を用いる。これらのパラメータは任意の値をとることが可能であるため、従来技術（視差画像入れ替えによる離散的な制御）に比べ、視域をより正確に視聴者に合わせることが可能となる。よって、視聴者の移動に合わせて、正確に視域を追従させることができる。
【００５６】
以上、本発明の実施形態を説明したが、上述の各実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。
【００５７】
上述の実施形態の画像処理装置は、ＣＰＵ（Central  Processing  Unit）、ＲＯＭ、ＲＡＭ、および、通信Ｉ／Ｆ装置などを含んだハードウェア構成となっている。上述した各部の機能は、ＣＰＵがＲＯＭに格納されたプログラムをＲＡＭ上で展開して実行することにより実現される。また、これに限らず、各部の機能のうちの少なくとも一部を個別の回路（ハードウェア）で実現することもできる。
【００５８】
また、上述の実施形態の画像処理装置で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するようにしてもよい。また、上述の各実施形態および変形例の画像処理装置で実行されるプログラムを、インターネット等のネットワーク経由で提供または配布するようにしてもよい。また、上述の実施形態の画像処理装置で実行されるプログラムを、ＲＯＭ等に予め組み込んで提供するようにしてもよい。
【図１】
0005881732.tif 000007
【図２】
0005881732.tif 000008
【図３】
0005881732.tif 000009
【図４】
0005881732.tif 000010
【図５】
0005881732.tif 000011
【図６】
0005881732.tif 000012