(57)【要約】【課題】相対的に高いモノスコピック画像の画質を有する画像処理ユニットと、相対的に高いモノスコピック画像の画質を得ることが可能な方法と、相対的に高いモノスコピック画像の画質を有する画像表示機器とを提供すること。【解決手段】画像処理ユニット（１００）は、ステレオスコピック表示デバイス（３０６）に表示される第一出力画像2004522382.tif 000036と第二出力画像2004522382.tif 000037とを生成し、第一出力画像2004522382.tif 000038と第二出力画像2004522382.tif 000039とを左目と右目とで実質的に別々に知覚する第一観察者（３０２）には、ステレオスコピック画像が提供され、かつ、第一出力画像2004522382.tif 000040と第二出力画像2004522382.tif 000041とを実質的に両方とも両目で知覚する第二観察者（３０４）には、モノスコピック画像が提供されるように、するように設計されている。この画像処理ユニット（１００）は、入力画像（Ｉ）にオフセット画像（△Ｉ）を加算することによって第一出力画像2004522382.tif 000042を計算し、かつ、入力画像（Ｉ）からオフセット画像（△Ｉ）を減算することによって第二出力画像2004522382.tif 000043を計算するように設計されている。【選択図】図３
2004522382.tif 000002
【特許請求の範囲】
【請求項１】
ステレオスコピック表示デバイスに表示される第一出力画像と第二出力画像とを、複数の入力画像に基づいて生成するための画像処理ユニットであって、
− 前記第一出力画像と前記第二出力画像とを左目と右目とで実質的に別々に知覚する第一観察者には、ステレオスコピック画像を提供し、かつ、
− 前記第一出力画像と前記第二出力画像とを実質的に両方とも両目で知覚する第二観察者には、モノスコピック画像を提供する、
画像処理ユニットにおいて、
− 前記入力画像の第一画像に基づいてオフセット画像を計算するように設計されているオフセット計算器と、
− 前記入力画像の第二画像に前記オフセット画像を加算することによって、前記第一出力画像を計算するように設計されている加算ユニットと、
− 前記入力画像の前記第二画像から前記オフセット画像を減算することによって、前記第二出力画像を計算するように設計されている減算ユニット と、
を有することを特徴とする、画像処理ユニット。
【請求項２】
前記オフセット計算器が、前記入力画像の前記第一画像から前記入力画像の第三画像を減算し、かつ、実質的に２に等しい定数で除算することによって、前記オフセット画像を計算するように設計されていることを特徴とする、請求項１に記載の画像処理ユニット。
【請求項３】
前記オフセット計算器が、前記入力画像の前記第一画像から前記入力画像の前記第二画像を減算することによって、前記オフセット画像を計算するように設計されていることを特徴とする、請求項１に記載の画像処理ユニット。
【請求項４】
前記オフセット計算器が、前記入力画像の前記第一画像を微分することによって、前記オフセット画像を計算するように設計されていることを特徴とする、請求項１に記載の画像処理ユニット。
【請求項５】
取り込まれた画像と奥行マップとに基づいて、前記入力画像をレンダリングするように設計されているレンダリングユニットを更に有することを特徴とする、請求項１に記載の画像処理ユニット。
【請求項６】
前記奥行マップが奥行カメラによって提供されることを特徴とする、請求項５に記載の画像処理ユニット。
【請求項７】
前記取り込まれた画像に基づいて前記奥行マップを生成するように設計されている奥行推定ユニットを更に有することを特徴とする、請求項５に記載の画像処理ユニット。
【請求項８】
ステレオスコピック表示デバイスに表示される第一出力画像と第二出力画像とを、複数の入力画像に基づいて生成するための方法であって、
− 前記第一出力画像と前記第二出力画像とを左目と右目とで実質的に別々に知覚する第一観察者には、ステレオスコピック画像を提供し、かつ、
− 前記第一出力画像と前記第二出力画像とを実質的に両方とも両目で知覚する第二観察者には、モノスコピック画像を提供する方法において、
− 前記入力画像の第一画像に基づいてオフセット画像を計算するステップと、
− 前記入力画像の第二画像に前記オフセット画像を加算することによって、前記第一出力画像を計算するステップと、
− 前記入力画像の前記第二画像から前記オフセット画像を減算することによって、前記第二出力画像を計算するステップと、
を有することを特徴とする方法。
【請求項９】
前記入力画像の前記第一画像から前記入力画像の前記第二画像を減算することによって、前記オフセット画像を計算することを特徴とする、請求項８に記載の方法。
【請求項１０】
− ステレオスコピック表示デバイスに表示される第一出力画像と第二出力画像とを、複数の入力画像に基づいて生成するための画像処理ユニットであって、
− 前記第一出力画像と前記第二出力画像とを左目と右目とで実質的に別々に知覚する第一観察者には、ステレオスコピック画像を提供し、かつ、
− 前記第一出力画像と前記第二出力画像とを実質的に両方とも両目で知覚する第二観察者には、モノスコピック画像を提供する、
画像処理ユニットと、
− 前記ステレオスコピック表示デバイスと、
を有する画像表示機器において、
前記画像処理ユニットが、
− 前記入力画像の第一画像に基づいてオフセット画像を計算するように設計されているオフセット計算器と、
− 前記入力画像の第二画像に前記オフセット画像を加算することによって、前記第一出力画像を計算するように設計されている加算ユニットと、
− 前記入力画像の前記第二画像から前記オフセット画像を減算することによって、前記第二出力画像を計算するように設計されている減算ユニットと、
を有することを特徴とする、画像表示機器。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ステレオスコピック表示デバイス（ｓｔｅｒｅｏｓｃｏｐｉｃ ｄｉｓｐｌａｙ ｄｅｖｉｃｅ）に表示される第一出力画像と第二出力画像とを、複数の入力画像に基づいて生成するための画像処理ユニットであって、
− 前記第一出力画像と前記第二出力画像とを左目と右目とで実質的に別々に知覚する第一観察者には、ステレオスコピック画像を提供し、かつ、
− 前記第一出力画像と前記第二出力画像とを実質的に両方とも両目で知覚する第二観察者には、モノスコピック画像（ｍｏｎｏｓｃｏｐｉｃ ｉｍａｇｅ）を提供する、画像処理ユニットに関する。
【０００２】
本発明は、更に、ステレオスコピック表示デバイスに表示される第一出力画像と第二出力画像とを、複数の入力画像に基づいて生成するための方法であって、
− 前記第一出力画像と前記第二出力画像とを左目と右目とで実質的に別々に知覚する第一観察者には、ステレオスコピック画像を提供し、かつ、
− 前記第一出力画像と前記第二出力画像とを実質的に両方とも両目で知覚する第二観察者には、モノスコピック画像を提供する方法にも関する。
【０００３】
本発明は、更に、
− ステレオスコピック表示デバイスに表示される第一出力画像と第二出力画像とを、複数の入力画像に基づいて生成するための画像処理ユニットであって、
− 前記第一出力画像と前記第二出力画像とを左目と右目とで実質的に別々に知覚する第一観察者には、ステレオスコピック画像を提供し、かつ、
− 前記第一出力画像と前記第二出力画像とを実質的に両方とも両目で知覚する第二観察者には、モノスコピック画像を提供する、
画像処理ユニットと、
− 前記ステレオスコピック表示デバイスと、
を有する画像表示機器にも関する。
【０００４】
【従来の技術】
冒頭の段落で説明した種類の画像処理ユニットの実施例は、論文「まさに十分なリアリティ：マイクロステレオプシスによる快適な三次元視覚 （Ｊｕｓｔ ｅｎｏｕｇｈ ｒｅａｌｉｔｙ： Ｃｏｍｆｏｒｔａｂｌｅ ３−Ｄ ｖｉｅｗｉｎｇ ｖｉａ ｍｉｃｒｏｓｔｅｒｅｏｐｓｉｓ）」ＩＥＥＥ Ｔｒａｎｓａｃｔｉｏｎｓ ｏｎ Ｃｉｒｃｕｉｔｓ ａｎｄ Ｓｙｓｔｅｍｓ ｆｏｒ Ｖｉｄｅｏ Ｔｅｃｈｎｏｌｏｇｙ （映像技術用の回路とシステムに関するＩＥＥＥ）論文集、第１０巻、第３号、３８７〜３９６頁、２０００年から知られている。
【０００５】
従来の、眼鏡を使用したステレオスコピック・システムでは、適切な眼鏡をかけている観察者が、ステレオスコピック画像を観察することが出来た。観察者は、眼鏡により、左右の画像を実質上左右別々に知覚する。眼鏡にフィルタ効果がない場合、クロス−トークが発生する。観察者は、二重画像、すなわち、左右の画像が混合し、どちらの目でも見えてしまう像、を知覚する。
【０００６】
この引用論文では、眼間分離の下限、すなわちマイクロステレオプシスが利用されており、意外な程小さい差異が、正確でかつ心地良い奥行感覚を刺激することが、示されている。このような「軽い」３Ｄによっては、奥行の知覚は不変のままであることが、述べられている。これによって、３Ｄを長時間視覚している間の視覚快適度を向上させることが可能になる。ここで説明されている状況では、クロス−トークは、ゴースト（ｇｈｏｓｔｉｎｇ）ではなく、焦点深度（ｄｅｐｔｈ−ｏｆ−ｆｏｃｕｓ）として知覚される。言い換えると、カメラ間の基線（ｂａｓｅ−ｌｉｎｅ）が小さい場合、クロス−トークは、二重化ではなくぼけとして知覚される。すなわち、眼鏡をかけていない観察者が見る画像は、画質は許容可能であるが不鮮明なモノスコピック画像となる。カメラ間の基線を規定することによって、モノスコピック画像の画質と３Ｄ効果の量とをトレードオフの関係にすることが出来る。カメラ間の基線を低くすると、眼鏡をかけている観察者に対する奥行効果は、低下する。極端な３Ｄ効果は、もはや不可能となる。一方、眼鏡をかけていない観察者に対しては、クロス−トークによって発生するアーチファクトも低下する。しかしながら、カメラ間の基線が相対的に小さい場合であっても、モノスコピック画像がこれらのアーチファクトを示すことは、問題である。
【０００７】
【課題を解決するための手段】
本発明の第一目的は、モノスコピック画像の画質が相対的に高い、冒頭の段落で説明した種類の画像処理ユニットを提供することである。
【０００８】
本発明の第二目的は、モノスコピック画像の画質が相対的に高い、冒頭の段落で説明した種類の方法を提供することである。
【０００９】
本発明の第三目的は、モノスコピック画像の画質が相対的に高い、冒頭の段落で説明した種類の画像表示機器を提供することである。
【００１０】
本発明の第一目的は、
− 入力画像の第一画像に基づいてオフセット画像を計算するように設計されているオフセット計算器と、
− 入力画像の第二画像にオフセット画像を加算することによって、第一出力画像を計算するように設計されている加算ユニットと、かつ、
− 入力画像の第二画像からオフセット画像を減算することによって、第二出力画像を計算するように設計されている減算ユニットと、
を有する画像処理ユニットによって達成される。
説明を簡単にするために、画像処理ユニットに入力画像を提供する、一線上に正確に配置されている３台の（トリプル）カメラを挙げる。図１Ａを参照されたい。真中のカメラは、標準的な表示デバイスに表示されると、観察者は、モノスコピック画像を観察することが出来る、モノスコピック入力画像Ｉを提供する。左右のカメラは、ステレオスコピック表示デバイスに共に表示されると、観察者は、ステレオスコピック画像を観察することが出来る、入力画像ＩＬと入力画像ＩＲとを提供する。
【００１１】
画像処理ユニットは、これらの入力画像の内の少なくとも１つを受信する。この／これらの画像を処理することによって、第一出力画像
2004522382.tif 000003
と第二出力画像
2004522382.tif 000004
とが得られる。これらの２つの出力画像が、適切なステレオスコピック表示デバイスに表示されると、ステレオスコピック画像とモノスコピック画像とを観察することが出来る。これは、観察者が眼鏡をかけているか否かに依る。すなわち、
− 観察者が眼鏡を使用する場合には、ステレオスコピック画像が観察される。これは、すなわち、
2004522382.tif 000005
と
2004522382.tif 000006
とを意味する。
− 観察者が眼鏡を使用しない場合には、モノスコピック画像が観察される。これは、すなわち、
2004522382.tif 000007
（Ｉ＊は、観察されるモノスコピック出力画像）を意味する。画像処理ユニットは、入力画像を処理して、モノスコピック入力画像Ｉよりも、あるオフセット画像△Ｉ分だけ大きく、または小さくしたものに等しい、第一出力画像
2004522382.tif 000008
と第二出力画像
2004522382.tif 000009
とを生じる。式で表すと、以下のようになる。
2004522382.tif 000010
2004522382.tif 000011
第一出力画像
2004522382.tif 000012
と第二出力画像
2004522382.tif 000013
とを、適切な眼鏡と組み合わされたステレオスコピック表示デバイスによって分離することによって、観察者は、ステレオスコピック画像を見ることが出来る。この観察者は、２つの出力画像を識別することが出来、これによって３Ｄ効果すなわちステレオスコピック画像を得ることが出来る。眼鏡をかけていない観察者には、これらの２つの出力画像は混合される。この観察者は、これらの２つの出力画像を識別することが出来ない。この観察者が見る画像は、実質的にモノスコピック入力画像Ｉと等しく知覚されるモノスコピック画像である。
2004522382.tif 000014
この画像処理ユニットの利点は、モノスコピック画像の画質が、３Ｄ効果の量とは実質的に無関係であることである。これは、眼鏡をかけたくない観察者が、画質が相対的に高いモノスコピック画像を得ることが出来ることを意味する。しかしながら、同時に、眼鏡をかけたい観察者も、画質が相対的に高いステレオスコピック画像を観察することが出来る。
【００１２】
本発明による画像処理ユニットの実施例では、オフセット計算器は、入力画像の内の第一画像から入力画像の内の第三画像を減算し、かつ、実質的に２に等しい定数で除算することによって、オフセット画像を計算するように設計されている。入力画像の第一画像と、入力画像の第二画像と、入力画像の第三画像とは、３台のカメラにより取り込むことが出来る。１台のカメラを、取り込む瞬間と瞬間との間に移動させることによって、これらの画像を取り込むことも出来る。更に、グラフィックスシステムによって画像を生成することも出来る。△Ｉは、入力画像の第一画像と入力画像の第三画像との差の半分として選択される。ＩＬを、入力画像の内の第一画像とし、かつＩＲを、入力画像の内の第三画像と仮定する。すると、以下の式が得られる。
2004522382.tif 000015
この利点は、出力画像
2004522382.tif 000016
と
2004522382.tif 000017
とが、各々、入力画像ＩＬとＩＬとに非常に類似していることである。輝度を、例えば、［０，２５５］に固定した場合、△Ｉの加算と減算との後に、
2004522382.tif 000018
と
2004522382.tif 000019
とに有効な輝度値が含まれていることを確認するためにクリッピングを行うことが好ましい。この代替方法には、入力画像のスケーリングがある。
【００１３】
本発明による画像処理ユニットの他の実施例では、オフセット計算器は、入力画像の内の第一画像から入力画像の内の第二画像を減算することによって、オフセット画像を計算するように設計されている。入力画像の第一画像と、入力画像の第二画像とは、ステレオカメラによって取り込むことが出来る。１台のカメラを、取り込む時点の間に移動させることによって、これらの画像を取り込むことも出来る。更に、グラフィックスシステムによって画像を生成することも出来る。△Ｉは、入力画像の第一画像と入力画像の第三画像との差として選択される。ＩＬは、入力画像の第一画像であり、かつＩは、入力画像の第二画像であるとする。すると、以下の式が得られる。
2004522382.tif 000020
この利点は、画像を取り込むために標準的なステレオカメラを使用しても、相対的に良好かつ簡単なステレオスコピック画像とモノスコピック画像とを達成することが出来ることである。
【００１４】
本発明による画像処理ユニットの他の実施例では、オフセット計算器は、入力画像の第一画像を微分することによって、オフセット画像を計算するように設計されている。この場合、入力画像は１つしかない。すなわち、入力画像の第二画像は、入力画像の第一画像に等しい。オフセット画像は、この入力画像から直接計算される。これの利点は、オフセット画像の計算が容易であり、かつ非常に強固なことである。オフセット画像は、軽い３Ｄ効果をもたらすが、これは、必ずしもその場面の実際の奥行に関連している訳ではない。画像中の輝度の遷移は、奥行の遷移に対応すると仮定する。入力画像の第一画像は、モノラルカメラによって取り込む、または、グラフィックスシステムから生成することが出来る。オフセット画像の計算方法の例を、式６に示す。
2004522382.tif 000021
【００１５】
本発明による画像処理ユニットの実施例は、取り込まれた画像と奥行マップとに基づいて入力画像をレンダリングするように設計されているレンダリングユニットを、更に有する。画像が、トリプルカメラ構成またはステレオカメラ構成から生成されたかのように、画像をレンダリングすることが出来ることは、利点である。この点から、この処理を、これらの構成により上述したように使用することが出来る。
【００１６】
レンダリングユニットを有する本発明による画像処理ユニットの実施例では、奥行マップは、奥行カメラによって提供される。奥行カメラを使用することによって、奥行マップを直接使用することが可能になる。一つ以上の画像から奥行を推定することは、相対的に複雑な問題である。従って、奥行カメラによって奥行マップを提供すれば、有利である。
【００１７】
レンダリングユニットを有する本発明による画像処理ユニットの実施例は、更に、取り込まれた画像に基づいて奥行マップを生成するように設計されている奥行推定ユニットを有する。この考え方は、例えば、論文「信頼に基づくブロック整合化を用いた運動による奥行（Ｄｅｐｔｈ ｆｒｏｍ ｍｏｔｉｏｎ ｕｓｉｎｇ ｃｏｎｆｉｄｅｎｃｅ ｂａｓｅｄ ｂｌｏｃｋ ｍａｔｃｈｉｎｇ）」（Ｐ． ＷｉｌｉｎｓｋｉとＫ． ｖａｎ Ｏｖｅｒｖｅｌｄ、画像信号と多次元信号の処理手順に関する研究会（Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ Ｉｍａｇｅ ａｎｄ Ｍｕｌｔｉｄｉｍｅｎｓｉｏｎａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｗｏｒｋｓｈｏｐ）、１５９〜１６２頁、Ａｌｐｈｂａｃｈ， Ａｕｓｔｒｉａ， １９９８年）に説明されている。本発明によるこの実施例の利点は、標準的なモノラルカメラによって取り込まれた映像シーケンスからでも、３Ｄ−効果を有する画像を作成することが可能なことである。
【００１８】
本発明の第二目的は、
− 前記入力画像の第一画像に基づいてオフセット画像を計算するステップと、
− 前記入力画像の第二画像に前記オフセット画像を加算することによって、前記第一出力画像を計算するステップと、かつ、
− 前記入力画像の前記第二画像から前記オフセット画像を減算することによって、前記第二出力画像を計算するステップと、
を有する方法によって達成される。
【００１９】
本発明の第三目的は、画像表示機器の画像処理ユニットが、
− 前記入力画像の第一画像に基づいてオフセット画像を計算するように設計されているオフセット計算器と、
− 前記入力画像の第二画像に前記オフセット画像を加算することによって、前記第一出力画像を計算するように設計されている加算ユニットと、
− 前記入力画像の前記第二画像から前記オフセット画像を減算することによって、前記第二出力画像を計算するように設計されている減算ユニットと、
を有することによって達成される。
この画像表示機器は、受信手段、復号器、かつ格納手段のようなコンポーネントを有することも出来る。画像処理ユニットの変更態様とその変形態様とは、ここで記載されている方法と画像表示機器とのその変更態様と変形態様とに対応する。
【００２０】
【発明を実施するための形態】
本発明による画像処理ユニットと、方法と、画像表示機器との、これらの態様と他の態様は、以下に説明する実施態様と実施例から、かつ添付の図面を参照して、明らかになり、かつ解明されるであろう。対応する参照番号は、全ての図で同じ意味を有する。
【００２１】
図１Ａは、画像ＩＬ， 画像Ｉ， 画像ＩＲを各々取り込むカメラ１１４〜１１８を有するトリプルカメラに接続されている画像処理ユニット１００の実施例を、線図的に示す。これらの画像は、その入力コネクタ１０８〜１１２を介して、画像処理ユニット１００に提供される。画像処理ユニット１００は、第一出力画像
2004522382.tif 000022
と第二出力画像
2004522382.tif 000023
とを生成するように設計されている。画像処理ユニット１００は、
− 式４によって、入力画像ＩＬと入力画像ＩＲとに基づいてオフセット画像△Ｉを計算するように設計されているオフセット計算器１０２と、
− 式１によって、入力画像Ｉにオフセット画像△Ｉを加算することによって第一出力画像
2004522382.tif 000024
を計算するように設計されている加算ユニット１０４と、
− 式２によって入力画像Ｉからオフセット画像△Ｉを減算することによって、第二出力画像
2004522382.tif 000025
を計算するように設計されている減算ユニット１０６と、
を有する。
【００２２】
図１Ｂは、画像ＩＬと画像Ｉとを各々取り込むカメラ１１４とカメラ１１６とを有するステレオカメラに接続されている画像処理ユニット１０１の実施例を、線図的に示す。これらの画像は、その入力コネクタ１０８と入力コネクタ１１２とを介して、画像処理ユニット１０１に提供される。この画像処理ユニット１０１は、第一出力画像
2004522382.tif 000026
と第二出力画像
2004522382.tif 000027
とを生成するように設計されている。画像処理ユニット１０１は、式５によって入力画像ＩＬとＩとに基づいてオフセット画像△Ｉを計算するように設計されているオフセット計算器１０２を有する。
【００２３】
図１Ｃは、画像Ｉを取り込むモノラルカメラ１１６に接続されている画像処理ユニット１０３の実施例を線図的に示す。この画像は、その入力コネクタ１０８を介して画像処理ユニット１０３に提供される。この画像処理ユニット１０３は、第一出力画像
2004522382.tif 000028
と第二出力画像
2004522382.tif 000029
とを生成するように設計されている。画像処理ユニット１０３は、方程式６によって入力画像Ｉに基づいてオフセット画像△Ｉを計算するように設計されているオフセット計算器１０２を有する。
【００２４】
図２Ａは、レンダリング装置２０２を有する画像処理ユニット１０５の実施例を線図的に示す。画像処理ユニット１０５は、入力コネクタ１０８と入力コネクタ２０８とを介して、その入力を受信する。カメラ１１６は、輝度値を表すピクセルを有する画像Ｉを取り込む。カメラ２１６は、奥行値を表すピクセルを有する奥行マップを取り込む。入力画像ＩＬとＩＲとは、画像の視差変換によって作成される。これは、入力画像ＩＬと入力画像ＩＲとを実現するために使用される、奥行に依存したピクセルシフトが計算されることを意味する。この種の処理は、例えば、米国特許第５，９２９，８５９号に開示されている。この米国特許には、シフトによって発生する不要な穴または重複を防止出来ることが明記されている。画像処理ユニット１０５は、式４によって入力画像ＩＬと入力画像ＩＲとに基づいて、および／または、式５によって入力画像ＩＬと入力画像Ｉとに基づいて、オフセット画像△Ｉを計算するように設計されているオフセット計算器１０２を有する。
【００２５】
図２Ｂは、レンダリング装置２０２と奥行推定ユニット２０４とを有する画像処理ユニット１０７の実施例を線図的に示す。この画像処理ユニット１０７は、入力コネクタ１０８を介して、その入力を受信する。カメラ１１６は、輝度値を表すピクセルを有する画像を取り込む。入力画像ＩＬと入力画像ＩＲは、画像Ｉの視差変換と、奥行推定ユニット２０４によって作成される奥行マップとによって作成される。奥行推定ユニット２０４は、例えば、論文「信頼に基づくブロック整合化を用いた運動による奥行（Ｄｅｐｔｈ ｆｒｏｍ ｍｏｔｉｏｎ ｕｓｉｎｇ ｃｏｎｆｉｄｅｎｃｅ ｂａｓｅｄ ｂｌｏｃｋ ｍａｔｃｈｉｎｇ）」（Ｐ． ＷｉｌｉｎｓｋｉとＫ． ｖａｎ Ｏｖｅｒｖｅｌｄ、画像信号と多次元信号の処理手順に関する研究会（Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ Ｉｍａｇｅ ａｎｄ Ｍｕｌｔｉｄｉｍｅｎｓｉｏｎａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｗｏｒｋｓｈｏｐ）、１５９〜１６２頁、Ａｌｐｂａｃｈ， Ａｕｓｔｒｉａ， １９９８年）に記載されているように設計されている。画像処理ユニット１０７は、方程式４によって入力画像ＩＬとＩＲとに基づいて、および／または、方程式５によって入力画像ＩＬとＩに基づいて、オフセット画像を計算するように設計されているオフセット計算器１０２を有する。
【００２６】
図３は、この明細書における画像表示機器３００の実施例を線図的に示す。図３には、カメラ１１４〜１１８に接続されているマルチプレクサ３０９が示されている。カメラ１１４〜１１８は、画像ＩＬ， 画像Ｉ， 画像ＩＲを各々取り込み、かつこの画像を、その入力コネクタ３１２〜３１６を介してこのマルチプレクサに提供する。このマルチプレクサ３０９は、取り込まれた画像を表すデータを符号化し、かつ、この符号化されたデータを転送するように設計されている。この符合化されたデータは、入力コネクタ３１０を介して画像表示機器３００に提供される。画像表示機器３００は、
− 符合化されたデータを受信し、かつ、このデータを復号化して画像ＩＬと、画像Ｉと、画像ＩＲとを提供するための受信手段３０８と、
− 図１Ａとの関連で説明されている画像処理機器１００と、
− 例えば、時間のマルチプレクシングによって、出力画像
2004522382.tif 000030
と出力画像
2004522382.tif 000031
とを本質的に別々に表示するように設計されているステレオスコピック表示デバイス３０６と、
を有する。この結果、
− 第一出力画像
2004522382.tif 000032
と第二出力画像
2004522382.tif 000033
とを左目と右目とで実質的に別々に知覚する第一観察者３０２には、ステレオスコピック画像が提供され、かつ、
− 第一出力画像
2004522382.tif 000034
と第二出力画像
2004522382.tif 000035
とを実質的に両方とも両目で知覚する第二観察者３０４には、モノスコピック画像が提供される。
ステレオスコピック画像を表示するための多くの表示技術が、知られている。時間−並列技術（ｔｉｍｅ−ｐａｒａｌｌｅｌ ｔｅｃｈｎｉｑｕｅ）を使用することによって、両方の出力画像が、１つまたは２つの画面に同時に表示される。例えば、両方の出力画像を補色によってフィルタリングし、かつ１つの画面上で混合させることが出来る。観察者は、投射フィルタに整合したフィルタを有する眼鏡をかける。他の例として、２つの画面を使用して、２つの別々に偏光された画像を表示させ、これらを対応する偏光眼鏡をによって見ることも出来る。時間−多重化技術の場合、左の画像と右の画像とが、２者択一的に１つの画面に表示される。一例として、１つの画像が、偶数番のスキャンラインに書き込まれ、かつ他の画像が、奇数番のスキャン線に書き込まれる。左目用の画像が表示されている際には、右目を塞ぐために、シャッタシステムが使用される。このシャッタシステムは、観察者がかける眼鏡への取り付けが可能である。これに代えて、制御可能な偏光子を有するシャッタを画面の前に配置し、かつ観察者が、偏光眼鏡を有するヘッドマウント式のデバイスを着用することも出来る。
【００２７】
上述した実施例は、本発明を制限するものではなく明示するのであり、かつ当業者が、添付の請求項の範囲内で別の実施例を設計することが可能であることは、留意すべきである。請求項において、括弧の間に配置されているいかなる引用符号も、請求項を制限するものと解釈すべきではない。「有する」という語は、請求項に示されていない要素またはステップの存在を除外するものではない。ある要素の前の「１つの」という語は、そのような要素が複数存在することを除外するものではない。本発明は、複数の別個の要素を有するハードウエアと、適切にプログラムされたコンピュータとによって、実現可能である。複数の手段を列挙しているユニットに関する請求項の場合、これらの手段の幾つかを、同一のハードウエア部材によって実施することも可能である。
【図面の簡単な説明】
【図１Ａ】トリプルカメラに接続されている画像処理ユニットの実施例を線図的に示す。
【図１Ｂ】ステレオカメラに接続されている画像処理ユニットの実施例を線図的に示す。
【図１Ｃ】モノラルカメラに接続されている画像処理ユニットの実施例を線図的に示す。
【図２Ａ】レンダリング装置を有する画像処理ユニットの実施例を線図的に示す。
【図２Ｂ】奥行推定ユニットを有する画像処理ユニットの実施例を線図的に示す。
【図３】本明細書における画像表示機器の実施例を線図的に示す。
【符号の説明】
１００…画像処理ユニット
１０１…画像処理ユニット
１０２…オフセット計算器
１０３…画像処理ユニット
１０４…加算ユニット
１０５…画像処理ユニット
１０６…減算ユニット
１０７…画像処理ユニット
１０８…入力コネクタ
１１０…入力コネクタ
１１２…入力コネクタ
１１４…カメラ
１１６…カメラ
１１８…カメラ
２０２…レンダリングユニット
２０４…奥行推定ユニット
３００…画像表示機器
３０２…第一観察者
３０４…第二観察者
３０６…ステレオスコピック表示デバイス
３０８…受信手段
３０９…マルチプレクサ
３１０…入力コネクタ
３１２…入力コネクタ
３１４…入力コネクタ
３１６…入力コネクタ
【図１Ａ】
2004522382.tif 000044
【図１Ｂ】
2004522382.tif 000045
【図１Ｃ】
2004522382.tif 000046
【図２Ａ】
2004522382.tif 000047
【図２Ｂ】
2004522382.tif 000048
【図３】
2004522382.tif 000049
【国際公開パンフレット】
2004522382.tif 000050
2004522382.tif 000051
2004522382.tif 000052
2004522382.tif 000053
2004522382.tif 000054
2004522382.tif 000055
2004522382.tif 000056
2004522382.tif 000057
2004522382.tif 000058
2004522382.tif 000059
2004522382.tif 000060
2004522382.tif 000061
2004522382.tif 000062
2004522382.tif 000063
2004522382.tif 000064
2004522382.tif 000065
2004522382.tif 000066
2004522382.tif 000067
2004522382.tif 000068
【国際調査報告】
2004522382.tif 000069
2004522382.tif 000070
2004522382.tif 000071