(57)【要約】【課題】立体視を考慮していない情報映像データを立体映像データに重畳する場合であっても、その情報映像データを正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現する。【解決手段】立体映像データ１３４、１４０を取得する映像取得部１５０と、立体映像データから立体表示データ１４２を生成するラインシーケンシャル部１５４と、左眼映像と右眼映像との水平視差ベクトルを導出する水平視差ベクトル導出部１５８と、導出された水平視差ベクトルに基づいて制御信号１８２を生成する情報映像調整部１６０と、制御信号に従って立体表示データに情報映像データを重畳する映像重畳部１６２と、情報映像データが重畳された立体表示データを出力する映像出力部１６４とを備える。【選択図】図１
2010278743.tif 000002
【特許請求の範囲】
【請求項１】
両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得する映像取得部と、
前記立体映像データにおける左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成するラインシーケンシャル部と、
前記左眼映像と前記右眼映像との水平視差ベクトルを導出する水平視差ベクトル導出部と、
前記導出された水平視差ベクトルに基づいて、前記立体映像データまたは前記ディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データの各水平ラインの水平方向の位置を調整し制御信号を生成する情報映像調整部と、
前記制御信号に従って前記立体表示データに前記情報映像データを重畳する映像重畳部と、
前記情報映像データが重畳された立体表示データを出力する映像出力部と、
を備えることを特徴とする立体映像表示装置。
【請求項２】
両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得する映像取得部と、
前記左眼映像と前記右眼映像との水平視差ベクトルを導出する水平視差ベクトル導出部と、
前記導出された水平視差ベクトルに基づいて、前記立体映像データまたはディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データを左眼映像および右眼映像に対応させた情報重畳データと制御信号とを生成する情報映像データ記憶部と、
前記制御信号に従って前記情報重畳データを前記立体映像データに重畳する映像重畳部と、
前記情報重畳データが重畳された立体映像データの左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成するラインシーケンシャル部と、
前記重畳された立体表示データを出力する映像出力部と、
を備えることを特徴とする立体映像表示装置。
【請求項３】
前記映像重畳部は、前記ラインシーケンシャル部において用いられない左眼映像または右眼映像の水平ラインには前記情報重畳データを重畳しないことを特徴とする請求項２に記載の立体映像表示装置。
【請求項４】
前記水平視差ベクトル導出部は、前記左眼映像と前記右眼映像とを所定サイズのブロックに分割し、対応するブロック同士を水平方向に相対的にシフトして、前記対応するブロック同士の評価値の差分が最小となるシフト量とシフト方向とを水平視差ベクトルとすることを特徴とする請求項１から３のいずれか１項に記載の立体映像表示装置。
【請求項５】
前記水平視差ベクトル導出部は、前記分割されたブロック毎にシフト量とシフト方向とが異なる場合、その平均値、最小値または最大値を水平視差ベクトルとすることを特徴とする請求項４に記載の立体映像表示装置。
【請求項６】
両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得し、
前記立体映像データにおける左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成し、
前記左眼映像と前記右眼映像との水平視差ベクトルを導出し、
前記導出された水平視差ベクトルに基づいて、前記立体映像データまたは前記ディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データの各水平ラインの水平方向の位置を調整し制御信号を生成し、
前記制御信号に従って前記立体表示データに前記情報映像データを重畳し、
前記情報映像データが重畳された立体表示データを出力することを特徴とする立体映像表示方法。
【請求項７】
両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得し、
前記左眼映像と前記右眼映像との水平視差ベクトルを導出し、
前記導出された水平視差ベクトルに基づいて、前記立体映像データまたはディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データを左眼映像および右眼映像に対応させた情報重畳データと制御信号とを生成し、
前記制御信号に従って前記情報重畳データを前記立体映像データに重畳し、
前記情報重畳データが重畳された立体映像データの左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成し、
前記重畳された立体表示データを出力することを特徴とする立体映像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、両眼視差による立体映像をディスプレイに表示することが可能な立体映像表示装置および立体映像表示方法に関する。
【背景技術】
【０００２】
近年、ディスプレイ上に視差のある２以上の映像を提示し、観察者に対してあたかもオブジェクトが立体的に存在するように知覚させる立体映像表示装置が脚光を浴びている。このような映像表示を実現するための立体映像データには様々なフォーマットが存在し、また、最終的な表示に至ってもディスプレイに応じて様々な表示形式が存在する。立体映像表示装置は、そのような立体映像データのフォーマットをディスプレイに合わせた表示形式（立体表示データ）に変換する役割を担う。
【０００３】
立体映像表示装置に入力される立体映像データの一例として、有効映像の左半分に左眼映像、右半分に右眼映像を有するサイドバイサイド方式が利用されている。かかるサイドバイサイド方式では、右眼映像と左眼映像とが、１対のカメラによって個別に撮像され、もしくは、両眼視差が生じるように調整され、それぞれ異なる映像として分割形成されている。また、ディスプレイの一例として、隔行で（１ライン毎に）偏光特性の異なる偏光フィルタが設けられているものもある。
【０００４】
立体映像表示装置は、このようなサイドバイサイド方式における左眼映像および右眼映像の各水平ラインを交互に並置（以下、単にラインシーケンシャル処理と呼ぶ。）して隔行で偏光特性が異なるディスプレイに表示するための立体表示データを生成する。観察者は、偏光眼鏡を通じて、隔行のラインに示された左眼映像を左眼で、右眼映像を右眼で視認し、両眼視差による立体映像を認識することが可能となる。
【０００５】
一方、立体映像表示装置は、入力された立体映像データに関する情報映像データ、例えば、それがテレビジョン放送であればその放送チャンネルを示すＯＳＤ（On Screen Display）等を表示することができる。例えば、特許文献１では、立体映像を表示可能なディスプレイの任意の位置にＯＳＤを重畳する技術が記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平９−２３４５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかし、立体映像表示装置が、右眼映像と左眼映像とに分割形成された立体映像データに対して、図２０（ａ）に示すように情報映像データ１０を単純に重畳してしまうと、その後のラインシーケンシャル処理によって、図２０（ｂ）に示すように、意図していない不連続な映像１２が表示され、偏光眼鏡を通じても像を結ぶことなく、表示内容が理解できないばかりか、その映像が無用に発光して眼に負担を強いることとなる。
【０００８】
本発明は、このような課題に鑑み、立体視を考慮していない情報映像データを立体映像データに重畳する場合であっても、その情報映像データを正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現することが可能な、立体映像表示装置および立体映像表示方法を提供することを目的としている。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、本発明の立体映像表示装置は、両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得する映像取得部と、立体映像データにおける左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成するラインシーケンシャル部と、左眼映像と右眼映像との水平視差ベクトルを導出する水平視差ベクトル導出部と、導出された水平視差ベクトルに基づいて、立体映像データまたはディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データの各水平ラインの水平方向の位置を調整し制御信号を生成する情報映像調整部と、制御信号に従って立体表示データに情報映像データを重畳する映像重畳部と、情報映像データが重畳された立体表示データを出力する映像出力部と、を備えることを特徴とする。
【００１０】
ここでは、立体映像データの左眼映像と右眼映像との水平視差ベクトルを求め、その水平視差ベクトルに基づいて制御信号を生成し、その制御信号に従って、立体視可能に変換されている立体表示データに情報映像データを重畳する。即ち、ラインシーケンシャル処理後の立体表示データに情報映像データを重畳している。かかる構成により、立体視を考慮していない情報映像データにも両眼視差を付与でき、観察者に対して情報映像データを立体的に知覚させることが可能となる。このように、立体映像データ同様、情報映像データも正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現することが可能となる。
【００１１】
本発明の他の立体映像表示装置は、両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得する映像取得部と、左眼映像と右眼映像との水平視差ベクトルを導出する水平視差ベクトル導出部と、導出された水平視差ベクトルに基づいて、立体映像データまたはディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データを左眼映像および右眼映像に対応させた情報重畳データと制御信号とを生成する情報映像データ記憶部と、制御信号に従って情報重畳データを立体映像データに重畳する映像重畳部と、情報重畳データが重畳された立体映像データの左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成するラインシーケンシャル部と、重畳された立体表示データを出力する映像出力部と、を備えることを特徴とする。
【００１２】
ここでは、立体映像データの左眼映像と右眼映像との水平視差ベクトルを求め、その水平視差ベクトルに基づいて制御信号を生成し、立体映像データの左眼映像および右眼映像にそれぞれ情報重畳データを重畳した後、立体映像データごとラインシーケンシャル処理を行う。即ち、立体映像データに情報映像データを重畳した後、ラインシーケンシャル処理を行っている。かかる構成により、立体視を考慮していない情報映像データにも両眼視差を付与でき、観察者に対して情報映像データを立体的に知覚させることが可能となる。このように、立体映像データ同様、情報映像データも正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現することが可能となる。
【００１３】
映像重畳部は、ラインシーケンシャル部において用いられない左眼映像または右眼映像の水平ラインには情報重畳データを重畳しないとしてもよい。
【００１４】
立体映像データがサイドバイサイド方式により形成されている場合、ラインシーケンシャル部は、最終的な立体表示データの各ラインに対応する映像ラインを左眼映像および右眼映像から１ラインずつ交互に抽出するため、各眼映像では奇数ラインまたは偶数ラインのみが立体表示データに用いられることとなる。ここでは、映像重畳部が、例えば奇数ラインのみ用いられる一方の眼映像に対して、利用されない偶数ラインに対応する情報映像データを重畳しないようにすることで、無駄な処理を回避し負荷の軽減を図ることができる。
【００１５】
水平視差ベクトル導出部は、左眼映像と右眼映像とを所定サイズのブロックに分割し、対応するブロック同士を水平方向に相対的にシフトして、対応するブロック同士の評価値の差分が最小となるシフト量とシフト方向とを水平視差ベクトルとしてもよい。
【００１６】
両眼視差は左眼映像と右眼映像の水平視差から生じる。従って、左眼映像と右眼映像の対応するブロック内における同一のオブジェクトの水平方向のずれを水平視差ベクトルとすることができる。ここでは、ブロック同士を相対的にシフトして評価値の差分が最小となるシフト量を選択することで各ブロックにおける占有度の高いオブジェクトの水平視差ベクトルを導出することが可能となる。
【００１７】
水平視差ベクトル導出部は、分割されたブロック毎にシフト量とシフト方向とが異なる場合、その平均値、最小値または最大値を水平視差ベクトルとしてもよい。
【００１８】
立体映像データ内には結像位置の異なる１または複数のオブジェクトが存在する。本発明では、ブロック毎に評価値を比較して水平視差ベクトルを導出しているので、結像位置の異なるオブジェクトが複数存在する場合、各ブロックが相異する水平視差ベクトルを示す場合がある。一方、情報映像データは、そのオブジェクトの立体感を損なわない適切な位置に配置すべきである。ここでは、各ブロックの水平視差ベクトルの平均値、最小値または最大値の位置に情報映像データを結像させることで、オブジェクトの立体感を損なうことなく情報映像データを適切に表示することができ、違和感の無い立体映像を実現することが可能となる。
【００１９】
本発明の立体映像表示方法の代表的な構成は、両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得し、立体映像データにおける左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成し、左眼映像と右眼映像との水平視差ベクトルを導出し、導出された水平視差ベクトルに基づいて、立体映像データまたはディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データの各水平ラインの水平方向の位置を調整し制御信号を生成し、制御信号に従って立体表示データに情報映像データを重畳し、情報映像データが重畳された立体表示データを出力することを特徴とする。
【００２０】
また、本発明の立体映像表示方法の他の代表的な構成は、両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを取得し、左眼映像と右眼映像との水平視差ベクトルを導出し、導出された水平視差ベクトルに基づいて、立体映像データまたはディスプレイに表示する立体表示データの操作表示に関する情報を示す情報映像データを左眼映像および右眼映像に対応させた情報重畳データと制御信号とを生成し、制御信号に従って情報重畳データを立体映像データに重畳し、情報重畳データが重畳された立体映像データの左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイに表示するための立体表示データを生成し、重畳された立体表示データを出力することを特徴とする。
【００２１】
上述した立体映像表示装置における技術的思想に対応する構成要素やその説明は、当該立体映像表示方法にも適用可能である。
【発明の効果】
【００２２】
本発明の立体映像表示装置は、立体視を考慮していない情報映像データを立体映像データに重畳する場合であっても、その情報映像データを正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現することが可能となる。
【図面の簡単な説明】
【００２３】
【図１】第１の実施形態による立体映像表示装置の概略的な機能を示した機能ブロック図である。
【図２】ディスプレイの表示構成を説明するための説明図である。
【図３】立体映像データのフォーマットを説明するための説明図である。
【図４】ラインシーケンシャル部の動作を説明するための説明図である。
【図５】ラインシーケンシャル部の動作を説明するための説明図である。
【図６】水平視差ベクトルの導出を示した説明図である。
【図７】制御信号を説明するための説明図である。
【図８】映像重畳部の機能を示した機能ブロック図である。
【図９】情報映像データが重畳された立体表示データを示した説明図である。
【図１０】立体映像表示方法の全体的な流れを示したフローチャートである。
【図１１】第２の実施形態による立体映像表示装置の概略的な機能を示した機能ブロック図である。
【図１２】情報映像データ記憶部の動作を説明するための説明図である。
【図１３】情報映像データ記憶部の動作を説明するための説明図である。
【図１４】映像重畳部の機能を示した機能ブロック図である。
【図１５】映像重畳部の機能を示した機能ブロック図である。
【図１６】映像重畳部の動作を説明するための説明図である。
【図１７】ラインシーケンシャル部の動作を説明するための説明図である。
【図１８】ラインシーケンシャル部の動作を説明するための説明図である。
【図１９】立体映像表示方法の全体的な流れを示したフローチャートである。
【図２０】従来における情報映像データの重畳処理を説明するための説明図である。
【発明を実施するための形態】
【００２４】
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。かかる実施形態に示す寸法、材料、その他具体的な数値などは、発明の理解を容易とするための例示にすぎず、特に断る場合を除き、本発明を限定するものではない。なお、本明細書及び図面において、実質的に同一の機能、構成を有する要素については、同一の符号を付することにより重複説明を省略し、また本発明に直接関係のない要素は図示を省略する。
【００２５】
（第１の実施形態：立体映像表示装置１００）
図１は、立体映像表示装置１００の概略的な機能を示した機能ブロック図である。図１に示すように、立体映像表示装置１００は、ディスプレイ１１０に接続され、映像取得部１５０と、映像処理部１５２と、ラインシーケンシャル部１５４と、情報映像データ記憶部１５６と、水平視差ベクトル導出部１５８と、情報映像調整部１６０と、映像重畳部１６２と、映像出力部１６４と、を含んで構成される。ここではディスプレイ１１０と立体映像表示装置１００とを別体に構成する場合を説明するが、一体的に構成することもできる。以下、立体映像表示装置１００に先だって、立体表示を可能とするディスプレイ１１０を説明する。
【００２６】
図２は、ディスプレイ１１０の表示構成を説明するための説明図である。ディスプレイ１１０の表示面１１２には、隔行で（１ライン毎に）偏光特性の異なる偏光フィルタが設けられているので、奇数ライン１１４と偶数ライン１１６とで偏光特性が異なっている。ディスプレイ１１０を観察する観察者は、左右で偏光特性が異なる偏光眼鏡１１８を通じて、例えば奇数ライン１１４に表示された立体表示データ（左眼立体表示データ１２０）を左眼で、偶数ライン１１６に表示された立体表示データ（右眼立体表示データ１２２）を右眼で視認し、両眼視差による立体映像によって、表示面１１２と異なる結像位置１２４でオブジェクトを知覚することが可能となる。
【００２７】
ディスプレイ１１０の表示面１１２に表示される立体表示データは、図２に示した通り、左眼映像に対応する左眼立体表示データ１２０と右眼映像に対応する右眼立体表示データ１２２がライン単位で交互に表示される。立体表示データに含まれるオブジェクトは、交差視（交差法）および平行視（平行法）のいずれの立体表示も可能であり、左眼立体表示データ１２０に含まれるオブジェクトと右眼立体表示データ１２２に含まれるオブジェクトとの水平方向の位置を相対的に左右にシフトすることで表示面１１２より奥側または手前側のいずれの位置にもオブジェクトを結像することができる。このとき水平方向のシフト量を０とすると、オブジェクトはディスプレイ１１０の表示面１１２上に結像される。
【００２８】
図２や以下の説明に用いられる図では、理解を容易にするため水平方向のライン数を１２として説明しているが、ライン数はディスプレイ１１０の構造や立体映像データの走査線数等に応じて任意に設定することができる。
【００２９】
立体映像表示装置１００の映像取得部１５０は、両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データを、外部の放送局１２６や通信網（インターネットやＬＡＮ）１２８から取得する。また、ＤＶＤやＢｌｕ−ｒａｙディスクといった記録媒体から内部的に立体映像データを取得することもできる。
【００３０】
図３は、立体映像データのフォーマットを説明するための説明図である。映像取得部１５０が取得可能な立体映像データには複数のフォーマットが存在し、個々のフォーマットにおいてさらに画素数等のパラメータが異なる場合もある。ここでは、その代表的な例として、図３（ａ）に示すように、有効映像の左半分に左眼に視認させるための左眼映像（左眼立体映像データ）１３０、右半分に右眼に視認させるための右眼映像（右眼立体映像データ）１３２を有するサイドバイサイド方式に従った立体映像データ１３４や、図３（ｂ）に示すように、有効映像の上半分に左眼に視認させるための左眼映像１３６、下半分に右眼に視認させるための右眼映像１３８を有するトップアンドボトム方式（アバブアンドビロー方式）に従った立体映像データ１４０を用いることとする。なお、有効映像とは映像全体から非表示領域（ブランク期間）を除いた映像のことである。また、サイドバイサイド方式の場合、右眼に視認させるための右眼立体映像データ１３４を有効映像の左半分に、左眼に視認させるための左眼立体映像データ１３２を有効映像の右半分に配置する立体映像データ１３４を用いてもよい。さらに、トップアンドボトム方式の場合、右眼に視認させるための右眼立体映像データ１３８を有効映像の上半分に、左眼に視認させるための左眼立体映像データ１３６を有効映像の下半分に配置する立体映像データ１４０を用いてもよい。
【００３１】
このような立体映像データ１３４、１４０では、左眼映像１３０、１３６と右眼映像１３２、１３８とが、１対のカメラによって個別に撮像され、もしくは、両眼視差が生じるように調整されている。ただし、本実施形態のサイドバイサイド方式による立体映像データ１３４の左眼映像１３０および右眼映像１３２は、それぞれ、最終的に表示される立体表示データと垂直解像度は等しいが、水平解像度は１／２に縮小されている。従って全画面の有効映像の画素数が１９２０×１０８０の場合、左眼映像１３０および右眼映像１３２の画素数は９６０×１０８０となる。
【００３２】
映像処理部１５２は、映像取得部１５０を通じて取得されたサイドバイサイド方式やトップアンドボトム方式の立体映像データ１３４、１４０に対して、ＲＧＢ処理（γ補正や色補正）、エンハンス処理、ノイズ低減処理などの映像信号処理を行う。所定の映像信号処理が行なわれた立体映像データ１３４、１４０は、不図示のメモリにて保持される。
【００３３】
ラインシーケンシャル部１５４は、所定の映像信号処理が行なわれた立体映像データ１３４、１４０を保持するメモリのリードライトアドレスを制御することによって立体映像データ１３４、１４０における左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイ１１０に表示するための立体表示データを生成する。
【００３４】
図４および図５は、ラインシーケンシャル部１５４の動作を説明するための説明図であり、特に図４はサイドバイサイド方式の立体映像データ１３４から、図５はトップアンドボトム方式の立体映像データ１４０から立体表示データ１４２を生成している。図４（ａ）に示すように、映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、ラインシーケンシャル部１５４は、左眼映像１３０の奇数ラインの映像Ｌ１、Ｌ３、Ｌ５、Ｌ７、Ｌ９、Ｌ１１と、右眼映像１３２の偶数ラインの映像Ｒ２、Ｒ４、Ｒ６、Ｒ８、Ｒ１０、Ｒ１２をそれぞれ抽出し、各眼映像のラインの左端を揃えて交互に並べ直す。
【００３５】
詳細には、図４（ａ）における左眼映像１３０の１ライン目の映像Ｌ１が図４（ｂ）における立体表示データ１４２の１ライン目の映像Ｌ１’に、図４（ａ）における右眼映像１３２の２ライン目の映像Ｒ２が図４（ｂ）における立体表示データ１４２の２ライン目の映像Ｒ２’に変換される。従って、左眼映像１３０の偶数ラインの映像Ｌ２、Ｌ４、Ｌ６、Ｌ８、Ｌ１０、Ｌ１２、および右眼映像１３２の奇数ラインの映像Ｒ１、Ｒ３、Ｒ５、Ｒ７、Ｒ９、Ｒ１１は利用されないこととなる。ここでは左眼映像１３０から奇数ライン、右眼映像１３２から偶数ラインを抽出したが、当然、左眼映像１３０から偶数ライン、右眼映像１３２から奇数ラインを抽出してもよい。
【００３６】
ただし、立体映像データ１３４の各眼映像の水平解像度は、立体表示データ１４２の１／２となっているため、立体映像データ１３４から立体表示データ１４２を生成する際、その水平解像度を２倍に拡大しなければならない。かかる水平解像度拡大に伴う新たな画素の生成は、線形補間やその他のフィルタリングを用いることが可能である。かかる水平解像度の倍率は、立体映像データ１３４のフォーマット、あるいは立体映像データ１３４の各眼映像と立体表示データ１４２との水平方向の画素数の比率に応じて適宜調整される。
【００３７】
また、図５（ａ）に示すように、映像取得部１５０がトップアンドボトム方式の立体映像データ１４０を取得した場合、ラインシーケンシャル部１５４は、左眼映像１３６の全ラインの映像Ｌ１、Ｌ２、Ｌ３、Ｌ４、Ｌ５、Ｌ６と、右眼映像１３８の全ラインの映像Ｒ１、Ｒ２、Ｒ３、Ｒ４、Ｒ５、Ｒ６を、それぞれラインの左端を揃えて交互に並べ直す。従って、図５（ａ）における左眼映像１３６の１ライン目の映像Ｌ１が図５（ｂ）における立体表示データ１４２の１ライン目の映像Ｌ１に、図５（ａ）における右眼映像１３２の１ライン目の映像Ｒ１が図５（ｂ）における立体表示データ１４２の２ライン目の映像Ｒ１に、拡大処理や縮小処理を実行することなく移される。このようにトップアンドボトム方式では利用されないラインや水平解像度の拡大が無いので、情報の欠落を抑えることができる。
【００３８】
情報映像データ記憶部１５６は、立体映像データ１３４、１４０に関する情報またはディスプレイ１１０に表示する立体表示データ１４２の操作表示に関する情報を示す操作表示に関する情報を示す情報映像データ１８０を生成する。例えば、立体映像データ１３４、１４０に関する情報映像データ１８０は、立体映像表示装置１００が放送局１２６から受信した、またはインターネット、ＬＡＮ、専用回線等の通信網１２８を介して受信した番組やコンテンツを特定するための、チャンネル、番組タイトル、表示モード等を示す情報を映像化したＯＳＤ（On Screen Display）１８０である。立体映像表示装置１００では、例えばリモコン１４４の操作時において、放送番組のチャンネルの変更があった場合に、その変更後のチャンネルを情報映像データ１８０として確認的にディスプレイ１１０に表示する。その他、番組に関する情報を立体表示データ１４２と共にディスプレイ１１０に表示することで、利用者の利便性の向上を図る。また、情報映像データ１８０は、立体映像を記録したメディアをプレーヤーで再生する場合には、「再生」・「停止」等の操作表示に関する情報を含むものである。その場合は、「再生」・「停止」等の操作表示を立体表示データ１４２と共にディスプレイ１１０に表示することで、利用者の利便性の向上を図る。なお、情報映像データ記憶部１５６は、チャンネル、番組タイトル、表示モード等を示す情報を生成する構成に限定されず、前述の情報を予め保持する構成であってもよい。
【００３９】
水平視差ベクトル導出部１５８は、映像取得部１５０が取得した立体映像データ１３４、１４０の左眼映像と右眼映像との水平視差ベクトルを導出する。本実施形態では、左右眼に視差のある立体映像データ１３４、１４０を提示することで、観察者に立体映像を知覚させている。従って、左眼映像のオブジェクトと右眼映像のオブジェクトには水平視差が設けられており、左眼映像のオブジェクトと右眼映像のオブジェクトの水平方向のずれを水平視差ベクトルとすることができる。水平視差ベクトル導出部１５８は、左眼映像および右眼映像を同一サイズの複数のブロックに分割し、左眼映像と右眼映像との対応するブロック同士を相対的にシフトして評価値の差分が最小となるシフト量を選択することで各ブロックにおける占有度の高いオブジェクトの水平視差ベクトル（水平視差のシフト量とシフト方向）を導出することが可能となる。
【００４０】
図６は、水平視差ベクトルの導出を示した説明図である。例えば、映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、左眼映像１３０および右眼映像１３２の大きさは９６０×１０８０となる。水平視差ベクトル導出部１５８は、左眼映像１３０と右眼映像１３２とを所定サイズ、例えば、図６（ａ）のように２４０×１８０画素といった複数のブロック１４６に分割し、分割されたすべてのブロック１４６に対して対応するブロック同士を抽出、比較する。ここでは、図６（ｂ）に示したブロック１４６ａ、１４６ｂを比較する例を挙げる。
【００４１】
水平視差ベクトル導出部１５８は、図６（ｃ）に示すように、抽出した一対のブロック１４６の一方のブロック１４６ａに対して他方のブロック１４６ｂを水平方向に相対的に所定画素分（ここでは、３０画素分）段階的にシフトし、両ブロック１４６ａ、１４６ｂの重畳部分の中央領域（ここでは斜線で示した３０×１８０画素の領域）１４８における評価値の差分を求める。ここで状態Ｐに付されている添字の数値はブロック１４６ａに対するブロック１４６ｂのシフト量を画素数で示したものである。また、状態Ｐに付されている添字の符号はシフト方向を示す。すなわち、添字のマイナスは左方向へのシフトを示すものである。そして、その評価値が最小となる状態、例えば、状態Ｐ３０のシフト量（３０画素）とシフト方向（右）とが水平視差ベクトルとなる。ここでは、左眼映像のブロック１４６ａに対して右眼映像のブロック１４６ｂをシフトしたが左眼映像および右眼映像のいずれのブロックを基準として他方をシフトしてもよい。
【００４２】
また、中央領域１４８の評価値は、Ｒ（Red）、Ｇ（Green）、Ｂ（Blue）、輝度、色差、彩度から選択される１または複数の評価項目の値である。ここで評価値の差分が小さいということは、図６（ｃ）の状態Ｐ３０に示すようにそれぞれのブロックにおける映像同士の差分が少ない、即ち画像が類似し、かつ重なり合っていることを示す。
【００４３】
水平視差ベクトル導出部１５８は、分割された複数のブロック１４６毎にシフト量とシフト方向とが異なる場合、その平均値、最小値または最大値のいずれかを水平視差ベクトルとする。
【００４４】
立体映像データ１３４内には結像位置の異なる１または複数のオブジェクトが存在する。本実施形態では、ブロック１４６毎に評価値を比較して水平視差ベクトルを導出しているので、結像位置の異なるオブジェクトが複数存在する場合、各ブロック１４６が相異する水平視差ベクトルを示す場合がある。一方、情報映像データ１８０は、そのオブジェクトの立体感を損なわない適切な位置に配置すべきである。ここでは、各ブロックの水平視差ベクトルの平均値、最小値（結像位置は最奥）または最大値（結像位置は最前）といった所定の位置に情報映像データ１８０を結像させることで、オブジェクトの立体感を損なうことなく情報映像データ１８０を適切に表示することができ、違和感の無い立体映像を実現することが可能となる。このような水平視差ベクトルは、トップアンドボトム方式の立体映像データ１４０でも同様の手順で導出することができる。
【００４５】
情報映像調整部１６０は、水平視差ベクトル導出部１５８によって導出された水平視差ベクトルに基づいて、立体表示データ１４２の水平同期信号と垂直同期信号を参照しつつ、映像取得部１５０で取得された情報映像データ１８０の各水平ラインにおける水平方向の位置を調整し、情報映像データ１８０を立体表示データ１４２に重畳するための制御信号１８２を生成する。制御信号１８２は、水平同期信号の任意の位置から任意の区間を特定できる信号であり、立体表示データ１４２に対する情報映像データ１８０を重畳する位置を表している。
【００４６】
例えば、水平視差ベクトル導出部１５８で、サイドバイサイド方式の立体表示データ１４０の１／２の水平解像度を有する右眼映像と左眼映像とから生成された水平視差ベクトルが平均値２０画素分であった場合を考える。その場合、情報映像調整部１６０は、立体映像データ１３４の水平解像度を２倍に拡大する処理が必要であり、その水平解像度の２倍の値である４０画素分の視差を持つ位置に情報映像データ１８０の左右ラインの映像が重畳されるよう制御信号１８２を生成する。従って、後述する映像重畳部１６２によって重畳された情報映像データ１８０の隣接するライン同士は、水平視差ベクトル導出部１５８で導出された水平視差ベクトルの２倍のシフト量に相当する画素分ずれることとなる。
【００４７】
図７は、情報映像データ１８０と制御信号１８２を説明するための説明図である。例えば、情報映像データ記憶部１５６が図７（ａ）に示すようなチャンネル番号と番組タイトルを示す「２０１ｃｈ：宇宙空間」といった情報映像データ１８０を保持している。また、図７（ｂ）に示す全体的な表示ラインに対する位置は、ディスプレイ１１０の表示面に対する情報映像データ１８０の重畳位置であり、制御信号１８２によって表される。ここで、図７（ｂ）の各ライン中、斜線で示された部分は情報映像データ１８０を重畳する部分を示し、斜線以外の部分は情報映像データ１８０を重畳しない、即ち立体表示データ１４２をそのまま表示する部分を示す。ここでは未だ水平視差ベクトルが反映されていないので、各ラインの制御信号１８２の開始点が隣接するライン間で等しく、視差は生じない。
【００４８】
続いて情報映像調整部１６０は、左眼映像に対応する奇数ラインについて制御信号１８２を、水平視差ベクトルを水平方向に２倍に拡大した４０画素分、図７（ｃ）の矢印で示す右方向にシフトさせて、情報映像データ記憶部１５６からの読み出しを開始する。こうすることで情報映像データ１８０は、図７（ｃ）のように視差を有するようになる。また、図７（ｄ）の斜線で示す全体的な表示ラインに対する位置は、図７（ｃ）に示す情報映像データ１８０をディスプレイ１１０の表示面に出力する位置を示す。そして、情報映像調整部１６０は、図７（ｄ）の斜線で示す位置に相当する制御信号１８２を生成する。
【００４９】
このように両眼視差による立体映像では、その水平視差ベクトルに応じて情報映像データ１８０を表示する結像位置を調整できる。また、水平視差ベクトルの平均値の代わりに最大値を用いると、立体映像データ１３４、１４０のすべてのオブジェクトの手前に、最小値を用いると、すべてのオブジェクトの背面に情報映像データ１８０を配置することが可能となり、自然な立体映像表示を実現することができる。
【００５０】
また、上述した実施形態では情報映像データ１８０の結像位置を水平視差ベクトルの平均値、最小値または最大値となる位置に予め設定する例を挙げたが、かかる場合に限られず、情報映像データ１８０の結像位置をユーザが個々に設定、または予め準備された複数の結像位置から選択することもできる。
【００５１】
ところで、上述したように水平視差ベクトルの平均値、最小値または最大値の位置に情報映像データ１８０を重畳すると、その平均値、最小値または最大値が変更される度に情報映像データ１８０の結像位置が変化することとなり、却って情報映像データ１８０を視認しにくくなる場合があり得る。そこで、情報映像調整部１６０は、例えば、水平視差ベクトルの平均値、最小値または最大値にさらに低域通過フィルタ等を施して情報映像データ１８０の位置の変化を鈍らせ、その結像位置を安定化することもできる。
【００５２】
また、上述したように、情報映像データ１８０の結像位置を水平視差ベクトルの平均値とした場合や所定の位置に固定した場合、その結像位置より手前に結像されるべきオブジェクトに情報映像データ１８０が重畳されると、オブジェクトの情報映像データ１８０が重畳された部分だけが奥側に陥没して見える現象が生じうる。このとき情報映像調整部１６０は、情報映像データ１８０の結像位置がオブジェクトより前になるように調整したり、情報映像データ１８０と立体表示データ１４２の重畳順を変更し立体表示データ１４２を情報映像データ１８０の前段に配置したり、情報映像データ１８０の透過率を変化させたりすることもできる。
【００５３】
映像重畳部１６２は、情報映像調整部１６０によって生成された制御信号１８２に従って、ラインシーケンシャル部１５４によって生成された立体表示データに情報映像データ１８０を重畳する。
【００５４】
図８は、映像重畳部１６２の機能を示した機能ブロック図であり、図９は、情報映像データ１８０が重畳された立体表示データ１４２を示した説明図である。図８を参照すると、映像重畳部１６２の２つの入力端子に立体表示データ１４２と情報映像データ１８０とが入力され、切換入力に制御信号１８２が入力される。従って、映像重畳部１６２は、制御信号１８２がオフの期間（図８（ａ）の斜線部分で示す以外の期間）、立体表示データ１４２を映像出力部１６４に出力し、オンの期間（図８（ａ）の斜線部分で示す期間）、立体表示データ１４２の代わりに情報映像データ１８０を映像出力部１６４に出力する。こうして図９に示すような、情報映像データ１８０が重畳された立体表示データ１４２が生成される。
【００５５】
また、映像重畳部１６２は、立体表示データ１４２と情報映像データ１８０とを排他的に切り替えるのみならず、制御信号１８２がオンの期間、任意の透過率で立体表示データ１４２に情報映像データ１８０を重畳させてもよい。かかる構成により、情報映像データ１８０によってその背景となる立体表示データ１４２が完全に見えなくなるのを回避でき、両データを有効に立体表示することができる。
【００５６】
映像出力部１６４は、映像重畳部１６２で情報映像データ１８０が重畳された立体表示データ１４２をディスプレイ１１０または他の外部接続機器に出力する。図２を用いて説明したようにディスプレイ１１０の表示面１１２には、隔行で（１ライン毎に）偏光特性の異なる偏光フィルタが設けられている。従って、図９のような、左眼映像と右眼映像とが並置される立体表示データ１４２をそれぞれ適切な偏光特性で表示することができる。観察者は、専用の偏光眼鏡１１８を着用することによって、左眼で左眼映像、右眼で右眼映像を視認し、奥行き感を知覚することができる。
【００５７】
上述した立体映像表示装置１００では、立体映像データの左眼映像と右眼映像との水平視差ベクトルを求め、その水平視差ベクトルに基づいて制御信号を生成し、立体視可能に変換されている立体表示データに情報映像データを重畳する。かかる構成により、情報映像データがディスプレイ１１０上に正しく表示され、観察者の操作性を向上することができる。また、立体視を考慮していない情報映像データにも両眼視差を付与でき、観察者に対して情報映像データを立体的に知覚させることが可能となる。このように、立体映像データ同様、情報映像データも正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現することが可能となる。
【００５８】
（立体映像表示方法）
次に、上述した立体映像表示装置１００を用いて、両眼視差による立体映像を表示する立体映像表示方法を具体的に説明する。
【００５９】
図１０は、立体映像表示方法の全体的な流れを示したフローチャートである。立体映像表示装置１００の映像取得部１５０が立体映像データ１３４、１４０を取得すると（Ｓ２００のＹＥＳ）、映像処理部１５２がＲＧＢ処理（γ補正や色補正）、エンハンス処理、ノイズ低減処理などの映像信号処理を行う（Ｓ２０２）。ラインシーケンシャル部１５４は、このように映像信号処理された立体映像データ１３４、１４０における左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイ１１０に表示するための立体表示データ１４２を生成する（Ｓ２０４）。
【００６０】
上述した処理に続いて、または並行して、情報映像データ記憶部１５６は、立体映像データ１３４、１４０の操作表示に関する情報を示す情報映像データ１８０を生成する（Ｓ２０６）。水平視差ベクトル導出部１５８が、左眼映像と右眼映像との水平視差ベクトルを導出し（Ｓ２０８）、情報映像調整部１６０が、導出された水平視差ベクトルに基づいて、情報映像データ記憶部１５６が生成した情報映像データ１８０の各水平ラインの水平方向の位置を調整し制御信号１８２を生成する（Ｓ２１０）。
【００６１】
最後に、映像重畳部１６２は、制御信号１８２に従って立体表示データ１４２に情報映像データ１８０を重畳し（Ｓ２１２）、映像出力部１６４は情報映像データ１８０が重畳された立体表示データ１４２をディスプレイ１１０に出力する（Ｓ２１４）。こうした一連の処理は、立体映像データ１３４、１４０が無くなるまで繰り返され、観察者は、適切な結像位置に情報映像データ１８０が表示された立体映像を見ることが可能となる。
【００６２】
（第２の実施形態：立体映像表示装置３００）
第１の実施形態では、ラインシーケンシャル処理が施された立体表示データ１４２に、情報映像データ１８０を重畳する構成を述べた。第２の実施形態では、まず、情報映像データ１８０を立体映像データ１３４、１４０の左眼映像および右眼映像に重畳した後、ラインシーケンシャル処理を行う。
【００６３】
図１１は、立体映像表示装置３００の概略的な機能を示した機能ブロック図である。図１１に示すように、立体映像表示装置３００は、ディスプレイ１１０に接続され、映像取得部１５０と、映像処理部１５２と、水平視差ベクトル導出部１５８と、情報映像データ記憶部３１０と、映像重畳部３１２と、ラインシーケンシャル部３１４と、映像出力部１６４と、を含んで構成される。
【００６４】
第１の実施形態で説明したように、映像取得部１５０は、両眼視差による立体視を実現するための左眼映像および右眼映像が分割形成された立体映像データ１３４、１４０を外部から取得する。そして、映像処理部１５２は、入力されたサイドバイサイド方式やトップアンドボトム方式の立体映像データ１３４、１４０に対して、ＲＧＢ処理（γ補正や色補正）、エンハンス処理、ノイズ低減処理などの映像信号処理を行う。水平視差ベクトル導出部１５８は、左眼映像と右眼映像とを複数のブロックに分割して水平視差ベクトルを導出する。第２の実施形態では、以下で説明するように、立体映像データ１３４、１４０をラインシーケンシャル処理する前に、予め情報映像データ１８０を重畳する。
【００６５】
情報映像データ記憶部３１０は、水平視差ベクトル導出部１５８によって導出された水平視差ベクトルに基づいて、情報映像データ１８０を左眼映像および右眼映像に対応させた情報重畳データ１８４と、制御信号１８２とを生成する。
【００６６】
図１２および図１３は、情報映像データ記憶部３１０の動作を説明するための説明図であり、特に図１２は映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、図１３は映像取得部１５０がトップアンドボトム方式の立体映像データ１４０を取得した場合を示している。
【００６７】
映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、情報映像データ記憶部３１０は、図１２（ａ）に示した情報映像データ１８０を生成する。
【００６８】
また、情報映像データ記憶部３１０は、立体表示データ１４２の水平同期信号と垂直同期信号を参照しつつ、情報映像データ１８０を左眼映像に重畳する位置と右眼映像に重畳する位置を計算して、図１２（ｂ）に示す情報重畳データ１８４を生成する。さらに、情報映像データ記憶部３１０は、図１２（ｃ）の斜線部分で示す全体的な表示ラインに対する位置に相当する制御信号１８２を生成する。ただし、情報映像データ記憶部３１０は、左眼映像における情報重畳データ１８４の重畳開始位置を右眼映像における情報重畳データ１８４の重畳開始位置より、図１２（ｃ）に矢印で示すように水平視差ベクトルに相当する画素分だけシフトさせる。このような制御信号１８２を通じて立体映像データ１３４に両眼視差を付与することができる。
【００６９】
一方、映像取得部１５０がトップアンドボトム方式の立体映像データ１４０を取得した場合、情報映像データ記憶部３１０は、図１３（ａ）に示した情報映像データ１８０を生成する。
【００７０】
また、情報映像データ記憶部３１０は、図１３（ａ）に示した情報映像データ１８０の奇数ラインに相当する部分を抽出して、トップアンドボトム方式の表示ラインに対する上部に並置し、偶数ラインに相当する部分を抽出して、トップアンドボトム方式の表示ラインに対する下部に並置する。
【００７１】
さらに、情報映像データ記憶部３１０は、立体表示データ１４２の水平同期信号と垂直同期信号を参照しつつ、奇数ラインを上部に、偶数ラインを下部にそれぞれ並置した情報映像データ１８０を、左眼映像に重畳する位置と右眼映像に重畳する位置とを計算して、図１３（ｂ）に示す情報重畳データ１８４を生成する。そして、情報映像データ記憶部３１０は、図１３（ｃ）の斜線部分で示す全体的な表示ラインに対する位置に相当する制御信号１８２を生成する。ただし、情報映像データ記憶部３１０は、左眼映像における情報重畳データ１８４の重畳開始位置を右眼映像における情報重畳データ１８４の重畳開始位置より、図１３（ｃ）に矢印で示すように水平視差ベクトル分だけシフトさせる。こうして立体映像データ１４０に両眼視差を付与することができる。
【００７２】
映像重畳部３１２は、情報映像データ記憶部３１０で生成された制御信号１８２に従って情報重畳データ１８４を立体映像データ１３４、１４０に重畳する。
【００７３】
図１４および図１５は、映像重畳部３１２の機能を示した機能ブロック図であり、特に図１４は映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、図１５は映像取得部１５０がトップアンドボトム方式の立体映像データ１４０を取得した場合を示している。
【００７４】
図１４（ａ）を参照すると、映像重畳部３１２の２つの入力端子にサイドバイサイド方式の立体映像データ１３４と情報重畳データ１８４とが入力され、切換入力に制御信号１８２が入力されている。従って、映像重畳部３１２は、制御信号１８２がオフの期間（図１４（ａ）で示す斜線部分以外の期間）、立体映像データ１３４をラインシーケンシャル部３１４に出力し、オンの期間（図１４（ａ）で示す斜線部分の期間）、立体映像データ１３４の代わりに情報重畳データ１８４をラインシーケンシャル部３１４に出力する。こうして図１４（ｂ）に示すような、情報重畳データ１８４が重畳された立体映像データ１３４が生成される。
【００７５】
図１５（ａ）を参照すると、図１４同様、映像重畳部３１２の２つの入力端子にトップアンドボトム方式の立体映像データ１４０と情報重畳データ１８４とが入力され、切換入力に制御信号１８２が入力されている。従って、映像重畳部３１２は、制御信号１８２がオフの期間（図１５（ａ）で示す斜線部分以外の期間）、立体映像データ１４０をラインシーケンシャル部３１４に出力し、オンの期間（図１５（ａ）で示す斜線部分の期間）、立体映像データ１４０の代わりに情報重畳データ１８４をラインシーケンシャル部３１４に出力する。こうして図１５（ｂ）に示すような、情報重畳データ１８４が重畳された立体映像データ１４０が生成される。
【００７６】
また、映像重畳部３１２は、立体映像データ１３４、１４０と情報重畳データ１８４とを排他的に切り替えるのみならず、制御信号１８２がオンの期間、任意の透過度で立体映像データ１３４、１４０に情報重畳データ１８４を重畳させてもよい。かかる構成により、最終的にディスプレイ１１０に表示される情報映像データ１８０によってその背景となる立体表示データ１４２が完全に見えなくなるのを回避でき、両データを有効に立体表示することができる。
【００７７】
さらに、映像重畳部３１２は、映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、ラインシーケンシャル部３１４において用いられない左眼映像または右眼映像の水平ラインには情報重畳データ１８４を重畳しないとしてもよい。
【００７８】
図１６は、映像重畳部３１２の動作を説明するための説明図である。映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、ラインシーケンシャル部３１４は、最終的な立体表示データ１４２の各ラインに対応する映像ラインを左眼映像および右眼映像から１ラインずつ交互に抽出するため、各眼映像では奇数ラインまたは偶数ラインのみが立体表示データ１４２に用いられることとなる。ここでは、映像重畳部３１２が、例えば奇数ラインのみ用いられる一方の眼映像（ここでは左眼映像）に対して、図１６のように、利用されない偶数ラインに対応する情報重畳データ１８４を重畳しない（欠落する）ようにすることで、無駄な処理を回避し負荷の軽減を図ることができる。
【００７９】
ラインシーケンシャル部３１４は、情報重畳データ１８４が重畳された立体映像データ１３４、１４０の左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイ１１０に表示するための立体表示データ１４２を生成する。
【００８０】
図１７および図１８は、ラインシーケンシャル部３１４の動作を説明するための説明図であり、特に図１７はサイドバイサイド方式の立体映像データ１３４から、図１８はトップアンドボトム方式の立体映像データ１４０から立体表示データ１４２を生成している。図１７（ａ）に示すように、映像取得部１５０がサイドバイサイド方式の立体映像データ１３４を取得した場合、ラインシーケンシャル部３１４は、左眼映像１３０の奇数ラインの映像Ｌ１、Ｌ３、Ｌ５、Ｌ７、Ｌ９、Ｌ１１と、右眼映像１３２の偶数ラインの映像Ｒ２、Ｒ４、Ｒ６、Ｒ８、Ｒ１０、Ｒ１２をそれぞれ抽出し、ラインの左端を揃えて交互に並べ直す。
【００８１】
詳細には、図１７（ａ）における左眼映像１３０の１ライン目の映像Ｌ１が図１７（ｂ）における立体表示データ１４２の１ライン目の映像Ｌ１’に、図１７（ａ）における右眼映像１３２の２ライン目の映像Ｒ２が図１７（ｂ）における立体表示データ１４２の２ライン目の映像Ｒ２’に変換される。従って、左眼映像１３０の偶数ラインの映像Ｌ２、Ｌ４、Ｌ６、Ｌ８、Ｌ１０、Ｌ１２、および右眼映像１３２の奇数ラインの映像Ｒ１、Ｒ３、Ｒ５、Ｒ７、Ｒ９、Ｒ１１は利用されないこととなる。ここでは左眼映像１３０から奇数ライン、右眼映像１３２から偶数ラインを抽出したが、当然、左眼映像１３０から偶数ライン、右眼映像１３２から奇数ラインを抽出してもよい。
【００８２】
ただし、立体映像データ１３４の各眼映像の水平解像度は、立体表示データ１４２の１／２となっているため、立体映像データ１３４から立体表示データ１４２を生成する際、その水平解像度を２倍に拡大しなければならない。かかる水平解像度拡大に伴う新たな画素の生成は、線形補間やその他のフィルタリングを用いることが可能である。かかる水平解像度の倍率は立体映像データ１３４の各眼映像と立体表示データ１４２との水平方向の画素数の比率に応じて適宜調整される。
【００８３】
また、図１８（ａ）に示すように、映像取得部１５０がトップアンドボトム方式の立体映像データ１４０を取得した場合、ラインシーケンシャル部３１４は、左眼映像１３６の全ラインの映像Ｌ１、Ｌ２、Ｌ３、Ｌ４、Ｌ５、Ｌ６と、右眼映像１３８の全ラインの映像Ｒ１、Ｒ２、Ｒ３、Ｒ４、Ｒ５、Ｒ６をそれぞれラインの左端を揃えて交互に並べ直す。従って、図１８（ａ）における左眼映像１３６の１ライン目の映像Ｌ１が図１８（ｂ）における立体表示データ１４２の１ライン目の映像Ｌ１に、図１８（ａ）における右眼映像１３８の１ライン目の映像Ｒ１が図１８（ｂ）における立体表示データ１４２の２ライン目の映像Ｒ１に、拡大処理や縮小処理を実行することなく移される。このようにトップアンドボトム方式では利用されないラインや水平解像度の拡大が無いので、情報の欠落も少なくなる。
【００８４】
映像出力部１６４は、ラインシーケンシャル部３１４でラインシーケンシャル処理された立体表示データ１４２をディスプレイ１１０または他の外部接続機器に出力する。
【００８５】
上述した立体映像表示装置３００では、立体映像データの左眼映像と右眼映像との水平視差ベクトルを求め、その水平視差ベクトルに基づいて情報重畳データと制御信号とを生成し、立体映像データの左眼映像および右眼映像にそれぞれ情報重畳データを重畳した後に、立体映像データごとラインシーケンシャル処理を行う。かかる構成により、立体視を考慮していない情報映像データにも両眼視差を付与でき、観察者に対して情報映像データを立体的に知覚させることが可能となる。このように、立体映像データ同様、情報映像データも正しく結像させることで、眼にかかる負担を軽減し、より自然な立体映像表示を実現することが可能となる。
【００８６】
（立体映像表示方法）
次に、上述した立体映像表示装置３００を用いて、両眼視差による立体映像を表示する立体映像表示方法を具体的に説明する。
【００８７】
図１９は、立体映像表示方法の全体的な流れを示したフローチャートである。立体映像表示装置３００の映像取得部１５０が立体映像データ１３４、１４０を取得すると（Ｓ４００）、映像処理部１５２がＲＧＢ処理（γ補正や色補正）、エンハンス処理、ノイズ低減処理などの映像信号処理を行う（Ｓ４０２）。
【００８８】
上述した処理に続いて、または並行して、情報映像データ記憶部３１０は、立体映像データ１３４、１４０または立体表示データ１４２の操作表示に関する情報を示す情報映像データ１８０を生成する（Ｓ４０４）。水平視差ベクトル導出部１５８が、左眼映像と右眼映像との水平視差ベクトルを導出し（Ｓ４０６）、情報映像データ記憶部３１０が、導出された水平視差ベクトルに基づいて、情報映像データ１８０を左眼映像および右眼映像に対応させた情報重畳データ１８４と、制御信号１８２とを生成し（Ｓ４０８）、映像重畳部１６２は、生成された制御信号１８２に従って情報重畳データ１８４を立体映像データ１３４、１４０に重畳する（Ｓ４１０）。
【００８９】
ラインシーケンシャル部１５４は、情報重畳データ１８４が重畳された立体映像データ１３４、１４０の左眼映像および右眼映像の水平ラインを交互に並置して、ディスプレイ１１０に表示するための立体表示データ１４２を生成し（Ｓ４１２）、映像出力部１６４が立体表示データ１４２を出力する（Ｓ４１４）。こうした一連の処理は、立体映像データ１３４、１４０が無くなるまで繰り返され、観察者は、適切な結像位置に情報映像データ１８０が表示された立体映像を見ることが可能となる。
【００９０】
以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明はかかる実施形態に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００９１】
なお、本明細書の立体映像表示方法の各工程は、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいはサブルーチンによる処理を含んでもよい。
【産業上の利用可能性】
【００９２】
本発明は、両眼視差による立体映像をディスプレイに表示することが可能な立体映像表示装置および立体映像表示方法に利用することができる。
【符号の説明】
【００９３】
１００、３００  …立体映像表示装置
１１０  …ディスプレイ
１３０、１３６  …左眼映像
１３２、１３８  …右眼映像
１３４、１４０  …立体映像データ
１４６  …ブロック
１５０  …映像取得部
１５２  …映像処理部
１５４、３１４  …ラインシーケンシャル部
１５６、３１０  …情報映像データ記憶部
１５８  …水平視差ベクトル導出部
１６０  …情報映像調整部
１６２、３１２  …映像重畳部
１６４  …映像出力部
１８０  …情報映像データ
１８２  …制御信号
１８４  …情報重畳データ
【図１】
2010278743.tif 000003
【図２】
2010278743.tif 000004
【図３】
2010278743.tif 000005
【図４】
2010278743.tif 000006
【図５】
2010278743.tif 000007
【図６】
2010278743.tif 000008
【図７】
2010278743.tif 000009
【図８】
2010278743.tif 000010
【図９】
2010278743.tif 000011
【図１０】
2010278743.tif 000012
【図１１】
2010278743.tif 000013
【図１２】
2010278743.tif 000014
【図１３】
2010278743.tif 000015
【図１４】
2010278743.tif 000016
【図１５】
2010278743.tif 000017
【図１６】
2010278743.tif 000018
【図１７】
2010278743.tif 000019
【図１８】
2010278743.tif 000020
【図１９】
2010278743.tif 000021
【図２０】
2010278743.tif 000022