(57)【要約】【課題】多種類の、立体映像平面映像の入力を、適切な視差で多画面の立体映像として表示する。【解決手段】外部から受信あるいは生成された立体映像信号、あるいは外部から受信あるいは生成された平面映像信号を含む複数の映像信号が入力される受信部と、前記受信部に入力された前記複数の映像信号に基づく映像を複数同時に表示する際に前記映像信号を所定の大きさにスケーリングするスケーラと、前記スケーラによってスケーリングされた立体映像信号を平面映像信号に変換する３Ｄ２Ｄ変換部と、前記スケーラによってスケーリングされた、平面映像信号、若しくは前記入力又は生成された平面映像信号を、所定の視差範囲に限定された立体映像信号に変換する２Ｄ３Ｄ変換部と、を備える立体映像表示装置とする。【選択図】図７
2014207492.tif 000002
【特許請求の範囲】
【請求項１】
外部から受信あるいは生成された立体映像信号、あるいは外部から受信あるいは生成された平面映像信号を含む複数の映像信号が入力される受信部と、
前記受信部に入力された前記複数の映像信号に基づく映像を複数同時に表示する際に前記映像信号を所定の大きさにスケーリングするスケーラと、
前記スケーラによってスケーリングされた立体映像信号を平面映像信号に変換する３Ｄ２Ｄ変換部と、
前記スケーラによってスケーリングされた、平面映像信号、若しくは入力又は生成された前記平面映像信号を、所定の視差範囲に限定された立体映像信号に変換する２Ｄ３Ｄ変換部と、
を備える立体映像表示装置。
【請求項２】
外部から受信あるいは生成された立体映像信号、あるいは外部から受信あるいは生成された平面映像信号を含む複数の映像信号が入力される受信部と、
前記受信部に入力された前記複数の映像信号に基づく映像を複数同時に表示する際に前記映像信号を所定の大きさにスケーリングするスケーラと、
視聴者からの入力あるいは、所定の規則に従って同時に表示される前記複数の映像信号のうち１つを特定する選択部と、
前記選択部によって特定された映像信号であって、前記スケーラによってスケーリングされた平面映像信号を立体映像信号に変換する２Ｄ３Ｄ変換部と、
前記選択部によって特定された映像信号であって、前記スケーラによってスケーリングされた立体映像信号、又は前記２Ｄ３Ｄ変換部で変換された立体映像信号の奥行き方向の最大視差を検出する最大視差検出部と、
前記選択部によって特定されなかった映像信号であって、前記スケーラによってスケーリングされた立体映像信号を平面映像信号に変換する３Ｄ２Ｄ変換部と、
前記選択部によって特定されなかった映像信号であって、前記スケーラによってスケーリングされた平面映像信号、又は前記３Ｄ２Ｄ変換部で変換された平面映像信号に対して、前記最大視差検出部で検出された視差よりも奥側に一律の視差を付加する映像調整部と、を備える立体映像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体映像表示装置に関するものである。より詳しくは、立体映像の多画面表示が可能な立体映像表示装置に関する。
【背景技術】
【０００２】
近年、プラズマディスプレイパネルや液晶パネルを用いて、立体映像を表示する立体映像表示装置の開発が積極的に行われている。例として、両目視差を利用した立体映像表示装置があげられる。両目視差を利用した立体映像表示装置としては、互いに視差を有する右目用映像と左目用映像を、パネル上で時分割に映し出す、もしくは、パネル上にライン交番で映し出し、視聴者は右目映像を右目に、左目映像を左目に映し出すメガネを用いて視聴することで、映像の立体視を可能にする装置が挙げられる。立体映像の奥行き感や飛出し感はこの右目用映像と左目用映像の視差量によって決定される。
【０００３】
立体映像表示装置の開発が進むことで、立体映像表示装置に新たに必要な機能としてあげられるのが、「多画面の立体表示」である。従来の平面表示装置（ＴＶやディスプレイ）の多くは、複数映像を一つの画面上に表示する「２画面機能」「マルチ画面機能」を備えている。これらは、複数の入力ソースの映像を、視聴者が視聴しながら選ぶことを補助することや、主として視聴を行いたい映像と、時々視聴を行いたい映像を同時に表示させることを目的としている。これらの機能は、立体映像表示装置に対しても求められる。
【０００４】
従来、多種類の立体映像を同時に表示する表示装置では、ビデオ映像の大きさに基づいて、該ビデオ映像に合成されて表示される字幕映像の深度を調節するものが知られている（例えば特許文献１参照）。
【０００５】
特許文献１では、ビデオ映像に字幕を合成する際に、ビデオ映像のスケーリング処理の拡大・縮小の比率に応じて、字幕の深度を調整する手法が開示されている。このようにすると、背景となるビデオ映像の深度が変更されても、字幕が最前面に見えるように調整することができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１１−３５８５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上記従来の技術は、特定映像に対して字幕を合成表示する際に、字幕の深度を適切に設定しようとするものである。このような技術分野においては、字幕の深度は映像処理装置内において独自に設定される。つまり、上記従来の技術は、複数ソースの立体映像を同時に表示するものではあるが、互いのソースが独立して深度を持つものではない。字幕の深度は映像の深度に依存するものである。これに対して、複数の異なるコンテンツである立体映像を異なる画面領域に同時に表示する場合は、双方の立体映像に対してコンテンツ製作者が設定した深度が存在する。このような場合、コンテンツ製作者が設定した深度を破綻させずに表示しなければならないという制約が存在する。
【課題を解決するための手段】
【０００８】
前記従来の課題を解決する為に、本発明の立体映像表示装置は、外部から受信あるいは生成された立体映像信号、あるいは外部から受信あるいは生成された平面映像信号を含む複数の映像信号が入力される受信部と、前記受信部に入力された前記複数の映像信号に基づく映像を複数同時に表示する際に前記映像信号を所定の大きさにスケーリングするスケーラと、前記スケーラによってスケーリングされた立体映像信号を平面映像信号に変換する３Ｄ２Ｄ変換部と、前記スケーラによってスケーリングされた、平面映像信号、若しくは入力又は生成された前記平面映像信号を、所定の視差範囲に限定された立体映像信号に変換する２Ｄ３Ｄ変換部と、を備える立体映像表示装置とした。
【０００９】
また、本発明の立体映像表示装置は、外部から受信あるいは生成された立体映像信号、あるいは外部から受信あるいは生成された平面映像信号を含む複数の映像信号が入力される受信部と、前記受信部に入力された前記複数の映像信号に基づく映像を複数同時に表示する際に前記映像信号を所定の大きさにスケーリングするスケーラと、視聴者からの入力あるいは、所定の規則に従って同時に表示される前記複数の映像信号のうち１つを特定する選択部と、前記選択部によって特定された映像信号であって、前記スケーラによってスケーリングされた平面映像信号を立体映像信号に変換する２Ｄ３Ｄ変換部と、前記選択部によって特定された映像信号であって、前記スケーラによってスケーリングされた立体映像信号、又は前記２Ｄ３Ｄ変換部で変換された立体映像信号の奥行き方向の最大視差を検出する最大視差検出部と、前記選択部によって特定されなかった映像信号であって、前記スケーラによってスケーリングされた立体映像信号を平面映像信号に変換する３Ｄ２Ｄ変換部と、前記選択部によって特定されなかった映像信号であって、前記スケーラによってスケーリングされた平面映像信号、又は前記３Ｄ２Ｄ変換部で変換された平面映像信号に対して、前記最大視差検出部で検出された視差よりも奥側に一律の視差を付加する映像調整部と、を備える立体映像表示装置ともした。
【発明の効果】
【００１０】
本発明の立体映像表示装置によれば、視聴者に負荷をかけずに多画面の立体表示ができ、立体表示にて、視聴者は複数の入力ソースの映像を視聴しながら選ぶことや、主として視聴を行いたい映像と、時々視聴を行いたい映像を同時に表示させることができる。
【図面の簡単な説明】
【００１１】
【図１】実施の形態１にかかるシステムの一例を示す構成図
【図２】実施の形態１にかかる立体映像表示装置のブロック図
【図３】実施の形態１にかかる映像制御部のブロック図
【図４】立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図
【図５】立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図
【図６】立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図
【図７】立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図
【図８】図７で示した制御のフローチャート
【図９】実施の形態２にかかる映像制御部のブロック図
【図１０】立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図
【図１１】図１０で示した制御のフローチャート
【発明を実施するための形態】
【００１２】
以下本発明の一実施の形態について図面を参照しながら説明する。
（実施の形態１）
（機器の構成）
図１は実施の形態１にかかるシステムの一例を示す構成図である。以下、図１を参照しながら本実施の形態にかかる映像処理装置が適用されるシステムの構成を説明する。
【００１３】
システムは、視聴者選択手段１、立体映像表示装置２、視聴者の装着する立体映像視聴用メガネ３を含む構成である。視聴者選択手段１と立体映像表示装置２は、赤外線もしくは無線で接続されている。立体映像表示装置２と立体映像視聴用メガネ３は赤外線もしくは無線で接続されている。
【００１４】
視聴者選択手段１は、視聴者が立体映像表示装置２を操作するのに用いるリモコンなどの装置である。視聴者選択手段１は、視聴者の操作内容を示す操作信号を立体映像表示装置２に送信する。
【００１５】
立体映像表示装置２は、放送波やネットワーク、記憶媒体からの映像素材を処理し、ディスプレイに時分割で左目用・右目用の立体映像を表示する装置である。具体的には液晶ディスプレイやプラズマディスプレイで構成可能である。立体映像表示装置２は、視聴者選択手段１から受信した前記操作信号の内容に応じて、ディスプレイに表示する映像を変更する。また、ディスプレイに表示する右目用・左目用の立体映像に同期して、表示している映像が右目用か、左目用かを示すＬＲ信号を立体映像視聴用メガネ３に送信する。立体映像視聴用メガネ３は液晶シャッタの偏向を制御することで、視聴者の視聴する立体映像を右目用・左目用に分離して視聴者の右目・左目に映し出す機構を備えたメガネである。立体映像視聴用メガネ３は、立体映像表示装置２から受信した前記ＬＲ信号に基づき液晶シャッタを制御する。
【００１６】
なお、上述した説明では、左目用、右目用の映像は立体映像表示装置２で時分割に表示し、同期した液晶シャッタを用いた立体映像視聴用メガネ３を用いて視聴者が視聴する構成について説明したが、本発明はこれに限定されるものではなく、いわゆる２眼式の立体映像表示装置であれば適用が可能である。
【００１７】
次に、立体映像表示装置２の構成について、図２を用いてさらに詳細に説明する。
【００１８】
図２は実施の形態１にかかる立体映像表示装置のブロック図である。
【００１９】
実施の形態１にかかる立体映像表示装置２は、ＣＰＵ２０、受信部２１、映像入力部２２、映像制御部２３、映像表示部２４、送信部２５を有する。
【００２０】
以下、各構成要素の接続関係について説明する。
【００２１】
ＣＰＵ２０と、受信部２１は外部バスで接続されている。ＣＰＵ２０と映像入力部２２、映像制御部２３、映像表示部２４はデータバスで接続されている。映像入力部２２と映像制御部２３はバスで接続されている。映像制御部２３と映像表示部２４はバスで接続されている。映像表示部２４と送信部２５はバスで接続されている。
【００２２】
以下、各構成について詳細に説明する。
【００２３】
ＣＰＵ２０は受信部２１からの前記操作信号に基づき、映像入力部２２、映像制御部２３、映像表示部２４に制御信号を送信する。また、映像制御部２３から受信する検出結果に基づき、映像制御部２３に制御信号を送信する。
【００２４】
受信部２１は、赤外線もしくは無線の受信装置である。受信部２１は、視聴者選択手段１からの操作信号を受信すると、ＣＰＵ２０に前記操作信号を送信する。
【００２５】
映像入力部２２は、ＣＰＵ２０からの前記制御信号に基づいて、映像出力を変化させるものである。具体的にはソフトウェア、専用ハードウェアなどで構成される。映像入力部２２の行う処理について具体的に述べる。映像入力部２２は、放送波やネットワーク、記憶媒体からのエンコードされた圧縮映像や、ＨＤＭＩなどのケーブルを介し外部機器から入力される映像の中から表示する映像を選択する。そして、映像入力部２２は、選択した映像信号を映像制御部２３の処理フォーマットにあわせた映像信号に変換する。さらに、映像入力部２２は変換した映像信号を映像制御部２３に出力する。前記映像信号の変換の一例としては、圧縮されている映像入力のデコード処理や、アナログ映像入力のデジタル映像信号への変換処理、１垂直同期信号に右目用の映像・左目用の映像が含まれる映像信号の２垂直同期信号への分割があげられる。映像制御部２３に送信する前記映像信号は、垂直同期信号、水平同期信号、映像信号（ＹＵＶ／ＲＧＢ）等が含まれる。なお、映像入力部２２が映像制御部２３に送信する前記映像信号は一つと限らない。多画面表示を行う場合は複数の映像信号を複数系統のバスで送信する。
【００２６】
映像制御部２３は、映像入力部２２から受信した前記映像信号に対して、表示位置の調整や拡大・縮小のスケーリング、映像合成、平面映像から立体映像への変換処理を行う。映像制御部２３は変換処理した映像信号を映像表示部２４に送信する。また、映像制御部２３は立体映像の右目映像・左目映像と同期して、垂直同期のタイミングで、左目用映像信号時は０、右目用映像信号時は１に切り替るＬＲ信号の生成を行い、映像表示部２４に送信する。映像制御部２３の詳細な機能の説明と内部の詳細な構成の説明は後述する。
【００２７】
映像表示部２４は、映像制御部２３から受信した前記映像信号をディスプレイに表示する制御を行う。また、映像表示部２４は、映像制御部２３から受信した前記ＬＲ信号を送信部２５に送信する。
【００２８】
送信部２５は、映像表示部２４から受信した前記ＬＲ信号を立体映像視聴用メガネ３に送信する。
【００２９】
次に、映像制御部２３の構成について、図３を用いてさらに詳細に説明する。
【００３０】
図３は実施の形態１にかかる映像制御部のブロック図である。
【００３１】
映像制御部２３は、映像調整部２３０、映像調整部２３１、メモリ２３２、映像合成部２３３、２Ｄ３Ｄ変換部２３４、ＣＰＵＩ／Ｆ２３５を有する。
【００３２】
以下、各構成要素の接続関係について説明する。
【００３３】
映像調整部２３０とメモリ２３２はバスで接続されている。映像調整部２３１とメモリ２３２はバスで接続されている。映像調整部２３０と映像合成部２３３はバスで接続されている。映像調整部２３１と映像合成部２３３はバスで接続されている。映像合成部２３３と２Ｄ３Ｄ変換部２３４はバスで接続されている。ＣＰＵＩ／Ｆ２３５と映像調整部２３０、映像調整部２３１、映像合成部２３３、２Ｄ３Ｄ変換部２３４は制御バスで接続されている。
【００３４】
以下、各構成要素について詳細に説明する。
【００３５】
映像調整部２３０、映像調整部２３１は、ＣＰＵＩ／Ｆ２３５からの前記制御信号に基づき、それぞれ映像入力部２２から映像制御部２３に入力される映像信号に対して処理を行う。処理の内容については映像調整部２３０、及び映像調整部２３１の機能として後に説明する。処理された映像信号は映像合成部２３３に出力される。映像調整部２３０、映像調整部２３１の出力する前記映像信号は、表示ディスプレイの垂直同期信号、水平同期信号、映像信号と、ＬＲ信号が含まれる。前記ＬＲ信号は映像調整部２３０もしくは映像調整部２３１のどちらかによって生成されたものである。映像調整部２３０、映像調整部２３１から出力する垂直同期信号、水平同期信号、ＬＲ信号は正常な映像を表現するように同期が取れている。
【００３６】
映像調整部２３０、及び映像調整部２３１の具体的な機能を下記に示す。なお、映像調整部２３０、及び映像調整部２３１はソフトウェア、ハードウェアあるいは、ＬＳＩの一機能要素として実現可能である。
【００３７】
（映像の拡大・縮小スケーリング）
映像調整部２３０、及び映像調整部２３１は入力の映像信号を、表示ディスプレイで表示するサイズにスケーリングするスケーラとしての機能を有する。スケーリングは、メモリ２３２に書き込んだ映像信号に対して行っても良く、メモリ２３２から読み出した映像信号に対しても行っても良い。
【００３８】
（映像の位置調整）
映像調整部２３０、及び映像調整部２３１は入力の映像信号を、表示ディスプレイで表示したい位置に出力を行う。本実施の形態においては、位置調整は、メモリ２３２から映像信号を読み出す際に行われる。
【００３９】
（立体映像信号の、３Ｄ２Ｄ化）
映像調整部２３０、及び映像調整部２３１はメモリ２３２に書き込まれた立体映像の右目用映像信号と左目用映像信号に対し、ＬＲ信号に基づいて右目用もしくは左目用の映像のみを読み出すことで、立体映像の入力を平面映像として出力する３Ｄ２Ｄ変換部としての機能を有する。
【００４０】
（映像信号の出力のタイミング調節機能）
映像調整部２３０、映像調整部２３１はどちらも同じ垂直同期信号、水平同期信号、ＬＲ信号を用いて、メモリ２３２から映像を読み出すことが可能である。このため、映像調整部２３０と映像調整部２３１の映像信号の出力タイミングが揃っている。
【００４１】
なお、上述した説明では、映像調整部２３０、映像調整部２３１で二つの映像を処理する構成で説明したが、本発明はこれに限定されるものではなく２つ以上の映像の処理を行う構成も可能である。例えば、映像調整部を並列で追加し、入力映像の処理系を増やすことが可能である。
【００４２】
メモリ２３２に書き込まれた映像信号が立体映像信号の場合、前記ＬＲ信号が０の垂直同期信号のタイミングでは、立体映像信号の左目用映像信号を、前記ＬＲ信号が１の垂直同期信号のタイミングでは立体映像信号の右目用映像信号を出力する。また、メモリ２３２に書き込まれた映像信号が平面映像信号の場合、前記ＬＲ信号が０のタイミングと１のタイミングで同じ映像信号を出力し、前記ＬＲ信号が０のタイミングで次の映像信号の出力に切り替る。
【００４３】
次に、映像合成部２３３について説明する。映像合成部２３３は、映像調整部２３０、映像調整部２３１から受信した前記映像信号を、ＣＰＵＩ／Ｆ２３５から受信した前記制御信号に基づき合成し、合成した映像信号を２Ｄ３Ｄ変換部２３４に出力する。映像調整部２３０及び映像調整部２３１から受信した前記映像信号は、上述した映像調整部２３０、及び映像調整部２３１の機能によって、垂直同期のタイミング、左目・右目のタイミングがあっている。映像合成部２３３は受信した映像信号同士を合成して、ディスプレイで表示用の合成画面を生成する。
【００４４】
２Ｄ３Ｄ変換部２３４は、映像合成部２３３から受信した前記映像信号に対し、ＣＰＵＩ／Ｆ２３５から受信した前記制御信号の視差範囲設定値（最大奥行き・最大飛出しの設定）の値と、２Ｄ３Ｄ変換を行う映像範囲の設定値に基づき、平面映像信号から立体映像信号への変換を行い、出力する。具体的には、ＬＲＩＤ信号の左目用・右目用のタイミングで同じ映像信号が繰り返される平面映像の領域に対して、一つ目のフレームは左目映像へ変換、二つ目のフレームは右目映像に変換を行うことで、時分割の立体映像を作り出す。２Ｄ３Ｄ変換の具体的アルゴリズムは既知のものを適宜用いることができる。２Ｄ３Ｄ変換部２３４は画素単位で変換を行うことで画面内に様々な視差をもつ立体映像信号を生成できることができる。既知の２Ｄ３Ｄ変換に加えて、視差範囲設定値に基づいて視差の範囲を任意に設定可能な点が２Ｄ３Ｄ変換部２３４の特徴である。視差範囲の設定アルゴリズムの一例としては、例えば視差範囲を超えた視差が付加された画素については一律に視差範囲の最大値／最小値に視差を補正するなどが挙げられる。
【００４５】
ＣＰＵＩ／Ｆ２３５は、ＣＰＵ２０と映像制御部２３内の各ブロックを仲介するインターフェースである。ＣＰＵＩ／Ｆ２３５は、ＣＰＵ２０からの制御信号を、映像調整部２３０、映像調整部２３１、映像合成部２３３、２Ｄ３Ｄ変換部２３４に送信する。
（機器の動作）
次に図４から図８を用いて、本実施の形態にかかる立体映像表示装置の動作について説明する。
【００４６】
まず、図４から図７を用いて、多画面の立体表示の表示方法を説明する。
【００４７】
図４は立体映像表示装置において多画面で立体映像を表示する際の画面レイアウトの一例を示す図である。図４の画面レイアウトは立体映像表示装置２と正対して視聴する視聴者の視点から見たイメージである。図５から図７は、立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図である。図５から図７の位置関係において、下方向が視聴者に映像が飛び出して表示される方向であり、上方向が視聴者に対して奥まって表示される方向である。図５、図６は、多画面の立体表示を実施の形態１の制御を行わずに表示した場合を示す。図７は実施の形態１における制御を用いた場合を示す。
【００４８】
図４に示されるように、立体映像表示装置２のディスプレイ面４００は映像Ａの表示領域４０１と映像Ｂの表示領域４０２に区切られている。映像Ａと映像Ｂはそれぞれ入力の映像をディスプレイ面の水平方向の大きさに対して１／２になるように縮小して表示している。
【００４９】
図５では実施の形態１にかかる制御を行っていない状態において映像Ａ、映像Ｂの二つの立体映像を合成し、立体表示を行った場合を示す。映像Ａ、映像Ｂはそれぞれ視差範囲５０１と視差範囲５０２をもっている。視差範囲とは、立体映像中の最も手前に飛び出す視差と、最も奥に奥まる視差による範囲である。映像Ａは奥行き方向に視差が多くつけられている。映像Ｂは飛出し方向に視差が多くつけられている。異なる視差範囲の映像が、多画面として合成され、立体表示されると、視聴者は異なる視差範囲の映像を並列して見ることになる。異なる視差範囲の映像を並列して見ることになると、視聴者に負荷がかかるおそれがある。
【００５０】
図６は、実施の形態１にかかる制御を行っていない状態において立体映像の入力である映像Ａと、平面映像の入力である映像Ｂを合成し、立体表示を行っている状態である。映像Ａは入力に基づく視差範囲６０１を持つ。映像Ｂは平面映像なので視差範囲６０２は０である。映像Ｂの表示位置は表示面６００と同一になる。立体映像と平面映像を多画面として合成して視聴する場合も、立体映像の視差範囲のほぼ真ん中、表示面の位置に平面映像が見えるため不自然な視差となり、視聴者に負荷がかかるおそれがある。
【００５１】
これに対して本実施の形態では、以下の方法で、視聴者に負荷のかからないように、立体映像の多画面表示を行う。
【００５２】
本実施の形態による制御を適用した様子を図７に示す。図７では、映像Ａの視差範囲５０１と、映像Ｂの視差範囲５０２は同一である。入力の映像Ａ、映像Ｂは、立体映像、平面映像を問わない。これにより、複数の立体映像を視聴の負荷をかけずに表示することが出来る。
【００５３】
図７で示した制御の実現方法について図８を用いて説明する。
【００５４】
図８は図７で示した制御のフローチャートである。このフローは、視聴者が視聴者選択手段１によって立体映像表示装置２に多画面表示を指示する操作信号を送信した際の、ＣＰＵ２０による映像制御部２３の制御を示している。本制御により、図７に示した表示が実現される。
【００５５】
図８の処理フローは、ＣＰＵ２０が受信部２１から、視聴者選択手段１からの多画面表示を指示する操作信号を受信した際に開始する。まず、表示する入力映像の一つ（映像Ａ）を映像調整部２３０にて多画面表示用にスケーリングする（Ｓ８０１）。ここで、前記映像Ａが立体映像信号の場合（Ｓ８０２でＹ）、映像調整部２３０にて３Ｄ２Ｄ化を行い平面映像としてメモリから読み出させる（Ｓ８０３）。
【００５６】
次に、映像Ａとは異なる入力映像（映像Ｂ）を、映像調整部２３１にて多画面表示用にスケーリングする（Ｓ８０４）。前記映像Ｂが立体映像の場合（Ｓ８０５でＹ）、３Ｄ２Ｄ化を行い平面映像としてメモリから読み出させる（Ｓ８０６）。ステップＳ８０１〜Ｓ８０５の制御により、映像調整部２３０から出力される映像Ａと、映像調整部２３１から出力される映像Ｂはどちらも平面映像として映像合成部２３３に入力される。
【００５７】
次に、映像合成部２３３に映像Ａと映像Ｂの映像合成設定を行わせる（Ｓ８０７）。そして２Ｄ３Ｄ変換部２３４に生成する立体映像の視差範囲を設定の上、全映像領域を２Ｄ３Ｄ変換する（Ｓ８０８）。その後変換された映像は映像表示部２４から出力される。
【００５８】
以上のように本発明の立体映像表示装置は、複数の立体映像を表示する際に、両方の映像を映像調整部２３０、映像調整部２３１にて平面映像化し、映像合成部２３３にて合成後に、２Ｄ３Ｄ変換部２３４にて立体映像に変換することで、表示する映像の視差の範囲を同一にするため、視聴者に負荷をかけない立体映像の多画面表示が可能である。これにより視聴者は立体映像の多画面表示で、複数の入力ソースの映像を視聴しながら選ぶことが出来る。
（実施の形態２）
以下図９から図１１を参照しながら実施の形態２について説明する。
【００５９】
まず、実施の形態１と実施の形態２との違いについて説明する。
【００６０】
実施の形態１では、同一の視差範囲に立体映像を収めることによって、視聴者の負荷を軽減した。これに対して、実施の形態２では、特定の立体映像の有する最大の奥行き視差を検出し、当該奥行き視差より奥側に他の映像が平面として表示されるように制御を行うことによって視聴者の負荷を軽減する。
（機器の構成）
以下、実施の形態１と同一で構わない箇所については記載を省略し、実施の形態２特有の構成について説明を行う。
【００６１】
図９は実施の形態２にかかる映像制御部のブロック図である。
【００６２】
実施の形態２にかかる映像制御部２３は、映像調整部２３０、映像調整部２３１、メモリ２３２、映像合成部２３３、２Ｄ３Ｄ変換部２３４、ＣＰＵＩ／Ｆ２３５、最大視差検出部２３６を有する。実施の形態１との違いは、最大視差検出部２３６が含まれる点である。
【００６３】
最大視差検出部２３６に関連する接続関係について説明する。メモリ２３２と最大視差検出部２３６はバスで接続されている。また、ＣＰＵＩ／Ｆ２３５と映像調整部２３０、映像調整部２３１、映像合成部２３３、２Ｄ３Ｄ変換部２３４、最大視差検出部２３６は制御バスで接続されている。ＣＰＵＩ／Ｆ２３５は、ＣＰＵ２０と映像制御部２３内の各ブロックを仲介するインターフェースであり、ＣＰＵ２０からの制御信号を最大視差検出部２３６にも送信する。また、最大視差検出部２３６から検出した、立体映像の水平視差の最大値を、ＣＰＵ２０に送信する。
【００６４】
また、実施の形態２においては映像調整部２３０、及び映像調整部２３１が次の機能を有する。
【００６５】
（映像の水平位置調整を用いた、２Ｄ３Ｄ変換（一律視差の付加））
映像調整部２３０、及び映像調整部２３１は、右目用映像信号と左目用映像信号に画面全体で一律の視差を付加して立体映像信号を生成する。一律の視差が付加された立体映像信号は、平面映像信号を水平移動することで作成可能である。水平移動の具体的な行い方としては、例えば、前記ＬＲ信号を用いて行う方法がある。具体的には、メモリ２３２から読み出した平面映像信号に対して、前記ＬＲ信号が０（左目のタイミング）では前記平面映像信号を左に水平移動し、前記ＬＲ信号が１（右目のタイミング）では前記平面映像信号を右に水平移動する。このようにすると画面奥側方向に一律に視差が付加される。このような映像は、画面の奥方向側に平面映像が位置しているように近くされる。映像信号に画面手前方向に視差をもたせる場合は、前記奥方向側に視差を持たせる場合と逆に水平移動する。
【００６６】
また、前記水平移動をメモリ２３２から読み出した平面映像に対してそのまま行うと、表示エリアから右目用映像、左目用映像それぞれの移動方向の端点が移動量の分だけ削れてしまう。すると、立体映像としては、両端が右目もしくは左目用映像しかない状態になってしまう。そのため、メモリ２３２から読み出した平面映像を、移動量分水平縮小した上で水平移動を行ってもよい。
【００６７】
以下、最大視差検出部２３６の機能について説明する。
【００６８】
最大視差検出部２３６は、ＣＰＵＩ／Ｆ２３５から受信した制御信号に基づき、映像調整部２３０もしくは映像調整部２３１どちらかがメモリ２３２に書き込んだ立体映像から、視差の検出を行う。検出は、右目用映像信号の各ラインが書き込まれるタイミングで、前記右目用映像信号の水平方向の１ラインと既にメモリに書き込まれている左目用映像信号の対応する水平の１ラインとの間でマッチングを取る事で、行う。（例えば、左眼用映像において所定の範囲のブロックを定義して、右目の（垂直座標は一緒だという前提あり）ブロックと比較して水平方向の移動量を検出する。）これを１フレームの全ラインに対して行うことで、１フレーム中の最大視差を検出する。最大視差は、飛出し量（左目用映像に対して右目用映像が右方向にいる場合の最大距離）、奥行き量（左目用映像に対して右目用映像が左方向にいる場合の最大距離）の両方を検出し、右目用映像のメモリ書き込み完了時にＣＰＵＩ／Ｆ２３５に送信する。
【００６９】
（機器の動作）
以下、図１０および図１１を用いて実施の形態２にかかる立体映像表示装置の動作について説明する。図１０は、立体映像表示装置と正対して視聴する視聴者の頭上方向から見た図である。図１０に示されるように、映像Ａは立体映像なので視差範囲１００１を有する。これに対して、映像Ｂの視差範囲１００２は立体映像ではあるが一律に視差が付加されているので視差範囲は０である。映像Ｂが知覚される奥行き位置は、視差範囲１００１の最奥の位置である。映像Ｂの左目映像の範囲１００３と右目映像の範囲１００４は画面一律で水平ずれている。また、映像Ａと映像Ｂのどちらもディスプレイ面の水平サイズの半分より小さいサイズに縮小されている。前記左目映像の範囲１００３と右目映像の範囲１００４の左端の交差によって視聴者に見える立体映像の左端１００５は、前記縮小の結果、映像Ａの表示領域より右側に距離が作られる。これにより、映像Ａの視聴の邪魔にならない視差と位置で映像Ｂを表示でき、視聴者は映像Ａの視聴に専念できる。また本実施の形態においては映像Ａの視差を入力映像の視差のまま視聴することも可能である。
【００７０】
図１１は図１０で示した制御のフローチャートである。このフローは、視聴者が視聴者選択手段１によって立体映像表示装置２に多画面表示を指示する操作信号を送信した際の、ＣＰＵ２０による映像制御部２３の制御を示している。本制御により、図１０に示した表示が実現される。
【００７１】
図１１の処理フローは、ＣＰＵ２０が受信部２１から、視聴者選択手段１からの多画面表示中の映像操作信号を受信した際に開始する。また、本処理フローでは事前に視聴者が視聴者選択手段１を用いて複数の入力映像のうちの片方を選択するものとする。ここで想定される選択の基準としては、視聴者は自己が注目したい映像を選択するものとする。また、本発明はこれに限られず、視聴者が明示的に映像を選択せずに立体映像表示装置２の内部で特定の映像を選択映像として扱っても良い。ここで想定される選択の基準としては、画面の表示位置が左側であるものであるものを選択する場合や、画面サイズの大きいものを選択する場合などが想定される。
【００７２】
まず、選択された入力映像（図１０における映像Ａ）を映像調整部２３０にて多画面表示用にスケーリングする（Ｓ１１０１）。前記映像Ａが立体映像信号の場合（Ｓ１１０２でＹ）、映像調整部２３０の映像に対して最大視差を検出するよう最大視差検出部２３６を、動作させる（Ｓ１１０３）。前記映像Ａが立体映像信号ではない場合（Ｓ１１０２でＮ）、２Ｄ３Ｄ変換部２３４を用いて、映像Ａを２Ｄ３Ｄ変換する（Ｓ１１０４）。本フローでは２Ｄ３Ｄ変換部２３４が所定の範囲内に立体映像を収めるので、最大視差は既知であるから、最大視差検出動作（Ｓ１１０３）は必ずしも必要ない。ここで実施の形態１とは異なり２Ｄ３Ｄ変換部２３４は所定の範囲に立体映像を収める必要は必ずしも無い。既存の２Ｄ３Ｄ変換アルゴリズムに適用の後最大視差検出動作（Ｓ１１０３）を行っても良い。
【００７３】
次に、選択されていない入力映像（図１０における映像Ｂ）を、映像調整部２３１にて多画面表示用にスケーリングする（Ｓ１１０５）。この際、前記映像Ｂが立体映像の場合（Ｓ１１０６でＹ）、映像調整部２３１はメモリ２３２から平面映像として映像Ｂを読み出し、３Ｄ２Ｄ化を行う（Ｓ１１０７）また、映像調整部２３１はメモリ２３２から映像信号を読み出して出力する際に、全映像領域に一律の視差がつくように水平縮小と２Ｄ３Ｄ変換を行う（Ｓ１１０８）。ステップＳ１１０８の２Ｄ３Ｄ変換の視差量は、ステップＳ１１０３で最大視差検出部２３６により検出された前記映像Ａの視差量、もしくは、ステップＳ１１０４で設定した前記映像Ａの２Ｄ３Ｄ変換の視差範囲の奥行き方向の視差量以上の視差量を付加する。なお、最大視差検出部２３６で検出される視差量は、映像入力の種類や番組によって異なるため、定期的に最大視差検出部２３６で検出した結果に基づき、ステップＳ１１０８を行う必要がある。
【００７４】
このようにすると、選択映像は入力の視差で表示しながら、選択映像の邪魔にならない場所に非選択映像を表示しておくことができる。これにより、視聴者は主として視聴を行いたい映像と、時々視聴を行いたい映像を同時に表示させることが出来る。
【００７５】
なお、映像Ａが立体映像信号の場合（Ｓ１１０２でＹ）であっても、メモリ２３２から平面映像として映像Ａを読み出し、３Ｄ２Ｄ化を行い、さらに２Ｄ３Ｄ変換部２３４を用いて、映像Ａを２Ｄ３Ｄ変換することによって、最大視差検出部２３６を省略する構成とすることもできる。上述したように、２Ｄ３Ｄ変換部２３４が所定の範囲内に立体映像を収めるので、最大視差は既知であるからである。最大視差検出部２３６を省略した構成の場合は、固定の奥行き方向の視差にしても良い。３Ｄの安全ガイドラインとして生態安全上、奥行き方向の視差は実寸５ｃｍまでと制限されているため、ディスプレイサイズでの５ｃｈ相当のピクセル数を、前記映像Ｂを配置するための奥行き方向の視差としても良い（実寸５ｃｍは、例えば６５インチのディスプレイで６７Ｐｉｘｅｌに相当する）
【産業上の利用可能性】
【００７６】
本発明の立体映像表示装置は、テレビジョン受信機として有用である。
【符号の説明】
【００７７】
１  視聴者選択手段
２  立体映像表示装置
３  立体映像視聴用メガネ
２１  受信部
２２  映像入力部
２３  映像制御部
２４  映像表示部
２５  送信部
２３０  映像調整部
２３１  映像調整部
２３２  メモリ
２３３  映像合成部
２３４  ２Ｄ３Ｄ変換部
２３５  ＣＰＵＩ／Ｆ
２３６  最大視差検出部
４００  ディスプレイ面
４０１  表示領域
４０２  表示領域
５０１  視差範囲
５０２  視差範囲
６００  表示面
６０１  視差範囲
６０２  視差範囲
１００１  視差範囲
１００２  視差範囲
１００３  範囲
１００４  範囲
１００５  左端
【図１】
2014207492.tif 000003
【図２】
2014207492.tif 000004
【図３】
2014207492.tif 000005
【図４】
2014207492.tif 000006
【図５】
2014207492.tif 000007
【図６】
2014207492.tif 000008
【図７】
2014207492.tif 000009
【図８】
2014207492.tif 000010
【図９】
2014207492.tif 000011
【図１０】
2014207492.tif 000012
【図１１】
2014207492.tif 000013