(57)【要約】      （修正有）【課題】平面的な表示情報を適切に立体表示することが可能な立体情報出力装置を提供できる。【解決手段】立体情報出力装置は、立体放送により提供される立体映像に含まれる右目用映像と左目用映像とから立体映像の立体度を検出する検出手段と、前記立体度に基づきメニューに関する情報を表示するための表示情報から右目用表示情報と左目用表示情報の立体表示情報を生成する生成手段と、前記立体表示情報を出力する出力手段とを備えている。【選択図】図２
2010130495.tif 000002
【特許請求の範囲】
【請求項１】
立体映像の立体度を検出する検出手段と、
前記立体度に基づき表示情報から立体表示情報を生成する生成手段と、
前記立体表示情報を出力する出力手段と、
を備えたことを特徴とする立体情報出力装置。
【請求項２】
前記検出手段は、立体放送により提供される前記立体映像に含まれた右目用映像と左目用映像から前記立体度を検出することを特徴とする請求項１に記載の立体情報出力装置。
【請求項３】
前記検出手段は、立体放送により提供される前記立体映像に含まれた右目用文字情報と左目用文字情報から前記立体度を検出することを特徴とする請求項１に記載の立体情報出力装置。
【請求項４】
前記検出手段は、前記右目用文字情報と前記左目用文字情報から前記立体度を検出することができない場合に、立体放送により提供される前記立体映像に含まれた右目用映像と左目用映像から前記立体度を検出することを特徴とする請求項３に記載の立体情報出力装置。
【請求項５】
前記変換手段は、前記立体度に基づき前記表示情報から右目用表示情報と左目用表示情報を生成することを特徴とする請求項２に記載の立体情報出力装置。
【請求項６】
前記出力手段は、前記右目用映像と前記左目用映像、及び前記右目用表示情報と前記左目用表示情報を重畳して出力することを特徴とする請求項５に記載の立体情報出力装置。
【請求項７】
前記生成手段は、前記立体度に基づきメニューに関する情報を表示するための前記表示情報から前記立体表示情報を生成することを特徴とする請求項１に記載の立体情報出力装置。
【請求項８】
前記生成手段は、前記立体映像の立体度よりも高い立体度で前記立体表示情報を生成することを特徴とする請求項１に記載の立体情報出力装置。
【請求項９】
立体映像の立体度を検出し、
前記立体度に基づき表示情報から立体表示情報を生成し、
前記立体表示情報を出力する、
ことを特徴とする立体情報出力方法。
【請求項１０】
立体放送に含まれた右目用映像と左目用映像から前記立体度を検出することを特徴とする請求項９に記載の立体情報出力方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体放送等を出力（表示）する立体情報出力装置及び立体情報出力方法に関する。
【背景技術】
【０００２】
近年、試験的に立体放送が開始されている。例えば、立体放送は、右目用映像と左目用映像を含み、立体放送対応ＴＶは、これら右目用映像と左目用映像を変位させて出力し、この変位出力により立体映像が提供される。
【０００３】
その他に、立体映像を提供する技術として、線源と線源により照射された物体の透過画像を撮影し、透過画像に基づいて提示される立体映像を立体表示ディスプレイに表示する立体映像生成技術が提案されている（特許文献１参照）。
【特許文献１】特開２００６−２１２０５６
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上記したように、立体映像を提供する技術は種々提案されている。しかしながら、メニュー等の平面的な表示情報を立体映像に対応させて立体表示することができない。このため、立体放送の表示画面中にメニュー等の平面的な表示情報を重畳すると、一つの画面上に立体映像と平面映像とが混在してしまい、結果的に不自然な映像となってしまう。
【０００５】
例えば、平面的な表示情報から右目用の表示情報と左目の表示情報を生成し、これら右目用の表示情報と左目の表示情報を適当に変位させて平面的な表示情報を立体的な表示情報へ変換し、変換された立体的な表示情報を表示することが考えられる。しかし、立体放送として提供される立体映像の立体度と、後から生成された表示情報の立体度とが異なることが考えられ、立体度の異なる映像と表示情報とが重畳して表示された映像も、やはり不自然である。
【０００６】
本発明の目的は、平面的な表示情報を適切に立体表示することが可能な立体情報出力装置及び立体情報出力方法を提供することにある。
【課題を解決するための手段】
【０００７】
この発明の立体情報出力装置は、立体映像の立体度を検出する検出手段と、前記立体度に基づき表示情報から立体表示情報を生成する生成手段と、前記立体表示情報を出力する出力手段とを備えている。
【０００８】
この発明の立体情報出力方法は、立体映像の立体度を検出し、前記立体度に基づき表示情報から立体表示情報を生成し、前記立体表示情報を出力する。
【発明の効果】
【０００９】
本発明によれば、平面的な表示情報を適切に立体表示することが可能な立体情報出力装置及び立体情報出力方法を提供できる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照し、本発明の実施形態について説明する。
【００１１】
図１は、本発明の一実施形態に係るデジタル放送対応テレビ（立体情報出力装置）の概略構成を示す図である。
【００１２】
アンテナ端子１は、立体放送の放送信号を入力する。地上デジタルチューナ２は、リモートコントローラ用制御モジュール１０からの選局指示に基づき、地上デジタルの放送信号から所定の放送局の放送信号を抽出する。同様に、ＢＳデジタルチューナ３は、リモートコントローラ用制御モジュール１０からの選局指示に基づき、ＢＳデジタルの放送信号から所定の放送局の放送信号を抽出する。なお、リモートコントローラ用制御モジュール１０は、赤外線受光器１１により受光されたリモートコントローラからの赤外線に基づき、選局指示を出力する。
【００１３】
メイン制御モジュール４は、抽出された放送信号に含まれた映像信号に基づきパネル駆動モジュール５の駆動を制御する。パネル駆動モジュール５の駆動に対応し、液晶パネル６は、映像信号に対応する映像を表示する。また、メイン制御モジュール４は、抽出された放送信号に含まれた音声信号をスピーカ７へ入力する。スピーカ７は、音声信号に基づき音声を出力する。
【００１４】
また、図２に示すように、メイン制御モジュール４は、立体映像処理モジュール４０を備えており、立体映像処理モジュール４０は、移動量検出処理モジュール４１、メニュー位置算出処理モジュール４２、左目用メニュー描画処理モジュール４３、左目用メニュー描画処理モジュール４４を備えている。立体映像処理モジュール４０による立体映像処理については後に詳しく説明する。
【００１５】
液晶メガネ制御モジュール８及び赤外線発光部９は、抽出された放送信号に含まれた映像信号に基づき、液晶シャッタ付きメガネに液晶シャッタの駆動タイミングを通知するとともに、映像信号を送信する。液晶シャッタ付きメガネは、この液晶シャッタの駆動タイミングの通知に従い、液晶シャッタを駆動し、映像信号に基づく立体映像を提供する。
【００１６】
なお、ＲＡＭ１２は、メイン制御モジュール４で必要なデータを一時的に記憶し、ＦＬＡＳＨ ＲＯＭ１３は、メイン制御モジュール４の制御プログラム、及び後述するメニュー等を表示するための表示データを記憶する。例えば、また、Ｂ−ＣＡＳスロット１４は、デジタル放送の視聴に必要なＢ−ＣＡＳカードを受け入れる。
【００１７】
例えば、図４に示すように、立体放送は、複数のフレーム情報を含み、各フレーム情報は、右目用映像と左目用映像の連結エンコード情報により構成される。デジタル放送対応テレビのメイン制御モジュール４は、連結エンコード情報をデコードし、右目用映像と左目用映像を交互に出力する。液晶シャッタ付きのメガネは、左目用映像が表示された映像フレームを左目用に表示し、右目用映像が表示された映像フレームを右目用に表示する。
【００１８】
このような立体映像の表示方式の場合、右目用映像と左目用映像を同一場面で重ねると、視差を出すために（立体表示のために）、右目用映像と左目用映像は、位置ずれしている。液晶シャッタによる映像の切り替えにより、このような位置ずれした右目用映像が右目に提供され、左目用映像が左眼に提供される。このため、単純に、立体放送の映像に対して、ユーザインタフェース映像（メニュー等の表示情報）を重ね合わせてしまうと、立体映像内の一部に平面なメニュー等の表示情報が表示されることになり、違和感が発生してしまう。特にポップアップメニューなどはその傾向が顕著になる。
【００１９】
また、ある程度立体的にメニューを表示しようとして、平面的なメニュー映像から適当に視差を付けた右目用メニュー映像と左目用メニュー映像を生成し、立体放送の右目用映像と生成された右目用メニュー映像とを重ね合わせ、立体放送の左目用映像と生成された左目用メニュー映像とを重ね合わせることが考えられる。ところが、立体放送の右目用映像と左目用映像の視差（立体度）と、生成された右目用メニュー映像と左目用メニュー映像の視差（立体度）とがマッチしていない可能性が高く、やはり違和感のある映像になってしまう。
【００２０】
本実施形態のデジタル放送対応テレビは、以下説明する処理により、このような違和感のない映像を提供することができる。つまり、デジタル放送対応テレビは、立体放送の右目用映像と左目用映像の視差（立体度）と、右目用メニュー映像と左目用メニュー映像の視差（立体度）とを対応させることができる。
【００２１】
例えば、図２に示すように、デジタル放送対応テレビのメイン制御モジュール４は、立体放送の右目用映像と左目用映像（同時刻に表示すべき右目用映像と左目用映像）を分離し、分離した右目用映像を移動量検出処理モジュール４１へ入力し、同様に分離した左目用映像を移動量検出処理モジュール４１へ入力する。移動量検出処理モジュール４１は、分離した右目用映像と分離した左目用映像の変位量を検出する。例えば、移動量検出処理モジュール４１は、MPEGエンコード時に用いる移動ベクトル検出処理を利用し、分離した右目用映像と分離した左目用映像の変位量を検出し、検出された移動ベクトルのうち、水平方向の移動ベクトルの最大値を移動量として検出する。
【００２２】
なお、一般的に、右目用映像と左目用映像の変位量が大きいほど、立体度は高まる。但し、立体表示のための変位量には上限がある。そこで、移動ベクトルの検出範囲に制限を持たせる。例えば、移動ベクトルの検出範囲を、移動量の最大値とせずに、横ピクセルの一定範囲の割合に限定する。
【００２３】
メニュー位置算出処理モジュール４２は、ＦＬＡＳＨ ＲＯＭ１３から入力されるメニュー表示データを受け取り、移動量検出処理モジュール４１により検出された移動量に基づき、メニュー用の表示データから、立体メニュー表示データを生成する。つまり、メニュー位置算出処理モジュール４２は、検出された移動量に基づき、メニュー表示データから、右目用メニュー表示データと左目用メニュー表示データとを生成する。右目用メニュー描画処理モジュール４４は、右目用メニュー表示データに基づき右目用メニュー映像を描画し、左目用メニュー描画処理モジュール４３は、左目用メニュー表示データに基づき左目用メニュー映像を描画する。
【００２４】
さらに、メイン制御モジュール４は、立体放送の右目用映像と上記描画された右目用メニュー映像とを重畳し右目用重畳映像を生成し、立体放送の左目用映像と上記描画された左目用メニュー映像とを重畳し左目用重畳映像を生成する。液晶メガネ制御モジュール８及び赤外線発光部９は、立体放送の映像信号に基づき、液晶シャッタ付きメガネに液晶シャッタの駆動タイミングを通知するとともに、右目用重畳映像と左目用重畳映像を出力する。液晶シャッタ付きメガネは、この液晶シャッタの駆動タイミングの通知に従い、液晶シャッタを駆動し、右目用重畳映像と左目用重畳映像に基づく立体映像を表示する。つまり、液晶シャッタ付きのメガネは、左目用重畳映像が表示された映像フレームを左目用に表示し、右目用重畳映像が表示された映像フレームを右目用に表示する。
【００２５】
上記した右目用メニュー表示データと左目用メニュー表示データとの変位量は、検出された移動量に相当する。或いは、右目用メニュー表示データと左目用メニュー表示データとの変位量は、検出された移動量より若干大きい移動量に相当する。つまり、検出された移動量をｎピクセルと仮定すると、右目用メニュー表示データと左目用メニュー表示データとの変位量は、（ｎ＋α）ピクセルとなる。これにより、立体放送の映像の最前面に対応させてメニューを表示したり、立体放送の映像の最全面よりさらに前面にメニューを表示したりができ、視聴者は違和感の無い立体メニューを見ることができる。
【００２６】
次に、図３に示すフローチャートを参照し、字幕又はテロップ等の文字情報を利用した立体映像処理の一例について説明する。
【００２７】
立体放送の映像情報が字幕又はテロップ等の文字情報を含む場合には、この文字情報に基づき立体度を検出する。これは、文字情報（映像情報から検出された文字情報）から検出される立体度の精度が、映像情報から検出される立体度の精度より高いことが多いからである。文字情報から検出された立体度に基づき、表示情報の立体度を設定することにより、正確な表示情報の立体表示が可能となる。
【００２８】
まず、メイン制御モジュール４は、立体放送が字幕又はテロップ等の文字情報を含んでいるか否かを検出する。即ち、メイン制御モジュール４は、立体放送の左目映像を入力し（ＳＴ１）、左目映像に文字情報が含まれているか否かを検出する（ＳＴ２）。メイン制御モジュール４は、左目映像から文字情報を検出すると（ＳＴ３、ＹＥＳ）、検出した文字情報の位置を検出する（ＳＴ４）。左目映像から検出された文字情報の位置は、ＲＡＭ１２に記憶される。
【００２９】
上記左目映像に対する処理と並行して、メイン制御モジュール４は、立体放送の右目映像を入力し（ＳＴ５）、右目映像に文字情報が含まれているか否かを検出する（ＳＴ６）。メイン制御モジュール４は、右目映像から文字情報を検出すると（ＳＴ７、ＹＥＳ）、検出した文字情報の位置を検出する（ＳＴ８）。右目映像から検出された文字情報の位置は、ＲＡＭ１２に記憶される。
【００３０】
上記したように、メイン制御モジュール４が、右目映像から文字情報を検出し、左目映像からも文字情報を検出した場合には（ＳＴ９）（ＳＴ１０、ＹＥＳ）、移動量検出処理モジュール４１は、右目映像の文字情報の位置と左目映像の文字情報の位置から、右目映像の文字情報と左目映像の文字情報の移動量（変位量）を算出する（ＳＴ１３）。
【００３１】
メニュー位置算出処理モジュール４２は、ＦＬＡＳＨ ＲＯＭ１３から入力されるメニュー表示データを受け取り、移動量検出処理モジュール４１により検出された移動量に基づき、メニュー用の表示データから、立体メニュー表示データを生成する。つまり、メニュー位置算出処理モジュール４２は、検出された移動量に基づき、メニュー表示データから、右目用メニューの表示位置と左目用メニューの表示位置とを計算し（ＳＴ１４）、右目用メニュー表示データと左目用メニュー表示データとを生成する。右目用メニュー描画処理モジュール４４は、右目用メニュー表示データに基づき右目用メニューを描画し、左目用メニュー描画処理モジュール４３は、左目用メニュー表示データに基づき左目用メニューを描画する（ＳＴ１５）。
【００３２】
さらに、メイン制御モジュール４は、立体放送の右目用映像と上記描画された右目用メニューとを重畳し右目用重畳映像を生成し、立体放送の左目用映像と上記描画された左目用メニューとを重畳し左目用重畳映像を生成する。液晶メガネ制御モジュール８及び赤外線発光部９は、立体放送の映像信号に基づき、液晶シャッタ付きメガネに液晶シャッタの駆動タイミングを通知するとともに、右目用重畳映像と左目用重畳映像を出力する。液晶シャッタ付きメガネは、この液晶シャッタの駆動タイミングの通知に従い、液晶シャッタを駆動し、右目用重畳映像と左目用重畳映像に基づく立体映像を提供する。つまり、液晶シャッタ付きのメガネは、左目用重畳映像が表示された映像フレームを左目用に表示し、右目用重畳映像が表示された映像フレームを右目用に表示する。
【００３３】
なお、メイン制御モジュール４が、右目映像から文字情報を検出できなかった場合、或いは左目映像から文字情報を検出できなかった場合には（ＳＴ９）（ＳＴ１０、ＮＯ）、移動量検出処理モジュール４１は、右目映像と左目映像の位置から移動ベクトルを検出し（ＳＴ１１）、右目映像と左目映像の移動量（変位量）を算出する（ＳＴ１２）。メニュー位置算出処理モジュール４２は、ＦＬＡＳＨ ＲＯＭ１３から入力されるメニュー表示データを受け取り、移動量検出処理モジュール４１により検出された移動量に基づき、メニュー表示データから、右目用メニューの表示位置と左目用メニューの表示位置とを計算し（ＳＴ１４）、右目用メニュー表示データと左目用メニュー表示データとを生成する。右目用メニュー描画処理モジュール４４は、右目用メニュー表示データに基づき右目用メニューを描画し、左目用メニュー描画処理モジュール４３は、左目用メニュー表示データに基づき左目用メニューを描画する（ＳＴ１５）。さらに、メイン制御モジュール４は、立体放送の右目用映像と上記描画された右目用メニューとを重畳し右目用重畳映像を生成し、立体放送の左目用映像と上記描画された左目用メニューとを重畳し左目用重畳映像を生成する。
【００３４】
なお、図２は、横方向に伸張された映像から移動量を検出するケースを示しているが、伸張前の映像から移動量を検出するようにしてもよい。
【００３５】
また、上記説明では、液晶シャッタ付きメガネにより立体映像を提供するケースについて説明したが、本発明はこれに限定されるものではない。例えば、液晶パネルにマイクロレンズを貼り付けて立体映像を提供する方式、又は偏光メガネを用いて立体映像を提供する方式にも適用することができる。
【００３６】
以上により、本実施形態のデジタル放送対応テレビは、立体放送から検出された立体度に基づきメニュー等の表示情報の立体度を適切に定め、立体放送の映像とともに表示情報を立体表示することができる。これにより、視聴者は、違和感無く、立体放送の映像と立体表示情報との重畳映像を見ることができる。また、デジタル放送対応テレビは、表示情報の立体度を高く設定することにより、立体放送の映像よりもさらに前面に表示情報を立体表示（ポップアップ表示）することもできる。
【００３７】
また、このデジタル放送対応テレビは、立体放送から検出された立体度に基づきメニュー等の表示情報の立体度を適切に定め、立体放送の映像とともに表示情報を立体表示するため、様々な立体度の立体放送に対応することができる。
【００３８】
さらに、このデジタル放送対応テレビは、立体放送を２画面表示することもできる。つまり、メイン制御モジュール４は、２画面表示を制御することができる。このとき、移動量検出処理モジュール４１が、２画面表示の対象となる各画面用の立体映像の移動量を検出し、メニュー位置算出処理モジュール４２が、各画面用の立体映像の移動量に基づき表示情報の立体度を設定することができる。例えば、メニュー位置算出処理モジュール４２は、各画面用の立体映像よりもさらに前面に表示情報を立体表示するように、表示情報の立体度を高い値に設定する。これにより、各画面よりもさらに前面に表示情報を立体表示することができる。
【００３９】
さらに、このデジタル放送対応テレビは、立体放送を枠付き２画面表示することもできる。つまり、メイン制御モジュール４は、枠付き２画面表示を制御することができる。このとき、移動量検出処理モジュール４１が、２画面表示の対象となる各画面用の立体映像の移動量を検出し、メニュー位置算出処理モジュール４２が、各画面用の立体映像の移動量に基づき各画面表示枠の立体度を設定することができる。例えば、メニュー位置算出処理モジュール４２が、一方の画面表示枠の立体度を高く設定し、他方の画面表示枠の立体度を低く設定することにより、一方の画面を前方へ押し出し表示し、他方の画面を後方へ押し下げ表示することができる。
【００４０】
なお、上記したモジュールとは、ハードウェアで実現するものであっても良いし、ＣＰＵ等を使ってソフトウェアで実現するものであってもよい。
【００４１】
なお、本願発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
【図面の簡単な説明】
【００４２】
【図１】本発明の一実施形態に係るデジタル放送対応テレビ（立体情報出力装置）の概略構成を示す図である。
【図２】デジタル放送対応テレビのメイン制御モジュールによる立体映像処理を説明するための図である。
【図３】字幕又はテロップ等の文字情報を利用した立体映像処理の一例を示すフローチャートである。
【図４】立体映像表示の一例を示す図である。
【符号の説明】
【００４３】
１…アンテナ端子、２…地上デジタルチューナ、３…ＢＳデジタルチューナ、４…メイン制御モジュール、５…パネル駆動モジュール、６…液晶パネル、７…スピーカ、８…液晶メガネ制御モジュール、９…赤外線発光器、１０…リモートコントローラ制御モジュール、１１…赤外線受光器、１２…ＲＡＭ、１３…ＦＬＡＳＨ ＲＯＭ、４０…立体映像処理モジュール、４１…移動量検出処理モジュール、４２…メニュー位置算出処理モジュール、４３…左目用メニュー描画処理モジュール、４４…左目用メニュー描画処理モジュール
【図１】
2010130495.tif 000003
【図２】
2010130495.tif 000004
【図３】
2010130495.tif 000005
【図４】
2010130495.tif 000006
【手続補正書】
【提出日】平成22年2月8日(2010.2.8)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
立体映像の立体度を検出する検出手段と、
前記立体度に基づき表示情報から立体表示情報を生成する生成手段と、
前記立体表示情報を出力する出力手段と、
を備え、
前記検出手段は、MPEGエンコード時の移動ベクトル検出処理を利用し、立体映像に含まれた右目用映像と左目用映像の変位量を検出し、
前記生成手段は、前記変位量に基づき前記表示情報から前記立体表示情報を生成する、
ことを特徴とする立体情報出力装置。
【請求項２】
前記検出手段は、立体放送により提供される前記立体映像に含まれた右目用文字情報と左目用文字情報から変位量を検出することを特徴とする請求項１に記載の立体情報出力装置。
【請求項３】
前記検出手段は、前記右目用文字情報と前記左目用文字情報から前記変位量を検出することができない場合に、立体放送により提供される前記立体映像に含まれた右目用映像と左目用映像から前記変位量を検出することを特徴とする請求項２に記載の立体情報出力装置。
【請求項４】
前記生成手段は、前記変位量に基づき前記表示情報から右目用表示情報と左目用表示情報を生成することを特徴とする請求項１に記載の立体情報出力装置。
【請求項５】
前記出力手段は、前記右目用映像と前記左目用映像、及び前記右目用表示情報と前記左目用表示情報を重畳して出力することを特徴とする請求項４に記載の立体情報出力装置。
【請求項６】
前記生成手段は、前記変位量に基づきメニューに関する情報を表示するための前記表示情報から前記立体表示情報を生成することを特徴とする請求項１に記載の立体情報出力装置。
【請求項７】
前記生成手段は、前記立体映像の立体度よりも高い立体度で前記立体表示情報を生成することを特徴とする請求項１に記載の立体情報出力装置。
【請求項８】
立体映像の立体度を検出し、前記立体度に基づき表示情報から立体表示情報を生成し、前記立体表示情報を出力する立体情報出力方法であって、
MPEGエンコード時の移動ベクトル検出処理を利用し、立体映像に含まれた右目用映像と左目用映像の変位量を検出し、
前記変位量に基づき前記表示情報から前記立体表示情報を生成する、
ことを特徴とする立体情報出力方法。
【請求項９】
立体放送に含まれた右目用映像と左目用映像から前記変位量を検出することを特徴とする請求項８に記載の立体情報出力方法。