(57)【要約】【課題】  VODサーバや映像再生装置側でメニューなどのOSD（On-Screen Display）表示が付加または重畳された３Ｄ映像が入力された場合、そのまま立体表示を行うとＯＳＤ表示が破綻し、ユーザにとって見難い表示となってしまう場合がある。【解決手段】  映像を入力する映像入力部と、前記映像入力部に入力された３Ｄ映像信号の種類を識別し、前記３Ｄ映像信号に重畳された重畳表示情報を検出し、識別した前記３Ｄ映像信号の種類に応じて、前記３Ｄ映像信号と前記検出した重畳表示情報とを再構成した３Ｄ映像信号を生成する信号処理部と、前記信号処理部で再構成された３Ｄ映像を立体表示する表示部とを備えるように構成する。【選択図】図１
2012222373.tif 000002
【特許請求の範囲】
【請求項１】
映像を入力する映像入力部と、
前記映像入力部に入力された３Ｄ映像信号の種類を識別し、前記３Ｄ映像信号に重畳された重畳表示情報を検出し、識別した前記３Ｄ映像信号の種類に応じて、前記３Ｄ映像信号と前記検出した重畳表示情報とを再構成した３Ｄ映像信号を生成する信号処理部と、
前記信号処理部で再構成された３Ｄ映像を立体表示する表示部とを備えることを特徴とする立体映像表示装置。
【請求項２】
請求項１に記載の立体映像表示装置であって、
前記信号処理部は、検出した重畳表示情報が３Ｄ映像信号画面に占める割合に応じて、前記表示部において立体表示を行うか否かを切換える処理を行うことを特徴とする立体映像表示装置。
【請求項３】
請求項１または請求項２に記載の立体映像表示装置であって、
前記信号処理部は、検出した重畳表示情報が映像画面に占める割合が所定値より大きい場合には、前記表示部において立体表示を行わない処理を行うことを特徴とする立体映像表示装置。
【請求項４】
請求項１乃至請求項３に記載の立体映像表示装置であって、
前記信号処理部は、検出した重畳表示情報が映像画面に占める割合が所定値より大きい場合には、３Ｄ表示を行わない旨を示すメッセージを表示する処理を行うことを特徴とする立体映像表示装置。
【請求項５】
請求項１乃至請求項４に記載の立体映像表示装置であって、
前記信号処理部は、前記３Ｄ映像信号の再構成において、３Ｄ映像信号のうち検出した重畳表示情報の部分を所定の画像で塗りつぶすことを特徴とする立体映像表示装置。
【請求項６】
請求項１乃至請求項４に記載の立体映像表示装置であって、
一画面に左視点の映像および右視点の映像の両者が含まれる３Ｄ映像信号が入力され、
前記信号処理部が、前記３Ｄ映像信号に含まれる左視点の映像または右視点の映像の一方の映像内のみに前記重畳表示情報を検出した場合には、前記３Ｄ映像信号の再構成において、他方の映像内に検出した前記重畳表示情報を重畳する処理を行うことを特徴とする立体映像表示装置。
【請求項７】
請求項１乃至請求項６に記載の立体映像表示装置であって、
前記信号処理部は、入力映像のライン単位での輝度分布に応じて前記重畳表示情報の検出を行うことを特徴とする立体映像表示装置。
【請求項８】
映像を入力する入力ステップと、
前記映像入力ステップで入力された３Ｄ映像信号の種類を識別し、前記３Ｄ映像信号に重畳された重畳表示情報を検出し、識別した前記３Ｄ映像信号の種類に応じて、前記３Ｄ映像信号と前記検出した重畳表示情報とを再構成した３Ｄ映像信号を生成する信号処理ステップとを備えることを特徴とする立体映像信号処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体映像表示技術及び立体映像信号処理技術に関する。
【背景技術】
【０００２】
ネットワークを介したVOD（Video On Demand）サービスや、放送番組をHDD(Hard Disk Drive)に保存して再生する再生装置や、ディスクに記録されたコンテンツを再生する映像プレーヤなどの映像再生装置のメニュー表示は、映像再生装置で作成したメニュー画像を、再生している映像に埋め込んだ映像を作成し、とHDMIなどのI/Fを介して、表示装置に伝送して表示している場合がある。この場合、２次元の映像（２D）と３次元の立体映像（３Ｄ）のコンテンツが切替わる際に、メニュー表示を切替えないとユーザにとって使い勝手が低下する場合がある。
【０００３】
特許文献１では、立体映像時の左右画像に表示するメニューに関して、立体映像の立体度を検出して、立体度に基づきメニューの表示情報を生成することが記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−１３０４９５
【発明の概要】
【発明が解決しようとする課題】
【０００５】
表示をさせようとしている映像が左目用(Ｌ)、右目用(Ｒ)の映像を１画面の中の左右に配置したＳｉｄｅ−Ｂｙ−Ｓｉｄｅ（ＳＢＳ）方式や、上下に配置したＴｏｐ＆Ｂｏｔｔｏｍ（ＴＡＢ）方式などの３Ｄ映像だった場合に、VODサービスや映像再生装置側で付加するメニューなどの付加情報を、３Ｄ表示する場合に付加情報の切替えをしないと、ユーザにとって見難いメニュー表示となってしまう場合がある。
【０００６】
例えば、再生装置において再生されるコンテンツが、２Ｄ映像からＳＢＳの３Ｄ映像に切替わるような場合を想定すると、コンテンツが２Ｄから３Ｄに切替り、ユーザがそれを認識して、表示装置を３Ｄ設定に切替えた場合に、再生装置側のメニュー表示が２Ｄのままであると、２Ｄメニュー表示が強制的にＳＢＳ方式の３Ｄ表示がなされ、メニューが半分で切断されて、全画面に拡大されてしまう可能性があり、ユーザが認識困難なメニュー表示になってしまう。
【０００７】
しかし、上記特許文献１に開示される技術は、３Ｄ表示時のメニュー表示の立体感表現に関するものであり、３Ｄ表示時のメニューなどのOSD（On-Screen Display）表示の破綻を無くす技術に関するものではなく、上記の様な課題を解決する技術に関しては開示がない。
【０００８】
本発明は、上記課題を鑑みて考えたものであり、３Ｄ表示時のメニュー表示の破綻を低減し、ユーザの使い勝手向上させる技術を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するためには、映像を入力する映像入力部と、前記映像入力部に入力された３Ｄ映像信号の種類を識別し、前記３Ｄ映像信号に重畳された重畳表示情報を検出し、識別した前記３Ｄ映像信号の種類に応じて、前記３Ｄ映像信号と前記検出した重畳表示情報とを再構成した３Ｄ映像信号を生成する信号処理部と、前記信号処理部で再構成された３Ｄ映像を立体表示する表示部とを備えるように構成すればよい。
【発明の効果】
【００１０】
本発明によれば、３Ｄ表示時のメニュー表示の破綻を低減し、ユーザの使い勝手を向上させる効果をもたらす。
【図面の簡単な説明】
【００１１】
【図１】本発明の一実施形態である立体表示装置の構成の一例を示すブロック図である。
【図２】本発明の一実施形態である立体表示装置の３Ｄ表示時に発生する課題の例である。
【図３】本発明の一実施形態である立体表示装置の３Ｄ表示動作シーケンスの例である。
【図４】本発明の一実施形態である立体表示装置のOSD部分抽出処理の動作シーケンスの例である。
【図５】本発明の一実施形態である立体表示装置のOSD部分抽出処理（ＳＢＳ）の動作例である。
【図６】本発明の一実施形態である立体表示装置の片側寄りのOSD部分抽出処理（ＳＢＳ）の動作例である。
【図７】本発明の一実施形態である立体表示装置のOSD部分抽出処理（ＴＡＢ）の動作例である。
【図８】本発明の一実施形態である立体表示装置のOSD部分抽出処理でＯＳＤ部分占有率が大きい場合の表示例である。
【図９】本発明の一実施形態である立体表示装置の３Ｄ表示用映像作成（ＳＢＳ）方法の例である。
【図１０】本発明の一実施形態である立体表示装置の３Ｄ表示用映像作成（ＯＳＤが片側寄りのＳＢＳ）方法の例である。
【図１１】本発明の一実施形態である立体表示装置の３Ｄ表示用映像作成（ＴＡＢ）方法の例である。
【図１２】本発明の一実施形態である立体表示装置の映像部分の切り出し処理の例である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施形態を、図面を用いて以下に説明する。
【００１３】
以下、本発明の実施の形態を、図１〜１１を参照して説明する。
【００１４】
図１は、本発明の実施形態である立体表示装置の構成の一例を示すブロック図である。図１において、映像入力I／F１００は、２Ｄまたは３Ｄの映像を入力する。光ディスクメディアの映像をHDMI（High Definition Multimedia Interface）による入力、HDD(Hard Disk Drive)やメモリに保存された映像をUSBなどで入力、ネットワークを介してVODサービスの映像を入力することができる。入力映像としては、２Ｄ映像のほかに、例えば、左目用(Ｌ)、右目用(Ｒ)の映像を１画面の中の左右に配置したＳｉｄｅ−Ｂｙ−Ｓｉｄｅ（ＳＢＳ）方式や、左目用(Ｌ)、右目用(Ｒ)の映像を１画面の中の上下に配置したＴｏｐ＆Ｂｏｔｔｏｍ（ＴＡＢ）方式の３Ｄ映像などが入力される。映像デコーダ回路１０１は、映像入力I／Fから入力された映像信号をデコードする。信号処理回路１０２は、３Ｄ映像信号処理をする３Ｄ信号処理部１０３を備える。入力された３Ｄ映像に関し、メニューなどの映像情報に付加されたOSD（On-Screen Display）表示を抽出する処理であるOSD抽出処理１０６、抽出したOSDが破綻しないように再構成してオーバレイ処理して、フレームメモリ１０５を利用して、ＳＢＳ方式やＴＡＢ方式の映像中の画像について、横または縦に圧縮された画像を１画面の大きさに拡大し、左目用(Ｌ)、右目用(Ｒ)の映像を作成する３Ｄ信号処理を行う。２Ｄ/３Ｄ表示処理部１０７は、２D表示か３Ｄ表示かどちらが選択されているかに従って処理を切替える。例えば、２D表示時には表示部の表示タイミングに合わせてフレームメモリ１０５内の映像を出力する。３Ｄ表示時には左目用映像L、右目用映像Rを切替えて出力し、その切替えタイミングをシャッタ眼鏡に伝送する赤外線信号処理などを行う。表示部が偏光眼鏡方式の３Ｄ表示部の場合には、表示部に設置された視差バリアに合わせて、L、Rの映像が表示されるように表示画素を調整する処理も行う。表示部１０８は液晶デバイスやOLED（Organic light-emitting diode）、プラズマなどを利用した表示部であり、信号処理回路１０２で作成したL、R映像を2D/３Ｄ表示処理部１０７で調整されたタイミングで左右を切替えて表示するなどの表示処理を行う。なお、当該表示部に替えて、またはこれに加えて、2D/３Ｄ表示処理部１０７の出力を外部機器へ出力する出力部を備えても良い。この場合、当該装置は立体映像出力装置となる。
【００１５】
本構成により、３Ｄ表示状態装置に２DのOSD表示が付加された３Ｄ映像（SBS/TAB）が入力された場合に、２DのOSD表示を３Ｄ表示した際の破綻を低減することができる。また、２Dで付加されたメニューを３Ｄ表示用に変換してL、R映像を作成でき、２ＤのOSD表示を３Ｄ表示で表現できる。
【００１６】
これにより、メニュー表示の見易さを向上し、ユーザの使い勝手向上させることができる。
【００１７】
３Ｄ表示方式としては、シャッタ眼鏡方式、偏光眼鏡を利用した偏光方式、波長分離フィルタ眼鏡を利用した波長分離方式などの眼鏡方式や、レンチキュラや視差バリア方式、インテグラル方式、ホログラフィーなど様々に適用できる。
【００１８】
図２は、従来の立体表示装置の３Ｄ表示時に発生する課題の例である。図２において、２００はVODで再生されるコンテンツや光ディスクやHDDに保存されたコンテンツの映像信号を示している。横軸が時間であり、最初に２Ｄ映像信号が生成され、再生映像信号開始から時間経過０５：００後に３Ｄ映像信号が生成された場合を示している。表示画面２０１〜２０４は、ユーザがコンテンツのタイトルや再生時間表示などのメニューを表示させながら再生映像信号２００を視聴している場合である。
【００１９】
VODではユーザの操作がネットワークを介して、VODサーバ側でコンテンツの再生処理が行われる。その際の操作メニューなどのOSD表示などもサーバ側で映像に付加または重畳される場合がある。
【００２０】
光メディア再生装置などを入力した場合は、再生装置でOSD表示が映像に付加または重畳された状態で表示装置に送られてくる。
【００２１】
表示画面２０１は、OSDが付加された２Ｄの映像を表示装置の２Ｄ表示設定で見ている状態であり、問題なく映像を表示できる。表示画面２０２では、３Ｄ（ＳＢＳ／ＴＡＢ）の映像を表示装置の３Ｄ表示設定で見ている状態であり、ＳＢＳ／ＴＡＢの映像が２Ｄで表示されている状態である。あるタイミングにおいて、ユーザが表示装置を３Ｄ表示設定に切替えた場合に、Ｌ、Ｒ映像は拡大され１画面表示となり、３Ｄ表示装置により左右それぞれの目に映ることになる。ここで、VODサーバや再生装置側で、映像を表示している表示装置が３Ｄ表示設定に切替わったことを検知できていないので、映像出力先OSDが付加された映像は、強制的に半分に分離され拡大処理が行われ、OSD表示に破綻してしまう可能性がある。本発明は、本課題のような表示装置側で強制的に行われる３Ｄ表示処理において、OSD表示の破綻を防ぐものである。
【００２２】
図３は、本発明の実施形態である立体表示装置の３Ｄ表示動作シーケンスの例である。
【００２３】
Ｓ３００は、３Ｄ信号処理１０３において入力コンテンツが２Ｄ映像信号のフォーマットか、３Ｄ映像信号のフォーマットかを検知する処理である。２Ｄか３Ｄかのフォーマットを検知する方法としては、ＭＰＥＧ−２ Ｖｉｄｅｏ規格（ＭＰＥＧ４−ＡＶＣ規格など）に規定されたピクチャレイヤのuser_dataなどに含まれる２Ｄ／３Ｄ識別信号を参照することにより判別するなどの方法が考えられる。また、映像信号の最終1ラインなどに特殊な信号のデータを付加して３Ｄ映像信号であることを識別しても良い。当該処理は、例えば、図１の信号処理回路１０２で行う。
【００２４】
次に、Ｓ３０１にて、Ｓ３００でフォーマットを検知した結果が、３Ｄ映像信号かどうかを判定する。３Ｄ映像信号ではなかった場合には、２Ｄ映像信号として判断し、メニューも映像も２Ｄ映像処理を行う（Ｓ３０２）。Ｓ３０１において３Ｄ映像信号だった場合には（Yes）、Ｓ３０４においてOSD部分抽出処理を行う。具体的には、図５〜７に示すようにラインメモリを利用して、L、Rの映像の輝度や色の差分のヒストグラムを算出する。さらに、算出したヒストグラムパターンから、そのラインにOSDが含まれるかどうかを調べてOSD部分を抽出する。Ｓ３０４において算出した映像に対してOSDが占める領域の割合が所定値よりも小さい場合には、図９〜図１１に示すOSD破綻を防ぐ処理をした３Ｄ表示用L、R映像を作成する。作成した３Ｄ表示用L、R映像については、２D／３Ｄ表示処理１０７、表示部１０８を介して３Ｄ映像表示を行う（Ｓ３０７）。Ｓ３０５において、OSD占有率が所定閾値よりも大きい場合には、ほぼ２DのOSD表示をしている状況であるので、その映像を強制的に半分に分離してしまうと３Ｄ映像を作成できないため、Ｓ３０８において、現在３Ｄ表示に切替えると映像が破綻する可能性があるため、OSDを消してから再度３Ｄ表示にするように促す旨のメッセージを表示する。その場合には、３Ｄ表示設定に移行しない処理を行う。それでもＳ３０９において３Ｄ表示設定がなされた場合には、強制的に３Ｄ表示用のL、R映像の作成を行う。Ｓ３０９において、強制的に３Ｄ表示設定がなされない場合には、Ｓ３０４のOSD部分の抽出処理に戻り、OSD占有率を確認するシーケンスＳ３０５に入り、OSD占有率の値に基づいてOSDが消されたり、小さくなったのを検知してから、Ｓ３０６で３Ｄ表示用L、R映像を作成し、Ｓ３０７で３Ｄ映像表示を行う。
【００２５】
これにより、OSDが占める領域の割合が低い場合には、OSDの破綻を起こさずに、映像を３Ｄ表示できる。また、OSDが占める領域が大きい場合には、OSD破綻が発生するので、３Ｄ表示をせずに、メッセージや音声などでユーザに破綻が発生する可能性を通知することができる。また、通知を受けたユーザの操作などにより、OSD表示が消されてから自動的に３Ｄ表示をすることができる。
【００２６】
図４は、本発明の実施形態である立体表示装置のOSD部分抽出処理の動作シーケンスの例である。本処理は、例えば図３のＳ３０４で行われる。Ｓ４０１において、３Ｄ映像信号がＳＢＳかＴＡＢかを判定する。これは、Ｓ３００の３Ｄ検知処理において、ＭＰＥＧ４−ＡＶＣ規格に含まれる２Ｄ／３Ｄ識別信号を参照することにより判別するなどの方法が考えられる。映像信号にSBSかTABかを判別する特殊な信号のデータにより識別しても良い。SBSの場合には、１ラインメモリ内に、左目用映像がラインメモリ先頭から左半分（１〜H_Length／２）に含まれ、右目用映像が左半分（（H_Length／２）＋１ 〜 H_Length）に含まれる（H_Lengthはラインメモリ内の映像信号の幅）。左半分と右半分の輝度や色情報の差分を算出し（Ｓ４０２）、差分パターンからOSD部分（位置、サイズ）を判定する。Ｓ４０１において映像信号がＴＡＢの場合には、２つ分のラインメモリを利用することになるが、左目用映像が上半分（１〜V_Length／２）に含まれ、右目用映像が下半分（（V_Length／２）＋１ 〜 V_Length）に含まれる（V_Lengthは映像信号の縦幅）。ｖ行目（１≦ｖ≦V_Length／２）のラインメモリと対応する（V_Length／２）＋ｖ行目のラインメモリの差分を算出し（Ｓ４０６）、差分パターンからOSD部分（位置、サイズ）を判定する。例えば、Full-HDのSBS/TABであれば、H_Length＝1920、V_Length＝1080である。OSD部分を抽出し、図９や図１０で説明するOSD部分の切出し、塗りつぶしなどをするために、OSD部分の位置やサイズ情報を記録しておく（Ｓ４０４）。Ｓ４０４の情報からOSD部分の領域の面積を算出し、映像の面積（H_Length×V_Lengh／２）の中のどのくらいの面積を占めるのかの、占有率を算出する（Ｓ４０５）。これは、図３のＳ３０５での判定の結果、OSDの占める割合が高い場合には、３Ｄ表示時にOSDの破綻が生じる場合が多いので、OSDの占有率が大きいSBS/TABを３Ｄ変換させないための仕組みに利用する。これについては、図３で説明したとおりである。
【００２７】
また、Ｓ４０２、Ｓ４０６での差分の算出には様々な方法が適用可能である。例えば、LとRで対応する１画素単位で、輝度の差分をとる方法である。SBSの場合は、１ラインメモリのｈ番目（１≦ｈ≦H_Length／２）の画素と、同ラインメモリの（H_Length／２）＋ｈ番目の画素の輝度差分を算出する。しかし、SBSではL、Rの映像は横方向にズレているため、ラインメモリのｈ番目の画素と、（H_Length／２）＋ｈ±αの所定範囲の画素を比較して、輝度差が最も少ない場合の差分を採用する方法も考えられる。これにより、映像上同じ位置を指す画素の比較ができ、OSDが無い場所では、殆ど輝度差は無くなり、よりOSD抽出の精度を高めることができる。
【００２８】
TABの場合は、ｖ行目のラインメモリのｈｖ番目（１≦ｈｖ≦H_Length）の画素と、（V_Length／２）＋ｖ行目のラインメモリのｈｖ番目（１≦ｈｖ≦H_Length）の画素の輝度差分を算出する。この場合も同様に、ｖ行目のラインメモリのｈｖ番目の画素と、（V_Length／２）＋ｖ行目のラインメモリｈｖ±α番目の範囲の画素を比較して、その輝度差が最も少ない場合の差分を採用することにより、OSD抽出の精度を高めることができる。
【００２９】
この様なＬ、Ｒの差分を算出し、差分が大きい場合は、LとRのズレが大きい（立体感を強く表現している部分）であるか、OSDが含まれる場合である。立体感を表現する場合の差分の経験的な限界値を閾値として、それ以上の差分がある場合にOSDと判断する方法が考えられる。また、ＬとＲの画素の輝度差分のヒストグラム分布のパターンからＯＳＤと判断する方法も考えられる。
【００３０】
以上説明した処理により、ＳＢＳ映像やＴＡＢ映像から重畳されたＯＳＤ部分（位置、サイズ）を抽出することができる。
【００３１】
図５は、本発明の実施形態である立体表示装置のOSD部分抽出処理（ＳＢＳ）の動作例である。本処理は例えば、図４のＳ４０２で行われる。映像５００はＯＳＤを含むＳＢＳの映像である。１ラインメモリ毎に輝度情報を取得し、横軸がラインメモリの番地、縦軸を輝度値としてグラフ化したものがグラフ５０１、５０２である。ラインメモリデータ５０３に示す様に、ラインメモリの右半分と左半分で対応する１画素とその周辺画素を比較し、その差分が最小の場合を採用し、その度数をグラフ化したものがグラフ５０４（グラフ５０１に対応する）、グラフ５０５（グラフ５０２に対応する）である。グラフ５０２に示す様に、ラインメモリ上のＬ、Ｒの映像が含まれる場合には、立体感表現のために映像上で一致する画素のズレのせいで、輝度差の範囲はある程度あるが、ヒストグラムは輝度差が無い方に寄っていることがわかる（グラフ５０５）。グラフ５０１の箇所の様に、ＯＳＤ以外の部分では輝度差が無い方に寄るが、ＯＳＤを含む部分はＬ、Ｒの輝度差が大きい部分となるため、輝度差が大きい部分にもヒストグラムの高い箇所が現れる。このようなヒストグラムパターンの違いからそのラインメモリがＯＳＤを含むのかどうかを判定できる。ＳＢＳにおいては、ＯＳＤの重畳によって生じる映像のズレは、L、Rの映像の横方向のズレのみの検出可能なので本方式が有効である。逆に、ＳＢＳであるにも関わらず、すべての行で輝度差分が大きい場合には、ＯＳＤの重畳以外の要因に起因する縦ズレが発生している可能性もあるので、立体視の安全性も考慮して、３Ｄ表示をさせないことが望ましい。つまり、本方式の横ズレの発生の検知を用いて縦ズレ発生の検知も可能であるできる。
【００３２】
また、ＯＳＤを含むラインメモリの行数を記録することで、ＯＳＤを含む箇所を特定できる（部分映像５０６）。ＯＳＤを含む箇所を選択する場合に、ＯＳＤの端が破綻しないように、数ラインおおめにＯＳＤとしてを切出すのが良い。
【００３３】
さらに、ヒストグラムで差分が大きい画素の箇所（ラインメモリの番地）を記録しておくと、ＯＳＤのみの箇所を特定できる（部分映像５０７）。この場合もＯＳＤの周囲数画素分おおめにＯＳＤとして切出すのが良い。
【００３４】
以上説明した処理により、ＳＢＳ映像に重畳されたＯＳＤ部分（位置、サイズ）を抽出することができる。
【００３５】
図６は、OSDが片側の映像にのみ含まれているＳＢＳ映像が入力された場合の本実施例の立体表示装置のOSD部分抽出処理（ＳＢＳ）の動作例である。図５は、ＯＳＤがＬ、Ｒ映像の両方に被って合成された映像の例であったが、図６の様にＯＳＤがＬ側かＲ側かのどちらかに寄って頂上される場合もある。図６の例ではＬ側に寄っており、映像部分もＯＳＤで上書きされている。この際、ＯＳＤの部分はＬ、Ｒで輝度のヒストグラムの差分は大きくなるので、輝度差分ヒストグラム６０２の横軸の右側（ＬとＲの輝度差分が大きい）が高い分布になったヒストグラムとなる。
【００３６】
この様な場合に、３Ｄ表示をしようとすると、左目にはＯＳＤが見え、右目にはＯＳＤがなく、ＯＳＤの部分がクロストークの様に見えてしまう。ここで、本実施例の立体表示装置では、ＯＳＤを抽出してＲ側に抽出したＯＳＤを貼り付け、Ｌ、Ｒを拡大して、左右交互に表示する処理を行う。このようなＯＳＤの再構成および再重畳により、ＯＳＤ部分も３Ｄ表示可能となる（図１０）。
【００３７】
図７は、ＴＡＢ映像が入力された場合の、本実施例の立体表示装置のOSD部分抽出処理（ＴＡＢ）の動作例である。本処理は例えば、図４のＳ４０６で行われる処理である。映像７００はＯＳＤを含むＴＡＢの映像である。ｖ行目のラインメモリと、（V_Length／２）＋ｖ行目のラインメモリの２つのラインメモリを利用し、ｖ行目のラインメモリ（ラインメモリデータ７０３）の先頭からｈｖ番目の画素と、（V_Length／２）＋ｖ行目のラインメモリ（ラインメモリデータ７０４）の先頭からｈｖ番目近辺（先頭からｈｖ−α番目〜ｈｖ＋α番目）の画素をそれぞれ比較した結果、その比較した中で輝度差が最も少ない場合の差分で輝度差分をヒストグラムにしたのがグラフ７０５である。これは、ＬとＲで左右の視差がずれているので、ｖ行目の先頭からｈｖ番目と（V_Length／２）＋ｖ行目の先頭からｈｖ番目の画素は映像としてずれている可能性が高いので、±αの範囲で輝度差分が最も小さいものを同じ映像の部分とする処理である。これにより、ＬとＲの同じ映像部分を比較して、その差分が大きい場合には、そこにＯＳＤがあるものと判断できる。つまり、ＯＳＤが重ならない部分は立体表現の分（視差量）のズレの部分のヒストグラムは低く、ＯＳＤが重なる部分はほぼ一致せず大きな差分の度数が大きいので、差分が大きい範囲に高いヒストグラム度数が現れる。このようなヒストグラムパターンを検出することにより、重畳されたＯＳＤ部分を抽出できる。
【００３８】
図８は、ＯＳＤ部分占有率が大きい映像が入力された場合本実施例の立体表示装置の表示例である。これは、図３のＳ３０８、Ｓ３０９の処理の具体例である。例えば、ＶＯＤサーバ側で、ユーザ操作画面を大きく表示させる場合や、再生装置で録画した番組の情報を表示させるような場合には、ＯＳＤが画面全体に占める割合が高くなる場合がある。このような場合には、３Ｄ表示用の映像部分が少なく、このような部分を３Ｄ表示させても立体感を感じさせるのは困難な可能性がある。よって、このような場合には、３Ｄ表示に切替えても、３Ｄ表示をさせないという処理をした方が良いと考えられる。この場合には、３Ｄ表示に切替えたとしても、３Ｄ表示をしても立体感を体感できない旨のメッセージまたはＯＳＤを消してから再度３Ｄ表示にするように促す旨のメッセージを表示する（図３のＳ３０８）。これにより、このようなＯＳＤが重畳されたままでは３Ｄ表示に切替えさせないことで、ＯＳＤ表示の破綻を防ぐことができる。
【００３９】
図９は、本発明の実施形態である立体表示装置の３Ｄ表示用映像作成（ＳＢＳ）方法の一例である。本処理は例えば、図３のＳ３０６で行われる。３Ｄ表示時に図２で説明した様なＯＳＤ表示の破綻を防ぐために、以下の処理を行う。まず、ＯＳＤ抽出処理をした後、ＯＳＤ部分またはＯＳＤを含むラインを単色画像など所定の画像でなどで塗りつぶす処理を施す。この処理をおこなった映像が映像９００（ＯＳＤを含むラインを塗りつぶす場合）または映像９０１（ＯＳＤ部分を塗りつぶす場合）である。さらに左半分、右半分を切り出して、水平方向に２倍に拡大する処理を行う。処理後の映像がそれぞれ映像９０２、映像９０３である。単色または単輝度などの単調な形式で塗りつぶすことで、左半分、右半分を切り出して、水平方向に２倍に拡大しても、塗りつぶした部分の映像は破綻が生じないメリットがある。このように、３Ｄ表示用のＬ映像９０２、Ｒ映像９０３の塗りつぶした部分に、図５で切り出したＯＳＤ画像５０６またはＯＳＤ画像５０７をオーバレイ処理して張り付けた映像を作成する。これにより、図２で説明した画面の破綻を防ぐことが可能となる。
【００４０】
図１０は、本発明の実施形態である立体表示装置の３Ｄ表示用映像作成（ＯＳＤが片側寄りのＳＢＳ）方法の一例である。本処理は例えば、図３のＳ３０６で行われる。３Ｄ表示時のＯＳＤ表示の破綻を防ぐために、以下の処理を行う。まず、ＯＳＤ抽出処理をした後、ＯＳＤ部分を切出し、処理をＲ側の同じ位置に同じサイズでＯＳＤをオーバレイ処理して貼り付ける処理を行う。このＯＳＤの再構成処理および再重畳処理をおこなった映像が映像１０００である。さらに、左半分、右半分を切り出して、水平方向に２倍に拡大する処理を行う。処理後の映像がそれぞれ映像１００１、映像１００２である。Ｌ、Ｒの同じ位置にＯＳＤがあるため、３Ｄ表示した場合もＯＳＤが破綻しないメリットがある。
【００４１】
この場合、ＯＳＤを抽出できているので、ＯＳＤを拡大して、Ｌ側も現行のサイズよりも大きいサイズでオーバレイすることも可能である。この場合、拡大前のＯＳＤを拡大したＯＳＤで上書きできる。拡大後のＬ側のＯＳＤと同じサイズ、同じ位置でＲ側にもオーバレイ処理を施す。このようなＯＳＤの再構成及び再重畳により、３Ｄ表示時のＯＳＤのサイズを大きく表現できるメリットがある。
【００４２】
図１１は、本発明の実施形態である立体表示装置の３Ｄ表示用映像作成（ＴＡＢ）方法の一例である。３Ｄ表示時のＯＳＤ表示の破綻を防ぐために、以下の処理を行う。まず、ＯＳＤ抽出処理をした後、ＯＳＤ部分またはＯＳＤを含むラインを単色などで塗りつぶす処理を施す。この処理をおこなった映像が映像１１００（ＯＳＤを含むライン）、または映像１１０１（ＯＳＤ部分）である。さらに上半分、下半分を切り出して、垂直方向に２倍に拡大する処理を行う。処理後の映像がぞれぞれ映像１１０２、映像１１０３である。単色または単輝度などの単調な形式で塗りつぶすことで、上半分、下半分を切り出して、垂直方向に２倍に拡大しても、塗りつぶした部分の映像は破綻が生じないメリットがある。このように、３Ｄ表示用のＬ映像１１０２、Ｒ映像１１０３の塗りつぶした部分に、図７で切り出したＯＳＤ画像７０６またはＯＳＤ画像７０７をオーバレイ処理して張り付けた映像を作成する。これにより、画面の破綻を防ぐことが可能となる。
【００４３】
図１２は、本発明の実施形態である立体表示装置の映像部分の切り出し処理の一例である。図１２は、本実施形態に係る３Ｄ映像信号処理においてさらに処理負荷低減、高速化を行うのための変形例である。図９〜図１１の処理を行う場合に、入力映像信号のうちの全画面が表示用映像部分になっていない場合もある。例えば、１２００のように上下左右に黒帯があり、そこには表示用映像が含まれない。このような場合に、ＯＳＤ抽出処理や３Ｄ用Ｌ、Ｒ作成処理を全画面で行う必要はない。そのため、処理に必要な映像部分のみ切り出しを行い、処理範囲を限定することで、処理負荷低減、高速化が図れる。具体的な処理例としては、画面周辺部分のラインメモリで輝度値などを検知する。その結果、画面の上下や左右に同輝度が連続して続く場合には、そこは映像部分ではないと判定して、それ以外の部分を映像部分とする。本処理を３Ｄ映像信号処理１０２の処理前に行う構成とすることで、ＯＳＤ抽出処理、Ｌ、Ｒ切り出し、拡大処理などの処理範囲を小さくできるため、処理負荷低減、高速化が図れるメリットがある。
【００４４】
以上の実施例で説明した立体表示方法は、メガネ方式でも裸眼方式でも同様の処理が適用できる。また、映像表示装置や表示装置で動作するプログラムは、その装置内に実装してあっても良いし、記録媒体に記録して提供するようにしても良いし、ネットワークを介してダウンロードして提供するようにしても良い。これら配布形態を限定しないことで、様々な利用形態での提供が可能となり、利用ユーザを増やす効果がある。
【符号の説明】
【００４５】
１００    映像入力Ｉ／Ｆ
１０１    映像デコーダ回路
１０２    信号処理回路
１０３    ３Ｄ（ＳＢＳ／ＴＡＢ）信号処理部
１０４    ラインメモリ
１０５    フレームメモリ
１０６    ＯＳＤ抽出処理
１０７    ２Ｄ／３Ｄ表示処理部
１０８    表示部
２００    再生装置映像信号
２０１    ２Ｄ映像信号出力例
２０２    ３Ｄ映像信号出力例
２０３、２０４    ２０２出力時の表示装置での３Ｄ表示例
５００    ＳＢＳ ＯＳＤ表示例
５０１、５０２    １ラインメモリ内の輝度グラフ
５０３    ラインメモリ
５０４、５０５  ヒストグラム
５０６、５０７  メニュー切り出し画像
６００    ＳＢＳ ＯＳＤ表示例
６０１    １ラインメモリ内の輝度グラフ
６０２    ヒストグラム
６０３    ラインメモリ
６０４    メニュー切り出し画像
７００    ＴＡＢ ＯＳＤ表示例
７０１、７０２  １ラインメモリ内の輝度グラフ
７０３、７０４    ラインメモリ
７０５    ヒストグラム
７０６、７０７  メニュー切り出し画像
８００    ＳＢＳ ＯＳＤ表示例
８０１    ＴＡＢ ＯＳＤ表示例
９００、９０１    ＳＢＳ ＯＳＤ塗りつぶし例
９０２、９０３    ３Ｄ表示用画像
１０００  ＳＢＳ ＯＳＤ貼り付け例
１００１、１００２  ３Ｄ表示用画像
１１００、１１０１    ＴＡＢ ＯＳＤ塗りつぶし例
１１０２、１１０３    ３Ｄ表示用画像
１２００  表示装置
１２０１  映像部分
１２０２  ラインメモリ
１２０３  切り出し映像
１２０４  Ｌ画像
１２０５  Ｒ映像
【図１】
2012222373.tif 000003
【図２】
2012222373.tif 000004
【図３】
2012222373.tif 000005
【図４】
2012222373.tif 000006
【図５】
2012222373.tif 000007
【図６】
2012222373.tif 000008
【図７】
2012222373.tif 000009
【図８】
2012222373.tif 000010
【図９】
2012222373.tif 000011
【図１０】
2012222373.tif 000012
【図１１】
2012222373.tif 000013
【図１２】
2012222373.tif 000014