(57)【要約】【課題】サイドバイサイド方式の三次元映像と二次元映像が混在した放送を表示する際、三次元映像か否かを判定する回路規模が小さく、且つ高い信頼性を持った判定処理を行うことを可能にする。【解決手段】入力映像信号が三次元映像信号であるか二次元映像信号であるかを判定する三次元映像判定手段（１５１）と、入力映像信号が三次元映像であると判断された場合に、当該入力映像信号を左目用映像と右目用映像に分離し、分離した後の左目用映像と右目用映像を水平方向に画素を補間して、元の映像フレームの解像度に変換するデータ変換手段と、左目用映像と右目用映像を合成する映像合成手段（１４２）と、映像合成手段（１４２）から出力される合成映像を用いて立体映像の表示を行なう映像表示手段（１１３）とを備える。三次元映像検出手段（１５１）は、映像の左側半部と右側半部の相関性に基づいて、三次元映像であるか否かを判定する。【選択図】図１
2010068309.tif 000002
【特許請求の範囲】
【請求項１】
入力映像信号が三次元映像信号であるか二次元映像信号であるかを判定する三次元映像判定手段と、
前記入力映像信号が三次元映像であると判断された場合に、当該入力映像信号を左目用映像と右目用映像に分離し、分離した後の左目用映像と右目用映像を水平方向に画素を補間して、元の映像フレームの解像度に変換するデータ変換手段と、
前記左目用映像と右目用映像を合成する映像合成手段と、
前記映像合成手段から出力される合成映像を用いて立体映像の表示を行なう映像表示手段とを備える
ことを特徴とする映像表示装置。
【請求項２】
前記三次元映像検出手段は、映像の左側半部と右側半部の、互いに同一の位置にある画素同士の類似度を、複数の画素について集計することにより得られる映像の左側半部と右側半部との相関性に基づいて、三次元映像であるか否かを判定することを特徴とする請求項１に記載の映像表示装置。
【請求項３】
前記三次元映像判定手段は、前記相関性が所定値以上であるとの判断が所定のフレーム数以上続いたときに、三次元映像であると判定する
ことを特徴とする請求項２に記載の映像表示装置。
【請求項４】
前記三次元映像検出手段は、映像の左側半部及び右側半部の一方の、複数の部分領域を順に着目部分領域として選択し、前記左側半部及び右側半部の他方の、前記着目部分領域と同一の垂直方向位置にある複数の部分領域を順位参照画素として選択し、参照部分領域の前記着目部分領域に対する類似度のうちの最大のものを最大類似度として検出し、該最大類似度を、複数の着目部分領域について集計することにより得られる映像の左側半部と右側半部との相関性に基づいて、三次元映像であるか否かを判定することを特徴とする請求項１に記載の映像表示装置。
【請求項５】
前記三次元映像判定手段は、前記相関性が所定値以上であるとの判断が所定のフレーム数以上続いたときに、三次元映像であると判定する
ことを特徴とする請求項４に記載の映像表示装置。
【請求項６】
前記三次元映像検出手段は、入力映像に高周波数成分が所定量以上含まれていない場合に二次元映像であると判定することを特徴とする請求項１乃至５のいずれかに記載の映像表示装置。
【請求項７】
入力映像信号が三次元映像信号であるか二次元映像信号であるかを判定する三次元映像判定ステップと、
前記入力映像信号が三次元映像であると判断された場合に、当該入力映像信号を左目用映像と右目用映像に分離し、分離した後の左目用映像と右目用映像を水平方向に画素を補間して、元の映像フレームの解像度に変換するデータ変換ステップと、
前記左目用映像と右目用映像を合成する映像合成ステップと、
前記映像合成ステップから出力される合成映像を用いて立体映像の表示を行なう映像表示ステップとを備える
ことを特徴とする映像表示方法。
【請求項８】
前記三次元映像検出ステップは、映像の左側半部と右側半部の、互いに同一の位置にある画素同士の類似度を、複数の画素について集計することにより得られる映像の左側半部と右側半部との相関性に基づいて、三次元映像であるか否かを判定することを特徴とする請求項７に記載の映像表示方法。
【請求項９】
前記三次元映像判定ステップは、前記相関性が所定値以上であるとの判断が所定のフレーム数以上続いたときに、三次元映像であると判定する
ことを特徴とする請求項８に記載の映像表示方法。
【請求項１０】
前記三次元映像検出ステップは、映像の左側半部及び右側半部の一方の、複数の部分領域を順に着目部分領域として選択し、前記左側半部及び右側半部の他方の、前記着目部分領域と同一の垂直方向位置にある複数の部分領域を順位参照画素として選択し、参照部分領域の前記着目部分領域に対する類似度のうちの最大のものを最大類似度として検出し、該最大類似度を、複数の着目部分領域について集計することにより得られる映像の左側半部と右側半部との相関性に基づいて、三次元映像であるか否かを判定することを特徴とする請求項７に記載の映像表示方法。
【請求項１１】
前記三次元映像判定ステップは、前記相関性が所定値以上であるとの判断が所定のフレーム数以上続いたときに、三次元映像であると判定する
ことを特徴とする請求項１０に記載の映像表示方法。
【請求項１２】
前記三次元映像検出ステップは、入力映像に高周波数成分が所定量以上含まれていない場合に二次元映像であると判定することを特徴とする請求項７乃至１１のいずれかに記載の映像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像表示装置及び方法に関し、特に三次元映像の表示を行ない得る映像表示装置及び方法に関する。本発明は特に、三次元映像コンテンツと二次元映像コンテンツが混在した映像情報、例えば放送番組の映像情報を表示する技術に関するものである。
【背景技術】
【０００２】
近年、映像表示方法として、左右の目の視差を利用して作成した右目用の映像と左目用の映像を、それぞれ対応する目に個別に入射させるように構成して立体的な表示を行う三次元映像表示が実用化されている。ＢＳ放送では左目映像と右目映像とをそれぞれ水平方向に１／２サブサンプリングし、サンプリングした左目映像を画面左側に、サンプリングした右目映像を画面右側に位置させた三次元映像の記録フォーマットであるサイドバイサイド方式による三次元映像放送が開始された。当該サイドバイサイド方式で形成された三次元映像は、表示装置側で立体視が可能となるように、右目映像と左目映像が合成して表示される。
【０００３】
二次元映像と三次元映像が混在した放送番組を送信する際に、送信される映像ストリーム中に、当該映像ストリームが三次元映像であるか否かを示す映像特性情報とを多重化して記録する映像記録再生装置が開示されている（特許文献１参照）。特許文献１によれば、番組受信中に映像ストリーム中に多重化された映像特性情報に基づいて、表示装置の表示方式を三次元映像対応に設定するか否かを自動的に切替えることができる。
【０００４】
また二次元映像と三次元映像が混在した放送番組を受信する際に、画面上の動きが速い映像であっても、信号内容が二次元映像と三次元映像かを判別することができる映像信号種類判別装置が開示されている（特許文献２参照）。
【０００５】
【特許文献１】特開２００６−３５２８７６号公報
【特許文献２】特開平１１−６９３８４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１には、映像信号自体から三次元映像であるか否か判別する方法については、開示されていない。
【０００７】
特許文献２に開示されている映像信号種類判別処理装置は、入力映像がフィールド毎に左目映像と右目映像を交互に送信された場合には正常に三次元映像か否かを判別することができるが、サイドバイサイド方式で記録された三次元映像について本方式で判別することができないといった問題がある。また通常、入力映像の受信状態が突然悪くなる場合には異常な映像フレームが記録されることがあるが、そういった場合において三次元映像であると誤検出する可能性が高い。また全黒画面や全白画面のような入力映像であった場合について、三次元映像であるか二次元映像であるかを判別できないといった問題があった。
【課題を解決するための手段】
【０００８】
本発明の映像表示装置は、
入力映像信号が三次元映像信号であるか二次元映像信号であるかを判定する三次元映像判定手段と、
前記入力映像信号が三次元映像であると判断された場合に、当該入力映像信号を左目用映像と右目用映像に分離し、分離した後の左目用映像と右目用映像を水平方向に画素を補間して、元の映像フレームの解像度に変換するデータ変換手段と、
前記左目用映像と右目用映像を合成する映像合成手段と、
前記映像合成手段から出力される合成映像を用いて立体映像の表示を行なう映像表示手段とを備える
ことを特徴とする。
【発明の効果】
【０００９】
本発明によれば、サイドバイサイド方式の三次元映像と二次元映像が混在した番組を受信して表示する際に、小さな回路規模で三次元映像か否かを判別することができ、三次元映像の表示に要する機器のコストを抑えることができる。
【発明を実施するための最良の形態】
【００１０】
実施の形態１．
本発明の実施の形態１の映像表示装置は、サイドバイサイド方式の三次元映像と二次元映像とが混在する入力映像信号、例えば放送番組の入力映像信号を表示するものであり、三次元映像か否かを判定する回路の規模を小さく構成できるという効果を有する。
また三次元映像か否かを判定する際に、三次元映像が心身へ及ぼす影響度を検出しておき、該影響度が高い映像シーンを表示するに先立って、警告画面を表示したり、当該区間の立体度合いを緩和するなどの措置を講じることができる。
【００１１】
図１は本発明の実施の形態１の映像表示装置のシステム構成を示すブロック図である。図示の映像表示装置１００は、システム制御部１０１と、デコーダブロック１４０と、表示部１１３とを備える。
デコーダブロック１４０は、チューナー部１０３と、デジタル復調部１０４と、誤り訂正部１０５と、番組抽出部１０６と、ストリーム制御部１１０と、パケット分離部１４１と、デコーダ部１１１と、映像合成部１４２と、デジタルインターフェース部１１２と、映像解析部１５３とを備える。
ストリーム制御部１１０は、ストリームバッファ１２１と、ストリーム変換部１２２とを備える。
【００１２】
システム制御部１０１は、映像表示装置１００全体を統合制御するものであり、操作部１３０からの信号を受けることができるように構成されている。
システム制御部１０１はまた、三次元映像判定部１５１を備える。
【００１３】
操作部１３０を通じて、ユーザーなどから映像表示装置１００に対してユーザー操作の要求を行う。操作部１３０は、例えば、映像表示装置１００のフロントパネルに配置されている操作パネルやリモコンなどで構成されている。
【００１４】
システム制御部１０１は、操作部１３０によって要求された命令の内容を解釈し、デコーダブロック１４０を制御することで任意の放送番組からストリーム情報を抽出し、ストリーム情報の復号化および表示を行う。なおストリーム情報とは符号化映像が多重化された情報を示し、当該ストリーム情報を分離することにより、符号化映像ストリーム、音声ストリーム、システム管理情報に分離することができる。また符号化映像ストリームは、ＧＯＰ（Ｇｒｏｕｐ  Ｏｆ  Ｐｉｃｔｕｒｅｓ）と呼ばれる符号化圧縮単位で符号化されている。
デコーダブロック１４０は、システム制御部１０１からの指示のもと、ストリーム情報の再生、表示を行っている。
【００１５】
映像解析部１５３は、デコーダ部１１１から復号化された映像信号を受けて、映像を解析し、左側の半部と右側の半部の相関性についての情報を得る。
三次元映像判定部１５１は、ストリーム情報の再生時に映像解析部１５３で得られた解析結果に基づいて三次元映像か否か（三次元映像か二次元映像か）を判定し、当該判定結果に基づいて三次元映像の場合にサイドバイサイド方式の入力映像から立体映像を生成し、当該立体映像を表示することを特徴としている。
なお、その際に三次元映像判定部１５１で得られた立体度合いを示す視差量に応じて、立体映像の生成や表示方式を最適化しても良い。
【００１６】
なおまた、三次元映像判定部１５１は、システム制御部１０１内のファームウェアなどで構成される例を示しているが、システム制御部１０１の外部に設けても良いし、当該機能を有するハードウェアであっても良い。一方、映像解析部１５３はハードウェアで構成されている例を示しているが、システム制御部１０１内のファームウェアで構成しても良い。
【００１７】
まず本実施の形態１における表示処理の流れについて、図１及び図２を用いて説明する。
システム制御部１０１からの指示に基づいて、チューナー部１０３はパラボラアンテナ等で受信した電波から、選局された放送局の変調波を取り出す（Ｓ１０１）。
その後、デジタル変調部１０４で前記チューナー部１０３から出力された変調波をベースバンド信号に変換する（Ｓ１０２）。
【００１８】
デジタル放送の電波は非常に弱い上、外来ノイズも多いことから情報が欠落する可能性が高い通信方式である。そのため変換されたベースバンド信号には、本来の放送波情報と誤り訂正用情報が多重化（誤り訂正符号化）されて伝送されている。誤り訂正部１０５では、このように情報が欠落した際に誤り訂正用情報に基づいて、それを修正して正しい情報（放送波情報）に戻している（Ｓ１０３）。
【００１９】
当該放送波情報は、１３個のセグメントと呼ばれる区間に分けて使用されている。当該放送波情報の内１２セグメントは地上デジタルハイビジョン放送用の符号化圧縮映像が伝送され、残りの１セグメントは携帯端末用の１セグ放送の送信に利用される。なお１２セグメントの地上デジタルハイビジョン用の符号化圧縮映像には、複数番組の映像音声が多重化されていてもよい。その場合、番組抽出部１０６で、指定チャンネルのＭＰＥＧ−２  Ｔｒａｎｓｐｏｒｔ  Ｓｔｒｅａｍ（以下、ＭＰＥＧ−２  ＴＳ）を抽出し、ストリーム制御部１１０へ入力する（Ｓ１０４）。このように抽出されたＭＰＥＧ−２  ＴＳを、ストリーム情報と言う。
【００２０】
ストリーム制御部１１０は、システム全体のストリーム情報の流れを統括制御しており、ストリーム情報を一時的に展開するための一時メモリ領域であるストリームバッファ１２１を備えている。ストリームバッファ１２１は少なくとも映像の１フレーム分のストリーム情報を格納しておける容量を持つ。
【００２１】
システム制御部１０１は、ストリームバッファ１２１に格納されているストリーム情報中のシステム管理情報を解析することで、ストリーム情報を構成する映像ストリーム、音声ストリームに関する後述するパケットＩＤを知ることができる。
パケット分離部１４１は、当該映像ストリームを示すパケットＩＤでフィルタリング（分離）した後で、符号化映像情報をデコーダ部１１１に供給する。その間、ストリームバッファ１２１には、当該ストリーム情報が保持される。
【００２２】
デコーダ部１１１は、映像フレームを復号化し、復号化により得られた情報を映像解析部１５３に供給する。
映像解析部１５３は、後で詳細に説明する方法で、映像を解析し、映像解析結果としてヒストグラム情報を出力する。
三次元映像判定部１５１は、映像解析部１５３から出力される解析結果に基づいて、解析対象の映像フレームがサイドバイサイド方式の三次元映像であるか否かを判定する（Ｓ１０５）。
なお、三次元映像であると判断された場合、三次元映像判定部１５１はヒストグラム情報で表される左目映像と右目映像の相関関係から、視差映像の分布状態を判断し、立体度合いを示す情報を更に取得するようにしても良い。この情報は、三次元映像の視聴が及ぼす心身への影響が大きいかどうかの判断のために利用される。
【００２３】
ステップＳ１０５における判別処理で、サイドバイサイド方式の三次元映像であると判断されている場合（Ｓ１０６でＹＥＳ）には、次にステップＳ１０７に進み、サイドバイサイド方式の三次元映像映像でない場合（Ｓ１０６でＮＯ）には、次にステップＳ１１０に進む。
【００２４】
その後、ストリーム変換部１２２は、ストリームバッファ１２１に保持されているストリーム情報を、左目映像と右目映像を示す２本の二次元映像に分離した後、各映像における水平方向のサンプリングを２倍にして、それぞれの画像をオリジナル画像サイズに変換し、各映像には別々の後述するパケットＩＤを付加した後で、パケット分離部１４１にデータを供給する（Ｓ１０７）。
【００２５】
以上のように、デコーダ部１１１の出力に基づいて画像解析部１５３で画像を解析して三次元映像判定部１５１で三次元映像かどうかの判定を行なうときは、ストリーム制御部１１１０は、番組抽出部１０６から出力される信号を、右側半部の映像と左側半部の映像に分離することなくパケット分離部１４１に供給するのに対し、三次元映像判定部１５１で三次元映像であると判定した後は、ストリーム制御部１１０は、番組抽出部１０６から出力される信号を、右側半部の映像と左側半部の映像に分離した上でパケット分離部１４１に供給する。
【００２６】
三次元映像であると判定された場合には、その後ストリーム制御部１１０から出力される信号は左目映像と右目映像を示すパケットＩＤ（それぞれ異なる値に設定されている）を参照して、パケット分離部１１０は、左目映像信号と右目映像信号をそれぞれ別個の情報としてデコーダ部１１１へ供給する。デコーダ部１１１ではそれぞれを個別に復号化した後、当該２本の映像情報を映像合成部１４２へ供給する。
【００２７】
一方、三次元映像判定部１５１で、入力映像が二次元映像であると判断された場合には、システム制御部１０１は、あらかじめストリーム情報を構成している映像ストリーム、音声ストリーム、システム管理情報のパケットＩＤを読み出しているので、当該映像ストリームをパケットＩＤで分離し、抽出した後、当該情報をデコーダ部１１１へ供給する。なお本実施の形態では、映像ストリームの復号化についてのみ図示しているが、音声ストリームやシステム管理情報は、図示しない他のデコーダ部により復号化される。
【００２８】
次に映像合成部１４２の処理について説明する。映像合成部１４２では、三次元映像である場合にはデコーダ部１１１から供給された左目映像と右目映像を合成し（Ｓ１０８）、１本の映像としてデジタルインターフェース部１１２に供給する。なお合成とは、例えば左目映像を奇数ラインに表示し、右目映像を偶数ラインに表示する等の処理を指す。ここでは、前記左目映像と右目映像の２本の映像ストリームから立体合成映像を構築する。
【００２９】
映像合成部１４２に入力された信号が二次元映像である場合、映像合成部１４２では特段の処理を行わず、そのままデジタルインターフェース部１１２へ転送する。
【００３０】
なお映像合成部１４２では、システム制御部１０１によって生成されるユーザーへの警告画面などを画面上に表示するためのＯＳＤ（Ｏｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ）画面情報の合成を併せて行なっても良い。
【００３１】
デジタルインターフェース部１１２では、供給された映像信号、音声信号をＨＤＭＩインターフェースに適合した信号に変換する。表示部１１３は、当該ＨＤＭＩ信号に変換された出力映像信号の表示を行う。なお三次元映像を表示している区間の場合、システム制御部１０１からの命令が、デジタルインターフェース部１１２を経由して表示装置側に伝えられ、この命令に基づいて、表示装置では現在の三次元映像属性に最適な表示方式に切替えを行う（Ｓ１０９）。一方、二次元映像表示時には、同様に二次元映像に適した表示方式への切替えを行う（Ｓ１１０）。
【００３２】
上記再生処理は、表示終了まで行われる（Ｓ１１１）。表示終了していない場合は、次映像フレームの解析処理であるステップＳ１０５以降の処理を継続して行う。
なお本実施の形態１では、入力映像の１フレーム毎に三次元映像であるか否かの判定（Ｓ１０５）を行っているが、例えば符号化圧縮単位であるＧＯＰ毎に当該判定を行っても良い。その場合、フレーム内圧縮であるＩピクチャを判定フレームとして利用すれば、演算量を最小にすることができる。
【００３３】
以下、デジタル放送で配信される三次元映像２００が横方向Ｍ画素×縦方向Ｎ画素から成るものであり、三次元映像がサイドバイサイド方式のものであるとして三次元映像の解析について説明する。その場合、図３に示すように、三次元映像を構成する左目映像は、水平方向に１／２サブサンプリングした後に、画像左側の部分（左側半部）２０１に記録され、右目映像は、水平方向に１／２サブサンプリングした後に、画像右側の部分（右側半部）２０２に記録される。図３に示す例では、左目映像２０１と右目映像２０２の視差が大きいオブジェクトである「家」の映像部分が、立体映像として表示される。なお視差が大きい場合には、左目映像２０１と右目映像２０２の同じオブジェクトの映像部分が各半部内の同一位置に存在せず、例えば、左目映像２０１におけるオブジェクトの位置に比べて、右目映像２０２における当該オブジェクトの位置が、右側に移動した表示内容になる。
【００３４】
図４は、映像表示装置１００が受信するストリーム情報３１２の内部データ構造を示すストリーム構成図である。
【００３５】
ストリーム情報３１２は、映像ストリームやデータ放送ストリームや同期情報が多重化された情報であり、デコーダ部１１１で復号化することにより映像ストリームが生成できる。映像ストリームは、例えば、ＭＰＥＧ−２  ＥＳ（エレメンタリストリーム）規格に規定されているＧＯＰ（Ｇｒｏｕｐ  ｏｆ  Ｐｉｃｔｕｒｅｓ）などの圧縮単位で符号化されたストリーム情報である。
【００３６】
ストリーム情報３１２は、パケット４００と呼ばれる固定長のデータ単位により構成されている。映像データ、音声データ、ストリーム管理データは、このパケット４００単位に分割された後、多重化されてストリーム情報３１２を構成する。それぞれのパケット４００の先頭にはヘッダ情報４０１があり、ヘッダ情報４０１に記述されたパケットＩＤ４０２（Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）により、パケット４００内のデータ識別を行う。パケット分離部１４１は、このパケットＩＤ４０２を識別して、映像ストリーム、音声ストリーム、ストリーム管理情報に分離する。
【００３７】
図５は、映像解析部１５３内での、左右映像の比較に関する説明図である。三次元映像か否かの判断のため、左側半部２０１と右側半部２０２の比較を行う。比較に際しては映像の左側半部と右側半部の、互いに同一の位置（従って、垂直方向位置が互いに同じで、各半部の左端からの水平方向距離が互いに等しい）にある画素同士を比較して、画素同士の類似度を求める。
【００３８】
具体的には、同図に示すように左上隅を画面の原点を示す座標（０，０）とすると、まず左側半部の開始点である（０，０）の画素と右側半部の開始点である（Ｍ／２，０）の画素を比較する。比較においては、例えば、画素の持つ輝度の差を求める。各画素における当該情報の階調は−２５５から＋２５５の整数値で表される。通常、「０」の値は完全に一致している（類似度が最大である）ことを示し、数字が大きくなるほど画素の類似度が低いことを示す。
なお本実施の形態では、各画素の輝度情報の差を算出することで類似度を求めているが、輝度情報に加え色成分の情報をも考慮に入れて、画素同士の類似度を求めることとしても良い。
【００３９】
画素の比較が終了すると、左側半部と右側半部での対象点を１画素分右にずらして、再度画素の比較を行う。順次、画素比較を行うが、各映像において水平方向の画素中で右端の画素比較が終わると、次のライン（１行下のライン）の左端の画素に対象点を移動した後、同様の手順で比較を進めていく。このようにして、左右映像の全画素についての比較を行う。
【００４０】
なお本実施の形態では全画素について比較を行っているが、例えば画素を間引くことで、比較対象となるサンプル数を減らしても良い。画素を間引く方法として、例えば２画素おきに比較対象として選択したり、奇数番目の水平ライン上の画素のみ、あるいは偶数番目の水平ライン上の画素のみを選択しても良い。
また放送波では、画面の左右部分に黒画が挿入されることが多く、また映画等においては上下に黒帯が挿入されることもあることを考慮し、該左右上下の領域を比較領域から外し、入力画像の中央部のみに限定して画素比較を行っても良い。このように構成することで、より高速に左右画像の比較を行うことができる。
【００４１】
図６は、映像解析部１５３の一例を示す。
図示の映像解析部１５３は、遅延部８０１と、差分算出部８０２と、絶対値算出部８０３と、ローパスフィルタ８０４と、代表点抽出部８０５と、比較部８０６と、ヒストグラムテーブル８０７と、計数部８０８と、ヒストグラムメモリ８０９とを有する。
【００４２】
図７は映像解析部１５３における映像解析処理、及び三次元映像映像判定部１５１における、三次元映像か否かの判定を行なう処理を示すフローチャートである。図８（Ａ）〜（Ｄ）は、図６の映像解析部１５３の各部における信号で表される映像の例を示す。図９（Ａ）〜（Ｄ）は、図６の映像解析部１５３の各部で得られる差異値の例を示す。図１０は、図６の映像解析部１５３のヒストグラムメモリ８０９でで生成されるヒストグラムの一例を示す。次に本実施の形態１における画像解析処理を、図６、図７、図８（Ａ）〜（Ｄ）、図９（Ａ）〜（Ｄ）及び図１０を用いて詳細に説明する。
【００４３】
図５で説明したように、映像解析部１５３は、デコーダ部１１１からの映像信号を入力映像として、その左側半部（左映像）２０１と右側半部（右映像）２０２を画素単位で比較する（Ｓ３０１）。画素の走査（順次選択）は、例えば、左上隅から順に、複数のラインを上から下へ、各ラインの画素を左から右へ順に選択することで行われる。
【００４４】
画素比較に際しては、遅延部８０１で、水平方向に１／２画面分の遅延が行われるため、入力映像（図８（Ａ））のうちの遅延部８０１からの出力される左側半部２０１（図８（Ｂ））と、入力映像のうちの右側半部２０２（図８（Ｃ））の同じ位置に配置された画素が同時に入力される。その後、差分算出部８０２で、上記したように画素の持つ輝度の差である差異値が、−２５５から＋２５５の範囲で求められる（Ｓ３０２）。
【００４５】
なお図８（Ａ）〜（Ｃ）のように左目映像と右目映像の視差がある円の内側と外側で輝度が異なる図形が入力された場合においての視差を示す概念図としては、図８（Ｄ）において、ハッチングで示す部分が差分量の大きい箇所を示している。画面上の上下方向の中ほど（縦方向座標値が（Ｎ／２）の位置の水平ライン８１９に沿う（画面の各半部の水平方向位置を横軸に取って）、差分量の大きさをグラフ化したものが、図９（Ａ）に示す差分量グラフ８２０である。当該差分量グラフ８２０は、横軸に水平方向の画素位置、縦軸に差分量を示している。
【００４６】
差分算出部８０２で出力される差異値はマイナス値をとる可能性があるため、以後の比較計算を簡易化するため絶対値算出部８０３で、差異値を絶対値化する（Ｓ３０３）。この時点で差異値は、０から２５５の間の値をとり、数値が大きいほど差異量が大きく、類似度が低いことを意味する。この時点での画素比較の差分量は、図９（Ｂ）に示す差分量グラフ８２１のように示される。
【００４７】
その後、当該差分量をローパスフィルタ８０４で大きな差異値の部分を平坦化する（Ｓ３０４）。ローパスフィルタ８０４は、差分量の大きい成分を抑制するよう動作するために用いられる。ローパスフィルタ８０４による処理を受けた後の差分量は、図９（Ｃ）に差分量グラフ８２２で示すごとくとなる。
【００４８】
このような画素比較を順次行ってゆき、画面を構成する全画素の比較が終了したかを判定する（Ｓ３０５）。全ての画素比較が終了すれば、ステップＳ３１０に進む。全画素の比較が終了していない場合は、水平ライン部分が終了したか否かを判定する（Ｓ３０６）。なお画素比較については左目映像の画素を基準としており、左側半部２０１に関して水平ライン部分が終了したか否かは、図２に示す水平方向座標が（Ｍ／２）−１に到達したかを判定することによって行われる。水平ラインの終端（左半部の右端）に到達した場合は、次のラインで先頭（左端）の画素に対象点を移し（Ｓ３０７）、ステップＳ３０１の処理に戻る。一方、水平ラインの終端に到達していない場合、現在比較している画素の右隣の画素に対象点を移し（Ｓ３０８）、ステップＳ３０１の処理に戻る。
【００４９】
次にステップＳ３１０の処理として、当該ローパスフィルタ８０４からの出力結果から、水平方向の間引きによりヒストグラムの生成に用いる点（代表点）を抽出する（Ｓ３１０）。即ち、ローパスフィルタ８０４の出力として、１水平ラインにつき９６０画素分の差異値データ（サンプル）が得られているが、そのうちの所定数の画素ごと、例えば５画素ごとのデータのみをヒストグラム生成のための代表点のデータとして抽出する。抽出された代表点のデータを、図９（Ｄ）に示す。なお、図９（Ｄ）では、間引き率が極めて大きいものとして図示しているが、５画素毎であれば、間引きにより選択されたサンプルの、水平方向の間隔は、図９（Ｄ）に示すのより、はるかに小さい。
【００５０】
サンプルを間引くことによって最終的な演算量を抑えることができ、システム制御部１０１への負荷が抑え、高速で三次元映像であるか否かを判定することができる。
なお、間引きを行なわず、ローパスフィルタ８０４から出力されるサンプル値を全て、ヒストグラム生成に用いることとしても良い。
【００５１】
次に選択された代表点についての差異値の、それぞれの階級への分類（グループ分け）を行う（Ｓ３１１）。ヒストグラムテーブル８０７は、代表点抽出部８０５から出力された差異値を階級分けするための情報（各階級の上限及び下限を示す情報）を記憶したものである。比較部８０６は、代表点抽出部８０５から出力される差異値を、ヒストグラムテーブル８０７から供給される、各階級の上限値、下限値と比較することにより、階級分け（マッピング）を行う。
【００５２】
本例では、代表点抽出部８０５から出力される差異値は０から２５５までの数値を取るが、階級分けにより、０から１００までの階級に分類される。このように処理することでヒストグラム生成に用いられる数値が限定され処理の高速化につながる。
【００５３】
なお、階級分けに当たり、０〜１０を一つの階級として、２４５〜２５５を一つの階級とするなど、差異値の範囲の端部付近において比較的多数の差異値を含む階級を設定することとしても良い。このように構成することで例えば全く左右画像が一致しているにも関わらず受信映像のノイズ等の理由により若干の差異が発生した場合等にも、同じ画像ファイルであることを精度よく検出することができる。
【００５４】
計数部８０８は、比較部８０６によるグループ分けの結果を受け、各階級ごとの出現頻度を計数する。
【００５５】
ヒストグラムメモリ８０９は、計数部８０８の計数結果を記憶する。画面全体にわたるグ処理（差分算出部８０２から計数部８０８までの処理）が終わった時点で、ヒストグラムグラムメモリ８０９に記憶されている、それぞれの階級の出現頻度がヒストグラムを表す。その一例８１０が図１０に示されている。同図で、横軸は階級及び階級に対応する差異値を表し、縦軸は出現頻度を表す。出現頻度の全階級にわたる合計は、画面の半分内の代表点の総数に等しい。
【００５６】
次に、三次元映像判別部１５１は、ヒストグラムメモリ８０９に記憶されているヒストグラム８１０から、所定の閾値以上の階級の出現頻度の合計が所定の値以上かどうか、或いは該合計の、代表点の総数に対する比が所定の値以上かどうかの判定を行なう（Ｓ３１２）。上記の比に対する所定の閾値は、例えば「５０％」とされる。そして、もしも所定の値未満であれば、三次元映像と判定され（Ｓ３１３）、所定の値以上であれば、三次元映像ではない（二次元映像である）と判定される（Ｓ３１４）。
【００５７】
このようにして三次元映像かどうかの判定が可能であるのは、サイドバイサイド方式の三次元映像の場合には、左側半部と右側半部の相関が強く、差分算出部８０２で求められる差異値が小さくなることが多く、従って、生成されるヒストグラムにおいても、大きい差異値に対応する階級の出現頻度が小さくなる傾向があるためである。
【００５８】
上記「所定の値」は、三次元映像判定部１５１に予め設定されていれば良い。また、例えば、ユーザーが設定画面を通じて、当該設定値を変更し得るようにしても良い。
【００５９】
上記の例では、画面全体についてヒストグラムを生成しているが、１水平ラインについてヒストグラムを生成することとしても良い。その場合、画面の垂直方向の中央部の水平ラインについてヒストグラムを生成するのが望ましい。そのように構成することで、三次元映像か否かの判定に要する時間を短くすることができる。
【００６０】
図１１（Ａ）〜（Ｃ）は、映像解析部１５３で生成したヒストグラムの互いに異なる例を示す。横軸には、階級を表すとともに、階級に属する差異値の代表値を示す。図１１（Ａ）は、二次元映像の解析結果の一例を示す。図１１（Ａ）に示す例では、画面の左側部分と右側部分の相関が小さいため、大きい差異値に対応する階級にも多数のサンプルが出現する。図１１（Ｂ）及び図１１（Ｃ）は、一般的な三次元映像の解析結果の事例である。このうち、図１１（Ｂ）は、図６のローパスフィルタ８０４を設けない場合を示し、図１１（Ｃ）は、図６のローパスフィルタ８０４を設けた場合を示す。三次元映像の場合、左側半部２０１と右側半部２０２の相関性が高いことから、小さい差異値を含む階級の出現頻度がより高くなる。そのため例えば差異値が１７５である箇所に閾値を設け、全体のサンプル数に対する、閾値（１７５）よりも上の階級の出現頻度（サンプル数）の合計の比を所定の閾値（例えば５０％）と比較することで、二次元映像か三次元映像かを把握することができる。
【００６１】
なお、図１１（Ｃ）に示すようにローパスフィルタ８０４を用いると、大きい差異値の属する階級における出現頻度の頂点が低くなり、このため、三次元映像か否かを判定する際の判別の信頼性が向上する。
【００６２】
本実施の形態１によれば、小さな回路規模で三次元映像か否かを判別することができるため、三次元映像の表示に要する機器のコストを抑えることができる。
【００６３】
また別の効果として、表示部１１３がサイドバイサイド方式から立体映像を生成することができない場合においても、左目映像もしくは右目映像のどちらかを、通常の放送と同様の解像度およびアスペクトレシオで視聴することができる。
【００６４】
なお、映像表示装置１００と表示部１１３の通信用伝送路として双方向の通信が可能なＣＥＣ（Ｃｏｎｓｕｍｅｒ  Ｅｌｅｃｔｒｏｎｉｃｓ  Ｃｏｎｔｒｏｌ）を用いれば、映像表示装置１００が出力した三次元映像に最適な表示設定を表示部１１３が知ることができる。
また、映像の再生中に、三次元映像判定部１５１において、三次元映像が視差が大きいものであり、その視聴が及ぼす心身への影響が大きいと判断した場合には、表示部１１３側でも視差を緩和するように表示方式を切替えることができる。
また非常に身体への影響度が強い場合には、視聴し続けないようＯＳＤを用いて警告をしても良いし、表示自体を中止するようにしても良い。
このため本映像表示装置１００は、ユーザーへの心身への影響に配慮しつつ、表示品質の向上が図ることができるといった効果を奏する。
【００６５】
また別の効果として、即座に三次元映像の信号か否かを判別するため、映像表示装置１００は、二次元映像と三次元映像の切替えを自動的に即座に行うことができる。
【００６６】
上記の例では、画素同士の差異値乃至類似度に用いてヒストグラムを生成し、該ヒストグラムに基づいて三次元映像か否かの判定を行なっているが、本発明はヒストグラムを用いる場合に限定されず、画素同士の差異値又は類似度を、複数の画素について集計し、該集計結果に基づいて映像の左側半部と右側半部の相関性を求め、該相関性に基づいて三次元映像か否かの判定を行なうこととすれば良い。
【００６７】
実施の形態２．
実施の形態１では、サイドバイサイド方式の三次元映像と二次元映像が混在する放送波を受信して表示する際に、入力画像の左側半部２０１と、入力映像の右半分を示す右側半部２０２の同一の位置にある画素（各半部における相対位置が同じである画素同士の類似度に基づいて、ヒストグラムを生成し、該ヒストグラムから三次元映像かどうかの判定を行なっている。
【００６８】
本実施の形態２では、映像の左側半部と右側半部の、互いに同一の垂直方向位置にある画素から成る部分領域同士の類似度に基づいて、三次元映像であるか否かを判定する。例えば、映像の左側半部及び右側半部の一方（例えば左側半部）の各部分領域（着目部分領域）に対して、映像の左側半部及び右側半部の他方（例えば右側半部）にあり、上記着目領域と同一の垂直方向位置にある複数の部分領域のうち、上記着目部分領域に対する類似度が最も高いものの類似度（言い換えれば、上記着目部分領域に対して、映像の他方の半部（右側半部）にあり、上記着目領域と同一の垂直方向位置にある複数の部分領域のそれぞれの、上記着目部分領域に対する類似度のうちの、最も高いもの）を、複数の着目部分領域について集計することで求められる、映像の左側半部と右側半部の相関性に基づいて、三次元映像であるか否かを判定する。ここで、部分領域は、例えば映像を任意の大きさに分割した、例えば矩形の領域であり、ブロックとも呼ばれる。上記の「複数の着目部分領域について集計する」処理は、例えば、一方の半部（左側半部）の全域にある複数の着目部分領域ついて集計する処理であっても良く、代わりに、一方の半部（左側半部）の同一の垂直方向位置にある複数の着目部分領域について集計する処理であっても良い。
【００６９】
このような方法で、三次元映像かどうかの判定を行なうのは、三次元映像上の立体視されるオブジェクトは水平方向に移動した場所に配置されるので、左側半部と右側半部の、同じ垂直方向位置に、類似度の著しく高いブロックの対が存在することが多いことに着目したものである。なお、映像内のオブジェクトのみを抽出できれば、より正確に三次元映像かどうかの判定を行なえるが、オブジェクトの抽出は困難であるので、ブロック同士を比較することとしている。
【００７０】
ブロック対についての類似度は、例えば、上記の一対のブロック内における相対位置が同じ画素同士の差分の、ブロック全体にわたる合計を求め、該合計が該合計が小さいほど類似度が高いとして扱う。
このような方法により判定を行なう結果、視差があるオブジェクトが表示された三次元映像であっても、より正確に三次元映像であるか否かを判断することができる。
【００７１】
図１２は、本発明の実施の形態２における左右映像比較に関する説明図である。図１３は、実施の形態２で用いられる映像解析部１５３の一例を示す。図１４は三次元映像か否かの判別動作フローである。次に本実施の形態２における画像解析処理の流れを、図１２と図１４を用いて詳細に説明する。なお実施の形態１において説明した構成と同様の構成については同一の符号を付記する。
【００７２】
実施の形態２では、図１２で示すようにあらかじめ定められた大きさのブロックを単位として、左側半部の映像（左映像）２０１と右側半部の映像（右映像）２０２の比較を行う（Ｓ４０１）。図１２には、左側半部のブロック（着目ブロック）１３０１に最も類似度する（最も差分が小さい）ブロックを探索する例を示す。なお当該ブロックの大きさは、例えば、ＭＰＥＧで符号化圧縮される単位である８画素×８画素である。しかし、本実施の形態２で示すブロックの大きさは当該サイズに限定されず、異なる大きさであっても良い。
【００７３】
実施の形態２の映像解析部１５３は、図１３に示されるように、映像信号メモリ９０１と、左側ブロック抽出部９０２と、右側ブロック抽出部９０３と、類似度算出部９０４と、類似度記憶部９０５と、最大類似度検出部０９６と、ローパスフィルタ８０４と、代表点抽出部８０５と、比較部８０６と、ヒストグラムテーブル８０７と、計数部８０８と、ヒストグラムメモリ８０９とを備える。
ローパスフィルタ８０４、代表点抽出部８０５、比較部８０６、ヒストグラムテーブル８０７、計数部８０８、及びヒストグラムメモリ８０９は、実施の形態１に関し図６を参照して説明したのと同様のものである。
【００７４】
映像信号メモリ９０１は、デコーダ部１１１から出力される映像信号を、例えば１フレーム分蓄える。
左側ブロック抽出部９０２は、映像の左側半部のブロックを着目ブロックとして順次抽出する。
右側ブロック抽出部９０３は、映像の右側半部内にあり、上記着目ブロックと同じ垂直方向位置にあるブロックを順次参照ブロックとして選択して抽出する。
最大類似度検出部９０４は、左側ブロック抽出部９０２で抽出されたブロック（着目ブロック）について、右側ブロック抽出部９０３で順次選択された複数のブロックの各々との類似度を求め、求めた類似度のうちの最大のものを当該着目ブロックについての最大類似度として出力する。
【００７５】
このような処理のため、左側ブロック抽出部９０２が一つの着目ブロックを出力している間に、右側ブロック抽出部９０３は、右側半部の、上記着目ブロックと同じ垂直方向位置にあるブロックを順次参照ブロックとして抽出して出力する。例えば、右側半部の左端のブロック（図１２に符号１３１１で示す）から、右端のブロック（図１４に符号１３１２で示す）順に１画素分ずらしながら、順にブロックを選択する。図１４には、左端と右端の任意の位置にあるブロックが符号１３１３で示されている。
【００７６】
まず左側半部の映像２０１において、左側ブロック抽出部９０２で抽出された左側半部のブロック（着目ブロック）１３０１と同一の垂直方向位置に存在する（同一水平ライン上に存在する）右側半部の左端に位置するブロック（参照ブロック）１３１１とを比較することで類似度を求める。ブロック同士の類似度は、該ブロック内における相対位置が同じ画素同士の差分（輝度、色情報の差分）の絶対値の、ブロック全体にわたる（即ち、８×８画素にわたる）合計を求めることで得られ、差分の絶対値の合計が小さいほど類似度が大きいとして扱われる。
【００７７】
一つの右側半部の参照ブロック１３１１についての比較が終わると、右側ブロック抽出部９０３は、次に、右側半部の参照ブロックが右端に位置するか否かを判定し（Ｓ４０２）、右端に位置しないと判定すると、右側半部の参照ブロックを水平右方向に１画素ずらして、同様の比較処理を行う（Ｓ４０３）。このように同じ垂直方向位置に存在する（同一水平ライン上に存在する）右側半部の右端に位置するブロック１３１２まで、同様の比較処理を進める。
そして、そのようにして右側半部の参照ブロックのうちで、類似度が最大となるものを特定し、当該ブロックの類似度を最大類似度として出力する（Ｓ４０４）。なお、類似度が最大となる参照ブロックを特定せず、右側半部の参照ブロックのそれぞれについて求めた類似度のうちで最大のものを最大類似度として求めることとしても良い。このような最大類似度を求める処理は、最大類似度検出部９０４で行なわれる。上記のように、類似度の最も高いブロック（或いは部分領域）を探索する処理は、ブロックマッチングと呼ばれる。
【００７８】
最大類似度検出部９０４から出力される最大類似度は、ローパスフィルタ８０４に供給され、実施の形態１に関し図６を参照して説明したのと同様のローパスフィルタリングを受ける（Ｓ３０４）。
【００７９】
以後は、実施の形態１で示したのと同じ方式で、左右映像の比較を順次進める。具体的には、左側半部の参照ブロック１３０１の処理が終了すれば、参照ブロックを右方向に１画素分ずらして、同様の比較処理を継続する（Ｓ４０８）。
参照ブロックが、左側半部２０１の右端に到達したら（Ｓ３０６でＹＥＳ）、参照ブロックを下方向に一画素分ずらし、且つ左側半部２０１の先頭（左端）に移動（Ｓ４０７）し、ステップＳ４０１に戻って同様の比較処理を継続する。このような手順で、左側半部２０１の全体について比較処理を終了すれば、当該三次元映像２００の比較処理が全画面について終了したことになる（Ｓ３０５でＹＥＳ）。
【００８０】
なお上記の例では、左側半部における着目ブロックの選択及び右側半部における参照ブロックの選択に際し、１画素単位で、即ち１画素ずつ（１列ずつ）ずらしながら、水平方向に走査していく（順次に選択する）例を示しているが、ずらす量は１画素に限らない。要するに、所定数の画素ずつずらしながら走査（順次選択）を行なえば良い。垂直方向についても、１ライン（１行）ずつに限らず、所定数のライン（行）ずつ、例えば、ブロックの高さに相当する８ラインずつ、ずらしながら走査（順次選択）を行なえば良い。
また、垂直方向にずらすことなく、垂直方向の一定の位置についてのみ（ブロックの垂直方向の位置をずらすことなく）、水平方向にのみずらすこととしても良い。この場合、画面の垂直方向の中央付近に位置するブロックについて比較を行うのが望ましい。
【００８１】
全画面について比較処理が終了したら（Ｓ３０５でＹＥＳ）、次にステップＳ３１０において、間引きにより代表点を抽出し、ステップＳ３１１において、階級分けを行い、ステップＳ３１２、Ｓ３１３、Ｓ３１４でヒストグラムに基づく判定を行なう。これらの処理は、実施の形態１に関し説明したのと同様である。
【００８２】
図１５は実施の形態２の映像解析部１５３で生成したヒストグラムの具体例を示す。図１５のヒストグラムは、実施の形態２に示すブロックマッチング法を採用した場合の三次元映像の解析結果である。図１５では、横軸の差異値の値が０〜１６，３２０となっている。１画素についての差異値の最大値が２５５であり、ブロック内の画素の数が８×８であることを考慮したものである。なお、ブロック単位で特定の一点（例えば、左上隅位置、中央位置の画素のみを比較することとすれば差異値の範囲が０〜２５５）となる。同ヒストグラムに示すように、視差のある三次元映像を比較した場合においても、ヒストグラム上の出現頻度が、小さい差異値が属する階級（図で左側）においてより多くなるため、類否判定の信頼性が向上する。
【００８３】
本実施の形態２によれば、三次元映像か否かを判定する場合に垂直方向の位置が同じブロック同士を比較することで、視差のある映像についても、より確実に三次元映像であるか否かを判別することができる。また比較の対象を垂直方向の位置が同じブロックに限定しているため、処理演算量を削減することができ、ＣＰＵへの負荷を抑えつつ高い確度で三次元映像であることを把握することができる。
【００８４】
上記の例では、ブロック同士の類似度に用いてヒストグラムを生成し、該ヒストグラムに基づいて三次元映像か否かの判定を行なっているが、本発明はヒストグラムを用いる場合に限定されず、ブロック同士の類似度を、複数のブロックについて集計し、該集計結果に基づいて映像の左側半部と右側半部の相関性を求め、該相関性に基づいて三次元映像か否かの判定を行なうこととすれば良い。
また矩形の領域であるブロック同士を比較しているが、矩形以外の形状の領域を比較に用いても良い。
【００８５】
実施の形態３．
実施の形態３は、入力画像が二次元映像で且つ、全画面が白映像（以降、全白画面と呼ぶ）や、全画面が黒映像（以降、全黒画面と呼ぶ）の映像が入力された場合においても、三次元映像だと誤検出しないようにしたものである。実施の形態１および実施の形態２では、全白画面や全黒画面を入力画像とした場合、入力画像の左半分と右半分の映像の相関が高いため、三次元映像であると誤検出される可能性がある。実施の形態３では、画面全体の周波数成分を解析し空間周波数の高周波数成分の有無を判定することで、全白画像や全黒画像のような低周波成分（直流成分を含む）が主体の画像を三次元映像であると誤認識しないようにしている。
【００８６】
図１６は、実施の形態３で用いられる三次元映像判定部１５１の一例を示す機能ブロックである。図示の三次元映像判定部１５１は、相関判定部１５１ａと、高域成分検出部１５１ｂと、総合判定部１５１ｃとを有する。相関性判定部１５１ａにおける処理は、例えば実施の形態１又は２に関し、三次元映像判定部１５１の処理として説明したのと同じである。
但し、実施の形態１又は２の三次元映像判定部１５１では、「左側半部と右側半部の相関性が高い」と判定すると、直ちに「三次元映像である」と判定しているが、実施の形態３における三次元映像判定部１５１では、相関性判定部１５１ａにおける、「左側半部と右側半部の相関性が高いか否か」の判定結果を直ちに「三次元映像か否か」の判定結果とはせず、相関性判定部１５１ａによる判定結果を総合判定部１５１ｃに供給している。
高域成分検出部１５１ｂは、デコーダ部１１１の出力に高周波数成分が所定量以上含まれるかどうかの判定を行う。例えば、デコーダ部１１１の出力を受けて所定の周波数よりも高い成分のみを通過させるハイパスフィルタと、ハイパスフィルタの出力が所定の値以上かどうかを判定するレベル検出部とを備え、レベル検出部により「所定の値以上」と判定された場合には、「高周波数成分が所定量以上含まれる」との判定結果を出力する。この判定結果は、「全白画面」や「全黒画面」を含め、「全体にわたり同一色の画面」ではないことを示すものであるとも言える。
総合判定部１５１ｃは、相関判定部１５１ａの出力が「相関性が高い」ことを示すものでないとき、あるいは、高域成分検出部１５１ｂの出力が「高周波数成分が所定量以上含まれる」ことを示すものでないときは、二次元映像であるとの判定をし、相関判定部１５１ａの出力が「相関性が高い」ことを示すものであり、かつ高域成分検出部１５１ｂの出力が「高周波数成分が所定量以上含まれる」ことを示すものであるときは、三次元映像であるとの判定をする。
【００８７】
図１７は、実施の形態３の三次元映像判定部１５１における三次元映像か否かを判別する処理を示すフローチャートである。なお同図において、実施の形態１において図７を参照して説明した構成と同様の構成については同一の符号を付記する。ステップＳ３１２までの処理については、実施の形態１と同様のため、説明を省略する。
【００８８】
ステップＳ３１２での判定結果がＮＯである場合には、次にステップＳ５０１で画面全体に高周波数成分が含まれるか否かを判定する。高周波数成分が含まれない場合、映像の切替わり時に表示される全白画面や全黒画面と判断し、ステップＳ３１４で二次元映像であると判定する。高周波数成分が含まれる場合は、通常の動画の１場面であると判定されるので、ステップＳ３１３で三次元映像と判定することで処理を終了する。
【００８９】
本実施の形態３によれば、画面中の左側半部２０１と右側半部２０２の画像相関性が強くても、高周波を含まない画像に関しては二次元映像であると判定できる。そのため全白画面や全黒画面が入力された場合においても、三次元映像であると誤検出しない。従って、三次元映像か否かを判断する際により信頼性が高い判断を行うことができる。
【００９０】
実施の形態４．
実施の形態４は、「画像の左右相関性が高い二次元映像」のように、三次元映像と誤認識されやすい映像が入力された場合にも、精度良く三次元映像か否かの判断を行なうことができるようにするものである。特に動画像の記録時には、上記のように二次元映像であっても、三次元映像と誤認識されやすいフレームが含まれる場合がある。また放送の受信感度が悪いために、異常画像が入力されることもある。実施の形態４では、相関性が高いとの判断が所定時間以上（所定のフレーム数以上）続くかどうかに基づいて、三次元映像かどうかの判定を行なうことで上記のような場合にも誤判定を回避するようにしたものである。
【００９１】
図１８は、実施の形態４で用いられる三次元映像判定部１５１の一例を示す機能ブロック図である。図示の三次元映像判定部１５１は、フレーム別判定部１５１ｄと連続性判定部１５１ｅとを有する。フレーム別判定部１５１ｄにおける処理は、例えば実施の形態１〜３に関し、三次元映像判定部１５１の処理として説明したのと同じである。
但し、実施の形態１〜３の三次元映像判定部１５１では、各フレームのデータに基づいて、「左側半部と右側半部の相関性」に基づいて（実施の形態１及び２）、或いは該相関性と高域成分の有無とに基づいて（実施の形態３）、「三次元映像である」か否かの判定しているが、実施の形態４におけるフレーム別判定部１５１ｄは、各フレームのデータに基づくフレーム別判定部１５１ｄによる判定結果を、直ちに「三次元映像か否か」の判定結果とはせず、
連続性判定部１５１ｅに供給している点で異なる。
【００９２】
図１９（Ａ）及び（Ｂ）は、本発明の実施の形態４における三次元映像判定部１５１の動作を示す。図１９（Ａ）はフレーム別判定部１５１ｄにおける判定結果を示し、図１９（Ｂ）は、連続性判定部１５１ｅにおける判定結果を示す。
図示の例においては、期間Ｔ１、Ｔ３、Ｔ５においては、相関性が高いとの判断がなされ、一方期間Ｔ２、Ｔ４においては、相関性が低いとの判断がなされ、期間Ｔ２の長さは所定のフレーム数の期間以下であり（Ｔ２≦Ｔα）、期間Ｔ４の長さは所定のフレーム数の期間Ｔαよりも長い（Ｔ４＞Ｔα）。そのため、期間Ｔ２においては、三次元映像であるとの判定はされず、期間Ｔ４においては、三次元映像であるとの判定がなされる。なお、閾値Ｔαは予め連続性判定部１５１ｅに設定されている。ユーザによる変更が可能としても良い。
【００９３】
なお、図示の例では、相関性が高いと判定された期間が所定の閾値Ｔα以上であることが検出されると、その期間が開始したとき以降の映像のすべて三次元映像として扱っているが、相関性が高いとの判定が所定の期間Ｔα以上続いたときに、それ以降の映像（その後、相関性が低いとの判断がされるまでの映像）三次元映像であるとして扱うこととしても良い。
【００９４】
以上、相関性が高いとの判断が所定のフレーム数以上続いた場合に、三次元映像であるとの判定をすることとしているが、逆に相関性が低いとの判断が所定のフレーム数以上続いた場合に、二次元映像であるとの判定をすることとしても良い。
また、一旦二次元映像であるとの判定がなされたら、映像信号の入力が続いている限り、その後相関性が高いとの判断が所定のフレーム数以上続いた場合に、三次元映像に切り替わったとの判断をし、このようにして、一旦三次元映像であるとの判定がなされたら、映像信号の入力が続いている限り、その後相関性が低いとの判断が所定のフレーム数以上続いた場合に、二次元映像に切り替わったとの判断をすることとし、その後も同様に判断の切替を行なうようにしても良い。
【００９５】
本実施の形態４によれば、三次元映像か否を判断する際に、三次元映像や二次元映像の時間的な連続性を考慮に入れて、三次元映像か二次元映像かの判断を行なうので、より正確に三次元映像の区間を検出することができる。
【図面の簡単な説明】
【００９６】
【図１】この発明の実施の形態１に示すシステム構成ブロック図である。
【図２】実施の形態１における表示動作のフロー図である。
【図３】サイドバイサイド方式による三次元映像の説明図である。
【図４】この発明に係るストリーム情報ファイルの内部データ構造を示すストリーム構成図である。
【図５】実施の形態１における映像解析部１５３の特徴比較に関する説明図である。
【図６】実施の形態１で用いられる映像解析部１５３の一例を示すブロック図である。
【図７】実施の形態１における三次元映像判定動作のフロー図である。
【図８】（Ａ）〜（Ｄ）は、図６の映像解析部１５３の各部における信号で表される映像の例を示す図である。
【図９】（Ａ）〜（Ｄ）は、図６の映像解析部１５３の各部で得られる差異値の例を示す図である。
【図１０】図６の映像解析部１５３のヒストグラムメモリ８０９でで生成されるヒストグラムの一例を示す図である。
【図１１】（Ａ）〜（Ｃ）は、映像解析部１５３で生成したヒストグラムの互いに異なる例を示す図である。
【図１２】この発明の実施の形態２における左右映像比較に関する説明図である。
【図１３】実施の形態２で用いられる映像解析部１５３の一例を示すブロック図である。
【図１４】実施の形態２における三次元映像判定動作のフロー図である。
【図１５】実施の形態２の映像解析部１５３で生成したヒストグラムの具体例を示す。
【図１６】この発明の実施の形態３で用いられる三次元映像判定部１５１の一例を示すブロック図である。
【図１７】実施の形態３における三次元映像判定動作のフロー図である。
【図１８】この発明の実施の形態４で用いられる三次元映像判定部１５１の一例を示すブロック図である。
【図１９】（Ａ）及び（Ｂ）は、実施の形態４における三次元映像判定における説明図を示す。
【符号の説明】
【００９７】
１００  映像表示装置、  １０１  システム制御部、  １０３  チューナー部、  １０４  デジタル復調部、  １０５  誤り訂正部、  １０６  番組抽出部、  １１０  ストリーム制御部、  １１１  デコーダ部、  １１２  デジタルインターフェース部、  １１３  表示部、  １２１  ストリームバッファ、  １２２  ストリーム変換部、  １３０  操作部、  １４０  デコーダブロック、  １４１  パケット分離部、  １４２  映像合成部、  １５１  三次元映像判定部、  １５３  映像解析部、  ２００  三次元画像、  ２０１  左目映像、  ２０２  右目映像、  ３１２  ストリーム情報、  ４００  パケット、  ４０１  ヘッダ情報、  ４０２  パケットＩＤ、  ８０１  遅延部、  ８０２  差分算出部、  ８０３  絶対値算出部、  ８０４  ローパスフィルタ、  ８０５  代表点抽出部、  ８０６  比較部、  ８０７  ヒストグラムテーブル、  ８０８  計数部、  ８０９  ヒストグラムメモリ、  ９０１  映像信号メモリ、  ９０２  左側ブロック抽出部、  ９０３  右側ブロック抽出部、  ９０４  最大類似度検出部。
【図１】
2010068309.tif 000003
【図２】
2010068309.tif 000004
【図３】
2010068309.tif 000005
【図４】
2010068309.tif 000006
【図５】
2010068309.tif 000007
【図６】
2010068309.tif 000008
【図７】
2010068309.tif 000009
【図８】
2010068309.tif 000010
【図９】
2010068309.tif 000011
【図１０】
2010068309.tif 000012
【図１１】
2010068309.tif 000013
【図１２】
2010068309.tif 000014
【図１３】
2010068309.tif 000015
【図１４】
2010068309.tif 000016
【図１５】
2010068309.tif 000017
【図１６】
2010068309.tif 000018
【図１７】
2010068309.tif 000019
【図１８】
2010068309.tif 000020
【図１９】
2010068309.tif 000021