(57)【要約】  複数の合成フレームのシーケンスを含むタイプの立体ビデオ信号をデコードし、各フレームは、左目用の左画像と右目用の右画像とを含む、方法およびシステムである。方法は、複数の合成フレームのうち少なくとも１つの内部の１以上のエッジを検出する段階と、エッジの検出に基づいて、ビデオ信号の立体フォーマットを判断する段階と、判断された立体フォーマットに基づいて、左画像および右画像を抽出する段階とを備える。【選択図】図２
2014519216.tif 000002
【特許請求の範囲】
【請求項１】
複数の合成フレームのシーケンスを含むタイプの立体ビデオ信号をデコードする方法であって、各フレームは、左目用の左画像と右目用の右画像とを含み、前記方法は、
前記複数の合成フレームのうち少なくとも１つの内部の１以上のエッジを検出する段階と、
前記エッジの検出に基づいて、前記ビデオ信号の立体フォーマットを判断する段階と、
判断された前記立体フォーマットに基づいて、前記左画像および前記右画像を抽出する段階と
を備え、
前記抽出する段階は、
判断された前記立体フォーマットに基づいて、前記複数の合成フレームのそれぞれに含まれている２つの画像を特定する段階と、
前記２つの画像の深さ行列を計算する段階と、
前記深さ行列に基づいて当該合成フレーム内の前景のオブジェクトの位置を特定することで、前記２つの画像のうちどちらが前記右画像で前記２つの画像のうちどちらが前記左画像であるかを判断する段階と
を含む、方法。
【請求項２】
前記検出する段階は、
画像のエッジを発見する方法を実装する数学的アルゴリズムによって、前記複数の合成フレームのうち前記少なくとも１つを処理することで行われる、請求項１に記載の方法。
【請求項３】
前記ビデオ信号の立体フォーマットを判断する段階は、
合成フレームの予め定められた立体フォーマットに対応する、予め定められたエッジの向きの情報と、検出された前記エッジを比較することで行われる、請求項２に記載の方法。
【請求項４】
前記予め定められたエッジの向きの情報は、前記エッジの統計データに含まれており、
前記統計データは、前記数学的アルゴリズムを、それぞれ異なる立体フォーマットに対応している予め定められた合成フレームに適用することで得られる、請求項３に記載の方法。
【請求項５】
前記数学的アルゴリズムで複数の合成フレームを処理することで、各立体フォーマットについて、前記エッジの前記統計データを作成する学習段階をさらに備える、請求項４に記載の方法。
【請求項６】
前記右画像および前記左画像が、予め定められた閾値より大きなサイズを有する、請求項１から５のいずれか一項に記載の方法。
【請求項７】
前記計算する段階は、
前記２つの画像のうちの第１の画像の少なくとも一部と、前記２つの画像のうちの第２の画像の対応する少なくとも一部とに実行される、請求項１に記載の方法。
【請求項８】
前記第１の画像の少なくとも一部および前記第２の画像の対応する少なくとも一部は、前記画像の左縁部と右縁部である、請求項７に記載の方法。
【請求項９】
前記第１の画像の少なくとも一部および前記第２の画像の対応する少なくとも一部は、それぞれがＮ×Ｍのサイズを持つ矩形の画素を含む、請求項７に記載の方法。
【請求項１０】
Ｎ＝Ｍである、請求項９に記載の方法。
【請求項１１】
前記複数の合成フレームは、横並び法、上下法、市松模様法からなる群から選択された方法に従って、前記右画像と前記左画像とを組み合わせて得られる、請求項１から１０のいずれか一項に記載の方法。
【請求項１２】
複数の合成フレームのストリームを含むタイプの立体ビデオ信号をデコードするシステムであって、各フレームは、左目用の左画像と右目用の右画像とを含み、
前記システムは、請求項１から１１のいずれか一項に記載の方法を実装するための手段を備える、システム。
【請求項１３】
前記立体ビデオ信号の前記立体フォーマットを判断するために、前記複数の合成フレームの１以上のそれぞれの内部の少なくとも１つのエッジを検出するために、前記複数の合成フレームの前記１以上を処理する少なくとも１つの第１の計算ユニットと、
前記１以上の合成フレームのうちの１つにおける、第１の画像および第２の画像を格納する、少なくとも１つのメモリユニットとを備える、請求項１２に記載のシステム。
【請求項１４】
前記２つの画像のうちの前記第１の画像と前記２つの画像のうちの前記第２の画像のうちいずれが前記左画像で、いずれが前記右画像かを判断するために、前記第１の画像の少なくとも一部と、前記第２の画像の対応する少なくとも一部とに対して深さ行列を計算する少なくとも１つの第２の計算ユニットを備える、請求項１３に記載のシステム。
【請求項１５】
前記第１の計算ユニットおよび前記第２の計算ユニットは、単一の処理ユニットに含まれている、請求項１４に記載のシステム。
【請求項１６】
コンピュータに、請求項１から１１のいずれか一項に記載の方法を実行させるためのプログラム。
【請求項１７】
コンピュータに、請求項１から１１のいずれか一項に記載の方法を実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、３Ｄビデオ処理に関しており、特に、立体ビデオ信号をデコードして３Ｄビデオコンテンツを表示させる方法に関する。本発明はさらに、上述した方法を実装することで３Ｄビデオを処理するシステムにも関する。
【背景技術】
【０００２】
画像またはビデオコンテンツに３Ｄエフェクトを生じさせるためには、右目と左目にそれぞれ異なる画像（特に同じ対象物（一般的にオブジェクトまたはシーン）の２つの異なるビュー）を提供する必要がある。
【０００３】
これら２つの画像は、通常左目画像および右目画像と呼ばれ、コンピュータグラフィックスで電子的に生成したり、異なる位置に置かれ、同じ対象物に向かわせた２つのカメラによって取得したりすることができる。一般的には、２つのカメラのレンズの間の距離は約６ｃｍである（これはヒトの２つの目の間の距離に類似したものである）。
【０００４】
左目画像および右目画像を異なる時点に、または異なる偏光で表示して、且つ、ユーザにシャッターメガネまたは偏光メガネを提供することで、それぞれの目に、同じ対象物の異なるビューを見せて３Ｄエフェクトを生じさせることができる。
【０００５】
このようなわけで、立体（または３Ｄ）ビデオストリームは、１つのシーケンスが左目用であり１つのシーケンスが右目用である、という２つの異なる画像シーケンスを必要とする。これには、対応する２Ｄビデオ製品に対して２倍の送信帯域が必要となり、これは、立体ビデオコンテンツのブロードキャストをしようとする放送局にとって大きな問題である。
【０００６】
この問題を解決するために、Ｂｌｕ―Ｒａｙ協会が帯域要件を低減させるための施策として考え出したのが、いわゆる「２Ｄ＋デルタ」である。この解決法では、左目画像がデシメーションなしに送信され（つまり２Ｄ画像として）、右目画像は、左目画像との間の「差分画像」として送信される。この解決法は、ＭＶＣ（Ｍｕｌｔｉ  Ｖｉｅｗ  Ｃｏｄｉｎｇ）としても知られており、ＩＴＵ  Ｈ．２６４仕様の付録Ｈにも開示されている。しかしこの解決法は、十分に帯域幅を低減させることはできない。
【０００７】
帯域幅をよりよく低減させることができる方法として、２つのビューを１つのフレーム（「合成画像」または「合成フレーム」としても知られている）に統合させる方法が知られている。統合は、２つの原画像をデシメートして、デシメートされた左画像および右画像の画素を異なる方法で合成画像にまとめることで行われる。例としては、左画像および右画像を横並びに（side-by-side）または縦並びに（いわゆる「上下」フォーマット）並べて表示する、または、市松模様に統合する、などの方法が知られている。
【０００８】
左画像と右画像を合成フレームに統合するために標準的な方法は存在していないので、様々な制作会社が３Ｄビデオコンテンツを別々の立体フォーマットに従って生成している現状である。
【０００９】
ブロードキャストで受け取ったまたはＤＶＤまたはＢｌｕｒａｙディスクまたは大容量メモリ等の助けを得て読み出した３Ｄビデオストリームを正確に再生するために、ユーザは、合成画像を生成するために利用された３Ｄフォーマットのタイプを手動で選択する必要がある。しかし、全ての状況には利用できない静的な解決法である（たとえばそれぞれ別のフォーマットの３Ｄビデオコンテンツが混在している場合には利用できない）。
【００１０】
さらには、受信側が、再生対象のビデオコンテンツの立体フォーマットを知っていたとしても（たとえば横並びの配置である、と）、合成フレームの２つの画像のいずれが左画像でいずれが右画像かはわからない、という欠点もある。右画像を左目に送り、左画像を右目に送ると、立体画像の３Ｄ表現が崩れて、視聴者にとって不快なエフェクトになる。
【００１１】
後者の欠点を克服するために、ビデオ信号（送信されたものであっても格納されているものであってもよい）に、合成画像で利用されている立体フォーマットおよび合成画像の各サブ画像の位置を示す情報パターンを埋め込む方法が知られている。
【００１２】
しかしこの解決法は、送信側における計算上の複雑度を増させ、デコーダが外挿（extrapolate）を行い、情報パターンを正確に解釈する必要がある、という問題点もある。
【発明の概要】
【発明が解決しようとする課題】
【００１３】
本発明の目的の１つは、立体ビデオ信号をデコードするための、効率性が高く、比較的コスト効率の高い方法およびシステムを提供することで、上述した欠点を克服することである。
【００１４】
本発明の別の目的としては、複数の立体フォーマット（特に合成画像を利用するもの）にも利用可能な、立体ビデオ信号をデコードするための方法およびシステムを提供することが挙げられる。
【００１５】
さらなる目的としては、ビデオ信号に情報パターンを埋め込まなくても、立体ビデオ信号の合成フレームの右画像および左画像を特定することのできる、立体ビデオ信号をデコードするための方法およびシステムの提供が挙げられる。
【課題を解決するための手段】
【００１６】
本発明のこれらおよびその他の目的は、添付請求項の特徴を組み込んだ、立体ビデオ信号をデコードするための方法およびシステムによって達成され、これらは本開示の一部を形成している。
【００１７】
本発明の一態様として、方法は、立体ビデオストリームの１以上の合成フレームを処理して、どの立体フォーマット（または合成方法）が利用されたかを判断する段階を含む。
【００１８】
この処理段階は、好適には、合成フレーム内のエッジを発見する方法を実装する数学的アルゴリズム（たとえば離散ラプラス・オペレータ）によって行われるとよい。
【００１９】
画像のエッジとは、強度（intensity）の大きなコントラストを持つ領域のことである。合成画像のエッジを特定することで、数学的アルゴリズムは、２つの右画像および左画像の画素群を分けるラインも発見することができる。これらラインは通常、その辺で強度の大きなコントラストをもつラインである。
【００２０】
好適には、予め定められた立体フォーマットに対応している予め定められたエッジの向きと、検出されたエッジとを比較することで、その立体ビデオの符号化に利用された立体フォーマットを判断することができる。一例としては、横並びのフォーマットは、合成フレームの中央の垂直線を有しており、上下フォーマットは、水平方向の線を有している。
【００２１】
好適には、画像が、立体フォーマットから独立した自身のエッジを有している可能性があるために、合成フレーム処理段階の結果を、同じ数学的アルゴリズムを合成画像に適用して得られた統計データと比較することができる。言い換えると、方法は、複数の合成画像を上述した数学的アルゴリズムで処理して、各立体フォーマットについて、発見されたエッジ（特に発見されたエッジの向き）の統計データを作成する、という学習段階（処理中に行ってもよいしデコーダの設計段階中に行ってもよい）を含んでよい。処理中に、デコードされたビデオ信号の立体フォーマットを特定するために、ビデオストリームの１以上の合成フレームを、エッジ取得するために処理して、結果を、統計データと比較する。
【００２２】
１つの好適な実施形態では、ビデオ信号が圧縮されている場合には（たとえばＭＰＥＧ技術によって）、立体フォーマットを特定するために利用された合成フレームは、フレームのサイズ（つまりバイト／ビットで表されたもの）に基づいて選択する。大きなバイト数をもつフレームのみを選択することによって、映画の開始部分のもの等のフレームを破棄することができる（これらの部分は大抵の場合、白黒であり、フォーマットの特定には利用できない）（もし２つの黒色画像を他のものの隣に並べてもエッジは見つからないだろう）。
【００２３】
本発明の方法によると、ビデオストリームの立体フォーマットを自動検出することができ、これは実装が非常に簡単であり、受信側の計算上の複雑度をあまり増させなので、実装コストも低く抑えることができる。
【００２４】
本発明の別の態様では、方法が、深さ行列の計算が、合成画像から抽出した２つの画像から実装される、というさらなる段階を含んでいる。
【００２５】
本発明によれば、どちらが左画像でどちらが右画像かを判断するために深さ行列を計算する。これも、統計的分析により行われる。特に前景のオブジェクトは背景のオブジェクトよりも大きな深さを有しているので、底部で深さ行列が高い値を呈している場合には、左の画像であるという正しい想定に基づいて計算されたことがわかり、反対の場合には、最初の想定が誤っており、実際の左画像が、実際には深さ行列の計算の右画像であったということがわかる。
【００２６】
したがって、ビデオ信号に情報パターンを追加せずに右画像と左画像とを認識することができる方法が好適である。送信側の計算上の複雑度は、情報パターンを利用する従来技術の方法よりも低くなる。
【００２７】
本発明の方法は、市販のデコードシステム（セットトップボックスなど）に実装することが可能である。本発明の別の態様である、上述した方法を実装するシステムは、立体ビデオストリームのフォーマットを判断するために、１以上の合成フレームのそれぞれの内部の少なくとも１つのエッジを検出する数学的アルゴリズムで、立体ビデオストリームの合成フレームの１以上を処理する少なくとも１つの第１の計算ユニットと、１以上の合成フレームのうちの１つにおける、第１の画像および第２の画像を格納する、少なくとも１つのメモリユニットとを備える。
【００２８】
本発明のさらなる特徴および利点は、本発明の立体ビデオ信号をデコードするための方法およびシステムの好適な非排他的な実施形態の詳細な記載を読むことで明らかになるが、ここでは、添付図面を参照しながら非制限的な例を説明している。
【図面の簡単な説明】
【００２９】
【図１】本発明のシステムのブロック図である。
【図２】本発明の方法のフローチャートである。
【発明を実施するための形態】
【００３０】
図面は、本発明の様々な態様および実施形態を示しており、適切な場合には、図面が違っていても、同様の構造、部材、材料、および／または、エレメントを、同様の参照番号で示している場合がある。
【００３１】
図１は、本発明の立体ビデオ信号をデコードするシステムを示しており、概略が参照番号１で示されている。
【００３２】
デコードシステム１は、図２の方法を実装することができ、それぞれが左目用の左画像と右目用の右画像とを含む複数の合成フレームのシーケンスを含むタイプの立体ビデオ信号に作用するよう構成されている。
【００３３】
図１の実施形態では、デコードシステム１が、ビデオ信号（特に立体ビデオ信号）を受信するアンテナ５を含む。
【００３４】
より詳しくは、デコードシステム１は、ビデオフレームを受信したり読み出したりするのに適したデバイスであればよい。非制限的な例として、デコードシステム１は、外部デバイスからビデオ信号を受信するレシーバ、光サポート（ＤＶＤ、ＣＤ，またはＢｌｕＲａｙ  Ｄｉｓｋ等）のためのリーダ、ＵＳＢメモリスティックおよびハードディスク等の大容量メモリのコンテンツを読み出すためのデバイス、または、磁気サポートの読み出しデバイスが備わったセットトップボックスまたはＴＶセットであってよい。
【００３５】
本発明の一態様では、デコードシステム１が、立体ビデオ信号の１以上の合成フレームを処理して、ビデオ信号の立体フォーマットを判断することのできる（こうすることで左画像および右画像を合成フレームに統合することができるようになる）第１の計算ユニット２を含む。
【００３６】
非制限的な例としては、立体フォーマットは、横並び、上下方向、市松模様形式、一行置き（line alternation）、または任意の他の公知の方法であってよい。一実施形態では、計算ユニット２は、（図２の段階２０１）で、合成フレーム内のエッジを検出する数学的アルゴリズムなどの方法によって、立体ビデオ信号の合成フレームを分析してよい。
【００３７】
合成フレームの右画像および左画像は、立体フォーマット（ひいてはその性質）によって、１以上のエッジで分けられるので、合成フレーム内のエッジを検出することで、段階２０２でビデオ信号の立体フォーマットを判断して、段階２０３で左画像および右画像を抽出することができる。
【００３８】
処理段階２０１では、計算ユニット２が、勾配法またはラプラス行列等の方法を実装する数学的アルゴリズムを利用すると好適である。アルゴリズムの例としては、デジタル画像のエッジを検出するとして知られているソーベルアルゴリズムが挙げられ、このアルゴリズムは、各画素に、エッジの値および方向を提供するので、エッジの位置および向きを表す情報（特に、行列のアンダーフォーム（under form））を出力として生成する。
【００３９】
左画像および右画像は、立体フォーマットとは無関係に独自のエッジを持つ場合があるので、好適な実施形態では、計算ユニット２が、合成フレーム処理段階を複数の合成フレームに行う。
【００４０】
一実施形態では、計算ユニット２が、合成フレームの画素に対応している複数のエレメントを含むエッジ行列を作成する。分析される各合成フレームについて、ある画素がエッジの部分である場合、対応する行列要素の値を１以上のユニット分、増加させる。このようにして、複数の合成フレームを分析した後で、計算ユニットは、合成フレームの全て（または殆ど全て）に存在するエッジを判断することができ、このエッジが立体フォーマットによるものであり、立体フォーマットを決定する際に重要である。
【００４１】
好適な実施形態では、ある画素がエッジの部分ではない場合、対応する行列要素の値を１つのユニット分、減らす。一時的なエッジがある方法でエッジ行列からスムーズアウトされていたり除去されていたりすることから、こうすることで、計算ユニット２は、立体フォーマットの検出を素早く行うことができるようになり、ひいては計算ユニット２が決定を素早く行うことができるようになる。
【００４２】
分析される合成フレーム数は、予め定められた数としてもよいし、合成フレーム処理段階の結果に応じたものとしてもよい。特に、後者の実施形態では、計算ユニット２が予め定められた確実度（たとえば９０％）で、立体フォーマットを判断することができるまで、処理段階が実行され続ける。この確実度は、垂直方向の中央エッジおよび水平方向の中央エッジの強度を判断するベイズ確率により計算される。
【００４３】
ビデオコンテンツは、一定の言葉（たとえば冒頭の表示）が含まれる黒色のフレームから始められる場合がある。このタイプのフレームは、１つの右画像に関しており、他方が左画像に関している２つの黒色領域を並置したところで、エッジは生成されず、言葉がスクリーンのｚ層に配置されている場合が多いために、立体ビデオフォーマットを特定する用途には適していない。したがって好適な実施形態では、合成フレーム処理ステップは、像（figures）またはオブジェクトを含むことがわかっているフレームに選択的に行われる。
【００４４】
圧縮されたデジタルビデオストリームの場合には、これらフレームの特定は、フレームのサイズに基づいて行われる。大きな均一の領域を含むフレーム（冒頭の黒いフレームなど）は、画像に複数のオブジェクトを含むフレームよりずっと大きな圧縮がなされているので、好適な実施形態では、計算ユニット２が、予め定められた閾値より大きなファイルサイズをもつフレームを分析する。
【００４５】
一実施形態では、合成フレームに実行されたエッジ検出分析の結果を、計算ユニットの学習段階中に得られたデータと比較する。この学習段階中には、同じタイプのエッジ検出分析を、それぞれ異なる立体フォーマットの複数の合成画像に実行する。一実施形態では、各タイプの立体フォーマットに対して、合成フレーム内のエッジ分布を示す統計テーブルを生成する。こうすることで、処理中に、１以上の合成フレームに同じエッジ検出分析を行って、統計データの結果と比較することで、ビデオストリームの立体フォーマットを特定することができるようになる。比較は、たとえば、分析されたビデオストリームに行われたエッジ検出分析の結果のベクトルを、異なる立体フォーマットの学習段階中に構築されたエッジ検出分析の結果の空間に投影させて、投影エラーを計算することで行われる。一定の空間の投影エラーが予め定められた閾値を下回る場合には、ビデオストリームの立体フォーマットが、このスペースに関する立体フォーマットであると判断する。
【００４６】
立体フォーマットが特定されると、それを含む２つの画像を特定することができ、この結果、左画像および右画像を抽出することができる（段階２０３）。
【００４７】
本発明の別の態様として、システム１は、上述したプロセスで特定された２つの画像を格納することができるメモリユニット３を含む。
【００４８】
この段階までは、方法は、本質的に、２つの画像のどちらが左画像でどちらが右画像かを知ることができない。したがってデコードシステムは、立体フォーマットに基づいて左画像を判断することができるよう設定されていてよい（たとえば、フォーマットが上下フォーマットである場合には、デコードシステムは、上部画像が左画像であると判断するよう設定されていてよく、フォーマットが横並びフォーマットである場合には、デコードシステムは、合成フレームの左半分が左画像であると判断するよう設定されていてよい）。
【００４９】
一実施形態では（図２の段階２０４で）、システム１は、合成フレームのどちらが左画像でどちらが右画像かを検出する。これを達成するために、デコードシステム１は、さらに、合成フレームに対応するシーン内のオブジェクトの深さを示す深さ行列を計算する（段階２０４）ための第２の計算ユニット４を含んでよい。
【００５０】
深さ行列（視差行列（disparity matrix）を称される場合もある）を計算するアルゴリズムは本質的に公知なので、本明細書では説明しない。一例としては、ＭａｔｈＷｏｒｋｓ（登録商標）が提供する深さ行列を計算するアルゴリズムがある。
【００５１】
これらアルゴリズムは、入力として左画像および右画像を必要とする。
【００５２】
画像の前景では、背景のオブジェクトより大きな深さを有するように見えるので、深さ行列が右画像として実際の右画像を利用することで正確に計算されている場合、深さ行列は、下半分で高い値を呈すると予期される。深さ行列における高い深さ値をもつ位置をチェックすることで、合成フレームの右画像および左画像を特定することができる（段階２０５）。
【００５３】
深さ行列は、左画像および右画像全体を利用して計算することができるが、これには、莫大な計算複雑度が必要となる。
【００５４】
この理由から、一実施形態では、深さ行列を、合成フレームの一部分（reduced portion）のみについて、したがって左画像および右画像の対応する部分のみを利用して計算する。大抵の場合、これら対応する部分はそれぞれ、該画像の連続した画素群を少なくとも１つ含む。さらに、連続した画素群それぞれは、一辺がＮ個の画素であり他辺がＭ個の画素である矩形に構成された画素からなる。
【００５５】
好適には、考慮される画素群が正方形であり（Ｎ＝Ｍ）、その寸法は、圧縮で考慮される基本単位（elementary unit）に対して完全な相関性を有している。
【００５６】
たとえばＭＰＥＧ  Ｈ．２６４符号化では、圧縮で考慮される基本単位は、クロミナンス行列（chrominance matrix）に利用される８ｘ８画素のブロックであるので、Ｎ＝８である。一実施形態では、ビデオストリームが、合成フレームを送るタイプのＭＰＥＧ圧縮ビデオストリームである場合には（したがい、ＭＶＣに従っては圧縮されない）、デコードシステム１が実行する処理段階（２０１―２０５）は、一部のフレームにみに実行される（特にＩ個のフレームのみ）。
【００５７】
画像の左縁および右縁が、なにかしら関連する深さの手がかり（つまりエッジ）を含んでいる場合、画像のこれらの部分は、左画像および右画像を検出するのに適している。スクリーンの垂直方向の縁部のオブジェクトは、オブジェクトの背後にあり、３Ｄの幻覚を壊してしまうことから、利用してもビデオのフレームからカットされてしまうので、利用しない、というのが慣行になっている。したがってこれらの領域のオブジェクトは、全てが、スクリーン層上にあるか、またはスクリーン層の背後にあるべきである。こうしないと、左画像と右画像とが取り換えられてしまう。
【００５８】
本発明の別の態様では、第１の計算ユニット２および第２の計算ユニット４が、単一のＣＰＵ、または、これに類したものによって構成されてよい。
【００５９】
動作上では、デコードシステム１が、立体ビデオ信号を受信したり読み出したりすると、本発明のシステム１の第１の計算ユニット２が、受信した合成フレームの１以上の処理を開始して、立体フォーマットを判断する。
【００６０】
この分析が終わると、システム１は、立体フォーマットがわかり、（好適な実施形態では）、合成フレームの２つの画像のいずれが左画像で、いずれが右画像であるかを検出することができる。
【００６１】
第１の計算ユニット２は、各合成フレームの２つのサブ画像を分けて、これらをメモリユニットに格納する。
【００６２】
次の段階では、第２の計算ユニット４が、メモリユニット３から、同じ合成フレームから抽出した画像対をとりだして、深さ行列を計算する。
【００６３】
深さ行列の深さ値の分布を分析することで、第２の計算ユニット４は、前景のオブジェクトが行列の下半分または上半分にあるかを特定して、どちらが左のビューでどちらが右のビューかを判断する。
【００６４】
上述した説明は、本発明が、指定された目的を達成しており、特に、先行技術の欠点をいくつか克服していることを示している。
【００６５】
上述した方法およびシステムは、効率が高く、比較的コスト効率が高い。
【００６６】
方法を実装する上述した方法およびシステムは、ユーザの介入なしに、さらに、立体ビデオ信号に情報パターンを埋め込む必要なく、立体ビデオストリームを自動的にデコードすることができる。
【００６７】
本発明の方法は、プログラムがコンピュータで実行されたときに、方法の１以上の段階を実装するためのプログラム符号化手段を含むコンピュータのプログラムによって実装されると効果を発揮することができる。したがって、本発明の保護範囲は、メッセージが記録されているコンピュータ可読手段に加えて、コンピュータ用のプログラムにも拡張可能であり、該コンピュータ可読手段は、プログラムがコンピュータで実行されたときに方法の１以上の段階を実装するためのプログラム符号化手段を含んでいる。
【００６８】
本発明のシステムおよび方法は、添付請求項が定義する発明の思想の範囲内で、複数の変更例および変形例が可能である。すべての詳細は、本発明の範囲から逸脱せずに、他の技術的な均等物により置き換えることができる。
【００６９】
システムおよび方法は、添付図面を参照しながら説明されたが、明細書および請求項で利用される数は、本発明をわかりやすくするためのものであり、請求項の範囲をいかなる形であっても制限する意図はもたない点に留意されたい。
【００７０】
当業者であれば、上記の記載の教示を読めば本発明を実施することができると思われるので、さらなる実装の詳細は記載しない。
【図１】
2014519216.tif 000003
【図２】
2014519216.tif 000004
【国際調査報告】
2014519216.tif 000005
2014519216.tif 000006
2014519216.tif 000007