(57)【要約】  各視点に対して均一な画質を提供できる多視点映像符号化及び復号化方法及び装置を提供する。本発明の多視点映像符号化方法は、入力される多視点映像のうち異なる視点の映像が参照する参照視点映像セットを選択するステップと、参照視点映像セットに基づいて多視点映像を符号化するステップと、参照視点映像セットを変更する条件を満足するか否かを決定するステップと、条件を満足すれば、参照視点映像セットを変更するステップと、変更された参照視点映像セットに基づいて多視点映像を符号化するステップと、を含む。本発明によれば、長時間をかけて各視点間の画質の劣化程度が均一な多視点映像を提供できる。
2009529825.tif 000002
【特許請求の範囲】
【請求項１】
入力される多視点映像のうち異なる視点の映像が参照する参照視点映像セットを選択するステップと、
前記参照視点映像セットに基づいて多視点映像を符号化するステップと、
前記参照視点映像セットを変更する条件を満足するか否かを決定するステップと、
前記条件が満足すれば、参照視点映像セットを変更するステップと、
前記変更された参照視点映像セットに基づいて多視点映像を符号化するステップと、を含むことを特徴とする多視点映像符号化方法。
【請求項２】
前記参照視点映像セットを変更する条件を満足するか否かを決定するステップは、
所定の単位時間の経過を基準として前記条件を満足するか否かを決定することを特徴とする請求項１に記載の多視点映像符号化方法。
【請求項３】
前記所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ単位またはピクチャー単位のうち一つであることを特徴とする請求項２に記載の多視点映像符号化方法。
【請求項４】
前記参照視点映像セットを変更するステップは、
参照視点映像セットを順次的または任意的に変更するステップを含むことを特徴とする請求項１に記載の多視点映像符号化方法。
【請求項５】
前記多視点映像を符号化するステップは、
前記参照視点映像セットを、自身の視点の映像情報のみを利用して符号化して参照視点映像ビットストリームを生成するステップと、
前記参照視点映像セットとして選択されていない非参照視点映像セットを、前記参照視点映像セットとの視差ベクトルを利用して符号化して、非参照視点映像ビットストリームを生成するステップと、を含むことを特徴とする請求項１に記載の多視点映像符号化方法。
【請求項６】
前記非参照視点映像ビットストリームを生成するステップは、各非参照視点映像が参照する参照視点映像についての情報を付加するステップを含み、前記参照視点映像についての情報は、参照視点識別子を含むことを特徴とする請求項５に記載の多視点映像符号化方法。
【請求項７】
前記参照視点映像ビットストリーム及び前記非参照視点映像ビットストリームを多重化して伝送するステップをさらに含むことを特徴とする請求項５に記載の多視点映像符号化方法。
【請求項８】
入力される多視点映像のうち異なる視点の映像が参照する参照視点映像セットを選択する参照視点映像選択部と、
前記参照視点映像セットに基づいて多視点映像を符号化する符号化部と、
前記参照視点映像セットを変更する条件を満足するか否かを決定する条件決定部と、を備え、
前記条件決定部で前記条件を満足すると決定されれば、前記参照視点映像選択部は、参照視点映像セットを変更し、前記符号化部は、変更された参照視点映像セットに基づいて多視点映像を符号化することを特徴とする多視点映像符号化装置。
【請求項９】
前記条件決定部は、
所定の単位時間の経過を基準として前記条件を満足するか否かを決定することを特徴とする請求項８に記載の多視点映像符号化装置。
【請求項１０】
前記所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ単位またはピクチャー単位のうち一つであることを特徴とする請求項９に記載の多視点映像符号化装置。
【請求項１１】
前記参照視点映像選択部は、
前記参照視点映像セットを変更するとき、前記参照視点映像セットを順次的または任意的に変更することを特徴とする請求項８に記載の多視点映像符号化装置。
【請求項１２】
前記符号化部は、
前記参照視点映像セットを自身の視点の映像の情報のみを利用して符号化して、参照視点映像ビットストリームを生成する参照視点映像符号化部と、
前記参照視点映像セットとして選択されていない非参照視点映像セットを、前記参照視点映像セットとの視差ベクトルを利用して符号化して、非参照視点映像ビットストリームを生成する非参照視点映像符号化部と、を備えることを特徴とする請求項８に記載の多視点映像符号化装置。
【請求項１３】
前記非参照視点映像符号化部は、各非参照視点映像が参照する参照視点映像についての情報を付加して非参照視点ビットストリームを生成し、前記参照視点映像についての情報は、参照視点識別子を含むことを特徴とする請求項１２に記載の多視点映像符号化装置。
【請求項１４】
前記参照視点映像ビットストリーム及び前記非参照視点映像ビットストリームを多重化して伝送する多重化部をさらに備えることを特徴とする請求項１２に記載の多視点映像符号化装置。
【請求項１５】
参照視点映像ビットストリーム及び参照視点映像についての情報を含む非参照視点映像ビットストリームを受信するステップと、
前記参照視点映像ビットストリームを復号化するステップと、
前記参照視点映像についての情報が表す参照視点映像に対する視差予測を行って、前記非参照視点映像ビットストリームを復号化するステップと、を含み、
前記非参照視点映像ビットストリームに含まれた前記参照視点映像についての情報は、各非参照視点映像が参照する参照視点映像の参照視点識別子を含み、所定の単位時間に基づいて変更されることを特徴とする多視点映像復号化方法。
【請求項１６】
前記所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ単位またはピクチャー単位のうち一つであることを特徴とする請求項１５に記載の多視点映像復号化方法。
【請求項１７】
参照視点映像ビットストリームを受信して復号化する参照視点映像復号化部と、
参照視点映像についての情報を含む非参照視点映像ビットストリームを受信し、前記参照視点映像についての情報が表す参照視点映像に対する視差予測を行って、前記非参照視点映像ビットストリームを復号化する非参照視点映像復号化部と、を備え、
前記非参照視点映像ビットストリームに含まれた前記参照視点映像についての情報は、各非参照視点映像が参照する参照視点映像の参照視点識別子を含み、所定の単位時間に基づいて変更されることを特徴とする多視点映像復号化装置。
【請求項１８】
前記所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ単位またはピクチャー単位のうち一つであることを特徴とする請求項１７に記載の多視点映像復号化装置。
【請求項１９】
請求項１に記載の方法を具現するためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【請求項２０】
請求項１５に記載の方法を具現するためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、多視点映像符号化及び復号化方法及び装置に係り、特に各視点に対して均一な画質を提供できる多視点映像符号化及び復号化方法及び装置に関する。
【背景技術】
【０００２】
図１は、多視点動画入力システムの一例を示す図である。図１に示すように、多視点動画は、多数のカメラから各視点ごとに入力される複数の動画をいう。したがって、多視点動画を符号化するための装置は、多数のカメラから各視点ごとに多数の動画が入力により提供される。したがって、多視点動画は、根本的に相当な大きさのデータ容量を占め、多視点動画を利用した効果的な３Ｄサービスのためには、圧縮符号化過程が必須的に要求される。
【０００３】
現在、多視点符号化に対する標準としては、ＭＰＥＧ（Ｍｏｔｉｏｎ  ＶｉｄｅｏＥｘｐｅｒｔｓ  Ｇｒｏｕｐ）−２  ＭＶＰ（Ｍｕｌｔｉ−Ｖｉｅｗ  Ｐｒｏｆｉｌｅ）が唯一である。ＭＰＥＧで３Ｄ−ＡＶ標準案を準備している。ＭＰＥＧ−２  ＭＶＰは、ステレオ映像に限定された標準であるが、ＭＰＥＧ  ３Ｄ−ＡＶでは、１−Ｄパラレル、２−Ｄパラレル、１−Ｄアークのようなカメラ配列に対応する多視点映像符号化に対する標準化を準備している。
【０００４】
図２は、ＭＰＥＧ−２  ＭＶＰを適用した一例を説明する図である。
【０００５】
ＭＰＥＧ−２  ＭＶＰでは、左側視点映像と右側視点映像とを利用して３次元映像を符号化するとき、二つの映像間の関連性を探して二つの映像間の差をネットワークの状態によって可変的に符号化するスケーラブルコデックを使用して３次元映像を符号化して再生する。このとき、左側映像を基本階層映像と、右側映像を向上階層映像と決めて符号化する。基本階層映像は、それ自体のみで符号化される映像をいい、向上階層映像は、基本階層映像の質を向上させるために、ネックワークの状態が良好である時にさらに符号化して送る映像である。このように基本階層映像と向上階層映像とをいずれも使用して符号化することをスケーラブルコーディングという。
【０００６】
図２において、基本階層である左側視点の映像は、他の視点の映像の視差情報を利用せず、既存のメインプロファイルのような方法で符号化する。すなわち、空間的時間的リダンダンシーを減らすために、イントラコーディング及び動き補償コーディング方法でコーディングする。一方、右側視点の映像は、左側視点の映像から視差予測及び自身の視点の映像から動き予測を行う方法で映像を符号化する。しかし、ＭＰＥＧ−２  ＭＶＰの規格自体は、多視点動画に対する符号化器を考慮せず、実際に多視点動画に適するように設計されていないので、多数の人に同時に立体感及び現場感を提供するための多視点映像を効率的に提供できる符号化器が必要である。
【発明の開示】
【発明が解決しようとする課題】
【０００７】
本発明が解決しようとする課題は、多視点映像を効率的に符号化して復号化し、各視点の映像に対して均一な画質を提供できる多視点映像符号化及び復号化方法及び装置を提供するところにある。
【課題を解決するための手段】
【０００８】
前記課題を解決するために、本発明の一特徴による多視点映像符号化方法は、入力される多視点映像のうち異なる視点の映像が参照する参照視点映像セットを選択するステップと、参照視点映像セットに基づいて多視点映像を符号化するステップと、参照視点映像セットを変更する条件を満足するか否かを決定するステップと、条件を満足すれば、参照視点映像セットを変更するステップと、変更された参照視点映像セットに基づいて多視点映像を符号化するステップと、を含む。
【０００９】
前記課題を解決するために、本発明の他の特徴による多視点映像符号化装置は、入力される多視点映像のうち異なる視点の映像が参照する参照視点映像セットを選択する参照視点映像選択部と、参照視点映像セットに基づいて多視点映像を符号化する符号化部と、参照視点映像セットを変更する条件を満足するか否かを決定する条件決定部と、を備え、条件決定部で条件を満足すると決定されれば、参照視点映像選択部は、参照視点映像セットを変更し、符号化部は、変更された参照視点映像セットに基づいて多視点映像を符号化する。
【００１０】
前記課題を解決するために、本発明のさらに他の特徴による多視点映像復号化方法は、参照視点映像ビットストリーム及び参照視点映像についての情報を含む非参照視点映像ビットストリームを受信するステップと、参照視点映像ビットストリームを復号化するステップと、参照視点映像についての情報が表す参照視点映像に対する視差予測を行って、非参照視点映像ビットストリームを復号化するステップと、を含み、非参照視点映像ビットストリームに含まれた参照視点映像についての情報は、各非参照視点映像が参照する参照視点映像の参照視点識別子を含み、所定の単位時間に基づいて変更される。
【００１１】
前記課題を解決するために、本発明のさらに他の特徴による多視点映像復号化装置は、参照視点映像ビットストリームを受信して復号化する参照視点映像復号化部と、参照視点映像についての情報を含む非参照視点映像ビットストリームを受信し、参照視点映像についての情報が表す参照視点映像に対する視差予測を行って、非参照視点映像ビットストリームを復号化する非参照視点映像復号化部と、を備え、非参照視点映像ビットストリームに含まれた参照視点映像についての情報は、各非参照視点映像が参照する参照視点映像の参照視点識別子を含み、所定の単位時間に基づいて変更される。
【発明の効果】
【００１２】
本発明によれば、長時間をかけて各視点間の画質の劣化程度が均一に分布される多視点映像符号化及び復号化方法を提供できる。
【００１３】
したがって、多視点映像のうち任意の視点の映像を選択して復号化する場合、その視点の原本に対する画質の劣化が低いか、または高い状態に固定されて持続されず、他の視点の映像と比較して均一な劣化程度を有することができる。
【発明を実施するための最良の形態】
【００１４】
以下、添付した図面を参照して、本発明の望ましい実施形態について詳細に説明する。
【００１５】
本明細書において、自身の視点の映像についての情報のみを利用してイントラ及びインター符号化する視点の映像を参照視点映像といい、参照視点映像との視差予測を利用して符号化される映像を非参照視点映像という。
【００１６】
図３は、６個の視点で構成された多視点映像符号化を説明する図である。
【００１７】
視点０，２，４の映像は、参照視点であって、自身の視点の映像についての情報のみを利用してイントラ及びインター符号化方法で符号化される参照視点映像セットである。視点１，３，５は、隣接の参照視点から視差予測方法をさらに含む符号化を行う非参照視点映像セットである。図３の矢印で表示されたように、視点１の映像は、視点０及び視点２の映像を参照して視差予測符号化を行う。視点３の映像は、視点２及び視点４の映像を参照して視差予測符号化を行う。視点５は、視点４を参照して視差予測符号化を行う。
【００１８】
例えば、視点５の映像は、隣接した視点４の映像を参照して視差ベクトルを決定する。決定された視差ベクトルを利用して視点５の映像に対して復元映像を形成し、原本映像と復元映像との差値に対して符号化される。視点５の映像を符号化するとき、視差予測を利用する以外に自身の視点の映像に対するインター符号化をさらに行うこともできる。
【００１９】
このように、それぞれの視点の映像に対して独立的に符号化せず、所定の視点に対する映像に対しては他の視点の映像を参照して符号化することによって、全体視点の帯域幅が減少しうる。多視点映像の個数、参照視点映像の個数と位置、視差予測を行う非参照視点映像の個数及び各非参照視点映像が視差予測のために参照する映像の視点は、多様に変形しうる。
【００２０】
しかし、図３に示したように参照視点が固定されている場合には、各視点の映像間の時間によるＰＳＮＲ（Ｐｅａｋ  Ｓｉｇｎａｌ  ｔｏ  Ｎｏｉｓｅ  Ｒａｔｅ）差が発生する。ＰＳＮＲを高めるための符号化方法が研究されているが、各画質の限界は、それぞれの視点の映像を独立的に符号化するサイマルキャスト符号化方法となる。各視点の映像間の時間によるＰＳＮＲが不均衡になれば、それらの映像のデコーディング時にデコーディングした視点の映像間の画質劣化程度の差が発生する。画質劣化程度の差は、各視点についての映像情報の分布の不均衡を意味する。したがって、参照視点映像に比べて相対的に原本映像からの画質劣化程度が高い視点の映像が固定されて存在し、ユーザーが多視点映像のうち固定的に画質劣化程度が高い視点を選択する場合、参照視点映像に比べて常に原本映像と相当な差がある映像がユーザーに提供される。
【００２１】
図４は、本発明の一実施形態による均一な画質を提供する多視点映像符号化方法を示すフローチャートである。
【００２２】
ステップＳ４１０で、入力される多視点映像のうち異なる視点の映像の参照視点映像となる参照視点映像セットを選択する。
【００２３】
ステップＳ４２０で、参照視点映像セットに基づいて多視点映像を符号化する。参照視点映像セットは、自身の視点に存在する映像のみを利用して符号化されて、参照視点映像ビットストリームとして生成される。参照視点映像セットとして選択されていない非参照視点映像セットは、参照視点映像との視差ベクトルを利用して符号化されて、非参照視点映像ビットストリームとして生成される。非参照視点映像ビットストリームには、符号化時に各非参照視点映像が参照する参照視点映像についての情報が付加されるように符号化される。例えば、非参照視点映像ビットストリームのシンタックス上にそれらが参照する参照視点が表示される方法が使われる。したがって、デコーディング時に非参照視点映像ビットストリームに含まれた参照視点映像についての情報を利用して非参照視点映像セットを復号化できる。
【００２４】
ステップＳ４３０で、参照視点映像セットを変更するための条件を満足するか否かを決定する。参照視点と非参照視点との映像間の画質の不均衡が固定されることを避けるためである。ステップＳ４３０で、所定の単位時間が経過したかどうかを利用して参照視点映像セットを変更する条件を満足するか否かを決定する。ここで、所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ（Ｇｒｏｕｐ  Ｏｆ  Ｐｉｃｔｕｒｅ）単位またはピクチャー単位のうち一つであるが、それらに限定されるものではない。
【００２５】
ステップＳ４３０で条件が満足すれば、ステップＳ４４０で参照視点映像セットを変更する。参照視点映像セットを変更するステップＳ４４０で、参照視点映像セットは、順次に変更される。または、参照視点映像セットは、任意的に変更されることもある。
【００２６】
参照視点映像セットが変更されれば、再びステップＳ４２０に戻る。すなわち、変更された参照視点映像セットに基づいて多視点映像を符号化する。
【００２７】
図５は、本発明の一実施形態による均一な画質を提供する多視点映像符号化を説明する図である。
【００２８】
図４を参照して説明したように、本発明によれば、各視点の画質が均一な多視点映像を提供するために、所定の条件を満足すれば、参照視点映像セットを変更する方法で多視点映像を符号化する。例えば、図３に示したように初期の参照視点映像セットが０，２，４である場合、参照視点が固定されず、所定の条件を満足すれば、図５に示したように視点１，３，５が参照視点映像に変更されて選択される。
【００２９】
例えば、所定の条件がＧＯＰである場合、一つのＧＯＰが符号化中である時には条件を満足するものではないので、既に選択された参照視点映像セットに基づいて多視点映像を符号化する。一つのＧＯＰの符号化が終了すれば、条件を満足するので、参照視点映像セットが視点１，３，５の映像から視点０，２，４の映像に変更されて選択される。次いで、変更された参照視点映像セットに基づいて多視点映像符号化を行う。一方、非参照視点映像を符号化するとき、例えば、図５において、視点２の映像の符号化されたビットストリームには、参照視点が視点１及び３という情報が含まれるように符号化される。
【００３０】
図６Ａないし図６Ｃは、本発明の他の実施形態による均一な画質を提供する多視点映像符号化を説明する図である。図６Ａないし図６Ｃは、参照視点映像が二つである場合の一例を示す図である。図６Ａに示すように、初期の参照視点映像セットは、視点０及び３である。それらの視点の映像は、他の視点の映像から視差予測を行わず、自身の視点の映像からイントラ及びインター符号化方法を利用して符号化される。視点１，２，４，５の映像は、視点０，３の映像から視差予測を行って符号化される。例えば、図６Ａに示すように、視点１の映像は、参照視点０と参照視点３との映像から視差予測を行って符号化される。
【００３１】
次いで、参照視点映像セットを変更する所定の条件を満足するか否かを決定する。例えば、所定の条件がＧＯＰの間隔である場合、一つのＧＯＰに対する符号化が終了すれば、参照視点映像セットを変更する。参照視点映像セットは、順次的または任意的に変更されて選択される。参照視点映像セットは、初期の参照視点映像セットが視点０，３であるとき、視点１，２に変更されるか、または視点１，５に変更されるように任意的に変更されて選択される。
【００３２】
参照視点映像セットを順次に変更する方法を説明すれば、図６Ｂに示すように、視点１，４を参照視点セットとして選択する。したがって、視点１，４は、自身の視点の映像からイントラ及びインター符号化を行って符号化され、残りの視点０，２，３，５の映像は、参照視点の映像らから視差予測を行って符号化される。
【００３３】
再び一つのＧＯＰに対する符号化が終了すれば、図６Ｃに示したように視点２，５の映像を参照視点映像セットに変更する。変更された参照視点映像セットを始めとして一つのＧＯＰが符号化される間に、視点２，５の映像は、自身の視点の映像を利用してイントラ及びインター符号化を行って符号化され、視点０，１，３，４の映像は、視点２，５の映像を参照視点映像として視差予測を行って符号化される。
【００３４】
図７は、本発明の一実施形態による均一な画質を提供する多視点映像符号化装置を示すブロック図である。
【００３５】
本発明の一実施形態による多視点映像符号化装置７００は、参照視点映像選択部７１０、符号化部７２０、条件決定部７３０及び多重化部７４０を備える。
【００３６】
参照視点映像選択部７１０は、入力される多視点映像のうち、符号化時に他の視点の映像の参照映像として利用される参照視点映像セットを選択する。符号化部７２０は、選択された参照視点映像セットに基づいて多視点映像を符号化する。
【００３７】
条件決定部７３０は、参照視点映像セットを変更する条件を満足するか否かを決定する。条件決定部７３０は、所定の単位時間の経過を基準として条件を満足するか否かを判断する。所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ単位またはピクチャー単位のうち一つであるが、それらに限定されない。
【００３８】
条件決定部７３０で条件を満足すると決定されれば、参照視点映像選択部７１０に条件を満足することを表す信号を送信する。参照視点映像選択部７１０は、条件決定部７３０から受信される信号によって参照視点映像セットを変更する。参照視点映像選択部７１０は、カウンタ（図示せず）または乱数発生器（図示せず）を備えて参照視点映像を順次的または任意的に変更できる。
【００３９】
符号化部７２０は、参照視点映像符号化部７２１及び非参照視点映像符号化部７２３を備えて、参照視点映像及び非参照視点映像をそれぞれ符号化できる。参照視点映像符号化部７２１は、それぞれの参照視点映像が自身の視点映像の情報のみを利用して符号化されるように、参照視点映像セットを符号化して参照視点映像ビットストリームを生成する。非参照視点符号化部７２３は、参照視点映像セットとの視差ベクトルを利用して非参照視点映像を符号化する。非参照視点映像セット符号化部７２３は、非参照視点映像を符号化するとき、参照視点映像についての情報を付加して非参照視点映像ビットストリームを生成する。参照視点映像についての情報は、それぞれの非参照視点映像が参照する参照視点識別子情報でありうる。
【００４０】
参照視点映像符号化部７２１から生成された参照視点映像ビットストリーム、及び非参照視点映像符号化部７２３から生成された非参照視点映像ビットストリームは、独立的に伝送されてもよく、または多重化部７４０を通じて多重化されて復号化端へ伝送されてもよい。
【００４１】
図８は、本発明の一実施形態による均一な画質を提供する多視点映像復号化方法を示すフローチャートである。
【００４２】
ステップＳ８１０で、参照視点映像ビットストリーム及び参照視点映像についての情報を含む非参照視点映像ビットストリームを受信する。参照視点映像ビットストリーム及び非参照視点映像ビットストリームが多重化されて伝送される場合には、ステップＳ８１０以前に受信される多視点映像ビットストリームを参照視点映像ビットストリーム及び非参照視点映像ビットストリームに逆多重化するステップをさらに含む。
【００４３】
ステップＳ８２０で、参照視点映像ビットストリームを復号化する。ステップＳ８３０で、参照視点映像についての情報で表す参照視点映像に対する視差予測を行って、非参照視点映像ビットストリームを復号化する。
【００４４】
非参照視点映像ビットストリームに含まれた参照視点映像についての情報は、所定の単位時間に基づいて変更される。所定の単位時間は、所定の時間単位、シーケンス単位、ＧＯＰ単位またはピクチャー単位のうち一つである。このように、所定の単位時間ごとに参照視点映像が変更され、変更された参照視点映像に対して視差予測が行われることによって、多視点映像のうち、任意の視点の映像に対して画質劣化程度の均一な多視点映像を提供できる。
【００４５】
図９は、本発明の一実施形態による均一な画質を提供する多視点映像復号化装置を示すブロック図である。
【００４６】
本発明の一実施形態による多視点映像復号化装置９００は、逆多重化部９１０及び復号化部９２０を備える。多視点映像復号化装置９００は、ＦＴＶ（Ｆｒｅｅ  Ｖｉｅｗｐｏｉｎｔ  Ｔｅｌｅｖｉｓｉｏｎ）や３ＤＴＶ（３  ＤｉｍｅｎｓｉｏｎａｌＴｅｌｅｖｉｓｉｏｎ）で構成される。
【００４７】
逆多重化部９１０は、参照視点映像ビットストリーム及び参照視点映像についての情報を含む非参照視点映像ビットストリームが多重化されて伝送される場合、多視点映像ビットストリームを参照視点映像ビットストリーム及び非参照視点映像ビットストリームに逆多重化する。
【００４８】
復号化部９２０は、参照視点映像ビットストリームを受信して復号化する参照視点映像復号化部９２１、及び非参照視点映像ビットストリームを受信して復号化する非参照視点映像復号化部９２３を備える。復号化部９２０の非参照視点映像復号化部９２３は、非参照視点映像ビットストリームを復号化するとき、参照視点識別子のような参照視点映像についての情報で表す参照視点映像に対する視差予測を行う。非参照視点映像ビットストリームに含まれた参照視点映像についての情報は、所定の単位時間に基づいて変更される。したがって、多視点映像復号化装置９００を備える３ＤＴＶやＦＴＶを使用するユーザーは、いかなる視点の映像を選択しても、時間をかけて各視点間の画質が均一な映像を提供されることができる。
【００４９】
本発明による方法は、コンピュータで読み取り可能な記録媒体にコンピュータで読み取り可能なコードとして具現される。前記プログラムを具現するコード及びコードセグメントは、当該分野のコンピュータプログラマにより容易に推論される。コンピュータで読み取り可能な記録媒体は、コンピュータシステムにより読み取られるデータが保存されるあらゆる種類の記録装置を含む。コンピュータで読み取り可能な記録媒体の例としては、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＣＤ−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク、光ディスクなどがあり、また、キャリアウェーブ（例えば、インターネットを通じた伝送）の形態で具現されるものを含む。また、コンピュータで読み取り可能な記録媒体は、ネットワークに連結されたコンピュータシステムに分散されて、分散方式でコンピュータで読み取り可能なコードが保存されて実行される。
【００５０】
前述したように、本発明によれば、長時間をかけて各視点間の画質の劣化程度が均一に分布される多視点映像符号化及び復号化方法を提供できる。
【００５１】
したがって、多視点映像のうち任意の視点の映像を選択して復号化する場合、その視点の原本に対する画質の劣化が低いか、または高い状態に固定されて持続されず、他の視点の映像と比較して均一な劣化程度を有することができる。
【００５２】
以上の説明は、本発明の一実施形態に過ぎず、当業者は、本発明の本質的な特性から逸脱しない範囲で変形された形態で具現できることである。したがって、本発明の範囲は、前述した実施形態に限定されず、特許請求の範囲に記載された内容と同等な範囲内にある多様な実施形態が含まれるように解釈されねばならない。
【図面の簡単な説明】
【００５３】
【図１】多視点動画入力システムの一例を示す図である。
【図２】ＭＰＥＧ−２  ＭＶＰを適用した一例を説明する図である。
【図３】６個の視点で構成された多視点映像符号化を説明する図である。
【図４】本発明の一実施形態による均一な画質を提供する多視点映像符号化方法を示すフローチャートである。
【図５】本発明の一実施形態による多視点映像符号化を説明する図である。
【図６Ａ】本発明の他の実施形態による均一な画質を提供する多視点映像符号化を説明する図である。
【図６Ｂ】本発明の他の実施形態による均一な画質を提供する多視点映像符号化を説明する図である。
【図６Ｃ】本発明の他の実施形態による均一な画質を提供する多視点映像符号化を説明する図である。
【図７】本発明の一実施形態による均一な画質を提供する多視点映像符号化装置を示すブロック図である。
【図８】本発明の一実施形態による均一な画質を提供する多視点映像復号化方法を示すフローチャートである。
【図９】本発明の一実施形態による均一な画質を提供する多視点映像復号化装置を示すブロック図である。
【図１】
2009529825.tif 000003
【図２】
2009529825.tif 000004
【図３】
2009529825.tif 000005
【図４】
2009529825.tif 000006
【図５】
2009529825.tif 000007
【図６Ａ】
2009529825.tif 000008
【図６Ｂ】
2009529825.tif 000009
【図６Ｃ】
2009529825.tif 000010
【図７】
2009529825.tif 000011
【図８】
2009529825.tif 000012
【図９】
2009529825.tif 000013
【国際調査報告】
2009529825.tif 000014
2009529825.tif 000015