(57)【特許請求の範囲】
【請求項１】
動画像を構成単位ごとに符号化して複数の符号化ストリームを生成し、前記複数の符号化ストリームをパケット多重化する多重化方法であって、
符号化対象の前記構成単位が、複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位の一部として符号化されるべきか否かを判別し、
前記連続再生単位の一部として符号化されるべきと判別したときには、前記符号化対象の構成単位に対して、前記連続再生単位内で共通の色空間を決定し、
決定された前記色空間にしたがって前記符号化対象の構成単位を符号化して符号化ストリームを生成し、
前記符号化ストリームをパケット多重化し、
前記符号化ストリームの生成では、前記符号化対象の構成単位の色空間が、前記決定された色空間と異なる場合には、前記符号化対象の構成単位の色空間を、前記決定された色空間に変換し、
変換された色空間で表現される前記符号化対象の構成単位を符号化する
ことを特徴とする多重化方法。
【請求項２】
連続再生単位の一部として符号化されるべきか否かを判別するときには、
シームレス接続された複数の符号化ストリームを前記連続再生単位として扱う
ことを特徴とする請求項１記載の多重化方法。
【請求項３】
連続再生単位の一部として符号化されるべきか否かを判別するときには、
マルチアングル再生が可能なように構成された複数の符号化ストリームを前記連続再生単位として扱う
ことを特徴とする請求項１記載の多重化方法。
【請求項４】
前記多重化方法は、さらに、
前記連続再生単位を構成している各符号化ストリームを示す管理情報を生成し、
前記管理情報の一部として、符号化ストリームの色空間が統一されているか否かを示すフラグを生成する
ことを特徴とする請求項１記載の多重化方法。
【請求項５】
前記多重化方法は、さらに、
パケット多重化された複数の前記符号化ストリームを記録媒体に記録し、
前記フラグを生成するときには、
前記記録媒体に記録された全ての前記符号化ストリームの色空間が１種類だけであるか否かを示す前記フラグを生成する
ことを特徴とする請求項４記載の多重化方法。
【請求項６】
前記フラグは、
前記記録媒体に記録された全ての前記符号化ストリームの色空間が狭色域空間のみであるか否かを示す
ことを特徴とする請求項５記載の多重化方法。
【請求項７】
符号化された動画像を示す複数の符号化ストリームが記録された記録媒体から、前記複数の符号化ストリームを読み出して動画像を再生する再生方法であって、
前記記録媒体には、
共通の色空間で表現される複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位と、前記連続再生単位に含まれない符号化ストリームである不連続符号化ストリームとが記録されており、
前記再生方法は、
前記記録媒体から読み出した前記符号化ストリームを復号化することにより復号動画像を生成し、
前記復号動画像が、前記連続再生単位内の最初に復号化される符号化ストリームから復号化されているとき、または、前記不連続符号化ストリームから復号化されているときには、前記最初に復号化される符号化ストリームまたは前記不連続符号化ストリームに含まれる情報から、当該符号化ストリームまたは当該不連続符号化ストリームに応じた色変換パラメータを特定し、特定した前記色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換し、
前記復号動画像が、前記連続再生単位内の、最初に復号化される符号化ストリーム以外の符号化ストリームから復号化されているときには、当該符号化ストリームに応じた色変換パラメータを特定することなく、前記連続再生単位に対して共通の色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換する
ことを特徴とする再生方法。
【請求項８】
前記記録媒体には、さらに、
前記記録媒体に記録された符号化ストリームの色空間が統一されているか否かを示すフラグが記録されており、
前記再生方法は、
前記フラグを前記記録媒体から読み出して、前記復号動画像に適用する色変換パラメータを決定する
ことを特徴とする請求項７記載の再生方法。
【請求項９】
前記再生方法は、さらに、
前記フラグが、色空間が統一していないことを示す場合、報知情報を生成する
ことを特徴とする請求項８記載の再生方法。
【請求項１０】
動画像を構成単位ごとに符号化して複数の符号化ストリームを生成し、前記複数の符号化ストリームをパケット多重化する多重化装置であって、
符号化対象の前記構成単位が、複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位の一部として符号化されるべきか否かを判別する判別手段と、
前記判別手段によって連続再生単位の一部として符号化されるべきと判別されたときには、前記符号化対象の構成単位に対して、前記連続再生単位内で共通の色空間を決定する色空間決定手段と、
決定された前記色空間にしたがって前記符号化対象の構成単位を符号化して符号化ストリームを生成する符号化手段と、
前記符号化ストリームをパケット多重化する多重化手段とを備え、
前記符号化手段は、前記符号化対象の構成単位の色空間が、前記決定された色空間と異なる場合には、前記符号化対象の構成単位の色空間を、前記決定された色空間に変換し、
変換された色空間で表現される前記符号化対象の構成単位を符号化する
ことを特徴とする多重化装置。
【請求項１１】
動画像を構成単位ごとに符号化して複数の符号化ストリームを生成して記録媒体に記録する記録装置であって、
符号化対象の前記構成単位が、複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位の一部として符号化されるべきか否かを判別する判別手段と、
前記判別手段によって連続再生単位の一部として符号化されるべきと判別されたときには、前記符号化対象の構成単位に対して、前記連続再生単位内で共通の色空間を決定する色空間決定手段と、
決定された前記色空間にしたがって前記符号化対象の構成単位を符号化して符号化ストリームを生成する符号化手段と、
前記符号化ストリームをパケット多重化する多重化手段と、
前記多重化手段によってパケット多重化された符号化ストリームを記録媒体に記録する記録手段とを備え、
前記符号化手段は、前記符号化対象の構成単位の色空間が、前記決定された色空間と異なる場合には、前記符号化対象の構成単位の色空間を、前記決定された色空間に変換し、
変換された色空間で表現される前記符号化対象の構成単位を符号化する
ことを特徴とする記録装置。
【請求項１２】
符号化された動画像を示す複数の符号化ストリームが記録された記録媒体から、前記複数の符号化ストリームを読み出して動画像を再生する再生装置であって、
前記記録媒体には、
共通の色空間で表現される複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位と、前記連続再生単位に含まれない符号化ストリームである不連続符号化ストリームとが記録されており、
前記再生装置は、
前記記録媒体から読み出した前記符号化ストリームを復号化することにより復号動画像を生成する復号化手段と、
前記復号動画像が、前記連続再生単位内の最初に復号化される符号化ストリームから復号化されているとき、または、前記不連続符号化ストリームから復号化されているときには、前記最初に復号化される符号化ストリームまたは前記不連続符号化ストリームに含まれる情報から、当該符号化ストリームまたは当該不連続符号化ストリームに応じた色変換パラメータを特定し、特定した前記色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換する第１の色変換手段と、
前記復号動画像が、前記連続再生単位内の、最初に復号化される符号化ストリーム以外の符号化ストリームから復号化されているときには、当該符号化ストリームに応じた色変換パラメータを特定することなく、前記連続再生単位に対して共通の色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換する第２の色変換手段と
を備えることを特徴とする再生装置。
【請求項１３】
動画像を構成単位ごとに符号化して複数の符号化ストリームを生成し、前記複数の符号化ストリームをパケット多重化するためのプログラムであって、
符号化対象の前記構成単位が、複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位の一部として符号化されるべきか否かを判別し、
前記連続再生単位の一部として符号化されるべきと判別したときには、前記符号化対象の構成単位に対して、前記連続再生単位内で共通の色空間を決定し、
決定された前記色空間にしたがって前記符号化対象の構成単位を符号化して符号化ストリームを生成し、
前記符号化ストリームをパケット多重化することをコンピュータに実行させ、
前記符号化ストリームの生成では、前記符号化対象の構成単位の色空間が、前記決定された色空間と異なる場合には、前記符号化対象の構成単位の色空間を、前記決定された色空間に変換し、
変換された色空間で表現される前記符号化対象の構成単位を符号化する
ことを特徴とするプログラム。
【請求項１４】
符号化された動画像を示す複数の符号化ストリームが記録された記録媒体から、前記複数の符号化ストリームを読み出して動画像を再生するためのプログラムであって、
前記記録媒体には、
共通の色空間で表現される複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位と、前記連続再生単位に含まれない符号化ストリームである不連続符号化ストリームとが記録されており、
前記プログラムは、
前記記録媒体から読み出した前記符号化ストリームを復号化することにより復号動画像を生成し、
前記復号動画像が、前記連続再生単位内の最初に復号化される符号化ストリームから復号化されているとき、または、前記不連続符号化ストリームから復号化されているときには、前記最初に復号化される符号化ストリームまたは前記不連続符号化ストリームに含まれる情報から、当該符号化ストリームまたは当該不連続符号化ストリームに応じた色変換パラメータを特定し、特定した前記色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換し、
前記復号動画像が、前記連続再生単位内の、最初に復号化される符号化ストリーム以外の符号化ストリームから復号化されているときには、当該符号化ストリームに応じた色変換パラメータを特定することなく、前記連続再生単位に対して共通の色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換する
ことをコンピュータに実行させることを特徴とするプログラム。
【請求項１５】
動画像を構成単位ごとに符号化して複数の符号化ストリームを生成し、前記複数の符号化ストリームをパケット多重化する集積回路であって、
符号化対象の前記構成単位が、複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位の一部として符号化されるべきか否かを判別する判別手段と、
前記判別手段によって連続再生単位の一部として符号化されるべきと判別されたときには、前記符号化対象の構成単位に対して、前記連続再生単位内で共通の色空間を決定する色空間決定手段と、
決定された前記色空間にしたがって前記符号化対象の構成単位を符号化して符号化ストリームを生成する符号化手段と、
前記符号化ストリームをパケット多重化する多重化手段とを備え、
前記符号化手段は、前記符号化対象の構成単位の色空間が、前記決定された色空間と異なる場合には、前記符号化対象の構成単位の色空間を、前記決定された色空間に変換し、
変換された色空間で表現される前記符号化対象の構成単位を符号化する
ことを特徴とする集積回路。 
【請求項１６】
符号化された動画像を示す複数の符号化ストリームが記録された記録媒体から、前記複数の符号化ストリームを読み出して動画像を再生する集積回路であって、
前記記録媒体には、
共通の色空間で表現される複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位と、前記連続再生単位に含まれない符号化ストリームである不連続符号化ストリームとが記録されており、
前記集積回路は、
前記記録媒体から読み出した前記符号化ストリームを復号化することにより復号動画像を生成する復号化手段と、
前記復号動画像が、前記連続再生単位内の最初に復号化される符号化ストリームから復号化されているとき、または、前記不連続符号化ストリームから復号化されているときには、前記最初に復号化される符号化ストリームまたは前記不連続符号化ストリームに含まれる情報から、当該符号化ストリームまたは当該不連続符号化ストリームに応じた色変換パラメータを特定し、特定した前記色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換する第１の色変換手段と、
前記復号動画像が、前記連続再生単位内の、最初に復号化される符号化ストリーム以外の符号化ストリームから復号化されているときには、当該符号化ストリームに応じた色変換パラメータを特定することなく、前記連続再生単位に対して共通の色変換パラメータを前記復号動画像に適用して前記復号動画像の色形式を変換する第２の色変換手段と
を備えることを特徴とする集積回路。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像を符号化して生成された、色空間に関する情報を含む符号化ストリームを多重化する多重化方法、およびその多重化された符号化ストリームを記録している記録媒体に関する。
【背景技術】
【０００２】
動画像符号化の国際標準方式であるＭＰＥＧ−２規格では、sequence display extention部に、動画像信号の色空間に関する情報（以下、色空間情報という）を記述することができる（非特許文献１）。また、ＭＰＥＧ−４  ＡＶＣ規格では、sequence parameter set内のvideo usability information部に色空間情報を記述することができる（非特許文献２）。ここでは、色空間情報は、例えば、colour_primaries（カラープライマリ）、transfer_characteristics（光電変換特性）、およびmatrix_coefficients（ＲＧＢからＹＵＶへの変換行列）を示し、それぞれについて、予め定められた数種類（６〜９種類程度）から１種類を選択して記述される。
【０００３】
一方、ＤＶＤ−Ｖｉｄｅｏディスクでは、映像の符号化方法としてＭＰＥＧ−２が採用されている。ここでは、上記の色空間情報について制限が設けられている（非特許文献３）。例えば、色空間情報であるcolour_primaries、transfer_characteristics、およびmatrix_coefficientsのそれぞれに対して、２種類の値がデフォルト値として設定されている（フレームレートが２９．９７Ｈｚである場合）。
【０００４】
さらに近年、表現できる色空間が従来よりも大幅に広がっているディスプレイ（広色帯域ディスプレイ）の開発が盛んに行われている。それに対応してＩＥＣ  ＴＣ１００では、ＩＥＣ６１９６６−２−４としてｘｖＹＣＣ色空間の標準化が進められている。ｘｖＹＣＣ色空間を従来の色空間と比較した場合、ｓＲＧＢ色空間と比較して約１００％、ｓＹＣＣ色空間と比較して約５％、表現可能な色域が広くなっている。
【０００５】
上記従来のＤＶＤ−Ｖｉｄｅｏディスクでは、ＤＶＤ−Ｖｉｄｅｏ規格上は異なる色空間を有する動画像シーケンスを同一の媒体上に記録することが可能である。さらにそのような異なる色空間を有する動画像シーケンスが混在する媒体を再生する際の制限は規定されていない。ただし、デフォルト値として設定されている値は、定義されている色空間の差が小さいため、これまで実用上の問題とはならなかった。
【非特許文献１】ISO/IEC 13818-2: Information technology Generic coding of moving pictures and associated audio information: Video, Second edition, 2000.12.
【非特許文献２】ISO/IEC 14496-10: Information technology Coding of audio-visual objects Part 10: Advanced video coding, First edition, 2003.12.
【非特許文献３】DVD Specifications for Read-Only Disc, Part 3. Video Specifications Version 1.0, August 1996
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、従来の多重化方法によって符号化および多重化された動画シーケンスを再生する場合には、その再生処理が複雑になったり、再生された動画像の主観的な画質に対して違和感を視聴者に与えてしまうという問題がある。
【０００７】
すなわち、近年の広色帯域ディスプレイの研究開発状況を考慮すると、これまでに定義されている色空間とは大きく異なる色空間（ｘｖＹＣＣ色空間など）が、今後ＤＶＤ−ＶｉｄｅｏやＢＤ−ＲＯＭ等の媒体規格に新規で追加されることが想定される。この場合、同一の媒体上に記録された複数の動画像シーケンス間で色空間が大きく異なることになり、これが実用上の問題になると想定される。その結果、例えば、ＭＰＥＧ−２方式やＭＰＥＧ−４  ＡＶＣ方式で符号化された動画像を復号して得られるＹＵＶ形式の動画像信号をＲＧＢ形式の動画像信号に変換する場合、色空間定義が異なる動画像シーケンスを連続して再生する際の切り替わり時に、上述の複雑な再生処理と、主観画質に対する違和感という問題が生じる。つまり、動画像シーケンスの切り替わり時に色変換処理（ＹＵＶ形式からＲＧＢ形式への変換）の処理方法（色変換方式）を瞬間的に変更する必要があり、そのため再生処理が複雑になる。さらに、動画像シーケンスの切り替わり時に、前後の動画像シーケンスの色空間の差によって、ユーザに対して画質上の主観的な違和感を与える。
【０００８】
そこで、本発明は、かかる問題に鑑みてなされたものであって、再生処理を容易にするとともに、視聴者の受ける画質上の違和感を低減させる多重化方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するために、本発明に係る多重化方法は、動画像を構成単位ごとに符号化することによって複数の符号化ストリームを生成し、前記複数の符号化ストリームをパケット多重化する多重化方法であって、符号化対象の前記構成単位が、複数の符号化ストリームが連続的に再生可能なように構成された連続再生単位の一部として符号化されるべきか否かを判別し、前記連続再生単位の一部として符号化されるべきと判別したときには、前記符号化対象の構成単位に対して、前記連続再生単位内で共通の色空間を決定し、決定された前記色空間にしたがって前記符号化対象の構成単位を符号化して符号化ストリームを生成し、前記符号化ストリームをパケット多重化し、前記符号化ストリームの生成では、前記符号化対象の構成単位の色空間が、前記決定された色空間と異なる場合には、前記符号化対象の構成単位の色空間を、前記決定された色空間に変換し、変換された色空間で表現される前記符号化対象の構成単位を符号化することを特徴とする。例えば、連続再生単位の一部として符号化されるべきか否かを判別するときには、シームレス接続された複数の符号化ストリームを前記連続再生単位として扱う。または、連続再生単位の一部として符号化されるべきか否かを判別するときには、マルチアングル再生が可能なように構成された複数の符号化ストリームを前記連続再生単位として扱う。
【００１０】
シームレス接続された複数の符号化ストリームを連続的に再生するときに、その符号化ストリームの色空間が異なっていると、再生装置は、その色空間の異なる符号化ストリームに対して色変換方式を変更しなければならない。つまり、再生装置は、動画像をディスプレイに表示するために、符号化ストリームを復号化することによって生成されたＹＵＶ形式の復号動画像を、ＲＧＢ形式の復号動画像に変換するという色変換処理を行う。ここで、符号化ストリームの色空間が異なっている場合には、再生装置は、その色変換処理に用いられるパラメータを切り替えることによって、色変換処理の方式を変更しなければならない。上述と同様に、マルチアングル再生が可能なように構成された複数の符号化ストリームを、アングルを切り替えて連続的に再生するときにも、その符号化ストリームの色空間が異なっていると、再生装置は、その色空間の異なる符号化ストリームに対して色変換方式を変更しなければならない。
【００１１】
そこで本発明では、連続再生単位の一部として符号化されるクリップたる構成単位は、その連続再生単位で共通の色空間にしたがって符号化されるため、シームレス接続により構成された連続再生単位や、マルチアングル再生可能なように構成された連続再生単位では、色空間が統一されている。言い換えれば、連続再生単位で色空間が固定されている。したがって、再生装置は、色変換方式を変更するという処理を省くことができ、再生処理を容易にすることができる。さらに、色空間が固定されているため、視聴者の受ける画質上の違和感を低減させることができる。
【００１２】
また、前記多重化方法は、さらに、連続再生単位内において色空間が統一されているか否かを示すフラグを生成することを特徴としてもよい。
【００１３】
これにより、パケット多重化された複数の符号化ストリーム（連続再生単位）とともにそのフラグを記録媒体に記録しておけば、再生装置は、そのフラグに基づいて連続再生単位内において色空間が統一されているか否かを容易に判別することができ、再生装置の処理負担をさらに軽減することができる。
【００１４】
また、前記多重化方法は、さらに、パケット多重化された複数の前記符号化ストリームを記録媒体に記録し、前記フラグを生成するときには、前記記録媒体に記録された全ての前記符号化ストリームの色空間が１種類だけであるか否かを示す前記フラグを生成することを特徴としてもよい。または、前記多重化方法は、さらに、パケット多重化された複数の前記符号化ストリームを記録媒体に記録し、前記フラグを生成するときには、前記記録媒体に記録された全ての前記符号化ストリームの色空間が狭色域空間のみであるか否かを示す前記フラグを生成することを特徴としてもよい。
【００１５】
これにより、再生装置は、記録媒体に記録された符号化ストリームの示す動画像を再生するときには、そのフラグに基づいて、その記録媒体に対して色変換方式を変更する必要があるか否かを容易に判別することができ、再生装置の処理負担をさらに軽減することができる。
【００１６】
なお、本発明は、このような多重化方法として実現することができるだけでなく、その方法を用いて多重化を行う多重化装置や、集積回路、その多重化装置を動作させるプログラム、その多重化装置によりパケット多重化された符号化ストリームを記録媒体に記録する記録装置としても実現することができる。さらに、本発明は、その記録装置によって符号化ストリームが記録された記録媒体や、その記録媒体の符号化ストリームの示す動画像を再生する再生方法、その方法を用いて動画像を再生する再生装置、集積回路、その再生装置を動作させるプログラムとしても実現することができる。
【発明の効果】
【００１７】
本発明の多重化方法は、例えば連続再生単位などの所定単位において再生される動画像の色空間を１種類のみにする（色空間を固定する）ため、色空間定義の切り替わりに起因する頻繁な色変換方式の切り替えをなくすことができる。その結果、異なる色空間を有する動画像シーケンスが同一媒体上に記録されたパッケージメディアの再生装置の処理負荷を軽減することができるとともに、色空間定義の切り替わりに起因する主観上の画質に対する違和感をなくすことができ、その実用的価値は高い。
【発明を実施するための最良の形態】
【００１８】
（実施の形態１）
図１は、本実施の形態における多重化方法を実現する多重化装置の構成を示すブロック図である。
【００１９】
本実施の形態における多重化装置１００は、再生処理を容易にするとともに、再生時に視聴者の受ける画質上の違和感を低減させるものであって、色空間決定部１０１、フラグ生成部１０２、符号化部１０３、システム多重化部１０４、管理情報作成部１０５、および結合部１０６を備える。
【００２０】
色空間決定部１０１は、例えば、画像データＶｉｎの示す動画像シーケンスたるクリップごとに色空間を決定し、決定した色空間を示す色空間情報Ｃｓをフラグ生成部１０２および符号化部１０３に出力する。ここで、色空間決定部１０１は、連続再生単位内で各クリップに対して共通の色空間を決定する。連続再生単位は、記録媒体に記録された複数の符号化されたクリップ（符号化ストリーム）からなり、各符号化ストリームが連続的に再生可能なように構成されたものである。例えば、連続再生単位は、シームレス接続された複数の符号化ストリームや、マルチアングル再生が可能となるように構成された複数の符号化ストリームである。
【００２１】
つまり、色空間決定部１０１は、符号化対象のクリップが連続再生単位の一部として符号化されるべきか否かを判別する判別手段と、その判別手段によって連続再生単位の一部として符号化されるべきと判別されたときには、そのクリップに対して、連続再生単位内で共通の色空間を決定する色空間決定手段とを備えている。
【００２２】
なお、色空間決定部１０１は、ユーザによる操作に応じて、または予め定められた条件や設定に基づいて特定の色空間を決定する。
【００２３】
符号化部１０３は、画像データＶｉｎを取得して、色空間情報Ｃｓの示す色空間を満たすように各クリップのデータを符号化し、その符号化によって生成された符号化ストリームＣｄをシステム多重化部１０４に出力する。
【００２４】
フラグ生成部１０２は、例えば各クリップに対して、色空間統一フラグＳｗＩを生成し、管理情報作成部１０５に出力する。色空間統一フラグは、連続再生単位内において色空間が統一されているか否かを示す。例えば、色空間統一フラグは、１であるときには、連続再生単位の各クリップに対して、色空間が統一されていることを示し、０であるときには、連続再生単位でない各クリップに対して、色空間が統一されていないことを示す。つまり、色空間統一フラグが１のときには、その色空間統一フラグは、連続再生単位において色空間が１種類だけ定義されている、言い換えれば、その連続再生単位において色空間が固定されていることを示す。
【００２５】
システム多重化部１０４は、符号化ストリームＣｄをシステム多重化（パケット多重化）するとともに、補助情報ＳＩを生成する。そしてシステム多重化部１０４は、生成された補助情報ＳＩを管理情報作成部１０５に出力するとともに、システム多重化によって生成された多重化データＭｄを結合部１０６に出力する。ＢＤ−ＲＯＭにおけるシステム多重化では、符号化ストリームＣｄに対応するＭＰＥＧ−２のトランスポートストリームに４バイトのヘッダを付加することによってソースパケットが生成される。また、補助情報ＳＩは、多重化データＭｄについての管理情報ＣＩに含まれるタイムマップなどを生成するための情報である。
【００２６】
管理情報作成部１０５は、補助情報ＳＩに基づいてタイムマップなどを生成し、そのタイムマップおよび色空間統一フラグＳｗＩなどを含む管理情報ＣＩを生成する。また、この管理情報ＣＩは、連続再生単位を構成している各クリップ（符号化ストリーム）を示している。そして、管理情報作成部１０５は、その管理情報ＣＩを結合部１０６に出力する。
【００２７】
結合部１０６は、管理情報ＣＩと多重化データＭｄを結合することによって記録データＤを生成して出力する。多重化装置１００は、その記録データＤを記録媒体に記録する。
【００２８】
図２Ａは、本実施の形態における連続再生単位を示す図である。
【００２９】
本実施の形態における連続再生単位は、複数の符号化されたクリップ（符号化ストリームＣｄ）から構成され、各クリップの色空間は例えば第１色空間で統一されている。なお、符号化された各クリップには、色空間が第１色空間であることを示す色空間情報Ｃｓが含まれている。
【００３０】
つまり、図２Ａは、ＭＰＥＧ−２やＭＰＥＧ−４  ＡＶＣの動画像の符号化ストリームにおける、色空間定義の切替え単位の制約例を示している。なお、ＤＶＤ−ＶｉｄｅｏやＢＤ−ＲＯＭなどのパッケージメディアにおいては、プレイリストなどによって動画像の符号化ストリームを連続して再生する単位（連続再生単位）が示される。
【００３１】
このように、本実施の形態では、連続再生単位内において色空間が統一されているため、連続して再生される区間において色空間変更のための画像処理方式の切替えが発生しない。その結果、再生処理を容易にするとともに、視聴者の受ける画質上の違和感を低減させることができる。
【００３２】
図２Ｂは、本実施の形態における他の連続再生単位を示す図である。
【００３３】
この図２Ｂに示す連続再生単位内の各クリップの色空間は第２色空間で統一されている。
【００３４】
なお、連続して再生されるクリップの接続条件には、シームレス接続と、非シームレス接続との２種類がある。非シームレス接続においては、例えば、オープンＧＯＰ（Group Of Picture）への接続時のように復号動作にギャップが発生することがあるため、色空間の切り替わりを許容してもよい。つまり、本実施の形態では、連続再生単位のうち、各クリップがシームレス接続される連続再生単位だけにおいて色空間を統一している。また、非シームレス接続されたクリップの主観上の違和感をなくすために、非シームレス接続されたクリップを含む連続再生単位において色空間を統一してもよく、記録媒体に記録されるすべての動画像に対して色空間を統一しても良い。
【００３５】
図２Ｃは、本実施の形態におけるさらに他の連続再生単位を示す図である。
【００３６】
ＤＶＤ−ＶｉｄｅｏやＢＤ−ＲＯＭのようにマルチアングル機能をサポートしている場合には、アングルの切り替えにより接続される動画像に対して色空間を統一しても良い。例えば、図２Ｃに示すように、連続再生単位は、マルチアングル再生が可能となるように、３つのアングルから撮影されて符号化された動画像（アングル１、アングル２、およびアングル３）からなる。また、アングル１、アングル２、およびアングル３のそれぞれは、例えばシームレス接続された複数のクリップから構成されて、共通の時間軸に沿ったタイムスタンプが付されている。マルチアングル再生が行われる場合、ユーザは、クリップの途中でアングルを３つの中から任意に選択することができる。例えば、ユーザは、アングル１のクリップの再生途中でアングルを切り替え、アングル２またはアングル３のクリップの途中から引き続き再生を継続させることができる。
【００３７】
本実施の形態では、このようなマルチアングル再生が行われる場合においても、連続再生単位を構成するアングル１、アングル２、およびアングル３の動画像すべての色空間が、例えば第１色空間に統一されているため、アングル切替時に色空間が異なることにより生じる主観画質上の違和感をなくすことができる。
【００３８】
図３は、本実施の形態の多重化装置１００によって記録媒体に記録された情報の一例を示す図である。
【００３９】
記録媒体には、複数の符号化されたクリップ（符号化ストリーム）が、図２Ａ〜図２Ｃに示すような連続再生単位として記録されており、その連続再生単位において各クリップの色空間は統一されている。なお、記録媒体には、連続再生単位に含まれない符号化ストリームである不連続符号化ストリームも記録されている。
【００４０】
また、ＤＶＤ−ＶｉｄｅｏやＢＤ−ＲＯＭなどのパッケージメディアたる記録媒体には、プレイリストがあり、色空間統一フラグは、そのプレイリストに含まれる管理情報ＣＩの一部として記録される。また、色空間統一フラグは、例えば管理情報ＣＩのStreamCodingInfoと呼ばれる領域に格納される。このような色空間統一フラグは、ＭＰＥＧ−２やＭＰＥＧ−４  ＡＶＣのストリームにおいて、色空間定義の切替え単位が制約されていることを示す。
【００４１】
なお、符号化方式の記述を上述の色空間統一フラグとして扱ってもよい。つまり、ＢＤ−ＲＯＭにおいては、プレイリストから参照される各クリップの符号化方式は、管理情報内のStreamCodingInfoと呼ばれる領域に格納される。したがって、その領域で符号化方式がＭＰＥＧ−２やＭＰＥＧ−４  ＡＶＣであることが示される際には、その符号化方式は、１である色空間統一フラグと同様、連続再生単位において色空間が固定されていることを示す。
【００４２】
また、具体的にどのような色空間を用いるかを示す識別番号等を記録媒体に別途記録してもよく、さらに、色空間定義の切替え単位を示す情報を格納してもよい。また、記録媒体に記録されている動画像の色空間定義が１種類のみであるか２種類以上であるかを示すフラグを上述の色空間統一フラグとして格納しても良い。また、記録媒体が従来色帯域（狭色域空間）と広色帯域（高色域空間）の２つの色空間の動画像を記録することを許可している場合に、従来色帯域の動画像のみが記録されているか、広色帯域の動画像が記録されている可能性があるか、を示すフラグを上述の色空間統一フラグとして格納しても良い。このようなフラグを用いることにより、再生装置は、記録媒体を再生する際に、記録媒体上の色空間定義が１種類のみであるか否か、または記録媒体上の色空間が従来色帯域のみであるか否かを容易に判別することができ、色変換処理を簡易化することができる。
【００４３】
図４は、本実施の形態における多重化装置１００の動作を示すフローチャートである。
【００４４】
まず、多重化装置１００の色空間決定部１０１は、符号化対象のクリップが連続再生単位の一部とされるべきか否かを判別する（ステップＳ１００）。例えば、色空間決定部１０１は、符号化対象のクリップを、直前のクリップとシームレス接続するように符号化すべきか否かを判別する。そして、シームレス接続するように符号化すべきでないと判別したときには、色空間決定部１０１は、さらに、その符号化対象のクリップを、直前のクリップとマルチアングル再生可能なように符号化すべきか否かを判別する。その結果、色空間決定部１０１は、シームレス接続するように符号化すべきと判別し、且つマルチアングル再生可能なように符号化すべきと判別した場合に、上述の連続再生単位の一部とされるべきと判別し、上記以外の場合に、連続再生単位の一部とされるべきでないと判別する。
【００４５】
ここで、色空間決定部１０１は、連続再生単位の一部とされるべきでないと判別すると（ステップＳ１００のＮ）、その符号化対象のクリップに対して色空間を決定する（ステップＳ１０２）。その結果、符号化部１０３は、色空間決定部１０１で決定された色空間を満たすようにそのクリップを符号化する（ステップＳ１０４）。このとき、符号化部１０３は、符号化されたクリップに、その決定された色空間を示す色空間情報Ｃｓを格納する。さらに、フラグ生成部１０２は、そのクリップに対して０を示す色空間統一フラグを生成する（ステップＳ１０６）。
【００４６】
そして、符号化部１０３は、最終のクリップが符号化されたか否かを判別し（ステップＳ１０８）、符号化されていないと判別したときには（ステップＳ１０８のＮ）、多重化装置１００は、次の符号化対象のクリップに対してステップＳ１００からの動作を繰り返し実行する。
【００４７】
一方、色空間決定部１０１は、符号化対象のクリップが連続再生単位の一部とされるべきとステップＳ１００で判別すると（ステップＳ１００のＹ）、そのクリップに対して、連続再生単位で共通の色空間を決定する（ステップＳ１１０）。つまり、色空間決定部１０１は、符号化対象のクリップが連続再生単位の先頭のクリップであれば、ユーザによる操作または予め定められた条件や設定に基づいて色空間を決定する。また、符号化対象のクリップが連続再生単位の先頭にないクリップであれば、色空間決定部１０１は、直前のクリップに対して決定された色空間と同一の色空間を、符号化対象のクリップに対して決定する。
【００４８】
その結果、符号化部１０３は、色空間決定部１０１で決定された色空間を満たすようにそのクリップを符号化する（ステップＳ１１２）。例えば、符号化部１０３は、画像データＶｉｎの示す符号化対象のクリップの色空間が、ステップＳ１１０で決定された色空間と異なっているときには、そのクリップの色空間を、決定された色空間に変換し、その変換された色空間で表現される符号化対象のクリップに対して符号化を行う。これにより、連続再生単位内の色空間が統一される。また、このとき、符号化部１０３は、符号化されたクリップに、その決定された色空間を示す色空間情報Ｃｓを格納する。そして、フラグ生成部１０２は、そのクリップに対して１を示す色空間統一フラグを生成する（ステップＳ１１４）。
【００４９】
そして、符号化部１０３は、最終のクリップが符号化されたか否かを判別し（ステップＳ１０８）、符号化されていないと判別したときには（ステップＳ１０８のＮ）、多重化装置１００は、次の符号化対象のクリップに対してステップＳ１００からの動作を繰り返し実行する。
【００５０】
システム多重化部１０４は、ステップＳ１０８で最終のクリップが符号化されたと判別されると（ステップＳ１０８のＹ）、システム多重化を行うことにより多重化データＭｄを生成するとともに補助情報ＳＩを生成する（ステップＳ１１８）。そして、管理情報作成部１０５は、ステップＳ１０６，Ｓ１１４で生成された色空間統一フラグと、ステップＳ１１８で生成された補助情報ＳＩとを用いて管理情報ＣＩを生成する（ステップＳ１２０）。
【００５１】
結合部１０６は、ステップＳ１１８で生成された多重化データＭｄと、ステップＳ１２０で生成された管理情報ＣＩとを結合することにより記録データＤを生成する（ステップＳ１２２）。
【００５２】
なお、上述の例では、フラグ生成部１０２は色空間統一フラグをクリップごとに生成したが、連続再生単位で１つの色空間統一フラグを生成してもよい。
【００５３】
このように本実施の形態の多重化装置１００は、連続再生単位において色空間定義を１種類だけにすることにより、色空間定義の切替単位を制約するとともに、切替単位が制約されていることを示す色空間統一フラグを記録媒体に記録する。また、本実施の形態における記録媒体では、連続再生単位内の各クリップの色空間は統一されており、上述の色空間統一フラグが記録されている。これにより、その記録媒体に記録された動画像を再生する再生装置は、連続再生単位内では色変換方式の切り替えを行うことなく動画像を再生することができ、再生処理を容易にすることができる。さらに、連続再生単位内では色空間の変更が生じないため、視聴者の受ける画質上の違和感を低減させることができる。
【００５４】
なお、オーサリングツールなどでデータを作成する際には、符号化ストリームＣｄの生成と、システム多重化と、管理情報ＣＩの作成とを別々の装置で行うことがある。このような場合には、各装置は、多重化装置１００における各構成要素と同一の動作を行う。つまり、符号化ストリームＣｄを生成する装置と、システム多重化を行う装置と、管理情報ＣＩを生成する装置とを含めて本実施の形態の多重化装置１００が構成される。
【００５５】
また、本実施の形態では多重化装置として本発明を説明したが、本発明を記録装置として実現してもよい。
【００５６】
（実施の形態２）
本実施の形態における再生装置は、実施の形態１の多重化装置１００によって記録媒体に記録された記録データＤを読み出して再生する。
【００５７】
図５は、本実施の形態における再生方法を実現する再生装置の構成を示すブロック図である。
【００５８】
本実施の形態における再生装置２００は、復号部２０１、第１色変換部２０２、第２色変換部２０３、制御部２０４、および切替部２０５，２０６を備えている。
【００５９】
復号部２０１は、記録媒体から読み出された記録データＤのうち多重化データＭｄを取得し、その多重化データＭｄに対して、そのデータの符号化方式（例えばＭＰＥＧ−２やＭＰＥＧ−４  ＡＶＣ方式）に応じた復号処理を施す。その結果、復号部２０１は、ＹＵＶ形式によって表現されるＹＵＶ復号画像データＶｙを生成して出力する。また、復号部２０１は、多重化データＭｄの各符号化ストリーム（クリップ）に含まれる色空間情報Ｃｓを抽出して制御部２０４に出力する。
【００６０】
第１色変換部２０２は、第１色空間で表現されるＹＵＶ復号画像データＶｙを、第１色空間に対応する色変換パラメータを用いて、第１色空間でＲＧＢ形式によって表現されるＲＧＢ復号画像データＶｒに変換する。
【００６１】
第２色変換部２０３は、第２色空間で表現されるＹＵＶ復号画像データＶｙを、第２色空間に対応する色変換パラメータを用いて、第２色空間でＲＧＢ形式によって表現されるＲＧＢ復号画像データＶｒに変換する。
【００６２】
なお、第１色空間に対応する色変換パラメータと第２色空間に対応する色変換パラメータとは、それぞれ異なっている。また、色変換パラメータは、例えば、ＹＵＶ形式をＲＧＢ形式に変換する際に使用される色変換行列と、Ｒ／Ｇ／Ｂ／Ｗｈｉｔｅの色度点と、伝達特性と、ＹＵＶ空間およびＲＧＢ空間での定義域（色域）とを含む。
【００６３】
例えば、第１色変換部２０２または第２色変換部２０３は、ｘｖＹＣＣ規格のような広色域のＹＵＶ信号（ＹＵＶ復号画像データＶｙ）を扱う場合は、論理的に負から１．０以上にまで拡張された値を持つＲＧＢ信号のＲＧＢ復号画像データＶｒを出力する。したがって、第１色変換部２０２または第２色変換部２０３から出力されたＲＧＢ復号画像データＶｒを扱う手段（例えば切替部２０６や更にその後段に配置された編集装置や表示装置（図示せず）等）は、上記負から１．０以上の値を扱うことができるもので有る必要がある。
【００６４】
また、第１色変換部２０２または第２色変換部２０３は、ＢＴ．６０１やＢＴ．７０９規格のような狭色域のＹＵＶ信号（ＹＵＶ復号画像データＶｙ）を扱う場合は、論理的に０．０から１．０までの値を持つＲＧＢ信号のＲＧＢ復号画像データＶｒを出力する。
【００６５】
切替部２０５は、制御部２０４からの制御に応じて、端子ｃを端子ａと端子ｃに切り替えて接続する。つまり、切替部２０５は、端子ｃを端子ａに接続することにより、復号部２０１で生成されたＹＵＶ復号画像データＶｙを第１色変換部２０２に出力し、端子ｃを端子ｂに接続することにより、復号部２０１で生成されたＹＵＶ復号画像データＶｙを第２色変換部２０３に出力する。
【００６６】
切替部２０６は、制御部２０４からの制御に応じて、端子ｃを端子ａと端子ｃに切り替えて接続する。つまり、切替部２０６は、端子ｃを端子ａに接続することにより、第１色変換部２０２で生成されたＲＧＢ復号画像データＶｒを再生装置２００外に出力し、端子ｃを端子ｂに接続することにより、第２色変換部２０３で生成されたＲＧＢ復号画像データＶｒを再生装置２００外に出力する。
【００６７】
制御部２０４は、色空間情報Ｃｓを復号部２０１から取得するとともに、管理情報ＣＩを記録媒体から取得する。この管理情報ＣＩには、復号化された各クリップに対応して色空間統一フラグが格納されている。制御部２０４は、復号化されたクリップに対応する色空間統一フラグが０を示すときには、そのクリップに対応する色空間情報Ｃｓに応じて、切替部２０５，２０６を制御する。つまり、制御部２０４は、色空間情報Ｃｓが第１色空間を示すときには、切替部２０５，２０６を制御することにより、その切替部２０５，２０６の端子ｃを端子ａに接続させる。その結果、第１色変換部２０２は、復号部２０１から第１色空間で表現されるＹＵＶ復号画像データＶｙを取得してＲＧＢ復号画像データＶｒに変換し、そのＲＧＢ復号画像データＶｒを出力する。一方、制御部２０４は、色空間情報Ｃｓが第２色空間を示すときには、切替部２０５，２０６を制御することにより、その切替部２０５，２０６の端子ｃを端子ｂに接続させる。その結果、第２色変換部２０３は、復号部２０１から第２色空間で表現されるＹＵＶ復号画像データＶｙを取得してＲＧＢ復号画像データＶｒに変換し、そのＲＧＢ復号画像データＶｒを出力する。
【００６８】
また、０を示す色空間統一フラグに対応するクリップの色空間は、直前または直後のクリップの色空間と異なる可能性がある。したがって、制御部２０４は、０を示す色空間統一フラグを取得したときには、例えば、動画像シーケンスの切り換わりに違和感が生じる可能性があることをユーザに知らせる内容のメッセージＭを生成して出力する。このようなメッセージＭを取得したディスプレイは、上述のような内容を表示してユーザに知らせる。
【００６９】
ここで、制御部２０４は、連続再生単位の一部として復号化されたクリップに対応する色空間統一フラグが１を示すときには、その連続再生単位内の全てのクリップの色空間が統一されていることを認識する。
【００７０】
つまり、制御部２０４は、連続再生単位の一部として最初に復号化されたクリップに対応する色空間統一フラグが１を示すときには、上述の色空間統一フラグが０のときと同様に、そのクリップに対応する色空間情報Ｃｓに応じて切替部２０５，２０６を制御する。しかし、制御部２０４は、上述の最初のクリップ以後に連続再生単位の一部として復号化されたクリップに対しては、そのクリップに対応する色空間情報Ｃｓを特定することなく、切替部２０５，２０６に対する切替制御を停止する。すなわち、制御部２０４は、連続再生単位内の先頭のクリップに適用された色変換部（第１色変換部２０２または第２色変換部２０３）を、その連続再生単位内の後続のクリップに対しても適用させる。その結果、連続再生単位内では、第１色変換部２０２と第２色変換部２０３との切り替えは行われず、何れか一方の色変換部のみが使用される。
【００７１】
なお、この再生装置２００では、第１色変換部２０２、第２色変換部２０３、切替部２０５，２０６、および制御部２０４から、第１の色変換手段と第２の色変換手段とが構成されている。ここで、第１の色変換手段は、ＹＵＶ復号画像データＶｙが連続再生単位の符号化ストリームから復号化されているときには、その連続再生単位に対して共通の色変換パラメータを、ＹＵＶ復号画像データＶｙに適用することによって、ＹＵＶ復号画像データＶｙの色形式を変換する。第２の色変換手段は、ＹＵＶ復号画像データＶｙが不連続符号化ストリームから復号化されているときには、その不連続符号化ストリームに含まれる色空間情報Ｃｓから、その不連続符号化ストリームに応じた色変換パラメータを特定し、その色変換パラメータをＹＵＶ復号画像データＶｙに適用することによって、ＹＵＶ復号画像データＶｙの色形式を変換する。
【００７２】
また、上述の例では、制御部２０４は、多重化データＭｄから抽出された色空間情報Ｃｓを復号部２０１から取得したが、色空間情報Ｃｓが管理情報ＣＩに含まれている場合には、その管理情報ＣＩから色空間情報Ｃｓを取得してもよい。
【００７３】
ここで、例えば、記録媒体に記録されている動画像の色空間定義が１種類のみであるか２種類以上であるかを示すフラグが、記録媒体の管理情報に格納されている場合がある。また、従来色帯域と広色帯域の２つの色空間の動画像を記録媒体に記録することが許可されており、従来色帯域の動画像のみが記録されているか、広色帯域の動画像が記録されている可能性があるか、を示すフラグが、記録媒体の管理情報に格納されている場合がある。このような場合には、制御部２０４は、そのフラグを読み出してフラグの値を判定することにより、記録媒体上の色空間定義が１種類のみであるか否か、または記録媒体上の色空間が従来色帯域のみであるか否かを容易に判別することができ、色変換処理を更に簡易化することができる。
【００７４】
ところで、本実施の形態における再生装置は、第１色変換部２０２と第２色変換部２０３とを備えたが、これら２つの色変換部の代わりに、互いに異なる色変換パラメータを切り替えて使用する１つの色変換部を備えても良い。
【００７５】
図６は、色変換部を１つだけ備えた本実施の形態における再生装置の構成を示すブロック図である。
【００７６】
再生装置２００ａは、復号部３０１と、色変換部３１０と、パラメータ保持部３１１とを備える。復号部３０１は、上述の復号部２０１と同一の機能を有する。
【００７７】
色変換部３１０は、復号部２０１からＹＵＶ復号画像データＶｙを取得するとともに、パラメータ保持部３１１から、上述の第１色空間に対応する色変換パラメータ（以下、第１色変換パラメータという）と、上述の第２色空間に対応する色変換パラメータ（以下、第２色変換パラメータという）とを取得する。そして、この色変換部３１０は、第１色変換パラメータを取得したときには、第１色空間で表現されるＹＵＶ復号画像データＶｙを、その第１色変換パラメータを用いて、第１色空間でＲＧＢ形式によって表現されるＲＧＢ復号画像データＶｒに変換する。また、この色変換部３１０は、第２色変換パラメータを取得したときには、第２色空間で表現されるＹＵＶ復号画像データＶｙを、その第２色変換パラメータを用いて、第２色空間でＲＧＢ形式によって表現されるＲＧＢ復号画像データＶｒに変換する。
【００７８】
例えば、色変換部３１０は、ｘｖＹＣＣ規格のような広色域のＹＵＶ信号（ＹＵＶ復号画像データＶｙ）を扱う場合は、論理的に負から１．０以上にまで拡張された値を持つＲＧＢ信号のＲＧＢ復号画像データＶｒを出力する。したがって、色変換部３１０から出力されたＲＧＢ復号画像データＶｒを扱う手段（例えば編集装置や表示装置（図示せず）等）は、上記負から１．０以上の値を扱うことができるもので有る必要がある。
【００７９】
また、色変換部３１０は、ＢＴ．６０１規格やＢＴ．７０９規格のような狭色域のＹＵＶ信号（ＹＵＶ復号画像データＶｙ）を扱う場合は、論理的に０．０から１．０までの値を持つＲＧＢ信号のＲＧＢ復号画像データＶｒを出力する。
【００８０】
パラメータ保持部３１１は、第１色変換パラメータおよび第２色変換パラメータを保持している。そして、パラメータ保持部３１１は、色空間情報Ｃｓを復号部３０１から取得するとともに、管理情報ＣＩを記録媒体から取得する。パラメータ保持部３１１は、復号化されたクリップに対応する色空間統一フラグが０を示すときには、そのクリップに対応する色空間情報Ｃｓに応じて、第１色変換パラメータと第２色変換パラメータとの何れか一方を選択して色変換部３１０に出力する。つまり、パラメータ保持部３１１は、色空間情報Ｃｓが第１色空間を示すときには、第１色変換パラメータを選択して色変換部３１０に出力する。その結果、色変換部３１０は、第１色空間で表現されるＹＵＶ復号画像データＶｙを復号部３０１から取得してＲＧＢ復号画像データＶｒに変換し、そのＲＧＢ復号画像データＶｒを出力する。一方、パラメータ保持部３１１は、色空間情報Ｃｓが第２色空間を示すときには、第２色変換パラメータを選択して色変換部３１０に出力する。その結果、色変換部３１０は、第２色空間で表現されるＹＵＶ復号画像データＶｙを復号部３０１から取得してＲＧＢ復号画像データＶｒに変換し、そのＲＧＢ復号画像データＶｒを出力する。
【００８１】
また、０を示す色空間統一フラグに対応するクリップの色空間は、直前または直後のクリップの色空間と異なる可能性がある。したがって、パラメータ保持部３１１は、０を示す色空間統一フラグを取得したときには、例えば、動画像シーケンスの切り換わりに違和感が生じる可能性があることをユーザに知らせる内容のメッセージＭを生成して出力する。このようなメッセージＭを取得したディスプレイは、上述のような内容を表示してユーザに知らせる。
【００８２】
ここで、パラメータ保持部３１１は、連続再生単位の一部として復号化されたクリップに対応する色空間統一フラグが１を示すときには、その連続再生単位内の全てのクリップの色空間が統一されていることを認識する。
【００８３】
つまり、パラメータ保持部３１１は、連続再生単位の一部として最初に復号化されたクリップに対応する色空間統一フラグが１を示すときには、上述の色空間統一フラグが０のときと同様に、そのクリップに対応する色空間情報Ｃｓに応じて色変換パラメータ（第１色変換パラメータまたは第２色変換パラメータ）を選択して出力する。しかし、パラメータ保持部３１１は、上述の最初のクリップ以後に連続再生単位の一部として復号化されたクリップに対しては、そのクリップに対応する色空間情報Ｃｓを特定することなく、色変換パラメータの選択および出力を停止する。すなわち、パラメータ保持部３１１は、連続再生単位内の先頭のクリップに適用された色変換パラメータを、その連続再生単位内の後続のクリップに対しても適用させる。その結果、連続再生単位内では、第１色変換パラメータと第２色変換パラメータとの切り替えは行われず、何れか一方の色変換パラメータのみが使用される。
【００８４】
なお、この再生装置２００ａでは、色変換部３１０およびパラメータ保持部３１１から、上述の第１の色変換手段と第２の色変換手段とが構成されている。
【００８５】
図７は、本実施の形態における再生装置２００ａの動作を示すフローチャートである。
【００８６】
まず、再生装置２００ａの復号部３０１は、記録媒体から読み出された多重化データＭｄを取得して、その多重化データＭｄにより示される符号化されたクリップを復号化する（ステップＳ２００）。パラメータ保持部３１１は、その復号化されたクリップに対応する色空間統一フラグが１であるか否かを判別する（ステップＳ２０２）。
【００８７】
パラメータ保持部３１１は、色空間統一フラグが０であると判別すると（ステップＳ２０２のＮ）、上述の符号化されたクリップは不連続符号化ストリームであって、そのクリップの色空間が直前または直後のクリップの色空間と異なる可能性があるため、上述のメッセージＭを生成する（ステップＳ２０４）。そして、パラメータ保持部３１１は、復号部３０１で抽出された、そのクリップに対応する色空間情報Ｃｓがどのような色空間を示しているかを特定する（ステップＳ２０６）。
【００８８】
パラメータ保持部３１１は、特定された色空間に基づいて、色変換部３１０で使用される色変換パラメータの切り替えが必要か否かを判別する（ステップＳ２０８）。ここで、切り替えが必要と判別すると、パラメータ保持部３１１は、色変換部３１０で使用されるべき色変換パラメータ（第１色変換パラメータまたは第２色変換パラメータ）を選択して色変換部３１０に出力することによって、色変換パラメータの切り替えを行う（ステップＳ２１０）。
【００８９】
一方、パラメータ保持部３１１は、色空間統一フラグが１であると判別すると（ステップＳ２０２のＹ）、さらに、ステップＳ２００で復号化されたクリップの直前に復号化されたクリップに対応する色空間統一フラグが１であるか否かを判別する（ステップＳ２１２）。つまり、パラメータ保持部３１１は、ステップＳ２００で復号化されたクリップが連続再生単位の先頭のクリップであるか否かを判別する。ここで、パラメータ保持部３１１は、直前のクリップに対応する色空間統一フラグが０であると判別すると（ステップＳ２１２のＮ）、つまりステップＳ２００で復号化されたクリップが連続再生単位の先頭のクリップであると判別すると、ステップＳ２０６からの動作を実行する。一方、パラメータ保持部３１１は、直前のクリップに対応する色空間統一フラグが１であると判別すると（ステップＳ２１２のＹ）、つまりステップＳ２００で復号化されたクリップが、連続再生単位の先頭にないと判別すると、ステップＳ２０６からの動作を実行せず、色変換パラメータの切替処理を停止する。
【００９０】
色変換部３１０は、ステップＳ２１０でパラメータ保持部３１１から色変換パラメータを取得したときには、その色変換パラメータを用いてＹＵＶ復号画像データＶｙをＲＧＢ復号画像データＶｒに変換する（ステップＳ２１４）。また、色変換部３１０は、ステップＳ２０８で色変換パラメータの切り替えが不必要と判別されたとき（ステップＳ２０８のＮ）、またはステップＳ２００で復号化されたクリップが連続再生単位の先頭にないと判別されたときには（ステップＳ２１２のＹ）、以前から使用されている色変換パラメータを用いてＹＵＶ復号画像データＶｙをＲＧＢ復号画像データＶｒに変換する（ステップＳ２１４）。このように変換されたＲＧＢ復号画像データＶｒがディスプレイに出力されて、そのＲＧＢ復号画像データＶｒにより示される映像が表示されることによって、記録媒体に記録された記録データＤが再生される。
【００９１】
復号部３０１は、最終のクリップが復号化されたか否かを判別し（ステップＳ２１６）、復号化されたと判別したときには（ステップＳ２１６のＹ）、復号処理を終了し、復号化されていないと判別したときには（ステップＳ２１６のＮ）、次に復号化されるべきクリップに対してステップＳ２００からの復号処理を実行する。
【００９２】
このように本実施の形態では、符号化ストリームＣｄを復号化することによりＹＵＶ復号画像データＶｙが生成される。そして、その符号化ストリームＣｄに対応する色空間統一フラグが１のとき、つまり、ＹＵＶ復号画像データＶｙが連続再生単位の符号化ストリームから復号化されているときには、その連続再生単位に対して共通の色変換パラメータが、ＹＵＶ復号画像データＶｙに適用される。その結果、ＹＵＶ復号画像データＶｙの色形式がＲＧＢ形式に変換される。また、その符号化ストリームに対応する色空間統一フラグが０のとき、つまり、ＹＵＶ復号画像データＶｙが不連続符号化ストリームから復号化されているときには、その不連続符号化ストリームに含まれる色空間情報Ｃｓから、その不連続符号化ストリームに応じた色変換パラメータが特定される。そして、その色変換パラメータをＹＵＶ復号画像データＶｙに適用することによって、そのＹＵＶ復号画像データＶｙの色形式がＲＧＢ形式に変換される。
【００９３】
したがって、本実施の形態の再生装置２００，２００ａは、色空間が統一された連続再生単位を再生するため、連続再生単位内で色変換方式を切り替えることなく動画像を再生することができ、再生処理を容易にすることができるとともに画質上の違和感を低減させることができる。さらに、色空間統一フラグを用いることによって、連続再生単位内の各クリップに収められた色空間情報Ｃｓの示す色空間をわざわざ特定するといった手間を省くことができる。
【００９４】
なお、上述の例では、パラメータ保持部３１１は、多重化データＭｄから抽出された色空間情報Ｃｓを復号部３０１から取得したが、色空間情報Ｃｓが管理情報ＣＩに含まれている場合には、その管理情報ＣＩから色空間情報Ｃｓを取得してもよい。
【００９５】
ここで、例えば、記録媒体に記録されている動画像の色空間定義が１種類のみであるか２種類以上であるかを示すフラグが、記録媒体の管理情報に格納されている場合がある。また、従来色帯域と広色帯域の２つの色空間の動画像を記録媒体に記録することが許可されており、従来色帯域の動画像のみが記録されているか、広色帯域の動画像が記録されている可能性があるか、を示すフラグが、記録媒体の管理情報に格納されている場合がある。このような場合には、パラメータ保持部３１１は、そのフラグを読み出してフラグの値を判定することにより、記録媒体上の色空間定義が１種類のみであるか否か、または記録媒体上の色空間が従来色帯域のみであるか否かを容易に判別することができ、色変換処理を更に簡易化することができる。
【００９６】
以上、本発明について実施の形態１および実施の形態２を用いて説明したが、本発明はこれらに限定されるものではなく、本発明の範囲を逸脱することなく種々の変形または修正が可能である。
【００９７】
例えば、実施の形態１および実施の形態２では、２種類の色空間（第１色空間または第２色空間）を用いて説明したが、実施の形態１の多重化装置および実施の形態２の再生装置を、３種類以上の色空間を取り扱えるように構成してもよい。
【００９８】
また、実施の形態１および実施の形態２では、動画像の符号化方式の例として、ＭＰＥＧ−２やＭＰＥＧ−４  ＡＶＣを挙げたが、他の符号化方式であってもよい。
【００９９】
また、実施の形態１および実施の形態２では、記録媒体の例として、ＤＶＤ−ＶｉｄｅｏやＢＤ−ＲＯＭなどのパッケージメディアを挙げたが、他のパッケージメディアであってもよい。
【０１００】
また、実施の形態１および実施の形態２では、連続再生単位を、シームレス接続された複数の符号化ストリームや、マルチアングル再生可能なように構成された複数の符号化ストリームとしたが、これら以外の複数の符号化ストリームとしてもよい。例えば、記録媒体に記録された全ての符号化ストリームを連続再生単位としてもよい。
【０１０１】
また、図１、図５および図６に示す各機能ブロックを、集積回路であるＬＳＩ（Large Scale Integration）として実現してもよい。このＬＳＩは、多重化装置１００または再生装置２００，２００ａで１チップ化されても良いし、複数チップ化されても良い（例えばメモリ以外の機能ブロックが１チップ化されていても良い）。ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
【０１０２】
また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用しても良い。
【０１０３】
さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。
【０１０４】
また、図１、図５および図６に示す各機能ブロックと、図４および図７に示す処理動作とにおける中心的部分を、プロセッサおよびプログラムによって実現してもよい。
【産業上の利用可能性】
【０１０５】
本発明にかかる多重化装置、多重化方法、記録媒体、再生装置、および再生方法は、例えば連続再生単位などの所定単位において、再生される動画像の色空間を１種類のみとする（固定とする）ため、色空間定義の切り替わりに起因する頻繁な色変換方式の切り替えをなくすことができる。その結果、異なる色空間を有する動画像シーケンスが同一媒体上に記録されたパッケージメディアの再生装置の処理負荷を軽減でき、また色空間定義の切り替わりに起因する主観上の画質に対する違和感をなくすことができるという効果を有する。したがって、本発明は、例えばビデオカメラや、ビデオ再生装置、携帯電話、パーソナルコンピュータなどに適用することができる。
【図面の簡単な説明】
【０１０６】
【図１】図１は、本発明の実施の形態１における多重化方法を実現する多重化装置の構成を示すブロック図である。
【図２Ａ】図２Ａは、本発明の実施の形態１における連続再生単位を示す図である。
【図２Ｂ】図２Ｂは、本発明の実施の形態１における他の連続再生単位を示す図である。
【図２Ｃ】図２Ｃは、本発明の実施の形態１におけるさらに他の連続再生単位を示す図である。
【図３】図３は、本発明の実施の形態１の多重化装置によって記録媒体に記録された情報の一例を示す図である。
【図４】図４は、本実施の形態における多重化装置１００の動作を示すフローチャートである。
【図５】図５は、本実施の形態における再生装置の構成を示すブロック図である。
【図６】図６は、色変換部を１つだけ備えた本実施の形態における再生装置の構成を示すブロック図である。
【図７】図７は、本実施の形態における再生装置の動作を示すフローチャートである。
【符号の説明】
【０１０７】
１００  多重化装置
１０１  色空間決定部
１０２  フラグ生成部
１０３  符号化部
１０４  システム多重化部
１０５  管理情報作成部
１０６  結合部
２００，２００ａ  再生装置
２０１  復号部
２０２  第１色変換部
２０３  第２色変換部
２０４  制御部
２０５，２０６  切替部
３０１  復号部
３１０  色変換部
３１１  パラメータ保持部
【図１】
0005235411.tif 000002
【図２Ａ】
0005235411.tif 000003
【図２Ｂ】
0005235411.tif 000004
【図２Ｃ】
0005235411.tif 000005
【図３】
0005235411.tif 000006
【図４】
0005235411.tif 000007
【図５】
0005235411.tif 000008
【図６】
0005235411.tif 000009
【図７】
0005235411.tif 000010