(57)【特許請求の範囲】
【請求項１】
圧縮符号化された映像信号を切り替えるための映像符号化装置において、
圧縮符号化された映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する、少なくとも１対のデコーダ装置と、
少なくとも１対のデコーダ装置に接続され、一方のデコーダ装置の出力である符号化情報付映像信号から他方のデコーダ装置の出力である符号化情報付映像信号に切り替える映像スイッチャーと、
前記映像スイッチャーで切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する符号化情報抽出部と、
前記符号化抽出部に接続され、同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化を行うエンコーダと、
前記符号化情報抽出部で抽出された符号化情報信号に含まれる連続性を示す情報を参照して前記映像スイッチャーの切り替えによる符号化情報信号の不連続を検出する不連続検出部と、
前記不連続検出部で不連続検出の結果があった場合で、不連続点付近で同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、前記一定期間経過後に前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる符号化制御部とを備え、
前記符号化制御部では、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせることを特徴とする映像符号化装置。
【請求項２】
圧縮符号化された映像信号を切り替えるための映像符号化方法において、
圧縮符号化された少なくとも１対の映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する工程と、
一方の符号化情報付映像信号のデコードの出力をから他方の符号化情報付映像信号のデコード出力に切り替える工程と、
切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する工程と、
同一のデコードの出力の符号化情報付映像信号から抽出された符号化情報信号で前記映像信号の圧縮符号化を行う工程と、
抽出された符号化情報信号に含まれる連続性を示す情報を参照して切り替えによる符号化情報信号の不連続を検出する工程と、
不連続検出の結果があった場合で、不連続点付近で同一のデコードの出力の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、前記一定期間経過後に抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる工程とを備え、
３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせることを特徴とする映像符号化方法。
【請求項３】
圧縮符号化された映像信号を切り替えるためのトランスコーダ装置において、
圧縮符号化された映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する、少なくとも１対のデコーダ装置と、
少なくとも１対のデコーダ装置に接続され、一方のデコーダ装置の出力である符号化情報付映像信号から他方のデコーダ装置の出力である符号化情報付映像信号に切り替える映像スイッチャーと、
前記映像スイッチャーで切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する符号化情報抽出部と、
前記符号化抽出部に接続され、同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化を行うエンコーダと、
前記符号化情報抽出部で抽出された符号化情報信号に含まれる連続性を示す情報を参照して前記映像スイッチャーの切り替えによる符号化情報信号の不連続を検出する不連続検出部と、
前記不連続検出部で不連続検出の結果があった場合で、不連続点付近で同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、前記一定期間経過後に前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる符号化制御部とを備え、
前記符号化制御部では、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせることを特徴とするトランスコーダ装置。
【請求項４】
圧縮符号化された映像信号を切り替えるためのトランスコード方法において、
圧縮符号化された少なくとも１対の映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する工程と、
一方の出力である符号化情報付映像信号から他方の出力である符号化情報付映像信号に切り替える工程と、
切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する工程と、
抽出された符号化情報信号で前記映像信号の圧縮符号化を行う工程と、
抽出された符号化情報信号に含まれる連続性を示す情報を参照して切り替えによる符号化情報信号の不連続を検出する工程と、
不連続検出の結果があった場合で、抽出された前記符号化情報信号に対して不連続点付近で整合性がとれず破綻をきたした場合に、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、整合性がとれた時点で前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる工程とを備え、
３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせることを特徴とするトランスコード方法。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、映像信号を符号化情報に従って圧縮符号化する映像符号化装置、圧縮符号化された映像信号をデコードし、再エンコードするトランスコーダ装置に関する。特に、本発明は、圧縮に使用する符号化情報の不連続に起因する矛盾を吸収するための映像符号化装置、映像符号化方法、トランスコーダ装置、トランスコード方法に関する。
【０００２】
【従来の技術】
ディジタルテレビジョン放送においては、一般的に、テレビ映像信号の圧縮符号化にはＭＰＥＧ２が用いられている。
中央局、地方局それぞれで作られたＭＰＥＧ（Moving Picture Experts Group）２トランスポート・ストリームを相互に切り替えて放送する場合を想定する。この場合、ＭＰＥＧ２トランスポート・ストリームの状態で切り替えを行うことはできない。そのため、一旦映像信号にデコードしてから切替を行わなければならない。しかし、一旦デコードした映像信号を再エンコードすると、画質劣化が大きくなる。そのため、デコード時に映像信号にＭＰＥＧ２符号化情報を重畳し、再エンコードを行う際にその符号化情報を利用することにより画質劣化を軽減する手法（トランスコード）を用いる必要がある。
【０００３】
そのため、デコード時に映像信号にＭＰＥＧ２符号化情報を重畳し、再エンコード（符号化）を行う際にその符号化情報を利用することにより画質劣化を軽減する手法（トランスコード）を用いる必要がある。
【０００４】
【発明が解決しょうとする課題】
しかしながら、符号化情報付き映像信号を切り替えた場合、切り替えによって符号化情報が不連続になることにより矛盾が生じ、符号化情報を利用して再エンコードを行うことが不可能である。
例えば、トランスコードのエンコード時に、ＭＰＥＧ２のＩピクチャ（フレーム内符号化画像）又はＰピクチャ（フレーム間順方向予測符号化画像）が現れる周期Ｍに制約があった際、符号化情報の不連続に起因して周期Ｍの制約を越える場合があり、この場合には周期Ｍの制約に矛盾が生じ、ＭＰＥＧ２のエンコードに破綻が起きるという問題がある。
【０００５】
さらに、符号化情報の３：２プルダウン（一例として映画素材など２４フレーム／秒の映像を３０フレーム／秒に変換した映像をエンコーダーに入力した際に映像を２４フレーム／秒に変換し直して符号化を行う手法）状態が、符号化情報の不連続によって矛盾が生じた場合、符号化情報を利用して再エンコードを行うと破綻を生じるという問題がある。
このように、符号化情報に矛盾が起きエンコードに破綻を生じると、一旦、エンコードの動作がリセットされ、再スタートしなければならず、符号化情報付き映像信号の切り替えをシームレスに行うことができない。
【０００６】
また、符号化情報が重畳されていない映像信号に切り替わった場合、継承する符号化情報が存在しないため、再エンコードを行うことが出来なくなり破綻をきたす。
したがって、本発明は上記問題点に鑑みて、符号化情報が不連続または入力されなかった場合にも符号化情報の矛盾を吸収し、且つエンコード装置の破綻を防止することが可能となる画像符号化装置、画像符号化方法、トランスコーダ装置、トランスコード方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は前記問題点を解決するために、圧縮符号化された映像信号を切り替えるための映像符号化装置において、圧縮符号化された映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する、少なくとも１対のデコーダ装置と、少なくとも１対のデコーダ装置に接続され、一方のデコーダ装置の出力である符号化情報付映像信号から他方のデコーダ装置の出力である符号化情報付映像信号に切り替える映像スイッチャーと、前記映像スイッチャーで切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する符号化情報抽出部と、前記符号化抽出部に接続され、同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化を行うエンコーダと、前記符号化情報抽出部で抽出された符号化情報信号に含まれる連続性を示す情報を参照して前記映像スイッチャーの切り替えによる符号化情報信号の不連続を検出する不連続検出部と、前記不連続検出部で不連続検出の結果があった場合で、不連続点付近で同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、前記一定期間経過後に前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる符号化制御部とを備えることを特徴とする映像符号化装置を提供する。
【０００８】
この手段により、中央局から地方局の映像に切り替えられ、圧縮符号化すべき映像信号、符号化情報が不連続になった場合にも符号化情報の矛盾を吸収することにより映像符号化装置の破綻を防止することが可能となり、映像信号の切り替えをシームレスに行うことが可能になる。
【０００９】
さらに、前記符号化制御部では、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復ができた場合に前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００１０】
この手段により、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
【００１１】
さらに、前記符号化制御部では、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００１２】
この手段により、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので、ピクチャタイプの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
【００１３】
さらに、前記符号化制御部では、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせることを特徴とする、請求項１に記載の映像符号化装置。
【００１４】
この手段により、符号化情報の不連続検出時に３：２プルダウンの追従ができず、ピクチャタイプの追従ができない場合、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になり、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になる。
【００１５】
さらに、本発明は、圧縮符号化された映像信号を切り替えるための映像符号化方法において、圧縮符号化された少なくとも１対の映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する工程と、一方の符号化情報付映像信号のデコードの出力をから他方の符号化情報付映像信号のデコード出力に切り替える工程と、切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する工程と、同一のデコードの出力の符号化情報付映像信号から抽出された符号化情報信号で前記映像信号の圧縮符号化を行う工程と、抽出された符号化情報信号に含まれる連続性を示す情報を参照して切り替えによる符号化情報信号の不連続を検出する工程と、不連続検出の結果があった場合で、不連続点付近で同一のデコードの出力の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、前記一定期間経過後に抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる工程とを備えることを特徴とする映像符号化方法を提供する。
【００１６】
この手段により、中央局から地方局の映像に切り替えられ、圧縮符号化すべき映像信号、符号化情報が不連続になった場合にも符号化情報の矛盾を吸収することにより映像符号化方法の破綻を防止することが可能となり、映像信号の切り替えをシームレスに行うことが可能になる。
【００１７】
さらに、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復ができた場合に抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００１８】
この手段により、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化方法が破綻することを回避することが可能になる。
【００１９】
さらに、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００２０】
この手段により、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので、ピクチャタイプの追従ができずに映像符号化方法が破綻することを回避することが可能になる。
【００２１】
さらに、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００２２】
この手段により、符号化情報の不連続検出時に３：２プルダウンの追従ができず、ピクチャタイプの追従ができない場合、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になり、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になる。
【００２３】
さらに、本発明は、圧縮符号化された映像信号を切り替えるためのトランスコーダ装置において、圧縮符号化された映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する、少なくとも１対のデコーダ装置と、少なくとも１対のデコーダ装置に接続され、一方のデコーダ装置の出力である符号化情報付映像信号から他方のデコーダ装置の出力である符号化情報付映像信号に切り替える映像スイッチャーと、前記映像スイッチャーで切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する符号化情報抽出部と、前記符号化抽出部に接続され、同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化を行うエンコーダと、前記符号化情報抽出部で抽出された符号化情報信号に含まれる連続性を示す情報を参照して前記映像スイッチャーの切り替えによる符号化情報信号の不連続を検出する不連続検出部と、前記不連続検出部で不連続検出の結果があった場合で、不連続点付近で同一のデコーダ装置の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、前記一定期間経過後に前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる符号化制御部とを備えることを特徴とするトランスコーダ装置を提供する。
【００２４】
この手段により、中央局から地方局の映像に切り替えられ、圧縮符号化すべき映像信号、符号化情報が不連続になった場合にも符号化情報の矛盾を吸収することによりトランスコーダ装置の破綻を防止することが可能となり、映像信号の切り替えをシームレスに行うことが可能になる。
【００２５】
さらに、前記符号化制御部では、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復ができた場合に前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００２６】
この手段により、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずにトランスコーダ装置が破綻することを回避することが可能になる。
【００２７】
さらに、前記符号化制御部では、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００２８】
この手段により、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので、ピクチャタイプの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
【００２９】
さらに、前記符号化制御部では、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００３０】
この手段により、符号化情報の不連続検出時に３：２プルダウンの追従ができず、ピクチャタイプの追従ができない場合、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になり、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になる。
【００３１】
さらに、本発明は、圧縮符号化された映像信号を切り替えるためのトランスコード方法において、圧縮符号化された少なくとも１対の映像信号を符号化情報と映像信号にデコードし、符号化情報と映像信号が重畳された符号化情報付映像信号として出力する工程と、一方の符号化情報付映像信号のデコードの出力をから他方の符号化情報付映像信号のデコード出力に切り替える工程と、切り替えられた前記符号化情報付映像信号を入力し、入力した前記符号化情報付映像信号から映像信号、符号化情報信号を抽出する工程と、同一のデコードの出力の符号化情報付映像信号から抽出された符号化情報信号で前記映像信号の圧縮符号化を行う工程と、抽出された符号化情報信号に含まれる連続性を示す情報を参照して切り替えによる符号化情報信号の不連続を検出する工程と、不連続検出の結果があった場合で、不連続点付近で同一のデコードの出力の符号化情報付映像信号から抽出した符号化情報信号で前記映像信号の圧縮符号化できない一定期間、抽出した前記符号化情報信号を使わずに、符号化情報信号を変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、前記一定期間経過後に抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる工程とを備えることを特徴とするトランスコード方法を提供する。
【００３２】
この手段により、中央局から地方局の映像に切り替えられ、圧縮符号化すべき映像信号、符号化情報が不連続になった場合にも符号化情報の矛盾を吸収することによりトランスコード方法の破綻を防止することが可能となり、映像信号の切り替えをシームレスに行うことが可能になる。
【００３３】
さらに、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復ができた場合に抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００３４】
この手段により、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
【００３５】
さらに、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００３６】
この手段により、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う場合、符号化情報の不連続検出時に、矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので、ピクチャタイプの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
【００３７】
さらに、３：２プルダウンの映像信号である場合、不連続点付近で第１フィールド、第２フィールドの一方が切り替え前で他方が切り替え後で整合性がとれず破綻をきたした場合に、抽出した３：２プルダウンの符号化情報信号を使わず、整合性がとれず破綻をきたした１対の第１フィールド、第２フィールドとその後に続く１対の第１フィールド、第２フィールドの符号化情報信号に変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、３：２プルダウン追従の回復期間中にピクチャータイプパターンに関する符号情報のパターンの継承が行われ、Ｉピクチャ、Ｐピクチャ、Ｂピクチャからなるピクチャタイプの映像信号に対してＩピクチャ、Ｐピクチャが現れる周期に一定の制限がある場合、不連続点付近でＩピクチャ、Ｐピクチャが現れる周期が一定の制限を超え破綻をきたした場合に、抽出した符号化情報信号を使わず、破綻をきたした周期に含まれるＢピクチャをＩピクチャに置き換えるように、符号化情報信号を変更し、変更した符号化情報信号で前記エンコーダに対して前記映像信号の圧縮符号を行わせ、切り替え後のＢピクチャが切り替え後のＩピクチャ、Ｐピクチャを参照することが可能になった時点で、前記エンコーダに対して前記符号化情報抽出部で抽出された前記符号化情報信号を継承させ映像信号の圧縮符号を行わせる。
【００３８】
この手段により、符号化情報の不連続検出時に３：２プルダウンの追従ができず、ピクチャタイプの追従ができない場合、符号化情報の追従の回復として３：２プルダウンの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になるので３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になり、符号化情報の追従の回復としてピクチャタイプの追従の回復を行う際に矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収した後に、追従の回復を行うことが可能になる。
【００４８】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
図１は本発明に係るトランスコーダ装置の概略構成を示すブロック図である。
本図に示すように、トランスコーダ装置１００には２つのデコーダ（復号化）装置１０１、１０２が設けられる。
【００４９】
デコーダ（復号化）装置１０１には、デコーダＬＳＩ（大規模集積回路）１０６が設けられ、デコーダＬＳＩ１０６は、圧縮符号化したＭＰＥＧ２トランスポート・ストリーム（ＴＳ）データ１０５を入力し、入力したＭＰＥＧ２ＴＳデータ１０５をデコードし、映像信号１０８を出力する。
さらに、デコーダＬＳＩ１０６には並列に符号化情報デコード部１０７が接続され、符号化情報デコード部１０７はＭＰＥＧ２ＴＳデータ１０５を入力し、入力したＭＰＥＧ２ＴＳデータ１０５より符号化情報を取り出し、任意のフォーマットに変換し符号化情報信号１０９を出力する。
【００５０】
デコーダＬＳＩ１０６、符号化情報デコード部１０７の出力側には映像符号化情報重畳部１１０が接続され、映像符号化情報重畳部１１０は、デコーダＬＳＩ１０６から入力した映像信号１０８に、符号化情報デコード部１０７から入力した符号化情報信号１０９のうち、入力する映像信号１０８と同じ映像ピクチャに対応した符号化情報を重畳し符号化情報付映像信号１１７として出力する。
【００５１】
同様に、デコーダ装置１０２には、デコーダＬＳＩ１１２が設けられ、デコーダＬＳＩ１１２は、ＭＰＥＧ２ＴＳデータ１１１を入力し、入力したＭＰＥＧ２ＴＳデータ１１１をデコードし、映像信号１１４を出力する。
さらに、デコーダＬＳＩ１１２には並列に符号化情報デコード部１１３が接続され、符号化情報デコード部１１３はＭＰＥＧ２ＴＳデータ１１１を入力し、入力したＭＰＥＧ２ＴＳデータ１１１より符号化情報を取り出し、任意のフォーマットに変換し符号化情報信号１１５を出力する。
【００５２】
デコーダＬＳＩ１１２、符号化情報デコード部１１３の出力側には映像符号化情報重畳部１１６が接続され、映像符号化情報重畳部１１６は、デコーダＬＳＩ１１２から入力した映像信号１１４に、符号化情報デコード部１１３から入力した符号化情報信号１１５のうち、入力する映像信号１１４と同じ映像ピクチャに対応した符号化情報を重畳し符号化情報付映像信号１１８として出力する。
【００５３】
映像符号化情報重畳部１１０、１１６の出力側には映像スイッチャー１０３が接続され、映像スイッチャー１０３は、映像符号化情報重畳部１１０、１１６から符号化情報付映像信号１１７、１１８を入力し、外部から入力した切り替え信号により、符号化情報付映像信号１１７、１１８のどちらか一方を符号化情報付映像信号１１９として出力する。
【００５４】
さらに、映像スイッチャー１０３の出力側にはエンコーダ装置１０４が接続され、エンコーダ（符号化）装置１０４は、映像スイッチャー１０３から符号化情報付映像信号１１９を入力して不連続に起因して起きる矛盾を吸収し、破綻することなくエンコードを行う。
エンコーダ装置１０４には符号化情報抽出部１２０が設けられ、符号化情報抽出部１２０は、映像スイッチャー１０３の出力側に接続され、映像スイッチャー１０３から符号化情報付映像信号１１９を入力し、入力した符号化情報付映像信号１１９から符号化情報を抜き出し映像信号１２１を出力し、さらに、符号化情報信号１２２を抽出する。
【００５５】
さらに、符号化情報抽出部１２０の出力側にはエンコーダＬＳＩ１２５が接続され、エンコーダＬＳＩ１２５は、符号化情報抽出部１２０から、符号化情報を抜き出した映像信号１２１を入力しこれを圧縮符号化してＭＰＥＧ２エレメント・ストリーム（ＥＳ）信号１２６にエンコードし出力する。
さらに、エンコーダ装置１０４の符号化情報抽出部１２０の出力側には不連続検出部１２７が接続され、不連続検出部１２７は、符号化情報抽出部１２０から入力した映像信号１２１、符号化情報信号１２２を入力し、符号化情報信号１２２に含まれる連続性を示す情報を参照して現フィールドと前フィールドが連続しているか否かを判定して、映像スイッチャー１０３の切替による不連続点検出を行い、不連続点検出結果１２８を出力する。
【００５６】
すなわち、不連続検出部１２７は、連続すべき符号化情報信号１２２の消失を検出した場合には、入力する映像信号１２１が不連続であるとの不連続点検出結果１２８を出力する。
このようにして、中央局から地方局の映像に、逆に地方局から中央局への切り替えが容易に検出される。
【００５７】
さらに、エンコーダ装置１０４の不連続検出部１２７、符号化情報抽出部１２０の出力側にはエンコーダ（符号化）制御部１２３が接続され、エンコーダ制御部１２３は、不連続検出部１２７からの不連続点検出結果１２８、符号化情報抽出部１２０からの符号化情報信号１２２を参照し、不連続があった場合には、３：２プルダウン追従制御、ピクチャタイプ追従制御、参照ピクチャ判定制御により、符号化情報の継承の判定を行い、エンコーダＬＳＩ１２５に符号化制御信号１２４を出力し、符号化情報抽出部１２０からの映像信号１２１をエンコーダ制御部１２３からの符号化制御信号１２４に従い圧縮符号化させ、ＭＰＥＧ２ＥＳ信号１２６を出力させ、不連続が起こった場合には不連続点で起こる矛盾を吸収し、破綻することなく、エンコーダＬＳＩ１２５にエンコードを行わせる。
【００５８】
なお、符号化情報抽出部１２０からの符号化情報信号１２２には、３：２プルダウン追従制御に必要となる、ピクチャ構成情報が含まれる。ピクチャ構成情報は、最初のフィールドが第１フィールドか第２フィールドかを示す符号化情報、および第１フィールドのコピーを出力しているかを示す符号化情報からなる。
【００５９】
さらに符号化情報信号１２２には、ピクチャタイプ追従制御、すなわち、ＧＯＰ（Ｇｒｏｕｐ  ｏｆ  Ｐｉｃｔｕｒｅｓ）構造追従、参照ピクチャ判定に必要となるピクチャタイプ情報が含まれる。
図２はエンコーダ制御部１２３の一連の概略動作を説明するフローチャートである。
本図に示すように、ステップＳ６７１において、符号化情報抽出部１２０から符号化情報信号１２２を入力する。
【００６０】
ステップＳ６７２において、不連続検出部１２７から不連続点検出結果１２８を入力する。
ステップＳ６７３において、不連続点検出結果１２８に基づいて、現在不連続か否かの判定を行う。
ステップＳ６７４において、不連続でない場合には、現在不連続処理中か否かを判定する。
【００６１】
ステップＳ６７５において、現在不連続でなく、不連続処理中でない場合には、３：２プルダウン追従の処理を行う。
ステップＳ６７６において、ピクチャタイプ追従の処理を行う。
ステップＳ６７７において、参照ピクチャ使用を可能とする。
ステップＳ６７８において、抽出した符号化情報信号１２２を符号化制御信号１２４としてエンコーダＬＳＩ１２５に抽出した映像信号１２１を符号化し、符号化情報の継承を可能にし、処理を終了する。
【００６２】
ステップＳ６７９において、ステップＳ６７３で不連続と判定した場合には、３：２プルダウン符号化状態が整合していない場合には矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収し、３：２プルダウン追従の回復を行う。
ステップＳ６８０において、３：２プルダウン追従が回復できたか否かを判定する。
ステップＳ６８１において、ステップＳ６８１で３：２プルダウン追従が回復できた場合にはピクチャータイプパターンに関する過去の符号化情報のパターン継承を行う。
【００６３】
ステップＳ６８２において、ピクチャタイプ符号化状態が整合していない場合には矛盾する符号化情報に従わずに圧縮符号化することにより矛盾を吸収し、ピクチャタイプ追従の回復を行う。
ステップＳ６８３において、ピクチャタイプ追従の回復ができたか否かを判定する。
ステップＳ６８４において、ピクチャタイプ追従の回復ができた場合には参照ピクチャの整合性を考慮して参照ピクチャ判定を行う。
ステップＳ６８５において、参照ピクチャがそろったか否かの判定を行う。
【００６４】
ステップＳ６８６において、参照ピクチャがそろったとの判定の場合には、不連続処理を終了し、ステップＳ６７７に進み、参照ピクチャを使用可能にする。
ステップＳ６８７において、ステップＳ６８０で３：２プルダウン追従が回復できず、さらに、ステップＳ６８３でピクチャタイプ追従が回復できない場合には、参照ピクチャ使用を不可能にする。
【００６５】
ステップＳ６８８において、ステップＳ６８７で３：２プルダウン追従の回復中、ピクチャタイプ追従の回復中に参照ピクチャ使用が不可能にされた場合、さらに、ステップＳ６８５で参照ピクチャがそろわなったとの判定された場合には、抽出された符号化情報信号１２２の継承を不可とする。すなわち、上記切り替え中には抽出された符号化情報信号１２２を符号化制御信号１２４としてエンコーダＬＳＩ１２５に抽出した映像信号１２１を符号化し、符号化情報の継承を不可能にし、処理を終了する。
【００６６】
ステップＳ６８９において、ステップＳ６７４で不連続処理中である場合には、３：２プルダウン追従が回復したか否かを判定する。回復していない場合にはステップＳ６７９に進み、３：２プルダウン追従の回復の処理を続ける。
ステップＳ６９０において、３：２プルダウン追従が回復した場合にはピクチャタイプ追従が回復した否かを判定する。回復していない場合にはステップＳ６８２に進み、ピクチャタイプ追従の回復の処理を続ける。
【００６７】
ステップＳ６９１において、ピクチャタイプ追従が回復した場合には参照ピクチャ判定が終了したか否かを判定する。参照ピクチャ判定が終了していない場合にはステップＳ６８４に進み、参照ピクチャ判定を行う。参照ピクチャ判定が終了した場合にはステップＳ６８６に進み、不連続処理を終了する。
図３は図２におけるステップＳ６８０の３：２プルダウン追従の回復の動作を詳細に説明するタイミングチャートである。
【００６８】
本図を用いて、不連続検出前後の３：２プルダウン符号化状態の整合性を考慮して３：２プルダウン符号化状態を追従させる符号化制御を説明する。
本図（ａ）に示す符号化情報付映像信号１１７はデコーダー装置１０１から出力された３：２プルダウンパターンとして、（ａ０、ａ０）、（ａ１、ａ１、ａ１）、（ａ２、ａ２）、（ａ３、ａ３、ａ３）、（ａ４、ａ４）、（ａ５、ａ５、ａ５）の第１フィールド、第２フィールドによりピクチャを構成する映像信号を示す。
【００６９】
本図（ｂ）に示す符号化情報付映像信号１１８はデコーダ装置１０２から出力された３：２プルダウンパターンとして、（ｂ０、ｂ０、ｂ０）、（ｂ１、ｂ１）、（ｂ２、ｂ２、ｂ２）、（ｂ３、ｂ３）、（ｂ４、ｂ４、ｂ４）、（ｂ５、ｂ５）の第１フィールド、第２フィールドによりピクチャを構成する映像信号を示す。
符号化情報付映像信号１１７の第１フィールドに２枚のａ１フィールド３０１、３０２が存在しているが、これはフィールド３０２がフィールド３０１のコピーであることを示す。以下同様である。
【００７０】
本図（ａ）、（ｂ）に示すように、各映像信号の第１フィールド、第２フィールドは相互に一致しているが３：２プルダウンパターンは必ずしも一致しない。
本図（ｃ）に示す符号化情報付映像信号１１９は、エンコーダ装置１０４に入力される符号化情報付映像信号である。符号化情報付映像信号１１９は本図（ａ）に示す符号化情報付映像信号１１７、本図（ｂ）に示す符号化情報付映像信号１１８が映像スイッチャー装置１０３によって７００時点で切替えられ、不連続となっている。
【００７１】
不連続点を持った本図（ｃ）に示す符号化情報付映像信号１１９のピクチャ構成情報をそのまま継承して符号化を行うとａ２フィールド３０３が符号化されずに残る。
このまま、３：２プルダウン追従処理を継承すると、不連続検出前後の３：２プルダウン符号化状態の整合性がとれず、以降の符号化処理に破綻をきたす。
【００７２】
本図（ｄ）に示すように、図２に示すステップＳ６７９の３：２プルダウン追従の回復では、不連続の７００時点を検出した時点で、３：２プルダウン追従を行う映像信号のピクチャ構成情報を解析する。解析結果、入力した前記符号化情報に矛盾があった場合、エンコーダ制御部１２３からの指示として、７００時点と７０１時点の間の３０４期間では符号化情報抽出部１２０で抽出した符号化情報を使わずに、矛盾の起こらないパターンで符号化するようにエンコーダＬＳＩ１２５の制御を行う。
なお、７０１時点は３：２プルダウン追従が回復する時点である。
【００７３】
一例として、上記例のエンコーダ制御部１２３では、３０４期間で抽出した符号化情報を使わずに、フィールドを（ａ２、ｂ３）、（ｂ３、ｂ４）、（ｂ４、ｂ４）のように第１フィールド、第２フィールドの対で符号化するように、各々のフィールドの符号化情報を変更する。これにより、７００時点から７０１時点の間で３：２プルダウン追従が回復する。
【００７４】
この場合、時点７０１以降では符号化情報抽出部１２０で抽出した符号化情報を使うことが可能になる。このようにして、不連続検出前後で３：２プルダウン符号化状態の整合性を取ることが可能になる。
図４は図３（ｄ）に示すエンコーダ制御部１２３の指示に関する他の例を示す図である。
【００７５】
先ず、本図（ａ）、（ｂ）に示すように、不連続時点７００の前後で、３：２プルダウン追従処理で矛盾が無い場合には、入力した符号化情報をそのまま使用してエンコーダＬＳＩ１２５の制御を行う。すなわち、何の制御をせずとも、不連続検出前後で３：２プルダウン符号化状態の整合性を取ることが可能である。
本図（ｃ）、（ｄ）に示すように、不連続時点７００の後で、３：２プルダウン追従できない場合に、エンコーダ制御部１２３では、３０４期間で抽出した符号化情報を使わずに、本図（ｃ）では（ｂ２、ｂ２）、本図（ｄ）では（ｂ１、ｂ２）、（ｂ２、ｂ２）のように、一対の第１フィールド、第２フィールドの追従で符号化するように、各々のフィールドの符号化情報を変更する。これにより、３：２プルダウン追従の回復が可能になる。このようにして、不連続検出前後で３：２プルダウン符号化状態の整合性を取ることが可能になる。
【００７６】
本図（ｅ）、（ｆ）に示すように、不連続時点７００の前で、３：２プルダウン追従できない場合に、エンコーダ制御部１２３では、３０４期間で抽出した符号化情報を使わずに、本図（ｅ）では（ａ２、ｂ３）、（ｂ３、ｂ４）、（ｂ４、ｂ４）、本図（ｆ）では（ａ２、ｂ４）、（ｂ４、ｂ４）のように、一対の第１フィールド、第２フィールドの追従で符号化するように、各々のフィールドの符号化情報を変更する。これにより、３：２プルダウン追従の回復が可能になる。このようにして、不連続検出前後で３：２プルダウン符号化状態の整合性を取ることが可能になる。
【００７７】
本図（ｇ）、（ｈ）に示すように、不連続時点７００の前後で、３：２プルダウン追従できない場合に、エンコーダ制御部１２３では、３０４期間で抽出した符号化情報を使わずに、本図（ｇ）では（ａ２、ｂ１）、（ｂ２、ｂ２）、（ｂ２、ｂ３）、（ｂ３、ｂ４）、（ｂ４、ｂ４）、本図（ｆ）では（ａ２、ｂ２）、（ｂ２、ｂ３）、（ｂ３、ｂ４）、（ｂ４、ｂ４）のように、一対の第１フィールド、第２フィールドの追従で３：２プルダウン追従の回復を行う。これにより、以降の符号化処理が可能になる。このようにして、不連続検出前後で３：２プルダウン符号化状態の整合性を取ることが可能になる。
【００７８】
図５は図２におけるステップＳ６８２のピクチャタイプ追従の回復、ステップＳ６８４の参照ピクチャ判定の動作を説明するタイミングチャートである。
本図を用いて、不連続検出前後の符号化ピクチャタイプの整合性を考慮してピクチャタイプ符号化状態を追従させる符号化制御を説明する。
一例として、エンコーダＬＳＩ１２５がフレーム内符号化画像（以下Ｉピクチャという）又はフレーム間順方向予測符号化画像（以下Ｐピクチャという）が現れる周期（以下Ｍという）が４以上であると、ＭＰＥＧ２のエンコードできないという制約があるとする。
【００７９】
本図（ａ）に示すように、符号化情報付映像信号１１７に関して、デコーダ装置１０１から出力された映像信号は、ピクチャタイプパターンで「ＢＢＰＢＢＩＢＢＰＢＢＰＢＢＰ」であるとする。ここで、Ｂはフレーム間双方向予測符号化画像（以下Ｂピクチャという）を示す。
本図（ｂ）に示すように、符号化情報付映像信号１１８に関して、デコーダ装置１０２から出力された映像信号は、ピクチャタイプパターンで「ＰＢＢＰＢＢＩＢＢＰＢＢＰＢＢ」であるとする。
【００８０】
なお、符号化情報付映像信号１１７、符号化情報付映像信号１１８の各々において、２枚のＢピクチャ４０２、Ｂピクチャ４０３の符号化情報にはＩピクチャ４０１、Ｐピクチャ４０４を参照した情報が含まれている。
符号化情報付映像信号１１９は、映像スイッチャ装置１０３によって、時点７００で符号化情報付映像信号１１７から符号化情報付映像信号１１８に切り替えられ、本図（ｃ）に示すように、切り替え時点７００前の符号化情報付映像信号１１７の「ＢＢＰＢＢＩＢ」と、切り替え時点７００時点後の符号化情報付映像信号１１８の「ＢＢＰＢＢＰＢＢ」とで構成される。
【００８１】
本図（ｃ）に示す符号化情報付映像信号１１９では、不連続点７０１の付近で周期Ｍが４となる期間４０５で、符号化ピクチャタイプの整合性を取れず、符号化処理に破綻をきたす。
そこで、図２に示すステップＳ６８２のピクチャタイプ追従の回復では、現ピクチャのピクチャタイプ情報と過去設定したピクチャタイプ情報を参照することにより、周期Ｍが４以上になることを検知する。
【００８２】
本図（ｄ）に示すように、ＢピクチャをＩピクチャに変更する制御４０６を行い、以降の符号化処理の破綻回避が可能になる。
すなわち、不連続検出時に、符号化ピクチャタイプの整合性が取れ、ピクチャタイプ追従の回復により符号化処理が可能になる。
図２におけるステップＳ６８４の参照ピクチャ判定処理では、Ｂピクチャ又はＰピクチャの予測に必要となる参照ピクチャが全てそろったかを判定し、符号化情報を継承することが可能であるかを判定する。
【００８３】
本図（ｄ）において、切り替え時点７００付近で単純に２枚のＢピクチャ４０８、４０９の参照ピクチャを４０７、４１０とすると、Ｉピクチャ４０７、Ｂピクチャ４０８、４０９が符号化情報付映像信号１１７に属し、Ｉピクチャ４１０が符号化情報付映像信号１１８に属するので、２枚のＢピクチャ４０８、４０９は異なる符号化情報付映像信号１１８のＩピクチャ４１０を参照してしまう。
【００８４】
そこで、図２に示すステップＳ６８４の参照ピクチャ判定処理では、不連続検出後参照に必要となるピクチャがそろうまで継承不可とする制御を行いエンコード処理の破綻を回避する。
すなわち、本図（ｄ）に示すように、エンコーダ制御部１２３では、ピクチャタイプ追従の回復時点７０２後最初に、符号化情報付映像信号１１８のＢピクチャ４１２、４１３が符号化情報付映像信号１１８のＰピクチャ４１１、４１４を参照することが可能になる参照ピクチャ判定終了時点７０３で抽出した符号化情報の継承を可能とする。これにより、符号化情報に従って圧縮符号化を行っている際に、符号化情報の参照画像と異なった画像を参照することによる画質の大幅な劣化を回避することが可能になる。
【００８５】
図６は、符号化情報が不連続となる符号化情報付映像情報をエンコーダＬＳＩ１２５に入力する際にエンコーダ制御部１２３における処理の組み合わせ例を詳細に説明するタイミングチャートである。この処理の組み合わせ例は一例であり、必ずしもこの順序で制御を行うものとは限らない。
本図（ａ）に示すように、エンコーダ装置１０４に入力される符号化情報付映像信号１１９はデコーダ装置１０１の出力の符号化情報付映像信号１１７、デコーダ装置１０２の出力の符号化情報付映像信号１１８が映像スイッチャー１０３によって、切り替え時点７００で切り替えられ、不連続になったとする。
【００８６】
本図（ｂ）に示すように、エンコーダ制御部１２３の３：２プルダウン追従の回復により、切り替えの時点７００前では、符号化情報付映像信号１１７の符号化情報に符号化情報の３：２プルダウン追従処理５０５（図２のステップＳ６７５参照）が行われている。
切り替えの時点７００で不連続検出部１２７により入力した符号化情報付映像信号１１９の不連続を検出したら３：２プルダウン追従の回復５０６（図２のステップＳ６７９参照）が行われる。
【００８７】
３：２プルダウン追従の回復５０６が終了した時点７０１後に、符号化情報付映像信号１１８の符号化情報に符号化情報の３：２プルダウン追従処理５０７（図２のステップＳ６７５参照）の継承が開始される。
本図（ｃ）に示すように、図２に示すステップＳ６８１のピクチャタイプ追従回復により、切り替えの時点７００前では、符号化情報付映像信号１１７の符号化情報に符号化情報のピクチャタイプ追従処理５０８（図２のステップＳ６７６参照）が行われる。
【００８８】
切り替え時点７００時点から時点７０１の３：２プルダウン追従の回復５０６期間中に切り替え時点７００前のピクチャタイプパターンに関する符号情報のパターン継承５０９（図２のステップＳ６８１参照）が行われる。
時点７０１後に、符号化情報付映像信号１１８の符号化情報に符号化情報のピクチャタイプ追従の回復５１０（図２のステップＳ６８２参照）が行われる。
【００８９】
ピクチャタイプ追従の回復５１０期間後にピクチャタイプ追従処理５１１（図２のステップＳ６７６参照）が開始される。
本図（ｄ）に示すように、図２におけるステップＳ６８４の参照ピクチャ判定処理の継承処理では、切り替えの時点７００前に、参照ピクチャを使用可能とする処理５１２を行い、３：２プルダウン追従の回復５０６期間、ピクチャタイプ追従の回復５１０期間では判定結果が参照ピクチャ使用不可とする処理５１３（図２のステップＳ６８７参照）を行い、ピクチャタイプ追従の回復５１０期間後に参照ピクチャ判定を行う処理５１４（図２のステップＳ６８４参照）を行う。
【００９０】
なお、参照ピクチャ判定処理５１４では、参照ピクチャが切り替え後の符号化情報付映像信号１１８と同じピクチャであるとの判定を行う。
このようにして、映像信号の切り替えをシームレスに行うことが可能になる。
参照ピクチャ判定処理５１４が終了した後に参照ピクチャを使用可能にする処理５１５（図２のステップＳ６７７参照）を行う。
【００９１】
なお、切り替え時点３０５前には入力した符号化情報の継承がＯＮになる処理５１６を行い、参照ピクチャ使用不可５１３期間、参照ピクチャ判定処理５１４期間では入力した符号化情報の継承がＯＦＦになる処理５１７（図２のステップＳ６８８参照）を行い、参照ピクチャ使用可能５１５期間では入力した符号化情報の継承がＯＮになり、全ての符号化情報の継承が開始される処理５１８（図２のステップＳ６７８参照）を行う。この入力した符号化情報継承ＯＮにより、エンコーダＬＳＩ１２５に符号化制御信号１２４を出力し、符号化情報抽出部１２０からの映像信号１２１をエンコーダ制御部１２３からの符号化制御信号１２４に従い符号化を行わせる。
【００９２】
以上の説明では、２つのデコーダ装置１０１、１０２を映像スイッチャー１０３で切り替える際の不連続点を処理したが、複数のデコーダ装置１０１、１０２、…ｎを映像スイッチャー１０３で切り替える際の不連続点を処理するようにしてもよい。
また、２つのデコーダ装置１０１、１０２の映像符号化情報重畳部１１０、１１６において、映像に対する符号化情報の重畳方法については特定しない。
【００９３】
さらに、以上の説明では、デコーダ装置１０１の符号化情報付映像信号１１７からデコーダ装置１０２の符号化情報付映像信号１１８に切り替わる場合の不連続について説明を行ったが、本発明の他の実施例として、デコーダ装置１０１、１０２の一方として、デコーダ装置１０１がトランスコード中に、例えば、デコーダ装置１０１の符号化情報付映像信号１１７がピクチャシンクロナイザーによってスキップ又はリピートすることがある。
【００９４】
このスキップ、リピートによって、符号化情報が不連続になってしまう場合にも、本発明の適用が可能になる。
さらに、図１においては、デコーダ装置１０１、１０２とエンコーダ装置１０４とを含むエンコーダを前提としているが、デコーダ装置１０１、１０２、エンコーダ装置１０４の符号化情報抽出部１２０は必ずしも必須構成でない。すなわち、符号化情報抽出部１２０のないエンコーダ装置１０４には、他で処理され切り替えられた符号化情報および映像信号が入力する場合にも本発明の適用が可能である。
【００９５】
さらに、以上の説明では符号化情報付映像信号１１７と符号化情報付映像信号１１８が切り替わる場合の不連続について説明を行ったが、符号化情報付映像信号と符号化情報が付加されていない映像信号との切り替えを行うことにより符号化情報が不連続になってしまう場合にも、本発明の適用が可能になる。
【００９６】
【発明の効果】
以上説明したように、本発明によれば、入力された符号化情報の不連続を検出し、不連続検出結果に基づいて符号化制御を実施する用にしたので、中央局から地方局の映像に切り替えられ、圧縮符号化すべき映像信号、符号化情報が不連続になった場合にも符号化情報の矛盾を吸収することにより映像符号化装置の破綻を防止することが可能となり、映像信号の切り替えをシームレスに行うことが可能になる。
【００９７】
さらに、不連続検出前後の３：２プルダウン符号化状態の整合性を考慮して３：２プルダウン符号化状態を追従させる符号化制御を行うようにしたので、３：２プルダウンの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
さらに、不連続検出前後の符号化ピクチャタイプの整合性を考慮してピクチャタイプ符号化状態を追従させる符号化制御を行うようにしたので、ピクチャタイプの追従ができずに映像符号化装置が破綻することを回避することが可能になる。
【００９８】
さらに、予測符号化に使用する参照ピクチャの整合性を考慮する際に、参照ピクチャが前段での符号化時と同ピクチャであるかを判定し符号化制御を行うようにしたので、符号化情報に従って圧縮符号化を行っている際に、符号化情報の参照画像と異なった画像を参照することによる画質の大幅な劣化を回避することが可能になる。
【図面の簡単な説明】
【図１】本発明に係るトランスコーダ装置の概略構成を示すブロック図である。
【図２】エンコーダ制御部１２３の一連の動作を説明するフローチャートである。
【図３】図３は図２におけるステップＳ６８０の３：２プルダウン追従の回復の動作を詳細に説明するタイミングチャートである。
【図４】図３（ｄ）に示すエンコーダ制御部１２３の指示に関する他の例を示す図である。
【図５】図２におけるステップＳ６８２のピクチャタイプ追従の回復、ステップＳ６８４の参照ピクチャ判定の動作を説明するタイミングチャートである。
【図６】符号化情報が不連続となる符号化情報付映像情報をエンコーダＬＳＩ１２５に入力する際にエンコーダ制御部１２３における処理の組み合わせ例を詳細に説明するタイミングチャートである。
【符号の説明】
１００…トランスコーダ装置
１０１、１０２…デコーダ装置
１０３…映像スイッチャー
１０４…エンコーダ装置
１０５、１１１…ＭＰＥＧ２ＴＳデータ
１０６、１１２…デコーダＬＳＩ
１０７、１１３…符号化情報デコード部
１０８、１１４、１２１…映像信号
１０９、１１５、１２４…符号化情報信号
１１０、１１６…映像符号化情報重畳部
１１７、１１８…符号化情報付映像信号
１２０…符号化情報抽出部
１２３…エンコーダ制御部
１２５…エンコーダＬＳＩ
１２７…不連続検出部
１２８…不連続検出結果
【図１】
0003918540.tif 000002
【図２】
0003918540.tif 000003
【図３】
0003918540.tif 000004
【図４】
0003918540.tif 000005
【図５】
0003918540.tif 000006
【図６】
0003918540.tif 000007