【手続補正書】
【提出日】平成24年8月9日(2012.8.9)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
視差を有する第１の画像及び第２の画像のピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像を、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして記憶する記憶手段と、
符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように、前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御を行う記憶制御手段と
を備える画像処理装置。
【請求項２】
前記記憶制御手段は、前記フレームシーケンシャルを符号化した符号化データを復号するデコーダが備えるバッファにおいて、復号の対象のピクチャである復号対象ピクチャについて、時間的に前に復号され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記復号対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記復号対象ピクチャに最も近いピクチャが記憶されるように、前記バッファによるピクチャの記憶を制御するコマンドを発行することにより、前記記憶制御を行う
請求項１に記載の画像処理装置。
【請求項３】
前記フレームシーケンシャルを構成するピクチャは、H.264/AVC方式で符号化され、
前記記憶制御手段は、前記フレームシーケンシャルをH.264/AVC方式で符号化した符号化データを復号するデコーダのDPB(Decoded Picture Buffer)において、復号の対象のピクチャである復号対象ピクチャについて、時間的に前に復号され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記復号対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記復号対象ピクチャに最も近いピクチャが記憶されるように、前記DPBによるピクチャの記憶を制御するMMCO(Memory Management Control Operation)コマンドを発行することにより、前記記憶制御を行う
請求項２に記載の画像処理装置。
【請求項４】
前記記憶制御手段は、さらに、前記復号対象ピクチャについて、時間的に前に復号され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記復号対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記復号対象ピクチャに最も近いピクチャに、最小の参照ピクチャ番号である0が割り当てられるように、参照ピクチャへの参照ピクチャ番号の割り当てを制御するRPLR(Reference Picture List Reordering)コマンドを発行する
請求項３に記載の画像処理装置。
【請求項５】
前記フレームシーケンシャルを構成するピクチャは、Iピクチャ、Pピクチャ、Bピクチャ、又は、参照ピクチャとなるBピクチャであるBsピクチャとして符号化され、
前記記憶制御手段は、
前記フレームシーケンシャルの、前記第１の画像及び第２の画像のうちの一方の画像のBsピクチャが復号されたときに、そのBsピクチャを、長時間参照ピクチャとし、
前記一方の画像のI又はPピクチャが復号されたときに、直前に長時間参照ピクチャとなったBsピクチャを開放して、非参照ピクチャとする
前記MMCOコマンドを発行する
請求項４に記載の画像処理装置。
【請求項６】
前記フレームシーケンシャルを構成するピクチャは、Iピクチャ、Pピクチャ、Bピクチャ、又は、参照ピクチャとなるBピクチャであるBsピクチャとして符号化され、
1GOP(Group Of Picture)は、表示順で、I,P,Bs,B,P,P,Bs,B,P,P,Bs,B,P,P,Bs,Bピクチャの16ピクチャで構成され、
前記記憶制御手段は、前記復号対象ピクチャのPOC(Picture Order Count)を16で除算して得られる剰余が0,4,8、又は12である場合に、前記DPBに記憶されたピクチャのうちの、前記復号対象ピクチャのPOCから6を減算した値をPOCとするBsピクチャを開放して、非参照ピクチャとするMMCOコマンドを発行する
請求項４に記載の画像処理装置。
【請求項７】
視差を有する第１の画像及び第２の画像それぞれのピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像を、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして、記憶手段に記憶する記憶ステップと、
符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように、前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御を行う記憶制御ステップと
を含む画像処理方法。
【請求項８】
視差を有する第１の画像及び第２の画像のピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像を、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして記憶する記憶手段と、
符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように、前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御を行う記憶制御手段と
して、コンピュータを機能させるためのプログラム。
【請求項９】
視差を有する第１の画像及び第２の画像のピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像を、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして記憶する記憶手段と、
符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように、前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御を行う記憶制御手段と
して、コンピュータを機能させるためのプログラムが記録されている記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置、画像処理方法、プログラム、及び、記録媒体
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明は、画像処理装置、画像処理方法、プログラム、及び、記録媒体に関し、画像の符号化の符号化効率を向上させることができるようにする画像処理装置、画像処理方法、プログラム、及び、記録媒体に関する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】変更
【補正の内容】
【００５７】
本発明の一側面の画像処理装置、プログラム、又は、記録媒体は、視差を有する第１の画像及び第２の画像のピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像を、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして記憶する記憶手段と、符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように、前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御を行う記憶制御手段とを備える画像処理装置、そのような画像処理装置として、コンピュータを機能させるためのプログラム、又は、そのようなプログラムが記録されている記録媒体である。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００５８
【補正方法】変更
【補正の内容】
【００５８】
本発明の一側面の画像処理方法は、視差を有する第１の画像及び第２の画像それぞれのピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像を、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして、記憶手段に記憶する記憶ステップと、符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように、前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御を行う記憶制御ステップとを含む画像処理方法である。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００５９
【補正方法】変更
【補正の内容】
【００５９】
以上のような一側面においては、視差を有する第１の画像及び第２の画像それぞれのピクチャを交互に並べたフレームシーケンシャルを構成するピクチャを符号化してローカルデコードを行うことにより得られる復号画像が、時間的に後に行われる予測符号化に用いる予測画像を生成するときに参照する参照ピクチャとして、記憶手段に記憶される。前記記憶手段による前記参照ピクチャの記憶を制御する記憶制御は、符号化の対象のピクチャである符号化対象ピクチャについて、時間的に前に符号化され、参照ピクチャとなることが可能なピクチャの中で、前記第１の画像及び第２の画像のうちの、前記符号化対象ピクチャと同一の視点の画像のピクチャであり、かつ、表示順で、前記符号化対象ピクチャに最も近いピクチャが、前記記憶手段に記憶されるように行われる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０３３２
【補正方法】変更
【補正の内容】
【０３３２】
この"41600"のうちの先頭から1番目の"4"は、MMCOコマンド# COMMAND == 4を表し、2番目の"1"は、MMCOコマンド# COMMAND == 4の引数である。さらに、"41600"のうちの3番目の"6"は、MMCOコマンド# COMMAND == 6を表し、4番目の"0"は、MMCOコマンド# COMMAND == 6の引数である。また、"41600"の5番目の"0"は、MMCOコマンド# COMMAND == 0を表す。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０５２１
【補正方法】変更
【補正の内容】
【０５２１】
以下、値が3のRPLRコマンドが現れない限り、つまり、値が0,1、又は、2のRPLRコマンドが続く限り、各RPLRコマンドでは、その時点で、参照ピクチャ番号として割り当てが行われていない値のうちの最小値が、参照ピクチャ番号として割り当てられる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０６１６
【補正方法】変更
【補正の内容】
【０６１６】
剰余POC%16が、15である場合、つまり、復号対象ピクチャが、B15ピクチャである場合、RPLRコマンド及び必要な引数として、"04","203","013"が順次発行される。"04","203","013"の最初の"04"のうちの先頭から1番目の"0"は、L0用RPLRコマンド# COMMAND == 0を表し、2番目の"4"は、L0用RPLRコマンド# COMMAND == 0の引数である。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０８６４
【補正方法】変更
【補正の内容】
【０８６４】
したがって、ステップＳ３３では、ピクチャは、DPBに記憶されないため、ステップＳ３４の処理後、DPBは、図１５に示すように、I0ピクチャが記憶された状態のままになる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】１１２９
【補正方法】変更
【補正の内容】
【１１２９】
剰余POC%16が、11である場合、つまり、復号対象ピクチャが、B11ピクチャである場合、RPLRコマンド及び必要な引数として、"043","013"が順次発行される。"043","013"の最初の"043"のうちの先頭から1番目の"0"は、L0用RPLRコマンド# COMMAND == 0を表し、2番目の"4"は、L0用RPLRコマンド# COMMAND == 0の引数である。また、"043"の3番目の"3"は、RPLRコマンド# COMMAND == 3を表す。
【手続補正１２】
【補正対象書類名】図面
【補正対象項目名】図１０
【補正方法】変更
【補正の内容】
【図１０】
2011082683.tif 000001