【手続補正書】
【提出日】平成20年5月14日(2008.5.14)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
メモリにデータとして記憶された複数枚のピクチャを参照ピクチャとして参照し、参照した結果に基づいて、画像データを構成するピクチャの符号化を行う符号化ステップと、
前記符号化ステップにより符号化が行われたピクチャの復元画像を前記メモリに記憶して前記参照ピクチャとして管理するピクチャ管理ステップとを有し、
前記画像データは、ピクチャ間のインター予測を行わないＩピクチャ、前方向のインター予測を行うＰピクチャ、及び双方向のインター予測を行うＢピクチャを含むものであり、
前記参照ピクチャは、前記符号化を行うピクチャが、前記Ｐピクチャ又は前記Ｂピクチャである場合に参照される第１の参照ピクチャと、前記符号化を行うピクチャが、前記Ｂピクチャである場合にのみ参照される第２の参照ピクチャとを有し、
前記ピクチャ管理ステップは、前記Ｂピクチャの符号化が行われた後、そのＢピクチャの復元画像を、前記第２の参照ピクチャとして管理することを特徴とする画像符号化方法。
【請求項２】
前記ピクチャ管理ステップは、前記第１の参照ピクチャを第１の参照リストによって、前記第２の参照ピクチャを第２の参照リストによってそれぞれ管理するものであって、
前記Ｉピクチャまたは前記Ｐピクチャの符号化が行われた場合には、そのＩピクチャまたはＰピクチャの復元画像を、前記第１及び第２の参照ピクチャとして、前記第１及び第２の参照リストにそれぞれ加え、前記Ｂピクチャの符号化が行われた場合には、そのＢピクチャの復元画像を、前記第２の参照ピクチャとして、前記第２の参照リストのみに加えて管理することを特徴とする請求項１に記載の画像符号化方法。
【請求項３】
メモリにデータとして記憶された複数枚のピクチャを参照ピクチャとして参照し、参照した結果に基づいて、画像データを構成するピクチャの符号化を行う符号化手段と、
前記符号化手段により符号化が行われたピクチャの復元画像を前記メモリに記憶して前記参照ピクチャとして管理するピクチャ管理手段とを有し、
前記画像データは、ピクチャ間のインター予測を行わないＩピクチャ、前方向のインター予測を行うＰピクチャ、及び双方向のインター予測を行うＢピクチャを含むものであり、
前記参照ピクチャは、前記符号化を行うピクチャが、前記Ｐピクチャ又は前記Ｂピクチャである場合に参照される第１の参照ピクチャと、前記符号化を行うピクチャが、前記Ｂピクチャである場合にのみ参照される第２の参照ピクチャとを有し、
前記ピクチャ管理手段は、前記Ｂピクチャの符号化が行われた後、そのＢピクチャの復元画像を、前記第２の参照ピクチャとして管理することを特徴とする画像符号化装置。
【請求項４】
前記ピクチャ管理手段は、前記第１の参照ピクチャを第１の参照リストによって、前記第２の参照ピクチャを第２の参照リストによってそれぞれ管理するものであって、
前記Ｉピクチャまたは前記Ｐピクチャの符号化が行われた場合には、そのＩピクチャまたはＰピクチャの復元画像を、前記第１及び第２の参照ピクチャとして、前記第１及び第２の参照リストにそれぞれ加え、前記Ｂピクチャの符号化が行われた場合には、そのＢピクチャの復元画像を、前記第２の参照ピクチャとして、前記第２の参照リストのみに加えて管理することを特徴とする請求項３に記載の画像符号化装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
このようにして参照リストが更新される際の従来の画像符号化装置の動作を図７のフローチャートを参照しながら説明する。
図７において、符号化が開始すると、各ピクチャに対して符号化処理を行って、各ピクチャを符号化する（ステップＳ７０１）。
次に、符号化したピクチャが、最終ピクチャかどうかを判断し（ステップＳ７０３）、最終ピクチャであれば、符号化を終了する。一方、符号化したピクチャが最終ピクチャでなければ、参照リスト（List 0）の更新（ステップＳ７０３）及び参照リスト(List 1)の更新（ステップＳ７０４）を行う。参照リスト（List 0、List 1）の更新が終了したら、次のピクチャの符号化処理（ステップＳ７０１）に移る。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
尚、H264方式のＢピクチャのインター予測については、従来のＭＰＥＧ２方式と比べて、時間軸方向の予測の自由度が拡大されている。すなわち、図１０に示す様に、表示順序で、従来と同じ未来及び過去（Forward、Backward）だけでなく、過去のみ（Forward、Forward）または未来のみ（Backward、Backward）から２枚のピクチャを参照できる。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
本発明の画像符号化方法は、メモリにデータとして記憶された複数枚のピクチャを参照ピクチャとして参照し、参照した結果に基づいて、画像データを構成するピクチャの符号化を行う符号化ステップと、前記符号化ステップにより符号化が行われたピクチャの復元画像を前記メモリに記憶して前記参照ピクチャとして管理するピクチャ管理ステップとを有し、前記画像データは、ピクチャ間のインター予測を行わないＩピクチャ、前方向のインター予測を行うＰピクチャ、及び双方向のインター予測を行うＢピクチャを含むものであり、前記参照ピクチャは、前記符号化を行うピクチャが、前記Ｐピクチャ又は前記Ｂピクチャである場合に参照される第１の参照ピクチャと、前記符号化を行うピクチャが、前記Ｂピクチャである場合にのみ参照される第２の参照ピクチャとを有し、前記ピクチャ管理ステップは、前記Ｂピクチャの符号化が行われた後、そのＢピクチャの復元画像を、前記第２の参照ピクチャとして管理することを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
本発明の画像符号化装置は、メモリにデータとして記憶された複数枚のピクチャを参照ピクチャとして参照し、参照した結果に基づいて、画像データを構成するピクチャの符号化を行う符号化手段と、前記符号化手段により符号化が行われたピクチャの復元画像を前記メモリに記憶して前記参照ピクチャとして管理するピクチャ管理手段とを有し、前記画像データは、ピクチャ間のインター予測を行わないＩピクチャ、前方向のインター予測を行うＰピクチャ、及び双方向のインター予測を行うＢピクチャを含むものであり、前記参照ピクチャは、前記符号化を行うピクチャが、前記Ｐピクチャ又は前記Ｂピクチャである場合に参照される第１の参照ピクチャと、前記符号化を行うピクチャが、前記Ｂピクチャである場合にのみ参照される第２の参照ピクチャとを有し、前記ピクチャ管理手段は、前記Ｂピクチャの符号化が行われた後、そのＢピクチャの復元画像を、前記第２の参照ピクチャとして管理することを特徴とする。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
本発明によれば、符号化したＢピクチャの復元画像を、Ｐピクチャを符号化する場合に参照される参照ピクチャとせず、Ｂピクチャを符号化する場合にのみ参照される参照ピクチャとするようにしてので、インター予測の予測対象のピクチャを従来よりも増やすことが可能になる。これにより、インター予測の精度を向上させることができる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
一方、符号化したピクチャが、Ｂピクチャであった場合は、参照リスト（List 1）の更新（ステップＳ２０５）のみを行う。
以上のようにして参照リストの更新が終了したら、次のピクチャの符号化処理（ステップＳ２０１）に移る。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
デジタルインターフェース１４１５は、IEEE1394やＵＳＢ（Universal Serial Bus）である。動画エンコード・デコード処理部１４０５でエンコードされる前のデータは表示部１４０８（例えばＬＣＤ表示パネル）へも送られる。ユーザーは、表示部１４０８に表示された画像を見ながら撮影画角や構図を決める。ＣＰＵ１４０９は各処理ブロックの制御を司っている。またＣＰＵ１４０９には操作指示入力部１６０１が接続され、操作指示入力部１６０１には動画撮影用のトリガボタン１６０２及び静止画撮影用のシャッターボタン１６０３が設けられている。ユーザーは、動画撮影用のトリガボタン１６０２を押す事で動画撮影記録の開始・停止を行う。この動画撮影用のトリガボタン１６０２は撮影記録中押し続けている必要は無く、一度押すと記録動作が開始され、もう一度押すと記録動作が停止する。動画撮影用のトリガボタン１６０２の操作に応じて、動画撮影記録が実行されると、動画エンコード・デコード処理部（画像処理部）１４０５でエンコード動作も実行される。この間、上記実施形態で説明したような画像符号化装置の動作が実行可能となる。また、再生時は、記録された動画データが記録再生制御部１４０６によって記録媒体１４０７から読み出され、動画エンコード・デコード処理部１４０５でエンコード時のインター予測における参照関係等の情報を用いつつデコードが行われて、表示部１４０８等でデコードされた表示画像を表示可能となる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００３８
【補正方法】変更
【補正の内容】
【００３８】
エンコードされた静止画データはカード制御部１４１４によってメモリカード１４１２に記録される。再生時は記録された静止画データがカード制御部１４１４によってメモリカード１４１２から読み出され、静止画エンコード・デコード処理部１４１３でサムネイル画像のデコードや本画像のデコードが行われる。サムネイル画像をデコードするか本画像をデコードするかはＣＰＵ１４０９によって指示される。また、エンコードした静止画データを、デジタルインターフェース１４１５を通して外部に出力する事も出来る。デジタルインターフェースはIEEE1394やＵＳＢである。