【手続補正書】
【提出日】平成16年10月6日(2004.10.6)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
符号化量を設定する符号化パラメータに基づいて映像信号を符号化する映像符号化装置であって、
前記映像信号による表示画像の中の、予め設定した高い視認性が要求される特定領域を、重要領域として検出する重要領域検出手段と、
前記重要領域検出手段により検出された領域の符号化パラメータを算出する符号化パラメータ算出手段と、
を備え、
前記重要領域検出手段は、前記特定領域の検出結果の精度を示す確度を算出し、
前記符号化パラメータ算出手段は、前記重要領域検出手段により算出された確度の値に応じて検出領域の符号化パラメータを算出する映像符号化装置。
【請求項２】
前記符号化パラメータ算出手段は、更に、検出領域外の符号化パラメータを前記確度の値に応じて段階的に算出する請求項１記載の映像符号化装置。
【請求項３】
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の量子化値を下げる度合いを大きく制御し、前記確度が低い場合は、前記検出領域の量子化値を下げる度合いを小さく制御し、符号化パラメータとして量子化値を算出する請求項１に記載の映像符号化装置。
【請求項４】
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の画面更新レートの増大度合いを大きく制御し、逆に前記確度が低い場合は、前記検出領域の画面更新レートの増大度合いを小さく制御し、符号化パラメータとして画面更新レートを算出する請求項１記載の映像符号化装置。
【請求項５】
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の駒落とし閾値の増大度合いを大きく制御し、逆に前記確度が低い場合は、前記検出領域の駒落とし閾値の増大度合いを小さく制御し、符号化パラメータとして駒落とし閾値を算出する請求項１に記載の映像符号化装置。
【請求項６】
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域以外のプレフィルタを遮断周波数が高い低域通過フィルタに設定し、逆に前記確度が低い場合は、前記検出領域以外のプレフィルタを遮断周波数が低い低域通過フィルタに設定し、符号化パラメータとして、前記映像信号の高周波成分を除去するプレフィルタを算出する請求項１記載の映像符号化装置。
【請求項７】
前記映像符号化装置は、
さらに、前処理手段を備え、
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、前記映像信号により表示される画像から切り出す領域を検出領域と設定し、逆に前記確度が低い場合は、前記検出領域の周辺を含む大きな領域として切り出す領域を設定し、切り出す領域の切り出しサイズを符号化パラメータとして算出し、
前記前処理手段は、符号化パラメータとして算出された前記切り出しサイズに基づいて、前記映像信号による表示画像の特定領域を切り出したり、或いは前記表示画像中の切り出し領域を調整する請求項１に記載の映像符号化装置。
【請求項８】
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の大きさ補正の度合いを小さく設定し、逆に前記確度が低い場合は、前記検出領域の大きさ補正の度合いを大きく設定し、
符号化パラメータとして前記検出領域の大きさを変更する領域補正パラメータを算出する請求項１記載の映像符号化装置。
【請求項９】
前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、前記映像信号により表示される画像から切り出す領域を同重要領域検出手段の検出領域と設定し、且つ、前記検出領域の量子化値を小さくし、逆に前記確度の値が小さい場合は、前記画像から前記検出領域を切り出さず、前記検出領域の量子化値を小さくし、符号化パラメータとして量子化値及び切り出し領域情報を算出する請求項１記載の映像符号化装置。
【請求項１０】
前記符号化パラメータ算出手段は、前記重要領域検出手段により検出された特定領域のサイズが大きい場合は、前記重要領域検出手段の検出領域の符号化モードを画質優先に設定し、逆に前記特定領域のサイズが小さい場合には、前記検出領域の符号化モードを動き優先に設定し、符号化パラメータとして符号化モードを算出する請求項１記載の映像符号化装置。
【請求項１１】
コンピュータに、符号量を設定する符号化パラメータに基づいた映像信号の符号化を実行させるプログラムであって、前記コンピュータを、
前記映像信号による表示画像の中の、予め設定した高い視認性が要求される特定領域を、重要領域として検出し、
前記特定領域の検出結果の精度を示す確度を算出する重要領域検出手段、及び
算出された確度の値に応じて、前記検出された重要領域の符号化パラメータを算出する符号化パラメータ算出手段として機能させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
【課題を解決するための手段】
上記目的を達成するため、本発明の映像符号化装置は、第１に、符号化量を設定する符号化パラメータに基づいて映像信号を符号化する映像符号化装置であって、前記映像信号による表示画像の中の、予め設定した高い視認性が要求される特定領域を、重要領域として検出する重要領域検出手段と、前記重要領域検出手段により検出された領域の符号化パラメータを算出する符号化パラメータ算出手段と、を備え、前記重要領域検出手段は、前記特定領域の検出結果の精度を示す確度を算出し、前記符号化パラメータ算出手段は、前記重要領域検出手段により算出された確度の値に応じて検出領域の符号化パラメータを算出するものである。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
本発明によれば、ユーザは例えば画面内の画質を向上させたい領域を選択すると、領域の符号化パラメータを例えば符号量が多くなるように設定して、選択領域の画質を良好にする。また、前記画面内の重要領域が自動的に選択され、この自動で選択された重要領域の符号化パラメータを変更して、例えば符号化量が他領域よりも多くなるように設定する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
本発明の映像符号化装置は、第２に、前記符号化パラメータ算出手段は、更に、検出領域外の符号化パラメータを前記確度の値に応じて段階的に算出するものとする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
また、本発明は以下のような態様も可能である。
映像符号化装置は、前記重要領域検出手段は、前記特定領域の検出結果の精度を示す確度を算出し、前記符号化パラメータ算出手段は、前記重要領域検出手段により算出された確度の値に応じて検出領域或いは検出領域外の符号化パラメータを算出するものであってもよい。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】変更
【補正の内容】
【００２８】
これにより、検出の確度に応じて、検出領域の符号化パラメータを設定する。例えば確度が高く重要領域である場合は画質が良好になるような符号化パラメータを設定し、確度が低く重要領域でないような領域程画質が順次劣化するように符号化パラメータを設定する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
映像符号化装置は、前記重要領域検出手段により検出された領域に基づいて、前記映像信号による表示画像の特定領域を切り出したり、或いは前記表示画像中の切り出し領域を適切な大きさに調整する前処理手段を設けるものであってもよい。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
これにより、重要領域などを自動的に切り出し且つその大きさを適切、例えば見やすい大きさに自動調整し、この自動調整された切り出し領域を画質が他の領域よりも良好になるように符号化する。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、量子化値であるものであってもよい。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
これにより、重要領域である可能性が高い領域ほど、符号化パラメータである量子化値を小さくして、前記重要領域検出手段の検出領域により多くの符号量を割り当てることにより、前記検出領域の画質を良好にする。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、画面の更新レートであるものであってもよい。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
これにより、重要領域である可能性が高い領域ほど、符号化パラメータである更新レートを大きくして、前記重要領域検出手段の検出領域により多くの符号量を割り当てることにより、前記検出領域の画質を良好にする。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、符号化を行うか否かの決定の際に使用する駒落とし閾値であるものであってもよい。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
これにより、前記重要領域である可能性が高い領域ほど、符号化パラメータである駒落とし閾値を大きくして、前記重要領域検出手段の検出領域により多くの符号量を割り当てることにより、前記検出領域の画質を良好にする。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、前記映像信号の高周波成分を除去するプレフィルタであるものであってもよい。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００３８
【補正方法】変更
【補正の内容】
【００３８】
これにより、重要領域である可能性が高い領域ほど、検出領域外に対してより強い低域通過フィルタを掛け、高周波情報を削減し符号量を節約して、検出領域により多くの符号量を割り当てて高画質化する。また、確度が低く検出領域と本当の重要領域にズレがある場合においても、前記確度対応のプレフィルタが設定されるため、本当の重要領域のうち検出ミス領域の符号化量が極端に減る方向に設定されない。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、前記映像信号により表示される画像を切り出して符号化する際の切り出しサイズであるものであってもよい。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】変更
【補正の内容】
【００４０】
これにより、前記重要領域である可能性が高い領域ほど、符号化パラメータである切り出しサイズを小さくして、前記重要領域検出手段の検出領域により多くの符号量を割り当てることにより、前記検出領域の画質を良好にする。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００４１
【補正方法】変更
【補正の内容】
【００４１】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、この重要領域検出手段の検出領域の大きさを変更する領域補正パラメータであるものであってもよい。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００４２
【補正方法】変更
【補正の内容】
【００４２】
これにより、前記重要領域である可能性が高い領域ほど、符号化パラメータである領域補正パラメータにより前記重要領域検出手段の検出領域を拡大補正して、前記検出領域により多くの符号量を割り当てることにより前記検出領域の画質を良好にする。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】変更
【補正の内容】
【００４３】
映像符号化装置は、前記重要領域検出手段により算出された確度の値に応じて算出する符号化パラメータは、量子化値、更新レート、駒落とし閾値、プレフィルタ、切り出しサイズ、領域補正パラメータの符号化パラメータのうちの、少なくとも２つ以上の組み合わせであるものであってもよい。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】変更
【補正の内容】
【００４４】
これにより、前記重要領域である可能性が高い領域ほど、符号化パラメータである例えば駒落とし閾値を大きくし且つ切り出しサイズを小さくし、或いは別の組み合わせとして、例えば駒落とし閾値を大きくし且つ切り出しサイズを小さくし且つ量子化値を小さくして、前記重要領域検出手段の検出領域により多くの符号量を割り当てることにより、前記検出領域の画質を良好にする。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】００４５
【補正方法】変更
【補正の内容】
【００４５】
映像符号化装置は、前記符号化パラメータ算出手段は、前記重要領域検出手段の検出結果を用いて、検出領域の符号化モードを動き優先若しくは画質優先に設定するものであってもよい。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】００４６
【補正方法】変更
【補正の内容】
【００４６】
これにより、前記重要領域が動きのある領域である場合、符号化モードを動き優先に、前記重要領域が動きがない場合は符号化モードを画質優先に設定して、動きのある重要領域の動きを滑らかにし、動かない重要領域の画質を良好にする。
【手続補正２７】
【補正対象書類名】明細書
【補正対象項目名】００４７
【補正方法】変更
【補正の内容】
【００４７】
本発明の映像符号化装置は、第３に、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の量子化値を下げる度合いを大きく制御し、前記確度が低い場合は、前記検出領域の量子化値を下げる度合いを小さく制御し、符号化パラメータとして量子化値を算出するものとする。
【手続補正２８】
【補正対象書類名】明細書
【補正対象項目名】００４９
【補正方法】変更
【補正の内容】
【００４９】
本発明の映像符号化装置は、第４に、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の画面更新レートの増大度合いを大きく制御し、逆に前記確度が低い場合は、前記検出領域の画面更新レートの増大度合いを小さく制御し、符号化パラメータとして画面更新レートを算出するものとする。
【手続補正２９】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
本発明の映像符号化装置は、第５に、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の駒落とし閾値の増大度合いを大きく制御し、逆に前記確度が低い場合は、前記検出領域の駒落とし閾値の増大度合いを小さく制御し、符号化パラメータとして駒落とし閾値を算出するものとする。
【手続補正３０】
【補正対象書類名】明細書
【補正対象項目名】００５３
【補正方法】変更
【補正の内容】
【００５３】
本発明の映像符号化装置は、第６に、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域以外のプレフィルタを遮断周波数が高い低域通過フィルタに設定し、逆に前記確度が低い場合は、前記検出領域以外のプレフィルタを遮断周波数が低い低域通過フィルタに設定し、符号化パラメータとして、前記映像信号の高周波成分を除去するプレフィルタを算出するものとする。
【手続補正３１】
【補正対象書類名】明細書
【補正対象項目名】００５５
【補正方法】変更
【補正の内容】
【００５５】
本発明の映像符号化装置は、第７に、前記映像符号化装置は、さらに、前処理手段を備え、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、前記映像信号により表示される画像から切り出す領域を検出領域と設定し、逆に前記確度が低い場合は、前記検出領域の周辺を含む大きな領域として切り出す領域を設定し、切り出す領域の切り出しサイズを符号化パラメータとして算出し、前記前処理手段は、符号化パラメータとして算出された前記切り出しサイズに基づいて、前記映像信号による表示画像の特定領域を切り出したり、或いは前記表示画像中の切り出し領域を調整するものとする。
【手続補正３２】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】変更
【補正の内容】
【００５７】
本発明の映像符号化装置は、第８に、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、この重要領域検出手段の検出領域の大きさ補正の度合いを小さく設定し、逆に前記確度が低い場合は、前記検出領域の大きさ補正の度合いを大きく設定し、符号化パラメータとして前記検出領域の大きさを変更する領域補正パラメータを算出するものとする。
【手続補正３３】
【補正対象書類名】明細書
【補正対象項目名】００５９
【補正方法】変更
【補正の内容】
【００５９】
本発明の映像符号化装置は、第９に、前記符号化パラメータ算出手段は、前記重要領域検出手段による重要領域検出の確度が高い場合は、前記映像信号により表示される画像から切り出す領域を同重要領域検出手段の検出領域と設定し、且つ、前記検出領域の量子化値を小さくし、逆に前記確度の値が小さい場合は、前記画像から前記検出領域を切り出さず、前記検出領域の量子化値を小さくし、符号化パラメータとして量子化値及び切り出し領域情報を算出するものとする。
【手続補正３４】
【補正対象書類名】明細書
【補正対象項目名】００６１
【補正方法】変更
【補正の内容】
【００６１】
本発明の映像符号化装置は、第１０に、前記符号化パラメータ算出手段は、前記重要領域検出手段により検出された特定領域のサイズが大きい場合は、前記重要領域検出手段の検出領域の符号化モードを画質優先に設定し、逆に前記特定領域のサイズが小さい場合には、前記検出領域の符号化モードを動き優先に設定し、符号化パラメータとして符号化モードを算出するものとする。
【手続補正３５】
【補正対象書類名】明細書
【補正対象項目名】００６２
【補正方法】変更
【補正の内容】
【００６２】
本発明によれば、重量領域の大きさに応じて、重要領域が小さく画質劣化が目立ちにくい場合には、画質よりも動きを優先し、動きを滑らかに符号化にする。また重要領域が大きく画質劣化が目立ちやすい場合には、動きよりも画質を優先し、重要領域の大きさに適切な視認性を高く保つように符号化する。
また、本発明は、コンピュータに、符号量を設定する符号化パラメータに基づいた映像信号の符号化を実行させるプログラムであって、前記コンピュータを、前記映像信号による表示画像の中の、予め設定した高い視認性が要求される特定領域を、重要領域として検出し、前記特定領域の検出結果の精度を示す確度を算出する重要領域検出手段、及び算出された確度の値に応じて、前記検出された重要領域の符号化パラメータを算出する符号化パラメータ算出手段として機能させるためのプログラムを提供する。