(57)【特許請求の範囲】
【請求項１】
第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力する符号化画像情報復号手段と、
上記復号手段から出力された第１の復号画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段と、
上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析し画質制御情報を出力する画像情報分析手段と、
上記画質制御情報に基づいて上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするために符号化パラメータを決定する符号化パラメータ制御手段と、
上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段とを有し、
上記画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行うことを特徴とする画像情報符号化装置。
【請求項２】
上記画像情報分析手段は、統計量測定のための統計量測定用パラメータを決定する統計量測定用パラメータ決定手段と、
上記統計量測定用パラメータ決定手段から出力された統計量測定用パラメータを用いて上記分割画像情報の統計量を測定し画質制御情報を出力する画像分析値算出手段とを有し、
上記統計量測定用パラメータ決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように上記統計量測定用パラメータを決定することを特徴とする請求項１記載の画像情報符号化装置。
【請求項３】
上記画像情報分析手段は、
上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、
上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画質制御情報を算出する画質制御情報算出手段とを有し、
上記画質劣化項目別画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行うことを特徴とする請求項１記載の画像情報符号化装置。
【請求項４】
上記画質劣化項目別画像情報分析手段は、
統計量測定のための統計量測定用パラメータを決定する画質劣化項目別統計量測定用パラメータ決定手段と、
上記画質劣化項目別統計量測定用パラメータ決定手段から出力された画質劣化項目別統計量測定用パラメータを用いて上記分割画像情報の統計量測定を実行する画質劣化項目別画像分析値算出手段とを有し、
上記画質劣化項目別統計量測定用パラメータ決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように上記画質劣化項目別統計量測定用パラメータを決定することを特徴とする請求項３記載の画像情報符号化装置。
【請求項５】
上記画像情報分析手段は、
上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、
画質劣化項目別画像分析情報に対する重み付けを表す算出係数を決定する分析値算出係数決定手段と、
画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画質制御情報を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数で重み付けする画質制御情報算出手段とを有し、
上記分析値算出係数決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように上記算出係数を決定することを特徴とする請求項３または４記載の画像情報符号化装置。
【請求項６】
第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力する符号化画像情報復号手段と、
上記復号手段から出力された第１の復号画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段と、
画像情報出力装置の特性情報を出力する画像出力装置情報出力手段と、
上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析する画像情報分析手段と、
上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段と、
上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段とを有し、
上記画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行い、上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記分析を制御することを特徴とする画像情報符号化装置。
【請求項７】
上記画像情報分析手段は、
上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、
画質劣化項目別画像分析情報に対する重み付けを表す算出係数を決定する分析値算出係数決定手段と、
上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画像分析結果を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数で重み付けする画像分析値決定手段とを有し、
上記分析値算出係数決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように記算出係数を決定し、上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記分析を制御することを特徴とする請求項６記載の画像情報符号化装置。
【請求項８】
第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力する符号化画像情報復号手段と、
上記復号手段から出力された第１の復号画像情報または外部から入力された非符号化画像情報のいずれか一方を選択する画像情報選択手段と、
上記画像情報選択手段から出力された選択画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段と、
上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析する画像情報分析手段と、
上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段と、
上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段とを有し、
上記画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行うことを特徴とする画像情報符号化装置。
【請求項９】
上記画像情報分析手段は、統計量測定のための統計量測定用パラメータを決定する統計量測定用パラメータ決定手段と、
上記統計量測定用パラメータ決定手段から出力された統計量測定用パラメータを用いて上記分割画像情報の統計量測定を実行する画像分析値算出手段とを有し、
上記統計量測定用パラメータ決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分析パラメータを決定して出力し上記選択画像情報が上記外部から入力された非符号化画像情報である場合には所定の分析パラメータを出力することを特徴とする請求項８記載の画像情報符号化装置。
【請求項１０】
上記画像情報分析手段は、
上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、
上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画像分析総合結果を算出する画像分析値決定手段とを有し、
上記画質劣化項目別画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行うことを特徴とする請求項８記載の画像情報符号化装置。
【請求項１１】
上記画質劣化項目別画像情報分析手段は、
統計量測定のための統計量測定用パラメータを決定する画質劣化項目別統計量測定用パラメータ決定手段と、
上記画質劣化項目別統計量測定用パラメータ決定手段から出力された画質劣化項目別統計量測定用パラメータを用いて上記分割画像情報の統計量測定を実行する画質劣化項目別画像分析値算出手段とを有し、
上記画質劣化項目別統計量測定用パラメータ決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように上記画質劣化項目別統計量測定用パラメータを決定して出力し上記選択画像情報が上記外部から入力された非符号化画像情報である場合には予め定められた所定の画質劣化項目別統計量測定用パラメータを出力することを特徴とする請求項１０記載の画像情報符号化装置。
【請求項１２】
上記画像情報分析手段は、
上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、
画質劣化項目別画像分析情報に対する重み付けを表す算出係数を決定する分析値算出係数決定手段と、
画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画像分析結果を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数で重み付けする画像分析値決定手段とを有し、
上記分析値算出係数決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように上記算出係数を決定して出力し上記選択画像情報が上記外部から入力された非符号化画像情報である場合には予め定められた所定の上記算出係数を出力することを特徴とする請求項１０または１１記載の画像情報符号化装置。
【請求項１３】
第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力する符号化画像情報復号手段と、
上記復号手段から出力された第１の復号画像情報または外部から入力された非符号化画像情報のいずれか一方を選択する画像情報選択手段と、
上記画像情報選択手段から出力された選択画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段と、
画像情報出力装置の特性情報を出力する画像出力装置情報出力手段と、
上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析する画像情報分析手段と、
上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段と、
上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段とを有し、
上記画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報を分析を行い、上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記分析を制御し、上記選択画像情報が上記外部から入力された非符号化画像情報である場合には画像情報出力装置特性情報に応じて上記分割画像情報の分析を制御することを特徴とする画像情報符号化装置。
【請求項１４】
上記画像情報分析手段は、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、
画質劣化項目別画像分析情報に対する重み付けを表す算出係数を決定する分析値算出係数決定手段と、
上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画像分析結果を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数で重み付けする画像分析値決定手段とを有し、
上記分析値算出係数決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように上記算出係数を決定し、上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記分析を制御し、上記選択画像情報が上記外部から入力された非符号化画像情報である場合には上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記算出係数を決定することを特徴とする請求項１３記載の画像情報符号化装置。
【請求項１５】
上記符号化パラメータ制御手段は、上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように符号化パラメータを決定することを特徴とする請求項１、２、３、４、５、６または７記載の画像情報符号化装置。
【請求項１６】
上記符号化パラメータ制御手段は、符号化パラメータ制限値決定手段と、符号化パラメータ決定手段とを有し、
上記符号化パラメータ制限値決定手段は上記符号化画像情報復号手段から出力される符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度に応じて符号化パラメータの制限値を決定して出力することを特徴とする請求項１５記載の画像情報符号化装置。
【請求項１７】
上記符号化パラメータ制御手段は、上記画像情報選択手段によって上記符号化画像情報復号手段から出力された復号画像情報が選択された場合に、上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度に応じて符号化パラメータを決定することを特徴とする請求項８、９、１０、１１、１２、１３または１４記載の画像情報符号化装置。
【請求項１８】
上記符号化パラメータ制御手段は、符号化パラメータ制限値決定手段と、符号化パラメータ決定手段とを有し、
上記符号化パラメータ制限値決定手段は、上記画像情報選択手段によって上記符号化画像情報復号手段から出力された復号画像情報が選択された場合に、上記符号化画像情報復号手段から出力される符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度に応じて符号化パラメータの制限値を決定して出力することを特徴とする請求項１７記載の画像情報符号化装置。
【請求項１９】
上記符号属性情報は、第１の画像情報符号化手段において上記符号化画像情報を生成する際に使用した符号化パラメータを含むことを特徴とする請求項１、２、３、４、５、６、７、８、９、１０、１１、１２、１３、１４、１５、１６、１７または１８記載の画像情報符号化装置。
【請求項２０】
上記符号属性情報は、上記符号化画像情報の符号量を含むことを特徴とする請求項１、２、３、４、５、６、７、８、９、１０、１１、１２、１３、１４、１５、１６、１７または１８記載の画像情報符号化装置。
【請求項２１】
上記符号属性情報は、上記第１の画像情報符号化手段の種類を表す符号化手段識別情報を含むことを特徴とする請求項１、２、３、４、５、６、７、８、９、１０、１１、１２、１３、１４、１５、１６、１７または１８記載の画像情報符号化装置。
【請求項２２】
画質制御の正否を予測する画質制御予測手段と、
上記画質制御予測手段から出力された画質制御予測結果情報を通知する画質制御予測結果通知手段とをさらに有し、
上記画質制御予測手段は上記符号化画像情報復号手段から出力された符号属性情報の値に基づいて画質制御の正否を予測することを特徴とする請求項１、２、３、４、５、６、７、８、９、１０、１１、１２、１３、１４、１５、１６、１７、１８、１９、２０または２１記載の画像情報符号化装置。
【請求項２３】
符号化画像情報復号手段が、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力するステップと、
画像情報分割手段が、上記復号手段から出力された第１の復号画像情報を所定の画素数からなる矩形領域に分割するステップと、
画像情報分析手段が、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析し画質制御情報を出力するステップと、
符号化パラメータ制御手段が、上記画質制御情報に基づいて上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするために符号化パラメータを決定するステップと、
第２の画像情報符号化手段が、上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化するステップとを有し、
上記画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行うことを特徴とする画像情報符号化方法。
【請求項２４】
符号化画像情報復号手段が、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力するステップと、
画像情報分割手段が、上記復号手段から出力された第１の復号画像情報を所定の画素数からなる矩形領域に分割するステップと、
画像出力装置情報出力手段が、画像情報出力装置の特性情報を出力するステップと、
画像情報分析手段が、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析するステップと、
符号化パラメータ制御手段が、上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定するステップと、
第２の画像情報符号化手段が、上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化するステップとを有し、
上記画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行い、上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記分析を制御することを特徴とする画像情報符号化方法。
【請求項２５】
符号化画像情報復号手段が、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力するステップと、
画像情報選択手段が、上記復号手段から出力された第１の復号画像情報または外部から入力された非符号化画像情報のいずれか一方を選択するステップと、
画像情報分割手段が、上記画像情報選択手段から出力された選択画像情報を所定の画素数からなる矩形領域に分割するステップと、
画像情報分析手段が、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析するステップと、
符号化パラメータ制御手段が、上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定するステップと、
第２の画像情報符号化手段が、上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化するステップとを有し、
上記画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報の分析を行うことを特徴とする画像情報符号化方法。
【請求項２６】
符号化画像情報復号手段が、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と当該第１の画像情報符号化手段によって用いられた符号化に関する情報である符号属性情報を出力するステップと、
画像情報選択手段が、上記復号手段から出力された第１の復号画像情報または外部から入力された非符号化画像情報のいずれか一方を選択するステップと、
画像情報分割手段が、上記画像情報選択手段から出力された選択画像情報を所定の画素数からなる矩形領域に分割するステップと、
画像出力装置情報出力手段が、画像情報出力装置の特性情報を出力するステップと、
画像情報分析手段が、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析するステップと、
符号化パラメータ制御手段が、上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定するステップと、
第２の画像情報符号化手段が、上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化するステップとを有し、
上記画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみの画像情報分析への影響度を予測し、当該影響度が少なくなるように補正した上記分割画像情報の統計量を用いて上記分割画像情報を分析を行い、上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報に応じて上記分析を制御し、上記選択画像情報が上記外部から入力された非符号化画像情報である場合には画像情報出力装置特性情報に応じて上記分割画像情報の分析を制御することを特徴とする画像情報符号化方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、符号化処理されたディジタル画像情報を復号し、再符号化処理を行う装置に関するものである。
【０００２】
【従来の技術】
（リモートプリンティングシステム）
近年、画像出力機器をネットワークに接続し、ネットワーク上の端末から画像出力を指示するリモートプリンティングシステムが一般的になっている。取り扱われるディジタル画像は、スキャナーから入力されたもの、コンピュータで生成されたもの、ネットワークを介して伝送されたものなど様々である。ディジタル画像の高精細化、カラー化が進み、高速と高画質を達成する画像処理技術が求められている。
【０００３】
このようなシステムでは、画像の伝送時間や蓄積容量を削減する目的で、画像を符号化してから取り扱うのが一般的である。
【０００４】
（プリコレーション技術の必要性）
高速かつ高解像度の画像出力機器を接続したリモートプリンティングシステムでは、画像出力機器を効率良く稼動させるためプリコレーション技術が必要になる。これは、大量の画像を連続的に出力させるため、画像を蓄積装置に蓄積し、必要に応じてソーティングなどを行ってから画像出力機器の速度に合わせて蓄積装置から読み出す技術である。このとき、以下の２つの理由から画像符号化の導入が不可欠である。（以下、画像符号化を画像圧縮と同じ意味で使用する。）
【０００５】
（１）蓄積容量の削減
高精細化、カラー化した画像情報は情報量が膨大である。大量の画像を取り扱うプリンティングシステムでは、コスト上の問題から画像圧縮によって情報量を少なくしてから蓄積する必要がある。
【０００６】
（２）蓄積装置の読み出し時間短縮
大量のディジタル画像を蓄積する場合、蓄積装置としてＨＤＤが一般に用いられる。このＨＤＤは、ｒｅａｄ／ｗｒｉｔｅ処理速度が遅いため、符号化によって入出力データ量をあらかじめ少なくしておかなければ画像出力機器の処理速度に間に合わなくなる。
【０００７】
システムで取り扱う画像の中には、伝送時間削減などの目的で既に符号化された状態で入力される画像（以降、符号化画像と呼ぶ）がある。符号化画像は、符号フォーマットがプリコレーション用のものと異なっている場合や、色変換、解像度変換などの画像処理が必要な場合が多いため、通常、一旦復号してから再度符号化して蓄積される。
【０００８】
（高能率画像符号化）
画像符号化方式には、可逆方式と非可逆方式とがある。可逆方式は、符号化と復号処理を施した画像（以降、復号画像と呼ぶ。）が元の画像を完全に一致する。これに対して、非可逆方式の復号画像は元の画像に完全には一致せず、圧縮率によっては画質劣化が生じる。前述したようなプリンティングシステムでは、高い圧縮率が期待できる非可逆方式を用いる場合が多い。
【０００９】
（非可逆符号化の課題）
一般に、非可逆符号化では、同一の符号化条件下であれば、圧縮率を高めるほど復号画像の画質（以降、復号画質と呼ぶ。）が劣化する。即ち、圧縮率と復号画質とはトレードオフの関係にある。これは、非可逆符号化が画像の中の比較的視覚に影響しにくいと考えられる情報を捨てることによって高圧縮率を実現していることによる。このため、圧縮率が低ければ捨てる情報が少なく復号画質が良いが、圧縮率を高くすると、捨てる情報が多くなり復号画質が劣化する。
【００１０】
前述のプリンティングシステムでは、圧縮率と復号画質への要求が極めて高い。そのため、画質を保証した上で最大の圧縮率を達成するような復号画質制御手法が必要になる。
【００１１】
（非可逆符号化方式の復号画質を制御する手法の従来例）
画像には圧縮が容易な領域と困難な領域が存在する。非可逆符号化に適用する復号画質制御は、画像特性を分析し、領域毎に適した符号化パラメータを決定することによって実現する。このような復号画質制御を適用した符号化方式として、例えば、「画像符号化制御方法」（特開平６−１６５１４９号公報）がある。構成を図２６に示す。
【００１２】
この例では、符号化方式としてＤＣＴ（Ｄｉｓｃｒｅｔｅ  Ｃｏｓｉｎｅ  Ｔｒａｎｓｆｏｒｍ：離散コサイン変換）と変換係数量子化を組み合わせた方式を例示し、画質制御のために量子化ステップサイズ（量子化マトリクス）を切り替える手法を用いている。
【００１３】
図２６において、２６０１はブロック化部、２６０２はＤＣＴ部、２６０３は量子化部、２６０４は符号化部、２６０５は画質制御部、２６０６は量子化選択部、２６０７は入力画像情報、２６０８はブロック化画像情報、２６０９は画質制御情報、２６１０は量子化マトリクス情報、２６１１は符号化画像情報である。
【００１４】
画質制御部２６０５では、ブロック化画像情報の統計量を測定し、画質制御情報２６０９を出力する。量子化選択部２６０６では、画質制御情報２６０９に基づいて量子化マトリクスを決定する。すなわち、画質制御部２６０５において、ブロック化画像情報がモスキートノイズと呼ばれる符号化ひずみが発生し画像であると判断されれば量子化選択部２６０６では、符号化ひずみが発生しにくい（量子化ステップサイズが小さい）量子化マトリクスが選択される。その結果、符号化ひずみの発生を抑えることが可能になる。
【００１５】
また、復号画質制御を適用した符号化方式のその他の例として「画質予測装置および方法ならびに画質制御装置および方法」（特開平１０−０７５３６９号公報）がある。構成を図２７および図２８に示す。符号化方式はＤＣＴと変換係数量子化を組み合わせた方式であり、画質制御のために量子化マトリクスを切り替える手法を用いた例を示す。
【００１６】
図２７において、２７０１はブロック化部、２７０２はＤＣＴ部、２７０３は量子化部、２７０４は符号化部、２７０５は画質制御部、２７０６は符号化装置特性出力部、２７０７は画像出力装置特性出力部、２７０８は量子化選択部、２７０９は入力画像情報、２７１０はブロック化画像情報、２７１１は符号化装置特性情報、２７１２は画像出力装置特性情報、２７１３は画質制御情報、２７１４は量子化マトリクス情報、２７１５は符号化画像情報である。
【００１７】
図２８において、２８０１は画質劣化項目別符号化装置特性出力部、２８０２は画質劣化項目別画像分析部、２８０３は画質劣化項目別出力装置特性出力部、２８０４は画質劣化項目別判定部、２８０５は画質制御情報出力部である。
【００１８】
画質劣化項目とは、画像圧縮の結果生じる画質劣化、すなわち符号化ひずみの種類を意味している。符号化ひずみには、例えば、「ぼけ」、「擬似輪郭」、「モスキートノイズ」などがある。
【００１９】
符号化方式は前述した例と同様に、ＤＣＴと変換係数量子化を組み合わせたものである。画質は、量子化マトリクスの切り替えによって制御する。
【００２０】
量子化マトリクスを決定するため、画質制御部２７０５は、以下のように動作する。画質劣化項目ａ符号化装置特性出力部２８０１ａは、符号化装置特性情報２７１１から画質劣化項目ａに関連するものだけを抽出し、画質劣化項目ａ判定部２８０４ａへ入力する。同様に、画質劣化項目ａ出力装置特性出力部２８０３ａは、画像出力装置特性情報２７１２から画質劣化項目ａに関連するものだけを抽出し、画質劣化項目ａ判定部２８０４ａへ入力する。画質劣化項目ａ画像分析部２８０２ａは、画質劣化項目ａに関連がある画像の特徴量を測定し、その結果を画質劣化項目ａ判定部２８０４ａへ入力する。画質劣化項目ａ判定部２８０４ａは、画質劣化項目ａに関連がある符号化装置特性情報、画像出力装置特性情報、画像分析情報を基に画質劣化項目ａの発生程度を予測し、画質制御情報出力部２８０５へ入力する。他の画質劣化項目についても同様に動作する。画質制御情報出力部２８０５は、画質劣化項目別判定部からの入力情報に適切な重みづけ処理などを行った結果を画質制御情報２７１３として出力する。
【００２１】
この例では、符号化ひずみに着目し、その発生程度に影響を与える符号化装置特性、画像出力装置特性、画像特性をひずみ項目別に細分化して取り扱うことによって、画質制御の精度を向上させることができる。
【００２２】
上述したような、画像の分析情報を利用して画質制御を行う手法では、画像特性の分析精度が画質制御の精度に大きな影響を与える。符号化装置特性や画像出力装置特性がシステム内で固定化する場合が多いのに対して、画像特性は入力画像毎に大きく異なり、また１つの画像内でも局所的に変化するためである。
【００２３】
（従来技術の問題点）
前述したように、プリンティングシステムでは、符号化画像を復号して再度符号化する場合がある。従って、先の従来例の符号化装置に符号化画像を復号した画像が入力される場合を考えておかなければならない。符号化画像の復号画像が入力された場合、符号化、復号処理を行っていない画像（以降、非符号化画像と呼ぶ。）が入力された場合と比較して画質制御が困難になると考えられる。その理由として次のことが挙げられる。
【００２４】
（１）外部から入力される符号化画像は、画質が良好であるという保証がない。すなわち、既に符号化ひずみが発生している可能性がある。このような画像を、非符号化画像と同じように、例えば「画質劣化が検知限以下になるように」制御することはできない。また、符号化画像が非常に高い圧縮率で符号化され、画質劣化が著しいものでれば、画質制御を行うことはあまり意味がない。
【００２５】
（２）復号画像は、符号化処理によって元の画像に含まれていた高周波数成分が失われていたり、元の画像に含まれていたノイズ成分が強調されている場合が多い。そのため、エッジ領域や平坦な領域を分析、検出することが難しい。
【００２６】
つまり、符号化画像の復号画像を符号化する場合は、その画質劣化の程度を予測し、非符号化画像とは異なった取り扱い方をすることが望ましい。
【００２７】
（復号画像の入力を想定した符号化手法の従来例）
符号化画像の復号画像が入力されることを想定し、非符号化画像とは異なった取り扱い方をする符号化装置に「画像情報の再符号化方法及び装置」（特開平８−１１１８７０号公報）がある。図２９に概略構成を示す。符号化方式はＤＣＴと変換係数量子化を組み合わせた方式、量子化マトリクスを切り替える手法を適用した例を示す。
【００２８】
図２９において、２９０１はブロック化部、２９０２はＤＣＴ部、２９０３は量子化部、２９０４は符号化部、２９０５は符号化画像情報復号部、２９０６は画像情報選択部、２９０７は特性情報切り替え部、２９０８は復号画像情報、２９０９は入力画像情報、２９１０は選択画像情報、２９１１は画像特性情報、２９１２は切り替え情報、２９１３は選択特性情報、２９１４は量子化マトリクス情報、２９１５は符号化画像情報、２９１６は符号属性情報である。
【００２９】
この従来例では、切り替え情報２９０１２によって、符号化を行う画像として復号画像情報２９０８を選択することが指示された場合、特性情報切り替え部２９０７では符号化画像情報復号部２９０５から出力される符号属性情報２９１６を選択し量子化選択部２９０６へ入力する。量子化選択部２９０６は、符号化画像情報２９０５から得られる符号化パラメータなどの情報を利用して、量子化マトリクスを決定する。
【００３０】
符号化を行う画像として入力画像情報２９０９が選択された場合は、入力画像の特徴情報などが画像特性情報２９１１として入力され、この情報を利用して量子化マトリクスを決定する。
【００３１】
符号化部に入力される画像が復号部からの出力である復号画像の場合、符号化制御部は復号部から出力される先の符号化パラメータを利用して再符号化時に使用する符号化パラメータを決定する。しかし、画像を分析して復号画質を制御するという機構は持っていないため画質を保証することができない。
【００３２】
【発明が解決しようとする課題】
この発明は、以上の事情を考慮してなされたものであり、入力画像を分析し、その分析結果を用いて画質制御を行う符号化装置において、符号化画像を一旦復号してから符号化を行う場合には、符号化画像の属性情報に基づいて復号画像に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて分析手段の補正を行うことによって画像分析の精度を向上させ、より正確に画質制御を行う符号化技術を提供することを目的としている。また、そのような符号化技術において、符号化ひずみに基づく画質劣化が発生している復号画像に対して無意味な画質制御を行い、その結果、圧縮率が低く抑えられてしまうことを避けることを目的としている。さらに、符号化対象の復号画像の画質劣化が著しい場合は、画質制御が十分に行えないことをユーザーに通知することを目的としている。
【００３３】
【課題を解決するための手段】
本発明の第１の側面によれば、上述の目的を達成するために、画像情報符号化装置に、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と符号属性情報を出力する符号化画像情報復号手段（１０１）と、上記復号手段から出力された第１の復号画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段（１０２）と、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析し画質制御情報を出力する画像情報分析手段（１０３）と、上記画質制御情報に基づいて上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段（１０４）と、上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段（１０５）とを設けている。そして、上記画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じた補正を行ってから上記分割画像情報の分析を行う。
【００３４】
この構成においては、入力された符号化画像情報を復号してから再度符号化する場合に、符号化画像情報が有している属性情報利用して復号画像がどの程度画質劣化しているか、その画質劣化が画像分析にどの程度の影響を与えるかを予測している。そして、この予測結果に応じて画像情報分析手段を補正してから分析を行なうため、より適切な符号化パラメータを決めることが可能になる。
【００３５】
また、この構成において、上記画像情報分析手段に、統計量測定のためのパラメータを決定する分析パラメータ決定手段と、上記分析パラメータ決定手段から出力された分析パラメータを用いて上記分割画像情報の統計量を測定し画質制御情報を出力する画像分析値算出手段とを設け、上記分析パラメータ決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて上記分析パラメータを決定するようにしてもよい。
【００３６】
また、この構成において、上記画像情報分析手段に、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画質制御情報を算出する画質制御情報算出手段とを設け、上記画質劣化項目別画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じた補正を行ってから上記分割画像情報の分析を行うようにしてもよい。
【００３７】
また、この構成において、上記画質劣化項目別画像情報分析手段に、統計量測定のためのパラメータを決定する画質劣化項目別分析パラメータ決定手段と、上記画質劣化項目別分析パラメータ決定手段から出力された画質劣化項目別分析パラメータを用いて上記分割画像情報の統計量測定を実行する画質劣化項目別画像分析値算出手段とを設け、上記画質劣化項目別分析パラメータ決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて上記画質劣化項目別分析パラメータを決定するようにしてもよい。
【００３８】
また、この構成において、上記画像情報分析手段に、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、算出係数を決定する分析値算出係数決定手段と、画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画質制御情報を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数を使用する画質制御情報算出手段とを設け、上記分析値算出係数決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて上記算出係数を決定するようにしてもよい。
【００３９】
本発明の第２の側面によれば、画像情報符号化装置に、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と符号属性情報を出力する符号化画像情報復号手段（１０１）と、上記復号手段から出力された第１の復号画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段（１０２）と、画像情報出力装置の特性情報を出力する画像出力装置情報出力手段（３０１）と、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析し画質制御情報を出力する画像情報分析手段（３０２）と、上記画質制御情報に基づいて上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段（１０４）と、上記符号化パラメータ制御手段から出力された第２の符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段（１０５）とを設けている。そして、上記画像情報分析手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果と上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報とに応じた補正を行ってから上記分割画像情報の分析を行う。
【００４０】
この構成においては、画像情報を分析して画質制御を行う際に画像出力装置情報を利用するため、より精度の高い画質制御が可能になり、適切な符号化パラメータを決めることが可能になる。
【００４１】
また、この構成において、上記画像情報分析手段に、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、算出係数を決定する分析値算出係数決定手段と、上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画像分析結果を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数を使用する画質制御情報算出手段とを設け、上記分析値算出係数決定手段は上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果と上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報とに応じて上記算出係数を決定するようにしてもよい。
【００４２】
本発明の第３の側面によれば、画像情報符号化装置に、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と符号属性情報を出力する符号化画像情報復号手段（１０１）と、上記復号手段から出力された第１の復号画像情報または外部から入力された非符号化画像情報のいずれか一方を選択する画像情報選択手段（７０１）と、上記画像情報選択手段から出力された選択画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段（１０２）と、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析する画像情報分析手段（７０２）と、上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段（１０４）と、上記符号化パラメータ制御手段から出力された符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段（１０５）とを設けている。そして、上記画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じた補正を行ってから上記分割画像情報の分析を行う。
【００４３】
この構成においては、符号化画像情報復号部から出力される復号画像情報だけではなく、外部から入力される画像情報の場合にも画質制御を行った符号化処理を行うことができる。
【００４４】
また、この構成において、上記画像情報分析手段に、統計量測定のためのパラメータを決定する分析パラメータ決定手段と、上記分析パラメータ決定手段から出力された分析パラメータを用いて上記分割画像情報の統計量測定を実行する画像分析値算出手段とを設け、上記分析パラメータ決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて上記分析パラメータを決定して出力し上記選択画像情報が上記外部から入力された非符号化画像情報である場合には所定の分析パラメータを出力するようにしてもよい。
【００４５】
また、この構成において、上記画像情報分析手段に、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画質制御情報を算出する画像制御情報算出手段とを設け、上記画質劣化項目別画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じた補正を行ってから上記分割画像情報の分析を行うようにしてもよい。
【００４６】
また、この構成において、上記画質劣化項目別画像情報分析手段に、統計量測定のためのパラメータを決定する画質劣化項目別分析パラメータ決定手段と、上記画質劣化項目別分析パラメータ決定手段から出力された画質劣化項目別分析パラメータを用いて上記分割画像情報の統計量測定を実行する画質劣化項目別画像分析値算出手段とを設け、上記画質劣化項目別分析パラメータ決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて上記画質劣化項目別分析パラメータを決定して出力し上記選択画像情報が上記外部から入力された非符号化画像情報である場合には所定の画質劣化項目別分析パラメータを出力するようにしてもよい。
【００４７】
また、この構成において、上記画像情報分析手段に、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、算出係数を決定する分析値算出係数決定手段と、画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画質制御情報を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数を使用する画質制御情報算出手段とを設け、上記分析値算出係数決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて上記算出係数を決定して出力し上記選択画像情報が上記外部から入力された非符号化画像情報である場合には所定の上記算出係数を出力するようにしてもよい。
【００４８】
本発明の第４の側面によれば、画像情報符号化装置に、第１の画像情報符号化手段によって符号化された入力符号化画像情報を復号し第１の復号画像情報と符号属性情報を出力する符号化画像情報復号手段（１０１）と、上記復号手段から出力された第１の復号画像情報または外部から入力された非符号化画像情報のいずれか一方を選択する画像情報選択手段（７０１）と、上記画像情報選択手段から出力された選択画像情報を所定の画素数からなる矩形領域に分割する画像情報分割手段（１０２）と、画像情報出力装置の特性情報を出力する画像出力装置情報出力手段（３０１）と、上記画像情報分割手段から出力された分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを分析する画像情報分析手段（９０１）と、上記第１の復号画像情報を符号化および復号した結果である第２の復号画像情報を目標とする画質にするための符号化パラメータを決定する符号化パラメータ制御手段（１０４）と、上記符号化パラメータ制御手段から出力された第２の符号化パラメータを使用して上記分割画像情報を符号化する第２の画像情報符号化手段（１０５）とを設けている。そして、上記画像情報分析手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果と上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報とに応じた補正を、上記選択画像情報が上記外部から入力された非符号化画像情報である場合には画像情報出力装置特性情報に応じた補正を行ってから上記分割画像情報の分析を行う。
【００４９】
この構成においては、符号化画像情報復号部から出力される復号画像情報だけではなく、外部から入力される画像情報の場合にも画質制御を行った符号化処理を行うことができる。
【００５０】
また、この構成においては、画像情報を分析して画質制御を行う際に画像出力装置情報を利用するため、より精度の高い画質制御が可能になり、適切な符号化パラメータを得ることが可能になる。
【００５１】
この構成において、上記画像情報分析手段を、上記画像情報分割手段から出力された上記分割画像情報の統計量を測定して上記分割画像情報が符号化によってどの程度画質劣化し易いかを単一の画質劣化項目に関して分析する少なくとも１つの画質劣化項目別画像情報分析手段と、算出係数を決定する分析値算出係数決定手段と、上記画質劣化項目別画像情報分析手段から出力された少なくとも１つの画質劣化項目別画像分析情報から画像分析結果を算出する場合に上記分析値算出係数決定手段から出力された上記算出係数を使用する画像分析値決定手段とを設け、上記分析値算出係数決定手段は上記選択画像情報が上記第１の復号画像情報である場合には上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果と上記画像情報出力装置情報出力手段から出力された画像情報出力装置特性情報とに応じて、上記選択画像情報が上記外部から入力された非符号化画像情報である場合には画像情報出力装置特性情報に応じて上記算出係数を決定するようにしてもよい。
【００５２】
また、上述発明の第１または第２の側面による画像情報符号化装置において、上記符号化パラメータ制御手段は、上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて符号化パラメータを決定するようにしてもよい。
【００５３】
また、上述発明の第１または第２の側面による画像情報符号化装置において、上記符号化パラメータ制御手段は、符号化パラメータ制限値決定手段と、符号化パラメータ決定手段とを具備し、上記符号化パラメータ制限値決定手段は上記符号化画像情報復号手段から出力される符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて符号化パラメータの制限値を決定して出力するようにしてもよい。
【００５４】
また、上述発明の第３または第４の側面による画像情報符号化装置において、上記符号化パラメータ制御手段は、上記画像情報選択手段によって上記符号化画像情報復号手段から出力された復号画像情報が選択された場合に、上記符号化画像情報復号手段から出力された符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて符号化パラメータを決定するようにしてもよい。
【００５５】
また、上述発明の第３または第４の側面による画像情報符号化装置において、上記符号化パラメータ制御手段は、符号化パラメータ制限値決定手段と、符号化パラメータ決定手段とを具備し、上記符号化パラメータ制限値決定手段は、上記画像情報選択手段によって上記符号化画像情報復号手段から出力された復号画像情報が選択された場合に、上記符号化画像情報復号手段から出力される符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて符号化パラメータの制限値を決定して出力するようにしてもよい。
【００５６】
また、上述発明の第１、第２、第３または第４の側面による画像情報符号化装置において、上記符号属性情報は、第１の画像情報符号化手段において上記符号化画像情報を生成する際に使用した第１の符号化パラメータを含むようにしてもよい。
【００５７】
また、上述発明の第１、第２、第３または第４の側面による画像情報符号化装置において、上記符号属性情報は、上記符号化画像情報の符号量を含むようにしてもよい。
【００５８】
また、上述発明の第１、第２、第３または第４の側面による画像情報符号化装置において、上記符号属性情報は、上記第１の画像情報符号化手段の種類を表す符号化手段識別情報を含むようにしてもよい。
【００５９】
また、上述発明の第１、第２、第３または第４の側面による画像情報符号化装置において、画像情報符号化装置に、画質制御の正否を予測し、画質制御予測結果情報を通知する画質制御予測結果通知手段（１４０１）を、さらに設け、上記画質制御予測手段は上記符号化画像情報復号手段から出力された符号属性情報の値に基づいて画質制御の正否を予測するようにしてもよい。
【００６０】
この構成においては、符号化画像情報復号手段から出力される復号画像情報を再符号化する場合に、符号属性情報に基づいて上記第１の復号画像情報に発生している符号化ひずみと画像情報分析への影響度とを予測し、その結果に応じて画質制御の予測結果を表示することができる。そのため、復号画像にもともと発生している画質劣化が著しく、再符号化時の画質制御が困難な場合には、画質制御を断念して例えば圧縮率を重視した符号化を行うようにすることが可能になる。
【００６１】
【発明の実施の形態】
以下、この発明の実施例について説明する。
［実施例１］
図１は、この発明の画像情報符号化装置の実施例１を示すブロック図である。図中、１０１は符号化画像情報復号部、１０２は画像情報分割部、１０３は画像情報分析部、１０４は符号化パラメータ制御部、１０５は画像情報符号化部、１０６は前段符号化画像情報、１０７は符号属性情報、１０８は復号画像情報、１０９は分割画像情報、１１０は画質制御情報、１１１は符号化パラメータ、１１２は符号化画像情報である。
【００６２】
図２は、本実施例における画像情報分析部１０３の構成を示すブロック図である。図中、２０１は分析パラメータ決定部、２０２は画像分析値算出部、２０３は分析パラメータである。
【００６３】
次に、概略動作について説明する。符号化画像情報復号部１０１は、入力された前段符号化画像情報１０６を復号し、符号属性情報１０７と復号画像情報１０８とを出力する。画像情報分割部１０２は、復号画像情報１０８を所定の画素数からなる矩形領域に分割し、分割画像情報１０９を出力する。画像情報分析部１０３は、分割画像情報１０９の統計量を測定して画質制御情報１１０を出力する。この統計量測定の際、符号属性情報１０７を利用する。符号化パラメータ制御部１０４は、画質制御情報１１０に基づいて、分割画像情報１０９を符号化するための符号化パラメータ１１１を決定し出力する。画像情報符号化部１０５は、符号化パラメータ１１１を用いて分割画像情報１０９を符号化し、符号化画像情報１１２を出力する。
【００６４】
画像情報分析部１０３において、分析パラメータ決定部２０１は、符号属性情報１０７に基づいて分析パラメータ２０３を決定し、出力する。画像分析値算出部２０２は、分析パラメータ２０３を用いて分割画像情報１０９の統計量を算出する。
【００６５】
さらに、本実施例の具体的な構成および動作を説明する。本実施例における画像情報符号化部１０５の構成を図１７に、画像分析値算出部２０２の構成を図１８に、分析パラメータ決定部２０１の構成を図１９に、符号化画像情報復号部１０１の構成を図２０に、符号化パラメータ制御部１０４の構成を図２１に示す。
【００６６】
符号化画像情報復号部１０１、および、画像情報符号化部１０５は、従来例と同様にＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  ｃｏｄｉｎｇ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）方式でも用いられている一般的な画像符号化／復号器の構成である。
【００６７】
図１７において、１７０１はＤＣＴ部、１７０２は線形量子化部、１７０３は可変長符号化部、１７０４はＤＣＴ係数情報、１７０５は量子化ＤＣＴ係数情報である。
【００６８】
図１８において、１８０１は高域係数加算部である。ＤＣＴ部１７０１は画像情報符号化部１０５に含まれるものと同一であり、画像分析値算出部２０２が持つ必要はないが、説明の都合上ここにも含めている。
【００６９】
図１９において、１９０１は調整係数決定部である。
【００７０】
図２０において、２００１は可変長復号部、２００２は線形逆量子化部、２００３はＩＤＣＴ部、２００４は量子化ＤＣＴ係数情報、３０５はＤＣＴ係数情報である。
【００７１】
図２１において、２１０１はアドレス生成部、２１０２は符号化パラメータ記憶部、２１０３はアドレス情報である。
【００７２】
まず、図１７に示す画像情報符号化部１０５の動作を説明する。ＤＣＴ部１７０１では分割画像情報１０９に対してＤＣＴを行い、ＤＣＴ係数情報１７０４を出力する。  ＤＣＴ係数情報１７０４は図２２に示すような６４個からなる変換係数（ｃ0，ｃ1，．．．．ｃ63）である。
【００７３】
線形量子化部１７０２では、６４個からなる量子化マトリクス（ｑ0，ｑ1，．．．．ｑ63）を使って上記６４個のＤＣＴ係数を量子化して量子化ＤＣＴ係数情報１７０５を出力する。量子化マトリクスの数値ｑiは、６４個の変換係数それぞれの量子化の間隔（量子化ステップサイズ）を表している。変換係数（ｃ0，ｃ1，．．．．ｃ63）は、ｃ0が直流成分、その他が交流成分の係数を表しており、添字が多くなるほど高域成分の係数である。写真などの自然画像の場合、高域成分が少ないという特徴があるため、高域の量子化ステップサイズを大きくして圧縮効率を上げるのが一般的である。線形量子化部に入力されている入力符号化パラメータ１１１はＪＰＥＧ方式でスケーリングファクタ（ＳＦ）と呼ばれる数値で、上述の量子化マトリクスの各数値にＳＦを乗じて量子化の粗さを制御する。ＳＦを大きくするほど圧縮率が高くなり、画質劣化が発生し易くなる。
【００７４】
可変長符号化部１７０３では、量子化ＤＣＴ係数情報１７０５を可変長符号化して符号化画像情報１１２を出力する。
【００７５】
次に、図２０に示す符号化画像情報復号部１０１の動作を説明する。可変長復号部２００１では、入力された前段符号化画像情報１０６を可変長復号し、量子化ＤＣＴ係数情報２００４を出力する。線形逆量子化部２００２では、ＤＣＴ係数の逆量子化を行い、ＤＣＴ係数情報２００５を出力する。ＩＤＣＴ部２００３では、逆ＤＣＴ変換を行って復号画像情報１０８を出力する。線形量子化部１７０２に入力される符号化パラメータ１１１は、可変長復号部２００１から出力されるＳＦである。
【００７６】
図１８、図１９を使って、さらに画像情報分析部１０３の動作を説明する。高域係数加算部１８０１では、ＤＣＴ係数情報１７０４のうち高域のものの絶対値和を計算し画質制御情報１１０として出力する。高域のＤＣＴ係数とは、ｉ≧Ｎ（Ｎは６３以下の正整数）を満たすｃiである。この高域の変換係数の絶対値和が大きい場合ということは、符号化対象の画像にエッジ成分が多く含まれているということを意味している。そのような画像を大きなＳＦで符号化すれば、エッジ周辺にモスキートノイズなどの画質劣化が発生することになる。
【００７７】
調整係数決定部１９０１では、符号属性情報１０７、すなわち、前段符号化画像情報１０６を符号化する際に使用されたＳＦを利用して、高域係数加算部１８０１の処理を調整するための係数を決定する。これは、図２３に示すように、最初の符号化時には（ａ）のような係数であったものが、再度符号化を行なう際には（ｂ）のような高域成分がほとんど失われたものになっている場合があるためである。すなわち、分割画像情報１１３が復号画像情報の場合、そのまま高域係数を加算するともとの画像とは特性が全く異なる（エッジ成分がない）画像と分析されてしまう可能性がある。これを補うため、高域係数を加算する際に、符号化画像情報を符号化した時に使用したＳＦと量子化係数に応じて、高域成分に重み付けを行なうための係数を決定し、分析パラメータ２０３として出力する。
【００７８】
図２１に示す符号化パラメータ制御部１０４の動作を説明する。アドレス生成部２１０１では、符号化パラメータ記憶部２１０２から適切な符号化パラメータを読み出すためのアドレス情報２１０３を生成する。このとき、画質制御情報１１０、すなわち、高域係数の加算結果の値が大きいほど小さなＳＦのアドレス、加算結果が小さいほど大きなＳＦのアドレスを生成する。符号化パラメータ記憶部２１０２では、アドレス情報２１０３が示すアドレスに記憶している符号化パラメータを読み出し、符号化パラメータ１１１として出力する。
【００７９】
このように、符号化画像情報が入力され、これを一旦復号してから再度符号化する場合には、符号化画像情報に含まれる符号化パラメータを参照することによって、より確実に復号画質を制御することができるようになる。
【００８０】
本実施例では、符号化画像情報復号部１０１と画像情報符号化部１０５が同じ符号化方式である場合を示したが、これらは同じ方式でなくても実現可能である。
【００８１】
［実施例２］
図３は、本発明の画像情報符号化装置の実施例２を示すブロック図である。図中、３０１は画像出力装置情報出力部、３０２は画像分析部、３０３は符号化パラメータ制御部、３０４は画像出力装置情報である。その他の構成は実施例１と同じである。
【００８２】
実施例１との違いは、画像分析部３０２において画質劣化項目別に分析を行い、画質制御情報１１０を算出する際に画像出力装置情報３０４を利用する点と、符号化パラメータ制御部３０３において符号化パラメータ１１１を決定する際に符号属性情報１０７を利用する点である。
【００８３】
実施例１と異なる部分について、概略構成、および、動作を説明する。
【００８４】
画像出力装置特性出力部３０１は、画質劣化の検知され方に影響を与える出力装置の特性情報情報を画像出力装置情報３０４として出力する。画像出力装置情報３０４の例として、画像出力装置の実効階調数、解像度、先鋭性などが挙げられる。
【００８５】
図４は本実施例における画像分析部３０２の構成を示すブロック図である。図中、４０１ａ，４０１ｂ，４０１ｃは画質劣化項目別画像分析部、４０２は算出係数決定部、４０３は画質制御情報算出部、４０４は画質劣化項目別画像分析情報、４０５は算出係数である。
画質劣化項目とは、画像情報符号化部１０５において発生が予想される符号化ひずみの項目である。本実施例では、画質劣化項目ａは「ぼけ」、画質劣化項目ｂは「擬似輪郭」、画質劣化項目ｃは「モスキートノイズ」とする。
【００８６】
図４を用いて画像分析部３０２の概略動作について説明する。画質劣化項目ａ画像分析部４０１ａでは、分割画像情報１０９が符号化によって画質劣化項目ａが発生し易い画像であるかを調べ、その結果を画質劣化項目別画像分析情報４０４ａとして出力する。このとき符号属性情報１０７を利用して分析を行う。画質劣化項目ｂ画像分析部４０１ｂ、画質劣化項目ｃ画像分析部４０１ｃでは、同様に調べ、その結果を画質劣化項目ｂ画像分析情報４０４ｂおよび画質劣化項目ｃ画像分析情報４０４ｃとして出力する。画質制御情報算出部４０３では、画質劣化項目別画像分析情報４０４から画質制御情報１１０を算出して出力する。
【００８７】
図５は、画質劣化項目ａ画像分析部４０１ａの構成である。５０１ａは画質劣化項目ａ分析パラメータ決定部、５０２ａは画質劣化項目ａ分析値算出部、５０３ａは画質劣化項目ａ分析パラメータである。他の画質劣化項目についても同様の構成である。
【００８８】
図５を用いて画質劣化項目ａ画像分析部４０１ａの概略動作を説明する。画質劣化項目ａ分析パラメータ決定部５０１ａは符号属性情報１０７を利用して分析パラメータを決定し画質劣化項目ａ分析パラメータ５０３ａとして出力し、画質劣化項目ａ分析値算出部５０２ａは画質劣化項目ａ分析パラメータ５０３ａを用いて分割画像情報１０９を分析し画質劣化項目ａ画像分析情報４０４ａを出力する。
【００８９】
図６は本実施例における符号化パラメータ制御部３０３の構成である。図において、６０１は符号化パラメータ制限値決定部、６０２は符号化パラメータ決定部、６０３は符号化パラメータ制限値である。
【００９０】
図６を用いて符号化パラメータ制御部３０３の概略動作を説明する。符号化パラメータ制限値決定部６０１は符号属性情報１０７を利用して符号化パラメータ制限値６０３を決定し、出力する。符号化パラメータ決定部６０２は、符号化パラメータ制限値６０３を超えないように符号化パラメータ１１１を決定し、出力する。
【００９１】
さらに、本実施例の構成および動作を具体的に説明する。本実施例における符号化パラメータ制御部の構成例を図２４に、画質劣化項目別画像分析部４０１の構成例を図２５に示す。本実施例では、画質劣化項目として「ぼけ」、「擬似輪郭」、「モスキートノイズ」の３つを取り扱う。画質項目ａを「ぼけ」、画質項目ｂを「擬似輪郭」、画質項目ｃを「モスキートノイズ」として説明する。
【００９２】
図２４において、２４０１は制限値決定部、２４０２はアドレス生成部、２４０３は符号化パラメータ記憶部、２４０４はアドレス情報である。
【００９３】
つぎに動作について説明する。制限値決定部２４０１では、符号属性情報１０７、すなわち、前段符号化画像情報１０６を符号化する際に使用されたＳＦ（これをＳＦoldとする。）を利用して（ａ）に示す条件を満たすように符号化パラメータ１１１の制限値、すなわち、ＳＦの最大値（これをＳＦmaxとする。）を決定する。
【００９４】
【数１】
0003738574.tif 000002
復号画像を再度符号化する場合、符号化パラメータを所定の値より大きくすると画質が極端に劣化することがある。（ここでは、符号化パラメータを大きくすると画質が劣化する例で説明している。）どの程度の符号化パラメータで画質が極端に劣化するかは、符号化画像情報を作成する際に使用した符号化パラメータに依存する。
図２５において、２５０１はエッジ検出部、２５０２は分散算出部、２５０３はぼけ判定部、２５０４はぼけ閾値決定部、２５０５は画像エッジ情報、２５０６は画像分散情報、２５０７は擬似輪郭判定部、２５０８は擬似輪郭閾値決定部、２５０９はモスキートノイズ判定部、２５１０はモスキートノイズ閾値決定部である。エッジ検出部２５０１、および、分散算出部２５０２は図のように別々に設ける必要はない。
【００９５】
つぎに動作について説明する。ぼけ画像分析値算出部５０２ａにおいて、エッジ検出部２５０１では、分割画像情報中のエッジを検出し、画像エッジ情報２５０５を出力する。エッジ検出は、テンプレートマッチングによって行なう。出力結果が大きいほど強いエッジであることを表す。このようなエッジ検出処理を分割画像情報中の画素毎に行い、エッジが検出された画素の多さやエッジの強さなどで分割画像情報の画質劣化の出易さを分析する。分散算出部２５０２では、分割画像情報の分散を算出し、画像分散情報２５０６を出力する。ぼけ判定部２５０３は画像エッジ情報２５０５が表す分割画像情報１０９中の画素毎のエッジ度Ｅi（Ｉ＝０，１，．．．，６３）が所定の閾値Ｔｈｅｄｇｅ１を上回っている個数と、そのときのエッジ度Ｅiの最大値Ｅmaxとからぼけの発生し易さを数値化してぼけ画像分析情報４０４ａとして出力する。すなわち、エッジ度が閾値を上回っている個数が多く、エッジ度の最大値が大きいほどぼけが発生し易いと判定する。ぼけ閾値決定部２５０４は、符号属性情報１０７すなわちＳＦの値に応じて閾値Ｔｈｅｄｇｅを決定し、出力する。これは、復号画像では符号化によって強いエッジが失われている可能性があるためである。
【００９６】
３種類の画質劣化項目別画像分析は全て、上記画像エッジ情報２５０５と画像分散情報２５０６に基づいて行う。
【００９７】
擬似輪郭画像分析値算出部５０２ｂにおいて、擬似輪郭判定部２５０７は上記Ｅiが所定の閾値Ｔｈｅｄｇｅ２を下回っている個数と、画像分散情報２５０６が表す分割画像情報１０９の分散値Ｓとから擬似輪郭の発生し易さを数値化して擬似輪郭画像分析情報４０４ｂとして出力する。すなわち、エッジ度が閾値を下回っている個数が多く、分散値が小さいほど擬似輪郭は発生し易いと判定する。擬似輪郭閾値決定部２５０８は、分散値の大きさを判定するための閾値Ｔｓｉｇｍａ１を符号属性情報１０７すなわちＳＦの値に応じて変更する。これは、復号画像では、ＳＦの値によっては元の画像よりも分散値が大きくなる場合があるためで、誤判定を防ぐ意味がある。
【００９８】
モスキートノイズ画像分析値算出部５０２ｃにおいて、モスキートノイズ判定部２５０９は上記Ｅiが所定の閾値Ｔｈｅｄｇｅ３を上回っている個数と、その時のエッジ度Ｅiの最大値Ｅmax、および、画像分散情報２５０９が表す分割画像情報１０９の分散値Ｓとからモスキートノイズの発生し易さを数値化してモスキートノイズ画像分析情報４０４ｃとして出力する。すなわち、エッジ度が閾値を上回っている個数が多く、エッジどの最大値が大きく、かつ、分散値が小さいほどモスキートノイズは発生し易いと判定する。モスキートノイズ閾値決定部２５１０は、ぼけ閾値決定部２５０４、擬似輪郭閾値決定部２５０８と同様にＳＦの値に応じてＴｈｅｄｇｅ３、分散値の大きさを判定するための閾値Ｔｓｉｇｍａ２の調整を行う。
【００９９】
また、図４における画質制御情報算出部４０３は、重み付け処理を行って画質制御情報１１０を出力する。
【０１００】
【数２】
Ｄ＝Ｘａ＊Ｄａ＋Ｘｂ＊Ｄｂ＋Ｘｃ＊Ｄｃ              （式１）
ただし、Ｄは画像分析情報１１０、Ｄａはぼけ画像分析情報４０４ａ、Ｄｂは擬似輪郭画像分析情報４０４ｂ、Ｄｃはモスキートノイズ画像分析情報４０４ｃであり、Ｘａ、Ｘｂ、Ｘｃは重み付け係数である。
【０１０１】
この重み付け処理は、以下の理由で行うものである。
【０１０２】
画像情報符号化部１０５において複数種類の画質劣化が発生する場合、それらの相互作用によって画質劣化の検知され易さは変化する。すなわち、単独で発生している場合には人の眼に十分検知される画質劣化が、他の画質劣化項目と同時に発生している場合には、検知され難くなる場合がある。そこで、複数種類の画質劣化が同時に発生する符号化方式の場合には、画質劣化項目別画像分析情報に重み付け処理を行って、より正確な画質制御情報１１０を出力するようにしている。例えば、ぼけとモスキートノイズが同時に発生し、ぼけが単独で発生したときよりも検知され難い場合は、ぼけの重み付け係数Ｘａを小さくする。
【０１０３】
算出係数決定部４０２は、これらの重み付け係数を符号属性情報１０７と画像出力装置特性情報３０４を利用して決定し、出力する。
【０１０４】
例えば、符号属性情報１０７が前段の符号化方式と符号化パラメータを含んでおり、分割画像情報１０９にぼけが発生していることが予測できる場合、画像情報符号化部１０５で発生する画質劣化の中ではぼけの影響が少なくなるため重み付け係数Ｘａを小さくする。
【０１０５】
また、画像出力装置情報３０４が画像出力装置の実効階調数、解像度、先鋭性がを含んでおり、分割画像情報１０９に擬似輪郭やモスキートノイズが発生していることが予測できる場合、画像出力装置の実効階調数が高いほど擬似輪郭やモスキートノイズの重み付け係数Ｘｂ、Ｘｃを大きくする。分割画像情報１０９にぼけが発生していることが予測できる場合、解像度が低い、あるいは、先鋭性が低いほどぼけの重み付け係数Ｘａを小さくする。
【０１０６】
このように符号属性情報１０７、画像出力装置情報３０４を利用して算出係数情報７０２を決定することによって、より正確な画質制御情報１１０を出力できるようになる。
【０１０７】
［実施例３］
図７は、本発明の画像情報符号化装置の実施例３を示すブロック図である。図中、７０１は画像情報選択部、７０２は画像分析部、７０３は非符号化画像情報、７０４は切り替え情報、７０５は選択画像情報である。その他の構成は実施例１と同じである。
【０１０８】
実施例１との違いは、符号化画像情報１０６を復号した復号画像情報１０８だけではなく、非符号化画像情報７０３を扱える点である。
実施例１と異なる部分について、概略構成、および、動作を説明する。
【０１０９】
画像情報選択部７０１は、切り替え情報７０４に従って、復号画像情報１０８または非符号化画像情報７０３のいずれかを選択し選択画像情報７０５として出力する。
【０１１０】
図８は、本実施例における画像分析部７０２の構成を示すブロック図である。図中、８０１は復号画像用分析パラメータ出力部、８０２は非符号化画像用分析パラメータ出力部、８０３は分析パラメータ選択部、８０４は復号画像用分析パラメータ、８０５は非符号化画像用分析パラメータ、８０６は分析パラメータ決定部である。
【０１１１】
図８を用いて、画像分析部７０２の概略動作について説明する。
【０１１２】
分析パラメータ決定部８０６において、復号画像用分析パラメータ出力部８０１は符号属性情報１０７を利用して復号画像用分析パラメータ８０４を決定し、出力する。復号画像用分析パラメータ出力部８０１の構成および動作は分析パラメータ決定部２０１と同じである。また、非符号化画像用分析パラメータ出力部８０２は、所定の値の非符号化画像用分析パラメータ８０５を出力する。分析パラメータ選択部８０３は切り替え情報７０４に従って、復号画像用分析パラメータ８０４または非符号化画像用分析パラメータ８０５のいずれかを選択し、分析パラメータ２０３として出力する。
【０１１３】
画像分析値算出部２０２は、分析パラメータ２０３を用いて分割画像情報１０９の統計量を算出する。
【０１１４】
切り替え情報７０４によって、復号画像情報１０８が選択された場合の各部の動作は実施例１と同じである。非符号化画像情報７０３が選択された場合は、画像分析値算出部２０２は、固定の分析パラメータを用いて画像分析を行う。
【０１１５】
［実施例４］
図９は、本発明の画像情報符号化装置の実施例４を示すブロック図である。図中、９０１は画像情報分析部、９０２は符号化パラメータ制御部である。画像情報選択部７０１は実施例３と同じであり、その他の構成は実施例２と同じである。
【０１１６】
実施例２および実施例３と異なる画像情報分析部９０１、および、符号化パラメータ制御部９０２の概略構成、および、動作を説明する。
【０１１７】
図１０は、本実施例における画像分析部９０１の構成を示すブロック図である。図中、１００１ａ、１１０１ｂ、１１０１ｃは画質劣化項目別画像分析部、１００２は算出係数決定部である。画質劣化項目ａ画像分析部１００１ａの構成を図１１に、算出係数決定部１００２の構成を図１２に示す。
【０１１８】
図１１において、１１０１ａは画質劣化項目ａ復号画像用分析パラメータ出力部、１１０２ａは画質劣化項目ａ非符号化画像用分析パラメータ出力部、１１０３は分析パラメータ選択部、１１０４ａは画質劣化項目ａ復号画像用分析パラメータ、１１０５ａは画質劣化項目ａ非符号化画像用分析パラメータ、１１０６ａは画質劣化項目ａ分析パラメータ決定部である。
【０１１９】
図１１を用いて、画質劣化項目別画像分析部１００１ａの概略動作を説明する。
【０１２０】
画質劣化項目ａ分析パラメータ決定部１１０６ａにおいて、復号画像用分析パラメータ出力部１１０１ａは符号属性情報１０７を利用して画質劣化項目ａ復号画像用分析パラメータ１１０４ａを決定し、出力する。画質劣化項目ａ復号画像用分析パラメータ出力部１１０１ａの構成および動作は画質劣化項目ａ分析パラメータ決定部５０１ａと同じである。画質劣化項目ａ非符号化画像用分析パラメータ出力部１１０２ａは、所定の値の画質劣化項目ａ非符号化画像用分析パラメータ１１０５ａを出力する。分析パラメータ選択部１１０３は切り替え情報７０４に従って、画質劣化項目ａ復号画像用分析パラメータ１１０４ａまたは画質劣化項目ａ非符号化画像用分析パラメータ１１０５ａのいずれかを選択し画質劣化項目ａ分析パラメータ５０３ａとして出力する。
【０１２１】
画質劣化項目ａ画像分析値算出部５０２ａは、画質劣化項目ａ分析パラメータ５０３ａを用いて分割画像情報１０９の統計量を算出する。
【０１２２】
切り替え情報７０４によって、復号画像情報１０８が選択された場合の各部の動作は実施例２と同じである。非符号化画像情報７０３が選択された場合は、画質劣化項目別画像分析値算出部５０２は、固定の分析パラメータを用いて画像分析を行う。
【０１２３】
画質劣化項目ｂ画像分析部１００１ｂ、画質劣化項目ｃ画像分析部１００１ｃも図１１と同様の構成、および動作である。
【０１２４】
図１２において、１２０１は復号画像用算出係数出力部、１２０２は非符号化画像用算出係数出力部、１２０３は算出計数選択部、１２０４は復号画像用算出係数、１２０５は非符号化画像用算出係数である。
【０１２５】
図１２を用いて、算出係数決定部１００２の概略動作を説明する。
【０１２６】
復号画像用算出係数出力部１２０１は、符号属性情報１０７と画像出力装置情報３０４とを利用して復号画像用算出係数１２０４を決定し、出力する。復号画像用算出係数出力部１２０１の構成および動作は算出係数決定部４０２と同じである。非符号化画像用算出係数出力部１２０２は、画像出力装置情報３０４を利用して非符号化画像用算出係数１２０５を決定し、出力する。算出係数選択部１２０３は、切り替え情報７０４に従って、復号画像用算出係数１２０４または非符号化画像用算出係数１２０５のいずれかを選択し算出係数４０５として出力する。
【０１２７】
切り替え情報７０４によって、復号画像情報１０８が選択された場合の各部の動作は実施例２と同じである。非符号化画像情報７０３が選択された場合は、非符号化画像用算出係数出力部１２０２は、画像出力装置情報３０４によって定まる算出係数を出力する。
【０１２８】
図１３は、本実施例における符号化パラメータ制御部９０２の構成を示すブロック図である。図中、１３０１は復号画像用符号化パラメータ制限値出力部、１３０２は非符号化画像用符号化パラメータ制限値出力部、１３０３は符号化パラメータ制限値選択部、１３０４は復号画像用符号化パラメータ制限値、１３０５は非符号化画像用符号化パラメータ制限値、１３０６は符号化パラメータ制限値決定部である。
【０１２９】
図１３を用いて、符号化パラメータ制御部９０２の概略動作を説明する。
【０１３０】
符号化パラメータ制限値決定部１３０６において、復号画像用符号化パラメータ制限値出力部１３０１は、符号属性情報１０７を利用して復号画像用符号化パラメータ制限値１３０４を決定し、出力する。復号画像用符号化パラメータ制限値出力部１３０１の構成および動作は符号化パラメータ制限値決定部６０１と同じである。非符号化画像用符号化パラメータ制限値出力部１３０２は所定の非符号化画像用符号化パラメータ制限値１３０５を出力する。符号化パラメータ制限値選択部１３０３は、切り替え情報７０４に従って、復号画像用符号化パラメータ制限値１３０４または非符号化画像用符号化パラメータ制限値１３０５のいずれかを選択し符号化パラメータ制限値６０３として出力する。
【０１３１】
切り替え情報７０４によって、復号画像情報１０８が選択された場合の各部の動作は実施例２と同じである。非符号化画像情報７０３が選択された場合は、非符号化画像用符号化パラメータ制限値出力部１３０２は固定の符号化パラメータ制限値を出力する。
【０１３２】
［実施例５］
図１４は、この発明の画像情報符号化装置の実施例５を示すブロック図である。実施例１との違いは、画質制御の正否を予測し、その結果をユーザーに通知する手段を設けた点、符号化画像情報復号部が複数の符号化方式に対応可能な点である。図中、１４０１は画質制御予測通知部である。
【０１３３】
図１５は本実施例の符号情報復号部１０１の構成を示すブロック図、図１６は画質制御予測通知部１４０１の構成を示すブロック図である。
【０１３４】
１５０１は符号属性情報抽出部、１５０２は符号化識別情報抽出部、１５０３は符号化画像情報復号部選択部、１５０４は符号化画像情報復号部、１５０５は符号化識別情報である。
【０１３５】
１６０１は符号量情報抽出部、１６０２は符号化パラメータ抽出部、１６０３は画質制御予測部、１６０４は画質制御予測結果表示部、１６０５は符号量情報、１６０６は符号化パラメータ情報、１６０７は画質制御予測結果情報である。
【０１３６】
図１５において、符号化属性情報抽出部１５０１は、符号化画像情報１０６から符号化パラメータなどの属性情報だけを復号および抽出して符号属性情報１０７として出力する。符号化識別情報抽出部１５０２では、符号属性情報１０７の中から符号化画像情報１０６を生成した符号化方式を表す情報を抽出して符号化識別情報１５０５として出力する。符号化画像情報復号部選択部１５０３は、符号化識別情報１５０５に対応する符号化画像情報復号部１５０４を選択する。選択された符号化画像情報復号部１５０４では、符号化画像情報１０６を復号し、復号画像情報１０８を出力する。
【０１３７】
図１６において、符号化識別情報抽出部１５０１は符号属性情報１０７の中から符号化画像情報１０６を生成した符号化方式を表す情報を抽出して符号化識別情報１５０５として出力する。符号量情報抽出部１６０１では符号属性情報１０７の中から符号化画像情報１０６の符号量を表す情報を抽出して符号量情報１６０５として出力する。符号化パラメータ抽出部１６０２では符号属性情報１０７の中から符号化画像情報１０６を生成したときの符号化パラメータを表す情報を抽出し符号化パラメータ情報１６０６として出力する。画質制御予測部１６０３では、符号化識別情報１５０５に基づいて符号化画像情報１０６に発生している画質劣化の種類を予測し、符号量情報１６０５と符号化パラメータ情報１６０６とから符号化画像情報１０６の画質劣化の程度を予測し、以上の結果をまとめて画質制御予測結果情報１６０７として出力する。画質制御予測結果表示部１６０４では、画質制御予測結果情報１６０７を表示する。
【０１３８】
符号化画像情報１０６の画質劣化の程度を予測する際に、符号化パラメータ情報１６０６だけではなく符号量情報１６０５も利用するのは、符号化パラメータと符号量との関係から、もとの画像が圧縮し易いものであったか否かが予測できるためである。
【０１３９】
このような画質制御予測結果情報１６０７は、符号化画像１０６にもともとどのような画質劣化がどの程度発生しているかを予測した結果をユーザーに通知するもので、これにより再度符号化を行なう際に画質制御を行なう意味があるか否かがわかる。もともと符号化画像に著しい画質劣化が発生していれば、画質制御を行なわず圧縮率だけを重視して符号化するようにしてもよい。
【０１４０】
【発明の効果】
以上の説明から明らかなように、この発明によれば、画質制御を行う符号化装置において、符号化画像を一旦復号してから符号化を行う場合には、符号化画像の属性情報を利用することによって、高精度な画質制御を実現する符号化技術を提供できる。本発明は、符号化画像を一旦復号してから符号化を行う場合であっても、復号画像用の画像分析手段や、画質改善手段を新たに追加する必要がないため、装置規模が大きくなることを防ぎ、費用を抑えることができる。また、符号化対象の復号画像の画質劣化が著しい場合は、無意味な画質制御によって圧縮率が低く抑えられてしまうことを避けることができ、画質制御が十分に行えないことをユーザーに通知することができる。
【図面の簡単な説明】
【図１】  この発明の実施例１における画像情報符号化装置の概略構成図である。
【図２】  この発明の実施例１における画像情報分析部の概略構成図である。
【図３】  この発明の実施例２における画像情報符号化装置の概略構成図である。
【図４】  この発明の実施例２における画像情報分析部の概略構成図である。
【図５】  この発明の実施例２における画質劣化区項目別画像情報分析部の概略構成図である。
【図６】  この発明の実施例２における符号化パラメータ制御部の概略構成図である。
【図７】  この発明の実施例３における画像情報符号化装置の概略構成図である。
【図８】  この発明の実施例３における画像情報分析部の概略構成図である。
【図９】  この発明の実施例４における画像情報符号化装置の概略構成図である。
【図１０】  この発明の実施例４における画像情報分析部の概略構成図である。
【図１１】  この発明の実施例４における画質劣化項目別画像情報分析部の概略構成図である。
【図１２】  この発明の実施例４における算出係数決定部の概略構成図である。
【図１３】  この発明の実施例４における符号化パラメータ制御部の概略構成図である。
【図１４】  この発明の実施例５における画像情報符号化装置の概略構成図である。
【図１５】  この発明の実施例５における符号化画像情報復号部の概略構成図である。
【図１６】  この発明の実施例５における画質制御予測通知部の概略構成図である。
【図１７】  この発明の実施例１における画像情報符号化部の構成図である。
【図１８】  この発明の実施例１における画像分析値算出部の構成図である。
【図１９】  この発明の実施例１における分析パラメータ決定部の構成図である。
【図２０】  この発明の実施例１における符号化画像情報復号部の構成図である。
【図２１】  この発明の実施例１における符号化パラメータ制御部の構成図である。
【図２２】  ＤＣＴ係数情報の説明図である。
【図２３】  符号化処理によるＤＣＴ係数の変化を示す説明図である。
【図２４】  この発明の実施例２における符号化パラメータ制御部の構成図である。
【図２５】  この発明の実施例２における画質劣化項目別画像分析部の構成図である。
【図２６】  従来例における画質制御機能を持つ符号化装置の概略構成図である。
【図２７】  従来例における画質制御機能を持つ符号化装置の概略構成図である。
【図２８】  従来例における画質制御部の構成図である。
【図２９】  従来例における復号画像を再符号化する符号化装置の概略構成図である。
【符号の説明】
１０１    符号化画像情報復号部
１０２    画像情報分割部
１０３    画像情報分析部
１０４    符号化パラメータ制御部
１０５    画像情報符号化部
１０６    前段符号化画像情報
１０７    符号属性情報
１０８    復号画像情報
１０９    分割画像情報
１１０    画質制御情報
１１１    符号化パラメータ
１１２    符号化画像情報
２０１    分析パラメータ決定部
２０２    画像分析値算出部
２０３    分析パラメータ
３０１    画像出力装置情報出力部
３０２    画像分析部
３０３    符号化パラメータ制御部
３０４    画像出力装置情報
４０１    画質劣化項目別画像分析部
４０２    算出係数決定部
４０３    画質制御情報算出部
４０４    画質劣化項目別画像分析情報
４０５    算出係数
５０１    画質劣化項目別分析パラメータ決定部
５０２    画質劣化項目別分析値算出部
５０３    画質劣化項目別分析パラメータ
６０１    符号化パラメータ制限値決定部
６０２    符号化パラメータ決定部
６０３    符号化パラメータ制限値
７０１    画像情報選択部
７０２    画像分析部
７０３    非符号化画像情報
７０４    切り替え情報
７０５    選択画像情報
８０１    復号画像用分析パラメータ出力部
８０２    非符号化画像用分析パラメータ出力部
８０３    分析パラメータ選択部
８０４    復号画像用分析パラメータ
８０５    非符号化画像用分析パラメータ
８０６    分析パラメータ決定部
９０１    画像情報分析部
９０２    符号化パラメータ制御部
１００１    画質劣化項目別画像分析部
１００２    算出係数決定部
１１０１    画質劣化項目別復号画像用分析パラメータ出力部
１１０２    画質劣化項目別非符号化画像用分析パラメータ出力部
１１０３    分析パラメータ選択部
１１０４    画質劣化項目別復号画像用分析パラメータ
１１０５    画質劣化項目別非符号化画像用分析パラメータ
１１０６    画質劣化項目別分析パラメータ決定部
１２０１    復号画像用算出係数出力部
１２０２    非符号化画像用算出係数出力部
１２０３    算出計数選択部
１２０４    復号画像用算出係数
１２０５    非符号化画像用算出係数
１３０１    復号画像用符号化パラメータ制限値出力部
１３０２    非符号化画像用符号化パラメータ制限値出力部
１３０３    符号化パラメータ制限値選択部
１３０４    復号画像用符号化パラメータ制限値
１３０５    非符号化画像用符号化パラメータ制限値
１３０６    符号化パラメータ制限値決定部
１４０１    画質制御予測通知部
１５０１    符号属性情報抽出部
１５０２    符号化識別情報抽出部
１５０３    符号化画像情報復号部選択部
１５０４    符号化画像情報復号部
１５０５    符号化識別情報
１６０１    符号量情報抽出部
１６０２    符号化パラメータ抽出部
１６０３    画質制御予測部
１６０４    画質制御予測結果表示部
１６０５    符号量情報
１６０６    符号化パラメータ情報
１６０７    画質制御予測結果情報
１７０１    ＤＣＴ部
１７０２    線形量子化部
１７０３    可変長符号化部
１７０４    ＤＣＴ係数情報
１７０５    量子化ＤＣＴ係数情報
１８０１    高域係数加算部
１９０１    調整係数決定部
２００１    可変長復号部
２００２    線形逆量子化部
２００３    ＩＤＣＴ部
２００４    量子化ＤＣＴ係数情報
２００５    ＤＣＴ係数情報
２１０１    アドレス生成部
２１０２    符号化パラメータ記憶部
２１０３    アドレス情報
２４０１    制限値決定部
２４０２    アドレス生成部
２４０３    符号化パラメータ記憶部
２４０４    アドレス情報
２５０１    エッジ検出部
２５０２    分散算出部
２５０３    ぼけ判定部
２５０４    ぼけ閾値決定部
２５０５    画像エッジ情報
２５０６    画像分散情報
２５０７    擬似輪郭判定部
２５０８    擬似輪郭閾値決定部
２５０９    モスキートノイズ判定部
２５１０    モスキートノイズ閾値決定部
【図１】
0003738574.tif 000003
【図２】
0003738574.tif 000004
【図３】
0003738574.tif 000005
【図４】
0003738574.tif 000006
【図５】
0003738574.tif 000007
【図６】
0003738574.tif 000008
【図７】
0003738574.tif 000009
【図８】
0003738574.tif 000010
【図９】
0003738574.tif 000011
【図１０】
0003738574.tif 000012
【図１１】
0003738574.tif 000013
【図１２】
0003738574.tif 000014
【図１３】
0003738574.tif 000015
【図１４】
0003738574.tif 000016
【図１５】
0003738574.tif 000017
【図１６】
0003738574.tif 000018
【図１７】
0003738574.tif 000019
【図１８】
0003738574.tif 000020
【図１９】
0003738574.tif 000021
【図２０】
0003738574.tif 000022
【図２１】
0003738574.tif 000023
【図２２】
0003738574.tif 000024
【図２３】
0003738574.tif 000025
【図２４】
0003738574.tif 000026
【図２５】
0003738574.tif 000027
【図２６】
0003738574.tif 000028
【図２７】
0003738574.tif 000029
【図２８】
0003738574.tif 000030
【図２９】
0003738574.tif 000031