【手続補正書】
【提出日】平成16年10月15日(2004.10.15)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】請求項１
【補正方法】変更
【補正の内容】
【請求項１】
複数の画素からなる実写画像の画像データを入力し、各画素の画像データを集計しつつ所定の評価基準で特徴量を得て、当該特徴量に基づいて画像処理する画像処理装置であって、
複数の評価基準に従って上記特徴量を得る評価手段と、
複数の手法で上記画像データを変換可能であるとともに、各手法に応じて上記評価手段にて得られた特徴量を使い分ける画像処理手段とを具備することを特徴とする画像処理装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】請求項７
【補正方法】変更
【補正の内容】
【請求項７】
複数の画素からなる実写画像の画像データを入力し、各画素の画像データを集計しつつ所定の評価基準で特徴量を得て、当該特徴量に基づいて画像処理する画像処理方法であって、
複数の評価基準に従って上記特徴量を得て、
複数の手法で上記画像データを変換するにあたり、各手法に応じて上記評価手段にて得られた特徴量を使い分けることを特徴とする画像処理方法。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】請求項８
【補正方法】変更
【補正の内容】
【請求項８】
複数の画素からなる実写画像の画像データを入力し、各画素の画像データを集計しつつ所定の評価基準で特徴量を得て、当該特徴量に基づいて画像処理する画像処理制御プログラムを記録した媒体であって、
複数の評価基準に従って上記特徴量を得て、
複数の手法で上記画像データを変換するにあたり、各手法に応じて上記評価手段にて得られた特徴量を使い分けることを特徴とする画像処理制御プログラムを記録した媒体。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
本出願人は、このような課題に鑑みて、以前に、画像の中での重要な部分を判断する発明を提案した。同発明においては、画像のシャープな部分に本来の被写体（オブジェクト）が存在しているはずであると考え、各画素での画像の変化度合いに着目して同変化度合いの大きな画素をオブジェクトと判断するとともに、同オブジェクトについて所定の評価基準に基づいて特徴量を得て、当該特徴量を使用して画像処理を行っている。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
【課題を解決するための手段】
上記目的を達成するため、本発明の画像処理装置は、複数の画素からなる実写画像の画像データを入力し、各画素の画像データを集計しつつ所定の評価基準で特徴量を得て、当該特徴量に基づいて画像処理する画像処理装置であって、複数の評価基準に従って上記特徴量を得る評価手段と、複数の手法で上記画像データを変換可能であるとともに、各手法に応じて上記評価手段にて得られた特徴量を使い分ける画像処理手段とを備えたことを要旨とする。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
上記のように構成した画像処理装置では、複数の画素からなる実写画像の画像データを入力し、評価手段は各画素の画像データを集計しつつ複数の評価基準に従って特徴量を得る。そして、画像処理手段は、複数の手法で同画像データを変換するにあたり、各手法に応じて同評価手段で得られた特徴量を使い分けて同画像データを変換する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
上記評価手段がいかなる評価基準に従って特徴量を得るかについては、対象となる画像処理方法によって異なり、上述したようにオブジェクトに着目して画像処理する方がよい場合もあれば、そうではない場合もある。前者の場合の好適な一例として、上記の画像処理装置において、上記評価手段が、実写画像内のオブジェクトを抽出して当該オブジェクトの画素の画像データを集計して特徴量を得る評価基準を有するとともに、上記画像処理手段が、一の画像処理の手法において上記画像データの中心部分の特徴量を使用する際に上記オブジェクトの画素から得られた特徴量を使用する構成を考えることができる。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
上記のように構成した画像処理装置においては、上記画像処理手段が画像データの中心部分の特徴量に基づいて画像データを変換する場合に、上記評価手段は同実写画像内のオブジェクトを抽出し、当該オブジェクトの画素の画像データを所定の評価基準に従って集計して特徴量を得る。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
オブジェクトの抽出手法の基本的な一例として、上記評価手段が、各画素における隣接画素との画像データの変化度合いに基づいて同変化度合いの大きな画素をオブジェクトとして抽出する構成を考えることができる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
上記のように構成した画像処理装置においては、上記評価手段は、隣接する画素間での画像データの変化度合いが大きな画素をオブジェクトとして抽出する。ドットマトリクス状の画素のように一定間隔で並んでいる場合、隣接する画素間の画像データの差分は一次微分値と比例するため、このような差分をもってして画像の変化度合いとして判断できる。この場合、差分をベクトルの大きさと考えるとともに、隣接方向を考慮してベクトルを合成するようにしてもよい。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
また、オブジェクトの抽出方法の別の一例として、上記評価手段が、各画素における色度が所定範囲内にある画素をオブジェクトとして抽出する構成を考えることができる。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
上記のように構成した画像処理装置においては、上記評価手段は、各画素における色度を求める。色度は色の刺激値の絶対的な割合を表しており、明るさには左右されない。従って、画像の中のオブジェクトを色度の取りうる範囲によって分けることができる。例えば、肌色の取りうる範囲であるとか、木々の緑色の取りうる範囲といったものである。色度にはこのようなことが言えるので、上記評価手段は、上記求められた色度が所定範囲内にある画素をオブジェクトとして抽出する。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
オブジェクトに着目しないで画像処理する場合の好適な一例として、上記評価手段が、上記画像データの各画素を均等にサンプリングして集計して特徴量を得る評価基準を有するとともに、上記画像処理手段が、一の画像処理の手法において実写画像の平均的な特徴量を使用する際に上記均等にサンプリングして得られた特徴量を使用する構成を考えることができる。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
上記のように構成した画像処理装置においては、上記画像処理手段が平均的な特徴量に基づいて画像データを変換する場合に、上記評価手段は同画像データの各画素を所定の評価基準に従って均等にサンプリングして特徴量を得る。むろん、実写画像を構成する全画素を対象として集計するようにしてもよいが、処理量が多くなることから得策ではないと言える。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
このようにオブジェクトに着目しないで画像処理する場合の別の一例として、上記評価手段が、上記画像データの各画素を均等にサンプリングして集計して特徴量を得る評価基準を有するとともに、上記画像処理手段が、一の画像処理の手法において実写画像の特徴量分布の端部を使用する際に上記均等にサンプリングして得られた特徴量を使用する構成を考えることができる。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
上記のように構成した画像処理装置においては、上記画像処理手段は、上記評価手段にて得られた特徴量分布の端部を使用することを前提としている。例えば、コントラストを拡大する場合などにおいては、輝度分布を求めて当該輝度分布の端部を広げるように画像処理を施すが、かかる場合においてオブジェクトについての輝度分布を使用すると、それ以外のハイライト部分が白く抜けてしまうことがある。そこで、このような場合、上記評価手段は同画像データの各画素を所定の評価基準に従って均等にサンプリングして集計して特徴量を得る。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
複数の異なる評価基準により得られた特徴量に基づいて複数の画像処理を行う手法は、必ずしも実体のある装置に限られる必要もなく、その一例として、本発明の画像処理方法は、複数の画素からなる実写画像の画像データを入力し、各画素の画像データを集計しつつ所定の評価基準で特徴量を得て、当該特徴量に基づいて画像処理する画像処理方法であって、複数の評価基準に従って上記特徴量を得て、複数の手法で上記画像データを変換するにあたり、各手法に応じて上記評価手段にて得られた特徴量を使い分けることを要旨としている。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
その一例として、本発明の記録媒体は、複数の画素からなる実写画像の画像データを入力し、各画素の画像データを集計しつつ所定の評価基準で特徴量を得て、当該特徴量に基づいて画像処理する画像処理制御プログラムを記録した媒体であって、複数の評価基準に従って上記特徴量を得て、複数の手法で上記画像データを変換するにあたり、各手法に応じて上記評価手段にて得られた特徴量を使い分ける構成としてある。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
【発明の効果】
以上説明したように本発明の画像処理装置によれば、複数の評価基準に従って特徴量を得て複数の手法で画像処理を行うにあたり、各手法に応じて使用する特徴量を使い分けるようにしたため、最適な評価基準に基づいて画像処理を行うことが可能な画像処理装置を提供することができる。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
また、一の画像処理の手法において画像データの中心部分の特徴量を使用する際に、実写画像内のオブジェクトの画素から得られた特徴量を使用する構成を採れば、明暗補正など画像データの中心部分の特徴量に基づいて画像処理を行う場合に好適である。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
さらに、隣接画素との画像データの変化度合いの大きな画素をオブジェクトとして抽出する構成を採れば、隣接する画素間での画像データの差分を求めるだけであるので、演算が容易であり、オブジェクト判断のための処理量を低減できる。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
さらに、各画素における色度が所定範囲内にある画素をオブジェクトとして抽出する構成を採れば、色度でオブジェクトを判断するものの、オブジェクトの明暗に依存することなく当該オブジェクトを抽出することができる。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
さらに、一の画像処理の手法において実写画像の平均的な特徴量を使用する際に、画像データの各画素を均等にサンプリングして得られた特徴量を使用する構成を採れば、彩度補正など実写画像の平均的な特徴量に基づいて画像処理を行う場合に好適である。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００３８
【補正方法】変更
【補正の内容】
【００３８】
さらに、一の画像処理の手法において実写画像の特徴量分布の端部を使用する際に、画像データの各画素を均等にサンプリングして得られた特徴量を使用する構成を採れば、コントラスト拡大補正など実写画像における特徴量分布の端部を使用して画像処理する場合に好適である。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
さらに、本発明の画像処理方法によれば、同様にして最適な評価基準に基づいて画像処理を行うことが可能な画像処理方法を提供することができ、本発明の記録媒体によれば、画像処理制御プログラムを記録した媒体を提供することができる。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】００９９
【補正方法】変更
【補正の内容】
【００９９】
例えば、図１８にて実線で示すように輝度分布の山が全体的に暗い側に寄っている場合には破線で示すように全体的に明るい側に山を移動させると良いし、逆に、図１９にて実線で示すように輝度分布の山が全体的に明るい側に寄っている場合には破線で示すように全体的に暗い側に山を移動させると良い。