【手続補正書】
【提出日】平成19年7月3日(2007.7.3)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
時系列に連続する複数の画像データの中から選択された画像データに対してメタデータを関連付けて出力する画像データ生成装置であって、
前記時系列に連続する複数の画像データの中から特定画像データを特定する特定手段と、
前記特定画像データに対して時系列に連続する連続画像データを、前記時系列に連続する複数の画像データの中から取得する連続画像データ取得手段と、
前記特定画像データおよび前記連続画像データを用いて、前記特定画像データにおける主要被写体領域を特定する主要被写体領域特定手段と、
前記特定された前記主要被写体領域に関する情報または前記特定された前記主要被写体領域に関する情報を用いて生成された情報を含むメタデータと、前記特定画像データとを関連付けて出力する特定画像データ出力手段と、を備える画像データ生成装置。
【請求項２】
請求項１に記載の画像データ生成装置において、
前記画像データは複数の画素データを含んで構成されており、
前記主要被写体領域は、前記特定画像データを構成する前記画素データのうち、前記連続画像データにおいて対応する前記画素データの値の変化量が所定値以下である前記画素データによって構成される領域であり、
前記メタデータには、前記特定画像データにおける前記主要被写体領域の位置情報が含まれている画像データ生成装置。
【請求項３】
請求項２に記載の画像データ生成装置はさらに、
前記特定画像データに対して、前記主要被写体領域以外の領域に対する解析頻度よりも前記主要被写体領域に対する解析頻度が高くなるよう解析を実行し、前記特定画像データの画質の特性値を表す画質特性値を取得する画質特性値取得手段を備え、
前記メタデータには前記画質特性値が含まれる画像データ生成装置。
【請求項４】
請求項２に記載の画像データ生成装置はさらに、
前記特定画像データを解析して、前記主要被写体領域に対応する前記特定画像データの画質の特性値を表す第１の画質特性値および前記主要被写体領域以外の領域に対応する前記特定画像データの画質の特性値を表す第２の画質特性値を取得し、前記第１の画質特性値に対して重み付けをして、前記特定画像データの画質の特性値を表す第３の画質特性値を取得する画質特性値取得手段を備え、
前記メタデータには前記第３の画質特性値が含まれる画像データ生成装置。
【請求項５】
請求項１に記載の画像データ生成装置において、
前記主要被写体領域特定手段は、
前記特定画像データを複数のブロックに分割する分割手段と、
前記連続画像データにおける、前記分割された各ブロックの座標が移動する量を表す移動量を算出する移動量算出手段とを備え、前記複数のブロックの内、前記移動量が所定値未満の第１のブロックを前記主要被写体領域として特定し、
前記画像データ生成装置はさらに、
前記第１のブロックに対して、前記移動量が所定値以上の第２のブロックに対応付ける重み付け係数よりも大きな重み付け係数を対応付ける重み付け手段を備え、
前記メタデータには、前記第１および第２のブロックに対応付けられた前記重み付け係数が含まれている画像データ生成装置。
【請求項６】
請求項５に記載の画像データ生成装置はさらに、
前記特定画像データに対して、前記第２のブロックに対する解析頻度よりも前記第１のブロックに対する解析頻度が高くなるよう解析を実行し、前記主要被写体領域を中心にして前記特定画像データの画質の特性値を表す画質特性値を取得する画質特性値取得手段を備え、
前記メタデータには前記画質特性値が含まれる画像データ生成装置。
【請求項７】
請求項５に記載の画像データ生成装置はさらに、
前記特定画像データを解析して、前記第１のブロックおよび前記第２のブロックに対応する前記特定画像データの画質の特性値を表す画質特性値をそれぞれ取得し、前記第１のブロックに対応する前記画質特性値に対して重み付けをして、前記特定画像データの前記画質特性値を取得する画質特性値取得手段を備え、
前記メタデータには前記取得された前記画質特性値が含まれる画像データ生成装置。
【請求項８】
請求項３、請求項４、請求項６、請求項７のいずれか一項に記載の画像データ生成装置において、
前記取得した前記画質特性値を用いて、前記特定画像データの画質を調整することに用いる補正量を決定する補正量決定手段を備え、
前記メタデータには前記補正量が含まれる画像データ生成装置。
【請求項９】
画像データに関連付けられたメタデータを用いて前記画像データに対する画質調整処理を実行する画質補正装置であって、
時系列に連続する複数の画像データの中から選択された特定画像データに対して前記メタデータを関連付けて出力する画像データ生成装置が生成する前記特定画像データおよび前記特定画像データに関連付けられた前記メタデータを取得する取得手段と、
前記取得した前記メタデータを用いて前記取得した前記特定画像データに対する画質調整処理を実行する画質調整手段とを備える画質補正装置。
【請求項１０】
請求項９に記載の画質補正装置はさらに、
前記取得した前記特定画像データを解析して、前記特定画像データの画質を表す画質特性値を取得する画質特性値取得手段を備え、
前記取得したメタデータが重み付け係数または前記特定画像データにおける主要被写体領域の位置情報である場合には、前記画質特性値取得手段は、前記重み付け係数または前記主要被写体領域の位置情報を用いて、前記特定画像データにおける前記主要被写体領域を中心にして前記画質特性値を取得し、
前記画質調整手段は、前記取得された前記画質特性値と、予め設定されている基準値との偏差を解消または低減する補正量を前記特定画像データに対して適用することによって画質調整処理を実行する画質補正装置。
【請求項１１】
請求項９に記載の画質補正装置において、
前記取得したメタデータが前記特定画像データの画質に関する特性を表す１または複数の画質特性パラメータの統計値である場合には、
前記画質調整手段は、前記取得された１または複数の画質特性パラメータの統計値と、前記１または複数の画質特性パラメータについて予め設定されている基準パラメータ値との偏差を解消または低減する補正量を前記特定画像データに対して適用することによって画質調整処理を実行する画質補正装置。
【請求項１２】
請求項９に記載の画質補正装置において、
前記取得したメタデータが前記特定画像データの画質を調整することに用いる補正量である場合には、
前記画質調整手段は、前記取得された補正量を前記特定画像データに対して適用することによって画質調整処理を実行する画質補正装置。
【請求項１３】
時系列に連続する複数の画像データの中から選択された画像データに対してメタデータを関連付けて出力する画像データ生成方法であって、
前記時系列に連続する複数の画像データの中から特定画像データを特定する特定工程と、
前記特定画像データに対して時系列に連続する連続画像データを、前記時系列に連続する複数の画像データの中から取得する連続画像データ取得工程と、
前記特定画像データおよび前記連続画像データを用いて、前記特定画像データにおける主要被写体領域を特定する主要被写体領域特定工程と、
前記特定された前記主要被写体領域に関する情報または前記特定された前記主要被写体領域に関する情報を用いて生成された情報を含むメタデータと、前記特定画像データとを関連付けて出力する特定画像データ出力工程とを含む画像データ生成方法。
【請求項１４】
画像データに関連付けられたメタデータを用いて前記画像データに対する画質調整処理を実行する画質補正方法であって、
時系列に連続する複数の画像データの中から選択された特定画像データに対して前記メタデータを関連付けて出力する画像データ生成装置が生成する前記特定画像データおよび前記特定画像データに関連付けられた前記メタデータを取得する取得工程と、
前記取得した前記メタデータを用いて前記取得した前記特定画像データに対する画質調整処理を実行する画質調整工程とを含む画質補正方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像データ生成装置、画質補正装置、画像データ生成方法および画質補正方法
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
図４を参照して、主要被写体画像データＯＤの特定処理について詳述する。ＣＰＵ２００は、切り出しフレーム画像データＫＤ（フレーム（Ｉ））を図５に示すように、ｍ×ｎの画素データから構成される複数のブロックＢＬＫkに分割する。例えば、フレームとブロックと縦横比が同じになるように、８×８から１６×１６程度に縦横同数分割されても良く、縦横が異数分割されても良い。分割ブロック数が多いほど主要被写体画像データの特定精度は上がり、特に、ズーム・ワイドシーン（フレーム）においては、主要被写体の動きがほとんどないため、分割ブロック数は多いことが望ましい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００８０
【補正方法】変更
【補正の内容】
【００８０】
主要被写体領域特定モジュール４４は、取得された切り出しフレーム画像データＫＤと連続フレーム画像データＲＤとを用いて切り出しフレーム画像データＫＤにおける主要被写体領域を特定する。主要被写体領域特定モジュール４４は、更に、切り出しフレーム画像データＫＤを複数のブロックに分割する分割サブモジュール４４１および連続フレーム画像データＲＤにおける分割された各ブロックの移動量を算出して第１のブロック（移動マークが付されていないブロック）と第２のブロック（移動マークが付されているブロック）とに分類する移動量算出モジュール４４２を備えても良い。主要被写体領域の具体的な特定手法、ブロックの移動量の算出および分類の手法については第１の実施例において説明済みであるから説明を省略する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０１０１
【補正方法】変更
【補正の内容】
【０１０１】
上記実施例では、主要被写体画像データＯＤを特定できない場合、すなわち、切り出しフレーム画像データＫＤ中に、動きの少ない領域（微変化領域）が少ない場合、あるいは存在しない場合について詳述していない。かかる場合には、切り出しフレーム画像データＫＤの中央領域を主要被写体画像データＯＤと擬制しても良く、あるいは、主要被写体画像データＯＤを中心とする切り出しフレーム画像データＫＤの解析を実行しないこととしても良い。この条件下では、主要被写体画像データＫＤを適切に特定することは困難であるが、主要被写体画像データＯＤは一般的に切り出しフレーム画像データＫＤの中央領域に存在することが多く、主要被写体画像データＯＤに対する適切な画質調整処理が可能となる可能性が高い。一方で、微変化領域がほとんどない場合には、主要被写体画像データＯＤの画質特性を中心とする画質調整処理を実行することは困難であることから、主要被写体画像データＯＤを中心とする解析が実行されなくとも良い。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１０６
【補正方法】変更
【補正の内容】
【０１０６】
上記実施例では、画像処理が画像処理ソフトウェア、すなわちコンピュータプログラムの態様にて実行されているが、上記各処理（ステップ）を実行する論理回路を備えた画像処理ハードウェア回路を用いて実行されてもよい。かかる場合には、ＣＰＵ２００の負荷を軽減することができると共に、より高速な画像処理を実現することができる。画像処理ハードウェア回路は、例えば、ディジタルビデオカメラ１１およびプリンタ３０に対して実装回路として、パーソナルコンピュータ２０に対してアドオンカードとして実装され得る。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０１０７
【補正方法】変更
【補正の内容】
【０１０７】
同一のシーン（撮影場面）から複数の切り出しフレーム画像データが切り出されている場合には、個々の切り出しフレーム画像データ毎に画質特性値を用いた画質調整処理を実行すると複数の切り出しフレーム画像データの間で画質調整の傾向がばらつくことがある。例えば、車が遠方から近づいてくるシーンでは、複数の切り出しフレーム画像データを切り出す場合には、主要被写体が小さい切り出しフレーム画像データから主要被写体が大きい切り出しフレーム画像データが含まれる。主要被写体が小さな場合には、画質特性値は背景の影響を強く受け、主要被写体が大きな場合には、画質特性値は主要被写体の影響を強く受けることになる。したがって、各切り出しフレーム画像データに対して最適な画質調整処理を実行すると全体として調和を図ることができなくなる。