【手続補正書】
【提出日】平成19年6月21日(2007.6.21)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１の解像度を有し、時系列に並ぶ複数の画像データから、前記第１の解像度より解像度の高い高解像度画像データを生成する画像処理装置であって、
前記複数の画像データを取得する画像データ取得手段と、
前記複数の画像データのなかから選択された第１の画像データが表す画像と前記第１の画像データ以外の第２の画像データが表す画像との間における被写体の位置ずれを補正する補正量を算出する補正量算出手段と、
前記補正量を用いて、前記複数の画像データに対して前記被写体の位置ずれを補正する位置ずれ補正手段と、
前記複数の画像データに対し、前記高解像度画像データが表す画像の画質を低下させる可能性を示す値が大きい画像データほど小さい重み付け値を設定する手法、または、前記可能性を示す値が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する重み付け設定手段と、
前記設定された重み付け値を用いて前記補正された複数の画像データを合成して、前記高解像度画像データを生成する高解像度画像生成手段とを備える画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記重み付け値は、
前記複数の画像データに関連付けられた指標値である画像処理装置。
【請求項３】
請求項２に記載の画像処理装置において、
前記指標値は、
前記第１の画像データに対する前記第２の画像データの時間的距離を含み、
前記重み付け設定手段は、
前記時間的距離が大きい画像データほど小さい重み付け値を設定する手法、または、前記時間的距離が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する時間的距離別重み付け設定手段を備える画像処理装置。
【請求項４】
請求項２または請求項３に記載の画像処理装置において、
前記指標値は、
前記第１の画像データが表す画像と前記第２の画像データが表す画像との間における前記補正量の大きさを含み、
前記重み付け設定手段は、
前記補正量が大きい画像データほど小さい重み付け値を設定する手法、または、前記補正量が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する位置ずれ量別重み付け設定手段を備える画像処理装置。
【請求項５】
請求項２ないし請求項４のいずれかに記載の画像処理装置において、
前記指標値は、
前記生成される高解像度画像データを構成する生成画素データごとに設定される指標値であって、前記補正された画像データを構成する画素データのうち前記生成画素データとの画素間の距離が最も短い画素データの画素間距離を含み、
前記重み付け設定手段は、
前記画素間距離が大きい画像データほど小さい重み付け値を設定手法、または、前記画素間距離が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する画素間距離別重み付け設定手段を備える画像処理装置。
【請求項６】
請求項１ないし請求項５のいずれかに記載の画像処理装置において、
前記高解像度画像生成手段は、
前記生成される高解像度画像データが表す画像を構成する画素の位置を設定する画素設定手段と、
前記設定された画素の位置における階調値を表す画素値であって、前記補正された複数の画像データのうち、一の画像データに基づいて算出される画素値である単一画像参照画素値を、画像データごとに算出する単一画像参照画素値算出手段と、
前記重み付け値を用いて算出される前記単一画像参照画素値の重み付き平均値を前記設定された位置における画素値とする画素データを生成する画素データ生成手段とを備える画像処理装置。
【請求項７】
請求項２ないし請求項６のいずれかに記載の画像処理装置において、
前記指標値と前記重み付け値との対応関係を表すテーブルを記憶する記憶手段を備え、
前記重み付け値は、前記テーブルを参照して設定される画像処理装置。
【請求項８】
請求項２ないし請求項６のいずれかに記載の画像処理装置において、
前記重み付け値は、前記指標値と前記重み付け値との関係を表す関係式を用いて設定される画像処理装置。
【請求項９】
請求項１ないし請求項８のいずれかに記載の画像処理装置において、
前記高解像度画像生成手段は、
前記補正された複数の画像データのうち、一の画像データであって、前記一の画像データを構成する画素の位置が、生成される前記高解像度画像データが表す画像の座標空間において、前記補正された複数の画像データのうち、前記一の画像データ以外の他の画像データを構成する画素の位置と同一である重複画像データが存在する場合には、
前記重複画像データを除外して前記高解像度画像データを生成する、画像処理装置。
【請求項１０】
請求項９に記載の画像処理装置において、
前記高解像度画像生成手段は、
前記他の画像データが表す画像と前記一の画像データが表す画像との間における前記補正量が、所定の条件を満たす場合に、前記一の画像データが前記重複画像データであると判定する画像処理装置。
【請求項１１】
演算手段を有するコンピュータを用いて、第１の解像度を有し、時系列に並ぶ複数の画像データから、前記第１の解像度より解像度の高い高解像度画像データを生成する画像処理方法であって、
前記演算手段が、前記複数の画像データを取得し、
前記演算手段が、前記複数の画像データのなかから選択された第１の画像データが表す画像と前記第１の画像データ以外の第２の画像データが表す画像との間における被写体の位置ずれを補正する補正量を算出し、
前記演算手段が、前記補正量を用いて、前記複数の画像データに対して前記被写体の位置ずれを補正し、
前記演算手段が、前記複数の画像データに対し、前記高解像度画像データが表す画像の画質を低下させる可能性を示す値が大きい画像データほど小さい重み付け値を設定する手法、または、前記可能性を示す値が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定し、
前記演算手段が、前記設定された重み付け値を用いて前記補正された複数の画像データを合成して、前記高解像度画像データを生成する画像処理方法。
【請求項１２】
第１の解像度を有し、時系列に並ぶ複数の画像データから、前記第１の解像度より解像度の高い高解像度画像データを生成する画像処理をコンピュータに実行させるコンピュータプログラムであって、
前記複数の画像データを取得する画像データ取得機能と、
前記複数の画像データのなかから選択された第１の画像データが表す画像と前記第１の画像データ以外の第２の画像データが表す画像との間における被写体の位置ずれを補正する補正量を算出する補正量算出機能と、
前記補正量を用いて、前記複数の画像データに対して前記被写体の位置ずれを補正する位置ずれ補正機能と、
前記複数の画像データに対し、前記高解像度画像データが表す画像の画質を低下させる可能性を示す値が大きい画像データほど小さい重み付け値を設定する手法、または、前記可能性を示す値が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する重み付け設定機能と、
前記設定された重み付け値を用いて前記補正された複数の画像データを合成して、前記高解像度画像データを生成する高解像度画像生成機能と、を前記コンピュータに実現させるコンピュータプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記課題を解決するために本発明の第１の態様は、第１の解像度を有し、時系列に並ぶ複数の画像データから、前記第１の解像度より解像度の高い高解像度画像データを生成する画像処理装置を提供する。本発明の第１の態様に係る画像処理装置は、前記複数の画像データを取得する画像データ取得手段と、前記複数の画像データのなかから選択された第１の画像データが表す画像と前記第１の画像データ以外の第２の画像データが表す画像との間における被写体の位置ずれを補正する補正量を算出する補正量算出手段と、前記補正量を用いて、前記複数の画像データに対して前記被写体の位置ずれを補正する位置ずれ補正手段と、前記複数の画像データに対し、前記高解像度画像データが表す画像の画質を低下させる可能性を示す値が大きい画像データほど小さい重み付け値を設定する手法、または、前記可能性を示す値が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する重み付け設定手段と、前記設定された重み付け値を用いて前記補正された複数の画像データを合成して、前記高解像度画像データを生成する高解像度画像生成手段とを備える。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明の第１の態様に係る画像処理装置において、前記重み付け値は、前記複数の画像データに関連付けられた指標値であっても良い。こうすれば、適切な、重み付け値を設定することができる。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明の第１の態様に係る画像処理装置において、前記指標値は、前記第１の画像データに対する前記第２の画像データの時間的距離を含み、前記重み付け設定手段は、前記時間的距離が大きい画像データほど小さい重み付け値を設定する手法、または、前記時間的距離が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する時間的距離別重み付け設定手段を備えても良い。合成の基準となる画像データと時間的に離れた画像データは、前述した「動き」等が生じている可能性が高い。「動き」は生成画像の画質低下を引き起こす。合成する際、時間的距離に応じて設定された重み付け値を用いることにより、このような生成画像の画質を低下させる可能性の高い画像データが、生成データに与える影響を小さくすることができる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
本発明の第１の態様に係る画像処理装置において、前記指標値は、前記第１の画像データが表す画像と前記第２の画像データが表す画像との間における前記補正量の大きさを含み、前記重み付け設定手段は、前記補正量が大きい画像データほど小さい重み付け値を設定する手法、または、前記補正量が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する位置ずれ量別重み付け設定手段を備えても良い。合成の基準となる画像データが表す画像との間に生じている位置ずれが大きい画像の画像データは、前述した「動き」等が生じている可能性が高い。「動き」は生成画像の画質低下を引き起こす。合成する際、算出された補正量の大きさは、位置ずれの大きさを表すから、補正量に応じて設定された重み付け値を用いることにより、このような生成画像の画質を低下させる可能性の高い画像データが、生成データに与える影響を小さくすることができる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
本発明の第１の態様に係る画像処理装置において、前記指標値は、前記生成される高解像度画像データを構成する生成画素データごとに設定される指標値であって、前記補正された画像データを構成する画素データのうち前記生成画素データとの画素間の距離が最も短い画素データの画素間距離を含み、前記重み付け設定手段は、前記画素間距離が大きい画像データほど小さい重み付け値を設定手法、または、前記画素間距離が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する画素間距離別重み付け設定手段を備えても良い。位置ずれ補正後において、生成画素データと、構成画素データのうち生成画素データの最近接にある画素データとの画素間距離が長い画像データは、その生成画素データに対して画質低下を引き起こす情報を与える可能性が高い。合成する際、生成画素データごとに、上述した画素間距離に応じて設定された重み付け値を用いることにより、このような情報を与える可能性の高い画像データの生成画素データに対する影響を小さくすることができる。この結果、生成画像の画質低下を低減することができる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
本発明の第１の態様に係る画像処理装置において、前記高解像度画像生成手段は、
前記生成される高解像度画像データが表す画像を構成する画素の位置を設定する画素設定手段と、前記設定された画素の位置における階調値を表す画素値であって、前記補正された複数の画像データのうち、一の画像データに基づいて算出される画素値である単一画像参照画素値を、画像データごとに算出する単一画像参照画素値算出手段と、前記重み付け値を用いて算出される前記単一画像参照画素値の重み付き平均値を前記設定された位置における画素値とする画素データを生成する画素データ生成手段とを備えても良い。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
かかる場合には、各画像データに基づいて算出された単一画像データ参照値について、上述した重み付け値を用いた重み付き平均値を算出する。そして、生成データを構成する画素データの画素値には、算出された重み付き平均値が用いられる。したがって、画素データの生成において、生成画像の画質を低下させる可能性の高い画像データの影響が小さくなる。この結果、生成画像の画質低下を低減することができる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
本発明の第１の態様に係る画像処理装置において、前記指標値と前記重み付け値との対応関係を表すテーブルを記憶する記憶手段を備え、前記重み付け値は、前記テーブルを参照して設定されても良い。また、前記重み付け値は、前記指標値と前記重み付け値との関係を表す関係式を用いて設定されても良い。かかる場合には、テーブルを参照して、あるいは、関係式を用いて簡単に、上述した重み付け値を用いた高解像度画像データの生成を実行できる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
本発明の第１の態様に係る画像処理装置において、前記高解像度画像生成手段は、前記補正された複数の画像データのうち、一の画像データであって、前記一の画像データを構成する画素の位置が、生成される前記高解像度画像データが表す画像の座標空間において、前記補正された複数の画像データのうち、前記一の画像データ以外の他の画像データを構成する画素の位置と同一である重複画像データが存在する場合には、前記重複画像データを除外して前記高解像度画像データを生成しても良い。一の画像データの表す画像の各画素と他の画像データの表す画像の各画素が、生成される高解像度画像データの表す画像の座標空間において、同一の座標に位置する場合、すなわち、画素位置が重複する場合、このような画像データを２つとも合成しても生成画像データの高解像度化に貢献しない。このような、重複画像データが存在する場合には、重複画像データを用いないでデータの高解像度画像データの生成を実行することにより、高解像度画像データの生成に係る処理負荷の軽減を図ることができる。また、合成に使用する画像データが少なくなることで、２重像となる危険性も低減することができる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
本発明の第１の態様に係る画像処理装置において、前記他の画像データが表す画像と前記一の画像データが表す画像との間における前記補正量が、所定の条件を満たす場合に、前記一の画像データが前記重複画像データであると判定しても良い。かかる場合には、算出された各画像間における補正量を用いて、簡便に重複画像データが存在するか否かを判定することができる。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
本発明の第２の態様は、演算手段を有するコンピュータを用いて、第１の解像度を有し、時系列に並ぶ複数の画像データから、前記第１の解像度より解像度の高い高解像度画像データを生成する画像処理方法を提供する。本発明の第２の態様に係る画像処理方法は、前記演算手段が、前記複数の画像データを取得し、前記演算手段が、前記複数の画像データのなかから選択された第１の画像データが表す画像と前記第１の画像データ以外の第２の画像データが表す画像との間における被写体の位置ずれを補正する補正量を算出し、
前記演算手段が、前記補正量を用いて、前記複数の画像データに対して前記被写体の位置ずれを補正し、前記演算手段が、前記複数の画像データに対し、前記高解像度画像データが表す画像の画質を低下させる可能性を示す値が大きい画像データほど小さい重み付け値を設定する手法、または、前記可能性を示す値が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定し、前記演算手段が、前記設定された重み付け値を用いて前記補正された複数の画像データを合成して、前記高解像度画像データを生成する。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】削除
【補正の内容】
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】削除
【補正の内容】
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
本発明の第３の態様は、第１の解像度を有し、時系列に並ぶ複数の画像データから、前記第１の解像度より解像度の高い高解像度画像データを生成する画像処理をコンピュータに実行させるコンピュータプログラムを提供する。本発明の第３の態様に係るコンピュータプログラムは、前記複数の画像データを取得する画像データ取得機能と、前記複数の画像データのなかから選択された第１の画像データが表す画像と前記第１の画像データ以外の第２の画像データが表す画像との間における被写体の位置ずれを補正する補正量を算出する補正量算出機能と、前記補正量を用いて、前記複数の画像データに対して前記被写体の位置ずれを補正する位置ずれ補正機能と、前記複数の画像データに対し、前記高解像度画像データが表す画像の画質を低下させる可能性を示す値が大きい画像データほど小さい重み付け値を設定する手法、または、前記可能性を示す値が小さい画像データほど大きい重み付け値を設定する手法のうち少なくともいずれかの手法を用いて重み付け値を設定する重み付け設定機能と、前記設定された重み付け値を用いて前記補正された複数の画像データを合成して、前記高解像度画像データを生成する高解像度画像生成機能と、を前記コンピュータに実現させる。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
本発明の第２の態様に係る画像処理方法および本発明の第３の態様に係るコンピュータプログラムによれば、本発明の第１の態様に係る画像処理装置と同様の作用効果を得ることができる。また、本発明の第２の態様に係る画像処理方法および本発明の第３の態様に係るコンピュータプログラムは、本発明の第１の態様に係る画像処理装置と同様にして種々の態様にて実現され得る。また、本発明の第３の態様に係るコンピュータプログラムは、コンピュータプログラムを記録したコンピュータが読み取り可能な記録媒体としても実現され得る。