(57)【要約】【課題】  撮影画像の変形を修正する修正量に応じてそれぞれ異なる画像処理を施すことにより画像のボケ等を小さくするようにした画像処理装置およびその方法を提供する。【解決手段】  撮影対象の撮影位置により生じる撮影画像の変形を修正する画像修正部１１０３を備え、画像修正部１１０３において撮影画像の修正が行われた際に、該修正量に応じてそれぞれ最適な画像処理を参照表保存部１１０６から選択し、該選択した画像処理を該修正した画像に対してフィルタ調整部１１０７、コントラスト調整部１１０８で施すことにより画像のぼけ等の少ない修正画像を得る。【選択図】  図１１
2007011954.tif 000002
【特許請求の範囲】
【請求項１】
撮影対象の撮影位置により生じる該撮影対象の撮影画像の変形を修正する画像処理装置において、
前記撮影画像を入力する入力手段と、
前記入力手段で入力された撮影画像の変形を修正する画像修正手段と、
前記画像修正手段による修正量に応じてそれぞれ異なる画像処理を該画像修正手段により修正された修正画像に対して施す画像処理手段と
を具備することを特徴とする画像処理装置。
【請求項２】
前記画像修正手段は、
前記撮影画像に対応する画像データの所定方向における変倍率をそれぞれ決定する変倍率決定手段と、
前記変倍率決定手段で決定された変倍率で前記所定方向における前記画像データの変倍処理を行う変倍処理手段と
を具備し、
前記画像処理手段は、
前記変倍処理手段による変倍処理の変倍率に応じて該変倍処理した画像データに対してそれぞれ異なる画像処理を施す
ことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記撮影対象は、
四角形であり、
前記変倍率決定手段は、
前記画像データの前記四角形の所定の辺に平行に該画像データを順次走査する走査手段と、
前記撮影対象の修正前の四角形の頂点の座標を入力する入力手段と、
前記入力手段により入力された頂点の座標より修正後の四角形の頂点を求め、各走査線における変倍率をそれぞれ決定する決定手段と
を具備することを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記画像処理手段は、
フィルタ係数が異なるディジタルフィルタ処理により前記異なる画像処理を施す
ことを特徴とする請求項１乃至３のいずれかに記載の画像処理装置。
【請求項５】
前記画像処理手段は、
フィルタサイズが異なるディジタルフィルタ処理により前記異なる画像処理を施す
ことを特徴とする請求項１乃至４のいずれかに記載の画像処理装置。
【請求項６】
前記画像処理手段は、
ルックアップテーブルが異なるコントラスト処理により前記異なる画像処理を施す
ことを特徴とする請求項１乃至５のいずれかに記載の画像処理装置。
【請求項７】
撮影対象の撮影位置により生じる当該撮影対象の撮影画像の変形を修正する画像処理方法において、
前記撮影画像を入力手段により入力し、
前記入力手段により入力された撮影画像の変形を画像修正手段により修正し、
前記画像修正手段による修正量に応じてそれぞれ異なる画像処理を画像処理手段により該画像修正手段により修正された修正画像に対して施す
ことを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影対象の撮影位置により生じる当該撮影対象の撮影画像の変形を修正する画像処理装置およびその方法に関し、特に、撮影画像の変形を修正する修正量に応じてそれぞれ異なる画像処理を施すことにより画像のボケ等を小さくするようにした画像処理装置およびその方法に関する。
【背景技術】
【０００２】
デジタルカメラで撮影されたデジタル画像のコントラスト等を調整する画像処理技術と呼ばれる技術分野が存在する。
【０００３】
画像処理技術には、様々な方法があり、例えば、空間フィルタ処理と呼ばれて、画像に含まれる雑音の低減や線・エッジの強調・抽出などを行う為に、処理する画像中の画素について、変換する画素の周辺の画素の輝度に応じて積和演算または非線形演算を行うことによって画素の輝度を変換する処理を行う画像処理方法、ＬＵＴ（Look Up Table）と呼ばれるテーブルを使用して、画像中の画素の輝度の入力値と出力値との関係を記してＬＵＴによって画素の輝度を変換する画像処理方法、シェーディング補正と呼ばれて、撮影時の光学系や撮像系の特性による輝度のムラに対して一様な明るさの画像になるように補正を行う画像処理方法、２値化処理と呼ばれて、画像中の濃淡画像を２値画像に変換する処理を行う画像処理方法等が存在する。
【０００４】
また、特許文献１には、スキャナ等でスキャンされる原稿が貼り合せ原稿や地肌レベルにムラがある原稿であっても自然な地肌除去処理が行えるように、画像を入力する画像入力部と、入力した画像の地肌レベルを検出する地肌レベル検出部と、ユーザの指定もしくは地肌レベル検出部で検出した地肌レベルに基づき画像が貼り合わせ原稿であるか否かを判断する貼り合わせ原稿判断部と、貼り合わせ原稿であると判断された場合、地肌レベル検出部により検出した地肌レベルの分布に応じて地肌レベルを調整する地肌レベル調整部と、地肌レベル調整部によって調整された地肌レベルで画像の地肌を除去する地肌除去処理部とを備えた画像処理装置が提供されている。
【０００５】
また、デジタル画像の使用例として、会議等で使用されるホワイトボードの内容をデジタルカメラで撮影して資料として残すことが、最近広く行われているが、平面形状をなした被写体であるホワイトボードをデジタルカメラで撮影すると、通常、撮影装置であるデジタルカメラの撮影面と平面形状の被写体であるホワイトボードとの位置関係が平行でなくかつ正面同士で対向していない撮影位置であるために、本来ならばホワイトボードの四角形を形成する平行に存在する直線が、撮影画像中では平行でなく歪んで撮影されて、文字、記号等が記述される平面を有するホワイトボードが歪んだ状態で撮影されて、撮影対象が変形して撮影された撮影画像が撮影される。
【０００６】
この撮影対象が変形して撮影された撮影画像を修正するために、特許文献２には、平面形状の被写体を正面から撮影して得られる基準正面画像を算出または選択して、該基準正面画像を用いて、１つの視点のみから撮影された他の画像に対してあおり補正を施して撮影画像が修正された修正画像を得る画像処理装置、画像入力装置、画像処理方法、および画像処理方法をコンピュータで実行するプログラムが提供されている。
【０００７】
また、特許文献３には、撮影対象が変形して撮影された撮影画像から、歪み等の変形のない修正画像を簡単な操作で生成することができるように、ユーザによって指定された撮影画像中の変形図形の第１の直線の中点を通る垂直線に、第１の直線の両端点を投影することによって得られる、両端点に対応する２つの点の座標を求めるステップと、ユーザによって指定された撮影画像中の図形の第２の直線の中点を通る垂直線に、第２の直線の両端点を投影することによって得られる、両端点に対応する２つの点の座標を求めるステップと、第１の直線の両端点および第２の直線の両端点が、上記ステップで求められた対応点に変換されるような透視変換行列を求めるステップと、ならびに得られた透視変換行列に基づいて、原画像を透視変換するステップとを備えた画像のあおり補正方法が提供されている。
【特許文献１】特開２００２−２４７３６３号公報
【特許文献２】特開２００５−３８０２１号公報
【特許文献３】特開２００１−８４３６５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかし、変形した撮影画像が撮影された撮影画像に対して、特許文献２、３などの技術によって撮影画像中の変形が修正された場合には、図１５、１６に示すように画像中の一部分の画像データが拡大されることになるが、この場合、拡大倍率が大きい個所ほど、画像データが引き伸ばされる量が大きくなるので、画像がボケる傾向がある。
【０００９】
図１５、１６を参照して撮影対象が変形して撮影された撮影画像が修正される拡大処理によって発生する修正画像のボケについて説明する。
【００１０】
図１５は、長方形の紙でできた原稿１０がデジタルカメラで撮影されて、原稿１０が変形して原稿画像４０として画像３０が撮影される様子を示した模式図である。
【００１１】
図１６は、本来長方形である原稿１０が台形の原稿画像４０として撮影された撮影画像である画像３０に対して、変形を修正する為に拡大処理を行って、台形の原稿画像４０を長方形に修正する処理が行われた修正画像である画像５０を示した模式図である。
【００１２】
図１５（ａ）は、撮影される長方形の原稿１０を示した模式図、図１５（ｂ）は、原稿１０がデジタルカメラ２０で撮影される様子を示した図、図１５（ｃ）は、デジタルカメラ２０で原稿１０が歪み等の変形を有して台形に撮影された撮影画像である原稿画像４０が映された画像３０を示す模式図である。
【００１３】
図１５（ｂ）に示すように本来長方形である原稿１０を、撮影装置であるデジタルカメラ２０と被写体である原稿１０との位置関係が正面同士で対向していないように撮影された場合には、図１５（ｃ）に示す画像３０のように、本来原稿１０において平行に存在する一組の線が平行でない状態の斜めに傾いた変形を有する画像３０のように撮影対象が変形されて撮影された撮影画像として撮影される。
【００１４】
そこで、画像３０に対して、変形を修正して原稿画像４０を正方形もしくは長方形に修正する処理が行われると、拡大による引き伸ばし量の多い個所ほど引き伸ばされる倍率が多くなり、撮影画像中の画素が移動される移動距離も長くなって画素がちらばり（画像３０の「Ｅ」の文字より「Ｌ」の文字の方が拡大倍率が大きい）、図１６に示した画像５０の修正画像のように、拡大による引き伸ばし量の多い個所ほど元の画素が散らばって修正画像中の像がボケる現象が発生する。
【００１５】
これは、図１６に示すように、原稿画像４０の「Ｌ」の文字は「Ｅ」の文字に比べてデータを引き伸ばす拡大倍率が大きいので、「Ｌ」の文字には「Ｅ」の文字に比較して元の画素が散らばってボケが発生している現象である。
【００１６】
そこで、この発明は、撮影画像の変形を修正する修正量に応じてそれぞれ異なる画像処理を施すことにより画像のボケ等を小さくするようにした画像処理装置およびその方法を提供することを目的とする。
【課題を解決するための手段】
【００１７】
上記目的を達成する為に、請求項１の発明は、撮影対象の撮影位置により生じる該撮影対象の撮影画像の変形を修正する画像処理装置において、前記撮影画像を入力する入力手段と、前記入力手段で入力された撮影画像の変形を修正する画像修正手段と、前記画像修正手段による修正量に応じてそれぞれ異なる画像処理を該画像修正手段により修正された修正画像に対して施す画像処理手段とを具備することを特徴とする。
【００１８】
また、請求項２の発明は、請求項１の発明において、前記画像修正手段は、前記撮影画像に対応する画像データの所定方向における変倍率をそれぞれ決定する変倍率決定手段と、前記変倍率決定手段で決定された変倍率で前記所定方向における前記画像データの変倍処理を行う変倍処理手段とを具備し、前記画像処理手段は、前記変倍処理手段による変倍処理の変倍率に応じて該変倍処理した画像データに対してそれぞれ異なる画像処理を施すことを特徴とする。
【００１９】
また、請求項３の発明は、請求項２の発明において、前記撮影対象は、四角形であり、前記変倍率決定手段は、前記画像データの前記四角形の所定の辺に平行に該画像データを順次走査する走査手段と、前記撮影対象の修正前の四角形の頂点の座標を入力する入力手段と、前記入力手段により入力された頂点の座標より修正後の四角形の頂点を求め、各走査線における変倍率をそれぞれ決定する決定手段とを具備することを特徴とする。
【００２０】
また、請求項４の発明は、請求項１乃至３のいずれかの発明において、前記画像処理手段は、フィルタ係数が異なるディジタルフィルタ処理を行うことを特徴とする。
【００２１】
また、請求項５の発明は、請求項１乃至４のいずれかの発明において、前記画像処理手段は、フィルタサイズが異なるディジタルフィルタ処理を行うことを特徴とする。
【００２２】
また、請求項６の発明は、請求項１乃至５のいずれかの発明において、前記画像処理手段は、ルックアップテーブルが異なるコントラスト処理を行うことを特徴とする。
【００２３】
また、請求項７の発明は、撮影対象の撮影位置により生じる当該撮影対象の撮影画像の変形を修正する画像処理方法において、前記撮影画像を入力手段により入力し、前記入力手段により入力された撮影画像の変形を画像修正手段により修正し、前記画像修正手段による修正量に応じてそれぞれ異なる画像処理を画像処理手段により該画像修正手段により修正された修正画像に対して施すことを特徴とする。
【発明の効果】
【００２４】
本発明によれば、撮影対象の撮影位置により変形が生じた撮影画像を入力手段により入力し、該入力された撮影画像の変形を画像修正手段により修正し、前記画像修正手段による修正量に応じてそれぞれ異なる画像処理を画像処理手段により該画像修正手段により修正された修正画像に対して施すように構成したので、撮影画像の修正量に対応した最適な画像処理が可能になり、これにより、画像のボケ等が小さい修正画像を得ることができるという効果を奏する。
【発明を実施するための最良の形態】
【００２５】
以下、本発明に係わる画像処理装置およびその方法の実施例について添付図面を参照して詳細に説明する。
【実施例１】
【００２６】
まず、本発明に係わる画像処理装置が有する機能的な構成について図１を参照して説明を行う。
【００２７】
本実施例において説明する画像処理装置は、主に、パーソナルコンピュータに図１を参照して説明を行う機能的な構成が備えられたものとして説明を行う。
【００２８】
図１は、本発明に係わる画像処理装置に備えられる機能的な構成を示したブロック図である。
【００２９】
本発明に係わる画像処理装置は、画像走査部１０１、カウンタ１０２、座標受付部１０３、倍率決定部１０４、拡大・縮小実行部１０５、画像処理選択部１０６、メモリ１０７、フィルタ調整部１０８、コントラスト調整部１０９、画像蓄積部１１０を備えている。
【００３０】
画像走査部１０１は、撮影対象が変形して撮影された撮影画像中の変形の修正が行われる修正画像を走査して、走査する画像の一部分であり１走査毎に走査した画素で構成される画像データを読取り、走査開始時にカウンタ１０２に信号を送る。
【００３１】
一回の走査で読取られる画像データの幅は１画素であるとして説明を行うが、複数の画素幅を１回の走査で読取るようにしてもよい。
【００３２】
カウンタ１０２は、画像走査部１０１より信号を受け取り、画像走査部１０１が走査したデジタル画像の行の位置データをカウントし、倍率決定部１０４に画像走査部１０１が走査した行の撮影画像中の位置データを送る。
【００３３】
座標受付部１０３は、撮影対象が変形して撮影された撮影画像中の変形の修正が行われるデジタル画像の台形の四隅の座標が自動もしくはユーザによって入力されて座標受付部１０３に受け付けられる。
【００３４】
自動で入力される場合には、図示しない四隅検出部が、撮影対象が変形して撮影された台形である四角形の四隅の座標を検出して、変形した画像の四隅の座標が入力されて、座標受付部１０３に受け付けられる。
【００３５】
ユーザによって入力される場合には、画像処理装置であるパーソナルコンピュータに備えられたマウスが使用されて、ユーザによって四隅の点がクリックされて、変形が修正される四角形の四隅の座標が入力される。
【００３６】
或いは、ユーザが、ユーザの操作によって変形する四角形の変形フレームを変形が修正される四角形の画像の周囲に合わせることによって、変形した画像の四隅の座標が入力されて、座標受付部１０３に受け付けられる。
【００３７】
倍率決定部１０４では、カウンタ１０２より画像走査部１０１が走査したデジタル画像の行のデータを受け取り、座標受付部１０３より受け付けた座標を受け取り、受け取った行のデータと座標より、撮影画像中の変形を修正する為に画像走査部１０１が走査した画像データを拡大する倍率が決定される。
【００３８】
拡大・縮小実行部１０５では、倍率決定部１０４から送られた倍率によって画像走査部１０１で走査された画像データで構成される画像データの拡大処理が実行されて画像中の各画素が座標位置の座標変換が行われて、入力された撮影画像の修正が行われる。
【００３９】
画像処理選択部１０６では、倍率決定部１０４によって決定された倍率を基にして、フィルタ調整部１０８で画質調整の為に使用される空間フィルタとコントラスト調整部１０９でコントラスト調整の為に使用されるＬＵＴが選択される。
【００４０】
メモリ１０７は、フィルタ調整部１０８で画質を調整する際に使用される空間フィルタが蓄えられており、画質を調整する際にメモリ１０７は使用される。
【００４１】
フィルタ調整部１０８では、拡大・縮小実行部１０５で拡大された画像データが画像処理選択部１０６で選択された空間フィルタが使用されて画質の調整が行われる。
【００４２】
コントラスト調整部１０９では、フィルタ調整部１０８で画質調整された画像データが画像処理選択部１０６で選択されたＬＵＴが使用されてコントラストの調整が行われる。
【００４３】
画像蓄積部１１０は、コントラスト調整部１０９で調整が行われた画像データを蓄える。
【００４４】
画像走査部１０１によって入力された撮影画像の全ての画像データが走査され、そしてコントラスト調整部１０９から処理された画像データを画像蓄積部１１０が受信すると、受信した画像データを合成して、歪む等の変形が修正された修正画像が得られる。
【００４５】
次に、画像走査部１０１が図１５（ｃ）に示す画像３０を走査する際に、デジタル画像である画像３０を走査して倍率決定部１０４で拡大の倍率が決定される様子を図２を参照して説明を行う。
【００４６】
図２は、画像走査部１０１が図１５（ｃ）に示す画像３０を走査する際に、デジタル画像である画像３０を走査して倍率決定部１０４で拡大の倍率が決定される様子を説明する模式図である。
【００４７】
デジタルカメラ２０で撮影された図１５（ｃ）に示した画像３０中の、変形が有するように撮影された台形の原稿画像４０の四隅の座標が座標受付部１０３によって受け付けられると、原稿画像４０の変形を修正する為に行われる拡大処理の方向をＸ軸に合わせ、台形である四角形の４隅の１点をＸ軸、Ｙ軸を有する座標系の原点に合わせて、変形を有する原稿画像４０が、図２に示すようにＸ軸、Ｙ軸を有する座標系に合わせられる。
【００４８】
原稿画像４０がＸ軸、Ｙ軸を有する座標系に合わせられると、画像走査部１０１は、座標系に合わせられた台形の原稿画像４０に対して、Ｘ軸を主走査方向、Ｙ軸を副走査方向として、原点から走査を開始する。
【００４９】
説明を行う走査例として、Ｙ軸方向の走査が、点（０、Ｙｎ）よりＸ軸方向に行われる走査について、倍率決定部１０４で決定される、走査した画像データを拡大する倍率の求め方について図２を参照して説明する。
【００５０】
原稿画像４０の台形の四隅の座標は図２に示すように点（０，０）点（Ｘｔ，０）点（Ｘａ，Ｙｔ）点（Ｘｂ，Ｙｔ）となり、４点の座標値のなかで最も大きなＸ座標値はＸｔ、最も大きなＹ座標値はＹｔであるので、原稿画像４０の台形は変形を修正するために原点（０，０）と点（Ｘｔ，Ｙｔ）の２点を矩形とする長方形に拡大される（Ｘｔ＝Ｙｔの場合は正方形）。
【００５１】
点（０，Ｙｎ）よりＸ軸方向に走査された画像データは、原稿画像４０の走査されるライン上に原稿画像４０が占める幅であるＢｎ２０２が求められて、走査された画像データが拡大される倍率であるＬｎが、Ｌｎ＝Ｘｔ÷Ｂｎより求められる。
【００５２】
すなわちＢｎは走査するライン上の、原点（０，０）と点（Ｘｔ，Ｙｔ）の２点を矩形とする長方形（もしくは正方形）の内部で原稿画像４０を含んでいない片方の線分であるＡｎ２０１ともう片方の線分であるＣｎ２０３をＸｔから引けば求められるのでＢｎを求める式は、Ｂｎ＝Ｘｔ−Ａｎ−Ｃｎとなる。
【００５３】
画像走査部１０１によって点（０，Ｙｎ）から原稿画像４０の走査が開始されると、画像走査部１０１よりカウンタ１０２に信号が送られ、カウンタ１０２において走査された回数がカウントされており、カウンタ１０２から倍率決定部１０４に、カウントされた走査回数が送られ、倍率決定部１０４において、カウンタ１０２から送られた走査された回数から走査が開始される点のＹ座標であるＹｎが求まり、走査が開始される点の座標である（０，Ｙｎ）の座標値が求められる。
【００５４】
また、座標受付部１０３から原稿画像４０の台形の四隅の点が受け付けられるので、Ａｎ＝Ｘａ×Ｙｎ÷Ｙｔ、Ｃｎ＝（Ｘｔ−Ｘｂ）×Ｙｎ÷Ｙｔであるから、四隅の４点の座標よりＡｎ、Ｃｎが求められ、求めたＡｎ、Ｃｎを前述のＢｎ、Ｌｎを求める式に代入することにより、Ｌｎは、Ｌｎ＝（Ｙｎ（Ｘｂ−Ｘａ）＋Ｘｔ（Ｙｔ−Ｙａ））÷（Ｙｔ×Ｘｔ）となり、四隅の点の座標より倍率Ｌｎが求められる。
【００５５】
このように、点（０，Ｙｎ）から走査した画像データを拡大する倍率であるＬｎが求められる。
【００５６】
次に、フィルタ調整部１０８で画質調整に使用される数種の空間フィルタについて図３を参照して説明を行う。
【００５７】
図３は、フィルタ調整部で画質調整に使用される数種の空間フィルタについての一例を示した図である。
【００５８】
図３に示すように、フィルタ調整部１０８で使用される数種の空間フィルタは、フィルタ係数が異なるフィルタや、フィルタサイズが異なるフィルタであって、倍率決定部１０４で求めた倍率Ｌｎを基にして、画像処理選択部１０６より空間フィルタが選択される。
【００５９】
次に、画像処理選択部１０６で、倍率Ｌｎの値を基にして空間フィルタが選択される様子について図４を参照して説明する。
【００６０】
図４は、画像処理選択部１０６で、倍率Ｌｎの値を基にして空間フィルタが選択される際に使用されるフィルタ記号参照表４０１を示した図である。
【００６１】
図４に示すように、フィルタ記号参照表４０１では倍率決定部１０４で求められた倍率Ｌｎの値を基にして選択される空間フィルタの記号が表形式で記されている。
【００６２】
例えば、倍率決定部１０４で求められた倍率Ｌｎの値が１．３の場合には、フィルタ記号参照表４０１より画像処理選択部１０６において記号Ｂの空間フィルタが選択される。
【００６３】
そして、画像処理選択部１０６で選択された記号Ｂの空間フィルタが、フィルタ調整部１０８で使用されて、点（０，Ｙｎ）より走査された画像データに対して画質を調整する画像処理が行われる。
【００６４】
次に、コントラスト調整部１０９で画質調整に使用される数種のＬＵＴについて図５を参照して説明を行う。
【００６５】
図５は、コントラスト調整部１０９でコントラスト調整に使用される数種のＬＵＴについての例を示した図である。
【００６６】
図５に示すように、ＬＵＴの内容が異なる数種のテーブルがコントラスト調整部１０９に用意され、倍率決定部１０４で求めた倍率Ｌｎを基にして、画像処理選択部１０６で数種のテーブルから１つのＬＵＴが選択される。
【００６７】
次に、画像処理選択部１０６で、倍率Ｌｎの値を基にしてＬＵＴが選択される様子について図６を参照して説明する。
【００６８】
図６は、画像処理選択部１０６で倍率Ｌｎの値を基にしてＬＵＴが選択される際に使用されるＬＵＴ番号参照表６０１を示した図である。
【００６９】
図６に示すように、ＬＵＴ番号参照表６０１では、倍率決定部１０４で求められた倍率Ｌｎの値を基にして選択されるＬＵＴの番号が記されている。
【００７０】
例えば、倍率決定部１０４で求められた倍率Ｌｎの値が１．２の場合には、ＬＵＴ番号参照表６０１より１番のＬＵＴ１が選択される。
【００７１】
そして、フィルタ調整部１０８で画質の調整が行われた画像データが画像処理選択部１０６で選択された１番のＬＵＴによってコントラスト調整部１０９でコントラスト調整が行われる。
【００７２】
次に、本発明に係わる画像処理装置およびその方法において、撮影対象が歪む等の変形をして撮影された撮影画像にボケが発生しないように変形を修正する画像処理における処理フローについて、図７を参照して説明を行う。
【００７３】
図７は、本発明に係わる画像処理装置およびその方法において、撮影対象が歪む等の変形をして撮影された撮影画像を、画像にボケが発生しないように変形を修正する画像処理における処理フローを示したフローチャートである。
【００７４】
本発明に係わる画像処理装置およびその方法では、まず、デジタルカメラで撮影された原稿１０が変形して撮影された原稿画像４０を有する画像３０が、図１を参照して説明を行った機能的な構成を具備する画像処理装置であるパーソナルコンピュータに、汎用インターフェースまたはメディアにて送られ、画像処理装置であるパーソナルコンピュータに画像３０が受け付けられる（ステップ７０１）。
【００７５】
そして、ユーザ操作により、撮影画像中の変形を有する四角形の４隅の座標がパーソナルコンピュータに入力され、座標受付部１０３で受付られる（ステップ７０２）。
【００７６】
そして、副走査方向であるＹ軸方向について走査行のｎがｎ＝１から最終行のｎ＝Ｎまで、原稿画像４０のＹ軸方向のｎ行目の画素で構成される画像データについて以下の処理が行われる（ステップ７０３）。
【００７７】
まず、Ｙ軸方向のｎ行目の画素について、点（０，Ｙｎ）から主走査方向であるＸ軸方向に走査が行われる（ステップ７０４）。
【００７８】
ステップ７０４で原稿画像４０のｎ行目の主走査方向の走査が行われると、倍率決定部１０４がカウンタ１０２から走査された回数を受け取り、また倍率決定部１０４が座標受付部１０３から変形して撮影された台形の四隅の座標を受け取り、受け取った走査された回数と台形の四隅の座標から拡大倍率Ｌｎが倍率決定部１０４で決定される（ステップ７０５）。
【００７９】
ステップ７０５で拡大倍率Ｌｎが決定されると、画像走査部１０１が走査した画像データが拡大・縮小実行部１０５において倍率Ｌｎで拡大される（ステップ７０６）。
【００８０】
また、ステップ７０５で拡大倍率Ｌｎが決定されると、倍率決定部１０４から画像処理選択部１０６に倍率Ｌｎが送られ、画像処理選択部１０６において倍率Ｌｎを基にして、フィルタ記号参照表４０１によって空間フィルタの種類が選択され（ステップ７０７）、そして、ＬＵＴ番号参照表６０１によってＬＵＴの種類が選択され（ステップ７０７）、選択された空間フィルタの種類がフィルタ調整部１０８に送られ、選択されたＬＵＴの種類がコントラスト調整部１０９に送られる。
【００８１】
走査したｎ行目の画素で構成される画像データの拡大処理が完了し、そして、フィルタ調整部１０８に選択された空間フィルタの種類が送られ、コントラスト調整部１０９に選択されたＬＵＴの種類が送られると、拡大処理が行われた画像データについて、フィルタ調整部１０８とコントラスト調整部１０９で画質の調整についての画像処理が行われる。
【００８２】
図１５、１６を参照して説明したように画像データの拡大処理が行われる際には、拡大倍率の大きい画像データについては図１６に示した原稿画像４０の文字「Ｌ」のように画素の移動距離が長くボケが発生しやすいので、走査したラインの画像データを拡大する拡大倍率が大きい拡大処理が行われたラインの画像データについてはエッジを強める空間フィルタが画像処理選択部１０６で選択され、さらにコントラストを強くするＬＵＴが画像処理選択部１０６で選択されるようにフィルタ記号参照表４０１とＬＵＴ番号参照表６０１は構成されており、エッジを強めてコントラストを強くする画像処理が、走査されたラインの画像データに対して行われる（ステップ７０８）。
【００８３】
拡大された画像データに、画質調整についての画像処理が行われると、画質調整が行われた画像データが画像蓄積部１１０に蓄えられる（ステップ７０９）。
【００８４】
このように、副走査方向のＹ軸方向のｎ行目のラインに位置する画素で構成される画像データの拡大処理と画質調整の処理等であるステップ７０４からステップ７０９までの処理が、副走査方向の行数についてｎ＝１から画像の最終行のＮまで行われる（ステップ７０３）。
【００８５】
このようにして、ステップ７０４からステップ７０９までの処理が副走査方向にｎ＝Ｎまで行われると、画像蓄積部１１０に蓄積された画像データが合成されて（ステップ７１０）、変形を修正する為に行われる拡大される個所のボケが発生しない図８に示す画像８００が生成される。
【００８６】
図８は、図１を参照して説明が行われた機能的な構成を具備する本発明に係わる画像処理装置であるパーソナルコンピュータによって、図１５に示す画像３０中の変形して撮影された原稿画像４０が、ボケが発生せずに修正されて生成された画像８００を示す模式図である。
【００８７】
図１５に示す画像３０中の原稿画像４０の変形が修正された場合には、従来の技術だと、図１６に示す画像５０のように拡大倍率の大きい画像データの像（文字「Ｌ」の部分）がボケる傾向があったが、本発明に係わる画像処理装置であるパーソナルコンピュータによって修正された場合には、図８に示す画像８００のように、従来の技術だとボケる傾向がある拡大倍率の大きい画像データの像（文字「Ｌ」の部分）がボケることなく変形が修正される。
【００８８】
なお、本実施例においては、本発明に係わる画像処理装置およびその方法は、変形して撮影された台形等の画像を長方形もしくは正方形に修正する際に、拡大・縮小実行部１０５において拡大する拡大倍率を基にして画質の調整のやり方が選択されるように説明したが、拡大・縮小実行部１０５において行われる拡大処理に限らず、変形して撮影された台形等の画像を長方形もしくは正方形に修正する為に、縮小の処理が必要な場合には、拡大・縮小実行部１０５において縮小の処理が行われ、縮小される縮小倍率を基にして画質の調整のやり方が画像処理選択部１０６で選択されて画質を調整する画像処理が行われる。
【００８９】
なお、本発明に係わる画像処理装置およびその方法によって画像処理される画像は本実施例で説明したように、１方向のＸ軸方向に変形している変形だけでなく、２つ以上の軸方向、例えば、Ｘ軸方向だけでなく、Ｙ軸方向に対しても変形した画像に拡大・縮小処理が行われて変形が修正される場合においても、Ｙ軸方向の変形を修正する拡大・縮小の倍率を基にして画質の調整のやり方が選択されて選択された調整のやり方によって画像処理が行われることも可能である。
【００９０】
なお、本発明に係わる画像処理装置をパーソナルコンピュータ等に組み込んで、カメラ付携帯電話やデジタルカメラで撮影した画像を様々な用途に使用することが可能である。
【００９１】
次に、本発明に係わる画像処理装置をパーソナルコンピュータ等に組み込んで、カメラ付携帯電話やデジタルカメラで撮影した画像が本発明に係わる画像処理装置によって処理されて様々な用途に使用される使用例について図９を参照して説明を行う。
【００９２】
図９は、本発明に係わる画像処理装置の構成を備えるコンピュータ等によって、カメラ付携帯電話やデジタルカメラで撮影した画像が該画像処理装置によって処理されて様々な用途に使用される使用例について示した模式図である。
【００９３】
図９に示すように、インターネット９１２には、本発明に係わる画像処理装置の構成を備えるコントローラ９０２、本発明に係わる画像処理装置の構成を備える携帯電話用のＷｅｂサーバ９１１、本発明に係わる画像処理装置の構成を備える画像形成装置９０５、ネットワークプリンタ９０４、コンピュータ９０７が接続される。
【００９４】
コントローラ９０２は、本発明の画像処理装置の構成を備える専用のハードウェアであってもよいし、パーソナルコンピュータに本発明に係わる画像処理方法を備えるソフトウェアをインストールした構成でもよい。
【００９５】
デジタルカメラ９０１で撮影された画像はコントローラ９０２に対して汎用インターフェースまたはメディアにて送られ、送られた画像がコントローラ９０２によってボケが発生しないように変形が修正される処理が行われ、修正された画像がコントローラ９０２内部に電子保存される。
【００９６】
コントローラ９０２に電子保存された画像は、インターネット若しくはコントローラ９０２が接続されている図示しないネットワークに接続されているコンピュータから取り出して活用されることが可能である。
【００９７】
また、コントローラ９０２で処理された画像をコントローラ９０２に接続されたプリンタ９０３に定型変倍処理を行ってプリントアウトさせることも可能である。
【００９８】
さらに、コントローラ９０２で処理された画像を、インターネット９１２に接続されたネットワークプリンタ９０４にプリントアウトさせることももちろん可能である。
【００９９】
また、画像形成装置９０５は、コンビニエンスストア等の店頭に設置された、デジタルカメラで撮影された画像をプリントさせる画像形成装置を想定しており、デジタルカメラ９０６で撮影された画像が画像形成装置９０５に入力されることによって、画像形成装置９０５に備えられた本発明に係わる画像処理装置の機能により、撮影対象の歪み等の変形を有する撮影画像がボケが発生することなく撮影対象の変形が修正される。
【０１００】
画像形成装置９０５の他の利用法としては、デジタルカメラ９０８で撮影された画像がインターネット９１２に接続されたコンピュータ９０７に送られ、コンピュータ９０７を通して画像形成装置９０５に対してプリント予約が行われ、デジタルカメラ９０８で撮影されて撮影対象が変形して撮影された撮影画像が、画像形成装置９０５でボケが発生することなく変形が修正されて、画像形成装置９０５より修正された画像がプリントされてユーザに渡されるようにすることも可能である。
【０１０１】
また、カメラ付携帯電話９０９で撮影された画像をＷｅｂサーバ９１１に携帯電話網を使って送り、Ｗｅｂサーバ９１１で撮影対象が変形して撮影された撮影画像をボケが発生することなく変形が修正処理されて、カメラ付携帯電話９０９に修正された画像が送り返されるようにすることが可能である。
【０１０２】
また、Ｗｅｂサーバ９１１で変形が修正された画像を電話回線を利用して、ファクシミリ装置９１０に送信することも可能である。
【０１０３】
なお、本発明に係わる画像処理装置を使用して、会議室等の天井に配置されたズームカメラで撮影した会議室内の原稿やホワイトボードの画像の変形を修正して、会議室内の原稿やホワイトボードに書かれた内容の電子化が行われるようにすることも可能である。
【０１０４】
次に、本発明に係わる画像処理装置を使用して、会議室の天井に配置されたズームカメラより撮影された会議室内の原稿やホワイトボードの画像を画像内の変形が修正されて、会議室内の原稿やホワイトボードに書かれた内容が電子化されて使用される様子について図１０を参照して説明を行う。
【０１０５】
図１０は、本発明に係わる画像処理装置を使用して、会議室の天井に配置されたズームカメラより撮影した会議室内の原稿やホワイトボードの画像の変形が修正されて、会議室内の原稿やホワイトボードに書かれた内容が電子化される様子について示した模式図である。
【０１０６】
図１０に示すように、会議室１２０１の天井部分には、ズームカメラ１００２と会議室１００１の光源となる照明器具１００４が備えられ、会議室１００１の壁にはホワイトボード１００３が掛けられており、そして会議室１００１の机の上には本発明を適用した画像処理装置１００６、会議に使用される原稿１２０５、パーソナルコンピュータ１００８、プリンタ１００７が存在し、会議室１００１の壁にはＬＡＮコネクタ１００９が存在する。
【０１０７】
ズームカメラ１００２は、会議室１００１内全体の撮影が可能である。
【０１０８】
ホワイトボード１００３は、電子ボードでなく、通常のホワイトボードであって、ユーザによって任意の文字、記号等が記述され、ズームカメラ１００２で撮影されて、ホワイトボード１００３が撮影された画像が画像処理装置１００６で処理される。
【０１０９】
照明器具１００４は、ズームカメラ１００２が撮影する撮影対象を照らす光源となる。
【０１１０】
原稿１００５は、紙に内容が記述された、会議で使用される原稿であり、ズームカメラ１００２で撮影されて、原稿１００５が撮影された画像が画像処理装置１００６で処理される。
【０１１１】
画像処理装置１００６は、本発明に係わる画像処理装置であり、図１を参照して説明した本発明に係わる画像処理装置の機能的な構成を備え、撮影対象が変形して撮影された撮影画像に対してボケが発生しないように修正を行って、変形を修正する機能を持つ。
【０１１２】
プリンタ１００７は、画像処理装置１００６で処理された画像をプリントアウトする。
【０１１３】
パーソナルコンピュータ１００８は、必要に応じて、ズームカメラ１００２で撮影された原稿１００５やホワイトボード１００３の四隅の位置をユーザが指定するのに使用され、また画像処理装置１００６で処理された画像をプリンタ１００７にプリントアウトさせる操作パネルを有する。
【０１１４】
さらに、パーソナルコンピュータ１００８によってズームカメラ１００２で撮影する撮影範囲をパーソナルコンピュータ１００８によって指定することを可能とし、セキュリティ上ズームカメラ１００２で撮影されたくない場所を指定することが可能である。
【０１１５】
そして、画像処理装置１００６は、会議室１００１のＬＡＮコネクタ１００９を介してインターネットと接続されており、インターネットを利用した電子会議システムにおいて、他の会議室に画像処理装置１００６で画像処理されて変形が修正されたホワイトボード１００３、原稿１００５の内容を送ることが可能である。
【０１１６】
このように図１０に示す会議室１００１において、画像処理装置１００６を使用することによって、今までのように、会議に使用する原稿をコピーする場合に、原稿をスキャン機能をもった装置のところまで持っていかなくてもズームカメラ１００２で撮影された原稿１００５の撮影画像を画像処理装置１００６で修正してボケの発生しない変形が修正された画像を得、プリンタ１００７で修正された画像をプリントアウトすることができ、また、電子ボードよりも安価なホワイトボードを使用して、ホワイトボードに記載された内容をズームカメラ１００２で撮影し、撮影されたホワイトボード１００３の撮影画像を画像処理装置１００６で修正してボケの発生しない変形が修正された画像を得ることができ、電子ボードを使用せずにホワイトボード１００３に書かれた内容の電子化を行うことが可能となる。
【実施例２】
【０１１７】
実施例１では、撮影対象が歪む等の変形をして撮影された撮影画像中の変形が画像処理装置によって修正される際に、拡大される倍率に応じて異なる画像処理が選択されて、画質を調整する画像処理が行われる画像処理装置およびその方法について説明したが、本実施例では、入力された撮影画像が拡大、縮小の処理によって変形が修正される際に、画像中の各画素が移動されるので、画素が移動される距離（修正量）を測定して、測定した該距離に応じて修正された画像を複数の領域に分割し、分割された領域毎に異なる画像処理を選択して、変形が修正された画像に選択された画像処理が実行され、修正された画像のボケの発生を処理するようにした画像処理装置およびその方法について説明を行う。
【０１１８】
まず、本発明に係わる画像処理装置が備える構成について図１１を参照して説明を行う。
【０１１９】
図１１は、本発明に係わる画像処理装置が備える構成について示したブロック図である。
【０１２０】
本発明に係わる画像処理装置は、画像受付部１３０１、座標受付部１１０２、画像修正部１１０３、画像分割部１１０４、メモリ１１０５、参照表保存部１１０６、フィルタ調整部１１０７、コントラスト調整部１１０８を備える。
【０１２１】
画像受付部１１０１は、撮影対象が変形して撮影された撮影画像を受け付け、画像修正部１１０３に受け付けた撮影画像を送る。
【０１２２】
座標受付部１１０２は、画像受付部１１０１が受け付けた撮影画像中の変形して撮影された四角形の四隅の座標がユーザによって入力される。
【０１２３】
画像修正部１１０３は、画像受付部１１０１より送られた撮影画像に含まれる、座標受付部１１０２で入力された撮影画像中の変形して撮影された四角形の変形を修正する処理を行って、撮影画像から修正された画像を得る処理が行われる。
【０１２４】
そして、画像修正部１１０３は、撮影画像を修正する際に撮影画像中の画素データを移動させた移動距離に関する情報と、変形の修正が行われた画像を画像分割部１１０４に送り、また、変形の修正が行われた画像をフィルタ調整部１１０７に送る。
【０１２５】
画像分割部１１０４は、画像修正部１１０３より、画素データの移動距離に関する情報と修正された画像とを受け取ると、修正された画像を画素データの移動距離に応じて複数の領域に分割し、修正された画像が分割された領域の情報をフィルタ調整部１１０７に送る。
【０１２６】
メモリ１１０５は、フィルタ調整部１１０７で画質を調整する際に使用される、空間フィルタが蓄えられており、画質を調整する際にメモリ１１０５は使用される。
【０１２７】
参照表保存部１１０６には、画素の移動距離に応じて選択される空間フィルタの番号が記載されたフィルタ記号参照表と、画素の移動距離に応じて選択されるＬＵＴの番号が記載されたＬＵＴ番号参照表とが保存されている。
【０１２８】
そして、フィルタ調整部１１０７とコントラスト調整部１１０８が画像処理を行う際に、参照表保存部１１０６に保存されている情報から画像処理を行う空間フィルタとＬＵＴを選択して、それぞれ画像処理が行われる。
【０１２９】
フィルタ調整部１１０７は、画像修正部１１０３より送られた修正された画像に対して、修正された画像が複数の領域に分割された領域の情報を基に、領域毎に決められた画素データの移動距離に応じて参照表保存部１３０６に保存されているフィルタ記号参照表１４００より参照して空間フィルタの種類を選択し、各々の分割された領域に対して選択された空間フィルタを使用して画質調整を行う。
【０１３０】
なお、フィルタ記号参照表１２００より参照されて、フィルタ調整部１１０７で使用される数種の空間フィルタは、実施例１で図３を参照して説明した空間フィルタと同じように、フィルタ係数が異なる空間フィルタや、フィルタサイズが異なる空間フィルタが使用される。
【０１３１】
フィルタ調整部１１０７からコントラスト調整部１１０８には、フィルタ調整部１１０７で空間フィルタを使用して画質調整が行われた画像と、フィルタ調整部１１０７が画像分割部１１０４より受け取った修正された画像の分割された領域の情報とが送られる。
【０１３２】
コントラスト調整部１１０８は、フィルタ調整部１１０７より送られた画像に対して、同じくフィルタ調整部１１０７より送られた、分割された領域の情報を基にして、参照表保存部１３０６に保存されているＬＵＴ番号参照表１２０１よりコントラスト調整を行うＬＵＴを選択し、分割された領域毎に、選択されたＬＵＴを使用してコントラスト調整を行う。
【０１３３】
なお、ＬＵＴ番号参照表１２０１より参照されて、コントラスト調整部１１０８で使用される数種のＬＵＴは、実施例１で図５を参照して説明したＬＵＴと同じように、ＬＵＴの内容が異なる数種のテーブルが使用される。
【０１３４】
画像受付部１１０１によって受け付けられた撮影位置によって生じる、撮影対象が変形された撮影画像は、画像修正部１１０３で変形が修正された画像が作成され、画像分割部１１０４で、撮影画像が修正される際に画素データが移動された移動距離に応じて修正された画像が複数の領域に分割され、分割された領域の情報が生成される。
【０１３５】
そして、フィルタ調整部１１０７で、修正された画像の分割された領域毎にそれぞれ異なる空間フィルタが選択されて画像処理が行われ、コントラスト調整部１１０８で、修正された画像の分割された領域毎にそれぞれ異なるＬＵＴが選択されてコントラスト調整が行われ、撮影位置によって生じる撮影対象の変形が修正されてボケが発生していない画像を得る。
【０１３６】
次に、参照表保存部１３０６に保存される、空間フィルタが選択される際に参照されるフィルタ記号参照表１２００と、ＬＵＴとが選択される際に参照されるＬＵＴ番号参照表１２０１とについて図１２を参照して説明を行う。
【０１３７】
図１２は、参照表保存部１３０６で保存される、フィルタ記号参照表１２００とＬＵＴ番号参照表１２０１とを示した表である。
【０１３８】
図１２（ａ）は、参照表保存部１３０６で保存されるフィルタ記号参照表１２００を示した表であり、図１２（ｂ）は、参照表保存部１３０６で保存されるＬＵＴ番号参照表１２０１を示した表である。
【０１３９】
図１２（ａ）に示すように、フィルタ記号参照表１２００では、フィルタ調整部１１０７で修正された画像の画質調整が行われる際に分割された複数の領域に応じて画質を調整する空間フィルタの選択が行われ、画素データの移動距離Ｄｎに応じた空間フィルタが選択されるように、移動距離Ｄｎに応じて空間フィルタの記号が記されている。
【０１４０】
例えば、分割された１つの領域の画素データの移動距離が４．０以上８．０未満の場合には、その領域には記号Ｂの空間フィルタが選択されて、画質の調整が行われる。
【０１４１】
また、図１２（ｂ）に示すように、ＬＵＴ番号参照表１２０１では、コントラスト調整部１１０８でフィルタ調整部１１０７で画質の調整が行われた画像に対してコントラストの調整が行われる際に使用されるＬＵＴの番号が、修正された画像が分割された複数の領域に決定されている画素データの移動距離Ｄｎに応じて選択されるように、移動距離Ｄｎに応じてＬＵＴの番号が記されている。
【０１４２】
例えば、分割された１つの領域の画素データの移動距離が４．０以上８．０未満の場合には、その領域には２番の番号のＬＵＴが選択されて、画質の調整が行われる。
【０１４３】
次に、撮影画像の変形を修正する際の画素データの移動距離に基づいて、修正された画像が画像分割部１３０５において複数の領域に分割された領域について図１３を参照して説明を行う。
【０１４４】
図１３は、撮影画像の変形を修正する際の画素データの移動距離に基づいて、修正された画像が画像分割部１３０５において複数の領域に分割された領域を示す概念図である。
【０１４５】
図１３に示すように、変形が修正された画像が、画素データが移動される移動距離に応じて画像が３つの領域に分割されており、領域の１つは移動距離Ｄｎが４．０未満であり、他の領域の１つはＤｎが４．０以上８．０未満であり、また他の領域の１つはＤｎが８．０以上である。
【０１４６】
このように、修正された画像が画素の移動距離に応じて複数に分割されているので、分割された画像に対して、移動距離に基づいてフィルタ記号参照表１２００、ＬＵＴ番号参照表１２０１で参照されて選択される画質調整が行われることで、変形が修正される拡大率が大きく画素の移動距離が大きい画像も画素の移動距離に応じて領域毎に異なる画質調整が行われ、修正された画像のボケに対して画質調整が行われる。
【０１４７】
次に、画像受付部１１０１で受け付けた撮影画像を修正して、修正された撮影画像の画質の調整をフィルタ調整部１１０７、コントラスト調整部１１０８で行う処理フローについて図１４を参照して説明を行う。
【０１４８】
図１４は、画像受付部１１０１で受け付けた撮影画像を修正して、修正された撮影画像の画質の調整をフィルタ調整部１１０７、コントラスト調整部１１０８で行う処理フローを示したフローチャートである。
【０１４９】
図１４に示すフローチャートのように、画像処理装置の画像受付部１１０１で撮影対象が変形して撮影された撮影画像を受け付けると（ステップ１４０１）、受け付けた画像中の撮影画像の四隅の座標を座標受付部１１０２より、ユーザによってマウスがクリックされる等の作業で入力され、画像修正部１１０３で撮影画像の変形を修正する処理が行われる（ステップ１４０２）。
【０１５０】
そして、画像分割部１１０４で、画像修正部１１０３より送られた画素を移動させた距離に関する情報と修正された画像とにより、画素の移動距離に応じて変形が修正された画像を複数の領域に分割する（ステップ１４０３）。
【０１５１】
修正された画像が複数の領域に分割されると、分割された領域の画素の移動距離に基づいて、フィルタ調整部１１０７で画質が調整される際に使用される空間フィルタがフィルタ記号参照法１４００より分割された領域毎に選択されて、選択された空間フィルタによって調整された画像の分割された領域毎に画質調整が行われ、さらに、コントラスト調整部１１０８で、コントラスト調整の為に使用されるＬＵＴが分割された領域毎にＬＵＴ番号参照表１２０１より選択されて、選択されたＬＵＴによってフィルタ調整部１１０７で調整が行われた画像の分割された領域毎にコントラスト調整が行われ、ボケがない変形が修正された画像が得られる（ステップ１４０４）。
【０１５２】
なお、フィルタ調整部１１０７からコントラスト調整部１１０８には、撮影画像が画像分割部１１０４で画素データの移動距離に応じて分割された領域の情報と、フィルタ調整部１１０７で画質調整が行われた画像が送られる。
【０１５３】
なお、本実施例において、画像修正部１１０３で撮影画像が修正される際には、実施例１で説明したように、画像データを表す片方の軸方向であるＸ軸方向の変形の修正だけでなく、もう片方の軸のＹ軸方向の変形についての修正も行われる。
【０１５４】
なお、実施例１では、図９を参照して説明したように、本発明に係わる画像処理装置をパーソナルコンピュータ等に組み込んで、カメラ付携帯電話やデジタルカメラで撮影した画像を様々な用途に使用することが可能であったが、本実施例においても実施例１と同様に、本発明に係わる画像処理装置をパーソナルコンピュータ等に組み込んで、カメラ付携帯電話やデジタルカメラで撮影した画像を様々な用途に使用することが可能である。
【０１５５】
また、実施例１では、図１０を参照して説明したように、本発明に係わる画像処理装置を使用して、会議室の天井に配置されたズームカメラで撮影した会議室内の原稿やホワイトボードの画像の変形を修正して会議室内の原稿やホワイトボードに書かれた内容の電子化が行われるようにすることが可能であったが、本実施例においても実施例１と同様に、本発明に係わる画像処理装置を使用して、会議室の天井に配置されたズームカメラで撮影した会議室内の原稿やホワイトボードの画像の変形を修正して会議室内の原稿やホワイトボードに書かれた内容の電子化が行われるようにすることが可能である。
【産業上の利用可能性】
【０１５６】
この発明は、撮影対象の撮影位置により生じる当該撮影対象の撮影画像の変形を修正する画像処理装置において利用可能である。
【０１５７】
この発明によれば、撮影画像の変形を修正する修正量に応じてそれぞれ異なる画像処理を施すことにより画像のボケ等を小さくすることができる。
【図面の簡単な説明】
【０１５８】
【図１】本発明に係わる画像処理装置に備えられる機能的な構成を示したブロック図。
【図２】画像走査部１０１が図１５（ｃ）に示す画像３０を走査する際に、デジタル画像である画像３０を走査して倍率決定部１０４で拡大の倍率が決定される様子を説明する模式図。
【図３】フィルタ調整部で画質調整に使用される数種の空間フィルタについての一例を示した図。
【図４】画像処理選択部１０６で、倍率Ｌｎの値を基にして空間フィルタが選択される際に使用されるフィルタ記号参照表４０１を示した図。
【図５】コントラスト調整部１０９でコントラスト調整に使用される数種のＬＵＴについての例を示した図。
【図６】画像処理選択部１０６で倍率Ｌｎの値を基にしてＬＵＴが選択される際に使用されるＬＵＴ番号参照表６０１を示した図。
【図７】本発明に係わる画像処理装置およびその方法において、撮影対象が歪む等の変形をして撮影された撮影画像を、画像にボケが発生しないように変形を修正する画像処理における処理フローを示したフローチャート。
【図８】図１を参照して説明が行われた機能的な構成を具備する本発明に係わる画像処理装置であるパーソナルコンピュータによって、図１５に示す画像３０中の変形して撮影された原稿画像４０が、ボケが発生せずに修正されて生成された画像８００を示す模式図。
【図９】本発明に係わる画像処理装置の構成を備えるコンピュータ等によって、カメラ付携帯電話やデジタルカメラで撮影した画像が該画像処理装置によって処理されて様々な用途に使用される使用例について示した模式図。
【図１０】本発明に係わる画像処理装置を使用して、会議室の天井に配置されたズームカメラより撮影した会議室内の原稿やホワイトボードの画像の変形が修正されて、会議室内の原稿やホワイトボードに書かれた内容が電子化される様子について示した模式図である。
【図１１】本発明に係わる画像処理装置が備える構成について示したブロック図。
【図１２】参照表保存部１３０６で保存される、フィルタ記号参照表１２００とＬＵＴ番号参照表１２０１とを示した表。
【図１３】撮影画像の変形を修正する際の画素データの移動距離に基づいて修正された画像が画像分割部１３０５において複数の領域に分割された領域の情報を示す概念図。
【図１４】画像受付部１１０１で受け付けた撮影画像を修正して、修正された撮影画像の画質の調整をフィルタ調整部１１０７、コントラスト調整部１１０８で行う処理フローを示したフローチャート。
【図１５】長方形の紙でできた原稿１０がデジタルカメラで撮影されて、原稿１０が変形して原稿画像４０として画像３０が撮影される様子を示した模式図。
【図１６】本来長方形である原稿１０が台形の原稿画像４０として撮影された撮影画像である画像３０に対して、変形を修正する為に拡大処理を行って、台形の原稿画像４０を長方形に修正する処理が行われた修正画像である画像５０を示した模式図。
【符号の説明】
【０１５９】
１０    原稿
２０    デジタルカメラ
３０    画像
４０    原稿画像
５０    画像
４０１    フィルタ記号参照表
６０１    ＬＵＴ番号参照表
８００    画像
９０１    デジタルカメラ
９０２    コントローラ
９０３    プリンタ
９０４    ネットワークプリンタ
９０５    画像形成装置
９０６    デジタルカメラ
９０７    コンピュータ
９０８    デジタルカメラ
９０９    カメラ付携帯電話
９１０    ファクシミリ装置
９１１    Ｗｅｂサーバ
９１２    インターネット
１００１    会議室
１００２    ズームカメラ
１００３    ホワイトボード
１００４    照明器具
１００５    原稿
１００６    画像処理装置
１００７    プリンタ
１００８    パーソナルコンピュータ
１００９    ＬＡＮコネクタ
１２００    フィルタ記号参照表
１２０１    ＬＵＴ番号参照表
【図１】
2007011954.tif 000003
【図２】
2007011954.tif 000004
【図３】
2007011954.tif 000005
【図４】
2007011954.tif 000006
【図５】
2007011954.tif 000007
【図６】
2007011954.tif 000008
【図７】
2007011954.tif 000009
【図８】
2007011954.tif 000010
【図９】
2007011954.tif 000011
【図１０】
2007011954.tif 000012
【図１１】
2007011954.tif 000013
【図１２】
2007011954.tif 000014
【図１３】
2007011954.tif 000015
【図１４】
2007011954.tif 000016
【図１５】
2007011954.tif 000017
【図１６】
2007011954.tif 000018