(57)【要約】【課題】複数台の撮像装置に含まれる欠陥画素に対する補正処理に割り当てるリソースを適正化する。【解決手段】複数台の撮像装置からの映像信号を入力する入力部と、それぞれの撮像装置に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集部と、あらかじめ定められた補正対象設定条件にしたがって、欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定部と、映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理部とを備えた画像処理装置。【選択図】図１
2012034111.tif 000002
【特許請求の範囲】
【請求項１】
複数台の撮像装置からの映像信号を入力する入力部と、
それぞれの撮像装置に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集部と、
あらかじめ定められた補正対象設定条件にしたがって、前記欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定部と、
前記映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理部とを備えたことを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置であって、
前記欠陥画素情報は、本来出力されるべき値よりも高い値が出力される白キズ画素であるか、本来出力されるべき値よりも低い値が出力される黒キズ画素であるかの識別情報を含み、
前記補正対象画素設定部は、前記映像信号が表わす画像の輝度を評価して、前記白キズ画素および前記黒キズ画素のいずれかを補正対象として設定することを特徴とする画像処理装置。
【請求項３】
請求項１に記載の画像処理装置であって、
前記補正対象画素設定部は、前記映像信号が表わす連続する画像における変化を評価して、補正対象とする欠陥画素を設定することを特徴とする画像処理装置。
【請求項４】
請求項２または３に記載の画像処理装置であって、
前記補正対象画素設定部は、前記画面を複数の領域に分割し、領域毎に補正対象とする欠陥画素を設定することを特徴とする画像処理装置。
【請求項５】
請求項１に記載の画像処理装置であって、
前記補正対象画素設定部は、特定の撮像装置に係る欠陥画素を、補正対象として設定することを特徴とする画像処理装置。
【請求項６】
撮像素子の受光信号を映像信号に変換して出力する複数台の撮像装置と、各撮像装置からの映像信号を入力する画像処理装置とを備えた撮像システムであって、
前記画像処理装置は、
それぞれの撮像装置の撮像素子に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集部と、
あらかじめ定められた補正対象設定条件にしたがって、前記欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定部と、
前記映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理部とを備えたことを特徴とする撮像システム。
【請求項７】
情報処理装置における画像処理方法であって、
複数台の撮像装置からの映像信号を入力する入力ステップと、
それぞれの撮像装置に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集ステップと、
あらかじめ定められた補正対象設定条件にしたがって、前記欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定ステップと、
前記映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理ステップとを有することを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置の欠陥画素に対して画像補正を行なう画像処理装置に係り、特に、複数台の撮像装置の欠陥画素に対して画像補正を行なう画像処理装置に関する。
【背景技術】
【０００２】
デジタルビデオカメラ等の撮像装置は、撮像対象からの光を電気信号に変換する撮像素子を備えており、撮像素子としては、ＣＣＤ（Charge Coupled Device）や、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）等が用いられている。これらの撮像素子は、画像を構成する画素に対応する多数の受光素子を備えて構成されるが、受光素子の中にはダストの付着や結晶欠陥等により正常な信号を出力せず、欠陥画素となるものが存在する。
【０００３】
受光素子の動作不良に起因する代表的な欠陥画素としては、本来出力されるべき値よりも高い値が出力されることによって生じる白キズ画素と、本来出力されるべき値よりも低い値が出力されることによって生じる黒キズ画素とがある。
【０００４】
欠陥画素によって画像の品質が低下するため、欠陥画素の数は少ないほど望ましいが、動作不良の受光素子をゼロにすることは、歩留まり、コスト等の観点から現実的でなく、特に、近年、高精細画素用の撮像素子が広く採用されていることから、ある程度の欠陥画素が含まれることは避けることができない。このため、欠陥画素が存在することを前提とし、欠陥画素を補正する画像処理が従来から行なわれている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０００−５９６９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
欠陥画素を補正する画像処理は、一般に、欠陥画素の位置をあらかじめ取得しておき、周辺の正常な画素の値を用いて欠陥画素の値を補完すること等によって行なわれている。したがって、欠陥画素の補正のために、作業領域やプロセス等のリソースが費やされることになる。近年、画像の高精細化が進み、撮像素子の画素数が多くなるのにつれて欠陥画素の数も多くなっており、補正処理に必要なリソース量も増えている。
【０００７】
ところで、近年、テレビ会議システムや監視カメラシステム等に代表されるように、複数台の撮像装置を用いて撮像システムを構築することが行なわれている。この場合、各撮像装置に個別の撮像素子が用いられるため、それぞれの撮像装置で欠陥画素が存在することになる。
【０００８】
このため、すべての欠陥画素に対して一律に補正処理を行なうとすると、多大なリソースが必要となり、撮像システムのコスト高を招くことになる。また、撮像素子に含まれる欠陥画素の数は均一ではなく、ロット等によってばらつきが生じるため、各撮像装置によって補正処理に必要なリソース量が異なってくる。したがって、欠陥画素に対する補正処理のためのリソースを適正に割り当てることが望まれる。
【０００９】
そこで、本発明は、複数台の撮像装置に含まれる欠陥画素に対する補正処理に割り当てるリソースを適正化することを目的とする。
【課題を解決するための手段】
【００１０】
上記課題を解決するため、本発明の第１の態様である画像処理装置は、複数台の撮像装置からの映像信号を入力する入力部と、それぞれの撮像装置に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集部と、あらかじめ定められた補正対象設定条件にしたがって、前記欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定部と、前記映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理部とを備えたことを特徴とする。
【００１１】
ここで、前記欠陥画素情報は、本来出力されるべき値よりも高い値が出力される白キズ画素であるか、本来出力されるべき値よりも低い値が出力される黒キズ画素であるかの識別情報を含み、前記補正対象画素設定部は、前記映像信号が表わす画像の輝度を評価して、前記白キズ画素および前記黒キズ画素のいずれかを補正対象として設定することができる。
【００１２】
あるいは、前記補正対象画素設定部は、前記映像信号が表わす連続する画像における変化を評価して、補正対象とする欠陥画素を設定するようにしてもよい。
【００１３】
いずれの場合も、前記補正対象画素設定部は、前記画面を複数の領域に分割し、領域毎に補正対象とする欠陥画素を設定することができる。
【００１４】
あるいは、前記補正対象画素設定部は、特定の撮像装置に係る欠陥画素を、補正対象として設定するようにしてもよい。
【００１５】
上記課題を解決するため、本発明の第２の態様である撮像システムは、撮像素子の受光信号を映像信号に変換して出力する複数台の撮像装置と、各撮像装置からの映像信号を入力する画像処理装置とを備えた撮像システムであって、前記画像処理装置は、それぞれの撮像装置の撮像素子に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集部と、あらかじめ定められた補正対象設定条件にしたがって、前記欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定部と、前記映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理部とを備えたことを特徴とする。
【００１６】
上記課題を解決するため、本発明の第３の態様である画像処理方法は、情報処理装置における画像処理方法であって、複数台の撮像装置からの映像信号を入力する入力ステップと、それぞれの撮像装置に係る欠陥画素の情報を収集して、欠陥画素情報として記録する欠陥画素情報収集ステップと、あらかじめ定められた補正対象設定条件にしたがって、前記欠陥画素情報に記録された欠陥画素のうち、補正対象とする欠陥画素を撮像装置毎に設定する補正対象画素設定ステップと、前記映像信号の補正対象と設定された欠陥画素に対して画像補正を行なう欠陥画素補正処理ステップとを有することを特徴とする。
【発明の効果】
【００１７】
本発明によれば、複数台の撮像装置に含まれる欠陥画素に対する補正処理に割り当てるリソースを適正化することができる。
【図面の簡単な説明】
【００１８】
【図１】本実施形態に係る撮像システムの構成を示すブロック図である。
【図２】記憶部に記録される欠陥画素情報のデータ構成例を示す図である。
【図３】本実施形態に係る撮像システムの処理動作について説明するフローチャートである。
【図４】画像の輝度と黒キズ、白キズとの関係を示す図である。
【図５】補正対象画素の設定処理の第１パターンを示すフローチャートである。
【図６】複数の領域に分割された画面を説明する図である。
【図７】補正対象画素の設定処理の第２パターンを示すフローチャートである。
【図８】補正対象画素の設定処理の第３パターンを示すフローチャートである。
【発明を実施するための形態】
【００１９】
本発明の実施の形態について図面を参照して詳細に説明する。図１は、本実施形態に係る撮像システムの構成を示すブロック図である。本図に示すように撮像システム１０は、画像処理装置１００と、複数台のカメラヘッド２００と、複数台の表示装置３００とを備えて構成される。なお、図面中では、カメラヘッドＡ２００ａ、カメラヘッドＢ２００ｂ、カメラヘッドＣ２００ｃが示されているが、特に区別する必要がない場合には、カメラヘッド２００で総称する。表示装置３００についても同様である。
【００２０】
カメラヘッド２００と表示装置３００とは組となって、画像処理装置１００と接続される。本図の例では、３組のカメラヘッド２００と表示装置３００、すなわち、カメラヘッドＡ２００ａと表示装置Ａ３００ａ、カメラヘッドＢ２００ｂと表示装置Ｂ３００ｂ、カメラヘッドＣ２００ｃと表示装置Ｃ３００ｃが画像処理装置１００と接続されている。
【００２１】
撮像システム１０を、例えば、テレビ会議システムに適用した場合には、表示装置Ａ３００ａは、カメラヘッドＡ２００ａの近傍に設置され、カメラヘッドＢ２００ｂ、カメラヘッドＣ２００ｃからの撮像を表示し、表示装置Ｂ３００ｂは、カメラヘッドＢ２００ｂの近傍に設置され、カメラヘッドＡ２００ａ、カメラヘッドＣ２００ｃからの撮像を表示し、表示装置Ｃ３００ｃは、カメラヘッドＣ２００ｃの近傍に設置され、カメラヘッドＡ２００ａ、カメラヘッドＢ２００ｂからの撮像を表示する。これにより、会議相手の映像を閲覧することができる。
【００２２】
また、撮像システム１０を、例えば、監視カメラシステムに適用した場合には、表示装置Ａ３００ａ、表示装置Ｂ３００ｂ、表示装置Ｃ３００ｃは、監視担当者の近傍に設置され、それぞれ、カメラヘッドＡ２００ａ、カメラヘッドＢ２００ｂ、カメラヘッドＣ２００ｃからの撮像を表示する。これにより、各カメラヘッド２００からの映像を集中監視することができる。この場合、表示装置は１台として、カメラヘッド２００からの映像を切替えて、又は表示画面を分割して同時に表示するようにしてもよい。いずれの場合も、表示装置３００に代え、あるいは、表示装置３００に加え、映像記録装置を接続するようにしてもよい。
【００２３】
本図に示すように、カメラヘッド２００は、光学系２１０、撮像素子２２０、信号処理部２３０を備えている。なお、カメラヘッド２００ａ、カメラヘッド２００ｂ、カメラヘッド２００ｃとも同じ構成とすることができる。もちろん、それぞれ異なる機能、性能等を有するようにしてもよい。
【００２４】
光学系２１０は、レンズ、シャッタ、絞りおよびこれらの駆動機構等を備えており、撮像対象からの光を適量に調整し、撮像素子２２０に導く。撮像素子２２０は、撮影対象物からの光を電気信号に変換する素子であり、ＣＣＤ、ＣＭＯＳ等を用いることができる。撮像素子２２０を構成する受光素子の中にはダストの付着や結晶欠陥等により正常な信号を出力せず、欠陥画素となるものが存在する。
【００２５】
本実施形態において、欠陥画素は、本来出力されるべき値よりも高い値が出力されることによって生じる白キズ画素と、本来出力されるべき値よりも低い値が出力されることによって生じる黒キズ画素とがあるものとするが、他の欠陥画素を考慮するようにしたり、欠陥の度合いを考慮するようにしてもよい。また、ＲＧＢ毎に白キズ、黒キズを取り扱うようにしてもよい。
【００２６】
信号処理部２３０は、撮像素子２２０が出力するアナログ電気信号をデジタル化し、所定のフォーマットの映像信号に変換して出力する。所定のフォーマットは、例えば、輝度信号、色差信号からなるデジタル映像信号等とすることができる。この際に、圧縮処理等を行なうようにしてもよい。
【００２７】
画像処理装置１００は、入出力処理部１１０、欠陥画素情報収集部１２０、補正対象画素設定部１３０、欠陥画素補正処理部１４０、記憶部１５０を備えている。画像処理装置１００は、演算処理装置、記憶装置、インタフェース等を備えた情報処理装置を用いて構成することができる。なお、本実施形態では、画像処理装置１００における欠陥画素補正処理について説明するが、画像処理装置１００は、輝度補正、色調補正、その他の画像補正をさらに行なうようにしてもよい。
【００２８】
入出力処理部１１０は、カメラヘッド２００から映像データを入力し、表示装置３００に欠陥画素補正後の映像信号を出力する。この際に、必要に応じて、映像信号の圧縮／伸張を行なう。
【００２９】
欠陥画素情報収集部１２０は、各カメラヘッド２００の撮像素子２２０に含まれる欠陥画素の情報を収集して、記憶部１５０の欠陥画素情報１５１に記録する。欠陥画素情報収集部１２０は、種々の手法を用いて、各カメラヘッド２００から欠陥画素の情報を収集することができる。
【００３０】
例えば、カメラヘッド２００の生産工程における検査時に検出されカメラヘッド２００に記録された欠陥画素の情報を、カメラヘッド２００から取得することで収集できる。また、カメラヘッド２００が、欠陥画素の自己診断機能を備え、カメラヘッド２００内に設けられた記憶装置（不図示）に欠陥画素情報を逐次記録している場合には、最新の欠陥画素情報をカメラヘッド２００から取得することで収集できる。この場合、例えば、撮像素子を複数の領域に分割し、領域毎に欠陥画素情報の取得を行なうことで、撮像中であっても、本来の撮像処理への影響を軽減しながら欠陥画素情報を取得することができる。
【００３１】
さらには、欠陥画素情報収集部１２０に欠陥画素の判定機能を備えさせるようにしてもよい。この場合、例えば、検出用画像として全画面が輝度の低い画像および輝度の高い画像をカメラヘッド２００に撮像させ、その映像信号を検査することでカメラヘッド２００毎の白キズおよび黒キズを検出することで収集できる。
【００３２】
また、欠陥画素の情報は、必要に応じて随時更新することができる。更新のタイミングは、例えば、画像処理装置１００の起動時、所定期間毎、カメラヘッド２００が新規に接続されたとき等とすることができる。
【００３３】
図２は、記憶部１５０に記録される欠陥画素情報１５１のデータ構成例を示す図である。本図の例では、欠陥画素毎に、カメラヘッド識別子１５１ａ、画素位置１５１ｂ、欠陥種別１５１ｃ、対象Ｆ（フラグ）を記録するようにしている。
【００３４】
カメラヘッド識別子１５１ａは、その欠陥画素を含むカメラヘッドを特定するための情報である。画素位置１５１ｂは、欠陥画素の撮像素子２２０中の位置を特定するための情報である。位置は、例えば、アドレスや座標等で表わすことができる。欠陥種別１５１ｃは、白キズ（Ｗ）／黒キズ（Ｂ）を識別するための情報である。上述のように、欠陥種別をさらに細分化するようにしてもよい。対象Ｆ１５１ｄは、その欠陥画素を補正対象とするか否かを示す情報であり、補正対象画素設定部１３０によって随時更新される。すなわち、本実施形態では、複数台のカメラヘッド２００に存在する複数個の欠陥画素のうち、補正対象とする欠陥画素を状況に応じて動的に変更する。これによって、補正処理に割り当てるリソースの適正化を図っている。
【００３５】
図１の説明に戻って、補正対象画素設定部１３０は、欠陥画素情報１５１に記録された欠陥画素のうち、補正対象とする欠陥画素を設定する。どの欠陥画素を補正対象とするかは、補正対象設定条件１３１に基づいて定められる。補正対象設定条件１３１は、あらかじめ固定的に定めるようにしてもよいし、ユーザの設定等に応じて変更できるようにしてもよい。補正対象画素設定部１３０が、補正対象設定条件１３１に基づいて補正対象とする欠陥画素を設定する処理の詳細な手順については後述する。
【００３６】
欠陥画素補正処理部１４０は、補正対象となった欠陥画素に対する画像補正を行なう。欠陥画素補正処理部１４０は、記憶部１５０の欠陥画素補正作業領域１５２を作業領域として用いて画像補正を行なう。欠陥画素に対する画像補正は、例えば、周辺画素の画素値の平均値を欠陥画素の画素値とすることで行なうことができる。ただし、本発明において、欠陥画素に対する画像補正の手法は限定されず、種々の手法を用いることができる。
【００３７】
本実施形態に係る撮像システム１０では、画像処理装置１００が欠陥画素に対する画像補正を行なうため、各カメラヘッド２００では、欠陥画素に対する画像補正を行なう必要がない。このため、各カメラヘッド２００の構成を簡易にし、カメラヘッド２００のコストを削減することができる。
【００３８】
次に、本実施形態に係る撮像システム１０の処理動作について、図３のフローチャートを参照して説明する。まず、画像処理装置１００の欠陥画素情報収集部１２０が、各カメラヘッド２００の撮像素子２２０に含まれる欠陥画素情報を収集して、記憶部１５０の欠陥画素情報１５１に記録する（Ｓ１０１）。上述のように、欠陥画素情報の収集は種々の方法を用いることができ、また、種々のタイミングで欠陥画素情報を取得することができる。
【００３９】
そして、各カメラヘッド２００が撮影対象物の撮影を開始し（Ｓ１０２）、画像処理装置１００は、各カメラヘッドからの映像信号を収集する（Ｓ１０３）。収集した映像信号には、欠陥画素が含まれており、補正対象画素設定部１３０が、欠陥画素の中から補正対象とする画素を設定する（Ｓ１０４）。
【００４０】
ここで、補正対象画素設定部１３０が補正対象設定条件１３１に基づいて行なう補正対象画素の設定処理について説明する。まず、補正対象設定条件の最も基本的なパターンである第１パターンについて説明する。ここでは、画像の輝度傾向と欠陥画素の目立ち方との関係に注目する。図４（ａ）は全体的に輝度が低く、図４（ｂ）は全体的に輝度が高い画像を示しており、いずれも領域Ａ内に白キズを有し、領域Ｂ内に黒キズを有している。
【００４１】
図４（ａ）に示すように、全体的に輝度が低い画像においては、白キズが目立ち、図４（ｂ）に示すように、全体的に輝度が高い画像においては、黒キズが目立つことになる。このため、全体的に輝度が低い画像においては、白キズを補正対象とすることで、映像の欠陥を目立たなくすることができ、全体的に輝度が高い画像においては、黒キズを補正対象とすることで、映像の欠陥を目立たなくすることができる。そこで、第１パターンでは、図５のフローチャートに示すような手順にしたがって、補正対象画素の設定処理を行なう。
【００４２】
まず、補正対象画素設定部１３０は、複数台のカメラヘッド２００のうち、処理対象とするカメラヘッド２００を特定する（Ｓ２０１）。そして、特定されたカメラヘッド２００から収集した映像の平均輝度値を算出する（Ｓ２０２）。
【００４３】
そして、算出された平均輝度値が所定の基準値よりも大きい場合は（Ｓ２０３：Ｙｅｓ）、全体的に輝度が高いと判断して、そのカメラヘッド２００の欠陥画素については黒キズを補正対象として設定し（Ｓ２０４）、算出された平均輝度値が所定の基準値よりも大きくない場合は（Ｓ２０３：Ｎｏ）、全体的に輝度が低いと判断して、そのカメラヘッド２００の欠陥画素については白キズを補正対象として設定する（Ｓ２０５）。設定結果は、欠陥画素情報１５１の対象Ｆ１５１ｄに記録する。
【００４４】
以上の判断処理をすべてのカメラヘッド２００に対して行なうことにより（Ｓ２０６）、補正対象画素の設定処理（Ｓ１０４）を行なうことができる。なお、補正対象画素設定処理（Ｓ１０４）は毎フレーム行なってもよいし、所定フレーム毎、シーン変更時等に不定期に行なうようにしてもよい。また、映像平均輝度算出処理（Ｓ２０２）も毎フレーム行なってもよいし、所定フレーム毎、シーン変更時等に不定期に行なうようにしてもよい。例えば、テレビ会議システムのように、映像があまり変化しない場合には、始めに算出した平均輝度値をそのまま使用することができる。
【００４５】
図３のフローチャートの説明に戻って、補正対象画素設定部１３０によって、補正対象画素が設定されると、欠陥画素補正処理部１４０が、補正対象画素として設定された欠陥画素に対して画像補正処理を実行する（Ｓ１０５）。
【００４６】
この際に、欠陥画素補正作業領域１５２を作業領域として用いるが、すべての欠陥画素ではなく、補正対象として設定された欠陥画素に対してのみ補正処理を行なうため、記憶部１５０の記憶領域を圧迫したり、補正処理の負荷が過大となることを防ぐことができる。したがって、補正処理に割り当てるリソースが適正化されることになる。
【００４７】
すなわち、すべての欠陥画素に対して一律に補正処理を行なうとすると、補正処理に必要なリソースが多大な量になるおそれがあるのに加え、あらかじめ欠陥画素の量を見積もってリソースを確保しておかなければならないため、撮像システムのコスト高を招くことになる。これに対して、本実施形態では、映像の品質に悪影響を及ぼすおそれのある欠陥画素に対してのみ補正処理を行なうため、補正処理に割り当てるリソースを削減するとともに、リソースの割り当てを適正化することができる。
【００４８】
さらに、本実施形態の撮像システムでは、画像処理装置１００において、各カメラヘッド２００の欠陥画素に対する補正処理を集中して行なうようにしている。各カメラヘッド２００で個別に補正処理を行なおうとすると、欠陥画素数のばらつきを考慮して各カメラヘッド２００に十分なリソースを用意しておかなければならないのに対し、本実施形態の撮像システムでは、各カメラヘッド２００の欠陥画素を画像処理装置１００内で一括して扱うため、各カメラヘッド２００に含まれる欠陥画素数のばらつきを吸収することができる。このため、不必要にリソースを確保する必要がなくなり、撮像システム全体としてリソースを減らすことができ、補正処理に割り当てるリソースが適正化される。
【００４９】
そして、補正後の映像信号を、それぞれ対応する表示装置３００に出力する（Ｓ１０６）。表示装置３００では、補正後の映像が表示される。撮像システム１０は、以上説明した映像信号収集処理（Ｓ１０３）以降の処理を撮影が終了するまで繰り返す（Ｓ１０７）。
【００５０】
次に、補正対象画素設定部１３０が補正対象設定条件１３１に基づいて行なう補正対象画素の設定処理（Ｓ１０４）の第２パターンについて説明する。第１パターンでは、画面全体の平均輝度値を算出していたが、第２パターンでは、画面を、例えば、図６に示すように複数の領域に分割して、領域毎に平均輝度値を算出する。
【００５１】
本図の例では、画面中央の領域Ａ１、画面左上の領域Ａ２、画面左下の領域Ａ３、画面右下の領域Ａ４、画面右上の領域Ａ５の５つの領域に分割している。そして、領域毎に輝度の高低を判定して、補正対象となる欠陥画素を設定する。
【００５２】
第２パターンでは、画面を複数の領域に分割して、輝度を判定することにより、補正を行なわない欠陥画素による映像の品質低下を一層目立たなくすることができる。
【００５３】
図７は、補正対象画素の設定処理の第２パターンを説明するフローチャートである。まず、補正対象画素設定部１３０は、複数台のカメラヘッド２００のうち、処理対象とするカメラヘッド２００を特定する（Ｓ３０１）。そして、特定されたカメラヘッド２００から収集した映像信号に基づく画面を複数の領域に分割し（Ｓ３０２）、処理対象領域を特定する（Ｓ３０３）。処理対象領域を特定すると、処理対象領域となった領域に含まれる画素の平均輝度値を算出する（Ｓ３０４）
【００５４】
そして、算出された平均輝度値が所定の基準値よりも大きい場合は（Ｓ３０５：Ｙｅｓ）、その領域内の欠陥画素については黒キズを補正対象として設定し（Ｓ３０６）、算出された平均輝度値が所定の基準値よりも大きくない場合は（Ｓ３０５：Ｎｏ）、その領域内の欠陥画素については白キズを補正対象として設定する（Ｓ３０７）。設定結果は、欠陥画素情報１５１の対象Ｆ１５１ｄに記録する。
【００５５】
以上の判断処理をすべて領域に対して行ない（Ｓ３０８）、さらにすべてのカメラヘッド２００に対して行なうことにより（Ｓ３０９）、第２パターンによる補正対象画素の設定処理（Ｓ１０４）を行なうことができる。
【００５６】
次に、補正対象画素設定部１３０が補正対象設定条件１３１に基づいて行なう補正対象画素の設定処理（Ｓ１０４）の第３パターンについて説明する。第１パターンおよび第２パターンでは、画面全体あるいは領域内の画素の平均輝度値に基づいて補正対象とする欠陥画素を設定していたが、第３パターンでは、領域内の動きを検出して補正対象とする欠陥画素を設定する。
【００５７】
すなわち、一般に、映像に変化がある部分は、黒キズや白キズの欠陥画素が含まれていても目立たないのに対し、背景等の映像が動かない部分は黒キズや白キズの欠陥画素が目立つと考えられることから、第３パターンでは、動きのない領域に含まれる欠陥画素を補正対象として設定する。
【００５８】
図８は、補正対象画素の設定処理の第３パターンを説明するフローチャートである。まず、補正対象画素設定部１３０は、複数台のカメラヘッド２００のうち、処理対象とするカメラヘッド２００を特定する（Ｓ４０１）。そして、特定されたカメラヘッド２００から収集した映像信号に基づく画面を複数の領域に分割し（Ｓ４０２）、処理対象領域を特定する（Ｓ４０３）。画面の領域分割は、例えば、第２パターンと同様に行なうことができる。もちろん、画面全体を１つの領域として扱ったり、４分割等としてもよい。
【００５９】
処理対象領域を特定すると、処理対象領域となった領域における動きを検出する（Ｓ４０４）。動きの検出は、既知の手法を用いることができ、例えば、時間的に前後する画像の差分を抽出することで行なうことができる。
【００６０】
そして、検出された動きの量や大きさ等により変化度を評価し、その変化度が所定の基準値よりも大きい場合は（Ｓ４０５：Ｙｅｓ）、その領域内の欠陥画素については、白キズ、黒キズにかかわらず補正対象外とする（Ｓ４０６）。一方、所定の基準値よりも大きくない場合は（Ｓ４０５：Ｎｏ）、その領域内の欠陥画素を、白キズ、黒キズにかかわらず補正対象として設定する（Ｓ４０７）。設定結果は、欠陥画素情報１５１の対象Ｆ１５１ｄに記録する。
【００６１】
以上の判断処理をすべて領域に対して行ない（Ｓ４０８）、さらにすべてのカメラヘッド２００に対して行なうことにより（Ｓ４０９）、第３パターンによる補正対象画素の設定処理（Ｓ１０４）を行なうことができる。
【００６２】
なお、補正対象画素の設定処理（Ｓ１０４）は、上述の第１パターン、第２パターン、第３パターンに限られない。例えば、表示装置３００の種別や性能に応じて補正対象画素を設定するようにしてもよい。すなわち、表示装置３００が、欠陥画素が目立つ機種であれば、その表示装置３００に表示する映像に含まれる欠陥画素を補正対象として設定することができる。例えば、高コントラストの高精細プロジェクタは、特に、暗部における白キズが目立つため、白キズが補正対象となるような補正対象設定条件１３１を用いるようにする。
【００６３】
また、表示する映像の重要度に応じて補正対象画素を設定するようにしてもよい。例えば、閲覧者や閲覧環境等によって、より高い品質の映像表示が要求される表示装置３００に表示される映像に含まれる欠陥画素を優先的に補正対象として設定するような補正対象設定条件１３１を用いることができる。
【００６４】
さらには、画像処理装置１００のスペックや画像処理装置１００とカメラヘッド２００間の通信状況に応じて、補正対象とする欠陥画素の数の上限を設定し、その数内で補正対象となる欠陥画素を設定するようにしてもよい。例えば、映像のリアルタイム性が重要視される場合や、高速度の通信状況が望めない場合等に、欠陥画素に対する補正実行による時間遅れを軽減するために、補正対象とする欠陥画素の数を制限することができる。
【００６５】
以上説明したように、本実施形態によれば、複数台の撮像装置に含まれる欠陥画素に対する補正処理に割り当てるリソースを適正化することができる。
【符号の説明】
【００６６】
１０…撮像システム
１００…画像処理装置
１１０…入出力処理部
１２０…欠陥画素情報収集部
１３０…補正対象画素設定部
１３１…補正対象設定条件
１４０…欠陥画素補正処理部
１５０…記憶部
１５１…欠陥画素情報
１５２…欠陥画素補正作業領域
２００…カメラヘッド
２１０…光学系
２２０…撮像素子
２３０…信号処理部
３００…表示装置
【図１】
2012034111.tif 000003
【図２】
2012034111.tif 000004
【図３】
2012034111.tif 000005
【図４】
2012034111.tif 000006
【図５】
2012034111.tif 000007
【図６】
2012034111.tif 000008
【図７】
2012034111.tif 000009
【図８】
2012034111.tif 000010