(57)【要約】【課題】画像の容量を抑えつつ画素欠陥によるノイズの発生を抑え、また画像処理アルゴリズムの選択肢を広げることが可能な撮像システム及びカメラユニットを提供する。【解決手段】画像データを生成し圧縮するカメラ部３と、圧縮画像データを伸張し画像処理を行い表示可能な状態にして出力する画像処理部４とが分かれて構成されており、イーサネット等の伝送路５を介してカメラ部３の生成した画像データが画像処理部４に送信され画像処理が行われる。【選択図】図１
2008141326.tif 000002
【特許請求の範囲】
【請求項１】
画像データを生成し送信するカメラ部と、
前記カメラ部が送信した前記画像データにデジタル画像処理を行う画像処理部と、
前記カメラ部と前記画像処理部との間の通信データを伝送する伝送路と、
を有し、
前記カメラ部は、
画像データを生成する撮像素子と、
前記撮像素子が生成した画像データを圧縮する圧縮処理部と、
前記圧縮処理部が圧縮した圧縮画像データを前記伝送路を介して前記画像処理部に送信する送信部と、
制御部と、
を有し、
前記制御部は、前記撮像素子が生成する画像データに当該撮像素子の欠陥に起因する画素欠陥が存在する場合に、当該画素欠陥の位置情報を含む欠陥データを前記圧縮画像データに付加して前記送信部に送信させる
撮像システム。
【請求項２】
前記制御部は、前記圧縮処理部に画像データを圧縮させる際に、当該画像データを所定数の画素により構成される所定のブロックに分割し、前記画素欠陥を含むブロックを可逆圧縮させ、前記画素欠陥を含まないブロックを非可逆圧縮させる
請求項１に記載の撮像システム。
【請求項３】
前記制御部は、前記圧縮処理部に、可逆圧縮させたブロックには可逆圧縮されたことを示す可逆圧縮フラグを付加し、非可逆圧縮させたブロックには非可逆圧縮されたことを示す非可逆圧縮フラグを付加して前記圧縮画像データを生成させる
請求項２に記載の撮像システム。
【請求項４】
前記制御部は、前記圧縮処理部に圧縮させる画像データとして、前記撮像素子が生成したベイヤ画像データを使用する
請求項２に記載の撮像システム。
【請求項５】
画像データを生成する撮像素子と、
前記撮像素子が生成した画像データを圧縮する圧縮処理部と、
前記圧縮処理部が圧縮した圧縮画像データを伝送路を介して送信する送信部と、
制御部と、
を有し、
前記制御部は、前記撮像素子が生成する画像データに当該撮像素子の欠陥に起因する画素欠陥が存在する場合に、当該画素欠陥の位置情報を含む欠陥データを前記圧縮画像データに付加して前記送信部に送信させる
カメラユニット。
【請求項６】
画像データを生成し出力するカメラ部と、
外部記録装置と、
を有し、
前記カメラ部は、
画像データを生成する撮像素子と、
前記撮像素子が生成した画像データを圧縮する圧縮処理部と、
制御部と、
を有し、
前記制御部は、前記撮像素子が生成する画像データに当該撮像素子の欠陥に起因する画素欠陥が存在する場合に、当該画素欠陥の位置情報を含む欠陥データを前記圧縮画像データに付加して出力させ、
前記外部記録装置は、前記カメラ部が出力した前記圧縮画像データ及び前記欠陥データを記録する
撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタル画像データを生成する撮像システム及びカメラユニットに関する。
【背景技術】
【０００２】
従来のデジタルスチルカメラや、ビデオカメラ等では、固体撮像素子（ＣＣＤ：Charge Coupled Device、ＣＭＯＳ：Complementary Metal Oxide Semiconductor等）で撮像した生画像（ベイヤ画像）に補間処理を施してＲＧＢの三原色データを生成した後輝度信号と色差信号とに変換してＪＰＥＧやＭＰＥＧ等に圧縮し、記録装置に記録する処理が行われている。
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ここで、上述した従来のデジタルスチルカメラや、ビデオカメラにおいて、画像の各座標毎に一色の情報しか持たないベイヤ画像から、座標毎に赤、青、緑の３色の情報を有するＲＧＢ画像を生成する処理は、補間処理（デモザイク処理）と呼ばれる。しかし、デモザイク処理によって、３色の情報を有するように保管したＲＧＢ画像データの容量は、１色の情報しか有さないベイヤ画像データの要領と比較して、３倍程度に大きくなってしまうため、記憶容量に限界を有するデジタルスチルカメラやビデオカメラにおいて不利である、という不利益があった。
【０００４】
また、固体撮像素子は通常、その製造時に所定の個数以下の欠陥を有している。従来のデジタルスチルカメラやビデオカメラでは、これらの欠陥に起因する画素欠陥を補正する処理を行っている。この画素欠陥の補正処理は、画像の圧縮前に行われるが、画像の圧縮がＪＰＥＧやＭＰＥＧ等の周波数変換を伴う圧縮アルゴリズムで実行された場合には、補正された画素欠陥部は周囲と異なる画素値を有するために、圧縮が正しく行われず、圧縮された画像の伸張時（再生時）に周囲に影響を及ぼしてしまう。この周囲への影響はノイズとなって現れ、このノイズはその視覚的特徴からモスキートノイズと呼ばれ、再生画像の劣化の一因となる。
【０００５】
上述したような各種処理は、従来はデジタルスチルカメラやビデオカメラの内部で行われる。画像処理にはその目的や方式によって様々なアルゴリズムが開発されており、画像の特性や撮影条件に応じて最適なアルゴリズムを選択することによって、より高い画質を得ることもできるようになる。しかし、携帯性や消費電力の観点からデジタルスチルカメラやビデオカメラに搭載される機器資源には限りがあるために、搭載できるアルゴリズムの数が少なかったり、比較的簡単なアルゴリズムしか搭載することができなかったりする、という不利益がある。また、従来のデジタルスチルカメラやビデオカメラの構成では、一度搭載したアルゴリズムの変更を行うことができない、という不利益がある。
【０００６】
本発明は、上述した不利益を解消するために、画像の容量を抑えつつ画素欠陥によるノイズの発生を抑え、また画像処理アルゴリズムの選択肢を広げることが可能な撮像システム及びカメラユニットを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した目的を達成するために、第１の発明の撮像システムは、画像データを生成し送信するカメラ部と、前記カメラ部が送信した前記画像データにデジタル画像処理を行う画像処理部と、前記カメラ部と前記画像処理部との間の通信データを伝送する伝送路と、を有し、前記カメラ部は、画像データを生成する撮像素子と、前記撮像素子が生成した画像データを圧縮する圧縮処理部と、前記圧縮処理部が圧縮した圧縮画像データを前記伝送路を介して前記画像処理部に送信する送信部と、制御部と、を有し、前記制御部は、前記撮像素子が生成する画像データに当該撮像素子の欠陥に起因する画素欠陥が存在する場合に、当該画素欠陥の位置情報を含む欠陥データを前記圧縮画像データに付加して前記送信部に送信させる。
【０００８】
第２の発明のカメラは、画像データを生成する撮像素子と、前記撮像素子が生成した画像データを圧縮する圧縮処理部と、前記圧縮処理部が圧縮した圧縮画像データを伝送路を介して送信する送信部と、制御部と、を有し、前記制御部は、前記撮像素子が生成する画像データに当該撮像素子の欠陥に起因する画素欠陥が存在する場合に、当該画素欠陥の位置情報を含む欠陥データを前記圧縮画像データに付加して前記送信部に送信させる。
【０００９】
第３の発明の撮像システムは、画像データを生成し出力するカメラ部と、外部記録装置と、を有し、前記カメラ部は、画像データを生成する撮像素子と、前記撮像素子が生成した画像データを圧縮する圧縮処理部と、制御部と、を有し、前記制御部は、前記撮像素子が生成する画像データに当該撮像素子の欠陥に起因する画素欠陥が存在する場合に、当該画素欠陥の位置情報を含む欠陥データを前記圧縮画像データに付加して出力させ、前記外部記録装置は、前記カメラ部が出力した前記圧縮画像データ及び前記欠陥データを記録する。
【発明の効果】
【００１０】
本発明によれば、画像の容量を抑えつつ画素欠陥によるノイズの発生を抑え、また画像処理アルゴリズムの選択肢を広げることが可能な撮像システム及びカメラユニットを提供することができる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の撮像システム１００について説明する。
本発明の撮像システム１００では、静止画データあるいは動画データのどちらを生成する撮像システムであってもよい。
本発明の撮像システム１００は、図１に示すように、撮像ユニット１と画像圧縮部２とからなるカメラ部３、画像処理部４を有する。
図１は、撮像システム１００の構成例を示すブロック図である。
【００１２】
カメラ部３は、撮像ユニット１及び画像圧縮部２を有し、画像を撮像してＡ／Ｄ変換、圧縮等の処理を行い、処理した画像データを後述する画像処理部４に送信する。
撮像ユニット１は、図１に示すように、レンズ１１、撮像素子１２、アナログ信号処理部１３を有し、画像の撮像を行うブロックである。
レンズ１１は、撮像素子１２に被写体からの光を集めて通す。
【００１３】
撮像素子１２は、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を有し、レンズ１１が集光した光をアナログの電気信号（画像データ）に変換する。ここで、撮像素子１２が生成した画像データは、図２（ａ）に示すように、各画素につき１色の情報を有するベイヤパターンの画像データである。
図２は、ベイヤ画像データを説明するための図である。
アナログ信号処理部１３は、撮像素子１２が出力したベイヤパターンのアナログ画像データに対し、ゲイン調整等のアナログ処理を行う。
【００１４】
画像圧縮部２は、図１に示すように、Ａ／Ｄ変換部２１、圧縮処理部２２、送信部２３、メモリ２４、ＣＰＵ２５を有する。
Ａ／Ｄ変換部２１は、カメラ部３から出力されたベイヤパターンのアナログ画像データをデジタルベイヤ画像データに変換する。
圧縮処理部２２は、Ａ／Ｄ変換部２１が出力したデジタルベイヤ画像データを符号化して圧縮する。圧縮処理には、ＪＰＥＧ、ＭＰＥＧ等の非可逆圧縮（圧縮前のデータと、圧縮・伸張を経たデータとが完全には一致しないデータ圧縮方法）か、ｌｏｓｓｌｅｓｓ−ＪＰＥＧやＪＰＥＧ２０００等の可逆圧縮（圧縮前のデータと、圧縮・伸張の処理を経たデータが完全に等しくなるデータ圧縮方法）かのいずれかの圧縮方法が使用される。
【００１５】
以下、圧縮処理部２２の画像圧縮処理について詳しく説明する。
圧縮処理部２２は、図２（ａ）に示すように、画像内の各画素が１色の情報を有するベイヤ画像データを、図２（ｂ）〜（ｄ）に示すように、色毎に分割し、分割された色毎の画像データに対して圧縮処理を行う。
【００１６】
また、圧縮処理部２２は、圧縮する対象の画像データ内において、撮像素子１２の欠陥の有無に応じて非可逆圧縮を行うか可逆圧縮を行うかを決定する。
撮像素子１２は、所定の個数以下の欠陥を有する場合がある。撮像素子１２が有する欠陥は、撮像素子１２の製造時に生じる欠陥であり、その位置は個々の撮像素子に固有である。この欠陥は、背景技術において説明したように後述する圧縮（符号化）処理及び伸張（復号）処理の際に画像にノイズを生じさせる原因となる。そこで、欠陥を考慮した圧縮処理及び伸張処理を行うことによりノイズの発生を抑えるために、本発明の撮像システム１００では、生成したベイヤパターンのアナログ画像データに欠陥に関する情報を有する欠陥データが付加されて後述する画像処理部４に送信され、欠陥を補間するための欠陥処理が行われるようになっている。
【００１７】
撮像素子の欠陥による画素欠陥を有する画像データを非可逆圧縮した後に伸張した場合、モスキートノイズと呼ばれるノイズが伸張された画像上に現れやすくなる。モスキートノイズとは、ＪＰＥＧやＭＰＥＧ等、ＤＣＴ（Discrete Cosine Transform：離散コサイン変換）やＷａｖｅｌｅｔ変換等の周波数変換を使用した非可逆圧縮技術によって圧縮された画像に現れるノイズである。モスキートノイズは、周囲と比較して画素値が急激に変化している部位、すなわち物体の境界線付近等に生じやすいノイズであるため、周囲と画素値が異なる画素欠陥部にもモスキートノイズが現れやすい。
【００１８】
このため、圧縮処理部２２では、デジタルベイヤ画像データを、画素欠陥を含む部位とそうでない部位とに分割し、画素欠陥を含む部位に対しては可逆圧縮（ｌｏｓｓｌｅｓｓ−ＪＰＥＧやＪＰＥＧ２０００等）を行うか、或いは無圧縮のままとし、画素欠陥を含まない部位に対しては非可逆圧縮（ＪＰＥＧ、ＭＰＥＧ等）を行う。
【００１９】
一般に、ＪＰＥＧやＭＰＥＧ等の非可逆圧縮を行う場合には、画像データは例えば８画素×８画素によって構成されるブロックに分割され、それぞれのブロック毎に独立して圧縮が行われる。本発明の撮像システム１００においては、圧縮処理部２２は、デジタルベイヤ画像データを図３（ａ）に示すように８×８画素のブロックに分割し、図３（ｂ）に示すように、画素欠陥を含むブロックに対しては上述したように可逆圧縮を行い（或いは無圧縮のままとし）、それ以外のブロックに対しては非可逆圧縮を行う。
図３は、圧縮処理部２２の非可逆圧縮を行う部位と可逆圧縮を行う部位の決定方法の具体例を説明するための図である。
【００２０】
圧縮処理部２２は、上述したように、デジタルベイヤ画像データを、画素欠陥を含むブロックに対しては可逆圧縮（あるいは圧縮なし）を行い、それ以外のブロックに対して非可逆圧縮を行う。圧縮処理部２２の圧縮した画像データの記述方法について以下説明する。
図４は、圧縮処理部２２の圧縮画像データの記述方法を説明するための図である。
図４（ａ）に示すように、画像データを分割した各８画素×８画素のブロックに対してナンバリングした場合に、圧縮された画像データは図４（ｂ）及び（ｃ）に示すような符号化データ（ビットストリーム）形式で記述するとする。すなわち、符号化データには、その先頭から、ヘッダ情報、ブロック０の情報、ブロック１の情報…というように順番に各ブロックの情報が並べられて記述される。
【００２１】
図４において、図４（ｂ）と図４（ｃ）とは異なる記述方法を示している。
まず、図４（ｂ）では、各ブロックの情報には先頭に可逆圧縮を行ったブロックであるか・非可逆圧縮を行ったブロックであるかを示すフラグが付加されている場合を示している。すなわち、例えば、ブロック１等には非可逆圧縮が行われたことを示す「０」、ブロック１０には可逆圧縮が行われたことを示す「１」のフラグが付加されている。
【００２２】
また、図４（ｃ）に示すように、符号化データの先頭、ヘッダの部分に各ブロックの可逆・非可逆圧縮フラグをまとめて記述するようにしてもよい。この場合、可逆・非可逆圧縮フラグ内の順番と、その後の各ブロックの情報の順番とが対応しており、それぞれのブロックが可逆圧縮されたか非可逆圧縮であるかがわかるようになっている。ただし、図４（ｃ）に示した場合では、各ブロックの可逆・非可逆圧縮フラグを全てのブロックが伸張されるまで保持される必要がある。しかし、全てのブロックの可逆・非可逆圧縮フラグをまとめてあるために、符号化データの容量が小さくなるという利点を有する。
なお、本発明の撮像システム１００の圧縮処理部２２の圧縮画像データの記述方法は、上述した方法には限定されない。他の方法で記述してもよい。
圧縮処理部２２は、上述したようにデジタルベイヤ画像データを圧縮する。
【００２３】
送信部２３は、圧縮処理部２２が圧縮処理した圧縮画像データと、後述するメモリ２４に記憶された欠陥データとを、後述する受信部４１に送信するための処理を行う。送信部２３と受信部４１間の通信には、例えばイーサネット（登録商標）等の伝送路５を使用する。
メモリ２４は、撮像素子１２の欠陥データを記憶している。欠陥データとは、欠陥の位置のデータの他に、白色固定の欠陥（白点）であるのか、黒色固定の欠陥（黒点）であるのか、それ以外の色の欠陥であるのか、製造時からある欠陥であるのか、後天的な欠陥（例えば宇宙線等に起因する）であるのか、等の情報を含んでいても良い。
ＣＰＵ２５は、画像圧縮部２の各構成を統括的に制御する。
【００２４】
ここまで説明した構成を含むカメラ部３は、後述する画像処理部４とは独立して構成されている。カメラ部３では、上述したように、画像の圧縮処理のみを行い、デジタル画像処理（ＲＧＢ信号生成や輝度信号・色差信号生成処理等）のような複雑で重い処理を行わないため、必要な構成も少なく、携帯性が損なわれないように構成されている。
【００２５】
画像処理部４は、画像圧縮部２から送信された圧縮画像データと欠陥データを受信し、伸張し、デジタル画像処理を行う。
画像処理部４は、例えばＰＣ（Personal Computer）等、カメラ部３とは独立した情報処理装置であり、伝送路５を介してカメラ部３から送信された圧縮画像データに伸張およびデジタル信号処理を行う。
画像処理部４は、図１に示すように、受信部４１、画像伸張部４２、デジタル信号処理部４３、表示処理部４４、ＣＰＵ４５を有する。
受信部４１は、伝送路５を通じて画像圧縮部２の送信部２３から送信された圧縮デジタルベイヤ画像データと欠陥データを受信する。
【００２６】
画像伸張部４２は、圧縮デジタルベイヤ画像データの伸張処理を行う。
画像伸張部４２は、例えば図４（ｂ）及び（ｃ）に示した記述方法で記述された圧縮画像データを、付加された可逆・非可逆圧縮フラグを基に、圧縮方法に応じた伸張方法で伸張する。
画像伸張部４２は伸張処理によって、画素欠陥を含むブロックに関しては圧縮による劣化が無いデジタルベイヤ画像データ、画素欠陥を含まないブロックに関しては非可逆圧縮により劣化したデジタルベイヤ画像データを得る。
【００２７】
デジタル信号処理部４３は、画像伸張部４２が伸張したデジタルベイヤ画像データに対し、欠陥を補間する欠陥処理を行う。
欠陥処理の方法としては、例えば、画素欠陥の画素値を、所定の数の周囲の画素値を平均することにより算出する単純な方法がある。すなわち、画素欠陥部の画素値は周囲の画素値と類似していると予想できるために、このような方法により画素欠陥を補完することができる。ただし、この方法では、画素欠陥の周囲の画素値のばらつきが大きい場合に、うまく補間することができない。
よりよい欠陥処理の方法としては、例えば、より多くの周囲の画素値を平均したり、画素欠陥部の周辺の画素の周波数分布を利用して補間を行ったり、といった方法がある。ただし、本発明では欠陥処理の詳しい方法については限定しない。
【００２８】
また、デジタル信号処理部４３は、欠陥処理されたデジタルベイヤ画像データを基に輝度信号と式差信号を生成し、更に、自動露光処理、自動焦点処理、色信号処理（ホワイトバランス調整、γ処理等）、輝度信号処理（低周波部分抽出等）等のデジタル画像信号処理を行う。
表示処理部４４は、画像データを表示するための処理を行い出力する。
ＣＰＵ４５は、画像処理部４の各構成に対して統括的な制御を行う。
【００２９】
次に、本発明の撮像システム１００の動作例について説明する。
図５は、撮像システム１００の動作例を説明するためのフローチャートである。
ステップＳＴ１：
撮像素子１２は、レンズ１１を通過した光を基にアナログベイヤ画像データを生成する。
ステップＳＴ２：
アナログ信号処理部１３は、アナログベイヤ画像データに対しゲイン調整等のアナログ信号処理を行う。
【００３０】
ステップＳＴ３：
Ａ／Ｄ変換部２１がアナログベイヤ画像データをアナログ・デジタル変換し、デジタルベイヤ画像データを生成する。
ステップＳＴ４：
圧縮処理部２２がデジタルベイヤ画像データを圧縮し圧縮画像データを生成する。
【００３１】
ステップＳＴ５：
送信部２３が圧縮画像データと欠陥データを伝送路５を介して受信部４１に送信する。
ステップＳＴ６：
受信部４１が圧縮画像データと欠陥データを受信する。
【００３２】
ステップＳＴ７：
画像伸張部４２が圧縮画像データを伸張しデジタルベイヤ画像データを得る。
ステップＳＴ８：
デジタル信号処理部４３がステップＳＴ７において画像伸張部が伸張したデジタルベイヤ画像データのうち、画素欠陥を含むブロックに対して欠陥を補間する欠陥処理を行う。
【００３３】
ステップＳＴ９：
デジタル信号処理部４３が輝度信号・式差信号の生成を含むデジタル画像処理を行う。
ステップＳＴ１０：
表示処理部４４が表示するための処理を行う。
【００３４】
次に、圧縮処理部２２が行う圧縮処理の動作例について説明する。
図６は、圧縮処理部２２の圧縮処理時の動作例を説明するためのフローチャートである。
ステップＳＴ１１：
圧縮処理部２２は、デジタルベイヤ画像データを所定の大きさのブロック、例えば８画素×８画素のブロックに分割する。
ステップＳＴ１２：
圧縮処理部２２は、ステップＳＴ１１において分割されたブロックが、画素欠陥を含むブロックであった場合には、ステップＳＴ１６に進み、そうでない場合はステップＳＴ１３に進む。
【００３５】
ステップＳＴ１３：
圧縮処理部２２は、当該ブロックに対して非可逆圧縮処理を行う。
ステップＳＴ１４：
圧縮処理部２２は、当該ブロックに対して非可逆圧縮フラグを付加する。
【００３６】
ステップＳＴ１５：
圧縮処理部２２は、ステップＳＴ１１において分割された全てのステップにおいて圧縮が終了した場合には圧縮処理を終了し、そうでない場合にはステップＳＴ１８に進む。
【００３７】
ステップＳＴ１６：
圧縮処理部２２は、当該ブロックに対して可逆圧縮処理を行う。
ステップＳＴ１７：
圧縮処理部２２は、当該ブロックに対して可逆圧縮フラグを付加する。
ステップＳＴ１８：
圧縮処理部２２は、次のブロックに圧縮処理を移行してステップＳＴ１２に戻る。
【００３８】
以上説明したように、本発明の撮像システム１００によれば、画像データを生成し圧縮するカメラ部３と、圧縮画像データを伸張し画像処理を行い表示可能な状態にして出力する画像処理部４とが分かれて構成されており、イーサネット（登録商標）等の伝送路５を介してカメラ部３の生成した画像データが画像処理部４に送信され画像処理が行われるようになっているため、カメラ部３の携帯性を損なわずに、画像処理部４において複雑で重い画像処理を行うことができる。また、画像処理部４がカメラ部３から独立しているために、画像処理のアルゴリズムを自由に変更することができ、より効率が良い画像処理を行うことができるようになる。
すなわち、画像処理部４が画像処理を担うことで、カメラ部３の必要資源を少なくすることができ、特にカメラ部３のみを数多く製造したい場合に有利である。また、画像処理部４を適宜取り替えることで、目的にあわせて画像処理アルゴリズムを変更することが可能になる。特に、近年の技術開発によって高周波数、高性能のＣＰＵが安価に入手出来るようになっており、例えば携帯性を求められない等の理由により、画像処理部４に高性能のＣＰＵ４５を搭載可能である場合は、ソフトウェアによってアルゴリズムを実現することで画像処理部４の画像処理方式に柔軟性を持たせることが可能となる。
【００３９】
また、本発明の撮像システム１００によれば、カメラ部３において圧縮処理部２２がデジタル画像データを圧縮する際に、従来のデジタルカメラのようにＲＧＢ画像データ（１つの画素につき３色の情報を有する）を使用せずに、より情報量が少ないベイヤ画像データ（１つの画素につき１色の情報を有する）を圧縮しているため、圧縮画像データの容量を従来と比較して抑えることができ、伝送路５を介した送信の際に伝送路に過負荷がかからないようになっている。
【００４０】
また、本発明の撮像システム１００によれば、撮像素子１２に存在する欠陥による画像データの画素欠陥を含むブロックに対しては圧縮処理部２２は可逆圧縮をし、それ以外のブロックに対して非可逆圧縮を行っているので、画素欠陥を含む画像データを非可逆圧縮し伸張した場合に画素欠陥が周囲に及ぼす影響を抑制し、伸張後の画像データにノイズが現れることを抑止することができる。
【００４１】
本発明は上述した実施形態には限定されない。
すなわち、本発明の実施に際しては、本発明の技術的範囲またはその均等の範囲内において、上述した実施形態の構成要素に関し様々な変更、コンビネーション、サブコンビネーション、並びに代替を行ってもよい。
【００４２】
なお、デジタル信号処理部４３が行う画素欠陥を補間する欠陥処理において、画素欠陥を補間するために画素欠陥の周囲の複数の画素を使用して補間を行うようにしてもよい。具体的な補間方法については本発明では限定しないが、このようにすることにより、より欠陥処理の精度が向上することが期待される。この場合、必要となる周囲の画素の個数は、欠陥処理の方法によって異なるが、例えば、欠陥処理のために画素欠陥の周囲上下左右に３画素ずつが必要であった場合には、画素欠陥が上述した８×８画素のブロックの端のほうに位置していたとすると、圧縮処理部２２が圧縮を行う際に、図７（ａ）に示すようにブロックＢ内の画素欠陥を補間するために必要な画素がブロックＡ内にも存在するために、ブロックＡも可逆圧縮の対象となる。また、図７（ｂ）に示すように、画素欠陥がブロックＢの隅に存在していた場合には、ブロックＡ及びブロックＤも可逆圧縮の対象となる。この場合には、例えば図６のフローチャート中のステップＳＴ１２において、欠陥座標を含むブロックであるか否かを判定するだけでなく、上述したように、画素欠陥の補間に必要な画素を含むブロックをも判定し、ステップＳＴ１６およびＳＴ１７において判定されてブロックに対して可逆圧縮処理及び可逆圧縮フラグ付加を行うようにすればよい。
或いは、図７（ａ）におけるブロックＡのように、画素欠陥を持つブロックに隣接しており、画素欠陥に必要とされる画素を含んでいる場合でも、ブロックＡ自体の範囲内には欠陥が無いため、必要とされている画素が非可逆圧縮処理によって大きく変化することはないと判断し、ブロックＡに対しては非可逆変換を行う、という選択肢も考えられる。
【００４３】
また、画素欠陥周辺の画素の分布状況によっては、送信部２３が圧縮画像データに欠陥データを付加しない構成にすることも可能である。例えば、画素欠陥が黒点の欠陥であり、画素欠陥周辺の画素が黒色がちな分布であった場合には、その欠陥を欠陥として見なさないことにすることも可能である。すなわち、目立たないため修正の必要がない欠陥の周辺部分に対して非可逆圧縮処理を行い、より小さいデータとして転送することも可能である。
具体的には、圧縮処理部２２が画像圧縮時に、画素欠陥周辺の画素値を基に当該画素が目立たないか否かを判定し、目立たないと判定された場合には当該画素欠陥の欠陥データを送信部２３が当該画素欠陥を含むブロックの圧縮画像データに付加しないようにすればよい。
ただし、欠陥データを付加しない変形例は、静止画の生成時にのみ適用することが出来る。動画生成の際には、画像が刻々と変化するため、ある欠陥が常に目立たない可能性は低いからである。
【００４４】
また、本発明の上述した実施形態とは異なる実施例として、上述した実施形態の画像処理部４の代わりに、外部記録装置６を有していてもよい。この場合、上述した実施形態と同様の撮像ユニット１、画像圧縮部２を含むカメラ部３から伝送路５を介して送信された圧縮画像データ及び欠陥データは、外部記録装置６に記録される。外部記録装置６に例えばＨＤＤ、ＭＯ、ＤＶＤ等の可搬性のある記録装置を使用することによって、圧縮画像データ及び欠陥データを容易に持ち運ぶことができ、また圧縮画像データ及び欠陥データがともに記録されているので容易に伸張し画像処理を行うことが可能となる。また、この場合、イーサネット（登録商標）等の伝送路５を介してカメラ部３と外部記録装置６とは通信を行わなくても良く、例えば有線接続によりカメラ部３が画像データ及び欠陥データを外部記録装置６に送信してもよい。
【図面の簡単な説明】
【００４５】
【図１】図１は、撮像システム１００の構成例を示すブロック図である。
【図２】図２は、ベイヤ画像データを説明するための図である。
【図３】図３は、圧縮処理部２２の非可逆圧縮を行う部位と可逆圧縮を行う部位の決定方法の具体例を説明するための図である。
【図４】図４は、圧縮処理部２２の圧縮画像データの記述方法を説明するための図である。
【図５】図５は、撮像システム１００の動作例を説明するためのフローチャートである。
【図６】図６は、圧縮処理部２２の圧縮処理時の動作例を説明するためのフローチャートである。
【図７】図７は、ブロックの端部に画素欠陥が位置し、当該画素欠陥を補間するために必要な画素が他のブロック内にも存在する場合について説明するための図である。
【符号の説明】
【００４６】
１００…撮像システム、１…撮像ユニット、１１…レンズ、１２…撮像素子、１３…アナログ信号処理部、２…画像圧縮部、２１…Ａ／Ｄ変換部、２２…圧縮処理部、２３…送信部、２４…メモリ、２５…ＣＰＵ、３…カメラ部、４…画像処理部、４１…受信部、４２…画像伸張部、４３…デジタル信号処理部、４４…表示処理部、４５…ＣＰＵ、５…伝送路、６…外部記録装置
【図１】
2008141326.tif 000003
【図２】
2008141326.tif 000004
【図３】
2008141326.tif 000005
【図４】
2008141326.tif 000006
【図５】
2008141326.tif 000007
【図６】
2008141326.tif 000008
【図７】
2008141326.tif 000009