(57)【特許請求の範囲】
【請求項１】
複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形で受けて該信号の処理を行なう画像信号処理装置において、該装置は、高解像度の画素データをモニタする場合に、
前記得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、該受けたカラー画像データを色画素ごとに同時化して赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、
該画素補間手段から前記赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、該データの各画素を中心としたその水平走査線上の前後に隣接する該画素と同色の画素のうち、所定数の画素を含む連続したｎ画素領域についてメディアンフィルタ処理を前記３原色信号データの色要素ごとに行ない、該処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段とを有し、
該メディアンフィルタ処理手段は、前記固体撮像素子に欠陥画素があるか否かにかかわらず全ての画素についてメディアンフィルタ処理を行ない、
該装置はさらに、前記メディアンフィルタ処理手段からメディアンフィルタ処理の行なわれた画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定の間引き制御信号に基づき前記メディアンフィルタ処理手段からの３原色信号データを間引いて低解像度の３原色信号データに変換する画素間引き手段を含むことを特徴とする画像信号処理装置。
【請求項２】
複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形で受けて該信号の処理を行なう画像信号処理装置において、該装置は、高解像度の画素データをモニタする場合に、
前記固体撮像素子の複数の画素のうち欠陥のある画素位置を示す位置データを記憶する記憶手段と、
前記得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、該受けたカラー画像データを色画素ごとに同時化して赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、
前記記憶手段から読み出される位置データに基づいて、前記固体撮像素子の複数の画素のうち欠陥のない各画素に対応するタイミングの該画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについてはそのまま出力し、また前記固体撮像素子の複数の画素のうち欠陥のある各画素に対応するタイミングの該画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについては、該欠陥のある各画素を中心としたその水平走査線上の前後に隣接する該画素と同色の画素のうち、所定数の画素を含む連続したｎ画素領域についてメディアンフィルタ処理を前記３原色信号データの色要素ごとに行ない、該処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段とを有し、
該メディアンフィルタ処理手段は、前記固体撮像素子に欠陥画素がある場合には該欠陥画素を中心としたその水平走査線上の前後に隣接する該画素と同色の画素のうち、所定数の要素を含む連続したｎ画素領域についてのみメディアンフィルタ処理を前記３原色信号データの色要素ごとに行ない、
該装置はさらに、前記メディアンフィルタ処理手段からメディアンフィルタ処理の行なわれた画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定の間引き制御信号に基づき前記メディアンフィルタ処理手段からの３原色信号データを間引いて低解像度の３原色信号データに変換する画素間引き手段を含むことを特徴とする画像信号処理装置。
【請求項３】
請求項１または２に記載の画像信号処理装置において、前記固体撮像素子は、高解像度のCCD であることを特徴とする画像信号処理装置。
【請求項４】
複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした高解像度の固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形で受けて該信号の処理を行なう画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置は、高解像度の画素データをモニタする場合に、
前記得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、所定の画素補間制御信号に基づき該受けたカラー画像データを色画素ごとに同時化して赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、
該画素補間手段から前記赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定のメディアンフィルタ処理制御信号に基づき前記３原色信号データの各画素を中心としたその水平走査線上の前後に隣接する該画素と同色の画素のうち、所定数の画素を含む連続したｎ画素領域についてメディアンフィルタ処理を前記３原色信号データの色要素ごとに行ない、該処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段と、
前記画素補間手段への画素補間制御信号を含む制御信号および該メディアンフィルタ処理手段へのメディアンフィルタ処理制御信号を含む制御信号を生成して出力する制御手段とを含み、
該制御手段は、前記メディアンフィルタ処理手段へのメディアンフィルタ処理制御信号により前記固体撮像素子に欠陥画素があるか否かにかかわらず全ての画素についてメディアンフィルタ処理を行なわせ、
前記画像信号処理装置はさらに、前記メディアンフィルタ処理手段からメディアンフィルタ処理の行なわれた画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定の間引き制御信号に基づき前記メディアンフィルタ処理手段からの３原色信号データを間引いて低解像度の３原色信号データに変換する画素間引き手段を含み、
前記制御手段はさらに、該画素間引き手段への間引き制御信号を含む制御信号を生成して出力する間引き制御信号生成手段を含むことを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項５】
請求項４に記載の画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置はさらに、
前記画素間引き手段からの低解像度の画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを実時間で出力する第１の出力端子を含み、
該画像信号処理装置を備えたカメラはさらに、
前記第１の出力端子からの低解像度の画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データの映像を表示する映像モニタの第１のビューファインダを有することを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項６】
請求項４に記載の画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置はさらに、
前記画素間引き手段から低解像度の画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定の変換制御信号に基づき該画素間引き手段からの画素毎の同時化した３原色信号データから画素毎の同時化した輝度信号データＹ、色差信号データR-Y および色差信号データB-Y を生成する色信号変換手段を含み、
前記制御手段はさらに、該色信号変換手段への変換制御信号を含む制御信号を生成して出力する変換制御信号生成手段を含むことを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項７】
請求項６に記載の画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置はさらに、
前記色信号変換手段からの低解像度の画素毎に同時化した輝度信号データＹ、色差信号データR-Y および色差信号データB-Y を実時間で出力する第２の出力端子を含み、
該画像信号処理装置を備えたカメラはさらに、
前記第２の出力端子からの低解像度の画素毎に同時化した輝度信号データＹ、色差信号データR-Y および色差信号データB-Y の映像を表示する映像モニタの第２のビューファインダを有することを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項８】
複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした高解像度の固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形で受けて該信号の処理を行なう画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置は、高解像度の画素データをモニタする場合に、
前記固体撮像素子の複数の画素のうち欠陥のある画素位置を示す位置データを記憶する記憶手段と、
前記得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、所定の画素補間制御信号に基づき該受けたカラー画像データを色画素ごとに同時化して赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、
所定の読み出し制御信号に基づき前記記憶手段から読み出される位置データに基づく所定のメディアンフィルタ処理制御信号に基づき前記固体撮像素子の複数の画素のうち欠陥のない各画素に対応するタイミングの該画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについてはそのまま出力し、また前記固体撮像素子の複数の画素のうち欠陥のある各画素に対応するタイミングの該画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについては、該欠陥のある各画素を中心としたその水平走査線上の前後に隣接する該画素と同色の画素のうち、所定数の画素を含む連続したｎ画素領域についてメディアンフィルタ処理を前記３原色信号データの色要素ごとに行ない、該処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段と、
前記記憶手段への読み出し制御信号を含む制御信号、前記画素補間手段への画素補間制御信号を含む制御信号、および該メディアンフィルタ処理手段へのメディアンフィルタ処理制御信号を含む制御信号を生成して出力する制御手段とを含み、
該制御手段は、前記メディアンフィルタ処理手段へのメディアンフィルタ処理制御信号により前記固体撮像素子に欠陥画素がある場合には該欠陥画素を中心としたその水平走査線上の前後に隣接する該画素と同色の画素のうち、所定数の画素を含む連続したｎ画素領域についてのみメディアンフィルタ処理を前記３原色信号データの色要素ごとに行ない、
前記画像信号処理装置はさらに、前記メディアンフィルタ処理手段からメディアンフィルタ処理の行なわれた画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定の間引き制御信号に基づき前記メディアンフィルタ処理手段からの３原色信号データを間引いて低解像度の３原色信号データに変換する画素間引き手段を含み、
前記制御手段はさらに、該画素間引き手段への間引き制御信号を含む制御信号を生成して出力する間引き制御信号生成手段を含むことを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項９】
請求項８に記載の画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置はさらに、
前記画素間引き手段からの低解像度の画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを実時間で出力する第１の出力端子を含み、
該画像信号処理装置を備えたカメラはさらに、
前記第１の出力端子からの低解像度の画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データの映像を表示する映像モニタの第１のビューファインダを有することを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項１０】
請求項８に記載の画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置はさらに、
前記画素間引き手段から低解像度の画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定の変換制御信号に基づき該画素間引き手段からの画素毎の同時化した３原色信号データから画素毎の同時化した輝度信号データＹ、色差信号データR-Y および色差信号データB-Y を生成する色信号変換手段を含み、
前記制御手段はさらに、該色信号変換手段への変換制御信号を含む制御信号を生成して出力する変換制御信号生成手段を含むことを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項１１】
請求項１０に記載の画像信号処理装置を備えた電子スチルカメラにおいて、
前記画像信号処理装置はさらに、
前記色信号変換手段からの低解像度の画素毎に同時化した輝度信号データＹ、色差信号データR-Y および色差信号データB-Y を実時間で出力する第２の出力端子を含み、
該画像信号処理装置を備えたカメラはさらに、
前記第２の出力端子からの低解像度の画素毎に同時化した輝度信号データＹ、色差信号データR-Y および色差信号データB-Y の映像を表示する映像モニタの第２のビューファインダを有することを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【請求項１２】
請求項４ないし１１のいずれかに記載の画像信号処理装置を備えた電子スチルカメラにおいて、前記固体撮像素子は、高解像度のCCD であることを特徴とする画像信号処理装置を備えた電子スチルカメラ。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は画像信号処理装置およびこの装置を備えた電子スチルカメラに係り、特にたとえば約130 万画素のような多画素数からなる固体撮像素子を用いた高解像度の電子スチルカメラで撮影した高解像度の被写体画像の信号を受けてその映像をNTSCなどの標準テレビジョン方式の標準解像度のモニタにリアルタイムに再生する信号を得る系統内に適用して好適なこの撮影時に固体撮像素子の欠陥画素の影響で発生した偽信号を低減処理する画像信号処理装置およびこの装置を備えた電子スチルカメラに関するものである。
【０００２】
【従来の技術】
一般に、CCD(Charge Coupled Device)などの半導体で形成した固体撮像素子では、半導体の局部的な結晶欠陥などにより光りが入射していない状態で特異なレベルの信号を出力する欠陥画素を生じ、この欠陥画素が画質を劣化させる原因となっていることが知られている。
【０００３】
この欠陥画素に起因する画質劣化をなくすために、一般的には、固体撮像素子の出力信号について、欠陥補正処理（偽信号の低減処理）が行なわれている。
【０００４】
従来、このような欠陥補正処理技術として、たとえば特開平4-235472号公報に開示されるものがある。これに開示される固体撮像素子の画素の欠陥にもとづくデータエラーの補正には、注目画素を中心としたｎ×ｎ画素領域内の全ての画素の信号値の中央値（メディアン）を求めて、これを注目画素の信号値とするメディアンフィルタ処理回路が用いられている。
【０００５】
【発明が解決しようとする課題】
しかしながら、前述のメディアンフィルタ処理回路による欠陥補正処理方法に関しては、複数の走査線（ライン）のデータを記憶する記憶回路を必要とするため、回路規模が大きくなるという問題、および複数のラインのデータについて処理を行なうため、処理に要する時間が長くなるという問題があった。
【０００６】
このため、前述のメディアンフィルタ処理回路による欠陥補正処理方法を、高解像度の電子スチルカメラで撮影した高解像度の被写体画像の映像をNTSCなどの標準テレビジョン方式の解像度のモニタにリアルタイムに再生する際に用いる画像信号処理装置に適用することは困難であった。
【０００７】
本発明はこのような従来技術の欠点を解消し、多画素数の固体撮像素子を用いた高解像度の電子スチルカメラで撮影した高解像度の被写体画像の信号を受けてその映像を標準解像度のモニタにリアルタイムに再生する信号を得る系統内に適用できるとともに、短い処理時間でかつ小さい回路規模にて偽信号を低減処理することのできる画像信号処理装置およびこの装置を備えた電子スチルカメラを提供することを目的とする。
【０００８】
【課題を解決するための手段】
本発明は上述の課題を解決するために、複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形で受けてこの信号の処理を行なう画像信号処理装置において、この装置は、上述の得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、受けたカラー画像データから画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、画素補間手段から画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、受けた各色要素毎に各画素を中心としたその水平走査線上の前後に隣接する所定数の同色画素を含む連続したｎ画素領域についてメディアンフィルタ処理を行ない、この処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段とを有し、このメディアンフィルタ処理手段は、固体撮像素子に欠陥画素があるか否かにかかわらず全ての画素についてメディアンフィルタ処理を行なうことを特徴とする。
【０００９】
また本発明は上述の課題を解決するために、上述の前提と同じ装置は、固体撮像素子の複数の画素のうち欠陥のある画素位置を示す位置データを記憶する記憶手段と、前提における得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、受けたカラー画像データから画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、記憶手段から読み出される位置データに基づいて、固体撮像素子の複数の画素のうち欠陥のない各画素に対応するタイミングの画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについてはそのまま出力し、また固体撮像素子の複数の画素のうち欠陥のある各画素に対応するタイミングの画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについては欠陥のある各画素に対応する各色要素を中心としたその水平走査線上の前後に隣接する所定数の同色要素を含む連続したｎ画素領域についてメディアンフィルタ処理を行ない、この処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段とを有し、このメディアンフィルタ処理手段は、固体撮像素子に欠陥画素がある場合には欠陥画素に対応する色要素を中心としたその水平走査線上の前後に隣接する所定数の同色要素を含む連続したｎ画素領域についてのみメディアンフィルタ処理を行なうことを特徴とする。
【００１０】
さらに本発明は上述の課題を解決するために、複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした高解像度の固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形で受けてこの信号の処理を行なう画像信号処理装置を備えた電子スチルカメラにおいて、画像信号処理装置は、上述の得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、所定の画素補間制御信号に基づき受けたカラー画像データから画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、画素補間手段から画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、所定のメディアンフィルタ処理制御信号に基づき受けた各色要素毎に各画素を中心としたその水平走査線上の前後に隣接する所定数の同色画素を含む連続したｎ画素領域についてメディアンフィルタ処理を行ない、この処理にによる中央値を示す色信号データを出力するメディアンフィルタ処理手段と、画素補間手段への画素補間制御信号を含む制御信号およびメディアンフィルタ処理手段へのメディアンフィルタ処理制御信号を含む制御信号を生成して出力する制御手段とを含み、この制御手段は、メディアンフィルタ処理手段へのメディアンフィルタ処理制御信号により固体撮像素子に欠陥画素があるか否かにかかわらず全ての画素についてメディアンフィルタ処理を行なわせることを特徴とする。
【００１１】
さらにまた、本発明は上述の課題を解決するために、上述の前提と同じ画像信号処理装置を備えた電子スチルカメラにおいて、画像信号処理装置は、固体撮像素子の複数の画素のうち欠陥のある画素位置を示す位置データを記憶する記憶手段と、前提における得られた順に送られてくる画素に基づくディジタル信号の形のカラー画像データを受け、所定の画素補間制御信号に基づき受けたカラー画像データから画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段と、所定の読み出し制御信号に基づき記憶手段から読み出される位置データに基づく所定のメディアンフィルタ処理制御信号に基づき固体撮像素子の複数の画素のうち欠陥のない各画素に対応するタイミングの画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについてはそのまま出力し、また固体撮像素子の複数の画素のうち欠陥のある各画素に対応するタイミングの画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについては欠陥のある各画素に対応する各色要素を中心としたその水平走査線上の前後に隣接する所定数の同色要素を含む連続したｎ画素領域についてメディアンフィルタ処理を行ない、この処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段と、記憶手段への読み出し制御信号を含む制御信号、画素補間手段への画素補間制御信号を含む制御信号、およびメディアンフィルタ処理手段へのメディアンフィルタ処理制御信号を含む制御信号を生成して出力する制御手段とを含み、この制御手段は、メディアンフィルタ処理手段へのメディアンフィルタ処理制御信号により固体撮像素子に欠陥画素がある場合には欠陥画素に対応する色要素を中心としたその水平走査線上の前後に隣接する所定数の同色要素を含む連続したｎ画素領域についてのみメディアンフィルタ処理を行なうことを特徴とする。
【００１２】
本明細書において、用語「高解像度」とは、NTSCなどの標準テレビジョン方式を超える高い解像度を言う。
【００１３】
【発明の実施の形態】
次に添付図面を参照して本発明による画像信号処理装置およびこの装置を備えた電子スチルカメラの実施例について詳細に説明する。
【００１４】
図１には、本発明による画像信号処理装置の適用される電子スチルカメラの第１の実施例が示されている。同図において、電子スチルカメラ１は撮像レンズ10によって撮像して得た被写体画像の電気信号を可視画像として再生部26にて再生するとともに、この電気信号が表す高解像度の画像データを圧縮してメモリカード36へ記憶する装置である。メモリカード36は電子スチルカメラ１本体に着脱可能に装着され、これから伝送されるディジタル画像データを記憶保持可能な状態にして蓄積し、また要求に応じて蓄積したディジタル画像データを出力することのできるカード状半導体記憶装置である。
【００１５】
カメラ１はとくに、そのムービー処理部20が被写体画像の電気信号を表す高解像度信号に含まれる撮像素子12の欠陥画素の影響で発生する偽信号の低減処理を行なうとともに、低減処理の行なわれた高解像度信号を間引いて低解像度信号への変換を行なうから、高解像度の被写体画像の映像を実時間で再生部26を介してモニタ装置29に表示することができる。
【００１６】
図１を参照すると、カメラ１は撮像レンズ10、撮像素子12、前処理回路14、アナログディジタル(A/D) 変換器16、ＹＣ処理部18、ムービー処理部20、後処理回路22、ディジタルアナログ(D/A) 変換器24、40、再生部26、セレクタ28、モニタ装置29、圧縮処理部30、メモリ32、インタフェース(I/F)34 、メモリカード36、制御部38、タイミング信号発生回路42および駆動信号発生回路44から構成されている。
【００１７】
撮像レンズ10は、被写体の光学像を撮像素子12の撮像面に結像する。
【００１８】
撮像素子12は、撮像レンズ10による結像を電気信号に変換して出力する固体撮像素子で、本実施例では高解像度カメラの場合、約130 万画素（表示ドット数、横1280×縦1024ドット）のCCD を使用し、また標準解像度カメラの場合、約40万画素（表示ドット数、横640 ×縦512 ドット）のCCD を使用している。
【００１９】
固体撮像素子の撮像セルアレイには色フィルタ（図示せず）が装着され、駆動信号発生回路44からの駆動信号130 に応動して色変調された画素信号を点順次にて出力100 に出力する。色フィルタの色セグメント配列は適宜のものが使用される。出力100 は前処理回路14の入力に接続されている。
【００２０】
前処理回路14は、入力100 に入力した画像信号を所定レベルまで増幅し、さらに増幅した画像信号にブラックレベル補正、ホワイトバランス補正、ガンマ補正などの処理を施す処理回路であり、処理した画像信号を出力102 に出力する。出力102 はアナログディジタル変換器16の入力に接続されている。
【００２１】
アナログディジタル変換器16は、入力102 に現れたアナログ画像信号をディジタル値に変換する変換回路を有するとともに、ディジタル値に変換した１フレーム分の高解像度のディジタル画像データが蓄積される少なくとも１フレーム分の容量を持つフレームメモリを有している。このフレームメモリに蓄積された画像データは、制御部38の制御120 を受けて出力104 に読み出される。出力104 はＹＣ処理部18およびムービー処理部20の入力に接続されている。
【００２２】
ＹＣ処理部18は、本実施例では、入力104 に現れた高解像度あるいは標準解像度のＲ、ＧおよびＢの画像データを輝度信号データＹおよび色差信号データR-Y、B-Y のデータ形式に変換する変換回路である。ＹＣ処理部18は、出力106 と出力112 の２つの出力を有している。ＹＣ処理部18は、変換した標準解像度の輝度信号データＹおよび色差信号データR-Y、B-Y を出力106 に出力する。またＹＣ処理部18は、変換した標準解像度あるいは高解像度の輝度信号データＹおよび色差信号データR-Y、B-Y をメモリカード36へ記憶するために出力112 に出力する。出力106 は後処理回路22の入力に接続され、また出力112 はセレクタ28の入力に接続されている。
【００２３】
後処理回路22は、入力106 に入力した標準解像度の輝度信号データＹに対して輪郭補正を、また標準解像度の色差信号データR-Y およびB-Y に対して色補正を行う補正回路であり、補正したそれぞれの画像信号を出力108 に出力する。出力108 はディジタルアナログ変換器24の入力に接続されている。
【００２４】
ディジタルアナログ変換器24は、入力108 に入力した画像信号をアナログ値にて表される画像信号に変換し、それを出力110 に出力する。出力110 は再生部26の入力に接続されている。
【００２５】
再生部26は、入力110 に入力した画像信号を、本実施例では、たとえばNTSC方式の映像信号に変換する。再生部26は出力27を有し、これにはモニタ装置29が接続されている。モニタ装置29は、そのNTSC方式の映像信号を可視画像としてスクリーンに表示する画像表示装置である。
【００２６】
なお、モニタ装置がPAL あるいはSECAM 方式であれば、再生部26は、入力110 に入力した画像信号をPAL あるいはSECAM 方式の映像信号に変換する変換回路でよい。モニタ装置29は、カメラ１のビューファインダとして機能し、再生部26との接続27は、有線または無線のいずれでもよく、また固定接続または着脱可能な接続のいずれでもよい。勿論、カメラ１は、この他に光学式のビューファインダを備えていてもよい。
【００２７】
図１を参照すると、セレクタ28は、制御部38の制御を受けて画像データの伝送経路を制御して所望の回路に画像データを転送する制御回路である。セレクタ28は、ＹＣ処理部18で所定のデータ形式に変換した画像データを接続線112 を介して入力し、入力した画像データを接続線114 を介してメモリ32に転送する。
【００２８】
メモリ32は、ビデオRAM などにて構成されており、入力114 に現れた高解像度の画像データを少なくとも１画面に相当する１フレ−ム分を蓄積するフレームメモリである。またメモリ32は、制御部38の制御を受けて蓄積した画像データを出力114 に出力し、セレクタ28を介してその出力116 に接続された圧縮処理部30に転送する。
【００２９】
圧縮処理部30は、制御部38の制御を受けて入力116 に入力した標準解像度あるいは高解像度の画像データに対して２次元直交変換、正規化およびハフマン符号化などの圧縮処理を行う処理回路である。圧縮処理部30はまた、制御部38の制御を受けて圧縮した画像データをセレクタ28を介してその出力118 に接続されたインタフェース34に出力する。インタフェース34は、入力118 に現れた圧縮した画像データなどのデータおよび制御部38から供給される制御信号をメモリカード36に転送し、またメモリカード36から出力された圧縮した画像データなどのデータをセレクタ28に転送する。
【００３０】
図１を参照すると、制御部38は、タイミング信号発生回路42から接続線126 を介して送られる各種タイミング信号に基づいて前述したそれぞれの機能部を制御および管理する制御信号を形成する第１の制御回路（図示せず）を有するとともに、この制御部38はとくに、ムービー処理部20を制御および管理する制御信号を形成する第２の制御回路（図示せず）も有している。
【００３１】
この第２の制御回路は、本実施例では、高解像度CCD からの被写体画像をたとえばNTSC方式のモニタ装置でモニタする場合にとくに、前述したアナログディジタル変換器16のフレームメモリに蓄積される高解像度の画像データを読み出す読み出し制御信号を生成するとともに、このフレームメモリからの読み出された画像データに対して画像処理を施すムービー処理部20を作動させるための制御信号も生成している。
【００３２】
制御部38はまた、図示しないレリーズボタン回路からそのボタンの押下によるシャッタレリーズ信号を受けると、撮影を開始させるための起動信号を形成し、それを制御線124 を介してタイミング信号発生回路42に送る。
【００３３】
タイミング信号発生回路42は、制御部38から起動信号124 を受けると、起動信号124 に同期した駆動信号発生回路44を作動させるための各種タイミング信号を形成し、それらを信号線128 を介して駆動信号発生回路44に出力し、また起動信号124 に同期した制御部38を作動させるための各種タイミング信号を形成し、それらを信号線126 を介して制御部38に出力する同期信号発生回路である。これら各種タイミング信号は、タイミング信号発生回路42内の基準信号発振器（図示せず）から出力されるクロック信号に基づいて形成される。
【００３４】
駆動信号発生回路44は、入力128 から入力する各種タイミング信号に基づいて撮像素子12用の各種駆動信号を形成する回路である。この回路で形成された各種駆動信号は信号線130 を介して撮像素子12に送られる。
【００３５】
図２には、カメラ１のムービー処理部20の内部構成が示されている。
【００３６】
ムービー処理部20は、本実施例では、まず入力104 に現れた高解像度のCCD からの画素データＲ、ＧおよびＢに対し補間処理を行なって各画素ごとに同時化した画素データＲ、ＧおよびＢを得、次に同時化した画素データＲ、ＧおよびＢに含まれるCCD の欠陥画素に基づく偽信号に対し低減処理を行なって低減処理した画素データＲ、ＧおよびＢを得、次に低減処理した画素データＲ、ＧおよびＢに対し間引を行なってNTSC方式のモニタ装置に表示し得るような画素数の画素データＲ、ＧおよびＢに変換し、次に変換した画素データＲ、ＧおよびＢを出力107 に出力するか、あるいは変換した画素データＲ、ＧおよびＢに対しＹＣ変換を行なって輝度信号データＹおよび色差信号データR-Y、B-Y を得て出力106 に出力する画像処理回路である。
【００３７】
ムービー処理部20は、図２に示すように、セレクタ200、第１の乗算器210、第１の加算器220、第１のメディアンフィルタ処理回路230、第１のメモリ238、入力制御部240、出力制御部242、ＹＣ変換器244、第２の乗算器250、第２の加算器260、第２のメディアンフィルタ処理回路270 および第２のメモリ278 を備えている。
【００３８】
セレクタ200 は、入力104 に入力した画素データを、第１の乗算器210、第１の加算器220、第１のメディアンフィルタ処理回路230、第１のメモリ238、ＹＣ変換回路244 からなる第１の変換ルートで変換するか、あるいは第２の乗算器250、第２の加算器260、第２のメディアンフィルタ処理回路270、第２のメモリ278、ＹＣ変換回路244 からなる第２の変換ルートで変換するかを選択するスイッチである。この場合、選択信号は制御部38の第２の制御回路から供給される。
【００３９】
本実施例では、制御部38の第２の制御回路からの読み出し制御信号120 に基づいてアナログディジタル変換器16内のフレームメモリに蓄積されている横1280×縦1024ドットの画素データを、横1280ドットはそのままに、また、縦1024ドットは１ラインおきに読み出してセレクタ200 の入力104 に入力している。なお、このフレームメモリから読み出す制御信号120 は、モニタ装置の解像度に対応するものでよい。
【００４０】
セレクタ200 は、第１の変換ルートを用いる場合、制御部38の第２の制御回路からの選択信号122 を受けて、入力104 に入力した画素データを出力300 に出力し、また第２の変換ルートを用いる場合、入力104 に入力した画素データを出力302 に出力する。出力300 は第１の乗算器210 の入力に、また出力302 は第２の乗算器250 の入力にそれぞれ接続されている。
【００４１】
第１の乗算器210 は、 入力300 から画素データＲ、ＧおよびＢを入力し、入力した画素データＲ、ＧおよびＢのそれぞれに所定の係数を掛け、その掛算の結果を得るもので、たとえばROM などを用いた掛算回路であり、Ｒ乗算器212、Ｇ乗算器214 およびＢ乗算器216 から構成されている。
【００４２】
Ｒ乗算器212 は、入力した画素データＲに所定の係数を掛け、その掛算の結果を出力304 に出力し、Ｇ乗算器214 は、入力した画素データＧに所定の係数を掛け、その掛算の結果を出力306 に出力し、Ｂ乗算器216 は、入力した画素データＢに所定の係数を掛け、その掛算の結果を出力308 に出力する。Ｒ乗算器212 の出力304 は第１の加算器220 のＲ加算器222 の入力に、Ｇ乗算器214 の出力306 は第１の加算器220 のＧ加算器224 の入力に、Ｂ乗算器216 の出力308 は第１の加算器220 のＢ加算器226 の入力にそれぞれ接続されている。
【００４３】
Ｒ加算器222 は、入力304 からの所定のサンプル点の画素データＲと前記所定のサンプル点とは別の所定のサンプル点の画素データＲとを加算する回路であり、その加算の結果を出力310 に出力する。同様に、Ｇ加算器224 およびＢ加算器226 も、画素データＧおよびＢの加算結果を出力312 および314 に出力する。この場合のサンプル点の数はいくつでもよくシステムにより決定すればよい。
【００４４】
上述の説明からわかるように、Ｒ加算器222、Ｇ加算器224 およびＢ加算器226 は、それぞれ画素の補間を行なっており、したがって、各々サンプル点におけるＲ、ＧおよびＢの画素データを出力310、312 および314 に出力する。出力310 は第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路232 の対応する入力に、出力312 は第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路234 の対応する入力に、出力314 は第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路236 の対応する入力にそれぞれ接続されている。
【００４５】
第１の加算器220 にて補間されたR、G、B の３系統の画素データは、次の第１のメディアンフィルタ処理回路230 において、CCD12 の画素の欠陥に基づく偽信号の低減処理が行なわれる。
【００４６】
メディアンフィルタ処理とは、図３(a) において、420 の画素（図中では斜線で示している）に注目したとき、画素420 を中心とした同一ライン上の左右のｎ画素領域内の全ての画素の信号値の中央値（メディアン）を求めて、それを画素420 の信号値とする処理であり、第１の実施例では、この処理を１画面（画像）の全画素について行なうものである。図３(b)、(c) に領域サイズを１×３（450 を参照）にしたときの画素430 に対するメディアンフィルタ処理を示す。
【００４７】
第１のメディアンフィルタ処理回路230 でのメディアンフィルタ処理には、上述したような１×３の領域サイズが用いられる。したがってR、G、B の３系統のメディアンフィルタ処理回路はそれぞれ、少なくとも注目画素と注目画素の同一ライン上の左右の１画素とを記憶する記憶回路と、記憶回路に記憶された３つの画素のレベル値を比較し、レベル値の大きい順に並べ中央値（メディアン）を求める比較回路とを備えるのでよい。
【００４８】
このような処理は、本実施例では制御部38の第２の制御回路からのメディアンフィルタ処理制御信号を生成するための制御信号122 に基づいて入力制御部240 にて形成されるメディアンフィルタ処理制御信号318 に基づいて行なわれる。
【００４９】
このような処理を画素データＲについて行なうのがＲメディアンフィルタ処理回路232 であり、画素データＧについて行なうのがＧメディアンフィルタ処理回路234 であり、画素データＢについて行なうのがＢメディアンフィルタ処理回路236 である。Ｒ、ＧおよびＢメディアンフィルタ処理回路232、234 および236 の出力316 からは、メディアンフィルタ処理の施されたＲ、ＧおよびＢの画素データが出力される。出力316 は、第１のメモリ238 の対応する入力に接続されている。
【００５０】
第１のメモリ238 は、ビデオRAM などにて構成されており、本実施例では、入力316 に現れたＲ、ＧおよびＢそれぞれの画素データ（横1280×縦512 ×色の種類３ドット）を蓄積する容量を有する記憶回路である。
【００５１】
本実施例では、入力316 に現れたＲ、ＧおよびＢの画素データは、制御部38の第２の制御回路からの書き込み制御信号を生成するための制御信号122 に基づいて入力制御部240 にて形成した書き込み制御信号によりメモリ238 に蓄積され、またメモリ238 に蓄積された画素データＲ、ＧおよびＢは、制御部38の第２の制御回路からの読み出し制御信号を生成するための制御信号122 に基づいて出力制御部242 にて形成したインタレース読み出し制御信号によりメモリ238 から読み出されて出力320 に出力される。
【００５２】
詳細には、上述のインタレース読み出し制御信号は、奇数ラインごとまたは偶数ラインごとに１画素おきに画素データを読み出す制御信号である。したがって第１のメモリ238 の出力320 からは、１フレーム分として各々横640 ×縦512 ドットのＲ、ＧおよびＢの画素データが出力される。第１のメモリ238 の出力320 はＹＣ変換器244 の対応する入力に接続されている。
【００５３】
なおこの例では、第１のメモリ238 は各々横1280×縦512 ドット分のＲ、ＧおよびＢの画素データを蓄積することのできる記憶回路としたが、各々横640 ×縦512 ドット分のＲ、ＧおよびＢの画素データを蓄積することのできる記憶回路としてもよい。この場合には、入力制御部240 から送られてくる書き込み制御信号は各ラインごとに１画素おきに画素データを書き込む制御信号でよい。
【００５４】
ＹＣ変換器244 は、選択回路およびＹＣ変換回路から構成され、選択回路は第１のメモリ238 からの画素データを用いるか、あるいは第２のメモリ278 からの画素データを用いるかを選択するスイッチ回路であり、制御部38からの切替信号122 に基づき、どちらかが選択される。選択された第１のメモリ238 あるいは第２のメモリ278 からの画素データＲ、ＧおよびＢは、ＹＣ変換回路に送られるとともに、その出力107 から出力される。
【００５５】
ＹＣ変換回路は、たとえば乗算器、加算器、減算器などにて構成され、選択回路から画素データＲ、ＧおよびＢを入力し、入力した画素データＲ、ＧおよびＢそれぞれを用い、制御部38の第２の制御回路からのＹＣ変換制御信号を生成するための制御信号122 に基づいて出力制御部340 にて形成したＹＣ変換制御信号により輝度信号データＹ（横640 ×縦512 ドット）および色差信号データR-Y、B-Y （それぞれ横640 ×縦512 ドット）のデータ形式に変換する回路である。この変換したデータはその出力106 から出力される。
【００５６】
図２を参照すると、入力制御部240 は、前に少し触れたように、図１に示す制御部38の第２の制御回路からの書き込み制御信号を生成するための制御信号122 に基づいて第１のメモリ238 および第２のメモリ278 への書き込み制御信号を形成する制御回路である。
【００５７】
入力制御部240 はまた、制御部38の第２の制御回路からのメディアンフィルタ処理制御信号を生成するための制御信号122 に基づいて第１および第２のメディアンフィルタ処理回路230 および270 へのメディアンフィルタ処理制御信号318 を形成する制御回路である。この第１の実施例では、メディアンフィルタ処理制御信号318 は１画面の全画素について低減処理を行なう制御信号である。
【００５８】
また、出力制御部242 は、前に少し触れたように、制御部38の第２の制御回路からの読み出し制御信号を生成するための制御信号122 に基づいて第１のメモリ238 および第２のメモリ278 へのインターレースあるいはノンインターレース読み出し制御信号などを形成する制御回路である。出力制御部242 はまた、制御部38の第２の制御回路からのＹＣ変換制御信号を生成するための制御信号122 に基づいてＹＣ変換器360 へのＹＣ変換制御信号などを形成する制御回路である。
【００５９】
図１に示すように、ディジタルアナログ変換器40は、入力107 からのディジタル画像データＲ、ＧおよびＢをアナログ値にて表される画像信号に変換し、それをたとえば、モニタ装置がライン数が525 本、フィールド周波数が60Hzの525/60方式の RGBモニタ装置、ライン数が625 本、フィールド周波数が50Hzの625/50方式のRGB モニタ装置あるいは上記ライン数よりも少ないライン数からなる低解像度のRGB モニタ装置（いずれも図示せず）などに出力する。
【００６０】
図２に戻って、第２の乗算器250 は、前述した第１の乗算器210 と同じ機能を有し、第２の加算器260 は、前述した第１の加算器220 と同じ機能を有し、第２のメディアンフィルタ処理回路270 は、前述した第１のメディアンフィルタ処理回路230 と同じ機能を有し、第２のメモリ278 は、前述した第１のメモリ238 と同じ機能を備えているので、上記各部の説明は省く。
【００６１】
図２は、上述したように第１と第２の変換ルートを有する構成になっているから、基本的に、第１の変換ルートにより被写体の画像をモニタに表示しているときは、第２の変換ルートは被写体の画像の変換処理を行い、また第２の変換ルートにより被写体の画像をモニタに表示しているときは、第１の変換ルートは被写体の画像の変換処理を行うことができる。
【００６２】
また図２において、たとえば、第２の変換ルートの第２の乗算器250 、第２の加算器260 および第２のメディアンフィルタ処理回路270 を含まず、第１のメディアンフィルタ処理回路230 の出力316 を第２のメモリ278 の入力に接続する構成とすることで、基本的に図２と同様に、モニタへの被写体の画像の表示、および被写体の画像の変換処理を各々独立に行うことができる。
【００６３】
また図２において、たとえば、第２の変換ルートの第２の乗算器250 、第２の加算器260 、第２のメディアンフィルタ処理回路270 および第２のメモリ278 を含まない第１の変換ルートのみの構成とし、モニタに被写体の画像を表示を行っているときは、被写体の画像の変換処理を行わず、また被写体の画像の変換処理を行っているときは、モニタに被写体の画像の表示を行わないことでもよい。
【００６４】
また、図１および図２において、アナログディジタル変換器16のフレームメモリを介さずに、アナログディジタル変換器16から直接画素データを第１の乗算器210 および第２の乗算器250 に送る構成でもよい。
【００６５】
次に、図２の各部に現れる画素データを図４ないし図７に示し、ムービー処理部20の各部の信号処理の方法について詳細に説明する。図４は、ＧストライプRB完全市松色フイルタ配列による高解像度CCD からの表示ドット、すなわち横1280×縦1024ドット構成を、説明の都合上、表示ドットを減らし、横８×縦４ドット構成とし、それらの画素データがムービー処理部20の各部により処理され現れた画素データを示したものである。
【００６６】
図５(a) には図４(a) の各々画素位置におけるレベル値の例が、図５(b) には図４(b) の各々画素位置におけるレベル値が、図５(c) には図４(c) の各々画素位置におけるレベル値が、図５(d) には図５(c) の状態において偽信号の低減処理を施したときのレベル値が示されている。
【００６７】
図５(a) のNO１ラインの表示ドット番号４および５のレベル値「0」 は、この例ではCCD のNO１ラインの表示ドット番号４および５が欠陥画素であるためにそれらから出力されたレベル値が「0」 であることを示している。
【００６８】
また図６は、RGB ストライプ色フイルタ配列による高解像度CCD からの表示ドット、すなわち横1280×縦1024ドット構成を、説明の都合上、表示ドットを減らし、横６×縦４ドット構成とし、それらの画素データがムービー処理部20の各部により処理され現れた画素データを示したものである。
【００６９】
図７(a) には図６(a) の各々画素位置におけるレベル値の例が、図７(b) には図６(b) の各々画素位置におけるレベル値が、図７(c) には図６(c) の各々画素位置におけるレベル値が、図７(d) には図７(c) に状態において偽信号の低減処理を施したときのレベル値が示されている。
【００７０】
図７(a) のNO１ラインの表示ドット番号４および５のレベル値「0」 は、この例ではCCD のNO１ラインの表示ドット番号４および５が欠陥画素であるためにそれらから出力されたレベル値が「0」 であることを示している。
【００７１】
図４ないし図７において、横方向の番号は、ライン方向の表示ドットの番号を示し、また縦方向の番号は、ライン番号を示す。
【００７２】
まず、ＧストライプRB完全市松色フイルタ配列の高解像度CCD により出力された画素データの信号処理の方法について、図１〜図５を参照して説明する。
【００７３】
図１に示すＧストライプRB完全市松色フイルタ配列の高解像度CCD （撮像素子12）により出力された上述した画素位置に欠陥画素を含む画素信号は、前処理回路14によりガンマ補正などの処理が施されてアナログディジタル変換器16に供給され、アナログディジタル変換器16により前処理されたアナログ画像信号がディジタル値に変換され、ディジタル値に変換された画素データは、制御部38の書き込み制御信号に基づき、アナログディジタル変換器16内に含まれるフレームメモリに図４(a) に示すように蓄積される。前述したように、この場合の図４(a) に示す各画素位置のレベル値は図５(a) に例として示されている。
【００７４】
フレームメモリに蓄積された画素データは、制御部38からの読み出し制御信号により１ラインおきに読み出され、１ラインおきに読み出された画素データＲ、Ｇ、およびＢ（図４(b) を参照、これは図４(a) のNO1 ラインとNO３ラインの画素データを読み出した図である）は、セレクタ200 を介して第１の乗算器210 に送られる。この場合の図４(b) に示す各画素位置のレベル値は図５(b) に示されている。
【００７５】
第１の乗算器210 のＲ乗算器212 は、本実施例では、入力する画素データRnに係数１、3/4、1/2、1/4のいずれかを掛け、その結果を第１の加算器220 のＲ加算器222 に出力する。また、第１の乗算器210 のＧ乗算器214 、Ｂ乗算器216 も同様に、本実施例では入力する画素データGn、 画素データBnに係数１、3/4、1/2、1/4のいずれかを掛け、その結果を第１の加算器220 のＧ加算器224、Ｂ加算器226 にそれぞれ出力する。
【００７６】
第１の加算器220 のＲ加算器222 は、たとえば、まずR1に０を加えてR11 を作成し、次にR13/4 にR51/4 を加えてR22 を作成し、次にR11/2 にR51/2 を加えてR33 を作成し、次にR11/4 にR53/4 を加えてR44 を作成し、次にR5に０を加えてR55 を作成し、このような方法により順次Rnn を作成し、それを第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路232 に出力する。
【００７７】
第１の加算器220 のＧ加算器224 は、たとえば、まずG01/2 （この場合の画素データG0はこの例ではR1の左側にあるとみなすとともに、そのレベル値をこの例では「1」 としている）にG21/2 を加えてG11 を作成し、次にG2に０を加えてG22 を作成し、次にG21/2 にG41/2 を加えてG33 を作成し、次にG4に０を加えてG44 を作成し、このような方法によりGnn を順次作成し、それを第１のメディアンフィルタ処理回路230 のＧメディアンフィルタ処理回路234 に出力する。
【００７８】
第１の加算器220 のＢ加算器226 は、たとえば、まずB01/2 （この場合の画素データB0はこの例ではR1の左側２つ目にあるとみなすとともに、そのレベル値をこの例では「1」 としている）にB31/2 を加えてB11 を作成し、次に、B01/4 にB33/4 を加えてB22 を作成し、次にB3に０を加えてB33 を作成し、次に、B33/4 にB71/4 を加えてB44 を作成し、次にB31/2 にB71/2 を加えてB55 を作成し、次にB31/4 にB73/4 を加えてB66 を作成し、次にB7に０を加えてB77 を作成し、このような方法により順次Bnn を作成し、それを第１のメディアンフィルタ処理回路230 のＢメディアンフィルタ処理回路236 に出力する。
【００７９】
このように第１の加算器220 から出力される画素データRnn、Gnn、Bnn は、たとえば、図４(c) に示すようになり、またこの場合のレベル値は図５(c) のようになる。
【００８０】
上記の説明および図４(b)、(c) からわかるように、たとえば画素データＲについては、R11、R55 以外のR22、R33、R44、R66、R77、R88 が補間画素であり、画素データＧについては、G22、G44、G66、G88 以外のG11、G33、G55、G77 が補間画素であり、画素データＢについては、B33、B77 以外のB11、B22、B44、B55、B66、B88 が補間画素である。このような補間画素の作成方法については、システムによりあらかじめ決めておけばよい。
【００８１】
次に説明する第１のメディアンフィルタ処理回路230 における処理についてはこの例では、図５(c) に示す左側の画素のレベル値の図示しない１つ左側の画素のレベル値を「1」 としている。
【００８２】
Ｒ画素について説明すると、まず注目画素をNO１ラインのNO１表示ドットとしたとき、Ｒメディアンフィルタ処理回路232 の記憶回路には、NO１表示ドットの図示されない１つ左側の表示ドットとNO１表示ドットとNO１表示ドットの１つ右側のNO２表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。
【００８３】
比較回路はNO１表示ドットの１つ左側の表示ドットのレベル値「1」 とNO１表示ドットのレベル値「1」 とNO２表示ドットのレベル値「3/4」 と比較し、レベル値の大きい順つまり「1」、「1」、「3/4」 の順に並べ、その中央値である「1」 のデータを求め、この求めた中央値のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【００８４】
このようにNO１表示ドットを注目画素とした処理が終了すると、処理回路232 は次にNO２表示ドットを注目画素とする処理に入る。この処理においても上述のような処理が行なわれる。ただし、対象となる表示ドットはNO１〜NO３表示ドットである。同様な処理にてNO３〜NO４表示ドットを注目画素とした処理が終了すると、処理回路232 は次にCCD の欠陥画素に基づくNO５表示ドットを注目画素とする処理に入る。
【００８５】
欠陥画素に基づくNO５表示ドットを注目画素とする処理について説明すると、処理回路232 の記憶回路には、NO４表示ドットとNO５表示ドットとNO６表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは、読み出されて比較回路に送られる。比較回路は、NO４表示ドットのレベル値「1/4」 とNO５表示ドットのレベル値「0」 とNO６表示ドットのレベル値「1/4」 と比較し、レベル値の大きい順つまり「1/4」、「1/4」、「0」 の順に並べ、その中央値である「1/4」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【００８６】
このように注目画素におけるレベル値「0」 がメディアンフィルタ処理によるレベル値「1/4」 になる、つまりこの回路により偽信号の低減処理が行なわれたことになる。このような方法により順次Ｒ画素における注目画素に対するメディアンフィルタ処理を施したデータを求め、それを第１のメモリ238 に出力する。
【００８７】
またＧおよびＢメディアンフィルタ処理回路234 および236 も同様に、上述した方法によりＧおよびＢ画素における注目画素に対するメディアンフィルタ処理を施したデータを求め、それを第１のメモリ238 に出力する。これにより第１のメモリ238 には図４(c) に示す各画素配置の画素データが図５(d) に示すレベル値にて記憶される。
【００８８】
このようにして第１のメモリ238 に蓄積された画素データRnn、Gnn、Bnn は、本実施例では、出力制御部242 の読み出し制御信号に基づいて第１のメモリ238 から読み出されＹＣ変換器244 に送られる。このＹＣ変換器244 は、第１のメモリ238 からの画素データRnn、Gnn、Bnn を用い、たとえば、0.3Rnn+0.59Gnn+0.11Bnnの演算から輝度信号Ynn を作成し、また、0.7Rnn-0.59Gnn-0.11Bnnの演算から色差信号Rnn-Ynn を作成し、さらに-0.3Rnn-0.59Gnn+0.89Bnn の演算から色差信号Bnn-Ynn を作成し、それぞれ作成した信号を出力106 に出力する。
【００８９】
次にRGB ストライプ色フイルタ配列の高解像度CCD により出力された画素データの信号処理方法について図１〜図３および図６〜図７を参照して説明する。
【００９０】
図１に示すRGB ストライプ色フイルタ配列の高解像度CCD （撮像素子12）により出力された上述した画素位置に欠陥画素を含む画素信号は、前処理回路14によりガンマ補正などの処理が施されてアナログディジタル変換器16に送られ、アナログディジタル変換器16により前処理したアナログ画像信号がディジタル値に変換され、ディジタル値に変換された画素データは、制御部38の書き込み制御信号に基づき、アナログディジタル変換器16内に含まれるフレームメモリに図６(a) に示すように蓄積される。前述したように、この場合の図６(a) に示す各画素位置のレベル値は図７(a) に例として示されている。
【００９１】
フレームメモリに蓄積された画素データは、制御部38の読み出し制御信号により１ラインおきに読み出され、１ラインおきに読み出されたRGB 画素データ（図６(b) を参照、これは図６(a) のNO1 ラインとNO３ラインの画素データを読み出した図である）は、セレクタ200 を介して第１の乗算器210 に送られる。この場合の図６(b) に示す各画素位置のレベル値は図７(b) に示されている。
【００９２】
第１の乗算器210 のＲ乗算器212 は、本実施例では、入力する画素データRnに係数１、2/3、1/3のいずれかを掛け、その結果を第１の加算器220 のＲ加算器222 に出力する。また第１の乗算器210 のＧ乗算器214 、Ｂ乗算器216 も同様に、本実施例では、入力する画素データGn、 画素データBnに係数１、2/3、1/3のいずれかを掛け、その結果を第１の加算器220 のＧ加算器224、Ｂ加算器226 にそれぞれ出力する。
【００９３】
第１の加算器220 のＲ加算器222 は、たとえば、まずR1に０を加えてR11 を作成し、R12/3 にR41/3 を加えてR22 を作成し、次にR11/3 にR42/3 を加えてR33 を作成し、次にR4に０を加えてR44 を作成し、このような方法により順次Rnn を作成し、それを第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路232 に出力する。
【００９４】
第１の加算器220 のＧ加算器224 は、たとえば、まずG01/3 （この場合の画素データG0はこの例ではR1の左側２つ目にあるとみなすとともに、そのレベル値をこの例では「1」 としている）にG22/3 を加えてG11 を作成し、次にG2に０を加えてG22 を作成し、次にG22/3 にG51/3 を加えてG33 を作成し、次にG21/3 にG52/3 を加えてG44 を作成し、次にG5に０を加えてG55 を作成し、このような方法により順次Gnn を作成し、それを第１のメディアンフィルタ処理回路230 のＧメディアンフィルタ処理回路234 に出力する。
【００９５】
第１の加算器220 のＢ加算器226 はまた、たとえば、まずB02/3 （この場合の画素データB0はこの例ではR1の左側にあるとみなすとともに、そのレベル値をこの例では「1」 としている）にB31/3 を加えてB11 を作成し、次にB01/3 にB32/3 を加えてB22 を作成し、次にB3に０を加えてB33 を作成し、次にB32/3 にB61/3 を加えてB44 を作成し、次にB31/3 にB62/3 を加えてB55 を作成し、次にB6に０を加えてB66 を作成し、このような方法により順次Bnn を作成し、それを第１のメディアンフィルタ処理回路230 のＢメディアンフィルタ処理回路236 に出力する。
【００９６】
これにより第１の加算器220 から出力される画素データRnn、Gnn、Bnn は、たとえば、図６(c) に示すようになり、またこの場合のレベル値は図７(c) のようになる。
【００９７】
上記の説明および図６(c)、(d) からわかるように、たとえば画素データＲについては、R11、R44 以外のR22、R33、R55、R66 が補間画素であり、画素データＧについては、G22、G55 以外のG11、G33、G44、G66 が補間画素であり、画素データＢについては、B33、B66 以外のB11、B22、B44、B55 が補間画素である。このような補間画素の作成方法については、あらかじめシステムにより決めておけばよい。
【００９８】
次に説明する第１のメディアンフィルタ処理回路230 における処理においてはこの例では、図７(c) に示す左側の画素のレベル値の図示しない１つ左側の画素のレベル値を「1」 としている。
【００９９】
Ｒ画素について説明すると、まず注目画素をNO１ラインのNO１表示ドットとしたとき、Ｒメディアンフィルタ処理回路232 の記憶回路には、NO１表示ドットの図示されない１つ左側の表示ドットとNO１表示ドットとNO１表示ドットの１つ右側のNO２表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。
【０１００】
比較回路は、NO１表示ドットの１つ左側の表示ドットのレベル値「1」 とNO１表示ドットのレベル値「1」 とNO２表示ドットのレベル値「2/3」 と比較し、レベル値の大きい順つまり「1」、「1」、「2/3」 の順に並べ、その中央値である「1」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【０１０１】
このようにNO１表示ドットを注目画素とした処理が終了すると、処理回路232 は次にNO２表示ドットを注目画素とする処理に入る。この処理においても上述のような処理が行なわれる。ただし、対象となる表示ドットはNO１〜NO３表示ドットである。同様な処理にてNO２〜NO３表示ドットを注目画素とした処理が終了すると、処理回路232 は次にCCD の欠陥画素に基づくNO４表示ドットを注目画素とする処理に入る。
【０１０２】
欠陥画素に基づくNO４表示ドットを注目画素とする処理について説明すると、Ｒメディアンフィルタ処理回路232 の記憶回路にはNO３表示ドットとNO４表示ドットとNO５表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。比較回路はNO３表示ドットのレベル値「1/3」 とNO４表示ドットのレベル値「0」 とNO５表示ドットのレベル値「1/3」 と比較し、レベル値の大きい順つまり「1/3」、「1/3」、「0」 の順に並べ、その中央値である「1/3」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【０１０３】
このように注目画素におけるレベル値「0」 がメディアンフィルタ処理によるレベル値「1/3」 になる、つまりこの回路により偽信号の低減処理が行なわれたことになる。このような方法により順次Ｒ画素における注目画素に対するメディアンフィルタ処理を施したデータを作成し、それを第１のメモリ238 に出力する。
【０１０４】
ＧおよびＢメディアンフィルタ処理回路234 および236 も同様に、ＧおよびＢ画素における注目画素に対するメディアンフィルタ処理を施したデータを求め、それを第１のメモリ238 に出力する。これにより第１のメモリ238 には図６(c) に示す各画素配置の画素データが図７(d) に示すレベル値にて記憶される。
【０１０５】
このように第１のメモリ238 に蓄積された画素データRnn、Gnn、Bnn は、出力制御部242 の読み出し制御信号に基づいて第１のメモリ238 から読み出されＹＣ変換器244 に送られる。ＹＣ変換器244 は第１のメモリ238 からの画素データRnn、Gnn、Bnn を用い、たとえば0.3Rnn+0.59Gnn+0.11Bnnの演算から輝度信号Ynn を作成し、また0.7Rnn-0.59Gnn-0.11Bnnの演算から色差信号Rnn-Ynn を作成し、さらに-0.3Rnn-0.59Gnn+0.89Bnn の演算から色差信号Bnn-Ynn を作成し、それぞれ作成した信号を出力106 に出力する。
【０１０６】
第１の実施例の動作を説明する。
【０１０７】
まずカメラ１の撮像素子12が標準解像度のCCD(表示ドット数、横640 ×縦512 ドット) であり、このCCD12 から出力された画素信号がNTSC方式の映像信号に変換されモニタに表示されるまでの動作について説明する。
【０１０８】
撮像レンズ10による被写体の光学像は、標準解像度のCCD12 の撮像面に結像される。CCD12 は、その結像の横640 ×縦512 ドットの画素を走査してその画素信号を前処理回路14に送る。前処理回路14は、入力した画像信号を所定のレベルまで増幅し、さらに、この増幅した画像信号にブラックレベル補正、ホワイトバランス補正、ガンマ補正などの処理を行いアナログディジタル変換器16に送る。
【０１０９】
アナログディジタル変換器16は、入力したアナログ画像信号をディジタル値に変換し、さらにディジタル値に変換した画像データをアナログディジタル変換器16内のフレームメモリに蓄積する。このフレームメモリに蓄積された画像データは制御部38からのインラレース方式の読み出し制御信号により読み出されＹＣ処理部18に送られる。
【０１１０】
ＹＣ処理部18は、入力した画像データＲ、ＧおよびＢを輝度信号データＹおよび色差信号データR-Y、B-Y のデータ形式に変換して後処理回路22に送る。後処理回路22は、入力した輝度信号データＹに対し輪郭補正を行い、また入力した色差信号データR-Y およびB-Y に対し色補正を行い、その補正した画像信号をディジタルアナログ変換器24に送る。
【０１１１】
ディジタルアナログ変換器24は、入力した画像信号をアナログ値にて表される画像信号に変換し再生部26に送る。再生部26は、入力した画像信号をNTSC方式の映像信号に変換しNTSC方式のモニタ装置に送る。モニタ装置は、カメラ１からの被写体の画像を表示する。
【０１１２】
次に、カメラ１の撮像素子12がＧストライプRB完全市松フイルタの高解像度のCCD(表示ドット数、 横1280×縦1024ドット) であり、このCCD12 から出力された画素信号がNTSC方式の映像信号に変換されモニタに表示されるまでの動作について説明する。CCD12 の欠陥画素の位置は前述したのと同じ位置である。
【０１１３】
撮像レンズ10による被写体の光学像は、高解像度のCCD12 の撮像面に結像される。CCD12 は、その結像の横1280×縦1024ドットの画素を走査してその画素信号を前処理回路14に送る。前処理回路14は、入力した画像信号を所定のレベルまで増幅し、さらにこの増幅した画像信号にブラックレベル補正、ホワイトバランス補正、ガンマ補正などの処理をしてアナログディジタル変換器16に送る。
【０１１４】
アナログディジタル変換器16は、入力したアナログ画像信号をディジタル値に変換し、さらにディジタル値に変換した画像データをアナログディジタル変換器16内のフレームメモリに、本実施例では120ms の時間で蓄積する。CCD12 からの横1280×縦1024ドットの画素データは、図４(a) に示すような画素配列でフレームメモリに蓄積される。この場合の図４(a) に示す各画素のレベル値は図５(a) に示されている。
【０１１５】
このようにフレームメモリに蓄積された画像データは、制御部38の読み出し制御信号により１ラインおきに読み出され、この読み出された画素データＲ、Ｇ、およびＢ（図４(b) 、図５(b) 参照）はセレクタ200 を介し第１の乗算器210 に送られる。第１の乗算器210 のＲ乗算器212 は、入力した画素データRnに１、3/4、1/2、1/4いずれかの係数を掛け第１の加算器220 のＲ加算器222 に送る。また、第１の乗算器210 のＧ乗算器214 、Ｂ乗算器216 も同様に、入力した画素データGn、 画素データBnに１、3/4、1/2、1/4いずれかの係数を掛け第１の加算器220 のＧ加算器224、Ｂ加算器226 にそれぞれ送る。
【０１１６】
Ｒ加算器222 は、Ｒ乗算器212 からのR1とＲ加算器222 内部の０を加えR11 を作成し、次にＲ乗算器212 からのR13/4 とR51/4 を加えR22 を作成し、次にＲ乗算器212 からのR11/2 とR51/2 を加えR33 を作成し、次にＲ乗算器212 からのR11/4 とR53/4 を加えR44 を作成し、次にＲ乗算器212 からのR5とＲ加算器222 内部の０を加えR55 を作成し、このように順次Rnn を作成し第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路232 に送る。
【０１１７】
またＧ加算器224 は、Ｇ乗算器214 からのG21/2 とＧ加算器224 内部のG01/2 を加えG11 を作成し、次にＧ乗算器214 からのG2とＧ加算器224 内部の０を加えG22 を作成し、次にＧ乗算器214 からのG21/2 とG41/2 を加えG33 を作成し、次にＧ乗算器214 からのG4とＧ加算器224 内部の０を加えG44 を作成し、このようにGnn を順次作成し第１のメディアンフィルタ処理回路230 のＧメディアンフィルタ処理回路234 に送る。
【０１１８】
またＢ加算器226 は、Ｂ乗算器216 からのB31/2 とＢ加算器226 内部のB01/2 を加えB11 を作成し、次に、Ｂ乗算器216 からのB33/4 とＢ加算器226 内部のB01/4 を加えB22 を作成し、次に、Ｂ乗算器216 からのB3とＢ加算器226 内部の０を加えB33 を作成し、次にＢ乗算器216 からのB33/4 とB71/4 を加えB44 を作成し、次にＢ乗算器216 からのB31/2 とB71/2 を加えB55 を作成し、次にＢ乗算器216 からのB31/4 とB73/4 を加えB66 を作成し、次にＢ乗算器216 からのB7とＢ加算器226 内部の０を加えてB77 を作成し、このように順次Bnn を作成しＢメディアンフィルタ処理回路236 に送る。
【０１１９】
これにより第１の加算器220 から出力される画素データRnn、Gnn、Bnn は、図４(c) に示すようになり、またこの場合のレベル値は図５(c) のようになる。
【０１２０】
Ｒ画素の場合、最初の注目画素はNO１ラインのNO１表示ドットであり、Ｒメディアンフィルタ処理回路232 の記憶回路には、NO１表示ドットの図示されない１つ左側の表示ドットとNO１表示ドットとNO２表示ドットの３つのデータが記憶される。この場合、図示されないNO１表示ドットの１つ左側の表示ドットのデータは、処理回路232 内部で作成されたものであり、その他の２つのデータはＲ加算器222 から送られてきたものである。記憶回路に記憶された３つのデータは読み出されて処理回路232 の比較回路に送られる。
【０１２１】
比較回路は、NO１表示ドットの１つ左側の表示ドットのレベル値「1」 とNO１表示ドットのレベル値「1」 とNO２表示ドットのレベル値「3/4」 と比較し、レベル値の大きい順つまり「1」、「1」、「3/4」 の順に並べ、その中央値である「1」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【０１２２】
このようにNO１表示ドットを注目画素とした処理が終了すると、処理回路232 は次にNO２表示ドットを注目画素とする処理に入る。この処理においても上述のような処理が行なわれる。ただし、対象となる表示ドットはNO１〜NO３表示ドットであり、これらのデータはＲ加算器222 から送られてきたものである。同様な処理方法にてNO３表示ドットおよびNO４表示ドットを注目画素とした処理が終了すると、処理回路232 は次にCCD の欠陥画素に基づくNO５表示ドットを注目画素とする処理に入る。
【０１２３】
処理回路232 の記憶回路には、NO４表示ドットとNO５表示ドットとNO６表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。比較回路は、NO４表示ドットのレベル値「1/4」 とNO５表示ドットのレベル値「0」 とNO６表示ドットのレベル値「1/4」 と比較し、レベル値の大きい順つまり「1/4」、「1/4」、「0」 の順に並べ、その中央値である「1/4」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【０１２４】
このように注目画素におけるレベル値「0」 がメディアンフィルタ処理によりレベル値「1/4」 になる、つまりこの回路により偽信号の低減処理が行なわれたことになる。このような方法により順次Ｒ画素における注目画素に対するメディアンフィルタ処理を施したデータを作成し、それを第１のメモリ238 に送る。
【０１２５】
また並行してＧおよびＢメディアンフィルタ処理回路234 および236 も上述したような処理方法によりＧおよびＢ画素における注目画素に対するメディアンフィルタ処理を施したデータを作成し、それを第１のメモリ238 に出力する。
【０１２６】
第１のメディアンフィルタ処理回路230 からの画素データRnn、Gnn、Bnn は、入力制御部240 の書き込み制御信号により第１のメモリ238 に蓄積される。この場合、処理回路230 から各サンプル点でのＲ、ＧおよびＢの画素データが送られてくるから、第１のメモリ238 には、それぞれが横1280×縦512 ドットからなる図４(c) に示す各画素配置のデータが図５(d) に示すレベル値にて記憶される。
【０１２７】
本実施例では、アナログディジタル変換器16のフレームメモリから画素データが読み出され、120ms 内に画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積している。したがって第１のメモリ238 に蓄積した画素データを実時間で再生部26を介してNTSC方式のモニタ装置29に表示することができる。また、このモニタ装置29がNTSC方式よりも低解像度のモニタである場合、画素データの間引き量を多くできるから、アナログディジタル変換器16のフレームメモリから画素データが読み出され、画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積するまでの時間をさらに短縮することができる。
【０１２８】
このように第１のメモリ238 に蓄積された画素データRnn、Gnn、Bnn は、出力制御部242 からの奇数ラインごとまたは偶数ラインごとに１画素おきに画素データを読み出すインタレース読み出し制御信号により第１のメモリ238 から読み出されＹＣ変換器244 に送られる。したがって第１のメモリ238 の出力320 からは、１フレーム分として各々横640 ×縦512 ドットのＲ、ＧおよびＢの画素データが出力される。
【０１２９】
ＹＣ変換器244 は、第１のメモリ238 からの画素データRnn、Gnn、Bnn および上述した演算式を用いて輝度信号Ynn、色差信号Rnn-Ynn および色差信号Bnn-Ynn を作成し後処理回路22に送る。後処理回路22以降の動作は、上述した標準解像度の場合の動作と同じなので説明を省略する。
【０１３０】
次に、カメラ１の撮像素子12がRGB ストライプ色フイルタ配列の高解像度のCCD(表示ドット数、 横1280×縦1024ドット) であり、このCCD12 から出力された画素信号がNTSC方式の映像信号に変換されモニタに表示されるまでの動作について説明する。CCD12 の欠陥画素の位置は前述したのと同じ位置である。
【０１３１】
撮像レンズ10による被写体の光学像は、高解像度のCCD12 の撮像面に結像される。CCD12 は、その結像の横1280×縦1024ドットの画素を走査してその画素信号を前処理回路14に送る。前処理回路14は、入力した画像信号を所定のレベルまで増幅し、さらにこの増幅した画像信号にブラックレベル補正、ホワイトバランス補正、ガンマ補正などの処理をしてアナログディジタル変換器16に送る。
【０１３２】
アナログディジタル変換器16は、入力したアナログ画像信号をディジタル値に変換し、さらにディジタル値に変換した画像データをアナログディジタル変換器16内のフレームメモリに、本実施例では120ms の時間で蓄積する。CCD12 からの横1280×縦1024ドットの画素データは、図６(a) に示すような画素配列でフレームメモリに蓄積される。この場合の図６(a) に示す各画素のレベル値は図７(a) に例として示されている。
【０１３３】
このフレームメモリに蓄積された画像データは、制御部38の読み出し制御信号により１ラインおきに読み出され、その読み出された画素データＲ、Ｇ、およびＢ（図６(b) 、図７(b) 参照）は、セレクタ200 を介し第１の乗算器210 に送られる。第１の乗算器210 のＲ乗算器212 は、入力した画素データRnに１、2/3、1/3いずれかの係数を掛け第１の加算器220 のＲ加算器222 に送る。また、第１の乗算器210 のＧ乗算器214 、Ｂ乗算器216 も同様に、入力した画素データGn、 画素データBnに１、2/3、1/3いずれかの係数を掛け第１の加算器220 のＧ加算器224、Ｂ加算器226 にそれぞれ送る。
【０１３４】
Ｒ加算器222 は、Ｒ乗算器212 からのR1とＲ加算器222 内部の０を加えR11 を作成し、次に、Ｒ乗算器212 からのR12/3 とR41/3 を加えR22 を作成し、次にＲ乗算器212 からのR11/3 とR42/3 を加えR33 を作成し、次に、Ｒ乗算器212 からのR4とＲ加算器222 内部の０を加えR44 を作成し、このように順次Rnn を作成し第１のメディアンフィルタ処理回路230 のＲメディアンフィルタ処理回路232 に送る。
【０１３５】
またＧ加算器224 は、Ｇ乗算器214 からのG22/3 とＧ加算器224 内部のG01/3 を加えG11 を作成し、次にＧ乗算器214 からのG2とＧ加算器224 内部の０を加えG22 を作成し、次にＧ乗算器214 からのG22/3 とG51/3 を加えG33 を作成し、次にＧ乗算器214 からのG21/3 とG52/3 を加えG44 を作成し、次にＧ乗算器214 からのG5とＧ加算器224 内部の０を加えG55 を作成し、このように順次Gnn を作成し第１のメディアンフィルタ処理回路230 のＧメディアンフィルタ処理回路234 に送る。
【０１３６】
またＢ加算器226 は、Ｂ乗算器216 からのB31/3 とＢ加算器226 内部のB02/3 を加えB11 を作成し、次に、Ｂ乗算器216 からのB32/3 とＢ加算器226 内部のB01/3 を加えB22 を作成し、次にＢ乗算器216 からのB3とＢ加算器226 内部の０を加えB33 を作成し、次に、Ｂ乗算器216 からのB32/3 とB61/3 を加えB44 を作成し、次にＢ乗算器216 からのB31/3 とB62/3 を加えB55 を作成し、次にＢ乗算器216 からのB6にＢ加算器226 内部の０を加えB66 を作成し、このように順次Bnn を作成し第１のメディアンフィルタ処理回路230 のＢメディアンフィルタ処理回路236 に送る。
【０１３７】
これにより第１の加算器220 から出力された画素データRnn、Gnn、Bnn は、図６(c) に示すようになり、またこの場合のレベル値は図７(c) のようになる。
【０１３８】
Ｒ画素の場合、最初の注目画素はNO１ラインのNO１表示ドットであり、Ｒメディアンフィルタ処理回路232 の記憶回路には、NO１表示ドットの図示されない１つ左側の表示ドットとNO１表示ドットとNO２表示ドットの３つのデータが記憶される。この場合、図示されないNO１表示ドットの１つ左側の表示ドットのデータは、処理回路232 内部で作成されたものであり、その他の２つのデータはＲ加算器222 から送られてきたものである。記憶回路に記憶された３つのデータは読み出されて処理回路232 の比較回路に送られる。
【０１３９】
比較回路は、NO１表示ドットの１つ左側の表示ドットのレベル値「1」 とNO１表示ドットのレベル値「1」 とNO２表示ドットのレベル値「2/3」 と比較し、レベル値の大きい順つまり「1」、「1」、「2/3」 の順に並べ、その中央値である「1」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【０１４０】
このようにNO１表示ドットを注目画素とした処理が終了すると、処理回路232 は次にNO２表示ドットを注目画素とする処理に入る。この処理においても上述のような処理が行なわれる。ただし、対象となる表示ドットはNO１〜NO３表示ドットである。同様な処理にてNO３表示ドットを注目画素とした処理が終了すると、処理回路232 は次にCCD の欠陥画素に基づくNO４表示ドットを注目画素とする処理に入る。
【０１４１】
処理回路232 の記憶回路には、NO３表示ドットとNO４表示ドットとNO５表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。比較回路は、NO３表示ドットのレベル値「1/3」 とNO４表示ドットのレベル値「0」 とNO５表示ドットのレベル値「1/3」 と比較し、レベル値の大きい順つまり「1/3」、「1/3」、「0」 の順に並べ、その中央値である「1/3」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとしてその出力316 に出力する。
【０１４２】
このように注目画素におけるレベル値「0」 がメディアンフィルタ処理によるレベル値「1/3」 になる、つまりこの回路により偽信号の低減処理が行なわれたことになる。このような方法により順次Ｒ画素における注目画素に対するメディアンフィルタ処理を施したデータを作成し、それを第１のメモリ238 に出力する。
【０１４３】
また並行してＧおよびＢメディアンフィルタ処理回路234 および236 も上述したような方法によりＧおよびＢ画素における注目画素に対するメディアンフィルタ処理を施したデータを作成し、それを第１のメモリ238 に出力する。
【０１４４】
第１のメディアンフィルタ処理回路230 からの画素データRnn、Gnn、Bnn は、入力制御部240 の書き込み制御信号により第１のメモリ238 に蓄積される。この場合、処理回路230 から各サンプル点でのＲ、ＧおよびＢの画素データが送られてくるから、第１のメモリ238 にはそれぞれが横1280×縦512 ドットからなる図６(c) に示す各画素配置のデータが図７(d) に示すレベル値にて記憶される。
【０１４５】
本実施例では、アナログディジタル変換器16のフレームメモリから画素データが読み出され、120ms 内に画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積している。したがって第１のメモリ238 に蓄積した画素データを実時間で再生部26を介してNTSC方式のモニタ装置29に表示することができる。また、このモニタ装置29がNTSC方式よりも低解像度のモニタである場合、画素データの間引き量を多くできるから、アナログディジタル変換器16のフレームメモリから画素データが読み出され、画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積するまでの時間をさらに短縮することができる。
【０１４６】
出力制御部242 からの奇数ラインごとまたは偶数ラインごとに１画素おきに画素データを読み出すインタレース読み出し制御信号により第１のメモリ238 から読み出された画素データRnn、Gnn、Bnn がNTSC方式の映像信号に変換されるまでの動作はＧストライプRB完全市松フイルタの場合と同じであり、説明を省く。
【０１４７】
このような第１の実施例によれば、ムービー処理部20が高解像度のCCD12 からの画素データＲ、ＧおよびＢに対し補間処理を行なって各画素ごとに同時化した画素データＲ、ＧおよびＢを得、次に同時化した画素データＲ、ＧおよびＢに含まれるCCD12 の欠陥画素に基づく偽信号に対しても、またCCD12 の欠陥画素でない画素信号に対しても低減処理を行なって低減処理した画素データＲ、ＧおよびＢを得、次に低減処理した画素データＲ、ＧおよびＢに対し間引を行なってNTSC方式のモニタ装置に表示し得るような画素数の画素データＲ、ＧおよびＢに変換し、次に変換した画素データＲ、ＧおよびＢに対しＹＣ変換を行なって輝度信号データＹおよび色差信号データR-Y、B-Y を得ているから、高解像度の被写体画像を画質のよい映像を実時間にて再生部26を介してモニタ装置29に表示することができるという効果がある。
【０１４８】
図８には、本発明による画像信号処理装置の適用される電子スチルカメラの第２の実施例が示されている。同図の電子スチルカメラ２において、上述の電子スチルカメラ１と相違するところは、被写体画像の電気信号を表す高解像度信号に含まれる撮像素子12の欠陥画素の影響で発生した偽信号についてのみ低減処理を行なうようにした点である。
【０１４９】
図８に示すように、カメラ２は、撮像レンズ10、撮像素子12、前処理回路14、アナログディジタル(A/D) 変換器16、ＹＣ処理部18、後処理回路22、ディジタルアナログ(D/A) 変換器24、40、再生部26、セレクタ28、モニタ装置29、圧縮処理部30、メモリ32、インタフェース(I/F)34 、メモリカード36、駆動信号発生回路44、欠陥位置データ記憶回路46、ムービー処理部48、制御部50およびタイミング信号発生回路52から構成されている。
【０１５０】
図８において、図１と相違するところは、欠陥位置データ記憶回路46が追加された点と、図１のムービー処理部20が図８ではムービー処理部48に変更された点と、図１の制御部38が図８では制御部50に変更された点と、図１のタイミング信号発生回路42が図８ではタイミング信号発生回路52に変更された点と、タイミング信号発生回路52と欠陥位置データ記憶回路46との間に制御線132 が追加された点と、欠陥位置データ記憶回路46と制御部50との間に信号線134 が追加された点である。なお、図８において、図１と対応する部分には同じ符号を付して示し、重複説明を省略する。
【０１５１】
欠陥位置データ記憶回路46は、ROM などにて構成されており、本実施例では、高解像度のCCD12 の欠陥画素位置を示すデータを蓄積する記憶回路である。この蓄積された欠陥画素位置データは、タイミング信号発生回路52からの読み出し制御信号132 により読み出され、その出力134 から制御部50に出力される。欠陥画素位置データは、欠陥画素のあるライン位置を示すデータとそのライン位置におけるライン内の画素位置を示すアドレスデータとから構成されている。
【０１５２】
制御部50は、タイミング信号発生回路52から接続線126 を介して送られる各種タイミング信号に基づいて前述した図１と同様のそれぞれの機能部を制御および管理する制御信号を形成する第１の制御回路（図示せず）を有するとともに、この制御部52は特に、ムービー処理部48を制御および管理する制御信号を形成する第２の制御回路（図示せず）も有している。
【０１５３】
この第２の制御回路は、本実施例では、高解像度CCD からの被写体画像をたとえばNTSC方式のモニタ装置でモニタする場合に特に、前述したアナログディジタル変換器16のフレームメモリに蓄積される高解像度の画像データを読み出す読み出し制御信号を生成するとともに、このフレームメモリからの読み出された画像データに対して画像処理を施すムービー処理部48への作動信号も生成している。とくに、このムービー処理部48への制御信号は、欠陥位置データ記憶回路46からの欠陥画素位置を示すデータに基づいて生成される。
【０１５４】
制御部50はまた、図示しないレリーズボタン回路からそのボタンの押下によるシャッタレリーズ信号を受けると、撮影を開始させるための起動信号を形成し、それを制御線124 を介してタイミング信号発生回路52に送る。
【０１５５】
タイミング信号発生回路52は、制御部50から起動信号124 を受けると、起動信号124 に同期した駆動信号発生回路44を作動させるための各種タイミング信号を形成し、それらを信号線128 を介して駆動信号発生回路44に出力し、また起動信号124 に同期した制御部50を作動させるための各種タイミング信号を形成し、それらを信号線126 を介して制御部50に出力し、また起動信号124 に同期した欠陥位置データ記憶回路46を作動させるための各種タイミング信号を形成し、それらを制御線132 を介して制御部50に出力する同期信号発生回路である。これら各種タイミング信号は、タイミング信号発生回路52内の基準信号発振器（図示せず）から出力されるクロック信号に基づいて形成される。
【０１５６】
図９には、カメラ２のムービー処理部48の内部構成が示されている。
【０１５７】
ムービー処理部48は、本実施例では、まず入力104 に現れた高解像度のCCD からの画素データＲ、ＧおよびＢに対し補間処理を行なって各画素ごとに同時化した画素データＲ、ＧおよびＢを得、次に同時化した画素データＲ、ＧおよびＢに含まれるCCD の欠陥画素に基づく偽信号に対してのみ低減処理を行なって低減処理した画素データＲ、ＧおよびＢを得、次に低減処理した画素データＲ、ＧおよびＢを含む同時化した画素データＲ、ＧおよびＢに対し間引を行なってNTSC方式のモニタ装置に表示し得るような画素数の画素データＲ、ＧおよびＢに変換し、次に変換した画素データＲ、ＧおよびＢを出力107 に出力するか、あるいは変換した画素データＲ、ＧおよびＢに対しＹＣ変換を行なって輝度信号データＹおよび色差信号データR-Y、B-Y を得て出力106 に出力する画像処理回路である。
【０１５８】
ムービー処理部48は、図９に示すように、セレクタ200、第１の乗算器210、第１の加算器220、第１のメディアンフィルタ処理回路280、第１のメモリ238、入力制御部288、出力制御部242、ＹＣ変換器244、第２の乗算器250、第２の加算器260、第２のメディアンフィルタ処理回路290 および第２のメモリ278 を備えている。
【０１５９】
図９において、図２と異なるところは、図２の第１のメディアンフィルタ処理回路230 が図９では第１のメディアンフィルタ処理回路280 に変更された点と、図２の入力制御部240 が図９では入力制御部288 に変更された点と、図２の第２のメディアンフィルタ処理回路270 が図９では第２のメディアンフィルタ処理回路290 に変更された点である。なお、図９において、図２と対応する部分には同じ符号を付して示し、重複説明を省略する。
【０１６０】
第１の加算器220 にて補間されたR、G、B の３系統の画素データは、次の第１のメディアンフィルタ処理回路280 において、CCD12 の画素の欠陥に基づく偽信号についてのみ低減処理が行なわれる。
【０１６１】
第１のメディアンフィルタ処理回路280 はＲメディアンフィルタ処理回路282 と、Ｇメディアンフィルタ処理回路284 と、Ｂメディアンフィルタ処理回路286 とから構成され、第２のメディアンフィルタ処理回路290 はＲメディアンフィルタ処理回路292 と、Ｇメディアンフィルタ処理回路294 と、Ｂメディアンフィルタ処理回路296 とから構成されている。
【０１６２】
処理回路282、284、286、292、294、296 のそれぞれは、同じ回路にて構成され、この回路は、入力する信号がCCD12 の欠陥画素に基づく偽信号でない場合には、この入力した信号をそのまま出力し、また偽信号である場合には、偽信号およびこの偽信号の１画素前後の信号を入力し、この入力した３つの画素のレベル値を比較し、次にレベル値の大きい順に並べ、次にその中央値（メディアン）を求め、この求めたメディアンの信号を出力するものである。
【０１６３】
ここでは、Ｒメディアンフィルタ処理回路282 を例にとり説明する。処理回路282 は、この例では第１のスイッチ回路、第２のスイッチ回路、記憶回路および比較回路から構成されている。第１のスイッチ回路は、その入力端子にＲ加算器222 からの画素データＲを受け、この受けた画素データＲがCCD12 の欠陥画素に基づく偽信号でない場合にはその出力端子１に出力し、また偽信号である場合には、偽信号およびこの偽信号の１画素前後の画素データＲをその出力端子２に出力する切替回路である。
【０１６４】
記憶回路は、第１のスイッチ回路の出力端子２からの偽信号およびこの偽信号の１画素前後の画素データＲを一時記憶する記憶回路である。記憶回路に一時記憶されたこれら３つの画素データＲは、読み出され比較回路に送られる。比較回路は、送られてきた３つの画素のレベル値を比較し、次にレベル値の大きい順に並べ、次にその中央値（メディアン）を求め、この求めたメディアンを第２のスイッチ回路の入力端子２に送る回路である。
【０１６５】
第２のスイッチ回路は第１のスイッチ回路の出力端子１からの偽信号でない画素データＲを受ける入力端子１を有し、この回路は、入力した画素データＲが欠陥画素に基づく偽信号でない場合には、入力端子１に入力した画素データＲを、また偽信号である場合には、入力端子２に入力したメディアンを示す画素データＲをその出力端子に出力する切替回路である。第２のスイッチ回路の出力端子は信号線316 と接続されている。
【０１６６】
このような処理は、本実施例では制御部50の第２の制御回路からのメディアンフィルタ処理制御信号を生成するための制御信号122 に基づいて入力制御部288 にて形成されるメディアンフィルタ処理制御信号318 に基づいて行なわれる。
【０１６７】
図９を参照すると、入力制御部288 は、前に少し触れたように、図８に示す制御部50の第２の制御回路からの書き込み制御信号を生成するための制御信号122 に基づいて第１のメモリ238 および第２のメモリ278 への書き込み制御信号を形成する制御回路である。
【０１６８】
入力制御部288 はまた、前に少し触れたように、制御部50の第２の制御回路からのメディアンフィルタ処理制御信号を生成するための制御信号122 に基づいて第１および第２のメディアンフィルタ処理回路280 および290 へのメディアンフィルタ処理制御信号318 を形成する制御回路である。この第２の実施例では、メディアンフィルタ処理制御信号318 は１画面の欠陥画素についてのみ低減処理を行なう制御信号である。
【０１６９】
第２の実施例の動作を説明する。
【０１７０】
まず、カメラ２の撮像素子12がＧストライプRB完全市松フイルタの高解像度のCCD(表示ドット数、 横1280×縦1024ドット) であり、このCCD12 から出力された画素信号がNTSC方式の映像信号に変換されモニタに表示されるまでの動作について説明する。CCD12 の欠陥画素の位置は図１の場合と同じ位置とする。
【０１７１】
高解像度のCCD12 からのアナログの画素信号が前処理回路14を介してアナログディジタル変換器16に送られディジタルの画素信号に変換されて記憶され、この記憶された画素データが１ラインおきに読み出されムービー処理部48のセレクタ200 および第１の乗算器210 を介して第１の加算器220 に送られ１画素ごとに同時化された画素データRnn、Gnn、Bnn が得られるところまでの動作は、第１の実施例のＧストライプRB完全市松フイルタを有する高解像度のCCD12 の場合と同じなので説明を省略する。
【０１７２】
これにより第１の加算器220 から出力される画素データRnn、Gnn、Bnn は、図４(c) に示すようになり、またこの場合のレベル値は図５(c) のようになる。
【０１７３】
Ｒ画素について説明すると、最初の画素は、NO１ラインのNO１表示ドットであり、これは欠陥画素でないから、Ｒメディアンフィルタ処理回路282 の第１のスイッチ回路にはその入力端子をその出力端子１に接続するための制御信号が入力制御部288 から送られるとともに、第２のスイッチ回路にはその入力端子１をその出力端子に接続するための制御信号が入力制御部288 から送られる。したがって処理回路282 の出力316 からは、レベル値「1」 のデータが出力される。
【０１７４】
このようにNO１表示ドットを対象画素とした処理が終了すると、処理回路282 は次にNO２表示ドットを対象画素とする処理に入る。この処理においても２番目の画素は欠陥画素でないから、上述のような処理が行なわれる。同様に３番目および４番目の画素も欠陥画素でないから、上述のような処理が行なわれる。したがって処理回路282 の出力316 からは、２番目の画素についてはレベル値「3/4」 のデータが、３番目の画素についてはレベル値「1/2」 のデータが、４番目の画素についてはレベル値「1/4」 のデータが出力される。
【０１７５】
NO４表示ドットを対象画素とした処理が終了すると、処理回路282 は次にNO５表示ドットを注目画素とする処理に入る。この場合、処理回路282 の第１のスイッチ回路にはその入力端子をその出力端子２に接続するための制御信号が入力制御部288 から送られるとともに、第２のスイッチ回路にはその入力端子２をその出力端子に接続するための制御信号が入力制御部288 から送られる。
【０１７６】
これにより第１のスイッチ回路を介して処理回路282 の記憶回路には、NO４表示ドットとNO５表示ドットとNO６表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。比較回路はNO４表示ドットのレベル値「1/4」 とNO５表示ドットのレベル値「0」 とNO６表示ドットのレベル値「1/4」 と比較し、レベル値の大きい順つまり「1/4」、「1/4」、「0」 の順に並べ、その中央値である「1/4」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとして第２のスイッチ回路を介してその出力316 に出力する。
【０１７７】
つまり、処理回路282 においては、入力した画素データＲが欠陥画素に基づく偽信号でない場合には、入力した画素データＲをそのまま第１のメモリ238 に送り、また、偽信号である場合には、メディアンを示す画素データＲを求め、第１のメモリ238 に送る。このようなことが画素データＧおよびＢについても処理回路284 および286 において行なわれる。
【０１７８】
第１のメディアンフィルタ処理回路280 からの画素データRnn、Gnn、Bnn は、入力制御部288 の書き込み制御信号により第１のメモリ238 に蓄積される。この場合、処理回路280 から各サンプル点でのＲ、ＧおよびＢの画素データが送られてくるから、第１のメモリ238 にはそれぞれが横1280×縦512 ドットからなる図４(c) に示す画素配置の画素データが図５(d) に示すレベル値にて記憶される。
【０１７９】
第２の実施例も第１の実施例と同じように、アナログディジタル変換器16のフレームメモリから画素データが読み出され、120ms 内に画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積している。したがって第１のメモリ238 に蓄積した画素データを実時間で再生部26を介してNTSC方式のモニタ装置29に表示することができる。
【０１８０】
また、このモニタ装置29がNTSC方式よりも低解像度のモニタである場合、画素データの間引き量を多くできるから、アナログディジタル変換器16のフレームメモリから画素データが読み出され、画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積するまでの時間をさらに短縮することができる。第１のメモリ238 以降の動作については、第１の実施例の場合と同じなので説明を省略する。
【０１８１】
次に、カメラ２の撮像素子12がRGB ストライプ色フイルタ配列の高解像度のCCD(表示ドット数、 横1280×縦1024ドット) であり、このCCD12 から出力された画素信号がNTSC方式の映像信号に変換されモニタに表示されるまでの動作について説明する。CCD12 の欠陥画素の位置は図１の場合と同じ位置とする。
【０１８２】
高解像度のCCD12 からのアナログの画素信号が前処理回路14を介してアナログディジタル変換器16に送られディジタルの画素信号に変換されて記憶され、この記憶された画素データが１ラインおきに読み出されムービー処理部48のセレクタ200 および第１の乗算器210 を介して第１の加算器220 に送られ１画素ごとに同時化された画素データRnn、Gnn、Bnn が得られるところまでの動作は、第１の実施例のRGB ストライプ色フイルタを有する高解像度のCCD12 の場合と同じなので説明を省略する。
【０１８３】
これにより第１の加算器220 から出力された画素データRnn、Gnn、Bnn は、図６(c) に示すようになり、またこの場合のレベル値は図７(c) のようになる。
【０１８４】
Ｒ画素について説明すると、最初の画素は、NO１ラインのNO１表示ドットであり、これは欠陥画素でないから、Ｒメディアンフィルタ処理回路282 の第１のスイッチ回路にはその入力端子をその出力端子１に接続するための制御信号が入力制御部288 から送られるとともに、第２のスイッチ回路にはその入力端子１をその出力端子に接続するための制御信号が入力制御部288 から送られる。したがって処理回路282 の出力316 からは、レベル値「1」 のデータが出力される。
【０１８５】
このようにNO１表示ドットを対象画素とした処理が終了すると、処理回路282 は次にNO２表示ドットを対象画素とする処理に入る。この処理においても２番目の画素は欠陥画素でないから、上述のような処理が行なわれる。同様に３番目の画素も欠陥画素でないから、上述のような処理が行なわれる。したがって処理回路282 の出力316 からは、２番目の画素についてはレベル値「2/3」 のデータが、３番目の画素についてはレベル値「1/3」 のデータが出力される。
【０１８６】
NO３表示ドットを対象画素とした処理が終了すると、処理回路282 は次にNO４表示ドットを注目画素とする処理に入る。この場合、処理回路282 の第１のスイッチ回路にはその入力端子をその出力端子２に接続するための制御信号が入力制御部288 から送られるとともに、第２のスイッチ回路にはその入力端子２をその出力端子に接続するための制御信号が入力制御部288 から送られる。
【０１８７】
これにより第１のスイッチ回路を介して処理回路282 の記憶回路には、NO３表示ドットとNO４表示ドットとNO５表示ドットの３つのデータが記憶される。記憶回路に記憶された３つのデータは読み出されて比較回路に送られる。比較回路はNO３表示ドットのレベル値「1/3」 とNO４表示ドットのレベル値「0」 とNO５表示ドットのレベル値「1/3」 と比較し、レベル値の大きい順つまり「1/3」、「1/3」、「0」 の順に並べ、その中央値である「1/3」 のデータを注目画素におけるメディアンフィルタ処理を施したデータとして第２のスイッチ回路を介してその出力316 に出力する。
【０１８８】
つまり、処理回路282 においては、入力した画素データＲが欠陥画素に基づく偽信号でない場合には、入力した画素データＲをそのまま第１のメモリ238 に送り、また、偽信号である場合には、メディアンを示す画素データＲを求め、第１のメモリ238 に送る。このようなことが画素データＧおよびＢについても処理回路284 および286 において行なわれる。
【０１８９】
第１のメディアンフィルタ処理回路280 からの画素データRnn、Gnn、Bnn は、入力制御部288 の書き込み制御信号により第１のメモリ238 に蓄積される。この場合、処理回路280 から各サンプル点でのＲ、ＧおよびＢの画素データが送られてくるから、第１のメモリ238 にはそれぞれが横1280×縦512 ドットからなる図６(c) に示す画素配置の画素データが図７(d) に示すレベル値にて記憶される。
【０１９０】
第２の実施例も第１の実施例と同じように、アナログディジタル変換器16のフレームメモリから画素データが読み出され、120ms 内に画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積している。したがって第１のメモリ238 に蓄積した画素データを実時間で再生部26を介してNTSC方式のモニタ装置29に表示することができる。
【０１９１】
また、このモニタ装置29がNTSC方式よりも低解像度のモニタである場合、画素データの間引き量を多くできるから、アナログディジタル変換器16のフレームメモリから画素データが読み出され、画素データRnn、Gnn、Bnn を第１のメモリ238 に蓄積するまでの時間をさらに短縮することができる。第１のメモリ238 以降の動作については、第１の実施例の場合と同じなので説明を省略する。
【０１９２】
このような第２の実施例によれば、ムービー処理部48が高解像度のCCD12 からの画素データＲ、ＧおよびＢに対し補間処理を行なって各画素ごとに同時化した画素データＲ、ＧおよびＢを得、次に同時化した画素データＲ、ＧおよびＢに含まれるCCD12 の欠陥画素についてはその偽信号に対してのみ低減処理を行なって低減処理した画素データＲ、ＧおよびＢを得て出力し、また欠陥画素でない画素信号についてはそのまま画素データＲ、ＧおよびＢを出力し、次に低減処理した画素データＲ、ＧおよびＢとそのまま出力した画素データＲ、ＧおよびＢとの混在した画素データに対し間引を行なってNTSC方式のモニタ装置に表示し得るような画素数の画素データＲ、ＧおよびＢに変換し、次に変換した画素データＲ、ＧおよびＢに対しＹＣ変換を行なって輝度信号データＹおよび色差信号データR-Y、B-Y を得ているから、高解像度の被写体画像を画質のよい映像を実時間にて再生部26を介してモニタ装置29に表示することができるという効果がある。
【０１９３】
なお、上記信号処理は、水平走査線方向の画素データに対して説明したが、垂直方向の画素データに対しても同様の信号処理ができる。
【０１９４】
なおまた、第１および第２の実施例では、補間後の画素データについてメディアンフィルタ処理を行ない、このメディアンフィルタ処理を行なった画素データについて間引いて記憶するか、あるいは記憶後間引くかを行なう構成になっているが、補間後の画素データについてメディアンフィルタ処理を行なわないでこの補間後の画素データを間引いて記憶するか、あるいは記憶後間引くかを行なう構成でもよい。
【０１９５】
このようにこの実施例では、カメラ１、２の撮像素子12が高解像度のCCD である場合に、そのCCD に結像された高解像度の被写体像の画素数をNTSC方式のモニタ装置に表示できる画素数に変換するムービー処理部20、48 を有している。
【０１９６】
本発明を電子スチルカメラに適用し、ＧストライプRB完全市松色フイルタ配列あるいはRGB ストライプ色フイルタ配列からなる横1280×縦1024ドット構成の高解像度CCD に結像した画像をNTSC方式のモニタ装置に表示できる特定の処理回路について説明したが、本発明は、ベイヤ色フイルタ配列、インタライン色フイルタ配列、ＧストライプRB市松色フイルタ配列、あるいは斜めストライプ色フイルタ配列などの高解像度CCD に結像した画像を、PAL方式のモニタ装置、SECAM方式のモニタ装置、 525/60方式の RGBモニタ装置、 625/50方式の RGBモニタ装置、あるいはこれら上記モニタ装置の解像度よりも低い解像度のモニタ装置に効果的に適用することができる。
【０１９７】
【発明の効果】
このように本発明によれば、画像信号処理装置および電子スチルカメラの画像信号処理装置には、複数色の色フィルタを前面に有し、これら色フィルタに対応されたカラー画像情報を各画素から点順次に得るようにした固体撮像素子からなるカラー撮像手段により撮像されたカラー画像信号を得られた順にディジタル信号の形のカラー画像データで受け、受けたカラー画像データから画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを得る画素補間手段、および画素補間手段から画素毎に同時化した赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データを受け、受けた各色要素毎に各画素を中心としたその水平走査線上の前後に隣接する所定数の同色画素を含む連続したｎ画素領域についてメディアンフィルタ処理を行ない、処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段、または記憶手段から読み出される位置データに基づいて、固体撮像素子の複数の画素のうち欠陥のない各画素に対応するタイミングの画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについてはそのまま出力し、また固体撮像素子の複数の画素のうち欠陥のある各画素に対応するタイミングの画素補間手段からの赤色Ｒ、緑色Ｇ、青色Ｂの３原色信号データについては欠陥のある各画素に対応する各色要素を中心としたその水平走査線上の前後に隣接する所定数の同色要素を含む連続したｎ画素領域についてメディアンフィルタ処理を行ない、処理による中央値を示す色信号データを出力するメディアンフィルタ処理手段を備えている。
【０１９８】
これらメディアンフィルタ処理手段は、１本の水平走査線上のｎ画素領域での処理回路になっているから、固体撮像素子の欠陥画素に基づく偽信号を短い処理時間にて処理できかつ回路規模も小さくできるという効果がある。
【０１９９】
したがって、これらメディアンフィルタ処理手段を高解像度の固体撮像素子の電子スチルカメラで撮影した高解像度の被写体画像の映像をNTSCなどの標準テレビジョン方式の解像度のモニタにリアルタイムに再生する際に用いることができるという効果がある。
【図面の簡単な説明】
【図１】本発明による画像信号処理装置が適用される電子スチルカメラの第１の実施例を示すブロック図である。
【図２】図１に示した電子スチルカメラに適用するムービー処理部の一例を示すブロック図である。
【図３】図２および図９に示すムービー処理部が行うメディアンフィルタ処理例を示す説明図である。
【図４】ＧストライプRB完全市松色フイルタ配列による高解像度CCD からの画素データを受け図２および図９に示すムービー処理部が行う信号処理例を示す説明図である。
【図５】図４に示す説明図のレベル値例を示す図である。
【図６】  RGB ストライプ色フイルタ配列による高解像度CCD からの画素データを受け図２および図９に示すムービー処理部が行う信号処理例を示す説明図である。
【図７】図６に示す説明図のレベル値例を示す図である。
【図８】本発明による画像信号処理装置が適用される電子スチルカメラの第２の実施例を示すブロック図である。
【図９】図８に示した電子スチルカメラに適用するムービー処理部の一例を示すブロック図である。
【符号の説明】
１、2  電子スチルカメラ
10  撮像レンズ
12  撮像素子
14  前処理回路
16  アナログディジタル変換器(A/D)
18  ＹＣ処理部
20、48   ムービー処理部
22  後処理回路
24、40   ディジタルアナログ変換器(D/A)
26  再生部
28、200  セレクタ
30  圧縮処理部
32  メモリ
34  インタフェース(I/F)
36  メモリカード
38、50   制御部
42、52   タイミング信号発生回路
44  駆動信号発生回路
46  欠陥位置データ記憶回路
210   第１の乗算器
220   第１の加算器
230、280   第１のメディアンフィルタ処理回路
238   第１のメモリ
240、288   入力制御部
242   出力制御部
244   ＹＣ変換器
250   第２の乗算器
260   第２の加算器
270、290   第２のメディアンフィルタ処理回路
278   第２のメモリ
【図１】
0004515546.tif 000002
【図２】
0004515546.tif 000003
【図３】
0004515546.tif 000004
【図４】
0004515546.tif 000005
【図５】
0004515546.tif 000006
【図６】
0004515546.tif 000007
【図７】
0004515546.tif 000008
【図８】
0004515546.tif 000009
【図９】
0004515546.tif 000010