(57)【要約】【課題】  ディスプレイ処理とデータ圧縮とを同時に行う撮像信号処理装置、及びその方法を提供する。【解決手段】  固体撮像素子だけでなく、映像信号処理器、ディスプレイデータ出力回路、及び圧縮データ生成回路などが、一つの単一チップより構成され、ディスプレイデータの出力と同時に圧縮データをインターリーブするように出力する撮像信号処理装置である。【選択図】図２
2005244980.tif 000002
【特許請求の範囲】
【請求項１】
映像信号から、活性化区間とブランキング区間とを有する少なくとも一つのタイミング信号に同期されたディスプレイデータを生成する段階と、
前記映像信号から圧縮データを生成する段階と、
前記ブランキング区間に前記圧縮データを出力する段階と、を備えることを特徴とする撮像信号処理方法。
【請求項２】
メモリに前記出力された圧縮データを保存する段階を更に備えることを特徴とする請求項１に記載の撮像信号処理方法。
【請求項３】
前記出力された圧縮データをディスプレイする段階を更に備えることを特徴とする請求項１に記載の撮像信号処理方法。
【請求項４】
前記活性化区間に前記ディスプレイデータを出力する段階を更に備えることを特徴とする請求項１に記載の撮像信号処理方法。
【請求項５】
前記少なくとも一つのタイミング信号は、水平同期信号及び垂直同期信号を含み、前記圧縮データは、前記水平及び垂直同期信号のうち、少なくとも一つのブランキング区間に出力されることを特徴とする請求項１に記載の撮像信号処理方法。
【請求項６】
前記映像信号から、輝度信号及び色差信号を含む映像信号処理された信号を生成する段階と、
前記映像信号処理された信号から、前記圧縮データ及び前記ディスプレイデータを生成する段階と、を更に備えることを特徴とする請求項１に記載の撮像信号処理方法。
【請求項７】
前記映像処理された信号をサンプリングして、前記ディスプレイデータを生成する段階を更に含むことを特徴とする請求項６に記載の撮像信号処理方法。
【請求項８】
ＪＰＥＧまたはＭＰＥＧ規格の中で選択された一つによって、前記映像処理された信号を圧縮して、前記圧縮データを生成する段階を更に含むことを特徴とする請求項６に記載の撮像信号処理方法。
【請求項９】
ラインメモリに前記圧縮データを保存する段階と、
前記ブランキング区間にブランキング信号を活性化させる段階と、
前記ブランキング信号が活性化される時、前記ラインメモリに保存された前記圧縮データを出力する段階と、を更に含むことを特徴とする請求項１に記載の撮像信号処理方法。
【請求項１０】
映像信号に対応して、活性化区間とブランキング区間とを有する少なくとも一つのタイミング信号に同期されたディスプレイデータを生成するスケーラと、
前記映像信号に対応する圧縮データを生成するデータ圧縮器と、
前記スケーラ及び前記データ圧縮器から出力され、前記ブランキング区間に前記圧縮データを出力するデータフォーマット器と、を備えることを特徴とする撮像信号処理装置。
【請求項１１】
前記データフォーマット器は、
前記活性化区間に、前記ディスプレイデータを出力することを特徴とする請求項１０に記載の撮像信号処理装置。
【請求項１２】
前記映像信号から、輝度信号及び色差信号を含む映像処理された信号を生成し、水平同期信号及び垂直同期信号を生成する映像信号処理器を更に備えることを特徴とする請求項１０に記載の撮像信号処理装置。
【請求項１３】
前記データフォーマット器は、
前記水平及び垂直同期信号のうち、少なくとも一つのブランキング区間に前記圧縮データを出力することを特徴とする請求項１２に記載の撮像信号処理装置。
【請求項１４】
前記スケーラは、
前記映像信号処理された信号をサンプリングして、前記ディスプレイデータを生成することを特徴とする請求項１２に記載の撮像信号処理装置。
【請求項１５】
前記データ圧縮器は、
ＪＰＥＧまたはＭＰＥＧ規格の中で選択された一つによって、前記映像信号処理された信号を圧縮して、前記圧縮データを生成するためのＪＰＥＧエンコーダ及びＭＰＥＧエンコーダを含むことを特徴とする請求項１２に記載の撮像信号処理装置。
【請求項１６】
前記圧縮データを保存するラインメモリと、
前記ブランキング区間にブランキング信号を活性化させるブランキング信号生成器とを更に備え、
前記データフォーマット器は、前記ブランキング信号が活性化される時、前記ラインメモリに保存された前記圧縮データを出力することを特徴とする請求項１０に記載の撮像信号処理装置。
【請求項１７】
一つの集積回路チップを備え、前記集積回路チップは、
映像信号に対応して、活性化区間とブランキング区間とを有する少なくとも一つのタイミング信号に同期されたディスプレイデータを生成するスケーラと、
前記映像信号に対応する圧縮データを生成するデータ圧縮器と、
前記スケーラ及び前記データ圧縮器から出力され、前記ディスプレイデータと前記圧縮データとを出力するデータフォーマット器と、を含むことを特徴とする撮像信号処理装置。
【請求項１８】
前記データフォーマット器は、
前記活性化区間に前記ディスプレイデータを出力し、前記ブランキング区間に前記圧縮データを出力することを特徴とする請求項１７に記載の撮像信号処理装置。
【請求項１９】
前記集積回路チップは、
前記映像信号を生成する固体撮像素子と、
前記映像信号から、輝度信号及び色差信号を含む映像信号処理された信号を生成し、水平同期信号及び垂直同期信号を生成する映像信号処理器とを更に備え、
前記データフォーマット器は、前記水平及び垂直同期信号のうち、少なくとも一つのブランキング区間に前記圧縮データを出力することを特徴とする請求項１７に記載の撮像信号処理装置。
【請求項２０】
前記スケーラは、
前記映像処理された信号をサンプリングして、前記ディスプレイデータを生成することを特徴とする請求項１９に記載の撮像信号処理装置。
【請求項２１】
前記データ圧縮器は、
ＪＰＥＧまたはＭＰＥＧ規格の中で選択された一つによって、前記映像信号処理された信号を圧縮して、前記圧縮データを生成するためのＪＰＥＧエンコーダ及びＭＰＥＧエンコーダを含むことを特徴とする請求項１９に記載の撮像信号処理装置。
【請求項２２】
前記集積回路チップは、
前記圧縮データを保存するラインメモリと、
前記ブランキング区間にブランキング信号を活性化させるブランキング信号生成器と、を更に備え、
前記データフォーマット器は、前記ブランキング信号が活性化される時、前記ラインメモリに保存された前記圧縮データを出力することを特徴とする請求項１７に記載の撮像信号処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像信号処理装置に係り、特に、固体撮像素子で撮像されて出力される映像データの処理のための集積回路装置に関する。
【背景技術】
【０００２】
図１は、一般的な撮像信号処理装置１００を示すブロック図である。図１を参照すれば、一般的な撮像信号処理装置１００は、固体撮像素子１１０、映像信号処理器１２０、データ圧縮器１３０、及び解像度変換器１４０を備える。固体撮像素子１１０は、ＣＩＳ（ＣＭＯＳ Ｉｍａｇｅ Ｓｅｎｓｏｒ）型、またはＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）型などで実現される。固体撮像素子１１０は、携帯電話カメラ、またはデジタルスチールカメラなどに備えられる。固体撮像素子１１０のピクセルアレイには、解像度を上げるために、１００万ピクセル以上の多くのピクセルが配列されたＡＰＳ（Ａｃｔｉｖｅ Ｐｉｘｅｌ Ｓｅｎｓｏｒ）アレイが適用されている。固体撮像素子１１０は、ＡＰＳアレイにピクセルごとに備えられる光素子を利用して、視野に展開されるイメージを撮像してデジタルカラー映像信号Ｒ（ｒｅｄ）、Ｇ（ｇｒｅｅｎ）、Ｂ（ｂｌｕｅ）を生成する。通常、カラー固体撮像素子１１０の場合、ＡＰＳアレイをなす各ピクセルの上部には、特定のカラーの光のみを受けるように、３種類のカラーフィルタがバイヤ（Ｂａｙｅｒ）パターン状に設置されている。したがって、固体撮像素子１１０から出力されるデジタル映像信号Ｒ、Ｇ、Ｂは、バイヤパターンを有することが一般的である。
【０００３】
映像信号処理器１２０は、Ｒ、Ｇ、Ｂ形態のデジタル映像信号を処理して、所定の規格の輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒを生成する。映像信号処理器１２０から出力される映像信号は、解像度変換器１４０で処理されて、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）のようなディスプレイ装置を駆動する。データ圧縮器１３０は、映像信号処理器１２０から出力される映像信号を、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔ Ｇｒｏｕｐ）またはＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）規格に圧縮して出力する。圧縮されたデータは、ディスプレイ装置を介してユーザーに見られ得る写真データであって、所定のコントローラ（図示せず）から制御されて所定のメモリにバックアップされる。
【０００４】
しかし、そのような一般的な撮像信号処理装置１００では、固体撮像素子１１０、映像信号処理器１２０、データ圧縮器１３０、及び解像度変換器１４０のそれぞれが、相異なるチップより構成されるか、または最近では、固体撮像素子１１０及び映像信号処理器１２０のみを単一チップにより構成する程度である。また、データ圧縮器１３０で圧縮されたデータが、所定メモリにバックアップされる間は、解像度変換器１４０で処理されたディスプレイデータは、ディスプレイ装置に出力されないため、現在撮像されるイメージをディスプレイできないという問題点がある。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明が達成しようとする技術的課題は、固体撮像素子と、固体撮像素子から出力される映像信号とを処理して、ディスプレイデータを出力すると同時に圧縮データを出力する回路を単一チップより構成する撮像信号処理装置を提供することにある。
本発明が達成しようとする他の技術的課題は、固体撮像素子から出力される映像信号を処理して、ディスプレイデータを出力すると同時に圧縮データを出力する撮像信号処理方法を提供することにある。
【課題を解決するための手段】
【０００６】
前記の技術的課題を達成するための本発明の一面に係る撮像信号処理方法は、映像信号から、活性化区間とブランキング区間とを有する少なくとも一つのタイミング信号に同期されたディスプレイデータを生成する段階と、前記映像信号から圧縮データを生成する段階と、前記ブランキング区間に前記圧縮データを出力する段階と、を備えることを特徴とする。
【０００７】
前記撮像信号処理方法は、メモリに前記出力された圧縮データを保存する段階を更に備えることを特徴とする。前記撮像信号処理方法は、前記出力された圧縮データをディスプレイする段階を更に備えることを特徴とする。前記撮像信号処理方法は、前記活性化区間に前記ディスプレイデータを出力する段階を更に備えることを特徴とする。
前記少なくとも一つのタイミング信号は、水平同期信号及び垂直同期信号を含み、前記圧縮データは、前記水平及び垂直同期信号のうち、少なくとも一つのブランキング区間に出力されることを特徴とする。
【０００８】
前記撮像信号処理方法は、前記映像信号から、輝度信号及び色差信号を含む映像処理された信号を生成する段階と、前記映像処理された信号から、前記圧縮データ及び前記ディスプレイデータを生成する段階を更に備えることを特徴とする。前記撮像信号処理方法は、前記映像処理された信号をサンプリングして、前記ディスプレイデータを生成する段階を更に含むことを特徴とする。前記撮像信号処理方法は、ＪＰＥＧまたはＭＰＥＧ規格の中で選択された一つによって、前記映像信号処理された信号を圧縮して前記圧縮データを生成する段階を更に含むことを特徴とする。
【０００９】
前記の技術的課題を達成するための本発明の他の一面に係る撮像信号処理装置は、スケーラ、データ圧縮器、及びデータフォーマット器を備えることを特徴とする。前記スケーラは、映像信号に対応して、活性化区間とブランキング区間とを有する少なくとも一つのタイミング信号に同期されたディスプレイデータを生成する。前記データ圧縮器は、前記映像信号に対応する圧縮データを生成する。前記データフォーマット器は、前記スケーラ及び前記データ圧縮器から出力されて、前記ブランキング区間に前記圧縮データを出力する。
前記撮像信号処理装置の構成要素は、一つの集積回路チップ内に構成可能である。
【発明の効果】
【００１０】
本発明に係る撮像信号処理装置は、一つの単一チップより構成されるため、デジタルスチールカメラ、または携帯電話カメラのような小型システムに適用しやすく、ディスプレイデータの出力と同時に、圧縮データをインターリーブするように出力するため、圧縮されたデータを所定のメモリにバックアップしている間に、現在撮像されるイメージを、同時にディスプレイ装置を介してディスプレイさせることができる。
【発明を実施するための最良の形態】
【００１１】
本発明と、本発明の動作上の利点及び本発明の実施によって達成される目的を十分に理解するには、本発明の好ましい実施例を例示する添付図面及び添付図面に記載された内容を参照しなければならない。
以下、添付図面を参照して、本発明の好ましい実施例を説明することで、本発明を詳細に説明する。各図面に付された同一参照符号は、同一部材を示す。
【００１２】
図２は、本発明の一実施例に係る撮像信号処理装置２００を示すブロック図である。図２を参照すると、撮像信号処理装置２００は、固体撮像素子２１０、映像信号処理器２２０、データ圧縮器２３０、第２スケーラ２４０及びデータフォーマット器２５０を備える。
【００１３】
図２ないし図６に示したような本発明の一実施例では、携帯電話カメラ、またはデジタルスチールカメラのような小型システムに搭載するために、撮像信号処理装置２００の構成要素は、一つの集積回路チップ７１０内に構成される。固体撮像素子２１０は、ＣＩＳ型またはＣＣＤ型などで実現されうる。固体撮像素子２１０は、ＡＰＳアレイのようなピクセルアレイに配列された光素子を利用して、デジタル映像信号Ｒ、Ｇ、Ｂを生成する。固体撮像素子２１０のピクセルアレイには、解像度を上げるために、１００万ピクセル以上の多くのピクセルが配列される。通常、カラー固体撮像素子２１０の場合、ＡＰＳアレイをなす各ピクセルの上部には、特定のカラーの光のみを受けるように、３種類のカラーフィルタがバイヤパターン状に設置されている。したがって、固体撮像素子２１０から出力されるデジタル映像信号Ｒ、Ｇ、Ｂは、バイヤパターンを有する。
【００１４】
映像信号処理器２２０は、Ｒ、Ｇ、Ｂ形態のデジタル映像信号を補間処理する。それ以外にも、映像信号処理器２２０は、デジタル映像信号Ｒ、Ｇ、Ｂに、γ補正、輪郭強調、ＡＥ（Ａｕｔｏ Ｅｘｐｏｓｕｒｅ）／ＡＷＢ（Ａｕｔｏ Ｗｈｉｔｅ Ｂａｌａｎｃｅ）制御、デジタルズームのような機能を付加して、映像信号処理された信号Ｙ、Ｃｂ、Ｃｒを生成する。映像信号処理器２２０から出力される映像信号処理された信号Ｙ、Ｃｂ、Ｃｒは、ＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｙｓｔｅｍ Ｃｏｍｍｉｔｔｅｅ）またはＰＡＬ（Ｐｈａｓｅ Ａｌｔｅｒｎａｔｉｏｎ ｂｙ Ｌｉｎｅｓｙｓｔｅｍ）規格などの輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒを有する。映像処理された信号Ｙ、Ｃｂ、Ｃｒは、・・・、Ｙ、Ｃｂ、Ｙ、Ｃｒ、Ｙ、Ｃｂ、Ｙ、Ｃｒ、・・・の順序のように、クロマ４：２：２の形式に出力されうる。映像信号処理器２２０は、映像信号処理された信号Ｙ、Ｃｂ、Ｃｒ以外にも、水平同期信号ＨＳまたは垂直同期信号ＶＳを出力する。
【００１５】
第２スケーラ２４０は、映像信号処理された信号Ｙ、Ｃｂ、ＣｒからＬＣＤのようなディスプレイ装置（図６の７２０）の駆動のためのディスプレイデータを生成する。第２スケーラ２４０は、自動的に、またはユーザによって選択されたディスプレイ解像度に合わせて、映像信号処理された信号Ｙ、Ｃｂ、Ｃｒをサンプリングして、低解像度のディスプレイデータを生成するために使用される。例えば、撮像しようとする映像を撮像する前に、あらかじめ確認するプレビュー段階や、自動焦点の設定段階など高解像度でディスプレイする必要がない段階では、高解像度でディスプレイする必要がないため、信号処理を迅速に行うために、第２スケーラ２４０によってディスプレイ解像度を下げる。第２スケーラ２４０は、選択されるディスプレイ解像度がディスプレイ装置（図示せず）の解像度である場合、すなわち、元来の解像度をそのままに維持しようとする場合には、映像信号処理された信号Ｙ、Ｃｂ、Ｃｒをバイパスさせて、ディスプレイデータとして出力する。
【００１６】
データ圧縮器２３０は、前記映像処理された信号Ｙ、Ｃｂ、Ｃｒを圧縮して、圧縮データを生成する。データフォーマット器２５０は、ディスプレイデータ出力のブランキング区間にインターリーブするように圧縮データを出力する。特に、データフォーマット器２５０は、ディスプレイデータ出力のブランキング区間のうち、水平ブランキング区間または垂直ブランキング区間に圧縮データを出力する。データ圧縮器２３０及びデータフォーマット器２５０については、以下で更に詳細に説明する。
以下、本発明の一実施例に係る撮像信号処理装置２００の動作を更に詳細に説明する。
【００１７】
図３は、図２の撮像信号処理装置２００の動作説明のためのフローチャートである。図３を参照すると、まず機械式シャッターを開放して、一定の時間の間に、固体撮像素子２１０のＡＰＳアレイに備えられた光素子によりイメージを光電変換する（Ｓ３１０）。固体撮像素子２１０は、ＡＰＳアレイの一つの水平ラインずつ光電変換されたアナログ映像信号をデジタルに変換して、デジタル映像信号Ｒ、Ｇ、Ｂを生成する（Ｓ３２０）。次に、映像信号処理器２２０は、デジタル映像信号Ｒ、Ｇ、Ｂを補間処理し、デジタルズームのような所定の機能を付加して、輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒ及び映像処理された信号Ｙ、Ｃｂ、Ｃｒを生成する（Ｓ３３０）。それ以外にも、映像信号処理器２２０では、水平同期信号ＨＳまたは垂直同期信号ＶＳを出力する。
【００１８】
それにより、第２スケーラ２４０は、前記映像処理された信号Ｙ、Ｃｂ、Ｃｒから、ＬＣＤのようなディスプレイ装置（図６の７２０）の駆動のためのディスプレイデータを生成する（Ｓ３４０）。また、データ圧縮器２３０は、映像処理された信号Ｙ、Ｃｂ、Ｃｒを圧縮して、圧縮データを生成する（Ｓ３５０）。図２で、データ圧縮器２３０は、ユーザにより選択されるモードによって、静止画モード圧縮または動画モード圧縮を行って、圧縮データを出力する。前記データ圧縮器２３０は、第１スケーラ２３１を介して自動的に、またはユーザによって選択された解像度、または圧縮率に合わせて映像信号処理された信号Ｙ、Ｃｂ、Ｃｒをサンプリングして、当該圧縮率に合うデータに変換し、後続のスキャン変換器２３２を介して、ＭＣＵ（Ｍｉｎｉｍｕｍ Ｃｏｄｉｎｇ Ｕｎｉｔ）または所定のマクロブロック単位に変換する。スキャン変換器２３２は、第１スケーラ２３１から入力されるラスタスキャン順序のデータを、ＪＰＥＧエンコーダ２３３またはＭＰＥＧエンコーダ２３４で処理のためのＭＣＵまたはマクロブロック単位のスキャン順序に変換する。例えば、静止画モードでの圧縮を行うＪＰＥＧエンコーダ２３３でエンコーディングのためには、ＡＰＳアレイの８行８列で構成されるマクロブロック単位のデータストリームが必要である。動画モードでの圧縮を行うＭＰＥＧエンコーダ２３４でエンコーディングのためには、ＡＰＳアレイの１６行１６列で構成されるマクロブロック単位のデータが必要である。そのようなＭＰＥＧエンコーダ２３４は、マクロブロック単位の以前のフレームデータを保存するフレームメモリ２３５を利用して、動画モードエンコーディングを行う。フレームメモリ２３５は、撮像信号処理装置２００の内部または外部に備えることが可能で、そのサイズは、圧縮される映像の最大解像度に比例する。
【００１９】
そのように、第１スケーラ２３１、スキャン変換器２３２、及びＪＰＥＧエンコーダ２３３またはＭＰＥＧエンコーダ２３４を介して、静止画モードまたは動画モードに圧縮されたデータは、当該モードによってマルチプレクサ２３６を介して出力され、ラインメモリ２３７に保存される。もし、選択されたモードが静止画モードを示せば、ＪＰＥＧエンコーダ２３３の出力がマルチプレクサ２３６によって選択され、ラインメモリ２３７に保存される。もし、選択されたモードが動画モードを示せば、ＭＰＥＧエンコーダ２３４の出力がマルチプレクサ２３６によって選択され、ラインメモリ２３７に保存される。
【００２０】
ＦＩＦＯ（Ｆｉｒｓｔ Ｉｎ Ｆｉｒｓｔ Ｏｕｔ）構造を有するラインメモリ２３７に保存された圧縮データは、所定のバイトずつ入力された順序でデータフォーマット器２５０に出力される。ラインメモリ２３７は、ＪＰＥＧエンコーダ２３３での静止画モード圧縮の最小圧縮率である５：１に対応する、映像信号処理された信号Ｙ、Ｃｂ、Ｃｒの一つのラインデータの大きさ（最小２５６バイト）を保存できる。ここで、映像信号処理された信号Ｙ、Ｃｂ、Ｃｒの一つのラインデータの大きさは、固体撮像素子２１０に備えられるＡＰＳアレイの１行で感知されたデータの大きさであって、ディスプレイ装置（図６の７２０）画面の１行をディスプレイするのに必要なデータ量に該当する。
【００２１】
一方、データフォーマット器２５０は、第２スケーラ２４０から出力されるディスプレイデータ出力のブランキング区間にインターリーブするように、ラインメモリ２３７から出力される圧縮データを出力する（Ｓ３６０）。図４は、ディスプレイデータのブランキング区間に、圧縮データをインターリーブするように出力する関係を説明するタイミング図である。図４を参照すると、水平同期信号ＨＳの活性化区間に、データフォーマット器２５０は、第２スケーラ２４０から出力されるディスプレイデータを出力する。例えば、ＶＧＡ（Ｖｉｄｅｏ Ｇｒａｐｈｉｃ Ａｄａｐｔｅｒ）（６４０＊４８０）の解像度である場合に、水平同期信号ＨＳの活性化区間は、垂直同期信号ＶＳの活性化区間中に４８０回繰り返される。水平同期信号ＨＳの活性化区間は、システムクロックＣＫの１２８０サイクルに該当し、水平同期信号ＨＳのブランキング区間は、システムクロックＣＫの２８０サイクルに該当する。ディスプレイデータは、システムクロックＣＫに同期して、水平同期信号ＨＳの活性化区間に８ビット（ＤＯ［７：０］）が１バイトである１２８０バイトずつ出力される。図４に示すように、データフォーマット器２５０においてディスプレイデータは、・・・、Ｙ、Ｃｂ、Ｙ、Ｃｒ、Ｙ、Ｃｂ、Ｙ、Ｃｒ、・・・順序で出力される。その時、水平同期信号ＨＳの活性化区間に６４０個の輝度信号Ｙと、３２０個ずつの色差信号Ｃｂ、Ｃｒとが出力される。
【００２２】
そのような仮定から、データフォーマット器２５０は、ディスプレイデータ出力のブランキング区間に、ラインメモリ２３７から出力される圧縮データｂｓ０ないしｂｓ４を２８０バイトずつ出力できる。特に、データフォーマット器２５０は、ディスプレイデータ出力のブランキング区間中に、水平ブランキング区間（水平同期信号のブランキング区間）または垂直ブランキング区間（垂直同期信号のブランキング区間）に圧縮データを出力できる。まず、データフォーマット器２５０は、水平ブランキング区間にインターリーブするように圧縮データを出力するために、論理和回路５１０とインバータ５２０とを含む図５Ａのブランキング信号生成器によって生成される有効ブランキング信号ＢＳを利用する。有効ブランキング信号ＢＳは、水平同期信号ＨＳと、前記ラインメモリ２３７に保存された圧縮データが無いことを知らせる信号ＥＭＴＹとが、何れも論理ロー状態である場合に論理ハイ状態に活性化される。ラインメモリ２３７は、保存した圧縮データがある時、論理ロー状態であるＥＭＴＹ信号を出力する。すなわち、水平同期信号ＨＳのブランキング区間に有効ブランキング信号ＢＳが活性化されれば、データフォーマット器２５０は、圧縮データを出力する。
【００２３】
または、データフォーマット器２５０は、垂直ブランキング区間にインターリーブするように圧縮データを出力するために、論理積回路６１０、論理和回路６２０、及びインバータ６３０を含む図５Ｂのブランキング信号生成器で生成される有効ブランキング信号ＢＳを利用する。その時、有効ブランキング信号ＢＳは、水平同期信号ＨＳと垂直同期信号ＶＳのうち、いずれか一つでも論理ローの状態であり、保存された圧縮データが無いことを知らせる信号ＥＭＴＹも論理ロー状態である場合に、論理ハイ状態に活性化される。すなわち、水平同期信号ＨＳのブランキング区間、または垂直同期信号ＶＳのブランキング区間に、有効ブランキング信号ＢＳが論理ハイ状態に活性化されれば、データフォーマット器２５０は、ラインメモリ２３７からの圧縮データを出力する。
【００２４】
一方、動画モード圧縮である場合より、静止画モード圧縮である場合に、更に圧縮率が低く、静止画モードでの最小圧縮率は５：１であるため、水平同期信号ＨＳの活性化区間であるシステムクロックＣＫの１２８０サイクルの間に、ラインメモリ２３７から出力される圧縮データの最大量は、１２８０＊（１／５）＝２５６バイトである。したがって、ラインメモリ２３７のサイズが少なくとも２５６バイトであれば、静止画モードで圧縮されたデータの入出力時にオーバーフローを避けうる。その時、動画モードでの圧縮率は、静止画モードでの圧縮率より高いため、動画モードで圧縮されたデータのオーバーフローも避けうる。
【００２５】
そのように、図３のＳ３６０段階で、データフォーマット器２５０が、第２スケーラー２４０で生成されるディスプレイデータを出力し、その時、水平同期信号ＨＳのブランキング区間または垂直同期信号ＶＳのブランキング区間に、ラインメモリ２３７で生成される圧縮データを出力する。それにより、データフォーマット器２５０から出力されるディスプレイデータは、ディスプレイ装置（図６の７２０）を駆動する。また、データフォーマット器２５０でインターリーブするように出力される圧縮データは、ディスプレイ装置（図６の７３０）を介して、ユーザーに見られ得る写真データであって、所定のコントローラ（図示せず）から制御されて所定のメモリ（図６の７４０）にバックアップされる（Ｓ３７０）。
【００２６】
図６を参照すると、固体撮像素子２１０、映像信号処理器２２０、及び映像信号処理器２２０から出力される映像信号を処理してディスプレイデータを出力するデータスケーラ２４０、映像信号処理器２２０から出力される映像信号を処理して圧縮データを生成するデータ圧縮器２３０、及びディスプレイデータの出力と同時に、圧縮データをインターリーブするように出力するデータフォーマット器２５０と、を含む撮像信号処理装置２００の構成要素は、単一集積回路チップ７１０内に構成される。
【００２７】
以上のように、図面と明細書とで最良の実施例が開示された。ここで、特定の用語が使用されたが、これは単に本発明を説明するための目的で使用されたものであり、意味限定や特許請求の範囲に記載された本発明の範囲を制限するために使用されたものではない。したがって、当業者ならば、これから多様な変形及び均等な他の実施例が可能であるということが理解できるであろう。したがって、本発明の真の技術的保護範囲は、特許請求の範囲の技術的思想によって決まらなければならない。
【産業上の利用可能性】
【００２８】
本発明に係る撮像信号処理装置及び撮像信号処理方法は、デジタルスチールカメラまたは携帯電話カメラなどに適用できる。
【図面の簡単な説明】
【００２９】
【図１】一般的な撮像信号処理装置を示すブロック図である。
【図２】本発明の一実施例に係る撮像信号処理装置を示すブロック図である。
【図３】図２の撮像信号処理装置の動作説明のためのフローチャートである。
【図４】ディスプレイデータのブランキング区間に圧縮データをインターリーブするように出力する関係を説明するタイミング図である。
【図５Ａ】圧縮データの出力のために、有効ブランキング信号を活性化させるブランキング信号生成器の回路図である。
【図５Ｂ】圧縮データの出力のために、有効ブランキング信号を活性化させるブランキング信号生成器の回路図である。
【図６】本発明の一実施例に係り、単一集積回路チップ内に構成される図２の撮像信号処理装置の構成要素を示す図である。
【符号の説明】
【００３０】
２００    撮像信号処理装置
２１０    固体撮像素子
２２０    映像信号処理器
２３０    データ圧縮器
２３１    第１スケーラー
２３２    スキャン変換器
２３３    ＪＰＥＧエンコーダ
２３４    ＭＰＥＧエンコーダ
２３５    フレームメモリ
２３６    マルチプレクサ
２３７    ラインメモリ
２４０    第２スケーラー
２５０    データフォーマット器
Ｒ、Ｇ、Ｂ    デジタル映像信号
Ｙ、Ｃｂ、Ｃｒ    映像信号処理された信号
【図１】
2005244980.tif 000003
【図２】
2005244980.tif 000004
【図３】
2005244980.tif 000005
【図４】
2005244980.tif 000006
【図５Ａ】
2005244980.tif 000007
【図５Ｂ】
2005244980.tif 000008
【図６】
2005244980.tif 000009