(57)【要約】【課題】従来は、分割処理された各ＪＰＥＧファイルを１つのＪＰＥＧ画像ファイルに合成変換し、記録メディアに記録しているため、伸張処理する際には、１つのＪＰＥＧ画像ファイルとして伸張することになり、画像再生時の伸張処理には時間がかかる。【解決手段】固体撮像装置１Ａは、ＪＰＥＧ圧縮画像データの一画面の画像領域の所定位置に、複数種類のリスタートマーカを循環的に挿入する。また、圧縮画像データの垂直方向の分割数ｎと、特定の一種類のリスタートマーカの各分割領域における出現回数とを示すコメントセグメント情報と圧縮画像データを送信する。再生装置では、コメントセグメント情報と、特定の一種類のリスタートマーカの挿入位置とから圧縮画像データをｎ分割し、そのｎ分割圧縮画像データを互いに独立して並列に伸張処理することで、ｎ個の分割画像データを高速に生成し、それを一画面の画像領域の合成画像データとして生成する。【選択図】図１
2007267349.tif 000002
【特許請求の範囲】
【請求項１】
撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成し、その圧縮画像データをネットワークへ送信する機能を備えた固体撮像装置と、前記圧縮画像データを前記ネットワークを介して受信し、その圧縮画像データを複数に分割し、複数の分割圧縮画像データに対して並列に伸張処理を行ってから１枚の画像データに合成する再生装置とから少なくとも構成された分割画像処理システムであって、
前記固体撮像装置は、
撮像した画像データをＪＰＥＧ方式により圧縮して前記圧縮画像データを生成する圧縮処理手段と、
前記圧縮処理手段により圧縮して得られた圧縮画像データの一画面の画像領域の所定位置に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、前記複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入するリスタートマーカ挿入手段と、
前記画像領域の分割数ｎと、前記特定の一種類のリスタートマーカの前記各分割領域における出現回数とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記リスタートマーカが挿入された前記圧縮画像データに、前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成して前記ネットワークへ送出するデータ送出手段と
を有し、前記再生装置は、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報と、前記特定のリスタートマーカの挿入位置とに基づいて、前記ＪＰＥＧデータファイル中の前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割してｎ個の分割圧縮データを得る分割手段と、
前記ｎ個の分割圧縮データが並列に供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像データとして生成する画像合成処理手段と
を有することを特徴とする分割画像処理システム。
【請求項２】
撮像した画像データを複数の画像データに分割してそれぞれをＪＰＥＧ方式により圧縮して分割圧縮画像データを生成し、その分割圧縮画像データをネットワークへ送信する機能を備えた固体撮像装置と、前記分割圧縮画像データを前記ネットワークを介して受信し、その複数の分割圧縮データに対して並列に伸張処理を行ってから１枚の画像データに合成する再生装置とから少なくとも構成された分割画像処理システムであって、
前記固体撮像装置は、
撮像した画像データの一画面を垂直方向にｎ分割（ｎは２以上の自然数）した分割画像を生成する画像分割処理手段と、
前記分割画像をそれぞれＪＰＥＧ方式により圧縮して、ｎ個の前記分割圧縮画像データを生成する圧縮処理手段と、
前記分割数ｎを示す分割情報と、前記画像分割の垂直位置情報ｍ（ｍは２以上の自然数）とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記分割圧縮画像データに、少なくとも前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成して前記ネットワークへ送出するデータ送出手段と、
を有し、前記再生装置は、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報に基づいて、一画面を垂直方向にｎ分割して得られたＪＰＥＧ圧縮画像データか否かを判断し、ｎ分割して得られたＪＰＥＧ圧縮画像データのときには前記画像分割の垂直位置情報ｍに基づき前記ｎ個の分割圧縮画像データを振り分けて出力するコメントセグメント判断処理手段と、
前記ｎ個の分割圧縮データが振り分けられて供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像として生成する画像合成処理手段と、
を有することを特徴とする分割画像処理システム。
【請求項３】
請求項１記載の分割画像処理システムで用いる固体撮像装置であって、
固体撮像素子で撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成する圧縮処理手段と、
前記圧縮処理手段により圧縮して得られた圧縮画像データの一画面の画像領域の所定位置に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、前記複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入するリスタートマーカ挿入手段と、
前記画像領域の分割数ｎと、前記特定の一種類のリスタートマーカの前記各分割領域における出現回数とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記リスタートマーカが挿入された前記圧縮画像データに、前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成して前記ネットワークへ送出するデータ送出手段と
を有することを特徴とする固体撮像装置。
【請求項４】
撮像した画像データを複数の画像データに分割してそれぞれをＪＰＥＧ方式により圧縮して分割圧縮画像データを生成し、その分割圧縮画像データをネットワークへ送信する機能を備えた、請求項２記載の分割画像処理システムで用いる固体撮像装置であって、
固体撮像素子で撮像した画像データの一画面を垂直方向にｎ分割（ｎは２以上の自然数）した分割画像を生成する画像分割処理手段と、
前記分割画像をそれぞれＪＰＥＧ方式により圧縮して、ｎ個の分割圧縮画像データを生成する圧縮処理手段と、
前記分割数ｎを示す分割情報と、前記画像分割の垂直位置情報ｍ（ｍは２以上の自然数）とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記分割圧縮画像データに、少なくとも前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成してネットワークへ送出するデータ送出手段と、
を有することを特徴とする固体撮像装置。
【請求項５】
請求項１記載の分割画像処理システムで用いる再生装置であって、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報と、前記特定のリスタートマーカの挿入位置とに基づいて、前記ＪＰＥＧデータファイル中の前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割してｎ個の分割圧縮データを得る分割手段と、
前記ｎ個の分割圧縮データが並列に供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像データとして生成する画像合成処理手段と
を有することを特徴とする再生装置。
【請求項６】
撮像した画像データを複数の画像データに分割してそれぞれをＪＰＥＧ方式により圧縮して分割圧縮画像データを生成し、その分割圧縮画像データに分割数ｎ（ｎは２以上の自然数）を示す分割情報と、前記画像分割の垂直位置情報ｍ（ｍは２以上の自然数）とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報が付加されたＪＰＥＧデータファイルをネットワークへ送信する機能を備えた固体撮像装置から、前記分割圧縮画像データを前記ネットワークを介して受信し、その複数の分割圧縮データに対して並列に伸張処理を行ってから１枚の画像データに合成する、請求項２記載の分割画像処理システムで用いる再生装置であって、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報に基づいて、一画面を垂直方向にｎ分割して得られたＪＰＥＧ圧縮画像データか否かを判断し、ｎ分割して得られたＪＰＥＧ圧縮画像データのときには前記画像分割の垂直位置情報ｍに基づき前記ｎ個の分割圧縮画像データを振り分けて出力するコメントセグメント判断処理手段と、
前記ｎ個の分割圧縮データが振り分けられて供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像として生成する画像合成処理手段と、
を有することを特徴とする再生装置。
【請求項７】
撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成し、その圧縮画像データをネットワークへ送信する機能を第１のコンピュータにより実現させる撮像用プログラムと、前記ネットワークを介して受信した前記圧縮画像データを複数に分割し、複数の分割圧縮画像データに対して並列に伸張処理を行ってから１枚の画像データに合成する機能を第２のコンピュータにより実現させる再生用プログラムとから少なくとも構成された分割画像処理用プログラムであって、
前記撮像用プログラムは、前記第１のコンピュータに、
撮像した画像データをＪＰＥＧ方式により圧縮して前記圧縮画像データを生成する圧縮処理手段と、
前記圧縮処理手段により圧縮して得られた圧縮画像データの一画面の画像領域の所定位置に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、前記複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入するリスタートマーカ挿入手段と、
前記画像領域の分割数ｎと、前記特定の一種類のリスタートマーカの前記各分割領域における出現回数とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記リスタートマーカが挿入された前記圧縮画像データに、前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成して前記ネットワークへ送出するデータ送出手段として機能させることを特徴とし、
前記再生用プログラムは、前記第２のコンピュータに、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報と、前記特定のリスタートマーカの挿入位置とに基づいて、前記ＪＰＥＧデータファイル中の前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割してｎ個の分割圧縮データを得る分割手段と、
前記ｎ個の分割圧縮データが並列に供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像データとして生成する画像合成処理手段と
して機能させることを特徴とする分割画像処理プログラム。
【請求項８】
撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成し、その圧縮画像データをネットワークへ送信する機能をコンピュータにより実現させるプログラムであって、
前記コンピュータに、
撮像した画像データをＪＰＥＧ方式により圧縮して前記圧縮画像データを生成する圧縮処理手段と、
前記圧縮処理手段により圧縮して得られた圧縮画像データの一画面の画像領域の所定位置に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、前記複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入するリスタートマーカ挿入手段と、
前記画像領域の分割数ｎと、前記特定の一種類のリスタートマーカの前記各分割領域における出現回数とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記リスタートマーカが挿入された前記圧縮画像データに、前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成して前記ネットワークへ送出するデータ送出手段と
して機能させることを特徴とするプログラム。
【請求項９】
請求項１記載の分割画像処理システムの固体撮像装置から送信された前記ＪＰＥＧデータファイルを前記ネットワークを介して受信して、一画面の画像領域の合成画像データを生成する機能をコンピュータにより実現させるプログラムであって、
前記コンピュータを、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報と、前記特定のリスタートマーカの挿入位置とに基づいて、前記ＪＰＥＧデータファイル中の前記圧縮画像データの一画面の画像領域を垂直方向にｎ分割してｎ個の分割圧縮データを得る分割手段と、
前記ｎ個の分割圧縮データが並列に供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像データとして生成する画像合成処理手段と
して機能させることを特徴とするプログラム。
【請求項１０】
撮像した画像データを複数の画像データに分割してそれぞれをＪＰＥＧ方式により圧縮して分割圧縮画像データを生成し、その分割圧縮画像データをネットワークへ送信する機能を第１のコンピュータにより実現させる撮像用プログラムと、前記分割圧縮画像データを前記ネットワークを介して受信し、その複数の分割圧縮データに対して並列に伸張処理を行ってから１枚の画像データに合成する機能を第２のコンピュータにより実現させる再生用プログラムとから少なくとも構成された分割画像処理プログラムであって、
前記撮像用プログラムは、前記第１のコンピュータに、
撮像した画像データの一画面を垂直方向にｎ分割（ｎは２以上の自然数）した分割画像を生成する画像分割処理手段と、
前記分割画像をそれぞれＪＰＥＧ方式により圧縮して、ｎ個の前記分割圧縮画像データを生成する圧縮処理手段と、
前記分割数ｎを示す分割情報と、前記画像分割の垂直位置情報ｍ（ｍは２以上の自然数）とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、
前記分割圧縮画像データに、少なくとも前記コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成して前記ネットワークへ送出するデータ送出手段として機能させることを特徴とし、
前記再生用プログラムは、前記第２のコンピュータに、
前記ネットワークを介して前記ＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中の前記コメントセグメント情報に基づいて、一画面を垂直方向にｎ分割して得られたＪＰＥＧ圧縮画像データか否かを判断し、ｎ分割して得られたＪＰＥＧ圧縮画像データのときには前記画像分割の垂直位置情報ｍに基づき前記ｎ個の分割圧縮画像データを振り分けて出力するコメントセグメント判断処理手段と、
前記ｎ個の分割圧縮データが振り分けられて供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、
前記伸張処理手段から並列に出力された前記ｎ個の画像データを一画面の画像領域の合成画像として生成する画像合成処理手段として機能させることを特徴とする分割画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は分割画像処理システム及びそれに用いる固体撮像装置と再生装置並びにプログラムに係り、特に高精細画像データをＪＰＥＧ方式により圧縮処理して得た圧縮画像データを伝送し、それを分割伸張して元の高精細画像に合成表示する分割画像処理システム及びそれに用いる固体撮像装置と再生装置並びにプログラムに関する。
【背景技術】
【０００２】
ディジタルカメラ等の撮像装置で撮像された画像は、記録メディアに効率良く記録するために、撮像データは圧縮処理されるのが通例である。この時に使用される圧縮方式の代表的な一つとして、ＪＰＥＧ（Joint Photographic Experts Group）方式が挙げられる。このＪＰＥＧ方式は、画像一枚単位での圧縮処理であり、高精細画像を扱う場合には画像データサイズが大きくなるため、圧縮及び伸張共に処理に要する時間が長くなってしまう。
【０００３】
現在、ディジタルカメラの撮像素子は画素数が多くなる傾向にあり、原画像１枚あたりのデータサイズが大きく、圧縮及び伸張処理に時間がかかってしまう。また、昨今注目されつつあるセキュリティカメラシステムの分野においても、高精細画像で撮像された画像でのＪＰＥＧによる動画表示の要求もあり、圧縮及び伸張の高速処理の要求が強くなってきている。
【０００４】
このような状況の中、今日市場に多く出回っているディジタルカメラに関連し、固体撮像素子であるＣＣＤ（Charge Coupled Devices:電荷結合素子）から出力される、図１４（Ａ）に示す１枚の撮像データを、同図（Ｂ）に示すように３つの領域＃１〜＃３に分割し、これら分割領域＃１〜＃３の各撮像データに対して並列にＹ／Ｃ変換やＪＰＥＧ圧縮等の処理を行って、同図（Ｃ）に示すようなリスタートマーカが挿入された＃１〜＃３の圧縮データを生成し、同図（Ｄ）に示すように、それらの特別のリスタートマーカＦＦＤ９を通常のリスタートマーカＦＦＤ７に付け替え、最終的に全ての圧縮データを連結して、１つの画像ファイルを合成することで、ＪＰＥＧ圧縮の高速化を図る分割画像合成処理装置が知られている（例えば、特許文献１参照）。
【０００５】
この特許文献１記載の分割画像合成処理装置では、図１４（Ｃ）に示すように、ＪＰＥＧ圧縮処理時に各分割画像のＪＰＥＧデータである＃１−圧縮データ〜♯３−圧縮データに、ＦＦＤ０〜ＦＦＤ９の巡回リスタートマーカを各々別個に挿入し、それぞれ圧縮データの最後尾に特別のリスタートマーカＦＦＤ９を挿入している。更に各々のＪＰＥＧ圧縮データに付加するヘッダには、リスタートマーカＦＦＤ９迄のデータ長を示す情報の他に、各々の圧縮データの分割画像が撮影画像中のどの位置に属するかについての情報も含まれたファイルとして、メモリバッファに書き込んでいる。
【０００６】
最終的には、これらの分割処理したＪＰＥＧファイルを合成して１つの画像ファイルを生成するために、それぞれ圧縮データのヘッダを参照して圧縮データの読み出し順序を決定し、それぞれ圧縮データに含まれているデータ長を示す情報を基に特別のリスタートマーカＦＦＤ９を効率良くスキャン検出し、それぞれの圧縮データをメモリバッファから読み出して、特別なリスタートマーカＦＦＤ９を通常のリスタートマーカＦＦＤ７に付け替えると共に、該合成されたＪＰＥＧ画像ファイルのヘッダは、それぞれＪＰＥＧ圧縮データに付与されたヘッダに基づき作成され付与することで、最終的には全ての圧縮データが連結され、１つの画像ファイルとして合成している。
【０００７】
従って、この特許文献１記載の分割画像合成処理装置では、複数のＪＰＥＧファイルイメージを１つの画像ファイルに合成することができ、かつ、固体撮像素子で撮像された画像データに対して画像データを分割し、ＪＰＥＧ処理を並列に行うことで圧縮処理の高速化を図っている。
【０００８】
また、左右水平２チャンネル出力を有する固体撮像素子から出力される２チャンネルの出力信号に対して並列にＹ／Ｃ変換やＪＰＥＧ圧縮等の処理を行い、リスタートマーカの付与の仕方に工夫を加えることで、最終的に２つのＪＰＥＧファイルに分かれた左右の画像データを合成し、１つの画像ファイルに変換することで圧縮処理の高速化を図るようにした固体撮像装置も知られている（例えば、特許文献２参照）。
【０００９】
この固体撮像装置では、図１５に示すように、左右水平２チャンネル出力画像データに対して並列にＹ／Ｃ変換やＪＰＥＧ圧縮等の処理を施して得られた、左チャンネルと右チャンネルの各ＪＰＥＧファイル７０、７１は、ＣＣＤの画素データの配列と同じ順序で配列され、右端にリスタートマーカが挿入されている。
【００１０】
そして、ＪＰＥＧファイル７０を読んでいる時にリスタートマーカ１を検出すると、ファイルの読み出しを切り替え、ＪＰＥＧファイル７１を読みに行き、そこで再びリスタートマーカ１を検出するとリスタートマーカを図１５に７３で示すように、２に付け替え次にＪＰＥＧファイル７０を読みに行く。これを繰り返すことにより、図１５に７２、７３で示すリスタートマーカの付け替えられた２つのＪＰＥＧファイルが得られ、これら２つのＪＰＥＧファイルに分かれた左右の画像データが合成される。
【００１１】
【特許文献１】特開２００４−２２１９６３号公報
【特許文献２】特開２００２−８４４９３号公報
【発明の開示】
【発明が解決しようとする課題】
【００１２】
しかしながら、上記特許文献１及び２記載の分割画像合成処理装置並びに固体撮像装置にあっては、ＪＰＥＧ圧縮処理する際に、撮像素子から出力される撮像された複数の分割撮像データ又は１枚の撮像データを複数の画像ファイルに分割し、並列処理することで高速処理を実現し、最終的にはこれらの分割処理された各ＪＰＥＧファイルを１つのＪＰＥＧ画像ファイルに合成変換し、記録メディアに記録している。
【００１３】
そのため、伸張処理する際には、１つのＪＰＥＧ画像ファイルとして伸張することになり、画像再生時の伸張処理には時間がかかるという問題が残り、高速処理するには伸張処理そのものの高速化を図る必要があり、伸張処理自体が重くなってしまう。
【００１４】
本発明は上記の点に鑑みなされたもので、高速処理し得る高精細画像を圧縮処理する処理方法と圧縮データを分割伸張して元の高精細画線に合成表示する分割画像処理システム及びそれに用いる固体撮像装置と再生装置並びにプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１５】
上記の目的を達成するため、第１の発明の分割画像処理システムは、撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成し、その圧縮画像データをネットワークへ送信する機能を備えた固体撮像装置と、圧縮画像データをネットワークを介して受信し、その圧縮画像データを複数に分割し、複数の分割圧縮画像データに対して並列に伸張処理を行ってから１枚の画像データに合成する再生装置とから少なくとも構成された分割画像処理システムであって、上記の固体撮像装置は、撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成する圧縮処理手段と、圧縮処理手段により圧縮して得られた圧縮画像データの一画面の画像領域の所定位置に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入するリスタートマーカ挿入手段と、画像領域の分割数ｎと、特定の一種類のリスタートマーカの各分割領域における出現回数とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、リスタートマーカが挿入された圧縮画像データに、コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成してネットワークへ送出するデータ送出手段とを有する。
【００１６】
また、上記の再生装置は、ネットワークを介してＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中のコメントセグメント情報と、特定のリスタートマーカの挿入位置とに基づいて、ＪＰＥＧデータファイル中の圧縮画像データの一画面の画像領域を垂直方向にｎ分割してｎ個の分割圧縮データを得る分割手段と、ｎ個の分割圧縮データが並列に供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、伸張処理手段から並列に出力されたｎ個の画像データを一画面の画像領域の合成画像データとして生成する画像合成処理手段とを有することを特徴とする。
【００１７】
この第１の発明では、固体撮像装置からは撮像データをＪＰＥＧ方式により圧縮した圧縮画像データの一画面の画像領域の所定位置（例えば、水平ライン位置の右端）に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入して、画像領域の分割数ｎと、特定の一種類のリスタートマーカの各分割領域における出現回数とを示すＪＰＥＧ規格に準拠したコメントセグメント情報と共に１つのＪＰＥＧデータファイルを構成して送信する。
【００１８】
再生装置では、このＪＰＥＧデータファイルのコメントセグメント情報と、特定の一種類のリスタートマーカの挿入位置とから圧縮画像データをｎ分割し、そのｎ分割圧縮画像データを互いに独立して並列に伸張処理することで、ｎ個の分割画像データを生成し、それを一画面の画像領域の合成画像データとして生成する。
【００１９】
このため、第１の発明では、複数の低速なＪＰＥＧ伸張処理機能しか持たない再生装置でもｎ分割圧縮画像データを並列に伸張処理することができるので、伸張後のｎ個の分割画像データを画像合成処理することで高精細のＪＰＥＧ圧縮画像を再生表示できる。その結果、再生装置が、ＶＧＡ(Video Graphics Array)クラスの画像をフルフレームの３０ｆｐｓ（frame/sec）で４画面以上伸張処理表示可能なマルチ表示能力を持つ装置であれば、ＳＸＧＡクラスの画像を３０ｆｐｓで表示することも可能となる。すなわち、本発明では、高速処理可能な伸張処理能力を持つ高価な装置を使用しなくとも、比較的安価な再生装置でも高精細のＪＰＥＧ圧縮画像の再生表示が可能である。
【００２０】
また、上記の目的を達成するため、第２の発明の分割画像処理システムは、撮像した画像データを複数の画像データに分割してそれぞれをＪＰＥＧ方式により圧縮して分割圧縮画像データを生成し、その分割圧縮画像データをネットワークへ送信する機能を備えた固体撮像装置と、分割圧縮画像データをネットワークを介して受信し、その複数の分割圧縮データに対して並列に伸張処理を行ってから１枚の画像データに合成する再生装置とから少なくとも構成された分割画像処理システムであって、上記の固体撮像装置は、撮像した画像データの一画面を垂直方向にｎ分割（ｎは２以上の自然数）した分割画像を生成する画像分割処理手段と、分割画像をそれぞれＪＰＥＧ方式により圧縮して、ｎ個の分割圧縮画像データを生成する圧縮処理手段と、分割数ｎを示す分割情報と、画像分割の垂直位置情報ｍ（ｍは２以上の自然数）とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、分割圧縮画像データに、少なくともコメントセグメント情報が付加されたＪＰＥＧデータファイルを生成してネットワークへ送出するデータ送出手段とを有する。
【００２１】
また、上記の再生装置は、ネットワークを介してＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中のコメントセグメント情報に基づいて、一画面を垂直方向にｎ分割して得られたＪＰＥＧ圧縮画像データか否かを判断し、ｎ分割して得られたＪＰＥＧ圧縮画像データのときには画像分割の垂直位置情報ｍに基づきｎ個の分割圧縮画像データを振り分けて出力するコメントセグメント判断処理手段と、ｎ個の分割圧縮データが振り分けられて供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、伸張処理手段から並列に出力されたｎ個の画像データを一画面の画像領域の合成画像として生成する画像合成処理手段とを有することを特徴とする。
【００２２】
第２の発明では、固体撮像装置からは撮像データを一画面の撮像画像データ毎に、単純に撮像画面データ全体を垂直方向に１／ｎに等分割し、この分割画像データに対して各々ＪＰＥＧ方式により圧縮処理し、ＪＰＥＧ規格に準拠したコメントセグメント情報領域上に記述された分割情報ｎと分割位置情報と共に１つのＪＰＥＧデータファイルを構成して送信する。再生装置では、この分割ＪＰＥＧデータファイルのコメントセグメント情報から、撮影された１枚の画像データの分割処理の有無とその分割位置情報の判断の下に、分割位置情報に基づき予め定められた複数のＪＰＥＧ伸張機に各々圧縮データを振り分けて、ｎ分割圧縮画像データを互いに独立して並列に伸張処理することで、ｎ個の分割画像データを生成し、それを一画面の画像領域の合成画像データとして生成する。
【００２３】
このため、本発明では、複数の低速なＪＰＥＧ伸張処理機能しか持たない再生装置でもｎ分割圧縮画像データを並列に伸張処理することができるので、伸張後のｎ個の分割画像データを画像合成処理することで高精細のＪＰＥＧ圧縮画像を再生表示できる。その結果、再生装置が、ＶＧＡ（Video Graphics Array）クラスの画像をフルフレームの３０ｆｐｓ（frame/sec）で４画面以上伸張処理表示可能なマルチ表示能力を持つ装置であれば、ＳＸＧＡクラスの画像を３０ｆｐｓで表示することも可能となる。すなわち、本発明では、高速処理可能な伸張処理能力を持つ高価な装置を使用しなくとも、比較的安価な再生装置でも高精細のＪＰＥＧ圧縮画像の再生表示が可能である。
【００２４】
また、上記の目的を達成するため、第３の発明は、第１の発明の分割画像処理システムで用いる固体撮像装置であり、固体撮像素子で撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成する圧縮処理手段と、圧縮処理手段により圧縮して得られた圧縮画像データの一画面の画像領域の所定位置に、ＪＰＥＧ規格の複数種類のリスタートマーカを周期的に、かつ、循環的に挿入すると共に、圧縮画像データの一画面の画像領域を垂直方向にｎ分割（ｎは２以上の自然数）したときの各分割画像領域に、複数種類のリスタートマーカのうち、特定の一種類のリスタートマーカを予め設定した回数ずつ挿入するリスタートマーカ挿入手段と、画像領域の分割数ｎと、特定の一種類のリスタートマーカの各分割領域における出現回数とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、リスタートマーカが挿入された圧縮画像データに、コメントセグメント情報が付加されたＪＰＥＧデータファイルを生成してネットワークへ送出するデータ送出手段とを有することを特徴とする。
【００２５】
また、上記の目的を達成するため、第４の発明は、第２の発明の分割画像処理システムで用いる固体撮像装置であり、固体撮像素子で撮像した画像データの一画面を垂直方向にｎ分割（ｎは２以上の自然数）した分割画像を生成する画像分割処理手段と、分割画像をそれぞれＪＰＥＧ方式により圧縮して、ｎ個の分割圧縮画像データを生成する圧縮処理手段と、分割数ｎを示す分割情報と、画像分割の垂直位置情報ｍ（ｍは２以上の自然数）とを示す、ＪＰＥＧ規格に準拠したコメントセグメント情報を生成するコメントセグメント情報生成手段と、分割圧縮画像データに、少なくともコメントセグメント情報が付加されたＪＰＥＧデータファイルを生成してネットワークへ送出するデータ送出手段と、を有することを特徴とする。
【００２６】
また、上記の目的を達成するため、第５の発明は、第１の発明の分割画像処理システムで用いる再生装置であって、ネットワークを介してＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中のコメントセグメント情報と、特定のリスタートマーカの挿入位置とに基づいて、ＪＰＥＧデータファイル中の圧縮画像データの一画面の画像領域を垂直方向にｎ分割してｎ個の分割圧縮データを得る分割手段と、ｎ個の分割圧縮データが並列に供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、伸張処理手段から並列に出力されたｎ個の画像データを一画面の画像領域の合成画像データとして生成する画像合成処理手段とを有することを特徴とする。
【００２７】
また、上記の目的を達成するため、第６の発明は、第２の発明の分割画像処理システムで用いる再生装置であって、ネットワークを介してＪＰＥＧデータファイルを受信し、そのＪＰＥＧデータファイル中のコメントセグメント情報に基づいて、一画面を垂直方向にｎ分割して得られたＪＰＥＧ圧縮画像データか否かを判断し、ｎ分割して得られたＪＰＥＧ圧縮画像データのときには画像分割の垂直位置情報ｍに基づきｎ個の分割圧縮画像データを振り分けて出力するコメントセグメント判断処理手段と、ｎ個の分割圧縮データが振り分けられて供給され、互いに独立して伸張処理してｎ個の画像データを生成し、並列に出力する伸張処理手段と、伸張処理手段から並列に出力されたｎ個の画像データを一画面の画像領域の合成画像として生成する画像合成処理手段とを有することを特徴とする。
【００２８】
また、上記の目的を達成するため、第７の発明は、撮像した画像データをＪＰＥＧ方式により圧縮して圧縮画像データを生成し、その圧縮画像データをネットワークへ送信する機能を第１のコンピュータにより実現させる撮像用プログラムと、ネットワークを介して受信した圧縮画像データを複数に分割し、複数の分割圧縮画像データに対して並列に伸張処理を行ってから１枚の画像データに合成する機能を第２のコンピュータにより実現させる再生用プログラムとから少なくとも構成された分割画像処理用プログラムであることを特徴とする。この発明では、高速処理可能な伸張処理能力を持つ高価な装置を使用しなくとも、比較的安価な再生装置でも高精細のＪＰＥＧ圧縮画像の再生表示が可能である。
【００２９】
また、第８の発明のプログラムは、第３の発明の各構成手段をコンピュータを用いて実現させることを特徴とし、本発明の第９の発明のプログラムは、第５の発明の各構成手段をコンピュータを用いて実現させることを特徴とする。更に、第１０の発明のプログラムは、第２の発明の各構成手段をコンピュータを用いて実現させることを特徴とする。
【発明の効果】
【００３０】
第１、第３、第５、第７〜第９の発明によれば、固体撮像装置より再生装置に供給される圧縮画像データは、ＪＰＥＧ規格に準拠した圧縮画像データでありながら、圧縮画像データに挿入される複数種類のリスタートマーカの挿入方法に工夫が施されており、また、圧縮画像データの分割数及び特定のリスタートマーカの出現回数とを示すコメントセグメント情報を含んでいるため、再生装置側では、コメントセグメント情報と特定のリスタートマーカとに基づいて、圧縮画像データをｎ分割し、そのｎ分割圧縮画像データを互いに独立して並列に伸張処理することができ、これにより、ｎ個の分割画像データを生成して一画面の画像領域の合成画像データを生成することができる。
【００３１】
また、第２、第４、第６、第１０の発明によれば、固体撮像装置より再生装置に供給される圧縮画像データは、ＪＰＥＧ規格に準拠した圧縮画像データでありながら、撮影された一画面がｎ個の圧縮画像データに分割されており、この分割の有無情報と分割数ｎを記述したコメントセグメント情報を含んでいるため、再生装置側ではコメントセグメント情報に基づいて、予め定められた複数のＪＰＥＧ伸張機に各々圧縮データを振り分けて、ｎ分割圧縮画像データを互いに独立して並列に伸張処理することができ、これにより、ｎ個の分割画像データを生成して一画面の画像領域の合成画像データを生成することができる。
【００３２】
従って、以上より、第１〜第１０の発明によれば、複数の低速なＪＰＥＧ伸張処理機能しか持たない再生装置でも、高精細のＪＰＥＧ圧縮画像を再生表示可能となる。このことは、高精細再生表示対応のために、別途高速処理可能な独立した高価なＬＳＩ等を搭載しなくても、通常はＶＧＡクラスのマルチ表示対応を行いながら、必要に応じて高精細表示に切り替えて使用するマルチ仕様表示機能の実現も可能となる。
【発明を実施するための最良の形態】
【００３３】
次に、本発明を実施するための最良の形態について図面と共に説明する。
【００３４】
（第１の実施の形態）
図１は本発明になる分割画像処理システムの第１の実施の形態のブロック図を示す。本実施の形態の分割画像処理システムは、所望の被写体を撮像してＪＰＥＧデータを出力する固体撮像装置１Ａと、ネットワーク対応ビデオ記録再生装置２０Ａと、固体撮像装置１Ａとネットワーク対応ビデオ記録再生装置２０Ａとを接続するネットワーク１５と、高精細ディスプレイ３５とから構成されている。
【００３５】
固体撮像装置１Ａは、ＣＣＤ等の固体撮像素子２と、固体撮像素子２から出力された撮像データに対してＡ／Ｄ変換や自動利得制御（ＡＧＣ）処理するアナログ処理回路３と、タイミングジェネレータ及びビデオドライバ４と、アナログ処理された撮像データに対してＹ／Ｃ変換処理するカメラＤＳＰ（Digital Signal Processor）５と、カメラＤＳＰ５からの撮像データに対してＪＰＥＧ圧縮処理してＪＰＥＧデータを生成するＪＰＥＧ圧縮部６と、ネットワーク１５を介してデータを送信するための中央処理装置（ＣＰＵ）１０と、メモリ１１と、半導体メモリからなる記録メディア１２と、ネットワーク通信処理部１３とを備えて構成されている。また、ＪＰＥＧ圧縮処理部６は、リスタートマーカ挿入部７、ヘッダ付与部８及びコメントセグメント付与部９を有して構成されている。特に、コメントセグメント付与部９は、リスタートマーカを定期的に循環挿入する挿入単位情報と垂直ライン分割ｎの情報をＪＰＥＧ規格で定義されるコメントセグメント情報として付与する手段を含んでいる。
【００３６】
一方、ネットワーク対応ビデオ記録再生装置２０Ａは、図１に示すように、ネットワーク通信処理部２１と、ネットワーク１５を介してデータを受信するための中央処理装置（ＣＰＵ）２２と、メモリ２３と、ハードディスクドライブ（ＨＤＤ）からなる記録メディア２４と、分割伸張再生手段に該当するフレームヘッダ付け替え付与部２６及びＪＰＥＧデータファイル分割処理部２７を備えたコメントセグメント判断処理部２５と、新たに生成される分割ＪＰＥＧデータファイルを記憶するメモリ２８と、４分割されたＪＰＥＧデータファイルを並列にＪＰＥＧ伸張する４つのＪＰＥＧ伸張処理部２９〜３２と、並列に伸張された４つの分割画像を合成処理する画像合成処理部３３と、高精細ディスプレイ３５に画像データを出力するための画像表示ドライバ３４とから構成されている。
【００３７】
次に、本実施の形態の固体撮像装置１Ａが有する各構成要素について説明する。固体撮像素子２は、画像を撮影するための撮像素子であり、タイミングジェネレータ及びビデオドライバ４の出力信号に基づき、例えば解像度がＳＸＧＡの撮影画像の撮像データを直列に出力する。固体撮像素子２から出力されたＳＸＧＡの撮像データは、アナログ処理回路３で赤（Ｒ）、緑（Ｇ）及び青（Ｂ）の三原色のディジタル画像信号に変換され、更に自動利得制御（ＡＧＣ）処理後、カメラＤＳＰ５に供給され、ここで輝度信号Ｙと２種類の色差信号ＣにＹ／Ｃ変換された後、垂直同期信号と水平同期信号を参照して、有効データ領域の画像データがＪＰＥＧ圧縮処理部６に読み込まれる。
【００３８】
本実施の形態におけるＪＰＥＧ圧縮処理部６は、図２に示すように、ＳＸＧＡの画像データ処理を行う。すなわち、図２（Ａ）に示す水平方向１２８０画素（pixel）、垂直方向９６０ライン（line）の解像度のＳＸＧＡの入力撮像データ４０は、ＪＰＥＧ圧縮処理部６により同図（Ｂ）に示すＪＰＥＧデータ４１にＪＰＥＧ圧縮処理される。このとき、伸張再生時の分割ＪＰＥＧデータを垂直方向に４分割（ｎ＝４）できるように考慮され、ＪＰＥＧデータ４１を２４０ライン毎の圧縮データ４２〜４５に４分割することを可能にしている。これは、ＶＧＡクラスでのＪＰＥＧ伸張機で分割伸張することを想定している。
【００３９】
また、リスタートマーカ挿入部７はリスタートマーカ４６を圧縮データ４２〜４５のそれぞれに循環挿入する。その循環挿入は、８種類（ＦＦＤ０〜ＦＦＤ７）のリスタートマーカについて、各圧縮データ４２〜４５のそれぞれに対して行われ、ここでは、１２８０画素／ラインを１単位として３０ライン毎にリスタートマーカを挿入し、各圧縮データ４２〜４５におけるリスタートマーカＦＦＤ７の出現は１回になるように考慮される。従って、コメントセグメント付与部９は、ＪＰＥＧ分割可能設定情報ｎを“４”、分割するＪＰＥＧ圧縮データ内のリスタートマーカＦＦＤ７の出現回数ｍを“１”として付与する。
【００４０】
図３は本実施の形態における基本ＤＣＴ方式としてのＪＰＥＧデータ構成を示し、ＪＰＥＧ規格に準拠している。図３（Ａ）に示すように、情報開始を表すマーカであるＳＯＩ(Start of Image)と、フレームと、情報終了を表すマーカであるＥＯＩ(End of Image)とからＪＰＥＧデータは構成されている。そのうち、フレームは、図３（Ｂ）に示すように、必要なテーブルの指定を行うテーブル等の情報６１、フレームヘッダ６２、スキャン情報６３からなり、スキャン情報６３は同図（Ｃ）に示すように、テーブルの指定を行う情報６４、スキャンヘッダ６５、エントロピー符号化セグメントＥＣＳ０〜ＥＣＳ３１と、隣接するＥＣＳ間に挿入されるマーカＲＳＴ０〜ＲＳＴ３０とから構成される。ＥＣＳ０はライン０〜ライン２９間のＤＣＴ係数データであり、以下連続する３０ライン毎にそれらのライン間のＤＣＴ係数データがＥＣＳ１〜ＥＣＳ３１により示される。
【００４１】
また、フレームヘッダ６２は、画像のサイズや画像成分毎の扱い方を指定するヘッダで、図４（Ａ）に示す構成とされている。フレームヘッダ中の成分指定パラメータの構成は、図４（Ｂ）で示され、それらの各パラメータとサイズと許容値と意味は図４（Ｃ）に示される。更に、スキャンヘッダ６５は、画像成分毎にＤＣ成分とＡＣ成分でどのハフマンテーブルを使用するかを指定するヘッダで、図５（Ａ）に示す構成とされている。スキャンヘッダ中の成分指定パラメータの構成は、図５（Ｂ）で示され、それらの各パラメータとサイズと許容値と意味は図５（Ｃ）に示される。
【００４２】
また、コメントセグメント付与部９で付与されるコメントセグメントは、図３に示したＪＰＥＧデータとは独立した情報で、図６（Ａ）に示すようにコメントセグメントであることを示す２バイトのマーカＣＯＭと、それに続くパラメータＬｃ及びＣｍｉとからなるセグメントである。また、パラメータＬｃ及びＣｍｉは、図６（Ｂ）に示すように、Ｌｃがパラメータ長を示すパラメータであり、Ｃｍｉがコメントデータを示すパラメータである。上記のＪＰＥＧ分割可能設定情報ｎ、分割するＪＰＥＧ圧縮データ内のリスタートマーカＦＦＤ７の出現回数ｍは、コメントデータＣｍｉにより示される。
【００４３】
図１において、ＪＰＥＧ圧縮処理部６から出力されたＪＰＥＧ方式により圧縮されたＪＰＥＧ規格に準拠したＪＰＥＧデータは、上記のコメントセグメントと共に、ＣＰＵ１０及びネットワーク通信処理部１３を経由してネットワーク１５へ送信される。
【００４４】
次に、本実施の形態のネットワーク対応ビデオ記録再生装置２０Ａが有する各構成要素について説明する。ネットワーク１５を介して供給される固体撮像装置１Ａから供給されるＪＰＥＧデータ及びコメントセグメントは、ネットワーク通信処理部２１と、ＣＰＵ２２を介し、記録する場合は記録メディア２４へ供給されて記録される。記録と同時にモニタする場合や記録メディア２４からの再生処理時には、図２（Ａ）に示したＳＸＧＡの撮像データ４０に基づいた、同図（Ｂ）に示したＪＰＥＧデータ４１が、コメントセグメントと共にコメントセグメント判断処理部２５に供給される。
【００４５】
コメントセグメント判断処理部２５では、コメントセグメント中の分割可能情報ｎに基づき分割可能であるか判断し、ｎ≠０であれば、ＪＰＥＧデータファイル分割処理部２７にて特定のリスタートマーカＦＦＤ７を検索サーチし、分割ＪＰＥＧデータの範囲内でのＦＦＤ７の出現回数はそれぞれ“１”であることを利用し、ＪＰＥＧデータ４１をリスタートマーカＦＦＤ７の検出時点毎に区切ることにより、図２（Ｂ）に示した分割圧縮データ４２〜４５に分割処理し、それらをメモリ２８に書き込む。
【００４６】
この時、コメントセグメント判断処理部２５のフレームヘッダ付け替え付与部２６は、図４に示すフレームヘッダ構成の中の”Ｙ”のライン数情報を１／４の値（９６０ラインを２４０ライン書き換え）に変更付与し、更に、フレームヘッダ構成の中の”Ｙ”のライン数情報以外の情報もメモリ２８に書き込み、新たに４分割したＪＰＥＧデータファイルを生成する。
【００４７】
その後、メモリ２８から読み出された４分割したＪＰＥＧデータファイルは、４つのＪＰＥＧ伸張処理部２９〜３２にてそれぞれ並列に伸張処理される。並列の伸張処理が終了すると、ＪＰＥＧ伸張処理部２９〜３２からそれぞれ出力された４分割された伸張画像データは、画像合成処理部３３にて合成処理された後、画像表示ドライバ３４を介して高精細ディスプレイ３５に出力され画像表示される。なお、ｎ＝０の場合には、本装置では再生処理が不可能なＪＰＥＧデータのため何もしない。
【００４８】
このように、本実施の形態では、固体撮像装置１Ａより供給されるＪＰＥＧデータは、ＪＰＥＧ規格に準拠したＪＰＥＧデータでありながら、リスタートマーカの挿入方法の工夫により、ネットワーク対応ビデオ記録再生装置２０Ａにおいて１枚のＪＰＥＧデータを４分割した新たな分割ＪＰＥＧデータとして生成し直すことが可能であるため、ネットワーク対応ビデオ記録再生装置２０Ａが、複数の低速なＪＰＥＧ伸張処理機能しか持たない記録再生装置でも並列処理することが可能となり、分割ＪＰＥＧデータを伸張処理後、画像合成処理することで高精細のＪＰＥＧ圧縮画像を生成し、それを高精細ディスプレイ３５で再生表示できる。
【００４９】
このことは、高精細再生表示対応のために、別途高速処理可能な独立した高価なＬＳＩ等を搭載しなくても、通常はＶＧＡクラスのマルチ表示対応を行いながら、必要に応じて高精細表示に切り替えて使用するマルチ仕様表示機能の実現も可能となる。
【００５０】
次に、リスタートマーカの挿入方法の第２の実施例について説明する。図７及び図８はリスタートマーカの挿入方法の第１の実施例を説明した図２（Ａ）、（Ｂ）と図３に対応した、第２の実施例の画像データ及びＪＰＥＧデータを示す。第２の実施例では、図７（Ａ）に示すＳＸＧＡの１枚の撮像データ４０に対するＪＰＥＧ分割可能設定情報ｎは“４”で、第１の実施例と同じであるが、リスタートマーカ５６の挿入を１ライン毎に挿入する点に特徴がある。
【００５１】
従って、この実施例では、図７（Ｂ）に示すように、ＪＰＥＧデータ５１は各々１２８０画素、２４０ラインの４つの分割圧縮画像データ（１／４ライン画面圧縮データ）５２〜５５に分割されるが、各分割圧縮画像データ５２〜５５は、各ライン毎に８種類のリスタートマーカＦＦＤ０〜ＦＦＤ７が１種類ずつ巡回的（循環的）に挿入されるため、２４０ラインの１つの分割圧縮画像データにおける特定のリスタートマーカＦＦＤ７の出現回数は３０（＝２４０／８）回となる。従って、この場合には、ネットワーク対応ビデオ記録再生装置２０Ａ側でのＪＰＥＧデータファイル分割処理部２７での４分割処理は、リスタートマーカＦＦＤ７の出現回数が３０回毎に分割処理管理する必要がある。
【００５２】
また、本実施例における基本ＤＣＴ方式としてのＪＰＥＧデータ構成もＪＰＥＧ規格に準拠しており、図８（Ａ）に示す構成であり、図３（Ａ）に示した第１の実施の形態のＪＰＥＧデータの基本的な構成は同じであるが、本実施の形態では、スキャン情報６７が、図８（Ｃ）に示すように、エントロピー符号化セグメントがＥＣＳ０〜ＥＣＳ９５９と全部で９６０ライン分あり、２つのＥＣＳの間に挿入されるマーカもＲＳＴ０〜ＲＳＴ９５８で示すように９５９個ある点が第１の実施例と異なる。
【００５３】
次に、本実施の形態の固体撮像装置１Ａの動作におけるリスタートマーカの挿入方法について、図９を参照して説明する。図９は本実施の形態の固体撮像装置が行う動作について説明するフローチャートである。まず、図１に示す固体撮像素子２が所望の被写体の撮像を行うと（ステップＳ１０１）、固体撮像素子２により得られた撮像データがアナログ処理回路３によりＡ／Ｄ変換及びＡＧＣ処理されてディジタル画像データに変換され（ステップＳ１０２）、カメラＤＳＰ５に供給されて輝度信号と２種類の色差信号へＹ／Ｃ変換される（ステップＳ１０３）。
【００５４】
続いて、上記のＹ／Ｃ変換された輝度信号と２種類の色差信号からなるディジタル画像データは、ＪＰＥＧ圧縮処理部６によりＪＰＥＧ圧縮処理されてＪＰＥＧデータとなる（ステップＳ１０４）。続いて、ＪＰＥＧ圧縮の分割処理を行うかどうか判定し（ステップＳ１０５）、例えば４分割処理する場合は、図２（Ｂ）又は図７（Ｂ）と共に説明したように、リスタートマーカの挿入指定内容をコメントセグメント付与部９により付与し（ステップＳ１０６）、リスタートマーカを挿入指定に従いリスタートマーカ挿入部７により挿入する（ステップＳ１０７）。なお、ＪＰＥＧ圧縮の分割処理を行わない場合は、リスタートマーカを標準設定処理にて挿入する（ステップＳ１０８）。
【００５５】
ステップＳ１０７又はＳ１０８によるリスタートマーカの挿入後に、ＪＰＥＧ圧縮処理部６内のヘッダ付与部８によりヘッダがＪＰＥＧデータに付与されて所定フォーマットとされた後（ステップＳ１０９）、ＣＰＵ１０を介してＪＰＥＧデータ及びコメントセグメントからなるＪＰＥＧデータファイルがメモリ１１に書き込まれる（ステップＳ１１０）。
【００５６】
また、記録メディアへの書き込み指示があるかどうかＣＰＵ１０により判断され（ステップＳ１１１）、記録メディアへの書き込み指示があるときには、上記のＪＰＥＧデータファイルがＣＰＵ１０によりメモリ１１から読み出されて記録メディア１２に書き込まれる（ステップＳ１１２）。その後、メモリ１１に記憶された所定のフォーマットのＪＰＥＧデータファイルがＣＰＵ１０により読み出され、ネットワーク通信処理部１３を通してネットワーク１５へ出力され、一連の処理が終了する（ステップＳ１１３）。
【００５７】
次に、本実施の形態のネットワーク対応ビデオ記録再生装置２０ＡにおけるＪＰＥＧデータファイルの分割処理とＪＰＥＧ分割伸張後の画面合成処理方法について、図１０を参照して説明する。図１０は本実施の形態のネットワーク対応ビデオ記録再生装置２０Ａが行う動作について説明するフローチャートである。
【００５８】
まず、図１のネットワーク対応ビデオ記録再生装置２０Ａは、記録メディア２４に記録された再生対象のカメラデータを指定し（図１上では図示せず）、対象となるＪＰＥＧデータファイルをＣＰＵ２２により記録メディア２４から読み出す（ステップＳ２０１）。このとき、ネットワーク１５からの受信データであるＪＰＥＧデータファイルでの再生指示があれば（図１では図示せず）、記録メディア２４からデータを読み出さずに、ＣＰＵ２２は直接ネットワーク１５を経由してネットワーク通信処理部２１で受信した固体撮像装置１Ａからのデータを、再生対象のＪＰＥＧデータファイルとする。
【００５９】
次に、コメントセグメント判断処理部２５がＣＰＵ２２を介して入力される再生対象となるＪＰＥＧデータファイルのコメントセグメント情報を読み取り（ステップＳ２０２）、分割可能情報ｎに基づき分割処理があるかどうか判断し（ステップＳ２０３）、ｎ≠０であれば、分割処理有りと判断してフレームヘッダ付け替え付与部２６にてフレームヘッダのライン数を付け替え付与してメモリ２８に書き込んだ後（ステップＳ２０４）、ＪＰＥＧデータファイルをファイル分割してメモリ２８へ書き込む（ステップＳ２０５）。
【００６０】
そして、分割処理が終了したかを判断し、分割処理が終了するまでステップＳ２０４とＳ２０５の処理を繰り返す（ステップＳ２０６）。このように、ステップＳ２０４〜Ｓ２０６にてＪＰＥＧデータファイルをｎ分割処理し、メモリ２８に当該ＪＰＥＧ分割データファイルを一時的に格納する。一方、ステップＳ２０３でｎ＝０と判断したときは、本装置では再生処理が不可能なＪＰＥＧデータのため何もしないで、一連の処理を終了する。
【００６１】
ステップＳ２０４〜Ｓ２０６にてメモリ２８にＪＰＥＧ分割データファイルを一時的に格納すると、続いて、メモリ２８からＪＰＥＧ分割データファイルを読み出して各分割データファイル毎に並列に伸張処理する。ここでは４つのＪＰＥＧ分割データファイルに分割されているものとすると、それらは図１に示した４つのＪＰＥＧ伸長処理部２９〜３２により各ＪＰＥＧ分割データファイル別に並列に伸張処理される（ステップＳ２０７、Ｓ２０８）。  
【００６２】
続いて、ＪＰＥＧ伸長処理部２９〜３２により別々に伸張処理されて得られたＪＰＥＧ伸張画像データが、図１の画像合成処理部３３に供給されて１枚の映像に合成処理され（ステップＳ２０９）、その１枚の合成処理画像が、画像表示ドライバ３４を通して高精細ディスプレイ３５へ出力され（ステップＳ２１０）、一連の処理を終了する。こうして高精細ディスプレイ３５には、高精細の１枚の画像が表示される。
【００６３】
以上説明したように、本実施の形態の固体撮像装置１Ａ及びネットワーク対応ビデオ記録再生装置２０Ａを含む分割画像処理システムでは、ＪＰＥＧ圧縮時に最終的に出力される１枚の画像に対する圧縮データ内にＪＰＥＧ規格で規定されているリスタートマーカを定期的に循環して挿入し、その挿入位置をＪＰＥＧ処理単位の水平ライン右端とし、かつ、ＪＰＥＧ処理単位の垂直ラインをｎ分割したときに、少なくともｎ分割したそれぞれの最終ラインの右端に挿入するリスタートマーカが特定のリスタートマーカＦＦＤ７となるよう、定期的に循環挿入する挿入単位情報と垂直ライン分割ｎの情報を、ＪＰＥＧ規格で定義されるコメントセグメント情報として付与することにより、最終的に記録メディア１２への記録又は外部へネットワーク経由等で送信されるデータとして生成される。
【００６４】
一方、記録メディア２４へ記録されたＪＰＥＧ圧縮データ又はネットワーク経由で受信されたＪＰＥＧ圧縮データを記録及び伸張処理するネットワーク対応ビデオ記録再生装置２０Ａやネッワーク対応モニタ装置において、前記付与されたコメントセグメント情報に基づき１枚のＪＰＥＧデータをｎ分割のＪＥＧデータに分割処理し、ｎ個の伸張処理手段により並列に各分割ＪＰＥＧデータを伸張した後、１枚の画像データに画像合成処理し、表示装置へ出力することができる。
【００６５】
このように、本実施の形態によれば、ＪＰＥＧ規格に準拠したＪＰＥＧ圧縮データでありながら、リスタートマーカの挿入方法の工夫により、１枚のＪＰＥＧデータをｎ分割した新たなＪＰＥＧデータとして生成し直すことが可能となり、複数の低速なＪＰＥＧ伸張処理機能しか持たない記録再生装置でも並列処理することが可能となり、ＪＰＥＧデータを分割伸張後画像合成処理することで高精細のＪＰＥＧ圧縮画像を再生表示可能となる。
【００６６】
（第２の実施の形態）
図１１は本発明になる分割画像処理システムの第２の実施の形態のブロック図を示す。同図中、図１と同一構成部分には同一符号を付してある。図１１に示すように、第２の実施の形態の分割画像処理システムは、所望の被写体を撮像してＪＰＥＧデータを出力する固体撮像装置１Ｂと、ネットワーク対応ビデオ記録再生装置２０Ｂと、固体撮像装置１Ｂとネットワーク対応ビデオ記録再生装置２０Ｂとを接続するネットワーク１５と、高精細ディスプレイ３５とから構成されている。
【００６７】
固体撮像装置１Ｂは、ＣＣＤ等の固体撮像素子２と、固体撮像素子２から出力された撮像データに対してＡ／Ｄ変換や自動利得制御（ＡＧＣ）処理するアナログ処理回路３と、タイミングジェネレータ及びビデオドライバ４と、アナログ処理された撮像データに対してＹ／Ｃ変換処理するカメラＤＳＰ（Digital Signal Processor）５と、カメラＤＳＰ５からの撮像データに対して画面の垂直方向にｎ分割処理する画像分割処理部１６と、画像分割処理部１６からの分割画像データを各々時系列的にＪＰＥＧ圧縮処理してＪＰＥＧデータを生成するＪＰＥＧ圧縮処理部６ａ〜６ｄと、ネットワーク１５を介してデータを送信するための中央処理装置（ＣＰＵ）１０と、メモリ１１と、半導体メモリからなる記録メディア１２と、ネットワーク通信処理部１３とを備えて構成されている。
【００６８】
また、ＪＰＥＧ圧縮処理部６ａ〜６ｄは、それぞれリスタートマーカ挿入部７、ヘッダ付与部８及びコメントセグメント付与部９を有して構成されている。特に、コメントセグメント付与部９は、一画面における垂直ライン分割数ｎ（本実施の形態では、ｎ＝４）と分割位置の情報を、ＪＰＥＧ規格で定義されるコメントセグメント情報として付与する手段とを含んでいる。
【００６９】
一方、ネットワーク対応ビデオ記録再生装置２０Ｂは、図１１に示すように、ネットワーク通信処理部２１と、ネットワーク１５を介してデータを受信するためのＣＰＵ２２と、メモリ２３と、ハードディスクドライブ（ＨＤＤ）からなる記録メディア２４と、一画面における垂直ライン分割の有無判断を含む分割数ｎ（本実施の形態では、ｎ＝４）と分割位置に関する情報判断を行うコメントセグメント判断処理部３６と、４分割されたＪＰＥＧデータファイルを並列にＪＰＥＧ伸張する４つのＪＰＥＧ伸張処理部２９〜３２と、並列に伸張された４つの分割画像を合成処理する画像合成処理部３３と、高精細ディスプレイ３５に画像データを出力するための画像表示ドライバ３４とから構成されている。
【００７０】
次に、本実施の形態の固体撮像装置１Ｂが有する構成要素について説明する。本実施の形態の固体撮像装置１Ｂは、第１の実施の形態の固体撮像装置１Ａと比較すると、ＪＰＥＧ圧縮処理部が６ａ〜６ｄで示すように、画面の垂直方向の分割数ｎ（ここでは”４”）と同じ数だけ並列に設けられており、また、カメラＤＳＰ５とＪＰＥＧ圧縮処理部６ａ〜６ｄの間に画像分割処理部１６が設けられている点に特徴がある。
【００７１】
本実施の形態における画像分割処理部１６は、図２（Ａ）に示した水平方向１２８０画素（pixel）、垂直方向９６０ライン（line）の解像度のＳＸＧＡの入力画像データ４０を、分割処理が有効な場合には垂直方向に４分割して各分割画像データをＪＰＥＧ圧縮処理部６ａ〜６ｄに別々に供給して、独立して図２（Ｃ）に示した各分割画像データ４２〜４５をそれぞれ生成させる。分割処理が有効でない場合には画像分割処理部１６は何も処理を行わず、ＪＰＥＧ圧縮処理部６ａ〜６ｄにより、図２（Ｃ）に示した１つのＪＰＥＧ圧縮データ４１が生成される。
【００７２】
すなわち、画像分割処理が有効な場合には再生処理側のネットワーク対応ビデオ記録再生装置２０Ｂでは、ネットワーク１５を通して受信した圧縮データ４２〜４５又は記録メディア２４から読み出されたＪＰＥＧデータのコメントセグメント情報を判断するだけで、予め定められたＪＰＥＧ伸張機に圧縮データを割り振り供給でき、容易にＶＧＡクラスでのＪＰＥＧ伸張機で分割伸張することを可能にしている。
【００７３】
また、コメントセグメント付与部９で付与されるコメントセグメントは、図３に示したＪＰＥＧデータとは独立した情報で、図６（Ａ）、（Ｂ）に示した構成である。上記のＪＰＥＧ分割可能設定情報ｎは、図６（Ａ）、（Ｂ）に示したコメントデータＣｍｉにより示される。従って、例えばｎ＝０の場合には分割無し、ｎ≠０の場合には分割位置情報をｍ（ｍは１以上の自然数）として定義することで、分割位置情報がｍ／ｎで与えられ、ｍは１から順次１ずつ増加し最大値ｎをとるように定義することで、分割位置は先頭より１／ｎ〜ｎ／ｎ番目と規定することが可能である。
【００７４】
図１１において、ＪＰＥＧ圧縮処理部６ａ〜６ｄから出力されたＪＰＥＧ方式により圧縮されたＪＰＥＧ規格に準拠したＪＰＥＧデータは、上記のコメントセグメント情報と共に、ＣＰＵ１０及びネットワーク通信処理部１３を経由してネットワーク１５へ送信される。
【００７５】
次に、本実施の形態のネットワーク対応ビデオ記録再生装置２０Ｂが有する各構成要素について説明する。本実施の形態のネットワーク対応ビデオ記録再生装置２０Ｂは、第１の実施の形態のネットワーク対応ビデオ記録再生装置２０Ａと比較すると、コメントセグメント判断処理部３６の構成が第１の実施の形態のコメント判断処理部２５の構成と異なる。すなわち、ネットワーク１５を介して供給される固体撮像装置１Ｂから供給されるＪＰＥＧデータ及びコメントセグメントは、ネットワーク通信処理部２１と、ＣＰＵ２２を介し、記録する場合は記録メディア２４へ供給されて記録され、記録と同時にモニタする場合や記録メディア２４からの再生処理時には、図２（Ａ）に示したＳＸＧＡの画像データ４０に基づいた、同図（Ｂ）に示したＪＰＥＧデータ４１又は４２〜４５が、コメントセグメントと共にコメントセグメント判断処理部３６に供給される点は第１の実施の形態と同様である。
【００７６】
しかし、本実施の形態のコメントセグメント判断処理部３６では、コメントセグメント中の分割可能情報ｎに基づき分割可能であるか判断し、例えばｎ＝４であれば、コメントセグメント判断処理部３６によりｍ＝１の時はＪＰＥＧ伸張処理部２９に圧縮データが供給開始され、同様に、ｍ＝２の時はＪＰＥＧ伸張処理部３０に、ｍ＝３の時はＪＰＥＧ伸張処理部３１に、ｍ＝４の時はＪＰＥＧ伸張処理部３２に順次圧縮データが供給され、４分割されたＪＰＥＧデータファイルは、４つのＪＰＥＧ伸張処理部２９〜３２にてそれぞれ伸張処理される。
【００７７】
伸張処理が全て終了すると、ＪＰＥＧ伸張処理部２９〜３２からそれぞれ出力された４分割された伸張画像データは、画像合成処理部３３にて合成処理された後、画像表示ドライバ３４を介して高精細ディスプレイ３５に出力され画像表示される。なお、コメントセグメント判断処理部３６は、ｎ＝０の場合には、ＶＧＡのサイズ以下であればその圧縮データを所定のＪＰＥＧ伸張処理部に供給して伸張処理させた後、画像合成処理部３３と画像表示ドライバ３４を経由して高精細ディスプレイ３５に供給して画像表示させる。
【００７８】
このように、本実施の形態では、固体撮像装置１Ｂより供給するＪＰＥＧデータを予め分割処理したＪＰＥＧ圧縮データを供給処理することで、ネットワーク対応ビデオ記録再生装置２０Ｂが、複数の低速なＪＰＥＧ伸張処理機能しか持たない記録再生装置でも並列処理することが可能となり、分割ＪＰＥＧデータを伸張処理後、画像合成処理することで高精細のＪＰＥＧ圧縮画像を生成し、それを高精細ディスプレイ３５で再生表示できる。
【００７９】
このことは、高精細再生表示対応のために、別途高速処理可能な独立した高価なＬＳＩ等を搭載しなくとも、通常はＶＧＡクラスのマルチ表示対応を行いながら、必要に応じて構成再表示に切り替えて使用するマルチ仕様表示機能の実現も可能となる。
【００８０】
次に、図１１に示す本実施の形態の固体撮像装置１Ｂにおける画像分割によるＪＰＥＧ圧縮処理方法について、図１２を参照して説明する。図１２は本実施の形態の固体撮像装置１Ｂが行う動作について説明するフローチャートである。まず、図１１に示す固体撮像素子２が所望の被写体の撮像を行うと（ステップＳ３０１）、固体撮像素子２により得られた画像データがアナログ処理回路３によりＡ／Ｄ変換及びＡＧＣ処理されてディジタル画像データに変換され（ステップＳ３０２）、カメラＤＳＰ５に供給されて輝度信号Ｙと２種類の色差信号ＣへＹ／Ｃ変換される（ステップＳ３０３）。
【００８１】
続いて、上記のＹ／Ｃ変換された輝度信号と２種類の色差信号からなるディジタル画像データは、カメラＤＳＰ５は画像分割処理を行うかどうかを判定し（ステップＳ３０４）、例えば４分割処理する場合には、画像分割処理部１６により画像分割処理（ステップＳ３０５）されて各分割画像データがＪＰＥＧ圧縮処理部６ａ〜６ｄにそれぞれ供給されて、各分割画像データ毎に独立してＪＰＥＧ圧縮されて図２（Ｃ）に示した４つの圧縮画像データ４２〜４５が互いに独立して並行して生成され（ステップＳ３０６）、更に画像分割有無情報と分割位置情報をコメントセグメントにて付与し（ステップＳ３０７）、ヘッダを付与した後（ステップＳ３０８）、ＣＰＵ１０を経由してＪＰＥＧデータファイルとしてメモリ１１に書き込む（ステップＳ３０９）。次に、ＪＰＥＧ圧縮の分割処理が終了したかを判断し（ステップＳ３１０）、終了していなければステップＳ３０６〜Ｓ３０９を繰り返す。
【００８２】
一方、画像分割処理を行わない場合には、画像分割処理部１６は分割処理は行わず入力画像データをそのままＪＰＥＧ圧縮処理部６ａ〜６ｄに供給して、標準のＪＰＥＧ圧縮処理を行い（ステップＳ３１１）、図２（Ｃ）に示した１つのＪＰＥＧ圧縮データ４１を生成し、この１つのＪＰＥＧ圧縮データ４１に画像分割有無情報をコメントセグメントにて付与し（ステップＳ３１２）、ヘッダを付与した後（ステップＳ３１３）、ＣＰＵ１０を経由してメモリ１１に書き込む（ステップＳ３１４）。
【００８３】
ステップＳ３１０によりＪＰＥＧ圧縮の分割処理終了と判断された場合、又はステップＳ３１４で非分割のＪＰＥＧ圧縮データ等からなるＪＰＥＧデータファイルがメモリ１１４に書き込まれると、記録メディア１２への書き込み指示があるかどうかＣＰＵ１０により判断され（ステップＳ３１５）、記録メディア１２への書き込む指示があるときには、上記のＪＰＥＧデータファイルがＣＰＵ１０によりメモリ１１から読み出されて記録メディア１２に書き込まれる（ステップＳ３１６）。その後、メモリ１１に記憶された所定のフォーマットのＪＰＥＧデータファイルがＣＰＵ１０により読み出され、ネットワーク通信処理部１３を通してネットワーク１５へ出力され、一連の処理が終了する（ステップＳ３１７）。
【００８４】
次に、本実施の形態のネットワーク対応ビデオ記録再生装置２０ＢにおけるＪＰＥＧデータファイルの分割処理とＪＰＥＧ分割伸張後の画面合成処理方法について、図１３を参照して説明する。図１３は本実施の形態のネットワーク対応ビデオ記録再生装置２０Ｂが行う動作について説明するフローチャートである。
【００８５】
まず、図１１のネットワーク対応ビデオ記録再生装置２０Ｂは、記録メディア２４に記録された再生対象のカメラデータを指定し（図１１では図示せず）、対象となるＪＰＥＧデータファイルをＣＰＵ２２により記録メディア２４から読み出す（ステップＳ４０１）。このとき、ネットワーク１５からの受信データであるＪＰＥＧデータファイルでの再生指示があれば（図１１では図示せず）、ＣＰＵ２２は記録メディア２４からデータを読み出さずに、ネットワーク１５を経由してネットワーク通信処理部２１で直接受信した固体撮像装置１Ｂからのデータを、再生対象のＪＰＥＧデータファイルとする。
【００８６】
次に、コメントセグメント判断処理部３６がＣＰＵ２２を介して入力される再生対象となるＪＰＥＧデータファイルのコメントセグメント情報を読み取り（ステップＳ４０２）、セグメント情報ｎにより分割圧縮処理されたＪＰＥＧデータファイルか標準的なＪＰＥＧ圧縮データファイルかを判断する（ステップＳ４０３）。例えば、ｎ≠０であれば分割処理されたＪＰＥＧ圧縮データファイルであると判断し、分割番号ｍに従い該当するＪＰＥＧ伸張処理部２９〜３２のいずれかにデータ供与し（ステップＳ４０４）、ＪＰＥＧ伸張処理を行う（ステップＳ４０５）。
【００８７】
次に、分割処理データが全て各ＪＰＥＧ伸張処理部２９〜３２に供与されたかを判断し、例えば、ｍ＝ｎであれば分割処理データが最終であると判断し、分割処理データが全て各伸張処理部２６〜２９に供与されるまでステップＳ４０２〜Ｓ４０５の処理を繰り返す（ステップＳ４０６）。次に、ＪＰＥＧ伸張の分割処理が全て終了するのを待って（ステップＳ４０７）、ＪＰＥＧ伸張処理が全て終了したら、図１１の画像合成処理部３３により分割処理したＪＰＥＧ伸張画像データを１枚の画像に合成処理する（ステップＳ４０８）。
【００８８】
一方、ステップＳ４０３で、セグメント情報が例えばｎ＝０であれば、分割処理無しの標準的なＪＰＥＧ圧縮データファイルと判断し、標準的なＪＰＥＧ伸張処理を行う（ステップＳ４０９）。そして、ステップＳ４０９による標準的なＪＰＥＧ伸張処理が終了した場合、又はステップＳ４０８による分割処理したＪＰＥＧ伸張画像データの画像合成処理が終了した場合は、生成されたＪＰＥＧ伸張画像データが、図１１の画像表示ドライバ３４を通して高精細表示ディスプレイ３５に出力され（ステップＳ４１０）、一連の処理を終了する。こうして高精細ディスプレイ３５には、高精細の１枚の画像が表示される。
【００８９】
以上説明したように、本実施の形態の固体撮像装置１Ｂ及びネットワーク対応ビデオ記録再生装置２０Ｂを含む分割画像処理システムでは、ＪＰＥＧ圧縮時に分割処理の有無情報ｎと分割処理時の画像処理位置情報ｍをＪＰＥＧ規格で定義されるコメントセグメント情報として付与することにより、最終的に記録メディア１２への記録又は外部へネットワーク経由等で送信されるデータとして生成される。
【００９０】
一方、記録メディア２４へ記録されたＪＰＥＧ圧縮データ又はネットワーク経由で受信されたＪＰＥＧ圧縮データを記録及び伸張処理するネットワーク対応ビデオ記録再生装置２０Ｂやネットワーク対応モニタ装置において、前記付与されたコメントセグメント情報に基づき、ＪＰＥＧデータファイルが分割処理されたデータファイルであるか否かを判断し、分割処理されたデータファイルである場合はｎ個の伸張処理手段により各分割ＪＰＥＧデータを伸張した後、１枚の画像データに画像合成処理し、表示装置である高精細ディスプレイ３５へ出力することができる。
【００９１】
このように、本実施の形態によれば、ＪＰＥＧ圧縮処理時に１枚の映像を予め複数の画像データに分割処理した後でＪＰＥＧ圧縮処理し、ＪＰＥＧ圧縮データに分割処理情報をＪＰＥＧ規格に準拠したコメントセグメントデータに付与することで、ＪＰＥＧ伸張処理時にはコメントセグメント情報により分割伸張することが可能となり、複数の低速なＪＰＥＧ伸張処理機能しか持たない記録再生装置でも並列処理することが可能となり、ＪＰＥＧデータを分割伸張後画像合成処理することで、高精細のＪＰＥＧ圧縮画像を再生表示可能となる。
【００９２】
なお、本発明は以上の実施の形態に限定されるものではなく、例えば上記固体撮像装置１Ａ又は１Ｂの機能を第１のコンピュータに実現させ、ネットワーク対応ビデオ記録再生装置２０Ａ又は２０Ｂの機能を第２コンピュータに実現させるためのコンピュータプログラムも含むものである。このコンピュータプログラムは、記録媒体から読み取られてコンピュータに取り込まれてもよいし、通信ネットワークを介して伝送されてコンピュータに取り込まれてもよい。
【００９３】
また、図１、図１１では受信したＪＰＥＧデータファイルを分割処理してから各分割ＪＰＥＧデータを伸張処理する装置は記録機能と再生機能を備えた記録再生装置２０Ａ、２０Ｂとして説明したが、本発明はこれに限定されるものではなく、例えばＪＰＥＧデータファイルを受信して再生する機能しか有しない再生専用装置にも適用できる。
【００９４】
また、ネットワークでの接続先であるネットワーク対応ビデオ記録再生装置２０Ａ、２０Ｂや、ネットワーク対応モニタ装置自身のＪＰＥＧ伸張処理構成能力に応じて、接続先側からの遠隔操作を可能とする手段を備えたシステムを構築することも可能である。
【図面の簡単な説明】
【００９５】
【図１】本発明の分割画像合成処理システムの第１の実施の形態のブロック図である。
【図２】本発明の高精細画像（ＳＸＧＡ）のＪＰＥＧデータ分割可能処理フォーマットの第１の実施例の説明図である。
【図３】図２に伴うＪＰＥＧ規格に準拠した、基本ＤＣＴ方式ＪＰＥＧデータ構造例である。
【図４】図３中のフレームヘッダの一例の構造の説明図である。
【図５】図３中のスキャンヘッダの一例の構造の説明図である。
【図６】コメントセグメントの一例の構造の説明図である。
【図７】本発明の高精細画像（ＳＸＧＡ）のＪＰＥＧデータ分割可能処理フォーマットの第２の実施例の説明図である。
【図８】図７に伴うＪＰＥＧ規格に準拠した、基本ＤＣＴ方式ＪＰＥＧデータ構造例である。
【図９】本発明の固体撮像装置の第１の実施の形態の動作説明用フローチャートである。
【図１０】本発明のネットワーク対応ビデオ記録再生装置の第１の実施の形態の動作説明用フローチャートである。
【図１１】本発明の分割画像合成処理システムの第２の実施の形態のブロック図である。
【図１２】本発明の固体撮像装置の第２の実施の形態の動作説明用フローチャートである。
【図１３】本発明のネットワーク対応ビデオ記録再生装置の第２の実施の形態の動作説明用フローチャートである。
【図１４】特開２００４−２２１９６３号公報に記載の分割画像合成処理装置が行うリスタートマーカの付け替えによる、分割ＪＰＥＧデータの連結ＪＰＥＧデータの生成イメージ図である。
【図１５】特開２００２−８４４９３号公報に記載の固体撮像装置が行うリスタートマーカの付け替えによる、分割ＪＰＥＧデータの連結ＪＰＥＧデータ生成のメモリイメージ図である。
【符号の説明】
【００９６】
１Ａ、１Ｂ  固体撮像装置
２  固体撮像素子
３  アナログ処理回路
４  タイミングジェネレータ・ビデオドライバ
５  カメラＤＳＰ
６  ＪＰＥＧ圧縮処理部
７  リスタートマーカ挿入部
８  ヘッダ付与部
９  コメントセグメント付与部
１０、２２  中央処理装置（ＣＰＵ）
１１、２３、２８  メモリ
１２、２４  記録メディア
１３、２１  ネットワーク通信処理部
１５  ネットワーク
２０Ａ、２０Ｂ  ネットワーク対応ビデオ記録再生装置
２５、３６  コメントセグメント判断処理部
２６  フレームヘッダ付け替え付与部
２７  ＪＰＥＧデータファイル分割処理部
２９〜３２  ＪＰＥＧ伸張処理部
３３  画像合成処理部
３４  画像表示ドライバ
３５  高精細ディスプレイ
４０  ＳＸＧＡ撮像データ
４１、５１  ＳＸＧＡ画面圧縮データ
４２〜４５、５２〜５５  ＳＸＧＡ画面圧縮データ
４６、５６、ＦＦＤ０〜ＦＦＤ７  リスタートマーカ
【図１】
2007267349.tif 000003
【図２】
2007267349.tif 000004
【図３】
2007267349.tif 000005
【図４】
2007267349.tif 000006
【図５】
2007267349.tif 000007
【図６】
2007267349.tif 000008
【図７】
2007267349.tif 000009
【図８】
2007267349.tif 000010
【図９】
2007267349.tif 000011
【図１０】
2007267349.tif 000012
【図１１】
2007267349.tif 000013
【図１２】
2007267349.tif 000014
【図１３】
2007267349.tif 000015
【図１４】
2007267349.tif 000016
【図１５】
2007267349.tif 000017