(57)【要約】【課題】所定のフォーマットで伝送できるサイズより大きいサイズの画像データを伝送可能にすることを課題とする。【解決手段】信号切り出し部（１０３）は、１フレームの画素数が所定のフォーマット（ＳＤＩ）の規格で伝送可能な画素数よりも大きい画素数の画像データを、所定のフォーマットで伝送可能な画素数の第１の画像領域と、第１の画像領域を除いた第２の画像領域と、に切り分ける。マルチプレクサ（１０４）及び外部Ｉ／Ｆ（１０５）は、ＳＤＩに準拠した第１の伝送路で第１の画像領域のデータを伝送し、ＳＤＩに準拠した第２の伝送路で第２の画像領域のデータを伝送する。【選択図】図１
2018011126.tif 000002
【特許請求の範囲】
【請求項１】
１フレームの画素数が所定のフォーマットで伝送可能な画素数よりも大きい画素数の画像データを、前記所定のフォーマットで伝送可能な画素数の第１の画像領域と、前記第１の画像領域を除いた第２の画像領域と、に切り分ける切り出し手段と、
前記所定のフォーマットに準拠した第１の伝送路で前記第１の画像領域のデータを伝送し、前記所定のフォーマットに準拠した第２の伝送路で前記第２の画像領域のデータを伝送する伝送手段と、
を有することを特徴とする画像伝送装置。
【請求項２】
前記切り出し手段は、複数のフレームごとに、前記第１の画像領域と前記第２の画像領域への切り分けを行い、
前記伝送手段は、
前記複数のフレームから切り分けられた前記第１の画像領域のデータを、前記フレームの数と同じ数の前記第１の伝送路により同時に伝送し、
前記複数のフレームから切り分けられた前記第２の画像領域のデータを纏めて一つの前記第２の伝送路で伝送することを特徴とする請求項１に記載の画像伝送装置。
【請求項３】
前記切り出し手段は、１フレームの前記画像データの中央の画像領域を、前記第１の画像領域として切り出すことを特徴とする請求項１又は２に記載の画像伝送装置。
【請求項４】
前記切り出し手段は、１フレームの前記画像データの中央の前記第１の画像領域に対して、上方側の第１の領域と、左方側の第２の領域と、右方側の第３の領域と、下方側の第４の領域とを、前記第２の画像領域として切り出すことを特徴とする請求項３に記載の画像伝送装置。
【請求項５】
前記切り出し手段は、前記第１の領域の水平方向の画素数と前記第４の領域の水平方向の画素数とを、それぞれ前記第１の画像領域の水平方向の画素数と同画素数として切り出すことを特徴とする請求項４に記載の画像伝送装置。
【請求項６】
前記所定のフォーマットは、ＳＤＩ（Ｓｅｒｉａｌ  Ｄｉｇｉｔａｌ  Ｉｎｔｅｒｇａｃｅ）規格であることを特徴とする請求項１乃至５の何れか１項に記載の画像伝送装置。
【請求項７】
前記伝送手段は、
前記第１の画像領域のデータを、前記ＳＤＩのデータストリームのアクティブライン領域に配分して前記第１の伝送路で伝送し、
前記第２の画像領域のデータを、前記ＳＤＩのデータストリームのアクティブライン領域に配分して前記第２の伝送路で伝送することを特徴とする請求項６に記載の画像伝送装置。
【請求項８】
前記伝送手段は、
前記第２の画像領域のデータを前記データストリームに配分する際に、前記データストリームのなかで前記第２の画像領域のデータが配分されない領域には黒データを配分することを特徴とする請求項７に記載の画像伝送装置。
【請求項９】
前記切り出し手段は、
前記第１の画像領域の周辺の画素領域のデータを、前記ＳＤＩのデータストリームのブランキング領域に配分して前記第１の伝送路で伝送することを特徴とする請求項６乃至８の何れか１項に記載の画像伝送装置。
【請求項１０】
前記フレームの画像は、ベイヤー構造の撮像素子により取得されたＲＡＷ画像であることを特徴とする請求項１乃至９の何れか１項に記載の画像伝送装置。
【請求項１１】
１フレームの画素数が所定のフォーマットで伝送可能な画素数よりも大きい画素数の画像データを、前記所定のフォーマットで伝送可能な画素数の第１の画像領域と、前記第１の画像領域を除いた第２の画像領域と、に切り分けるステップと、
前記所定のフォーマットに準拠した第１の伝送路で前記第１の画像領域のデータを伝送し、前記所定のフォーマットに準拠した第２の伝送路で前記第２の画像領域のデータを伝送するステップと、
を有することを特徴とする画像伝送装置の画像伝送方法。
【請求項１２】
コンピュータを、請求項１乃至１０の何れか１項に記載の画像伝送装置の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像データを伝送する画像伝送装置、画像伝送方法、及びプログラムに関する。
【背景技術】
【０００２】
従来、ベイヤー（Ｂａｙｅｒ）構造の画素配列を有する撮像素子を用いた撮像装置が一般に知られている。このような撮像素子は、色フィルタを介して、画素を構成する光電変換素子に被写体からの像光を取り込み、像光の強さに応じた画像信号を出力する。そして、後段の処理部が画像信号に所定の処理を施すことによって、ビューファインダや外部の表示装置に画像が表示される。撮像素子には、一般にＲ（赤），Ｇ（緑），Ｂ（青）の各色信号をそれぞれ出力可能なＲ，Ｇ，Ｂ画素が所定のパターンで配置されている。
【０００３】
また特許文献１には、ベイヤー配列のＲＡＷデータをＳＭＰＴＥ（Ｓｏｃｉｅｔｙ  ｏｆ  Ｍｏｔｉｏｎ  Ｐｉｃｔｕｒｅ  ａｎｄ  Ｔｅｌｅｖｉｓｉｏｎ  Ｅｎｇｉｎｎｅｒｓ）で規格化されている３Ｇ−ＳＤＩにマッピングして出力する装置が開示されている。３Ｇ−ＳＤＩは、ＳＤＩ（Ｓｅｒｉａｌ  Ｄｉｇｉｔａｌ  Ｉｎｔｅｒｇａｃｅ）の規格の一つであり、１本のケーブルにより３Ｇｂ／ｓ（ビット／秒）のデータ伝送を可能とする規格である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１５−１９１８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、前述した３Ｇ−ＳＤＩのような所定のフォーマットで画像データを伝送する場合には、そのフォーマットで規定されている画像サイズまでのデータしか伝送することができない。例えば３Ｇ−ＳＤＩの場合には、４Ｋ解像度（水平４０９６画素×垂直２１６０画素）までのデータしか伝送することができない。このように、従来の技術では、所定のフォーマットで伝送できる画素数（画面サイズ）よりも例えば大きい画素数の画像データを伝送することができないという問題点がある。
【０００６】
そこで、本発明は、所定のフォーマットで規定された画素数より大きい画素数の画像データを伝送可能にすることを目的とする。
【課題を解決するための手段】
【０００７】
本発明は、１フレームの画素数が所定のフォーマットで伝送可能な画素数よりも大きい画素数の画像データを、所定のフォーマットで伝送可能な画素数の第１の画像領域と、第１の画像領域を除いた第２の画像領域と、に切り分ける切り出し手段と、所定のフォーマットに準拠した第１の伝送路で第１の画像領域のデータを伝送し、所定のフォーマットに準拠した第２の伝送路で第２の画像領域のデータを伝送する伝送手段と、を有することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、所定のフォーマットで規定された画素数より大きい画素数の画像データを伝送可能となる。
【図面の簡単な説明】
【０００９】
【図１】本実施形態の撮像装置の概略構成を示す図である。
【図２】ベイヤー構造の撮像素子の画素配列を模式的に示す図である。
【図３】撮像素子の画素領域における画素配置の構成を模式的に示す図である。
【図４】各色別のプレーンの画像データのデータ配列構成を概念的に示す図である。
【図５】信号切り出し処理の説明に用いる図である。
【図６】４ＫＲＡＷ有効画素エリアのデータ配列構成を概念的に示す図である。
【図７】上方余剰画素のデータ配列構成を概念的に示す図である。
【図８】左方余剰画素のデータ配列構成を概念的に示す図である。
【図９】右方余剰画素のデータ配列構成を概念的に示す図である。
【図１０】下方余剰画素のデータ配列構成を概念的に示す図である。
【図１１】各データストリームへの画素データの配分構成の説明図である。
【図１２】画素データが多重されたデータストリームの説明図である。
【図１３】周辺画素エリアの画素データの配分構成の説明図である。
【図１４】４ＫＲＡＷの画像データが多重されたデータ構造を示す図である。
【図１５】画素データが多重された１ライン目のデータ構造を示す図である。
【図１６】画素データが多重された２ライン目のデータ構造を示す図である。
【図１７】画素データが多重された３ライン目のデータ構造を示す図である。
【図１８】余剰画素のデータが多重されたデータ構造を示す図である。
【図１９】４フレームの余剰画素のデータが多重されたデータ構造を示す図である。
【発明を実施するための形態】
【００１０】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。本実施形態では、本発明に係る画像伝送装置の一適用例として、撮像装置を挙げているが、例えば携帯電話、スマートフォン、タブレット型情報端末、ノート型情報端末、コンピュータ等にも適用可能である。
＜第１の実施形態＞
図１は、本実施形態の撮像装置１００の概略構成例を示す図である。なお、本実施形態において、それぞれ説明される各機能ブロックは必ずしも個別のハードウェアである必要はなく、例えば幾つかの機能ブロックの機能は、１つのハードウェアにより実行されてもよい。また、幾つかのハードウェアの連係動作により１つの機能ブロックの機能、又は、複数の機能ブロックの機能が実現されてもよい。また、各機能ブロックの機能は、例えばＣＰＵがメモリ上に展開したコンピュータプログラムにより実行してもよい。
【００１１】
本実施形態の撮像装置１００は、いわゆるベイヤー構造の画像データを、ＳＤＩ（Ｓｅｒｉａｌ  Ｄｉｇｉｔａｌ  Ｉｎｔｅｒｇａｃｅ）の規格の一つである３Ｇ−ＳＤＩ規格に従って送信する機能を備えている。したがって、本実施形態の撮像装置１００は、撮像装置であるとともに画像データの伝送装置でもある。また、本実施形態の撮像装置１００は、ベイヤー構造の画像データをＳＤＩ規格に従って送信する際に、ＳＤＩ規格で伝送可能な所定の画素数（画像サイズ）よりも大きい画素数の撮像画像を、３Ｇ−ＳＤＩ規格の伝送路を利用して伝送可能とする機能を有している。第１の実施形態において、撮像画像の画素数は水平方向の画素数が４５２８画素、垂直方向の画素数が２３９２となされている。詳細については後述するが、第１の実施形態では、その撮像画像を伝送する際には、３Ｇ−ＳＤＩの伝送路を例えば２本使用して伝送する。なお、伝送する際のフレームレートは、３０ｆｐｓ（フレーム／秒）とする。もちろんこれらフレームレートや画素数、伝送路の本数などは一例である。
【００１２】
図１において、撮像部１０１は、撮像レンズ、シャッター、撮像素子、Ａ／Ｄ変換器などを有して構成される。撮像素子は、ＣＣＤセンサやＣＭＯＳセンサなどであり、撮像レンズにより撮像面上に形成された光学像を電気信号に変換し、Ａ／Ｄ変換によりデジタル画像データとして出力する。撮像素子は、図２に示すようなＲ（赤），Ｇｒ（緑），Ｇｂ（緑），Ｂ（青）の各フィルタが画素毎に配列されたベイヤー構造のカラーフィルタを備えている。
【００１３】
信号処理部１０２は、撮像部１０１から出力されたベイヤー構造の画像データを、Ｒ，Ｇｒ，Ｇｂ，Ｂの四つの色別の画素プレーンのデータに分け、それら四つの画素プレーンの画像データに対して種々の補正処理を行う。信号処理部１０２による補正処理後のＲ，Ｇｒ，Ｇｂ，Ｂの四つの画素プレーンの画像データは、メモリ１０９に送られて記憶される。
【００１４】
信号切り出し部１０３は、メモリ１０９に記憶されている各色別の画素プレーンを、３Ｇ−ＳＤＩの帯域で伝送できる画像サイズの画像とそれ以外の画像とに切り分けるようにして画像データを読み出す。信号切り出し部１０３における画像データの切り出し処理の詳細については後述する。信号切り出し部１０３によりメモリ１０９から読み出された画像データは、マルチプレクサ１０４に送られる。
【００１５】
マルチプレクサ１０４は、信号切り出し部１０３によりメモリ１０９から読み出された画像データを、３Ｇ−ＳＤＩの伝送路にマッピングして外部Ｉ／Ｆ１０５に送る。マルチプレクサ１０４におけるマッピング処理の詳細については後述する。外部Ｉ／Ｆ１０５は、３Ｇ−ＳＤＩの規格に従って画像データを外部に伝送する。
【００１６】
制御部１０６はＣＰＵを備え、フラッシュメモリ１０８に記憶された制御用ソフトウェアに従って撮像装置１００の各部を制御する。操作部１０７は、ユーザが各種操作の指示を入力するための操作子を有する。操作部１０７の操作子は、例えば電源ボタン、記録開始と停止の指示ボタン、メニュー表示ボタン、モード切り替えボタン、決定ボタン等のボタン類からなる。また、操作部１０７の操作子には、ボタン類の他、スイッチやキー、カーソルキー、タッチパネル、ポインティングデバイス、ダイヤル等が含まれていてもよい。また、操作部１０７の操作子は、表示部１１１に表示されるグラフィックユーザインターフェース（ＧＵＩ）上の種々の機能アイコンとして実現されていてもよい。この場合、ユーザは、例えばタッチパネルやポインティングデバイス、カーソルキーなどの操作を介して、これらのＧＵＩ上の機能アイコンの選択や操作を行えることになる。操作部１０７は、これらの各種操作子がユーザにより操作されると、その操作信号を制御部１０６に送る。
【００１７】
フラッシュメモリ１０８は、電気的に消去・記録可能な不揮発性のメモリであり、制御部１０６を動作させるために必要なプログラムや撮像装置１００固有の調整データ等が予め書き込まれている。メモリ１０９は、ＤＲＡＭ等の揮発性メモリから構成され、伝送される画像データや管理情報、或いは、制御部１０６の制御のために必用な各種情報を記憶する。
【００１８】
表示制御部１１０は、撮像部１０１より得られたベイヤー構造の画像データに対し、ディベイヤー（Ｄｅｂａｙｅｒ）処理等の所定の処理を施して、表示用の画像データを生成し、その表示用画像データを表示部１１１に送る。表示部１１１は、例えば液晶表示デバイス、又は有機ＥＬ表示デバイスなどであり、表示制御部１１０の制御により画像やメニュー画面、その他必用な情報等を表示する。
以上説明した各構成要素は、それら各構成要素間の制御信号やデータ信号のための伝送路である内部バス１１２により相互に接続されている。
【００１９】
次に、図３と図４を用いて、撮像部１０１の画素配置とメモリ１０９に記憶される色別の画素プレーンを説明する。
本実施形態において、撮像部１０１の画素配置は、例えば図３に示すように、有効画素エリア３０１とその周辺画素エリア３０２とから構成される。この画素配列の全体エリア３００から１回に取得可能な画素データ群からなる１フレームの画像は、いわゆるＲＡＷ画像であり、以下、ＲＡＷフレームと定義する。ＲＡＷフレームは、水平方向の画素数が４５２８画素（４５１２＋８＋８画素）、垂直方向の画素数は２３９２（２３７６＋８＋８画素）であり、ベイヤー構造の画素配列となされている。以下、図３に示したＲＡＷフレームを４．５ＫＲＡＷフレームと呼ぶ。この４．５ＫＲＡＷフレームからＲ，Ｇｒ，Ｇｂ，Ｂの各色別に各画素を集めた画素配列の画像データを、図４（ａ)〜図４（ｄ）に示す。図４（ａ）はＲの各画素を集めた画素配列の画像データ、以下同様に、図４（ｂ）はＧｒ、図４（ｃ）はＧｂ、図４（ｄ）はＢの各画素を集めた画素配列の画像データを示している。以下、Ｒの各画素からなる画像データをＲのプレーンと呼び、Ｇｂの各画素からなる画像データをＧｂのプレーン、Ｇｒの各画素からなる画像データをＧｒのプレーン、Ｂの各画素からなる画像データをＢのプレーンと呼ぶ。４．５ＫＲＡＷフレームから生成されるＲ，Ｇｒ，Ｇｂ，Ｂの各プレーンは、それぞれ水平方向の画素数が２２６４画素、垂直方向の画素数が１１９６画素である。信号処理部１０２は、制御部１０６による制御の下、撮像部１０１から入力されたベイヤー構造の画像データを、図４（ａ)〜図４（ｄ）に示す４．５ＫＲＡＷフレームのＲ，Ｇｒ，Ｇｂ，Ｂの各プレーン別の画像データに分けてメモリ１０９に記憶させる。
【００２０】
次に、図５を用いて、信号切り出し部１０３によるメモリ１０９からの画像データ読み出し処理（画像データの切り出し処理）について説明する。
図５は、図４（ａ)〜図４（ｄ）に示した４．５ＫＲＡＷフレームのＲ，Ｇｒ，Ｇｂ，Ｂの各色別のプレーンのうち、何れか一つのプレーン５００のみを表している。図５に示すように、メモリ１０９から読み出されるＲ，Ｇｒ，Ｇｂ，Ｂの各プレーン５００は、それぞれ水平方向の画素数が２２６４画素、垂直方向の画素数が１１９６画素となっている。
【００２１】
ここで、３Ｇ−ＳＤＩの規格で定められた有効映像データの画素数は２０４８×１０８０画素であり、信号切り出し部１０３は、図５に示したプレーン５００から、３Ｇ−ＳＤＩ規格で伝送することができる画素数（サイズ）の画像領域を切り出す。以下、３Ｇ−ＳＤＩ規格で伝送することができるサイズのＲＡＷデータの画像領域を「４ＫＲＡＷ」の領域と呼ぶ。すなわち、信号切り出し部１０３は、図５のプレーン５００の中央の４ＫＲＡＷの画像領域を有効画素エリア５１０として切り出す。また、本実施形態では、図５のプレーン５００から４ＫＲＡＷの有効画素エリア５１０を切り出して残った画像領域を、余剰画素エリア（５２１〜５２４）と定義する。
【００２２】
より詳細に説明すると、信号切り出し部１０３は、先ず、図５に示したプレーン５００から、始点の（Ｘ，Ｙ）座標が（９９，４９）で、終点の（Ｘ，Ｙ）座標が（２１６３，１１４５）である矩形エリア５２０を切り出す。ここで、図６（ａ）〜図６（ｄ）は、Ｒ，Ｇｒ，Ｇｂ，Ｂの各別のプレーン５００からそれぞれ切り出された矩形エリア５２０の中で、有効画素エリア５１０にマッピングされる各画素データを示している。なお、図６（ａ）はＲ、図６（ｂ）はＧｒ、図６（ｃ）はＧｂ、図６（ｄ）はＢの各プレーンから、それぞれ切り出された矩形エリア（５２０）の中で有効画素エリア（５１０）にマッピングされる画素データを表している。
【００２３】
また、図５に示す矩形エリア５２０のうち有効画素エリア５１０の周辺画素領域（周辺画素エリア５１２〜５１４）の画素データは、アシンラリ領域にマッピングされる。以下、有効画素エリア５１０に対して、左方側の周辺画素領域を左方周辺画素エリア５１２（Ｌ１，Ｌ２，Ｌ３）とし、右方側の周辺画素領域を右方周辺画素エリア５１３（Ｒ１，Ｒ２，Ｒ３）とする。また、有効画素エリア５１０に対して、上方側の周辺画素領域を上方周辺画素エリア５１１、下方側の周辺画素領域を下方周辺画素エリア５１４とする。なお、各周辺画素エリア５１２〜５１４の画素データは、受信側において現像処理が行われる際に、有効画素エリア５１０の端の画素も正確に現像するために使用される。すなわち、受信側では、ベイヤー構造のＲ，Ｇｒ，Ｇｂ，Ｂの画像データを輝度と色差の画像データに変換する処理等が行われ、この処理の際には有効画素エリア５１０の外側の周辺画素のデータが必用になる。このため、それら周辺画素エリア５１１〜５１４のデータも伝送される。
【００２４】
さらに、信号切り出し部１０３は、図５のプレーン５００から４ＫＲＡＷの有効画素エリア５１０を切り出して残った余剰画素エリアについても、図５に示すように、第１の領域〜第４の領域のような四つの領域（５２１〜５２４）に分割して切り出す。
余剰画素エリアを分割した四つの領域のうち、第１の領域は、始点の（Ｘ，Ｙ）座標が（１０８，０）で、終点の（Ｘ，Ｙ）座標が（２１５５，５７）の矩形領域であって、有効画素エリア５１０に対して上方側の上方余剰画素エリア５２１として切り出される。図７（ａ）〜図７（ｄ）は、Ｒ，Ｇｒ，Ｇｂ，Ｂの各色別のプレーン５００から切り出された上方余剰画素エリアの各画素データを示している。なお、図７（ａ）はＲ、図７（ｂ）はＧｒ、図７（ｃ）はＧｂ、図７（ｄ）はＢの各プレーンから、それぞれ切り出された上方余剰画素エリア５２１の各画素データを表している。
【００２５】
第２の領域は、始点の（Ｘ，Ｙ）座標が（０，０）であり、終点の（Ｘ，Ｙ）座標が（１０７，１１９５）の矩形領域であって、有効画素エリア５１０に対して左方側の左方余剰画素エリア５２２として切り出される。図８（ａ）〜図８（ｄ）は、Ｒ，Ｇｒ，Ｇｂ，Ｂの各色別のプレーン５００から切り出された左方余剰画素エリア５２２の各画素データを示している。なお、図８（ａ）はＲ、図８（ｂ）はＧｒ、図８（ｃ）はＧｂ、図８（ｄ）はＢの各プレーンから、それぞれ切り出された左方余剰画素エリア５２２の各画素データを表している。
【００２６】
第３の領域は、始点の（Ｘ，Ｙ）座標が（２１５６，０）であり、終点の（Ｘ，Ｙ）座標が（２２６３，１１９５）の矩形領域であって、有効画素エリア５１０に対して右方側の右方余剰画素エリア５２３として切り出される。図９（ａ）〜図９（ｄ）は、Ｒ，Ｇｒ，Ｇｂ，Ｂの各色別のプレーン５００から切り出された右方余剰画素エリア５２３の各画素データを示している。なお、図９（ａ）はＲ、図９（ｂ）はＧｒ、図９（ｃ）はＧｂ、図９（ｄ）はＢの各プレーンから、それぞれ切り出された右方余剰画素エリア５２３の各画素データを表している。
【００２７】
第４の領域は、始点の（Ｘ，Ｙ）座標が（１０８，１１３７）であり、終点の（Ｘ，Ｙ）座標が（２１５５，１１９５）の矩形領域であって、有効画素エリア５１０に対して下方側の下方余剰画素エリア５２４として切り出される。図１０（ａ）〜図１０（ｄ）は、Ｒ，Ｇｒ，Ｇｂ，Ｂの各色別のプレーン５００から切り出された下方余剰画素エリア５２４の各画素データを示している。なお、図１０（ａ）はＲ、図１０（ｂ）はＧｒ、図１０（ｃ）はＧｂ、図１０（ｄ）はＢの各プレーンから、それぞれ切り出された下方余剰画素エリア５２４の各画素データを表している。
【００２８】
前述の図５に示したように、４ＫＲＡＷの有効画素エリア５１０に対する左方周辺画素エリア５１２（Ｌ１，Ｌ２，Ｌ３）は、左方余剰画素エリア５２２と重複して切り出される。同様に、上方周辺画素エリア５１１は上方余剰画素エリア５２１と重複し、右方周辺画素エリア５１３（Ｒ１，Ｒ２，Ｒ３）は右方余剰画素エリア５２３と重複し、下方周辺画素エリア５１４は下方余剰画素エリア５２４と重複して切り出される。なお、図５の例では、各周辺画素エリア（５１１〜５１４）は、それぞれ８画素幅又は８ライン幅で切り出される例を挙げたが、切り出し幅はこの例には限定されず、この例より多くても、逆に少なくてもよい。また、各余剰画素エリア（５２１〜５２４）と各周辺画素エリア（５１１〜５１４）は、それぞれ重複させずに切り出されてもよい。
【００２９】
次に、図１１〜図１３を用いて、マルチプレクサ１０４で行われるマッピング処理について説明する。
本実施形態では、動画データをＳＤＩ規格に従って伝送する。具体的には、ＳＭＰＴＥ  ＳＴ  ４２５（３Ｇ−ＳＤＩ）のレベルＢに準拠し、ＳＭＰＴＥ  ＳＴ  ３７２（Ｄｕａｌ  Ｌｉｎｋ）のＲ'Ｇ'Ｂ'＋Ａ  １０ビットの多重化構造を適用して各画素データを配分する。また、画素のサンプルフォーマットは、ＳＭＰＴＥ  ＳＴ  ２０４８−２で規定された、２０４８×１０８０／３０Ｐに準拠する。これらはＳＤＩ規格に準じているため、その詳細な説明は省略する。
【００３０】
図１１は、前述の規格に従って有効映像期間（デジタルアクティブライン領域）に多重される画素データの各チャネルへの配分構成を示しており、マルチプレクサ１０４は、ＬｉｎｋＡ，Ｂの各データストリーム１，２を、この配分構成に従って生成する。一例として、Ｇｂプレーンの各画素を左から右へ順にＧｂ（１）〜Ｇｂ（２０４８）で表した場合、それらＧｂ（１）〜Ｇｂ（２０４８）の画素データが、その順番でＬｉｎｋＡのデータストリーム１のサンプル番号０〜２０４７に配分される。これにより、ＬｉｎｋＡのデータストリーム１が生成されることになる。同様に、例えば、Ｇｒプレーンの各画素を順にＧｒ（１）〜Ｇｒ（２０４８）で表した場合、それらＧｒ（１）〜Ｇｒ（２０４８）の画素データが、その順番でＬｉｎｋＢのデータストリーム１のサンプル番号０〜２０４７に配分されて多重される。これにより、ＬｉｎｋＡのデータストリーム１が生成されることになる。一方、例えばＢプレーンとＲプレーンの各画素データは、一対のＧｂ，Ｇｒと合わせて一つの画素色を決めるＢ及びＲの一組の画素データ毎に、それぞれＬｉｎｋＡ，Ｂの各データストリーム１，２に配分される。例えば、Ｂプレーンの各画素を順にＢ（１）〜Ｂ（２０４８）、Ｒプレーンの各画素を順にＲ（１）〜Ｒ（２０４８）で表すとする。この場合、Ｂ（１），Ｒ（１），Ｂ（３），Ｒ（３），・・・，Ｂ（２０４７），Ｒ（２０４７）の各画素データが、その順番にＬｉｎｋＡのデータストリーム２のサンプル番号０〜２０４７に配分されて多重される。これにより、ＬｉｎｋＡのデータストリーム２が生成されることになる。同様に、Ｂ（２），Ｒ（２），Ｂ（４），Ｒ（４），・・・，Ｂ（２０４８），Ｒ（２０４８）の各画素データが、その順番でＬｉｎｋＢのデータストリーム２のサンプル番号０〜２０４７に配分されて多重される。これにより、ＬｉｎｋＢのデータストリーム２が生成されることになる。
【００３１】
さらに、マルチプレクサ１０４は、ＳＤＩの規格に準じた映像信号の区切り位置を認識するための識別子ＳＡＶ／ＥＡＶを生成する。また、マルチプレクサ１０４は、ライン番号の管理用のデータＬＮ（Ｌｉｎｅ  Ｎｕｍｂｅｒ）及び伝送エラーチェック用のデータＣＲＣＣ（Ｃｙｃｌｅ  Ｒｅｄｕｎｄａｎｃｙ  Ｃｈｅｃｋ  Ｃｏｄｅ）を生成する。これらもＳＤＩの規格に準じているためその詳細な説明は省略する。
【００３２】
図１２には、マルチプレクサ１０４が、各色のプレーンから切り出された４ＫＲＡＷの有効画素エリア５１０の１ラインの画素データを、図１１の配分構成に従って、その１ライン分に相当するＬｉｎｋＡ，Ｂの各データストリーム１，２に多重した結果を示す。例えば、図１２のＬｉｎｋＡのデータストリーム１のＧｂ（１０９）の"１０９"の番号は、Ｇｂプレーンの４ＫＲＡＷの有効画素エリア５１０の左端の画素データから右方向への順番を表している。図１２のように、マルチプレクサ１０４は、Ｇｂプレーンの有効画素エリア５１０における１ラインのＧｂ（１０９）〜Ｇｂ（２１５６）の各画素データを、ＬｉｎｋＡのデータストリーム１のサンプル番号０〜２０４７にマッピングして多重する。以下同様に、Ｇｒプレーンの有効画素エリア５１０における１ラインのＧｒ（１０９）〜Ｇｒ（２１５６）の各画素データは、ＬｉｎｋＢのデータストリーム１のサンプル番号０〜２０４７にマッピングされて多重される。ＲとＢのプレーンのＢ（１０９），Ｒ（１０９），Ｂ（１１１），Ｒ（１１１），・・・，Ｂ（２１５５），Ｒ（２１５５）の各画素データは、ＬｉｎｋＡのデータストリーム２のサンプル番号０〜２０４７にマッピングされて多重される。Ｂ（１１０），Ｒ（１１０），Ｂ（１１２），Ｒ（１１２），・・・，Ｂ（２１５６），Ｒ（２１５６）の各画素データは、ＬｉｎｋＢのデータストリーム２のサンプル番号０〜２０４７にマッピングされて多重される。
【００３３】
また、本実施形態において、マルチプレクサ１０４は、前述した各周辺画素エリア５１１〜５１４の各画素データについては、図１３のデータテーブルに示した配分構成に従って配分する。すなわち、各周辺画素エリア５１１〜５１４の周辺画素データは、詳細には、図１３に示すデータテーブルの多重位置の情報に従って、ライン位置及びサンプル位置が特定されて、図１４に示すように水平及び垂直のブランキング領域に多重されて伝送される。図１３に示すデータテーブルは、撮像素子上における周辺画素の位置と、伝送する信号への多重位置との対応関係を表すテーブルであり、多重位置は、伝送開始ライン番号、ライン数、伝送開始サンプル番号、サンプル数により特定される。一例として、上方周辺画素エリア５１１の各画素データは、伝送開始ライン番号"３８"、ライン数"４"、伝送開始サンプル番号"０"、サンプル数"２０４８"で特定される位置（図１４の垂直ブランキング領域内の位置）に多重される。同様に、下方周辺画素エリア５１４の各画素データは、伝送開始ライン番号"３３"、ライン数"４"、伝送開始サンプル番号"０"、サンプル数"２０４８"で特定される位置（図１４の垂直ブランキング領域内の位置）に多重される。左方周辺画素エリア５１２のうちＬ１領域に含まれる各画素データは、伝送開始ライン番号"３８"、ライン数"４"、伝送開始サンプル番号"２１９２"、サンプル数"４"で特定される位置（図１４の水平ブランキング領域内の位置）に多重される。以下、左方周辺画素エリア５１２のＬ２，Ｌ３領域、右方周辺画素エリア５１３のＲ１，Ｒ２，Ｒ３領域の各データについても同様に、図１３のデータテーブルに基づいて、図１４の水平ブランキング領域内の位置の特定と多重が行われる。
【００３４】
図１４は、前述のようにして４ＫＲＡＷの有効画素エリア５１０と周辺画素エリア５１１〜５１４の各画素データがマッピングされて多重された、１フレーム分に相当するデータストリームによるデータ構成を示している。この図１４のデータ構造に示すように、４ＫＲＡＷの有効画素エリア５１０の各画素データ１４１０は、デジタルアクティブライン領域に配分されて多重される。また、上方周辺画素エリア５１１の各画素データ１４１１は、垂直ブランキング領域に配分されて多重され、同様に、下方周辺画素エリア５１４の各画素データ１４１４は垂直ブランキング領域に配分されて多重される。また、左方周辺画素エリア５１２（Ｌ１，Ｌ２，Ｌ３）の各画素データ１４１２は水平ブランキング領域に配分されて多重され、同様に、右方周辺画素エリア５１３（Ｒ１，Ｒ２，Ｒ３）の各画素データ１４１３は水平ブランキング領域に配分されて多重される。
【００３５】
また、マルチプレクサ１０４は、前述した上方余剰画素エリア５２１（第１の領域）と下方余剰画素エリア５２４（第４の領域）の各画素データについては、４ＫＲＡＷの有効画素エリア５１０の各画素データの場合と同様にしてデータストリームに配分される。すなわち、上方余剰画素エリア５２１と下方余剰画素エリア５２４は、水平方向の画素数が４ＫＲＡＷの有効画素エリア５１０と同画素数であるため、図１２で説明した有効画素エリア５１０へのマッピングの場合と同様のマッピングが行われる。
【００３６】
一方、左方余剰画素エリア５２２と右方余剰画素エリア５２３の画素データについては、マルチプレクサ１０４は、前述した図１１の配分構成に従って、３ライン分に相当するデータストリームに多重する。図１５〜図１７は、各色のプレーンから例えば左方余剰画素エリア５２２として切り出された各画素データのうち、例えば７２ライン分の画素データを、図１１の配分構成に従って３ライン分に相当するデータストリームに多重した結果を示している。なお、それら３ライン分に相当する１２本のデータストリームのうち、図１５は、１ライン目に相当するＬｉｎｋＡ，Ｂの各データストリーム１，２の４本のデータストリームへの多重結果を示している。同様に、図１６は、２ライン目に相当する４本のデータストリームへの多重結果を示し、図１７は、３ライン目に相当する４本のデータストリームへの多重結果を示している。なお、例えば図１５のＬｉｎｋＡのデータストリーム１のＧｂ（１，２）は、Ｇｂプレーンから切り出された左方余剰画素エリア５２２の図８（ｃ）に示した各画素データのうち、左から１番目で上から２番の画素データに対応する。
【００３７】
以下、Ｒ，Ｇｒ，Ｇｂ，Ｂの各プレーンの例えば左方余剰画素エリア５２２の各画素データをデータストリームに配分して多重する例について、図１５〜図１７を参照しながら説明する。
図１５に示すように、マルチプレクサ１０４は、各プレーンの左方余剰画素エリア５２２の１ライン目の１０８個の画素データを、ＬｉｎｋＡ，Ｂの各データストリーム１，２のサンプル番号０〜１０７にマッピングして多重する。具体的には、左方余剰画素エリア５２２のＧｂ（１，１），Ｇｂ（２，１），・・・，Ｇｂ（１０８，１）の１０８個の画素データは、ＬｉｎｋＡのデータストリーム１の１ライン目のサンプル番号０〜１０７にマッピングされて多重される。以下同様に、左方余剰画素エリア５２２のＧｒ（１，１），Ｇｒ（２，１），・・・，Ｇｒ（１０８，１）の１０８個の画素データは、ＬｉｎｋＢのデータストリーム１のサンプル番号０〜１０７にマッピングされて多重される。ＲとＢの左方余剰画素エリア５２２のＢ（１，１），Ｒ（１，１），Ｂ（３，１），Ｒ（３，１），・・・，Ｂ（１０７，１），Ｒ（１０７，１）の各画素データは、ＬｉｎｋＡの各データストリーム２のサンプル番号０〜１０７にマッピングされて多重される。ＲとＢの左方余剰画素エリア５２２のＢ（２，１），Ｒ（２，１），Ｂ（４，１），Ｒ（４，１），・・・，Ｂ（１０８，１），Ｒ（１０８，１）の各画データは、ＬｉｎｋＢの各データストリーム２のサンプル番号０〜１０７にマッピングされて多重される。
【００３８】
また、マルチプレクサ１０４は、各プレーンの左方余剰画素エリア５２２の２ライン目の１０８個の画素を、ＬｉｎｋＡ，Ｂの各データストリーム１，２のサンプル番号１０８〜２１５にマッピングして多重する。具体的には、左方余剰画素エリア５２２のＧｂ（１，２），Ｇｂ（２，２），・・・，Ｇｂ（１０８，２）の各画素データは、ＬｉｎｋＡのデータストリーム１のサンプル番号１０８〜２１５にマッピングされて多重される。以下同様に、左方余剰画素エリア５２２のＧｒ（１，２），Ｇｒ（２，２），・・・，Ｇｒ（１０８，２）の各画素データは、ＬｉｎｋＢのデータストリーム１のサンプル番号１０８〜２１５にマッピングされて多重される。ＲとＢの左方余剰画素エリア５２２のＢ（１，２），Ｒ（１，２），・・・，Ｂ（１０７，２），Ｒ（１０７，２）の各画素データは、ＬｉｎｋＡの各データストリーム２のサンプル番号１０８〜２１５にマッピングされて多重される。Ｂ（２，２），Ｒ（２，２），・・・，Ｂ（１０８，２），Ｒ（１０８，２）の各画データは、ＬｉｎｋＢの各データストリーム２のサンプル番号１０８〜２１５にマッピングされて多重される。
【００３９】
以下、前述同様に、マルチプレクサ１０４は、左方余剰画素エリア５２２の３ライン目〜１７ライン目の各１０８個の画素データを、順次、ＬｉｎｋＡ，Ｂの各データストリーム１，２のサンプル番号２１６〜１８３５にマッピングして多重する。
【００４０】
また、マルチプレクサ１０４は、左方余剰画素エリア５２２の１８ライン目については、３６個の画素データを、ＬｉｎｋＡ，Ｂの各データストリーム１，２のサンプル番号１８３６〜１８７１にマッピングして多重する。例えばマルチプレクサ１０４は、左方余剰画素エリア５２２のＧｂ（１，１８），Ｇｂ（２，１８），・・・，Ｇｂ（１０８，１８）の各画素データを、ＬｉｎｋＡのデータストリーム１の１ライン目のサンプル番号１８３６〜１８７１にマッピングして多重する。以下同様に、マルチプレクサ１０４は、Ｇｒ、Ｂ、Ｒの各画素データについても、図１５に示すように各画素データをマッピングして多重する。ここで、ＬｉｎｋＡ，Ｂの各データストリーム１，２の残りのサンプル番号１８７２〜２０２４については、黒データを重畳する。具体的には、例えば８ビットによる２５６色で画素色が表される場合、マルチプレクサ１０４は、サンプル番号１８７２〜２０２４に対し、例えばＲ，Ｇｒ，Ｇｂ，Ｂの各色につき"０４０"のデータを重畳する。
【００４１】
次に、マルチプレクサ１０４は、左方余剰画素エリア５２２の１８ライン目の残りの７２個の画素データを、図１６に示すように、２ライン目に相当するＬｉｎｋＡ，Ｂの各データストリーム１，２のサンプル番号０〜７１にマッピングして多重する。図１６の例において、各画素データの具体的な個々のマッピング等は、図１５と同様に行われるため、その詳細な説明は省略する。さらに、マルチプレクサ１０４は、左方余剰画素エリア５２２の１９ライン目の次の１０８個の画素データを、図１６に示すように、ＬｉｎｋＡ，Ｂの各データストリーム１，２のサンプル番号７２〜１７９にマッピングして多重する。以下同様に、左方余剰画素エリア５２２の２０ライン目〜３４ライン目の各１０８個の画素データは、順次、データストリーム１，２のサンプル番号１８０〜１７９９にマッピングされて多重される。左方余剰画素エリア５２２の３５ライン目の７２個の画素データは、データストリーム１，２のサンプル番号１８００〜１８７１にマッピングされて多重される。そして、データストリーム１，２の残りのサンプル番号には、前述同様の黒データが重畳される。
【００４２】
次に、左方余剰画素エリア５２２の３５ライン目の残りの３６個の画像データは、図１７に示すように、３ライン目に相当するＬｉｎｋＡ，Ｂのデータストリーム１，２のサンプル番号０〜３５にマッピングされて多重される。また、左方余剰画素エリア５２２の３６ライン目の１０８個の画素データは、データストリーム１，２のサンプル番号３６〜１４３にマッピングされて多重される。以下、左方余剰画素エリア５２２の３７ライン目〜５２ライン目の各１０８個の画素データは、順次、データストリーム１，２のサンプル番号１４４〜１８７１にマッピングされて多重される。データストリーム１，２の残りのサンプル番号には、前述同様の黒データが重畳される。また、左方余剰画素エリア５２２の５３ライン目〜１１９６ライン目についても、５２ライン毎に、前述同様にして、データストリーム１，２にマッピングされて多重される。図１７の例においても、各画素データの具体的な個々のマッピング等は、図１５と同様に行われるため、その詳細な説明は省略する。
詳細な説明は省略するが、右方余剰画素エリア５２３についても、左方余剰画素エリア５２２の場合と同様のマッピングが行われる。
【００４３】
図１８は、前述のように上方余剰画素エリア５２１（第１の領域）〜下方余剰画素エリア５２４（第４の領域）の各画素データがマッピングされて多重された、１フレーム分に相当するデータストリームによるデータ構造を示している。この図１８に示すように、上方余剰画素エリア５２１（第１の領域）の各画素データは、デジタルアクティブライン領域の１〜５８ラインに配分されて多重される。また、左方余剰画素エリア５２２（第２の領域）の各画素データは、デジタルアクティブライン領域の５９〜１２７ラインに配分されて多重される。さらに、右方余剰画素エリア５２３（第３の領域）の各画素データは、デジタルアクティブライン領域の１２８〜１９６ラインに配分されて多重される。下方余剰画素エリア５２４（第４の領域）の各画素データは、デジタルアクティブライン領域の１９７〜２５５ラインに配分されて多重される。
【００４４】
前述したように、本実施形態では、信号切り出し部１０３は、４．５ＫＲＡＷフレームの画像データを、図５に示したように、４ＫＲＡＷの有効画素エリア５１０及びその周辺画素エリア５１１〜５１４と、四つの余剰画素エリア５２１〜５２４に分けている。また、マルチプレクサ１０４は、４ＫＲＡＷの有効画素エリア５１０とその周辺画素エリア５１１〜５１４の各画素データを、図１１〜図１４で説明したように、それぞれＬｉｎｋＡ，Ｂの各データストリーム１，２に配分して多重している。さらに、マルチプレクサ１０４は、四つの余剰画素エリア５２１〜５２４の各画素データを、図１５〜図１８で説明したように、それぞれＬｉｎｋＡ，Ｂの各データストリーム１，２に配分して多重している。
【００４５】
そして、マルチプレクサ１０４は、各画素データが多重されたＬｉｎｋＡ，Ｂのデータストリーム１，２（４本のデータストリーム）を、ＳＭＰＴＥ  ＳＴ  ４２５（３Ｇ−ＳＤＩ）に準拠して、ワード単位で交互に多重化して単一のデータストリームとする。すなわち、マルチプレクサ１０４は、４ＫＲＡＷの有効画素エリア５１０とその周辺画素エリア５１１〜５１４の各画素データが多重されたＬｉｎｋＡ，Ｂのデータストリーム１，２を多重化することで、一つの伝送路に送信されるデータストリームを生成する。また、マルチプレクサ１０４は、四つの余剰画素エリア５２１〜５２４の各画素データが多重されたＬｉｎｋＡ，Ｂのデータストリーム１，２を多重化することで、一つの伝送路に送信されるデータストリームを生成する。
【００４６】
このように、本実施形態では、４．５ＫＲＡＷフレームの画像データを、４ＫＲＡＷフレームの画像及びその周辺画素と、４ＫＲＡＷの画像以外の四つの余剰画素とに分けて、それらを３Ｇ−ＳＤＩの二本の伝送路を利用して伝送するようになされている。なお、本実施形態では、二本の伝送路を利用する例を挙げたが、３本以上の伝送路を利用してもよい。
【００４７】
以上、説明したように、第１の実施形態の撮像装置１００は、４．５ＫＲＡＷフレームの画像データを、４ＫＲＡＷフレームの画像データと少なくとも四つの余剰画素とに分け、それらを３Ｇ−ＳＤＩの伝送路を複数本利用して伝送するようになされている。したがって、第１の実施形態の撮像装置１００によれば、例えば毎秒３０フレームの４．５ＲＡＷフレームの画素データを、３Ｇ−ＳＤＩに準拠した形で伝送することが可能である。
【００４８】
＜第２の実施形態＞
以下、第２の実施形態について説明する。第２の実施形態の撮像装置１００は、前述した図１と同様の構成により実現されるため、具体的な構成の図示と説明は省略する。
第２の実施形態の撮像装置１００は、ベイヤー構造の画像データをＳＤＩ規格に従って送信する際に、前述同様に、有効画素エリア及びその周辺画素エリアを含む画像データと、余剰画素エリアの画像データとに分けて伝送可能としている。また、第２の実施形態の撮像装置１００も前述同様に、撮像装置であるとともに画像データの伝送装置でもある。ここで、第２の実施形態の場合、伝送の際のフレームレートは１２０ｆｐｓとし、伝送する画像データの画素数は、水平方向の画素数が４５２８画素、垂直方向の画素数が２３９２であるとする。１２０ｆｐｓは、第１の実施形態で例示した３０ｆｐｓの４倍、言い換えると第２の実施形態は４フレーム分の４．５ＫＲＡＷフレームを同時に伝送可能とする例である。以下、第２の実施形態では、３Ｇ−ＳＤＩの伝送路を例えば５本分使用して４フレーム分の４．５ＫＲＡＷフレームを同時に伝送する場合を例に挙げて説明するが、本発明はこの例に限定されるものではない。第２の実施形態の場合は、前述した第１の実施形態に対し、マルチプレクサ１０４で行われる処理が異なる。以下、第２の実施形態におけるマルチプレクサ１０４の処理について説明する。
【００４９】
第２の実施形態の場合、マルチプレクサ１０４は、同時に４フレーム分の４．５ＫＲＡＷフレームを読み出し、３Ｇ−ＳＤＩの５本の伝送路にマッピングする。各４．５ＫＲＡＷフレームは、第１の実施形態と同様に、信号切り出し部１０３により、図５に示したように、４ＫＲＡＷの有効画素エリア５１０及び周辺画素エリア５１１〜５１２と、余剰画素エリア５２１〜５２４とに分けられて切り出される。
【００５０】
切り出された４ＫＲＡＷの有効画素エリア５１０及び周辺画素エリア５１１〜５１２の各画素データは、第１の実施形態と同様に、図１１〜図１４で説明したようにデータストリームにマッピングされる。各４．５ＫＲＡＷフレームから切り出された第１の領域〜第４の領域である四つの余剰画素エリア５２１〜５２４の各画素データは、第１の実施形態と同様に、図１５〜図１８で説明したようにデータストリームにマッピングされる。
【００５１】
図１９は、第２の実施形態において、各４．５ＫＲＡＷフレームから切り出した余剰画素エリア５２１〜５２４がマッピングされて多重された、１フレーム分に相当するデータストリームによるデータ構成を示している。第２の実施形態の場合、マルチプレクサ１０４は、図１９に示すように、４．５ＫＲＡＷの４フレームのうち、第１フレームの上方余剰画素エリア５２１（第１の領域）の画素データについては、デジタルアクティブライン領域の１〜５８ラインに多重する。また、マルチプレクサ１０４は、第１フレームの左方余剰画素エリア５２２（第２の領域）の画素データについては、デジタルアクティブライン領域の５９〜１２７ラインに多重する。以下同様に、マルチプレクサ１０４は、第１フレームの右方余剰画素エリア５２３（第４の領域）の画素データを１２８〜１９６ラインに、下方余剰画素エリア５２４（第４の領域）の画素データを１９７〜２５４ラインに多重する。
【００５２】
また、マルチプレクサ１０４は、４．５ＫＲＡＷの４フレームのうち、第２フレームの上方余剰画素エリア５２１の画素データについては、デジタルアクティブライン領域の２５５〜３１２ラインに多重する。また、マルチプレクサ１０４は、第２フレームの左方余剰画素エリア５２２の画素データについては、デジタルアクティブライン領域の３１３〜３８１ラインに多重する。以下同様に、マルチプレクサ１０４は、第２フレームの右方余剰画素エリア５２３の画素データを３８２〜４５０ラインに、下方余剰画素エリア５２４の画素データを４５１〜５０８ラインに多重する。
【００５３】
第３フレームについても同様に、マルチプレクサ１０４は、上方余剰画素エリア５２１の画素データを５０９〜５６６ラインに、左方余剰画素エリア５２２の画素データを５６７〜６３５ラインに多重する。また、マルチプレクサ１０４は、右方余剰画素エリア５２３の画素データを６３６〜７０４ラインに、下方余剰画素エリア５２４の画素データを７０５〜７６２ラインに多重する。
【００５４】
第４のフレームについても同様に、マルチプレクサ１０４は、上方余剰画素エリア５２１の画素データを７６３〜８２０ラインに、左方余剰画素エリア５２２の画素データを８２１〜８８９ラインに多重する。また、マルチプレクサ１０４は、第４のフレームの右方余剰画素エリア５２３の画素データを８９０〜９５８ラインに、下方余剰画素エリア５２４の画素データを９５９〜１０１６ラインに多重する。
【００５５】
前述したように、第２の実施形態の撮像装置１００は、４．５ＫＲＡＷの４フレーム分の画像データを、それぞれフレーム毎に、４ＫＲＡＷの有効画素エリア５１０及び周辺画素エリア５１１〜５１２と、余剰画素エリア５２１〜５２４とに分けている。そして、各フレームの４ＫＲＡＷの有効画素エリア５１０及び周辺画素エリア５１１〜５１２の画素データから、フレーム毎にそれぞれ一つの伝送路に送信されるデータストリームを生成している。すなわち、各フレームの４ＫＲＡＷの有効画素エリア５１０及び周辺画素エリア５１１〜５１２の画素データは、それら各フレームにつき１本の伝送路（計４本の伝送路）により伝送される。一方、各フレームの余剰画素エリア５２１〜５２４の画素データは、４フレーム分を纏めて１本の伝送路により伝送される。このように、第２の実施形態の場合、４フレーム分の４．５ＫＲＡＷの画像データを、合計５本の伝送路を利用して伝送可能となされている。
【００５６】
以上、説明したように、第２の実施形態の撮像装置１００は、４フレーム分の４．５ＫＲＡＷの画像データを、３Ｇ−ＳＤＩの５本の伝送路を利用して伝送するようになされている。すなわち、第２の実施形態の撮像装置１００によれば、例えば１２０ｆｐｓのフレームレートの４．５ＫＲＡＷフレームの画素データを、３Ｇ−ＳＤＩに準拠した形で伝送することが可能である。
【００５７】
＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【００５８】
上述の実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明は、その技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
【符号の説明】
【００５９】
１００  撮像装置、１０１  撮像部、１０２  信号処理部、１０３  信号切り出し部、１０４  マルチプレクサ、１０５  外部Ｉ／Ｆ、１０６  制御部、１０７  操作部、１０８  フラッシュメモリ、１０９  メモリ、１１０  表示制御部、１１１  表示部、１１２  内部バス
【図１】
2018011126.tif 000003
【図２】
2018011126.tif 000004
【図３】
2018011126.tif 000005
【図４】
2018011126.tif 000006
【図５】
2018011126.tif 000007
【図６】
2018011126.tif 000008
【図７】
2018011126.tif 000009
【図８】
2018011126.tif 000010
【図９】
2018011126.tif 000011
【図１０】
2018011126.tif 000012
【図１１】
2018011126.tif 000013
【図１２】
2018011126.tif 000014
【図１３】
2018011126.tif 000015
【図１４】
2018011126.tif 000016
【図１５】
2018011126.tif 000017
【図１６】
2018011126.tif 000018
【図１７】
2018011126.tif 000019
【図１８】
2018011126.tif 000020
【図１９】
2018011126.tif 000021