(57)【特許請求の範囲】
【請求項１】
複数の画像表示手段からスクリーンへ投影される画像を繋ぎ合わせて、該スクリーン上で一画面を構成する画像表示装置であって、
前記画像表示装置に入力された画像信号を格納するフレームメモリと、
前記フレームメモリに格納された画像信号を前記画像表示手段の各々に入力する画像信号に補正する画像信号補正手段と、
前記スクリーンに表示される複数の画像を撮像するための撮像手段と、
前記撮像手段で撮像された画像データから、前記補正手段の補正量を求める補正量算出手段と、
前記補正量算出手段により求められた補正量を記憶する補正量記憶手段と、
を具備し、
前記画像信号補正手段は、前記補正量記憶部に記憶された補正量に基づき、前記スクリーン上で異なる領域に投影された複数の画像が該スクリーン上で連結して繋がるように画像信号を補正することを特徴とする画像表示装置。
【請求項２】
前記画像信号補正手段は、
前記画像表示手段の各々に入力する画像信号の各々１画素のデータにつき、前記フレームメモリに格納された画像信号のうち、少なくとも隣接する４点以上の画素データを用いて補間演算を行い作成することを特徴とする請求１項に記載の画像表示装置。
【請求項３】
前記画像信号補正手段は、前記撮像手段により検出された位置情報に基づいて、前記スクリーン上で異なる領域に投影された複数の画像間の輝度差がなくなるように、前記画像表示手段に人力される各々の画像信号の輝度を補正するための輝度補正手段を備えることを特徴とする請求１項に記載の画像表示装置。
【請求項４】
前記補正量算出手段は、前記補正量記憶部の補正量を所定の値に設定してから前記スクリーン上に投影された画像を撮像した画像データから補正量を算出することを特徴とした請求１項に記載の画像表示装置。
【請求項５】
前記撮像手段は、位置ずれ検出用のカメラであることを特徴とした請求１項に記載の画像表示装置。
【請求項６】
前記撮像手段は、前記スクリーン上に画像を投影する光学系を一部共通に用いて、該スクリーン上に表示される複数の画像を撮像する構成を成すことを特徴とする請求１項に記載の画像表示装置。
【請求項７】
前記複数の画像表示手段は、各々から投影される画像の一部が前記スクリーン上でオーバーラップするように配置されることを特徴とする請求１項に記載の画像表示装置。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、複数のＬＣＤや複数の電子銃で表示した複数の画像を用いて高精細な画像を得るようにした画像表示装置に関する。
【０００２】
【従来の技術】
一般に、ＣＣＤ等の固体撮像素子を用いた撮像装置は、電子スチルカメラやビデオカメラ等に広く用いられており、それらの解像度の高性能化が望まれている。このような高性能化を図る技術として、第１に、固体撮像素子の解像度を上げる手法と、第２に複数個の固体撮像素子を用い、各々の撮像画像を合成することにより等価的に解像度を上げる手法の２つがある。
【０００３】
第１の手法は、素子チップの単位面積当りの画素数を増加させ、撮像素子自体の解像度を高性能化するものである。つまり、１つ当りの画素の小面積化を図り、高密度化もしくは集積化することにより、従来の素子チップ面積で、画素数を多くするものである。
【０００４】
第２の手法には、例えば特開昭６０−２４８０７９号公報に提案されているものがある。この従来例は、図４５に示すように、１つの光学像をプリズムによって４個の方向に分配し、この分配された光学像の互いに異なる部分をそれぞれ受像する４個の撮像素子を具備させ、各撮像素子の出力を合成している。
【０００５】
この時、各撮像素子は図４６の斜線で示すような予め決められた位置を撮像するように位置決めされている。また、特開昭６３−１９１４８３号公報にも、同様な撮像素子を４個用いた撮像装置が提案されている。これは図４７に示すように、それぞれの撮像素子をある一定距離だけ離して同一面上に近接配置し、視野像（波線）を間欠的に移動させて全視野の撮像を行っている。この移動には集光光学系を上下左右に動かしている。こちらは特開昭６０−２４８０７９号公報のものとは異なり、プリズム等の光路分配手段は不要である。
【０００６】
【発明が解決しようとする課題】
しかしながら、従来技術には次のような欠点を有する。
【０００７】
第１の手法では、素子チップの単位面積当りの画素数を増加させ、撮像素子自体の解像度を高性能化することになり、これには製造技術や感度の点で限界がある。また、素子チップのサイズを大きくして画素数を増やすこともできるが、従来の製造技術では、素子チップ内に欠陥画素が発生する割合も高くなり、歩留が著しく低下し、撮像面積の大きな固体撮像素子が得られ難かった。
【０００８】
第２の手法の実施例とした特開昭６０−２４８０７９号公報では、４つの撮像素子から出力される映像信号を合成し、入力光学像と同じ像を現す映像信号を形成すると、その実施例に記載されるように、４つの撮像素子の位置決めの精度が大変に厳しく必要になる。
【０００９】
つまり、１つの撮像素子と他の撮像素子は互いに、１画素だけ離れるような位置関係に配置しない限り、画像の重なりや欠落が生じてしまう。また、互いに回転して取り付けられているような時には、各領域が完全に不連続となってしまい、大変に見ずらい合成画面となってしまう。
【００１０】
そして製造時には、この撮像素子の位置決めに非常に手間がかかり、生産性を低くし、コスト高にも影響する。
【００１１】
他方の従来例の特開昭６３−１９１４８３号公報も同様に、各素子の位置決めは、非常に高精度が要求される。さらに、この場合は、集光光学系をも駆動させることから、その駆動精度も要求される。またこのような駆動装置を設けることは製品の小型化が難しく、更なるコスト高を招いている。
【００１２】
以上のように従来例では解像度を上げるために用いる複数の撮像素子の位置決め精度がそのまま画質に影響するため、この位置決めのために高価な位置決め装置を導入し、時間をかけて精度出しを行う必要があった。これはそのままコスト高となり、電子スチルカメラが普及しない原因ともなっている。また、光束を移動するための部材を設けることは小型，軽量化には不利となっている。
【００１３】
そこで本発明は、ある程度の精密な位置決めにより画素が形成でき、且つ、可動部を有せず低コストで高解像度を持つ撮像装置を提供することを目的とする。
【００１４】
【課題を解決するための手段】
本発明は上記目的を達成するために、複数の画像表示手段からスクリーンへ投影される画像を繋ぎ合わせて、該スクリーン上で一画面を構成する画像表示装置であって、前記画像表示装置に入力された画像信号を格納するフレームメモリと、前記フレームメモリに格納された画像信号を前記画像表示手段の各々に入力する画像信号に補正する画像信号補正手段と、前記スクリーンに表示される複数の画像を撮像するための撮像手段と、前記撮像手段で撮像された画像データから、前記補正手段の補正量を求める補正量算出手段と、前記補正量算出手段により求められた補正量を記憶する補正量記憶手段と、を具備し、前記画像信号補正手段は、前記補正量記憶部に記憶された補正量に基づき、前記スクリーン上で異なる領域に投影された複数の画像が該スクリーン上で連結して繋がるように画像信号を補正する画像表示装置を提供する。
【００１６】
【実施例】
以下、図面を参照して本発明の実施例を詳細に説明する。
【００１７】
まず、図１には、本発明の撮像装置の概略的な構成を示し、概要を説明する。本発明の撮像装置において、光路分割部１により撮像レンズ６で結像された被写体像を複数に分割する。
【００１８】
そして分割された画像数に１対１対応するＣＭＤ８，９等の固体撮像素子からなる撮像部２は、図１（ｂ）の概念図に示すように互いにエリアの一部がオーバーラップする（重なる）ように、ある程度の位置決め精度で前記光路分割部１に配置される。これらの撮像部２により光電変換された各画像信号はフレームメモリ等の画像記憶部３に一時的に記憶される。
【００１９】
次に変位量検出部４により、前記画像記憶部３から読出されたオーバーラップ領域の画像信号に基づいて、撮像素子の画素位置と所定画素位置（表示する画面の画素位置）の位置関係を検出する。例えば、所定位置の画素値は、撮像素子の画素値に相関演算を用いて、“回転量Ｒ”と“ずれ量Ｓ”を変換係数として算出する。この変換係数に基づき、撮像素子の画素位置が変換され、所定画素位置が特定される。
【００２０】
さらに補間部５は、前記変換係数に基づき、前記所定画素に近傍する所定画素値を複数の固体撮像素子の画素値に補間演算を順次用いて、その他の所定画素の値の補正して、補間画像信号が得られる。このような補間画像信号と、前記画像記憶部からの画像信号を画像合成部７により合成して、連続した画像信号として表示部３１により高解像度の画像表示が実現される。
【００２１】
そして図２（ａ）は、撮像素子８の撮像エリアａ（Ｍ×Ｎ画素）と撮像素子９の撮像エリアｂ（Ｍ×Ｎ画素）と被写体を画像として表示するエリア（被写体撮像エリア）ｃとを模式的に表したものである。
【００２２】
前記被写体撮像エリアｃの画素の位置を白丸で示している。よって、前記被写体撮像エリアａ，ｂは、２つの撮像素子の撮像エリアによって完全にカバーされ、この場合には、撮像エリアａの画素位置と被写体撮像エリアｃの画素位置とが一致している。
【００２３】
前記被写体撮像エリアｃは、（ｕ＋ｖ）×ｗ画素を持ち、重なり部分としてオーバーラップエリア（重なり部分）ｄが存在している。つまり、このオーバーラップエリアｄの画像信号から、各撮像素子８，９で撮像されるエリアの位置関係（ずれ量と回転量）が導き出される。
【００２４】
ここで前記被写体撮像エリアｃの位置関係を導き出すために、白丸で示される位置（ｄ11，ｄ21〜ｄ(u+v)w）の画素値が必要になる。前記エリアｃ内の画素ｄij（ｉ＝１〜ｕ，ｊ＝１〜ｗ）については、撮像素子８から検出された画素値をそのまま用いられる。
【００２５】
そして、残った画素（ｄij；ｉ＝ｕ＋１〜ｕ＋ｖ，ｊ＝１〜ｗ）においては、撮像素子９の黒丸で示される４つの画素の値から前記白丸の画素の値が補間により求められ、補間係数が前述した位置関係（ずれ量と回転量）から得られる。例えば、図２（ａ）の破線で囲まれた領域（図２（ｂ））に示すように、白丸画素Ａの画素値は、前記撮像素子９で撮像される近傍の黒丸画素Ｂ，Ｃ，Ｄ，Ｅの画素値から補間演算によって求められる。
【００２６】
このように、補間演算を用いて所望位置の画素値を算出するため、前記撮像素子８，９の取り付け精度は、撮像を所望するエリアをカバーして、適当なオーバーラップを設ければよく、数画素ずれについても全く問題ない。従来例のように１画素以下の精度を得る必要がないため、製造が大変に容易になり、低コスト化が実現できる。さらに、視野像を移動させるための光学部材等も不要である。
【００２７】
次に図３には、本発明による第１実施例としての撮像装置の具体的な構成を示し説明する。
【００２８】
この撮像装置には、撮影光学系６により結像された被写体像の光束を２つに分けるように２個の直角プリズムが接合されたハーフプリズム１ａがもうけられている。前記ハーフプリズム１ａの上面と背面には、例えば、ＣＭＤ（Charge Modulation Device）等の２次元固体撮像素子８，９が、前述したように、撮像するエリアにオーバーラップ部分を持つように配置され、ＣＭＤドライバ３２により制御されている。
【００２９】
前記ＣＭＤ８，９から出力された各画像信号は、プリアンプ１０，１１により増幅され、ローパスフィルタ（ＬＰＦ）１２，１３によりノイズ成分を除去し、Ａ／Ｄ変換器１４，１５でディジタル信号に変換され、減算器１６，１７に入力される。
【００３０】
そしてＦＰＮ記憶メモリ１８，１９から予め記憶される前記ＣＭＤ８，９の固定パターンノイズ（Fixed Pattern Noise ）を読出し、前記減算器１６，１７にて、画像信号からＦＰＮが減じられ、信号処理回路（Signal Procesor ；ＳＰ）２０，２１により、γ補正や輪郭強調が行われる。
【００３１】
次に前記画像信号は、フレームメモリ２２，２３に記憶される。これらのフレームメモリ２２，２３から読出された画像信号は、変位量検出回路２４にＣＭＤ８，９のオーバーラップエリアの変位量（変換係数Ｒ，Ｓ）が検出される。ここで、変換係数Ｒは回転による回転マトリクス、変換係数Ｓは平行移動によるずれベクトルを表すものとする。
【００３２】
この変換係数Ｒ，Ｓに基づき、補間回路２５により前記フレームメモリ２３から読出された画素値を補間し、さらに、パラレル−シリアル（Parallel-Serial ；ＰＳ）変換回路２９で変換する。その出力信号と、前記フレームメモリ２２から読み出される出力信号を連続した画像信号としてフレームメモリ３０へ書き込む。前記フレームメモリ３０から読出された信号を表示する表示部３１が設けられている。また、ＣＭＤドライバ３２、ＦＰＮ記憶メモリ１８，１９、フレームメモリ２２，２３、補間回路２５及び、ＰＳ回路２９は、システムコントローラ３３により制御される。
【００３３】
次に図４に前述した変位量検出回路２４と補間回路２５の具体的な回路構成を示し説明する。
【００３４】
前記変位量検出回路２４は、相関器２４ａ，２４ｂ、及び係数算出器２４ｃにより構成される。フレームメモリ２２，２３から読出された画像信号は、共に各相関器２４ａ，２４ｂに入力され、それぞれ相関演算が行われた後、係数算出器２４ｃにより、ＣＭＤ８，９（図示せず）のオーバーラップエリアの変位量（変換係数Ｒ，Ｓ）が検出される。
【００３５】
そして、前記変位量検出回路２４から出力された変換係数Ｒ，Ｓは、それぞれメモリ２６，２７に記憶される。前記メモリ２６，２７から読出された変換係数Ｒ，Ｓは、座標変換回路３５に入力される。
【００３６】
また、システムコントローラ３３に指定された位置の座標値Ｘ1 が、座標選択回路３４を介して前記座標変換回路３５に入力し、前記変換係数Ｒ，Ｓと座標値Ｘ1 が所定変換式（後述する（１０）式）により、ＣＭＤ９上での対応する座標値Ｘ2 に変換される。この座標値Ｘ2 はデータ読出回路３６及び、補間係数算出器３７に出力される。
【００３７】
そして前記データ読出回路３６は、前記座標値ｘ2 に基づいて得られた座標値の画素値ｖb ，ｖc ，ｖd ，ｖe を読み出し、補間係数算出器３７から出力される補間係数ａ，ｂ，ｃ，ｄを利用し、線型補間演算回路３８の乗算器３９、及び加算器４０により、線型補間演算が行われ補間値ｖa を出力する。
【００３８】
また、前述した変換係数Ｒ，Ｓを求めるにあたって、回転及び平行移動の基準点の設定が重要となる。
【００３９】
この実施例では、図５に示すようにＣＭＤ８のオーバーラップエリアの中心を回転および平行移動の基準点としている。図示されるオーバーラップエリアは、ＣＭＤ８，ＣＭＤ９が正確に位置決めされた時に、ぴったりと重なるエリアに相当している。そして位置Ｃ1 ，位置Ｃ2 は、それぞれ前記ＣＭＤ８，９のオーバーラップの中心を示している。つまり、前記ＣＭＤ８とＣＭＤ９の位置ずれを位置Ｃ1 と位置Ｃ2 とのずれ量（変換係数Ｓに相当）と、位置Ｃ1 まわりの回転量（変換係数Ｒに相当）とによって表すことができる。
【００４０】
前記変換係数Ｓ，Ｒは、例えばオーバーラップエリア内において、位置Ｃ1 を対称の中心とする位置Ｐ1 ，Ｐ2 でのずれベクトルｖ1 ，ｖ2 から求めることができる。つまり、前記ずれベクトルｖ1 ，ｖ2 は、回転によるずれベクトルｒと平行移動によるずれベクトルｓによって、図６を参照して、次式のように表すことができる。
【００４１】
【数１】
0003791696.tif 000002
よって、平行移動によるずれベクトルｓは、
【数２】
0003791696.tif 000003
回転によるずれベクトルｒは、
【数３】
0003791696.tif 000004
なる式で求められる。また回転マトリクスＲは
【数４】
0003791696.tif 000005
で与えられ、θは（２）より、
【数５】
0003791696.tif 000006
ここで、“ｌ”は、既知量であり、“ｒ”は（４）式から求められることから、θが求められ、回転マトリクスＲも求められる。
【００４２】
このように、位置Ｐ1 ，Ｐ2 でのずれベクトルｖ1 ，ｖ2 から、回転マトリクスＲと平行移動による変位ベクトルＳとが求められ、変換係数Ｒ，Ｓとして、それぞれメモリ２６，２７に記憶される。
【００４３】
また相関演算は、従来より種々の方式が提案されているが、ここでは図７に示すようにＣＭＤ８の参照エリアｒ1 ，ｒ2 をＣＭＤ９のサーチエリアＳ1 ，Ｓ2 内でその絶対値和が最小となる位置を検出することによってなされる。こうして求められた位置ｘ1 ，ｙ1 がベクトルｖ1 をｘ2 ，ｙ2 がベクトルｖ2 を与える。このｘ1 ，ｙ1 ，ｘ2 ，ｙ2 は、係数検出器２４ｃに与えられ（３），（４），（６），（５）式を順次用いることにより、回転マトリクスＲと変位ベクトルＳが求められる。なお、ここで変位ベクトルＳ＝（Ｓx ，Ｓy ）とする。
【００４４】
次に図３及び図４を参照して、補間回路２５の動作について説明する。
【００４５】
この補間回路２５においては、システムコントローラ３３により与えられる位置の画素値を、フレームメモリ２３によって読み出された４つの画素値を用いて、線型補間演算により求めている。
【００４６】
まず、線型補間演算による画素値の補間について図８を用いて説明する。同図において、画素Ａの値ｖa を画素Ｂ，Ｃ，Ｄ，Ｅの画素値ｖb ，ｖc ，ｖd ，ｖe を用いて求める。Ａを通り垂直に伸ばした線とＢＣ，ＤＥとの交点をそれぞれＦ，ＧとすればＦ，Ｇでの画素値ｖf ，ｖg はＢＦ＝ＤＧ＝ｍ，ＦＣ＝ＧＥ＝ｎとして、
【数６】
0003791696.tif 000007
として表される。また、ＦＡ＝ｐ，ＡＧ＝ｑとすれば、
【数７】
0003791696.tif 000008
として、画素値ｖa が求められる。ここで、画素間距離を“１”とすれば、
ｍ＋ｎ＝ｐ＋ｑ＝１となるから、（７）ａ，（７）ｂ，（８）式より、
【数８】
0003791696.tif 000009
として、画素値ｖa の値を求めることができる。つまり、画素値ｖa は、ｍ，ｐの値と４つの近傍画素値からただちに求められる。
【００４７】
次に、ｍ，ｐの求め方について説明する。この実施例では、ＣＭＤ８のオーバーラップエリアの中心Ｃ1 を座標の原点とし、画素の位置をｘ1 と表すものとする。また、ＣＭＤ９のオーバーラップエリアの中心Ｃ2 を座標の原点とし、図９に示すように画素位置をベクトルｘ2 で表すｍ，ｐを求めるためには、まずベクトルｘ1 で表わされる座標値をベクトルＸ2 で表す必要がある（座標変換）。ここで、ベクトルｘ1 ＝（ｉ1 ，ｊ1 ），ベクトルｘ2 ＝（ｉ2 ，ｊ2 ）とおき、ベクトルｘ1 とベクトルｘ2 は、座標軸が異なるものとする。さて、ベクトルｘ1 ，ｘ2 は、
【数９】
0003791696.tif 000010
と表せる。Ｒ-1は“−θ”の回転を表す。これらを成分で表すと、
【数１０】
0003791696.tif 000011
となる。つまり、ＣＭＤ８上で、（ｉ1 ，ｊ1 ）で表される座標はＣＭＤ９上では、
【数１１】
0003791696.tif 000012
で表される。この（ｉ2 ，ｊ2 ）は、実数であり図８の画素Ａの座標を与えることに相当するため、ｍ，ｐは、
【数１２】
0003791696.tif 000013
で与えられる。ここで（ｉｎｔ）は整数化を意味する。画素Ｂ，Ｃ，Ｄ，Ｅの座標も同様にして、
【数１３】
0003791696.tif 000014
として与えられる。
【００４８】
以上のような構成の第１実施例の撮像装置において、変換係数Ｒ，Ｓの算出を撮像装置の製造時に行い、補間回路２５のメモリ２６，２７に一度記憶しておけば、変位量検出回路２４により再度検出する必要はなく、記憶された変換係数Ｒ，Ｓをその都度読み出せばよい。
【００４９】
従って、一般の撮影者が変位量検出回路２４を利用することはなく、通常は工場で取り外しされ、撮影に使用される。
【００５０】
一般の撮影において、高い解像度で撮像したい被写体をファインダー内に置き、撮影を行うと、フレームメモリ２２，２３にその画像信号が記憶される。
【００５１】
前記フレームメモリ２２，２３から読出されて、フレームメモリ３０に図２に示したｄ11〜ｄ(u+v)wまでの（ｕ＋ｖ）×ｗ画素が出力する動作について説明する。ここで、図２に示した（ｕ＋ｖ）×ｗ画素の撮像素子４の撮像エリアが図３に示したＣＭＤ８の撮像エリアに、同様に撮像素子５の撮像エリアがＣＭＤ９の撮像エリアに相当するものとする。
【００５２】
すなわち、画素ｄ11から画素ｄij（ｉ＝１〜ｕ，ｊ＝１〜ｗ）までは、前記ＣＭＤ８上の画素と一致しており、その対応画素を読み出す。残りのｄij（ｉ＝ｕ＋１〜ｕ＋ｖ，ｊ＝１〜ｗ）については、前記ＣＭＤ９の画素を補間して用いる。
【００５３】
つまり、所望する画素ｄij（ｉ＝ｕ＋１〜ｕ＋ｖ，ｊ＝１〜ｗ）をシステムコントローラ３３から補間回路２５内の座標選択回路３４へ与える。この座標選択回路３４では、ＣＭＤ８のオーバーラップエリアを中心とした座標値ｘ1 として座標変換回路３５へ出力する。
【００５４】
この座標変換回路３５では、前記座標値ｘ1 と前記メモリ２６，２７にそれぞれ記憶されている変換係数Ｒ，ＳからＣＭＤ９上での座標値ｘ2 を（１０）式に基づいて算出する。前記データ読出回路３６では、座標値ｘ2 から近傍４画素の座標を（１２）式を用いて算出し、対応する画素値ｖb ，ｖc ，ｖd ，ｖe をフレームメモリ２３から読み出す。
【００５５】
また、補間係数算出器３７では、座標値ｘ2 より（１１）式により、ｍ，ｐを求め補間係数ａ，ｂ，ｃ，ｄを算出する。そして、線型補間演算回路３８ではこのｖb ，ｖc ，ｖd ，ｖe とａ，ｂ，ｃ，ｄより（９）式に基づいた演算を行い、ｄijの画素値ｖa を算出しＰＳ回路２９を介し、フレームメモリ３０の所定のアドレスに書き込み、再生画像を表示部３１で表示する。また常に補間演算しつつ出力する場合には、前記フレームメモリ３０を省いてもよい。
【００５６】
このように第１実施例においては、補間演算を用いることにより、複数の撮像素子が正確に位置合わせされていない場合においても、高解像度の撮像を行うことができる。そして、高精度な位置合わせが不要なため、低コストに製作することができ、特に機械的な可動部を必要としないため、撮像装置の小型化，軽量化に有益である。
【００５７】
また第１実施例では、変位量検出回路２４を製造時に取付け、変換係数をメモリに記憶した後、その位量検出回路２４自体を取りはずしたが、コネクタ等をカメラ本体に設けて、着脱自在としてもよい。さらに補間演算としては、近傍４画素を用いた線型補間演算を用いたが、これに制限されるわけでなく、スプライン補間やＳｉｎｃ補間など、より高度の補間演算を用いてもよい。
【００５８】
次に図１０には、本発明による第２実施例としての撮像装置の構成を示し説明する。前述した第１実施例においては、撮像時に（９−ｂ），（１０），（１１），（１２）式に基づく演算を行うため、計算量がかなり大きなものとなる。そこで第２実施例は、撮像毎に実施される（９−ｂ），（１０），（１１），（１２）式の演算を省略するように構成される。
【００５９】
すなわち、第１実施例における変位量検出回路２４と補間回路２５の換わりに、第２実施例では補間係数書き込み回路２８と補間回路２５ａを用いている。ここで、図１０に示す第２実施例の構成部材で図３の構成部材と同等の部材には、同じ参照符号を付してその説明を省略する。
【００６０】
前記補間係数書き込み回路２８は、前述した変位量検出回路２４と座標変換回路３５と補間係数算出器３７と、さらにデータアドレス検出器４１との機能を有するように構成され、座標変換回路３５では（１０）式の演算が、前記補間係数算出器３７では（１１），（９−ｂ）式の演算が、データアドレス検出器４１では（１２）式の演算が各々行われる。
【００６１】
前記データアドレス検出器４１で検出された補間に用いる画素の座標値は、データアドレスメモリ４２に記憶され、補間係数算出器３７で算出された補間係数ａ，ｂ，ｃ，ｄは、各々係数ａメモリ４３、係数ｂメモリ４４、係数ｃメモリ４５、係数ｄメモリ４６に記憶される。
【００６２】
また補間回路２５ａ内には、座標選択回路３４とデータ読出し回路３６ｂ、線型補間演算回路３８を有している。
【００６３】
このように第２実施例は、撮影毎に行われていた座標変換演算（（１０）式）、補間係数算出演算（（１１）式，（９）ｂ式）、座標計算（（１２）式）を製造時に行い、それらの演算結果のデータをメモリ４２〜４６に記憶させている。
【００６４】
従って、実際の撮影の際には、前記線型補間演算回路３８によって行われる（９−ａ）式の演算のみになる。
【００６５】
以上のように第２実施例では、補間回路内にデータのアドレスメモリ、係数メモリを設けることにより、演算量を飛躍的に少なくし、連続的な撮像による画像信号の処理が十分に実施可能になる。
【００６６】
また、第２実施例においても、第１実施例と同様に補間係数書き込み回路２８を製造時のみ取り付けて、データの算出，記録させた後、取り外しても、脱着可能にしてもよい。
【００６７】
次に図１１及び図１４には、本発明による第３実施例としての撮像装置の構成を示し説明する。ここで、図１４に示す第３実施例の構成部材で図３の構成部材と同等の部材には、同じ参照符号を付してその説明を省略する。
【００６８】
前述した第１，第２実施例では、入光する光像をハーフプリズム１により分割していたが、ハーフプリズムを用いると、その光量が半分無駄になるという欠点を有している。
【００６９】
そこで第３実施例では、光路分割部として前記プリズムの一部にコーティングを施し、図１１（ａ），（ｂ）に示すように透過率を変化させた半透過形プリズムを用いる。
【００７０】
図１１（ａ）は、光路分割部における光軸上の被写体を撮影する（撮像が光軸上にある）場合の光束を示し、斜線部分がプリズムの反射領域で反射される光束を表している。また、同図（ｂ）は光軸上以外の被写体を撮影する場合でＣＭＤ９の端に結像する光束を表している。
【００７１】
このように光量は、レンズの射出瞳の面積に比例することから、図１１（ａ）に示すように撮像エリアで一様な光束を撮像した場合は、ＣＭＤ８，９の光量分布が図１２に示すようになる。つまり、撮像の位置に応じて、前記ＣＭＤ８，９が受光する光量の割合が異なり、光軸位置を中心とした対称な形状になる。なお、光軸位置ではハーフプリズムを用いた場合の光量と等しくなる。
【００７２】
しかし、図１１（ｂ）に示すように、通常の撮影では必ずしも被写体が光軸上にあるわけでなく、撮像エリア、特にオーバーラップエリアにおいて、光量分布が異なっている。
【００７３】
この異なった光量分布から良好な変位量は検出できず、誤差を含み検出される。また、画像に明るさのむらが生じる等の影響がでるため、その光量分布の補正が必要となる。
【００７４】
そこで、第３実施例では、図１４に示すような光量補正回路４７，４８を設けている。この光量補正回路４７，４８は、図１３に示す図１２の逆数の光量分布に示すように、撮像エリアに応じて画像信号を増幅し、光量分布が均等になるように光量の補正を行う。また、プリズム１ｂは、図１１に示した透過率の異なる半透過形プリズムである。また前記光量補正回路４７，４８は、ルックアップテーブルで構成してもよい。
【００７５】
以上にように第３実施例では、光路の分割手段として透過率の異なるプリズムを用いて、光量の損失が少なくしており、暗い被写体等の撮影に好適する。
【００７６】
次に図１５には、本発明による第４実施例としての撮像装置の構成を示し、図１６には本実施例の特徴部分になる光路分割部のプリズムのかわりにセパレータレンズを用いた場合の構成を示し、説明する。ここで、図１５に示す第４実施例の構成部材で図３の構成部材と同等の部材には、同じ参照符号を付してその説明を省略する。
【００７７】
図１６は、セパレータレンズ１ｃを用いて各撮像素子ＣＭＤ８，ＣＭＤ９上に結像する光束を示している。同図（ａ）は、光軸上に被写体（物点）がある場合について示し、同図（ｂ），（ｃ）は、光軸上以外に物点がある場合を、それぞれＣＭＤ８の上端及びＣＭＤ８の下端に結像する光束を示してある。このように、互いにオーバーラップ領域を持つように画像が結像することがわかる。尚、セパレータレンズ１ｃとＣＭＤ８，９との間には、遮光板５０を設けて、分割された光束が混入しないようにする。
【００７８】
さらに、図１６に示す光量分布は、図１１の光量分布と同様に、物点が光軸上に位置しない場合には、光量の分布が変化してしまう。つまり前実施例と同様に光量補正回路４７，４８が必要となる。また、図１５には、図１６に示したセパレータレンズ１ｃ及び遮光板５０を用いている。
【００７９】
以上のことから、第４実施例では、光路分割にプリズムのかわりにセパレータレンズを用いるため、光路分割部の小形化が容易にできる。
【００８０】
次に図１７に本発明による第５実施例としての撮像装置の構成を示し、説明する。ここで、図１７に示す第５実施例の構成部材で図３の構成部材と同等の部材には、同じ参照符号を付してその説明を省略する。
【００８１】
前述した第１実施例においては、図２に示すように、画素ｄij（ｉ＝（ｕ＋１）〜（ｕ＋ｖ），ｊ＝１〜ｗ）が補間演算されて、それらの画素値が算出され、他の画素は、ＣＭＤ８で受光した信号そのものを用いていた。
【００８２】
よって、補間演算を用いてその画素値を求める場合には、多少の画像劣化があり、画面の右半分と左半分での解像度が異なることが生じる。そこで、第５実施例は、画面全体を均等な解像度にするものである。
【００８３】
この実施例では、図１８に示すように被写体撮像エリアをＣＭＤ８及びＣＭＤ９で撮像されるエリアに対し等しく傾かせる。つまりＣＭＤ８とＣＭＤ９が、角度θだけ異っている場合、その撮像エリアはＣＭＤ８，ＣＭＤ９に各々θ／２だけ異なる位置に設定する。そして、図中の破線より左側の画素（ｄij；ｉ＝１〜（ｕ＋ｖ）／２，ｊ＝１〜ｗ）についてはＣＭＤ８の画素を用い、破線より右側の画素（ｄij；ｉ＝（ｕ＋ｖ）／２＋１〜ｕ＋ｖ，ｊ＝１〜ｗ）については、ＣＭＤ９の画素を用いて補間演算により画素値を算出する。
【００８４】
つまり、撮像装置を水平に構えた時に、この被写体撮像エリアが水平垂直に対して傾いている場合の補正のために、撮像素子の回転機構部４９を設けてある。この回転機構部の回転量は変位量検出回路２４の出力Ｒ，Ｓに応じて決められている。また、本実施例ではＣＭＤ８の画像信号の出力に対しても補間処理を行うため、もう１つの補間回路２５を有している。
【００８５】
以上のように第５実施例は、撮像エリアを２つの撮像素子の撮像されるエリアから均等に傾けることにより画面全体に同じ解像度の画像を得ることができる。なお、本実施例において用いた回転機構部４９は前述した第１乃至第４実施例において、それぞれ用いてもよい。
【００８６】
次に図１９に、本発明による第６実施例としての撮像装置の構成を示し、説明する。ここで、図１９（ａ）に示す第６実施例の構成部材で図３の構成部材と同等の部材には、同じ参照符号を付してその説明を省略する。
【００８７】
この第６実施例においては、撮像素子として図１９（ｂ）に示すように、画素数が１０００×４００のＣＭＤ５１，５２，５３，５４を４個用いて構成している。各撮像素子の画素数は、汎用タイプのＮＴＳＣ用の撮像素子と同程度になるため、ＨＤＴＶ用の撮像素子（１９２０×１０３５）よりもはるかに歩留は良く製造できる。そしてこのＣＭＤを図１９（ｂ）に示すように、ＣＭＤ５１を基準にして並設し、ＣＭＤ５１，５２，５３，５４が互いにオーバーラップ領域ａ，ｂ，ｃを持つように、ハーフプリズム１ｄに配置してある。
【００８８】
そして、変位量検出回路２４では、３つのオーバーラップ領域ａ，ｂ，ｃの画像信号から各ＣＮＤの変位量（ずれ量Ｓ，回転量Ｒ）を検出し、変換係数を各補間回路へ出力する。
【００８９】
なお、本実施例では光路分割部１としてハーフプリズム１ｄを用いたが、第３実施例と同様、透過率の異なるプリズムを用いてもよい。また、第２実施例同様に補間回路２５内部に補間係数メモリを設けてもよい。
【００９０】
次に図２０（ａ）乃至（ｄ）に、本発明による第７実施例としての撮像装置の光路分割部の構成を示し説明する。この図２０には、第７実施例の特徴部分のみを示し、残りの構成は、第６実施例と同等である。
【００９１】
前述した第６実施例では、ハーフプリズム１ｄを用い、４つの撮像素子を利用したが、第７実施例では、他の光路分割部について説明する。この光路分割部によって撮像されるエリアについては、図２３に示す。
【００９２】
図２０（ａ）は、２個の楔形プリズム６０，６１とビームスプリッタ６３の組み合わせにより、撮像レンズの光路を４分岐し、ＣＭＤ５５〜５８上に画像を結像させる例である。また、図２０（ａ）の光路分割部を真横からみた状態を図２１（ａ）に示し、真上から観た状態を図２１（ｂ）に示す。
【００９３】
前記楔形プリズムで光路を左右に２分岐し、さらにこれを後続のプリズムで上下に２分岐して、結果的に光路を４分岐している。プリズムは、直角プリズムを接合して作られており、その接合面の上半分が全反射ミラーのコートが施されている。
【００９４】
次に図２０（ｂ）は、前述した楔形プリズム６０，６１を偏心した一対のレンズ６４，６５に置き換えたものである。前記楔形プリズム６０，６１では、光路を屈曲する働きのみであったが、偏心レンズ６４，６５には、光路屈曲の作用に加え、結像作用が有り、撮像レンズ６はアフォーカル光束を射出するタイプのものが利用できる（図２２参照）。しかも、このような偏心レンズ６４，６５を用いる場合には、撮像レンズ６と光路分割部１との配置する位置、距離等が厳密でなくてもよく、装置組み立てが容易になる。なお、この第７実施例では、偏心レンズ６４，６５に色消しのダブレットを用いているが、レンズ構成としてはこれに限定されない。
【００９５】
また、図２０（ｃ）には、４個の楔形プリズム６６，６７，６８，６９で構成される光路を分岐する光路分割部１を示す。
【００９６】
この例では、前記楔形プリズム６６，６７，６８，６９を中央が最も窪むように配列し、撮像レンズ６の光路が、これらのプリズムにより、左上，左下，右上，右下に４分割される。なお、楔形プリズムは分岐の異なる硝子を接合して成る色消しプリズムを用いている。また撮像レンズ６に射出側テレセン光学系を用いれば、楔形プリズムにて光路が屈曲しても像歪みが生じないため、画像の合成に好適する。
【００９７】
次に図２０（ｄ）には、前述した楔形プリズムを４個の偏心したレンズ７０，７１，７２，７３に置き換えた例を示す。図２０（ｂ）の光路分割部と同様に、この例においても、撮像レンズ６はアフォーカル光束を射出するタイプのものが好適する。
【００９８】
尚、光路分割部にこれらの各種プリズム，レンズを用いた場合には、前述した光量補正回路を設ける必要がある。
【００９９】
以上のように第７実施例では、４個の固体撮像素子を用いた実施例について説明したが、固体撮像素子としてはＣＭＤに限らずＣＣＤやＡＭＩ等を用いてよいのは当然である。たとえば、一般に普及しているＮＴＳＣ用のＣＣＤ撮像素子（画素数７６８×４８０）を用いれば、約１４００×８００画素の高解像度撮像を行うことができる。また、ＰＡＬ用の撮像素子（画素数８２０×６４０）を用いればより高解像度の撮像が可能である。
【０１００】
次に図２４に、本発明による第８実施例としての構成を示し、説明する。ここで、図２４の構成は、第８実施例の特徴部分のみを示し、以外の構成は、図３に示した第１実施例と同等である。
【０１０１】
前述した第７実施例では、光路分割部に撮像素子を４個用いたが、その個数に制限があるわけでなく、第８実施例として例えば、図２４に示すように多数個のレンズ（レンズアレイ）７４と撮像素子アレイ７５を用いることもできる。この場合、各撮像素子１つ１つに対して１つのレンズを対応させ、それぞれオーバーラップ領域を持つように撮像が行われる。また前記レンズアレイ７４において、レンズ以外の領域は遮光されている。
【０１０２】
このようなレンズアレイ７４は、例えばプレス加工により低コストに作成することが可能である。
【０１０３】
また本発明では、撮像素子にＣＭＤを採用したが、ＣＣＤやＭＯＳ等のその他の撮像素子を採用してもよい。
【０１０４】
次に、前述した第４実施例から第８実施例までの撮像素子の位置合わせについて説明する。第４実施例から第８実施例においては、複数の撮像素子が隣接しており、パッケージに封止される通常の状態では、図１６に示すような位置にＣＭＤを配置することはできない。
【０１０５】
図２５には、ベアチップのまま実装する実施例を示し説明する。
【０１０６】
この図２５は、セラミック基板８０上にＣＭＤ８１，８２をベアチップのまま実装した例であり、図２６は、そのＡ−Ａ′断面図を示す。前記ＣＭＤ８１，ＣＭＤ８２は、前記セラミック基板８０に形成された溝に嵌め込み、接着材８３で固着する。前記溝の上部には、接着材８３を装着させるために、面取りされており、下部には位置決めの凹部が形成されている。前記ＣＭＤ８１，８２の各電極は、配線８４でセラミック基板８０上の電極にボンディングされ、撮像素子の外部部材とは端子８５を介して行なわれる。
【０１０７】
前記端子８５は、図２５に示すように表面パターンでもよいし、図２７に示すように金属端子８６を設けてもよい。
【０１０８】
また図２６でセラミック基板８０に溝を設ける理由は、溝に前記ＣＭＤ８１，８２を嵌め込むだけで、ある程度の位置決めができ、図１８に示した有効画素エリアを広くすることができる。さらに前記ＣＭＤ８１，８２の側面に接着材８３を流した理由は、ベアチップの裏面で光軸方向の位置調整を行うためであり、通常のようにＣＭＤの裏面に接着材をつけると、接着材により傾きや光軸方向の位置がずれてしまうからである。
【０１０９】
図２６の破線に示すように、セラミック基板８０の裏面側より穴８７をあけて接着材８８で固着してもよい。この方法では接着材が受光部を覆う可能性がなくなり、固着の作業が簡単に行うことができる。
【０１１０】
また、前記セラミック基板８０をプリズム又は水晶フィルタに取りつける場合には、図２８に示すようにセラミック基板８０の両端にスペーサ部９０を設けて固着すると、ワイヤーボンディングした時の配線９１に負荷が掛からない。これは、ワイヤーボンディングの高さをｈ、スペーサの高さをＨとすると、Ｈ＞ｈの関係に設定すればよい。
【０１１１】
図２６のベアチップのマウント例の他の例として、図２９に示すように、レール上の溝に斜線で示すスペース部のあるベアチップを設け、複数個のベアチップをあてつけ、水平方向の位置決めを行い、固着する。
【０１１２】
さらに図３０には、図２９に示すマウント例を第６実施例の撮像装置に適用した場合を示す。図３０（ａ）は側面図、同図（ｂ）はＢ方向からの矢視図、同図（ｃ）は、同図（ａ）のＡ方向から見た矢視図を示す。図３０（ｃ）に示すように、スペーサ部９０を設けて、配線（ボンディングワイヤ）９１を保護している。  図３１は図２９に示すマウント例の他の例であり、後置の直角部材９２によってセラミック基板８０を固着し、さらに該セラミック基板８０にプリズム９３を固着している。その際プリズム９３とセラミック基板８０との距離は、図２８のスペーサの高さ“Ｈ”である。
【０１１３】
次に図３２に、本発明の第９実施例としての撮像装置の具体的な構成を示し、説明する。本実施例は、図１４に示した構成に、さらに合成回路を加えたものであり、構成部材で図１４に示す部材と同等の部材には同じ参照符号を付して、特徴部のみを説明する。
【０１１４】
この合成回路１２１の１つとしては、図３３に示すように、合成する対象画像の各画素値ｆ，ｇを画素値変換部１２２及び画素選定部１２３にそれぞれ入力し、前記画素選定部１２３では、出力画像に対応する画素位置を示すベクトル（座標値）Ｘ1 に基づき、つなぎ目の近傍の画素を選定し、前記画素値変換部１２２により該当する画素値の変換が行なわれる。
【０１１５】
この変換は、合成する画像に不連続が生じないように行われる。たとてえば図３４に示すように、重なる領域内で位置に応じて画素値を変換する。また、この合成回路は図３５に示すように構成でき、入力画像ｆとｇに対して、係数設定部１２４で設定された重み係数ａとｂを、乗算部１２５ａ，１２５ｂでそれぞれに掛けて、加算部１２６で和を取り、この結果を出力画像とする。
【０１１６】
そして前記係数設定部１２４による係数の設定は、図３６に示すように、重なる領域以外ならば、“１”又は“０”で重なる領域以内ならば、線形的に変化させる。Ｘ1 は画像の合成方向の座標である。また、Ｐ2 −Ｐ1 は重なる領域の長さである。
【０１１７】
図３５に示す合成回路は、重なる領域以外の場合、入力画像ｆ又はｇの値をそのまま出力させて、重なる領域以内であれば、画像ｆに対する係数ａの値が、“１”から“０”まで、画像ｇに対応する係数ｂの値が“０”から“１”まで、それぞれ線形変換させ、この２つの係数効果の足算を出力画像とすることにより、繋ぎ目近傍の輝度を滑らかに変換でき、撮像センサ間での感度のばらつきが主たる原因になる輝度の不連続性が解消される。さらに、相関検出、補間処理により、繋ぎ目において幾何的な不連続性が起こされた場合でも、有効である。
【０１１８】
このような合成回路のように、繋ぎ目近傍に対して、輝度差と幾何的な差をある程度解消することができる。
【０１１９】
また、輝度についてはＳＰ回路２０，２１にて、バイアスゲインの補正と併用する様にしてもよい
次に第１０実施例として、補間回路の補間演算として線形補間等を用いた場合に、生じる画像の劣化を防止すべく、構造強調回路を用いた例を以下に示す。
【０１２０】
図３７には、本発明による第１０実施例としての撮像装置の具体的な構成を示す。本実施例は、図３２に示した構造に、さらに補間により劣化した画像を復元するために構造強調回路１２７を付加した回路であり、構成部材で図３２と同等の部材には、同じ符号を付して、特徴部分を説明する。
【０１２１】
この前記構造強調回路１２７は、例えば、ディジタルフィルタ等の局所オペレータを用いて、ラプラシアンを計算する。すなわち、第１の手法として、原画像からそのラプラシアンを計算する。
【０１２２】
出力画像＝入力画像−▽2 入力画像×ω
但し、ω：定数、（図３９（ｄ）参照）、▽2 ：ラプラシアンオペレータとする。ここで、重み係数としては、例えば図３９（ａ）〜（ｃ）に示したオペレータが使用される。
【０１２３】
又は、選択的な画像強調方法を用いる。
【０１２４】
出力画像＝入力画像−ｈ（ｘ，ｙ）＊▽2 入力画像
ここで、ｈ（ｘ，ｙ）は、例えば入力画像に対する線検出オペレータなどが用いられる。
【０１２５】
第２の手法として、周波数領域での高域強調フィルタを用いる。
【０１２６】
入力画像をフーリエ変換して、高い周波数成分の値を強調するフィルタを通して、逆フーリエ変換を行う。
【０１２７】
次に図３８には、出力画像に対して、均一な強調効果をもたらすために、基準とする画像ｆの各画素をシフトして（例えば、１／２ピクセル、または１／３ピクセル程度）、補間を行い、合成回路１２１を通過させた後、構造強調を行うようにしてもよい。
【０１２８】
次に図４０及び図４１には、第１１実施例としての撮像装置の構成を示す。これらの実施例は、基準画像を利用して、変異料の検出を行う。
【０１２９】
まず、図４２に示す基準パターンの画像を作成し、各直線の交点［図４２（ａ），（ｃ）］、又は点［図４２（ｂ）］の位置を正確に測る。
【０１３０】
そして、図４０に示す撮像装置のように、１つの基準画像に対して、撮影を行い、得られた左右の画像から、基準パターン検出変位量計算回路１３０．１３１により、それぞれ基準パターンを検出し、前述した予め計測された位置情報を用いて、左右の画像にそれぞれ該当する変位量（シフト値と回転角度）を計算する。これらの変位量を変位量メモリ１３２，１３３に記憶させる。以後、図４１に示すように、変位量メモリ１３１，１３２に格納されているそれぞれの変位量情報を用いて、第１０実施例と同様に処理する。
【０１３１】
なお、基準パターンの検出に関しては、細線化（図４２（ａ），（ｃ））、線の近傍追跡、重心検出（図４２（ｂ））などの特徴抽出手法を使える。また、基準パターンの種類は、図４２に示した以外にも、多く存在し、基本としては、左右の画像に対して、それぞれの変位量（シフト値と回転角度）が求められることである。
【０１３２】
この第１１実施例においては、画像の重なる領域が小さく、相関演算による変位量の検出ができない場合にも、基準画像を用いることにより、変位量検出が可能になる。
【０１３３】
次に図４４には、第１２実施例としての撮像装置の構成を示し説明する。
【０１３４】
この撮像装置は、画像を取り込む時に、基準パターンフィルタ１３５を付設することを特徴とする。前記基準パターンフィルタ１３５は、図４３に示すように、重なる領域の上、下端線の近くに１個ずつパターンを設け、画像と共に読み込まれる。読み込まれた左右の画像に対して、基準パターン検出変位量計算回路１３６により、それぞれの基準パターンを重なる領域の両端線の近くの領域から検出し、左右画像の相対変位量が求められる。以後の処理は、第１０実施例と同じである。この基準パターンフィルタは、例えば、銀塩フィルムを被写体にする場合等に有効である
なお、基準パターンの検出は、細線化（図４３（ａ））、線の近傍追跡、重心検出（図４２（ｂ））などの特徴抽出手法を用いることができる。
【０１３５】
以上のように本実施例の特徴としては、左右の画像の相関点をより早く検出することができる。また、相関点を検出しにくい画像にも適用されることである。また、この基準パターンフィルタを、出し入れ可能にしておくことにより、システムの校正が簡単に行うことができる。
【０１３６】
次に図４９には、本発明による第１３実施例としての撮像装置の具体的な構成を示す。本実施例は図３７に示した構成に、更に回転量判定１２０と回路選択回路１２１と、回転補間回路１２３を加え、同一方向への３枚以上の画像の合成に適用する。
【０１３７】
前記変位量検出回路２４で検出された回転量Ｒは回転量判定回路１２０に送られ、合成処理の後の選択が行なわれる。この選択は予め設定された閾値によって判定する。例えば、図４８（ａ）に示すように検出された回転量Ｒが閾値により大きければ、選択回路１２１が端子Ａをオンさせ、合成された画像が回転補間回路１２３を通り、図４８（ｂ）に示すように、−Ｒ回転して出力し、次の画像と合成処理を行う。しかし、検出された回転量Ｒは閾値により小さければ、選択回路１２１が端子Ｂをオンさせ、そのままフレームメモリ３０に出力する。
【０１３８】
以上のことから、第１３実施例においては、図４８（ａ）に示した様に、合成する画像の枚数が多くなると、基準になる左側画像と、これから合成すべき右側画像との間の相対回転角度が増々大きくなり、相関で誤検出する可能性がある。このミスマッチングを防止するために、今回合成された画像に対して、相関の回転量Ｒをチェックし、設定された閾値（例えば、５度）と比較する。大きければ、合成された画像を−Ｒ回転し、次の画像と合成処理を行う（図４８（ｂ））。  従って、本実施例は、回転量判定回路１２０と、選択回路１２１及び回転補間回路１２３を加えることによって、３枚以上の画像を合成する場合に適用すると、回転量による選択的な補正が行なわれ、相関検出の失敗やミスマッチングが防止される。
【０１３９】
図５１には、本発明による第１４実施例としての撮像装置の具体的な構成を示す。本実施例は図３７に示した構成に、更に境界線端点検出回路を加え、同一方向への３枚以上の画像の合成に適用する。
【０１４０】
この撮像装置は、図５０に示す基準となる左側画像データが境界線端点検出回路１２５に送られ、そこで画像の右側の境界線の両端点Ａ，Ｂを検出し、横方向に小さい座標値を持つ端点が合成回路７に送られる。この合成回路７において、送られた端点の横方向の座標値が図３５，図３６に示した繋ぎ目処理の右端点とする。
【０１４１】
従って、本実施例は、図５０（ａ）に示すように、合成する画像の枚数が多くなり、合成された画像の右側の境界線が斜めになる場合がある。引き続き次の画像と合成する時には、図３５，図３６に示した繋ぎ目処理の時に、不都合な部分が発生してしまうことを防止する。この不都合な部分は、重なる領域の中心がそのまま繋ぎ目処理の中心として使うためである。
【０１４２】
そこで図５１に示した様に、境界線端点検出回路を用いて、左画像の右側の境界線の両端点を検出し、横方向に小さい座標値を持つ端点Ａを合成回路７に送る。図５０（ｂ）に示すように、この点を繋ぎ目処理領域の右端点とし、繋ぎ目処理の中心線は重なる領域の左端点からこの点までの中心とする。従って、繋ぎ目処理で不都合な部分の発生を解消できる。
【０１４３】
以上のことから本実施例は、境界線端点検出回路１２５を用いて、基準となる左側画像の右境界線の両端点を検出し、横方向に小さい座標値を持つ端点が繋ぎ目処理領域の右端点とすることによって、繋ぎ目処理の不都合な部分が解消される。
【０１４４】
次に図５２には、本発明による第１５実施例としての撮像装置の構成を示す。本実施例は、１６枚の４０００×５００のＣＭＤを用いて、お互いに約６０画素の重なる領域を設け、合成処理によって４０００×６０００の銀塩フィルム並の解像度の画像が得られる装置の一例である。
【０１４５】
図５３に示す第１合成処理部は図５２に示すように構成される。第２合成処理部は図５４に示すように構成され、入力側の１つは第１合成処理部と同様なＣＭＤ撮像素子からの画像信号で、もう一つは、前回合成された画像データ（メモリに格納している）が直接、変位量検出回路２４に入力する。さらに実施例１４と同様に、繋ぎ目処理の不都合な部分を解消するため、境界線端点検出回路１２５を加える。
【０１４６】
そして図５３に示した様に、１６個の撮像素子から得られた各画像信号に対し、順次に１５段階の合成処理を行ない、４０００×６０００の銀塩フィルム並の解像度画像が得られる。
【０１４７】
以上のことから本実施例は、複数の撮像素子を用いて、多階段の合成処理によって超高解像度の画像が得られる。
【０１４８】
次に図５５には、本発明による第１６実施例としての撮像装置の構成を示す。この撮像装置において、第１合成処理部は、前述した第１５実施例と同等であり、第３合成処理部は図５６に示すように構成される。
【０１４９】
この第３合成処理部は、入力の２つとも前回の合成処理の結果で、それぞれ置いたメモリから直接、変位量検出回路２４に入力する。また、繋ぎ目処理の不都合な部分を解消するため、境界線端点検出回路１２５を設ける。
【０１５０】
本実施例は、多数の合成処理を並列して行ない、全体の処理時間を短縮させることを特徴とする。この第１６実施例によれば、前述した第１５実施例の順次１５段階の合成処理と比べると、４段階で高速処理される。
【０１５１】
なお、本実施例と第１５実施例が４０００×５００画素の１６個ＣＭＤを使ったが、これに限らず、必要に応じて、撮像素子の大小や数を自由に選択することができる。
【０１５２】
次に本発明による第１７実施例として、プロジェクタに応用した一例を説明する。このプロジェクタの外観図を図５７に、そのプロジェクタの構成図を図５９に示す。また、ハーフプリズム近傍の構成図を図５８に示す。
【０１５３】
この実施例の特徴は、複数のＬＣＤに表示した複数の画像をプロジェクタ１２６で投射し、スクリーン１２７上で合成することで、このＬＣＤの取り付けに誤差があってもこれを補正する機能を有する。
【０１５４】
図５９に示すように、ハーフプリズム１２８には、ＬＣＤ１２９，１３０．１３１がそのスクリーンへの投影像が重複領域を有するように配置されている。また、光の射出側には水晶フィルタ１３２が配置されている。この水晶フィルタ１３２は、スクリーン上で各ＬＣＤ１２９〜１３１の画素がはっきりと結像して見にくくなることを防止するためのローパスフィルタの働きをする。
【０１５５】
図５８に示すＳ，Ｒメモリ１３３は、後述する装置にて求められるＬＣＤ１２９とＬＣＤ１３０，ＬＣＤ１３０とＬＣＤ１３１の位置ずれ量（平行移動量と、回転量）を記憶しているメモリである。
【０１５６】
前記スクリーン１２７に表示したい画像信号は、まずフレームメモリ３０に記憶され、ＬＣＤ１２９，１３０，１３１に各々表示すべき分割画像信号がそれぞれ補間回路１３４，１３５，１３６に入力される。
【０１５７】
前記補間回路１３４，１３５，１３６は、Ｓ，Ｒメモリ１３３からの値に基づいて各分割画像がスクリーン１２７上で位置ずれなく繋がるように、平行移動及び回転のための補間演算を行う。
【０１５８】
また、前記スクリーン１２７上で画像の重なる部分については、重み係数算出器１４０からの重み係数を加算器１３７〜１３９により乗じ、出力した画像の輝度を調節する。この重み係数については、図３６と同様に変化させる。そして、この重み係数が乗じられた画像信号はメモリ１４１〜１４３に記憶され、Ｄ／Ａ変換部１４４〜１４６によりアナログ変換された後、ＬＣＤ１２９，１３０，１３１から投光され、スクリーン１２７上に画像が表示される。このようなＬＣＤに隣接して光源１４７．１４８が設けられ、この光源の光によりＬＣＤに表示されている画像がスクリーン１２７上に写し出している。
【０１５９】
以上のことから本実施例は、ＬＣＤを複数用いることができるため、高精細なプロジェクタが実現できる。
【０１６０】
また、ＬＣＤの取り付け誤差を検出し、スクリーン上で位置ずれなくつながるように構成しているため、ＬＣＤの取り付けに高い精度を必要としない。
【０１６１】
さらにスクリーン上で画像の重なる領域については、重み係数を乗じているので、繋ぎ目が目立たない。また、水晶フィルタを用いるため、スクリーン上で、ＬＣＤの画素が写ることはなく、高画質の画像となる。
【０１６２】
次に図６０を参照して、前述したＬＣＤ１２９，１３０，１３１の位置ずれの検出について説明する。
【０１６３】
図６０に示すようにレンズ６と水晶フィルタ１３２の間に、位置ずれ検出用のミラー１４９を挿入する。つまり、各ＬＣＤに表示された画像は、ミラー１４９とレンズ１５６の働きにより、スクリーンに結像するものと同じ画像がＣＣＤ撮像素子１５０に結像するように構成されている。
【０１６４】
この位置ずれ検出の際には、相関性の高い被写体が参照映像信号として入力される。また、補間回路１３４〜１３６では位置ずれがない（Ｓ＝Ｒ＝０）として処理され、重み係数は“１”として乗じられる。
【０１６５】
そして、検出する際に、まずＬＣＤ１２９に相当する画像だけが表示され、ＣＣＤ撮像素子１５０で撮像され、Ａ／Ｄ変換部１５１によりＡ／Ｄ変換された後、スイッチ１５２の働きでメモリ１５３に記憶される。次にＬＣＤ１３０の画像だけが表示され、スイッチ１５２がｂ側となり、メモリ１５４に記憶される。そして、Ｓ，Ｒ検出器１５５ではメモリ１５３，１５４の画像信号がＬＣＤ１２９とＬＣＤ１３０との位置ずれを検出し、これをＳ，Ｒメモリ１３３に記憶する。
【０１６６】
同様にして、次にＬＣＤ１３１の画像だけを表示し、メモリ１５３に記憶し、ＬＣＤ１３０と１３１との位置ずれを検出し、Ｓ，Ｒメモリ１３３に記憶する。
以上のことから、ＬＣＤ１２９，１３０，１３１の取り付け時の位置ずれ量を検出することができる。なお、ここで用いた参照映像信号は、図４２に示したパターンを用いてもよい。
【０１６７】
また、本実施例ではミラーを用いて位置ずれを検出するようにしたが、図６１のように、ＬＣＤの像を一度スクリーン１２７に投影し、その反射光をハーフミラー１５６にてＣＣＤ上に再結像させるようにしてもよい。
【０１６８】
また、位置ずれ検出用の専用のカメラを利用してもよい。
【０１６９】
また、本発明は図６２に示すようなＣＲＴモニタへも応用できる。この例は複数の電子銃１８６〜１９０を備え、各々蛍光面１９３上に部分画像を表示するものであり、これらの電子銃１８６〜１９０の位置ずれを補正するように、各補間回路１６１〜１６５にて画像の平行移動及び、回転を行う。ここで、空間フィルタ１９４は、水晶フィルタ等で構成されたローパスフィルタである。
【０１７０】
このように複数の電子銃を用いることにより、１つだけ電子銃を用いる場合に比較して、蛍光面と電子銃との距離を短くできる。これらの電子銃は、例えばレーザであってもよいし、レンズ付の発光ダイオードアレイとマイクロマシンミラーを利用したものでもよい。
【０１７１】
また、電磁偏向により生じる画像の歪みは、補間回路でこれを補正するようにしてもよい。この歪みによる走査線の間隔に応じて空間フィルタのカットオフ周波数を決めるようにしてもよい。ＪＱ、空間フィルタは各電子銃の直前に各々設けてもよいし、Ｄ／Ａ変換後に電気的ＬＰＦをかけるようにしてもよい。
【０１７２】
次に図６３には、本発明による第１８実施例として、ラインセンサを用いたフィルム取り込み装置への応用例の構成を示し説明する。
【０１７３】
このフィルム取り込み装置において、撮像するフィルム３０１と、フィルム３０１を巻取り巻き戻しを行うローディング機構３０２と、その駆動回路３０７、が設けられ、フィルム３０１の近傍には、照射するための光源３０３が設けられている。
【０１７４】
そして前記フィルム３０１を挟んで光源３０３と対峙する位置にフィルム画像を撮像部３０５に結像させるためのレンズ３０４が設けられている。
【０１７５】
前記撮像部３０５で検出された画像信号は、プリアンプ１０ａ，１０ｂ，１０ｃにより増幅され、Ａ／Ｄ変換器１４ａ，１４ｂ，１４ｃでディジタル信号に変換され、信号処理回路（ＳＰ）２０ａ，２０ｂ，２０ｃにより、γ補正や輪郭強調が行われ、フレームメモリ２２ａ，２２ｂ，２２ｃに記憶される。
【０１７６】
これらのフレームメモリ２２から読出された画像信号は、画像合成回路３０８によりＲ，Ｇ，Ｂ別々に画像の合成を行なわれる。この画像合成回路３０８は、図５５に示すような合成処理部により構成されている。そして、合成された画像は、ＣＲＴ等の表示装置３０９、記憶装置３１０、プリンタ３１１にそれぞれ出力される。
【０１７７】
前記撮像部３０５は、図６４（ａ）に示す構成となっている。３本のランイセンサ３０６ａ，３０６ｂ，３０６ｃが配置されている。そして、各ラインセンサは図６４（ｃ）のように、ＲＧＢの光学フィルタが配置されている。
【０１７８】
本実施例では、フィルム３０１をローディングさせて、得られた画像を合成することを特徴としている。
【０１７９】
つまり、ラインセンサ３０６ａ，３０６ｂ，３０６ｃで撮像された画像は、図６４（ｂ）のＡ，Ｂ，Ｃに配置され、この３画像Ａ，Ｂ，Ｃを合成することによりフィルムの一コマが撮像される。前記撮像部３０５でラインセンサの取り付けた誤差があった場合、画像Ａ，Ｂ，Ｃの間に位置ずれが生じるが、重複領域においては、前述した位置擦れ補正を利用して画像を生成する。
【０１８０】
本実施例によれば、エリアセンサの代わりにラインセンサを用いることからたいへん安価に高解像度撮影を実現できる。また、カラーフィルタを用いることにより、簡単にカラー信号を得ることができる。このラインセンサの配置はたとえば図６３のように千鳥型の配置にしてもよい。また本実施例ではフィルムを駆動して撮像のための走査を行ったが、撮像部自体を駆動するようにしてもよい。
【０１８１】
また、図６４（ｃ）に示すようなカラーフィルタを用いるかわりに、ＲＧＢ専用のラインセンサを利用してもよく、回転色フィルタを利用してもよい。
【０１８２】
次に図６５には本発明による第１９実施例として、ＣＭＤを用いて、補間演算のためのフレームメモリを不要とした撮像装置の構成を示し説明する。この撮像装置は、ＣＭＤを備え、ランダムアクセス機能と非破壊読出し機能を有する。
【０１８３】
このランダムアクセス機能は、任意の位置の画素の信号値を読出す機能であり、非破壊読出し機能は画素の信号をリセットするまで、信号電荷を失うこと無く、幾度でも読み出せる機能である。つまり、非破壊読出しが行えることから短時間であれば、ＣＭＤそのものをメモリのように扱うことができる。
【０１８４】
そして、このランダムアクセス機能と非破壊読出し機能を利用してフレームメモリを用いずに、補間演算を行うことができる。つまり、ＣＭＤをフレームメモリの代わりとして用いて、補間に必要な画素値をランダムアクセスにより読出す。このような撮像装置の構成例を図６５（ａ）に示す。ここでＣＭＤドライバ３２ａ，３２ｂは、同図（ｂ）に示す用に読出す画素位置の信号に従い、デコーダ用アドレス発生器３１２からｘデコーダ３１３及びｙデコーダ３１４へ読出しのためのアドレスを発生し、ｘデコーダ３１３及びｙデコーダ３１４では、このアドレスに従い、指定された画素位置の信号を読出す信号パルスをＣＭＤに送る。このＣＭＤドライバ３２ａ，３２ｂは、各々独立に制御する。
【０１８５】
また、アナログ回路で構成されたアナログ補間部３１５は、係数発生回路３１６、乗算器３１７、加算器３１８、サンプルホールド３１９及び、サンプルホールド側とアース側へ切換えを行うスイッチ３２０により、構成される。
【０１８６】
次に本実施例の特徴である補間演算について説明する。
【０１８７】
この実施例では、第１実施例と同様な補間演算を行う、すなわち、図２に示すように画素ｄij（i=１〜ｕ，j=１〜ｗ）に相当する信号は、ＣＭＤ８から読出され、Ａ／Ｄ変換され、信号処理が施された後、フレームメモリ３０の所定の位置に書き込まれる。一方、画素ｄij（i=ｕ＋１〜ｕ＋ｖ，j=１〜ｗ）については、ＣＭＤ９からランダムアクセス機能を利用して、画素ｄijの近傍の４点の画素が非破壊的に読出され、アナログ補間部３１５にて、アナログ演算により、式（９−ａ），（９−ｂ）に相当する演算が行われ、算出された信号がＡ／Ｄ変換される。そして、そのＡ／Ｄた変換され信号は、信号処理された後、構造強調が行われて、フレームメモリ３０の所定に位置に書き込まれる。このように非破壊読出しされるため、同じ画素を幾度も読出すことができる。
【０１８８】
また、アナログ補間により１画素の信号値が算出される毎にスイッチ３２０がｂ側に切替わり、サンプルホールド回路（ＳＨ）３１９の値を“０”にリセットする。
【０１８９】
以上のようにして、第１実施例では必要としたフレームメモリ２２，２３を使用せずに、複数画像の合成を行うことができ、撮像装置を安いココストで製造することができる。
【０１９０】
なお、本実施例では、ＣＭＤ８，９の変位量の測定については、第１実施例と同様に行うことができる。また、補間演算で利用される係数発生部３１６の係数は、例えば、代表的な係数の組を用意しておき、それらの中から該当する組を選択するように構成すれば、小規模な回路で実施することができる。さらにＰＳ回路２９の代わりに図３５に示したような合成回路を利用することもできる。
【０１９１】
以上のように本発明の撮像装置は、相関演算を用いて各撮像素子の位置関係を検出し、これに基づいて補間演算を利用して画像の信号値を得るようにしているため、撮像素子の位置決め精度に影響されず、容易に且つ、低コストに製造することができる。
【０１９２】
また本発明は、前述した実施例に限定されるものではなく、他にも発明の要旨を逸脱しない範囲で種々の変形や応用が可能であることは勿論である。
【０１９３】
【発明の効果】
以上詳述したように本発明によれば、高精細な画像を表示する画像表示装置が実現できる。
【図面の簡単な説明】
【図１】図１は、本発明の撮像装置の概要を説明するための概略的な構成を示す図である。
【図２】図２は、撮像素子の撮像エリアと被写体を画像として表示するエリアとを模式的に表した図である。
【図３】図３は、本発明による第１実施例としての撮像装置の具体的な構成を示す図である。
【図４】図４は、図３に示す変位量検出回路と補間回路の具体的な回路構成を示す図である。
【図５】図５は、図３に示すＣＭＤのオーバーラップエリアを示す図である。
【図６】図６は、ずれベクトルと回転によるずれベクトルと平行移動によるずれベクトルを示す図である。
【図７】図７は、図３に示すＣＭＤ８の参照エリアをＣＭＤ９のサーチエリア内で絶対値和が最小となる位置を示す図である。
【図８】図８は、線型補間演算による画素値の補間における所定画素Ａと撮像された画素との位置関係を示す図である。
【図９】図９は、ＣＭＤ８及びＣＭＤ９の各画素をベクトルにより位置関係を示す図でる。
【図１０】図１０は、本発明による第２実施例としての撮像装置の構成を示す図である。
【図１１】図１１は、本発明による第３実施例としての撮像装置の光路分割部の構成を示す図である。
【図１２】図１２は、第３実施例におけるＣＭＤ８，９の光量分布を示す図である。
【図１３】図１３は、図１２の逆関数の光量分布を示す図である。
【図１４】図１４は、本発明による第３実施例としての撮像装置の構成を示す図である。
【図１５】図１５は、本発明による第４実施例としての撮像装置の構成を示す図である。
【図１６】図１６は、第４実施例の光路分割部にセパレータレンズを用いた場合の構成及び光束を示す図である。
【図１７】図１７は、本発明による第５実施例としての撮像装置の構成を示す図である。
【図１８】図１８は、第５実施例の撮像素子の撮像エリアと被写体を画像として表示するエリアとを模式的に表した図である。
【図１９】図１９は、本発明による第６実施例としての撮像装置の構成を示す図である。
【図２０】図２０（ａ）乃至（ｄ）は、本発明による第７実施例としての撮像装置の光路分割部の構成例を示す図である。
【図２１】図２１は、図２０（ａ）に示す光路分割部を真横及び真上から観た状態を示す図である。
【図２２】図２２は、図２０（ｂ）に示す光路分割部を真横及び真上から観た状態を示す図である。
【図２３】図２３は、第７実施例における光路分割部によって撮像される撮像素子の撮像エリアと被写体を画像として表示するエリアとを模式的に表した図である。
【図２４】図２４は、本発明による第８実施例としての構成を示す図である。
【図２５】図２５は、固体撮像素子におけるベアチップ自体を実装する実施例を示す図である。
【図２６】図２６は、図２５に示した固体撮像素子のＡ−Ａ′断面を示す断面図である。
【図２７】図２７は、金属端子が設けられたセラミックからなるパッケージの構成を示すで図ある。
【図２８】図２８は、セラミック基板の両端にスペーサ部を設けたパッケージの構成を示す図である。
【図２９】図２９は、ベアチップのマウント例を示す図である。
【図３０】図３０は、図２９に示すマウント例を第６実施例の撮像装置に適用した場合の構成を示す図である。
【図３１】図３１は、ベアチップのマウント例を示す図である。
【図３２】図３２は、本発明による第９実施例としての撮像装置の構成を示す図である。
【図３３】図３３は、図３２に示した第１の合成回路の具体的な構成を示す図である。
【図３４】図３４は、図３３に示す第１の合成回路による線形補間の状態を示す図である。
【図３５】図３５は、図３２に示した第２の合成回路の具体的な構成を示す図である。
【図３６】図３６は、図３５に示す第２の合成回路による線形補間の状態を示す図である。
【図３７】図３７は、本発明による第１０実施例としての撮像装置の構成を示す図である。
【図３８】図３８は、第１０実施例の変形例の撮像装置の構成を示す図である。
【図３９】図３９は、重み係数のオペレータの例である。
【図４０】図４０は、本発明による第１１実施例としての撮像装置に用いるメモリを作成するための構成を示す図である。
【図４１】図４１は、本発明による第１１実施例としての撮像装置の構成を示す図である。
【図４２】図４２は、基準パターンの画像例である。
【図４３】図４３は、重なる領域の上、下端線の近傍に設けられたパターン例を示す図である。
【図４４】図４４は、本発明の第１２実施例としての撮像装置の構成を示す図である。
【図４５】図４５は、従来の光学系と撮像素子の構成を示す図である。
【図４６】図４６は、従来の撮像装置における予め決められた位置を撮像するように位置決めされた撮像素子の構成を示す図である。
【図４７】図４７は、従来の撮像装置における撮像素子を移動させて全視野の撮像を行う撮像系の構成を示す図である。
【図４８】図４８は、３枚以上の画像合成の基準画像の回転状態を示す図である。
【図４９】図４９は、本発明による第１３実施例としての撮像装置の具体的な構成を示す図である。
【図５０】図５０は、３枚以上の画像合成の重なる領域の不都合な部分の除去状態を示す図である。
【図５１】図５１は、本発明による第１４実施例としての撮像装置の具体的な構成を示す図である。
【図５２】図５２は、本発明による第１５実施例としての撮像装置の構成を示す図である。
【図５３】図５３は、図５２に示した合成処理部の接続構成を示す図である。
【図５４】図５４は、図５３に示した第２合成処理部の具体的な構成を示す図である。
【図５５】図５５は、本発明による第１６実施例としての撮像装置の構成を示す図である。
【図５６】図５６は、図５５に示した合成処理部の具体的な構成を示す図である。
【図５７】図５７は、本発明による第１７実施例として、プロジェクタに応用した例を示す図である。
【図５８】図５８は、ＣＭＤの構成を示す図である。
【図５９】図５９は、ハーフプリズム近傍の構成を示す図である。
【図６０】図６０は、ＬＣＤからの画像の位置ずれ検出を行うための構成を示す図である。
【図６１】図６１は、ＬＣＤからの画像の位置ずれ検出をハーフミラーを用いて行う構成を示す図である。
【図６２】図６２は、本発明の撮像装置をＣＲＴモニタに応用した構成例を示す図である。
【図６３】図６３は、本発明による第１８実施例として、ラインセンサを用いたフィルム取り込み装置に応用した構成例を示す図である。
【図６４】図６４は、図６３に示したフィルム取り込み装置の撮像部のラインセンサの配置及び撮像した画像の状態を示す図である。
【図６５】図６５は、本発明による第１９実施例としての撮像装置の具体的な構成を示す図である。
【符号の説明】
１…光路分割部、１ａ…ハーフプリズム、２…撮像部、３…画像記憶部、４…変位量検出部、５…補間部、６…撮影光学系（撮像レンズ）、７…画像合成部（合成回路）、８，９，５１，５２，５３，５４…ＣＭＤ、１０，１１…プリアンプ、１２，１３…ローパスフィルタ（ＬＰＦ）、１４，１５…Ａ／Ｄ変換器、１６，１７…減算器、１８，１９…ＦＰＮ記憶メモリ、２０，２１…信号処理回路（Signal Procesor ；ＳＰ）、２２，２３…フレームメモリ、２４…変位量検出回路、２４ａ，２４ｂ…相関器、２４ｃ…係数算出器、２５…補間回路、２６，２７…メモリ、２８…補間係数書き込み回路、２９…パラレル−シリアル（Parallel-Serial ；ＰＳ）変換回路、３０…フレームメモリ、３１…表示部、３２…ＣＭＤドライバ、３３…システムコントローラ、３４…座標選択回路、３５…座標変換回路、３６，３６ａ…データ読出回路、３７…補間係数算出器、３８…線型補間演算回路、３９…乗算器、４０…加算器、４１…データアドレス検出器、４２…データアドレスメモリ、４３…係数ａメモリ、４４…係数ｂメモリ、４５…係数ｃメモリ、４６…係数ｄメモリ、４７，４８…光量補正回路、４９…回転機構部、５０…遮光板、６１，６２，６６，６７，６８，６９…楔形プリズム、６３…ビームスプリッタ、６４，６５…偏心レンズ、７０，７１，７２，７３…偏心レンズ、７４…レンズ（レンズアレイ）、７５…撮像素子アレイ、８０…セラミック基板、８１，８２…ＣＭＤ、８３，８８…接着材、８４，９１…配線（ボンディングワイヤ）、８５…端子、８６…金属端子、８７…穴、９０…スペーサ部、９２…直角部材、９３…プリズム。
【図１】
0003791696.tif 000015
【図２】
0003791696.tif 000016
【図３】
0003791696.tif 000017
【図４】
0003791696.tif 000018
【図５】
0003791696.tif 000019
【図６】
0003791696.tif 000020
【図７】
0003791696.tif 000021
【図８】
0003791696.tif 000022
【図９】
0003791696.tif 000023
【図１０】
0003791696.tif 000024
【図１１】
0003791696.tif 000025
【図１２】
0003791696.tif 000026
【図１３】
0003791696.tif 000027
【図１４】
0003791696.tif 000028
【図１５】
0003791696.tif 000029
【図１６】
0003791696.tif 000030
【図１７】
0003791696.tif 000031
【図１８】
0003791696.tif 000032
【図１９】
0003791696.tif 000033
【図２０】
0003791696.tif 000034
【図２１】
0003791696.tif 000035
【図２２】
0003791696.tif 000036
【図２３】
0003791696.tif 000037
【図２４】
0003791696.tif 000038
【図２５】
0003791696.tif 000039
【図２６】
0003791696.tif 000040
【図２７】
0003791696.tif 000041
【図２８】
0003791696.tif 000042
【図２９】
0003791696.tif 000043
【図３０】
0003791696.tif 000044
【図３１】
0003791696.tif 000045
【図３２】
0003791696.tif 000046
【図３３】
0003791696.tif 000047
【図３４】
0003791696.tif 000048
【図３５】
0003791696.tif 000049
【図３６】
0003791696.tif 000050
【図３７】
0003791696.tif 000051
【図３８】
0003791696.tif 000052
【図３９】
0003791696.tif 000053
【図４０】
0003791696.tif 000054
【図４１】
0003791696.tif 000055
【図４２】
0003791696.tif 000056
【図４３】
0003791696.tif 000057
【図４４】
0003791696.tif 000058
【図４５】
0003791696.tif 000059
【図４６】
0003791696.tif 000060
【図４７】
0003791696.tif 000061
【図４８】
0003791696.tif 000062
【図４９】
0003791696.tif 000063
【図５０】
0003791696.tif 000064
【図５１】
0003791696.tif 000065
【図５２】
0003791696.tif 000066
【図５３】
0003791696.tif 000067
【図５４】
0003791696.tif 000068
【図５５】
0003791696.tif 000069
【図５６】
0003791696.tif 000070
【図５７】
0003791696.tif 000071
【図５８】
0003791696.tif 000072
【図５９】
0003791696.tif 000073
【図６０】
0003791696.tif 000074
【図６１】
0003791696.tif 000075
【図６２】
0003791696.tif 000076
【図６３】
0003791696.tif 000077
【図６４】
0003791696.tif 000078
【図６５】
0003791696.tif 000079