(57)【要約】  ３次元撮像装置は、第１の透光領域１Ｌおよび第２の透光領域１Ｒを有する光透過部１と、複数の単位ブロックを有する撮像素子２ａと、結像部３と、撮像素子２ａから出力された光電変換信号に基づいて複数視点画像を生成する画像処理部とを有する。可視光の波長λに関して、第１の透光領域１Ｌの分光透過率を表す関数をＴＬ（λ）、第２の透光領域１Ｒの分光透過率を表す関数をＴＲ（λ）、第１の種類の画素の分光透過率を表す関数をＴ１（λ）、第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する。
2012157209.tif 000002
【特許請求の範囲】
【請求項１】
第１の透光領域および第２の透光領域を有する光透過部と、
前記光透過部を透過した光を受けるように配置された撮像素子であって、各々が第１の種類の画素および第２の種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、
前記撮像素子の撮像面に像を形成する結像部と、
前記第１の種類の画素および前記第２の種類の画素から出力された光電変換信号に基づいて複数視点画像を生成する画像処理部と、
を備え、
可視光の波長λに関して、前記第１の透光領域の分光透過率を表す関数をＴＬ（λ）、前記第２の透光領域の分光透過率を表す関数をＴＲ（λ）、前記第１の種類の画素の分光透過率を表す関数をＴ１（λ）、前記第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、
ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、
ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する、
３次元撮像装置。
【請求項２】
ＴＬ（λ）＝Ｔ１（λ）、かつＴＲ（λ）＝Ｔ２（λ）が成立している、請求項１に記載の３次元撮像装置。
【請求項３】
ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、周期関数である、請求項２に記載の３次元撮像装置。
【請求項４】
前記第１の種類の画素は、第１の光感知セルおよび前記第１の光感知セルに対向して配置された第１の透過フィルタを含み、
前記第２の種類の画素は、第２の光感知セルおよび前記第２の光感知セルに対向して配置された第２の透過フィルタを含み、
Ｔ１（λ）は、前記第１の透過フィルタの分光透過率を表す関数であり、
Ｔ２（λ）は、前記第２の透過フィルタの分光透過率を表す関数である、
請求項１から３のいずれかに記載の３次元撮像装置。
【請求項５】
各単位ブロックは、第３の種類の画素および第４の種類の画素をさらに含み、
前記第３の種類の画素は、第３の光感知セルおよび前記第３の光感知セルに対向して配置された、第１の色成分の光を選択的に透過させる第３の透過フィルタを含み、
前記第４の種類の画素は、第４の光感知セルおよび前記第４の光感知セルに対向して配置された、第２の色成分の光を選択的に透過させる第４の透過フィルタを含み、
前記画像処理部は、前記第３の種類の画素および前記第４の種類の画素から出力された光電変換信号を用いて、色情報を生成する、
請求項４に記載の３次元撮像装置。
【請求項６】
前記第１の種類の画素は、複数の光感知セルと、前記複数の光感知セルの各々に対向して配置された、分光透過率特性が互いに異なる複数の透過フィルタとを含み、
前記第２の種類の画素は、１つの光感知セルと、前記１つの光感知セルに対向して配置された１つの透過フィルタとを含み、
Ｔ１（λ）は、前記第１の種類の画素に含まれる前記複数の透過フィルタの分光透過率の総和を表す関数であり、
Ｔ２（λ）は、前記第２の種類の画素に含まれる前記１つの透過フィルタの分光透過率を表す関数である、
請求項１から３のいずれかに記載の３次元撮像装置。
【請求項７】
前記第１の種類の画素に含まれる前記複数の透過フィルタは、互いに異なる色成分の光を選択的に透過させるように構成されている、請求項６に記載の３次元撮像装置。
【請求項８】
前記第１の種類の画素に含まれる前記複数の光感知セルの数および前記複数の透過フィルタの数は、ともに３個であり、
前記複数の透過フィルタのうち、第１の透過フィルタは赤の色成分の光を選択的に透過させ、第２の透過フィルタは緑の色成分の光を選択的に透過させ、第３の透過フィルタは青の色成分の光を選択的に透過させるように構成されている、
請求項７に記載の３次元撮像装置。
【請求項９】
前記第１の種類の画素は、複数の光感知セルと、前記複数の光感知セルに対向して配置された、分光透過率特性が互いに異なる複数の透過フィルタとを有し、
前記第２の種類の画素は、複数の光感知セルと、前記複数の光感知セルに対向して配置された、分光透過率特性が互いに異なる複数の透過フィルタとを有し、
Ｔ１（λ）は、前記第１の種類の画素に含まれる前記複数の透過フィルタの分光透過率の総和を表す関数であり、
Ｔ２（λ）は、前記第２の種類の画素に含まれる前記複数の透過フィルタの分光透過率の総和を表す関数である、
請求項１から３のいずれかに記載の３次元撮像装置。
【請求項１０】
前記第１および第２の種類の画素は、ともに第１から第Ｎ（Ｎは３以上の整数）の光感知セルと、前記第１から第Ｎの光感知セルにそれぞれ対向して配置された第１から第Ｎの透過フィルタとを有し、
前記第１の種類の画素に含まれる前記第１から第Ｎの透過フィルタは、それぞれ第１から第Ｎの色成分の光を選択的に透過させるように構成され、
前記第２の種類の画素に含まれる前記第１から第Ｎの透過フィルタは、それぞれ前記第１から第Ｎの色成分の光を選択的に透過させるように構成され、
前記第１の種類の画素に含まれる第ｉ（ｉは１からＮまでの整数）の透過フィルタの前記第ｉの色成分における分光透過率特性は、前記第２の種類の画素に含まれる第ｉの透過フィルタの前記第ｉの色成分における分光透過率特性と異なっている、
請求項９に記載の３次元撮像装置。
【請求項１１】
Ｎ＝３であり、
前記第１から第３の色成分は、それぞれ赤、緑、青である、
請求項１０に記載の３次元撮像装置。
【請求項１２】
前記画像処理部は、前記第１および第２の種類の画素から出力される前記信号に基づいて、カラー複数視点画像を生成する、請求項１から１１のいずれかに記載の３次元撮像装置。
【請求項１３】
前記撮像素子から出力された信号を保存する記録部をさらに有し、
前記画像処理部は、前記記録部に保存された前記信号に基づいて、前記複数視点画像を生成する、請求項１から１２のいずれかに記載の３次元撮像装置。
【請求項１４】
請求項１から１３のいずれかに記載の３次元撮像装置に用いられる撮像素子。
【請求項１５】
請求項１から１３のいずれかに記載の３次元撮像装置に用いられる光透過部。
【請求項１６】
第１の透光領域および第２の透光領域を有する光透過部と、前記光透過部を透過した光を受けるように配置された撮像素子であって、各々が第１の種類の画素および第２の種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、前記撮像素子の撮像面に像を形成する結像部とを備えた３次元撮像装置であって、可視光の波長λに関して、前記第１の透光領域の分光透過率を表す関数をＴＬ（λ）、前記第２の透光領域の分光透過率を表す関数をＴＲ（λ）、前記第１の種類の画素の分光透過率を表す関数をＴ１（λ）、前記第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する３次元撮像装置から出力された信号に基づいて画像を生成する画像処理装置であって、
前記第１および第２の種類の画素から出力された光電変換信号に基づいて複数視点画像を生成する画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本願は１つの光学系と１つの撮像素子を用いて複数視点画像を生成する単眼の３次元撮像技術に関する。
【背景技術】
【０００２】
近年、ＣＣＤやＣＭＯＳ等の固体撮像素子（以下、「撮像素子」と称する場合がある。）を用いたデジタルカメラやデジタルムービーの高機能化、高性能化には目を見張るものがある。特に半導体製造技術の進歩により、固体撮像素子における画素構造の微細化が進んでいる。その結果、固体撮像素子の画素および駆動回路の高集積化が図られてきた。このため、僅かの年数で撮像素子の画素数が１００万画素程度から１０００万画素以上へと著しく増加している。さらに、撮像によって得られる画像の質も飛躍的に向上している。一方、表示装置に関しては、薄型の液晶やプラズマによるディスプレイにより、場所を取らず、高解像度で高コントラストの表示が可能になり、高い性能が実現されている。このような映像の高品質化の流れは、２次元画像から３次元画像へと広がりつつある。昨今では、偏光メガネを必要とするが、高画質の３次元表示装置が開発され始めている。【０００３】
３次元撮像技術に関して、単純な構成をもつ代表的な方式として、２つのカメラから構成される撮像系を用いて、右目用の画像および左目用の画像をそれぞれ取得するという方式がある。このような、いわゆる２眼撮像方式では、カメラを２つ用いるため、撮像装置が大型になり、コストも高くなり得る。そこで、１つのカメラを用いて視差を有する複数の画像（以下、「複数視点画像」と呼ぶことがある。）を取得する方式（単眼撮像方式）が研究されている。【０００４】
例えば、特許文献１には、透過軸の方向が互いに直交する２枚の偏光板と回転する偏光フィルタとを用いた方式が開示されている。図１３は、当該方式による撮像系の構成を示す模式図である。撮像装置は、０度偏光の偏光板１１、９０度偏光の偏光板１２、反射鏡１３、ハーフミラー１４、円形の偏光フィルタ１５、円形の偏光フィルタ１５を回転させる駆動装置１６、光学レンズ３、光学レンズにより結像された像を取得する撮像装置９を備えている。ここで、ハーフミラー１４は、偏光板１１を透過して反射鏡１３で反射された光を反射し、偏光板１２を透過した光を透過させる。以上の構成により、互いに離れた場所に配置された偏光板１１、１２をそれぞれ透過した光は、ハーフミラー１４、円形の偏光フィルタ１５、および光学レンズ３を経由して撮像装置９に入射し、画像が取得される。この方式における撮像の原理は、円形の偏光フィルタ１５を回転させることにより、２枚の偏光板１１、１２のそれぞれに入射した光を別々のタイミングで捉え、視差を有する２つの画像を取得する、というものである。【０００５】
しかしながら、上記方式では、円形の偏光フィルタ１５を回転しながら、時間分割によって異なる位置の画像を撮像するため、視差を有する２つの画像を同時に取得できないという課題がある。また、機械的駆動を用いるため、耐久性に問題があり得る。その上、全入射光を偏光板１１、１２および偏光フィルタ１５で受けるため、撮像装置９が受ける光の量（受光量）が５０％以上も低下するという課題もある。【０００６】
上記方式に対して、機械的駆動を用いることなく視差のある２つの画像を同時に取得する方式が特許文献２に開示されている。この方式による撮像装置は、２つの入射領域から入射する光を反射鏡によって集光し、２種類の偏光フィルタが交互に配列された撮像素子で受光することにより、機械的駆動部を用いずに視差のある２つの画像を取得する。【０００７】
図１４は、この方式における撮像系の構成を示す模式図である。この撮像系は、透過軸の方向が互いに直交する２つの偏光板１１、１２と、反射鏡１３と、光学レンズ３と、撮像素子２とを有する。撮像素子２は、その撮像面に、複数の画素１０と、画素に１対１に対応して配置された偏光フィルタ１７、１８とを備える。偏光フィルタ１７、１８は全画素上に交互に配列されている。ここで、偏光フィルタ１７、１８の透過軸の向きは、それぞれ偏光板１１、１２の透過軸の向きと一致している。【０００８】
以上の構成により、入射光は偏光板１１、１２を透過し、反射鏡１３で反射され、光学レンズ３を通り、撮像素子１の撮像面に入射する。偏光板１１、１２をそれぞれ透過して撮像素子１に入射する光は、それぞれ偏光フィルタ１７、１８を透過してそれらに対向する画素で光電変換される。ここで、偏光板１１、１２をそれぞれ通って撮像素子１に入射する光によって形成される画像を、それぞれ右目用画像、左目用画像と呼ぶと、右目用画像、左目用画像は、それぞれ偏光フィルタ１７、１８に対向する画素群から得られる。【０００９】
このように、特許文献２に開示された方式では、特許文献１に開示された回転する円形の偏光フィルタを用いる代わりに、撮像素子の画素上に透過軸の方向が互いに直交する２種類の偏光フィルタが交互に配置される。これにより、特許文献１の方式に比べて解像度が１／２に低下するが、１つの撮像素子を用いて視差を有する右目用画像と左目用画像とを同時に得ることができる。しかしながら、この技術においても、特許文献１の技術と同様、入射光が偏光板および偏光フィルタを透過する際に光量が減少するため、撮像素子の受光量は大きく減少する。【００１０】
撮像素子の受光量が低下するという問題に対して、視差を有する複数の画像と通常の画像とを１つの撮像素子で取得できる技術が特許文献３に開示されている。この技術によれば、視差を有する２つの画像の取得時と通常画像の取得時とで構成要素の一部が機械的に入れ替わることによって視差を有する２つの画像と通常画像とが１つの撮像素子によって取得される。視差を有する２つの画像を取得する際に光路上に２つの偏光フィルタが配置される点は特許文献２に開示された技術と同じである。一方、通常画像を取得する際には、偏光フィルタは機械的に光路から取り外される。このような機構を取り入れることにより、視差を有する複数の画像と光利用率の高い通常画像とを得ることができる。【００１１】
上記の特許文献１〜３に開示された方式では、偏光板や偏光フィルタが用いられるが、他のアプローチとして、色フィルタが用いられる方式もある。例えば、色フィルタを用いて視差を有する２つの画像を同時に取得する方式が特許文献４に開示されている。図１５は、特許文献４に開示された撮像系を模式的に示す図である。撮像系は、レンズ３、レンズ絞り１９、透過波長域の異なる２つの色フィルタ２０ａ、２０ｂが配置された光束制限板２０、感光フィルム２１を備える。ここで、色フィルタ２０ａ、２０ｂは、例えば赤系統、青系統の光をそれぞれ透過させるフィルタである。【００１２】
以上の構成により、入射光は、レンズ３、レンズ絞り１９、および光束制限板２０を透過し、感光フィルムに結像する。その際、光束制限板２０における２つの色フィルタ２０ａ、２０ｂでは、それぞれ赤系統、青系統の光だけが透過する。その結果、感光フィルム上にはこれらの２つの色フィルタをそれぞれ透過した光によるマゼンタ系統の色の像が形成される。ここで、色フィルタ２０ａ、２０ｂの位置が異なっているため、感光フィルム上に形成される像には視差が生じる。ここで、感光フィルムから写真を作り、赤色フィルムおよび青色フィルムがそれぞれ右目用および左目用として貼り付けられたメガネを使うと、奥行き感のある画像を見ることができる。このように、特許文献４に開示された技術によれば、２つの色フィルタを使って複数視点画像を作ることができる。【００１３】
特許文献４に開示された技術は、感光フィルム上に結像させ、視差を有する複数の画像を作るものであるが、一方で、視差を有する画像を電気信号に変換して取得する技術が特許文献５に開示されている。図１６は、この技術における光束制限版を模式的に表す図である。この技術では、撮像光学系の光軸に垂直な平面上に、赤色光を透過するＲ領域２２Ｒ、緑色光を透過するＧ領域２２Ｇ、青色光を透過するＢ領域２２Ｂが設けられた光束制限版２２が用いられる。これらの領域を透過した光を赤用のＲ画素、緑用のＧ画素、青用のＢ画素を有するカラー撮像素子で受けることにより、各領域を透過した光による画像が取得される。【００１４】
また、特許文献６にも、特許文献５と同様の構成を用いて視差を有する複数の画像を取得する技術が開示されている。図１７は、特許文献６に開示された光束制限板を模式的に示す図である。この技術でも、光束制限板２３に設けられたＲ領域２３Ｒ、Ｇ領域２３Ｇ、Ｂ領域２３Ｂを入射光が透過することにより視差のある画像を作ることができる。【００１５】
特許文献７も同様に、光軸に対して対称的に配置された、互いに色の異なる一対のフィルタを用いて視差を有する複数の画像を生成する技術を開示している。一対のフィルタとして赤色のフィルタおよび青色のフィルタを利用することにより、赤色光を検知するＲ画素は赤フィルタを透過した光を観測し、青色光を検知するＢ画素は青フィルタを透過した光を観測する。赤フィルタと青フィルタとは位置が異なるため、Ｒ画素が受ける光の入射方向とＢ画素が受ける光の入射方向とは互いに異なる。その結果、Ｒ画素で観測される画像とＢ画素で観測される画像とは、互いに視点の異なる画像となる。これらの画像から画素ごとに対応点を求めることにより、視差量が算出される。算出された視差量とカメラの焦点距離情報とから、カメラから被写体までの距離が求められる。【００１６】
特許文献８は、口径サイズが互いに異なる２枚の色フィルタ（例えば、赤と青）が取り付けられた絞り、または色の異なる２枚の色フィルタが光軸に対して左右対称の位置に取り付けられた絞りを用いて取得した２つの画像から被写体の距離情報を求める技術を開示している。この技術では、口径サイズが互いに異なる赤および青の色フィルタをそれぞれ透過した光を観測する場合、色ごとに観測されるボケの程度が異なる。そのため、赤および青の色フィルタのそれぞれに対応する２つの画像は、被写体の距離によってボケの程度が異なる画像となる。これらの画像から対応点を求め、ボケの程度を比較することにより、カメラから被写体までの距離情報が得られる。一方、光軸に対して左右対称の位置に取り付けられた色の異なる２枚の色フィルタをそれぞれ透過した光を観測する場合、色ごとに観測される入射光の方向が異なる。そのため、赤および青の色フィルタのそれぞれに対応する２つの画像は、視差を有する画像となる。これらの画像から対応点を求め、対応点間の距離を求めることにより、カメラから被写体までの距離情報が得られる。【００１７】
上記の特許文献４〜８に示された技術によれば、光束制限板にＲＧＢの色フィルタを配置することによって視差のある画像を生成することができる。しかしながら、光束制限板を用いるため、入射光量が減少する。また、視差の効果を高めるにはＲＧＢの色フィルタを互いに離れた位置に配置し、それらの面積を小さくする必要があるが、そのようにすると入射光量はさらに減少する。【００１８】
以上の技術に対して、ＲＧＢの色フィルタが配置された絞りを用いて、視差を有する複数の画像と光量的に問題のない通常画像とを得ることができる技術が特許文献９に開示されている。この技術では、絞りを閉じた状態ではＲＧＢの色フィルタを透過した光だけが受光され、絞りを開いた状態ではＲＧＢの色フィルタ領域が光路から外されるため、入射光をすべて受けることができる。これにより、絞りを閉じた状態では視差のある画像を取得し、絞りを開いた状態では光利用率の高い通常画像を得ることができる。
【先行技術文献】
【特許文献】
【００１９】
【特許文献１】特開昭６２−２９１２９２号公報
【特許文献２】特開昭６２−２１７７９０号公報
【特許文献３】特開２００１−０１６６１１号公報
【特許文献４】特開平２−１７１７３７号公報
【特許文献５】特開２００２−３４４９９９号公報
【特許文献６】特開２００９−２７６２９４号公報
【特許文献７】特開２０１０−３８７８８号公報
【特許文献８】特開２０１０―７９２９８号公報
【特許文献９】特開２００３−１３４５３３号公報
【発明の概要】
【発明が解決しようとする課題】
【００２０】
従来技術によれば、複数視点画像を生成することはできるが、偏光板あるいは色フィルタが用いられるため、撮像素子に入射する光の量が減少する。入射光量を確保するためには、偏光部分あるいは色フィルタ領域を光路上から外す機構が必要であり、従来技術ではそのような機構を用いずに複数視点画像と光利用率の高い画像とを同時に得ることができない。【００２１】
本発明の実施形態は、機械的駆動を用いることなく、光利用率の高い複数視点画像を取得し得る撮像技術を提供する。
【課題を解決するための手段】
【００２２】
上記課題を解決するために、本発明の一態様に係る３次元撮像装置は、第１の透光領域および第２の透光領域を有する光透過部と、前記光透過部を透過した光を受けるように配置された撮像素子であって、各々が第１の種類の画素および第２の種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、前記撮像素子の撮像面に像を形成する結像部と、前記第１の種類の画素および前記第２の種類の画素から出力された光電変換信号に基づいて複数視点画像を生成する画像処理部とを備えている。可視光の波長λに関して、前記第１の透光領域の分光透過率を表す関数をＴＬ（λ）、前記第２の透光領域の分光透過率を表す関数をＴＲ（λ）、前記第１の種類の画素の分光透過率を表す関数をＴ１（λ）、前記第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する。【００２３】
本発明の一態様に係る撮像素子は、上記の３次元撮像装置に用いられる。【００２４】
本発明の一態様に係る光透過部は、上記の３次元撮像装置に用いられる。【００２５】
本発明の一態様に係る画像処理装置は、第１の透光領域および第２の透光領域を有する光透過部と、前記光透過部を透過した光を受けるように配置され、各々が第１の種類の画素および第２の種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、前記撮像素子の撮像面に像を形成する結像部とを備えた３次元撮像装置から出力された信号に基づいて画像を生成する。ここで、可視光の波長λに関して、前記第１の透光領域の分光透過率を表す関数をＴＬ（λ）、前記第２の透光領域の分光透過率を表す関数をＴＲ（λ）、前記第１の種類の画素の分光透過率を表す関数をＴ１（λ）、前記第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する。前記画像処理装置は、前記第１および第２の種類の画素から出力された光電変換信号に基づいて複数視点画像を生成する。【００２６】
上述の一般的かつ特定の態様は、システム、方法、およびコンピュータプログラムを用いて実装され、または、システム、方法およびコンピュータプログラムの組み合わせを用いて実現され得る。
【発明の効果】
【００２７】
本発明の実施形態によれば、従来の色フィルタよりも透過率の高い複数の透光領域を有する光透過部を用いることにより、機械的駆動を用いることなく、光利用率の高い複数視点画像を生成することができる。
【図面の簡単な説明】
【００２８】
【図１】光透過部および撮像素子の単位ブロックの一例を模式的に示す図である。
【図２Ａ】２つの透光領域の分光透過率特性の一例を示すグラフである。
【図２Ｂ】２つの透過フィルタの分光透過率特性の一例を示すグラフである。
【図３】光透過部および撮像素子の単位ブロックの他の例を示す図である。
【図４】例示的な実施形態１における撮像装置の全体構成を示すブロック図である。
【図５】例示的な実施形態１における透光板、光学レンズ、および撮像素子の概略構成を示す模式図である。
【図６】例示的な実施形態１における透光板の正面図である。
【図７】例示的な実施形態１における撮像素子の基本色構成図である。
【図８】例示的な実施形態１における透光板の分光透過率特性を示す図である。
【図９】例示的な実施形態２における撮像素子の基本色構成図である。
【図１０】例示的な実施形態３における撮像素子の基本色構成図である。
【図１１】例示的な実施形態３における撮像素子の色要素の分光透過率特性を示す図である。
【図１２】例示的な実施形態３における透光板の分光透過率特性を示す図である。
【図１３】特許文献１における撮像系の構成図である。
【図１４】特許文献２における撮像系の構成図である。
【図１５】特許文献４における撮像系の構成図である。
【図１６】特許文献５における光束制限板の外観図である。
【図１７】特許文献６における光束制限板の外観図である。
【発明を実施するための形態】
【００２９】
本発明の例示的な実施形態の概要は以下のとおりである。
【００３０】
（１）本発明の一態様に係る３次元撮像装置は、第１の透光領域および第２の透光領域を有する光透過部と、前記光透過部を透過した光を受けるように配置された撮像素子であって、各々が第１の種類の画素および第２の種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、前記撮像素子の撮像面に像を形成する結像部と、前記第１の種類の画素および前記第２の種類の画素から出力された光電変換信号に基づいて複数視点画像を生成する画像処理部とを備えている。可視光の波長λに関して、前記第１の透光領域の分光透過率を表す関数をＴＬ（λ）、前記第２の透光領域の分光透過率を表す関数をＴＲ（λ）、前記第１の種類の画素の分光透過率を表す関数をＴ１（λ）、前記第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する。
【００３１】
（２）ある実施形態において、ＴＬ（λ）＝Ｔ１（λ）、かつＴＲ（λ）＝Ｔ２（λ）が成立する。
【００３２】
（３）項目（２）に記載の３次元撮像装置のある態様において、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、周期関数である。
【００３３】
（４）項目（１）から（３）のいずれかに記載の３次元撮像装置のある態様において、前記第１の種類の画素は、第１の光感知セルおよび前記第１の光感知セルに対向して配置された第１の透過フィルタを含み、前記第２の種類の画素は、第２の光感知セルおよび前記第２の光感知セルに対向して配置された第２の透過フィルタを含み、Ｔ１（λ）は、前記第１の透過フィルタの分光透過率を表す関数であり、Ｔ２（λ）は、前記第２の透過フィルタの分光透過率を表す関数である。
【００３４】
（５）項目（４）に記載の３次元撮像装置のある態様において、各単位ブロックは、第３の種類の画素および第４の種類の画素をさらに含み、前記第３の種類の画素は、第３の光感知セルおよび前記第３の光感知セルに対向して配置された、第１の色成分の光を選択的に透過させる第３の透過フィルタを含み、前記第４の種類の画素は、第４の光感知セルおよび前記第４の光感知セルに対向して配置された、第２の色成分の光を選択的に透過させる第４の透過フィルタを含み、前記画像処理部は、前記第３の種類の画素および前記第４の種類の画素から出力された光電変換信号を用いて、色情報を生成する。
【００３５】
（６）項目（１）から（３）のいずれかに記載の３次元撮像装置のある態様において、前記第１の種類の画素は、複数の光感知セルと、前記複数の光感知セルの各々に対向して配置された、分光透過率特性が互いに異なる複数の透過フィルタとを含み、前記第２の種類の画素は、１つの光感知セルと、前記１つの光感知セルに対向して配置された１つの透過フィルタとを含み、Ｔ１（λ）は、前記第１の種類の画素に含まれる前記複数の透過フィルタの分光透過率の総和を表す関数であり、Ｔ２（λ）は、前記第２の種類の画素に含まれる前記１つの透過フィルタの分光透過率を表す関数である。
【００３６】
（７）項目（６）に記載の３次元撮像装置のある態様において、前記第１の種類の画素に含まれる前記複数の透過フィルタは、互いに異なる色成分の光を選択的に透過させるように構成されている。
【００３７】
（８）項目（７）に記載の３次元撮像装置のある態様において、前記第１の種類の画素に含まれる前記複数の光感知セルの数および前記複数の透過フィルタの数は、ともに３個であり、前記複数の透過フィルタのうち、第１の透過フィルタは赤の色成分の光を選択的に透過させ、第２の透過フィルタは緑の色成分の光を選択的に透過させ、第３の透過フィルタは青の色成分の光を選択的に透過させるように構成されている。
【００３８】
（９）項目（１）から（３）のいずれかに記載の３次元撮像装置のある態様において、前記第１の種類の画素は、複数の光感知セルと、前記複数の光感知セルに対向して配置された、分光透過率特性が互いに異なる複数の透過フィルタとを有し、前記第２の種類の画素は、複数の光感知セルと、前記複数の光感知セルに対向して配置された、分光透過率特性が互いに異なる複数の透過フィルタとを有し、Ｔ１（λ）は、前記第１の種類の画素に含まれる前記複数の透過フィルタの分光透過率の総和を表す関数であり、Ｔ２（λ）は、前記第２の種類の画素に含まれる前記複数の透過フィルタの分光透過率の総和を表す関数である。
【００３９】
（１０）項目（９）に記載の３次元撮像装置のある態様において、前記第１および第２の種類の画素は、ともに第１から第Ｎ（Ｎは３以上の整数）の光感知セルと、前記第１から第Ｎの光感知セルにそれぞれ対向して配置された第１から第Ｎの透過フィルタとを有し、前記第１の種類の画素に含まれる前記第１から第Ｎの透過フィルタは、それぞれ第１から第Ｎの色成分の光を選択的に透過させるように構成され、前記第２の種類の画素に含まれる前記第１から第Ｎの透過フィルタは、それぞれ前記第１から第Ｎの色成分の光を選択的に透過させるように構成され、前記第１の種類の画素に含まれる第ｉ（ｉは１からＮまでの整数）の透過フィルタの前記第ｉの色成分における分光透過率特性は、前記第２の種類の画素に含まれる第ｉの透過フィルタの前記第ｉの色成分における分光透過率特性と異なっている。
【００４０】
（１１）項目（１０）に記載の３次元撮像装置のある態様において、Ｎ＝３であり、前記第１から第３の色成分は、それぞれ赤、緑、青である。
【００４１】
（１２）項目（１）から（１１）のいずれかに記載の３次元撮像装置のある態様において、前記画像処理部は、前記第１および第２の種類の画素から出力される前記信号に基づいて、カラー複数視点画像を生成する。
【００４２】
（１３）項目（１）から（１２）のいずれかに記載の３次元撮像装置のある態様において、前記撮像素子から出力された信号を保存する記録部をさらに有し、前記画像処理部は、前記記録部に保存された前記信号に基づいて、前記複数視点画像を生成する。
【００４３】
（１４）本発明の一態様に係る撮像素子は、項目（１）から（１３）のいずれかに記載の３次元撮像装置に用いられる。
【００４４】
（１５）本発明の一態様に係る光透過部は、項目（１）から（１３）のいずれかに記載の３次元撮像装置に用いられる。
【００４５】
（１６）本発明の一態様に係る画像処理装置は、第１の透光領域および第２の透光領域を有する光透過部と、前記光透過部を透過した光を受けるように配置され、各々が第１の種類の画素および第２の種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、前記撮像素子の撮像面に像を形成する結像部とを備えた３次元撮像装置から出力された信号に基づいて画像を生成する画像処理装置である。ここで、可視光の波長λに関して、前記第１の透光領域の分光透過率を表す関数をＴＬ（λ）、前記第２の透光領域の分光透過率を表す関数をＴＲ（λ）、前記第１の種類の画素の分光透過率を表す関数をＴ１（λ）、前記第２の種類の画素の分光透過率を表す関数をＴ２（λ）と表すとき、ＴＬ（λ）≠ＴＲ（λ）、かつＴ１（λ）≠Ｔ２（λ）が成立し、ＴＬ（λ）、ＴＲ（λ）、Ｔ１（λ）、Ｔ２（λ）は、いずれも赤、緑、青の各波長域内において、極大値および極小値をそれぞれ少なくとも１つ有する。前記画像処理装置は、前記第１および第２の種類の画素から出力された光電変換信号に基づいて複数視点画像を生成する。
【００４６】
以下、本発明の具体的な実施形態を説明する前に、まず本発明の実施形態における基本原理を簡単に説明する。以下の説明において、画像を示す信号または情報を単に「画像」と称する場合がある。
【００４７】
本発明の実施形態による３次元撮像装置（以下、単に「撮像装置」と呼ぶ。）は、２つの透光領域を有する光透過部と、各々が少なくとも２種類の画素を含む複数の単位ブロックが撮像面に配列された撮像素子と、撮像素子の撮像面に像を形成する結像部と、撮像素子から出力された信号に基づいて複数視点画像を生成する画像処理部とを備えている。
【００４８】
図１は、撮像装置における光透過部１と、撮像素子の１つの単位ブロックに含まれる２つの画素５０−１、５０−２の構成例を模式的に示す図である。なお、結像部等の他の構成要素の図示は省略されている。図１に示す構成例では、画素５０−１は、光感知セル６０−１と、それに対向して光入射側に配置された透過フィルタ４０−１とを含んでいる。同様に、画素５０−２は、光感知セル６０−２と、それに対向して光入射側に配置された透過フィルタ４０−２とを含んでいる。このように、本明細書では、１つの光感知セルおよびそれに対向して配置された１つの透過フィルタの組み合わせを「画素」と呼ぶ。
【００４９】
図１に示される光透過部１は、２つの透光領域１Ｌ、１Ｒを有している。透光領域１Ｌ、１Ｒは、透過率の波長依存性（以下、「分光透過率」と呼ぶ。）が互いに異なっており、完全透明ではないものの、赤（Ｒ）、緑（Ｇ）、青（Ｂ）のいずれの波長域（色成分）の光も透過させる特性を有している。
【００５０】
２つの光感知セル６０−１、６０−２は、入射光を受け、受けた光の強度に応じた電気信号（以下、「光電変換信号」または「画素信号」と呼ぶ。）を出力する。光感知セル６０−１、６０−２に対向する透過フィルタ４０−１、４０−２は、入射光の一部をカットする特性を有している。透過フィルタ４０−１、４０−２もまた、分光透過率特性が互いに異なっており、完全透明ではないものの、赤（Ｒ）、緑（Ｇ）、青（Ｂ）のいずれの波長域の光も透過させる特性を有している。
【００５１】
図２Ａは、透光領域１Ｌ、１Ｒの分光透過率特性の一例を示すグラフであり、図２Ｂは、透過フィルタ４０−１、４０−２の分光透過率特性の一例を示すグラフである。これらのグラフにおいて、横軸は波長、縦軸は透過率を表している。なお、横軸の波長については、可視光の波長域である４００ｎｍから７００ｎｍ付近の範囲のみを表している。図２Ａにおいては、波長をλとして、透光領域１Ｌ、１Ｒの透過率を表す関数を、それぞれＴＬ（λ）、ＴＲ（λ）と表している。また、図２Ｂにおいて、透過フィルタ４０−１、４０−２の透過率を表す関数を、それぞれＴ１（λ）、Ｔ２（λ）と表している。ここで、約４００ｎｍ〜約５００ｎｍを青の波長域、約５００ｎｍ〜約６００ｎｍを緑の波長域、約６００ｎｍ〜約７００ｎｍを赤の波長域と定義する。なお、この定義はあくまで便宜上のものであり、どの波長域をどの色と定義するかは任意に定めてよい。
【００５２】
図２Ａに示すように、ＴＬ（λ）、ＴＲ（λ）は互いに異なり、いずれも赤、緑、青の各波長域内で極大値および極小値をもつ。同様に、図２Ｂに示すように、Ｔ１（λ）、Ｔ２（λ）は互いに異なり、いずれも赤、緑、青の各波長域内において極大値および極小値をもつ。このように、本発明の実施形態において利用される透光領域１Ｌ、１Ｒ、および透過フィルタ４０−１、４０−２は、従来技術において利用される色フィルタとは異なる分光透過率特性を有している。
【００５３】
各分光透過率特性は、ＴＬ≠ＴＲかつＴ１≠Ｔ２が成立し、ＴＬ、ＴＲ、Ｔ１、Ｔ２のいずれもが赤、緑、青の各波長域内において極大値および極小値をもつ特性であれば、図２Ａ、２Ｂに示される特性に限られるものではない。但し、光利用率を高くするという観点から、ＴＬ、ＴＲ、Ｔ１、Ｔ２は、例えばいずれの色成分に関しても平均的に５０％以上の透過率になるように設計され得る。
【００５４】
以上の構成により、２つの光感知セル６０−１、６０−２から出力される光電変換信号に基づいて、複数視点画像が生成される。以下の説明において、光感知セル６０−１、６０−２から出力される光電変換信号を、それぞれＷ１ｓ、Ｗ２ｓと表す。また、透光領域１Ｌを透過して光感知セル６０−１、６０−２に入射する光が感受する透過率の積分をそれぞれＷ１Ｌｓ、Ｗ２Ｌｓと表す。同様に、透光領域１Ｒを透過して光感知セル６０−１、６０−２に入射する光が感受する透過率の積分をそれぞれＷ１Ｒｓ、Ｗ２Ｒｓと表す。すなわち、Ｗ１Ｌｓ、Ｗ２Ｌｓ、Ｗ１Ｒｓ、Ｗ２Ｒｓは、それぞれ以下の式１〜４で表される。
【数１】
2012157209.tif 000003
【数２】
2012157209.tif 000004
【数３】
2012157209.tif 000005
【数４】
2012157209.tif 000006
【００５５】
ここで、入射光は無彩色、即ち、入射光の強度の波長依存性は無視でき、可視光以外の光成分は赤外カットフィルタ等によって除去されていると仮定している。また、ｋは比例係数であり、積分区間は可視光の波長域（例えば、４００ｎｍから７００ｎｍ）であるものとする。
【００５６】
また、透光領域１Ｌ、１Ｒ、および透過フィルタ４０−１、４０−２が完全透明であると仮定した場合に、透光領域１Ｌ、１Ｒを通って１つの光感知セルに入射する光の強度を示す信号を、それぞれＩＭＧ（Ｌ）、ＩＭＧ（Ｒ）と表す。ここで、光感知セル６０−１、６０−２の空間サイズは微小であり、両者は近接していることから、光感知セル６０−１、６０−２に入射する光の強度はほぼ等しいと仮定する。すると、ＩＭＧ（Ｌ）、ＩＭＧ（Ｒ）は、それぞれ透光領域１Ｌ、１Ｒの位置から被写体を見たときの画像の一部に相当する。したがって、ＩＭＧ（Ｌ）、ＩＭＧ（Ｒ）を、画像生成に用いられる全ての画素について求めれば、複数視点画像を得ることができる。
【００５７】
光電変換信号Ｗ１ｓ、Ｗ２ｓは、比例係数を無視すれば、行列を用いて以下の式５で表すことができる。
【数５】
2012157209.tif 000007
【００５８】
式５より、複数視点画像を表す信号ＩＭＧ（Ｌ）、ＩＭＧ（Ｒ）は、式５における行列の逆行列を用いて、以下の式６で表される。
【数６】
2012157209.tif 000008
【００５９】
式６における行列の各要素は、透光領域１Ｌ、１Ｒ、および透過フィルタ４０−１、４０−２の分光透過率特性から導き出される既知の数である。したがって、画像処理部は、式６で表される演算を実行することにより、複数視点画像を生成することができる。本発明の実施形態によれば、透光領域１Ｌ、１Ｒ、および透過フィルタ４０−１、４０−２には、通常の色フィルタではなく、例えば図２Ａ、図２Ｂに示すような透過率の高いフィルタを利用するため、従来技術による場合よりも光利用率を向上させることが可能となる。
【００６０】
なお、以上の例では、透過フィルタ４０−１、４０−２は、それぞれ単独で図２Ｂに示す特性を有しているものとしたが、本発明においては、このような例に限らず、複数の透過フィルタの組み合わせによって上記のような分光透過率特性が実現されていてもよい。図３は、そのような構成の一例を模式的に示す図である。図示される構成において、１つの単位ブロックは、４つの光感知セル６０−１、６０−２、６０−３、６０−４、およびそれらに対向して配置された４つの透過フィルタ４０−１、４０−２、４０−３、４０−４を含んでいる。この例では、光感知セル６０―１および透過フィルタ４０−１を含む画素と、光感知セル６０―３および透過フィルタ４０−３を含む画素とをまとめて第１の種類の画素とする。同様に、光感知セル６０―２および透過フィルタ４０−２を含む画素と、光感知セル６０―４および透過フィルタ４０−４を含む画素とをまとめて第２の種類の画素とする。
【００６１】
そして、透過フィルタ４０−１、４０−３を合わせた特性が、図２ＢにおけるＴ１（λ）で表される特性と一致しているものとする。これは、例えば、透過フィルタ４０−１の特性が図２ＢにおけるＴ１（λ）の短波長側（約４００ｎｍ〜約５５０ｎｍ）の特性と一致し、透過フィルタ４０−３の特性が図２ＢにおけるＴ１（λ）の長波長側（約５５０ｎｍ〜約７００ｎｍ）の特性と一致するような場合に実現される。同様に、透過フィルタ４０−２、４０−４を合わせた特性が、図２ＢにおけるＴ２（λ）で表される特性と一致しているものとする。この場合、光感知セル６０−１、６０−３から出力される光電変換信号の和信号は上記の信号Ｗ１ｓと一致し、光感知セル６０−２、６０−４から出力される光電変換信号の和信号は上記の信号Ｗ２ｓと一致する。したがって、この場合も式６に基づく演算により、複数視点画像を得ることができる。
【００６２】
図３に示す例では、２つの画素の組み合わせを１つの種類の画素として扱うが、３つ以上の画素の組み合わせを１つの種類の画素として扱ってもよい。そのような場合であっても、１つの種類の画素に含まれる複数の透過フィルタの分光透過率の総和を上記のＴ１またはＴ２として扱い、複数の光電変換信号を合算することにより、同様の効果が得られる。
【００６３】
以下、図４から図１２を参照しながら、本発明のより具体的な実施形態を説明する。以下の説明において、全ての図にわたって共通または対応する要素には同一の符号を付している。
【００６４】
（実施形態１）
まず、本発明の第１の実施形態による撮像装置を説明する。図４は、本実施形態における撮像装置の全体構成を示すブロック図である。本実施形態の撮像装置は、デジタル式の電子カメラであり、撮像部１００と、撮像部１００で生成された信号に基づいて画像を示す信号（画像信号）を生成する信号処理部２００とを備えている。撮像装置は、静止画のみならず動画を生成する機能を備えていてもよい。
【００６５】
撮像部１００は、撮像面上に配列された複数の光感知セルを備えるカラー固体撮像素子２ａ（以下、単に「撮像素子」と呼ぶ。）と、分光透過率特性が互いに異なる２つの透光領域を有する透光板１（光透過部）と、撮像素子２ａの撮像面上に像を形成するための光学レンズ３と、赤外カットフィルタ４とを備えている。撮像部１００はまた、撮像素子２ａを駆動するための基本信号を発生するとともに撮像素子２ａからの出力信号を受信して信号処理部２００に送出する信号発生／受信部５と、信号発生／受信部５によって生成された基本信号に基づいて撮像素子２ａを駆動する素子駆動部６とを備えている。撮像素子２ａは、典型的にはＣＣＤまたはＣＭＯＳセンサであり、公知の半導体製造技術によって製造される。信号発生／受信部５および素子駆動部６は、例えばＣＣＤドライバなどのＬＳＩから構成されている。
【００６６】
信号処理部２００は、撮像部１００から出力された信号を処理して複数視点画像を生成する画像処理部７と、画像信号の生成に用いられる各種のデータを格納するメモリ３０と、生成した画像信号および奥行き情報を外部に送出するインターフェース（ＩＦ）部８とを備えている。画像処理部７は、公知のデジタル信号処理プロセッサ（ＤＳＰ）などのハードウェアと、画像信号生成処理を含む画像処理を実行するソフトウェアとの組合せによって好適に実現され得る。メモリ３０は、ＤＲＡＭなどによって構成される。メモリ３０は、撮像部１００から得られた信号を記録するとともに、画像処理部７によって生成された画像データや、圧縮された画像データを一時的に記録する。これらの画像データは、インターフェース部８を介して不図示の記録媒体や表示部などに送出される。
【００６７】
なお、本実施形態の撮像装置は、電子シャッタ、ビューファインダ、電源（電池）、フラッシュライトなどの公知の構成要素を備え得るが、それらの説明は本発明の理解に特に必要でないため省略する。また、上記の構成は一例であり、本実施形態において、透光板１、撮像素子２ａ、画像処理部７以外の構成要素は、公知の要素を適宜組み合わせて用いることができる。
【００６８】
以下、撮像部１００の構成をより詳細に説明する。以下の説明において、図中に示すｘｙ座標を用いる。
【００６９】
図５は、撮像部１００における透光板１、レンズ３、および撮像素子２ａの配置関係を模式的に示す図である。図２では、透光板１、レンズ３、および撮像素子２ａ以外の構成要素は省略されている。レンズ３は、複数のレンズ群から構成されたレンズユニットであり得るが、図５では簡単のため、単一のレンズとして描かれている。透光板１は、分光透過率特性が互いに異なる２つの透過領域１Ｌ、１Ｒを有し、入射光の少なくとも一部を透過させる。レンズ３は、公知のレンズであり、透光板１を透過した光を集光し、撮像素子２ａの撮像面２ｂに結像する。なお、図５に示す各構成要素の配置関係はあくまでも一例であって、本発明はこのような例に限られるものではない。例えば、レンズ３は、撮像面２ｂに像を形成できれば透光板１よりも撮像素子２ａから離れて配置されていてもよい。また、レンズ３と透光板１とが一体となって構成されていてもよい。
【００７０】
図６は、本実施形態における透光板１の正面図である。本実施形態における透光板１の形状は、レンズ３と同様、円形であるが、四角形等の他の形状であってもよい。透光板１は、図の左側に位置する透光領域１Ｌと、図の右側に位置する透光領域１Ｒとに２分割されている。透光領域１Ｌ、１Ｒは、互いに異なる分光透過率特性を有している。透光領域１Ｌ、１Ｒは、いずれも完全透明ではないものの、赤、緑、青のいずれの波長域の光も、少なくとも一部は透過するように、その分光透過率特性が設計されている。
【００７１】
図７は、撮像素子２ａの撮像面２ｂに行列状に配列された複数の光感知セル６０の一部を示している。各光感知セル６０は、典型的にはフォトダイオードを含み、光電変換によって各々の受光量に応じた光電変換信号を出力する。光感知セル６０の各々に対向して光入射側に透過フィルタが配置されている。図７に示すように、本実施形態におけるフィルタ配列は、２行２列を基本とする配列であり、１行１列目が赤要素（Ｒ）、２行１列目が青要素（Ｂ）、１行２列目が透明要素（Ｗ１）、２行２列目も透明要素（Ｗ２）である。但し、透明要素Ｗ１、Ｗ２は、分光透過率特性が互いに異なっている。透明要素Ｗ１、Ｗ２は、いずれも完全透明ではないものの、赤、緑、青のいずれの色成分の光も、少なくとも一部は透過するように設計されている。本実施形態では、透明要素Ｗ１およびそれに対向する光感知セルが第１の種類の画素に相当し、透明要素Ｗ２およびそれに対向する光感知セルが第２の種類の画素に相当する。
【００７２】
透光板１における透光領域１Ｌ、１Ｒ、および、撮像素子１の透明要素Ｗ１、Ｗ２は、例えば誘電体多層膜によって作製される。誘電体多層膜を用いることにより、所望の波長の光について透過率が極大または極小となる透過フィルタを作成することができる。撮像素子１の赤要素（Ｒ）および青要素（Ｂ）は、公知の顔料等を用いて作製される。
【００７３】
図８は、本実施形態における透光板１の透光領域１Ｌ、１Ｒの分光透過率特性を表すグラフである。図８に示すように、透光領域１Ｌの分光透過率特性は、近似的に三角関数Sinの２乗特性であり、透光領域１Ｒの分光透過率特性は、近似的に三角関数Cosの２乗特性になっている。すなわち、両者の波形は同様であるが、位相は９０度異なっている。本実施形態では、撮像素子２ａの透明要素Ｗ１の分光透過率特性は透光領域１Ｌの特性と等しく、透明要素Ｗ2の分光透過率特性は透光領域１Ｒの特性と等しくなるように設計されている。
【００７４】
以上の構成により、露光中に撮像装置に入射する光は、透光板１、レンズ３、赤外カットフィルタ４を通して撮像素子２ａの撮像面２ｂに結像され、各光感知セル６０によって光電変換される。各光感知セル６０によって出力された光電変換信号は、信号発生／受信部５を介して信号処理部２００に送出される。信号処理部２００における画像処理部７は、送られてきた信号に基づいて、２つの複数視点画像を生成する。さらに、本実施形態では、これらの複数視点画像に色情報が重畳され、カラー複数視点画像が生成される。
【００７５】
以下、透光板１を介して被写体を撮像したときの撮像装置の動作を説明する。ここで、撮像素子２ａの各画素信号について、Ｒ要素を透過し光電変換される光による信号をＲs、Ｂ要素を透過し光電変換される光による信号をＢs、Ｗ1要素を透過し光電変換される光による信号をＷ1s、Ｗ2要素を透過し光電変換される光による信号をＷ2sで表す。
【００７６】
被写体の赤色成分および青色成分は、透光板１の透光領域１Ｌおよび１Ｒ、レンズ、赤外カットフィルタ、赤要素および青要素を通して撮像素子２ａによって光電変換され、Ｒs信号、Ｂs信号が生成される。同様に、被写体の白成分（赤、緑、青の全成分）は、撮像素子のＷ1要素とＷ2要素を通して光電変換されるが、それらの信号量は透光領域１Ｌ、１Ｒへの入射光量の差によって異なる。その理由は、Ｗ1要素とＷ2要素の分光透過率特性が異なると共に、Ｗ１要素およびＷ２要素の特性は、それぞれ透光領域１Ｌおよび１Ｒの特性と等しいためである。言い換えれば、Ｗ1要素は透光領域１Ｒを透過した光よりも透光領域１Ｌを透過した光を多く透過させ、Ｗ2要素は透光領域１Ｌを透過した光よりも透光領域１Ｒを透過した光を多く透過させるため、Ｗ１要素およびＷ２要素の信号量は互いに異なる。
【００７７】
以下、本実施形態における光電変換信号Ｗ1s、Ｗ2sを説明する。まず、透光板１の透光領域１ＬおよびＷ1要素を通過して光電変換される光による信号Ｗ1Lsと、透光領域１ＲおよびＷ1要素を通過して光電変換される光による信号Ｗ1Rsとを説明する。上記のように、透光領域１ＬおよびＷ1要素の透過率は三角関数Sinの２乗に比例し、透光領域１ＲおよびＷ2要素の透過率は三角関数Cosの２乗に比例し、それらの比例係数を含めた光電変換効率をｋとする。
【００７８】
信号Ｗ1Lsは、透光領域１ＬおよびＷ1要素の透過率の積分に比例するため、以下の式１で表される。一方、信号Ｗ1Rsは、透光領域１ＲおよびＷ1要素の透過率の積分に比例するため、以下の式２で表される。ここで、積分は可視光の全波長域にわたって行われる。
【数７】
2012157209.tif 000009
【数８】
2012157209.tif 000010
【００７９】
ここで、式７、式８の計算を容易にするため、図８に基づき、積分範囲を可視光の４００〜７００ｎｍとし、波長λが４００ｎｍの場合を角度θ＝０ラジアン、波長λが５００ｎｍの場合を角度θ＝πラジアンとするデータに置き換えると、式７、式８は、それぞれ以下の式９、式１０に書き直すことができる。
【数９】
2012157209.tif 000011
【数１０】
2012157209.tif 000012
【００８０】
式９、式１０は、さらに、それぞれ以下の式１１、式１２のように変形される。
【数１１】
2012157209.tif 000013
【数１２】
2012157209.tif 000014
【００８１】
同様に、信号Ｗ2Lsは、透光領域１ＬおよびＷ2要素の透過率の積分に比例するので、以下の式１３で表される。一方、信号Ｗ2Rsは、透光領域１ＲおよびＷ2要素の透過率の積分に比例するので、以下の式１４で表される。
【数１３】
2012157209.tif 000015
【数１４】
2012157209.tif 000016
【００８２】
ここで、式１３の右辺と式８の右辺とは等しいため、両者の計算結果は等しくなる。式１４について、上記と同様に積分変数λをθに変換すると、以下の式１５が得られる。
【数１５】
2012157209.tif 000017
【００８３】
以上のことから、Ｗ1Ls：Ｗ1Rs＝３：１であり、Ｗ2Ls：Ｗ2Rs＝１：３である。このことは、Ｗ1要素を透過し光電変換される信号に関して、透光領域１Ｌを透過した成分と透光領域１Ｒを透過した成分とで信号量が異なり、その比率は３：１であることを意味する。一方、Ｗ2要素を透過し光電変換される信号に関しては、透光領域１Ｌを透過した成分と透光領域１Ｒを透過した成分との信号比率は１：３であることを意味する。
【００８４】
ここで、透光領域１Ｌに入射する光によって得られる画像をIMG(L)、透光領域１Ｒに入射する光によって得られる画像をIMG(R)で表すと、それらと画素信号Ｗ1s、Ｗ2sとの関係は、以下の式１６で表される。
【数１６】
2012157209.tif 000018
【００８５】
さらに、式１６の右辺の２行２列の行列の逆行列を両辺にかけることにより、以下の式１７が得られる。
【数１７】
2012157209.tif 000019
【００８６】
以上のように、本実施形態における透光板１と透明要素Ｗ1およびＷ2とを用いることにより、画像処理部７は、複数視点画像を生成することができる。本実施形態によれば、透明要素Ｗ1、Ｗ2は、ＲＧＢ全色を透過させる特性を有しているため、それらを透過して光電変換される光による信号は輝度信号として利用できる。
【００８７】
次に、本実施形態におけるカラー信号処理を説明する。上記の構成により、撮像素子２ａから画素信号Ｗ1s、Ｗ2s、Ｒs、Ｂsが得られる。画像処理部７は、Ｗ1sおよびＷ2sを輝度信号として処理し、Ｒs、Ｂsを色信号として処理する。撮像素子２ａによって得られた各画素信号は画像処理部７に送られ、そこで画素信号Ｗ1s、Ｗ2sから式１７に基づく演算によって視差を有する２つの画像（信号IMG(L)、IMG(R)による画像）が生成される。但し、これらの複数視点画像は、輝度情報のみを含み、色情報を含んでいない。そこで、輝度信号ＹＬをYL＝Ｗ1s＋Ｗ2sとし、色差信号(Ｒs−YL)と(Ｂs−YL)とを生成した後、これらの色差信号をバンドパスフィルタによって低帯域にした信号を、得られた複数視点画像に重畳する。画像処理部７はその後、以下のように複数視点画像のカラー化処理を行う。カラー化された複数視点画像の１つをcIMG(L)とし、そのＲＧＢ成分を、それぞれcIMG(L)r、cIMG(L)g、cIMG(L)bで表すと、cIMG(L)r、cIMG(L)g、cIMG(L)bは、式１８で表される。
【数１８】
2012157209.tif 000020
【００８８】
式１８は、輝度信号および２つの色差信号をＲＧＢ信号に変換するものであり、その変換マトリックスの要素をＭ１１〜Ｍ３３で表している。
【００８９】
同様に、カラー化された複数視点画像の他方をcIMG(R)とし、そのＲＧＢ成分をcIMG(R)r、cIMG(R)g、cIMG(R)bで表すと、cIMG(R)r、cIMG(R)g、cIMG(R)bは、以下の式１９で表される。
【数１９】
2012157209.tif 000021
【００９０】
式１８、式１９における行列要素Ｍ１１〜Ｍ３３は、予めシミュレーションによって求められる。画像処理部７は、式１８、式１９に基づく演算により、輝度信号および２つの色差信号を、カラー信号cIMG(L)r、cIMG(L)g、cIMG(L)bに変換する。
【００９１】
本実施形態では、輝度情報により複数視点画像が生成され、その後のカラー化処理では、色信号を２つの複数視点画像に共通に用いる。元来、人間の視覚特性として色の識別能力は輝度の識別能力よりも低いので、このような処理によってカラー複数視点画像を生成しても視覚特性としては問題ない。
【００９２】
以上のように、本実施形態によれば、分光透過率特性は異なるが可視光全域を透過させる２つの透光領域１Ｌ、１Ｒを有する透光板１、および透光領域１Ｌ、１Ｒと同様の光学特性を有する２種類の透明要素Ｗ１、Ｗ２が配置された撮像素子２ａが用いられる。これにより、２種類の輝度情報から複数視点画像を生成することができる。さらに、Ｒ要素、Ｂ要素が配置された画素の信号を用いることにより、複数視点画像のカラー化が実現される。特に本実施形態では、透光板１に遮光部がなく、しかもＲＧＢ全色の光を透過させるので、光利用率が高いという利点がある。
【００９３】
なお、本実施形態では、透明要素Ｗ１、Ｗ２以外に色要素として赤要素Ｒおよび青要素Ｂが用いられるが、２種類の色要素は赤および青に限定されるものではなく、異なる色であれば如何なる色要素であってもよい。加えて、それらの配置に関しても、図７に示す配置に限定されるものではない。例えば、図７に示す配置を紙面垂直方向を軸として４５度回転させた斜交型の配置を採用してもよい。また、透光板１および撮像素子２ａの透明要素Ｗ１、Ｗ２の分光透過率特性に関して、図８に示す三角関数の２乗に近似した特性である必要はない。Ｗ１、Ｗ２の分光透過率特性は、波長の変化に対して光透過率が周期性の変動を有し、且つそれらの変動の位相が異なっていればどのような特性であってもよい。さらに、透光領域１Ｌおよび透明要素Ｗ１の分光透過率特性が互いに等しく、透光領域１Ｒおよび透明要素Ｗ２の分光透過率特性が互いに等しく設計されている必要はない。これらが全て異なっていたとしても、各分光透過率特性の関数形が予めわかっていれば、信号処理によって同様の効果を得ることができる。
【００９４】
（実施形態２）
次に、本発明の第２の実施形態を説明する。本実施形態では、撮像素子２ａの基本色構成が上記の実施形態１と異なるが、それ以外は実施形態１と同様である。そのため、以下の説明では、実施形態１と異なる点を中心に説明し、重複する事項についての説明は省略する。
【００９５】
図１０は、本実施形態における撮像素子２ａの１つの単位ブロックにおける基本色構成を示す図である。本実施形態における撮像素子２ａのフィルタ配列は、２行２列を基本とし、１行１列目が赤要素（Ｒ）、２行１列目が青要素(Ｂ)、１行２列目が緑要素（Ｇ）、２行２列目が透明要素（Ｗ２）である。透明要素Ｗ２は、実施形態１における透明要素Ｗ２要素と同一である。ここで、Ｂ、Ｇ、Ｒの各色要素の分光透過率特性は、それぞれ図８における透光領域１Ｌの４００〜５００ｎｍ、５００〜６００ｎｍ、６００〜７００ｎｍにおける特性と同一である。すなわち、ＲＧＢ要素の分光透過率特性を合算させた結果が図８における透光領域１Ｌの特性と同一である。一方、透光板１は実施形態１のものと同一である。本実施形態では、赤要素Ｒ、青要素Ｂ、緑要素Ｇ、およびそれらに対向する３つの光感知セルの組み合わせが第１の種類の画素に相当し、透明要素Ｗ２およびそれに対向する光感知セルが第２の種類の画素に相当する。
【００９６】
以下、本実施形態の信号処理について、実施形態１における信号処理と対比しながら説明する。実施形態１では、撮像素子２ａはＷ1要素を有し、その信号を利用して画像が生成されるが、本実施形態では、Ｗ1要素の代わりにＲ、Ｇ、Ｂ要素の信号を合算させた信号をＷ1s信号とする。その結果、Ｗ1要素およびＷ2要素に関する演算は、実施形態１における演算と同一になる。透光領域１Ｌに入射する光によって得られる画像IMG(L)および透光領域１Ｒに入射する光によって得られる画像IMG(R)は、実施形態１と同様、式１７に基づいて生成される。
【００９７】
また、複数視点画像のカラー化についても、実施形態１における処理と同様の処理によって行われる。画像処理部７は、まず、信号Ｒｓ、Ｂｓ、Ｗ1s、Ｗ2sを用いて、輝度信号YL＝Ｗ1s＋Ｗ2sと、２つの色差信号(Ｒs−YL)および(Ｂs−YL)を生成する。続いて、バンドパスフィルタによって色差信号を低帯域にし、それらを２つの複数視点画像に重畳する。その後の処理も実施形態１と同様、式１８、１９に基づいて実行され、カラー複数視点画像が生成される。
【００９８】
以上のように、本実施形態によれば、Ｒ要素、Ｇ要素、Ｂ要素、およびＷ2要素が配置された撮像素子２ａを用いることにより、カラー複数視点画像を生成することができる。Ｒ、Ｇ、Ｂの各色要素の分光透過率特性の合算値を図８に示す透光領域１Ｌと同一の特性とすることにより、実施形態１と同様の効果を得ることができる。
【００９９】
なお、本実施形態では、図９に示すように、撮像素子２ａの基本色構成をＲ要素、Ｇ要素、Ｂ要素、およびＷ2要素としたが、図４に示す配置に限らず、各要素の配置が異なっていても問題はない。
【０１００】
（実施形態３）
次に、本発明の第３の実施形態を説明する。本実施形態の撮像装置は、実施形態１の撮像装置と比較して、透光板１の２つの透光領域１Ｌ、１Ｒの分光透過率特性、および撮像素子２ａにおけるフィルタ構成が異なっている。以下、実施形態１と異なる点を中心に説明し、重複する点については説明を省略する。
【０１０１】
本実施形態では、撮像素子２ａの１つの単位ブロックにおける基本色構成を３行２列としている。図１０は、当該基本色構成を示す図である。図示されるように、１行１列目に赤要素（Ｒ1）、２行１列目に緑要素(Ｇ1)、３行１列目に青要素（Ｂ1）が配置され、１行２列目に赤要素（Ｒ2）、２行２列目に緑要素(Ｇ2)、３行２列目に青要素（Ｂ2）が配置されている。Ｒ1要素およびＲ2要素は、共に赤の波長域の光を主に透過させるが、両者の分光透過率特性は異なっている。同様に、Ｇ1要素およびＧ2要素は、共に緑の波長域の光を主に透過させるが、両者の分光透過率特性は異なっている。また、Ｂ1要素およびＢ2要素は、共に青の波長域の光を主に透過させるが、両者の分光透過率特性は異なっている。
【０１０２】
図１１は、これらの各要素の分光透過率特性を示すグラフである。図１１において、４００ｎｍ〜５００ｎｍの波長域における実線はＲ1の特性を表し、５００ｎｍ〜６００ｎｍの波長域における実線はＧ1の特性を表し、６００ｎｍ〜７００ｎｍの波長域における実線はＢ1の特性を表している。同様に、４００ｎｍ〜５００ｎｍの波長域における破線はＲ２の特性を表し、５００ｎｍ〜６００ｎｍの波長域における破線はＧ２の特性を表し、６００ｎｍ〜７００ｎｍの波長域における破線はＢ２の特性を表している。本実施形態では、赤要素Ｒ１、緑要素Ｇ１、青要素Ｂ１、およびそれらに対向する３つの光感知セルの組み合わせが第１の種類の画素に相当し、赤要素Ｒ２、緑要素Ｇ２、青要素Ｂ２、およびそれらに対向する３つの光感知セルの組み合わせが第２の種類の画素に相当する。
【０１０３】
一方、透光板１の分光透過率特性に関しても、実施形態１、２における特性とは異なっている。図１２は、本実施形態における透光板１の分光透過率特性を示すグラフである。本実施形態における透光板１の分光透過率曲線は、実施形態１、２における分光透過率曲線と比較して、ビーク（極大点）とアンダーピーク（極小点）の数が多い。
【０１０４】
撮像素子２ａの各色要素の分光透過率曲線および透光板１の各透光領域の分光透過率曲線の位相に着目すると、Ｒ1、Ｇ1、Ｂ1の特性と透光領域１Ｌの特性とはほぼ同相であり、Ｒ1、Ｇ1、Ｂ1の特性と透光領域１Ｒの特性とはほぼ逆相である。また、Ｒ2、Ｇ2、Ｂ2の特性と透光領域１Ｒの特性とはほぼ同相であり、Ｒ2、Ｇ2、Ｂ2の特性と光透過部１Ｌの特性とはほぼ逆相である。ここで、Ｒ1、Ｇ1、Ｂ1要素をまとめてＣ1要素と表記し、Ｒ2、Ｇ2、Ｂ2要素をまとめてＣ2要素と標記することとする。そして、Ｃ１、Ｃ２要素を透過した光による光電変換信号を、それぞれＣ1s、Ｃ2sと一般化した記号で表すこととする。上記の分光透過率特性により、透光領域１ＬとＣ1要素とを透過する光量の方が透光領域１ＲとＣ1要素とを透過する光量よりも多い。同様に透光領域１ＲとＣ2要素とを透過する光量の方が透光領域１Ｌ領域とＣ2要素とを透過する光量よりも多い。
【０１０５】
以上の構成により、信号Ｃ1sおよびＣ2sと、透光領域１Ｌに入射した光によって得られる画像IMG(L)および透光領域１Ｒに入射した光によって得られる画像IMG(R)との関係は、以下の式２０で表現される。
【数２０】
2012157209.tif 000022
【０１０６】
行列要素Ｃ11〜Ｃ22において、Ｃ11＞Ｃ12、Ｃ22＞Ｃ21が成立する。この関係により、Ｃ11〜Ｃ22の行列の逆行列は必ず求まり、画像IMG(L)と画像IMG(R)を信号Ｃ1s、Ｃ2sで表すことが可能となる。ここでは各色の信号を代表してＣ1s、Ｃ2sと表したが、実際にはＲＧＢ各色の信号に基づいて式２０で示される演算が実行される。すなわち、ＲＧＢ各色の信号から、画像IMG(L)と画像IMG(R)を算出できる。
【０１０７】
以上のように、本実施形態によれば、互いに異なる分光透過率特性をもつ１組のＲ要素（Ｒ1、Ｒ2）、１組のＧ要素（Ｇ1、Ｇ2）、および１組のＢ要素（Ｂ1、Ｂ2）を有する撮像素子２ａと、分光透過率特性が互いに異なる２つの透光領域１Ｌ、１Ｒを有する透光板１とが用いられる。そして、Ｒ1、Ｇ1、Ｂ1の特性と透光領域１Ｌの特性とがほぼ同相、Ｒ2、Ｇ2、Ｂ2特性と透光領域１Ｒの特性とがほぼ同相になっている。また、Ｒ1、Ｇ1、Ｂ1の特性と透光領域１Ｒの特性とがほぼ逆相、Ｒ2、Ｇ2、Ｂ2の特性と透光領域１Ｌの特性とがほぼ逆相になっている。このような構成により、各色信号を用いて視差画像IMG(L)、IMG(R)を得ることができる。さらに、透光板１はＲＧＢ各色の光を透過させるので、光利用率を高くできるという効果を有する。
【０１０８】
なお、本実施形態では、撮像素子２ａの基本色構成を３行２列としたが、これに限定するものではなく、２行３列を基本とする構成であっても問題はない。また。色要素についても、Ｒ要素、Ｇ要素、Ｂ要素に限らず、異なる３つの色要素であれば、信号処理を行う際に行列演算を施すことにより、ＲＧＢ信号に変換できるため、どのような色要素を用いても問題はない。例えば、Ｒ、Ｇ、Ｂの各要素の代わりに、シアン（Ｃｙ）、黄（Ｙｅ）、マゼンタ（Ｍｇ）の色フィルタを用いてもよい。
【０１０９】
本実施形態では、１つの単位ブロックに３種類の色フィルタのペアが含まれているが、このペアの数は３より多くてもよい。本実施形態の構成を一般化し、第１および第２の種類の画素が、ともに第１から第Ｎ（Ｎは３以上の整数）の光感知セルと、これらの光感知セルにそれぞれ対向して配置された第１から第Ｎの透過フィルタとを有していてもよい。この場合、いずれの種類の画素においても、第１から第Ｎの透過フィルタは、それぞれ第１から第Ｎの色成分の光を選択的に透過させるように構成される。そして、第１の種類の画素に含まれる第ｉ（ｉは１からＮまでの整数）の透過フィルタの第ｉの色成分における分光透過率特性は、第２の種類の画素に含まれる第ｉの透過フィルタの第ｉの色成分における分光透過率特性と異なるように設計される。以上の構成により、Ｎ個の光感知セルからの出力の合計を１つの出力として扱えば、本実施形態と同様の効果が得られる。
【０１１０】
（他の実施形態）
上記の各実施形態では、透光板１を２分割し、各領域の分光透過率特性を異なるものとしたが、本発明はこのような構成に限られない。例えば、透光板１を３分割し、そのうちの２領域は上記のいずれかの実施形態における２つの透光領域と同一の特性にし、残りの１領域は完全透過にしても同様に複数視点画像を得ることが可能である。例えば、実施形態３のように、撮像素子２ａの基本色構成が図１０に示す構成である場合、式２０におけるＣ11〜Ｃ22に透明成分Ｗが加わることになるため、信号Ｃ1s、Ｃ2sと画像IMG(L)、IMG(R)との関係は、以下の式２１で表される。
【数２１】
2012157209.tif 000023
【０１１１】
式２１における行列の逆行列を式２１に左からかけることにより、複数視点画像を表す信号IMG(L)およびIMG(R)を得ることができる。但し、この例では、複数視点画像に関する比率（Ｃ11：Ｃ12）および（Ｃ22：Ｃ21）が、それぞれ（Ｃ11＋Ｗ：Ｃ12＋Ｗ）および（Ｃ22＋Ｗ：Ｃ21＋Ｗ）となるため、取得される視差量は透明成分Ｗがない場合よりも少なくなる。
【０１１２】
上記の各実施形態では、撮像素子２ａから出力された信号を直接処理し、視差を示す信号を生成するが、一旦記録媒体に保存し、その後、当該記録媒体に保存されたデータを読み出しながら、複数視点画像を生成してもよい。
【０１１３】
さらに、以上の実施形態における画像処理部７は、カラー複数視点画像を生成するが、カラー情報が必要ない場合は、白黒の複数視点画像のみを生成し、カラー化処理は行わないように構成されていてもよい。その場合、カラー撮像素子を用いる必要はなく、撮像素子は、図１に示すような、２種類の透過フィルタを有していればよい。
【０１１４】
以上の実施形態では、撮像装置に内蔵された画像処理部が画像処理を行うものとしたが、撮像装置とは独立した他の装置に当該画像処理を実行させてもよい。例えば、上記の各実施形態における撮像部１００を有する撮像装置によって取得した信号を、他の装置（画像処理装置）に読み込ませ、上記の信号演算処理を規定するプログラムを当該画像処理装置に内蔵されたコンピュータに実行させることによっても同様の効果を得ることができる。
【産業上の利用可能性】
【０１１５】
本発明の実施形態にかかる３次元撮像装置は、固体撮像素子を用いたすべてのカメラに有効である。例えば、デジタルカメラやデジタルビデオカメラ等の民生用カメラや、産業用の固体監視カメラ等に利用できる。
【符号の説明】
【０１１６】
１  透光板
１Ｌ、１Ｒ  透光領域
２  固体撮像素子
２ａ  カラー固体撮像素子
２ｂ  撮像面
３  光学レンズ
４  赤外カットフィルタ
５  信号発生／受信部
６  素子駆動部
７  画像処理部
８  画像インターフェース部
９  撮像装置
１０  画素
１１  ０度偏光の偏光板
１２  ９０度偏光の偏光板
１３  反射鏡
１４  ハーフミラー
１５  円形の偏光フィルタ
１６  偏光フィルタを回転させる駆動装置
１７、１８  偏光フィルタ
１９  レンズ絞り
２０、２２、２３  光束制限板
２０ａ  赤系統の光を透過させる色フィルタ
２０ｂ  青系統の光を透過させる色フィルタ
２１  感光フィルム
２２Ｒ、２３Ｒ  光束制限板のＲ光透過領域
２２Ｇ、２３Ｇ  光束制限板のＧ光透過領域
２２Ｂ、２３Ｂ  光束制限板のＢ光透過領域
３０  メモリ
４０  透過フィルタ
５０  画素
６０  光感知セル
【図１】
2012157209.tif 000024
【図２Ａ】
2012157209.tif 000025
【図２Ｂ】
2012157209.tif 000026
【図３】
2012157209.tif 000027
【図４】
2012157209.tif 000028
【図５】
2012157209.tif 000029
【図６】
2012157209.tif 000030
【図７】
2012157209.tif 000031
【図８】
2012157209.tif 000032
【図９】
2012157209.tif 000033
【図１０】
2012157209.tif 000034
【図１１】
2012157209.tif 000035
【図１２】
2012157209.tif 000036
【図１３】
2012157209.tif 000037
【図１４】
2012157209.tif 000038
【図１５】
2012157209.tif 000039
【図１６】
2012157209.tif 000040
【図１７】
2012157209.tif 000041
【国際調査報告】
2012157209.tif 000042
2012157209.tif 000043