被写体を撮像して輝度信号を出力する第1撮像素子と、被写体を撮像してR信号とG信号とB信号との各色信号をベイヤ配列に従って出力する前記第1撮像素子と同じ画素数の第2撮像素子と、前記輝度信号に基づいて各画素における相関性の高い方向を表す相関方向指数を算出する相関方向指数算出部と、補間値を求める対象の着目画素に対して、前記相関方向指数に基づいて相関性の高い方向に位置する相関方向画素を求め、前記相関方向画素の色信号によって前記着目画素における色信号の補間値を求める信号補間部と、前記信号補間部で求められた色信号の補間値と前記輝度信号と前記第2撮像素子から出力された色信号とを用いて、求められていない色信号の補間値を算出する補間値算出部とを備えていることを特徴とする撮像装置。前記信号補間部は、前記着目画素が前記B信号を出力するB画素と前記R信号を出力するR画素との場合には、前記相関方向画素のG信号の平均値を補間値として求めるG信号補間部と、前記着目画素が前記G信号を出力するG画素の場合であって、かつ、前記相関方向画素が前記R画素のときには前記相関方向画素のR信号の平均値を補間値として求めるR信号補間部と、前記着目画素が前記G信号を出力するG画素の場合であって、かつ、前記相関方向画素が前記B画素のときには前記相関方向画素のB信号の平均値を補間値として求めるB信号補間部とを備えていることを特徴とする請求項1に記載の撮像装置。前記補間値算出部は、前記B画素において前記G信号の補間値と前記輝度信号と前記B信号とを用いてR信号の補間値を算出し、前記G画素において前記B信号の補間値と前記輝度信号と前記G信号とを用いてR信号の補間値を算出するR補間値算出部と、前記R画素において前記G信号の補間値と前記輝度信号と前記R信号とを用いてB信号の補間値を算出し、前記G画素において前記R信号の補間値と前記輝度信号と前記G信号とを用いてB信号の補間値を算出するB補間値算出部とを備えていることを特徴とする請求項2に記載の撮像装置。第1撮像素子によって被写体を撮像して輝度信号を出力するステップと、前記第1撮像素子と同じ画素数の第2撮像素子によって被写体を撮像してR信号とG信号とB信号との各色信号をベイヤ配列に従って出力するステップと、前記輝度信号に基づいて各画素における相関性の高い方向を表す相関方向指数を算出する相関方向指数算出ステップと、補間値を求める対象の着目画素に対して、前記相関方向指数に基づいて相関性の高い方向に位置する相関方向画素を求め、前記相関方向画素の色信号によって前記着目画素における色信号の補間値を求める信号補間ステップと、前記信号補間ステップで求められた色信号の補間値と前記輝度信号と前記第2撮像素子から出力された色信号とを用いて、求められていない色信号の補間値を算出する補間値算出ステップとを含むことを特徴とする撮像装置の補間処理方法。しかしながら、上述した特許文献1に開示された従来の2板式CCDカメラでは、各画素における相関性の高い方向の如何に関わらず着目画素近傍のR信号のみからR信号の補間値を算出し、同様にB信号のみからB信号の補間値を算出しているので、空間周波数の高い画像、例えばカラー撮像素子のRあるいはBのカラーフィルターの配列ピッチよりも狭いピッチの縞模様で表されるような画像では、適切な色復調を行うことができずに偽色が生じてしまうという問題点があった。例えば配列ピッチの狭い白黒の縞模様の画像はシアン色あるいは黄色の縞模様として出力されてしまうという問題があった。そこで、本発明は、上述した実情に鑑みて提案されたものであり、高周波成分が多く含まれた画像であっても偽色のない良好な補間画像を得ることのできる撮像装置及び撮像装置の補間処理方法を提供することを目的とする。上記した目的を達成するために、本発明に係る撮像装置は、被写体を撮像して輝度信号を出力する第1撮像素子と、被写体を撮像してR信号とG信号とB信号との各色信号をベイヤ配列に従って出力する前記第1撮像素子と同じ画素数の第2撮像素子と、前記輝度信号に基づいて各画素における相関性の高い方向を表す相関方向指数を算出する相関方向指数算出部と、補間値を求める対象の着目画素に対して、前記相関方向指数に基づいて相関性の高い方向に位置する相関方向画素を求め、前記相関方向画素の色信号によって前記着目画素における色信号の補間値を求める信号補間部と、前記信号補間部で求められた色信号の補間値と前記輝度信号と前記第2撮像素子から出力された色信号とを用いて、求められていない色信号の補間値を算出する補間値算出部とを備えていることを特徴とする。また、本発明に係る撮像装置の信号補間部は、前記着目画素が前記B信号を出力するB画素と前記R信号を出力するR画素との場合には、前記相関方向画素のG信号の平均値を補間値として求めるG信号補間部と、前記着目画素が前記G信号を出力するG画素の場合であって、かつ、前記相関方向画素が前記R画素のときには前記相関方向画素のR信号の平均値を補間値として求めるR信号補間部と、前記着目画素が前記G信号を出力するG画素の場合であって、かつ、前記相関方向画素が前記B画素のときには前記相関方向画素のB信号の平均値を補間値として求めるB信号補間部とを備えていることを特徴とする。さらに、本発明に係る撮像装置の補間値算出部は、前記B画素においては前記G信号の補間値と前記輝度信号と前記B信号とを用いてR信号の補間値を算出し、前記G画素においては前記B信号の補間値と前記輝度信号と前記G信号とを用いてR信号の補間値を算出するR補間値算出部と、前記R画素においては前記G信号の補間値と前記輝度信号と前記R信号とを用いてB信号の補間値を算出し、前記G画素においては前記R信号の補間値と前記輝度信号と前記G信号とを用いてB信号の補間値を算出するB補間値算出部とを備えていることを特徴とする。また、本発明に係る撮像装置の補間処理方法は、第1撮像素子によって被写体を撮像して輝度信号を出力するステップと、前記第1撮像素子と同じ画素数の第2撮像素子によって被写体を撮像してR信号とG信号とB信号との各色信号をベイヤ配列に従って出力するステップと、前記輝度信号に基づいて各画素における相関性の高い方向を表す相関方向指数を算出する相関方向指数算出ステップと、補間値を求める対象の着目画素に対して、前記相関方向指数に基づいて相関性の高い方向に位置する相関方向画素を求め、前記相関方向画素の色信号によって前記着目画素における色信号の補間値を求める信号補間ステップと、前記信号補間ステップで求められた色信号の補間値と前記輝度信号と前記第2撮像素子から出力された色信号とを用いて、求められていない色信号の補間値を算出する補間値算出ステップとを含むことを特徴とする。本発明に係る撮像装置及び撮像装置の補間処理方法によれば、輝度信号に基づいて各画素における相関性の高い方向を求め、この相関性の高い方向にある画素の色信号を用いて補間値を求めるので、高周波成分が多く含まれた画像であっても偽色のない良好な補間画像を得ることができる。以下、本発明を適用した一実施形態について図面を参照して説明する。[撮像装置の構成]図1は本実施形態に係る撮像装置の構成を示すブロック図である。図1に示すように、本実施形態に係る撮像装置1は、被写体からの光が入射するレンズ2と、レンズ2を介して入射した被写体像を2方向に分離する分離光学系3と、被写体を撮像して輝度信号を出力する白黒撮像素子4と、被写体を撮像してR信号とG信号とB信号との各色信号をベイヤ配列に従って出力する白黒撮像素子4と同じ画素数のカラー撮像素子5と、補間処理を行って各画素の3原色信号Pを生成する補間処理部6とを備えている。本実施形態に係る撮像装置1は、レンズ2を介して入射した被写体像を分離光学系3によって2方向に分離し、白黒撮像素子4とカラー撮像素子5に結像させる。ここで、白黒撮像素子4は人間の視感度特性にほぼ等しい特性を持っており、カラー撮像素子5は画素上にベイヤー配列のOCFオンチップカラーフィルターが形成されている。白黒撮像素子4の出力SD1及びカラー撮像素子5の出力SD2は、補間処理部6に入力されて補間演算によって各画素の3原色信号Pが生成される。ここで、照明条件色温度によってRGBのバランスいわゆるホワイトバランスが変化するので、無彩色の被写体に対してはR=G=Bとなるようにカラー撮像素子5の各色の利得は調整され、白黒撮像素子4については無彩色の被写体に対してはY=R=G=Bとなるように利得が調整される。[補間処理部の構成]図1に示すように、本実施形態に係る補間処理部6は、輝度信号に基づいて各画素における相関性の高い方向を表す相関方向指数を算出する相関方向指数算出部11と、補間値を求める対象の着目画素に対して、相関方向指数に基づいて相関性の高い方向に位置する相関方向画素を求め、この相関方向画素の色信号によって着目画素における色信号の補間値を求める信号補間部12と、信号補間部12で求められた色信号の補間値と輝度信号とカラー撮像素子5から出力された色信号とを用いて、求められていない色信号の補間値を算出する補間値算出部13とを備えている。また、信号補間部12は、着目画素がB信号を出力するB画素とR信号を出力するR画素の場合には、相関方向画素のG信号の平均値を補間値として求めるG信号補間部21と、着目画素がG信号を出力するG画素の場合で、かつ、相関方向画素がR画素のときには相関方向画素のR信号の平均値を補間値として求めるR信号補間部23と、着目画素がG信号を出力するG画素の場合で、かつ、相関方向画素がB画素のときには相関方向画素のB信号の平均値を補間値として求めるB信号補間部22とを備えている。さらに、補間値算出部13は、B画素においてG信号の補間値と輝度信号とB信号とを用いてR信号の補間値を算出し、G画素においてB信号の補間値と輝度信号とG信号とを用いてR信号の補間値を算出するR補間値算出部31と、R画素においてG信号の補間値と輝度信号とR信号とを用いてB信号の補間値を算出し、G画素においてR信号の補間値と輝度信号とG信号とを用いてB信号の補間値を算出するB補間値算出部32とを備えている。[補間処理の手順]次に、本実施形態に係る撮像装置1による補間処理の手順を図2のフローチャートを参照して説明する。ここでは撮像素子の画素ピッチと等しい周期の白黒の縦縞パターンの被写体を撮影した場合を一例として説明する。理解を容易にするために、白黒撮像素子4とカラー撮像素子5の画素配列は図3aに示すように同じ座標軸上に1つの模式図として示し、本実施形態の具体的な数値例を図3bに示す。また、水平方向xi及び垂直方向yjの座標を添え字で示す。図2に示すように、ステップS101では、座標の位置にある画素の白黒撮像素子4の輝度信号出力Yをもとにして、各画素における相関性の高い方向を表す相関方向指数Dを算出する。具体的な算出方法は、補間値を求める対象となっている着目画素の輝度信号をYとしたときに、上下に隣接する2画素の輝度信号YとYの平均値Yavと、左右に隣接する2画素YとYの平均値Yahとを算出し、これらの平均値と着目画素の輝度信号Yとの差分が小さい方向を相関性の高い方向とし、垂直方向の相関性が高い場合には相関方向指数D=1、水平方向の相関性が高い場合には相関方向指数D=0と定義すれば、次式によって算出することができる。D=0Yav-Y>Yah-Yの時=1Yav-Y=Yah-Yの時=1Yav-Y<Yah-Yの時1ここで、Yav-Y=Yah-Yのときには水平方向、垂直方向ともに相関性の程度が同等なので、本実施形態では垂直方向を優先するものとした。ただし、これに限定されるわけではない。次に、ステップS102では、カラー撮像素子5においてBのOCFが形成されているx=奇数、y=偶数の座標以下、B画素あるいは座標と称すにおけるG信号の補間値gを次式によって算出する。具体的な算出方法は、着目画素の相関方向指数がD=1のとき、すなわち垂直方向の相関が強い場合には上下に隣接する2画素のG信号GとGの平均値をG信号の補間値gとして算出し、着目画素の相関方向指数がD=0のとき、すなわち水平方向の相関が強い場合には左右に隣接する2画素のG信号GとGの平均値をG信号の補間値gとして算出する。g=G/2D=1のときg=G/2D=0のとき2次に、ステップS103では、カラー撮像素子5においてRのOCFが形成されているx=偶数、y=奇数の座標以下、R画素あるいは座標と称すにおけるG信号の補間値gを算出する。具体的な算出方法は、ステップS102と同様に相関方向画素のG信号の平均値をG信号の補間値gとして算出する。ステップS102及びS103による具体的な算出結果を図4a、bに示す。次に、ステップS104では、カラー撮像素子5においてBのOCFが形成されている座標におけるR信号の補間値rを算出する。具体的な算出方法は、着目画素の白黒撮像素子4の出力Yと、カラー撮像素子5の出力Bと、ステップS102で算出したG信号の補間値gとを用いて、次式によって算出する。r=-06×g-01×B/033これによって座標における画素の3原色は全て算出されるので、座標における画素の色復調は完成する。この算出結果を図5a、bに示す。次に、ステップS105では、カラー撮像素子5においてRのOCFが形成されている座標におけるB信号の補間値bを算出する。具体的な算出方法は、ステップS104と同様であり、Bの代わりにRを用いて次式によって算出する。b=-06×g-03×R/014これによって座標における画素の3原色は全て算出されるので、座標における画素の色復調は完成する。この算出結果を図6a、bに示す。次に、ステップS106では、カラー撮像素子5においてGのOCFが形成されている座標の相関方向を相関方向指数Dを用いて判定する。ここで相関方向が縦である場合には、ステップS107aに移行して座標におけるR信号の補間値rを算出する。具体的な算出方法は、着目画素の上下に隣接する2画素のR信号RとRの平均値をR信号の補間値rとして算出する。この計算式を次式に示し、算出結果を図7a、bに示す。r=R/25引き続きステップS108aでは、座標におけるB信号の補間値bを算出する。具体的な算出方法は、着目画素の白黒撮像素子4の輝度信号Yと、カラー撮像素子5のG信号Gと、ステップS107aで算出したR信号の補間値rとを用いて、次式によって算出する。b=-06×G-03×r/016これによって座標における画素の3原色は全て算出されるので、座標における画素の色復調は完成する。この算出結果を図8a、bに示す。一方、ステップS106において相関方向が横であった場合には、ステップS107bに移行して座標におけるB信号の補間値bを算出し、ステップS108bにおいてR信号の補間値rを算出する。具体的な算出方法は、相関方向が縦であった場合のステップS107a、108aと同様であり、B信号の補間値bの算出式とR信号の補間値rの算出式はそれぞれ以下のようになる。b=B/27r=-06×G-01×b/038次に、ステップS109に移行して、カラー撮像素子5においてGのOCFが形成されている座標における相関方向を相関方向指数Dを用いて判定する。ここで、相関方向が縦である場合には、ステップS110aに移行して座標におけるB信号の補間値bを算出する。具体的な算出方法は、着目画素の上下に隣接している2画素のB信号BとBの平均値をB信号の補間値bとして算出する。この計算式を次式に示し、算出結果を図9a、bに示す。b=B/29引き続きステップS111aでは、座標におけるR信号の補間値rを算出する。具体的な算出方法は、着目画素の白黒撮像素子4の輝度信号Yと、カラー撮像素子5のG信号Gと、ステップS110aで算出したB信号の補間値bとを用いて、次式によって算出する。r=-06×G-01×b/0310これによって座標における画素の3原色は全て算出されるので、座標における画素の色復調は完成する。この算出結果を図10a、bに示す。一方、ステップS109において相関方向が横であった場合には、ステップS110bに移行して座標におけるR信号の補間値rを算出し、ステップS111bにおいてB信号の補間値bを算出する。具体的な算出方法は、相関方向が縦であった場合のステップS110a、111aと同様であり、R信号の補間値rの算出式とB信号の補間値bの算出式はそれぞれ以下のようになる。r=R/211b=-06×G-03×r/0112これによって座標における画素の3原色は全て算出されるので、座標における画素の色復調は完成する。こうして全ての座標に対する3原色信号が算出されると、本実施形態に係る撮像装置による補間処理は終了する。この結果、本実施形態に係る撮像装置によれば、従来の補間処理方法では偽色が発生してしまう高周波成分を含んだ縦縞模様に対しても、図10bに示すように、補間処理結果に偽色はなく入力画像を正しく再現できていることが分かる。尚、上述した実施形態では、ステップS101において全ての座標の相関方向指数を算出しているが、相関方向指数を算出するタイミングについてはこれに限定されるわけではなく、相関方向指数を参照する各ステップS102、S103、S106、S109においてそれぞれ算出してもよい。また、ステップS102、S103においてG信号の補間値を全座標について算出した後に、ステップS104で座標の色復調を完成させ、更にその後にステップS105で座標の色復調を完成させているが、処理の順序はこれに限定されるわけではなく、まずステップS103→S105の順序で座標の色復調を完成させ、次にステップS102→S104の順序で座標の色復調を完成させてもよい。あるいはステップS106→S107→S108を最初に処理することで座標の色復調を最初に完成させてもよいし、ステップS109→S110→S111を最初に処理することで座標の色復調を最初に完成させてもよい。本発明は、このように処理の順序を入れ換えたとしても、その概念及び効果に変わりはない。もちろん、ハードウェアによって並列同時処理を行っても同様である。また、上述した実施形態では、ステップS101における相関方向指数の算出方法として、着目画素を狭持する隣接2画素の平均値と着目画素との差分を用いて算出したが、算出方法はこれに限定されるわけではなく、更に多くの隣接画素に適当なフィルター処理を施した値を用いて算出するなど、既存の任意の方法を用いることができる。さらに、上述した実施形態では、ステップS102、S103、S107、S110における特定方向の補間値算出方法を、着目画素を狭持する隣接2画素の平均値としているが、算出方法はこれに限定されるわけではなく、更に多くの隣接画素に適当なフィルター処理を施した値を用いることもできる。なお、本発明は、ハードウェアにより図1の補間処理部を構成する場合に限定されるものではなく、図2の手順を実行するコンピュータプログラムによるソフトウェアによって補間処理を行うこともできる。この場合、コンピュータプログラムは、記録媒体からコンピュータに取り込まれてもよいし、ネットワーク経由でコンピュータに取り込まれてもよい。[実施形態の効果]以上詳細に説明したように、本発明を適用した一実施形態に係る撮像装置及び撮像装置の補間処理方法によれば、輝度信号に基づいて各画素における相関性の高い方向を求め、この相関性の高い方向にある画素の色信号を用いて補間値を求めるので、高周波成分が多く含まれた画像であっても偽色のない良好な補間画像を得ることができる。また、本発明を適用した一実施形態に係る撮像装置によれば、着目画素がB画素とR画素の場合には相関方向画素のG信号の平均値を補間値として求めるG信号補間部21と、着目画素がG画素の場合には相関方向画素に応じてR信号及びB信号の平均値を補間値として求めるR信号補間部23及びB信号補間部22とを備えているので、相関性の高い方向にある画素の色信号を用いて補間値を求めることができる。さらに、本発明を適用した一実施形態に係る撮像装置によれば、G信号の補間値と輝度信号とB信号とを用いてR信号の補間値を算出する、あるいはB信号の補間値と輝度信号とG信号とを用いてR信号の補間値を算出するR補間値算出部31と、G信号の補間値と輝度信号とR信号とを用いてB信号の補間値を算出する、あるいはR信号の補間値と輝度信号とG信号とを用いてB信号の補間値を算出するB補間値算出部32とを備えているので、相関性の高い方向にある画素の色信号を用いて求められた補間値を用いて補間値を算出することができる。なお、上述の実施形態は本発明の一例である。したがって、本発明は、上述の実施形態に限定されるわけではなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計などに応じて種々の変更が可能であることは勿論である。