"長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成部を有し、前記画素情報合成部は、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出し、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定し、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する画像処理装置。前記画素情報合成部は、ブレンド対象となる複数の異なる露光時間の画素の画素値に基づいて前記複数のブレンド比率を算出し、算出した前記複数のブレンド比率に基づいて、前記適用ブレンド比率を決定する処理を実行する請求項1に記載の画像処理装置。前記画素情報合成部は、ブレンド対象となる複数の異なる露光時間の画素の近傍画素の画素値に基づいて前記複数のブレンド比率を算出し、算出した前記複数のブレンド比率に基づいて、前記適用ブレンド比率を決定する処理を実行する請求項1に記載の画像処理装置。前記画素情報合成部は、長時間露光画素の画素値に依存した長時間露光画素値依存ブレンド比率αLと、短時間露光画素の画素値に依存した短時間露光画素値依存ブレンド比率αSを算出し、算出した長時間露光画素値依存ブレンド比率αLと、短時間露光画素値依存ブレンド比率αSとの乗算処理結果、すなわち、α=αL×αS上記αを短時間露光画素のブレンド量を示す前記適用ブレンド比率として決定する請求項1に記載の画像処理装置。前記画素情報合成部は、前記長時間露光画素値依存ブレンド比率αLを、ブレンド処理対象画素となる色Cの長時間露光画素の画素値CLが、CL<TH0Lのとき、αL=0、TH0L≦CL≦TH1Lのとき、αL=CL-TH0L/TH1L-TH0L、TH1L≦CLのとき、αL=1.0として決定し、前記短時間露光画素値依存ブレンド比率αSを、ブレンド処理対象画素となる色Cの短時間露光画素の画素値CSが、CS<TH0Sのとき、αS=0、TH0S≦CS≦TH1Sのとき、αL=CL-TH0S/TH1S-TH0S、TH1S≦CLのとき、αL=1.0、として決定する、ただし、TH0L、THL1、THS0、THS1は予め規定したしきい値である、上記設定とした前記長時間露光画素値依存ブレンド比率αLと、前記短時間露光画素値依存ブレンド比率αSを決定する請求項4に記載の画像処理装置。前記画素情報合成部は、前記出力画像または中間画像の色Cの画素値CWを、CW=α×CS×GAIN1.0-α×CLただし、CLは、色Cの長時間露光画素の画素値、CSは、色Cの短時間露光画素の画素値、GAINは、長時間露光画素と短時間露光画素との露光比、αは、前記適用ブレンド比率、上記式に従って前記出力画像または前記中間画像の色Cの画素値CWを算出する請求項1に記載の画像処理装置。前記画素情報合成部は、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理によって中間画像を生成し、さらに、生成した中間画像を構成する同一色の画素値のブレンド処理により最終的な出力画像を生成する請求項1に記載の画像処理装置。前記画素情報合成部は、長時間露光画素と短時間露光画素の混在したRGB配列を有する画像データを入力し、RGB各色単位で、同一色の長時間露光画素と短時間露光画素をブレンドして前記出力画像または前記中間画像の画素値を決定する請求項1に記載の画像処理装置。前記画素情報合成部は、前記RGB配列を有する画像データ中のG画素データのみを適用して前記適用ブレンド比率を決定する処理を行う請求項8に記載の画像処理装置。画像処理装置において実行する画像処理方法であり、画素情報合成部が、長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成ステップを実行し、前記画素情報合成ステップは、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出する処理と、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定する処理と、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する処理を実行する画像処理方法。画像処理装置において画像処理を実行させるプログラムであり、画素情報合成部に、長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成ステップを実行させ、前記画素情報合成ステップにおいて、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出する処理と、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定する処理と、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する処理を実行させるプログラム。本開示は、例えばこのような状況に鑑みてなされたものであり、1回の撮影画像に基づいて広ダイナミックレンジ画像を生成可能とした画像処理装置、および画像処理方法、並びにプログラムを提供することを目的とする。さらに、本開示は、例えばベイヤ配列と異なる配列を持つ撮影画像に基づいて広ダイナミックレンジ画像を生成する画像処理装置、および画像処理方法、並びにプログラムを提供することを目的とする。本開示の第1の側面は、長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成部を有し、前記画素情報合成部は、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出し、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定し、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する画像処理装置にある。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、ブレンド対象となる複数の異なる露光時間の画素の画素値に基づいて前記複数のブレンド比率を算出し、算出した前記複数のブレンド比率に基づいて、前記適用ブレンド比率を決定する処理を実行する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、ブレンド対象となる複数の異なる露光時間の画素の近傍画素の画素値に基づいて前記複数のブレンド比率を算出し、算出した前記複数のブレンド比率に基づいて、前記適用ブレンド比率を決定する処理を実行する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、長時間露光画素の画素値に依存した長時間露光画素値依存ブレンド比率αLと、短時間露光画素の画素値に依存した短時間露光画素値依存ブレンド比率αSを算出し、算出した長時間露光画素値依存ブレンド比率αLと、短時間露光画素値依存ブレンド比率αSとの乗算処理結果、すなわち、α=αL×αS、上記αを短時間露光画素のブレンド量を示す前記適用ブレンド比率として決定する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、前記長時間露光画素値依存ブレンド比率αLを、ブレンド処理対象画素となる色Cの長時間露光画素の画素値CLが、CL<TH0Lのとき、αL=0、TH0L≦CL≦TH1Lのとき、αL=CL-TH0L/TH1L-TH0L、TH1L≦CLのとき、αL=1.0として決定し、前記短時間露光画素値依存ブレンド比率αSを、ブレンド処理対象画素となる色Cの短時間露光画素の画素値CSが、CS<TH0Sのとき、αS=0、TH0S≦CS≦TH1Sのとき、αL=CL-TH0S/TH1S-TH0S、TH1S≦CLのとき、αL=1.0、として決定する、ただし、TH0L、THL1、THS0、THS1は予め規定したしきい値である、上記設定とした前記長時間露光画素値依存ブレンド比率αLと、前記短時間露光画素値依存ブレンド比率αSを決定する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、前記出力画像または中間画像の色Cの画素値CWを、CW=α×CS×GAIN1.0-α×CLただし、CLは、色Cの長時間露光画素の画素値、CSは、色Cの短時間露光画素の画素値、GAINは、長時間露光画素と短時間露光画素との露光比、αは、前記適用ブレンド比率、上記式に従って前記出力画像または前記中間画像の色Cの画素値CWを算出する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理によって中間画像を生成し、さらに、生成した中間画像を構成する同一色の画素値のブレンド処理により最終的な出力画像を生成する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、長時間露光画素と短時間露光画素の混在したRGB配列を有する画像データを入力し、RGB各色単位で、同一色の長時間露光画素と短時間露光画素をブレンドして前記出力画像または前記中間画像の画素値を決定する。さらに、本開示の画像処理装置の一実施態様において、前記画素情報合成部は、前記RGB配列を有する画像データ中のG画素データのみを適用して前記適用ブレンド比率を決定する処理を行う。さらに、本開示の第2の側面は、画像処理装置において実行する画像処理方法であり、画素情報合成部が、長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成ステップを実行し、前記画素情報合成ステップは、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出する処理と、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定する処理と、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する処理を実行する画像処理方法にある。さらに、本開示の第3の側面は、画像処理装置において画像処理を実行させるプログラムであり、画素情報合成部に、長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成ステップを実行させ、前記画素情報合成ステップにおいて、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出する処理と、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定する処理と、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する処理を実行させるプログラムにある。なお、本開示のプログラムは、例えば、様々なプログラムコードを実行可能な情報処理装置やコンピュータシステムに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体によって提供可能なプログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、情報処理装置やコンピュータシステム上でプログラムに応じた処理が実現される。本開示のさらに他の目的、特徴や利点は、後述する本開示の実施例や添付する図面に基づくより詳細な説明によって明らかになるであろう。なお、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。本開示の一実施例の構成によれば、長時間露光画素と短時間露光画素の画素値合成処理を実行して広ダイナミックレンジ画像を生成する装置、方法が実現される。具体的には、例えば、長時間露光画素と短時間露光画素の画素値合成処理を実行して出力画像の画素値を生成する画素情報合成部を有し、画素情報合成部は、複数の異なる画素の画素値に基づいて算出した複数のブレンド比率を算出し、複数のブレンド比率に基づいて、最終的な長時間露光画素と短時間露光画素の最終ブレンド比率を決定し、最終ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像の画素値を決定する。この処理によって広ダイナミックレンジ画像を生成することができる。以下、図面を参照しながら本開示の画像処理装置、および画像処理方法、並びにプログラムの詳細について説明する。なお、説明は以下の項目に従って行う。1.撮像素子の構成例について2.画像処理装置の構成例について3.撮像デバイスの構成例について4.画素部の構成と露光時間設定例について5.画像生成処理の実施例5-1.実施例1.ベイヤ配列において行毎に露光時間を変更した場合の処理例5-2.ブレンド比率α=αL×αSを適用した画素ブレンド処理を行う効果について5-3.実施例2.ベイヤ配列において列毎に露光時間を変更した場合の処理例5-4.実施例3.ベイヤ配列において斜め方向に露光時間を変更した場合の処理例5-5.実施例4.4分割ベイヤ型配列において斜め方向に露光時間を変更した場合の処理例6.画像処理装置のその他の構成例7.本開示の構成のまとめ[1.撮像素子の構成例について]図2を参照して撮像素子の構成例について説明する。図2には、以下の3つの撮像素子構成例を示している。1ベイヤBayer配列24分割ベイヤ型RGB配列3RGBW型配列なお、RGB配列中のGについては、R列のGをGr、B列のGをGbと表現する場合もある。1ベイヤBayer配列は多くのカメラにおいて採用されている配列であり、このベイヤ配列を持つカラーフィルタを持つ撮像画像に対する信号処理はほぼ確立している。しかし、24分割ベイヤ型RGB配列や、3RGBW型配列については、まだ、これらのフィルタを備えた撮像素子によって撮影された画像に対する信号処理について十分な検討がなされているとは言えないというのが現状である。なお、24分割ベイヤ型RGB配列は、1に示すベイヤ配列の1つのR,G,B各画素を4つの画素として設定した配列に相当する。以下、この24分割ベイヤ型RGB配列を持つカラーフィルタを備えた撮像素子によって撮影される画像に対する信号処理を実行する画像処理装置について説明する。[2.画像処理装置の構成例について]図3に、本開示の画像処理装置の一構成例である撮像装置100の構成例を示す。図3は、撮像装置の構成例を示すブロック図である。光学レンズ101を介して入射される光は撮像部、例えばCMOSイメージセンサなどによって構成される撮像デバイス102に入射し、光電変換による画像データを出力する。出力画像データは信号処理部103に入力される。信号処理部103は、例えばホワイトバランスWB調整、ガンマ補正等、一般的なカメラにおける信号処理を実行して出力画像120を生成する。出力画像120は図示しない記憶部に格納される。あるいは表示部に出力される。制御部105は、例えば図示しないメモリに格納されたプログラムに従って各部に制御信号を出力し、各種の処理の制御を行う。[3.撮像デバイスの構成例について]次に、撮像デバイス102の構成例について図4を参照して説明する。図4は、本開示の一実施例の撮像デバイス102の構成を示す図である。撮像デバイス102は、図4に示すように画素部151、演算部160を有する。演算部160はAD変換部161、画素情報合成部162、出力部163を有する。なお、演算部160は、画素部151と同一のチップ上の構成、すなわちオンチップにある設定としてもよいし、画素部151と異なるチップや装置内に設定する構成としてもよい。画素部151は、多数の画素各々に被写体光に基づく電荷を蓄積し、高解像度画像である高画素数の画像データを出力する。なお、画素部151は、長時間露光を行う高感度画素と、短時間露光を行う低感度画素を有する構成となっている。撮像デバイス102の演算部160には、画素部151から、高感度画素情報181と、低感度画素情報182が入力される。演算部160のA/D変換部161はこれらの入力信号のA/D変換、すなわちアナログ信号をデジタル信号に変換する処理を実行して、変換後のデジタル値を画素情報合成部162に入力する。画素情報合成部162では、高感度画素情報181と、低感度画素情報182のブレンド処理により、出力画素値を算出する。例えば、4つの画素信号に基づいて出力画像の1つの画素値を算出する。このような画素値合成処理を実行して画素数を削減した広ダイナミックレンジ画像を生成して出力部163を介して出力する。[4.画素部の構成と露光時間設定例について]画素部151の構成と、露光時間の設定例について図5を参照して説明する。図5には以下の4つの例を示している。1ベイヤ配列において行毎に露光時間を変更2ベイヤ配列において列毎に露光時間を変更3ベイヤ配列において斜め方向に露光時間を変更44分割ベイヤ型RGB配列において斜め方向に露光時間を変更図5に示す各配列に示す画素中、グレーの画素が露光時間の短い短時間露光画素、すなわち低感度画素である。白い画素が、露光時間の長い長時間露光画素、すなわち高感度画素である。以下、これらの各設定において撮影された画像に基づく広ダイナミックレンジ画像の生成処理について説明する。[5.画像生成処理の実施例]次に、画素情報合成部162における具体的な処理例について、図6以下を参照して説明する。なお、以下において説明する処理は、撮像デバイス102の演算部160の画素情報合成部103の処理として説明するが、撮像デバイス102に画素情報合成部103を設定せず、例えば図3に示す信号処理部103に画素情報合成部103を設定して、信号処理部103内で以下に説明する処理を実行する構成としてもよい。5-1.実施例1.ベイヤ配列において行毎に露光時間を変更した場合の処理例図6に、ベイヤ配列において行毎に露光時間を変更した場合の処理例を示す。図6には以下の3つのデータを示している。1a撮像データ1b中間データ1c出力データ1a撮像データは撮像素子の撮像データであり、ベイヤ配列において行毎に露光時間を変更した場合に撮影される画像を示している。白い部分が長時間露光画素であり、グレー部分が短時間露光画素を示している。例えばGS00は、座標位置0,0のG画素の短時間S露光画素である。GL20は、座標位置2,0のG画素の長時間L露光画素である。なお、座標は、垂直下方向をx、水平右方向をyとした座標x,yを適用して、例えば、GSxy、GLxy等の形式で示している。本例では2行単位で長時間露光画素と短時間露光画素が交互に設定される。なお、この露光時間制御は例えば制御部105の制御に基づいて実行される。図61aに示す撮像データは、図4に示す撮像デバイス102の画素部を構成する一部画素領域である4×4の画素領域を示している。図61bに示す中間データは、4×4の1a撮像データに基づいて、画素情報合成部162の生成する中間データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×4の1a撮像データに基づいて、図61bに示す4×2の中間データを算出する。図61cに示す出力データは、4×2の1b中間データに基づいて、画素情報合成部162の生成する出力データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×4の1a撮像データに基づいて、4×2の1b中間データを算出し、さらに、ステップ2STEP2において、生成した中間データに基づいて2×2の1c出力データを生成する。1c出力データは広ダイナミックレンジ画像として生成される出力データである。このように、画素情報合成部162は、4×4の1a撮像データに含まれる長時間露光画素と短時間露光画素の画素値のブレンド処理によって、4×2の1b中間データを算出し、さらに、中間データの構成画素のブレンド処理によって、2×2の1c出力データを生成して出力する。ステップ1,2の各処理について説明する。ステップ1ステップ1における1a撮像データから1b中間データの生成処理は以下の複数の画素値のブレンド処理によって行われる。ブレンド処理は、G画素に対する処理と、R、B画素に対する処理は、異なる処理となる。なお、RGB配列中のG画素については、以下R列のG画素をGR、B列のG画素をGBとして説明する。本実施例の1a撮像データから1b中間データの生成処理において実行する画素の合成ブレンド処理は、G画素に対する処理、すなわちGR/GB位相の画素に対する処理と、R、B画素に対する処理、すなわち、R/B位相の画素に対する処理を異なる処理として実行する。以下、これらの各処理について説明する。GR/GB位相の処理例えば、図61b中間データの左上端に示すGW00の画素値GW00は、1a撮像データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。GW00=α×GS00×GAIN1.0-α×GL20ただし、GS00:画素位置0,0の短時間露光画素であるG画素の画素値、GL20:画素位置2,0の長時間露光画素であるG画素の画素値、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、2つのブレンド比率、すなわち、長時間露光画素値依存ブレンド比率:αL、短時間露光画素値依存ブレンド比率:αS、これら、αLとαSの積として算出する。α=αL×αSである。図61bに示す中間データ中のGW00の算出処理において、長時間露光画素値依存ブレンド比率:αL、短時間露光画素値依存ブレンド比率:αS、α=αL×αSこれらの各値は、以下の式によって算出される。αL=CalcBrateGL20,THR0_LNG,THR1_LNGαS=CalcBrateGS00,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。2つのブレンド比率αLとαSと、しきい値THR0,THR1との対応は具体的には、図7、図8に示す通りである。なお、THR0_LNG,THR1_LNG:長時間露光画素を適用したブレンド比率αLの算出に適用するしきい値、THR0_SHT,THR1_SHT:短時間露光画素を適用したブレンド比率αSの算出に適用するしきい値、である。なお、短時間露光画素を適用したブレンド比率αSは、例えば長時間露光画素を適用したブレンド比率αLを前述のGAINで除算した値に相当する。このように、図61bに示す長時間露光画素と短時間露光画素が混在する撮像データから、画素数を半分とした図61bに示す中間データを生成する処理において、中間データのG画素値GWxyは、この画素値算出対象画素と同一列にある短時間露光画素GSxyと長時間露光画素GLxyを、上述のブレンド比率αを適用したブレンド処理によって決定する。ここで、ブレンド比率αは、長時間露光画素値依存ブレンド比率:αL、短時間露光画素値依存ブレンド比率:αS、これら2つの異なる画素依存のブレンド比率の積、すなわち、α=αL×αS上記式によって算出する。なお、上記のブレンド比率α=αL×αSの算出処理に適用する、長時間露光画素値依存ブレンド比率:αL、短時間露光画素値依存ブレンド比率:αS、これらの各値は、算出対象となるG画素のαブレンドに適用した長時間露光画素、短時間露光画素の画素値に基づいて算出する。すなわち、長時間露光画素値依存ブレンド比率αLは、αL=CalcBrateGL20,THR0_LNG,THR1_LNG上記式のように、算出対象となるG画素のαブレンドに適用した長時間露光画素の画素値に従って算出する。同様に、短時間露光画素値依存ブレンド比率αSは、αS=CalcBrateGS00,THR0_SHT,THR1_SHT上記式のように、算出対象となるG画素のαブレンドに適用した短時間露光画素の画素値に従って算出する。R/B位相の処理次に、図61b中間データに設定するR画素とB画素の画素値の決定処理について説明する。例えば、図61bに示すRW01の画素値RW01は、1a撮像データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。RW01=α×RS01×GAIN1.0-α×RL21ただし、RS01:画素位置0,1の短時間露光画素であるR画素RL21:画素位置2,1の長時間露光画素であるR画素GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGL20GL22/2.0,THR0_LNG,THR1_LNGαS=CalcBrateGS00GS02/2.0,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。このように、図61bに示す長時間露光画素と短時間露光画素が混在する撮像データから、画素数を半分とした図61bに示す中間データを生成する処理において、中間データのR画素値RWxyを算出する場合、画素値算出対象画素と同一列にある短時間露光画素RSxyと長時間露光画素RLxyを、上述のブレンド比率αを適用したブレンド処理によって決定する。同様に、B画素値BWxyを算出する場合、画素値算出対象画素と同一列にある短時間露光画素BSxyと長時間露光画素BLxyを、上述のブレンド比率αを適用したブレンド処理によって決定する。ここで、ブレンド比率αは、長時間露光画素値依存ブレンド比率:αL、短時間露光画素値依存ブレンド比率:αS、これら2つの異なる画素依存のブレンド比率の積、すなわち、α=αL×αS上記式によって算出する。なお、上記のブレンド比率α=αL×αSの算出処理に適用する、長時間露光画素値依存ブレンド比率:αL、短時間露光画素値依存ブレンド比率:αS、これらの各値は、G画素の画素値を利用して算出する。すなわち、長時間露光画素値依存ブレンド比率αLは、αL=CalcBrateGL20GL22/2.0,THR0_LNG,THR1_LNG上記式のように、算出対象となるR画素またはB画素のαブレンドに適用した長時間露光画素に隣接する2つの長時間露光G画素の平均値を用いて算出する。同様に、短時間露光画素値依存ブレンド比率αSは、αS=CalcBrateGS00GS02/2.0,THR0_SHT,THR1_SHT上記式のように、算出対象となるR画素またはB画素のαブレンドに適用した短時間露光画素に隣接する2つの短時間露光G画素の平均値を用いて算出する。このようにブレンド比率αの算出処理には、RGBすべての画素について、G画素データを用いて行う。このように均一な処理を行うことで、ブレンド比率のばらつきが抑制され、自然な画像の生成が可能となる。ステップ2次に、図6に示すステップ2STEP2の処理について説明する。ステップ2における1b中間データから1c出力データの生成処理は以下のように、1b中間データに含まれる画素値の水平加算によって行う。例えば、以下に示す1:1加算、または1:3/3:1加算のいずれかを適用する。図61c出力データに示す画素値G00,R01の算出処理例について説明する。1:1加算1:1加算では、1c出力データに示す画素値G00,R01は以下の式に従って算出する。G00=GW00GW02/2R01=RW01RW03/21:3/3:1加算1:3または3:1加算では、1c出力データに示す画素値G00,R01は以下の式に従って算出する。G00=3×GW00GW02/4R01=RW013×RW03/4このように、図6に示す1b中間データから1c出力データの生成処理において、出力データの画素値は、中間データの同一行の同一色の画素の画素値を合成ブレンドする処理によって行われる。上記の1:1加算は、2つの画素の平均値の算出であり、1:3加算は距離に応じた重み付け加算である。これらのいずれかの処理によって、図6に示す1b中間データから1c出力データの生成処理を行う。5-2.ブレンド比率α=αL×αSを適用した画素ブレンド処理を行う効果について上述したように、本実施例において、図61aに示す撮像データから、1b中間データを生成する処理に際しては、撮像データに含まれる長時間露光画素と短時間露光画素とのブレンド処理によって、中間データの画素値を算出している。この中間データ生成処理における、長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率:αは、図7に示すグラフに従った長時間露光画素を適用したブレンド比率αLと、図8に示すグラフに従った短時間露光画素を適用したブレンド比率αSとの積によって算出している。すなわち、α=αL×αSである。例えば、画素位置x1,y1の長時間露光画素の画素値:Lx1y1、画素位置x2,y2の短時間露光画素の画素値:Sx2y2、これらを適用して1つの画素値中間データの画素値を算出する処理を行う場合、αL、αS、αを、以下の式によって算出する。αL=CalcBrateLx1y1,THR0_LNG,THR1_LNGαS=CalcBrateSx2y2,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。このように、長時間露光画素を適用したブレンド比率αLと、短時間露光画素を適用したブレンド比率αSとの積によって算出するブレンド比率、すなわち、α=αL×αS上記式に従ったブレンド比率αを算出して適用する効果について説明する。従来は、例えば、長時間露光画素を適用したブレンド比率αL、または、短時間露光画素を適用したブレンド比率αS、これらのいずれかをそのままブレンド比率αとして利用していた。しかし、このように、長時間露光画素または短時間露光画素のいずれか一方の画素値に基づいてブレンド比率を決定してしまうと、短時間露光画素の撮影期間と、長時間露光画素の撮影期間の間に被写体の移動などに起因して大きな画素値変化が生じた場合、算出されるブレンド比率が好ましくない値に設定される可能性がある。図9に画像撮影時における輝度変化の発生状況に応じた長時間露光画素と、短時間露光画素の画素値の例を示す。図9に示すグラフは、横軸に時間t、縦軸に画素値、これらの関係を示すグラフである。長時間露光は、時間T0~T4が露光時間であり、短時間露光は、時間T3~T4が露光時間である。撮影環境として,2つのパターンを例として示している。a長時間露光処理期間と短時間露光処理期間の全期間において明るさの変化がない場合、b長時間露光処理期間の前半において明るいが、短時間露光処理期間=長時間露光処理期間の後半において、暗くなる明るさの変化がある合、これらの2つの例における長時間露光画素と、短時間露光画素の画素値の遷移を示している。なお、ここで説明する明るさの変化は、主に、被写体の動きや、カメラの手ブレなどによる撮影被写体の移動に伴う明るさの変化である。具体的には、例えば明るい背景中で、何らかの低輝度の被写体が移動するといった動被写体などの影響による輝度変化である。a,bのいずれの場合も、長時間露光画素は、露光期間中に飽和レベル例えば画素値=1023に達している。ケースaでは時間T1、ケースbでは時間T2において、飽和画素値に達している。一方、短時間露光画素は、明るさに変化のない、ケースaでは、長時間露光画素と同一の傾きで画素値が時間とともに上昇し、図に示す例では、最終的な画素値は、320に達している。一方、ケースbでは、長時間露光画素より傾きが小さくなり、図に示す例では、最終的な画素値は、80となっている。このように、撮影環境における明るさの変化によって、長時間露光画素と短時間露光画素の一方の画素値にのみ大きな変化が発生してしまう場合がある。ケースbは、明るい背景に、例えば車が横切るなど、動被写体が撮影画像のある画素領域を移動した場合などの例である。このような画素の明るさに変化が有る場合と、無い場合、これらの各場合に応じた上述のブレンド比率、すなわち、α=αL×αS上記の本開示に従ったブレンド比率と、従来の一般的なブレンド処理に適用する長時間露光画素の画素値にのみ依存したブレンド比率:αLとの比較データを図10~図12を参照して説明する。なお、図10~図12においては、本開示に従ったブレンド比率は、αLS=αL×αS、として表記し、従来の一般的な長時間露光画素の画素値にのみ依存したブレンド比率は、αL、と表記する。図10は、図9aの明るさの変化がない撮影環境で画像を撮影した場合の2つのブレンド比率、すなわち、本開示に従ったブレンド比率:αLS=αL×αS、従来の長時間露光画素の画素値にのみ依存したブレンド比率をαL、これらを比較データとして示すグラフである。横軸が長時間露光画素の画素値、縦軸がブレンド比率:αLS、αL、これらを示している。すなわち、図10に示す例は、DS:短時間露光画素の画素値、DL:長時間露光画素の画素値、GAIN:長時間露光時間と短時間露光時間の露光比、としたとき、DS=DL/GAINが成立する場合の例である。図10のグラフに実線で示す従来の長時間露光画素の画素値にのみ依存したブレンド比率αLのデータは、先に説明した図7に示すデータと同様のデータである。一方、図10のグラフに点線で示す本開示に従ったブレンド比率:αLSは、αLS=αL×αS、上記の演算結果である。これらの2つのデータを比較すると、図10のグラフから理解されるように、本開示に従ったブレンド比率:αLSは、しきい値TH0~TH1の間で、従来の実線で示すブレンド比率:αLより下側に設定されている。これは、すなわち、しきい値TH0~TH1の間では、本開示に従ったブレンド比率:αLSを適用した場合、従来の実線で示すブレンド比率:αLより低いブレンド比率が適用されることを意味する。ブレンド比率:αは、先に説明したように、中間データの画素値=α×短時間露光画素の画素値×GAIN1.0-α×長時間露光画素の画素値として利用される値である。従って、本開示に従ったブレンド比率:αLSを適用した場合、従来の実線で示すブレンド比率:αLより、短時間露光画素のブレンド比率を低く設定し、長時間露光画素のブレンド比率を高く設定することになる。すなわち、長時間露光画素の重みが高くなることを意味する。図11は、図9bの撮影環境で画像を撮影した場合の2つのブレンド比率、すなわち、短時間露光の期間において、動被写体が横切るなどの影響で、短時間露光画素の画素値が低下した場合のデータを示すグラフである。本開示に従ったブレンド比率:αLS=αL×αS、従来の長時間露光画素の画素値にのみ依存したブレンド比率をαL、これらを比較データとして示すグラフである。横軸が長時間露光画素の画素値、縦軸がブレンド比率:αLS、αL、これらを示している。すなわち、図11に示す例は、DS:短時間露光画素の画素値、DL:長時間露光画素の画素値、GAIN:長時間露光時間と短時間露光時間の露光比、としたとき、DS=DL/GAIN×0.75が成立する場合の例である。すなわち、短時間露光画素の画素値:DSが、明るさに変化がなかった場合と比較して0.75倍まで低下してしまった場合である。図11に示す2つのデータを比較すると、本開示に従ったブレンド比率:αLSは、しきい値TH0~TH1、さらにしきい値TH1を超えた部分で、従来の実線で示すブレンド比率:αLより下側に設定されている。これは、すなわち、しきい値TH0~TH1、さらにしきい値TH1を超えた一部区間では、本開示に従ったブレンド比率:αLSを適用した場合、従来の実線で示すブレンド比率:αLより低いブレンド比率が適用されることを意味する。前述のように、ブレンド比率:αは、中間データの画素値=α×短時間露光画素の画素値×GAIN1.0-α×長時間露光画素の画素値として利用される値である。従って、本開示に従ったブレンド比率:αLSを適用した場合、従来の実線で示すブレンド比率:αLより、短時間露光画素のブレンド比率を低く設定し、長時間露光画素のブレンド比率を高く設定することになる。長時間露光画素のブレンド比率を高める度合いは、先に説明した図10の場合明るさに変化がない場合より、大きくなっている。本例は、図9bの設定、すなわち、動被写体が横切るなどの影響で突然暗くなってしまい、短時間露光画素の露光期間が暗い動被写体を撮影してしまっている場合に相当する。この場合、短時間露光画素は、動被写体の影響で突然暗くなってしまった環境で得られた画素値であり、長時間露光画素の撮影被写体と異なる被写体を撮影していることになる。本開示の処理では、このような場合に、この短時間露光画素の画素値の重みブレンド比率を低下させて、長時間露光画素の画素値の重みブレンド比率を高く設定して、ブレンド処理を実行して出力画素値本例では中間データの画素値を設定する。この構成により、動被写体の影響など、撮影環境の変化の影響を低減したブレンド処理による合成画素値の算出を実現している。図12は、図11と同様、図9bの撮影環境で画像を撮影した場合の2つのブレンド比率、すなわち、短時間露光の期間において、動被写体が横切るなどの影響で、短時間露光画素の画素値が低下した場合のデータを示すグラフである。ただし、図11に示す例より、さらに、輝度変化が激しい場合であり、DS=DL/GAIN×0.5が成立する場合の例である。すなわち、短時間露光画素の画素値:DSが、明るさに変化がなかった場合と比較して0.5倍、すなわち1/2まで低下してしまった場合である。図12に示す2つのデータを比較すると、本開示に従ったブレンド比率:αLSは、しきい値TH0~TH1、さらにしきい値TH1を超えた大部分の領域で、従来の実線で示すブレンド比率:αLより下側に設定されている。これは、すなわち、しきい値TH0~TH1、さらにしきい値TH1を超えた一部区間では、本開示に従ったブレンド比率:αLSを適用した場合、従来の実線で示すブレンド比率:αLより低いブレンド比率が適用されることを意味する。前述のように、ブレンド比率:αは、中間データの画素値=α×短時間露光画素の画素値×GAIN1.0-α×長時間露光画素の画素値として利用される値である。従って、本開示に従ったブレンド比率:αLSを適用した場合、従来の実線で示すブレンド比率:αLより、短時間露光画素のブレンド比率を低く設定し、長時間露光画素のブレンド比率を高く設定することになる。長時間露光画素のブレンド比率を高める度合いは、先に説明した図10、図11の場合より、さらに大きくなっている。なお、短時間露光画素の出力が小さい場合は、ブレンド比率αLSは最大でも0.5となる。このように、撮影環境における明るさが変化した場合、本開示のブレンド比率、α=αL×αSは、従来、多く利用されている一般的なブレンド比率αLとは異なる値となる。具体的には、図9bに示すように短時間露光期間における撮影環境が、暗くなってしまった場合に、短時間露光画素のブレンド率を低下させて、長時間露光画素のブレンド比率を高めるという調整がなされる。この構成により、動被写体の影響など、撮影環境の変化の影響を低減したブレンド処理による合成画素値の算出を実現している。5-3.実施例2.ベイヤ配列において列毎に露光時間を変更した場合の処理例図13に、ベイヤ配列において列毎に露光時間を変更した場合の処理例を示す。図13には以下の3つのデータを示している。2a撮像データ2b中間データ2c出力データ2a撮像データは撮像素子の撮像データであり、ベイヤ配列において列毎に露光時間を変更した場合に撮影される画像を示している。白い部分が長時間露光画素であり、濃いグレー部分が短時間露光画素を示している。本例では2列単位で長時間露光画素と短時間露光画素が交互に設定される。なお、この露光時間制御は例えば制御部105の制御に基づいて実行される。2a撮像データは4×4の画素領域を示している。2b中間データは、4×4の2a撮像データに基づいて、画素情報合成部162の生成する中間データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×4の2a撮像データに基づいて、4×2の中間画素データを算出する。2c出力データは、4×2の2b中間画素データに基づいて、画素情報合成部162の生成する出力データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×4の2a撮像データに基づいて、4×2の2b中間画素データを算出し、さらに、ステップ2STEP2において、生成した中間データに基づいて2×2の2c出力データを生成する。2c出力データは広ダイナミックレンジ画像として生成される出力データである。このように、画素情報合成部162は、4×4の2a撮像データに含まれる長時間露光画素と短時間露光画素の画素値のブレンド処理によって、2×2の2c出力データの構成画素の各画素値を算出する。ステップ1,2の各処理について説明する。ステップ1ステップ1における2a撮像データから2b中間データの生成処理は以下の複数の画素値のブレンド処理によって行われる。ブレンド処理は、GR/GB位相と、R/B位相とで異なる処理として実行する。GR/GB位相の処理例えば、図132bに示すGW00の画素値GW00は、2a撮像データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。GW00=α×GS00×GAIN1.0-α×GL02ただし、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGL02,THR0_LNG,THR1_LNGαS=CalcBrateGS00,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。R/B位相の処理例えば、図132bに示すBW10の画素値BW10は、2a撮像データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。BW10=α×BS10×GAIN1.0-α×BL12ただし、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGL02GL22/2.0,THR0_LNG,THR1_LNGαS=CalcBrateGS00GS20/2.0,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。ステップ2次に、図13に示すステップ2STEP2の処理について説明する。ステップ2における2b中間データから2c出力データの生成処理は以下のように、2b中間データに含まれる画素値の垂直加算によって行う。例えば、以下に示す1:1加算、または1:3/3:1加算のいずれかを適用する。図132c出力データに示す画素値G00,R01の算出処理例について説明する。1:1加算1:1加算では、2c出力データに示す画素値G00,R01は以下の式に従って算出する。G00=GW00GW20/2R01=RW01RW21/21:3/3:1加算1:3または3:1加算では、2c出力データに示す画素値G00,R01は以下の式に従って算出する。G00=3×GW00GW20/4R01=RW013×RW21/45-4.実施例3.ベイヤ配列において斜め方向に露光時間を変更した場合の処理例図14に、ベイヤ配列において斜め方向に露光時間を変更した場合の処理例を示す。図14には以下の3つのデータを示している。3a撮像データ3b中間データ3c出力データ3a撮像データは撮像素子の撮像データであり、ベイヤ配列において斜め方向に露光時間を変更した場合に撮影される画像を示している。白い部分が長時間露光画素であり、濃いグレー部分が短時間露光画素を示している。本例では斜め方向に4画素ブロック単位で長時間露光画素と短時間露光画素が交互に設定される。なお、この露光時間制御は例えば制御部105の制御に基づいて実行される。3a撮像データは4×4の画素領域を示している。3b中間データは、4×4の3a撮像データに基づいて、画素情報合成部162の生成する中間データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×4の3a撮像データに基づいて、4×2の中間画素データを算出する。3c出力データは、4×2の3b中間画素データに基づいて、画素情報合成部162の生成する出力データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×4の3a撮像データに基づいて、4×2の3b中間画素データを算出し、さらに、ステップ2STEP2において、生成した中間データに基づいて2×2の3c出力データを生成する。3c出力データは広ダイナミックレンジ画像として生成される出力データである。このように、画素情報合成部162は、4×4の3a撮像データに含まれる長時間露光画素と短時間露光画素の画素値のブレンド処理によって、2×2の3c出力データの構成画素の各画素値を算出する。ステップ1,2の各処理について説明する。ステップ1ステップ1における3a撮像データから3b中間データの生成処理は以下の複数の画素値のブレンド処理によって行われる。ブレンド処理は、GR/GB位相と、R/B位相とで異なる処理として実行する。GR/GB位相の処理例えば、図143bに示すGW00の画素値GW00は、3a撮像データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。GW00=α×GS00×GAIN1.0-α×GL02ただし、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGL02,THR0_LNG,THR1_LNGαS=CalcBrateGS00,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。R/B位相の処理例えば、図143bに示すBW12の画素値BW12は、3a撮像データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。BW12=α×BS12×GAIN1.0-α×BL32ただし、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGS11,THR0_SHT,THR1_SHTCalcBrateGL13,THR0_LNG,THR1_LNG/2.0αS=CalcBrateGL31,THR0_LNG,THR1_LNGCalcBrateGS33,THR0_SHT,THR1_SHT/2.0α=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。ステップ2次に、図14に示すステップ2STEP2の処理について説明する。ステップ2における3b中間データから3c出力データの生成処理は以下のように、3b中間データに含まれる画素値の水平加算によって行う。例えば、以下に示す1:1加算、または1:3/3:1加算のいずれかを適用する。図143c出力データに示す画素値G00,R01の算出処理例について説明する。1:1加算1:1加算では、3c出力データに示す画素値G00,R01は以下の式に従って算出する。G00=GW00GW02/2R01=RW01RW03/21:3/3:1加算1:3または3:1加算では、3c出力データに示す画素値G00,R01は以下の式に従って算出する。G00=3×GW00GW02/4R01=RW013×RW03/45-5.実施例4.4分割ベイヤ型配列において斜め方向に露光時間を変更した場合の処理例図15に、4分割ベイヤ型RGB配列において斜め方向に露光時間を変更した場合の処理例を示す。図15には以下の3つのデータを示している。4a撮像データ4b中間データ4c出力データ4a撮像データは撮像素子の撮像データであり、ベイヤ配列において列毎に露光時間を変更した場合に撮影される画像を示している。白い部分が長時間露光画素であり、濃いグレー部分が短時間露光画素を示している。本例では斜め方向に長時間露光画素と短時間露光画素が交互に設定される。なお、この露光時間制御は例えば制御部105の制御に基づいて実行される。4a撮像データは4×6の画素領域を示している。4b中間データは、4×6の4a撮像データに基づいて、画素情報合成部162の生成する中間データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×6の4a撮像データに基づいて、12個の中間画素データを算出する。4c出力データは、12の4b中間画素データに基づいて、画素情報合成部162の生成する出力データを示している。画素情報合成部162は、まず、ステップ1STEP1において、4×6の4a撮像データに基づいて、12の4b中間画素データを算出し、さらに、ステップ2STEP2において、生成した中間データに基づいて2×3の4c出力データを生成する。4c出力データは広ダイナミックレンジ画像として生成される出力データである。ステップ1,2の各処理について説明する。ステップ1ステップ1における4a撮像データから4b中間データの生成処理は以下の複数の画素値の斜め加算処理によって行われる。例えば、図154bに示すGLA00の画素値GLA00、GSA00の画素値GSA00は、4a撮像データに含まれる複数の画素の画素値を適用した以下の式に従った斜め加算処理によって算出する。GLA00=GL00GL01/2GSA00=GS01GS11/2ステップ2次に、図15に示すステップ2STEP2の処理について説明する。ステップ2における4b中間データから4c出力データの生成処理は以下のように、4b中間データに含まれる画素値のブレンド処理によって行われる。ブレンド処理は、GR/GB位相と、R/B位相とで異なる処理として実行する。GR/GB位相の処理例えば、図154cに示すG00の画素値G00は、4b中間データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。G00=α×GSA00×GAIN1.0-α×GLA00ただし、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGLA00,THR0_LNG,THR1_LNGαS=CalcBrateGSA00,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。R/B位相の処理例えば、図154cに示すR01の画素値R01は、4b中間データに含まれる複数の画素の画素値と、ブレンド比率αを適用した以下の算出式に従って算出する。R01=α×RSA01×GAIN1.0-α×RLA01ただし、GAIN:短時間露光画素の画素値に乗ずるゲイン長時間露光画素と短時間露光画素の露光比α:長時間露光画素の画素値と短時間露光画素の画素値とのブレンド比率である。ここで、ブレンド比率αは、以下の2つのブレンド比率αLとαSの積として算出する。αL=CalcBrateGLA00GLA02/2.0,THR0_LNG,THR1_LNGαS=CalcBrateGSA00GSA02/2.0,THR0_SHT,THR1_SHTα=αL×αSただし、CalcBratedat,THR0,THR1の値は、前述と同様、図7、図8に示す通りであり、dat<THR0のとき、CalcBratedat,THR0,THR1=0THR≦dat≦THR1のとき、CalcBratedat,THR0,THR1=dat-THR0/THR1-THR0THR1≦datのとき、CalcBratedat,THR0,THR1=1.0である。なお、上述した実施例で説明した出力画素値の生成処理は、図4に示す撮像デバイス102内の画素情報合成部162において実行する構成としてもよいし、図3に示す信号処理部103において実行する構成としてもよい。なお、前述した実施例において説明した露光時間制御や演算処理は、例えば制御部において実行するプログラムに従った処理として実行することが可能である。[6.画像処理装置のその他の構成例]先に、図3を参照して説明したように本開示の画像処理装置は、図3に示す構成とすることが可能であるが、その他の構成とすることも可能である。例えば図16に示す設定としてもよい。図16には、レンズ201、撮像デバイス202、信号処理部DSP203、記録再生部204、ユーザ入力部210、システムバス208を有する画像処理装置を示している。処理の流れは以下の通りとなる。シャッタユーザ入力部210が押下されるなどして、撮像を開始したタイミングで、撮像デバイス202の固体撮像素子例えば、CCDChargeCoupledDevice、CMOSComplementaryMetalOxideSemiconductorは、レンズ201光学系から入射された光学像を2次元の電気信号以下、画像データに変換する。出力は、例えば先に、図5を参照して説明したすように、空間的に露光時間を変えて撮像されたRAW画像となる。その後、以下の順番で信号処理が行われる。1ワイドD合成画素加算配列、露光方法により実施例1~42カメラ信号処理ホワイトバランス、デモザイク、ガンマ補正など3データ圧縮静止画の場合JPEGなど,動画の場合H.264など上記1~3の信号処理は撮像デバイス202、信号処理部203のどちらで行ってもよい。なお、画素加算垂直加算、水平加算,斜め加算を撮像素子内部で行う場合、アナログ加算FDフローティングディフユージョン加算、SFソースフォロア加算、デジタル加算などが適用可能である。また、前述した実施例1~3のステップ1,2の順番は入れ替えることができる。出力画像として生成した画像は、圧縮データとして記録再生部204に保存される。[7.本開示の構成のまとめ]以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。なお、本明細書において開示した技術は、以下のような構成をとることができる。1長時間露光画素と短時間露光画素の画素値合成処理を実行する画素情報合成部を有し、前記画素情報合成部は、複数の異なる露光時間の画素の画素値に基づいて算出した複数のブレンド比率を算出し、前記複数のブレンド比率に基づいて、長時間露光画素と短時間露光画素のブレンド処理に適用する適用ブレンド比率を決定し、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理により、出力画像、または出力画像生成に適用する中間画像の画素値を決定する画像処理装置。2前記画素情報合成部は、ブレンド対象となる複数の異なる露光時間の画素の画素値に基づいて前記複数のブレンド比率を算出し、算出した前記複数のブレンド比率に基づいて、前記適用ブレンド比率を決定する処理を実行する前記1に記載の画像処理装置。3前記画素情報合成部は、ブレンド対象となる複数の異なる露光時間の画素の近傍画素の画素値に基づいて前記複数のブレンド比率を算出し、算出した前記複数のブレンド比率に基づいて、前記適用ブレンド比率を決定する処理を実行する前記1または2に記載の画像処理装置。4前記画素情報合成部は、長時間露光画素の画素値に依存した長時間露光画素値依存ブレンド比率αLと、短時間露光画素の画素値に依存した短時間露光画素値依存ブレンド比率αSを算出し、算出した長時間露光画素値依存ブレンド比率αLと、短時間露光画素値依存ブレンド比率αSとの乗算処理結果、すなわち、α=αL×αS上記αを短時間露光画素のブレンド量を示す前記適用ブレンド比率として決定する前記1~3いずれかに記載の画像処理装置。5前記画素情報合成部は、前記長時間露光画素値依存ブレンド比率αLを、ブレンド処理対象画素となる色Cの長時間露光画素の画素値CLが、CL<TH0Lのとき、αL=0、TH0L≦CL≦TH1Lのとき、αL=CL-TH0L/TH1L-TH0L、TH1L≦CLのとき、αL=1.0として決定し、前記短時間露光画素値依存ブレンド比率αSを、ブレンド処理対象画素となる色Cの短時間露光画素の画素値CSが、CS<TH0Sのとき、αS=0、TH0S≦CS≦TH1Sのとき、αL=CL-TH0S/TH1S-TH0S、TH1S≦CLのとき、αL=1.0、として決定する、ただし、TH0L、THL1、THS0、THS1は予め規定したしきい値である、上記設定とした前記長時間露光画素値依存ブレンド比率αLと、前記短時間露光画素値依存ブレンド比率αSを決定する前記4に記載の画像処理装置。6前記画素情報合成部は、前記出力画像または中間画像の色Cの画素値CWを、CW=α×CS×GAIN1.0-α×CLただし、CLは、色Cの長時間露光画素の画素値、CSは、色Cの短時間露光画素の画素値、GAINは、長時間露光画素と短時間露光画素との露光比、αは、前記適用ブレンド比率、上記式に従って前記出力画像または前記中間画像の色Cの画素値CWを算出する前記1~5いずれかに記載の画像処理装置。7前記画素情報合成部は、前記適用ブレンド比率を適用した長時間露光画素と短時間露光画素のブレンド処理によって中間画像を生成し、さらに、生成した中間画像を構成する同一色の画素値のブレンド処理により最終的な出力画像を生成する前記1~6いずれかに記載の画像処理装置。8前記画素情報合成部は、長時間露光画素と短時間露光画素の混在したRGB配列を有する画像データを入力し、RGB各色単位で、同一色の長時間露光画素と短時間露光画素をブレンドして前記出力画像または前記中間画像の画素値を決定する前記1~7いずれかに記載の画像処理装置。9前記画素情報合成部は、前記RGB配列を有する画像データ中のG画素データのみを適用して前記適用ブレンド比率を決定する処理を行う前記8に記載の画像処理装置。さらに、上記した装置およびシステムにおいて実行する処理の方法や、処理を実行させるプログラムおよびプログラムを記録した記録媒体も本開示の構成に含まれる。また、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させるか、あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。例えば、プログラムは記録媒体に予め記録しておくことができる。記録媒体からコンピュータにインストールする他、LANLocalAreaNetwork、インターネットといったネットワークを介してプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。なお、明細書に記載された各種の処理は、記載に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。また、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。"