(57)【要約】【課題】画像の出力周期よりも短い期間での高速読み出しを用いて機能を向上させることができるようにする。【解決手段】撮像素子は、画素が行列状に配置された画素アレイ部と、画素アレイ部の画像の読み出しを制御する制御部とを備え、制御部は、１枚の画像を外部に出力する周期内で、画素アレイ部の画像の読み出しを２回以上行わせる。本技術は、例えば、メモリ領域を備える撮像素子等に適用できる。【選択図】図１
2018191230.tif 000002
【特許請求の範囲】
【請求項１】
画素が行列状に配置された画素アレイ部と、
前記画素アレイ部の画像の読み出しを制御する制御部と
を備え、
前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行わせる
撮像素子。
【請求項２】
前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部に前記画像の読み出しを２回以上行わせる第１の動作モードと、１回の前記画像の読み出しを行わせる第２の動作モードとを切り替える制御を行う
請求項１に記載の撮像素子。
【請求項３】
前記画像に対して所定の特徴量を検出する画像特徴検出部と、
前記画像に対して所定の信号処理を実行する信号処理部と
をさらに備え、
前記特徴量を示す特徴量情報は、信号処理後の出力画像に付加されて、外部に出力される
請求項１に記載の撮像素子。
【請求項４】
前記画像特徴検出部は、前記周期内で読み出した複数枚の画像を用いて、画像に含まれるフリッカ成分を補正するためのフリッカ情報を、前記特徴量として検出する
請求項３に記載の撮像素子。
【請求項５】
前記信号処理部は、前記周期内で読み出した複数枚の画像を用いて、時間方向のノイズの周期性を検出して、ノイズを低減する３D-NR処理を実行する
請求項３に記載の撮像素子。
【請求項６】
前記信号処理部は、前記周期内で読み出した複数枚の画像を用いて、HDR画像を生成する処理を実行する
請求項３に記載の撮像素子。
【請求項７】
画素が行列状に配置された画素アレイ部と、前記画素アレイ部の画像の読み出しを制御する制御部とを備える撮像素子が、
１枚の画像を出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行う
撮像素子の駆動方法。
【請求項８】
画素が行列状に配置された画素アレイ部と、
前記画素アレイ部の画像の読み出しを制御する制御部と
を備え、
前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行わせる
撮像素子
を備える電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、撮像素子及びその駆動方法、並びに、電子機器に関し、特に、画像の出力周期よりも短い期間での高速読み出しを用いて機能を向上させることができるようにした撮像素子及びその駆動方法、並びに、電子機器に関する。
【背景技術】
【０００２】
１フレーム期間に、画像出力用の露光条件を用いた撮像と、その画像出力用の露光条件よりも露光時間が長いまたは短い検波用の露光条件を用いた撮像を行い、画像出力用の露光条件を適正に補正する撮像装置がある（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１６−６９３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
CMOS（Complementary Metal Oxide Semiconductor）センサ等の撮像素子においても、画像の出力周期よりも短い期間での高速読み出しが可能となってきており、高速読み出しを用いた新たな機能が望まれる。
【０００５】
本技術は、このような状況に鑑みてなされたものであり、画像の出力周期よりも短い期間での高速読み出しを用いて機能を向上させることができるようにするものである。
【課題を解決するための手段】
【０００６】
本技術の一側面の撮像素子は、画素が行列状に配置された画素アレイ部と、前記画素アレイ部の画像の読み出しを制御する制御部とを備え、前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行わせる。
【０００７】
本技術の一側面の撮像素子の駆動方法は、画素が行列状に配置された画素アレイ部と、前記画素アレイ部の画像の読み出しを制御する制御部とを備える撮像素子が、１枚の画像を出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行う。
【０００８】
本技術の一側面の電子機器は、画素が行列状に配置された画素アレイ部と、前記画素アレイ部の画像の読み出しを制御する制御部とを備え、前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行わせる撮像素子を備える。
【０００９】
本技術の一側面においては、１枚の画像を外部に出力する周期内で、画素アレイ部の画像の読み出しが２回以上行われる。
【００１０】
撮像素子は、独立した装置であっても良いし、１つの装置を構成している内部ブロックであっても良い。
【発明の効果】
【００１１】
本技術の一側面によれば、画像の出力周期よりも短い期間での高速読み出しを用いて機能を向上させることができる。
【００１２】
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
【図面の簡単な説明】
【００１３】
【図１】本技術を適用した撮像素子の概略構成を示すブロック図である。
【図２】撮像素子の３層積層構造を説明する図である。
【図３】特徴量検出処理を説明する図である。
【図４】信号処理を説明する図である。
【図５】第１の動作モードを説明する図である。
【図６】第１の動作モードによる撮像処理を説明するフローチャートである。
【図７】第２の動作モードを説明する図である。
【図８】第２の動作モードによる撮像処理を説明するフローチャートである。
【図９】動作モードを切り替える切替え動作を説明する図である。
【図１０】動作モード切替え処理を説明するフローチャートである。
【図１１】特徴量情報としてフリッカ情報を出力する具体例を説明する図である。
【図１２】特徴量情報としてフリッカ情報を出力する具体例を説明する図である。
【図１３】出力画像としてHDR画像を出力する具体例を説明する図である。
【図１４】本技術を適用した電子機器としての撮像装置の構成例を示すブロック図である。
【図１５】イメージセンサの使用例を示す図である。
【図１６】車両制御システムの概略的な構成の一例を示すブロック図である。
【図１７】車外情報検出部及び撮像部の設置位置の一例を示す説明図である。
【発明を実施するための形態】
【００１４】
以下、本技術を実施するための形態（以下、実施の形態という）について説明する。なお、説明は以下の順序で行う。
１．撮像素子の構成例
２．第１の動作モードの説明
３．第２の動作モードの説明
４．動作モード切替え処理の説明
５．第１の動作モードにおいて特徴量情報としてフリッカ情報を出力する例
６．第１の動作モードにおいて出力画像としてHDR画像を出力する例
７．電子機器への適用例
８．イメージセンサの使用例
９．移動体への応用例
【００１５】
＜１．撮像素子の構成例＞
図１は、本技術を適用した撮像素子の概略構成を示すブロック図である。
【００１６】
図１の撮像素子１は、画素領域１１、メモリ領域１２、ロジック領域１３、及び制御領域１４を有している。
【００１７】
（基板構成例）
撮像素子１は、図２に示されるように、３枚の半導体基板３１乃至３３を積層した３層構造により形成することができる。
【００１８】
より具体的には、図２のAに示されるように、３枚の半導体基板３１乃至３３のうち、入射光側の第１の半導体基板３１には画素領域１１を形成し、真ん中の第２の半導体基板３２にはメモリ領域１２を形成し、第２の半導体基板３２の下層の第３の半導体基板３３に、ロジック領域１３と制御領域１４を形成した構成を採用することができる。
【００１９】
あるいはまた、図２のBに示されるように、３枚の半導体基板３１乃至３３のうち、第１の半導体基板３１には画素領域１１と制御領域１４を形成し、第２の半導体基板３２にはメモリ領域１２を形成し、第３の半導体基板３３に、ロジック領域１３を形成した構成とすることもできる。
【００２０】
３枚の半導体基板３１乃至３３どうしは、例えば、貫通ビアやCu-Cuの金属結合により電気的に接続される。
【００２１】
撮像素子１は、このように、３枚の半導体基板３１乃至３３を積層した３層構造とすることで、画素信号を生成する画素領域１１と、その制御を行う制御領域１４、及び、画素アレイ部２１で撮影された画像に対する所定の信号処理を行うロジック領域１３に加えて、複数枚の画像を一時記憶するメモリ領域１２も備えた構成とされている。
【００２２】
図１の説明に戻り、画素領域１１は、画素アレイ部２１とカラムAD変換部２２を有し、メモリ領域１２は、フレームメモリ２３を有する。また、ロジック領域１３は、画像特徴検出部２４及び信号処理部２５を有し、制御領域１４は、制御部２６を有する。
【００２３】
画素領域１１の画素アレイ部２１には、入射光の光量に応じた光電荷を生成して蓄積する光電変換部を有する画素２０が行方向及び列方向の行列状に２次元配置されている。カラムAD変換部２２は、２次元配置された各画素２０から出力されるアナログの画素信号をデジタルの画素信号に変換して、メモリ領域１２及びロジック領域１３の少なくとも１一方に出力する。画素アレイ部２１及びカラムAD変換部２２は、制御部２６から供給されるタイミング信号等にしたがって、駆動される。
【００２４】
メモリ領域１２のフレームメモリ２３は、例えば、DRAM(Dynamic Read Only Memory)等の揮発性メモリで構成され、２枚以上の画像を記憶する記憶領域を有している。メモリ領域１２は、カラムAD変換部２２から供給される画像をフレームメモリ２３に一時記憶するとともに、その画像を、制御部２６の制御に基づいて、ロジック領域１３に出力する。
【００２５】
ロジック領域１３の画像特徴検出部２４は、画素アレイ部２１で取得された画像に対して所定の特徴量を検出する。画像特徴検出部２４が検出する画像特徴量の例は、図３を参照して後述する。
【００２６】
画像特徴検出部２４が、どのような画像の特徴量を検出するかは、制御部２６から指示される。画像特徴検出部２４は、制御部２６からの指示に従い、必要に応じて、フレームメモリ２３に記憶されている１枚以上の画像を取得して、画像の特徴量を検出する。なお、図１では、制御部２６からロジック領域１３への制御信号の図示が省略されている。
【００２７】
信号処理部２５は、画素アレイ部２１で取得された画像に対して、所定の信号処理を施し、処理後の画像の画像信号を、撮像素子１の後段（外部）に出力する。信号処理部２５は、処理後の画像を出力する際、画像特徴検出部２４によって検出された特徴量を示す特徴量情報を、出力画像に付加して出力する。信号処理部２５が実行することができる信号処理の例は、図４を参照して後述する。信号処理部２５が、どのような信号処理を実行するかは、制御部２６から指示される。
【００２８】
制御領域１４の制御部２６は、撮像素子１の全体の動作を制御する。
【００２９】
例えば、制御部２６は、所定のクロック信号やタイミング信号を、各画素２０やカラムAD変換部２２に供給することにより、画素２０及びカラムAD変換部２２の駆動を制御する。また、制御部２６は、所定のクロック信号やタイミング信号をメモリ領域１２に供給し、フレームメモリ２３への画像（データ）の書き込み、及び、フレームメモリ２３からの画像（データ）の読み出しを制御する。
【００３０】
さらに、制御部２６は、画像特徴検出部２４に対して、画像に対する所定の特徴量の検出を指示し、信号処理部２５に対して、画像に対して施す所定の信号処理の内容を指示する。
【００３１】
撮像素子１は、ロジック領域１３が１枚の画像を出力する周期内で、画素アレイ部２１に画像の読み出しを２回以上行わせる第１の動作モードと、１回の画像の読み出しを行わせる第２の動作モードの少なくとも２つの動作モードによる撮像を行うことができる。制御部２６は、第１の動作モードと第２の動作モードを切り替える制御を行う。
【００３２】
以上のように構成される撮像素子１によれば、第１の動作モードにおいて、１枚の画像を出力する周期内で、高速読み出しにより、素子内部で複数枚の撮像を行うことができる。例えば、１枚の画像を出力する３０ｆｐｓ期間内に、素子内部では１２０ｆｐｓで４枚の画像を撮像することができる。３０ｆｐｓ期間とは、３０ｆｐｓ（frame per seccond）における画像１枚当たりの時間であり、１０００／３０＝約３３．３３msecである。
【００３３】
これにより、この素子内部で得られた複数枚の画像を積算、合成等することにより、１回の撮像では実現できない画像を、１枚の出力画像として出力することができる。
【００３４】
また、この素子内部で得られた複数枚の画像を用いて各画像の特徴量を検出して、特徴量情報として出力画像とともに出力することにより、高速読み出しによる１枚の画像では検出できない情報を付加情報として出力することができる。
【００３５】
したがって、撮像素子１によれば、１回の撮像では実現できない画像を、１枚の出力画像として出力したり、素子内部で得られた複数枚の画像を用いて１枚の画像では検出できない情報を付加情報として出力することができるので、撮像素子１としての機能を向上させることができる。
【００３６】
図３は、画像特徴検出部２４が実行する特徴量検出処理の例を示している。
【００３７】
例えば、画像特徴検出部２４は、画像を構成する各画素の画素値のピーク値（最大値又は最小値の少なくとも一方）や平均値（APL）などの統計情報を、画像の特徴量として検出する。
【００３８】
また例えば、画像特徴検出部２４は、複数枚の画像から注目被写体の動き量を示す動き量情報を、画像の特徴量として検出する。例えば、４枚の画像から、時間方向に隣接する画像間の所定画素の動き量として、10,-5,20が検出された場合、10,-5,20のセットを、特徴量情報として出力画像とともに出力してもよいし、４枚の画像における所定画素の最終的な動き量である25＝10-5+20を、特徴量情報として出力画像とともに出力してもよい。
【００３９】
また例えば、画像特徴検出部２４は、画像に含まれるフリッカ成分を補正するためのフリッカ情報を、画像の特徴量として検出する。また例えば、画像特徴検出部２４は、画像内の注目オブジェクトの領域を示す領域情報を、画像の特徴量として検出する。例えば、注目オブジェクト領域として、画像内の顔領域を示す顔領域情報を、画像の特徴量として検出する。
【００４０】
図４は、信号処理部２５が実行する信号処理の例を示している。
【００４１】
例えば、信号処理部２５は、画素アレイ部２１で撮像された１枚の画像に対して、ホワイトバランス調整処理、ガンマ補正処理、デモザイク処理、ノイズリダクション処理（NR処理）、欠陥補正処理等の信号処理を行う。
【００４２】
また例えば、信号処理部２５は、画像特徴検出部２４により検出された顔領域情報に基づいて、顔領域のみの画像を出力画像として生成するため、顔領域を抽出する領域抽出処理を行う。なお、領域抽出処理は、顔領域に限らず、所望のオブジェクト領域を抽出することができる。
【００４３】
また、信号処理部２５は、画素領域１１から供給される１枚の画像と、メモリ領域１２に記憶されている１枚以上の画像の複数枚の画像を用いて所定の信号処理を行い、処理後の画像を、撮像素子１の後段（外部）に出力することも可能である。
【００４４】
複数枚の画像を用いた所定の信号処理としては、例えば、信号処理部２５は、時間方向に連続する複数枚の画像から、時間方向のノイズの周期性を検出し、検出したノイズの周期性に基づいてノイズを低減する３D-NR処理を、出力する各画像に対して実行する。
【００４５】
また例えば、複数枚の画像を用いた所定の信号処理として、信号処理部２５は、露光時間を第１の時間（短露光時間）に設定して取得した画像と、第１の時間よりも長い第２の時間（長露光時間）に設定して取得した画像とを用いて、露光時間の異なる２枚の画像から、ダイナミックレンジを拡大したHDR画像を生成する処理を実行し、得られたHDR画像を出力する。
【００４６】
信号処理部２５は、上述した信号処理以外の処理を行ってもよい。また、所定の画像に対して、複数の処理を実行してもよい。
【００４７】
第１の動作モードにおいて、信号処理部２５が出力する出力画像は、高速読み出しにより撮像された複数枚の画像のなかの所定の１枚そのもの、または、それを信号処理した処理後の画像であってもよいし、高速読み出しにより撮像された複数枚の画像を用いて新たに生成された画像であってもよい。
【００４８】
＜２．第１の動作モードの説明＞
図５は、第１の動作モードを説明する図である。
【００４９】
図５の上側に示されるタイムチャートにおいて、横軸は時間を表し、縦軸は画素アレイ部２１の垂直方向のライン位置を示している。
【００５０】
また、タイムチャートにおいて、太実線は、画素アレイ部２１からカラムAD変換部２２への画素信号の読み出しを表し、太破線は、ロジック領域１３から撮像素子１の後段（外部）への画像の出力を表す。
【００５１】
タイムチャートにおいて、太実線及び太破線が、斜め線で描画されているのは、画素アレイ部２１における画素信号の読み出し、及び、撮像素子１の後段への画像の出力が、行単位に順次実行されることを示している。
【００５２】
図５に示される第１の動作モードの例では、撮像素子１は、画素アレイ部２１における画像の読み出しを１２０ｆｐｓで４回実行し、後段への画像の出力を３０ｆｐｓで実行する。したがって、画素アレイ部２１は、１枚の画像を出力する周期である３０ｆｐｓ期間内で、４枚の画像の読み出しを行う。
【００５３】
信号処理部２５は、３０ｆｐｓ期間に取得される４枚の画像を用いて、所定の信号処理を実行し、出力画像を生成する。
【００５４】
画像特徴検出部２４は、３０ｆｐｓ期間に取得される４枚の画像を用いて、所定の特徴量検出処理を実行する。画像特徴検出部２４によって検出された特徴量が、特徴量情報として、信号処理部２５による信号処理後の出力画像に付加されて、撮像素子１の外部へ出力される。
【００５５】
図６のフローチャートを参照して、第１の動作モードによる撮像素子１の撮像処理について説明する。この処理は、例えば、撮像素子１の外部から、第１の動作モードによる撮像の指令が供給されたとき開始される。
【００５６】
初めに、ステップＳ１において、制御部２６は、１２０ｆｐｓによる画像の読み出しを画素アレイ部２１に行わせる。画素アレイ部２１は、１２０ｆｐｓで画像の読み出しを開始する。画素アレイ部２１では、例えば、フォトダイオード等で構成される光電変換部に蓄積されている信号をリセット後、露光（受光）を開始し、所定の期間経過後に、カラムAD変換部２２に読み出す一連の動作を、行列状に２次元配置された各画素２０に対して行単位に順次行うことで、１枚の画像が取得される。第１の動作モードでは、画素アレイ部２１は、３０ｆｐｓ期間に４回の撮像を実行する。
【００５７】
ステップＳ２において、画像特徴検出部２４は、３０ｆｐｓ期間に取得された複数枚（４枚）の画像を用いて、所定の特徴量検出処理を実行する。
【００５８】
ステップＳ３において、信号処理部２５は、３０ｆｐｓ期間に取得された複数枚（４枚）の画像を用いて所定の信号処理を実行し、出力画像を生成する。
【００５９】
ステップＳ４において、信号処理部２５は、画像特徴検出部２４によって検出された特徴量を特徴量情報として出力画像に付加した画像信号を、撮像素子１の外部に出力する。
【００６０】
第１の動作モードでは、上述したステップＳ１乃至Ｓ４の処理が、繰り返し実行される。
【００６１】
なお、信号処理部２５により実行される信号処理が、３０ｆｐｓ期間に取得される４枚の画像のなかから、所望の１枚の画像を選択する処理である場合には、４枚の画像のなかの所定の１枚が出力画像とされる。したがって、出力画像は、４枚の画像を用いて新たな画像を生成したものとは限らない。
【００６２】
＜３．第２の動作モードの説明＞
図７は、第２の動作モードを説明する図である。
【００６３】
図７に示される第２の動作モードの例では、撮像素子１は、画素アレイ部２１の画像の読み出しを１２０ｆｐｓで１回実行し、後段への画像の出力を３０ｆｐｓで実行する。したがって、画素アレイ部２１は、１２０ｆｐｓで高速に読み出した１枚の画像を、３０ｆｐｓの遅い速度で、外部に出力する。
【００６４】
信号処理部２５は、３０ｆｐｓ期間内で取得される１枚の画像を用いて、所定の信号処理を実行し、出力画像を生成する。
【００６５】
画像特徴検出部２４は、３０ｆｐｓ期間内で取得される１枚の画像を用いて、所定の特徴量検出処理を実行する。画像特徴検出部２４よって検出された特徴量が、特徴量情報として、信号処理部２５による信号処理後の出力画像に付加されて、撮像素子１の外部へ出力される。
【００６６】
図８のフローチャートを参照して、第２の動作モードによる撮像素子１の撮像処理について説明する。この処理は、例えば、撮像素子１の外部から、第２の動作モードによる撮像の指令が供給されたとき開始される。
【００６７】
初めに、ステップＳ１１において、制御部２６は、１２０ｆｐｓによる画像の読み出しを画素アレイ部２１に行わせる。画素アレイ部２１は、１２０ｆｐｓで画像の読み出しを開始する。第２の動作モードでは、画素アレイ部２１は、３０ｆｐｓ期間内に１回の撮像を実行する。
【００６８】
ステップＳ１２において、画像特徴検出部２４は、画素アレイ部２１で取得された１枚の画像に対して、所定の特徴量検出処理を実行する。第２の動作モードにおける特徴量検出処理は、第１の動作モードにおける特徴量検出処理と同じでも異なっていてもよい。
【００６９】
ステップＳ１３において、信号処理部２５は、画素アレイ部２１で取得された１枚の画像を用いて所定の信号処理を実行し、出力画像を生成する。
【００７０】
ステップＳ１４において、信号処理部２５は、画像特徴検出部２４によって検出された特徴量を特徴量情報として出力画像に付加した画像信号を、撮像素子１の外部に出力する。
【００７１】
第２の動作モードでは、上述したステップＳ１１乃至Ｓ１４の処理が、繰り返し実行される。
【００７２】
＜４．動作モード切替え処理の説明＞
図９は、第１の動作モードから第２の動作モードへ動作モードを切り替える切替え動作を説明する図である。
【００７３】
制御部２６は、第１の動作モードと第２の動作モードを、所定のタイミングで切り替える制御を行う。
【００７４】
例えば、１２０ｆｐｓで４回の画像読み出しを実行し、３０ｆｐｓで１枚の画像を出力する第1のモードは、消費電力が大きくなる。そのため、例えば、消費電力が第１の閾値以上まで上昇したことが検出された場合、制御部２６は、動作モードを、第１の動作モードから第２の動作モードに変更する制御を行う。また、消費電力が第２の閾値以下まで下がった場合には、制御部２６は、動作モードを、第２の動作モードから第１の動作モードに変更する制御を行う。
【００７５】
図１０のフローチャートを参照して、動作モードを切り替える動作モード切替え処理について説明する。
【００７６】
初めに、ステップＳ２１において、制御部２６は、第１の動作モードで、画素アレイ部２１の画像読み出し及び出力画像の生成を行わせる。第１の動作モードでは、図６のフローチャートを参照して説明したように、３０ｆｐｓ期間に、１２０ｆｐｓによる４回の画像読み出しと、１枚の出力画像の生成が実行される。
【００７７】
ステップＳ２２において、制御部２６は、電力センサで検出された撮像素子１の消費電力を示す消費電力情報に基づいて、撮像素子１の消費電力が第１の閾値以上であるかを判定する。電力センサは、撮像素子１の内部にあっても、外部にあってもよい。
【００７８】
ステップＳ２２で、撮像素子１の消費電力が第１の閾値以上であると判定されるまで、ステップＳ２１の処理が繰り返される。これにより、撮像素子１の消費電力が第１の閾値より低いあいだは、第１の動作モードによる撮像処理が継続して実行される。
【００７９】
そして、ステップＳ２２で、撮像素子１の消費電力が第１の閾値以上であると判定された場合、処理はステップＳ２３に進み、制御部２６は、第２の動作モードで、画素アレイ部２１の画像読み出し及び出力画像の生成を行わせる。第２の動作モードでは、図８のフローチャートを参照して説明したように、３０ｆｐｓ期間に、１２０ｆｐｓによる１回の画像読み出しと、１枚の出力画像の生成が実行される。
【００８０】
ステップＳ２４において、制御部２６は、電力センサで検出された撮像素子１の消費電力を示す消費電力情報に基づいて、撮像素子１の消費電力が第２の閾値以下であるかを判定する。
【００８１】
ステップＳ２４で、撮像素子１の消費電力が第２の閾値以下であると判定されるまで、ステップＳ２３の処理が繰り返される。これにより、撮像素子１の消費電力が第２の閾値より大きいあいだは、第２の動作モードによる撮像処理が継続して実行される。
【００８２】
そして、ステップＳ２４で、撮像素子１の消費電力が第２の閾値以下であると判定された場合、処理はステップＳ２１に戻され、上述したステップＳ２１の処理が実行される。すなわち、動作モードが第２の動作モードから第１の動作モードに変更され、第１の動作モードによる撮像処理が開始される。
【００８３】
以上のように、撮像素子１は、撮像素子１の消費電力を考慮して、第１の動作モードと第２の動作モードを適応的に切り替えることができる。
【００８４】
なお、電力センサから消費電力情報を取得する代わりに、サーモセンサから温度情報を取得し、取得した温度情報が所定の閾値以下または以上であるか、等に基づいて、第１の動作モードと第２の動作モードを適応的に切り替えてもよい。
【００８５】
あるいはまた、動作モードの変更は、撮像素子１の外部からの動作指示に基づいて行うこともできる。
【００８６】
＜５．第１の動作モードにおいて特徴量情報としてフリッカ情報を出力する例＞
次に、図１１及び図１２を参照して、第１の動作モードにおいて特徴量情報としてフリッカ情報を出力する具体例について説明する。
【００８７】
各画素の露光および画素信号の読み出しを行単位で垂直方向に順次行うローリングシャッタ方式では、フォーカルプレーン歪みを低減するため、露光時間を短く設定することが望ましい。
【００８８】
しかしながら、露光時間を蛍光灯等の光源周期よりも短く設定すると、フリッカが発生する。
【００８９】
一般に、蛍光灯の照明の下で撮像を行うと、画像に縞状の輝度ムラや色ムラが発生する。特に輝度の高い部分と低い部分の縞パターンが画面上を流れるような現象が確認される。このような現象がフリッカであり、この現象は、交流電源に接続された蛍光灯が電源周波数の２倍の周期で点滅を繰り返していることと撮像素子の動作原理に起因する。
【００９０】
フリッカが発生しないためには、露光時間を、フリッカ周期の逓倍周期に設定して撮像すればよい。例えば、図１１のAに示されるように、光源周期が６０Ｈｚである場合、フリッカレス可能な最短の露光時間は、１０００／（６０＊２）＝８．３３msecとなる。
【００９１】
これに対して、図１１のBに示されるように、露光時間を、８．３３msecより短い時間に設定して撮像すると、フリッカが発生した画像となる。
【００９２】
また、８．３３msecより短い露光時間で撮像した場合には、露光期間が、光源のフリッカ周期のどの部分の波の期間であるのかがわからないため、フリッカによる輝度ムラを補正することもできない。
【００９３】
そこで、例えば、撮像素子１は、第１の動作モードにおいて、フォーカルプレーン歪みを低減するため、露光時間を光源のフリッカ周期よりも短く設定した画像を、出力画像として出力するとともに、特徴量情報としてフリッカ情報を出力する。フリッカ情報とは、撮像素子１の後段のISP（Image Signal Processor）において、出力画像に含まれるフリッカによる輝度ムラを補正するための補正情報である。
【００９４】
具体的には、撮像素子１は、信号処理部２５が１枚の画像を出力する周期（以下、画像出力周期とも称する。）内で、画素アレイ部２１に画像の読み出しを２回以上行わせ、１枚の画像を出力する周期内で行った複数枚の画像の読み出し期間に、フリッカ周期の1/2周期、より好ましくはフリッカ周期の１周期が含まれるようにする。
【００９５】
図１２の例では、画像出力周期内で、画素アレイ部２１が４回の画像読み出しを行っており、２回の画像読み出し期間がフリッカ周期の1/2周期となり、４回の画像読み出し期間がフリッカ周期の1周期となっている。
【００９６】
画像特徴検出部２４は、画像出力周期内で得られる、４枚の画像それぞれについて、輝度（画素値）のヒストグラム情報をフリッカ情報として生成する。信号処理部２５は、画像特徴検出部２４によって検出された４枚の画像それぞれのフリッカ情報を特徴量情報として出力画像に付加した出力信号を、撮像素子１の外部に出力する。これにより、撮像素子１の後段のISPが、フリッカ周期を検出することができ、出力画像のフリッカ現象を補正したり、撮像素子１が次に行う撮像の露光時間をフリッカ周期の逓倍周期に調整したりすることができる。出力画像としては、例えば、４枚の画像のうちの所定の１枚が出力される。
【００９７】
以上のように、撮像素子１は、１枚の画像を出力する周期（例えば、３０ｆｐｓ期間）に、高速読み出しによる複数枚の撮像を素子内部で行った結果を用いて、高速読み出しにより撮像した１枚の出力画像では得られない情報を付加情報として付加して出力することができる。これにより、出力された画像を処理する画像処理装置（例えば、ISP）では、付加情報を用いて、高画質な画像を得ることができる。
【００９８】
＜６．第１の動作モードにおいて出力画像としてHDR画像を出力する例＞
次に、図１３を参照して、第１の動作モードにおいて出力画像としてHDR画像を出力する具体例について説明する。
【００９９】
制御部２６は、画像出力周期内で、画素アレイ部２１に２回の画像読み出しを行わせる。１回目に読み出される画像は、露光時間が短い時間（第１の露光時間）に設定された短露光画像であり、２回目に読み出される画像は、露光時間が第１の露光時間よりも長い第２の露光時間に設定された長露光画像とされる。
【０１００】
信号処理部２５は、露光時間の異なる２枚の画像（短露光画像及び長露光画像）から、ダイナミックレンジを拡大したHDR画像を生成する。
【０１０１】
画像特徴検出部２４は、短露光画像及び長露光画像それぞれの画素値の統計情報、具体的には、画素値のピーク値や平均値などを、画像の特徴量として検出する。
【０１０２】
信号処理部２５は、検出された画像の特徴量を特徴量情報として、出力画像としてのHDR画像に付加した画像信号を、撮像素子１の外部に出力する。
【０１０３】
なお、撮像素子１は、画像出力周期内で、各画像の露光時間を変えて３枚以上の撮像を行い、３枚以上の画像を合成したHDR画像を生成することも可能である。
【０１０４】
以上のように、撮像素子１は、１枚の画像を出力する周期（例えば、３０ｆｐｓ期間）に、高速読み出しによる複数枚の撮像を素子内部で行った結果を用いて、複数枚の画像を用いた所定の合成画像を生成し、出力画像として出力することができる。これにより、出力された画像信号を処理する画像処理装置（ISP）が行う処理の負荷を軽減することができる。
【０１０５】
＜７．電子機器への適用例＞
本技術は、撮像素子への適用に限られるものではない。即ち、本技術は、デジタルスチルカメラやビデオカメラ等の撮像装置や、撮像機能を有する携帯端末装置や、画像読取部に撮像素子を用いる複写機など、画像取込部（光電変換部）に撮像素子を用いる電子機器全般に対して適用可能である。撮像素子は、ワンチップとして形成された形態であってもよいし、撮像部と信号処理部または光学系とがまとめてパッケージングされた撮像機能を有するモジュール状の形態であってもよい。
【０１０６】
図１４は、本技術を適用した電子機器としての、撮像装置の構成例を示すブロック図である。
【０１０７】
図１４の撮像装置１００は、レンズ群などからなる光学部１０１、図１の撮像素子１の構成が採用される撮像素子（撮像デバイス）１０２、およびカメラ信号処理回路であるDSP(Digital Signal Processor)回路１０３を備える。また、撮像装置１００は、フレームメモリ１０４、表示部１０５、記録部１０６、操作部１０７、および電源部１０８も備える。DSP回路１０３、フレームメモリ１０４、表示部１０５、記録部１０６、操作部１０７および電源部１０８は、バスライン１０９を介して相互に接続されている。
【０１０８】
光学部１０１は、被写体からの入射光（像光）を取り込んで撮像素子１０２の撮像面上に結像する。撮像素子１０２は、光学部１０１によって撮像面上に結像された入射光の光量を画素単位で電気信号に変換して画素信号として出力する。この撮像素子１０２として、図１の撮像素子１、即ち、１枚の出力画像とともに、高速読み出しにより素子内部で得た複数枚の画像に基づいて算出した所定の画像特徴量情報を付加情報として出力する撮像素子を用いることができる。
【０１０９】
表示部１０５は、例えば、LCD(Liquid Crystal Display)や有機EL(Electro Luminescence)ディスプレイ等の薄型ディスプレイで構成され、撮像素子１０２で撮像された動画または静止画を表示する。記録部１０６は、撮像素子１０２で撮像された動画または静止画を、ハードディスクや半導体メモリ等の記録媒体に記録する。
【０１１０】
操作部１０７は、ユーザによる操作の下に、撮像装置１００が持つ様々な機能について操作指令を発する。電源部１０８は、DSP回路１０３、フレームメモリ１０４、表示部１０５、記録部１０６および操作部１０７の動作電源となる各種の電源を、これら供給対象に対して適宜供給する。
【０１１１】
上述したように、撮像素子１０２として、機能が向上された撮像素子１を用いることで、後段のDSP回路１０３における処理負荷が軽減される。また、DSP回路１０３において、出力画像に付加されて出力されてくる画像特徴量情報を用いることで、撮像画像を高画質化または高機能化する処理を実行することができる。従って、ビデオカメラやデジタルスチルカメラ、さらには携帯電話機等のモバイル機器向けカメラモジュールなどの撮像装置１００においても、撮像画像の高画質化または高機能化を図ることができる。
【０１１２】
＜８．イメージセンサの使用例＞
図１５は、上述の撮像素子１をイメージセンサとして用いた使用例を示す図である。
【０１１３】
上述の撮像素子１を用いたイメージセンサは、例えば、以下のように、可視光や、赤外光、紫外光、X線等の光をセンシングする様々なケースに使用することができる。
【０１１４】
・ディジタルカメラや、カメラ機能付きの携帯機器等の、鑑賞の用に供される画像を撮影する装置
・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の用に供される装置
・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、TVや、冷蔵庫、エアーコンディショナ等の家電に供される装置
・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの用に供される装置
・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの用に供される装置
・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の用に供される装置
・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの用に供される装置
・畑や作物の状態を監視するためのカメラ等の、農業の用に供される装置
【０１１５】
＜９．移動体への応用例＞
本開示に係る技術（本技術）は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット等のいずれかの種類の移動体に搭載される装置として実現されてもよい。
【０１１６】
図１６は、本開示に係る技術が適用され得る移動体制御システムの一例である車両制御システムの概略的な構成例を示すブロック図である。
【０１１７】
車両制御システム１２０００は、通信ネットワーク１２００１を介して接続された複数の電子制御ユニットを備える。図１６に示した例では、車両制御システム１２０００は、駆動系制御ユニット１２０１０、ボディ系制御ユニット１２０２０、車外情報検出ユニット１２０３０、車内情報検出ユニット１２０４０、及び統合制御ユニット１２０５０を備える。また、統合制御ユニット１２０５０の機能構成として、マイクロコンピュータ１２０５１、音声画像出力部１２０５２、及び車載ネットワークＩ／Ｆ（ｉｎｔｅｒｆａｃｅ）１２０５３が図示されている。
【０１１８】
駆動系制御ユニット１２０１０は、各種プログラムにしたがって車両の駆動系に関連する装置の動作を制御する。例えば、駆動系制御ユニット１２０１０は、内燃機関又は駆動用モータ等の車両の駆動力を発生させるための駆動力発生装置、駆動力を車輪に伝達するための駆動力伝達機構、車両の舵角を調節するステアリング機構、及び、車両の制動力を発生させる制動装置等の制御装置として機能する。
【０１１９】
ボディ系制御ユニット１２０２０は、各種プログラムにしたがって車体に装備された各種装置の動作を制御する。例えば、ボディ系制御ユニット１２０２０は、キーレスエントリシステム、スマートキーシステム、パワーウィンドウ装置、あるいは、ヘッドランプ、バックランプ、ブレーキランプ、ウィンカー又はフォグランプ等の各種ランプの制御装置として機能する。この場合、ボディ系制御ユニット１２０２０には、鍵を代替する携帯機から発信される電波又は各種スイッチの信号が入力され得る。ボディ系制御ユニット１２０２０は、これらの電波又は信号の入力を受け付け、車両のドアロック装置、パワーウィンドウ装置、ランプ等を制御する。
【０１２０】
車外情報検出ユニット１２０３０は、車両制御システム１２０００を搭載した車両の外部の情報を検出する。例えば、車外情報検出ユニット１２０３０には、撮像部１２０３１が接続される。車外情報検出ユニット１２０３０は、撮像部１２０３１に車外の画像を撮像させるとともに、撮像された画像を受信する。車外情報検出ユニット１２０３０は、受信した画像に基づいて、人、車、障害物、標識又は路面上の文字等の物体検出処理又は距離検出処理を行ってもよい。
【０１２１】
撮像部１２０３１は、光を受光し、その光の受光量に応じた電気信号を出力する光センサである。撮像部１２０３１は、電気信号を画像として出力することもできるし、測距の情報として出力することもできる。また、撮像部１２０３１が受光する光は、可視光であっても良いし、赤外線等の非可視光であっても良い。
【０１２２】
車内情報検出ユニット１２０４０は、車内の情報を検出する。車内情報検出ユニット１２０４０には、例えば、運転者の状態を検出する運転者状態検出部１２０４１が接続される。運転者状態検出部１２０４１は、例えば運転者を撮像するカメラを含み、車内情報検出ユニット１２０４０は、運転者状態検出部１２０４１から入力される検出情報に基づいて、運転者の疲労度合い又は集中度合いを算出してもよいし、運転者が居眠りをしていないかを判別してもよい。
【０１２３】
マイクロコンピュータ１２０５１は、車外情報検出ユニット１２０３０又は車内情報検出ユニット１２０４０で取得される車内外の情報に基づいて、駆動力発生装置、ステアリング機構又は制動装置の制御目標値を演算し、駆動系制御ユニット１２０１０に対して制御指令を出力することができる。例えば、マイクロコンピュータ１２０５１は、車両の衝突回避あるいは衝撃緩和、車間距離に基づく追従走行、車速維持走行、車両の衝突警告、又は車両のレーン逸脱警告等を含むＡＤＡＳ（Ａｄｖａｎｃｅｄ  Ｄｒｉｖｅｒ  Ａｓｓｉｓｔａｎｃｅ  Ｓｙｓｔｅｍ）の機能実現を目的とした協調制御を行うことができる。
【０１２４】
また、マイクロコンピュータ１２０５１は、車外情報検出ユニット１２０３０又は車内情報検出ユニット１２０４０で取得される車両の周囲の情報に基づいて駆動力発生装置、ステアリング機構又は制動装置等を制御することにより、運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
【０１２５】
また、マイクロコンピュータ１２０５１は、車外情報検出ユニット１２０３０で取得される車外の情報に基づいて、ボディ系制御ユニット１２０２０に対して制御指令を出力することができる。例えば、マイクロコンピュータ１２０５１は、車外情報検出ユニット１２０３０で検知した先行車又は対向車の位置に応じてヘッドランプを制御し、ハイビームをロービームに切り替える等の防眩を図ることを目的とした協調制御を行うことができる。
【０１２６】
音声画像出力部１２０５２は、車両の搭乗者又は車外に対して、視覚的又は聴覚的に情報を通知することが可能な出力装置へ音声及び画像のうちの少なくとも一方の出力信号を送信する。図１６の例では、出力装置として、オーディオスピーカ１２０６１、表示部１２０６２及びインストルメントパネル１２０６３が例示されている。表示部１２０６２は、例えば、オンボードディスプレイ及びヘッドアップディスプレイの少なくとも一つを含んでいてもよい。
【０１２７】
図１７は、撮像部１２０３１の設置位置の例を示す図である。
【０１２８】
図１７では、車両１２１００は、撮像部１２０３１として、撮像部１２１０１，１２１０２，１２１０３，１２１０４，１２１０５を有する。
【０１２９】
撮像部１２１０１，１２１０２，１２１０３，１２１０４，１２１０５は、例えば、車両１２１００のフロントノーズ、サイドミラー、リアバンパ、バックドア及び車室内のフロントガラスの上部等の位置に設けられる。フロントノーズに備えられる撮像部１２１０１及び車室内のフロントガラスの上部に備えられる撮像部１２１０５は、主として車両１２１００の前方の画像を取得する。サイドミラーに備えられる撮像部１２１０２，１２１０３は、主として車両１２１００の側方の画像を取得する。リアバンパ又はバックドアに備えられる撮像部１２１０４は、主として車両１２１００の後方の画像を取得する。撮像部１２１０１及び１２１０５で取得される前方の画像は、主として先行車両又は、歩行者、障害物、信号機、交通標識又は車線等の検出に用いられる。
【０１３０】
なお、図１７には、撮像部１２１０１ないし１２１０４の撮影範囲の一例が示されている。撮像範囲１２１１１は、フロントノーズに設けられた撮像部１２１０１の撮像範囲を示し、撮像範囲１２１１２，１２１１３は、それぞれサイドミラーに設けられた撮像部１２１０２，１２１０３の撮像範囲を示し、撮像範囲１２１１４は、リアバンパ又はバックドアに設けられた撮像部１２１０４の撮像範囲を示す。例えば、撮像部１２１０１ないし１２１０４で撮像された画像データが重ね合わせられることにより、車両１２１００を上方から見た俯瞰画像が得られる。
【０１３１】
撮像部１２１０１ないし１２１０４の少なくとも１つは、距離情報を取得する機能を有していてもよい。例えば、撮像部１２１０１ないし１２１０４の少なくとも１つは、複数の撮像素子からなるステレオカメラであってもよいし、位相差検出用の画素を有する撮像素子であってもよい。
【０１３２】
例えば、マイクロコンピュータ１２０５１は、撮像部１２１０１ないし１２１０４から得られた距離情報を基に、撮像範囲１２１１１ないし１２１１４内における各立体物までの距離と、この距離の時間的変化（車両１２１００に対する相対速度）を求めることにより、特に車両１２１００の進行路上にある最も近い立体物で、車両１２１００と略同じ方向に所定の速度（例えば、０ｋｍ／ｈ以上）で走行する立体物を先行車として抽出することができる。さらに、マイクロコンピュータ１２０５１は、先行車の手前に予め確保すべき車間距離を設定し、自動ブレーキ制御（追従停止制御も含む）や自動加速制御（追従発進制御も含む）等を行うことができる。このように運転者の操作に拠らずに自律的に走行する自動運転等を目的とした協調制御を行うことができる。
【０１３３】
例えば、マイクロコンピュータ１２０５１は、撮像部１２１０１ないし１２１０４から得られた距離情報を元に、立体物に関する立体物データを、２輪車、普通車両、大型車両、歩行者、電柱等その他の立体物に分類して抽出し、障害物の自動回避に用いることができる。例えば、マイクロコンピュータ１２０５１は、車両１２１００の周辺の障害物を、車両１２１００のドライバが視認可能な障害物と視認困難な障害物とに識別する。そして、マイクロコンピュータ１２０５１は、各障害物との衝突の危険度を示す衝突リスクを判断し、衝突リスクが設定値以上で衝突可能性がある状況であるときには、オーディオスピーカ１２０６１や表示部１２０６２を介してドライバに警報を出力することや、駆動系制御ユニット１２０１０を介して強制減速や回避操舵を行うことで、衝突回避のための運転支援を行うことができる。
【０１３４】
撮像部１２１０１ないし１２１０４の少なくとも１つは、赤外線を検出する赤外線カメラであってもよい。例えば、マイクロコンピュータ１２０５１は、撮像部１２１０１ないし１２１０４の撮像画像中に歩行者が存在するか否かを判定することで歩行者を認識することができる。かかる歩行者の認識は、例えば赤外線カメラとしての撮像部１２１０１ないし１２１０４の撮像画像における特徴点を抽出する手順と、物体の輪郭を示す一連の特徴点にパターンマッチング処理を行って歩行者か否かを判別する手順によって行われる。マイクロコンピュータ１２０５１が、撮像部１２１０１ないし１２１０４の撮像画像中に歩行者が存在すると判定し、歩行者を認識すると、音声画像出力部１２０５２は、当該認識された歩行者に強調のための方形輪郭線を重畳表示するように、表示部１２０６２を制御する。また、音声画像出力部１２０５２は、歩行者を示すアイコン等を所望の位置に表示するように表示部１２０６２を制御してもよい。
【０１３５】
以上、本開示に係る技術が適用され得る車両制御システムの一例について説明した。本開示に係る技術は、以上説明した構成のうち、例えば、撮像部１２０３１に適用され得る。具体的には、図１の撮像素子１を撮像部１２０３１に適用することができる。撮像部１２０３１に本開示に係る技術を適用することにより、撮像部１２０３１内部で得られた複数枚の画像を用いて１枚の画像では検出できない情報を付加情報として出力することができるので、車外情報検出ユニット１２０３０、統合制御ユニット１２０５０等の処理負荷を軽減することができる。また、出力画像に付加されて出力されてくる画像特徴量情報を用いることで、車外情報検出ユニット１２０３０等で、撮像画像を高画質化または高機能化する処理を実行することができるので、より見やすい撮影画像を生成したり、障害物等の検出精度を向上させることで、ドライバの疲労や負担を軽減することが可能になる。
【０１３６】
本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【０１３７】
例えば、上述した実施の形態の機能の一部を組み合わせた形態を採用することができる。
【０１３８】
本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる場合はもちろん、必ずしも時系列的に処理されなくとも、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで実行されてもよい。
【０１３９】
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、本明細書に記載されたもの以外の効果があってもよい。
【０１４０】
なお、本技術は以下のような構成も取ることができる。
（１）
画素が行列状に配置された画素アレイ部と、
前記画素アレイ部の画像の読み出しを制御する制御部と
を備え、
前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行わせる
撮像素子。
（２）
前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部に前記画像の読み出しを２回以上行わせる第１の動作モードと、１回の前記画像の読み出しを行わせる第２の動作モードとを切り替える制御を行う
前記（１）に記載の撮像素子。
（３）
前記画像に対して所定の特徴量を検出する画像特徴検出部と、
前記画像に対して所定の信号処理を実行する信号処理部と
をさらに備え、
前記特徴量を示す特徴量情報は、信号処理後の出力画像に付加されて、外部に出力される
前記（１）または（２）に記載の撮像素子。
（４）
前記画像特徴検出部は、前記周期内で読み出した複数枚の画像を用いて、画像に含まれるフリッカ成分を補正するためのフリッカ情報を、前記特徴量として検出する
前記（３）に記載の撮像素子。
（５）
前記信号処理部は、前記周期内で読み出した複数枚の画像を用いて、時間方向のノイズの周期性を検出して、ノイズを低減する３D-NR処理を実行する
前記（３）または（４）に記載の撮像素子。
（６）
前記信号処理部は、前記周期内で読み出した複数枚の画像を用いて、HDR画像を生成する処理を実行する
前記（３）または（４）に記載の撮像素子。
（７）
画素が行列状に配置された画素アレイ部と、前記画素アレイ部の画像の読み出しを制御する制御部とを備える撮像素子が、
１枚の画像を出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行う
撮像素子の駆動方法。
（８）
画素が行列状に配置された画素アレイ部と、
前記画素アレイ部の画像の読み出しを制御する制御部と
を備え、
前記制御部は、１枚の画像を外部に出力する周期内で、前記画素アレイ部の画像の読み出しを２回以上行わせる
撮像素子
を備える電子機器。
【符号の説明】
【０１４１】
１  撮像素子，  ２０  画素，  ２１  画素アレイ部，  ２３  フレームメモリ，  ２４  画像特徴検出部，  ２５  信号処理部，  ２６  制御部，  １００  撮像装置，  １０２  撮像素子
【図１】
2018191230.tif 000003
【図２】
2018191230.tif 000004
【図３】
2018191230.tif 000005
【図４】
2018191230.tif 000006
【図５】
2018191230.tif 000007
【図６】
2018191230.tif 000008
【図７】
2018191230.tif 000009
【図８】
2018191230.tif 000010
【図９】
2018191230.tif 000011
【図１０】
2018191230.tif 000012
【図１１】
2018191230.tif 000013
【図１２】
2018191230.tif 000014
【図１３】
2018191230.tif 000015
【図１４】
2018191230.tif 000016
【図１５】
2018191230.tif 000017
【図１６】
2018191230.tif 000018
【図１７】
2018191230.tif 000019