(57)【要約】【課題】  より短時間で、より周波数が高いフリッカを検出する。【解決手段】  本記事の一側面である画像信号処理装置は、フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部とを備える。本開示は、例えばフリッカ光源下で使用されるビデオカメラに適用することができる。【選択図】  図５
2016189521.tif 000002
【特許請求の範囲】
【請求項１】
フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、
前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部と
を備える画像信号処理装置。
【請求項２】
前記検出部は、前記複数の前記動画像のうち、第１の動画像のフレームの行毎の画素信号の積算値と、第２の動画像のフレームの行毎の画素信号の積算値との差分値に基づいて、前記動画像上に出現しているフリッカの周波数を演算する
請求項１に記載の画像信号処理装置。
【請求項３】
前記検出部は、前記複数の動画像の画角が重複する領域をフリッカ検出領域として特定し、前記複数の動画像の各フレームの前記フリッカ検出領域の画素信号に基づき、前記動画像上に出現しているフリッカを検出する
請求項２に記載の画像信号処理装置。
【請求項４】
前記第１の動画像の露光開始のタイミングと、前記第２の動画像の露光開始のタイミングとの時間位相差は、次式を満たす
時間位相差＞検出対象とするフリッカの周期／２
請求項２に記載の画像信号処理装置。
【請求項５】
前記動画像を撮像する複数の撮像部と、
前記複数の撮像部を制御して、前記動画像の前記フレーム周期が共通であって、異なる露光開始のタイミングで前記動画像を撮像させる撮像制御部と
をさらに備える請求項２に記載の画像信号処理装置。
【請求項６】
前記撮像制御部は、前記複数の撮像部を制御し、次式
時間位相差＞検出対象とするフリッカの周期／２
を満たす時間位相差ずつずらした露光開始のタイミングで前記動画像を撮像させる
請求項２に記載の画像信号処理装置。
【請求項７】
画像信号処理装置の画像信号処理方法において、
前記画像信号処理装置による、
フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得ステップと、
前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出ステップと
を含む画像信号処理方法。
【請求項８】
コンピュータを、
フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、
前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部と
して機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像信号処理装置、画像信号処理方法、およびプログラムに関し、特に、撮像された動画像上に発生しているフリッカを検出する場合に用いて好適な画像信号処理装置、画像信号処理方法、およびプログラムに関する。
【背景技術】
【０００２】
例えば、各画素信号のダイナミックレンジが広い画像を得るために、極めて短い露光時間で連続的に撮像を行い、その結果得られる複数の画像を合成する手法が知られている。このように、極短時間露光により撮像して得られる画像に、LEDや蛍光灯など電源電力の交流周波数に起因する揺らぎ（以下、フリッカと称する）を生じ得る光源（またはその照射範囲）が写っている場合、その影響が画像上に現れてしまう。
【０００３】
例えば、LED電球を用いた交通信号が画像に写っている場合、実際には常にいずれかの色のLED電球が点灯している交通信号が、その撮影の露光タイミングによっては全てのLED電球が消灯している状態で写ってしまうことが起こり得る。このような事態が、例えば車載されるドライブレコーダなどのカメラの撮像結果に生じると、該撮像結果が交通事故などの証拠としての効力を果たさなくなってしまう可能性がある。
【０００４】
そこで従来、動画像上に発生しているフリッカ（の周波数）を検出し、その検出結果に基づいて動画像を補正する技術が多数提案されている（例えば、特許文献１参照）。
【０００５】
図１は、特許文献１などで提案されている、動画像上に発生しているフリッカの周波数を検出する従来手法の一例を説明するための図である。
【０００６】
従来手法においては、所定のフレーム周期で連続的に撮像された各フレームにおいて水平方向の行毎に画素信号（輝度信号など）を積算し、連続する２フレーム間Ｆ１とＦ２、Ｆ２とＦ３などで各行の画素値の積算値の差分値（フレーム間差分）を算出する。そして、このフレーム間差分に基づいてフリッカ周期が算出される。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００３−１８９１２９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
上述したように、従来手法では、２フレーム間のフレーム間差分を算出するので、フリッカ周波数検出を開始するまでに、最低でも２フレーム周期に相当する時間が必要となる。また、従来手法では、画像上に垂直方向に現れる低周波のフリッカについては検知できるが、LED電球のように高い周波数で明滅する光源のフリッカは検出することができない。
【０００９】
本開示はこのような状況に鑑みてなされたものであり、より短時間で、より周波数が高いフリッカを検出できるようにするものである。
【課題を解決するための手段】
【００１０】
本開示の一側面である画像信号処理装置は、フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部とを備える。
【００１１】
前記検出部は、前記複数の前記動画像のうち、第１の動画像のフレームの行毎の画素信号の積算値と、第２の動画像のフレームの行毎の画素信号の積算値との差分値に基づいて、前記動画像上に出現しているフリッカの周波数を演算することができる。
【００１２】
前記検出部は、前記複数の動画像の画角が重複する領域をフリッカ検出領域として特定し、前記複数の動画像の各フレームの前記フリッカ検出領域の画素信号に基づき、前記動画像上に出現しているフリッカを検出するようにすることができる。
【００１３】
前記第１の動画像の露光開始のタイミングと、前記第２の動画像の露光開始のタイミングとの時間位相差は、次式を満たすことができる。
時間位相差＞検出対象とするフリッカの周期／２
【００１４】
本開示の一側面である画像信号処理装置は、前記動画像を撮像する複数の撮像部と、前記複数の撮像部を制御して、前記動画像の前記フレーム周期が共通であって、異なる露光開始のタイミングで前記動画像を撮像させる撮像制御部とをさらに備えることができる。
【００１５】
前記撮像制御部は、前記複数の撮像部を制御し、次式
時間位相差＞検出対象とするフリッカの周期／２
を満たす時間位相差ずつずらした露光開始のタイミングで前記動画像を撮像させることができる。
【００１６】
本開示の一側面である画像信号処理方法は、画像信号処理装置による、フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得ステップと、前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出ステップとを含む。
【００１７】
本開示の一側面であるプログラムは、コンピュータを、フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部として機能させる。
【００１８】
本開示の一側面においては、フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像が取得され、前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカが検出される。
【発明の効果】
【００１９】
本開示の一側面によれば、より短時間で、より周波数が高いフリッカを検出することができる。
【図面の簡単な説明】
【００２０】
【図１】動画像上に発生しているフリッカの周波数を検出する従来手法の一例を説明するための図である。
【図２】本開示による動画像上に発生しているフリッカの周波数を検出する方法の概要を説明するための図である。
【図３】本開示による動画像上に発生しているフリッカの周波数を検出する方法の概要を説明するための図である。
【図４】本開示による動画像上に発生しているフリッカの周波数を検出する方法の概要を説明するための図である。
【図５】本開示を適用した画像信号処理装置の構成例を示すブロック図である。
【図６】図５の画像信号処理装置を構成する第１撮像部乃至第２撮像部の配置例を示す図である。
【図７】第１撮像部乃至第４撮像部の画角とフリッカ検出範囲を示す図である。
【図８】第１撮像部乃至第４撮像部の露光タイミングを示す図である。
【図９】図５の画像信号処理装置によるフリッカ周波数検出処理を説明するフローチャートである。
【図１０】変形例２を説明するための図である。
【図１１】汎用のコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２１】
以下、本開示を実施するための最良の形態（以下、実施の形態と称する）について、図面を参照しながら詳細に説明する。
【００２２】
＜本開示による動画像上に発生しているフリッカの周波数を検出する方法の概要＞
本開示による動画像上に発生しているフリッカの周波数を検出する方法の概要について、図２乃至図４を参照して説明する。
【００２３】
図２乃至図４は、本開示による動画像上に発生しているフリッカの周波数を検出する方法の概要を説明するための図である。
【００２４】
本開示の検出方法では、撮像範囲（画角）が重複するように配置された複数のカメラ（図２の場合、第１撮像部および第２撮像部）が用いられ、これらによって撮像される動画像からフリッカ周波数が検出される。該複数のカメラは、露光時間は共通だが、露光タイミングが所定の時間位相差だけずれるように制御されている。
【００２５】
以下、複数のカメラを第１撮像部および第２撮像部として説明を継続する。第１撮像部によって撮像された動画像のフレームをＦ１１，Ｆ１２，Ｆ１３・・・と称し、フレームＦ１１，Ｆ１２，Ｆ１３を個々に区別する必要が無い場合、フレームＦ１と称する。同様に、第２撮像部によって撮像された動画像のフレームをＦ２１，Ｆ２２，Ｆ２３・・・と称し、フレームＦ２１，Ｆ２２，Ｆ２３を個々に区別する必要が無い場合、フレームＦ２と称する。
【００２６】
はじめに、第１撮像部によって撮像された動画像のフレームＦ１の画角と、第２撮像部によって撮像された動画像のフレームＦ２の画角の共通する領域がフリッカ検出範囲として抽出される。次に、各フレームにおいてフリッカ抽出範囲の水平方向の行毎に画素信号（輝度信号など）が積算される。
【００２７】
行毎の画素の積算値は、従来手法では連続する２フレーム間（図２の場合、例えばフレームＦ１１とＦ１２）で対応する行の差分値（フレーム間差分）が算出されていたが、本開示の検出方法では、第１撮像部によって撮像された動画像のフレームＦ１１と、第２撮像部によって撮像された動画像のフレームＦ２１の間で対応する行の差分値（フレーム間差分）が算出される。そして、このフレーム間差分に基づいてフリッカの周波数が演算される。
【００２８】
具体的に説明する。第１撮像部および第２撮像部に搭載されている撮像素子がローリングシャッタ方式である場合、撮像される各フレームＦ１，Ｆ２には、図３に示される垂直方向に変動するフリッカが出現し得る。したがって、各フレームにおいて水平方向の行毎に画素信号（輝度信号など）を積算し、その値を図４に示されるようにプロットすると、フレームＦ１からは曲線ｆ１が得られ、フレームＦ２からは曲線ｆ２が得られる。そして、曲線ｆ１とｆ２の差分を示す曲線ｆsubが算出される。この曲線ｆsubに対してFFT（高速フーリエ変換）などの周波数解析処理を行うことにより、フリッカ周波数が演算される。
【００２９】
このように、従来手法ではフリッカ周波数検出を開始するまでに、最低でも２フレーム周期に相当する時間が必要であったが、本開示の検出方法では、第１撮像部と第２撮像部の露光タイミングの差である時間位相差に相当する時間があれば、フリッカ周波数検出を開始することができる。
【００３０】
なお、図２におけるフレームＦ２１は、第１撮像部によって撮像された動画像のフレームＦ１２との間でも対応する行の差分値（フレーム間差分）が算出されてフリッカ周波数演算に利用される。このように、本開示の検出方法では、従来手法と比較して、同じ時間（２フレーム周期に相当する時間）で得られるフレーム間差分のサンプリングを増やすことができるのでフリッカ周波数の検出精度を高めることができる。
【００３１】
＜本開示を適用した画像信号処理装置の構成例＞
次に、図５は、本開示を適用した画像信号処理装置の構成例を示している。
【００３２】
この画像信号処理装置１０は、図２を参照して説明した、撮像範囲（画角）が重複するように配置された２台のカメラを用いる本開示の検出方法を拡張し、４台のカメラ（第１撮像部１１−１乃至第４撮像部１１−４）を用いるようにしたものである。
【００３３】
すなわち、画像信号処理装置１０は、第１撮像部１１−１乃至第４撮像部１１−４、フレーム処理部１２−１乃至１２−４、画像信号処理部１３−１乃至１３−４、露光タイミング制御部１４、データ保持部１５、およびフリッカ演算部１６から構成される。
【００３４】
第１撮像部１１−１乃至第４撮像部１１−４は、撮像範囲（画角）が重複するように配置されている。図６は、被写体側から見た第１撮像部１１−１乃至第４撮像部１１−４の配置例を示している。図７は、図６の配置例に従って第１撮像部１１−１乃至第４撮像部１１−４を配置した場合のそれぞれの撮像範囲と、それらが重複する範囲、すなわち、フリッカ検出範囲を示している。
【００３５】
図８は、第１撮像部１１−１乃至第４撮像部１１−４の露光タイミングを表している。第１撮像部１１−１乃至第４撮像部１１−４は、撮像する動画像の各フレームの露光時間（フレーム周期）は共通だが、露光タイミングが露光タイミング制御部１４からの制御に従って所定の時間位相差だけずれるように制御される。すなわち、第１撮像部１１−１による動画像の撮像はタイミングｔ１に開始される。第２撮像部１１−２による動画像の撮像はタイミングｔ１以降のタイミングｔ２に開始される。第３撮像部１１−３による動画像の撮像はタイミングｔ２以降のタイミングｔ３に開始される。第４撮像部１１−４による動画像の撮像はタイミングｔ３以降のタイミングｔ４に開始される。
【００３６】
なお、タイミングｔ１とタイミングｔ４の時間位相差は、共通のフレーム周期未満とする。また、タイミングｔ１とｔ２の時間位相差、タイミングｔ２とｔ３の時間位相差、およびタイミングｔ３とｔ４の時間位相差は、必ずしも一致させる必要はなく任意である。
【００３７】
図５に戻る。第１撮像部１１−１は、露光タイミング制御部１４からの制御に従い、タイミングｔ１から動画像の撮像を開始して、得られる動画像を構成するフレームＦ１をフレーム処理部１２−１に出力する。
【００３８】
フレーム処理部１２−１は、前段から順次入力されるフレームＦ１のフリッカ検出範囲を特定し、各フレームのフリッカ検出範囲において水平方向の行毎に画素信号（輝度信号など）を積算し、その積算結果ΣＦ１をデータ保持部１５に出力する。ここで、積算結果ΣＦ１は、フリッカ検出範囲の行毎の画素信号の積算値の集合を意味するものとする。
【００３９】
また、フレーム処理部１２−１は、前段から入力されたフレームＦ１を画像信号処理部１３に出力する。画像信号処理部１３は、前段から入力されたフレームＦ１に対して所定の画像信号処理（例えば、欠陥画素補間処理、ホワイトバランス処理等）を行い、処理済のフレームＦ１を後段に出力する。
【００４０】
なお、第２撮像部１１−２乃至第４撮像部１１−３については、第１撮像部１１−１と同様であるので、その説明は省略する。フレーム処理部１２−２乃至１２−４、画像信号処理部１３−２乃至１３−４についても同様とする。
【００４１】
露光タイミング制御部１４は、第１撮像部１１−１乃至第４撮像部１１−４の動画像撮像時の露光タイミングを制御する。データ保持部１５には、フレーム処理部１２−１からの積算結果ΣＦ１、フレーム処理部１２−２からの積算結果ΣＦ２、フレーム処理部１２−３からの積算結果ΣＦ３、およびフレーム処理部１２−４からの積算結果ΣＦ４が保持される。
【００４２】
フリッカ演算部１６は、データ保持部１５に保持されている積算結果のうち、次式（１）を満たすような検出対象とするフリッカの周期に応じた時間位相差を有する積算結果のペア（例えば、第１撮像部１１−１の出力に基づく積算結果ΣＦ１と、第３撮像部１１−３の出力に基づく積算結果ΣＦ３のペアなど）を読み出す。
時間位相差＞検出対象とするフリッカの周期／２                    ・・・（１）
【００４３】
そして読み出した積算結果のペアの対応する行の差分値（フレーム間差分）を算出し、さらに、そのフレーム間差分からフリッカ周波数を演算する。
【００４４】
ここで、検出対象とするフリッカの周期とは、フリッカ検出範囲に写り込んでいたり、フリッカ検出範囲を照射したりしている可能性が有るフリッカ光源の周期を指す。
【００４５】
例えば、日本国内では商用交流電源の周波数が５０Ｈｚまたは６０Ｈｚであるので、これを駆動電力として使用する蛍光灯のフリッカの周波数は５０Ｈｚまたは６０Ｈｚである。よってその周期はＣ／５０またはＣ／６０となる。また、LED電球では、商用交流電源を整流して使用しているのでフリッカの周波数は例えば100Ｈｚまたは120Ｈｚなどである。よってその周期はＣ／100またはＣ／120となる。ここで、Ｃは光速を意味する。
【００４６】
＜本開示の実施の形態である画像信号処理装置１０の動作＞
次に、画像信号処理装置１０の動作について説明する。図９は、画像信号処理装置１０によるフリッカ周波数検出処理を説明するフローチャートである。
【００４７】
ステップＳ１において、第１撮像部１１−１乃至第４撮像部１１−４は、露光タイミング制御部１４からの制御に従って動画像の撮像を開始し、その結果順次得られるフレームをフレーム処理部１２−１乃至１２−４に出力する。
【００４８】
前段の第１撮像部１１−１乃至第４撮像部１１−４から動画像のフレームが入力されたフレーム処理部１２−１乃至１２−４は、ステップＳ２において、入力されたフレームのフリッカ検出範囲を特定し、フリッカ検出範囲において水平方向の行毎に画素信号（輝度信号など）を積算し、その積算結果をデータ保持部１５に出力する。これにより、データ保持部１５には、フレーム処理部１２−１からの積算結果ΣＦ１、フレーム処理部１２−２からの積算結果ΣＦ２、フレーム処理部１２−３からの積算結果ΣＦ３、およびフレーム処理部１２−４からの積算結果ΣＦ４が保持される。
【００４９】
ステップＳ３において、フリッカ演算部１６は、データ保持部１５に保持されている積算結果のうち、式（１）を満たす時間位相差を有する積算結果のペアを読み出し、それらの対応する行の差分値（フレーム間差分）を算出し、さらに、そのフレーム間差分からフリッカ周波数を演算する。演算されたフリッカ周波数は後段に出力されて、動画像のフリッカ補正処理に利用される。
【００５０】
なお、上述した説明では、第１撮像部１１−１乃至第４撮像部１１−４の全てに撮像させるようにしたが、第１撮像部１１−１乃至第４撮像部１１−４のうち、式（１）を満たす時間位相差を有する２台のみに動画像を撮像させ、その結果を用いてフリッカ周波数を演算するようにしてもよい。以上で、フリッカ周波数検出処理の説明を終了する。
【００５１】
＜変形例１＞
上述した説明では、フリッカ検出範囲の行毎の画素信号の積算結果の差分に基づいてフリッカ周波数を演算するようにした。変形例１では、フリッカ検出範囲でブロックマッチングを行い、その結果に基づいてフリッカ周波数を演算するようにする。この場合、フレームに占めるフリッカ電源のサイズがより小さくても対応することが可能となる。
【００５２】
＜変形例２＞
上述した説明では、露光タイミングｔ１とｔ２の時間位相差、露光タイミングｔ２とｔ３の時間位相差、および露光タイミングｔ３とｔ４の時間位相差は一致させる必要はなく任意とした。変形例２では、これらの時間位相差を、検出対象とするフリッカの周期から式（１）により導出される時間位相差で統一し、図１０に示されるように、この時間位相差でフレーム周期を分割するようにする。この場合、サンプリング数を増やすことができるので、広帯域のフリッカ周波数を検出することが可能となる。
【００５３】
＜画像信号処理装置１０の使用例＞
上述した画像信号処理装置１０は、フリッカ光源下で使用される、例えば、以下のように、可視光や、赤外光、紫外光、X線等の光をセンシングする様々なケースに使用することができる。
【００５４】
・ディジタルカメラや、カメラ機能付きの携帯機器等の、鑑賞の用に供される画像を撮影する装置
・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の用に供される装置
・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、TVや、冷蔵庫、エアーコンディショナ等の家電に供される装置
・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの用に供される装置
・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの用に供される装置
・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の用に供される装置
・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの用に供される装置
・畑や作物の状態を監視するためのカメラ等の、農業の用に供される装置
【００５５】
ところで、上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウェアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
【００５６】
図１１は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
【００５７】
このコンピュータ１００において、CPU（Central Processing Unit）１０１，ROM（Read Only Memory）１０２，RAM（Random Access Memory）１０３は、バス１０４により相互に接続されている。
【００５８】
バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、入力部１０６、出力部１０７、記憶部１０８、通信部１０９、およびドライブ１１０が接続されている。
【００５９】
入力部１０６は、キーボード、マウス、マイクロフォンなどよりなる。出力部１０７は、ディスプレイ、スピーカなどよりなる。記憶部１０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部１０９は、ネットワークインタフェースなどよりなる。ドライブ１１０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア１１１を駆動する。
【００６０】
以上のように構成されるコンピュータ１００では、CPU１０１が、例えば、記憶部１０８に記憶されているプログラムを、入出力インタフェース１０５およびバス１０４を介して、RAM１０３にロードして実行することにより、上述した一連の処理が行われる。
【００６１】
なお、コンピュータ１００が実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであってもよいし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであってもよい。
【００６２】
なお、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
【００６３】
本開示は以下のような構成も取ることができる。
（１）
フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、
前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部と
を備える画像信号処理装置。
（２）
前記検出部は、前記複数の前記動画像のうち、第１の動画像のフレームの行毎の画素信号の積算値と、第２の動画像のフレームの行毎の画素信号の積算値との差分値に基づいて、前記動画像上に出現しているフリッカの周波数を演算する
前記（１）に記載の画像信号処理装置。
（３）
前記検出部は、前記複数の動画像の画角が重複する領域をフリッカ検出領域として特定し、前記複数の動画像の各フレームの前記フリッカ検出領域の画素信号に基づき、前記動画像上に出現しているフリッカを検出する
前記（１）または（２）に記載の画像信号処理装置。
（４）
前記第１の動画像の露光開始のタイミングと、前記第２の動画像の露光開始のタイミングとの時間位相差は、次式を満たす
時間位相差＞検出対象とするフリッカの周期／２
前記（２）に記載の画像信号処理装置。
（５）
前記動画像を撮像する複数の撮像部と、
前記複数の撮像部を制御して、前記動画像の前記フレーム周期が共通であって、異なる露光開始のタイミングで前記動画像を撮像させる撮像制御部と
をさらに備える前記（１）から（４）のいずれかに記載の画像信号処理装置。
（６）
前記撮像制御部は、前記複数の撮像部を制御し、次式
時間位相差＞検出対象とするフリッカの周期／２
を満たす時間位相差ずつずらした露光開始のタイミングで前記動画像を撮像させる
前記（５）に記載の画像信号処理装置。
（７）
画像信号処理装置の画像信号処理方法において、
前記画像信号処理装置による、
フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得ステップと、
前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出ステップと
を含む画像信号処理方法。
（８）
コンピュータを、
フレーム周期が共通であって露光開始のタイミングが異なる複数の動画像を取得する取得部と、
前記複数の動画像の各フレームの画素信号に基づき、前記動画像上に出現しているフリッカを検出する検出部と
して機能させるプログラム。
【符号の説明】
【００６４】
１０  画像信号処理装置，  １１  第１乃至第４撮像部，  １２  フレーム処理部，  １３  画像信号処理部，  １４  露光タイミング制御部，  １５  データ保持部，  １６  フリッカ演算部，  １００  コンピュータ，  １０１  CPU
【図１】
2016189521.tif 000003
【図２】
2016189521.tif 000004
【図３】
2016189521.tif 000005
【図４】
2016189521.tif 000006
【図５】
2016189521.tif 000007
【図６】
2016189521.tif 000008
【図７】
2016189521.tif 000009
【図８】
2016189521.tif 000010
【図９】
2016189521.tif 000011
【図１０】
2016189521.tif 000012
【図１１】
2016189521.tif 000013