(57)【特許請求の範囲】
【請求項１】
ローリングシャッタ方式に従って、1フィールド／フレーム分の画素信号が最上段の水平ラインから最下段の水平ラインに向けて順次読み出されるＸ−Ｙアドレス型撮像素子と、
所定の時間間隔でストロボ発光する光源部と、
隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する画像生成部とを備え、
前記画像生成部が、隣り合うフィールド／フレーム間で露光期間中に２回以上ストロボ発光された二重発光画像領域にあるラインの画素信号に対し、隣り合うフィールド／フレーム間両方に存在し、露光期間中に１回ストロボ発光された単発光画像領域にあるラインの画素信号に基づいて、補正処理を施す補正処理部を備えたことを特徴とする内視鏡装置。
【請求項２】
ローリングシャッタ方式に従って画素信号が読み出されるＸ−Ｙアドレス型撮像素子と、
所定の時間間隔でストロボ発光する光源部と、
隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する画像生成部とを備え、
前記画像生成部が、露光期間中に２回以上ストロボ発光されたラインに応じた二重発光画像領域の画素信号に対し、露光期間中に１回ストロボ発光されたラインに応じた単発光画像領域の画素信号に基づいて補正処理を施す補正処理部を備え、
前記補正処理部が、前記単発光画像領域に基づいて被写体像の動きベクトルを検出し、動きベクトルに基づいた補正処理を実行することを特徴とする内視鏡装置。
【請求項３】
ローリングシャッタ方式に従って画素信号が読み出されるＸ−Ｙアドレス型撮像素子と、
所定の時間間隔でストロボ発光する光源部と、
隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する画像生成部とを備え、
前記画像生成部が、露光期間中に２回以上ストロボ発光されたラインに応じた二重発光画像領域の画素信号に対し、露光期間中に１回ストロボ発光されたラインに応じた単発光画像領域の画素信号に基づいて補正処理を施す補正処理部を備え、
前記補正処理部が、点広がり関数を用いて補正処理を施すことを特徴とする内視鏡装置。
【請求項４】
前記補正処理部が、露光期間中にストロボ発光されないラインに応じた非露光画像領域の画素信号に対し、前記単発光画像領域の画素信号に基づいて補正処理を施すことを特徴とする請求項１乃至３のいずれかに記載の内視鏡装置。
【請求項５】
前記補正処理部が、ストロボ発光時間間隔が１フィールド／フレーム期間よりも短い場合、補正処理を施すことを特徴とする請求項１乃至４のいずれかに記載の内視鏡装置。
【請求項６】
所定の時間間隔でストロボ発光されている間、ローリングシャッタ方式に従ってＸ−Ｙアドレス型撮像素子の最上段の水平ラインから最下段の水平ラインに向けて順次読み出される1フィールド／フレーム分の画素信号に対し、隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する画像生成部を備え、
前記画像生成部が、隣り合うフィールド／フレーム間で露光期間中に２回以上ストロボ発光された二重発光画像領域にあるラインの画素信号に対し、隣り合うフィールド／フレーム間両方に存在し、露光期間中に１回ストロボ発光された単発光画像領域にあるラインの画素信号に基づいて、補正処理を施す補正処理部を備えたことを特徴とする画像処理装置。
【請求項７】
画像生成部が、所定の時間間隔でストロボ発光されている間、ローリングシャッタ方式に従ってアドレス型撮像素子の最上段の水平ラインから最下段の水平ラインに向けて順次読み出される1フィールド／フレーム分の画素信号に対し、隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する内視鏡装置の動作方法であって、
補正処理部が、隣り合うフィールド／フレーム間で露光期間中に２回以上ストロボ発光された二重発光画像領域にあるラインの画素信号に対し、隣り合うフィールド／フレーム間両方に存在し、露光期間中に１回ストロボ発光された単発光画像領域にあるラインの画素信号に基づいて、補正処理を施すことを特徴とする内視鏡装置の動作方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ローリングシャッタ方式の撮像素子を用いてストロボ撮影するときの画像処理に関し、特に、喉頭ストロボスコピーなど、閃光を繰り返し発光させて動画撮影する時の画像処理に関する。
【背景技術】
【０００２】
ＣＭＯＳセンサなどのＸ−Ｙアドレス型イメージセンサでは、最上段の水平ラインから最下段の水平ラインに向けてラインごとに画素信号を順次読み出す、いわゆるローリングシャッタ方式を通常採用している。各水平ラインの露光期間は読み出し順に従ってずれているため、発光時間が非常に短いストロボ撮影を行うと、撮影画像は、発光の影響を受けた領域と発光の影響を受けないライン群（領域）に分かれてしまう。
【０００３】
これを防ぐための方法として、メカニカルシャッタを設ける構成が知られているが、メカニカルシャッタを設けない構成も知られている。そこでは、撮像素子の受光面において複数の画像領域を設け、ストロボ撮影して得られた各領域の画像を合成し、露出の補完を行うことが知られている（特許文献１参照）。
【０００４】
一方、内視鏡装置を用いた喉頭ストロボスコピーでは、声帯の異常を調べるため、高速で閃光を連続的に喉頭部に照射しながらビデオスコープによって撮影し、声帯振動をスローモーション観察する。具体的には、被検者の音声の周波数をサンプリングし、それに同期させ、かつ位相をずらしながら発光させる。これにより、１秒間に１００回以上周期のある声帯がスローモーションで動いているような動画像を表示することができる（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１４−６８２７７号公報
【特許文献２】特開２００４−１６６７６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ストロボ動画撮影では、ストロボ発光時間間隔が撮像素子のフレームレートと必ずしも等しくしない。例えば、喉頭ストロボスコピーの場合、発光周期は、被検者の声帯特性などに従って定められる。ローリングシャッタ式の撮像素子を使用する撮影状況下において、ストロボ発光時間間隔が１フレーム期間より短く設定された場合、１フレーム分の画像の中で露光期間中２回発光が生じたライン（領域）が生じ、過度な露光量によって画質が低下した部分が撮影画像に生じてしまう。
【０００７】
したがって、ローリングシャッタ方式の撮像素子を用いてストロボ動画撮影を行う場合、ストロボ発光時間間隔に関係なく良好な撮影画像を得ることが求められる。
【課題を解決するための手段】
【０００８】
本発明の内視鏡装置は、ローリングシャッタ方式に従って画素信号が読み出されるＸ−Ｙアドレス型撮像素子と、所定の時間間隔でストロボ発光する光源部と、隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する画像生成部とを備える。ここで、ストロボ発光とは、閃光を発光することを示す。
【０００９】
ストロボ発光時間間隔が１フィールド／フレーム期間よりも短い場合、露光期間中に二重発光したラインの領域が生じる。本発明では、前記画像生成部が、露光期間中に２回以上ストロボ発光されたラインに応じた二重発光画像領域の画素信号に対し、露光期間中に１回ストロボ発光されたラインに応じた単発光画像領域の画素信号に基づいて補正処理を施す補正処理部を備える。
【００１０】
補正処理部は、前記単発光画像領域に基づいて被写体像の動きベクトルを検出し、動きベクトルに基づいた補正処理を実行することが可能である。例えば、補正処理部が、点広がり関数を用いて補正処理を施す。
【００１１】
一方、補正処理部は、露光期間中にストロボ発光されないラインに応じた非露光画像領域の画素信号に対し、前記単発光画像領域の画素信号に基づいて補正処理を施すことが可能である。
【００１２】
補正処理部が、ストロボ発光時間間隔が１フィールド／フレーム期間よりも短い場合、補正処理を施す。
【００１３】
本発明の他の態様である画像処理装置は、所定の時間間隔でストロボ発光されている間、ローリングシャッタ方式に従ってＸ−Ｙアドレス型撮像素子から読み出される画素信号に対し、隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する画像生成部を備え、前記画像生成部が、露光期間中に２回以上ストロボ発光されたラインに応じた二重発光画像領域の画素信号に対し、露光期間中に１回ストロボ発光されたラインに応じた単発光画像領域の画素信号に基づいて補正処理を施す補正処理部を備える。
【００１４】
本発明の他の態様である内視鏡装置の動作方法は、画像生成部が、所定の時間間隔でストロボ発光されている間、ローリングシャッタ方式に従ってＸ−Ｙアドレス型撮像素子から読み出される画素信号に対し、隣り合うフィールド／フレーム間の画素信号に基づいて、各フィールド／フレームの画像を生成する内視鏡装置の動作方法であって、前記補正処理部が、露光期間中に２回以上ストロボ発光されたラインに応じた二重発光画像領域の画素信号に対し、露光期間中に１回ストロボ発光されたラインに応じた単発光画像領域の画素信号に基づいて補正処理を施す。
【発明の効果】
【００１５】
このように本発明によれば、ストロボ動画撮影において、ストロボ発光時間間隔に関係なく、高画質の画像を提供することができる。
【図面の簡単な説明】
【００１６】
【図１】本実施形態である電子内視鏡装置のブロック図である。
【図２】１フレーム分の画像生成過程および発光タイミングを示した図である。
【図３】イメージセンサにおける露光期間と画素信号読み出し期間を示した図である。
【図４】露光期間中の発光回数に応じて区分けされるラインを示した図である。
【図５】図３に示したストロボ発光を行って補正処理を行わない場合に生成される隣接フレーム間の画像を示した図である。
【図６】図３に示したストロボ発光を行って補正処理を行った場合に生成される隣接フレーム間の画像を示した図である。
【発明を実施するための形態】
【００１７】
以下では、図面を参照して本実施形態である電子内視鏡装置について説明する。
【００１８】
図１は、本実施形態である電子内視鏡装置のブロック図である。
【００１９】
電子内視鏡装置は、その挿入部分が体内へ挿入されるビデオスコープ１０と、プロセッサ３０と、光源装置５０とを備え、ビデオスコープ１０はプロセッサ３０に対して着脱自在に接続されるとともに、ファイバケーブル１２Ｂを介して光源装置５０と接続される。プロセッサ３０には、光源装置５０およびモニタ６０が接続されている。
【００２０】
光源装置５０の光源部５２から放射された光は、ファイバケーブル１２Ｂを介してビデオスコープ１０内に設けられたライトガイド１２に入射する。ライトガイド１２に入射した光は、配光レンズ（図示せず）を介してスコープ先端部１０Ｔから射出し、被写体（観察部位）に照射される。
【００２１】
被写体で反射した光は、スコープ先端部１０Ｔに配置された対物レンズ（図示せず）によって結像し、スコープ先端部１０Ｔに設けられたイメージセンサ１４の受光面に被写体像が形成される。イメージセンサ１４は、画素ごとに画素信号を読み出し可能なＸ−Ｙアドレス型イメージセンサであり、ここではＣＭＯＳイメージセンサが適用されている。イメージセンサ１４の受光面上には、Ｃｙ、Ｙｅ、Ｇ、Ｍｇ、Ｒ、Ｇ、Ｂなどの色フィルタ要素を配列させた色フィルタ（図示せず）が配設されている。
【００２２】
イメージセンサ１４では、駆動回路３２から送られてくる駆動信号に従い、１フィールドもしくは１フレーム（以下、１フィールド／フレームと表す）分の画像信号が所定の時間間隔（例えばＮＴＳＣ方式の場合１／６０秒間隔、ＰＡＬ方式の場合１／５０秒間隔）で読み出される。読み出されたアナログ画素信号は、プロセッサ３０の前段信号処理回路３４へ送られる。
【００２３】
前段信号処理回路３４では、増幅処理、デジタル化処理などの初期処理がアナログ画素信号に対して施された後、ガンマ処理、ホワイトバランス処理、色補間処理、色変換処理等などが実行され、これによってＲ，Ｇ，Ｂなどのデジタルカラー画像信号が生成される。
【００２４】
生成された画像信号は、画像メモリ３７に一時的に格納された後、補正回路３６を経由して後段信号処理回路３９へ送られる。後段信号処理回路３９においてキャラクタ情報の重畳処理、輪郭強調処理などが画像信号に対して施された後、画像信号はモニタ６０に出力される。これにより、観察画像がモニタ６０に表示される。
【００２５】
システムコントロール回路４０は、光源装置５０、プロセッサ３０内のタイミングコントローラ４４等へ制御信号を出力し、プロセッサ全体の動作を制御する。タイミングコントローラ４４は、各回路へクロックパルス信号を出力し、信号入出力タイミング、画素信号読み出しタイミング等を調整する。
【００２６】
電子内視鏡装置は、白色光を連続的に照射する通常観察とともに、喉頭ストロボスコピーを行うことが可能な内視鏡装置であり、オペレータは、プロセッサ３０のフロントパネル４８に設けられたボタンなどを操作することによって、観察モードを切り替える。被検者の声帯の動きをスローモーション映像化して喉頭部分を検査する場合、通常観察モードからストロボ撮影モードに切り替えられる。
【００２７】
光源装置５０は、光源部５２とともに、メイン制御部５４、音声ピッチ検出回路５６とを備える。ＬＥＤなどによって構成される光源部５２は、白色光を連続的に放射する一方、非常に発光時間の短い閃光を間欠的に続けて発光（以下では、ストロボ発光という）することができる。発光モードの切替は、光源装置５０のフロントパネル４８に設けられたスイッチボタンに対するオペレータの入力操作によって行われる。
【００２８】
ストロボ観察モードに合わせてストロボ発光モードが設定されると、光源装置５０に接続されたマイクロフォンＭＣによって被験者の音声が集音され、音声信号が音声ピッチ検出回路５６へ送られる。音声ピッチ検出回路５６は、音声波形から音声ピッチ（振動周期）を検出する。メイン制御部５４は、音声ピッチに従って光源部５２を間欠的に発光させるとともに、発光タイミングに合わせて発光パルス信号をプロセッサ３０へ送信する。
【００２９】
また、メイン制御部５４は、声帯画像の位相調整やスローモーション画像の速度調整、あるいは、通常観察のための連続発光モードとストロボ撮影モードとの切り替え制御を行なう。これらの制御は、光源装置５０のフロントパネル５５に設けられた一連のボタンに対するオペレータの入力操作に従って実行される。
【００３０】
プロセッサ３０の発光パルス検出部４７は、光源装置５０から送られてくる発光パルス信号を検出し、タイミングコントローラ４４は、発光タイミングに合わせて前段信号処理回路３４、画像メモリ３７などにおける処理タイミングを調整する。画像メモリ３７は、１フィールド／フレーム分の画像をそれぞれ格納する第１、第２メモリ（図示せず）を備え、タイミングコントローラ４４は、隣接するフレーム間において露光期間中の発光回数に従って画像を区分けするように、画像メモリ３７のデータ読み出し、書き込みタイミングを制御する。
【００３１】
本実施形態では、ストロボ発光時間間隔（発光ピッチ）が１フィールド／フレーム期間よりも短い場合、隣り合うフィールド／フレーム間の画像について、発光回数に基づいて画像を区分けし、補正処理を行うように、システムコントロール回路４０がタイミングコントローラ４４、補正回路３６などを制御する。動き検出回路３８は、画像メモリ３７から送られてくる隣接するフレーム間の画像に基づいて、動きベクトルを検出する。
【００３２】
補正回路３６は、タイミングコントローラ４４からの信号に基づいて、露光期間中に２回発光されたラインから成る画像領域（以下、二重発光画像領域ともいう）、１回発光されたラインから成る画像領域（以下、単発光画像領域ともいう）のイメージおよび動きベクトルに基づいて一度も発光されてないラインから成る画像領域（以下、無露光画像領域ともいう）を特定し、動きベクトルおよび単発光画像領域の画素信号に基づき、二重発光画像領域、無露光画像領域の画像に対して補正処理を実行する。
【００３３】
以下、図２〜６を用いて、ストロボ動画撮影させたときの画像処理について説明する。ただし、以下では１フレーム分の画像を対象とする。
【００３４】
図２は、１フレーム分の画像生成過程および発光タイミングを示した図である。ここでは、発光パルス信号ＳＰとフレーム周期を示すパルス信号ＰＤとを対比させている。図３は、イメージセンサ１４における露光期間と画素信号読み出し期間を示した図である。なお、説明を簡単にするため、ここでは１０ライン（第１ライン〜第１０ライン）によって１フレーム分の画像が構成されるものとする。
【００３５】
図３に示すように、ローリングシャッタ方式のイメージセンサ１４では、ＯＢ（Optical Black）ラインを含めて画素信号がラインごとに順に読み出される。したがって、各ラインの露光期間（電荷蓄積期間）は、その開始位置および終了位置が画面上側から下側に向けて順にずれていく。例えば、露光期間ＥＡに渡って蓄積された第１〜１０ラインの電荷は、読み出し期間ＴＡにおいて、ＯＢライン、第１ライン、・・第１０ラインの順に読み出される（図３の斜線部参照）。露光期間ＥＢ、読み出し期間ＴＢについても、同様な電荷蓄積、読み出しが行われる。
【００３６】
上述したように、ストロボ発光時間間隔ＳＴは、イメージセンサ１４のフレームレートではなく被検者の声帯振動数に基づいて決定されており、発光している期間は瞬間的なものであって非常に短い。したがって、１フレーム期間の途中あるタイミングでストロボ発光が行われると、その直前までに露光期間が終了したラインについては、そのストロボ発光による露光が行われず、露光期間終了前であったラインが露光される。したがって、１フレーム分の画像の中で、露光期間中にストロボ発光を受けた領域と受けていない領域が生じる。
【００３７】
図３では、Ｎフレーム目の画像の中で、第１〜第５ラインまでの露光期間終了後にストロボ発光ＳＡが生じている。そのため、第６〜１０ラインまでの画像領域Ａ１は、ストロボ発光ＳＡによる露光画像となる。第１〜５ラインの画像領域Ａ０は、露光期間においてストロボ発光がないため、無露光領域となる。
【００３８】
喉頭ストロボスコピーでは、声帯部分の画像をスローモーション表示するため、発光パルスの位相を少しずつシフトさせていく。また、声帯の基本振動数はフレームレート以下となる場合が生じる。そのため、ストロボ発光時間間隔ＳＴはフレームレート（１フレーム期間）より短い（図２参照）。
【００３９】
そのため、図３に示すように、露光期間ＥＢに行われる次のストロボ発光ＳＢが第３ラインの露光期間終了直後のタイミングで行われると、（Ｎ＋１）フレーム目の画像の中で第１〜３ラインの画像領域Ｂ１はストロボ発光ＳＢの影響を受けないが、第４ラインの画像領域Ｂ２は、露光期間ＥＢの中でストロボ発光ＳＡ、ＳＢ両方が行われる。その結果、画像領域Ｂ２の露光量は、画像領域Ａ１、Ｂ１と比べて２倍になる。
【００４０】
ストロボ発光ＳＢの後に露光開始される第５〜第１０ラインの画像領域Ｂ３については、ストロボ発光が１回だけの画像領域になる。しかしながら、上述したようにストロボ発光タイミングを位相シフトに合わせて行っているため、被写体像に動きが生じる。
【００４１】
図４は、露光期間中の発光回数に応じて区分けされるラインを示した図である。図５は、図３に示したストロボ発光を行って補正処理を行わない場合に生成される隣接フレーム間の画像を示した図である。ここでは、説明をわかりやすくするため、イメージをアルファベットの「Ａ」で表している。
【００４２】
図４、図５に示すように、Ｎフレーム、Ｎ＋１フレームの画像において、無露光画像領域Ａ０、単発光画像領域Ａ１、Ｂ１、Ｂ３、二重発光画像領域Ｂ２が生じている。また、図５に示すように、二重発光画像領域Ｂ２では、２回発光に起因してぼけたイメージになっている。さらに、被写体像の動きにより、ストロボ発光ＳＢが行われた後の画像領域Ｂ２、Ｂ３と、その前の画像領域Ａ１、Ｂ１との間には、ずれが生じている。図５では、イメージ「Ａ」が右方向にずれていることを表している。
【００４３】
Ｎフレームの画像に対してＮ＋１フレームの画像に動きが生じている必要があるから、Ｎ＋１フレームの画像領域Ｂ１は、画像領域Ｂ３に合わせて補正しなければならない。ここでは、画像領域Ａ１と画像領域Ｂ３との間で動きベクトル（動き量、動きの方向）を検出し、画像領域Ｂ１のイメージを動きベクトルに応じて補正する。なお、Ｎ＋２フレーム期間においてストロボ発光されている場合、Ｎ＋１、Ｎ＋２フレーム目の画像を用いることが可能である。
【００４４】
一方、画像領域Ｂ２については、上述したように二重発光画像領域であることから、焦点ボケのようなイメージが形成される。そこで、画質劣化したイメージを画像復元処理し、画像領域Ｂ１と同レベルの画質のイメージに変換する。以下、これについて述べる。
【００４５】
一般に、焦点ずれや手振れなどによって画像劣化が生じた場合、劣化画像ｇ（ｘ、ｙ）は以下の式によって求めることができる。ただし、ｆ（ｘ、ｙ）は劣化前の原画像を示し、ｈ（ｘ、ｙ）は劣化関数を表す。また、＊は畳み込み演算を示す。
【００４６】
【数１】
0006517573.tif 000002
【００４７】
劣化前の原画像ｆ（ｘ、ｙ）が点光源（２次元デルタ関数）をベースにした画像である場合、劣化画像ｇ（ｘ、ｙ）は、点広がり関数（ＰＳＦ）ｈ（ｘ、ｙ）によって表すことができる。
【００４８】
【数２】
0006517573.tif 000003
【００４９】
焦点ボケによる点広がり関数ｈ（ｘ、ｙ）は、一般的に（３）式で示すガウシアン関数で表すことが可能である。ただし、σはボケの程度を表す。また、カメラなどのブレによる点広がり関数ｈ（ｘ、ｙ）は、４（式）で示す近似式で表すことが可能である。ただし、θはブレ方向、ｗはぶれによるカメラの移動距離を示す。
【００５０】
【数３】
0006517573.tif 000004
【００５１】
【数４】
0006517573.tif 000005
【００５２】
ここで、θ、ｗを画像の動きベクトルに対応させた場合、画像領域Ｂ２のボケ画像は、（４）式の劣化関数ｈによって表すことが可能である。すなわち、Ｎフレーム目の画像における画像領域Ａ１とＮ＋１フレーム目の画像における画像領域Ｂ３との差分から求められる動きベクトルによって、二重発光された画像領域Ｂ２の劣化画像ｇ（ｘ、ｙ）を、（４）式の劣化関数ｈで表すことができる。
【００５３】
画像復元処理は、劣化画像ｇ（ｘ、ｙ）から原画像ｆ（ｘ、ｙ）を推定する逆問題であり、（１）式をフーリエ変換した以下の式に基づいて求めることができる。したがって、画像領域Ｂ２の劣化画像ｇ（ｘ、ｙ）（劣化関数ｈ（ｘ、ｙ））から、原画像ｆ（ｘ、ｙ）を求めることができる。
【００５４】
【数５】
0006517573.tif 000006
【００５５】
一方、Ｎフレーム目の画像の画像領域Ａ０は、Ｎ＋１フレーム目の画像の画像領域Ｂ１および画像領域Ｂ２に対応する。したがって、画像領域Ｂ１と復元された画像領域Ｂ２の動きベクトル分を相殺したイメージによって、無露光画像領域である画像領域Ａ０のイメージを形成することができる。なお、Ｎフレーム目の画像において無露光領域がなく、Ｎ−１フレーム期間においてストロボ発光がなされている場合、動きベクトルに基づいて画像領域Ａ０を補正すればよい。
【００５６】
図６は、図３に示したストロボ発光を行って補正処理を行った場合に生成される隣接フレーム間の画像を示した図である。
【００５７】
Ｎフレーム目の画像については、画像領域Ａ０が補正処理されており、Ｎ＋１フレーム目の画像領域Ｂ１、Ｂ２については、動きベクトルに基づいて補正されている。これにより、隣接フレーム間で動きのあるイメージ「Ａ」が生成される。そして、Ｎフレーム，Ｎ＋１フレームの以外の隣接するフレーム期間の画像についても、同様に画像処理することによって観察画像を適切に表示することができる。同様に、Ｎ−１、Ｎ＋２フレーム目に発光がない場合においても補正することが可能である。
【００５８】
このように本実施形態によれば、ローリングシャッタ方式のＸ−Ｙアドレス型イメージセンサ１４を備え、喉頭ストロボスコピーを行う電子内視鏡装置において、隣接フレーム間の画像の中で二重発光画像領域Ｂ２に対し、ストロボ発光ＳＡによる単発光画像領域Ａ１、Ｂ１とストロボ発光ＳＢによる単発光画像領域Ｂ３との差分から動きベクトルを検出し、動きベクトルおよび点広がり関数に基づいて、二重発光画像領域Ｂ２を復元する。
【００５９】
隣り合うＮフレーム目の画像とＮ＋１フレーム目の画像について、露光期間中の発光回数によって画像を分割し、他方のフレーム期間の画像領域を互いに利用しながら画像補正処理を行うことにより、Ｎ、Ｎ＋１フレーム目の画像それぞれが適正な画像となり、二重露光された画像領域についても画質の低下を抑えることが可能となる。
【００６０】
なお、二重発光画像領域における画像の復元処理については、ＰＳＦ以外の関数を用いてもよい。また、内視鏡装置を用いた喉頭ストロボスコピーに限定されず、スローモーション効果を生じさせるためにストロボ発光を継続させる映像装置などについても、上述した画像処理を実現する画像処理装置を適用することで、同様の効果を得ることができる。
【符号の説明】
【００６１】
１０  ビデオスコープ
１４  イメージセンサ（Ｘ−Ｙアドレス型撮像素子）
３０  プロセッサ
３４  前段信号処理回路
３６  補正回路（補正処理部、画像生成部）
３７  画像メモリ（画像生成部）
３８  動き検出回路（補正処理部）
４０  システムコントロール回路（画像生成部、補正処理部）
４４  タイミングコントローラ（補正処理部）
５０  光源装置
５２  光源部
Ａ０  無露光画像領域
Ａ１  単発光画像領域
Ｂ１  単発光画像領域
Ｂ２  二重発光画像領域
Ｂ３  単発光画像領域
【図１】
0006517573.tif 000007
【図２】
0006517573.tif 000008
【図３】
0006517573.tif 000009
【図４】
0006517573.tif 000010
【図５】
0006517573.tif 000011
【図６】
0006517573.tif 000012