(57)【要約】  原色画素および補色画素が混在した撮像素子を用いるときであっても、同時式および面順次式のどちらも優れた画質の画像を生成することができる内視鏡装置、画像処理方法およびプログラムを提供する。内視鏡装置は、カラーフィルタが受光面に配置された撮像素子によって生成された撮像信号に対して、少なくとも同時式または面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理部と、光源部に対して、同時式と面順次式とを切り替える光源駆動切り替え部と、光源駆動切り替え部が切り替えた結果に基づいて、画像処理部に補間処理の方法を切り替えさせて出力画像を生成させる画像処理制御部と、を備える。
2019069414.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、
２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、
赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、
前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成する画像処理部と、
前記光源部に対して、前記同時式および前記面順次式のどちらか一方に切り替える光源駆動切り替え部と、
前記光源駆動切り替え部が切り替えた結果に基づいて、前記画像処理部に前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御部と、
を備えることを特徴とする内視鏡装置。
【請求項２】
前記光源部は、青色の波長帯域にピーク強度を有する青色光および緑色の波長帯域にピーク強度を有する緑色光の各々を照射可能であり、
前記光源駆動切り替え部は、前記光源部に対して前記面順次式を実行させる場合、前記光源部に前記青色光および前記緑色光を交互に照射させることを特徴とする請求項１に記載の内視鏡装置。
【請求項３】
前記画像処理部は、
前記補色フィルタが配置された前記画素の前記撮像信号をガイドにして前記補間処理を行う同時式画像生成部と、
前記補色フィルタが配置された前記画素の前記撮像信号を前記原色フィルタが配置された前記画素とみなして前記補間処理を行う面順次式画像生成部と、
を有し、
前記画像処理制御部は、前記光源部が前記同時式を行っている場合、前記同時式画像生成部に前記出力画像を生成させる一方、前記光源部が前記面順次式を行っている場合、前記面順次式画像生成部に前記出力画像を生成させることを特徴とする請求項１または２に記載の内視鏡装置。
【請求項４】
前記同時式および前記面順次式のどちらか一方を指示する指示信号の入力を受け付ける入力部をさらに備え、
前記光源駆動切り替え部は、前記指示信号に応じて、前記光源部の方式を切り替えることを特徴とする請求項１〜３のいずれか一つに記載の内視鏡装置。
【請求項５】
当該内視鏡装置のシーンを検出するシーン情報検出部をさらに備え、
前記光源駆動切り替え部は、前記シーン情報検出部の結果に基づいて、前記光源部の方式を切り替えることを特徴とする請求項１〜３のいずれか一つに記載の内視鏡装置。
【請求項６】
前記シーン情報検出部は、前記撮像信号に基づいて、動き量を検出し、
前記光源駆動切り替え部は、前記動き量が予め設定された閾値以上である場合、前記光源部に前記同時式を実行させる一方、前記動き量が予め設定された閾値以上でない場合、前記光源部に前記面順次式を実行させることを特徴とする請求項５に記載の内視鏡装置。
【請求項７】
前記シーン情報検出部は、前記撮像信号に基づいて、エッジ量を検出し、
前記光源駆動切り替え部は、前記エッジ量が予め設定された閾値以上である場合、前記光源部に前記面順次式を実行させる一方、前記エッジ量が予め設定された閾値以上でない場合、前記光源部に前記同時式を実行させることを特徴とする請求項５に記載の内視鏡装置。
【請求項８】
前記シーン情報検出部は、前記撮像信号に対応する画像に含まれる異常領域を検出し、
前記光源駆動切り替え部は、前記シーン情報検出部が前記異常領域を検出した場合、前記光源部に前記面順次式を実行させる一方、前記シーン情報検出部が前記異常領域を検出していない場合、前記光源部に前記同時式を実行させることを特徴とする請求項５に記載の内視鏡装置。
【請求項９】
前記撮像素子を先端部に有する内視鏡と、
前記先端部に設けられ、前記先端部の動きを検出する検出部と、
をさらに備え、
前記シーン情報検出部は、前記検出部が検出した検出結果に基づいて、前記内視鏡の動き量を検出し、
前記光源駆動切り替え部は、前記動き量が予め設定された閾値以上である場合、前記光源部に前記同時式を実行させる一方、前記動き量が予め設定された閾値以上でない場合、前記光源部に前記面順次式を実行させることを特徴とする請求項５に記載の内視鏡装置。
【請求項１０】
焦点距離を変更可能であり、前記撮像素子の受光面に被写体像を結像する撮像光学系をさらに備え、
前記シーン情報検出部は、前記撮像光学系の前記焦点距離を検出し、
前記光源駆動切り替え部は、前記焦点距離が予め設定された閾値以上である場合、前記光源部に前記同時式を実行させる一方、前記焦点距離が予め設定された閾値以上でない場合、前記光源部に前記面順次式を実行させることを特徴とする請求項５に記載の内視鏡装置。
【請求項１１】
少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、を備える内視鏡装置が実行する画像処理方法であって、
前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理ステップと、
前記光源部に対して、前記同時式と前記面順次式とを切り替える光源駆動切り替えステップと、
前記光源駆動切り替えステップで切り替えた結果に基づいて、前記画像処理ステップの前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御ステップと、
を含むことを特徴とする画像処理方法。
【請求項１２】
少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、を備える内視鏡装置に、
前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理ステップと、
前記光源部に対して、前記同時式と前記面順次式とを切り替える光源駆動切り替えステップと、
前記光源駆動切り替えステップで切り替えた結果に基づいて、前記画像処理ステップの前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御ステップと、
を実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被検体に導入され、該被検体内の画像を取得する内視鏡装置、画像処理方法およびプログラムに関する。
【背景技術】
【０００２】
従来、医療分野および工業分野において、各種検査のために内視鏡装置が広く用いられている。このうち、医療用の内視鏡装置は、患者等の被検体の体腔内に、複数の画素を有する撮像素子が先端に設けられた細長形状をなす可撓性の挿入部を挿入することによって、被検体を切開しなくても体腔内の体内画像を取得できるため、被検体への負担が少なく、普及が進んでいる。【０００３】
内視鏡装置の撮像方式として、フレーム毎に異なる波長帯域の照明を照射することでカラー情報を取得する面順次式と、撮像素子上に設けたカラーフィルタによりカラー情報を取得する同時式とが用いられている。面順次式は、色分離性能および解像度に優れるが、動的シーンでは色ズレが発生する。これに対して、同時式は、色ズレが発生しないが、色分離性能および解像度において面順次式に対して劣る。【０００４】
また、従来の内視鏡装置の観察方式として、白色の照明光（白色光）を用いた白色光観察方式（ＷＬＩ：White  Light  Imaging）と、青色および緑色の波長帯域にそれぞれ含まれる二つの狭帯域光からなる照明光（狭帯域光）を用いた狭帯域光観察方式（ＮＢＩ：Narrow  Band  Imaging）が広く知られている。白色光観察方式では緑色の波長帯域の信号を輝度信号としてカラー画像を生成し、挟帯域光観察方式では青色の波長帯域の信号を輝度信号として擬似カラー画像を生成する。このうち、狭帯域光観察方式は、生体の粘膜表層に存在する毛細血管および粘膜微細模様等を強調表示する画像を得ることができる。狭帯域光観察方式によれば、生体の粘膜表層における病変部をより的確に発見することができる。このような内視鏡装置の観察方式に関して、白色光観察方式と、狭帯域光観察方式とを切り替えて観察することも知られている。【０００５】
上述した観察方式でカラー画像を生成して表示するため、単板の撮像素子により撮像画像を取得すべく、撮像素子の受光面上には、一般的にベイヤ配列と呼ばれるカラーフィルタが設けられている。この場合、各画素は、フィルタを透過した波長帯域の光を受光し、その波長帯域の光に応じた色成分の電気信号を生成する。このため、カラー画像を生成する処理では、各画素においてフィルタを透過せずに欠落した色成分の信号値を補間する補間処理が行われる。このような補間処理は、デモザイキング処理と呼ばれる。また、撮像素子の受光面上には、一般的にベイヤ配列と呼ばれるカラーフィルタが設けられている。ベイヤ配列は、赤色（Ｒ）、緑色（Ｇ）および青色（Ｂ）の波長帯域の光を透過するフィルタ（以下、「Ｒフィルタ」、「Ｇフィルタ」および「Ｂフィルタ」という）を１つのフィルタ単位（ユニット）として画素毎に配列したものである。【０００６】
近年、生体内において、白色光観察方式および狭帯域光観察方式のどちらでも高い解像感を得るために、原色カラーフィルタだけでなく、シアン（Ｃｙ）またはマゼンタ（Ｍｇ）のような補色カラーフィルタ（以下、「Ｃｙフィルタ」および「Ｍｇフィルタ」という）を混在させたフィルタ配置の技術が知られている（特許文献１）。この技術によれば、補色画素を混在させることによって、原色画素のみの場合に比べて青色波長帯域の情報を多く取得することができるので、狭帯域光観察方式の場合において毛細血管等の解像度を向上させることができる。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１５−１１６３２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した特許文献１では、補色画素の情報を参照してデモザイキング処理を行うため、被写体の動きが少ない状況や色ズレが発生しづらい状況において、面順次式と比べて色分離性能や解像度が劣化することで、面順次式と比べて画質の差が顕著になるという問題点があった。【０００９】
本発明は、上記に鑑みてなされたものであって、原色画素および補色画素が混在した撮像素子を用いるときであっても、同時式および面順次式のどちらも優れた画質の画像を生成することができる内視鏡装置、画像処理方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述した課題を解決し、目的を達成するために、本発明に係る内視鏡装置は、少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成する画像処理部と、前記光源部に対して、前記同時式および前記面順次式のどちらか一方に切り替える光源駆動切り替え部と、前記光源駆動切り替え部が切り替えた結果に基づいて、前記画像処理部に前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御部と、を備えることを特徴とする。【００１１】
また、本発明に係る画像処理方法は、少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、を備える内視鏡装置が実行する画像処理方法であって、前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理ステップと、前記光源部に対して、前記同時式と前記面順次式とを切り替える光源駆動切り替えステップと、前記光源駆動切り替えステップで切り替えた結果に基づいて、前記画像処理ステップの前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御ステップと、を含むことを特徴とする。【００１２】
また、本発明に係るプログラムは、少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、を備える内視鏡装置に、前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理ステップと、前記光源部に対して、前記同時式と前記面順次式とを切り替える光源駆動切り替えステップと、前記光源駆動切り替えステップで切り替えた結果に基づいて、前記画像処理ステップの前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御ステップと、を実行させることを特徴とする。
【発明の効果】
【００１３】
本発明によれば、原色画素および補色画素が混在した撮像素子を用いるときであっても、同時式および面順次式のどちらも優れた画質の画像を生成することができるという効果を奏する。
【図面の簡単な説明】
【００１４】
【図１】図１は、本発明の実施の形態１に係る内視鏡装置の概略構成を示す図である。
【図２】図２は、本発明の実施の形態１に係る内視鏡装置の機能構成を模式的に示すブロック図である。
【図３】図３は、本発明の実施の形態１に係る撮像素子の画素の構成を示す模式図である。
【図４】図４は、本発明の実施の形態１に係るカラーフィルタの構成の一例を示す模式図である。
【図５】図５は、本発明の実施の形態１に係るカラーフィルタを構成する各フィルタの透過特性の一例を示す図である。
【図６】図６は、本発明の実施の形態２に係る内視鏡装置の概略構成を示す模式図である。
【図７】図７は、本発明の実施の形態２に係る光源部が出射する各光の分光特性の一例を示す図である。
【図８】図８は、本発明の実施の形態２に係る光源部が出射する狭帯域光の分光特性の一例を示す図である。
【図９】図９は、本発明の実施の形態２に係る照明制御部が同時式の白色光観察時に行う照明部の点灯制御を模式的に示す図である。
【図１０】図１０は、本発明の実施の形態２に係る照明制御部が同時式の狭帯域光観察時に行う照明部の点灯制御を模式的に示す図である。
【図１１】図１１は、本発明の実施の形態２に係る照明制御部が面順次式の白色光観察時に行う照明部の点灯制御を模式的に示す図である。
【図１２】図１２は、本発明の実施の形態２に係る照明制御部が面順次式の狭帯域光観察時に行う照明部の点灯制御を模式的に示す図である。
【図１３】図１３は、本発明の実施の形態２に係る内視鏡装置が実行する処理の概要を示すフローチャートである。
【図１４】図１４は、本発明の実施の形態２に係る内視鏡装置の白色光観察時に同時式画像生成部が行う同時式画像生成処理の概要を示す模式図である。
【図１５】図１５は、本発明の実施の形態２に係る内視鏡装置の狭帯域光観察時に同時式画像生成部が行う同時式画像生成処理の概要を示す模式図である。
【図１６】図１６は、本発明の実施の形態２に係る内視鏡装置の白色光観察時にＬＥＤ＿Ｂによって照明光が照射された際の面順次式画像生成部が行う面順次式画像生成処理の概要を示す模式図である。
【図１７】図１７は、本発明の実施の形態２に係る内視鏡装置の白色光観察時にＬＥＤ＿ＧおよびＬＥＤ＿Ｒによって照明光が照射された際の面順次式画像生成部が行う面順次式画像生成処理の概要を示す模式図である。
【図１８】図１８は、本発明の実施の形態２に係る内視鏡装置の狭帯域光観察時にＬＥＤ＿Ｂによって照明光が照射された際の面順次式画像生成部が行う面順次式画像生成処理の概要を示す模式図である。
【図１９】図１９は、本発明の実施の形態２に係る内視鏡装置の狭帯域光観察時にＬＥＤ＿ＧおよびＬＥＤ＿Ｒによって照明光が照射された際の面順次式画像生成部が行う面順次式画像生成処理の概要を示す模式図である。
【図２０】図２０は、本発明の実施の形態３に係る内視鏡装置の概略構成を示す模式図である。
【図２１】図２１は、本発明の実施の形態３に係る内視鏡装置が実行する処理の概要を示すフローチャートである。
【図２２】図２２は、本実施の形態１〜３の変形例に係るカラーフィルタの構成の一例を示す模式図である。
【図２３】図２３は、本実施の形態１〜３の変形例に係るカラーフィルタを構成する各フィルタの透過特性の一例を示す図である。
【図２４】図２４は、本実施の形態１〜３の変形例に係る光源部の各光源の分光特性の一例を示す図である。
【発明を実施するための形態】
【００１５】
以下、本発明を実施するための形態（以下、「実施の形態」という）を説明する。本実施の形態では、患者等の被検体の体腔内の画像を撮像して表示する医療用の内視鏡装置について説明する。また、この実施の形態により、この発明が限定されるものではない。さらに、図面の記載において、同一部分には同一の符号を付して説明する。
【００１６】
（実施の形態１）
〔内視鏡装置の構成〕
図１は、本発明の実施の形態１に係る内視鏡装置の概略構成を示す図である。図２は、本発明の実施の形態１に係る内視鏡装置の機能構成を模式的に示すブロック図である。図１および図２に示す内視鏡装置１は、患者等の被検体に挿入して被検体の体内を撮像し、この体内画像を外部の表示装置へ出力する。医者等の使用者は、表示装置で表示された体内画像の観察を行うことによって、検出対象部位である出血部位、腫瘍部位および異常部位それぞれの有無を検査する。
【００１７】
内視鏡装置１は、被検体に挿入することによって観察部位の体内画像を撮像して撮像信号を生成する内視鏡２と、内視鏡２の先端から出射する照明光を発生する光源部３と、内視鏡２が生成した撮像信号に所定の画像処理を施すとともに、内視鏡装置１全体の動作を統括的に制御するプロセッサ部４と、プロセッサ部４が画像処理を施した体内画像を表示する表示部５と、を備える。
【００１８】
内視鏡２は、少なくとも撮像信号を生成する撮像部２０を備える。撮像部２０は、光を受光する画素（フォトダイオード）が２次元マトリックス状に配置されてなり、各画素が受光した光に対して光電変換を行うことによって撮像信号を生成する撮像素子２０１と、撮像素子２０１の受光面上に配置されてなり、各々が個別に設定された波長帯域の光を透過する複数のフィルタを有するカラーフィルタ２０２と、を有する。撮像素子２０１は、ＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）やＣＣＤ（Charge  Coupled  Device）等のイメージセンサを用いて実現される。なお、撮像素子２０１およびカラーフィルタ２０２の詳細な構成については、後述する。
【００１９】
光源部３は、プロセッサ部４の制御のもと、少なくとも互いに異なる波長帯域の複数の光を同時に照射する同時式および少なくとも互いに異なる波長帯域の複数の光の各々を個別（時分割）に照射する面順次式で照明光を照射する。具体的には、光源部３は、少なくとも互いに波長帯域が異なる２種類の光を同時に照射する同時式で照明光を照射する、または少なくとも互いに波長帯域が異なる２種類の光を交互に照射する面順次式で照明光を照射する。光源部３は、複数の光源、例えば赤色の波長帯域の光を発生する赤色のＬＥＤ（Light  Emitting  Diode）ランプ、緑色の波長帯域の光を発生する緑色のＬＥＤランプおよび青色の波長帯域の光を発生する青色のＬＥＤランプを用いて構成される。
【００２０】
プロセッサ部４は、撮像部２０から入力された撮像信号に対して画像処理を行って出力画像を生成して表示部５へ出力する画像処理部４１と、各種動作を指示する指示信号の入力を受け付ける入力部４２と、内視鏡装置１が実行する各種のプログラムや処理中のデータ等を記憶する記憶部４３と、内視鏡装置１を構成する各部を統括的に制御する制御部４４と、を備える。
【００２１】
画像処理部４１は、ＧＰＵ（Graphics  Processing  Unit）等を用いて構成される。画像処理部４１は、光源部３が同時式で照明光を照射した場合、撮像部２０が生成した撮像信号に対して補間処理を行って出力画像を生成する同時式画像生成部４１１と、光源部３が面順次式で照明光を照射した場合、撮像部２０が生成した撮像信号に対して補間処理を行って出力画像を生成する面順次式画像生成部４１２と、を有する。
【００２２】
入力部４２は、スイッチ、ボタンおよびタッチパネル等を用いて構成され、内視鏡装置１の動作を指示する指示信号の入力を受け付け、この受け付けた指示信号を制御部４４へ出力する。具体的には、入力部４２は、光源部３が照射する照明光の方式を切り替える指示信号の入力を受け付ける。例えば、入力部４２は、光源部３が同時式で照明光を照射している場合、光源部３に面順次式で照明光を照射させる指示信号の入力を受け付ける。
【００２３】
記憶部４３は、揮発性メモリや不揮発性メモリを用いて構成され、内視鏡装置１に関する各種情報や内視鏡装置１が実行するプログラムを記憶する。
【００２４】
制御部４４は、ＣＰＵ（Central  Processing  Unit）を用いて構成される。制御部４４は、入力部４２から入力された光源部３が照射する照明光の方式を切り替える指示信号に基づいて、光源部３が照射する照明光の方式を切り替える光源駆動切り替え部４４１と、光源駆動切り替え部４４１が切り替えた光源部３の方式に基づいて、画像処理部４１による補間処理の方法を切り替える画像処理制御部４４２と、を有する。
【００２５】
表示部５は、映像ケーブルを介してプロセッサ部４が生成した出力画像信号を受信し、この出力画像信号に対応する体内画像を表示する。表示部５は、液晶または有機ＥＬ（Electro  Luminescence）を用いて構成される。
【００２６】
〔撮像素子の構成〕
次に、撮像素子２０１の詳細な構成について説明する。図３は、撮像素子２０１の画素の構成を示す模式図である。
【００２７】
図３に示すように、撮像素子２０１は、光を受光する複数の画素Ｐが２次元格子状（２次元マトリックス状）に配置されてなる。各画素Ｐは、撮像光学系２００から入射された光を受光して光電変換を行うことによって撮像信号を生成する。この撮像信号には、各画素Ｐの輝度値（画素値）および画素の位置情報等が含まれる。図３において、ｉ行ｊ列目に配置されてなる画素を画素Ｐｉｊと記して表現する。なお、ｉおよびｊは、１以上の整数を示す。
【００２８】
〔カラーフィルタの構成〕
次に、カラーフィルタ２０２の詳細な構成について説明する。図４は、カラーフィルタ２０２の構成の一例を示す模式図である。
【００２９】
図４に示すように、カラーフィルタ２０２は、４×４で２次元格子状に並べられた１６個のフィルタからなるフィルタユニットＵ１を画素Ｐｉｊの配置に応じて並べられて配置したものである。フィルタが設けられた画素Ｐｉｊは、フィルタを透過した波長帯域の光を受光する。具体的には、赤色の波長帯域の光を透過するフィルタＲが設けられた画素Ｐｉｊは、赤色の波長帯域の光を受光する。以下、赤色の波長帯域の光を受光する画素ＰｉｊをＲ画素という。同様に、緑色の波長帯域の光を受光する画素ＰｉｊをＧ画素、青色の波長帯域の光を受光する画素ＰｉｊをＢ画素、緑色の波長帯域の光と青色の波長帯域の光とを受光する画素ＰｉｊをＣｙ画素という。なお、以下においては、Ｒ画素、Ｇ画素およびＢ画素が原色画素とし、Ｃｙ画素を補色画素として説明する。
【００３０】
図４に示すようにフィルタユニットＵ１は、青色（Ｂ）の波長帯域ＨＢ、緑色（Ｇ）の波長帯域ＨＧおよび赤色（Ｒ）の波長帯域ＨＲの光を透過する。ここで、青色、緑色および赤色の波長帯域ＨＢ，ＨＧおよびＨＲは、波長帯域ＨＢが３９０ｎｍ〜５００ｎｍ、波長帯域ＨＧが５００ｎｍ〜６００ｎｍ、波長帯域ＨＲが６００ｎｍ〜７００ｎｍである。また、フィルタユニットＵ１は、赤色の波長帯域ＨＲの光を透過するＲフィルタと、緑色の波長帯域ＨＧの光を透過するＧフィルタと、青色の波長帯域ＨＢの光を透過するＢフィルタと、青色の波長帯域の光および緑色の波長帯域の光を透過するＣｙフィルタと、を有する。具体的には、フィルタユニットＵ１は、Ｃｙフィルタが全体の１／２の割合（８つ）で市松状に配置され、Ｇフィルタが全体の１／４の割合（４つ）で配置され、ＢフィルタおよびＲフィルタの各々が１／８（２つ）の割合で配置されている。
【００３１】
〔各フィルタの透過特性〕
次に、カラーフィルタ２０２を構成する各フィルタの透過特性について説明する。図５は、カラーフィルタ２０２を構成する各フィルタの透過特性の一例を示す図である。図５において、各フィルタの透過率の最大値が等しくなるように透過率曲線を模擬的に規格化している。図５において、曲線ＬＢがＢフィルタの透過率曲線を示し、曲線ＬＧがＧフィルタの透過率曲線を示し、曲線ＬＲがＲフィルタの透過率曲線を示し、曲線ＬＣｙがＣｙフィルタの透過率曲線を示す。また、図５において、横軸が波長を示し、縦軸が透過率を示す。
【００３２】
図５に示すように、Ｂフィルタは、波長帯域ＨＢの光を透過する。Ｃｙフィルタは、波長帯域ＨＢおよび波長帯域ＨＧそれぞれの光を透過し、波長帯域ＨＲの光を吸収（遮光）する。即ち、Ｃｙフィルタは、補色であるシアン色の波長帯域の光を透過する。Ｇフィルタは、波長帯域ＨＧの光を透過する。Ｒフィルタは、波長帯域ＨＲの光を透過する。なお、本明細書において、補色とは、波長帯域ＨＢ，ＨＧ，ＨＲのうち少なくとも二つの波長帯域を含む光により構成される色のことをいう。
【００３３】
このように構成された内視鏡装置１は、内視鏡２を介して光源部３によって照明光が照射された被写体を内視鏡２で撮像し、内視鏡２で生成された撮像信号をプロセッサ部４で各種信号処理を施してカラー画像を生成して表示部５に表示する。この場合において、光源駆動切り替え部４４１は、入力部４２から同時式を指示する指示信号が入力された場合、光源部３に同時式で照明光を照射させる一方、入力部４２から面順次式を指示する指示信号が入力された場合、光源部３に面順次式で照明光を照射させる。このとき、画像処理制御部４４２は、光源駆動切り替え部４４１が切り替えた光源部３の方式に基づいて、画像処理部４１による補間処理の方法を切り替える。具体的には、画像処理制御部４４２は、光源部３の方式が同時式の場合、撮像部２０が生成した撮像信号に対して同時式画像生成部４１１に補間処理を行わせて出力画像を生成させて表示部５へ出力させる一方、光源部３の方式が面順次式の場合、撮像部２０が生成した撮像信号に対して面順次式画像生成部４１２に補間処理を実行させて出力画像を生成させて表示部５へ出力させる。
【００３４】
以上説明した本発明の実施の形態１によれば、光源部３の方式が同時式の場合、画像処理制御部４４２が撮像部２０によって生成された撮像信号に対して同時式画像生成部４１１に補間処理を行わせて出力画像を生成させて表示部５へ出力させる一方、光源部３の方式が面順次式の場合、画像処理制御部４４２が撮像部２０によって生成された撮像信号に対して面順次式画像生成部４１２に補間処理を実行させて出力画像を生成させて表示部５へ出力させるので、原色画素および補色画素が混在したカラーフィルタ２０２を配置した撮像素子２０１を用いて撮像する場合であっても、同時式で撮像した色ズレのない出力画像および面順次式で撮像した色分離および解像度に優れた出力画像を生成することができる。
【００３５】
（実施の形態２）
次に、本発明の実施の形態２について説明する。本実施の形態２は、上述した実施の形態１と構成および処理が異なる。以下においては、本実施の形態２に係る内視鏡装置の構成を説明後、内視鏡装置が実行する処理について説明する。なお、上述した実施の形態１に係る内視鏡装置１と同一の構成には同一の符号を付して詳細な説明は省略する。
【００３６】
〔内視鏡装置の構成〕
図６は、本発明の実施の形態２に係る内視鏡装置の概略構成を示す模式図である。図６に示す内視鏡装置１Ａは、被検体に挿入することによって観察部位の体内画像を撮像して撮像信号を生成する内視鏡２Ａと、内視鏡２Ａの先端から出射する照明光を発生する光源部３Ａと、プロセッサ部４と、表示部５と、を備える。医師等の使用者は、表示部５で表示された体内画像の観察を行うことによって、検出対象部位である出血部位、腫瘍部位（病変部Ｓ）および異常部位それぞれの有無を検査する。
【００３７】
〔内視鏡の構成〕
まず、内視鏡２Ａの構成について説明する。
内視鏡２Ａは、撮像光学系２００と、撮像素子２０１と、カラーフィルタ２０２と、ライトガイド２０３と、照明用レンズ２０４と、Ａ／Ｄ変換部２０５と、撮像情報記憶部２０６と、操作部２０７と、を備える。
【００３８】
撮像光学系２００は、少なくとも観察部位からの光を集光する。撮像光学系２００は、一または複数のレンズを用いて構成される。なお、撮像光学系２００には、画角を変化させる光学ズーム機構および焦点を変化させるフォーカス機構を設けてもよい。
【００３９】
ライトガイド２０３は、グラスファイバ等を用いて構成され、光源部３Ａが出射した光の導光路をなす。
【００４０】
照明用レンズ２０４は、ライトガイド２０３の先端に設けられ、ライトガイド２０３によって、導光された光を拡散して内視鏡２Ａの先端から外部に出射する。照明用レンズ２０４は、一または複数のレンズを用いて構成される。
【００４１】
Ａ／Ｄ変換部２０５は、撮像素子２０１が生成したアナログの撮像信号をＡ／Ｄ変換し、この変換したデジタルの撮像信号をプロセッサ部４へ出力する。
【００４２】
撮像情報記憶部２０６は、内視鏡２Ａを動作させるための各種プログラム、内視鏡２Ａの動作に必要な各種パラメータおよび内視鏡２Ａの識別情報を含むデータを記憶する。また、撮像情報記憶部２０６は、識別情報を記録する識別情報記憶部２６１を有する。識別情報には、内視鏡２Ａの固有情報（ＩＤ）、年式、スペック情報、伝送方式およびカラーフィルタ２０２におけるフィルタの配列情報等が含まれる。撮像情報記憶部２０６は、フラッシュメモリ等を用いて実現される。
【００４３】
操作部２０７は、内視鏡２Ａの動作を切り替える指示信号や光源部３Ａに照明光の切替動作を行わせるための指示信号等の入力を受け付け、この受け付けた指示信号をプロセッサ部４へ出力する。操作部２０７は、スイッチ、ジョグダイヤル、ボタンおよびタッチパネル等を用いて構成される。
【００４４】
〔光源部の構成〕
次に、光源部３Ａの構成について説明する。光源部３Ａは、照明部３１と、照明制御部３２と、を備える。
【００４５】
照明部３１は、照明制御部３２の制御のもと、波長帯域が互いに異なる照明光をライトガイド２０３へ出射する。照明部３１は、光源３１ａと、光源ドライバ３１ｂと、切替フィルタ３１ｃと、駆動部３１ｄと、駆動ドライバ３１ｅと、を有する。
【００４６】
光源３１ａは、照明制御部３２の制御のもと、照明光を出射する。光源３１ａが出射した照明光は、切替フィルタ３１ｃや、集光レンズ３１ｆおよびライトガイド２０３を経由して内視鏡２Ａの先端から外部に出射される。光源３１ａは、互いに異なる波長帯域の光を照射する複数のＬＥＤランプまたは複数のレーザ光源を用いて実現される。具体的には、光源３１ａは、ＬＥＤ３１ａ＿Ｂ、ＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒの３つのＬＥＤランプを用いて構成される。
【００４７】
図７は、光源３１ａが出射する各光の分光特性の一例を示す図である。図７において、横軸が波長を示し、縦軸が強度を示す。図７において、曲線ＬＬＥＤＢがＬＥＤ３１ａ＿Ｂによって照射される青色の照明光の分光特性を示し、曲線ＬＬＥＤＧがＬＥＤ３１ａ＿Ｇによって照射される緑色の照明光の分光特性を示し、曲線ＬＬＥＤＲがＬＥＤ３１ａ＿Ｒによって照射される赤色の照明光の分光特性を示す。
【００４８】
図７の曲線ＬＬＥＤＢに示すように、ＬＥＤ３１ａ＿Ｂは、青色の波長帯域ＨＢ（例えば３８０ｎｍ〜４８０ｎｍ）にピーク強度を有する。また、図７の曲線ＬＬＥＤＧに示すように、ＬＥＤ３１ａ＿Ｇは、緑色の波長帯域ＨＧ（例えば４８０ｎｍ〜５８０ｎｍ）にピーク強度を有する。さらに、図７の曲線ＬＬＥＤＲに示すように、ＬＥＤ３１ａ＿Ｒは、赤色の波長帯域ＨＲ（例えば５８０ｎｍ〜６８０ｎｍ）にピーク強度を有する。
【００４９】
図６に戻り、内視鏡装置１Ａの構成の説明を続ける。
光源ドライバ３１ｂは、照明制御部３２の制御のもと、光源３１ａに対して電流を供給することによって、光源３１ａに照明光を出射させる。
【００５０】
切替フィルタ３１ｃは、光源３１ａが出射する照明光の光路上に挿脱自在に配置されてなり、光源３１ａが出射した照明光のうち所定の波長帯域の光を透過する。具体的には、切替フィルタ３１ｃは、青色の狭帯域光および緑色の狭帯域光を透過する。即ち、切替フィルタ３１ｃは、照明光の光路上に配置された場合、２つの狭帯域光を透過する。より具体的には、切替フィルタ３１ｃは、波長帯域ＨＢに含まれる狭帯域ＴＢ（例えば、３９０ｎｍ〜４４５ｎｍ）の光と、波長帯域ＨＧに含まれる狭帯域ＴＧ（例えば、５３０ｎｍ〜５５０ｎｍ）の光と、を透過する。
【００５１】
図８は、光源部３Ａが出射する狭帯域光の分光特性の一例を示す図である。図８において、横軸が波長を示し、縦軸が強度を示す。また、図８において、曲線ＬＮＢが切替フィルタ３１ｃを透過した狭帯域ＴＢにおける狭帯域光の分光特性を示し、曲線ＬＮＧが切替フィルタ３１ｃを透過した狭帯域ＴＧにおける狭帯域光の分光特性を示す。
【００５２】
図８の曲線ＬＮＢおよび曲線ＬＮＧに示すように、切替フィルタ３１ｃは、青色の狭帯域ＴＢの光および緑色の狭帯域ＴＧの光を透過する。切替フィルタ３１ｃを透過した光は、狭帯域ＴＢおよび狭帯域ＴＧからなる狭帯域照明光となる。この狭帯域ＴＢ，ＴＧは、血液中のヘモグロビンに吸収されやすい青色光および緑色光の波長帯域である。この狭帯域照明光による画像の観察を狭帯域光観察方式（ＮＢＩ方式）という。
【００５３】
図６に戻り、内視鏡装置１Ａの構成の説明を続ける。
駆動部３１ｄは、ステッピングモータやＤＣモータ等を用いて構成され、照明制御部３２の制御のもと、切替フィルタ３１ｃを光源３１ａが出射する照明光の光路上に挿入または光路上から退避させる。具体的には、駆動部３１ｄは、照明制御部３２の制御のもと、内視鏡装置１Ａが白色光観察方式（ＷＬＩ方式）を行う場合、切替フィルタ３１ｃを光源３１ａが出射する照明光の光路上から退避させる一方、内視鏡装置１が狭帯域光観察方式（ＮＢＩ方式）を行う場合、切替フィルタ３１ｃを光源３１ａが出射する照明光の光路上に挿入（配置）する。
【００５４】
駆動ドライバ３１ｅは、照明制御部３２の制御のもと、駆動部３１ｄに所定の電流を供給する。
【００５５】
集光レンズ３１ｆは、光源３１ａが発した照明光を集光してライトガイド２０３へ出射する。また、集光レンズ３１ｆは、切替フィルタ３１ｃを透過した照明光を集光してライトガイド２０３へ出射する。集光レンズ３１ｆは、一または複数のレンズを用いて構成される。
【００５６】
照明制御部３２は、ＣＰＵ等を用いて構成される。照明制御部３２は、プロセッサ部４から入力される指示信号に基づいて、光源ドライバ３１ｂを制御して光源３１ａをオンオフ動作させる。また、照明制御部３２は、プロセッサ部４から入力される指示信号に基づいて、駆動ドライバ３１ｅを制御して切替フィルタ３１ｃを光源３１ａが出射する照明光の光路上に挿入したり、退避させたりすることによって、照明部３１が出射する照明光の種類（帯域）を制御する。具体的には、照明制御部３２は、面順次式の場合、光源３１ａの少なくとも２つのＬＥＤランプを個別に点灯させる一方、同時式の場合、光源３１ａの少なくとも２つのＬＥＤランプを同時に点灯させることによって、照明部３１から出射される照明光を、面順次式および同時式のいずれか一方に切り替える制御を行う。
【００５７】
〔照明制御部による照明部の点灯制御〕
次に、照明制御部３２による照明部３１の点灯制御について説明する。
図９は、照明制御部３２が同時式の白色光観察時に行う照明部３１の点灯制御を模式的に示す図である。図１０は、照明制御部３２が同時式の狭帯域光観察時に行う照明部３１の点灯制御を模式的に示す図である。図１１は、照明制御部３２が面順次式の白色光観察時に行う照明部３１の点灯制御を模式的に示す図である。図１２は、照明制御部３２が面順次式の狭帯域光観察時に行う照明部３１の点灯制御を模式的に示す図である。図９〜図１２において、横軸が時間を示し、縦軸が各ＬＥＤの点灯タイミングを示す。
【００５８】
図９に示すように、照明制御部３２は、内視鏡装置１Ａが同時式の白色光観察に行う場合、ＬＥＤ３１ａ＿Ｂ、ＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒを同時に所定の間隔で点灯させる。また、図１０に示すように、照明制御部３２は、内視鏡装置１Ａが同時式の狭帯域光観察を行う場合、ＬＥＤ３１ａ＿ＢおよびＬＥＤ３１ａ＿Ｇを所定の間隔で同時に点灯させる。
【００５９】
図１１に示すように、照明制御部３２は、内視鏡装置１Ａが面順次式の白色光観察を行う場合、ＬＥＤ３１ａ＿Ｂのみを点灯させる第１の期間と、ＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒを点灯させる第２の期間と、を交互に繰り返させてＬＥＤ３１ａ＿Ｂ、ＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒの各々を個別のタイミングで点灯させる。また、図１２に示すように、照明制御部３２は、内視鏡装置１Ａが面順次式の狭帯域光観察を行う場合、ＬＥＤ３１ａ＿Ｂのみを点灯させる第１の期間と、ＬＥＤ３１ａ＿Ｇのみを点灯させる第２の期間と、を交互に繰り返させてＬＥＤ３１ａ＿ＢおよびＬＥＤ３１ａ＿Ｇの各々を個別のタイミングで点灯させる。
【００６０】
〔内視鏡装置の処理〕
次に、内視鏡装置１Ａが実行する処理について説明する。
図１３は、内視鏡装置１Ａが実行する処理の概要を示すフローチャートである。
【００６１】
図１３に示すように、まず、内視鏡２Ａ、光源部３Ａおよびプロセッサ部４の各々が接続され、撮像を開始する準備が整うと、制御部４４は、光源部３Ａの駆動方式や観察方式、および撮像素子２０１の撮像に関する撮像設定の読み込みを行う（ステップＳ１０１）。
【００６２】
続いて、光源駆動切り替え部４４１は、観察方式が白色光観察であるか否かを判断し（ステップＳ１０２）、観察方式が白色光観察である場合（ステップＳ１０２：Ｙｅｓ）、光源駆動切り替え部４４１は、照明制御部３２を介して駆動部３１ｄを駆動することによって切替フィルタ３１ｃを光源３１ａによって照射される照明光の光路上から退避させる（ステップＳ１０３）。これに対して、観察方式が白色光観察でない場合（ステップＳ１０２：Ｎｏ）、光源駆動切り替え部４４１は、照明制御部３２を介して駆動部３１ｄを駆動することによって切替フィルタ３１ｃを光源３１ａによって照射される照明光の光路上に挿入する（ステップＳ１０４）。
【００６３】
ステップＳ１０３またはステップＳ１０４の後、光源駆動切り替え部４４１は、光源部３Ａに上述したステップＳ１０１で設定された方式で照明光を出射させる（ステップＳ１０５）。
【００６４】
続いて、内視鏡２Ａは、光源部３Ａによって照明光が照射された被検体の撮像を行う（ステップＳ１０６）。
【００６５】
その後、画像処理制御部４４２は、光源部３Ａの方式が同時式であるか否かを判断し（ステップＳ１０７）、光源部３Ａの方式が同時式である場合（ステップＳ１０７：Ｙｅｓ）、画像処理制御部４４２は、同時式画像生成部４１１に内視鏡２Ａが生成した撮像信号を用いて出力画像を生成させる同時式画像生成処理を実行させる（ステップＳ１０８）。ステップＳ１０８の後、内視鏡装置１Ａは、後述するステップＳ１１０へ移行する。なお、同時式画像生成処理の詳細は後述する。
【００６６】
ステップＳ１０７において、光源部３Ａの方式が同時式でない場合（ステップＳ１０７：Ｎｏ）、画像処理制御部４４２は、面順次式画像生成部４１２に内視鏡２Ａが生成した撮像信号を用いて出力画像を生成させる面順次式画像生成処理を実行させる（ステップＳ１０９）。ステップＳ１０９の後、内視鏡装置１Ａは、後述するステップＳ１１０へ移行する。なお、面順次式画像生成処理の詳細は後述する。
【００６７】
続いて、同時式画像生成部４１１または面順次式画像生成部４１２が生成した出力画像を表示部５へ出力する（ステップＳ１１０）。ステップＳ１１０の後、内視鏡装置１Ａは、本処理を終了する。
【００６８】
〔同時式画像生成処理の詳細〕
次に、上述したステップＳ１０８で説明した同時式画像生成処理の詳細について説明する。
【００６９】
まず、内視鏡装置１Ａの白色光観察時に同時式画像生成部４１１が行う同時式画像生成処理について説明する。図１４は、内視鏡装置１Ａの白色光観察時に同時式画像生成部４１１が行う同時式画像生成処理の概要を示す模式図である。
【００７０】
図１４に示すように、同時式画像生成部４１１は、内視鏡２Ａが生成した原色画素および補色画素が混在した撮像信号に対応する画像Ｆ１に対して、最も画素数の多いＣｙ画素の画像ＦＣｙ１を用いて補間処理を行うことによってＣｙ画素のＣｙ補間画像ＦＣｙ２を生成する。そして、同時式画像生成部４１１は、図１４に示すように、Ｃｙ補間画像ＦＣｙ２（ガイド画像）の情報をガイドとして、画像ＦＧ１、画像ＦＢ１および画像ＦＲ１の各々に対して補間処理を行うことによってＢ補間画像ＦＧ２、Ｇ補間画像ＦＢ２およびＲ補間画像ＦＲ２の各々を生成する。ここで、ガイド画像を用いた補間処理としては、既知のジョイントバイラテラル補間処理およびガイデッドフィルタ補間処理等である。
【００７１】
次に、内視鏡装置１Ａの狭帯域光観察時に同時式画像生成部４１１が行う同時式画像生成処理について説明する。図１５は、内視鏡装置１Ａの狭帯域光観察時に同時式画像生成部４１１が行う同時式画像生成処理の概要を示す模式図である。
【００７２】
図１５に示すように、同時式画像生成部４１１は、内視鏡２Ａが生成した原色画素および補色画素が混在した撮像信号に対応する画像Ｆ１０に対して、最も画素数の多いＣｙ画素の画像ＦＣｙ１を用いて補間処理を行うことによってＣｙ画素のＣｙ補間画像ＦＣｙ２を生成する。そして、同時式画像生成部４１１は、図１５に示すように、Ｃｙ補間画像ＦＣｙ２（ガイド画像）の情報をガイドとして、画像ＦＧ１および画像ＦＢ１の各々に対して補間処理を行うことによってＢ補間画像ＦＧ２およびＧ補間画像ＦＢ２の各々を生成する。狭帯域光観察では、図１５に示すように、赤色の波長帯域ＨＲの照明光がないため、Ｒ画素が信号値を取得することができないうえ、Ｂ補間画像ＦＧ２およびＧ補間画像ＦＢ２の各々を疑似カラー画像として出力する。このため、同時式画像生成部４１１は、Ｒ補間画像ＦＲ２の生成を行わない。
【００７３】
このように、同時式画像生成部４１１は、１フレームに対応する撮像信号からＧ補間画像およびＢ補間画像を生成する。この結果、同時式画像生成部４１１が出力する出力画像は、原理的に色ずれが発生することを防止することができる。
【００７４】
〔面順次式画像生成処理の詳細〕
次に、上述したステップＳ１０９で説明した面順次式画像生成処理の詳細について説明する。なお、面順次式画像生成部４１２が行う面順次式画像生成処理は、１フレーム毎に異なるため、１フレーム毎に面順次式画像処理について説明する。
【００７５】
まず、内視鏡装置１Ａの白色光観察時に面順次式画像生成部４１２が行う面順次式画像生成処理について説明する。図１６は、内視鏡装置１Ａの白色光観察時にＬＥＤ３１ａ＿Ｂによって照明光が照射された際の面順次式画像生成部４１２が行う面順次式画像生成処理の概要を示す模式図である。図１７は、内視鏡装置１Ａの白色光観察時にＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒによって照明光が照射された際の面順次式画像生成部４１２が行う面順次式画像生成処理の概要を示す模式図である。
【００７６】
図１６に示すように、光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームの撮像信号に対応する画像Ｆ２０では、画像情報（信号値）を得られる画素がＣｙ画素およびＢ画素のみである。Ｃｙ画素は、青色の波長帯域ＨＢのみ感度を有するため、Ｃｙ画素をＢ画素とみなすことができる。面順次式画像生成部４１２は、Ｇ画素およびＲ画素の各々の画像情報を取得することができない。このため、面順次式画像生成部４１２は、画像ＦＢ２１および画像ＦＢ１を用いて、既知のバイリニア補間処理、キュービック補間処理および方向判別補間処理等の補間処理を行うことによって全画画素の位置にＢ情報の画像情報を有するＢ補間画像ＦＢ２２を生成する。
【００７７】
また、図１７に示すように、光源部３ＡでＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒのみを照射するフレームの撮像信号に対応する画像Ｆ３０では、画像情報（信号値）を得られる画素がＣｙ画素、Ｇ画素およびＲ画素のみである。Ｃｙ画素は、緑色の波長帯域ＨＧの感度を有するため、Ｃｙ画素をＧ画素とみなすことができる。面順次式画像生成部４１２は、画像ＦＧ３２を用いて、上述した光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームと同様の補間処理を行うことによって、全画画素の位置にＧ情報の画像情報を有するＧ補間画像ＦＧ３３を生成する。さらに、面順次式画像生成部４１２は、画像ＦＲ１を用いて、上述した光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームと同様の補間処理を行うことによって、全画画素の位置にＲ情報の画像情報を有するＲ補間画像ＦＲ３３を生成する。
【００７８】
そして、面順次式画像生成部４１２は、光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームのＢ補間画像ＦＢ２２、光源部３ＡでＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒのみを照射するフレームのＧ補間画像ＦＧ３３およびＲ補間画像ＦＲ３３を用いて出力画像を生成して表示部５へ出力する。
【００７９】
次に、内視鏡装置１Ａの狭帯域光観察時に面順次式画像生成部４１２が行う面順次式画像生成処理について説明する。図１８は、内視鏡装置１Ａの狭帯域光観察時にＬＥＤ３１ａ＿Ｂによって照明光が照射された際の面順次式画像生成部４１２が行う面順次式画像生成処理の概要を示す模式図である。図１９は、内視鏡装置１Ａの狭帯域光観察時にＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒによって照明光が照射された際の面順次式画像生成部４１２が行う面順次式画像生成処理の概要を示す模式図である。
【００８０】
図１８に示すように、光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームの撮像信号に対応する画像Ｆ３０では、画像情報（信号値）を得られる画素がＣｙ画素およびＢ画素のみである。Ｃｙ画素は、青色の波長帯域ＨＢのみ感度を有するため、Ｃｙ画素をＢ画素とみなすことができる。面順次式画像生成部４１２は、Ｇ画素およびＲ画素の各々の画像情報を取得することができない。このため、面順次式画像生成部４１２は、画像ＦＢ２１および画像ＦＢ１を用いて、既知のバイリニア補間処理、キュービック補間処理および方向判別補間処理等の補間処理を行うことによって全画画素の位置にＢ情報の画像情報を有するＢ補間画像ＦＢ２２を生成する。
【００８１】
また、図１９に示すように、光源部３ＡでＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒのみを照射するフレームの撮像信号に対応する画像Ｆ４０では、画像情報（信号値）を得られる画素がＣｙ画素およびＧ画素のみである。Ｃｙ画素は、緑色の波長帯域ＨＧの感度を有するため、Ｃｙ画素をＧ画素とみなすことができる。面順次式画像生成部４１２は、画像ＦＧ３２を用いて、上述した光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームと同様の補間処理を行うことによって、全画画素の位置にＧ情報の画像情報を有するＧ補間画像ＦＧ３３を生成する。
【００８２】
そして、面順次式画像生成部４１２は、光源部３ＡでＬＥＤ３１ａ＿Ｂのみを照射するフレームのＢ補間画像ＦＢ２３および光源部３ＡでＬＥＤ３１ａ＿Ｇのみを照射するフレームのＧ補間画像ＦＧ３３を用いて疑似カラーの出力画像を生成して表示部５へ出力する。
【００８３】
このように、面順次式画像生成部４１２は、光源部３ＡでＬＥＤ３１ａ＿Ｂ、ＬＥＤ３１ａ＿ＧおよびＬＥＤ３１ａ＿Ｒの各々が別のフレームで照射されるため、同時式画像生成部４１１が生成した出力画像に比べて色分離性能が優れた出力画像を生成することができる。
【００８４】
さらに、面順次式画像生成部４１２は、Ｃｙ画素をＢ画素またはＧ画素としてみなして補間処理を行うため、同時式画像生成部４１１の処理に比べて補正処理により算出する必要がある画素の数が少ないので、補間処理も高精度に行うことができる。即ち、面順次式画像生成部４１２は、同時式画像生成部４１１が生成した出力画像に比べて解像度が優れた出力画像を生成することができる。面順次式画像生成部４１２によって生成された出力画像の解像度が優れる理由は、撮像素子２０１上に補色フィルタが多く配置されているからである。このため、一般的なベイヤ配列では、解像度を向上させることができない。
【００８５】
以上説明した本発明の実施の形態２によれば、白色光観察方式および狭帯域光観察方式を行う場合において、原色画素および補色画素が混在した撮像素子を用いるときであっても、同時式で撮像した色ズレのない出力画像および面順次式で撮像した色分離および解像度に優れた出力画像を生成することができる。
【００８６】
（実施の形態３）
次に、本発明の実施の形態３について説明する。本実施の形態３は、上述した実施の形態２に係る内視鏡装置１Ａと構成が異なる。具体的には、本実施の形態３は、撮像信号に基づいて、内視鏡の状況を検出し、この検出結果に応じて面順次式および同時式のどちらか一方に切り替える。以下においては、本実施の形態３に係る内視鏡装置の構成を説明後、本実施の形態３に係る内視鏡装置が実行する処理について説明する。なお、上述した実施の形態２と同一の構成には同一の符号を付して説明を省略する。
【００８７】
〔内視鏡装置の構成〕
図２０は、本発明の実施の形態３に係る内視鏡装置の概略構成を示す模式図である。図２０に示す内視鏡装置１Ｂは、上述した実施の形態２に係るプロセッサ部４に換えて、プロセッサ部４Ｂを備える。プロセッサ部４Ｂは、上述した実施の形態２に係る制御部４４に換えて、制御部４４Ｂを備える。
【００８８】
制御部４４Ｂは、上述した実施の形態２に係る制御部４４の構成に加えて、シーン情報検出部４４３をさらに備える。
【００８９】
シーン情報検出部４４３は、内視鏡２Ａが生成した撮像信号に基づいて、動き量を検出する。例えば、シーン情報検出部４４３は、内視鏡２Ａが生成した時間的に前後する撮像信号に基づいて、内視鏡２が撮像しているシーンの動き量を検出する。
【００９０】
〔内視鏡装置の処理〕
次に、内視鏡装置１Ｂが実行する処理について説明する。
図２１は、内視鏡装置１Ｂが実行する処理の概要を示すフローチャートである。図２１において、ステップＳ２０１〜ステップＳ２０６は、上述した図１３のステップＳ１０１〜ステップＳ１０６それぞれに対応する。
【００９１】
ステップＳ２０７において、シーン情報検出部４４３は、前フレームの撮像情報と現フレームの撮像情報のフレーム間の差分を算出し、算出した動き量と予め設定された閾値とを比較し（ステップＳ２０７）、シーン情報検出部４４３によって動き量が予め設定された閾値以上であると判断された場合（ステップＳ２０７：Ｙｅｓ）、光源駆動切り替え部４４１は、次フレームの光源駆動方式として同時式を選択する（ステップＳ２０８）。ステップＳ２０８の後、内視鏡装置２Ｂは、後述するステップＳ２１０へ移行する。これに対して、シーン情報検出部４４３によって動き量が予め設定された閾値以上でないと判断された場合（ステップＳ２０７：Ｎｏ）、光源駆動切り替え部４４１は、次フレームの光源駆動方式として面順次式を選択する（ステップＳ２０９）。ステップＳ２０９の後、内視鏡装置２Ｂは、後述するステップＳ２１０へ移行する。
【００９２】
ステップＳ２１０において、光源駆動切り替え部４４１は、次フレームの光源駆動方式を記憶部４３に保存する。ステップＳ２１０の後、内視鏡装置２Ｂは、ステップＳ２１１へ移行する。
ステップＳ２１１において、現フレームの光源駆動方式が同時式である場合（ステップＳ２１１：Ｙｅｓ）、内視鏡装置１Ｂは、ステップＳ２１２へ移行し、現フレームの光源駆動方式が同時式でない場合（ステップＳ２１１：Ｎｏ）、内視鏡装置１Ｂは、ステップＳ２１３へ移行する。
【００９３】
ステップＳ２１２〜ステップＳ２１４は、上述した図１３のステップＳ１０８〜ステップＳ１１０それぞれに対応する。ステップＳ２１４の後、内視鏡装置２Ｂは、本処理を終了する。
【００９４】
以上説明した本発明の実施の形態３によれば、白色光観察方式および狭帯域光観察方式を行う場合において、原色画素および補色画素が混在した撮像素子を用いるときであっても、同時式および面順次式のどちらも優れた画質の画像を生成することができる。
【００９５】
また、本発明の実施の形態３によれば、光源駆動切り替え部４４１がシーン情報検出部４４３によって検出された動き量に応じて、光源部３Ａの方式を切り替えるので、ユーザによる切り替え操作を省略することができる。
【００９６】
なお、本発明の実施の形態３では、シーン情報検出部４４３が動き量を検出していたが、これに限定されることない。例えば、シーン情報検出部４４３は、内視鏡２Ａが生成した撮像信号に対してエッジ抽出処理を行うことによってエッジ量を検出してもよい。この場合、光源駆動切り替え部４４１は、シーン情報検出部４４３が検出したエッジ量が予め設定された閾値以上である場合、即ち、内視鏡２Ａが撮像するシーンにおいて動きが少なく異常箇所、例えば病変等の観察を行っている可能性が高いため、光源部３Ａに面順次式を実行させる一方、シーン情報検出部４４３が検出したエッジ量が予め設定された閾値以上でない場合、光源部３Ａに同時式を実行させる。
【００９７】
また、本発明の実施の形態３では、シーン情報検出部４４３が内視鏡２Ａによって生成された撮像信号に対応する画像に含まれる異常領域を自動で検出してもよい。例えば、シーン情報検出部４４３は、内視鏡２Ａによって生成された撮像信号に対応する画像に対して、予め学習された異常領域のモデルやパターンマッチングを用いて、内視鏡２Ａによって連続的に生成される撮像信号に対応する画像に対して、異常領域があるか否かを検出してもよい。ここで、異常領域とは、病変領域、出血領域および所定の閾値以上の輝度や彩度を有する領域である。光源駆動切り替え部４４１は、シーン情報検出部４４３が異常領域を検出した場合、即ち、内視鏡２Ａが撮像するシーンにおいて動きが少なく異常箇所、例えば病変等の観察を行っている可能性が高いため、光源部３Ａに面順次式を実行させる一方、シーン情報検出部４４３が異常領域を検出していない場合、光源部３Ａに同時式を実行させる。
【００９８】
また、本発明の実施の形態３では、内視鏡２Ａによって生成された撮像信号に基づいて、内視鏡装置１Ａのシーンを検出していたが、これに限定されることなく、内視鏡２Ａの先端部（図示せず）に加速度センサやジャイロセンサ等の検出センサ（図示せず）を設け、シーン情報検出部４４３が検出センサによって検出された検出結果に基づいて、内視鏡２Ａの動き量を検出してもよい。この場合、光源駆動切り替え部４４１は、シーン情報検出部４４３が検出した動き量が予め設定された閾値以上である場合、光源部３Ａに同時式を実行させる一方、シーン情報検出部４４３が検出した動き量が予め設定された閾値以上でない場合、光源部３Ａに面順次式を実行させる。
【００９９】
また、本発明の実施の形態３では、シーン情報検出部４４３が撮像光学系２００の焦点距離を検出してもよい。撮像光学系２００が２倍の拡大観察できる場合において、光源駆動切り替え部４４１は、シーン情報検出部４４３が検出した焦点距離が予め設定された閾値以上であるとき（例えば撮像光学系２００の焦点距離が２倍であり、内視鏡２Ａが拡大観察を行っているとき）、光源部３Ａに同時式を実行させる一方、シーン情報検出部４４３が検出した焦点距離が予め設定された閾値以上でないとき（（例えば撮像光学系２００の焦点距離が１倍であり、内視鏡２が通常観察を行っているとき）、撮像光学系２００が通常拡大観察の２倍を行っている）、光源部３Ａに面順次式を実行させる。
【０１００】
また、本発明の実施の形態３では、シーン情報検出部４４３が処置具の使用状況を検出してもよい。この場合において、光源駆動切り替え部４４１は、シーン情報検出部４４３が処置具の使用を検出したとき、光源部３Ａに同時式を実行させる一方、シーン情報検出部４４３が処置具の使用を検出していないとき（撮像光学系２００が通常拡大観察の２倍を行っている）、光源部３Ａに面順次式を実行させる。
【０１０１】
（その他の実施の形態）
上述した実施の形態１〜３では、カラーフィルタの構成を適宜変更することができる。図２２は、本実施の形態１〜３の変形例に係るカラーフィルタの構成の一例を示す模式図である。図２２に示すように、カラーフィルタ２０２Ｃは、４×４で２次元格子状に並べられた１６個のフィルタからなるフィルタユニットＵ２を画素Ｐｉｊの配置に応じて並べられて配置したものである。具体的には、上述したカラーフィルタ２０２のＲフィルタに換えて、Ｍｇフィルタを配置したものである。Ｍｇ画素は、図２３の曲線ＬＭｇに示すように、青色の波長帯域ＨＢの光および赤色の波長帯域ＨＧの光を受光する。
【０１０２】
また、上述した実施の形態１〜３では、光源部が照射する照明光の種類を４種類以上としてもよい。例えば、図２４の曲線ＬＬＥＤＶおよび曲線ＬＬＥＤＹに示すように、光源部を５つ以上のＬＥＤ、例えばバイオレットの波長帯域を照射可能な光源およびイエローの波長帯域を照射可能な光源をさらに追加してもよい。
【０１０３】
以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
【０１０４】
また、本願の実施形態では、軟性の内視鏡装置を例に説明したが、これに限定されることなく、硬性の内視鏡装置であっても適用することができる。もちろん、カプセル型内視鏡装置や顕微鏡装置であっても適用することができる。
【０１０５】
また、上記してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、制御部は、制御手段や制御回路に読み替えることができる。
【符号の説明】
【０１０６】
１，１Ａ，１Ｂ  内視鏡装置
２，２Ａ  内視鏡
３，３Ａ  光源部
４，４Ｂ  プロセッサ部
５  表示部
２０  撮像部
３１  照明部
３１ａ  光源
３１ｂ  光源ドライバ
３１ｃ  切替フィルタ
３１ｄ  駆動部
３１ｅ  駆動ドライバ
３１ｆ  集光レンズ
３２  照明制御部
４１  画像処理部
４２  入力部
４３  記憶部
４４，４４Ｂ  制御部
２００  撮像光学系
２０１  撮像素子
２０２，２０２ｃ  カラーフィルタ
２０３  ライトガイド
２０４  照明用レンズ
２０５  Ａ／Ｄ変換部
２０６  撮像情報記憶部
２０７  操作部
２６１  識別情報記憶部
４１１  同時式画像生成部
４１２  面順次式画像生成部
４４１  光源駆動切り替え部
４４２  画像処理制御部
４４３  シーン情報検出部
【図１】
2019069414.tif 000003
【図２】
2019069414.tif 000004
【図３】
2019069414.tif 000005
【図４】
2019069414.tif 000006
【図５】
2019069414.tif 000007
【図６】
2019069414.tif 000008
【図７】
2019069414.tif 000009
【図８】
2019069414.tif 000010
【図９】
2019069414.tif 000011
【図１０】
2019069414.tif 000012
【図１１】
2019069414.tif 000013
【図１２】
2019069414.tif 000014
【図１３】
2019069414.tif 000015
【図１４】
2019069414.tif 000016
【図１５】
2019069414.tif 000017
【図１６】
2019069414.tif 000018
【図１７】
2019069414.tif 000019
【図１８】
2019069414.tif 000020
【図１９】
2019069414.tif 000021
【図２０】
2019069414.tif 000022
【図２１】
2019069414.tif 000023
【図２２】
2019069414.tif 000024
【図２３】
2019069414.tif 000025
【図２４】
2019069414.tif 000026
【手続補正書】
【提出日】令和2年3月19日(2020.3.19)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、
２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、
赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、
前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成する画像処理部と、
前記光源部に対して、前記同時式および前記面順次式のどちらか一方に切り替える光源駆動切り替え部と、
前記光源駆動切り替え部が切り替えた結果に基づいて、前記画像処理部に前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御部と、
を備え、
前記画像処理部は、
前記補色フィルタが配置された前記画素の前記撮像信号をガイドにして前記補間処理を行う同時式画像生成部と、
前記補色フィルタが配置された前記画素の前記撮像信号を前記原色フィルタが配置された前記画素とみなして前記補間処理を行う面順次式画像生成部と、
を有し、
前記画像処理制御部は、前記光源部が前記同時式を行っている場合、前記同時式画像生成部に前記出力画像を生成させる一方、前記光源部が前記面順次式を行っている場合、前記面順次式画像生成部に前記出力画像を生成させることを特徴とする内視鏡装置。
【請求項２】
前記光源部は、青色の波長帯域にピーク強度を有する青色光および緑色の波長帯域にピーク強度を有する緑色光の各々を照射可能であり、
前記光源駆動切り替え部は、前記光源部に対して前記面順次式を実行させる場合、前記光源部に前記青色光および前記緑色光を交互に照射させることを特徴とする請求項１に記載の内視鏡装置。
【請求項３】
前記同時式および前記面順次式のどちらか一方を指示する指示信号の入力を受け付ける入力部をさらに備え、
前記光源駆動切り替え部は、前記指示信号に応じて、前記光源部の方式を切り替えることを特徴とする請求項１または２に記載の内視鏡装置。
【請求項４】
当該内視鏡装置のシーンを検出するシーン情報検出部をさらに備え、
前記光源駆動切り替え部は、前記シーン情報検出部の結果に基づいて、前記光源部の方式を切り替えることを特徴とする請求項１または２に記載の内視鏡装置。
【請求項５】
前記シーン情報検出部は、前記撮像信号に基づいて、動き量を検出し、
前記光源駆動切り替え部は、前記動き量が予め設定された閾値以上である場合、前記光源部に前記同時式を実行させる一方、前記動き量が予め設定された閾値以上でない場合、前記光源部に前記面順次式を実行させることを特徴とする請求項４に記載の内視鏡装置。
【請求項６】
前記シーン情報検出部は、前記撮像信号に基づいて、エッジ量を検出し、
前記光源駆動切り替え部は、前記エッジ量が予め設定された閾値以上である場合、前記光源部に前記面順次式を実行させる一方、前記エッジ量が予め設定された閾値以上でない場合、前記光源部に前記同時式を実行させることを特徴とする請求項４に記載の内視鏡装置。
【請求項７】
前記シーン情報検出部は、前記撮像信号に対応する画像に含まれる異常領域を検出し、
前記光源駆動切り替え部は、前記シーン情報検出部が前記異常領域を検出した場合、前記光源部に前記面順次式を実行させる一方、前記シーン情報検出部が前記異常領域を検出していない場合、前記光源部に前記同時式を実行させることを特徴とする請求項４に記載の内視鏡装置。
【請求項８】
前記撮像素子を先端部に有する内視鏡と、
前記先端部に設けられ、前記先端部の動きを検出する検出部と、
をさらに備え、
前記シーン情報検出部は、前記検出部が検出した検出結果に基づいて、前記内視鏡の動き量を検出し、
前記光源駆動切り替え部は、前記動き量が予め設定された閾値以上である場合、前記光源部に前記同時式を実行させる一方、前記動き量が予め設定された閾値以上でない場合、前記光源部に前記面順次式を実行させることを特徴とする請求項４に記載の内視鏡装置。
【請求項９】
焦点距離を変更可能であり、前記撮像素子の受光面に被写体像を結像する撮像光学系をさらに備え、
前記シーン情報検出部は、前記撮像光学系の前記焦点距離を検出し、
前記光源駆動切り替え部は、前記焦点距離が予め設定された閾値以上である場合、前記光源部に前記同時式を実行させる一方、前記焦点距離が予め設定された閾値以上でない場合、前記光源部に前記面順次式を実行させることを特徴とする請求項４に記載の内視鏡装置。
【請求項１０】
少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、を備える内視鏡装置が実行する画像処理方法であって、
前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理ステップと、
前記光源部に対して、前記同時式と前記面順次式とを切り替える光源駆動切り替えステップと、
前記光源駆動切り替えステップで切り替えた結果に基づいて、前記画像処理ステップの前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御ステップと、
を含み、
前記画像処理ステップは、
前記補色フィルタが配置された前記画素の前記撮像信号をガイドにして前記補間処理を行う同時式画像生成ステップと、
前記補色フィルタが配置された前記画素の前記撮像信号を前記原色フィルタが配置された前記画素とみなして前記補間処理を行う面順次式画像生成ステップと、
を含み、
前記画像処理制御ステップは、前記光源部が前記同時式を行っている場合、前記同時式画像生成ステップを行って前記出力画像を生成させる一方、前記光源部が前記面順次式を行っている場合、前記面順次式画像生成ステップを行って前記出力画像を生成させることを特徴とする画像処理方法。
【請求項１１】
少なくとも互いに波長帯域が異なる複数の光を同時に照射する同時式および、少なくとも互いに異なる波長帯域の複数の光の各々を個別に照射する面順次式のいずれか一方を行う光源部と、２次元格子状に配置されてなる複数の画素がそれぞれ受光して光電変換することによって撮像信号を生成する撮像素子と、赤色、緑色および青色のいずれか１つの波長帯域の光をそれぞれ透過する少なくとも１種類の原色フィルタと、緑色の波長帯域の光を透過し、かつ、赤色および青色のうち一方の波長帯域の光を透過する補色フィルタと、を有する複数のフィルタによって構成されたフィルタユニットを、前記複数の画素に対応させて配置してなるカラーフィルタと、を備える内視鏡装置に、
前記撮像信号に対して、少なくとも前記同時式または前記面順次式に応じた補間処理を行って出力画像を生成して出力する画像処理ステップと、
前記光源部に対して、前記同時式と前記面順次式とを切り替える光源駆動切り替えステップと、
前記光源駆動切り替えステップで切り替えた結果に基づいて、前記画像処理ステップの前記補間処理の方法を切り替えさせて前記出力画像を生成させる画像処理制御ステップと、
を実行させ、
前記画像処理ステップは、
前記補色フィルタが配置された前記画素の前記撮像信号をガイドにして前記補間処理を行う同時式画像生成ステップと、
前記補色フィルタが配置された前記画素の前記撮像信号を前記原色フィルタが配置された前記画素とみなして前記補間処理を行う面順次式画像生成ステップと、
を含み、
前記画像処理制御ステップは、前記光源部が前記同時式を行っている場合、前記同時式画像生成ステップを実行させて記出力画像を生成させる一方、前記光源部が前記面順次式を行っている場合、前記面順次式画像生成ステップを実行させて前記出力画像を生成させることを特徴とするプログラム。
【国際調査報告】
2019069414.tif 000027
2019069414.tif 000028