(57)【要約】【課題】装置の大型化を防止しつつ、撮像装置の基本的な性能を必要に応じて選択することが可能な撮像装置、並びにそれを備える顕微鏡装置及び内視鏡装置を提供すること。【解決手段】撮像装置１００は、照明光を観察対象に照射する照明部１０２と、観察対象を撮像して画像信号を取得する撮像部１０４と、前記画像信号を処理する画像処理部１０６とを備える。照明部１０２は、互いに異なる複数の光波長バンドの照明光を選択的に照射する照明ユニット１０２１と、照明ユニット１０２１から照射される照明光の光波長バンドの組み合わせを互いに異ならせるように照明ユニット制御信号を生成して照明ユニット１０２１を制御する照明切替制御ユニット１０２２とを有する。画像処理部１０６は、照明ユニット制御信号と撮像部１０４の特性情報とに基づいて画像信号を処理する。【選択図】図１
2015154474.tif 000002
【特許請求の範囲】
【請求項１】
照明光を観察対象に照射する照明部と、
所定の配列で所定の光波長感度特性を有する撮像画素が配置された撮像素子を有し、前記観察対象を前記撮像素子で撮像して前記観察対象に係る画像信号を取得する撮像部と、
前記画像信号を処理する画像処理部と、
を具備し、
前記照明部は、
互いに異なる光波長バンドの照明光を選択的に照射するように構成された照明ユニットと、
前記撮像部の前記撮像画素の光波長感度特性の配列情報と要求性能情報とに基づいて前記照明ユニットから照射される照明光の光波長バンドの組み合わせを互いに異ならせるように複数組の照射パターンのそれぞれに対応した照明ユニット制御信号を生成し、前記照明ユニット制御信号の切り替えにより、互いに異なる組の照射パターンで前記照明ユニットから前記照明光が順次照射されるように前記照明ユニットを制御する照明切替制御ユニットと、
を有し、
前記画像処理部は、前記照明ユニット制御信号と前記撮像部の前記撮像画素の光波長感度特性の配列情報とに基づいて前記画像信号を処理することを特徴とする撮像装置。
【請求項２】
前記撮像装置は、更に、撮像モード制御部を有し、
前記撮像モード制御部には、１種類又は複数種類の画像特性情報が与えられ、
前記撮像モード制御部は、前記１種類又は複数種類の画像特性情報に対応するように、前記照明ユニットに対しては前記照明ユニット制御信号の設定の切替えを指示し、前記画像処理部に対しては画像処理アルゴリズムの設定の切替えを行うことにより、
前記画像処理部は、複数の画像特性を有する画像信号を切替えて又は同時に生成することができることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記照明ユニットで照射可能な照明光の光波長バンドの数をLとし、
同一組の照射パターンで照射可能な照明光の光波長バンドの数をMとし、
前記照射パターンの数をNとしたとき、
L≧3、かつ、2≦M≦L、かつ、N≧2
であることを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
L＝N≧3、かつ、M＝L-1であることを特徴とする請求項２に記載の撮像装置。
【請求項５】
前記撮像部は、
前記撮像素子は観察対象の光学像を前記画像信号に変換する受光素子の配列及びこれと組み合わされたカラーフィルタの配列により構成され、
前記照明ユニットで照射可能なL個の照明光の光波長バンドのそれぞれに対して補色の関係を有する波長バンドの前記光学像を前記受光素子に透過させる前記カラーフィルタが配列された補色フィルタと、
を有し、
前記画像処理部は、前記照明ユニット制御信号の切り替えのタイミングに基づいて前記画像信号を処理することにより、画像を取得することを特徴とする請求項３又は４に記載の撮像装置。
【請求項６】
前記画像処理部は、前記照明ユニット制御信号の切り替えのタイミングから認識される前記補色フィルタを透過した光学像の波長バンドの数がM-1である受光素子から得られた前記画像信号を、前記補色フィルタを透過したM-1個の光学像の波長バンドに対応する原色信号であると認識することを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記画像処理部は、前記照明ユニット制御信号の切り替えのタイミングから認識される前記補色フィルタを透過した光学像の波長バンドの数がMである受光素子から得られた前記画像信号を、前記補色フィルタを透過するM個の光学像の波長バンドに対応する補色信号であると認識することを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記画像処理部は、前記原色信号と認識された前記画像信号と前記補色信号と認識された前記画像信号とを組み合わせて処理することを特徴とする請求項６又は７に記載の撮像装置。
【請求項９】
前記要求性能情報は、前記撮像装置を高フレームレートモードとすることを示す情報を含み、
前記画像処理部は、前記要求性能情報が前記撮像装置を高フレームレートモードとすることを示す情報である場合に、N組の照射パターンのそれぞれに対応した照射タイミングにおいて、前記原色信号と認識された画像信号及び前記補色信号と認識された画像信号が混在した１次画像情報に対して所定演算を行って２次画像情報を生成することを特徴とする請求項８に記載の撮像装置。
【請求項１０】
前記画像処理部は、前記所定演算として、前記１次画像情報に混在されている前記補色信号と認識された画像信号を原色信号と認識される画像信号に変換する演算又は前記１次画像情報に混在されている前記原色信号と認識された画像信号を補色信号と認識される画像信号に変換する演算を行うことを特徴とする請求項９に記載の撮像装置。
【請求項１１】
前記補色信号と認識された画像信号を前記原色信号と認識される画像信号に変換する演算は、時系列的に１個前の照射パターンのL個の光バンドに対応する原色信号の和と各組の照明パターンの照明によって得られる補色信号との演算により、各々の補色信号を原色信号に変換する演算であることを特徴とする請求項１０に記載の撮像装置。
【請求項１２】
前記照射パターンには、L個の光波長バンドの照明光の同時照明が行われる照射パターンが含まれており、
前記補色信号と認識された画像信号を前記原色信号と認識される画像信号に変換する演算は、前記同時照明が行われる照射パターンにおいて前記撮像部において受光される光の量に対応した画像信号と各組の照明パターンの照明によって得られる補色信号との演算により、各々の補色信号を原色信号に変換する演算であることを特徴とする請求項１０に記載の撮像装置。
【請求項１３】
N組の前記照射パターンの各々で前記撮像部より得られる原色信号と補色信号とが混在した画像信号をN組の１次画像情報とし、
前記画像処理部は、前記照射パターンの切り替えに対して連続するタイミングで前記撮像部より得られる互いに異なる光波長バンドに対応する原色信号の組と前記照射パターンの切り替えに対して連続するタイミングで前記撮像部より得られる互いに異なる光波長バンドに対応する補色信号の組との少なくとも何れかを合成して２次画像情報を生成することを特徴とする請求項８に記載の撮像装置。
【請求項１４】
前記画像処理部は、連続するN組の照射パターンに対して得られたN組の２次画像情報をさらに合成して１つの３次画像情報を生成することを特徴とする請求項９又は１３に記載の撮像装置。
【請求項１５】
前記画像処理部は、前記２次画像情報と前記３次画像情報の何れか又は両方を表示のための画像情報として選択する表示モード切替部を有することを特徴とする請求項１４に記載の撮像装置。
【請求項１６】
前記撮像部において、前記所定の配列で所定の光波長感度特性を有する撮像画素は、前記照明ユニットで照射可能なL個の照明光の光波長バンドのいずれの光波長バンドに対しても受光感度を有し、
前記画像処理部は、前記照明ユニット制御信号の切り替えに同期して前記撮像部の受光素子より出力される画像信号を、照明光の組み合わせが互いに異なるN組の照射パターンの照明色の補色信号として認識し、近接して配置されたL個の受光素子からの画像信号の組をN組の１次画像情報とし、該N組の１次画像情報を合成して２次画像情報を生成することを特徴とする請求項３に記載の撮像装置。
【請求項１７】
前記撮像部は、前記撮像素子は観察対象の光学像を前記画像信号に変換する受光素子の配列、及びこれと組み合わされたカラーフィルタの配列により構成され、
前記照明ユニットで照射可能なL個の照明光の光波長バンドのそれぞれに対して原色の関係を有する波長バンドの前記光学像を前記受光素子に透過させるカラーフィルタが配列された原色フィルタと、
を有し、
前記画像処理部は、N組の照射パターンの各々について前記撮像部から得られる原色信号を含むN組の１次画像情報に対して、照射パターンの切り替えに対して連続するタイミングで前記撮像部から得られる互いに異なる光波長バンドに対応する原色信号の組を合成して２次画像情報を生成する請求項３に記載の撮像装置。
【請求項１８】
前記照明ユニットの照射可能なL個の光波長バンドの光の波長バンド幅をλLw,i（i=1,2,…,L）とし、前記撮像部において検出可能な波長バンド幅をλFw,i(i=1,2,…,L）としたときに、
λLw,i＜λFw,i
であることを特徴とする請求項１乃至１７の何れか１項に記載の撮像装置。
【請求項１９】
前記照明ユニットは、一部又は全部の照明光をレーザ又はスーパールミネッセントダイオードを用いて照射することを特徴とする請求項１８に記載の撮像装置。
【請求項２０】
前記撮像部による画像の取得と前記照明ユニットによる前記観察対象の照明とは、前記観察対象に対して照射される外光が、前記観察対象に対して前記照明ユニットから照射される照明光に対して実効的に無視できる環境で行われ、
前記観察対象に対して照射される外光が、前記観察対象に対して前記照明ユニットから照射される前記照明光に対して実効的に無視できる環境とは、前記撮像部への外光の入射を抑制される環境、或いは撮像部で取得される画像信号から外光の成分をキャンセル可能な又は照明光の成分を抽出可能な環境であることを特徴とする請求項１乃至１９の何れか１項に記載の撮像装置。
【請求項２１】
請求項１乃至２０の何れか１項に記載の撮像装置を備えた顕微鏡装置。
【請求項２２】
請求項１乃至２０の何れか１項に記載の撮像装置を備えた内視鏡装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、内視鏡装置及び顕微鏡装置に関する。
【背景技術】
【０００２】
従来、画像をカラー化する方式として、ブロードな光波長を有する照明光（例えば、白色光）と受光素子の上にカラーフィルタが設けられた撮像素子との組み合わせにより画像をカラー化する一般的な方式（以後、このような方式を白色ブロードバンド照明方式と呼ぶ）が知られている。また、受光素子の上にカラーフィルタが設けられていないような色選択性のない撮像素子を用いて画像をカラー化する方式として、特許文献１において提案されているような、フィールド毎に異なる単色の照明光を観察対象に照射し、フィールド順次で撮像素子から得られる信号を同時化してカラー画像を得る方式（以後、このような方式を面順次照明方式と呼ぶ）が知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開昭６３−２２７２９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
白色ブロードバンド照明方式においては、カラーフィルタの種類（補色フィルタであるか又は原色フィルタであるか）により、感度及び色再現性が異なることが知られている。そして、白色ブロードバンド照明方式において、感度と色再現とは互いにトレードオフの関係にあることも知られている。原色フィルタを用いた白色ブロードバンド照明方式の場合、１個の受光素子には単色の照明光しか入射しない。一方で、補色フィルタを用いた白色ブロードバンド照明方式の場合、１個の受光素子には複数色の照明光が入射する。したがって、原色フィルタを用いた場合の感度やＳ／Ｎは、補色フィルタを用いた場合の感度やＳ／Ｎに比べて劣っている。また、原色フィルタを用いた白色ブロードバンド照明方式の場合、信号の変換をしなくともカラー画像を生成することが可能である。一方、補色フィルタを用いた白色ブロードバンド照明方式の場合、個々の受光素子から得られる補色信号を原色信号に変換しなければカラー画像を生成することができない。この変換の過程においては、個々の受光素子の周囲の受光素子からの補色信号を参照する必要がある。したがって、補色フィルタを用いた場合の色再現性は、原色フィルタを用いた場合の色再現性に比べて低くなる。
【０００５】
また、面順次照明方式を用いた場合、フィールド毎に撮像素子の全ての受光素子を１つの色について使用できるので、白色ブロードバンド照明方式に対して高い解像度の画像が得られる。しかしながら、面順次照明方式では、各色の照明光が照射されたときに得られる各々のフィールド画像を全色分合成することによりカラー画像を生成できるようになる。このため、面順次照明方式は、白色ブロードバンド照明方式に対してフレームレートが低下する。したがって、動きのある観察対象の画像を表示させる際に表示遅れや画像の動きを滑らかに表示しにくいなどの問題が発生する可能性がある。
【０００６】
このように、原色フィルタを用いた白色ブロードバンド照明方式、補色フィルタを用いた白色ブロードバンド照明方式及び面順次照明方式は、それぞれが長所と短所を備えている。したがって、これらの照明方式を単独で用いたとしても、高解像度化、高色再現性、高フレームレート化、高感度化といった撮像装置の基本的な性能に対する要求のすべてを満たすことは困難であり、また、これらの基本的な性能の何れを満たさせるかを必要に応じて選択することも困難である。これに対し、複数種類の受光素子とフィルタの組み合わせを用意し、これに対応して、上述の３種類の照明方式の選択ができるような構成とすると、装置が大型化し易い。
【０００７】
本発明は、前記の事情に鑑みてなされたもので、装置の大型化を防止しつつ、撮像装置の基本的な性能を必要に応じて選択することが可能な撮像装置、並びにそれを備える顕微鏡装置及び内視鏡装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
前記の目的を達成するために、本発明の一態様の撮像装置は、照明光を観察対象に照射する照明部と、所定の配列で所定の光波長感度特性を有する撮像画素が配置された撮像素子を有し、前記観察対象を前記撮像素子で撮像して前記観察対象に係る画像信号を取得する撮像部と、前記画像信号を処理する画像処理部とを具備し、前記照明部は、互いに異なる光波長バンドの照明光を選択的に照射するように構成された照明ユニットと、前記撮像部の前記撮像画素の光波長感度特性の配列情報と要求性能情報とに基づいて前記照明ユニットから照射される照明光の光波長バンドの組み合わせを互いに異ならせるように複数組の照射パターンのそれぞれに対応した照明ユニット制御信号を生成し、前記照明ユニット制御信号の切り替えにより、互いに異なる組の照射パターンで前記照明ユニットから前記照明光が順次照射されるように前記照明ユニットを制御する照明切替制御ユニットとを有し、前記画像処理部は、前記照明ユニット制御信号と前記撮像部の前記撮像画素の光波長感度特性の配列情報とに基づいて前記画像信号を処理することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、装置の大型化を防止しつつ、撮像装置の基本的な性能を必要に応じて選択することが可能な撮像装置、並びにそれを備える顕微鏡装置及び内視鏡装置を提供することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施形態に係る撮像装置の全体構成を示す図である。
【図２】（構成ａ）及び（構成ｂ）について示す図である。
【図３】（構成ｃ）について示す図である。
【図４】（構成ｄ）及び（構成ｅ）について示す図である。
【図５】（構成ｆ）について示す図である。
【図６】本発明の一実施形態の変形例について示す図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の実施形態を説明する。図１は、本発明の一実施形態に係る撮像装置の全体構成を示す図である。図１に示す撮像装置１００は、照明部１０２と、撮像部１０４と、画像処理部１０６と、表示部１０８と、撮像モード制御部１１０とを有している。この撮像装置１００は、基本的には、照明部１０２から観察対象２００に照明光を照射し、観察対象で反射、散乱等された光を撮像部１０４で撮像し、撮像部１０４で得られた画像信号を画像処理部１０６で処理する。そして、この撮像装置１００は、画像処理部１０６の処理によって得られた画像を表示部１０８に表示させる。
【００１２】
照明部１０２は、照明光を観察対象２００に照射する。この照明部１０２は、照明ユニット１０２１と、照明切替制御ユニット１０２２とを有している。
【００１３】
照明ユニット１０２１は、L個の異なる光波長バンドの照明光を選択的に照射するように構成されている。本実施形態においてLは例えば３以上である。一例の照明ユニット１０２１は、光源１０２１ａと、導波路１０２１ｂと、配光レンズ１０２１ｃとを有している。光源１０２１ａは、異なる光波長バンドを有するL個の光源であって、例えば半導体レーザ（ＬＤ）やスーパールミネッセントダイオード（ＳＬＤ）である。図１は、Lが３の例を示しており、図１に示す３個の光源１０２１ａは、それぞれ、Ｒ（赤）、Ｇ（緑）、Ｂ（青）の照明光を照射する。導波路１０２１ｂは、例えば光ファイバであってL個の光源１０２１ａに光学的に結合されている。この導波路１０２１ｂは、光源１０２１ａから照射された照明光を合波し、配光レンズ１０２１ｃに射出する。配光レンズ１０２１ｃは、例えば平凹レンズであり、導波路１０２１ｂから射出された照明光を所定の配光拡がり角になるように整形して観察対象２００に照射する。
【００１４】
照明切替制御ユニット１０２２は、特性情報記憶部１０２２ａと、照射パターン設定部１０２２ｂと、ドライブパターン発生部１０２２ｃと、光源ドライバ１０２２ｄとを有し、所定のN組の照射パターンの照明光が光源１０２１ａから照射されるように照明ユニット１０２１を制御する。また、照射パターンとは、時刻t1,t2,…,ｔNのそれぞれのタイミングで抽出されるM個の光波長バンドの光の組み合わせを示すパターンである。ここで、Mは２以上かつL以下の整数であり、Nは２以上の整数である。この他、照明光の照射強度及び照射時間を照射パターンに含めてもよい。特性情報記憶部１０２２ａは、照明部１０２及び撮像部１０４の特性情報を記憶している。照明部１０２の特性情報は、光源１０２１ａと光源ドライバ１０２２ｄとの接続端子の情報、光源１０２１ａの照射可能な色（又は波長バンド）の情報、光源１０２１ａのドライブ強度と光源１０２１ａの出力との対応情報等である。また、撮像部１０４の特性情報は、主として撮像部を構成する撮像画素の光波長感度特性の配列情報であり、後で説明する撮像素子１０４２のカラーフィルタの有無を示す情報、カラーフィルタの種類や配列を示す情報等である。照射パターン設定部１０２２ｂは、撮像モード制御部１１０からの撮像装置１００の要求性能情報の入力に従って、照明光の色の組み合わせが互いに異なるようにN組の照射パターンを設定し、設定した照射パターンに応じて照明ユニット制御信号を生成する。要求性能情報は、撮像装置１００を高フレームレートモードとするのか、高解像度モードとするか、高感度モードとするかといった撮像装置１００の性能を決めるための情報である。ドライブパターン発生部１０２２ｃは、照明部１０２の特性情報と照明ユニット制御信号とに基づき、照射パターン設定部１０２２ｂで設定された照射パターンの照明光が光源１０２１ａから照射されるように光源ドライバ制御信号を生成する。光源ドライバ１０２２ｄは、光源ドライバ制御信号に従って照明ユニット１０２１の光源１０２１ａの駆動を制御する。
【００１５】
以上のような照明ユニット１０２１と照明切替制御ユニット１０２２とを有することにより、照明部１０２は、所定のM個の光波長バンドの光を抽出して所定時刻に照射可能である。また、照明部１０２は、所定のM個の光波長バンドの光の組み合わせをN通りに変化させて照明光を観察対象２００に照射する。ここで、Lは照明ユニットが照射可能な光波長のバンド数、Mは１組の照射パターンの中で照射する光波長バンドの数、Nは繰り返し照射する照射パターンの数である。
【００１６】
撮像部１０４は、観察対象を撮像して観察対象に係る画像信号を得る。撮像部１０４は、結像レンズ１０４１と撮像素子１０４２とを有している。結像レンズ１０４１は、観察対象２００で反射、散乱等された光を撮像素子１０４２に結像させる光学系である。撮像素子１０４２は、結像レンズ１０４１を介して結像された光学像を電気信号としての画像信号に変換する。撮像素子１０４２は、受光素子１０４２ａとカラーフィルタ１０４２ｂとを有している。受光素子１０４２ａは、例えば２次元状に配置されたフォトダイオードであり、光電変換を行う。カラーフィルタ１０４２ｂは、各受光素子１０４２ａに対応するように受光素子１０４２ａに設けられ、観察対象２００からの光のうちの特定の波長バンドの光学像を対応する受光素子１０４２ａに入射させる。後で詳しく説明するが、撮像素子１０４２は、カラーフィルタ１０４２ｂを有していない場合もある。この場合、撮像素子１０４２は、色選択性を有さないことになる。
【００１７】
ここで、本実施形態における撮像装置１００は、観察対象２００に対して、照明部１０２からの照明光のみが観察対象２００に照射される観察環境下、すなわち実質的に外光の影響が殆どない環境下においてその性能を最も理想的に引き出すことができる。したがって、本実施形態における撮像装置１００は、照明部１０２からの照射光以外の外光による影響が抑制される環境下、例えば、照明部１０２、撮像部１０４、及び観察対象２００を覆うように構成された外光抑制部材３００の中で使用されることが望ましい。外光抑制部材３００の中に照明部１０２、撮像部１０４、及び観察対象２００を配置できない場合には、画像処理の段階で、外光による画像信号の影響をキャンセルし、照射パターンのみによる画像信号を得るようにすることが望ましい。このように、本実施形態の撮像装置１００は、実質的に外光による影響が殆どない環境下で画像を取得することが多い顕微鏡装置や内視鏡装置などの用途に好適である。
【００１８】
また、照明ユニット１０２１の照射可能なL個の光波長バンドの光の波長バンド幅をλLw,i（i=1,2,…,L）とし、撮像素子１０４２に設けられるカラーフィルタ１０４２ｂの波長バンド幅をλFw,i(i=1,2,…,L）とすると、λLw,iとλFw,iとは以下の（式１）の条件を満足していることが望ましい。  
λLw,i＜λFw,i  （i=1,2,…,L）                        （１）
（１）式の条件を余裕を持って満足するには、照射光のスペクトル幅は狭いほうがよい。したがって、光源１０２１ａとしては、レーザ光源やスーパールミネッセントダイオードなどが好適である。（１）式の条件を満足することができれば、各照射パターンにおける光波長バンドの数Mが増えても色再現性が低下しない。また、光波長バンドの数Mに応じた高い画像表示性能（解像度／フレームレート／ＳＮ／色再現性など）を提供することができる。
【００１９】
画像処理部１０６は、撮像部１０４で得られた画像信号を処理して画像を生成する。本実施形態における画像処理部１０６は、光源１０２１ａの特性及び撮像素子１０４２の特性、画像処理の機能要求に応じて多様な処理を行う。図１は、画像処理部１０６の典型的な構成を示している。図１の画像処理部１０６は、Ａ/Ｄ変換器１０６１と、フレームメモリ１０６２と、２次画像生成部１０６３と、３次画像生成部１０６４と、表示モード切替部１０６５と、画像補正部１０６６とを有している。
【００２０】
Ａ/Ｄ変換器１０６１は、ドライブパターン発生部１０２２ｃで発生された光源ドライバ制御信号の入力タイミングに同期して撮像部１０４で得られた画像信号をサンプリングし、サンプリングした画像信号をデジタル信号の画像信号（１次画像情報）に変換する。フレームメモリ１０６２は、Ａ/Ｄ変換器１０６１で得られた１次画像情報を記憶する。本実施形態においては、N組の照射パターンに応じたN回の撮像が行われることにより、N枚の１次画像情報が得られる。フレームメモリ１０６２は、このN枚の１次画像情報をそれぞれ記憶する。２次画像生成部１０６３は、フレームメモリ１０６２に記憶されたN枚の１次画像情報に対し、ドライブパターン発生部１０２２ｃで発生された光源ドライバ制御信号に応じた処理を施して２次画像情報を生成する。３次画像生成部１０６４は、必要に応じて２次画像情報を処理して３次画像情報を生成する。２次画像生成部１０６３及び３次画像生成部１０６４の処理の詳細は後で説明する。表示モード切替部１０６５は、表示部１０８の表示モードに応じて、画像補正部１０６６に出力する画像情報を２次画像生成部１０６３で生成された２次画像情報と３次画像生成部１０６４で生成された３次画像情報との間で切り替える。画像補正部１０６６は、２次画像情報又は３次画像情報に対して表示や記録に必要な補正処理を施す。この補正処理は、例えば色温度の補正、ガンマ特性の補正、特定の光波長（画像情報における色成分）の強調処理又は抑制処理である。
【００２１】
表示部１０８は、画像補正部１０６６で補正された２次画像情報と３次画像情報との少なくとも何れかに基づく表示フレームを表示する。すなわち、表示部１０８は、２次画像情報に基づくフレームと３次画像情報に基づく表示フレームとをそれぞれ単独で表示するか、又は２次画像情報に基づく表示フレームと３次画像情報に基づく表示フレームとを同時に表示する。何れの表示を行うかは、表示モードによって決定される。表示モードは、例えば使用者によって設定される。
【００２２】
撮像モード制御部１１０は、例えばＣＰＵであり、撮像部１０４の撮像素子１０４２、照明部１０２のドライブパターン発生部１０２２ｃ、画像処理部１０６の２次画像生成部１０６３、表示部１０８のそれぞれに同期信号を入力してこれらのブロックを同期制御する。また、撮像モード制御部１１０は、照明パターン設定部１０２２ｂに対して要求性能情報を入力することも行う。要求性能情報は、例えば使用者によって設定される。
【００２３】
撮像装置１００は、基本的には図１に示した構成を有している。ただし、撮像装置１００は、照射パターンの設定の仕方、受光素子１０４２ａと組み合わせられるカラーフィルタ１０４２ｂの有無及びカラーフィルタ１０４２ｂの種類によって６つの構成、すなわち（構成ａ）、（構成ｂ）、（構成ｃ）、（構成ｄ）、（構成ｅ）、（構成ｆ）に分けられ、それぞれの構成に応じた異なる動作をする。以下、撮像装置１００の各構成に対応した動作について説明する。ここで、以下の説明において、照明動作の開始から必要な枚数の１次画像を取得し、更に、最終的な表示フレーム画像（２次画像或いは３次画像）を生成するまでにかかる時間を合わせて“画像の抽出時間”と呼び、その速さについては、“フレーム表示の平均速度”と呼ぶことにする。“フレーム表示の平均速度が速い”とは、動く観察対象に対する表示の遅れが小さいこと、すなわち高フレームレートであって観察対象の動きを自然に（滑らかに）表示できることを意味する。逆に、“フレーム表示の平均速度が遅い”とは、動く観察対象に対する表示の遅れが大きいこと、すなわち低フレームレートであって表示の切り替わりまでの時間間隔が長く、観察対象の動きを滑らかに表示でききないことを意味する。
【００２４】
まず、（構成ａ）及び（構成ｂ）について図２を参照して説明する。（構成ａ）と（構成ｂ）は、白色ブロードバンド照明方式に対応した照射パターンを用いる構成である。白色ブロードバンド照明方式では、各タイミングにおいて、L個の光波長バンドの照明光が同時に観察対象２００に照射されるように照射パターン設定部１０２２ｂにおいて照射パターンが設定される。したがって、L=M、かつ、N=1である。なお、以下の説明においては、照明ユニット１０２１がＲＧＢの３色の照明光を照射可能であるとする。この場合、図２に示すようにL=3,M=3,N=1になる。
【００２５】
（構成ａ）と（構成ｂ）とでは、カラーフィルタ１０４２ｂの種類が異なっている。すなわち、（構成ａ）のカラーフィルタ１０４２ｂは原色フィルタであり、（構成ｂ）のカラーフィルタ１０４２ｂは補色フィルタである。本実施形態における「原色フィルタ」とは、照明ユニット１０２１によって照射可能なL個の光波長バンドの入射光のうち、１個の光波長バンド、又は、波長軸上で、この光波長バンドに近接する複数個の光波長バンドを含む連続した波長領域に対応して、この連続した波長領域を透過可能なフィルタ要素が受光素子の位置に合わせて２次元状に配置されることによって構成されたフィルタである。
例えば、照明ユニット１０２１がＲＧＢの３色の照明光を照射可能であるとすると、本実施形態の原色フィルタは、入射光のうちのＲの照明光を透過可能なフィルタ要素と、入射光のうちのＧの照明光を透過可能なフィルタ要素と、入射光のうちのＢの照明光を透過可能なフィルタ要素とが２次元状に配置されることによって構成されたフィルタである。また、照明ユニット１０２１がＲ１，Ｒ２，Ｇ，Ｂの４色の照明光を照射可能な場合は、本実施形態の原色フィルタは、入射光のうちのＲ１，Ｒ２，Ｇ，Ｂの各々の入射光のうち、ひとつだけを透過可能な４種のフィルタ要素が２次元状に配置される構成であってもよいが、変形例としては、入射光のうち波長軸上で近接するＲ１とＲ２の波長を包含する波長域の光だけを透過可能なフィルタ要素と、入射光のうちのＧの照明光だけを透過可能なフィルタ要素と、入射光のうちのＢの照明光だけを透過可能なフィルタ要素とが２次元状に配置されることによって構成されたフィルタである場合も含まれる。
一方、本実施形態における「補色フィルタ」とは、照明ユニット１０２１によって照射可能なL個の光波長バンドの光のうちから対応する１個の光波長バンド、又は、波長軸上で、この光波長バンドに近接する複数個の光波長バンドを含む連続した波長領域に対応して、この波長領域を差し引いた光を透過可能なフィルタ要素が受光素子の位置に合わせて２次元状に配置されることによって構成されたフィルタである。 例えば、照明ユニット１０２１がＲＧＢの３色の照明光を照射可能であるとすると、本実施形態の補色フィルタは、入射光からＲの照明光を差し引いた光を透過可能なフィルタ要素と、入射光からＧの照明光を差し引いた光を透過可能なフィルタ要素と、入射光からＢの照明光を差し引いた光を透過可能なフィルタ要素とが２次元状に配置されることによって構成されたフィルタである。また、照明ユニット１０２１がＲ１，Ｒ２，Ｇ，Ｂの４色の照明光を照射可能な場合は、本実施形態の補色フィルタは、入射光のうちのＲ１，Ｒ２，Ｇ，Ｂの各々の入射光のうち、ひとつだけを差し引いた光を透過可能な４種のフィルタ要素が２次元状に配置される構成であってもよいが、変形例としては、入射光のうち波長軸上で近接するＲ１とＲ２の波長を包含する波長域の光を除いた波長域の光を透過可能なフィルタ要素と、入射光のうちのＧの照明光を差し引いた光を透過可能なフィルタ要素と、入射光のうちのＧの照明光を差し引いた光を透過可能なフィルタ要素とが２次元状に配置されることによって構成されたフィルタである場合も含まれる。
【００２６】
以下、（構成ａ）の詳細を説明する。（構成ａ）の照射パターン設定部１０２２ｂは、タイミング１（t=t1）、タイミング２(t=t2)、及びタイミング３（t=t3）のそれぞれにおいて３個の光波長バンドの照明光が同時に照射されるように照明ユニット制御信号を生成する。ドライブパターン発生部１０２２ｃは、照明ユニット制御信号と特性情報記憶部１０２２ａに記憶されている特性情報とに従って光源ドライバ制御信号を生成する。光源ドライバ１０２２ｄは、光源ドライバ制御信号に従って光源１０２１ａを駆動させる。
【００２７】
照明部１０２による観察対象への照明と同期して撮像部１０４は撮像を行う。（構成ａ）のカラーフィルタ１０４２ｂは原色フィルタであるので、個々のフィルタ要素は対応する光波長バンドの照明光のみを透過させる。すなわち、Ｒのフィルタ要素は、Ｒの照明光のみを透過させる。同様に、Ｇのフィルタ要素は、Ｇの照明光のみを透過させ、Ｂのフィルタ要素は、Ｂの照明光のみを透過させる。
【００２８】
撮像部１０４による撮像に同期してＡ/Ｄ変換器１０６１は、撮像部１０４の各受光素子１０４２ａからの画像信号をサンプリングし、このサンプリングした画像信号をデジタル信号としての１次画像情報に変換してフレームメモリ１０６２に記憶させる。（構成ａ）の場合、カラー画像化に必要な１次画像情報、すなわちＲＧＢの３成分をすべて含む１次画像情報が照明光の照射タイミング毎にフレームメモリ１０６２に記憶される。
【００２９】
２次画像生成部１０６３は、光源ドライバ制御信号によって照射パターン（各タイミングにおいてL個の光波長バンドの照明光のうちのどの照明光が照射されるか）とカラーフィルタ１０４２ｂの有無と種類（原色フィルタと補色フィルタの何れであるか）とを識別し、識別結果に応じて１次画像情報に対するカラー画像化のための画像処理を行う。（構成ａ）の２次画像生成部１０６３は、カラー画像化の処理として、Ｒの情報と、Ｇの情報と、Ｂの情報とを含む１次画像情報を同時化（３板化）して、各画素がＲの情報とＧの情報とＢの情報とを有する２次画像情報を生成する処理を行う。
【００３０】
２次画像生成部１０６３による画像処理の後、表示モード切替部１０６５は、画像補正部１０６６に２次画像生成部１０６３で生成された２次画像情報を出力する。画像補正部１０６６は、入力された２次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００３１】
以上のような（構成ａ）においては、それぞれの照明光の照射タイミングにおいて１個の受光素子１０４２ａには１個の光波長バンドの照明光が入射する。L個の光波長バンドの照明光のスペクトル強度が全て同じであると考えると（構成ａ）のフレーム毎の画素当たりの受光量は、１個の光波長バンドの受光量と等しくなる。
【００３２】
また、（構成ａ）では、１個の１次画像情報から１個の２次画像情報が生成される。例えば、N=3で３回の撮像が行われた場合、３個の１次画像情報から３個の２次画像情報が生成されることになる。ここで、１個の受光素子１０４２ａが受け持つ画素数を「解像度」と考えると、（構成ａ）の解像度は１画素となる。
【００３３】
さらに、（構成ａ）の場合、照射パターンの切り替えのタイミング毎に画像の生成が行われる。すなわち、（構成ａ）の画像の抽出時間は照射パターンの切り替え間隔と一致しており、フレーム表示の平均速度は照射パターンの切り替え速度と一致する。図２では、（構成ａ）のフレーム表示の平均速度を基準値１としている。これは他の構成との比較のためである。
【００３４】
以下、（構成ｂ）の詳細を説明する。（構成ｂ）の照射パターン設定部１０２２ｂは、タイミング１（t=t1）、タイミング２(t=t2)、及びタイミング３（t=t3）のそれぞれにおいて３個の光波長バンドの照明光が同時に照射されるように照明ユニット制御信号を生成する。このため、観察対象２００に照射される照明光は、（構成ａ）と（構成ｂ）とで変わらない。
【００３５】
ここで、（構成ｂ）のカラーフィルタ１０４２ｂは補色フィルタであるので、個々のフィルタ要素は対応する光波長バンドの補色の照明光、すなわち対応する照明光を差し引いた照明光のみを透過させる。すなわち、Ｒの補色（Ｒ−（バー）とする）のフィルタ要素は、Ｒ−の照明光、すなわちＧ及びＢの照明光のみを透過させる。同様に、Ｇの補色（Ｇ−（バー）とする）のフィルタ要素は、Ｇ−の照明光、すなわちＲ及びＢの照明光のみを透過させ、Ｂの補色（Ｂ−（バー）とする）のフィルタ要素は、Ｂ−の照明光、すなわちＲ及びＧの照明光のみを透過させる。
【００３６】
（構成ｂ）の２次画像生成部１０６３は、カラー画像化の処理として、ほぼ同時に取得されるＲ−の情報（すなわちＧ＋Ｂ）と、Ｇ−の情報（すなわちＲ＋Ｂ）と、Ｂ−の情報（すなわちＲ＋Ｇ）を全て加算した情報と、Ｒ−、Ｇ−、Ｂ−各々、単独の情報とを所定比率で差分演算して、Ｒの情報と、Ｇの情報と、Ｂの情報に対応する画像情報を同時化（３板化）する処理を行うことによって２次画像情報を生成する。
【００３７】
２次画像生成部１０６３による画像処理の後、表示モード切替部１０６５は、画像補正部１０６６に２次画像生成部１０６３で生成された２次画像情報を出力する。画像補正部１０６６は、入力された２次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００３８】
以上のような（構成ｂ）においては、１個の受光素子１０４２ａには(L-1)個の光波長バンドの照明光が入射する。したがって、（構成ｂ）のフレームの画素当たりの受光素子１０４２ａの受光量は、（構成ａ）の(L-1)倍になる。例えば、L=3の場合には2倍になる。このように、（構成ｂ）は、信号対ノイズ（ＳＮ）比の点で（構成ａ）よりも有利である。また、（構成ｂ）においても、１個の１次画像情報から１個の２次画像情報が生成される。したがって、（構成ｂ）の解像度は（構成ａ）と同じく１画素となる。
【００３９】
さらに、（構成ｂ）の場合も、照射パターンの切り替えの間隔内で画像の生成に必要な枚数の１次画像情報の取得と２次画像情報の生成が行われる。すなわち、（構成ｂ）の画像の抽出時間は照射パターンの切り替え間隔と一致しており、フレーム表示の平均速度は照射パターンの切り替え速度と一致する。
【００４０】
このように（構成ｂ）は、（構成ａ）よりも高感度な用途において利用される構成である。ただし、（構成ｂ）の場合には、補色信号を原色信号に変換する処理が必要となるので、色再現の面では（構成ａ）に劣ることになる。
【００４１】
次に、（構成ｃ）について図３を参照して説明する。（構成ｃ）は、面順次照明方式に対応した照射パターンを用いる場合の構成である。面順次照明方式では、N個の照明光の切り替えタイミングのそれぞれにおいてL個の光波長バンドの照明光のうちの異なる照明光が観察対象２００に照射されるように照射パターン設定部１０２２ｂにおいて照射パターンが設定される。したがって、M=1、かつ、N=Lである。照明ユニット１０２１がＲＧＢの３色の照明光を照射可能であるとすると、図３に示すようにL=3,M=1,N=3になる。
【００４２】
以下、（構成ｃ）の詳細を説明する。（構成ｃ）の照射パターン設定部１０２２ｂは、タイミング１（t=t1）においてＲの照明光が照射され、タイミング２(t=t2)においてＧの照明光が照射され、タイミング３（t=t3）においてＢの照明光が照射されるように照明ユニット制御信号を生成する。
【００４３】
ここで、（構成ｃ）の撮像部１０４の撮像素子１０４２は、カラーフィルタ１０４２ｂを有しておらず、色選択性がない。したがって、照明光は、カラーフィルタによって吸収されずに、そのまま受光素子１０４２ａにおいて受光される。すなわち、Ｒの照明光が照射されたタイミングでは、Ｒの照明光が受光素子１０４２ａで受光される。同様に、Ｇの照明光が照射されたタイミングでは、Ｇの照明光が受光素子１０４２ａで受光され、Ｂの照明光が照射されたタイミングでは、Ｂの照明光が受光素子１０４２ａで受光される。
【００４４】
（構成ｃ）の２次画像生成部１０６３は、（構成ａ）と同様の同時化処理を行う。ただし、（構成ｃ）の場合、３回の照明光の切り替えによってカラー画像化に必要な１次画像情報が揃う。したがって、（構成ｃ）の２次画像生成部１０６３は、光源ドライバ制御信号によって照明光の切り替えタイミングの識別を行い、これによってＲの１次画像情報１と、Ｇの１次画像情報２と、Ｂの１次画像情報３とが揃った時点で同時化（３板化）する処理を行うことによって２次画像情報を生成する。
【００４５】
２次画像生成部１０６３による画像処理の後、表示モード切替部１０６５は、画像補正部１０６６に２次画像生成部１０６３で生成された２次画像情報を出力する。画像補正部１０６６は、入力された２次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００４６】
以上のような（構成ｃ）においては、１個の受光素子１０４２ａには１個の光波長バンドの照明光が照明光の照射タイミング毎に入射する。ただし、（構成ｃ）では、３枚の１次画像情報を用いて１つの２次画像情報を生成するので、１個の受光素子１０４２ａがL個分の画素に相当すると言える。したがって、（構成ｃ）の画素当たりの光量は（構成ａ）の1/L倍（例では1/3倍）に、（構成ｃ）の場合の１フレームの画素当たりの光量は（構成ａ）のN/L倍（例では1倍）になる。また、（構成ｃ）では、１個の受光素子１０４２ａがL個分の画素として機能するため、（構成ａ）と較べて、空間解像度がおよそL倍（例では3倍）になる。
【００４７】
さらに、（構成ｃ）の画像の抽出時間は照射パターンの切り替え間隔のN倍（例では3倍）の時間であり、フレーム表示の平均速度は照射パターンの切り替え速度の1/N倍（例では1/3倍）になる。
【００４８】
このように（構成ｃ）は、（構成ａ）よりも高解像度の用途において利用される構成である。ただし、（構成ｃ）の場合には、フレーム表示の平均速度の面では（構成ａ）に劣ることになる。
【００４９】
次に、（構成ｄ）、（構成ｅ）の撮像装置１００について図４を参照して説明する。以下に説明する（構成ｄ）及び（構成ｅ）は、「観察対象に対して複数色が照射できる光源を使って、１色だけでなく、所定の複数色の光を抽出して照射する複数の照射パターンを設定し、照明色の組み合わせが互いに異なる複数組の照射パターンを切り替えながら照射をする」ものである。そして、このような照射パターンの切り替えにより、表示性能の向上を図る。
【００５０】
以下、（構成ｄ）の詳細を説明する。（構成ｄ）は、L個の光波長バンドの照明光からM個の光波長バンドの照明光を抽出して照射する照射パターンをN組用意し、このN組の照射パターンを順次切り替える撮像装置１００において、撮像素子１０４２がカラーフィルタ１０４２ｂを有していない構成である。以下ではN=L=3,M=2である例を説明する。
【００５１】
（構成ｄ）の照射パターン設定部１０２２ｂは、パターンＡ１としてタイミング１（t=t1）においてＧ及びＢの照明光がパターンＡ１として照射され、パターンＡ２としてタイミング２(t=t2)においてＲ及びＢの照明光がパターンＡ２として照射され、タイミング３（t=t3）においてＲ及びＧの照明光がパターンＡ３として照射されるように照明ユニット制御信号を生成する。
【００５２】
（構成ｄ）の撮像部１０４はカラーフィルタ１０４２ｂを有していない。したがって、照明光は、カラーフィルタによって吸収されずに、そのまま受光素子１０４２ａにおいて受光される。すなわち、Ｇ及びＢの照明光が照射されたタイミングでは、Ｇ及びＢの照明光が受光素子１０４２ａで受光される。これは、Ｒ−の照明光が受光素子１０４２ａで受光されたのと同様である。同様に、Ｒ及びＢの照明光が照射されたタイミングでは、Ｒ及びＢの照明光が受光素子１０４２ａで受光される。これは、Ｇ−の照明光が受光素子１０４２ａで受光されたのと同様である。さらに、Ｒ及びＧの照明光が照射されたタイミングでは、Ｒ及びＧの照明光が受光素子１０４２ａで受光される。これは、Ｂ−の照明光が受光素子１０４２ａで受光されたのと同様である。
【００５３】
（構成ｄ）の２次画像生成部１０６３は、（構成ｂ）と（構成ｃ）の画像処理とを組み合わせた画像処理を行う。すなわち、２次画像生成部１０６３は、（構成ｃ）と同様に３枚の１次画像情報から２次画像情報を生成する。ただし、（構成ｄ）の場合、補色の情報を含む１次画像情報１、２、３が得られている。したがって、（構成ｄ）の２次画像生成部１０６３は、（構成ｂ）と同様にして、Ｒ−の情報と、Ｇ−の情報と、Ｂ−の情報とを含む１次画像情報１、２、３を全て加算した情報と、Ｒ−、Ｇ−、Ｂ−各々、単独の情報とを所定比率で差分演算して、Ｒの情報と、Ｇの情報と、Ｂの情報に対応する画像情報を同時化（３板化）する処理を行うことによって２次画像情報を生成する。
【００５４】
２次画像生成部１０６３による画像処理の後、表示モード切替部１０６５は、画像補正部１０６６に２次画像生成部１０６３で生成された２次画像情報を出力する。画像補正部１０６６は、入力された２次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００５５】
以上のような（構成ｄ）においては、１個の受光素子１０４２ａには２個の光波長バンドの照明光が照明光の切り替えタイミング毎に入射する。したがって、１フレームとしてみた場合、（構成ｄ）の画素当たりの光量は（構成ａ）の2倍になる。より一般的には、１個の受光素子１０４２ａにはM個の光波長バンドの照明光が照明光の切り替えタイミング毎に入射する。したがって、（構成ｄ）の画素当たりの光量は、時間平均すると（構成ａ）のM倍になるが、１個の受光素子１０４２ａがL個分の画素に相当するため、画素あたりの光量はM/L倍になり、１フレームの画素あたりの光量はN×M/L倍になる。また、（構成ｄ）では、１個の受光素子１０４２ａがL個分の画素として機能するため、（構成ａ）と較べて空間解像度がL倍になる。
【００５６】
さらに、（構成ｄ）の画像の抽出時間は照射パターンの切り替え間隔の3倍の時間であり、フレーム表示の平均速度は照射パターンの切り替え速度の1/3倍になる。一般的には、（構成ｄ）の画像の抽出時間は照射パターンの切り替え間隔のN倍の時間であり、フレーム表示の平均速度は照射パターンの切り替え速度の1/N倍になる。
【００５７】
このように（構成ｄ）は、（構成ａ）よりも高感度、かつ、高解像度の用途において利用される構成である。ただし、（構成ｄ）の場合には、フレーム表示の平均速度の面では（構成ａ）に劣ることになる。一方、（構成ｄ）は、解像度の高い（構成ｃ）と同等レベルの解像度を有しながら、（構成ｃ）よりも高感度になる利点がある。
【００５８】
（構成ｅ）の詳細を説明する。（構成ｅ）は、L個の光波長バンドの照明光からM個の光波長バンドの照明光を抽出して照射する照射パターンをN組用意し、このN組の照射パターンを順次切り替える撮像装置１００において、撮像素子１０４２が原色フィルタを有している構成である。以下ではN=L=3,M=2である例を説明する。
【００５９】
（構成ｅ）の照射パターン設定部１０２２ｂは、（構成ｄ）と同様、タイミング１（t=t1）においてＧ及びＢの照明光がパターンＡ１として照射され、タイミング２(t=t2)においてＲ及びＢの照明光がパターンＡ２として照射され、タイミング３（t=t3）においてＲ及びＧの照明光がパターンＡ３として照射されるように照明ユニット制御信号を生成する。
【００６０】
（構成ｅ）の撮像部１０４は原色フィルタを有している。したがって、各フィルタ要素に対応する照明光のみが受光素子１０４２ａにおいて受光される。すなわち、Ｇ及びＢの照明光が照射されたタイミングでは、Ｒのフィルタ要素は照明光を透過させず、Ｇのフィルタ要素はＧの照明光のみを透過させ、Ｂのフィルタ要素はＢの照明光のみを透過させる。Ｒ及びＢの照明光が照射されたタイミングでは、Ｒのフィルタ要素はＲの照明光のみを透過させ、Ｇのフィルタ要素は照明光を透過させず、Ｂのフィルタ要素はＢの照明光のみを透過させる。Ｒ及びＧの照明光が照射されたタイミングでは、Ｒのフィルタ要素はＲの照明光のみを透過させ、Ｇのフィルタ要素はＧの照明光のみを透過させ、Ｂのフィルタ要素は照明光を透過させない。このように、（構成ｅ）においては、各タイミングで異なる２組の色成分に対応した原色の情報が得られる。
【００６１】
（構成ｅ）の２次画像生成部１０６３は、連続する２つのタイミングにおいて得られる原色の情報から２次画像情報を生成する。すなわち、２次画像生成部１０６３は、タイミング１で得られたＧの情報及びＢの情報とタイミング２で得られたＲの情報とを同時化（３板化）する処理を行うことによって２次画像情報を生成する。また、２次画像生成部１０６３は、タイミング２で得られたＢの情報とタイミング３で得られたＲの情報及びＧの情報とを同時化（３板化）する処理を行うことによって２次画像情報を生成する。
【００６２】
２次画像生成部１０６３による画像処理の後、表示モード切替部１０６５は、画像補正部１０６６に２次画像生成部１０６３で生成された２次画像情報を出力する。画像補正部１０６６は、入力された２次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００６３】
以上のような（構成ｅ）においては、１個の受光素子１０４２ａには１個の光波長バンドの照明光が照明光の切り替えタイミング毎に入射するが、１フレームの画素あたりの光量でみると（構成ａ）よりも小さくなる。また、（構成ｅ）では、１個の受光素子１０４２ａが１個分の画素として機能するため、空間解像度は（構成ａ）と同様になる。
【００６４】
さらに、（構成ｅ）の画像の抽出時間は照射パターンの切り替え間隔の2倍の時間であり、フレーム表示の平均速度は照射パターンの切り替え速度の1/2倍になる。一般的には、（構成ｅ）の画像の抽出時間は照射パターンの切り替え間隔の(N-1)倍の時間であり、フレーム表示の平均速度は照射パターンの切り替え速度の1/(N-1)倍になる。
【００６５】
このように（構成ｅ）は、（構成ｃ）よりも高フレームレートのモードにおいて利用される構成である。
【００６６】
ここで、本例の（構成ｄ）及び（構成ｅ）ではN=L=3,M=2の例を説明している。しかしながら、L,M,Nの設定は例で示したものに限るものではない。例えば、照射パターン数N=4とし、４個の照射パターンのうちの１個の照射パターンにおいて３個の光波長バンドの照明光の全てを照射させるようにしてもよい。
【００６７】
次に、（構成ｆ）の撮像装置１００について図５を参照して説明する。以下に説明する（構成ｆ）は、（構成ｄ）及び（構成ｅ）と同様に、「観察対象に対して複数色が照射できる光源を使って、１色だけでなく、所定の複数色の光を抽出して照射する複数の照射パターンを設定し、照明色の組み合わせが互いに異なる複数組の照射パターンを切り替えながら照射をする」ものであって、撮像素子１０４２が補色フィルタを有している構成である。（構成ｆ）は、さらに、（構成ｆ１）−（構成ｆ６）に分けることができる。以下、L=N=3、M=2の場合の（構成ｆ１）−（構成ｆ６）についてその詳細を説明する。
【００６８】
（構成ｆ１）−（構成ｆ６）の照射パターン設定部１０２２ｂは、タイミング１（t=t1）においてＧ及びＢの照明光がパターンＡ１として照射され、タイミング２(t=t2)においてＲ及びＢの照明光がパターンＡ２として照射され、タイミング３（t=t3）においてＲ及びＧの照明光がパターンＡ３として照射されるように照明ユニット制御信号を生成する。
【００６９】
（構成ｆ１）−（構成ｆ６）の撮像部１０４は補色フィルタを有している。したがって、各フィルタ要素に対応する照明光を差し引いた照明光のみが受光素子１０４２ａにおいて受光される。すなわち、Ｇ及びＢの照明光が照射されたタイミングでは、Ｒ−のフィルタ要素はそのままＧ及びＢの照明光を透過させ、Ｇ−のフィルタ要素はＢの照明光のみを透過させ、Ｂ−のフィルタ要素はＧの照明光のみを透過させる。Ｒ及びＢの照明光が照射されたタイミングでは、Ｒ−のフィルタ要素はＢの照明光のみを透過させ、Ｇ−のフィルタ要素はそのままＲ及びＢの照明光を透過させ、Ｂ−のフィルタ要素はＲの照明光のみを透過させる。Ｒ及びＧの照明光が照射されたタイミングでは、Ｒ−のフィルタ要素はＧの照明光のみを透過させ、Ｇ−のフィルタ要素はＲの照明光のみを透過させ、Ｂ−のフィルタ要素はそのままＲ及びＢの照明光を透過させる。
【００７０】
以下、（構成ｆ１）の詳細を説明する。（構成ｆ１）の２次画像生成部１０６３は、タイミング１（t=t1）では、Ｒ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＲの補色信号として認識し、Ｇ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＢの原色信号として認識し、Ｂ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＧの原色信号として認識し、これらの情報を含む画像情報を１次画像情報１として２次画像情報１を生成する処理を行う。また、２次画像生成部１０６３は、タイミング２（t=t2）では、Ｒ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＢの原色信号として認識し、Ｇ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＧの補色信号として認識し、Ｂ−のフィルタに対応した受光素子１０４２ａより得られる信号をＲの原色信号として認識し、これらの情報を含む画像情報を１次画像情報２として２次画像情報２を生成する処理を行う。タイミング３（t=t3）では、Ｒ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＧの原色信号として認識し、Ｇ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＲの原色信号として認識し、Ｂ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＢの補色信号として認識し、これらの情報を含む画像情報を１次画像情報３として２次画像情報３を生成する処理を行う。
【００７１】
（構成ｆ１）の２次画像生成部１０６３は、例えば、照射パターンの切替を繰り返す中で、時間的に１個前又は２個前の照射パターンによる光照射によって得られるＲＧＢの原色信号の和に対してt=t1,t2,t3における各々の補色信号との差分をとることにより、各々の補色信号を擬似的に原色信号に変換してから同時化（３板化）をする。なお、ＲＧＢの原色信号の和ではなく、補色信号の和に対してt=t1,t2,t3の補色信号との差分をとることも可能である。この場合は、ＲＧＢの補色信号の和の1/2に対して差分をとることになる。
【００７２】
２次画像生成部１０６３による画像処理の後、表示モード切替部１０６５は、画像補正部１０６６に２次画像生成部１０６３で生成された２次画像情報を出力する。画像補正部１０６６は、入力された２次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００７３】
以上のような（構成ｆ１）では、（構成ａ）と同様に１個の受光素子が１個の画素として機能する。したがって、（構成ｆ１）の空間解像度は（構成ａ）と同じである。一方、１個の画素あたりで受光する光量は、時間平均すると（構成ａ）のおよそ（L+M-1）/L倍になる（例えば、L=N=3、M=2の場合には4/3倍）。１フレームの画素あたりの受光量も（構成ａ）に対しておよそ（L+M-1）/L倍になる。
【００７４】
さらに、（構成ｆ１）の場合、照射パターンの切り替えの間隔内で画像の生成に必要な枚数の１次画像情報の取得と２次画像情報の生成が行われる。したがって、実質的なフレーム表示の平均速度は（構成ａ）に近く、（構成ｃ）の約N倍である。
【００７５】
このように（構成ｆ１）は、（構成ａ）よりも高感度、かつ、（構成ｃ）よりも高フレームレートのモードにおいて利用される構成である。
【００７６】
以下、（構成ｆ２）の詳細を説明する。（構成ｆ２）は、２次画像情報を得るまでの構成は（構成ｆ１）と同じであり、さらに表示画像として３次画像情報を生成する点が異なる。すなわち、（構成ｆ２）の２次画像生成部１０６３は、直近の３枚の２次画像情報１、２、３を３次画像生成部１０６４に入力する。３次画像生成部１０６４は、２次画像情報１、２、３を合成してＲＧＢのすべての光波長バンドの情報を含むひとつの３次画像情報を生成する。表示モード切替部１０６５は、画像補正部１０６６に３次画像生成部１０６４で生成された３次画像情報を出力する。画像補正部１０６６は、入力された３次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。なお、ここでは詳しい説明は省略するが、１次画像情報１、２、３及び２次画像情報１、２、３を用いてＲＧＢのすべての光波長バンドの情報を含む３次画像情報を生成してもよい。
【００７７】
以上のような（構成ｆ２）では（構成ｃ）と同様に３個の１次画像情報を用いて１個の２次画像情報を生成する。すなわち、（構成ｆ２）においても、１個の受光素子がL個分の画素として機能するため、（構成ａ）と較べて空間解像度がL倍になる。一方で、フレーム表示の平均速度は（構成ａ）の1/N倍になる。その他は（構成ｆ１）と同様である。
【００７８】
以下、（構成ｆ３）の詳細を説明する。（構成ｆ３）は、３次画像情報の生成までは（構成ｆ２）と同様である。３次画像情報の生成後、（構成ｆ３）の表示モード切替部１０６５は、２次画像生成部１０６３で生成された２次画像情報及び３次画像生成部１０６４で生成された３次画像情報との何れかを最終の表示フレームとして選択して画像補正部１０６６に出力する。画像補正部１０６６は、入力された画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。なお、前述したように、３次画像情報の生成には直近の３枚の２次画像情報が使用される。したがって、表示モード切替部１０６５による画像情報の選択は、３フレーム目以後から行われる。また、ここでは、２次画像情報に基づく画像と３次画像情報に基づく画像の何れかを表示させる例を説明したが、両方の画像を並列表示させるようにしてもよい。
【００７９】
以上のような（構成ｆ３）では、必要に応じて（構成ｆ１）に対応する画像表示モードと（構成ｆ２）に対応する画像表示モードとを切替えることが可能である。すなわち、高解像度が望まれる場合は（構成ｆ２）の画像特性（高解像度であるが、低フレームレートである）で表示でき、速い観察対象の動きを滑らかに表示したい場合は（構成ｆ１）の画像特性（高解像度ではないが、高フレームレートである）で表示させることが可能である。このように解像度とフレームレートのうちのどちらを優先するかを画像表示モードに応じて選択したり、或いは両方のモードを併用して同時表示したりすることを可能にすることは、カラーフィルタを有する撮像素子と複数の光波長バンドの光を同時照射する照射パターンを切り替えて照射する光源との組み合わせによって得られる特有の効果であり、白色ブロードバンド照明方式とカラーフィルタを有する撮像素子との組み合わせや単色の面順次照明方式とカラーフィルタを有していない撮像素子との組み合わせでは得られない特長である。
【００８０】
以下、（構成ｆ４）の詳細を説明する。（構成ｆ４）は、１次画像情報の取得までは（構成ｆ１）と同様である。（構成ｆ４）の２次画像生成部１０６３は、タイミング１（t=t1）で取得したＧ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＢの原色信号として認識し、Ｂ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＧの原色信号として認識するとともに、タイミング２（t=t2）で取得したＲ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＲの原色信号として認識し、これらの情報を含む画像情報を１次画像情報１として２次画像情報１を生成する処理を行う。また、２次画像生成部１０６３は、タイミング１（t=t1）で取得したＲ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＲの補色信号として認識し、タイミング２（t=t2）で取得したＧ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＧの補色信号として認識し、タイミング３（t=t3）で取得したＢ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＢの補色信号として認識し、これらの情報を含む画像情報を１次画像情報２として２次画像情報２を生成する処理を行う。さらに、２次画像生成部１０６３は、タイミング２（t=t2）で取得したＲ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＢの原色信号として認識し、タイミング３（t=t3）で取得したＲ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＧの原色信号として認識するとともに、タイミング３（t=t3）で取得したＧ−のフィルタ要素に対応した受光素子１０４２ａより得られる信号をＲの補色信号として認識し、これらの情報を含む画像情報を１次画像情報３として２次画像情報３を生成する処理を行う。
【００８１】
（構成ｆ４）で得られた１次画像情報は、ＲＧＢの光波長バンドの原色情報とＲＧＢの光波長バンドの補色情報の何れかを有している。したがって、３次画像生成部１０６４を経ることなく、２次画像情報１、２、３のそれぞれを画像補正部１０６６、さらには表示部１０８に送ることができる。なお、画像処理の簡素化のために、原色信号だけで画像処理する場合には、２次画像情報３を最終の画像の生成に使わないケースもあり得る。以下で説明する（構成ｆ４）の効果に関する記載においては、２次画像情報３を最終の画像の生成に使わないケースの効果についての説明は省略する。
【００８２】
以上のような（構成ｆ４）では、１個の受光素子１０４２ａが１個分の画素として機能するため、（構成ａ）と空間解像度は同等である。また、照射パターンＡ１−Ａ３の切り替えが完了すると、表示や記録にそのまま使える２次画像情報が取得されるので、フレーム表示の平均速度は（構成ａ）と同等、すなわち（構成ｃ）のN倍になる。一方、１個の画素あたりの受光量は、時間平均すると（構成ａ）の（L+M-1）/L倍になる。１フレームの画素あたりの受光量も（構成ａ）に対して（L+M-1）/L倍になる。
【００８３】
以下、（構成ｆ５）の詳細を説明する。（構成ｆ５）は、２次画像情報の生成までは（構成ｆ４）と同様であり、さらに表示画像として３次画像情報を生成する点が異なる。すなわち、（構成ｆ５）の２次画像生成部１０６３は、直近の３枚の２次画像情報１、２、３を３次画像生成部１０６４に入力する。３次画像生成部１０６４は、２次画像情報１、２、３を合成してＲＧＢのすべての光波長バンドの情報を含むひとつの３次画像情報を生成する。表示モード切替部１０６５は、画像補正部１０６６に３次画像生成部１０６４で生成された３次画像情報を出力する。画像補正部１０６６は、入力された３次画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。
【００８４】
以上のような（構成ｆ５）では、１個の受光素子１０４２ａがL 個分の画素として機能するため、（構成ａ）と較べて空間解像度がL 倍に増加する。また、照射パターンＡ１−Ａ３の切り替えに対して、ただ１つの３次画像情報を合成して画像として取得するため、フレーム表示の平均速度は（構成ａ）の1/N倍、すなわち（構成ｃ）と同等レベルになる。一方、１個の画素あたりの受光量は、時間平均すると（構成ａ）のおよそ（L+M-1）/L 倍に増加する。１フレームの画素あたりの受光量も（構成ａ）に対しておよそ（L+M-1）/L 倍になる。
【００８５】
以下、（構成ｆ６）の詳細を説明する。（構成ｆ６）は、３次画像情報の生成までは（構成ｆ５）と同様である。３次画像情報の生成後、（構成ｆ６）の表示モード切替部１０６５は、２次画像生成部１０６３で生成された２次画像情報及び３次画像生成部１０６４で生成された３次画像情報との何れかを最終の画像として選択して画像補正部１０６６に出力する。画像補正部１０６６は、入力された画像情報に対して表示部１０８における表示に必要な補正処理を施して表示部１０８に出力する。これを受けて表示部１０８は、カラー画像を表示する。なお、前述したように、３次画像情報の生成には直近の３枚の２次画像情報が使用される。したがって、表示モード切替部１０６５による画像情報の選択は、３フレーム目以後から行われる。また、ここでは、２次画像情報に基づく画像と３次画像情報に基づく画像の何れかを表示させる例を説明したが、両方の画像を並列表示させるようにしてもよい。
【００８６】
以上のような（構成ｆ６）では、必要に応じて（構成ｆ４）に対応する画像表示モードと（構成ｆ５）に対応する画像表示モードとを切り替えることが可能である。すなわち、高解像度が望まれる場合は（構成ｆ５）の画像特性（高解像度であるが、低フレームレートである）で表示でき、速い観察対象の動きを滑らかに表示したい場合は（構成ｆ４）の画像特性（高解像度ではないが、高フレームレートである）で表示させることが可能である。このように解像度とフレームレートのうちのどちらを優先するかを画像表示モードに応じて選択したり、或いは両方のモードを併用して同時表示したりすることを可能にすることは、カラーフィルタを有する撮像素子と複数の光波長バンドの光を同時照射する照射パターンを切り替えて照射する光源との組み合わせによって得られる特有の効果であり、白色ブロードバンド照明方式とカラーフィルタを有する撮像素子との組み合わせや単色の面順次照明方式とカラーフィルタを有していない撮像素子との組み合わせでは得られない特長である。
【００８７】
（構成ｆ１）−（構成ｆ６）の変形例として、照射パターン数N=4とし、このうち１個の照射パターンを３個の光波長バンドの照明光を同時照射する照射パターンＡ０とするようにしてもよい。この場合、（構成ｆ１）等で得られる１次画像情報における補色の情報を、フルバンド（ＲＧＢ）の３個の受光素子１０４２ａにおいて受光されるトータルの信号の1/2とタイミング１、２、３のそれぞれにおいて取得される補色信号との差分をとることにより原色の情報に変換することができる。
【００８８】
以上説明したように本実施形態によれば、撮像部１０４の特性や撮像装置１００として要求される性能に応じて照射パターンを設定することにより、装置の大型化を防止しつつ、撮像装置の基本的な性能を必要に応じて選択することが可能である。
【００８９】
［変形例］  
次に本実施形態の変形例について説明する。前述の実施形態では、照明部１０２が照射できる光波長バンドの数Lが3の場合を例に説明している。しかしながら、Lは3に限定されるものではない。第２の実施形態ではL=4の例を説明する。図６は、L=4、N=4、M=2の場合の照射パターン及びフィルタ配置の例を示している。
【００９０】
図６の上部に示す照射パターンＢ１−Ｂ４は、それぞれ、４個の光波長バンドの照明光から異なる２個の光波長バンドの照明光を抽出して照射する照射パターンである(すなわち、M=2)。この場合、照射パターン設定部１０２２ｂは、タイミング１（t=t1）においてＧ及びＢの照明光がパターンＢ１として照射され、タイミング２(t=t2)においてＲ及びＯ（オレンジ）の照明光がパターンＢ２として照射され、タイミング３（t=t3）においてＲ及びＧの照明光がパターンＢ３として照射され、タイミング４（t=t4）においてＯ及びＲの照明光がパターンＢ４として照射されるように照明ユニット制御信号を生成する。すなわち、（構成ｄ）、（構成ｅ）、（構成ｆ）で示したパターンＡ２が、パターンＢ２とパターンＢ４とに分けられている。
【００９１】
図６の上部に示す照射パターンＣ１−Ｃ４は、それぞれ、４個の光波長バンドの照明光から異なる３個の光波長バンドの照明光を抽出して照射する照射パターンである(すなわち、M=3)。この場合、照射パターン設定部１０２２ｂは、タイミング１（t=t1）においてＧ、Ｂ、Ｏの照明光がパターンＣ１として照射され、タイミング２(t=t2)においてＲ、Ｇ、Ｂの照明光がパターンＣ２として照射され、タイミング３（t=t3）においてＲ、Ｂ、Ｏの照明光がパターンＣ３として照射され、タイミング４（t=t4）においてＲ、Ｇ、Ｏの照明光がパターンＣ４として照射されるように照明ユニット制御信号を生成する。
【００９２】
図６の上部に示す照射パターンＤ０−Ｄ４は、照射パターンＢ１−Ｂ４に、ＲＧＢＯの照明光をすべて照射する照射パターンＤ０を追加したものである。この場合、照射パターン設定部１０２２ｂは、タイミング０（t=t0）においてＲ、Ｇ、Ｂ、Ｏの照明光がパターンＤ０として照射され、タイミング１（t=t1）においてＧ、Ｂの照明光がパターンＤ１として照射され、タイミング２(t=t2)においてＢ、Ｏの照明光がパターンＤ２として照射され、タイミング３（t=t3）においてＢ、Ｏの照明光がパターンＤ３として照射され、タイミング４（t=t4）においてＲ、Ｏの照明光がパターンＤ４として照射されるように照明ユニット制御信号を生成する。
【００９３】
図６の下部は、フィルタの配置を示している。図６の下部に示す４原色フィルタは、照明ユニット１０２１によって照射可能な４個の光波長バンドの入射光のうちの対応する１個の光を透過可能なフィルタ要素が２次元状に配置されることによって構成されたフィルタである。すなわち、この原色フィルタは、入射光のうちのＲの照明光を透過可能なフィルタ要素と、入射光のうちのＧの照明光を透過可能なフィルタ要素と、入射光のうちのＢの照明光を透過可能なフィルタ要素と、入射光のうちのＯの照明光を透過可能なフィルタ要素とが２次元状に配置されることによって構成されたフィルタである。一方、図６の下部に示す４補色フィルタは、照明ユニット１０２１によって照射可能なL個の光波長バンドの光のうちから対応する１個の光を差し引いた光を透過可能なフィルタ要素が２次元状に配置されることによって構成されたフィルタである。すなわち、この補色フィルタは、入射光からＲの照明光を差し引いた光を透過可能なフィルタ要素と、入射光からＧの照明光を差し引いた光を透過可能なフィルタ要素と、入射光からＢの照明光を差し引いた光を透過可能なフィルタ要素と、入射光からＯの照明光を差し引いた光を透過可能なフィルタ要素とが２次元状に配置されることによって構成されたフィルタである。
【００９４】
図６で示した構成であっても基本的な動作及び効果は（構成ｄ）−（構成ｆ）で示したものと同様である。詳細については説明を省略する。
【００９５】
以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。
上述の説明では、照明パターンとして、（構成ａ）〜（構成ｃ）（１バンド／パターンの切替え照明）や（構成ｄ）、（構成ｆ）の（複数バンド／パターンの切替え照明）の各々のケースについて照明パターンの切替え設定を固定して（すなわちMを一定にして）、これに対応する画像処理手段の画像処理アルゴリズムを示し、このアルゴリズムで生成が可能な画像特性やその切り替えバリエーションについて説明したが、変形例として、（例えばM=1からM=2に切替えるなどにより）照明切替えパターンの設定そのものを時間的に変更し、それに対応する画像処理アルゴリズムを使うことにより異なる画像特性を得る構成も含まれる。例えば、同じ撮像部の構成に対して、「（構成ｃ）と（構成ｄ）で記載したような“照明パターンと画像処理アルゴリズム”の組を切替えて複数の画像特性を得ること」も可能であり、同様に、「（構成ｂ）と（構成ｆ）で記載したような“照明パターンと画像処理アルゴリズム”の組を切替えて複数の画像特性を得ること」も可能である。
また、照明ユニットが照射可能な光波長バンドの数Lと原色フィルタ或いは補色フィルタの数は同じである必要はない。一例として、図６に示す原色フィルタ要素の数をひとつ減らして、ＲＯフィルタ、Ｇフィルタ、Ｂフィルタの３種類のフィルタ配置としてもよい。（ＲＯフィルタはＲとＯの光のみ透過し、ＧとＢは遮断する。ＧフィルタはＧのみ透過する。ＢフィルタはＢのみ透過する））。同様に、図６に示す補色フィルタ要素の数をひとつ減らして、ＲＯ−フィルタ、Ｇ−フィルタ、Ｂ−フィルタの３種類のフィルタ配置としてもよい（ＲＯ−フィルタはＲとＯの光を遮光し、ＧとＢは透過する。Ｇ−フィルタはＧのみ遮断する。Ｂ−フィルタはＢのみ遮断する）。
また、構成また（構成ｄ）−（構成ｆ）の実施の形態では、撮像部の撮像素子は、「受光素子配列と組み合わせたフィルタ配列がモノクロフィルタである場合、補色フィルタである場合、及び原色フィルタである場合」について記載したが、フィルタと組み合わせなくても光波長感度特性が所定の配列となるように撮像素子を構成する場合も含まれる（すなわち、各々の撮像素子の画素そのものに異なる光波長感度特性を持たせる）。なお、本明細書において、「受光素子」とした場合は「光波長に対して感度特性を特に制限しない光検出素子」を、「撮像画素」と記載した場合は「光波長に対して感度特性を含めた光検出素子」を、「撮像素子」と記載した場合は「撮像画素（光波長に対して感度特性を含めた光の検出素子）の配列の集合体」を意味する。
【００９６】
さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。
【符号の説明】
【００９７】
１００  撮像装置、１０２  照明部、１０４  撮像部、１０６  画像処理部、１０８  表示部、１１０  撮像モード制御部、２００  観察対象、３００  外光抑制部材、１０２１  照明ユニット、１０２１ａ  光源、１０２１ｂ  導波路、１０２１ｃ  配光レンズ、１０２２  照明切替制御ユニット、１０２２ａ  特性情報記憶部、１０２２ｂ  照射パターン設定部、１０２２ｃ  ドライブパターン発生部、１０２２ｄ  光源ドライバ、１０４１  結像レンズ、１０４２  撮像素子、１０４２ａ  受光素子、１０４２ｂ  カラーフィルタ、１０６１  Ａ／Ｄ変換器、１０６２  フレームメモリ、１０６３  ２次画像生成部、１０６４  次画像生成部、１０６５  表示モード切替部、１０６６  画像補正部
【図１】
2015154474.tif 000003
【図２】
2015154474.tif 000004
【図３】
2015154474.tif 000005
【図４】
2015154474.tif 000006
【図５】
2015154474.tif 000007
【図６】
2015154474.tif 000008