(57)【特許請求の範囲】
【請求項１】
拍動や蠕動運動によって形状が変化する被写体に励起光および参照光を照射する光源と、
該光源からの前記励起光の照射により前記被写体において発生した蛍光を撮影し蛍光画像を取得する蛍光画像取得部と、
前記光源からの前記参照光の照射により前記被写体から戻る戻り光を撮影し参照光画像を取得する参照光画像取得部と、
前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の距離特性と戻り光強度の距離特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理部と、
該前処理部により生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成部と、
該除算画像生成部により生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定部と、
該閾値設定部により設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整部と、
該画像調整部により前記コントラストが拡大された前記除算画像を表示する表示部とを備える蛍光観察装置。
【請求項２】
拍動や蠕動運動によって形状が変化する被写体に励起光および参照光を照射する光源と、
該光源からの前記励起光の照射により前記被写体において発生した蛍光を撮影し蛍光画像を取得する蛍光画像取得部と、
前記光源からの前記参照光の照射により前記被写体から戻る戻り光を撮影し参照光画像を取得する参照光画像取得部と、
前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の角度特性と戻り光強度の角度特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理部と、
該前処理部により生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成部と、
該除算画像生成部により生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定部と、
該閾値設定部により設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整部と、
該画像調整部により前記コントラストが拡大された前記除算画像を表示する表示部とを備える蛍光観察装置。
【請求項３】
前記前処理部が、前記蛍光画像の各画素の蛍光強度および前記参照光画像の各画素の戻り光強度を前記蛍光画像取得部および前記参照光画像取得部のゲインおよび露光時間によって規格化して規格化蛍光画像および規格化参照光画像を生成し、これら規格化蛍光画像または規格化参照光画像の少なくとも一方に、前記係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する請求項１または２に記載の蛍光観察装置。
【請求項４】
前記光源が、さらに白色光を照射し、
前記画像調整部が、前記閾値より小さい階調値を有する領域を非表示としたバックグラウンド除去画像を生成し、
前記白色光の照射により得られる前記被写体の白色光画像を取得する白色光画像取得部と、
該白色光画像取得部により取得された白色光画像と前記画像調整部により生成されたバックグラウンド除去画像とを重畳した合成画像を生成する画像合成部とを備え、
前記表示部が、前記画像合成部により生成された合成画像を表示する請求項１または２に記載の蛍光観察装置。
【請求項５】
前記参照光画像取得部が、前記被写体において反射または散乱されて戻る前記参照光の反射光または散乱光を取得する請求項１または２に記載の蛍光観察装置。
【請求項６】
前記光源が、前記参照光として白色光を照射し、
前記参照光画像取得部が、前記参照光画像として被写体から戻る白色光画像を取得し、
前記画像調整部が、前記閾値より小さい階調値を有する領域を非表示としたバックグラウンド除去画像を生成し、
前記参照光画像取得部により取得された前記被写体の白色光画像と前記画像調整部により生成されたバックグラウンド除去画像とを重畳した合成画像を生成する画像合成部を備え、
前記表示部が、前記画像合成部により生成された合成画像を表示する請求項１または２に記載の蛍光観察装置。
【請求項７】
前記閾値設定部が、前記階調値の平均値と標準偏差とに基づいて前記閾値を設定する請求項１または２に記載の蛍光観察装置。
【請求項８】
前記係数を記憶する記憶部を備え、
前記前処理部が、前記記憶部に記憶されている係数を前記蛍光画像または前記参照光画像の少なくとも一方に乗算する請求項１または２に記載の蛍光観察装置。
【請求項９】
観察条件を変更するために着脱される着脱部品を備え、
該着脱部品に識別情報が記録され、
該着脱部品に記憶された識別情報を読み取る識別情報読取手段とを備え、
前記記憶部に、前記識別情報と前記係数とが対応づけて記憶されている請求項８に記載の蛍光観察装置。
【請求項１０】
請求項１に記載の蛍光観察装置と、
該蛍光観察装置に接続され、前記係数を算出する較正装置とを備え、
該較正装置が、標準試料と、該標準試料に対して前記蛍光観察装置の観察距離を変更可能に設定する観察距離設定機構とを備え、
前記観察距離設定機構により設定された観察距離と、前記蛍光観察装置により前記標準試料を撮影して取得された蛍光画像および参照光画像とに基づいて、該蛍光画像および前記参照光画像の少なくとも一方に乗算することにより、蛍光強度の距離特性と戻り光強度の距離特性とが正比例することとなる係数を算出する係数決定部を有する蛍光観察システム。
【請求項１１】
請求項２に記載の蛍光観察装置と、
該蛍光観察装置に接続され、前記係数を算出する較正装置とを備え、
該較正装置が、標準試料と、該標準試料に対して前記蛍光観察装置の観察角度を変更可能に設定する観察角度設定機構とを備え、
前記観察角度設定機構により設定された観察角度と、前記蛍光観察装置により前記標準試料を撮影して取得された蛍光画像および参照光画像とに基づいて、該蛍光画像および前記参照光画像の少なくとも一方に乗算することにより、蛍光強度の角度特性と戻り光強度の角度特性とが正比例することとなる係数を算出する係数決定部を有する蛍光観察システム。
【請求項１２】
励起光を拍動や蠕動運動によって形状が変化する被写体に照射することにより被写体において発生した蛍光を撮影して取得された蛍光画像と、参照光を被写体に照射することにより被写体から戻る戻り光を撮影して取得された参照光画像とを用いて、蛍光観察装置が、
前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の距離特性と戻り光強度の距離特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理ステップと、
該前処理ステップにより生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成ステップと、
該除算画像生成ステップにより生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定ステップと、
該閾値設定ステップにより設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整ステップと、
該画像調整ステップにより前記コントラストが拡大された前記除算画像を表示する表示ステップとを含む処理を実行する蛍光観察装置の蛍光画像処理方法。
【請求項１３】
励起光を拍動や蠕動運動によって形状が変化する被写体に照射することにより被写体において発生した蛍光を撮影して取得された蛍光画像と、参照光を被写体に照射することにより被写体から戻る戻り光を撮影して取得された参照光画像とを用いて、蛍光観察装置が、
前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の角度特性と戻り光強度の角度特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理ステップと、
該前処理ステップにより生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成ステップと、
該除算画像生成ステップにより生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定ステップと、
該閾値設定ステップにより設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整ステップと、
該画像調整ステップにより前記コントラストが拡大された前記除算画像を表示する表示ステップとを含む処理を実行する蛍光観察装置の蛍光画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、蛍光観察装置およびこれを備える蛍光観察システム並びに蛍光観察装置の蛍光画像処理方法に関するものである。
【背景技術】
【０００２】
従来、蛍光画像を反射光画像で除算して、観察距離や角度による蛍光画像の明るさの変動を補正する方法が知られている（例えば、特許文献１〜特許文献３参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開昭６２−２４７２３２号公報
【特許文献２】特公平３−５８７２９号公報
【特許文献３】特開２００６−１７５０５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、除算をすることによって距離や角度の変化を軽減することはできるものの、一定の誤差が生じてしまう。
これは、蛍光と反射光において、撮像される明るさの観察距離に対する依存性、観察角度に対する依存性が異なるため、蛍光画像を反射光画像で除算をしても、距離と角度の影響を補正しきれないことに起因する。
【０００５】
また、大腸や胃、もしくは腹腔内を観察するときなど、拍動や、臓器の蠕動運動などによって、被写体の形状が変化する。これにより照明光および励起光の光学的な分布が変化するため、蛍光画像を反射光画像で除算をするだけでは、これによる影響を補正しきれないことも、誤差の要因となっている。
【０００６】
本発明は上述した事情に鑑みてなされたものであって、除算した画像に残存する距離等に対する依存性を十分に除去して、定量性の高い蛍光画像によって観察を行うことができる蛍光観察装置および蛍光観察システム並びに蛍光画像処理方法を提供することを目的としている。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明は以下の手段を採用する。
本発明の第１の態様は、拍動や蠕動運動によって形状が変化する被写体に励起光および参照光を照射する光源と、該光源からの前記励起光の照射により前記被写体において発生した蛍光を撮影し蛍光画像を取得する蛍光画像取得部と、前記光源からの前記参照光の照射により前記被写体から戻る戻り光を撮影し参照光画像を取得する参照光画像取得部と、前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の距離特性と戻り光強度の距離特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理部と、該前処理部により生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成部と、該除算画像生成部により生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定部と、該閾値設定部により設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整部と、該画像調整部により前記コントラストが拡大された前記除算画像を表示する表示部とを備える蛍光観察装置である。
【０００８】
本発明の第１の態様によれば、光源から発せられた励起光が被写体に照射されると、蛍光画像取得部により被写体において発生した蛍光の蛍光画像が取得され、光源から励起光とともに発せられた参照光が被写体に照射されると、参照光画像取得部によりその戻り光の参照光画像が取得される。そして、取得された蛍光画像は、除算画像生成部において参照光画像を用いて補正される。
【０００９】
この場合に、除算画像生成部における補正に先立って、前処理部において蛍光画像および参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の距離特性と戻り光強度の距離特性とを相互に正比例関係とする係数が乗算されることにより補正用蛍光画像および補正用参照光画像が生成される。
【００１０】
すなわち、蛍光画像を構成する各画素の蛍光強度および参照光画像を構成する各画素の戻り光強度は、照明部から当該画素に対応する被写体上の位置までの距離に依存して変化し、それぞれ距離の指数関数に近似させることができる。蛍光強度の距離特性における指数は、戻り光強度の距離特性における指数とは異なるので、蛍光画像を参照光画像でそのまま除算しても距離の依存性を除去することはできない。従って、蛍光強度および戻り光強度をそれぞれ距離特性における指数の逆数で予め累乗しておくことで、蛍光強度の距離特性と戻り光強度の距離特性とを相互に正比例関係とすることができ、除算したときに距離の依存性を除去することができる。
【００１１】
そこで、標準試料について予め取得した蛍光強度の距離特性と戻り光強度の距離特性とから、蛍光画像および参照光画像の少なくとも一方に乗算することにより、上述した指数の逆数を累乗したのと同様の効果を得られる係数を予め求めておく。そして、求められた係数を蛍光画像および参照光画像の少なくとも一方に乗算して、補正用蛍光画像と補正用参照光画像を生成し、除算画像生成部において、補正用蛍光画像を補正用参照光画像で除算することにより、距離の依存性を十分に低減するように補正された除算画像を得ることができる。
【００１２】
ここで、観察距離に対する参照光と励起光との依存性が異なることにより、観察距離の影響を補正しきれず除算画像に一定の誤差が生じてしまう場合がある。この場合において、画像調整部によって階調値が閾値より大きい領域と小さい領域とのコントラストが拡大された除算画像を表示部により表示することで、バックグラウンドから発生される微弱な蛍光の影響を抑制した鮮明な除算画像を取得することができる。
【００１３】
また、観察距離等が変動して誤差要因により除算画像における画素ごとの階調値が変動したとしても、閾値設定部により階調値の変動に追従して閾値を更新し、画像調整部により除算画像の鮮明度を維持することができる。これにより、被写体の定量的な情報を取得することができる。
すなわち、本発明によれば、精度よく距離の依存性を低減することができ、定量性の高い蛍光観察を行うことができる。
【００１４】
本発明の第２の態様は、拍動や蠕動運動によって形状が変化する被写体に励起光および参照光を照射する光源と、該光源からの前記励起光の照射により前記被写体において発生した蛍光を撮影し蛍光画像を取得する蛍光画像取得部と、前記光源からの前記参照光の照射により前記被写体から戻る戻り光を撮影し参照光画像を取得する参照光画像取得部と、前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の角度特性と戻り光強度の角度特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理部と、該前処理部により生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成部と、該除算画像生成部により生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定部と、該閾値設定部により設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整部と、該画像調整部により前記コントラストが拡大された前記除算画像を表示する表示部とを備える蛍光観察装置である。
【００１５】
本発明の第２の態様によれば、光源から発せられた励起光が被写体に照射されると、蛍光画像取得部により被写体において発生した蛍光の蛍光画像が取得され、光源から励起光とともに発せられた参照光が被写体に照射されると、参照光画像取得部によりその戻り光の参照光画像が取得される。そして、取得された蛍光画像は、除算画像生成部において参照光画像を用いて補正される。
【００１６】
この場合に、除算画像生成部における補正に先立って、前処理部において蛍光画像および参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の角度特性と戻り光強度の角度特性とを相互に正比例関係とする係数が乗算されることにより補正用蛍光画像および補正用参照光画像が生成される。
【００１７】
すなわち、蛍光画像を構成する各画素の蛍光強度および参照光画像を構成する各画素の戻り光強度は、照明部から当該画素に対応する被写体上の位置までの角度に依存して変化し、それぞれ角度の指数関数に近似させることができる。蛍光強度の角度特性における指数は、戻り光強度の角度特性における指数とは異なるので、蛍光画像を参照光画像でそのまま除算しても角度の依存性を除去することはできない。従って、蛍光強度および戻り光強度をそれぞれ角度特性における指数の逆数で予め累乗しておくことで、蛍光強度の角度特性と戻り光強度の角度特性とを相互に正比例関係とすることができ、除算したときに角度の依存性を除去することができる。
【００１８】
そこで、標準試料について予め取得した蛍光強度の角度特性と戻り光強度の角度特性とから、蛍光画像および参照光画像の少なくとも一方に乗算することにより、上述した指数の逆数を累乗したのと同様の効果を得られる係数を予め求めておく。そして、求められた係数を蛍光画像および参照光画像の少なくとも一方に乗算して、補正用蛍光画像と補正用参照光画像を生成し、除算画像生成部において、補正用蛍光画像を補正用参照光画像で除算することにより、角度の依存性を十分に低減するように補正された除算画像を得ることができる。
【００１９】
ここで、観察角度に対する参照光と励起光との依存性が異なることにより、観察角度の影響を補正しきれず除算画像に一定の誤差が生じてしまう場合がある。この場合において、画像調整部によって階調値が閾値より大きい領域と小さい領域とのコントラストが拡大された除算画像を表示部により表示することで、バックグラウンドから発生される微弱な蛍光の影響を抑制した鮮明な除算画像を取得することができる。
【００２０】
また、観察角度等が変動して誤差要因により除算画像における画素ごとの階調値が変動したとしても、閾値設定部により階調値の変動に追従して閾値を更新し、画像調整部により除算画像の鮮明度を維持することができる。これにより、被写体の定量的な情報を取得することができる。
すなわち、本発明によれば、精度よく角度の依存性を低減することができ、定量性の高い蛍光観察を行うことができる。
【００２１】
上記の各態様において、前記参照光画像取得部が、前記被写体において反射または散乱されて戻る前記参照光の反射光または散乱光を取得することとしてもよい。
このように構成することで、被写体において反射または散乱されて戻る参照光の反射光または散乱光から参照光画像を生成するため、蛍光をほとんど生じない領域においても、参照光画像の階調値がゼロまたはゼロに近い値になることは無く、正確な除算画像を生成することができる。
【００２２】
上記の各態様において、前記光源が、さらに白色光を照射し、前記画像調整部が、前記閾値より小さい階調値を有する領域を非表示としたバックグラウンド除去画像を生成し、前記白色光の照射により得られる前記被写体の白色光画像を取得する白色光画像取得部と、該白色光画像取得部により取得された白色光画像と前記画像調整部により生成されたバックグラウンド除去画像とを重畳した合成画像を生成する画像合成部とを備え、前記表示部が、前記画像合成部により生成された合成画像を表示することとしてもよい。
【００２３】
画像合成部により、白色光画像取得部により取得された白色光画像と画像調整部により生成されたバックグラウンド除去画像とを重畳した合成画像を生成することで、白色光画像と除算画像の位置関係をより明瞭に術者に提供することができる。この場合において、閾値以下の領域を非表示としているため、両画像が重畳された合成画像においても、病変部以外の領域において、白色光画像の表示が除算画像によって阻害されずに済む。
【００２４】
上記の各態様において、前記光源が、前記参照光として白色光を照射し、前記参照光画像取得部が、前記参照光画像として被写体から戻る白色光画像を取得し、前記画像調整部が、前記閾値より小さい階調値を有する領域を非表示としたバックグラウンド除去画像を生成し、前記参照光画像取得部により取得された前記被写体の白色光画像と前記画像調整部により生成されたバックグラウンド除去画像とを重畳した合成画像を生成する画像合成部を備え、前記表示部が、前記画像合成部により生成された合成画像を表示することとしてもよい。
【００２５】
このように構成することで、被写体からの反射光および散乱戻り光により生成される白色光画像を参照光画像として用いているため、蛍光をほとんど生じない領域においても、参照光画像の階調値がゼロまたはゼロに近い値になることは無く、正確な除算画像を生成することができる。
また、画像合成部により、白色光画像取得部により取得された白色光画像と画像調整部により生成されたバックグラウンド除去画像とを重畳した合成画像を生成することで、白色光画像と除算画像の位置関係をより明瞭に術者に提供することができる。この場合において、閾値以下の領域を非表示としているため、両画像が重畳された合成画像においても、病変部以外の領域において、白色光画像の表示が除算画像によって阻害されずに済む。
【００２６】
上記の各態様において、前記閾値設定部が、前記階調値の平均値と標準偏差とに基づいて前記閾値を設定することとしてもよい。
このように構成することで、除算画像における画素ごとの階調値にばらつきがある場合であっても、階調値の平均値だけに基づいて閾値を設定する場合と比較してより精度が高い閾値を設定することができる。
なお、閾値設定部が、階調値の平均値に標準偏差を加えて得られる値を閾値として設定することとしてもよい。
【００２７】
上記の各態様において、前記前処理部が、前記蛍光画像の各画素の蛍光強度および前記参照光画像の各画素の戻り光強度を前記蛍光画像取得部および前記参照光画像取得部のゲインおよび露光時間によって規格化して規格化蛍光画像および規格化参照光画像を生成し、これら規格化蛍光画像または規格化参照光画像の少なくとも一方に、前記係数を乗算して補正用蛍光画像と補正用参照光画像とを生成することとしてもよい。
【００２８】
このように構成することで、蛍光画像取得部および参照光画像取得部において、蛍光画像および参照光画像の撮影時に異なるゲイン調整および露光時間調整が行われてもこれを規格化した規格化蛍光画像および規格化参照光画像を生成し、これらを用いて補正用蛍光画像および補正用参照光画像を生成することにより、より定量性の高い蛍光観察を行うことができる。
【００２９】
上記の各態様において、前記係数を記憶する記憶部を備え、前記前処理部が、前記記憶部に記憶されている係数を前記蛍光画像または前記参照光画像の少なくとも一方に乗算することとしてもよい。
このように構成することで、記憶部に記憶しておいた係数を乗算するだけで、簡易に距離または角度の依存性を低減して定量性の高い蛍光観察を行うことができる。
【００３０】
上記の各態様において、観察条件を変更するために着脱される着脱部品を備え、該着脱部品に識別情報が記録され、該着脱部品に記憶された識別情報を読み取る識別情報読取手段とを備え、前記記憶部に、前記識別情報と前記係数とが対応づけて記憶されていることとしてもよい。
このようにすることで、着脱部品を着脱して観察条件を変更すると、着脱部品に記憶されている識別情報が、識別情報読取手段によって読みとられ、記憶部に識別情報と対応づけて記憶されている係数を設定することができる。着脱部品としては、例えば、内視鏡装置におけるスコープ等を挙げることができ、その場合に変更される観察条件としては、対物光学系のＮＡや瞳径、観察可能な蛍光の波長および観察対象部位（胃、大腸など）等を挙げることができる。これにより、観察条件に合わせて、最適な係数を設定でき、観察条件が変動した場合においても定量性の高い蛍光観察を行うことができる。
【００３１】
本発明の第３の態様は、上記の第１の態様の蛍光観察装置と、該蛍光観察装置に接続され、前記係数を算出する較正装置とを備え、該較正装置が、標準試料と、該標準試料に対して前記蛍光観察装置の観察距離を変更可能に設定する観察距離設定機構とを備え、前記観察距離設定機構により設定された観察距離と、前記蛍光観察装置により前記標準試料を撮影して取得された蛍光画像および参照光画像とに基づいて、該蛍光画像および前記参照光画像の少なくとも一方に乗算することにより、蛍光強度の距離特性と戻り光強度の距離特性とが正比例することとなる係数を算出する係数決定部を有する蛍光観察システムである。
【００３２】
本発明の第３の態様によれば、較正装置の観察距離設定機構により、標準試料に対する蛍光観察装置の観察距離を変更しつつ蛍光観察装置によって標準試料を撮影することにより、標準試料の蛍光輝度の距離特性および戻り光強度の距離特性を得ることができ、これらの距離特性基づいて、両距離特性を正比例させる係数を算出することができる。そして、算出された係数を蛍光観察装置の記憶部に記憶させることにより、蛍光観察装置により被写体を蛍光観察する際に、蛍光観察装置に存在する個体差や、着脱部品が存在する場合にはその個体差にかかわらず、精度よく算出された係数を用いて、より定量性の高い蛍光観察を行うことができる。
【００３３】
本発明の第４の態様は、上記の第２の態様の蛍光観察装置と、該蛍光観察装置に接続され、前記係数を算出する較正装置とを備え、該較正装置が、標準試料と、該標準試料に対して前記蛍光観察装置の観察角度を変更可能に設定する観察角度設定機構とを備え、前記観察角度設定機構により設定された観察角度と、前記蛍光観察装置により前記標準試料を撮影して取得された蛍光画像および参照光画像とに基づいて、該蛍光画像および前記参照光画像の少なくとも一方に乗算することにより、蛍光強度の角度特性と戻り光強度の角度特性とが正比例することとなる係数を算出する係数決定部を有する蛍光観察システムである。
【００３４】
本発明の第４の態様によれば、較正装置の観察角度設定機構により、標準試料に対する蛍光観察装置の観察角度を変更しつつ蛍光観察装置によって標準試料を撮影することにより、標準試料の蛍光輝度の角度特性および戻り光強度の角度特性を得ることができ、これらの角度特性基づいて、両角度特性を正比例させる係数を算出することができる。そして、算出された係数を蛍光観察装置の記憶部に記憶させることにより、蛍光観察装置により被写体を蛍光観察する際に、蛍光観察装置に存在する個体差や、着脱部品が存在する場合にはその個体差にかかわらず、精度よく算出された係数を用いて、より定量性の高い蛍光観察を行うことができる。
【００３５】
本発明の第５の態様は、励起光を拍動や蠕動運動によって形状が変化する被写体に照射することにより被写体において発生した蛍光を撮影して取得された蛍光画像と、参照光を被写体に照射することにより被写体から戻る戻り光を撮影して取得された参照光画像とを用いて、蛍光観察装置が、前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の距離特性と戻り光強度の距離特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理ステップと、該前処理ステップにより生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成ステップと、該除算画像生成ステップにより生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定ステップと、該閾値設定ステップにより設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整ステップと、該画像調整ステップにより前記コントラストが拡大された前記除算画像を表示する表示ステップとを含む処理を実行する蛍光観察装置の蛍光画像処理方法である。
【００３６】
本発明の第６の態様は、励起光を拍動や蠕動運動によって形状が変化する被写体に照射することにより被写体において発生した蛍光を撮影して取得された蛍光画像と、参照光を被写体に照射することにより被写体から戻る戻り光を撮影して取得された参照光画像とを用いて、蛍光観察装置が、前記蛍光画像または前記参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の角度特性と戻り光強度の角度特性とが相互に正比例関係となる係数を乗算して補正用蛍光画像と補正用参照光画像とを生成する前処理ステップと、該前処理ステップにより生成された前記補正用蛍光画像を前記補正用参照光画像で除算し、除算画像を生成する除算画像生成ステップと、該除算画像生成ステップにより生成された前記除算画像における画素ごとの階調値の平均値に基づいて前記除算画像の前記階調値の変動に追従して閾値を設定する閾値設定ステップと、該閾値設定ステップにより設定された前記閾値より大きい階調値を有する領域と前記閾値より小さい階調値を有する領域との前記除算画像におけるコントラストを拡大する画像調整ステップと、該画像調整ステップにより前記コントラストが拡大された前記除算画像を表示する表示ステップとを含む処理を実行する蛍光観察装置の蛍光画像処理方法である。
【発明の効果】
【００３７】
本発明によれば、除算した画像に残存する距離等に対する依存性を十分に除去して、定量性の高い蛍光画像によって観察を行うことができるという効果を奏する。
【図面の簡単な説明】
【００３８】
【図１】本発明の第１の実施形態に係る蛍光観察装置の概略構成図である。
【図２】図１の蛍光観察装置において使用される係数を導くための画像の階調値、ゲイン、露光時間および規格化画像とこれらにより導かれた係数との対応の一覧表例を示す図である。
【図３】図２により導かれた規格化参照光画像の階調値と係数との対応の一覧表例を示す図である。
【図４】図１のモニタに表示される白色光画像と除算画像の一例を示す図である。
【図５】図４の除算画像における画素の階調値と画像全体に占める頻度との関係を示すヒストグラムである。
【図６】図１の蛍光観察装置の作用を示すフローチャートである。
【図７】モニタに表示される白色光画像と新たな除算画像の一例を示す図である。
【図８】図７の除算画像における画素の階調値と画像全体に占める頻度との関係を示すヒストグラムである。
【図９】階調値の変動後の除算画像における画素の階調値と画像全体に占める頻度との関係を示すヒストグラムである。
【図１０】図９の除算画像の一例を示した図である。
【図１１】画像調整後の除算画像における画素の階調値と画像全体に占める頻度との関係を示すヒストグラムである。
【図１２】図１１の除算画像の一例を示した図である。
【図１３】第１の変形例に係る蛍光観察装置の作用を示すフローチャートである。
【図１４】第２の変形例に係る蛍光観察装置の概略構成図である。
【図１５】図１４の蛍光観察装置の効果を説明する図である。
【図１６】第３の変形例に係る蛍光観察装置の概略構成図である。
【図１７】第４の変形例に係る蛍光観察装置の概略構成図である。
【図１８】本発明の第２の実施形態に係る蛍光観察システムの概略構成図である。
【図１９】図１８の蛍光観察システムの較正装置を示す図である。
【発明を実施するための形態】
【００３９】
［第１の実施形態］
以下、本発明の第１の実施形態に係る蛍光観察装置について、図面を参照して説明する。
本実施形態に係る蛍光観察装置１００は、図１に示すように、体腔内に挿入される細長いスコープ２と、スコープ２の先端２ａから射出させる照明光を発する光源１０を備える照明ユニット２０と、スコープ２内に配置され、被写体である観察対象部位Ｘの画像情報を取得する撮影ユニット３０と、撮影ユニット３０により取得された画像情報を処理する画像処理部４０と、画像処理部４０により処理された画像および画像情報等を表示するモニタ（表示部）５０とを備えている。
【００４０】
光源１０は、照明光を発するキセノンランプ（Ｘｅランプ）１１と、キセノンランプ１１から発せられた照明光から励起光および白色光（参照光）を切り出す励起光フィルタ１３と、励起光フィルタ１３により切り出された励起光を含む白色光を集光するカップリングレンズ１５とを備えている。励起光フィルタ１３は、例えば、波長帯域が４００〜７４０ｎｍの励起光を含む白色光を切り出すようになっている。
【００４１】
照明ユニット２０には、スコープ２の長手方向の略全長にわたって配置されたライトガイドファイバ２１と、スコープ２の先端２ａに配置された拡散レンズ２３とが備えられている。
ライトガイドファイバ２１は、カップリングレンズ１５によって集光された励起光を含む白色光をスコープ２の先端２ａまで導光するものである。拡散レンズ２３は、ライトガイドファイバ２１により導光された励起光を含む白色光を拡散させて観察対象部位Ｘに照射するようになっている。
【００４２】
撮影ユニット３０は、照明ユニット２０により励起光を含む白色光が照射された観察対象部位Ｘから戻る戻り光を集光する対物レンズ３１と、対物レンズ３１により集光された戻り光を波長ごとに分岐するビームスプリッタ３３とを備えている。
対物レンズ３１は、スコープ２の先端２ａに拡散レンズ２３と並列して配置されている。ビームスプリッタ３３は、戻り光のうち、励起波長以上の光（励起光および蛍光）を反射し、励起波長より波長が短い白色光（戻り光）を透過するようになっている。
【００４３】
この撮影ユニット３０には、ビームスプリッタ３３により反射された励起光および蛍光のうち、励起光を遮断して蛍光（例えば、近赤外蛍光）のみを透過させる励起光カットフィルタ３５と、励起光カットフィルタ３５を透過した蛍光を集光する集光レンズ３７Ａおよびビームスプリッタ３３を透過した白色光を集光する集光レンズ３７Ｂと、集光レンズ３７Ａにより集光された蛍光を撮影する蛍光撮影部３８および集光レンズ３７Ｂにより集光された白色光を撮影する白色光撮影部３９とを備えている。
【００４４】
励起光カットフィルタ３５は、例えば、波長帯域が７６５〜８５０ｎｍの蛍光のみを透過させるようになっている。蛍光撮影部３８は、例えば、蛍光用の高感度モノクロＣＣＤである。この蛍光撮影部３８は、蛍光を撮影することにより蛍光画像情報を取得するようになっている。白色光撮影部３９は、例えば、白色光用のカラーＣＣＤであり、モザイクフィルタ（図示略）を備えている。この白色光撮影部３９は、白色光を撮影することにより白色光画像情報を取得するようになっている。
【００４５】
画像処理部４０は、白色光撮影部３９により取得された白色光画像情報から白色光画像（参照光画像）を生成する参照画像生成部４１と、蛍光撮影部３８により取得された蛍光画像情報から蛍光画像を生成する蛍光画像生成部４２と、これら参照画像生成部４１および蛍光画像生成部４２により生成された参照光画像および蛍光画像を規格化して、規格化参照光画像および規格化蛍光画像を生成する画像規格化部４４とを備えている。
【００４６】
また、画像処理部４０は、画像規格化部４４により生成された規格化参照光画像および規格化蛍光画像から補正用参照光画像および補正用蛍光画像を生成する前処理部４６と、該前処理部４６により生成された補正用蛍光画像を補正用参照光画像で除算することにより除算画像（以降では、「補正蛍光画像」ともいう。）を生成する除算画像生成部４３と、除算画像生成部４３により生成された除算画像における階調値の閾値を設定する閾値設定部４５とを備えている。
【００４７】
参照画像生成部４１は、白色光撮影部３９により取得された白色光画像情報から２次元的な白色光画像を生成するようになっている。
蛍光画像生成部４２は、蛍光撮影部３８により取得された蛍光画像情報から２次元的な蛍光画像を生成するようになっている。
【００４８】
ここで、蛍光画像としては、たとえば蛍光色素Ｃｙ７からの蛍光画像とすればよい。特に、腫瘍特異的な蛍光薬剤、例えば癌特異的分子ＣＥＡに対する抗体（Ａｎｔｉ−ＣＥＡ抗体）とＣｙ７とを結合させた蛍光薬剤を予め観察対象に投与しておけば、腫瘍特異的な蛍光画像を得ることができる。また、参照光画像としては、例えば照明光が観察対象の表面で反射した戻り光および観察対象の内部での散乱による戻り光に基づく画像を用いればよい。
【００４９】
画像規格化部４４は、数１に示される関係式を用いて参照光画像および蛍光画像を規格化するようになっている。
【００５０】
【数１】
0005816486.tif 000002
【００５１】
すなわち、参照光画像および蛍光画像を取得する際に、白色光撮影部３９および蛍光撮影部３８により１６ｂｉｔの階調で取得するものとすると、各画素の階調値がこの範囲内に入るように露光時間とゲインが調節されるので、観察条件を一定にするために規格化が行われる。数１において所定ゲインは、例えば、白色光観察時には１、蛍光観察時には１００と設定されるゲインであるとする。
【００５２】
前処理部４６は、標準試料に対する蛍光強度の距離特性と、同じ標準試料に対する戻り光強度の距離特性とを相互に正比例させる係数を戻り光強度に対応づけて記憶する記憶部（図示略）を備えていて、入力された参照光画像の画素毎に、各画素の階調値に対応する係数を記憶部から読み出して乗算することにより、補正用参照光画像を生成するようになっている。この場合、前処理部４６においては、入力された蛍光画像をそのまま補正用蛍光画像として出力するようになっている。
【００５３】
ここで、観察距離を、例えば１０〜２００ｍｍに変化させ、標準試料としてファントムまたは豚等の臓器を観察したときの参照光画像および蛍光画像の階調値に基づいて算出された係数の例を図２および図３に示す。
すなわち、取得された参照光画像における、一の画素の階調値（戻り光強度）が１６．６のときは、係数として２．０２４をこの画素の階調値に乗算する。これを全ての画素について繰り返すことにより、補正用参照光画像が得られる。いずれかの画素の階調値が、図３に示される２つの階調値の間の値である場合には、図２の階調値に対応する２つの係数を線形補間した係数を乗算するようになっている。
【００５４】
除算画像生成部４３は、上記のように前処理部４６により生成された補正用蛍光画像を補正用参照光画像で除算することにより除算画像を生成するようになっている。これにより、蛍光画像における観察距離等に依存する蛍光強度変化を軽減した除算画像が生成される。また、除算画像生成部４３は、白色光画像および生成した除算画像（補正蛍光画像）をモニタ５０に出力するようになっている。
【００５５】
閾値設定部４５は、以下の計算式（１）に示されるように、除算画像における各画素の階調値の平均値（画像全体の平均階調値）ｍに所定の係数ａを乗算して得られる値を閾値として設定するようになっている。
【００５６】
【数２】
0005816486.tif 000003
【００５７】
モニタ５０は、除算画像生成部４３から送られてくる白色光画像および除算画像（補正蛍光画像）を同時に表示することができるようになっている。また、モニタ５０は、除算画像における階調値を調整する画像調整部５１を備えている。
【００５８】
画像調整部５１は、閾値設定部４５により設定された閾値Ｓより大きい階調値を有する画素の領域と小さい階調値を有する画素の領域との除算画像におけるコントラストを拡大するように、閾値Ｓ未満の階調値を有する画素を階調値０に置き換えて表示するようになっている。
【００５９】
このように構成された本実施形態に係る蛍光観察装置１００の作用について説明する。
本実施形態に係る蛍光観察装置１００を用いて、生体の体腔内の観察対象部位Ｘを観察するには、癌細胞等の病変部に特異的に集積する蛍光薬剤を観察対象部位Ｘに付着または吸収させる。この状態で、観察対象部位Ｘに励起光を照射することにより、蛍光薬剤が励起され蛍光が発せられる。この蛍光薬剤は、実際には病変部だけでなく正常部にも若干集積してしまうため、病変部以外の部分（バックグラウンド）からも微弱な蛍光が発せられることになる。
【００６０】
本実施形態においては、まず、体腔内にスコープ２を挿入して先端２ａを観察対象部位Ｘに対向させる。この状態で、光源１０を作動させることによりキセノンランプ１１から発せられて励起光フィルタ１３によって切り出される励起光を含む白色光が、カップリングレンズ１５により集光され、ライトガイドファイバ２１によりスコープ２の先端２ａへと導光される。そして、この白色光は拡散レンズ２３により拡散され、観察対象部位Ｘに照射される。
【００６１】
観察対象部位Ｘにおいては、内部に含まれている蛍光物質が励起光によって励起されることにより蛍光が発せられるとともに、表面において白色光および励起光の一部が反射させられる。これら蛍光、白色光および励起光は、対物レンズ３１により集光され、ビームスプリッタ３３により励起波長以上の光、すなわち、励起光および蛍光が反射され、励起波長より波長が短い白色光は透過させられる。
【００６２】
ビームスプリッタ３３により反射された励起光および蛍光は、励起光カットフィルタ３５により励起光が除去され、蛍光のみが集光レンズ３７Ａにより集光されて蛍光撮影部３８により撮影される。これにより、蛍光撮影部３８において観察対象部位Ｘの蛍光画像情報が取得される。ビームスプリッタ３３を透過した白色光は、集光レンズ３７Ｂによって集光され、白色光撮影部３９により撮影される。これにより、白色光撮影部３９において観察対象部位Ｘの白色光画像情報が取得される。蛍光画像情報と白色光画像情報は、どちらを先に取得してもよいし同時に取得してもよい。
【００６３】
白色光撮影部３９により取得された白色光画像情報は、画像処理部４０の参照画像生成部４１に入力される。参照画像生成部４１においては、白色光画像情報に基づき２次元的な白色光画像が生成される。
蛍光撮影部３８により取得された蛍光画像情報は、画像処理部４０の蛍光画像生成部４２に入力される。蛍光画像生成部４２においては、蛍光画像情報に基づき２次元的な蛍光画像が生成される。
【００６４】
参照画像生成部４１および蛍光画像生成部４２により生成された蛍光画像および白色光画像は、画像規格化部４４に入力されて、数１により規格化される。このように規格化された規格化参照光画像および規格化蛍光画像は、前処理部４６において、補正用参照光画像および補正用蛍光画像に変換される。
【００６５】
本実施形態においては、規格化参照光画像に係数が乗算されて補正用参照光画像となり、規格化蛍光画像はそのまま補正用蛍光画像となる。
そして、除算画像生成部４３において、補正用蛍光画像が補正用参照光画像によって除算されることにより、除算画像が取得される。
【００６６】
前処理部４６において規格化参照光画像に乗算される係数は、標準試料を用いて取得された規格化蛍光画像と規格化参照光画像との比であり、標準試料における規格化蛍光画像の蛍光強度の距離特性を、同じく標準試料における規格化参照光画像の戻り光強度の距離特性に一致させるように選定されている。したがって、除算画像生成部４３において、この係数を、観察対象部位Ｘの規格化参照光画像に乗算することにより得られた補正用参照光画像によって、補正用蛍光画像を除算することにより、観察距離の依存性を十分に低減した除算画像を得ることができる。
【００６７】
そして、このように生成された除算画像（補正蛍光画像）は、閾値設定部４５に送られるとともに、図４に示すように、白色光画像と一緒にモニタ５０に送られて表示される。
この除算画像は、図５に示されるように、主にバックグラウンドからの微弱な蛍光が表示される領域と病変部からの強い蛍光が表示される領域とにより構成されている。同図において、横軸は階調値を示し、縦軸は除算画像全体に占める頻度を示している。なお、図５に示すようなヒストグラムをモニタ５０に表示することとしてもよい。
【００６８】
ここで、蛍光と反射光とでは観察距離に対する依存性が異なるため、除算画像において観察距離の影響を完全に補正することができず一定の誤差が生じてしまう場合がある。
以下、観察対象部位Ｘの定量的な情報を取得するために行う閾値設定部４５による閾値の設定および画像調整部５１による除算画像の調整について、図６に示すフローチャートを参照して説明する。
【００６９】
閾値設定部４５においては、あらかじめ、上述した計算式（１）の係数ａ（例えば、ａ＝１．５）が決定される（ステップＳＡ１）。続いて、閾値設定部４５は、除算画像生成部４３から送られてきた除算画像を取得すると（ステップＳＡ２）、画像全体の平均階調値ｍを算出する（ステップＳＡ３）。
【００７０】
画像全体の平均階調値ｍは、例えば、以下の計算式（２）により算出される。
【００７１】
【数３】
0005816486.tif 000004
【００７２】
ここで、除算画像の全画素数を１００万画素とした場合、そのうちの９５万画素がバックグランドからの蛍光を表示し（バックグラウンドの総画素数ｎ１＝９５０，０００）、５万画素が病変部からの蛍光を表示しているものと仮定する（病変部の総画素数ｎ２＝５０，０００）。蛍光薬剤のコントラストを１：２とした場合、バックグラウンドの平均階調値ｍ１＝１０００、病変部の平均階調値ｍ２＝２０００と仮定する。
このように仮定した場合、計算式（２）により、画像全体の平均階調値ｍ＝１０５０が算出される。
【００７３】
次に、閾値設定部４５において、設定された係数ａと算出された画像全体の平均階調値ｍを用いて、計算式（１）により、閾値Ｓ＝１５７５が算出される。これにより、除算画像における階調値の閾値Ｓが設定され（ステップＳＡ４）、画像調整部５１へ送られる。
【００７４】
画像調整部５１においては、モニタ５０に表示されている除算画像の全画素のうち、閾値Ｓ＝１５７５未満の階調値を有する画素が階調値０に置き換えられる（ステップＳＡ５）。この場合、バックグラウンドを表示する画素の階調値および病変部を表示する画素の階調値の分布が正規分布に従い、標準偏差が、バックグラウンドを表示する画素の階調値および病変部を表示する画素の階調値の平均値の平方根の１０倍と仮定すると、バックグラウンドの表示の９６．５％が消去され、病変部の表示の８２．９％が残されることになる。
【００７５】
これにより、図７に示すように、病変部を表示する領域とバックグラウンドを表示する領域とのコントラストが拡大した新たな除算画像（補正蛍光画像）がモニタ５０に表示される（ステップＳＡ６）。新たな除算画像は、図８に示されるように、閾値Ｓより階調値が高い主に病変部からの蛍光が表示される領域により構成されている。
【００７６】
次に、観察距離が変動し、誤差要因により次フレームの除算画像における各画素の階調値の平均値が図９に示すように高くなる方向に変動するとする。ここで、バックグラウンドを表示する画素の階調値と病変部を表示する画素の階調値の平均値がそれぞれ５０％増加するように変動する、すなわち、ｍ１＝１５００、ｍ２＝３０００となると仮定する。
【００７７】
この場合、仮に、階調値の変動後も現在の閾値を変更せずに閾値Ｓ＝１５７５のままとすると、閾値Ｓを超える階調値を有する領域の増加により、図１０に示すように、病変部の表示の９９．５％が残されるもののバックグラウンドの表示の５７．７％しか消去されず、除算画像の鮮明度が低下することになる。
【００７８】
本実施形態においては、閾値設定部４５により画像全体の平均階調値ｍに基づいて閾値Ｓを設定するため、ステップＳＡ２〜ステップＳＡ６が繰り返される。
【００７９】
閾値設定部４５により、次フレームの除算画像が取得されると（ステップＳＡ２）、計算式（２）に基づき次フレームの画像全体の平均階調値ｍが算出され（ステップＳＡ３）、図１１に示されるように、前フレーム時の閾値Ｓ＝１５７５より大きい新たな閾値Ｓ＝２３６３が設定される（ステップＳＡ４）。
【００８０】
これにより、画像調整部５１において、除算画像における階調値が調整され（ステップＳＡ５）、図１２に示されるように、バックグラウンドの表示の９８．７％が消去され、病変部の表示の８７．８％が残された新たな除算画像が表示される（ステップＳＡ６）。
このように、ステップＳＡ２〜ステップＳＡ６が繰り返され、次フレームの除算画像が生成されるとその画像全体の平均階調値ｍに基づき閾値Ｓが更新されて、階調値が調整された新たな除算画像がモニタ５０に表示される。
【００８１】
以上説明したように、本実施形態に係る蛍光観察装置１００によれば、光源１０から発せられた励起光が観察対象部位Ｘに照射されると、蛍光画像生成部４２により観察対象部位Ｘにおいて発生した蛍光の蛍光画像が取得され、光源１０から励起光とともに発せられた参照光が観察対象部位Ｘに照射されると、参照画像生成部４１によりその戻り光の参照光画像が取得される。そして、取得された蛍光画像は、除算画像生成部４３において参照光画像を用いて補正される。
【００８２】
この場合に、除算画像生成部４３における補正に先立って、前処理部４６において蛍光画像および参照光画像の少なくとも一方に、標準試料に対して予め取得された蛍光強度の距離特性と戻り光強度の距離特性とを相互に正比例関係とする係数が乗算されることにより補正用蛍光画像および補正用参照光画像が生成される。
【００８３】
すなわち、蛍光画像を構成する各画素の蛍光強度および参照光画像を構成する各画素の戻り光強度は、照明部から当画素に対応する観察対象部位Ｘ上の位置までの距離に依存して変化し、それぞれ距離の指数関数に近似させることができる。蛍光強度の距離特性における指数は、戻り光強度の距離特性における指数とは異なるので、蛍光画像を参照光画像でそのまま除算しても距離の依存性を除去することはできない。従って、蛍光強度および戻り光強度をそれぞれ距離特性における指数の逆数で予め累乗しておくことで、蛍光強度の距離特性と戻り光強度の距離特性とを相互に正比例関係とすることができ、除算したときに距離の依存性を除去することができる。
【００８４】
そこで、標準試料について予め取得した蛍光強度の距離特性と戻り光強度の距離特性とから、蛍光画像および参照光画像の少なくとも一方に乗算することにより、上述した指数の逆数を累乗したのと同様の効果を得られる係数を予め求めておく。そして、求められた係数を蛍光画像および参照光画像の少なくとも一方に乗算して、補正用蛍光画像と補正用参照光画像を生成し、除算画像生成部４３において、補正用蛍光画像を補正用参照光画像で除算することにより、距離の依存性を十分に低減するように補正された除算画像を得ることができる。
【００８５】
また、画像調整部５１により所定の閾値を基準として病変部とバックグラウンドとのコントラストが拡大するように除算画像の階調値を調整することで、バックグラウンドから発生される微弱な蛍光の影響を抑制した鮮明な除算画像を取得することができる。
【００８６】
また、本実施形態においては、被写体からの反射光および散乱戻り光により生成される白色光画像を参照光画像として用いているため、蛍光をほとんど生じない領域においても、参照光画像の階調値がゼロまたはゼロに近い値になることは無く、正確な除算画像を生成することができる。
【００８７】
また、閾値設定部４５により除算画像の平均階調値に基づいて閾値を設定することで、除算画像における階調値の変動に追従して閾値を更新し、取得する除算画像ごとの鮮明度を維持することができる。これにより、観察対象部位Ｘの定量的な情報を取得することができる。
【００８８】
なお、本実施形態においては、係数ａ＝１．５を例示して説明したが、観察状況に応じて係数ａの値を変更すればよい。
また、本実施形態においては、標準試料に対する戻り光強度の距離特性を蛍光強度の距離特性に一致させる係数を採用したが、これに限定されるものではなく、両特性を正比例させる係数でもよい。
【００８９】
また、本実施形態においては、観察距離の依存性を低減して定量性の高い蛍光観察を行うための構成を採用したが、これに代えて、観察角度の依存性を低減する構成を採用してもよい。具体的には、前処理部４６において、標準試料を用いて観察角度を変化させつつ取得された規格化蛍光画像と規格化参照光画像との比であり、標準試料における規格化蛍光画像の蛍光強度の角度特性を、同じく標準試料における規格化参照光画像の戻り光強度の角度特性に正比例させるように選定された係数を、観察対象部位Ｘの規格化参照光画像に乗算する。そして、除算画像生成部４３においては、得られた補正用参照光画像によって、補正用蛍光画像を除算することにより、観察角度の依存性を十分に低減した補正された除算画像を得ることができ、定量性の高い蛍光観察を行うことができる。
【００９０】
［第１の変形例］
本実施形態は以下のように変形することができる。
例えば、本実施形態においては、除算画像全体の平均階調値ｍに基づいて閾値を設定することとしたが、第１の変形例として、閾値設定部４５が、以下の計算式（３）に示されるように、画像全体の平均階調値ｍと標準偏差との和に基づいて閾値Ｓを設定することとしてもよい。
【００９１】
【数４】
0005816486.tif 000005
σ：除算画像における各画素の階調値の標準偏差
【００９２】
画像全体の標準偏差σは、以下の計算式（４）により算出することとすればよい。
【００９３】
【数５】
0005816486.tif 000006
【００９４】
ここで、バックグラウンドの標準偏差σ１および病変部の標準偏差σ２は、理想的にはそれぞれ平均階調値の平方根に近い値となるが、照明の配光分布の揺らぎや観察対象部位Ｘの表面における凹凸等の影響により、揺らぎが大きくなる。そこで、標準偏差σ１，σ２は理想的な値（平均階調値の平方根）の１０倍あると仮定し、バックグラウンドの標準偏差σ１＝３１６、病変部の標準偏差σ２＝４４７とする。
【００９５】
このように仮定した場合、図１３のフローチャートに示されるように、閾値設定部４５において除算画像が取得されると（ステップＳＢ１）、計算式（２），（４）により、その画像全体の平均階調値ｍ＝１０５０、その標準偏差σ＝３９１が算出される（ステップＳＢ２）。閾値設定部４５において、算出された画像全体の平均階調値ｍと標準偏差σを用いて、計算式（３）により閾値Ｓ＝１４４１が算出されて設定される（ステップＳＢ３）。
【００９６】
画像調整部５１においては、除算画像の全画素のうち閾値Ｓ＝１４４１未満の階調値を有する画素が階調値０に置き換えられる（ステップＳＢ４）。これにより、バックグラウンドの表示の９１．８％が消去され、病変部の表示の８９．５％が残された新たな除算画像がモニタ５０に表示される（ステップＳＢ５）。
【００９７】
次に、観察距離が変動し、誤差要因により次フレームの除算画像における各画素の階調値の平均値が高くなる方向に変動するとした場合、仮に、閾値を変更せずに閾値Ｓ＝１４４１のままとすると、階調値の変動後は病変部の表示の９８．８％が残されるもののバックグラウンドの表示の６５．２％しか消去されず、除算画像の鮮明度が低下する。
【００９８】
本変形例においては、閾値設定部４５により画像全体の平均階調値ｍと標準偏差σとの和に基づいて閾値Ｓを設定するため、ステップＳＢ１〜ステップＳＢ５が繰り返される。
例えば、各画素の階調値の平均値が３０％変動したとすると、バックグラウンドの平均階調値ｍ１＝１３００、その標準偏差σ１＝３６１、病変部の平均階調値ｍ２＝２６００、その標準偏差σ２＝５１０と仮定することができる。
【００９９】
閾値設定部４５により、次フレームの除算画像が取得されると（ステップＳＢ１）、計算式（２），（４）に基づき算出される次フレームの画像全体の平均階調値ｍ＝１３６５と標準偏差σ＝４６６により（ステップＳＢ２）、計算式（３）に基づいて新たな閾値Ｓ＝１８３１が設定される（ステップＳＢ３）。これにより、画像調整部５１により除算画像の階調値が調整され（ステップＳＢ４）、バックグラウンドの表示の９２．９％が消去されて、病変部の表示の９３．４％が残された新たな除算画像が表示される（ステップＳＢ５）。
【０１００】
以上説明したように、本変形例に係る蛍光観察装置によれば、画像全体の平均階調値ｍと標準偏差σとの和に基づいて閾値Ｓを設定することで、除算画像に観察距離に対する誤差要因が残存している場合でも、鮮明な除算画像を常時取得することができる。また、除算画像における画素ごとの階調値にばらつきがある場合であっても、平均階調値だけに基づいて閾値を設定する場合と比較してより精度が高い閾値を設定することができる。
【０１０１】
ここで、本変形例の比較例について以下に説明する。
例えば、各画素の階調値の平均値が３０％変動し、バックグラウンドの平均階調値ｍ１＝７００、その標準偏差σ１＝２６５、病変部の平均階調値ｍ２＝１４００、その標準偏差σ２＝３７４になったと仮定する。この場合、比較例として、画像全体の平均階調値ｍだけに基づいて閾値Ｓを算出すると、閾値Ｓ＝１１０３となり、バックグラウンドの表示の９３％が消去されるが、病変部の表示の７８％が残されるに留まる。
【０１０２】
一方、本変形例のように画像全体の平均階調値ｍと標準偏差σとの和に基づいて閾値Ｓを算出すると、閾値Ｓ＝１０４６となり、バックグラウンドの表示の９０％が消去され、病変部の表示の８３％が残される。したがって、病変部の表示をより多く残存させるような閾値を設定することができ、特異度よりも感度を優先する際に特に有効となる。
なお、平均値ｍと標準偏差σにそれぞれ任意の係数ａ，ｂを乗じて、以下の式に示すように閾値を設定しても良い。
Ｓ＝ａｍ＋ｂσ
このようにすることで、病変を見落とさないこと（感度が高いこと）を優先するときは係数ａ，ｂの値を小さく、病変以外の部分を表示しないこと（特異度が高いこと）を優先するときは係数ａ，ｂの値を大きくするなど、観察の目的に応じて、より最適な閾値Ｓを算出することができる。
【０１０３】
［第２の変形例］
本実施形態の第２の変形例として、図１４に示すように、白色光画像に除算画像との合成画像を生成する画像合成部４７を設け、生成された合成画像をモニタ５０に表示してもよい。
上記構成を有する本変形例に係る蛍光観察装置１０１によれば、白色光画像と除算画像の位置関係をより明瞭に術者に提供することができる。閾値以下の領域を階調値０として表示しているため、両画像が重畳された合成画像においても、図１５に示すように、病変部以外の領域において、白色光画像の表示が除算画像によって阻害されずに済む。
【０１０４】
［第３の変形例］
本実施形態の第３の変形例について以下に説明する。
前述の実施形態においては、白色光画像を参照光画像として用いたが、本変形例に係る蛍光観察装置１０２では、図１６に示すように、たとえば、白色光画像を、ＲＧＢの３チャネルからなるＣＣＤもしくはＣＭＯＳ（白色光画像取得部）および白色光画像生成部４８により生成し、除算画像（補正蛍光画像）と合成を行っている。
【０１０５】
この際、Ｒチャネルのみを参照光画像として用いるなどの方法をとってもよい。
もしくは、白色光とは別の波長帯域、たとえば赤や近赤外の光を別途参照光として照射し、白色光画像と別に参照光画像を取得するという方法でもよい。いずれの場合においても、白色光画像と除算画像を同時に表示するので、白色光画像による観察を阻害することなく、さらに除算画像の情報を術者に提供することができる。
【０１０６】
［第４の変形例］
本実施形態の第４の変形例について以下に説明する。
本実施形態の第４の変形例として、図１７に示されるように、挿入部（着脱部品）２が光源１０に着脱可能に設けられていてもよい。この場合には、挿入部２が着脱されて他の挿入部２に交換されることによって、対物レンズ３１を始め、挿入部２に含まれる種々の光学系が変更されるので、対物レンズ３１の開口数（ＮＡ）や瞳径等の変化、あるいは、検出する蛍光の波長、観察対象部位（胃組織や大腸組織など）等の変化によって、係数が変化する。
【０１０７】
したがって、本変形例に係る蛍光観察装置１０３は、挿入部２に識別情報を記憶するＩＣチップ６０を備え、挿入部２が取り付けられる光源１０側にＩＣチップ６０内の識別情報を読み取る識別情報読取部６１を備えている。また、画像処理部４０内に、ＩＣチップ６０内の識別情報と各挿入部２に適した係数とを対応づけて記憶する記憶部６２を備えている。
【０１０８】
そして、前処理部４６が、記憶部６２から出力される挿入部２の識別情報に対応する係数を受け取って、上記演算を行うことにすればよい。
このようにすることで、光源１０に対して挿入部２が交換されても、該挿入部２に最適な係数が設定され、定量性の高い除算画像を常に取得することができる。
【０１０９】
なお、規格化参照光画像に乗算する係数に代えて規格化蛍光画像に乗算する係数を記憶していてもよいし、規格化参照光画像および規格化蛍光画像にそれぞれ乗算する係数を記憶していてもよい。
【０１１０】
また、記憶部６２には、距離・角度依存補正の係数だけでなく、閾値の設定を
Ｓ＝ａｍ＋ｂσ
とし、閾値設定の係数ａ，ｂを記憶しておくこととしてもよい。
また、本変形例においては、観察距離の依存性を低減して定量性の高い蛍光観察を行うための構成を採用したが、これに代えて、観察角度の依存性を低減する構成を採用してもよい。
【０１１１】
［第２の実施形態］
次に、本発明の第２の実施形態に係る蛍光観察システム７０について、図面を参照して以下に説明する。
なお、本実施形態の説明において、上述した第１の実施形態に係る蛍光観察装置１００と構成を共通とする箇所には同一符号を付して説明を省略する。
【０１１２】
本実施形態に係る蛍光観察システム７０は、図１８に示されるように、蛍光観察装置１００と、該蛍光観察装置１００を装着する較正装置７１とを備えている。
本実施形態においては、蛍光観察装置１００は、係数を算出する係数決定部７２を備えている。
【０１１３】
較正装置７１は、図１８および図１９に示されるように、挿入部２を固定するホルダ７３と、該ホルダ７３に固定された挿入部２の先端面２ａに対して観察距離をあけて対向させられる標準試料７４と、挿入部２の先端面２ａと標準試料７４との間の観察距離を変更する直動ステージ７５と、対物レンズ３１の光軸に対する標準試料７４の表面の角度（観察角度）を変更するチルトステージ７６と、これらのステージ７５，７６を制御する制御部７７とを備えている。
【０１１４】
制御部７７は、ステージ７５，７６を駆動して、観察距離または観察角度を変化させるとともに、予め設定されたタイミングでトリガ信号Ｓを出力するようになっている。
また、係数決定部７２は、画像規格化部４４から送られてくる規格化蛍光画像および規格化参照光画像を受信するとともに、制御部７７からのトリガ信号Ｓの受信時における規格化蛍光画像の輝度値および規格化参照光画像の輝度値を保持し、規格化蛍光画像の輝度値を規格化参照光画像の輝度値で除算することにより係数を算出し、算出された係数を規格化参照光画像の輝度値と対応づけて記憶するようになっている。
【０１１５】
観察距離を変化させたときの係数を取得する場合には、制御部７７は、まず、図１９に示されるように、標準試料７４の表面に対して挿入部２の先端面２ａが観察開始の距離となるように直動ステージ７５を駆動させる。次いで、ユニット７から照明光および励起光を標準試料７４に対して照射し、戻り光および蛍光が撮影される状態として、制御部７７は、予め定められた距離ずつステージ７５を移動させ、その都度、トリガ信号Ｓを出力する。これにより、係数決定部７２には、異なる複数の観察距離において取得された複数の係数が規格化参照光画像の輝度値と対応づけて記憶される。
【０１１６】
一方、観察角度を変化させたときの係数を取得する場合には、制御部７７は、まず、図１９に示されるように、標準試料７４の表面に対して挿入部２の先端面２ａが観察開始の距離および角度となるように直動ステージ７５およびチルトステージ７６を駆動させる。次いで、ユニット７から照明光および励起光を標準試料７４に対して照射し、戻り光および蛍光が撮影される状態として、制御部７７は、予め定められた距離ずつチルトステージ７６を移動させ、その都度、トリガ信号Ｓを出力する。これにより、係数決定部７２には、異なる複数の観察角度において取得された複数の係数が規格化参照光画像の輝度値と対応づけて記憶される。
観察距離を変化させたときの係数と、観察角度を変化させたときの係数とは、観察条件に応じて適宜選択することにすればよい。
【０１１７】
また、係数決定部７２は、前処理部７６から規格化参照光画像の輝度値が入力されると、該輝度値に対応する係数を算出して、前処理部４６に対して出力するようになっている。すなわち、係数決定部７２には、間隔をあけた複数の規格化参照光画像の輝度値に対応づけた複数の係数が記憶されているので、その間の輝度値が入力されたときには、入力された輝度値を挟む輝度値間で係数を補間して新たな係数を算出し、前処理部４６に出力するようになっている。
【０１１８】
このように、本実施形態に係る蛍光観察システム７０によれば、観察対象や観察条件、例えば、各光学系や観察に使用する蛍光波長などが変化しても、その都度、変化に応じた係数を設定することができ、種々の観察対象や観察条件においても定量性の高い蛍光画像により観察することができる。
【０１１９】
例えば、蛍光観察装置１００として内視鏡に適用する場合には、硬性鏡や軟性鏡のような種類の違い、あるいは、上部消化器内視鏡や下部消化器内視鏡のような観察部位の違いなどがあったとしても、それぞれに対応した最適な係数を設定することができる。また、同一種類の蛍光観察装置１００であったとしても、個体差に拘わらず、個々の装置に対して係数を設定することができる。
【０１２０】
なお、本実施形態における標準試料７４としては、観察しようとする生体と同様の散乱や吸収特性を有するファントムを用いてもよいし、ヒトや動物（ブタやマウス等）の切除組織を用いてもよい。
【０１２１】
以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。例えば、本発明を上記の各実施形態および各変形例に適用したものに限定されることなく、これらの実施形態および変形例を適宜組み合わせた実施形態に適用してもよく、特に限定されるものではない。
【０１２２】
また、上記実施形態および変形例においては、画像調整部５１が、バックグラウンドの蛍光の表示を消去し、病変部の表示を残すこととしたが、病変部からの蛍光とバックグラウンドからの蛍光とのコントラストを拡大させればよく、例えば、バックグラウンドの表示を消去しない程度にその画素の階調値を下げたり、病変部を表示する画素の階調値を高くしたりすることとしてもよい。
【符号の説明】
【０１２３】
１０  光源
４１  参照画像生成部
４２  蛍光画像生成部
４３  除算画像生成部
４４  画像規格化部
４５  閾値設定部
４６  前処理部
４７  画像合成部
４８  白色光画像生成部
５０  モニタ（表示部）
５１  画像調整部
６０  ＩＣチップ
６１  識別情報読取部（識別情報読取手段）
６２  記憶部
７０  蛍光観察システム
７１  較正装置
７２  係数決定部
７４  標準試料
７５  直動ステージ（観察距離設定機構）
７６  チルトステージ（観察角度設定機構）
１００，１０１，１０２，１０３  蛍光観察装置
【図１】
0005816486.tif 000007
【図２】
0005816486.tif 000008
【図３】
0005816486.tif 000009
【図４】
0005816486.tif 000010
【図５】
0005816486.tif 000011
【図６】
0005816486.tif 000012
【図７】
0005816486.tif 000013
【図８】
0005816486.tif 000014
【図９】
0005816486.tif 000015
【図１０】
0005816486.tif 000016
【図１１】
0005816486.tif 000017
【図１２】
0005816486.tif 000018
【図１３】
0005816486.tif 000019
【図１４】
0005816486.tif 000020
【図１５】
0005816486.tif 000021
【図１６】
0005816486.tif 000022
【図１７】
0005816486.tif 000023
【図１８】
0005816486.tif 000024
【図１９】
0005816486.tif 000025