(57)【特許請求の範囲】
【請求項１】
患者の体腔内の被観察領域に照射光を照射する照射部と、
前記被観察領域からの戻り光を受光して前記被観察領域の画像を撮影する撮影部と、
前記撮影した画像を表示部に順次表示させる表示制御部と、
前記照射光又は前記戻り光の波長パターンを変更する波長パターン変更部と、
画像の取得指示を受け付ける受付部と、
観察用の波長パターンの画像を一定のフレームレートで連続して撮影させる撮影制御部であって、前記取得指示を受け付けると、前記観察用の波長パターン及び前記観察用の波長パターンと異なる波長パターンを含む複数の波長パターンの画像を順次撮影させる撮影制御部と、
前記順次撮影された複数の波長パターンの画像を記憶部に記憶させる記憶制御部と、
を備え、
前記表示制御部は、前記一定のフレームレートで連続して撮影された前記観察用の波長パターンの画像を前記表示部に表示させ、前記取得指示を受け付けると、前記順次撮影された複数の波長パターンの画像のうち、前記観察用の波長パターンの画像を前記表示部に表示させ、前記観察用の波長パターンと異なる波長パターンの画像を非表示とする内視鏡画像取得システム。
【請求項２】
前記表示制御部は、前記観察用の波長パターンと異なる波長パターンの画像の表示に代えて、すでに撮影した前記観察用の波長パターンの画像のうち最新の画像又は最新の画像よりも一定数以前に撮影した画像を表示する請求項１に記載の内視鏡画像取得システム。
【請求項３】
撮影した前記観察用の波長パターンの画像のうち最新の画像又は最新の画像よりも一定数以前に撮影した画像を含む複数の画像から補間画像を作成する補間画像作成部を備え、
前記表示制御部は、前記観察用の波長パターンと異なる波長パターンの画像の表示に代えて、前記補間画像を表示する請求項１又は２に記載の内視鏡画像取得システム。
【請求項４】
前記照射部は、複数の光源を備え、
前記波長パターン変更部は、前記複数の光源のうち点灯させる光源を選択して前記照射光の波長パターンを変更する請求項１から３のいずれか１項に記載の内視鏡画像取得システム。
【請求項５】
前記照射部は、複数の光源を備え、
前記波長パターン変更部は、前記複数の光源の光量の比率を変更して前記照射光の波長パターンを変更する請求項１から３のいずれか１項に記載の内視鏡画像取得システム。
【請求項６】
前記撮影部は、透過する光の波長帯域を制限するフィルタを備え、
前記波長パターン変更部は、前記フィルタを制御して前記戻り光の波長パターンを変更する請求項１から３のいずれか１項に記載の内視鏡画像取得システム。
【請求項７】
前記記憶制御部は、前記観察用の波長パターンの画像を前記記憶部の第１の記憶領域に記憶させ、前記観察用の波長パターンと異なる波長パターンの画像を前記記憶部の前記第１の記憶領域とは異なる第２の記憶領域に記憶させる請求項１から６のいずれか１項に記載の内視鏡画像取得システム。
【請求項８】
前記記憶制御部は、前記画像と前記画像を撮影した際の波長パターンの情報とを関連付けて前記記憶部に記憶させる請求項１から７のいずれか１項に記載の内視鏡画像取得システム。
【請求項９】
前記観察用の波長パターンをユーザが選択する波長パターン選択部を備え、
前記撮影制御部は、前記選択された波長パターンにおいて一定のフレームレートで連続して画像を撮影させる請求項１から８のいずれか１項に記載の内視鏡画像取得システム。
【請求項１０】
前記複数の波長パターンの画像を順次撮影する際の前記複数の波長パターンの順序をユーザが選択する順序選択部を備え、
前記撮影制御部は、前記選択された順序で前記複数の波長パターンの画像を順次撮影させる請求項１から９のいずれか１項に記載の内視鏡画像取得システム。
【請求項１１】
前記複数の波長パターンの画像のうち前記記憶部に記憶させる画像をユーザが選択する記憶画像選択部を備え、
前記記憶制御部は、前記選択された画像を前記記憶部に記憶させる請求項１から１０のいずれか１項に記載の内視鏡画像取得システム。
【請求項１２】
前記複数の波長パターンの画像のうち前記記憶部に記憶させる画像を自動選択する自動選択部を備え、
前記記憶制御部は、前記自動選択した画像を前記記憶部に記憶させる請求項１から１０のいずれか１項に記載の内視鏡画像取得システム。
【請求項１３】
前記複数の波長パターンの画像を順次撮影する際に前記波長パターンの移行時に撮影した画像を判定する判定部を備え、
前記自動選択部は、前記判定の結果に基づいて自動選択する請求項１２に記載の内視鏡画像取得システム。
【請求項１４】
前記取得指示をユーザが入力する取得指示入力部を備え、
前記受付部は、前記取得指示入力部からの前記取得指示を受け付ける請求項１から１３のいずれか１項に記載の内視鏡画像取得システム。
【請求項１５】
前記撮影した画像から注目シーンを認識する認識部と、
前記認識部が前記注目シーンを認識すると前記取得指示を出力する取得指示出力部と、
を備え、
前記受付部は、前記取得指示出力部からの前記取得指示を受け付ける請求項１から１４のいずれか１項に記載の内視鏡画像取得システム。
【請求項１６】
光源制御部が、光源装置を制御して光を発生させる工程と、
撮影部が、患者の体腔内の被観察領域からの戻り光を受光して前記被観察領域の画像を撮影する撮影工程と、
表示制御部が、前記撮影した画像を表示部に順次表示させる表示制御工程と、
波長パターン変更部が、前記光又は前記戻り光の波長パターンを変更する波長パターン変更工程と、
受付部が、画像の取得指示を受け付ける受付工程と、
撮影制御部が、観察用の波長パターンの画像を一定のフレームレートで連続して撮影させる撮影制御工程であって、前記取得指示を受け付けると、前記観察用の波長パターン及び前記観察用の波長パターンと異なる波長パターンを含む複数の波長パターンの画像を順次撮影させる撮影制御工程と、
記憶制御部が、前記順次撮影された複数の波長パターンの画像を記憶部に記憶させる記憶制御工程と、
を備え、
前記表示制御工程は、前記一定のフレームレートで連続して撮影された前記観察用の波長パターンの画像を前記表示部に表示させ、前記取得指示を受け付けると、前記順次撮影された複数の波長パターンの画像のうち、前記観察用の波長パターンの画像を前記表示部に表示させ、前記観察用の波長パターンと異なる波長パターンの画像を非表示とする内視鏡画像取得システムの作動方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は内視鏡画像取得システム及び方法に係り、特に内視鏡画像を診断する学習アルゴリズムを学習させるための学習用画像を収集する技術に関する。
【背景技術】
【０００２】
内視鏡画像上の病変をコンピュータによって自動検出又は自動鑑別して診断するＡＩ（Artificial Intelligence）技術が知られている。特に、ニューラルネットワーク等の学習アルゴリズムを用いることで、精度の高い診断が可能となる。その一方、学習アルゴリズムの開発においては、学習用画像の収集が必須となる。【０００３】
また、内視鏡診断では、通常行われる白色光観察の他にＮＢＩ（Narrow Band Imaging、登録商標）、ＢＬＩ（Blue Laser Imaging、登録商標）等の特殊光観察も存在する。
【０００４】
これらの学習用画像を収集するためには、一つの病変に対して複数の光源モードで画像を撮影する必要がある。このため、医師は、病変を発見する度に光源の切替操作と撮影操作とを繰り返すことになる。その結果、医師の負担が増加し、検査時間が増加するという問題点があった。【０００５】
このような問題点に対し、特許文献１には、光源部からの帯域光の被写体における反射光を撮影する反射光撮像部と、２以上の帯域光のそれぞれにより発生する異なる帯域の複数の蛍光を撮影する蛍光撮像部と、を備え、反射光と蛍光とを同時に撮影する蛍光観察装置が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１６−２０２４１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
特許文献１に記載の蛍光観察装置は、１フレーム毎に異なる帯域の蛍光画像を表示部に表示させている。しかしながら、表示上の色が頻繁に変化すると、医師による画像観察が困難になるという問題点があった。【０００８】
本発明はこのような事情に鑑みてなされたもので、画像を収集する際に画像観察を容易にする内視鏡画像取得システム及び方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するために内視鏡画像取得システムの一の態様は、患者の体腔内の被観察領域に照射光を照射する照射部と、被観察領域からの戻り光を受光して被観察領域の画像を撮影する撮影部と、撮影した画像を表示部に順次表示させる表示制御部と、照射光又は戻り光の波長パターンを変更する波長パターン変更部と、画像の取得指示を受け付ける受付部と、観察用の波長パターンの画像を一定のフレームレートで撮影させる撮影制御部であって、取得指示を受け付けると、それぞれ異なる複数の波長パターンの画像を順次撮影させる撮影制御部と、それぞれ異なる複数の波長パターンの画像を記憶部に記憶させる記憶制御部と、を備え、表示制御部は、観察用の波長パターン以外の波長パターンの画像を非表示とする内視鏡画像取得システムである。【００１０】
本態様によれば、観察用の波長パターンの画像を一定のフレームレートで撮影させ、取得指示を受け付けると、それぞれ異なる複数の波長パターンの画像を順次撮影させる際に、それぞれ異なる複数の波長パターンの画像を記憶部に記憶させ、観察用の波長パターン以外の波長パターンの画像を非表示とするようにしたので、それぞれ異なる複数の波長パターンの画像を収集することができ、かつ画像観察を容易にすることができる。【００１１】
表示制御部は、観察用の波長パターン以外の波長パターンの画像の表示に代えて、すでに撮影した観察用の波長パターンの画像のうち最新の画像又は最新の画像よりも一定数以前に撮影した画像を表示することが好ましい。これにより、観察用の波長パターンの画像のみが表示されるので、画像観察を容易にすることができる。【００１２】
撮影した観察用の波長パターンの画像のうち最新の画像又は最新の画像よりも一定数以前に撮影した画像を含む複数の画像から補間画像を作成する補間画像作成部を備え、表示制御部は、観察用の波長パターン以外の波長パターンの画像の表示に代えて、補間画像を表示することが好ましい。これにより、観察用の波長パターンの画像のみが表示されるので、画像観察を容易にすることができる。【００１３】
照射部は、複数の光源を備え、波長パターン変更部は、複数の光源のうち点灯させる光源を選択して照射光の波長パターンを変更することが好ましい。これにより、照射光の波長パターンを適切に変更することができる。【００１４】
照射部は、複数の光源を備え、波長パターン変更部は、複数の光源の光量の比率を変更して照射光の波長パターンを変更することが好ましい。これにより、照射光の波長パターンを適切に変更することができる。【００１５】
撮影部は、透過する光の波長帯域を制限するフィルタを備え、波長パターン変更部は、フィルタを制御して戻り光の波長パターンを変更することが好ましい。これにより、戻り光の波長パターンを適切に変更することができる。【００１６】
それぞれ異なる複数の波長パターンの画像は、観察用の波長パターンの画像を含み、記憶制御部は、観察用の波長パターンの画像を記憶部の第１の記憶領域に記憶させ、観察用の波長パターン以外の波長パターンの画像を記憶部の第１の記憶領域とは異なる第２の記憶領域に記憶させることが好ましい。これにより、診断用画像と学習用画像とを記憶部のそれぞれ異なる領域に記憶させることができる。なお、記憶部のそれぞれ異なる領域に記憶させるとは、複数の記憶部を備え、診断用画像と学習用画像とをそれぞれ異なる記憶部に記憶させることも含まれる。
【００１７】
記憶制御部は、画像と画像を撮影した際の波長パターンの情報とを関連付けて記憶部に記憶させることが好ましい。これにより、波長パターンの情報を関連付けた学習用画像を収集することができる。【００１８】
観察用の波長パターンをユーザが選択する波長パターン選択部を備え、撮影制御部は、選択された波長パターンにおいて一定のフレームレートで画像を撮影させることが好ましい。これにより、所望の波長パターンによって観察することができる。【００１９】
それぞれ異なる複数の波長パターンの画像を順次撮影する際の複数の波長パターンの順序をユーザが選択する順序選択部を備え、撮影制御部は、選択された順序でそれぞれ異なる複数の波長パターンの画像を順次撮影させることが好ましい。これにより、所望の画像から順に撮影することができる。【００２０】
それぞれ異なる複数の波長パターンの画像のうち記憶部に記憶させる画像をユーザが選択する記憶画像選択部を備え、記憶制御部は、選択された画像を記憶部に記憶させることが好ましい。これにより、必要な画像のみを記憶部に記憶させることができる。【００２１】
それぞれ異なる複数の波長パターンの画像のうち記憶部に記憶させる画像を自動選択する自動選択部を備え、記憶制御部は、自動選択した画像を記憶部に記憶させることができる。これにより、所望の画像のみを記憶部に記憶させることができる。【００２２】
それぞれ異なる複数の波長パターンの画像を順次撮影する際に波長パターンの移行時に撮影した画像を判定する判定部を備え、自動選択部は、判定の結果に基づいて自動選択することが好ましい。これにより、波長パターンの移行時に撮影した画像を学習用画像から排除することができる。
【００２３】
取得指示をユーザが入力する取得指示入力部を備え、受付部は、取得指示入力部からの取得指示を受け付けることが好ましい。これにより、所望の画像を取得することができる。【００２４】
撮影した画像から注目シーンを認識する認識部と、認識部が注目シーンを認識すると取得指示を出力する取得指示出力部と、を備え、受付部は、取得指示出力部からの取得指示を受け付けることが好ましい。これにより、注目シーンの画像を自動的に取得することができる。【００２５】
上記目的を達成するために内視鏡画像取得方法の一の態様は、患者の体腔内の被観察領域に照射光を照射する照射工程と、被観察領域からの戻り光を受光して被観察領域の画像を撮影する撮影工程と、撮影した画像を表示部に順次表示させる表示制御工程と、照射光又は戻り光の波長パターンを変更する波長パターン変更工程と、画像の取得指示を受け付ける受付工程と、観察用の波長パターンの画像を一定のフレームレートで撮影させる撮影制御工程であって、取得指示を受け付けると、それぞれ異なる複数の波長パターンの画像を順次撮影させる撮影制御工程と、それぞれ異なる複数の波長パターンの画像を記憶部に記憶させる記憶制御工程と、を備え、表示制御工程は、観察用の波長パターン以外の波長パターンの画像を非表示とする内視鏡画像取得方法である。【００２６】
本態様によれば、観察用の波長パターンの画像を一定のフレームレートで撮影させ、取得指示を受け付けると、それぞれ異なる複数の波長パターンの画像を順次撮影させる際に、それぞれ異なる複数の波長パターンの画像を記憶部に記憶させ、観察用の波長パターン以外の波長パターンの画像を非表示とするようにしたので、それぞれ異なる複数の波長パターンの画像を収集することができ、かつ画像観察を容易にすることができる。
【発明の効果】
【００２７】
本発明によれば、画像を収集する際に画像観察を容易にすることができる。
【図面の簡単な説明】
【００２８】
【図１】内視鏡システムを示す外観図
【図２】内視鏡システムの機能を示すブロック図
【図３】光の強度分布を示すグラフ
【図４】学習用画像収集方法の処理を示すフローチャート
【図５】学習用画像収集方法の処理を説明するタイミングチャート
【図６】学習用画像収集方法の処理を説明するタイミングチャート
【図７】学習用画像収集方法の処理を説明するタイミングチャート
【図８】内視鏡システムの機能を示すブロック図
【図９】学習用画像収集方法の処理を示すフローチャート
【図１０】学習用画像収集方法の処理を説明するタイミングチャート
【図１１】内視鏡システムの機能を示すブロック図
【図１２】内視鏡システムの機能を示すブロック図
【図１３】学習用画像収集方法の処理を示すフローチャート
【図１４】内視鏡システムの機能を示すブロック図
【図１５】内視鏡システムの機能を示すブロック図
【発明を実施するための形態】
【００２９】
以下、添付図面に従って本発明の好ましい実施形態について詳説する。
【００３０】
＜第１の実施形態＞
図１は、第１の実施形態に係る内視鏡システム１０（内視鏡画像取得システムの一例）を示す外観図である。図１に示すように、内視鏡システム１０は、内視鏡１２、光源装置１４、プロセッサ装置１６、表示部１８、及び入力部２０を備えている。
【００３１】
内視鏡１２は、光源装置１４と光学的に接続される。また、内視鏡１２は、プロセッサ装置１６と電気的に接続される。
【００３２】
内視鏡１２は、患者の体腔内に挿入される挿入部１２Ａ、挿入部１２Ａの基端部分に設けられた操作部１２Ｂ、挿入部１２Ａの先端側に設けられた湾曲部１２Ｃ及び先端部１２Ｄを有している。
【００３３】
操作部１２Ｂには、アングルノブ１２Ｅ及びモード切替スイッチ１３Ａが設けられている。また、操作部１２Ｂには、取得指示入力部１３Ｂ（図２参照）が設けられている。
【００３４】
アングルノブ１２Ｅを操作することにより、湾曲部１２Ｃが湾曲動作する。この湾曲動作によって先端部１２Ｄが所望の方向に向けられる。
【００３５】
モード切替スイッチ１３Ａは、観察モードの切り替え操作に用いられる。内視鏡システム１０は、照射光の波長パターンがそれぞれ異なる複数の観察モードを有している。医師は、モード切替スイッチ１３Ａを操作することにより、所望の観察モードに設定することができる。内視鏡システム１０は、波長パターンと画像処理との組み合わせによって、設定された観察モードに応じた画像を生成して表示部１８に表示する。
【００３６】
内視鏡システム１０は、所望の位置の静止画を取得することができる。本実施形態では、診断レポートの作成に用いる診断用画像と、学習アルゴリズムを学習させる学習用画像を取得することができる。取得指示入力部１３Ｂ（受付部の一例）は、医師が静止画の取得指示を入力するためのインターフェースである。取得指示入力部１３Ｂは、静止画の取得指示を受け付ける。取得指示入力部１３Ｂにおいて受け付けた静止画の取得指示は、プロセッサ装置１６に入力される。
【００３７】
プロセッサ装置１６は、表示部１８及び入力部２０と電気的に接続される。表示部１８は、観察対象の画像及び観察対象の画像に関連する情報等を出力表示する表示デバイスである。入力部２０は、内視鏡システム１０の機能設定及び各種指示等の入力操作を受け付けるユーザインターフェースとして機能する。
【００３８】
図２は、内視鏡システム１０の機能を示すブロック図である。図２に示すように、光源装置１４は、第１レーザ光源２２Ａ、第２レーザ光源２２Ｂ、及び光源制御部２６を備えている。
【００３９】
第１レーザ光源２２Ａは、中心波長４４５ｎｍの青色レーザ光源である。第２レーザ光源２２Ｂは、中心波長４０５ｎｍの紫色レーザ光源である。第１レーザ光源２２Ａ及び第２レーザ光源２２Ｂとして、レーザダイオードを用いることができる。第１レーザ光源２２Ａ及び第２レーザ光源２２Ｂの発光は、光源制御部２６により個別に制御される。第１レーザ光源２２Ａと第２レーザ光源２２Ｂとの発光強度比は変更自在になっている。
【００４０】
また、図２に示すように、内視鏡１２は、光ファイバ２８Ａ、光ファイバ２８Ｂ、蛍光体３０、拡散部材３２、撮像レンズ３４、撮像素子３８、及びアナログデジタル変換部４０を備えている。
【００４１】
第１レーザ光源２２Ａ、第２レーザ光源２２Ｂ、光ファイバ２８Ａ、光ファイバ２８Ｂ、蛍光体３０、及び拡散部材３２によって、照射部が構成される。
【００４２】
第１レーザ光源２２Ａから出射されるレーザ光は、光ファイバ２８Ａによって、内視鏡１２の先端部１２Ｄに配置された蛍光体３０に照射される。蛍光体３０は、第１レーザ光源２２Ａからの青色レーザ光の一部を吸収して緑色〜黄色に励起発光する複数種の蛍光体を含んで構成される。これにより、蛍光体３０から出射する光は、第１レーザ光源２２Ａからの青色レーザ光を励起光とする緑色〜黄色の励起光Ｌ１１と、蛍光体３０に吸収されずに透過した青色のレーザ光Ｌ１２とが合わされて、白色（疑似白色）の光Ｌ１となる。
【００４３】
なお、ここで言う白色光とは、厳密に可視光の全ての波長成分を含むものに限らない。例えば、Ｒ、Ｇ、Ｂ等、特定の波長帯域の光を含むものであればよく、緑色から赤色にかけての波長成分を含む光、又は青色から緑色にかけての波長成分を含む光等も広義に含むものとする。
【００４４】
一方、第２レーザ光源２２Ｂから出射されるレーザ光は、光ファイバ２８Ｂによって、内視鏡１２の先端部１２Ｄに配置された拡散部材３２に照射される。拡散部材３２は、透光性を有する樹脂材料等を用いることができる。拡散部材３２から出射する光は、照射領域内において光量が均一化された狭帯域波長の光Ｌ２となる。
【００４５】
図３は、光Ｌ１及び光Ｌ２の強度分布を示すグラフである。光源制御部２６（波長パターン変更部の一例）は、第１レーザ光源２２Ａと第２レーザ光源２２Ｂとの光量比を変更する。これにより、光Ｌ１と光Ｌ２との光量比が変更され、光Ｌ１と光Ｌ２との合成光である照射光Ｌ０の波長パターンが変更される。したがって、それぞれ特性の異なる照射光Ｌ０を照射することができる。
【００４６】
前述のように、内視鏡システム１０は、複数の観察モードを有している。ここでは、モードＭＡ、モードＭＢ、及びモードＭＣの３つの観察モードを有するものとする。なお、観察モードの数は３つに限定されるものではない。
【００４７】
モードＭＡにおける第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光との光量比は、１：０である。この光量比から生成される照射光Ｌ０の波長パターンを、波長パターンＰＡと呼ぶ。モードＭＡでは、白色照明画像を取得することができる。
【００４８】
モードＭＢにおける第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光との光量比は、１：４である。この光量比から生成される照射光Ｌ０の波長パターンを、波長パターンＰＢと呼ぶ。モードＭＢでは、生体組織表層の血管及び構造を強調した画像を取得することができる。
【００４９】
モードＭＣにおける第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光との光量比は、７：１である。この光量比から生成される照射光Ｌ０の波長パターンを、波長パターンＰＣと呼ぶ。モードＭＣでは、中遠景までの血管及び表面構造を強調した画像を取得することができる。
【００５０】
なお、各波長パターンＰＡ、ＰＢ、ＰＣにおける照射光Ｌ０の光量は、それぞれ適宜調整される。
【００５１】
図２の説明に戻り、撮像レンズ３４、撮像素子３８、及びアナログデジタル変換部４０によって、撮影部が構成される。撮影部は、内視鏡１２の先端部１２Ｄに配置される。
【００５２】
撮像レンズ３４には、照射光Ｌ０の被観察領域からの反射光、及び／又は被観察領域からの自家蛍光、を含む戻り光が入射する。撮像レンズ３４は、入射した光を撮像素子３８に結像させる。撮像素子３８は、受光した光に応じたアナログ信号を生成する。撮像素子３８としては、ＣＣＤ（Charge Coupled Device）型イメージセンサ、又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）型イメージセンサが用いられる。撮像素子３８から出力されるアナログ信号は、アナログデジタル変換部４０によりデジタル信号に変換され、プロセッサ装置１６に入力される。
【００５３】
また、図２に示すように、プロセッサ装置１６は、撮影制御部４２、画像処理部４４、表示制御部４８、記憶制御部５８、及び記憶部６０を備えている。
【００５４】
取得指示入力部１３Ｂにおいて受け付けた静止画の取得指示は、撮影制御部４２に入力される。撮影制御部４２は、光源装置１４の光源制御部２６、内視鏡１２の撮像素子３８及びアナログデジタル変換部４０、プロセッサ装置１６の画像処理部４４を制御する。撮影制御部４２は、内視鏡システム１０による動画及び静止画の撮影を統括制御する。
【００５５】
画像処理部４４は、内視鏡１２のアナログデジタル変換部４０から入力されたデジタル信号に画像処理を施し、画像を示す画像データ（以下、画像と表記する）を生成する。画像処理部４４は、撮影時の照射光Ｌ０の波長パターンに応じた画像処理を施す。
【００５６】
表示制御部４８は、画像処理部４４によって生成された画像を表示部１８に順次表示させる。
【００５７】
また、記憶制御部５８は、静止画の取得指示に従って撮影された画像及び画像に関連する情報等を記憶部６０に記憶させる。記憶部６０は、例えばハードディスク等のストレージ装置である。なお、記憶部６０は、プロセッサ装置１６に内蔵されたものに限定されない。例えば、プロセッサ装置１６に接続される不図示の外部記憶装置であってもよい。外部記憶装置は、ネットワークを介して接続されていてもよい。
【００５８】
このように構成された内視鏡システム１０は、通常は一定のフレームレートで動画撮影を行い、撮影した動画を表示部１８に表示する。また、取得指示入力部１３Ｂから静止画の取得指示が入力されると、静止画を撮影し、記憶部６０に記憶する。
【００５９】
内視鏡システム１０における第１の実施形態に係る学習用画像収集方法について説明する。ここでは、静止画の取得指示に応じて、３つの波長パターンＰＡ、ＰＢ、ＰＣの照射光Ｌ０をそれぞれ照射して撮影した静止画を取得する。また、観察モードの照射光Ｌ０と同じ波長パターンの画像を診断用画像、観察モードの照射光Ｌ０とは異なる波長パターンの画像を学習用画像として記憶する。
【００６０】
図４は、動画観察時における学習用画像収集方法（内視鏡画像取得方法の一例）の処理を示すフローチャートである。また、図５は、学習用画像収集方法の処理を説明するタイミングチャートである。図５において、時間ＴＮから時間ＴＮ＋１（Ｎ＝０〜１５）までの時間は画像撮影のフレームレートを示し、それぞれ１／３０秒である。
【００６１】
動画観察を開始するためには、ステップＳ１において、医師が入力部２０（波長パターン選択部の一例）を用いてモードＭＡ、モードＭＢ、及びモードＭＣの中から動画撮影用の観察モード（観察用の波長パターン）を選択する。ここでは、例としてモードＭＡを選択する。なお、動画撮影用の観察モードは、動画撮影中であっても適宜変更可能である。また、動画撮影用の観察モードは予め定められていてもよい。
【００６２】
次に、患者の体腔内に内視鏡１２の挿入部１２Ａを挿入する。内視鏡１２の挿入後に動画撮影用の観察モードの選択を行ってもよい。
【００６３】
続いて、ステップＳ２において、ステップＳ１で選択された観察モードによって動画の撮影及び表示を行う。即ち、光源制御部２６は、第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光とを、ステップＳ１で選択された観察モードに対応する光量比に設定する。これにより、患者の体腔内の被観察領域に所望の波長パターンの照射光Ｌ０を照射する（照射工程の一例、波長パターン変更工程の一例）。
【００６４】
また、撮影制御部４２は、撮像素子３８、アナログデジタル変換部４０、及び画像処理部４４を制御し、被観察領域からの戻り光を受光した被観察領域の画像を取得する（撮影工程の一例）。また、表示制御部４８は、画像処理部４４において生成された画像を表示部１８に表示する（表示制御工程の一例）。
【００６５】
図５に示す例では、時間Ｔ０から時間Ｔ１までの間に画像ＶＡ１を撮影している。また、続く時間Ｔ１から時間Ｔ２までの間に画像ＶＡ１を表示し、かつ次の画像ＶＡ２を撮影している。さらに、続く時間Ｔ２から時間Ｔ３までの間に画像ＶＡ２を表示し、かつ次の画像ＶＡ３を撮影している。
【００６６】
このように、一定のフレームレートで画像を撮影する。また、撮影した画像を１フレーム分遅れたタイミングで表示部１８に表示する。
【００６７】
以下のステップＳ３〜Ｓ１３の処理は、ステップＳ２における動画撮影の割り込み処理として実行される。
【００６８】
ステップＳ３では、動画観察の終了指示が入力されたか否かを判定する。医師は、入力部２０を用いて動画観察の終了指示を入力することができる。終了指示が入力された場合は、本フローチャートの処理を終了する。
【００６９】
動画観察の終了指示が入力されない場合は、ステップＳ４に移行する。ステップＳ４では、撮影制御部４２は、静止画取得指示が入力されたか否かを判定する。前述したように、医師は、取得指示入力部１３Ｂから静止画の取得指示を入力することができる。取得指示の入力が無い場合は、ステップＳ２に戻り、同様の処理を繰り返す。即ち、動画撮影を継続する。また、静止画取得指示が入力されたと判断した場合は（受付工程の一例）、ステップＳ５に移行する。
【００７０】
ステップＳ５以降では、静止画の取得を行う。ここでは、波長パターンＰＡでの静止画を１枚撮影、波長パターンＰＢでの静止画を１枚撮影、波長パターンＰＣでの静止画を１枚撮影、の処理を３回繰り返して、計９枚の静止画を取得する場合について説明する。
【００７１】
図５に示す例では、時間Ｔ２から時間Ｔ３までの間に、静止画取得指示が入力されている。この時間Ｔ２から時間Ｔ２までの間は、撮影制御部４２の制御により画像ＶＡ３を撮影している。したがって、次の撮影開始タイミングである時間Ｔ３から静止画の取得処理を開始する。
【００７２】
まず、ステップＳ５において、光源制御部２６は、波長パターンを設定する。ここでは、１枚目の静止画は波長パターンＰＡの静止画である。したがって、光源制御部２６は、第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光とを波長パターンＰＡの光量比に設定する。これにより、波長パターンＰＡの照射光Ｌ０を照射する。
【００７３】
次に、ステップＳ６において、静止画の撮影を行う。即ち、撮影制御部４２は、撮像素子３８、アナログデジタル変換部４０、及び画像処理部４４を制御し、被観察領域の画像ＳＡ１を撮影する（撮影制御工程の一例）。また、表示制御部４８は、この時点での最新の撮影画像である画像ＶＡ３を表示部１８に表示する。
【００７４】
続いて、ステップＳ７において、表示制御部４８は、ステップＳ６で撮影した画像ＳＡ１がステップＳ１で選択した観察モードと同じ波長パターンの画像であるか否か、即ち画像ＳＡ１の照射光Ｌ０の波長パターンとステップＳ１で選択した観察モードの照射光Ｌ０の波長パターンとが同一であるか否かを判定する。ここでは、画像ＳＡ１は波長パターンＰＡの画像である。また、ステップＳ１で選択した観察モードはモードＭＡであり、モードＭＡの波長パターンはＰＡである。このように、両者の波長パターンが同一であるため、ＹＥＳ判定となり、ステップＳ８に移行する。
【００７５】
ステップＳ８では、表示制御部４８は、ステップＳ６で撮影した画像ＳＡ１を表示画像に設定する。また、続くステップＳ９において、記憶制御部５８は、画像ＳＡ１と画像ＳＡ１を撮影した際の照射光Ｌ０の波長パターンＰＡの情報とを関連付けて、記憶部６０の診断用画像を記憶するための領域である第１の記憶領域に記憶させる（記憶制御工程の一例）。第１の記憶領域とは、例えば、記憶部６０の複数のドライブのうちの１つのドライブ、又は複数のフォルダのうちの１つのフォルダである。
【００７６】
次に、ステップＳ１２において、静止画取得が終了したか否かを判定する。ここでは、まだ終了していないため、ステップＳ５に戻る。
【００７７】
ここでは、２枚目の静止画（モードＭＢでの１枚目の静止画）を時間Ｔ４から撮影する。即ち、ステップＳ５において、第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光とを波長パターンＰＢの光量比に設定する。そして、ステップＳ６において、画像ＳＢ１を撮影する。また、前回のステップＳ８において画像ＳＡ１を表示画像に設定したため、表示制御部４８は、時間Ｔ４から画像ＳＡ１を表示部１８に表示する。
【００７８】
続いて、ステップＳ７において、表示制御部４８は、ステップＳ６で撮影した画像ＳＢ１がステップＳ１で選択した観察モードと同じ波長パターンの画像であるか否か、即ち画像ＳＢ１の照射光Ｌ０の波長パターンとステップＳ１で選択した観察モードの照射光Ｌ０の波長パターンとが同一であるか否かを判定する。ここでは、画像ＳＢ１は波長パターンＰＢの画像である。また、ステップＳ１で選択した観察モードはモードＭＡであり、モードＭＡの波長パターンはＰＡである。このように、両者の波長パターンは異なるため、ＮＯ判定となり、ステップＳ１０に移行する。
【００７９】
ステップＳ１０では、表示制御部４８は、ステップＳ６で撮影した画像ＳＢ１を非表示に設定する。また、続くステップＳ１１において、記憶制御部５８は、画像ＳＢ１と画像ＳＢ１を撮影した際の照射光Ｌ０の波長パターンＰＢの情報とを関連付けて、記憶部６０の学習用画像を記憶するための領域である第２の記憶領域に記憶させる（記憶制御工程の一例）。第２の記憶領域とは、例えば、記憶部６０の複数のドライブのうちの１つのドライブ、又は複数のフォルダのうちの１つのフォルダであり、第１の記憶領域とは異なる領域である。記憶部６０を第１の記憶領域とし、記憶部６０とは異なるストレージ装置を第２の記憶領域としてもよい。
【００８０】
次に、ステップＳ１２において、静止画取得が終了したか否かを判定する。ここでは、まだ終了していないため、ステップＳ５に戻る。
【００８１】
ここでは、３枚目の静止画（モードＭＣでの１枚目の静止画）を時間Ｔ５から撮影する。即ち、ステップＳ５において、第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光とを波長パターンＰＣの光量比に設定する。そして、ステップＳ６において、画像ＳＣ１を撮影する。
【００８２】
なお、前回のステップＳ１０において画像ＳＢ１を非表示に設定したため、表示制御部４８は、画像ＳＢ１は表示部１８に表示しない。ここでは、画像ＳＢ１に代えて、時間Ｔ４から表示している画像ＳＡ１を引き続き表示部１８に表示する。
【００８３】
続いて、ステップＳ７において、表示制御部４８は、ステップＳ６で撮影した画像ＳＣ１がステップＳ１で選択した観察モードと同じ波長パターンの画像であるか否か、即ち画像ＳＣ１の照射光Ｌ０の波長パターンとステップＳ１で選択した観察モードの照射光Ｌ０の波長パターンとが同一であるか否かを判定する。ここでは、画像ＳＣ１は波長パターンＰＣの画像である。また、ステップＳ１で選択した観察モードはモードＭＡであり、モードＭＡの波長パターンはＰＡである。このように、両者の波長パターンは異なるため、ＮＯ判定となり、ステップＳ１０に移行する。
【００８４】
ステップＳ１０では、表示制御部４８は、画像ＳＣ１を非表示に設定する。また、続くステップＳ１１において、記憶制御部５８は、画像ＳＣ１と画像ＳＣ１を撮影した際の照射光Ｌ０の波長パターンＰＣの情報とを関連付けて、記憶部６０の第２の記憶領域に記憶させる。
【００８５】
次に、ステップＳ１２において、静止画取得が終了したか否かを判定する。ここでは、まだ終了していないため、ステップＳ５に戻る。
【００８６】
同様に、４枚目の静止画（モードＭＡでの２枚目の静止画）である画像ＳＡ２を時間Ｔ６から波長パターンＰＡの照射光Ｌ０で撮影する（ステップＳ５、Ｓ６）。また、前回のステップＳ１０において画像ＳＣ１を非表示に設定したため、表示制御部４８は、画像ＳＣ１を表示部１８に表示しない。ここでは、画像ＳＣ１に代えて、時間Ｔ４から表示している画像ＳＡ１を引き続き表示部１８に表示する。
【００８７】
ここでは、画像ＳＡ２はステップＳ１で選択した観察モードと同じ波長パターンの画像である。したがって、ステップＳ７においてＹＥＳ判定となり、ステップＳ８に移行する。
【００８８】
ステップＳ８では、画像ＳＡ２を表示画像に設定する。また、ステップＳ９において、画像ＳＡ２と画像ＳＡ２を撮影した際の照射光Ｌ０の波長パターンＰＡの情報とを関連付けて、記憶部６０の第１の記憶領域に記憶する。
【００８９】
次に、ステップＳ１２において、静止画取得が終了したか否かを判定する。ここでは、まだ終了していないため、ステップＳ５に戻る。
【００９０】
同様に、５枚目の静止画（モードＭＢでの２枚目の静止画）である画像ＳＢ２を時間Ｔ７から波長パターンＰＢの照射光Ｌ０で撮影する（ステップＳ５、Ｓ６）。また、前回のステップＳ８において画像ＳＡ２を表示画像に設定したため、表示制御部４８は、表示部１８に画像ＳＡ２を表示する。
【００９１】
ここでは、画像ＳＢ２はステップＳ１で選択した観察モードと同じ波長パターンの画像ではない。したがって、ステップＳ７においてＮＯ判定となり、ステップＳ１０に移行する。
【００９２】
ステップＳ１０では、表示制御部４８は、画像ＳＢ２を非表示に設定する。また、続くステップＳ１１において、記憶制御部５８は、画像ＳＢ２と画像ＳＢ２を撮影した際の照射光Ｌ０の波長パターンＰＢの情報とを関連付けて、記憶部６０の第２の記憶領域に記憶させる。
【００９３】
次に、ステップＳ１２において、静止画取得が終了したか否かを判定する。ここでは、まだ終了していないため、ステップＳ５に戻る。
【００９４】
以下、６〜９枚目の静止画、即ち波長パターンＰＣでの２枚目の静止画である画像ＳＣ２、波長パターンＰＡでの３枚目の静止画である画像ＳＡ３、波長パターンＰＢでの３枚目の静止画である画像ＳＢ３、波長パターンＰＣでの３枚目の静止画である画像ＳＣ３を順に撮影する。
【００９５】
全ての静止画の撮影が終了すると、ステップＳ１２において静止画取得が終了したと判断され、ステップＳ１３に移行する。
【００９６】
ステップＳ１３では、照射光Ｌ０の波長パターンをステップＳ１で選択された観察モードの波長パターンに戻す。ここでは、波長パターンＰＡに戻す。そして、ステップＳ２へ戻り、同様の処理を繰り返す。
【００９７】
なお、最後に撮影された画像ＳＣ３は、ステップＳ１０において非表示と設定される。したがって、ステップＳ２へ戻って動画撮影を再開する際は、画像ＳＣ３は表示部１８に表示しない。ここでは、画像ＳＣ３に代えて、時間Ｔ１０から表示されている画像ＳＡ３を引き続き表示部１８に表示させる。
【００９８】
なお、時間Ｔ１３以降は、１フレーム前に撮影された画像が表示部１８に表示される。
【００９９】
以上のように学習用画像収集を行うことにより、学習用の静止画を撮影し、記憶することができる。また、選択された観察モードの照射光Ｌ０の波長パターンとは異なる波長パターンの静止画の表示タイミング（観察用の波長パターン以外の波長パターンの画像の表示タイミングの一例）において、選択された観察モードの照射光Ｌ０の波長パターンと同じ波長パターンの画像のうち最新の画像（すでに撮影した観察用の波長パターンの画像のうち最新の画像の一例）を表示することで、静止画取得中の表示色が動画撮影中の表示色と同じ色で一定となり、表示部１８による観察が容易となる。
【０１００】
＜第２の実施形態＞
取得する静止画の取得順序及び取得枚数は、第１の実施形態で説明した例に限定されない。
【０１０１】
例えば、医師が入力部２０を用いて取得枚数を指定してもよい。第１の実施形態では各波長パターンでの静止画を３枚ずつ取得したが、２枚ずつ、あるいは４枚以上ずつ取得することができる。このように、必要な枚数だけ撮影を行うことができる。
【０１０２】
また、医師が入力部２０（順序選択部の一例）を用いて取得順序を選択してもよい。第１の実施形態では、波長パターンＰＡ、波長パターンＰＢ、波長パターンＰＣの順に静止画を取得したが、例えば、波長パターンＰＢ、波長パターンＰＣ、波長パターンＰＡの順、波長パターンＰＣ、波長パターンＰＡ、波長パターンＰＢの順、波長パターンＰＣ、波長パターンＰＢ、波長パターンＰＡの順、等のように所望の順序で静止画を取得することができる。
【０１０３】
また、同じ波長パターンの画像を複数枚連続して取得させてもよい。例えば、図６に示すタイミングチャートの例では、波長パターンＰＡでの静止画を連続３枚撮影、波長パターンＰＢでの静止画を連続３枚撮影、波長パターンＰＣでの静止画を連続３枚撮影して、計９枚の静止画を取得している。なお、この例では、時間Ｔ６から時間Ｔ１３までの間に、波長パターンＰＡでの最新の画像ＳＡ３を表示している。
【０１０４】
さらに、連続撮影処理を複数回繰り返してもよい。例えば、波長パターンＰＡでの静止画を連続３枚撮影、波長パターンＰＢでの静止画を連続３枚撮影、波長パターンＰＣでの静止画を連続３枚撮影、の処理を２回繰り返して計１８枚の静止画を取得する等の順序としてもよい。
【０１０５】
内視鏡画像の撮影では、撮像レンズ３４への汚れの付着、撮影アングルの維持の困難性等から、撮影指示が入力されてからの経過時間が長くなると所望の画像を取得することが困難になると予測される。したがって、重要と考えられる波長パターンの画像を先に撮影させるために、撮影する波長パターンの順序を指定させることが好ましい。
【０１０６】
また、医師が入力部２０を用いて静止画を取得する波長パターンを選択してもよい。例えば、波長パターンＰＢでの静止画が不要であれば、波長パターンＰＡでの静止画及び波長パターンＰＣでの静止画のみを撮影することができる。
【０１０７】
＜第３の実施形態＞
選択された観察モードの照射光Ｌ０の波長パターンとは異なる波長パターンの静止画の表示タイミングにおいて、最新の画像よりも一定数以前に撮影した画像を表示してもよい。
【０１０８】
図７は、内視鏡システム１０における第３の実施形態に係る学習用画像収集方法の処理を説明するタイミングチャートである。
【０１０９】
ここでは、時間Ｔ４から時間Ｔ７の間に、波長パターンＰＡの照射光Ｌ０で撮影した最新の画像である画像ＳＡ１に代えて、最新の画像ＳＡ１よりも１枚前に波長パターンＰＡの照射光Ｌ０で撮影した画像である画像ＶＡ３を表示している。
【０１１０】
また、時間Ｔ７から時間Ｔ１０の間に、波長パターンＰＡの照射光Ｌ０で撮影した最新の画像である画像ＳＡ２に代えて、最新の画像ＳＡ２よりも１枚前に波長パターンＰＡの照射光Ｌ０で撮影した画像である画像ＳＡ１を表示している。
【０１１１】
同様に、時間Ｔ１０から時間Ｔ１３の間に、最新の画像ＳＡ３よりも１枚前に撮影した画像である画像ＳＡ２を表示している。
【０１１２】
ここでは、最新の画像よりも１枚前に撮影した画像を表示しているが、さらに以前に撮影した画像を表示してもよい。このように、最新の画像よりも一定数以前に撮影した画像（すでに撮影した観察用の波長パターンの画像のうち最新の画像よりも一定数以前に撮影した画像の一例）を表示した場合であっても、選択した観察モードの照射光Ｌ０の波長パターンと同じ照射光Ｌ０の波長パターンの画像のみが表示されるため、表示部１８による観察が容易となる。
【０１１３】
＜第４の実施形態＞
内視鏡システム１０では、選択された観察モードの照射光Ｌ０の波長パターンとは異なる波長パターンの静止画の表示タイミングにおいて、選択された観察モードの照射光Ｌ０の波長パターンと同じ波長パターンの画像のうち最新の画像、又は最新の画像よりも一定数以前に撮影した画像を表示していたが、撮影画像ではなく補間画像を表示してもよい。
【０１１４】
図８は、内視鏡システム７０の機能を示すブロック図である。なお、図２に示すブロック図と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１１５】
内視鏡システム７０は、画像処理部４４に補間画像作成部４６を備えている。補間画像作成部４６は、不図示のメモリを備え、メモリに記憶してある複数の画像から補間画像を作成する。
【０１１６】
図９は、内視鏡システム７０の学習用画像収集方法の処理を示すフローチャートである。また、図１０は、内視鏡システム７０の学習用画像収集方法の処理を説明するタイミングチャートである。なお、図４に示すフローチャート及び図５に示すタイミングチャートと共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１１７】
第１の実施形態と同様に、医師がモードＭＡを観察モードとして選択する（ステップＳ１）。内視鏡システム７０は、モードＭＡにおいて動画撮影を行う（ステップＳ２）。
【０１１８】
なお、静止画取得の際には、モードＭＡでの静止画を１枚撮影、モードＭＢでの静止画を１枚撮影、モードＭＣでの静止画を１枚撮影、の処理を１セットとし、３セット分の処理を繰り返して行って９枚の静止画を取得するものとする。
【０１１９】
時間Ｔ２から時間Ｔ３までの間に静止画の取得指示が入力されたと判定すると（ステップＳ４）、時間Ｔ３から静止画の取得処理が開始される。まず、時間Ｔ３から時間Ｔ４までの間に波長パターンＰＡでの画像ＳＡ１を撮影する。また、画像ＶＡ３が表示部１８に表示される（ステップＳ５、Ｓ６）。
【０１２０】
ここで撮影した画像ＳＡ１は、選択された観察モードであるモードＭＡと同じ波長パターンの画像であるため、表示画像に設定される（ステップＳ８）。
【０１２１】
次の撮影タイミングである時間Ｔ４から時間Ｔ５までの間では、波長パターンＰＢでの画像ＳＢ１を撮影する。
【０１２２】
ここで撮影した画像ＳＢ１は、モードＭＡとは異なる波長パターンの画像であるため、画像ＳＢ１は非表示に設定される（ステップＳ１０）。
【０１２３】
続くステップＳ２１において、補間画像作成部４６は、選択された観察モードの照射光Ｌ０の波長パターンで撮影された画像のうち、最新の画像と、最新の画像よりも一定数以前に撮影した画像とを補間した補間画像を作成する。ここでは、最新の画像である画像ＳＡ１と、最新の画像ＳＡ１よりも１枚前に撮影した画像である画像ＶＡ３とを補間した補間画像ＩＡ１を作成する。なお、画像ＳＡ１及び画像ＶＡ３は、補間画像作成部４６の不図示のメモリに記憶されている。
【０１２４】
補間画像ＩＡ１は、画像ＳＡ１及び画像ＶＡ３の各画素を平均して作成してもよいし、各画素を加重平均してもよい。また、新しい画像ほど加重を大きくしてもよい。ここでは、画像ＳＡ１及び画像ＶＡ３の２枚の画像を用いたが、さらに一定数以前に撮影した画像を用いてもよい。
【０１２５】
補間画像ＩＡ１を作成したら、ステップＳ１１に移行する。ステップＳ１１では、記憶制御部５８は、画像ＳＢ１と画像ＳＢ１を撮影した際の照射光Ｌ０の波長パターンＰＢの情報とを関連付けて、記憶部６０の第２の記憶領域に記憶させる。補間画像ＩＡ１を記憶させてもよい。
【０１２６】
続いて、時間Ｔ５から時間Ｔ６までの間に波長パターンＰＣでの画像ＳＣ１を撮影する。また、前回のステップＳ１０において画像ＳＢ１を非表示に設定したため、表示制御部４８は、画像ＳＢ１は表示部１８に表示しない。これに代えて、表示制御部４８は、時間Ｔ５から、前回のステップＳ２１で作成した補間画像ＩＡ１を表示部１８に表示する（ステップＳ５、Ｓ６）。
【０１２７】
次に、表示制御部４８は、画像ＳＣ１を非表示に設定する（ステップＳ１０）。さらに、補間画像作成部４６は、選択された観察モードの照射光Ｌ０の波長パターンで撮影された画像のうち、最新の画像である画像ＳＡ１と、最新の画像ＳＡ１よりも１枚前に撮影した画像である画像ＶＡ３とを補間した補間画像ＩＡ１を作成する（ステップＳ２１）。ここでは、前回のステップＳ２１において同じ補間画像ＩＡ１を作成しているので、補間画像作成部４６の不図示のメモリに記憶した補間画像ＩＡ１をそのまま使用することができる。なお、画像ＳＡ１及び画像ＶＡ３の加重平均の加重割合を変更して、新たな補間画像を作成してもよい。
【０１２８】
次の撮影タイミングである時間Ｔ６から時間Ｔ７までの間に波長パターンＰＡでの画像ＳＡ２を撮影する。また、前回のステップＳ２１で作成した補間画像ＩＡ１を表示部１８に表示する（ステップＳ５、Ｓ６）。この画像ＳＡ２は、表示画像に設定される（ステップＳ８）。
【０１２９】
さらに次の撮影タイミングである時間Ｔ７から時間Ｔ８までの間に波長パターンＰＢでの画像ＳＢ２を撮影する。また、前回撮影した画像ＳＡ２を表示部１８に表示する（ステップＳ５、Ｓ６）。
【０１３０】
以下同様に、画像ＳＢ２及び画像ＳＣ２の表示タイミング（時間Ｔ８から時間Ｔ１０まで）では画像ＳＡ１及び画像ＳＡ２から作成した補間画像ＩＡ２を、画像ＳＢ３及び画像ＳＣ３の表示タイミング（時間Ｔ１１から時間Ｔ１３まで）では画像ＳＡ２及び画像ＳＡ３から作成した補間画像ＩＡ３を、表示部１８に表示する。
【０１３１】
ここでは、最新の画像と、最新の画像よりも一定数以前に撮影した画像から補間画像を作成したが、選択した観察モードの波長パターンの複数の画像のうち最新の画像又は最新の画像よりも一定数以前に撮影した画像を含む複数の画像から補間画像を作成すればよい。
【０１３２】
このように表示した場合も、選択した観察モードの照射光Ｌ０の波長パターンと同じ照射光Ｌ０の波長パターンの画像のみが表示されるため、表示部１８による観察が容易となる。
【０１３３】
＜第５の実施形態＞
医師による取得指示入力部１３Ｂからの静止画の取得指示に依らず、自動的に静止画取得を行ってもよい。
【０１３４】
図１１は、内視鏡システム７２の機能を示すブロック図である。なお、図２に示すブロック図と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１３５】
内視鏡システム７２のプロセッサ装置１６は、取得指示出力部５０を備えている。取得指示出力部５０は、静止画の取得指示を自動的に出力する。取得指示出力部５０からの静止画の取得指示は、撮影制御部４２に入力される。
【０１３６】
取得指示出力部５０は、認識部５２を備えている。認識部５２は、入力された画像から注目シーンの検出を行う。ここでは特に、病変領域の検出を行う。なお、注目シーンは病変領域に限定されない。
【０１３７】
認識部５２は、ニューラルネットワーク等の学習アルゴリズムを用いることができる。認識部５２が病変領域を検出すると、取得指示出力部５０は静止画の取得指示を出力する。
【０１３８】
内視鏡システム７２の学習用画像収集を、図４に示すフローチャートを用いて説明する。
【０１３９】
まず、医師が入力部２０を用いて動画撮影用の観察モードを選択する（ステップＳ１）。続いて、内視鏡システム７２は、選択された観察モードで動画を撮影する（ステップＳ２）。
【０１４０】
撮影された画像は、画像処理部４４から取得指示出力部５０に入力される。取得指示出力部５０の認識部５２は、入力された画像から病変領域の認識を行う。認識部５２が画像から病変領域を検出すると、取得指示出力部５０は静止画の取得指示を出力する。これにより、ステップＳ４においてＹＥＳ判定となり、ステップＳ５に移行する。以下の処理はこれまでと同様である。
【０１４１】
内視鏡システム７２によれば、自動的に学習用画像を収集することができる。また、選択した観察モードの照射光Ｌ０の波長パターンと同じ照射光Ｌ０の波長パターンの画像のみが表示されるため、表示部１８による観察が容易となる。
【０１４２】
ここでは、取得指示出力部５０は、認識部５２により病変領域を検出し、病変領域を検出した場合に静止画の取得指示を出力したが、病変領域等の注目シーンの検出以外をトリガにして取得指示を出力してもよい。例えば、一定時間毎に静止画の取得指示を出力してもよい。
【０１４３】
＜第６の実施形態＞
内視鏡システム１０では、撮影した静止画を全て記憶部６０に記憶させていたが、学習に適した画像のみ記憶させてもよい。
【０１４４】
図１２は、内視鏡システム７４の機能を示すブロック図である。なお、図２に示すブロック図と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１４５】
内視鏡システム７４のプロセッサ装置１６は、自動選択部５４を備えている。自動選択部５４は、入力された静止画のうち記憶部に記憶させる画像を自動選択する。記憶制御部５８は、自動選択部５４によって選択された静止画を記憶部６０に記憶させる。
【０１４６】
自動選択部５４は、判定部５６を備えている。判定部５６は、入力された静止画が学習用画像として適しているか否かを判定する。ここでは、特に静止画が撮影された際の照射光Ｌ０が所望の波長パターンを有しているか否かを判定する。
【０１４７】
図１３は、内視鏡システム７４の学習用画像収集方法の処理を示すフローチャートである。なお、図４に示すフローチャートと共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１４８】
内視鏡システム７４は、静止画の取得指示に応じて（ステップＳ４）、静止画の撮影を行う（ステップＳ６）。続いて、ステップＳ６で撮影した画像が選択した観察モードと同じ波長パターンの画像であるか否かを判定する（ステップＳ７）。
【０１４９】
同じ波長パターンの画像である場合は、ステップＳ８に移行する。そして、撮影した画像を表示画像に設定する（ステップＳ８）。
【０１５０】
続くステップＳ３１において、自動選択部５４の判定部５６は、撮影した画像が学習用画像として適しているか否かを判定する。ここでは、特に静止画が撮影された際の照射光Ｌ０が所望の波長パターンを有しているか否かを判定する。
【０１５１】
判定部５６は、画像の色を解析することでその画像を撮影した際の照射光Ｌ０の波長パターンを推定し、推定した波長パターンが所望の波長パターンであるか否かを判定する。判定部５６が、推定した波長パターンが所望の波長パターンであると判定した場合は、自動選択部５４は、その画像を学習用画像として選択し、ステップＳ９に移行する。
【０１５２】
ステップＳ９では、その画像と波長パターンの情報とを関連付けて、記憶部６０の第１の記憶領域に記憶させる。
【０１５３】
また、判定部５６が、推定した波長パターンが所望の波長パターンでないと判定した場合は、自動選択部５４は、その画像を学習用画像として選択せず、画像の記憶を行わずにステップＳ１２に移行する。
【０１５４】
一方、ステップＳ７において、同じ波長パターンの画像でないと判定されると、ステップＳ１０に移行する。そして、撮影した画像を非表示に設定する（ステップＳ１０）。
【０１５５】
続くステップＳ３２において、自動選択部５４の判定部５６は、撮影した画像が学習用画像として適しているか否かを判定する。ステップＳ３１と同様に、特に静止画が撮影された際の照射光Ｌ０が所望の波長パターンを有しているか否かを判定する。
【０１５６】
例えば、図６に示すタイミングチャートの場合では、時間Ｔ６において照射光Ｌ０を波長パターンＰＡから波長パターンＰＢに変更して、３枚の画像ＳＢ１〜画像ＳＢ３を撮影している。したがって、１枚目の画像ＳＢ１は波長パターンの遷移状態（波長パターンの移行時の一例）で撮影され、照射光Ｌ０の波長パターンが所望の波長パターンでない可能性がある。
【０１５７】
判定部５６は、画像の色を解析することでその画像を撮影した際の照射光Ｌ０の波長パターンを推定し、推定した波長パターンが所望の波長パターンであるか否かを判定する。判定部５６が、推定した波長パターンが所望の波長パターンであると判定した場合（判定の結果の一例）は、自動選択部５４は、その画像を学習用画像として選択し、ステップＳ１１に移行する。
【０１５８】
ステップＳ１１では、その画像と波長パターンの情報とを関連付けて、記憶部６０の第２の記憶領域に記憶させる。
【０１５９】
また、判定部５６が、推定した波長パターンが所望の波長パターンでないと判定した場合（判定の結果の一例）は、自動選択部５４は、その画像を学習用画像として選択せず、画像の記憶を行わずにステップＳ１２に移行する。
【０１６０】
なお、表示部１８に表示する画像については、これまでと同様である。
【０１６１】
内視鏡システム７４によれば、撮影した静止画について、学習用画像として適しているか否かを判定し、適している画像を記憶することで、好ましい学習用画像を収集することができる。
【０１６２】
また、これまでと同様に、選択した観察モードの照射光Ｌ０の波長パターンと同じ照射光Ｌ０の波長パターンの画像のみを表示するので、静止画取得中の表示色が動画撮影中の表示色と同じ色で一定となり、表示部１８による観察が容易となる。
【０１６３】
ここでは、静止画が撮影された際の照射光Ｌ０が所望の波長パターンを有していない画像を学習用画像として適していないと判定したが、判定基準はこれに限定されない。例えば、像ブレが発生している画像、合焦していない画像、レンズに水しぶき又は汚れが付着した画像等を学習用画像として適していないと判定してもよい。また、学習用画像として適している画像のうち最も適している画像を判定し、判定された画像のみを記憶してもよい。
【０１６４】
また、取得した静止画を表示部１８に表示し、表示された画像の中から学習用画像として記憶部６０に記憶させる画像を医師が入力部２０（記憶画像選択部の一例）を用いて選択するように構成してもよい。また、取得した全ての静止画を表示部１８に表示するのではなく、判定部５６において学習用画像に適していると判別された静止画のみを表示部１８に表示してもよい。
【０１６５】
＜第７の実施形態＞
内視鏡システム１０では、複数の光源の光量の比率を変更して照射光Ｌ０の波長パターンを変更しているが、複数の光源のうち点灯させる光源を選択して照射光の波長パターンを変更してもよい。
【０１６６】
図１４は、内視鏡システム７６の機能を示すブロック図である。なお、図２に示すブロック図と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１６７】
内視鏡システム７６の光源装置１４は、第１光源２４Ａ、第２光源２４Ｂ、第３光源２４Ｃを備えている。
【０１６８】
光源制御部２６は、第１光源２４Ａ、第２光源２４Ｂ、第３光源２４Ｃのうちの１つの光源を選択して点灯させ、他の光源を消灯させる。点灯した光源から出射される光は、光ファイバ２８Ｂによって拡散部材３２に照射される。拡散部材３２から出射する光が内視鏡システム７６の照射光Ｌ０となる。
【０１６９】
ここで、第１光源２４Ａを波長パターンＰＡの波長パターンを有する光源、第２光源２４Ｂを波長パターンＰＢの波長パターンを有する光源、及び第３光源２４Ｃを波長パターンＰＣ用の波長パターンを有する光源に用いることで、各波長パターンの照射光Ｌ０を照射した静止画を取得することができる。
【０１７０】
第１光源２４Ａ、第２光源２４Ｂ、第３光源２４Ｃとして、レーザダイオードと蛍光体の組み合わせの他、ＬＥＤ（Light Emitting Diode）等の半導体光源を用いることができる。
【０１７１】
＜第８の実施形態＞
ここまでは、被観察領域を照射する照射光Ｌ０の波長パターンを変更する例を説明したが、照射光Ｌ０の波長パターンを一定として、撮像素子３８が受光する戻り光の波長パターンを変更してもよい。
【０１７２】
図１５は、内視鏡システム７８の機能を示すブロック図である。なお、図２に示すブロック図と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１７３】
内視鏡システム７８の内視鏡１２は、複数のフィルタを有するフィルタ群３６（波長パターン変更部の一例）を備えている。複数のフィルタの各フィルタは、透過する光についてそれぞれ異なる波長帯域を制限する。フィルタ群３６は、戻り光の光路における撮像レンズ３４と撮像素子３８との間に配置される。フィルタ群３６は、例えば、回転式フィルタターレットとして構成することができる。
【０１７４】
光源制御部２６は、第１レーザ光源２２Ａの出射光と第２レーザ光源２２Ｂの出射光との光量比を一定に設定する。また、撮影制御部４２（波長パターン変更部の一例）は、フィルタ群３６を制御し、必要なフィルタを光路から挿入又は退避させる。これにより、撮像素子３８が受光する戻り光の波長パターンを変更する。
【０１７５】
例えば、透過光を波長パターンＰＡの波長パターンにするフィルタ、透過光を波長パターンＰＢの波長パターンにするフィルタ、透過光を波長パターンＰＣの波長パターンにするフィルタ、の３つのフィルタを備え、３つのフィルタのうちの１つのフィルタを光路に挿入させる。これにより、各波長パターンでの画像を撮影することができる。
【０１７６】
なお、表示部１８に表示する画像については、これまでと同様である。
【０１７７】
内視鏡システム７８によれば、それぞれ異なる複数の波長パターンの画像を順次撮影させることで、学習用画像を適切に収集することができる。
【０１７８】
また、これまでと同様に、選択した観察モードの照射光Ｌ０の波長パターンと同じ照射光Ｌ０の波長パターンの画像のみを表示するので、静止画取得中の表示色が動画撮影中の表示色と同じ色で一定となり、表示部１８による観察が容易となる。
【０１７９】
内視鏡システム１０、７０、７２、７４、７６、及び７８では、観察モードと同じ波長パターンで撮影された静止画を、診断用画像として第１の記憶領域に記憶させたが、診断用画像を第２の記憶領域に記憶させてもよい。これにより、観察モードと同じ波長パターンで撮影された静止画を学習用画像として収集することができる。
【０１８０】
＜付記＞
前述した態様及び例に加えて、以下に記載の構成も本発明の範囲に含まれる。
【０１８１】
（付記１）
医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出し、
医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。
【０１８２】
（付記２）
医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出し、
医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。
【０１８３】
（付記３）
医療画像解析結果取得部は、
医療画像の解析結果を記録する記録装置から取得し、
解析結果は、医療画像に含まれる注目すべき領域である注目領域と、注目すべき対象の有無のいずれか、もしくは両方である医療画像処理装置。
【０１８４】
（付記４）
医療画像は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得た通常光画像である医療画像処理装置。
【０１８５】
（付記５）
医療画像は、特定の波長帯域の光を照射して得た画像であり、
特定の波長帯域は、白色の波長帯域よりも狭い帯域である医療画像処理装置。
【０１８６】
（付記６）
特定の波長帯域は、可視域の青色もしくは、緑色帯域である医療画像処理装置。
【０１８７】
（付記７）
特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有する医療画像処理装置。
【０１８８】
（付記８）
特定の波長帯域は、可視域の赤色帯域である医療画像処理装置。
（付記９）
特定の波長帯域は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有する医療画像処理装置。
【０１８９】
（付記１０）
特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する医療画像処理装置。
【０１９０】
（付記１１）
特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有する医療画像処理装置。
【０１９１】
（付記１２）
医療画像は生体内を写した生体内画像であり、
生体内画像は、生体内の蛍光物質が発する蛍光の情報を有する医療画像処理装置。
【０１９２】
（付記１３）
蛍光は、ピークが３９０ｎｍ以上４７０ｎｍ以下である励起光を生体内に照射して得る医療画像処理装置。
【０１９３】
（付記１４）
医療画像は生体内を写した生体内画像であり、
特定の波長帯域は、赤外光の波長帯域である医療画像処理装置。
【０１９４】
（付記１５）
特定の波長帯域は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有する医療画像処理装置。
【０１９５】
（付記１６）
医療画像取得部は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の情報を有する特殊光画像を取得する特殊光画像取得部を備え、
医療画像は特殊光画像である医療画像処理装置。
【０１９６】
（付記１７）
特定の波長帯域の信号は、通常光画像に含まれるＲＧＢ（Red Green Blue）あるいはＣＭＹ（Cyan, Magenta, Yellow）の色情報に基づく演算により得る医療画像処理装置。
【０１９７】
（付記１８）
白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、
医療画像は特徴量画像である医療画像処理装置。
【０１９８】
（付記１９）
付記１から１８のいずれか１つに記載の医療画像処理装置と、
白色の波長帯域の光、または、特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡と、
を備える内視鏡装置。
【０１９９】
（付記２０）
付記１から１８のいずれか１つに記載の医療画像処理装置を備える診断支援装置。
【０２００】
（付記２１）
付記１から１８のいずれか１つに記載の医療画像処理装置を備える医療業務支援装置。
【０２０１】
＜その他＞
波長パターンとして、白色光、ＢＬＩ、ＢＬＩ−ｂｒｉｇｈｔ（登録商標）、特定の単波長、複数波長の任意の組み合わせ等を用いることができる。
【０２０２】
ここでは、学習用画像の収集について説明したが、収集する画像は学習アルゴリズムの学習用画像に限定されるものではない。例えば、内視鏡システムの性能評価のためのテスト用画像、照射光の波長による被観察領域の見え方の違いの研究用画像等であってもよい。
【０２０３】
上記の認識方法は、各工程をコンピュータに実現させるためのプログラムとして構成し、このプログラムを記憶したＣＤ−ＲＯＭ（Compact Disk-Read Only Memory）等の非一時的な記録媒体を構成することも可能である。
【０２０４】
ここまで説明した実施形態において、例えば、プロセッサ装置１６の各種の処理を実行する処理部（processing unit）のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
【０２０５】
１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ、又はＣＰＵとＧＰＵの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、サーバ及びクライアント等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、各種のプロセッサを１つ以上用いて構成される。
【０２０６】
さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）である。
【０２０７】
本発明の技術的範囲は、上記の実施形態に記載の範囲には限定されない。各実施形態における構成等は、本発明の趣旨を逸脱しない範囲で、各実施形態間で適宜組み合わせることができる。
【符号の説明】
【０２０８】
１０  内視鏡システム
１２  内視鏡
１２Ａ  挿入部
１２Ｂ  操作部
１２Ｃ  湾曲部
１２Ｄ  先端部
１２Ｅ  アングルノブ
１３Ａ  モード切替スイッチ
１３Ｂ  取得指示入力部
１４  光源装置
１６  プロセッサ装置
１８  表示部
２０  入力部
２２Ａ  第１レーザ光源
２２Ｂ  第２レーザ光源
２４Ａ  第１光源
２４Ｂ  第２光源
２４Ｃ  第３光源
２６  光源制御部
２８Ａ  光ファイバ
２８Ｂ  光ファイバ
３０  蛍光体
３２  拡散部材
３４  撮像レンズ
３６  フィルタ群
３８  撮像素子
４０  アナログデジタル変換部
４２  撮影制御部
４４  画像処理部
４６  補間画像作成部
４８  表示制御部
５０  取得指示出力部
５２  認識部
５４  自動選択部
５６  判定部
５８  記憶制御部
６０  記憶部
７０  内視鏡システム
７２  内視鏡システム
７４  内視鏡システム
７６  内視鏡システム
７８  内視鏡システム
ＩＡ１〜ＩＡ３  補間画像
ＳＡ１〜ＳＡ３  画像
ＳＢ１〜ＳＢ３  画像
ＳＣ１〜ＳＣ３  画像
Ｌ０  照射光
Ｌ１  光
Ｌ１１  励起光
Ｌ１２  レーザ光
Ｌ２  光
Ｓ１〜Ｓ３２  学習用画像収集の各処理
【図１】
0006989619.tif 000002
【図２】
0006989619.tif 000003
【図３】
0006989619.tif 000004
【図４】
0006989619.tif 000005
【図５】
0006989619.tif 000006
【図６】
0006989619.tif 000007
【図７】
0006989619.tif 000008
【図８】
0006989619.tif 000009
【図９】
0006989619.tif 000010
【図１０】
0006989619.tif 000011
【図１１】
0006989619.tif 000012
【図１２】
0006989619.tif 000013
【図１３】
0006989619.tif 000014
【図１４】
0006989619.tif 000015
【図１５】
0006989619.tif 000016