(57)【要約】本発明は、診断に適した画像を容易に表示することができる診断支援システム、内視鏡システム、プロセッサ、及び診断支援方法を提供することを目的とする。本発明の一の態様に係る診断支援システムによれば、代表画像を選択すると、選択された代表画像に対応する近傍画像のうちいずれかが表示されるので、代表画像がブレ、ボケ等の瞬時的原因により不良な場合に近傍画像を表示させることができる。これにより診断に適した画像を容易に表示することができ、診断、レポート作成等を効率的に行うことができる。また、代表画像及び近傍画像は撮影期間の内に撮影されるので、代表画像と近傍画像とで画像の変化を少なくすることができる。撮影期間の長さは、代表画像と近傍画像との変化が許容範囲になるよう設定することができる。
2019039259.tif 000002
【特許請求の範囲】
【請求項１】
撮影指示に応じて医用画像を撮影する医用画像撮影部と、
前記医用画像撮影部に前記撮影指示を与え、撮影時刻が異なる複数の医用画像を撮影期間の内に撮影させる撮影制御部と、
前記複数の医用画像のうちいずれかを前記撮影期間における代表画像として記憶する代表画像記憶部と、
前記複数の医用画像のうち前記代表画像を除く医用画像を、前記代表画像の近傍画像として前記代表画像と対応させて記憶する近傍画像記憶部と、
前記代表画像を表示装置に一覧表示させる代表画像表示制御部と、
前記一覧表示された前記代表画像に対する選択を受け付ける代表画像選択部と、
前記選択された前記代表画像に対応する前記近傍画像のうちいずれかを、前記表示装置に表示させる近傍画像表示制御部と、
を備える診断支援システム。
【請求項２】
ユーザの指示入力に基づいて撮影タイミングを設定する撮影タイミング設定部を備え、
前記撮影制御部は前記撮影タイミングに従って前記医用画像撮影部に前記撮影指示を与える請求項１に記載の診断支援システム。
【請求項３】
前記医用画像撮影部が撮影した前記医用画像から関心領域を検出する関心領域検出部を備え、
前記撮影制御部は、前記関心領域の検出に応じて前記医用画像撮影部に前記撮影指示を与える請求項１または２に記載の診断支援システム。
【請求項４】
前記代表画像表示制御部は前記関心領域の検出に応じて撮影された前記代表画像を一覧表示する請求項３に記載の診断支援システム。
【請求項５】
ユーザの撮影指示操作を受け付ける撮影指示受付部を備え、
前記撮影制御部は前記撮影指示操作に応じて前記医用画像撮影部に前記撮影指示を与える請求項１から４のいずれか１項に記載の診断支援システム。
【請求項６】
前記近傍画像は、前記代表画像よりも前記撮影時刻が前の画像と、前記代表画像よりも前記撮影時刻が後の画像と、のうち少なくとも一方を含む請求項１から５のいずれか１項に記載の診断支援システム。
【請求項７】
前記表示装置に表示する前記近傍画像を撮影時刻が異なる他の近傍画像に切り替える切替指示を受け付ける切替指示受付部を備え、
前記近傍画像表示制御部は、前記切替指示に応じて、前記表示装置に表示されている近傍画像に代えて前記他の近傍画像を表示させる請求項１から６のいずれか１項に記載の診断支援システム。
【請求項８】
前記近傍画像表示制御部は前記選択された前記代表画像に対応する複数の前記近傍画像を前記表示装置に連続表示させ、前記連続表示の表示停止指示を受け付けた際に表示されている近傍画像を継続して前記表示装置に表示させる請求項１から７のいずれか１項に記載の診断支援システム。
【請求項９】
前記近傍画像を解析して診断用近傍画像を抽出する画像解析部を備え、
前記近傍画像表示制御部は前記診断用近傍画像を前記表示装置に表示させる請求項１から８のいずれか１項に記載の診断支援システム。
【請求項１０】
前記画像解析部は、前記近傍画像における関心領域の存在、前記近傍画像の露出、前記近傍画像のブレの量、前記近傍画像における器具の存在、前記近傍画像における色素剤及び／または染色剤の使用、のうち少なくとも１つに基づいて前記診断用近傍画像を抽出する請求項９に記載の診断支援システム。
【請求項１１】
前記近傍画像表示制御部は、前記近傍画像を前記代表画像と異なる表示態様で表示させる請求項１から１０のいずれか１項に記載の診断支援システム。
【請求項１２】
前記近傍画像表示制御部は、前記近傍画像の表示位置、表示ウインドウ、表示サイズ、のうち少なくとも１つを前記代表画像と変える請求項１１に記載の診断支援システム。
【請求項１３】
前記近傍画像表示制御部は、ユーザ指示に基づいて前記近傍画像の前記表示態様を変更する請求項１１または１２に記載の診断支援システム。
【請求項１４】
前記近傍画像表示制御部は、前記選択された代表画像に代えて、前記選択された代表画像に対応する前記近傍画像のうちいずれかを表示させる請求項１から１３のいずれか１項に記載の診断支援システム。
【請求項１５】
前記代表画像表示制御部は、前記選択された代表画像を他の代表画像と識別表示する請求項１から１４のいずれか１項に記載の診断支援システム。
【請求項１６】
前記代表画像表示制御部は、一の代表画像を選択している状態で他の代表画像が選択された場合は、前記選択の時点で表示されている前記近傍画像の表示を終了し、前記一の代表画像の表示態様を前記一の代表画像が選択されていない状態に復帰させる請求項１から１５のいずれか１項に記載の診断支援システム。
【請求項１７】
前記一覧表示された代表画像と前記表示された前記近傍画像とのうちで指定された画像を保存する指定画像保存部をさらに備える請求項１から１６のいずれか１項に記載の診断支援システム。
【請求項１８】
請求項１から１７のいずれか１項に記載の診断支援システムと、
前記表示装置と、
被検体に挿入される挿入部であって、先端硬質部と、前記先端硬質部の基端側に接続された湾曲部と、前記湾曲部の基端側に接続された軟性部とを有する挿入部と、前記挿入部の基端側に接続された操作部と、を有する内視鏡と、
を備える内視鏡システムであって、
前記医用画像撮影部は、被写体の光学像を結像させる撮影レンズと、前記撮影レンズにより前記光学像が結像する撮像素子と、を備え、
前記撮影レンズは前記先端硬質部に設けられる内視鏡システム。
【請求項１９】
請求項１８に記載の内視鏡システムのプロセッサであって、
前記撮影制御部と、前記代表画像記憶部と、前記近傍画像記憶部と、前記代表画像表示制御部と、前記代表画像選択部と、前記近傍画像表示制御部と、を備えるプロセッサ。
【請求項２０】
撮影指示に応じて医用画像を撮影する医用画像撮影部と、前記撮影した医用画像を表示する表示装置と、を備える診断支援システムによる診断支援方法であって、
撮影装置に撮影指示を与え、撮影時刻が異なる複数の医用画像を撮影期間の内に撮影させる撮影制御工程と、
前記複数の医用画像のうちいずれかを前記撮影期間における代表画像として記憶する代表画像記憶工程と、
前記複数の医用画像のうち前記代表画像を除く画像を、前記代表画像の近傍画像として前記代表画像と対応させて記憶する近傍画像記憶工程と、
前記代表画像を表示装置に一覧表示させる代表画像表示制御工程と、
前記一覧表示された前記代表画像に対する選択を受け付ける代表画像選択工程と、
前記選択された前記代表画像に対応する前記近傍画像のうちいずれかを前記表示装置に表示させる近傍画像表示制御工程と、
を有する診断支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は診断支援システム、内視鏡システム、プロセッサ、及び診断支援方法に係り、特に医用画像の取得及び表示に関する。
【背景技術】
【０００２】
医用機器を用いた診断では、被検体（患者等）の画像を取得し、取得した画像に基づいて診断が行われることがある。このような医用画像を用いた診断では複数の画像を取得及び表示することが多く、したがって診断に適した画像を表示できるシステムが望まれる。【０００３】
医用画像を取得及び表示するシステムについては、例えば特許文献１に、複数のモダリティで取得した画像を一覧表示するとともに、心電図波形について、表示する期間を所見データ及び行動情報に基づいて切り替え、部分画像を表示することが記載されている。具体的には、所見情報が「頻脈」の画像のうち、第ｎ番目の心電図検査画像が表示されている状態でユーザが読影端末のキーボードを操作すると、第（ｎ−１）番目または第（ｎ＋１）番目の「頻脈」の部分画像を表示することが記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１７７５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
医用画像を撮影する際にブレ、ボケ等の瞬時的不良が発生して適切な画像を表示できず、診断に支障をきたす場合がある。このような問題は、診断のために多数の画像を表示する状況において顕著になる。このような問題に関し、上述した特許文献１では心電図波形を表示期間が異なる部分画像に切り替えているが、不適切な波形の画像を適切な波形の画像に切り替えているわけではない。また特許文献１では、ＣＴ（Computed Tomography），ＭＲＩ（Magnetic Resonance Imaging）等の画像についても、不適切な画像があった場合の対応は記載されていない。このように、従来の技術は診断に適した画像を容易に表示できず、このため診断、レポート作成等を効率的に行うことができなかった。【０００６】
本発明はこのような事情に鑑みてなされ、診断に適した画像を容易に表示することができる診断支援システム、内視鏡システム、プロセッサ、及び診断支援方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した目的を達成するため、本発明の第１の態様に係る診断支援システムは、撮影指示に応じて医用画像を撮影する医用画像撮影部と、医用画像撮影部に撮影指示を与え、撮影時刻が異なる複数の医用画像を撮影期間の内に撮影させる撮影制御部と、複数の医用画像のうちいずれかを撮影期間における代表画像として記憶する代表画像記憶部と、複数の医用画像のうち代表画像を除く医用画像を、代表画像の近傍画像として代表画像と対応させて記憶する近傍画像記憶部と、代表画像を表示装置に一覧表示させる代表画像表示制御部と、一覧表示された代表画像に対する選択を受け付ける代表画像選択部と、選択された代表画像に対応する近傍画像のうちいずれかを、表示装置に表示させる近傍画像表示制御部と、を備える。【０００８】
第１の態様によれば、代表画像を選択すると、選択された代表画像に対応する近傍画像のうちいずれかが表示されるので、代表画像がブレ、ボケ等の瞬時的原因により不良な場合に近傍画像を表示させることができる。これにより診断に適した画像を容易に表示することができ、診断、レポート作成等を効率的に行うことができる。また、代表画像及び近傍画像は撮影期間の内に撮影されるので、代表画像と近傍画像とで画像の変化（画像における被写体の位置、向き、露出条件等の変化）を少なくすることができる。撮影期間の長さは、代表画像と近傍画像との変化が許容範囲になるように設定することができる。【０００９】
第１の態様において、代表画像は取得した画像のうちいずれでもよい（複数の画像のうちで撮影時刻が最初、最後、中間等）。また、代表画像は撮影時刻、撮影部位、関心領域、使用器具及び／または器材、使用色素剤及び／または染色剤等を考慮した配置で一覧表示することができる。【００１０】
第１の態様及び以下の各態様において、医用画像は医療画像ともいう。また、医用画像撮影の際に用いる光源は白色帯域の光、白色帯域として複数の波長（狭帯域光）を含む光、赤外光、励起光を発生する光源を用いることができる。また、第１の態様で取得する医用画像は白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像でもよいし、通常光画像に基づいて取得した、特定の波長帯域の情報を有する特殊光画像でもよい。【００１１】
第２の態様に係る診断支援システムは第１の態様において、ユーザの指示入力に基づいて撮影タイミングを設定する撮影タイミング設定部を備え、撮影制御部は撮影タイミングに従って医用画像撮影部に撮影指示を与える。第２の態様によれば、ユーザは自ら設定した所望の撮影タイミングで自動的に撮影を行って画像を取得することができる。撮影タイミングは、例えば撮影開始／終了時刻、撮影時間間隔等を設定することができる。【００１２】
第３の態様に係る診断支援システムは第１または第２の態様において、医用画像撮影部が撮影した医用画像から関心領域を検出する関心領域検出部を備え、撮影制御部は、関心領域の検出に応じて医用画像撮影部に撮影指示を与える。第３の態様によれば、関心領域（ＲＯＩ：Region Of Interest）の検出に応じて自動的に撮影を行って画像を取得することができる。なお「医用画像撮影部が撮影した医用画像から関心領域を検出する」とは、例えば連続的に取得しているライブビュー画像を構成するフレーム画像から関心領域を検出することにより行うことができる。関心領域の抽出は機械学習の結果を用いて行ってもよい。また第３の態様において、例えば病変部分、病変候補部分等を関心領域として設定することができる。【００１３】
第４の態様に係る診断支援システムは第３の態様において、代表画像表示制御部は、関心領域の検出に応じて撮影された代表画像を一覧表示する。第４の態様によれば、関心領域を撮影した代表画像を一覧表示することができ、診断に適した画像を容易に表示することができる。【００１４】
第５の態様に係る診断支援システムは第１から第４の態様のいずれか１つにおいて、ユーザの撮影指示操作を受け付ける撮影指示受付部を備え、撮影制御部は撮影指示操作に応じて医用画像撮影部に撮影指示を与える。第５の態様によれば、ユーザ（医師等）は所望のタイミングで画像を取得することができる。【００１５】
第６の態様に係る診断支援システムは第１から第５の態様のいずれか１つにおいて、近傍画像は、代表画像よりも撮影時刻が前の画像と、代表画像よりも撮影時刻が後の画像と、のうち少なくとも一方を含む。近傍画像の撮影時刻が代表画像より前の場合、近傍画像は代表画像に対し過去の画像である。一方、近傍画像の撮影時刻が代表画像より後の場合、近傍画像は代表画像に対し未来の画像である。なお近傍画像は代表画像よりも撮影時刻が前の画像と代表画像よりも撮影時刻が後の画像との両方を含んでいてもよい。【００１６】
第７の態様に係る診断支援システムは第１から第６の態様のいずれか１つにおいて、表示装置に表示する近傍画像を撮影時刻が異なる他の近傍画像に切り替える切替指示を受け付ける切替指示受付部を備え、近傍画像表示制御部は、切替指示に応じて、表示装置に表示されている近傍画像に代えて他の近傍画像を表示させる。第７の態様によれば、表示装置に表示する近傍画像を撮影時刻が異なる他の近傍画像に切り替えて表示するので、表示した近傍画像が不適切な場合でも、そのような不適切な近傍画像に代えて適切な近傍画像を表示させることが容易である。【００１７】
第８の態様に係る診断支援システムは第１から第７の態様のいずれか１つにおいて、近傍画像表示制御部は選択された代表画像に対応する複数の近傍画像を表示装置に連続表示させ、連続表示の表示停止指示を受け付けた際に表示されている近傍画像を継続して表示装置に表示させる。第８の態様において連続表示（順次表示）の表示停止指示はユーザ操作に基づいて行うことができ、これによりユーザは複数の近傍画像のうちから所望の近傍画像を表示させることができる。【００１８】
第９の態様に係る診断支援システムは第１から第８の態様のいずれか１つにおいて、近傍画像を解析して診断用近傍画像を抽出する画像解析部を備え、近傍画像表示制御部は診断用近傍画像を表示装置に表示させる。第９の態様によれば、ユーザは診断用近傍画像を表示させて効率的に診断を行うことができる。【００１９】
第１０の態様に係る診断支援システムは第９の態様において、画像解析部は、近傍画像における関心領域の存在、近傍画像の露出、近傍画像のブレの量、近傍画像における器具の存在、近傍画像における色素剤及び／または染色剤の使用、のうち少なくとも１つに基づいて診断用近傍画像を抽出する。第１０の態様は診断用近傍画像の抽出を具体的に規定する。なお、色素剤、染色剤とはコントラスト法、染色法等により病変等の被写体を着色して観察するための薬剤であり、器具とは被写体の観察、処置、生検等を行うための器具（鉗子等）である。【００２０】
第１１の態様に係る診断支援システムは第１から第１０の態様のいずれか１つにおいて、近傍画像表示制御部は、近傍画像を代表画像と異なる表示態様で表示させる。第１１の態様によれば、ユーザは近傍画像が表示されていることを容易に認識することができる。【００２１】
第１２の態様に係る診断支援システムは第１１の態様において、近傍画像表示制御部は、近傍画像の表示位置、表示ウインドウ、表示サイズ、のうち少なくとも１つを代表画像と変える。第１２の態様は第１１の態様における代表画像と近傍画像との表示態様の相違を具体的に規定する。【００２２】
第１３の態様に係る診断支援システムは第１１または第１２の態様において、近傍画像表示制御部は、ユーザ指示に基づいて近傍画像の表示態様を変更する。第１３の態様によれば、ユーザは所望の表示態様で近傍画像を表示させることができる。【００２３】
第１４の態様に係る診断支援システムは第１から第１３の態様のいずれか１つにおいて、近傍画像表示制御部は、選択された代表画像に代えて、選択された代表画像に対応する近傍画像のうちいずれかを表示させる。【００２４】
第１５の態様に係る診断支援システムは第１から第１４の態様のいずれか１つにおいて、代表画像表示制御部は、選択された代表画像を他の代表画像と識別表示する。第１５の態様によれば、いずれの代表画像に対し近傍画像が表示されているのかを容易に認識することができる。【００２５】
第１６の態様に係る診断支援システムは第１から第１５の態様のいずれか１つにおいて、代表画像表示制御部は、一の代表画像を選択している状態で他の代表画像が選択された場合は、選択の時点で表示されている近傍画像の表示を終了し、一の代表画像の表示態様を一の代表画像が選択されていない状態に復帰させる。【００２６】
第１７の態様に係る診断支援システムは第１から第１６の態様のいずれか１つにおいて、一覧表示された代表画像と表示された近傍画像とのうちで指定された画像を保存する指定画像保存部をさらに備える。第１７の態様によればユーザは指定した画像を保存できるので、診断、レポート作成等を効率的に行うことができる。【００２７】
上述した目的を達成するため、本発明の第１８の態様に係る内視鏡システムは第１から第１７の態様のいずれか１つに係る診断支援システムと、表示装置と、被検体に挿入される挿入部であって、先端硬質部と、先端硬質部の基端側に接続された湾曲部と、湾曲部の基端側に接続された軟性部とを有する挿入部と、挿入部の基端側に接続された操作部と、を有する内視鏡と、を備える内視鏡システムであって、医用画像撮影部は、被写体の光学像を結像させる撮影レンズと、撮影レンズにより光学像が結像する撮像素子と、を備え、撮影レンズは先端硬質部に設けられる。第１８の態様に係る内視鏡システムは、第１から第１７の態様のいずれか１つに係る診断支援システムを備えることにより、内視鏡で取得した画像に基づいて診断に適した画像を容易に表示することができ、これにより診断、レポート作成等を効率的に行うことができる。【００２８】
上述した目的を達成するため、本発明の第１９の態様に係るプロセッサは、第１８の態様に係る内視鏡システムのプロセッサであって、撮影制御部と、代表画像記憶部と、近傍画像記憶部と、代表画像表示制御部と、代表画像選択部と、近傍画像表示制御部と、を備える。第１９の態様によれば、第１８の態様に係る内視鏡システムにおいて診断に適した画像を表示するための処理を実行することができる。【００２９】
上述した目的を達成するため、本発明の第２０の態様に係る診断支援方法は撮影指示に応じて医用画像を撮影する医用画像撮影部と、撮影した医用画像を表示する表示装置と、を備える診断支援システムによる診断支援方法であって、撮影装置に撮影指示を与え、撮影時刻が異なる複数の医用画像を撮影期間の内に撮影させる撮影制御工程と、複数の医用画像のうちいずれかを撮影期間における代表画像として記憶する代表画像記憶工程と、複数の医用画像のうち代表画像を除く画像を、代表画像の近傍画像として代表画像と対応させて記憶する近傍画像記憶工程と、代表画像を表示装置に一覧表示させる代表画像表示制御工程と、一覧表示された代表画像に対する選択を受け付ける代表画像選択工程と、選択された代表画像に対応する近傍画像のうちいずれかを表示装置に表示させる近傍画像表示制御工程と、を有する。第２０の態様によれば、第１の態様と同様に診断に適した画像を容易に表示することができ、これにより診断、レポート作成等を効率的に行うことができる。なお、第２０の態様の構成に対し第２から第１７の態様と同様の構成をさらに有する診断支援方法、及びこれら態様の診断支援方法を診断支援システムに実行させるプログラムのコンピュータ読み取り可能なコードを記録した記録媒体も本発明の態様として挙げることができる。
【発明の効果】
【００３０】
以上説明したように、本発明の診断支援システム、内視鏡システム、プロセッサ、及び診断支援方法によれば、診断に適した画像を容易に表示することができる。
【図面の簡単な説明】
【００３１】
【図１】図１は、本発明の一実施形態に係る内視鏡システムの外観図である。
【図２】図２は、内視鏡システムの構成を示すブロック図である。
【図３】図３は、内視鏡の先端硬質部の構成を示す図である。
【図４】図４は、画像処理部の機能構成を示す図である。
【図５】図５は、記憶部に記憶される情報を示す図である。
【図６】図６は、代表画像と近傍画像の対応付けの様子を示す図である。
【図７】図７は、診断支援方法の処理を示すフローチャートである。
【図８】図８は、診断支援方法の処理を示す他のフローチャートである。
【図９】図９は、撮影条件設定画面の例を示す図である。
【図１０】図１０は、撮影条件設定画面の他の例を示す図である。
【図１１】図１１は、表示条件設定画面の例を示す図である。
【図１２】図１２は、代表画像及び近傍画像の記憶の例を示す図である。
【図１３】図１３は、代表画像及び近傍画像の記憶の他の例を示す図である。
【図１４】図１４は、代表画像及び近傍画像の表示例を示す図である。
【図１５】図１５は、代表画像及び近傍画像の他の表示例を示す図である。
【図１６】図１６は、代表画像及び近傍画像のさらに他の表示例を示す図である。
【図１７】図１７は、近傍画像の動画表示の様子を示す図である。
【図１８】図１８は、近傍画像の動画表示の処理を示すフローチャートである。
【図１９】図１９は、選択した代表画像の識別表示の例を示す図である。
【図２０】図２０は、指定画像の保存の様子を示す図である。
【図２１】図２１は、関心領域の検出に応じた自動撮影の処理を示すフローチャートである。
【図２２】図２２は、関心領域の検出に応じて撮影された画像及び器具の検出に応じて撮影された画像の例を示す図である。
【図２３】図２３は、診断用近傍画像の抽出処理を示すフローチャートである。
【図２４】図２４は、診断用近傍画像の抽出の例を示す図である。
【発明を実施するための形態】
【００３２】
以下、添付図面を参照しつつ、本発明に係る診断支援システム、内視鏡システム、プロセッサ、及び診断支援方法の実施形態について、詳細に説明する。
【００３３】
＜第１の実施形態＞
図１は、第１の実施形態に係る内視鏡システム１０（診断支援システム、診断支援装置、内視鏡システム、プロセッサ、医療画像処理装置）を示す外観図であり、図２は内視鏡システム１０の要部構成を示すブロック図である。図１，２に示すように、内視鏡システム１０は、内視鏡本体１００（内視鏡）、プロセッサ２００（プロセッサ、医療画像処理装置）、光源装置３００、及びモニタ４００（表示装置）から構成される。
【００３４】
＜内視鏡本体の構成＞
内視鏡本体１００は、手元操作部１０２（操作部）と、この手元操作部１０２に連設される挿入部１０４（挿入部）とを備える。術者（ユーザ）は手元操作部１０２を把持して操作し、挿入部１０４を被検体（生体）の体内に挿入して観察する。また、手元操作部１０２には送気送水ボタンＢＴ１、吸引ボタンＢＴ２、及び各種の機能を割り付けられる機能ボタンＢＴ３、及び撮影指示操作を受け付ける撮影ボタンＢＴ４が設けられている。挿入部１０４は、手元操作部１０２側から順に、軟性部１１２（軟性部）、湾曲部１１４（湾曲部）、先端硬質部１１６（先端硬質部）で構成されている。すなわち、先端硬質部１１６の基端側に湾曲部１１４が接続され、湾曲部１１４の基端側に軟性部１１２が接続される。挿入部１０４の基端側に手元操作部１０２が接続される。ユーザは、手元操作部１０２を操作することにより湾曲部１１４を湾曲させて先端硬質部１１６の向きを上下左右に変えることができる。先端硬質部１１６には、撮影光学系１３０（医用画像撮影部、撮影装置、医療画像取得部）、照明部１２３、鉗子口１２６等が設けられる（図１〜図３参照）。
【００３５】
観察、処置の際には、操作部２０８（図２参照）の操作により、照明部１２３の照明用レンズ１２３Ａ，１２３Ｂから可視光と赤外光のいずれか、または両方を照射することができる。また、送気送水ボタンＢＴ１の操作により図示せぬ送水ノズルから洗浄水が放出されて、撮影光学系１３０の撮影レンズ１３２（撮影レンズ）、及び照明用レンズ１２３Ａ，１２３Ｂを洗浄することができる。先端硬質部１１６で開口する鉗子口１２６には不図示の管路が連通しており、この管路に腫瘍摘出等のための図示せぬ処置具が挿通されて、適宜進退して被検体に必要な処置を施せるようになっている。
【００３６】
図１〜図３に示すように、先端硬質部１１６の先端側端面１１６Ａには撮影レンズ１３２が配設されている。撮影レンズ１３２の奥にはＣＭＯＳ（Complementary Metal-Oxide Semiconductor）型の撮像素子１３４（撮像素子、撮影装置、医療画像取得部）、駆動回路１３６、ＡＦＥ１３８（ＡＦＥ：Analog Front End）が配設されて、これらの要素により画像信号を出力する。撮像素子１３４はカラー撮像素子であり、特定のパターン配列（ベイヤー配列、Ｘ−Ｔｒａｎｓ（登録商標）配列、ハニカム配列等）でマトリクス状に配置（２次元配列）された複数の受光素子により構成される複数の画素を備える。撮像素子１３４の各画素はマイクロレンズ、赤（Ｒ）、緑（Ｇ）、または青（Ｂ）のカラーフィルタ及び光電変換部（フォトダイオード等）を含んでいる。撮影光学系１３０は、赤，緑，青の３色の画素信号からカラー画像を生成することもできるし、赤，緑，青のうち任意の１色または２色の画素信号から画像を生成することもできる。なお、第１の実施形態では撮像素子１３４がＣＭＯＳ型の撮像素子である場合について説明するが、撮像素子１３４はＣＣＤ（Charge Coupled Device）型でもよい。
【００３７】
被検体（腫瘍部、病変部）の光学像は撮影レンズ１３２により撮像素子１３４の受光面（撮像面）に結像されて電気信号に変換され、不図示の信号ケーブルを介してプロセッサ２００に出力されて映像信号に変換される。これにより、プロセッサ２００に接続されたモニタ４００に観察画像（代表画像、近傍画像）が表示される。
【００３８】
また、先端硬質部１１６の先端側端面１１６Ａには、撮影レンズ１３２に隣接して照明部１２３の照明用レンズ１２３Ａ（可視光用）、１２３Ｂ（赤外光用）が設けられている。照明用レンズ１２３Ａ，１２３Ｂの奥には、後述するライトガイド１７０の射出端が配設され、このライトガイド１７０が挿入部１０４、手元操作部１０２、及びユニバーサルケーブル１０６に挿通され、ライトガイド１７０の入射端がライトガイドコネクタ１０８内に配置される。
【００３９】
＜光源装置の構成＞
図２に示すように、光源装置３００は、照明用の光源３１０、絞り３３０、集光レンズ３４０、及び光源制御部３５０等から構成されており、照明光（可視光または赤外光）をライトガイド１７０に入射させる。光源３１０は、可視光源３１０Ａ及び赤外光源３１０Ｂを備えており、可視光及び赤外光の一方または両方を照射可能である。可視光源３１０Ａ及び赤外光源３１０Ｂによる照明光の照度は光源制御部３５０により制御され、必要に応じて照明光の照度を下げたり、照明を停止したりすることができる。
【００４０】
＜光源の波長帯域＞
光源３１０（可視光源３１０Ａ）は白色帯域の光、または白色帯域の光として複数の波長帯域の光を発生する光源でもよいし、白色の波長帯域よりも狭い特定の波長帯域の光を発生する光源でもよい。特定の波長帯域は、可視域の青色帯域もしくは緑色帯域、あるいは可視域の赤色帯域であってもよい。特定の波長帯域が可視域の青色帯域もしくは緑色帯域である場合、３９０ｎｍ以上４５０ｎｍ以下、または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有していてもよい。また、特定の波長帯域が可視域の赤色帯域である場合、５８５ｎｍ以上６１５ｎｍ以下、または６１０ｎｍ以上７３０ｎｍ以下、の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有していてもよい。
【００４１】
上述した特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有していてもよい。この場合、特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域を含み、かつ、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有していてもよい。
【００４２】
また、光源３１０（赤外光源３１０Ｂ）が発生する光は７９０ｎｍ以上８２０ｎｍ以下、または９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有していてもよい。
【００４３】
また、光源３１０は、ピークが３９０ｎｍ以上４７０ｎｍ以下である励起光を照射する光源を備えていてもよい。この場合、被検体（生体）内の蛍光物質が発する蛍光の情報を有する医用画像（生体内画像）を取得することができる。
【００４４】
光源３１０の光源種類（レーザ光源、キセノン光源、ＬＥＤ光源（ＬＥＤ：Light-Emitting Diode）等）、波長、フィルタの有無等は被写体の種類、観察の目的等に応じて構成することが好ましく、また観察の際は被写体の種類、観察の目的等に応じて照明光の波長を組合せ及び／または切り替えることが好ましい。波長を切り替える場合、例えば光源の前方に配置され特定波長の光を透過または遮光するフィルタが設けられた円板状のフィルタ（ロータリカラーフィルタ）を回転させることにより、照射する光の波長を切り替えてもよい。
【００４５】
また、本発明を実施する際に用いる撮像素子は撮像素子１３４のように各画素に対しカラーフィルタが配設されたカラー撮像素子に限定されず、モノクロ撮像素子でもよい。モノクロ撮像素子を用いる場合、照明光の波長を順次切り替えて面順次（色順次）で撮像することができる。例えば出射する照明光の波長を（紫色、青色、緑色、赤色）の間で順次切り替えてもよいし、広帯域光（白色光）を照射してロータリカラーフィルタ（赤色、緑色、青色等）により出射する照明光の波長を切り替えてもよい。また、１または複数の狭帯域光（緑色、青色等）を照射してロータリカラーフィルタ（緑色、青色等）により出射する照明光の波長を切り替えてもよい。狭帯域光は波長の異なる２波長以上の赤外光でもよい。
【００４６】
ライトガイドコネクタ１０８（図１参照）を光源装置３００に連結することにより、光源装置３００から照射された照明光がライトガイド１７０を介して照明用レンズ１２３Ａ、１２３Ｂに伝送され、照明用レンズ１２３Ａ、１２３Ｂから観察範囲に照射される。
【００４７】
＜プロセッサの構成＞
図２に基づきプロセッサ２００の構成を説明する。プロセッサ２００は、内視鏡本体１００から出力される画像信号を画像入力コントローラ２０２及び画像入力インタフェース２０５を介して入力し、画像処理部２０４で必要な画像処理を行ってビデオ出力部２０６を介して出力する。これによりモニタ４００（表示装置）に観察画像（代表画像、近傍画像等の生体内画像）が表示される。これらの処理はＣＰＵ２１０（ＣＰＵ：Central Processing Unit）の制御下で行われる。すなわち、ＣＰＵ２１０は医用画像撮影部、撮影制御部、代表画像記憶部、近傍画像記憶部、代表画像表示制御部、代表画像選択部、近傍画像表示制御部、撮影タイミング設定部、関心領域検出部、撮影指示受付部、切替指示受付部、画像解析部、指定画像保存部としての機能を有する。画像処理部２０４では、詳細を後述するように、代表画像及び／または近傍画像の設定、記憶、表示の切り替え等を行う。記憶部２０７（代表画像記憶部、近傍画像記憶部）には、被写体の画像（代表画像、近傍画像等）が記憶される。音声処理部２０９は、ＣＰＵ２１０及び画像処理部２０４の制御により、表示条件設定の際の警告メッセージ（音声）等をスピーカ２０９Ａから出力する。
【００４８】
また、ＲＯＭ２１１（ＲＯＭ：Read Only Memory）は不揮発性の記憶素子（非一時的記録媒体）であり、本発明に係る診断支援方法をＣＰＵ２１０及び／または画像処理部２０４に実行させるプログラムのコンピュータ読み取り可能なコードが記憶されている。ＲＡＭ２１２（ＲＡＭ：Random Access Memory）は各種処理の際の一時記憶用の記憶素子であり、また近傍画像取得時のバッファとしても使用することができる。
【００４９】
＜画像処理部の機能＞
図４は画像処理部２０４（医療画像取得部、医療画像解析処理部、医療画像解析結果取得部）の機能構成を示す図である。画像処理部２０４は撮影タイミング設定部２０４Ａ、撮影指示受付部２０４Ｂ、撮影制御部２０４Ｃ、代表画像記憶部２０４Ｄ、近傍画像記憶部２０４Ｅ、代表画像表示制御部２０４Ｆ、代表画像選択部２０４Ｇ、近傍画像表示制御部２０４Ｈ、関心領域検出部２０４Ｉ、切替指示受付部２０４Ｊ、画像解析部２０４Ｋ、指定画像保存部２０４Ｌを有する。撮影制御部２０４Ｃは医療画像取得部としても動作し、関心領域検出部２０４Ｉ及び画像解析部２０４Ｋは医療画像解析処理部としても動作する。
【００５０】
また、画像処理部２０４は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の情報を有する特殊光画像を取得する特殊光画像取得部を備えていてもよい。この場合、特定の波長帯域の信号は、通常光画像に含まれるＲＧＢ（Ｒ：赤、Ｇ：緑、Ｂ：青）あるいはＣＭＹ（Ｃ：シアン、Ｍ：マゼンタ、Ｙ：イエロー）の色情報に基づく演算により得ることができる。
【００５１】
また、画像処理部２０４は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、医用画像（医療画像）としての特徴量画像を取得及び表示してもよい。
【００５２】
画像処理部２０４のこれらの機能による処理については、詳細を後述する。なお、これらの機能による処理はＣＰＵ２１０の制御下で行われる。
【００５３】
上述した画像処理部２０４の機能は、各種のプロセッサ（processor）を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）が含まれる。
また、上述した各種のプロセッサには、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。さらに、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。
【００５４】
各部の機能は１つのプロセッサにより実現されてもよいし、複数のプロセッサを組み合わせて実現されてもよい。また、複数の機能を１つのプロセッサで実現してもよい。複数の機能を１つのプロセッサで構成する例としては、第１に、クライアント、サーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能として実現する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、システム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各部の機能は、ハードウェア的な構造として、上述した各種のプロセッサを１つ以上用いて構成される。
【００５５】
さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）である。
【００５６】
上述したプロセッサ（あるいは電気回路）がソフトウェア（プログラム）を実行する際は、実行するソフトウェア（本発明に係る診断支援方法を実行するプログラムを含む）のコンピュータ読み取り可能なコードをＲＯＭ２１１（図２を参照）等の非一時的記録媒体に記憶しておき、プロセッサがそのソフトウェアを参照する。ソフトウェアを用いた処理の際には例えばＲＡＭ２１２（図２を参照）が一時的記憶領域として用いられ、また例えばＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）に記憶されたデータが参照される。なお、図４ではＥＥＰＲＯＭ等のデバイスの図示は省略する。
【００５７】
＜操作部の構成＞
プロセッサ２００は操作部２０８を備えている。操作部２０８は図示せぬ操作モード設定スイッチ等を備えており、可視光及び／または赤外光の照射を操作することができる。また、操作部２０８は図示せぬキーボード及びマウスを含み、ユーザはこれらデバイスを介して代表画像及び／または近傍画像の選択、切替操作等を行うことができる。操作部２０８による撮影条件及び表示条件の設定については詳細を後述する（図９〜１１を参照）。なお、操作モードの設定は、上述のように手元操作部１０２の機能ボタンＢＴ３（図１参照）に操作モード設定機能を割り付けて行ってもよい。
【００５８】
＜記憶部の構成＞
記憶部２０７（代表画像記憶部、近傍画像記憶部、指定画像保存部、記録装置）はＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ハードディスク（Hard Disk）、各種半導体メモリ等の非一時的記録媒体により構成され、図５に示す画像及び情報を互いに関連づけて記憶する。図５に示すように、記憶部２０７には代表画像２０７Ａ、近傍画像２０７Ｂ（診断用近傍画像を含む）、指定画像２０７Ｃが記憶される。代表画像２０７Ａ（代表画像）と近傍画像２０７Ｂ（近傍画像）とは、例えば図６に示すように対応させて記録される。図６において、「ｉ１０１」等は画像の識別情報である。指定画像２０７Ｃ（指定画像）は、代表画像２０７Ａ及び近傍画像２０７Ｂのうちから指定された画像である（図２０を参照）。これらの画像は、操作部２０８を介した操作、ＣＰＵ２１０及び／または画像処理部２０４の制御によりモニタ４００に表示される。
【００５９】
上述した画像の他に、医用画像（医療画像）に含まれる注目すべき領域である注目領域（関心領域）と、注目すべき態様の有無のいずれか、もしくは両方と、についての解析結果を記憶部２０７（記録装置）に記憶してもよい。この場合、画像処理部２０４（医療画像解析処理部、医療画像解析結果取得部）がそれら解析結果を記憶部２０７から取得してモニタ４００に表示することができる。
【００６０】
＜表示装置の構成＞
モニタ４００（表示装置）は、操作部２０８を介した操作、ＣＰＵ２１０及び／または画像処理部２０４の制御により代表画像、近傍画像、撮影条件設定画面、表示条件設定画面等を表示する（図９〜１１等を参照）。また、モニタ４００撮影条件設定操作及び／または表示条件設定操作を行うためのタッチパネルを有する。
【００６１】
＜診断支援方法の処理＞
内視鏡システム１０を用いた被検体の診断支援方法について説明する。図７，８は第１の実施形態に係る診断支援方法の処理を示すフローチャートである。
【００６２】
＜撮影条件の設定＞
図７，８のフローチャートでは、撮影に先立って、ユーザ指示に基づいて撮影条件及び表示条件の設定を行う（ステップＳ１００，Ｓ１０２）。ただしこの設定は撮影中、あるいは撮影後に行ってもよい。図９は撮影条件設定画面の例を示す図である。図９では、撮影条件の各項目について条件名（領域Ｃ０１〜Ｃ１０）、設定条件の内容（領域Ｖ０１〜Ｖ１０）、及びプルダウン用のボタン（ボタンＡ０１〜Ａ１０）が示されている。画面下部に設けられたボタンＢ０１は表示条件確定用、ボタンＢ０２は条件変更のキャンセル用、ボタンＢ０３は初期設定に戻すためのボタンである。図９の画面はモニタ４００に表示され、モニタ４００のタッチパネル及び／または操作部２０８の図示せぬキーボード及びマウスを介したユーザの操作により表示条件を設定することができる。
【００６３】
領域Ｃ０１，Ｖ０１は１回の撮影で取得する画像の数を示しており、ボタンＡ０１を介した選択操作により取得する画像の数を指定することができる。領域Ｃ０２，Ｖ０２は撮影期間を示しており、ボタンＡ０２を介した操作により、撮影期間を指定することができる。領域Ｃ０２等で指定した撮影期間において、領域Ｃ０１等で指定した数の画像が取得される。領域Ｃ０３，Ｖ０３は「１回の撮影で取得した画像のうち、何枚目を代表画像とするか」を示しており、ボタンＡ０３を介した操作により具体的な数値（１枚目、５枚目、１０枚目等）を選択することができる。
【００６４】
図１０は代表画像の番号を設定する画面の例を示す図であり、図９の画面でモニタ４００に備えられたタッチパネルの操作、あるいは操作部２０８を介した操作等（他の項目についても同様）によりボタンＡ０３を指定すると領域Ｖ０３がプルダウン表示の状態になり図１０の状態に遷移する。なお、図１０において代表画像の番号以外の項目については図示を省略している。図１０では、代表画像の番号として設定可能な値が領域Ｖ０３に表示され（この場合１から１０までであるが、一部の値のみ設定可能にすることができる）、値を設定するにはユーザはボタンＡ０３ａ，Ａ０３ｂ、及びスライドバーＡ０３ｃで選択範囲を上下に移動させて数値を選択し、ボタンＢ０１（ＯＫボタン）を指定すればよい。図１０の状態でボタンＢ０１を指定すると、代表画像は「１枚目」となる。
【００６５】
図９の領域Ｃ０４，Ｖ０４は「撮影した画像から関心領域を自動的に検出するか否か」を示しており、ボタンＡ０４を介した選択操作によりＯＮ（自動検出する）またはＯＮ（自動検出する）を選択することができる。ＯＮが選択された場合、画像処理部２０４（関心領域検出部２０４Ｉ）により関心領域（病変領域、病変候補領域等；注目領域ともいう）が検出される。また、領域Ｃ０５，Ｖ０５は「関心領域が検出された場合に、自動的に撮影を行うか否か」を示しており、ボタンＡ０５を介した選択操作によりＯＮ（自動撮影する）またはＯＦＦ（自動撮影しない）を選択することができる。ＯＮが選択された場合、関心領域検出部２０４Ｉによる関心領域の検出に応じて、画像処理部２０４（撮影制御部２０４Ｃ）が撮影光学系１３０を制御して撮影が行われる。
【００６６】
領域Ｃ０６，Ｖ０６は「撮影した画像から器具等を自動的に検出するか否か」を示しており、ボタンＡ０６を介した選択操作によりＯＮ（自動検出する）またはＯＦＦ（自動検出しない）を選択することができる。「器具等」は被検体に対して生検、切除等を行うための処置具（例えば鉗子、注射針、クリップ、チューブ等）を含み、鉗子口１２６から被検体内に挿入できる。また、領域Ｃ０７，Ｖ０７は「器具等が検出された場合に、自動的に撮影を行うか否か」を示しており、ボタンＡ０７を介した選択操作によりＯＮ（自動撮影する）またはＯＦＦ（自動撮影しない）を選択することができる。ＯＮが選択された場合、画像解析部２０４Ｋによる器具等の検出に応じて、画像処理部２０４（撮影制御部２０４Ｃ）が撮影光学系１３０を制御して撮影が行われる。
【００６７】
領域Ｃ０６，Ｖ０６と同様に、領域Ｃ０８，Ｖ０８は「撮影した画像から色素剤等を自動的に検出するか否か」を示しており、ボタンＡ０８を介した選択操作によりＯＮ（自動検出する）またはＯＮ（自動検出する）を選択することができる。「色素剤等」とは、病変の形状、凹凸等を観察するための、色素剤及び染色剤を含む薬剤を意味する。また、領域Ｃ０９，Ｖ０９は「色素剤等が検出された場合に、自動的に撮影を行うか否か」を示しており、ボタンＡ０９を介した選択操作によりＯＮ（自動撮影する）またはＯＦＦ（自動撮影しない）を選択することができる。ＯＮが選択された場合、画像解析部２０４Ｋによる色素剤等の検出に応じて、画像処理部２０４（撮影制御部２０４Ｃ）が撮影光学系１３０を制御して撮影が行われる。
【００６８】
領域Ｃ１０，Ｖ１０は「診断用近傍画像の自動抽出を行うか否か」を示しており、ボタンＡ１０を介した選択操作によりＯＮ（自動検出する）またはＯＦＦ（自動検出しない）を選択することができる。「診断用近傍画像」とは近傍画像のうち診断に適した画像を意味し、露出、ブレ、関心領域の存在、器具等及び／または色素等の使用のうち少なくとも１つに基づいて抽出される。ＯＮが選択された場合、画像解析部２０４Ｋによる近傍画像の解析結果に基づいて診断用近傍画像が抽出される。抽出条件は、領域Ｃ１０ａ，Ｖ１０ａ，ボタンＡ１０ａを介した操作により設定される。
【００６９】
なお、図９，１０における条件設定は一例であり、条件の追加または削除、内容（数値等）の変更を行ってもよい。例えば、ユーザの指示入力に基づいて撮影タイミング（一定の間隔で撮影するインターバル撮影のＯＮまたはＯＦＦ，及びインターバル撮影を行う場合の撮影間隔により決定される撮影タイミング）を設定する領域を設けることができる。この場合、設定した条件に基づいて撮影タイミング設定部２０４Ａ（撮影タイミング設定部）が撮影タイミングを設定し、設定された撮影タイミングに従って撮影制御部２０４Ｃ（撮影制御部）が撮影光学系１３０（医用画像撮影部）に撮影指示を与えて撮影を行うことができる。
【００７０】
＜表示条件の設定＞
図１１は代表画像及び近傍画像の表示条件設定画面の例を示す図である。領域Ｃ１１，Ｖ１１は選択された代表画像に対する識別表示の態様を示しており、ボタンＡ１１を介した選択操作により丸印でマーキング、枠線追加、選択した画像以外をグレーアウトする等を指定することができる（図１４〜１８を参照）。領域Ｃ１２，Ｖ１２は「選択された代表画像に対応する近傍画像を動画表示するか否か」（図１７参照）を示しており、ボタンＡ１２を介した選択操作によりＯＮまたはＯＦＦを指定することができる。領域Ｃ１３，Ｖ１３は「いずれかの近傍画像が選択された場合に、選択された近傍画像により代表画像を差し替えるか否か」を示しており、ボタンＡ１３を介した選択操作によりＯＮまたはＯＦＦを指定することができる。領域Ｃ１４，Ｖ１４は「代表画像が近傍画像により差し替えられた場合に、差し替えられた近傍画像を識別表示するか否か」（図１４の（ｃ）部分を参照）を示しており、ボタンＡ１４を介した選択操作によりＯＮまたはＯＦＦを指定することができる。領域Ｃ１５，Ｖ１５は代表画像を選択した場合の近傍画像の表示態様を示しており、ボタンＡ１５を介した選択操作により「同一ウインドウ（代表画像と同じウインドウ）」（図１４の（ｂ）部分を参照）、「別ウインドウ」等（図１６，１７を参照）を指定することができる。
【００７１】
ステップＳ１００，Ｓ１０２で撮影条件及び表示条件の設定が終了し、内視鏡本体１００の挿入部１０４が被検体内に挿入されると、撮影光学系１３０及び画像処理部２０４（撮影制御部２０４Ｃ）によりライブビュー画像の取得及びモニタ４００への表示が開始される（ステップＳ１０４）。これによりユーザは被検体内の様子を観察することができる。ユーザが挿入部１０４の挿入操作及び湾曲操作により先端硬質部１１６を所望の方向に向け、撮影ボタンＢＴ４を操作すると撮影指示受付部２０４Ｂ（撮影指示受付部）が撮影指示操作を受け付ける。これによりステップＳ１０６での判断（撮影指示の有無）が肯定されてステップＳ１０８（撮影制御工程）へ進み、撮影光学系１３０（医用画像撮影部、撮影装置、医療画像取得部）及び撮影制御部２０４Ｃ（撮影制御部、医療画像取得部）により複数の医用画像（医療画像）が取得される。また、撮影ボタンＢＴ４の操作がない場合でも、関心領域検出、色素剤検出等による自動撮影（図９参照）がＯＮの場合、設定条件が満たされると撮影制御部２０４Ｃにより撮影指示がなされて（ステップＳ１０６でＹＥＳ）複数の医用画像が撮影される（ステップＳ１０８）。
【００７２】
ステップＳ１０８で複数の医用画像が取得されたら、取得された医用画像のうちいずれかを代表画像記憶部２０４Ｄ（代表画像記憶部）により撮影期間における代表画像（代表画像２０７Ａ）に設定して、記憶部２０７に記憶する（ステップＳ１１０：代表画像記憶工程）。また、取得された医用画像のうち代表画像以外の画像を近傍画像記憶部２０４Ｅ（近傍画像記憶部）により近傍画像（近傍画像２０７Ｂ）に設定して、代表画像と対応させて記憶部２０７に記憶する（ステップＳ１１２：近傍画像記憶工程）。
【００７３】
＜代表画像及び近傍画像の記憶＞
図１２は代表画像及び近傍画像の記憶の例を示す図である。ここでは、図１２の（ａ）部分に示すように撮影期間Ｔ１において１０枚の画像（画像ｉ１〜ｉ１０）が取得（撮影間隔：Δｔ）されたものとする。この場合、図１２の（ｂ）部分に示すように撮影期間Ｔ１の最初に撮影した画像ｉ１を代表画像とし残りの画像（画像ｉ２〜ｉ１０）を近傍画像としてもよいし、図１２の（ｃ）部分に示すように撮影期間Ｔ１の中間で撮影した画像ｉ６を代表画像とし残りの画像（画像ｉ１〜ｉ５及び画像ｉ７〜ｉ１０）を近傍画像としてもよい。また、図１２の（ｄ）部分に示すように、撮影期間Ｔ１の最後に撮影した画像ｉ１０を代表画像とし残りの画像（画像ｉ１〜ｉ９）を近傍画像としてもよい。いずれの画像を代表画像とするかは、上述のように図９に示す撮影条件設定画面で設定できる（ステップＳ１００）。
【００７４】
＜代表画像及び近傍画像の記憶（他の例）＞
図１３は代表画像及び近傍画像の記憶の他の例を示す図である。図１２に示す例では撮影指示に応じて複数の医用画像を取得しているが、図１３に示す例では撮影指示の有無に関わらず撮影制御部及び撮影光学系１３０により画像の取得を継続して一定数（ここでは５枚とする）の画像をバッファ（ＲＡＭ２１２）に一時記憶し、逐次更新する（１枚の画像を取得するごとに、一番古い画像を削除する）。このようにして取得された画像を画像ｉ１〜ｉ５とする。ユーザによる撮影指示がなされると（ステップＳ１０６でＹＥＳ）、撮影指示に応じてさらに複数の医用画像を取得する（ステップＳ１０８）。図１３の例では５枚（画像ｉ６〜ｉ１０）である。図１３の例では、バッファに記録されている画像ｉ１〜ｉ５と撮影指示に応じて取得した画像ｉ６〜ｉ１０のうちいずれかを代表画像（代表画像２０７Ａ）に設定して記憶部２０７に記憶し（ステップＳ１１０：代表画像記憶工程）、残りを近傍画像（近傍画像２０７Ｂ）に設定し代表画像と対応させて記憶する（ステップＳ１１２：近傍画像記憶工程）。図１３では画像ｉ６を代表画像として設定しているが、他の画像（画像ｉ１，ｉ１０等）を代表画像としてもよい。
【００７５】
図１２，１３の例に示すような複数の医用画像の取得、代表画像及び近傍画像の記憶を撮影終了（ステップＳ１１４でＹＥＳ）まで継続する。
【００７６】
＜代表画像の表示及び選択、近傍画像の表示（態様１）＞
複数の医用画像の取得、代表画像及び近傍画像の記憶が終了すると、代表画像が代表画像表示制御部２０４Ｆ（代表画像表示制御部）によりモニタ４００に一覧表示される（ステップＳ１１６：代表画像表示制御工程）。図１４の（ａ）部分は代表画像の表示例を示す図である。ここでは代表画像ｉＲ１〜ｉＲ６が表示されている。なおボタンＢ０４は表示された画像より前に撮影された画像を表示させるためのボタンであり、ボタンＢ０５は表示された画像より後に撮影された画像を表示させるためのボタンである。
【００７７】
図１４の（ａ）部分で示した代表画像ｉＲ１〜ｉＲ６のうち、代表画像ｉＲ２は露出が悪く診断に適さない画像であるものとする。そこでユーザは操作部２０８のマウスによりカーソルＣＲを操作して代表画像ｉＲ２を選択すると（ステップＳ１１８（代表画像選択工程）でＹＥＳ）、図１４の（ｂ）部分に示すように、代表画像ｉＲ２に対応する近傍画像が代表画像ｉＲ１〜ｉＲ６に重ねて拡大表示される（ステップＳ１２０：近傍画像表示制御工程）。ここでは、近傍画像ｉＮ１が表示された様子を示している。態様１及び以下の各態様に示すように、近傍画像表示制御部２０４Ｈは、近傍画像の表示位置、表示ウインドウ、表示サイズ、のうち少なくとも１つを代表画像と変える。
【００７８】
ユーザが操作部２０８を操作すると近傍画像の切替指示が受け付けられ（ステップＳ１２２でＹＥＳ）、表示された近傍画像ｉＮ１が撮影時刻の異なる他の近傍画像に切り替わる（ステップＳ１２４：近傍画像表示制御工程）。このような操作（切替指示）により、ユーザは近傍画像の中から診断に適した画像を選択することができる。なお近傍画像を切り替える操作としては、例えばキーボードの矢印キー（上向き／下向き、あるいは右向き／左向き）の操作、マウスのボタンのクリック、スクロールホイールの回動、図示せぬフットペダルの操作等を挙げることができるが、これらに限定されない。
【００７９】
なお、ある代表画像（例えば、代表画像ｉＲ２）を選択しており近傍画像が表示されている状態で他の代表画像（例えば、代表画像ｉＲ４）が選択された場合、先に選択されていた代表画像（この場合、代表画像ｉＲ２）に対する近傍画像の表示を終了する。また、代表画像ｉＲ２の表示態様を代表画像ｉＲ２が選択されていない状態に復帰させる（丸印によるマーキング等の識別表示を終了する）。これらと合わせて、新たに選択された代表画像（この場合、代表画像ｉＲ４）を識別表示し、対応する近傍画像を表示する。
【００８０】
上述した処理は、ＣＰＵ２１０による制御の下で、画像処理部２０４（具体的には、代表画像表示制御部２０４Ｆ（代表画像表示制御部）、代表画像選択部２０４Ｇ（代表画像選択部）、近傍画像表示制御部２０４Ｈ（近傍画像表示制御部）、切替指示受付部２０４Ｊ（切替指示受付部））により行われる。
【００８１】
ユーザが上述した操作により所望の近傍画像を選択したら、マウスでボタンＢ０６を操作すると近傍画像の選択が確定し（ステップＳ１２６でＹＥＳ；選択が確定するまでＮＯ）する。ボタンＢ０７が操作されると代表画像（図１４の例では代表画像ｉＲ２）に対する近傍画像の表示を終了して代表画像の一覧表示状態（図１４の（ａ）部分を参照）に戻る。この際、図１１の領域Ｃ１３，Ｖ１３について説明したように「代表画像を近傍画像で差し替え」がＯＮになっていると、図１４の（ｃ）部分に示すように、当初表示されていた代表画像ｉＲ２に代えて選択された近傍画像が表示される（ステップＳ１２８）。ここでは近傍画像ｉＮ２が表示された様子を示している。
【００８２】
このように、第１の実施形態に係る内視鏡システム１０では、一覧表示された代表画像から選択した代表画像について、代表画像に対応する近傍画像のうちいずれかを表示装置（モニタ４００）に表示させるので、診断に適した画像を容易に表示することができる。また、代表画像及び近傍画像は撮影期間の内に撮影されるので、代表画像と近傍画像とで画像の変化（画像における被写体の位置、向き、露出条件等の変化）を少なくすることができる。撮影期間の長さは、撮影条件設定画面（図９参照）により代表画像と近傍画像との変化が許容範囲になるように設定することができる。
【００８３】
なお、表示条件の設定について説明したように「差し替えた近傍画像の識別表示」の設定がＯＮになっていると（図１１の領域Ｃ１４，Ｖ１４を参照）、代表画像を近傍画像に切り替える際に差し替えた近傍画像が識別表示（図１４の例では近傍画像ｉＮ２に枠線を追加）される。このような識別表示により、いずれの画像を切り替え／差し替えしたのか容易に把握することができる。
【００８４】
＜画像の表示及び選択の他の態様（態様２）＞
代表画像及び近傍画像の表示、選択の他の態様（態様２）について説明する。図１５は代表画像と近傍画像とを同じウインドウの別の領域に表示する態様を示す図である。図１５の例では、図１５の（ａ）部分に示すように、代表画像（代表画像ｉＲ１〜ｉＲ４）をモニタ４００の表示領域Ｒ１に一覧表示する（ステップＳ１１６）。代表画像（ここでは代表画像ｉＲ２）が選択されると（ステップＳ１１８）、選択された代表画像に対応する近傍画像のうちいずれか（ここでは近傍画像ｉＮ１）が表示領域Ｒ１と同一ウインドウの別の領域である表示領域Ｒ２に拡大表示される（ステップＳ１２０：図１５の（ｂ）部分を参照）。表示した近傍画像に対する切替操作は図１４に示す態様と同様である（ステップＳ１２２〜Ｓ１２６）。すなわち、ボタンＢ０６を操作すると近傍画像が確定（ステップＳ１２６でＹＥＳ）して、図１５の（ｃ）部分に示すように、当初表示されていた代表画像ｉＲ２に代えて選択された近傍画像（ここでは近傍画像ｉＮ３）が表示領域Ｒ１に表示される（ステップＳ１２８）。この際、表示条件設定画面（図１１参照）での設定に応じて、図１４の（ｃ）部分に示すのと同様に、代表画像ｉＲ２に代えて表示される近傍画像ｉＮ３が識別表示（ここでは、枠線追加）される。
【００８５】
＜画像の表示及び選択のさらに他の態様（態様３）＞
代表画像及び近傍画像の表示、選択のさらに他の態様（態様３）について説明する。図１６は代表画像と近傍画像とを別のウインドウに表示する態様を示す図である。図１６の例では、図１６の（ａ）部分に示すように、代表画像表示制御部２０４Ｆが代表画像（代表画像ｉＲ１〜ｉＲ６）をモニタ４００のウインドウＷ１に一覧表示する（ステップＳ１１６）。代表画像（ここでは代表画像ｉＲ２）が選択されると（ステップＳ１１８）、選択された代表画像に対応する近傍画像のうちいずれか（ここでは近傍画像ｉＮ１）がウインドウＷ１とは別のウインドウＷ２に拡大表示される（ステップＳ１２０：図１６の（ｂ）部分を参照）。表示した近傍画像に対する切替操作は図１４に示す態様、図１５に示す態様と同様であり（ステップＳ１２２〜Ｓ１２６）。すなわち、ボタンＢ０６を操作すると近傍画像が確定（ステップＳ１２６でＹＥＳ）して、図１４の（ｃ）部分と同様に、選択された近傍画像（ここでは近傍画像ｉＮ３）が当初表示されていた代表画像ｉＲ２に代えてウインドウＷ１に表示される（ステップＳ１２８）。
【００８６】
＜画像の表示及び選択のさらに他の態様（態様４）＞
代表画像及び近傍画像の表示、選択のさらに他の態様（態様４）について説明する。態様１〜態様３ではユーザの切替操作により近傍画像を切り替え表示しているが、態様４では近傍画像の動画表示（連続表示、順次表示）に基づいて切り替え表示を行う。図１７の（ａ）部分は代表画像（代表画像ｉＲ１〜ｉＲ６）をウインドウＷ１に一覧表示した状態（ステップＳ１１６）であり、図１４の（ａ）部分及び図１６の（ａ）部分と同じである。図１７の例では、代表画像（ここでは代表画像ｉＲ２）を選択すると（ステップＳ１１８でＹＥＳ）、ウインドウＷ３で近傍画像の動画表示（連続表示、順次表示）が開始する（図１７の（ｂ）部分；図１８のステップＳ１１９−１）。図１７の（ｂ）部分は動画表示において露出が不良な近傍画像ｉＮ１が表示された状態であり、図１７の（ｃ）部分は露出が適正な近傍画像ｉＮ３が表示された状態である。図１７の（ｂ）部分及び（ｃ）部分において、ボタンＢ０８は動画表示停止指示用のボタンであり、ボタンＢ０９は動画表示開始用のボタンである。また、インジケータＰ１は動画表示の進行状況を示し、インジケータＰ２はインジケータＰ１に連動して「表示されている近傍画像が全何枚中の何枚目であるか」を示す。
【００８７】
ユーザが上述した動画表示を閲覧して適切な近傍画像が表示された時点でボタンＢ０８を操作すると動画表示（連続表示）の表示停止指示がなされて（図１８のステップＳ１１９−２でＹＥＳ）動画表示が停止する（図１８のステップＳ１１９−３）。この表示停止指示を受け付けた際に表示されている近傍画像が継続してモニタ４００に表示される（図１８のステップＳ１１９−４）。この状態でボタンＢ０６を操作すると（図１８のステップＳ１１９−５でＹＥＳ）近傍画像の選択が確定して（図１８のステップＳ１１９−６）、当初表示されていた代表画像に代えて選択した近傍画像がモニタ４００に表示される（ステップＳ１２８）。
【００８８】
例えば、ユーザが図１７の（ｃ）部分に示す状態でボタンＢ０８を操作すると（ステップＳ１１９−２でＹＥＳ）、動画表示が停止し（ステップＳ１１９−３）、ボタンＢ０８の操作（表示停止指示）を受け付けた際に表示されている近傍画像ｉＮ３がモニタ４００のウインドウＷ３に継続して表示される（ステップＳ１１９−４）。この状態でボタンＢ０６が操作されると（ステップＳ１１９−５でＹＥＳ）、近傍画像ｉＮ３の選択が確定して（ステップＳ１１９−６）、図１４の（ｃ）部分と同様に代表画像ｉＲ２に代えて近傍画像ｉＮ３が表示される（ステップＳ１２８）。なお、近傍画像ｉＮ３が表示された状態でボタンＢ０９が操作されると、動画表示が再開される。
【００８９】
上述した態様２〜４の場合も、態様１と同様に診断に適した画像を容易に表示することができる。
【００９０】
＜選択された代表画像の識別表示の他の態様＞
図１４〜１７に示す例では選択された代表画像ｉＲ２を丸印でマーキングしているが、選択された代表画像の識別表示はこのような態様に限定されない。例えば図１９の（ａ）部分に示すように代表画像ｉＲ２（選択画像）に枠線ｉＲ２ａを追加する態様、図１９の（ｂ）部分に示すように代表画像ｉＲ２以外をグレーアウトする（薄いグレーで表示され、操作の対象外となる）態様を用いてもよい。このような態様の選択は、図１１に示す表示条件設定画面（領域Ｃ１１，Ｖ１１及びボタンＡ１１）を介して行うことができる。
【００９１】
＜指定画像の保存＞
ステップＳ１２８までの処理で代表画像に対する近傍画像の選択及び表示が終了したら、画像処理部２０４（指定画像保存部２０４Ｌ）は保存画像の指定があるか否かを判断する（ステップＳ１３０）。この判断は、図２０の例に示すように各画像に対しチェックボックスＣＢを設け、ボタンＢ０６が操作された時点でチェックされている画像があるか否かを指定画像保存部２０４Ｌ（指定画像保存部）が判断することにより行うことができる。チェックボックスがチェックされている画像（図２０の例では、代表画像ｉＲ１，ｉＲ３，ｉＲ４，ｉＲ５，ｉＲ６）が指定画像２０７Ｃとして記憶部２０７に保存される（ステップＳ１３２）。これらの画像は診断レポートのひな形に添付する（関連づける）ことができ、これによりレポート作成を効率的に行うことができる。
【００９２】
指定画像を保存したら、ＣＰＵ２１０及び画像処理部２０４は処理を終了するか否か判断する（ステップＳ１３４）。ＹＥＳなら処理を終了し、ＮＯならステップＳ１０４のライブビュー画像表示開始に戻る。
【００９３】
＜撮影及び表示の他の態様＞
医用画像の撮影及び表示の他の態様について、以下説明する。以下で説明する態様は、撮影条件設定画面（図９、１０）、表示条件設定画面（図１１）を介した設定に応じて実行される。
【００９４】
＜関心領域の検出に応じた自動撮影＞
図９の撮影条件設定画面において「関心領域検出」（領域Ｃ０４，Ｖ０４）及び「自動撮影」（領域Ｃ０５，Ｖ０５）がＯＮの場合、関心領域の検出及び検出時の自動撮影が実行される。具体的には、関心領域検出部２０４Ｉ（関心領域検出部）がライブビュー画像において関心領域を検出したら（図２１のステップＳ１０５でＹＥＳ）、撮影光学系１３０及び撮影制御部２０４Ｃにより複数の医用画像が取得される（ステップＳ１０８）。図２２の（ａ）部分は関心領域ＲＯＩの検出により自動撮影された画像（代表画像）が一覧表示された様子を示す。関心領域（病変候補等）の抽出は、関心領域検出部２０４Ｉが例えば公知のＣＡＤシステム（ＣＡＤ：Computer Aided Diagnosis）を備えることにより行うことができる。具体的には、例えば医用画像の画素の特徴量に基づいて、関心領域（注目すべき領域である注目領域）及び関心領域における対象（注目すべき対象）の有無を抽出することができる。この際、あらかじめ用意した関心領域の画像を教師データとした機械学習（深層学習等）の結果を利用してもよい。
【００９５】
関心領域の検出に応じた自動撮影を行う態様によれば、ユーザは診断に適した画像を容易に表示することができ、またレポート作成を効率的に行うことができる。なお、表示された代表画像に対する近傍画像の表示は、上述した態様と同様に行うことができる。
【００９６】
色素剤、器具等の検出及び検出に応じた自動撮影についても、上述した関心領域の場合と同様に、図９の撮影条件設定画面を介した条件設定（領域Ｖ０６〜Ｖ０９をＯＮ）により実行することができる。色素剤の検出は、例えば画像解析部２０４Ｋが撮像素子１３４の赤（Ｒ）、緑（Ｇ）、青（Ｂ）の画素値から特徴量としてＧ／Ｒ及びＢ／Ｇを算出し、これらの特徴量を各色素剤の特徴量と比較することにより行うことができる。また器具等の検出は、例えば各器具を鉗子口１２６に挿通した際の画像を基準画像として、画像解析部２０４Ｋが基準画像と検査時の画像とを比較することにより行うことができる。図２２の（ｂ）部分は鉗子ＦＲの検出により自動撮影された画像（代表画像）が一覧表示された様子を示す。このような態様によれば、ユーザは診断に適した画像を容易に表示することができ、またレポート作成を効率的に行うことができる。なお、表示された代表画像に対する近傍画像の表示は、上述した態様と同様に行うことができる。
【００９７】
＜診断用近傍画像の抽出及び表示＞
診断用近傍画像の抽出及び表示は、図９の撮影条件設定画面で領域Ｃ１０，Ｖ１０をＯＮに設定することで実行される。抽出条件は、近傍画像における関心領域の存在、近傍画像の露出、近傍画像のブレの量、近傍画像における器具の存在、近傍画像における色素剤及び／または染色剤の使用、のうち少なくとも１つとすることができる。このような具体的な抽出条件の設定は、図１０と同様の設定画面において所望の条件（１つでもよいし、複数設定してもよい）をＯＮにすることにより行うことができる。
【００９８】
図２３は診断用近傍画像の抽出及び表示の処理を示すフローチャートである。図９の撮影条件設定画面で領域Ｃ１０，Ｖ１０がＯＮに設定されている場合、一覧表示（例えば、図１４の（ａ）部分を参照）された代表画像のいずれかが選択されると（ステップＳ１１８でＹＥＳ）、選択された代表画像に対応する近傍画像から、画像解析部２０４Ｋが抽出条件に従って診断用近傍画像を抽出する（ステップＳ１２１−１）。抽出条件は、図９について上述したように領域Ｃ１０ａ，Ｖ１０ａ、及びボタンＡ１０ａを介した操作により設定することができる。近傍画像表示制御部２０４Ｈは、抽出された診断用近傍画像をモニタ４００に表示する（ステップＳ１２１−２）。例えば、抽出対象の近傍画像が図２４に示す近傍画像ｉＮ４〜ｉＮ８であり抽出条件が「露出が適正」、「関心領域が存在」、及び「器具等の存在」である場合、露出が適正で関心領域ＲＯＩ及び鉗子ＦＲが映っている近傍画像ｉＮ８を抽出し、モニタ４００に表示することができる。なお、診断用近傍画像の抽出の際に、あらかじめ用意した診断用の画像を教師データとした機械学習（深層学習等）の結果を利用してもよい。このような診断用近傍画像の抽出及び表示により、ユーザは効率的に診断を行うことができる。また、上述した指定画像の保存（図２０を参照）と同様に、関心領域検出画像、色素剤及び／または器具等の検出画像、診断用近傍画像についても指定、保存、レポートのひな形に添付等してもよい。これによりユーザは診断、レポート作成等を効率的に行うことができる。
【００９９】
（付記）
上述した態様及び例に加えて、以下に記載の構成も本発明の範囲に含まれる。
【０１００】
（付記１）
医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出し、
医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。
【０１０１】
（付記２）
医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出し、
医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。
【０１０２】
（付記３）
医療画像解析結果取得部は、
医療画像の解析結果を記録する記録装置から取得し、
解析結果は、医療画像に含まれる注目すべき領域である注目領域と、注目すべき対象の有無のいずれか、もしくは両方である医療画像処理装置。
【０１０３】
（付記４）
医療画像は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得た通常光画像である医療画像処理装置。
【０１０４】
（付記５）
医療画像は、特定の波長帯域の光を照射して得た画像であり、
特定の波長帯域は、白色の波長帯域よりも狭い帯域である医療画像処理装置。
【０１０５】
（付記６）
特定の波長帯域は、可視域の青色もしくは、緑色帯域である医療画像処理装置。
【０１０６】
（付記７）
特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有する 医療画像処理装置。
【０１０７】
（付記８）
特定の波長帯域は、可視域の赤色帯域である医療画像処理装置。
【０１０８】
（付記９）
特定の波長帯域は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有する医療画像処理装置。
【０１０９】
（付記１０）
特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する医療画像処理装置。
【０１１０】
（付記１１）
特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有する医療画像処理装置。
【０１１１】
（付記１２）
医療画像は生体内を写した生体内画像であり、
生体内画像は、生体内の蛍光物質が発する蛍光の情報を有する医療画像処理装置。
【０１１２】
（付記１３）
蛍光は、ピークが３９０ｎｍ以上４７０ｎｍ以下である励起光を生体内に照射して得る医療画像処理装置。
【０１１３】
（付記１４）
医療画像は生体内を写した生体内画像であり、
特定の波長帯域は、赤外光の波長帯域である医療画像処理装置。
【０１１４】
（付記１５）
特定の波長帯域は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有する医療画像処理装置。
【０１１５】
（付記１６）
医療画像取得部は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の情報を有する特殊光画像を取得する特殊光画像取得部を備え、
医療画像は特殊光画像である医療画像処理装置。
【０１１６】
（付記１７）
特定の波長帯域の信号は、通常光画像に含まれるＲＧＢあるいはＣＭＹの色情報に基づく演算により得る医療画像処理装置。
【０１１７】
（付記１８）
白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、
医療画像は特徴量画像である医療画像処理装置。
【０１１８】
（付記１９）
付記１から１８のいずれか１つに記載の医療画像処理装置と、
白色の波長帯域の光、または、特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡と、
を備える内視鏡装置。
【０１１９】
（付記２０）
付記１から１８のいずれか１つに記載の医療画像処理装置を備える診断支援装置。
【０１２０】
（付記２１）
付記１から１８のいずれか１つに記載の医療画像処理装置を備える医療業務支援装置。
【０１２１】
以上で本発明の実施形態及び他の態様に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。
【符号の説明】
【０１２２】
１００    内視鏡本体
１０２    手元操作部
１０４    挿入部
１０６    ユニバーサルケーブル
１０８    ライトガイドコネクタ
１１２    軟性部
１１４    湾曲部
１１６    先端硬質部
１１６Ａ  先端側端面
１２３    照明部
１２３Ａ  照明用レンズ
１２３Ｂ  照明用レンズ
１２６    鉗子口
１３０    撮影光学系
１３２    撮影レンズ
１３４    撮像素子
１３６    駆動回路
１３８    ＡＦＥ
１７０    ライトガイド
２００    プロセッサ
２０２    画像入力コントローラ
２０４    画像処理部
２０４Ａ  撮影タイミング設定部
２０４Ｂ  撮影指示受付部
２０４Ｃ  撮影制御部
２０４Ｄ  代表画像記憶部
２０４Ｅ  近傍画像記憶部
２０４Ｆ  代表画像表示制御部
２０４Ｇ  代表画像選択部
２０４Ｈ  近傍画像表示制御部
２０４Ｉ  関心領域検出部
２０４Ｊ  切替指示受付部
２０４Ｋ  画像解析部
２０４Ｌ  指定画像保存部
２０５    画像入力インタフェース
２０６    ビデオ出力部
２０７    記憶部
２０７Ａ  代表画像
２０７Ｂ  近傍画像
２０７Ｃ  指定画像
２０８    操作部
２０９    音声処理部
２０９Ａ  スピーカ
２１０    ＣＰＵ
２１１    ＲＯＭ
２１２    ＲＡＭ
３００    光源装置
３１０    光源
３１０Ａ  可視光源
３１０Ｂ  赤外光源
３３０    絞り
３４０    集光レンズ
３５０    光源制御部
４００    モニタ
Ａ０１    ボタン
Ａ０２    ボタン
Ａ０３    ボタン
Ａ０３ａ  ボタン
Ａ０３ｃ  スライドバー
Ａ０４    ボタン
Ａ０５    ボタン
Ａ０６    ボタン
Ａ０７    ボタン
Ａ０８    ボタン
Ａ０９    ボタン
Ａ１０    ボタン
Ａ１０ａ  ボタン
Ａ１１    ボタン
Ａ１２    ボタン
Ａ１３    ボタン
Ａ１４    ボタン
Ａ１５    ボタン
Ｂ０１    ボタン
Ｂ０２    ボタン
Ｂ０３    ボタン
Ｂ０４    ボタン
Ｂ０５    ボタン
Ｂ０６    ボタンＢ０７    ボタン
Ｂ０８    ボタン
Ｂ０９    ボタン
ＢＴ１    送気送水ボタン
ＢＴ２    吸引ボタン
ＢＴ３    機能ボタン
ＢＴ４    撮影ボタン
Ｃ０１    領域
Ｃ０２    領域
Ｃ０３    領域
Ｃ０４    領域
Ｃ０５    領域
Ｃ０６    領域
Ｃ０７    領域
Ｃ０８    領域
Ｃ０９    領域
Ｃ１０    領域
Ｃ１０ａ  領域
Ｃ１１    領域
Ｃ１２    領域
Ｃ１３    領域
Ｃ１４    領域
Ｃ１５    領域
ＣＢ      チェックボックス
ＣＲ      カーソル
ＦＲ      鉗子
Ｐ１      インジケータ
Ｐ２      インジケータ
Ｒ１      表示領域
Ｒ２      表示領域
ＲＯＩ    関心領域
Ｓ１００〜Ｓ１３４  診断支援方法の各ステップ
Ｔ１      撮影期間
Ｖ０１    領域
Ｖ０２    領域
Ｖ０３    領域
Ｖ０４    領域
Ｖ０５    領域
Ｖ０６    領域
Ｖ０７    領域
Ｖ０８    領域
Ｖ０９    領域
Ｖ１０    領域
Ｖ１０ａ  領域
Ｖ１１    領域
Ｖ１２    領域
Ｖ１３    領域
Ｖ１４    領域
Ｖ１５    領域
Ｗ１      ウインドウＷ２      ウインドウ
Ｗ３      ウインドウ
ｉ１      画像
ｉ２      画像
ｉ３      画像
ｉ４      画像
ｉ５      画像
ｉ６      画像
ｉ７      画像
ｉ８      画像
ｉ９      画像
ｉ１０    画像
ｉＮ１    近傍画像
ｉＮ２    近傍画像
ｉＮ３    近傍画像
ｉＮ４    近傍画像
ｉＮ５    近傍画像
ｉＮ６    近傍画像
ｉＮ７    近傍画像
ｉＮ８    近傍画像
ｉＲ１    代表画像
ｉＲ２    代表画像
ｉＲ２ａ  枠線
ｉＲ３    代表画像
ｉＲ４    代表画像
ｉＲ５    代表画像
ｉＲ６    代表画像
【図１】
2019039259.tif 000003
【図２】
2019039259.tif 000004
【図３】
2019039259.tif 000005
【図４】
2019039259.tif 000006
【図５】
2019039259.tif 000007
【図６】
2019039259.tif 000008
【図７】
2019039259.tif 000009
【図８】
2019039259.tif 000010
【図９】
2019039259.tif 000011
【図１０】
2019039259.tif 000012
【図１１】
2019039259.tif 000013
【図１２】
2019039259.tif 000014
【図１３】
2019039259.tif 000015
【図１４】
2019039259.tif 000016
【図１５】
2019039259.tif 000017
【図１６】
2019039259.tif 000018
【図１７】
2019039259.tif 000019
【図１８】
2019039259.tif 000020
【図１９】
2019039259.tif 000021
【図２０】
2019039259.tif 000022
【図２１】
2019039259.tif 000023
【図２２】
2019039259.tif 000024
【図２３】
2019039259.tif 000025
【図２４】
2019039259.tif 000026
【手続補正書】
【提出日】令和1年5月9日(2019.5.9)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮影指示に応じて医用画像を撮影する医用画像撮影部と、
前記医用画像撮影部に前記撮影指示を与え、撮影時刻が異なる複数の医用画像を撮影期間の内に撮影させる撮影制御部と、
前記複数の医用画像のうちいずれかを前記撮影期間における代表画像として記憶する代表画像記憶部と、
前記複数の医用画像のうち前記代表画像を除く医用画像を、前記代表画像の近傍画像として前記代表画像と対応させて記憶する近傍画像記憶部と、
前記代表画像を表示装置に一覧表示させる代表画像表示制御部と、
前記一覧表示された前記代表画像に対する選択を受け付ける代表画像選択部と、
前記選択された前記代表画像に対応する前記近傍画像のうちいずれかを、前記表示装置に表示させる近傍画像表示制御部と、
前記近傍画像を解析して診断用近傍画像を抽出する画像解析部を備え、
前記画像解析部は、前記近傍画像の露出、前記近傍画像のブレの量のうち少なくとも１つに基づいて前記診断用近傍画像を抽出し、
前記近傍画像表示制御部は前記診断用近傍画像を前記表示装置に表示させる
診断支援システム。
【請求項２】
ユーザの指示入力に基づいて撮影タイミングを設定する撮影タイミング設定部を備え、
前記撮影制御部は前記撮影タイミングに従って前記医用画像撮影部に前記撮影指示を与える請求項１に記載の診断支援システム。
【請求項３】
前記医用画像撮影部が撮影した前記医用画像から関心領域を検出する関心領域検出部を備え、
前記撮影制御部は、前記関心領域の検出に応じて前記医用画像撮影部に前記撮影指示を与える請求項１または２に記載の診断支援システム。
【請求項４】
前記代表画像表示制御部は前記関心領域の検出に応じて撮影された前記代表画像を一覧表示する請求項３に記載の診断支援システム。
【請求項５】
ユーザの撮影指示操作を受け付ける撮影指示受付部を備え、
前記撮影制御部は前記撮影指示操作に応じて前記医用画像撮影部に前記撮影指示を与える請求項１から４のいずれか１項に記載の診断支援システム。
【請求項６】
前記近傍画像は、前記代表画像よりも前記撮影時刻が前の画像と、前記代表画像よりも前記撮影時刻が後の画像と、のうち少なくとも一方を含む請求項１から５のいずれか１項に記載の診断支援システム。
【請求項７】
前記表示装置に表示する前記近傍画像を撮影時刻が異なる他の近傍画像に切り替える切替指示を受け付ける切替指示受付部を備え、
前記近傍画像表示制御部は、前記切替指示に応じて、前記表示装置に表示されている近傍画像に代えて前記他の近傍画像を表示させる請求項１から６のいずれか１項に記載の診断支援システム。
【請求項８】
前記近傍画像表示制御部は前記選択された前記代表画像に対応する複数の前記近傍画像を前記表示装置に連続表示させ、前記連続表示の表示停止指示を受け付けた際に表示されている近傍画像を継続して前記表示装置に表示させる請求項１から７のいずれか１項に記載の診断支援システム。
【請求項９】
（削除）
【請求項１０】
（削除）
【請求項１１】
前記近傍画像表示制御部は、前記近傍画像を前記代表画像と異なる表示態様で表示させる請求項１から８のいずれか１項に記載の診断支援システム。
【請求項１２】
前記近傍画像表示制御部は、前記近傍画像の表示位置、表示ウインドウ、表示サイズ、のうち少なくとも１つを前記代表画像と変える請求項１１に記載の診断支援システム。
【請求項１３】
前記近傍画像表示制御部は、ユーザ指示に基づいて前記近傍画像の前記表示態様を変更する請求項１１または１２に記載の診断支援システム。
【請求項１４】
前記近傍画像表示制御部は、前記選択された代表画像に代えて、前記選択された代表画像に対応する前記近傍画像のうちいずれかを表示させる請求項１から８、又は、１１から１３のいずれか１項に記載の診断支援システム。
【請求項１５】
前記代表画像表示制御部は、前記選択された代表画像を他の代表画像と識別表示する請求項１から８、又は、１１から１４のいずれか１項に記載の診断支援システム。
【請求項１６】
前記代表画像表示制御部は、一の代表画像を選択している状態で他の代表画像が選択された場合は、前記選択の時点で表示されている前記近傍画像の表示を終了し、前記一の代表画像の表示態様を前記一の代表画像が選択されていない状態に復帰させる請求項１から８、又は、１１から１５のいずれか１項に記載の診断支援システム。
【請求項１７】
前記一覧表示された代表画像と前記表示された前記近傍画像とのうちで指定された画像を保存する指定画像保存部をさらに備える請求項１から８、又は、１１から１６のいずれか１項に記載の診断支援システム。
【請求項１８】
請求項１から８、又は、１１から１７のいずれか１項に記載の診断支援システムと、
前記表示装置と、
被検体に挿入される挿入部であって、先端硬質部と、前記先端硬質部の基端側に接続された湾曲部と、前記湾曲部の基端側に接続された軟性部とを有する挿入部と、前記挿入部の基端側に接続された操作部と、を有する内視鏡と、
を備える内視鏡システムであって、
前記医用画像撮影部は、被写体の光学像を結像させる撮影レンズと、前記撮影レンズにより前記光学像が結像する撮像素子と、を備え、
前記撮影レンズは前記先端硬質部に設けられる内視鏡システム。
【請求項１９】
請求項１８に記載の内視鏡システムのプロセッサであって、
前記撮影制御部と、前記代表画像記憶部と、前記近傍画像記憶部と、前記代表画像表示制御部と、前記代表画像選択部と、前記近傍画像表示制御部と、を備えるプロセッサ。
【請求項２０】
撮影指示に応じて医用画像を撮影する医用画像撮影部と、前記撮影した医用画像を表示する表示装置と、を備える診断支援システムによる診断支援方法であって、
撮影装置に撮影指示を与え、撮影時刻が異なる複数の医用画像を撮影期間の内に撮影させる撮影制御工程と、
前記複数の医用画像のうちいずれかを前記撮影期間における代表画像として記憶する代表画像記憶工程と、
前記複数の医用画像のうち前記代表画像を除く画像を、前記代表画像の近傍画像として前記代表画像と対応させて記憶する近傍画像記憶工程と、
前記代表画像を表示装置に一覧表示させる代表画像表示制御工程と、
前記一覧表示された前記代表画像に対する選択を受け付ける代表画像選択工程と、
前記選択された前記代表画像に対応する前記近傍画像のうちいずれかを前記表示装置に表示させる近傍画像表示制御工程と、
前記近傍画像を解析し、前記近傍画像の露出、前記近傍画像のブレの量のうち少なくとも１つに基づいて診断用近傍画像を抽出する、診断用近傍画像抽出工程と、
前記診断用近傍画像を前記表示装置に表示させる表示工程と
を有する診断支援方法。
【国際調査報告】
2019039259.tif 000027
2019039259.tif 000028