(57)【要約】【課題】１つの医療画像に係る解析結果を、その解析結果が得られない他の医療画像において認識できるようにした医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置を提供する。【解決手段】医療画像処理装置１０は、医療画像を取得する医療画像取得部１１と、医療画像の解析結果を取得する医療画像解析結果取得部１２と、医療画像及び解析結果を表示する表示部１３と、第１医療画像に係る第１解析結果と、第１医療画像とは撮影条件が異なる第２医療画像に係る第２解析結果との対応関係を設定する対応関係設定部１４と、設定した対応関係を用いて、第１医療画像上に第２解析結果を表示する際の表示態様を設定し、または、第２医療画像上に第１解析結果を表示する際の表示態様を設定する表示制御部１５と、を備える。【選択図】図１
2019042156.tif 000002
【特許請求の範囲】
【請求項１】
被写体像を含む医療画像を取得する医療画像取得部と、
前記医療画像の解析結果を取得する医療画像解析結果取得部と、
前記医療画像及び前記解析結果を表示する表示部と、
前記医療画像のうち第１医療画像に係る前記解析結果である第１解析結果の種類と前記医療画像のうち前記第１医療画像とは撮影条件が異なる第２医療画像に係る前記解析結果である第２解析結果の種類とが異なる場合に、前記第１解析結果と前記第２解析結果との対応関係を設定する対応関係設定部と、
前記対応関係設定部が設定した前記対応関係を用いて、前記第１医療画像上に前記第２解析結果を表示する際の表示態様を設定し、または、前記第２医療画像上に前記第１解析結果を表示する際の表示態様を設定する表示制御部と、
を備える医療画像処理装置。
【請求項２】
前記撮影条件は、撮影距離である請求項１に記載の医療画像処理装置。
【請求項３】
前記表示制御部は、前記第１医療画像上に前記第２解析結果を表示する際に、少なくとも前記第１解析結果と区別し得る態様で前記第１医療画像上において前記第２解析結果を強調表示し、かつ、前記第２医療画像上に前記第１解析結果を表示する際に、少なくとも前記第２解析結果と区別し得る態様で、前記第２医療画像上において前記第１解析結果を強調表示する請求項１または２に記載の医療画像処理装置。
【請求項４】
前記表示制御部は、前記強調表示を、位置もしくは輪郭の表示、または、色もしくは明るさの調節により行う請求項３に記載の医療画像処理装置。
【請求項５】
前記対応関係設定部は、前記第１解析結果の尺度において前記第２解析結果を識別する条件を設定し、または、前記第２解析結果の尺度において前記第１解析結果を識別する条件を設定することにより、前記対応関係を設定する請求項１〜４のいずれか１項に記載の医療画像処理装置。
【請求項６】
前記第１医療画像が遠景画像であり、かつ、前記第２医療画像が近景画像である場合、
前記対応関係設定部は、前記第１解析結果の尺度において前記第２解析結果を識別する条件を設定する請求項５に記載の医療画像処理装置。
【請求項７】
前記対応関係設定部は、前記第１解析結果に含む発赤領域を定める尺度において、前記第２解析結果が含む不整血管領域を識別する閾値を設定する請求項６に記載の医療画像処理装置。
【請求項８】
前記対応関係設定部は、前記近景画像における前記不整血管領域に属する画素の画素値と、前記近景画像における前記不整血管領域に属しない画素の画素値と、を用いて、前記閾値を設定する請求項７に記載の医療画像処理装置。
【請求項９】
前記対応関係設定部は、設定した対応関係を用いて前記第１医療画像から前記第２解析結果に相当する情報を求め、または、設定した対応関係を用いて前記第２医療画像から第１解析結果に相当する情報を求める請求項１〜８のいずれか１項に記載の医療画像処理装置。
【請求項１０】
被写体の広範囲を撮影した内視鏡画像である遠景画像と、前記遠景画像と比較して近くから前記被写体を撮影した内視鏡画像である近景画像と、を取得する医療画像取得部と、
前記遠景画像の解析結果として、発赤がある領域を表す発赤領域に係る情報を取得し、かつ、前記近景画像の解析結果として、不整血管がある領域を表す不整血管領域に係る情報を取得する医療画像解析結果取得部と、
前記医療画像取得部が取得した内視鏡画像と、前記医療画像解析結果取得部が取得した解析結果と、を表示する表示部と、
前記発赤領域に係る情報と、前記不整血管領域に係る情報と、の対応関係を設定する対応関係設定部と、
前記表示部に前記遠景画像を表示する際に、前記対応関係を用いて、前記遠景画像上に前記不整血管領域に係る情報を表示する表示制御部と、
を備える医療画像処理装置。
【請求項１１】
前記医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出する医療画像解析処理部を備え、
前記医療画像解析結果取得部は、前記医療画像解析処理部から前記注目領域の情報を含む前記解析結果を取得する請求項１〜１０のいずれか１項に記載の医療画像処理装置。
【請求項１２】
前記医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出する医療画像解析処理部を備え、
前記医療画像解析結果取得部は、前記医療画像解析処理部から前記注目すべき対象の有無に関する情報を含む前記解析結果を取得する請求項１〜１０のいずれか１項に記載の医療画像処理装置。
【請求項１３】
前記医療画像解析処理部は、前記医療画像に係る前記解析結果を記録する記録装置から前記解析結果を取得し、かつ、
前記解析結果は、前記医療画像に含む前記注目領域と前記注目すべき対象の有無のいずれか、または、両方を含む請求項１１または１２に記載の医療画像処理装置。
【請求項１４】
前記医療画像は、白色帯域の光、または前記白色帯域の光として複数の波長帯域の光を照射して得る通常光画像である請求項１〜１３のいずれか１項に記載の医療画像処理装置。
【請求項１５】
前記医療画像は、特定の波長帯域の光を照射して得た画像であり、
前記特定の波長帯域は、白色の波長帯域よりも狭い帯域である請求項１〜１３のいずれか１項に記載の医療画像処理装置。
【請求項１６】
前記特定の波長帯域は、可視域の青色帯域または緑色帯域である請求項１５に記載の医療画像処理装置。
【請求項１７】
前記特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、前記特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有する請求項１６に記載の医療画像処理装置。
【請求項１８】
前記特定の波長帯域は、可視域の赤色帯域である請求項１５に記載の医療画像処理装置。
【請求項１９】
前記特定の波長帯域は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍの波長帯域を含み、かつ、前記特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍの波長帯域内にピーク波長を有する請求項１８に記載の医療画像処理装置。
【請求項２０】
前記特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、前記特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する請求項１５に記載の医療画像処理装置。
【請求項２１】
前記特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域を含み、かつ、前記特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域にピーク波長を有する請求項２０に記載の医療画像処理装置。
【請求項２２】
前記医療画像は生体内を写した生体内画像であり、
前記生体内画像は、生体内の蛍光物質が発する蛍光の情報を有する請求項１５に記載の医療画像処理装置。
【請求項２３】
前記蛍光は、ピーク波長が３９０ｎｍ以上４７０ｎｍ以下である励起光を前記生体内に照射して得る蛍光である請求項２２に記載の医療画像処理装置。
【請求項２４】
前記医療画像は、生体内を写した生体内画像であり、
前記特定の波長帯域は、赤外光の波長帯域である請求項１５に記載の医療画像処理装置。
【請求項２５】
前記特定の波長帯域は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍの波長帯域を含み、かつ、前記特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍの波長帯域にピーク波長を有する請求項２４に記載の医療画像処理装置。
【請求項２６】
前記医療画像取得部は、
白色帯域の光、または前記白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有し、
前記医療画像は前記特殊光画像である請求項１〜１３のいずれか１項に記載の医療画像処理装置。
【請求項２７】
前記特定の波長帯域の信号は、前記通常光画像に含むＲＧＢまたはＣＭＹの色情報に基づく演算により得る請求項２６に記載の医療画像処理装置。
【請求項２８】
白色帯域の光、または前記白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、
前記医療画像は前記特徴量画像である請求項１〜１３のいずれか１項に記載の医療画像処理装置。
【請求項２９】
請求項１〜２８のいずれか１項に記載の医療画像処理装置と、
白色の波長帯域の光、または、特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡と、
を備える内視鏡装置。
【請求項３０】
請求項１〜２８のいずれか１項に記載の医療画像処理装置を備える診断支援装置。
【請求項３１】
請求項１〜２８のいずれか１項に記載の医療画像処理装置を備える医療業務支援装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、医療画像の解析結果を用いる医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置に関する。
【背景技術】
【０００２】
従来、医療に係る装置（以下、医療装置という）のうち、被写体の画像（以下、医療画像という）を取得するものは、取得した医療画像を医師に提示する。そして、医師は、医療装置から得る医療画像を判断材料の１つとして使用し、診断等をする。当然ながら、診断の際に医療画像を用いてする被写体の状態等の鑑別は、医師の技量及び経験等に基づく。
【０００３】
近年においては、画像解析技術が進歩したので、医療画像を解析することで、医療画像から様々な客観的な情報を得ることができる。このため、医療画像の解析結果を医師等に提示することにより、鑑別及び診断等を支援する医療装置が増えてきている。また、内視鏡装置においては、被写体を拡大した拡大画像を用いて、ユーザである医師が処置をする範囲を注目領域として指定し、その後、通常の被写体を拡大していない内視鏡画像においても、指定した注目領域の境界を示せるようにした内視鏡装置が知られている（特許文献１）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−１１５５５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
近年の医療装置においては、医療画像の解析結果を提示することが求められているが、医療画像の種類に起因して、得られる解析結果の種類は異なるので、１種類の医療画像から医師が必要とする全ての解析結果が得られない場合がある。診断において、例えば２種類の医療画像をそれぞれ解析して得る２種類の解析結果が必要な場合、通常は、一方の医療画像及び解析結果を表示する際には、他方の医療画像に係る解析結果を提示できない。
【０００６】
また、２種類の医療画像があり、一方の医療画像に係る解析結果を、他方の医療画像及び他方の医療画像に係る解析結果とともに表示するのは容易ではない。例えば、被写体を拡大した近景の医療画像において病変等の範囲を特定する解析結果が得られた場合、特許文献１に記載の発明に倣って、この特定した病変等の範囲を、被写体を広範囲に撮影した遠景の医療画像上に示すと例えば１つの点かあるいは極小の範囲になってしまう場合も多い。特に、病変等が近景の医療画像では捉えきれない広範囲に分布している場合、この方法では、遠景の医療画像において病変等の範囲を表示することは困難である。
【０００７】
もちろん、２種類の医療画像を並べて表示し、各々の医療画像についてそれぞれ対応する解析結果を表示すれば２種類の解析結果を提示することができる。しかし、異なる解析結果が得られる２種類の医療画像は、被写体の距離、被写体の向き、照明光の種類、解像度等の撮影条件が異なるので、これらの医療画像及び解析結果を同時に表示したとしても、解析結果等が示す位置または範囲（大きさ）等を比較し、または、対応関係を把握することは容易でない。
【０００８】
本発明は、１つの医療画像に係る解析結果を、その解析結果が得られない他の医療画像において認識できるようにした医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の医療画像処理装置は、被写体像を含む医療画像を取得する医療画像取得部と、医療画像の解析結果を取得する医療画像解析結果取得部と、医療画像及び解析結果を表示する表示部と、医療画像のうち第１医療画像に係る解析結果である第１解析結果の種類と医療画像のうち第１医療画像とは撮影条件が異なる第２医療画像に係る解析結果である第２解析結果の種類とが異なる場合に、第１解析結果と第２解析結果との対応関係を設定する対応関係設定部と、対応関係設定部が設定した対応関係を用いて、第１医療画像上に第２解析結果を表示する際の表示態様を設定し、または、第２医療画像上に第１解析結果を表示する際の表示態様を設定する表示制御部と、を備える。
【００１０】
撮影条件は、撮影距離であることが好ましい。
【００１１】
表示制御部は、第１医療画像上に第２解析結果を表示する際に、少なくとも第１解析結果と区別し得る態様で第１医療画像上において第２解析結果を強調表示し、かつ、第２医療画像上に第１解析結果を表示する際に、少なくとも第２解析結果と区別し得る態様で、第２医療画像上において第１解析結果を強調表示することが好ましい。
【００１２】
表示制御部は、強調表示を、位置もしくは輪郭の表示、または、色もしくは明るさの調節により行うことが好ましい。
【００１３】
対応関係設定部は、第１解析結果の尺度において第２解析結果を識別する条件を設定し、または、第２解析結果の尺度において第１解析結果を識別する条件を設定することにより、対応関係を設定することが好ましい。
【００１４】
第１医療画像が遠景画像であり、かつ、第２医療画像が近景画像である場合、対応関係設定部は、第１解析結果の尺度において第２解析結果を識別する条件を設定することが好ましい。
【００１５】
対応関係設定部は、第１解析結果に含む発赤領域を定める尺度において、第２解析結果が含む不整血管領域を識別する閾値を設定することが好ましい。
【００１６】
対応関係設定部は、近景画像における不整血管領域に属する画素の画素値と、近景画像における不整血管領域に属しない画素の画素値と、を用いて、閾値を設定することが好ましい。
【００１７】
対応関係設定部は、設定した対応関係を用いて第１医療画像から第２解析結果に相当する情報を求め、または、設定した対応関係を用いて第２医療画像から第１解析結果に相当する情報を求めることが好ましい。
【００１８】
本発明の別の医療画像処理装置は、被写体の広範囲を撮影した内視鏡画像である遠景画像と、遠景画像と比較して近くから被写体を撮影した内視鏡画像である近景画像と、を取得する医療画像取得部と、遠景画像の解析結果として、発赤がある領域を表す発赤領域に係る情報を取得し、かつ、近景画像の解析結果として、不整血管がある領域を表す不整血管領域に係る情報を取得する医療画像解析結果取得部と、医療画像取得部が取得した内視鏡画像と、医療画像解析結果取得部が取得した解析結果と、を表示する表示部と、発赤領域に係る情報と、不整血管領域に係る情報と、の対応関係を設定する対応関係設定部と、表示部に遠景画像を表示する際に、対応関係を用いて、遠景画像上に不整血管領域に係る情報を表示する表示制御部と、を備える。
【００１９】
医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出する医療画像解析処理部を備え、医療画像解析結果取得部は、前記医療画像解析処理部から注目領域の情報を含む解析結果を取得することが好ましい。
【００２０】
医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出する医療画像解析処理部を備え、医療画像解析結果取得部は、医療画像解析処理部から注目すべき対象の有無に関する情報を含む解析結果を取得することが好ましい。
【００２１】
医療画像解析処理部は、医療画像に係る解析結果を記録する記録装置から解析結果を取得し、かつ、解析結果は、医療画像に含む注目領域と注目すべき対象の有無のいずれか、または、両方を含むことが好ましい。
【００２２】
医療画像は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像であることが好ましい。
【００２３】
医療画像は、特定の波長帯域の光を照射して得た画像であり、特定の波長帯域は、白色の波長帯域よりも狭い帯域であることが好ましい。
【００２４】
特定の波長帯域は、可視域の青色帯域または緑色帯域であることが好ましい。
【００２５】
特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有することが好ましい。
【００２６】
特定の波長帯域は、可視域の赤色帯域であることが好ましい。
【００２７】
特定の波長帯域は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍの波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍの波長帯域内にピーク波長を有することが好ましい。
【００２８】
特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有することが好ましい。
【００２９】
特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域にピーク波長を有する請求項１６に記載の医療画像処理装置。
【００３０】
医療画像は生体内を写した生体内画像であり、生体内画像は、生体内の蛍光物質が発する蛍光の情報を有することが好ましい。
【００３１】
蛍光は、ピーク波長が３９０ｎｍ以上４７０ｎｍ以下である励起光を生体内に照射して得る蛍光であることが好ましい。
【００３２】
医療画像は、生体内を写した生体内画像であり、特定の波長帯域は、赤外光の波長帯域であることが好ましい。
【００３３】
特定の波長帯域は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍの波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍの波長帯域にピーク波長を有することが好ましい。
【００３４】
医療画像取得部は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有し、医療画像は特殊光画像であることが好ましい。
【００３５】
特定の波長帯域の信号は、通常光画像に含むＲＧＢまたはＣＭＹの色情報に基づく演算により得ることが好ましい。
【００３６】
白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、医療画像は特徴量画像であることが好ましい。
【００３７】
本発明の内視鏡装置は、上記医療画像処理装置と、白色の波長帯域の光、または、特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡と、を備える。
【００３８】
本発明の診断支援装置は、上記医療画像処理装置を備える。
【００３９】
本発明の医療業務支援装置は、上記医療画像処理装置を備える。
【発明の効果】
【００４０】
本発明の医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置は、１つの医療画像に係る解析結果を、その解析結果が得られない他の医療画像において認識できるようにすることができる。
【図面の簡単な説明】
【００４１】
【図１】医療画像処理装置のブロック図である。
【図２】内視鏡装置のブロック図である。
【図３】内視鏡のブロック図である。
【図４】医療画像解析処理部のブロック図である。
【図５】医療画像処理装置の作用を示すフローチャートである。
【図６】遠景画像である。
【図７】近景画像である。
【図８】２つの解析結果の対応関係を設定する方法の例を示す説明図である。
【図９】２つの解析結果の対応関係を設定する方法の例を示す説明図である。
【図１０】対応関係の設定を用いて表示する遠景画像である。
【図１１】医療画像解析処理部を有する医療画像処理装置のブロック図である。
【図１２】医療画像処理装置を含む内視鏡装置のブロック図である。
【図１３】特徴量変換部を有する対応関係設定部のブロック図である。
【図１４】医療画像処理装置を含む診断支援装置である。
【図１５】医療画像処理装置を含む医療業務支援装置である。
【発明を実施するための形態】
【００４２】
図１に示すように、医療画像処理装置１０は、医療画像取得部１１、医療画像解析結果取得部１２、表示部１３、対応関係設定部１４、表示制御部１５、入力受信部１６、及び、統括制御部１７を備える。
【００４３】
医療画像取得部１１は、例えば、医療装置である内視鏡装置２１等のモダリティから直接に、または、各種モダリティが取得した医療画像を保存したＰＡＣＳ（Picture Archiving and Communication System）２２等の管理システムもしくはその他情報システムを介して、被写体像を含む医療画像を取得する。医療画像取得部１１が取得する医療画像は、その医療画像を得たモダリティに依存する。すなわち、内視鏡装置２１から取得する医療画像は、いわゆる内視鏡画像（例えば図６に示す遠景画像６１、図７に示す近景画像７１等参照）である。超音波検査装置（図示しない）から取得する医療画像はいわゆる超音波画像である。Ｘ線撮影装置（図示しない）から医療画像を取得する場合、取得する医療画像はいわゆるＸ線画像である。ＣＴ（Computed Tomography）スキャナもしくはＭＲＩ（Magnetic Resonance Imaging）検査装置（いずれも図示しない）から医療画像を取得する場合は再構成画像が医療画像である。この他のモダリティから医療画像を取得する場合も同様である。また、ＰＡＣＳ２２等の管理システムまたはその他情報システムを介して医療画像を取得する場合も同様である。なお、医療画像は静止画像または動画である。医療画像が動画である場合、医療画像の表示には、動画を構成する１つの代表フレームの静止画を表示することのほか、動画を１または複数回、再生することを含む。
【００４４】
内視鏡装置２１またはＰＡＣＳ２２等に複数の医療画像がある場合、医療画像取得部１１は、これら複数の医療画像の全部を、または、一部を選択して取得することができる。内視鏡装置２１またはＰＡＣＳ２２等にある複数の医療画像から、一部の医療画像を選択して取得する場合、医師等のユーザ操作にしたがって手動で医療画像を選択することができる。また、医療画像取得部１１は、撮影日時、撮影部位、または、その他の予め設定する条件にしたがって自動的に、取得する医療画像を選択することができる。
【００４５】
医療画像解析結果取得部１２は、例えば、医療装置である内視鏡装置２１等のモダリティから直接に、または、各種モダリティが取得した医療画像を保存したＰＡＣＳ２２等の管理システムもしくはその他情報システムを介して、被写体像を含む医療画像を解析した結果（以下、解析結果という）を取得する。医療画像解析結果取得部１２は、内視鏡装置２１またはＰＡＣＳ２２等から任意に医療画像の解析結果を取得し得るが、医療画像取得部１１が取得する医療画像についての解析結果がある場合、医療画像解析結果取得部１２は少なくとも医療画像取得部１１が取得する医療画像についての解析結果を取得する。
【００４６】
医療画像の解析結果とは、医療画像の画像解析により得た結果である。より具体的には、例えば、病変の有無（病変の可能性がある部分の有無を含み、かつ、病変もしくは病変の可能性がある部分の位置、大きさ、または範囲等の情報である場合を含む）、病変の種類（病変でない場合の被写体６２（図６参照）の性状を含む。例えば、腫瘍(Neoplasm)、非腫瘍(Non-Neoplasm)、正常、不明等である）、処置痕（例えば外科的な処置の痕跡）もしくは治療痕（例えば薬剤または放射線等を用いた治療の痕跡）の有無、処置痕もしくは治療痕の種類、被写体６２に投与（散布、注入、または塗布等による投与を含む）した薬剤（例えば蛍光薬剤）、処置具等の器具の写り込みの有無、または、写り込んだ処置具等の器具の種類等に関する情報を１または複数含む。
【００４７】
医療画像の解析結果は、解析する医療画像の種類に起因して異なる。医療画像の種類は撮影に使用したモダリティで異なるが、本実施形態において医療画像の種類とは、少なくとも同一種類のモダリティで得られる複数の特徴が異なる医療画像である。すなわち、医療画像の種類とは、撮影時における観察対象と内視鏡３１の先端部との距離（以下、撮影距離という。光学的もしくは電子的ズームレベルに起因した実質的な撮影距離を含む）、照明光の種類もしくは光量、露光時間、または、その他の撮影条件（医療画像の生成方法に係る画像処理の条件を含む）の相違に起因した種類である。したがって、本実施形態においては、撮影条件に起因して、医療画像から得られる解析結果は異なる。
【００４８】
例えば、内視鏡装置２１において得る内視鏡画像は、遠くから被写体６２の広範囲を撮影した遠景の内視鏡画像（以下、遠景画像６１（図６参照）という）と、遠景画像６１と比較して近くから被写体６２を拡大して撮影した近景の内視鏡画像（以下、近景画像７１（図７参照）という）と、で解析結果が異なる。遠景画像６１においては、例えば被写体６２の大局的な特徴を観察できる。このため、遠景画像６１からは、発赤または酸素飽和度等の病変の有無または病変の種類に係る解析結果が得られる。一方、近景画像７１においては、例えば血管またはピットパターン等の微細な構造（以下、血管等という）を観察できる。このため、近景画像７１からは、特定の血管等の有無、位置、大きさ、範囲、もしくは形状（例えば血管の不整度）等、病変の有無または病変の種類に係る解析結果が得られる。
【００４９】
本実施形態においては、医療画像処理装置１０は、内視鏡装置２１と接続し、内視鏡装置２１から医療画像である内視鏡画像と、内視鏡画像の解析結果と、を取得する。具体的には、医療画像処理装置１０はプロセッサ装置３３と接続する。そして、医療画像取得部１１は、内視鏡装置２１の画像生成部３６から、第１医療画像と、第１医療画像とは撮影条件が異なる第２医療画像と、の少なくとも２種類の医療画像を取得する。また、医療画像解析結果取得部１２は、内視鏡装置２１の医療画像解析処理部３７から、第１医療画像の解析結果である第１解析結果と、第２医療画像の解析結果である第２解析結果と、を取得する。本実施形態においては、医療画像取得部１１は、遠景画像６１と、遠景画像６１とは被写体６２の撮影距離が異なる近景画像７１と、の２種類の内視鏡画像を取得する。
【００５０】
以下においては、便宜的に、遠景画像６１を第１医療画像とし、かつ、近景画像７１を第２医療画像とする。相互に撮影条件が異なる２つの医療画像がある場合、どちらを第１医療画像とするか、あるいは、どちらを第２医療画像とするかは任意であり、第１医療画像と第２医療画像は入れ替えることが可能である。すなわち、遠景画像６１を第２医療画像とし、かつ、近景画像７１を第１医療画像としても良い。
【００５１】
また、本実施形態においては、医療画像解析結果取得部１２は、正常な粘膜と比較して赤みを帯びた「発赤」がある領域（以下、発赤領域６３という。図６参照）に係る情報を遠景画像６１（第１医療画像）に係る第１解析結果として取得し、かつ、正常な血管と比較して不整な血管（以下、不整血管という）がある領域（以下、不整血管領域７３という。図７参照）に係る情報を近景画像７１（第２医療画像）に係る第２解析結果として取得する。
【００５２】
表示部１３は、取得した医療画像及び解析結果を表示するディスプレイである。表示部１３における医療画像及び解析結果の表示態様は、表示制御部１５が制御する。なお、医療画像処理装置１０が接続するデバイス等が含むモニタまたはディスプレイを共用し、医療画像処理装置１０の表示部１３として使用できる。
【００５３】
対応関係設定部１４は、医療画像取得部１１が取得する医療画像に係る解析結果に対応関係を設定する。より具体的には、医療画像取得部１１が取得する医療画像のうち第１医療画像に係る解析結果である第１解析結果の種類と医療画像のうち第１医療画像とは撮影条件が異なる第２医療画像に係る解析結果である第２解析結果の種類とが異なる場合に、第１解析結果と第２解析結果との対応関係を設定する。対応関係設定部１４が行う対応関係の設定とは、第１解析結果の尺度において第２解析結果を識別するための閾値、変換条件、その他範囲等の条件を設定すること、または、これとは逆に、第２解析結果の尺度において第１解析結果を識別するための閾値、変換、その他範囲等の条件を設定することをいう。
【００５４】
本実施形態においては、遠景画像６１（第１医療画像）と近景画像７１（第２医療画像）を取得する。そして、遠景画像６１に係る解析結果（第１解析結果）は発赤領域６３であり、かつ、近景画像７１に係る解析結果（第２解析結果）は不整血管領域７３であるから、第１解析結果と第２解析結果の種類が異なる。このため、対応関係設定部１４は、第１解析結果である発赤領域６３と、第２解析結果である不整血管領域７３との間に対応関係を設定する。第１解析結果である発赤領域６３を定めるための尺度は「赤さ」すなわち赤色画素の画素値（以下、赤色画素値という）であり、第２解析結果である不整血管領域７３を定めるための尺度は「不整度」である。このため、本実施形態においては、「赤さ」である赤色画素値の尺度において「不整度」を識別し得るようにするために、対応関係設定部１４は、近景画像７１及び血管の不整度を用いて、遠景画像６１における赤色画素の画素値に、血管の不整度と一定の関係を有する閾値を設定する。なお、発赤領域６３を定めるための尺度として、赤色画素値の代わりに赤色画素値／緑色画素値比率（Ｒ／Ｇ比率）や、ｌｏｇ（赤色画素値／緑色画素値）、色度、または、色相等を利用しても良い。
【００５５】
表示制御部１５は、医療画像及び解析結果を表示部１３に表示する。この際、対応関係設定部１４が対応関係を設定した場合には、表示制御部１５は、対応関係設定部１４が設定した対応関係を用いて、第１医療画像上に第２解析結果を表示する際の表示態様を設定し、または、第２医療画像上に第１解析結果を表示する際の表示態様を設定する。本実施形態においては、表示制御部１５は、対応関係性ってい部１４が設定した赤色画素の画素値に係る閾値を用いて、遠景画像６１（第１医療画像）上に不整血管領域７３（第２解析結果）を表示する際の表示態様を設定する。これにより、遠景画像６１からは本来得られ難い不整血管の位置情報を、遠景画像６１上に示すことができる。本実施形態では上記のように、表示制御部１５は、第１医療画像上に第２解析結果を表示する際の表示態様を設定するが、第１医療画像及び第１解析結果と第２医療画像及び第２解析結果との関係によっては、上記と同様にして、表示制御部１５は、第２医療画像上に第１解析結果を表示する際の表示態様を設定することができる。
【００５６】
表示制御部１５は、第１医療画像上に第２解析結果を表示する際に、少なくとも第１解析結果と区別し得る態様で第１医療画像上において第２解析結果を強調表示する。また、表示制御部１５は、第２医療画像上に第１解析結果を表示する際に、少なくとも第２解析結果と区別し得る態様で、第２医療画像上において第１解析結果を強調表示する。強調表示は、例えば、位置もしくは輪郭の表示、または、色もしくは明るさの調節により行う。
【００５７】
入力受信部１６は、医療画像処理装置１０に付属するマウス、キーボード、その他操作デバイスからの入力を受け付ける。医療画像処理装置１０の各部の動作はこれらの操作デバイスを用いて制御することができる。
【００５８】
統括制御部１７は、医療画像処理装置１０の各部の動作を統括的に制御する。入力受信部１６が操作デバイスを用いた操作入力を受信した場合には、統括制御部１７は、その操作入力にしたがって医療画像処理装置１０の各部を制御する。
【００５９】
図２に示すように、本実施形態において医療画像処理装置１０が接続する内視鏡装置２１は、白色の波長帯域の光もしくは特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡３１、内視鏡３１を介して被写体６２内に照明光を照射する光源装置３２、プロセッサ装置３３、及び、内視鏡３１を用いて撮影した内視鏡画像等を表示するモニタ３４を有する。そして、プロセッサ装置３３は、内視鏡画像を生成する画像生成部３６と、内視鏡画像を解析し、その結果、上記解析結果を得る医療画像解析処理部３７と、を備える。
【００６０】
光源装置３２は、例えば複数のＬＥＤ（Light Emitting Diode）またはキセノンランプと光学フィルタの組み合わせ等を用いて、医療画像解析処理部３７で行う解析の態様に合わせて、白色光または特定の波長帯域光を発光する。例えば、医療画像解析処理部３７が発赤領域６３を検出する場合においては、光源装置３２は白色光を発光する。医療画像解析処理部３７が血管の不整度を算出する場合においては、設定に基づいて、白色光、または、血管を強調する特定の波長帯域の光（例えば青色もしくは紫色の成分が多い光）を発光する。医療画像解析処理部３７が酸素飽和度を算出する場合においては、酸化ヘモグロビンと還元ヘモグロビンの吸光係数の差が大きい特定の波長帯域の光（例えば波長が４７３ｎｍの光）と、白色光と、を撮影のタイミングに合わせて順次発光する。
【００６１】
内視鏡３１は、図３に示すように、照明光学系４１と、照明光の反射光等（反射光の他、散乱光もしくは蛍光を含む）を用いて被写体６２を撮影する撮影光学系４２と、操作部４３と、を有する。照明光学系４１は、光源装置３２が発光する照明光を被写体６２に照射する光学系であり、ライトガイド及び照明レンズ（いずれも図示しない）等を含む。撮影光学系４２は、撮影レンズ及びイメージセンサ（いずれも図示しない）等を含み、照明光の反射光等（反射光の他、散乱光または蛍光等を含む）を用いて被写体６２を撮像する。撮影光学系４２は、光学ズームまたは電子ズームにより、被写体像を拡大または縮小することができる。被写体像の拡大率または縮小率を表すズームレベルは、プロセッサ装置３３及びプロセッサ装置３３と接続した医療画像処理装置１０等と共有する。また、ズームレベルは、ヘッダ等に記録する内視鏡画像の付帯情報である。このため、内視鏡画像を取得することにより、医療画像処理装置１０は、内視鏡画像を撮影した際のズームレベルの情報を取得することもできる。
【００６２】
操作部４３は、ズーム操作部４６、撮影指示部４７、及び、モード切替部４８等を備える。ズーム操作部４６は、撮影光学系４２のズームレベルを操作に使用する。撮影指示部４７は、静止画の撮影、または、モニタ３４に表示する内視鏡画像の更新を一時停止する操作（いわゆるフリーズ操作）、並びに、静止画の撮影及び保存（いわゆるレリーズ操作）の指示に使用する。モード切替部４８は、観察モードの切り替えに使用する。内視鏡装置２１は、医療画像解析処理部３７を用いて解析を行うか否か、及び、医療画像解析処理部３７で行う解析の種類ごとに、複数の観察モードを有する。
【００６３】
例えば、白色光を用いて撮影した内視鏡画像を表示する通常観察モードと、発赤の位置を検出する発赤検出モード、不整な血管を検出する不整血管検出モード、及び、酸素飽和度を算出する酸素飽和度算出モード等の特殊観察モードを有する。但し、発赤検出モードにおいては、常に発赤の位置を検出するのではなく、内視鏡画像が遠景画像６１である場合に発赤の位置を検出する。発赤の位置の検出は、遠景画像６１においては良好に検出可能であり、近景画像７１においては検出できるとしても精度が低下する場合があるからである。同様に、不整血管検出モードにおいては、内視鏡画像が近景画像７１である場合に不整な血管を検出し、酸素飽和度算出モードにおいては、内視鏡画像が遠景画像６１である場合に酸素飽和度を算出する。
【００６４】
画像生成部３６は、これらの観察モードごとに、種類が異なる内視鏡画像を生成することができる。通常観察モードにおいては、画像生成部３６は、通常の内視鏡画像を生成する。発赤検出モードにおいては、画像生成部３６は、通常の内視鏡画像、または、検出した発赤領域６３を示す内視鏡画像、もしくは、検出した発赤領域６３を強調した内視鏡画像を生成することができる。不整血管検出モードにおいては、画像生成部３６は、通常の内視鏡画像、照明光の種類に起因して血管が強調された内視鏡画像、または、検出した血管を強調した内視鏡画像を生成することができる。酸素飽和度算出モードにおいては、画像生成部３６は、通常の内視鏡画像、または、酸素飽和度の値を色で表す内視鏡画像を生成することができる。本実施形態においては、簡単のため、内視鏡装置２１においてはいずれの観察モードにおいても通常の内視鏡画像を生成し、各観察モードの解析結果を反映した表示態様の調節は医療画像処理装置１０で行うものとする。医療画像処理装置１０は、通常の内視鏡画像以外の内視鏡画像も使用し得る。
【００６５】
図４に示すように、医療画像解析処理部３７は、血管等検出部５１、注目領域検出部５２、及び、特徴量算出部５３等を備える。
【００６６】
血管等検出部５１は、特徴量算出部５３において血管等を用いて特徴量を算出する場合等の必要な場合に、画像生成部３６が生成した内視鏡画像を用いて血管等を検出する。逆に、血管等検出部５１は、特徴量算出部５３において算出した特徴量を用いて、内視鏡画像から血管等を検出することができる。血管等検出部５１が検出した血管等の位置または範囲等は、病変の有無または病変の種類に係る解析結果の１つである。
【００６７】
注目領域検出部５２は、特徴量算出部５３において特徴量を算出する範囲を指定する場合等の必要な場合に、画像生成部３６が生成した内視鏡画像を用い、医療画像である内視鏡画像の画素の特徴量（特定の特徴を有する画素の分布等）に基づいて、注目すべき領域である注目領域を検出する。逆に、注目領域検出部５２は、特徴量算出部５３において算出した特徴量を用いて、内視鏡画像から注目領域を検出することができる。例えば、注目領域検出部５２は、画像生成部３６が生成した内視鏡画像が遠景画像６１である場合に、発赤領域６３を注目領域として検出する。注目領域検出部５２は、画像生成部が生成した内視鏡画像が遠景画像６１である場合に、酸素飽和度が特定の範囲にある領域を注目領域として検出する。また、注目領域検出部５２は、画像生成部３６が生成した内視鏡画像が近景画像７１である場合に、不整度が特定の範囲にある不整血管領域７３を注目領域として検出する。注目領域検出部５２が検出した注目領域の位置または範囲等は、病変の有無または病変の種類に係る解析結果の１つである。なお、注目領域検出部５２は、プロセッサ装置３３が備えるポインティングデバイス等の操作部（図示しない）を用いて、手動で指定した領域を注目領域とすることができる。
【００６８】
特徴量算出部５３は、例えば、不整度算出部５６、及び、酸素飽和度算出部５７を備える。不整度算出部５６は、内視鏡画像を用いて被写体像が含む血管の不整度を算出する。酸素飽和度算出部５７は、酸素飽和度観察モードにおいて取得する複数の内視鏡画像を用いて画素ごとに被写体６２の酸素飽和度を算出する。特徴量算出部５３は、不整度及び酸素飽和度以外の特徴量を算出する任意の算出部を含むことができる。例えば、特徴量として血管の密度を算出する場合、特徴量算出部５３は血管密度算出部を含むことができる。
【００６９】
以下、内視鏡装置２１から内視鏡画像及びその解析結果を取得する医療画像処理装置１０の動作の流れを説明する。図５に示すように、医療画像取得部１１は、自動的にまたは手動選択により、第１医療画像である遠景画像６１を取得し、かつ、医療画像解析結果取得部１２は、第１解析結果である「遠景画像６１に係る解析結果」を取得する（ステップＳ１０）。遠景画像６１に係る解析結果は、発赤の範囲を示す発赤領域６３である。
【００７０】
上記のように第１医療画像及び第１解析結果を取得すると、表示制御部１５は、第１医療画像及び第１解析結果を表示部１３に表示する（ステップＳ１１）。具体的には、表示制御部１５は、表示部１３に、図６に示す遠景画像６１を表示し、かつ、遠景画像６１上に発赤領域６３を表示する。発赤領域６３は、例えば輪郭６４の表示、輪郭６４内の色もしくは明るさ等の調節、または、これらの両方によって強調表示する。これにより、遠景画像６１上において、通常の粘膜と区別して、発赤領域６３を明確に認識できる。
【００７１】
その後、自動的にまたは手動選択により、医療画像取得部１１が第２医療画像である近景画像７１を取得し、かつ、医療画像解析結果取得部１２が第２解析結果である「近景画像７１に係る解析結果」を取得する（ステップＳ１２）。近景画像７１に係る解析結果は、不整血管領域７３である。こうして第１医療画像及び第２解析結果を取得すると、表示制御部１５は、第２医療画像及び第２解析結果を表示部１３に表示する（ステップＳ１３）。具体的には、表示制御部１５は、表示部１３に、図７に示す近景画像７１を表示し、かつ、近景画像７１上に不整血管領域７３を表示する。不整血管領域７３は、輪郭７４の表示、輪郭７４内の色もしくは明るさ等調節、または、これらの両方によって強調表示する。これにより、近景画像７１上において、不整度が低い正常な血管（以下、正常血管という）７６を区別して、不整血管領域７３を明確に認識できる。
【００７２】
上記のように、遠景画像６１及び発赤領域６３の表示から近景画像７１及び不整血管領域７３の表示に切り替えると、対応関係設定部１４は、発赤領域６３と不整血管領域７３との間に対応関係を設定する（ステップＳ１４）。具体的には、図８に示すように、不整血管領域７３は、不整度算出部５６が算出した不整度を基準とし、不整度が閾値Ｘ１以上の高い（「Ｈ」）値である画素を含む領域であるとする。この場合、近景画像７１を用いて、不整度が閾値Ｘ１以上の画素を含む不整血管領域７３に属するグループＧｉの赤色画素の平均画素値Ｖｉを算出する。また、近景画像７１を用いて、不整度が閾値Ｘ１未満の低い（「Ｌ」）値である画素のみを含むグループＧｎ、すなわち、不整血管領域７３に属しない赤色画素の平均画素値Ｖｎを算出する。そして、例えば、グループＧｉの赤色画素の平均画素値Ｖｉと、グループＧｎの赤色画素の平均画素値Ｖｎと、の間（例えば、平均画素値Ｖｉと平均画素値Ｖｎの中間の値）に、赤色画素の画素値（以下、赤色画素値という）についての閾値Ｔｈ２を設定する。閾値Ｔｈ２は、赤色画素値を用いて、不整血管領域７３に属する画素と、不整血管領域７３に属しない画素とを区別する。すなわち、赤色画素値が閾値Ｔｈ２以上の画素を不整血管領域７３に属する画素と捉え、赤色画素値が閾値Ｔｈ２以下の画素を不整血管領域７３に属しない画素と捉えることができる。
【００７３】
図９に示すように、遠景画像６１においては、例えば、赤色画素値が閾値Ｔｈ１以上の高い（「Ｈ」）値を有する画素を含む領域が発赤領域６３であり、赤色画素値が閾値Ｔｈ１未満の低い（「Ｌ」）値を有する画素のみを含む領域が発赤がない正常な粘膜を表す。このため、赤色画素値に閾値Ｔｈ２を設定すると、不整血管領域７３と発赤領域６３とを対応付けることができる。
【００７４】
上記のように、対応関係設定部１４が、不整血管領域７３と発赤領域６３の対追撃関係として、赤色画素値に閾値Ｔｈ２を設定した後、さらに、表示部１３に表示する内視鏡画像を切り替えると、表示制御部１５は対応関係設定部１４が設定した対応関係を用いた表示態様で内視鏡画像を表示する。すなわち、対応関係の設定後、第１医療画像を表示する場合（ステップＳ１６：ＹＥＳ）、表示制御部１５は、第２解析結果に相当する特徴を認識できる態様で、第１医療画像及び第１解析結果を表示する（ステップＳ１７）。また、対応関係の設定後、第２医療画像を表示する場合（ステップＳ１８：ＹＥＳ）、第１解析結果に相当する特徴を認識できる態様で、第２医療画像及び第２解析結果を表示する（ステップＳ１９）。
【００７５】
より具体的には、遠景画像６１に次いで近景画像７１を表示し、赤色画素値に閾値Ｔｈ２を設定した後、さらに近景画像７１を表示する場合、図１０に示すように、表示制御部１５は、遠景画像６１上に、発赤領域６３とともに不整血管領域７３を表示する。不整血管領域７３は、閾値Ｔｈ２以上の赤色画素値を有する画素を含む領域であり、輪郭７４を表示し、または、輪郭７４内の色もしくは明るさの調節によって強調表示する。発赤領域６３に含まれ、かつ、不整血管領域７３に含まれない領域８６は、例えば、正常血管７６の密度または血流量等に起因する発赤である。
【００７６】
遠景画像６１は細い血管を観察することすらできず、遠景画像６１を見ても血管の不整血管領域７３を知得できないのが通常である。しかし、上記のように、発赤領域６３を定める尺度である赤色画素値に、不整血管領域７３を識別する閾値Ｔｈ２を定めることにより、発赤領域６３と不整血管領域７３との間に対応関係を設定し、この対応関係を用いることで、遠景画像６１上において不整血管領域７３の情報を示すことができる。
【００７７】
すなわち、医療画像処理装置１０は、互いに撮影条件が異なる第１医療画像及び第２医療画像がある場合に、第１医療画像に係る第１解析結果と第２医療画像に係る第２解析結果との対応関係を設定し、設定した対応関係を用いて第１医療画像または第２医療画像の表示態様を設定する。これにより、対応関係の設定後に、第１医療画像を表示する際には、第１医療画像の解析では通常は得られない第２解析結果に相当する情報を、第１医療画像上において提示できる。また、対応関係の設定後に、第２医療画像を表示する際には、第２医療画像の解析では通常は得られない第１解析結果に相当する情報を、第２医療画像上において提示できる。
【００７８】
また、遠景画像６１と近景画像７１を比較すると、近景画像７１に写る範囲は、遠景画像６１においては例えばほぼ１点または極小の範囲である。このため、近景画像７１において検出した不整血管領域７３の遠景画像６１上における位置を、被写体６２の形状的特徴等を用いて特定できたとしても、遠景画像６１上ではある１点または極小の範囲に不整血管領域７３であることが分かるだけで、遠景画像６１上における不整血管領域７３の広範な分布は示すことができない。これに対し、上記のように、遠景画像６１と近景画像７１の各解析結果に対応関係を設定し、設定した対応関係を用いて表示態様を変更すれば、遠景画像６１上の近景画像７１に写っていない範囲においても広範に不整血管領域７３を示すことができる。この点においても、医療画像処理装置１０は、第１医療画像の解析では通常は得られない第２解析結果に相当する情報を第１医療画像上において提示できる。同様に、第２医療画像の解析では通常は得られない第１解析結果に相当する情報を、第２医療画像上において提示できる。
【００７９】
また、対応関係の設定後、遠景画像６１において不整血管領域７３とその他の領域を区別できるので、遠景画像６１と近景画像７１の表示切り替えに際し、不整血管領域７３を容易に追跡できるという利点もある。医療画像処理装置１０によれば、第１医療画像と第２医療画像の表示の切り替えに際して、第１解析結果または第２解析結果を追跡できる。
【００８０】
上記の医療画像処理装置１０は、特に、バレット食道または潰瘍性大腸炎の診断に特に有用である。バレット食道及び潰瘍性大腸炎は、発赤または萎縮に起因する粘膜の色の変化等と、不整血管の分布に係る情報が診断に有益な情報である。このため、発赤等の色の変化と、不整血管領域７３の分布を遠景画像６１において提示する医療画像処理装置１０は、バレット食道及び潰瘍性大腸炎の診断を容易にする。
【００８１】
なお、上記実施形態における医療画像処理装置１０は、被写体６２の広範囲を撮影した内視鏡画像である遠景画像６１と、遠景画像６１と比較して近くから被写体６２を撮影した内視鏡画像である近景画像７１と、を取得する医療画像取得部１１と、遠景画像６１の解析結果として、発赤がある領域を表す発赤領域６３に係る情報を取得し、かつ、近景画像７１の解析結果として、不整血管がある領域を表す不整血管領域７３に係る情報を取得する医療画像解析結果取得部１２と、医療画像取得部１１が取得した内視鏡画像と、医療画像解析結果取得部１２が取得した解析結果と、を表示する表示部１３と、発赤領域６３に係る情報と、不整血管領域７３に係る情報と、の対応関係を設定する対応関係設定部１４と、表示部１３に遠景画像６１を表示する際に、対応関係を用いて、遠景画像６１上に不整血管領域７３に係る情報を表示する表示制御部１５と、を備える医療画像処理装置ということができる。
【００８２】
上記実施形態においては、対応関係設定部１４は、発赤領域６３と不整血管領域７３とを対応付ける閾値Ｔｈ２を、近景画像７１の画素値を用いて算出しているが、この対応付けの方法は１つの例であり、対応関係設定部１４は、別の任意の方法で対応付けを行うことができる。例えば、対応関係設定部１４は、時系列に撮影した遠景画像６１と近景画像７１における被写体６２の動き等（撮影した内視鏡３１の動き、または拡大した位置等を含む）を追跡することができる。その結果、対応関係設定部１４は、近景画像７１において検出した不整血管領域７３（注目領域）が、遠景画像６１においてどの位置または範囲であるかを特定することができる。この場合、対応関係設定部１４は、被写体６２の動き等の追跡により特定した「遠景画像６１における不整血管領域７３の画素」を参照して、上記実施形態と同様の閾値Ｔｈ２を算出することができる。例えば、対応関係設定部１４は、遠景画像６１における１または複数の特定画素が不整血管領域７３に属する事が判明した場合、対応関係設定部１４は、特定画素の赤色画素値の最小値を上記実施形態における閾値Ｔｈ２とすることができる。
【００８３】
上記実施形態においては、近景画像７１において検出した不整血管領域７３の情報を、遠景画像６１上に表示しているが、これとは逆に、遠景画像６１において検出した発赤領域６３の位置または範囲等の情報を、近景画像７１上に表示することができる。例えば、遠景画像６１において検出した発赤領域６３の位置または範囲等の情報は、上記変形例と同様に被写体６２の動き等の動き等の追跡により、近景画像７１上に表示することができる。
【００８４】
上記実施形態においては、被写体６２の撮影距離が異なる遠景画像６１と近景画像７１の組み合わせを第１医療画像及び第２医療画像としているが、医療画像処理装置１０において使用する第１医療画像及び第２医療画像は、各々に異なる解析結果が得られる医療画像であれば、任意の組み合わせの医療画像を使用できる。また、上記実施形態においては、発赤領域６３と不整血管領域７３の対応関係を設定しているが、対応関係を設定する第１解析結果と第２解析結果の組み合わせも任意である。また、第１解析結果と第２解析結果を求める際に使用する特徴量も任意のものが利用でき、例えば、第１解析結果を求めるために、複数の特徴量を組合せた値としても良い。内視鏡画像以外の医療画像を用いる場合も同様である。
【００８５】
上記実施形態においては、遠景画像６１上に不整血管領域７３を表示する際に、不整血管領域７３の輪郭７４を表示しているが、遠景画像６１上において不整血管領域７３を認識できれば、遠景画像６１上における不整血管領域７３の表示態様は任意である。例えば、正確な輪郭７４を表示する代わりに、不整血管領域７３を含む四角形の枠、または、不整血管領域７３の位置を示す矢印等を用いて、不整血管領域７３を表示しても良い。
【００８６】
上記実施形態においては、遠景画像６１及び近景画像７１の撮影距離が異なる医療画像を使用しているが、撮影距離は、例えばズームレベル、被写体６２の幾何学的形状（ピットパターンのサイズ等）から求めることができる。このため、複数の医療画像がある場合、これらの医療画像を観察距離を用いて分類し、この分類ごとに、解析結果の対応関係を設定することができる。すなわち、観察距離の分類ごとに表示形態を設定することができる。
【００８７】
なお、上記実施形態においては、対応関係の設定に使用した第１医療画像及び第２医療画像は、関連付けて保存しておくことが好ましい。例えば、同一のフォルダに保存する等である。
【００８８】
上記実施形態においては、医療画像解析処理部３７は内視鏡装置２１のプロセッサ装置３３に設けているが、図１１に示すよう医療画像処理装置２１０のように、医療画像解析処理部３７は、医療画像処理装置１０に設けることができる。この場合、医療画像解析結果取得部１２は、医療画像処理装置１０が有する医療画像解析処理部３７から解析結果を取得することができる。
【００８９】
また、内視鏡装置２１は、医療画像処理装置１０を含むことができる。この場合、図１２に示すように、医療画像処理装置１０を構成する各部２２０は、プロセッサ装置３３に設ける。但し、表示部１３は、内視鏡装置２１のモニタ３４を共用することができるので、プロセッサ装置３３には表示部１３以外の各部を設ければ足りる。また、上記実施形態及びその他変形例の医療画像処理装置１０と、図２の内視鏡装置２１と、の全体で新たな内視鏡装置を構成することができる。
【００９０】
内視鏡装置２１は、基本的にリアルタイムに被写体６２を観察する装置であるから、上記のように、内視鏡装置２１が医療画像処理装置１０を含む場合、対応関係の設定は、自動的または手動設定により、任意のタイミングで行うことができる。医療画像処理装置１０を含む内視鏡装置２１において、上記実施形態のように遠景画像６１の発赤領域６３と近景画像７１の不整血管領域７３の対応関係を設定する場合には、観察距離が近く、かつ、医師がフリーズ操作もしくはレリーズ操作をした場合に、または、不整血管を検出した場合に、対応関係を設定することが好ましい。不整血管が観察でき、不整血管領域７３を検出し得る近景画像７１が得られるからである。
【００９１】
また、医療画像処理装置１０を含む内視鏡装置２１においては、連続的に複数の内視鏡画像（すなわち被写体６２の動画）が得られるので、第１解析結果と第２解析結果の対応関係を、複数フレーム分の内視鏡画像を用いて設定することができる。例えば、閾値Ｔｈ２を設定する際に、複数フレーム分の近景画像７１及び解析結果を用いて算出すれば、より精度が高い閾値Ｔｈ２を設定することができる。
【００９２】
上記実施形態においては、対応関係設定部１４は、第１解析結果と第２解析結果の対応関係を設定するが、対応関係設定部１４は、設定した対応関係を用いて、第１医療画像から第２解析結果に相当する情報を求めることができる。また、対応関係設定部１４は、設定した対応関係を用いて、第２医療画像から第１解析結果に相当する情報を求めることができる。この場合、図１３に示すように、対応関係設定部１４には、変換部３０１を設ける。変換部３０１は、例えば、近景画像７１を縮小して、近景画像７１の赤色画素値の平均化する。これにより、遠景画像６１において近景画像７１に対応する部分の赤色画素値（赤色画素値の平均値）を得ることができ、結果として、発赤領域６３に属するか否か、及び、発赤領域６３に属する場合、どの程度の発赤なのか、を判別できる。また、近景画像７１を用いて算出した赤色画素値と、遠景画像６１において近景画像７１に対応する部分の赤色画素値とに相違があれば、照明光の光量等の撮影条件が原因であるから、これを考慮した補正をして、より正確な対応関係を設定することができる。
【００９３】
また、対応関係の設定後は、対応関係設定部１４は、設定した対応関係を用いれば、対応関係を設定した一方の解析結果を他方の解析結果に変換すること、または、対応関係を設定した一方の解析結果から他方の解析結果を算出することができる。この変換または算出は変換部３０１が行う。
【００９４】
また、図１４に示すように、内視鏡装置２１その他モダリティと組み合わせて使用する診断支援装置６１０は、上記実施形態及びその他変形例の医療画像処理装置１０を含むことができる。また、図１５に示すように、例えば内視鏡装置２１を含む、第１検査装置６２１、第２検査装置６２２、…、第Ｎ検査装置６２３等の各種検査装置と任意のネットワーク６２６を介して接続する医療業務支援装置６３０は、上記実施形態及びその他変形例の医療画像処理装置１０を含むことができる。
【００９５】
この他、医療画像処理装置１０、及び、医療画像処理装置１０を含む各種装置、及び、医療画像処理装置１０の機能を内包する各種装置またはシステムは、以下の種々の変更等をして使用することができる。
【００９６】
上記実施形態のように、医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出する医療画像解析処理部３７を備える場合、医療画像解析結果取得部１２は、医療画像解析処理部３７から注目領域の情報を含む解析結果を取得することができる。
【００９７】
医療画像解析処理部３７が、医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出する場合、医療画像解析結果取得部１２は、医療画像解析処理部３７から注目すべき対象の有無に関する情報を含む解析結果を取得することができる。
【００９８】
医療画像解析結果取得部１２は、医療画像に係る解析結果を記録する記録装置から解析結果から取得することができる。ＰＡＣＳ２２等の管理システムもしくはその他情報システム、内視鏡装置２１等が有するストレージ（図示しない）、または、ＮＡＳ（Network Attached Storage）その他の外部ストレージは、この記録装置の一例である。
【００９９】
医療画像としては、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像を用いることができる。
【０１００】
医療画像としては、特定の波長帯域の光を照射して得た画像を使用する場合、特定の波長帯域は、白色の波長帯域よりも狭い帯域を用いることができる。
【０１０１】
特定の波長帯域は、例えば、可視域の青色帯域または緑色帯域である。
【０１０２】
特定の波長帯域が可視域の青色帯域または緑色帯域である場合、特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有することが好ましい。
【０１０３】
特定の波長帯域は、例えば、可視域の赤色帯域である。
【０１０４】
特定の波長帯域が可視域の赤色帯域である場合、特定の波長帯域は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍの波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍの波長帯域内にピーク波長を有することが好ましい。
【０１０５】
特定の波長帯域は、例えば、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有することができる。
【０１０６】
特定の波長帯域が、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する場合、特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍの波長帯域にピーク波長を有することが好ましい。
【０１０７】
医療画像が生体内を写した生体内画像である場合、この生体内画像は、生体内の蛍光物質が発する蛍光の情報を有することができる。
【０１０８】
また、蛍光は、ピーク波長が３９０ｎｍ以上４７０ｎｍ以下である励起光を生体内に照射して得る蛍光を利用できる。
【０１０９】
医療画像が生体内を写した生体内画像である場合、前述の特定の波長帯域は、赤外光の波長帯域を利用することができる。
【０１１０】
医療画像が生体内を写した生体内画像であり、前述の特定の波長帯域として、赤外光の波長帯域を利用する場合、特定の波長帯域は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍの波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍの波長帯域にピーク波長を有することが好ましい。
【０１１１】
医療画像取得部１１は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有することができる。この場合、医療画像は特殊光画像を利用できる。
【０１１２】
特定の波長帯域の信号は、通常光画像に含むＲＧＢまたはＣＭＹの色情報に基づく演算により得ることができる。
【０１１３】
白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備えることができる。この場合、医療画像は特徴量画像を利用できる。
【０１１４】
内視鏡装置２１については、内視鏡３１はカプセル内視鏡を使用することができる。この場合、光源装置３２と、プロセッサ装置３３の一部と、はカプセル内視鏡に搭載することができる。
【０１１５】
上記実施形態において、医療画像取得部１１、医療画像解析結果取得部１２、対応関係設定部１４、表示制御部１５、入力受信部１６、統括制御部１７、画像生成部３６、及び、医療画像解析処理部３７、といった各種の処理を実行する処理部（processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウエア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit)、ＦＰＧＡ (Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device:ＰＬＤ）、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
【０１１６】
１つの処理部は、これら各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合せ（例えば、複数のＦＰＧＡや、ＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウエアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:ＳｏＣ）などに代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。
【０１１７】
さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路（circuitry）である。
【符号の説明】
【０１１８】
１０  医療画像処理装置
１１  医療画像取得部
１２  医療画像解析結果取得部
１３  表示部
１４  対応関係設定部
１５  表示制御部
１６  入力受信部
１７  統括制御部
２１  内視鏡装置
２２  ＰＡＣＳ
３１  内視鏡
３２  光源装置
３３  プロセッサ装置
３４  モニタ
３６  画像生成部
３７  医療画像解析処理部
４１  照明光学系
４２  撮影光学系
４３  操作部
４６  ズーム操作部
４７  撮影指示部
４８  モード切替部
５１  血管等検出部
５２  注目領域検出部
５３  特徴量算出部
５６  不整度算出部
５７  酸素飽和度算出部
６１  遠景画像
６２  被写体
６３  発赤領域
６４  輪郭
７１  近景画像
７３  不整血管領域
７４  輪郭
７６  正常血管
８６  不整血管領域７３に含まれない領域
２１０  医療画像処理装置
２２０  医療画像処理装置を構成する各部
３０１  変換部
６１０  診断支援装置
６２１  第１検査装置
６２２  第２検査装置
６２３  第Ｎ検査装置
６２６  ネットワーク
６３０  医療業務支援装置
Ｇｉ  グループ
Ｇｎ  グループ
Ｔｈ１  閾値
Ｔｈ２  閾値
Ｖｉ、Ｖｎ  平均画素値
Ｘ１  閾値
【図１】
2019042156.tif 000003
【図２】
2019042156.tif 000004
【図３】
2019042156.tif 000005
【図４】
2019042156.tif 000006
【図５】
2019042156.tif 000007
【図６】
2019042156.tif 000008
【図７】
2019042156.tif 000009
【図８】
2019042156.tif 000010
【図９】
2019042156.tif 000011
【図１０】
2019042156.tif 000012
【図１１】
2019042156.tif 000013
【図１２】
2019042156.tif 000014
【図１３】
2019042156.tif 000015
【図１４】
2019042156.tif 000016
【図１５】
2019042156.tif 000017