(57)【要約】医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知する医療画像処理装置、医療画像処理方法及びプログラム、診断支援装置を提供する。医療画像に含まれる注目領域を報知する図形を医療画像に重畳する重畳処理部を有し、重畳処理部は、注目領域の内側に図形を重畳させ、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にすることで注目領域と非注目領域との境界の観察を妨げずに注目領域を報知する。
2020090731.tif 000002
【特許請求の範囲】
【請求項１】
医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有し、
前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にする医療画像処理装置。
【請求項２】
前記医療画像を取得する画像取得部と、
前記医療画像から注目領域情報を取得する注目領域情報取得部と、
を備えた請求項１に記載の医療画像処理装置。
【請求項３】
前記重畳処理部は、前記境界を指示する図形を前記注目領域に重畳する請求項１又は２に記載の医療画像処理装置。
【請求項４】
前記重畳処理部は、前記注目領域の重心を示す図形を前記注目領域に重畳する請求項１から３のいずれか１項に記載の医療画像処理装置。
【請求項５】
前記重畳処理部は、前記注目領域の面積に応じたサイズの前記図形を重畳する請求項１から４のいずれか１項に記載の医療画像処理装置。
【請求項６】
前記重畳処理部は、前記注目領域の面積が第１面積以上の場合は一定の第１サイズの前記図形を重畳する請求項５に記載の医療画像処理装置。
【請求項７】
前記重畳処理部は、前記注目領域の面積が第２面積以下の場合は一定の第２サイズの前記図形を重畳する請求項５又は６に記載の医療画像処理装置。
【請求項８】
前記重畳処理部は、前記注目領域の面積に応じた形状の前記図形を重畳する請求項１から７のいずれか１項に記載の医療画像処理装置。
【請求項９】
前記重畳処理部は、前記注目領域の面積が第３面積以上の場合は前記注目領域の内側から前記境界を指示する図形を重畳し、かつ前記注目領域の面積が第３面積未満の場合は前記注目領域の内側の座標を示す図形を重畳する請求項８に記載の医療画像処理装置。
【請求項１０】
前記重畳処理部は、前記注目領域の面積が第４面積以上の場合は前記注目領域の内側から前記境界を指示する前記図形を重畳し、かつ前記注目領域の面積が第４面積未満の場合は前記注目領域の外側に前記図形を重畳する請求項８に記載の医療画像処理装置。
【請求項１１】
前記図形を生成する図形生成部を備えた請求項１から１０のいずれか１項に記載の医療画像処理装置。
【請求項１２】
前記図形が重畳された前記医療画像を表示部に表示させる表示制御部を備えた請求項１から１１のいずれか１項に記載の医療画像処理装置。
【請求項１３】
請求項１２に記載の医療画像処理装置と、
前記表示部と、
を備えた診断支援装置。
【請求項１４】
医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理工程を有し、
前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にする医療画像処理方法。
【請求項１５】
請求項１４に記載の医療画像処理方法をコンピュータに実行させるためのプログラム。
【請求項１６】
非一時的かつコンピュータ読取可能な記録媒体であって、前記記録媒体に格納された指令がコンピュータによって読み取られた場合に請求項１５に記載のプログラムをコンピュータに実行させる記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は医療画像処理装置、医療画像処理方法及びプログラム、診断支援装置に係り、特に医療画像の注目領域を報知する技術に関する。
【背景技術】
【０００２】
医療画像から病変等の注目領域を検出し、Bounding Box（領域を囲む矩形）等を表示して、医師に注目領域が検出されたことを報知する技術が知られている。【０００３】
特許文献１には、内視鏡検査時に画像から病変が検出された場合に、モニタに表示されている画像中の病変領域を枠で囲むことで、病変を報知することが記載されている。また、特許文献２には、モニタに表示される観察画像とは別の場所に、病変位置を示す情報を表示する方法が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】国際公開第２０１７／０７３３３８号
【特許文献２】国際公開第２０１７／１１５４４２号
【発明の概要】
【発明が解決しようとする課題】
【０００５】
医師が視線移動をすることなく病変位置を認知するためには、医師が画像を観察しているモニタに病変領域を表示させることが必要である。一方で、病変領域とその周辺の正常粘膜とを見比べる際には、病変領域の境界のコントラストが判断材料になるため、できる限り病変領域の境界の観察の邪魔にならないように表示する必要がある。【０００６】
特許文献１に記載されているように、病変領域を囲う図形を表示すると、病変領域の境界が視認しにくくなるという危険性がある。また、病変領域の境界に重ならないように病変領域を囲う図形を表示すると、図形が病変領域から大きくはみ出してしまい、正常粘膜の観察を妨げ、さらには病変の見落としにつながる危険性がある。【０００７】
本発明はこのような事情に鑑みてなされたもので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知する医療画像処理装置、医療画像処理方法及びプログラム、診断支援装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために医療画像処理装置の一の態様は、医療画像に含まれる注目領域を報知する図形を医療画像に重畳する重畳処理部を有し、重畳処理部は、注目領域の内側に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にする医療画像処理装置である。【０００９】
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１０】
医療画像を取得する画像取得部と、医療画像から注目領域情報を取得する注目領域情報取得部と、を備えることが好ましい。これにより、医療画像を適切に取得し、注目領域情報を適切に取得することができる。【００１１】
重畳処理部は、境界を指示する図形を注目領域に重畳することが好ましい。これにより、ユーザに注目領域の境界を認識させることができる。【００１２】
重畳処理部は、注目領域の重心を示す図形を注目領域に重畳することが好ましい。これにより、ユーザに注目領域を報知することができる。【００１３】
重畳処理部は、注目領域の面積に応じたサイズの図形を重畳することが好ましい。これにより、注目領域の面積によらずに医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１４】
重畳処理部は、注目領域の面積が第１面積以上の場合は一定の第１サイズの図形を重畳することが好ましい。これにより、注目領域の面積が第１面積以上の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１５】
重畳処理部は、注目領域の面積が第２面積以下の場合は一定の第２サイズの図形を重畳することが好ましい。これにより、注目領域の面積が第２面積以下の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１６】
重畳処理部は、注目領域の面積に応じた形状の図形を重畳することが好ましい。これにより、注目領域の面積によらずに医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１７】
重畳処理部は、注目領域の面積が第３面積以上の場合は注目領域の内側から境界を指示する図形を重畳し、かつ注目領域の面積が第３面積未満の場合は注目領域の内側の座標を示す図形を重畳することが好ましい。これにより、注目領域の面積が第３面積未満の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１８】
重畳処理部は、注目領域の面積が第４面積以上の場合は注目領域の内側から境界を指示する図形を重畳し、かつ注目領域の面積が第４面積未満の場合は注目領域の外側に図形を重畳することが好ましい。これにより、注目領域の面積が第４面積未満の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００１９】
図形を生成する図形生成部を備えることが好ましい。これにより、注目領域に重畳するための図形を生成することができる。【００２０】
図形が重畳された医療画像を表示部に表示させる表示制御部を備えることが好ましい。これにより、ユーザは図形が重畳された医療画像を表示部によって視認することができる。【００２１】
上記目的を達成するために診断支援装置の一の態様は、上記に記載の医療画像処理装置と、表示部と、を備えた診断支援装置である。【００２２】
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域の境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。【００２３】
上記目的を達成するために医療画像処理方法の一の態様は、医療画像に含まれる注目領域を報知する図形を医療画像に重畳する重畳処理工程を有し、重畳処理工程は、注目領域の内側に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にする医療画像処理方法である。【００２４】
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域の境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。上記の医療画像処理方法をコンピュータに実行させるためのプログラムも本態様に含まれる。
【発明の効果】
【００２５】
本発明によれば、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【図面の簡単な説明】
【００２６】
【図１】図１は、医療画像処理装置を含む内視鏡システムの全体構成を示す概略図である。
【図２】図２は、医療画像処理装置の電気的構成の一例を示すブロック図である。
【図３】図３は、医療画像処理方法の各処理の一例を示すフローチャートである。
【図４】図４は、表示器の表示の一例を示す図である。
【図５】図５は、表示器の表示の一例を示す図である。
【図６】図６は、表示器の表示の一例を示す図である。
【図７】図７は、表示器の表示の一例を示す図である。
【図８】図８は、図形の他の例を示す図である。
【図９】図９は、図形の他の例を示す図である。
【図１０】図１０は、注目領域の重心を示す図である。
【図１１】図１１は、注目領域に外接する矩形の中心を示す図である。
【図１２】図１２は、表示器の表示の一例を示す図である。
【図１３】図１３は、表示器の表示の一例を示す図である。
【図１４】図１４は、表示器の表示の一例を示す図である。
【図１５】図１５は、表示器の表示の一例を示す図である。
【図１６】図１６は、表示器の表示の一例を示す図である。
【図１７】図１７は、表示器の表示の一例を示す図である。
【図１８】図１８は、注目領域を囲う４つの図形を示す図である。
【図１９】図１９は、注目領域を囲う４つの図形を示す図である。
【図２０】図２０は、注目領域を囲う４つの図形を示す図である。
【図２１】図２１は、表示器の表示の一例を示す図である。
【発明を実施するための形態】
【００２７】
以下、添付図面に従って本発明の好ましい実施形態について詳説する。
【００２８】
＜内視鏡システムの全体構成＞
図１は、本実施形態に係る医療画像処理装置を含む内視鏡システム９の全体構成を示す概略図である。図１に示すように、内視鏡システム９は、電子内視鏡である内視鏡スコープ１０と、光源装置１１と、内視鏡プロセッサ装置１２と、表示装置１３と、医療画像処理装置１４と、操作部１５と、表示器１６と、を備える。
【００２９】
内視鏡スコープ１０は、時系列の医療画像を撮像するためのものであり、例えば軟性内視鏡である。この内視鏡スコープ１０は、被検体内に挿入され且つ先端と基端とを有する挿入部２０と、挿入部２０の基端側に連設され且つユーザ（医師）が把持して各種操作を行う手元操作部２１と、手元操作部２１に連設されたユニバーサルコード２２と、を有する。
【００３０】
挿入部２０は、全体が細径で長尺状に形成されている。挿入部２０は、その基端側から先端側に向けて順に可撓性を有する軟性部２５と、手元操作部２１の操作により湾曲可能な湾曲部２６と、不図示の撮像光学系（対物レンズ）及び撮像素子２８等が内蔵される先端部２７と、が連設されて構成される。
【００３１】
撮像素子２８は、ＣＭＯＳ（complementary metal oxide semiconductor）型又はＣＣＤ（charge coupled device）型の撮像素子である。撮像素子２８の撮像面には、先端部２７の先端面に開口された不図示の観察窓、及びこの観察窓の後方に配置された不図示の対物レンズを介して、被観察部位の像光が入射する。撮像素子２８は、その撮像面に入射した被観察部位の像光を撮像（電気信号に変換）して、撮像信号を出力する。
【００３２】
手元操作部２１には、ユーザによって操作される各種操作部材が設けられている。具体的に、手元操作部２１には、湾曲部２６の湾曲操作に用いられる２種類の湾曲操作ノブ２９と、送気送水操作用の送気送水ボタン３０と、吸引操作用の吸引ボタン３１と、が設けられている。また、手元操作部２１には、被観察部位の静止画３９の撮像指示を行うための静止画撮像指示部３２と、挿入部２０内を挿通している処置具挿通路（不図示）内に処置具（不図示）を挿入する処置具導入口３３と、が設けられている。
【００３３】
ユニバーサルコード２２は、内視鏡スコープ１０を光源装置１１に接続するための接続コードである。このユニバーサルコード２２は、挿入部２０内を挿通しているライトガイド３５、信号ケーブル３６、及び流体チューブ（不図示）を内包している。また、ユニバーサルコード２２の端部には、光源装置１１に接続されるコネクタ３７ａと、このコネクタ３７ａから分岐され且つ内視鏡プロセッサ装置１２に接続されるコネクタ３７ｂと、が設けられている。
【００３４】
コネクタ３７ａを光源装置１１に接続することで、ライトガイド３５及び流体チューブ（不図示）が光源装置１１に挿入される。これにより、ライトガイド３５及び流体チューブ（不図示）を介して、光源装置１１から内視鏡スコープ１０に対して必要な照明光と水と気体とが供給される。その結果、先端部２７の先端面の照明窓（不図示）から被観察部位に向けて照明光が照射される。また、前述の送気送水ボタン３０の押下操作に応じて、先端部２７の先端面の送気送水ノズル（不図示）から先端面の観察窓（不図示）に向けて気体又は水が噴射される。
【００３５】
コネクタ３７ｂを内視鏡プロセッサ装置１２に接続することで、信号ケーブル３６と内視鏡プロセッサ装置１２とが電気的に接続される。これにより、信号ケーブル３６を介して、内視鏡スコープ１０の撮像素子２８から内視鏡プロセッサ装置１２へ被観察部位の撮像信号が出力されるとともに、内視鏡プロセッサ装置１２から内視鏡スコープ１０へ制御信号が出力される。
【００３６】
光源装置１１は、コネクタ３７ａを介して、内視鏡スコープ１０のライトガイド３５へ照明光を供給する。照明光は、白色光（白色の波長帯域の光又は複数の波長帯域の光）、或いは１又は複数の特定の波長帯域の光、或いはこれらの組み合わせ等の観察目的に応じた各種波長帯域の光が選択される。なお、特定の波長帯域は、白色の波長帯域よりも狭い帯域である。
【００３７】
特定の波長帯域の第１例は、例えば可視域の青色帯域又は緑色帯域である。この第１例の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下又は５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、且つ第１例の光は、３９０ｎｍ以上４５０ｎｍ以下又は５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有する。
【００３８】
特定の波長帯域の第２例は、例えば可視域の赤色帯域である。この第２例の波長帯域は、５８５ｎｍ以上６１５ｎｍ以下又は６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、且つ第２例の光は、５８５ｎｍ以上６１５ｎｍ以下又は６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有する。
【００３９】
特定の波長帯域の第３例は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、且つ第３例の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する。この第３例の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、又は６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、且つ第３例の光は、上記４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、又は６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有する。
【００４０】
特定の波長帯域の第４例は、生体内の蛍光物質が発する蛍光の観察（蛍光観察）に用いられ且つこの蛍光物質を励起させる励起光の波長帯域（３９０ｎｍから４７０ｎｍ）である。
【００４１】
特定の波長帯域の第５例は、赤外光の波長帯域である。この第５例の波長帯域は、７９０ｎｍ以上８２０ｎｍ以下又は９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、且つ第５例の光は、７９０ｎｍ以上８２０ｎｍ以下又は９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有する。
【００４２】
内視鏡プロセッサ装置１２は、コネクタ３７ｂ及び信号ケーブル３６を介して、内視鏡スコープ１０の動作を制御する。また、内視鏡プロセッサ装置１２は、コネクタ３７ｂ及び信号ケーブル３６を介して内視鏡スコープ１０の撮像素子２８から取得した撮像信号に基づき、時系列のフレーム画像３８ａ（図２参照）からなる時系列の医療画像である動画３８を生成する。動画３８のフレームレートは、例えば３０ｆｐｓ（frame per second）である。
【００４３】
更に、内視鏡プロセッサ装置１２は、内視鏡スコープ１０の手元操作部２１にて静止画撮像指示部３２が操作された場合、動画３８の生成と並行して、動画３８中の１枚のフレーム画像３８ａを撮像指示のタイミングに応じて取得し、静止画３９とする。
【００４４】
動画３８及び静止画３９は、被検体内、即ち生体内を撮像した医療画像である。更に動画３８及び静止画３９が、上述の特定の波長帯域の光（特殊光）により得られた画像である場合、両者は特殊光画像である。そして、内視鏡プロセッサ装置１２は、生成した動画３８及び静止画３９を、表示装置１３と医療画像処理装置１４とにそれぞれ出力する。
【００４５】
なお、内視鏡プロセッサ装置１２は、上述の白色光により得られた通常光画像に基づいて、上述の特定の波長帯域の情報を有する特殊光画像を生成（取得）してもよい。この場合、内視鏡プロセッサ装置１２は、特殊光画像取得部として機能する。そして、内視鏡プロセッサ装置１２は、特定の波長帯域の信号を、通常光画像に含まれる赤（Red）、緑（Green）、及び青（Blue）のＲＧＢ色情報、或いはシアン（Cyan）、マゼンタ（Magenta）、及びイエロー（Yellow）のＣＭＹ色情報に基づく演算を行うことで得る。
【００４６】
また、内視鏡プロセッサ装置１２は、例えば、上述の白色光により得られた通常光画像と、上述の特定の波長帯域の光（特殊光）により得られた特殊光画像との少なくとも一方に基づいて、公知の酸素飽和度画像等の特徴量画像を生成してもよい。この場合、内視鏡プロセッサ装置１２は、特徴量画像生成部として機能する。なお、上記の生体内画像、通常光画像、特殊光画像、及び特徴量画像を含む動画３８又は静止画３９は、いずれも画像による診断、検査の目的で人体を撮像し、又は計測した結果を画像化した医療画像である。
【００４７】
表示装置１３は、内視鏡プロセッサ装置１２に接続されており、この内視鏡プロセッサ装置１２から入力された動画３８及び静止画３９を表示する。ユーザは、表示装置１３に表示される動画３８を確認しながら、挿入部２０の進退操作等を行い、被観察部位に病変等を発見した場合には静止画撮像指示部３２を操作して被観察部位の静止画撮像を実行し、また、診断、生検等を行う。
【００４８】
医療画像処理装置１４は、注目領域である病変の自動認識及び自動鑑別が可能な装置である。また、医療画像処理装置１４は、医療画像に含まれる注目領域をユーザに報知し、かつ注目領域と注目領域以外の非注目領域との境界（デマルケーションライン）の観察を容易にする装置である。医療画像処理装置１４は、例えばパーソナルコンピュータが用いられる。また、操作部１５は、パーソナルコンピュータに有線接続又は無線接続されるキーボード及びマウス等が用いられ、表示器１６（報知部の一例）はパーソナルコンピュータに接続可能な液晶モニタ等の各種モニタが用いられる。
【００４９】
医療画像処理装置１４と表示器１６（第１表示部の一例）とによって、動画３８及び動画３８に含まれる注目領域を報知する図形を表示器１６に表示する診断支援装置として機能する。
【００５０】
＜医療画像処理装置の構成＞
図２は、医療画像処理装置１４の電気的構成の一例を示すブロック図である。図２に示す医療画像処理装置１４は、主として時系列画像取得部４０と、注目領域検出部４２と、座標算出部４４と、面積算出部４６と、図形生成部４８と、制御部５０と、表示制御部５２と、記憶部５４と、から構成されている。
【００５１】
制御部５０は、記憶部５４に記憶されたプログラム（医療画像処理プログラム）５６に基づき、時系列画像取得部４０、注目領域検出部４２、座標算出部４４、面積算出部４６、図形生成部４８、及び表示制御部５２を統括制御し、また、これらの各部の一部として機能する。
【００５２】
記憶部５４は、ハードディスク装置等のストレージ装置である。記憶部５４は、注目領域検出部４２による検出結果及び撮像された静止画３９を記憶するとともに、プログラム５６及び医療画像処理装置１４の各種制御に係る情報等を記憶する。
【００５３】
時系列画像取得部４０は、医療画像の一例である内視鏡画像を順次取得する。ここでは、時系列画像取得部４０は、内視鏡プロセッサ装置１２（図１参照）に有線接続又は無線接続された不図示の画像入出力インターフェースを用いて、内視鏡プロセッサ装置１２から時系列のフレーム画像３８ａからなる動画３８（本例では、内視鏡スコープ１０により撮像される動画３８）を取得する。また、内視鏡スコープ１０にて動画３８の撮像途中に前述の静止画３９の撮像が行われた場合、時系列画像取得部４０は、内視鏡プロセッサ装置１２から動画３８及び静止画３９を取得する。
【００５４】
なお、時系列画像取得部４０は、内視鏡プロセッサ装置１２から動画３８を直接取得する代わりに、メモリーカード、ハードディスク装置等の各種情報記憶媒体を介して動画３８を取得してもよい。また、時系列画像取得部４０は、インターネット上のサーバ或いはデータベース等にアップロードされた動画３８をインターネット経由で取得してもよい。
【００５５】
注目領域検出部４２は、医療画像から注目領域情報を取得する注目領域情報取得部の一例であり、被検体内の観察中に撮像された動画３８から注目領域を検出する。注目領域検出部４２は、動画３８の各フレーム画像３８ａ（又は間引かれた一定間隔のフレーム画像３８ａ）の特徴量を算出し、画像内の注目領域の認識処理を行う畳み込みニューラルネットワーク（ＣＮＮ：Convolutional Neural Network）を含む。
【００５６】
注目領域の例としては、ポリープ、癌、大腸憩室、炎症、ＥＭＲ（Endoscopic Mucosal Resection）瘢痕、ＥＳＤ（Endoscopic Submucosal Dissection）瘢痕、クリップ箇所、出血点、穿孔、血管異型性、処置具等がある。
【００５７】
注目領域検出部４２は、検出された注目領域が、「腫瘍性」、「非腫瘍性」、「その他」といった病変に関する複数のカテゴリのうちのいずれのカテゴリに属するかのカテゴリ分類等の認識結果を取得することも可能である。
【００５８】
なお、注目領域検出部４２は、ＣＮＮにより注目領域を検出するものに限らず、画像内の色、画素値の勾配、形状、大きさ等の特徴量を画像処理により解析して注目領域を検出するものでもよい。
【００５９】
座標算出部４４は、注目領域情報取得部の一例であり、注目領域検出部４２が検出した注目領域のフレーム画像３８ａ内の位置を示す座標を算出する。ここでは、座標算出部４４は、注目領域を報知する図形を重畳する位置の座標を算出する。重畳する位置の座標とは、一例として、注目領域と注目領域以外の非注目領域との境界の座標、注目領域の内側の位置であって境界に沿った位置の座標、又は注目領域の重心の座標である。
【００６０】
面積算出部４６は、注目領域情報取得部の一例であり、注目領域検出部４２によって検出された注目領域の画像上の面積を算出する。注目領域の面積は、注目領域そのものの面積であってもよいし、注目領域が内接する矩形、多角形又は円の面積であってもよい。面積算出部４６は、注目領域の面積に代えて注目領域の外周長を算出してもよい。
【００６１】
図形生成部４８は、注目領域をユーザに報知するための図形を生成する。図形生成部４８が生成する図形については、後述する。
【００６２】
表示制御部５２は、医療画像に図形を重畳する重畳処理部の一例であり、図形が重畳された医療画像を表示器１６に表示させる。表示制御部５２は、画像表示制御部５２Ａ及び報知情報表示制御部５２Ｂを備えている。
【００６３】
画像表示制御部５２Ａは、時系列画像取得部４０が取得した動画３８を表示器１６に出力し、動画３８を表示器１６に表示させる。即ち、表示器１６には、複数のフレーム画像３８ａが順次表示される。
【００６４】
報知情報表示制御部５２Ｂは、表示器１６に表示されたフレーム画像３８ａの座標算出部４４が算出した座標の位置に、図形生成部４８が生成した図形を重畳する。これにより、報知情報表示制御部５２Ｂは、注目領域の内側に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を重畳しない、即ち非重畳にする。
【００６５】
ここでは、報知情報表示制御部５２Ｂは、境界の少なくとも５０％は図形を非重畳にする。報知情報表示制御部５２Ｂは、好ましくは境界の９５％は図形を非重畳にし、より好ましくは境界の１００％に図形を非重畳にする。
【００６６】
このように、注目領域の内側に図形を重畳することで注目領域を報知し、かつ注目領域と非注目領域との境界の少なくとも一部は図形によって隠れることがないため、境界をユーザに視認させることができる。
【００６７】
＜医療画像処理方法＞
続いて、本実施形態に係る医療画像処理方法について説明する。医療画像処理方法は、記憶部５４に記憶されたプログラム５６を制御部５０が実行することで実施される。
【００６８】
図３は、医療画像処理方法の各処理の一例を示すフローチャートである。医療画像処理方法は、画像取得工程（ステップＳ１）と、注目領域検出工程（ステップＳ２）と、座標算出工程（ステップＳ３）と、面積算出工程（ステップＳ４）と、図形生成工程（ステップＳ５）と、重畳処理工程（ステップＳ６）と、を含む。
【００６９】
ステップＳ１では、時系列画像取得部４０は、動画３８のフレーム画像３８ａを取得する。ステップＳ２では、注目領域検出部４２は、ステップＳ１で取得したフレーム画像３８ａから注目領域を検出する。
【００７０】
ステップＳ３では、座標算出部４４は、ステップＳ２で検出した注目領域の画像内の位置を示す座標を算出する。ステップＳ４では、面積算出部４６は、ステップＳ２で検出した注目領域の画像上の面積を算出する。
【００７１】
ステップＳ５では、図形生成部４８は、ステップＳ２で検出した注目領域をユーザに報知するための図形を生成する。図形生成部４８は、ステップＳ４で算出した面積よりも小さい面積の図形を生成する。
【００７２】
ステップＳ６では、表示制御部５２は、ステップＳ１で取得したフレーム画像３８ａのステップＳ３で算出した座標の位置にステップＳ５で生成した図形を重畳し、図形が重畳されたフレーム画像３８ａを表示器１６に表示させる。これにより、ステップＳ２で検出した注目領域の内側に図形が重畳される。この図形は、ステップＳ４で算出した注目領域の面積よりも小さい図形であるため、注目領域と非注目領域との境界の少なくとも一部は図形が非重畳になる。
【００７３】
以上のように、医療画像処理方法によれば、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【００７４】
＜図形の態様＞
注目領域に重畳する図形の詳細について説明する。なお、注目領域に重畳する図形は、図形生成部４８において生成するのではなく、予め記憶部５４に記憶させておいてもよい。
【００７５】
〔境界を指示する態様〕
注目領域に重畳する図形は、注目領域と非注目領域との境界の位置をユーザに指示する図形であることが好ましい。なお、以下において注目領域と非注目領域との境界を、単に注目領域の境界と表記する。
【００７６】
図４及び図５は、表示器１６の表示の一例を示す図である。この例では、注目領域Ｒ１を含むフレーム画像３８ａが表示されている。また、注目領域Ｒ１の内側には、４つの図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４が重畳されている。
【００７７】
図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ同じ矢印の形状を有する図形である。図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ注目領域Ｒ１の面積より小さい面積を有する。図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ同じ色を有する。
【００７８】
また、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ矢印の先端において注目領域Ｒ１の境界を指示する向きを有する。ここでは、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ矢印の向きが、矢印の延長線と境界との接点における境界の接線方向とが垂直に交わる向きを有する。
【００７９】
図４は、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４が、それぞれ矢印の先端が注目領域Ｒ１の境界に接していない位置に配置される例を示している。この場合は、座標算出部４４は、注目領域Ｒ１の内側の位置であって注目領域Ｒ１の境界に沿った位置の座標を算出する。図形生成部４８は、矢印の形状を有する図形であって、算出された座標に応じた向きの図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を生成する。報知情報表示制御部５２Ｂは、それぞれ矢印の先端を算出された座標に一致するように、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を注目領域Ｒ１に重畳する。
【００８０】
また、図５は、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４が、それぞれ矢印の先端が注目領域Ｒ１の境界に接する位置に配置される例を示している。この場合は、座標算出部４４は、注目領域Ｒ１の境界の座標を算出する。図形生成部４８は、矢印の形状を有する図形であって、算出された座標に応じた向きの図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を生成する。報知情報表示制御部５２Ｂは、それぞれ矢印の先端が算出された座標に一致するように、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を注目領域Ｒ１の内側に重畳する。
【００８１】
図４及び図５のように、注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にすることで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。したがって、ユーザは注目領域である病変部と病変部以外の正常粘膜部との境界の観察が容易になる。
【００８２】
なお、重畳する図形は矢印に限定されず、注目領域と非注目領域との境界をわかりやすく指示する図形であればよい。図６は、表示器１６の表示の一例を示す図である。この例では、フレーム画像３８ａに含まれる注目領域Ｒ１の内側に、４つの図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳されている。
【００８３】
図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ同じ二等辺三角形の形状を有する図形である。二等辺三角形は、２本の等辺よりも等辺以外の底辺の方が短い。図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ同じ大きさ及び色を有し、それぞれ異なる向きを有する。
【００８４】
図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ２本の等辺が共有する二等辺三角形の頂点において注目領域Ｒ１の境界を指示する向きを有する。ここでは、図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ二等辺三角形の頂点を通る底辺の垂線の向きが、垂線の延長線と注目領域Ｒ１の境界との接点における境界の接線方向とが垂直に交わる向きを有する。
【００８５】
座標算出部４４は、注目領域Ｒ１の内側の位置であって注目領域Ｒ１の境界に沿った位置の座標を算出する。図形生成部４８は、二等辺三角形の形状を有する図形であって、算出された座標に応じた向きの図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８を生成する。報知情報表示制御部５２Ｂは、それぞれ二等辺三角形の頂点が算出された座標に一致するように、図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８を注目領域Ｒ１に重畳する。
【００８６】
このように注目領域に図形を重畳した場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。したがって、ユーザは注目領域である病変部と正常粘膜部との境界の観察が容易になる。
【００８７】
〔内側の座標を表す態様〕
注目領域に重畳する図形は、境界を指示する図形に限定されず、注目領域の内側の座標を表す図形であってもよい。例えば、注目領域の内側のある座標と図形の中心が一致するように配置してもよい。
【００８８】
図７は、表示器１６の表示の一例を示す図である。この例では、注目領域Ｒ１を含むフレーム画像３８ａが表示されている。また、注目領域Ｒ１の内側には、１つの図形Ｆ９が重畳されている。
【００８９】
図形Ｆ９は、円形の形状を有する図形である。図形Ｆ９は、注目領域Ｒ１の面積より小さい面積を有する。また、図形Ｆ９は、図形Ｆ９の中心が注目領域Ｒ１の内側のある座標に合わせて配置される。
【００９０】
座標算出部４４は、注目領域Ｒ１の内側の位置であって注目領域Ｒ１のある位置の座標を算出する。図形生成部４８は、円形の形状を有する図形Ｆ９を生成する。報知情報表示制御部５２Ｂは、図形Ｆ９の重心が算出された座標に一致するように、図形Ｆ９を注目領域Ｒ１に重畳する。
【００９１】
このように注目領域に図形を重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。したがって、ユーザは注目領域である病変部と正常粘膜部との境界の観察が容易になる。
【００９２】
図７に示す例では円形の図形Ｆ９を重畳しているが、ある位置の座標に重畳する図形の形状は円形に限定されない。図８及び図９は、図形の他の例を示す図である。図８に示すように、斜十字形状の図形Ｆ１０、十字形状の図形Ｆ１１、斜方形状の図形Ｆ１２、四頂点星形状の図形Ｆ１３、五頂点星形状の図形Ｆ１４、円と十字の組み合わせ形状の図形Ｆ１５、矩形と十字の組み合わせ形状の図形Ｆ１６、及び感嘆符形状の図形Ｆ１７等であってもよい。その他の記号、又は文字であってもよい。これらの図形の重心を注目領域の内側のある位置の座標と一致させて重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【００９３】
また、図９に示すように、それぞれ先端Ｔを有する矢印形状の図形Ｆ１８、ドロップ形状の図形Ｆ１９、ピン形状の図形Ｆ２０であってもよい。この場合、図形の先端Ｔを注目領域の内側のある位置の座標と一致させて重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【００９４】
ある位置の座標としては、注目領域の重心（図心）の座標、又は注目領域に外接する矩形の中心の座標等を用いることができる。図１０は、注目領域Ｒ２の重心Ｃ１を示す図である。また、図１１は、注目領域Ｒ２に外接する矩形ＳＱ１の中心Ｃ２を示す図である。
【００９５】
このように、注目領域Ｒ２の重心Ｃ１又は中心Ｃ２に図形を重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【００９６】
〔注目領域の大きさに応じてサイズを変更する態様〕
注目領域に重畳する図形のサイズは、常に一定でなくてもよい。例えば、図形生成部４８は、注目領域の画像内の大きさに応じて生成する図形のサイズを変化させてもよい。ここで、図形のサイズとは、図形の面積に比例する指標である。
【００９７】
図１２は、表示器１６の表示の一例を示す図である。図１２に示す１０１２Ａ、１０１２Ｂ、及び１０１２Ｃでは、それぞれ注目領域Ｒ３Ａ、注目領域Ｒ３Ｂ、及び注目領域Ｒ３Ｃを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ３Ａの面積＞注目領域Ｒ３Ｂの面積＞注目領域Ｒ３Ｃの面積、の関係を有している。
【００９８】
注目領域Ｒ３Ａ、注目領域Ｒ３Ｂ、及び注目領域Ｒ３Ｃには、それぞれ四頂点星形状の図形Ｆ１３Ａ、図形Ｆ１３Ｂ、及び図形Ｆ１３Ｃが重畳されている。ここでは、図形Ｆ１３Ａのサイズ＞図形Ｆ１３Ｂのサイズ＞図形Ｆ１３Ｃのサイズ、の関係を有している。
【００９９】
このように、注目領域の面積が相対的に大きいほど重畳する図形のサイズを相対的に大きくすることで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【０１００】
なお、注目領域が著しく大きい場合は、ユーザが注目領域を詳しく観察している可能性が高い。このため、注目領域の面積に合わせた相対的に大きいサイズの図形を注目領域に重畳すると、重畳した図形はユーザにとって煩わしい可能性がある。したがって、図形生成部４８は、注目領域の面積が第１面積以上の場合は、図形のサイズをそれ以上大きくさせずに、一定の第１サイズの図形を生成する。
【０１０１】
図１３は、表示器１６の表示の一例を示す図である。図１３に示す１０１３Ａ、及び１０１３Ｂでは、それぞれ注目領域Ｒ３Ｄ、及び注目領域Ｒ３Ｅを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ３Ａの面積＜第１面積＜注目領域Ｒ３Ｄの面積＜注目領域Ｒ３Ｅの面積、の関係を有している。
【０１０２】
注目領域Ｒ３Ｄ、及び注目領域Ｒ３Ｅには、それぞれ四頂点星形状の図形Ｆ１３Ｄ、及び図形Ｆ１３Ｅが重畳されている。ここでは、図形Ｆ１３Ａのサイズ＜図形Ｆ１３Ｄのサイズ＝図形Ｆ１３Ｅのサイズ、の関係を有している。
【０１０３】
このように、注目領域の面積が第１面積以上の場合は重畳する図形のサイズを変化させずに一定とすることで、注目領域が著しく大きい場合であっても注目領域を適切に報知することができる。
【０１０４】
また、図形のサイズを注目領域の面積に合わせて変化させた場合、注目領域が著しく小さい場合には図形のサイズが小さくなりすぎ、ユーザに報知する能力が低下する。したがって、図形生成部４８は、注目領域の面積が第２面積以下の場合は図形のサイズをそれ以上小さくさせずに、一定の第２サイズの図形を生成する。
【０１０５】
図１４は、表示器１６の表示の一例を示す図である。図１４に示す１０１４Ａ、及び１０１４Ｂでは、それぞれ注目領域Ｒ３Ｆ、及び注目領域Ｒ３Ｇを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ３Ｃの面積＞第２面積＞注目領域Ｒ３Ｆの面積＞注目領域Ｒ３Ｇの面積、の関係を有している。
【０１０６】
注目領域Ｒ３Ｆ、及び注目領域Ｒ３Ｇには、それぞれ四頂点星形状の図形Ｆ１３Ｆ、及び図形Ｆ１３Ｇが重畳されている。ここでは、図形Ｆ１３Ｃのサイズ＞図形Ｆ１３Ｆのサイズ＝図形Ｆ１３Ｇのサイズ、の関係を有している。
【０１０７】
このように、注目領域の面積が第２面積以下の場合は重畳する図形のサイズを一定とすることで、注目領域が著しく小さい場合であっても注目領域を適切に報知することができる。
【０１０８】
〔注目領域の大きさに応じて形状を変更する態様〕
図１５は、表示器１６の表示の一例を示す図である。図１５に示す１０１５Ａ、及び１０１５Ｂでは、それぞれ注目領域Ｒ４Ａ、及び注目領域Ｒ４Ｂを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ４Ａの面積＞注目領域Ｒ４Ｂの面積、の関係を有している。
【０１０９】
また、注目領域Ｒ４Ａ、及び注目領域Ｒ４Ｂには、それぞれ図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳されている。
【０１１０】
１０１５Ｂに示すように、注目領域Ｒ４Ｂのように画像内の面積が小さい場合には、注目領域Ｒ４Ｂに重畳された図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が互いに重なり合ってしまい、逆に注目領域の視認性を低下させてしまう。
【０１１１】
これを防止するため、注目領域に重畳する図形の形状は、常に一定でなくてもよい。例えば、図形生成部４８は、注目領域の画像内の大きさに応じて生成する図形の形状を変化させてもよい。ここでは、注目領域の面積がある一定の第３面積を閾値として図形の形状を変化させる例について説明する。
【０１１２】
図１６は、表示器１６の表示の一例を示す図である。図１６に示す１０１６Ａ、１０１６Ｂ、及び１０１６Ｃでは、それぞれ注目領域Ｒ５Ａ、注目領域Ｒ５Ｂ、及び注目領域Ｒ５Ｃを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ５Ａの面積＞注目領域Ｒ５Ｂの面積＞第３面積＞注目領域Ｒ５Ｃの面積、の関係を有している。
【０１１３】
図１６に示すように、面積が第３面積以上である注目領域Ｒ５Ａ、及び注目領域Ｒ５Ｂには、それぞれ図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳される。一方、面積が第３面積未満である注目領域Ｒ５Ｃには、図形Ｆ１３が重畳される。
【０１１４】
このように、注目領域がある一定の第３面積以上の場合は、注目領域の内側に配置される注目領域の境界を指示する図形を表示し、注目領域が第３面積未満の場合は、注目領域の内側の座標を表す図形を表示する。このように表示することで、注目領域が相対的に大きい場合は、注目領域の中心と注目領域の境界付近の正常粘膜を観察しやすくなる。また、注目領域が相対的に小さい場合は、よりシンプルな図形を表示することで、ユーザの観察を阻害しなくなる。
【０１１５】
また、図形生成部４８は、注目領域の面積がある一定の第４面積未満の場合には、注目領域を囲う図形を生成してもよい。
【０１１６】
図１７は、表示器１６の表示の一例を示す図である。図１７に示す１０１７Ａ、及び１０１７Ｂでは、それぞれ注目領域Ｒ５Ｂ、及び注目領域Ｒ５Ｃを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ５Ｂの面積＞第４面積＞注目領域Ｒ５Ｃの面積、の関係を有している。
【０１１７】
図１７に示すように、面積が第４面積以上である注目領域Ｒ５Ｂには、図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳される。一方、面積が第４面積未満である注目領域Ｒ５Ｃには、注目領域Ｒ５Ｃを囲う矩形の図形Ｆ２１が重畳される。
【０１１８】
注目領域を囲うことによって注目領域の境界、及び注目領域周辺の正常粘膜の視認性は低下する。しかしながら、注目領域の面積が著しく小さい場合は、注目領域周辺の視認性を向上させることよりも、ユーザに注目領域の存在を知らせることのほうが重要である。したがって、図１７に示すような表示方法をとることが望ましい。このように表示することで、注目領域が相対的に大きい場合は、注目領域の中心と注目領域の境界付近の正常粘膜を観察しやすくなる。また、注目領域が相対的に小さい場合は、ユーザに注目領域を認識させることができる。
【０１１９】
なお、注目領域を囲う図形は矩形に限定されず、注目領域が存在する範囲を注目領域の外側から指示する図形であればよい。
【０１２０】
図１８は、注目領域Ｒ６を囲う４つの図形Ｆ２２、図形Ｆ２３、図形Ｆ２４、及び図形Ｆ２５を示す図である。図形Ｆ２２は、水平方向の線分と垂直方向の線分とからなるＬ字状の図形である。図形Ｆ２３、図形Ｆ２４、及び図形Ｆ２５は、それぞれ図形Ｆ２２と同じ形状を有しており、図形Ｆ２２とは向きが異なる図形である。図形Ｆ２２、図形Ｆ２３、図形Ｆ２４、及び図形Ｆ２５は、注目領域Ｒ６を囲う矩形の枠ＦＲ１の四隅に、それぞれ水平方向の線分と垂直方向の線分とを矩形の枠ＦＲ１に重ねて配置される。
【０１２１】
また、図１９は、注目領域Ｒ６を囲う４つの図形Ｆ２６、図形Ｆ２７、図形Ｆ２８、及び図形Ｆ２９を示す図である。図形Ｆ２６、図形Ｆ２７、図形Ｆ２８、及び図形Ｆ２９は、それぞれ同じ二等辺三角形の形状を有し、互いに向きが異なる図形である。図形Ｆ２６、図形Ｆ２７、図形Ｆ２８、及び図形Ｆ２９は、注目領域Ｒ６を囲う矩形の枠ＦＲ２の四隅に、それぞれ二等辺三角形の頂点を注目領域Ｒ６の重心に向けて配置される。
【０１２２】
また、図２０は、注目領域Ｒ６を囲う４つの図形Ｆ３０、図形Ｆ３１、図形Ｆ３２、及び図形Ｆ３３を示す図である。図形Ｆ３０、図形Ｆ３１、図形Ｆ３２、及び図形Ｆ３３は、それぞれ同じ二等辺三角形の形状を有し、互いに向きが異なる図形である。図形Ｆ３０、図形Ｆ３１、図形Ｆ３２、及び図形Ｆ３３は、注目領域Ｒ６を囲う楕円の枠ＦＲ３上の各位置に、それぞれ二等辺三角形の頂点を注目領域Ｒ６の重心に向けて配置されている。
【０１２３】
このように図形を重畳することで、注目領域が相対的に小さい場合であっても、ユーザに注目領域を認識させることができる。
【０１２４】
〔注目領域の大きさに応じて数を変更する態様〕
注目領域に重畳させる図形の数は、常に一定でなくてもよい。例えば、図形生成部４８は、注目領域の面積がある一定の第５面積を閾値として、生成する図形の数を変化させてもよい。
【０１２５】
図２１は、表示器１６の表示の一例を示す図である。図２１に示す１０２１Ａ、及び１０２１Ｂでは、それぞれ注目領域Ｒ７Ａ、及び注目領域Ｒ７Ｂを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ７Ａの面積＞第５面積＞注目領域Ｒ７Ｂの面積、の関係を有している。
【０１２６】
図２１に示すように、面積が第５面積以上である注目領域Ｒ７Ａには、８つの図形Ｆ３４、図形Ｆ３５、図形Ｆ３６、図形Ｆ３７、図形Ｆ３８、図形Ｆ３９、図形Ｆ４０、及び図形Ｆ４１が重畳される。一方、面積が第５面積未満である注目領域Ｒ７Ｂには、４つの図形Ｆ４２、図形Ｆ４３、図形Ｆ４４、及び図形Ｆ４５が重畳される。
【０１２７】
このように、注目領域の面積が相対的に大きいほど相対的に多くの数の図形を重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【０１２８】
＜その他＞
上記の医療画像処理方法は、各工程をコンピュータに実現させるためのプログラムとして構成し、このプログラムを記憶したＣＤ−ＲＯＭ（Compact Disk-Read Only Memory）等の非一時的な記録媒体を構成することも可能である。
【０１２９】
ここでは内視鏡画像に図形を重畳する例を説明したが、図形を重畳する医療画像は内視鏡画像に限定されず、超音波画像、ＣＴ（Computed Tomography）画像、ＭＲＩ（Magnetic Resonance Imaging）画像等に適用することができる。
【０１３０】
ここまで説明した実施形態において、内視鏡プロセッサ装置１２及び医療画像処理装置１４は、それぞれ異なる装置として説明したが、内視鏡プロセッサ装置１２及び医療画像処理装置１４を一体の装置として構成し、医療画像処理装置１４の機能を有する内視鏡プロセッサ装置１２としてもよい。
【０１３１】
内視鏡プロセッサ装置１２及び医療画像処理装置１４の各種の処理を実行する処理部（processing unit）のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
【０１３２】
１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、或いはＣＰＵとＦＰＧＡの組み合わせ、又はＣＰＵとＧＰＵの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、サーバ及びクライアント等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、各種のプロセッサを１つ以上用いて構成される。
【０１３３】
更に、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）である。
【０１３４】
本発明の技術的範囲は、上記の実施形態に記載の範囲には限定されない。各実施形態における構成等は、本発明の趣旨を逸脱しない範囲で、各実施形態間で適宜組み合わせることができる。
【符号の説明】
【０１３５】
９…内視鏡システム
１０…内視鏡スコープ
１１…光源装置
１２…内視鏡プロセッサ装置
１３…表示装置
１４…医療画像処理装置
１５…操作部
１６…表示器
２０…挿入部
２１…手元操作部
２２…ユニバーサルコード
２５…軟性部
２６…湾曲部
２７…先端部
２８…撮像素子
２９…湾曲操作ノブ
３０…送気送水ボタン
３１…吸引ボタン
３２…静止画撮像指示部
３３…処置具導入口
３５…ライトガイド
３６…信号ケーブル
３７ａ…コネクタ
３７ｂ…コネクタ
３８…動画
３８ａ…フレーム画像
３９…静止画
４０…時系列画像取得部
４２…注目領域検出部
４４…座標算出部
４６…面積算出部
４８…図形生成部
５０…制御部
５２…表示制御部
５２Ａ…画像表示制御部
５２Ｂ…報知情報表示制御部
５４…記憶部
５６…プログラム
ＦＲ１〜ＦＲ３…枠
Ｆ１〜Ｆ４５…図形
Ｒ１〜Ｒ７Ｂ…注目領域
ＳＱ１…矩形
Ｓ１〜Ｓ６…医療画像処理方法の各ステップ
【図１】
2020090731.tif 000003
【図２】
2020090731.tif 000004
【図３】
2020090731.tif 000005
【図４】
2020090731.tif 000006
【図５】
2020090731.tif 000007
【図６】
2020090731.tif 000008
【図７】
2020090731.tif 000009
【図８】
2020090731.tif 000010
【図９】
2020090731.tif 000011
【図１０】
2020090731.tif 000012
【図１１】
2020090731.tif 000013
【図１２】
2020090731.tif 000014
【図１３】
2020090731.tif 000015
【図１４】
2020090731.tif 000016
【図１５】
2020090731.tif 000017
【図１６】
2020090731.tif 000018
【図１７】
2020090731.tif 000019
【図１８】
2020090731.tif 000020
【図１９】
2020090731.tif 000021
【図２０】
2020090731.tif 000022
【図２１】
2020090731.tif 000023
【手続補正書】
【提出日】令和3年5月25日(2021.5.25)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
重畳処理部は、境界を指示する図形を注目領域に重畳することが好ましい。これにより、ユーザに注目領域と非注目領域との境界を認識させることができる。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。上記の医療画像処理方法をコンピュータに実行させるためのプログラムも本態様に含まれる。
【国際調査報告】
2020090731.tif 000024
2020090731.tif 000025