(57)【要約】医用画像における注目領域を報知する際の表示のちらつきを抑制し得る、医用画像処理装置、プロセッサ装置、医用画像処理方法、及びプログラムを提供する。内視鏡画像（３８）を取得する画像取得部（４０）と、注目領域を検出する注目領域検出部（４１）と、モニタ装置（１６）を用いて内視鏡画像を表示する際に、注目領域を強調する強調領域の位置を注目領域の位置に応じて設定する強調領域設定部（４２）と、内視鏡画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御部（４４）と、を備える。
2020059526.tif 000002
【特許請求の範囲】
【請求項１】
医用画像を取得する画像取得部と、
前記医用画像から注目領域を検出する注目領域検出部と、
表示装置を用いて前記医用画像を表示する際に、前記注目領域を強調する強調領域の位置を前記注目領域の位置に応じて設定する強調領域設定部と、
前記医用画像の表示の更新間隔を超える更新間隔を適用して、前記強調領域の表示を更新する表示制御部と、
を備えた医用画像処理装置。  
【請求項２】
前記強調領域の更新間隔を設定する更新間隔設定部を備えた請求項１に記載の医用画像処理装置。
【請求項３】
外部から送信される前記強調領域の更新間隔を表す信号を受信する信号受信部を備え、
前記更新間隔設定部は、前記信号受信部を用いて受信した前記強調領域の更新間隔を表す信号に基づいて前記強調領域の更新間隔を設定する請求項２に記載の医用画像処理装置。
【請求項４】
前記更新間隔設定部は、前記医用画像を取得する撮像装置の動きに応じて、前記強調領域の更新間隔を設定する請求項２又は３に記載の医用画像処理装置。
【請求項５】
前記更新間隔設定部は、前記注目領域の鑑別結果に応じて、前記強調領域の更新間隔を設定する請求項２から４のいずれか一項に記載の医用画像処理装置。
【請求項６】
前記表示制御部は、前記強調領域の表示が更新されたタイミングから次の前記強調領域の表示が更新されるタイミングまでの期間は、前記強調領域の表示が更新されたタイミングにおける前記強調領域の位置を維持して前記強調領域を前記表示装置に表示させる請求項１から５のいずれか一項に記載の医用画像処理装置。
【請求項７】
前記表示制御部は、前記強調領域設定部を用いて設定された強調領域を前記医用画像に重畳表示させる信号を前記表示装置へ送信する請求項１から６のいずれか一項に記載の医用画像処理装置。
【請求項８】
前記強調領域設定部は、前記強調領域の更新タイミングにおけるフレームの強調領域の位置を、前記強調領域の更新タイミングにおけるフレームの以前の二以上のフレームの前記注目領域の位置に基づいて設定する請求項１から７のいずれか一項に記載の医用画像処理装置。
【請求項９】
前記強調領域設定部は、前記強調領域の更新タイミングにおけるフレームの強調領域の位置を、前記強調領域の更新タイミングにおけるフレームの以前の二以上のフレームの前記注目領域の平均位置に設定する請求項８に記載の医用画像処理装置。
【請求項１０】
前記強調領域設定部は、前記強調領域の表示の更新タイミングにおいて、前記強調領域の表示の更新タイミングにおける強調領域に、過去のフレームにおける強調領域を統合した強調領域を設定する請求項１から９のいずれか一項に記載の医用画像処理装置。
【請求項１１】
内視鏡を制御する内視鏡制御部と、
前記内視鏡から医用画像を取得する画像取得部と、
前記医用画像から注目領域を検出する注目領域検出部と、
表示装置を用いて前記医用画像を表示する際に、前記注目領域を強調する強調領域の位置を前記注目領域の位置に応じて設定する強調領域設定部と、
前記医用画像の表示の更新間隔を超える更新間隔を適用して、前記強調領域の表示を更新する表示制御部と、
を備えたプロセッサ装置。
【請求項１２】
医用画像を取得する画像取得工程と、
前記医用画像から注目領域を検出する注目領域検出工程と、
表示装置を用いて前記医用画像を表示する際に、前記注目領域を強調する強調領域の位置を前記注目領域の位置に応じて設定する強調領域設定工程と、
前記医用画像の表示の更新間隔を超える更新間隔を適用して、前記強調領域の表示を更新する表示制御工程と、
を含む医用画像処理方法。
【請求項１３】
コンピュータに、
医用画像を取得する画像取得機能、
前記医用画像から注目領域を検出する注目領域検出機能、
表示装置を用いて前記医用画像を表示する際に、前記注目領域を強調する強調領域の位置を前記注目領域の位置に応じて設定する強調領域設定機能、及び
前記医用画像の表示の更新間隔を超える更新間隔を適用して、前記強調領域の表示を更新する表示制御機能を実現させるプログラム。
【請求項１４】
非一時的かつコンピュータ読取可能な記憶媒体であって、前記記憶媒体に格納された指令がコンピュータによって読み取られた場合に、
医用画像を取得する画像取得機能、
前記医用画像から注目領域を検出する注目領域検出機能、
表示装置を用いて前記医用画像を表示する際に、前記注目領域を強調する強調領域の位置を前記注目領域の位置に応じて設定する強調領域設定機能、及び
前記医用画像の表示の更新間隔を超える更新間隔を適用して、前記強調領域の表示を更新する表示制御機能をコンピュータに実行させる記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は医用画像処理装置、プロセッサ装置、医用画像処理方法、及びプログラムに係り、特に検出結果の報知に関する。
【背景技術】
【０００２】
特許文献１は、超音波画像に基づいて関心領域を設定し、被検体における所望の部位のスペックル解析を行い、超音波画像とスペックル解析結果とをリアルタイムに表示させる超音波画像診断装置が記載されている。【０００３】
同文献に記載の装置は、ライブモードにおいてスペックル解析結果を表示する際に、超音波画像のフレームレートが高い場合にはスペックル解析結果の読み取りが困難になるという課題に対して、スペックル解析結果の更新レートを設定可能としている。これにより、超音波画像のフレームレートが高くても、スペックル解析結果の読み取りが可能となる。【０００４】
特許文献２は、注目領域の検出結果に応じて、注目領域に対応するアラート画像を表示すべきか否かの判定を行い、アラート画像を表示すべきと判定された注目領域である表示対象注目領域に対応するアラート画像を表示させる画像処理装置が記載されている。【０００５】
同文献に記載の発明は、注目領域の数が少ない場合はサイズが閾値を超える注目領域についてアラート画像を非表示とし、注目領域の数が多い場合はサイズが閾値以下の注目領域についてアラート画像を非表示としている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許第４８９７４６０号公報
【特許文献２】特開２０１１−２５５００６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
病変部を自動検出する医療診断システムにおいて、病変の検出位置は絶えず変化しているため、検出結果をモニタに表示する際に病変の位置を報知する報知部分にちらつきが発生し、ちらつきが診断の妨げになるという課題が存在する。【０００８】
特許文献１に記載の発明は、スペックル解析結果の更新レートを調整可能としているものの、スペックル解析結果を表示する際のちらつきという課題に着目しておらず、かかる課題を解決する構成要件を備えていない。【０００９】
特許文献２に記載の発明は、アラート画像の表示と非表示とを切り替えているものの、アラート画像を表示する際のちらつきという課題に着目しておらず、かかる課題を解決する構成要件を備えていない。【００１０】
本発明はこのような事情に鑑みてなされたもので、医用画像における注目領域を報知する際のちらつきを抑制し得る、医用画像処理装置、プロセッサ装置、医用画像処理方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、次の発明態様を提供する。【００１２】
第１態様に係る医用画像処理装置は、医用画像を取得する画像取得部と、医用画像から注目領域を検出する注目領域検出部と、表示装置を用いて医用画像を表示する際に、注目領域を強調する強調領域の位置を注目領域の位置に応じて設定する強調領域設定部と、医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御部と、を備えた医用画像処理装置である。【００１３】
第１態様によれば、医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示タイミングの制御を実施する。これにより、医用画像の表示の更新に対して遅れて強調領域の位置が更新され、医用画像における注目領域を報知する際のちらつきを抑制し、ユーザが注目領域を視認する際の視認性を向上し得る。【００１４】
第２態様は、第１態様の医用画像処理装置において、強調領域の更新間隔を設定する更新間隔設定部を備えた構成としてもよい。【００１５】
第３態様は、第２態様の医用画像処理装置において、外部から送信される強調領域の更新間隔を表す信号を受信する信号受信部を備え、更新間隔設定部は、信号受信部を用いて受信した強調領域の更新間隔を表す信号に基づいて強調領域の更新間隔を設定する構成としてもよい。【００１６】
第４態様は、第２態様又は第３態様の医用画像処理装置において、更新間隔設定部は、医用画像を取得する撮像装置の動きに応じて、強調領域の更新間隔を設定する構成としてもよい。【００１７】
第５態様は、第２態様から第４態様のいずれか一態様の医用画像処理装置において、更新間隔設定部は、注目領域の鑑別結果に応じて、強調領域の更新間隔を設定する構成としてもよい。【００１８】
第６態様は、第１態様から第５態様のいずれか一態様の医用画像処理装置において、表示制御部は、強調領域の表示が更新されたタイミングから次の強調領域の表示が更新されるタイミングまでの期間は、強調領域の表示が更新されたタイミングにおける強調領域の位置を維持して強調領域を表示装置に表示させる構成としてもよい。【００１９】
第７態様は、第１態様から第６態様のいずれか一態様の医用画像処理装置において、表示制御部は、強調領域設定部を用いて設定された強調領域を医用画像に重畳表示させる信号を表示装置へ送信する構成としてもよい。【００２０】
第８態様は、第１態様から第７態様のいずれか一態様の医用画像処理装置において、強調領域設定部は、強調領域の更新タイミングにおけるフレームの強調領域の位置を、強調領域の更新タイミングにおけるフレームの以前の二以上のフレームの注目領域の位置に基づいて設定する構成としてもよい。【００２１】
第９態様は、第８態様の医用画像処理装置において、強調領域設定部は、強調領域の更新タイミングにおけるフレームの強調領域の位置を、強調領域の更新タイミングにおけるフレームの以前の二以上のフレームの注目領域の平均位置に設定する構成としてもよい。【００２２】
第１０態様は、第１態様から第９態様のいずれか一態様の医用画像処理装置において、強調領域設定部は、強調領域の表示の更新タイミングにおいて、強調領域の表示の更新タイミングにおける強調領域に、過去のフレームにおける強調領域を統合した強調領域を設定する構成としてもよい。【００２３】
第１１態様に係るプロセッサ装置は、内視鏡を制御する内視鏡制御部と、内視鏡から医用画像を取得する画像取得部と、医用画像から注目領域を検出する注目領域検出部と、表示装置を用いて医用画像を表示する際に、注目領域を強調する強調領域の位置を注目領域の位置に応じて設定する強調領域設定部と、医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御部と、を備えたプロセッサ装置である。【００２４】
第１１態様によれば、第１態様と同様の効果を得ることができる。【００２５】
第１１態様において、第２態様から第１０態様で特定した事項と同様の事項を適宜組み合わせることができる。その場合、医用画像処理装置において特定される処理や機能を担う構成要素は、これに対応する処理や機能を担うプロセッサ装置の構成要素として把握することができる。【００２６】
第１２態様に係る医用画像処理方法は、医用画像を取得する画像取得工程と、医用画像から注目領域を検出する注目領域検出工程と、表示装置を用いて医用画像を表示する際に、注目領域を強調する強調領域の位置を注目領域の位置に応じて設定する強調領域設定工程と、医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御工程と、を含む医用画像処理方法である。【００２７】
第１２態様によれば、第１態様と同様の効果を得ることができる。【００２８】
第１２態様において、第２態様から第１０態様で特定した事項と同様の事項を適宜組み合わせることができる。その場合、医用画像処理装置において特定される処理や機能を担う構成要素は、これに対応する処理や機能を担う医用画像処理方法の構成要素として把握することができる。【００２９】
第１３態様に係るプログラムは、コンピュータに、医用画像を取得する画像取得機能、医用画像から注目領域を検出する注目領域検出機能、表示装置を用いて医用画像を表示する際に、注目領域を強調する強調領域の位置を注目領域の位置に応じて設定する強調領域設定機能、及び医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御機能を実現させるプログラムである。【００３０】
第１３態様によれば、第１態様と同様の効果を得ることができる。【００３１】
第１３態様において、第２態様から第１０態様で特定した事項と同様の事項を適宜組み合わせることができる。その場合、医用画像処理装置において特定される処理や機能を担う構成要素は、これに対応する処理や機能を担うプログラムの構成要素として把握することができる。
【発明の効果】
【００３２】
本発明によれば、医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示タイミングの制御を実施する。これにより、医用画像の表示の更新に対して遅れて強調領域の位置が更新され、医用画像における注目領域を報知する際のちらつきを抑制し、ユーザが注目領域を視認する際の視認性を向上し得る。
【図面の簡単な説明】
【００３３】
【図１】図１は実施形態に係る医用画像処理装置を含む内視鏡システムの全体構成図である。
【図２】図２は医用画像処理装置のハードウェア構成を示すブロック図である。
【図３】図３は第一実施形態に係る医用画像処理装置の機能ブロック図である。
【図４】図４は内視鏡画像及び強調領域の更新間隔の説明図である。
【図５】図５は図４のタイミングｔ１における画面表示の模式図である。
【図６】図６は図４のタイミングｔ２におけるフレーム画像の模式図である。
【図７】図７は図４のタイミングｔ３におけるフレーム画像の模式図である。
【図８】図８は図４のタイミングｔ７におけるフレーム画像の模式図である。
【図９】図９は第一実施形態に係る医用画像処理方法のフローチャートである。
【図１０】図１０は強調領域設定の第一変形例の説明図である。
【図１１】図１１は強調領域設定の第二変形例の説明図である。
【図１２】図１２は強調領域設定の第三変形例の説明図である。
【図１３】図１３は第二実施形態に係る医用画像処理装置の機能ブロック図である。
【図１４】図１４は第三実施形態に係る医用画像処理装置の機能ブロック図である。
【発明を実施するための形態】
【００３４】
以下、添付図面に従って本発明の好ましい実施の形態について詳説する。本明細書では、同一の構成要素には同一の参照符号を付して、重複する説明は適宜省略することとする。
【００３５】
［内視鏡システムの全体構成］
図１は実施形態に係る医用画像処理装置を含む内視鏡システムの全体構成図である。図１に示す内視鏡システム９は、内視鏡１０、光源装置１１、プロセッサ装置１２、表示装置１３、医用画像処理装置１４、入力装置１５、及びモニタ装置１６を備える。
【００３６】
図１に示す内視鏡１０は電子内視鏡であり、かつ軟性内視鏡である。内視鏡１０は挿入部２０、操作部２１、及びユニバーサルコード２２を備える。挿入部２０は被検体内に挿入される。挿入部２０は、全体が細径で長尺状に形成されている。
【００３７】
挿入部２０は、軟性部２５、湾曲部２６、及び先端部２７を備える。挿入部２０は、軟性部２５、湾曲部２６、及び先端部２７が連設されて構成される。軟性部２５は、挿入部２０の基端側から先端側に向けて順に撓む可撓性を有する。湾曲部２６は、操作部２１が操作された場合に湾曲可能な構造を有する。先端部２７は、図示しない撮像光学系及び撮像素子２８等が内蔵される。
【００３８】
撮像素子２８は、ＣＭＯＳ型撮像素子又はＣＣＤ型撮像素子が適用される。ＣＭＯＳは、Complementary Metal Oxide Semiconductorの省略語である。ＣＣＤは、Charge Coupled Deviceの省略語である。
【００３９】
先端部２７の先端面２７ａは、図示しない観察窓が配置される。観察窓は、先端部２７の先端面２７ａに形成された開口である。観察窓は図示しないカバーが取り付けられる。観察窓の後方には、図示しない撮像光学系が配置される。撮像素子２８の撮像面は、観察窓、及び撮像光学系等を介して、被観察部位の像光が入射する。撮像素子２８は、撮像素子２８の撮像面に入射した被観察部位の像光を撮像して、撮像信号を出力する。ここでいう撮像は、被観察部位からの反射光を電気信号へ変換するという意味が含まれる。
【００４０】
操作部２１は挿入部２０の基端側に連設される。操作部２１は、術者が操作する各種操作部材を備える。具体的には、操作部２１は、二種類の湾曲操作ノブ２９を備える。湾曲操作ノブ２９は、湾曲部２６の湾曲操作の際に用いられる。なお、術者は、医師、操作者、観察者、及びユーザなどと呼ばれることがあり得る。
【００４１】
操作部２１は、送気送水ボタン３０、及び吸引ボタン３１を備える。送気送水ボタン３０は、術者が送気送水操作を行う際に用いられる。吸引ボタン３１は、術者が吸引操作を行う際に用いられる。
【００４２】
操作部２１は、静止画像撮像指示部３２、及び処置具導入口３３を備える。静止画像撮像指示部３２は、被観察部位の静止画像を撮像する際に、術者が操作する。処置具導入口３３は、挿入部２０の内部を挿通している処置具挿通路の内部に処置具を挿入する開口である。なお、処置具挿通路、及び処置具の図示は省略する。静止画像は符号３９を付して図３に図示する。
【００４３】
ユニバーサルコード２２は、内視鏡１０を光源装置１１に接続する接続コードである。ユニバーサルコード２２は、挿入部２０の内部を挿通しているライトガイド３５、信号ケーブル３６、及び図示しない流体チューブを内包している。
【００４４】
また、ユニバーサルコード２２の先端部は、光源装置１１に接続されるコネクタ３７ａ、及びコネクタ３７ａから分岐され、かつプロセッサ装置１２に接続されるコネクタ３７ｂを備える。
【００４５】
コネクタ３７ａを光源装置１１に接続すると、ライトガイド３５及び図示しない流体チューブが光源装置１１に挿入される。これにより、ライトガイド３５及び図示しない流体チューブを介して、光源装置１１から内視鏡１０に対して必要な照明光と水と気体とが供給される。
【００４６】
その結果、先端部２７の先端面２７ａの図示しない照明窓から被観察部位に向けて照明光が照射される。また、送気送水ボタン３０の押下操作に応じて、先端部２７の先端面２７ａの図示しない送気送水ノズルから先端面２７ａの図示しない観察窓に向けて気体又は水が噴射される。
【００４７】
コネクタ３７ｂをプロセッサ装置１２に接続すると、信号ケーブル３６とプロセッサ装置１２とが電気的に接続される。これにより、信号ケーブル３６を介して、内視鏡１０の撮像素子２８からプロセッサ装置１２へ被観察部位の撮像信号が出力され、かつプロセッサ装置１２から内視鏡１０へ制御信号が出力される。
【００４８】
本実施形態では、内視鏡１０として軟性内視鏡を例に挙げて説明を行ったが、内視鏡１０として、硬性内視鏡等の被観察部位の動画撮像を可能な各種の電子内視鏡を用いてもよい。
【００４９】
光源装置１１は、コネクタ３７ａを介して、内視鏡１０のライトガイド３５へ照明光を供給する。照明光は、白色光、又は特定の波長帯域の光を適用可能である。照明光は、白色光、及び特定の波長帯域の光を組み合わせてもよい。光源装置１１は、観察目的に応じた波長帯域の光を、照明光として適宜選択可能に構成される。
【００５０】
白色光は、白色の波長帯域の光又は複数の波長帯域の光のいずれでもよい。特定の波長帯域は、白色の波長帯域よりも狭い帯域である。特定の波長帯域の光は、一種類の波長帯域の光を適用してもよいし、複数の波長帯域の光を適用してもよい。特定の波長帯域は、特殊光と呼ばれる場合がある。
【００５１】
プロセッサ装置１２は、コネクタ３７ｂ及び信号ケーブル３６を介して、内視鏡１０の動作を制御する。また、プロセッサ装置１２は、コネクタ３７ｂ及び信号ケーブル３６を介して、内視鏡１０の撮像素子２８から撮像信号を取得する。プロセッサ装置１２は規定のフレームレートを適用して内視鏡１０から出力された撮像信号を取得する。
【００５２】
プロセッサ装置１２は、内視鏡１０から取得した撮像信号に基づき、被観察部位の観察画像である内視鏡画像３８を生成する。ここでいう内視鏡画像３８には動画像が含まれる。内視鏡画像３８は静止画像３９が含まれてもよい。なお、動画像は符号３８ａを付して図３に図示する。
【００５３】
プロセッサ装置１２は、操作部２１の静止画像撮像指示部３２が操作された場合、動画像の生成と並行して、撮像素子２８から取得した撮像信号に基づき被観察部位の静止画像３９を生成する。静止画像３９は、動画像の解像度に対して高解像度に生成されていてもよい。
【００５４】
内視鏡画像３８の生成の際に、プロセッサ装置１２はホワイトバランス調整、及びシェーディング補正等のデジタル信号処理を適用した画質の補正を行う。プロセッサ装置１２はＤＩＣＯＭ規格で規定された付帯情報を内視鏡画像３８へ付加してもよい。なお、ＤＩＣＯＭは、Digital Imaging and Communications in Medicineの省略語である。実施形態に示すプロセッサ装置は、内視鏡を制御する内視鏡制御部を備えるプロセッサ装置の一例である。
【００５５】
プロセッサ装置１２は、内視鏡画像３８を表示装置１３及び医用画像処理装置１４のそれぞれに出力する。プロセッサ装置１２は、ＤＩＣＯＭ規格に準拠した通信プロトコルに従って、図示しないネットワークを介して内視鏡画像３８を、図示しない記憶装置へ出力してもよい。なお、ネットワークは図２に示すネットワーク１４０を適用し得る。
【００５６】
表示装置１３は、プロセッサ装置１２に接続される。表示装置１３は、プロセッサ装置１２から送信された信号に基づいて内視鏡画像３８を表示する。術者は、表示装置１３に表示される内視鏡画像３８を確認しながら、挿入部２０の進退操作等をし得る。術者は、被観察部位に病変等を検出した場合に、静止画像撮像指示部３２を操作して被観察部位の静止画を撮像し得る。
【００５７】
医用画像処理装置１４は、コンピュータが用いられる。入力装置１５はコンピュータに接続可能なキーボード及びマウス等が用いられる。入力装置１５とコンピュータとの接続は有線接続、又は無線接続のいずれでもよい。モニタ装置１６は、コンピュータに接続可能な各種モニタが用いられる。
【００５８】
医用画像処理装置１４として、ワークステーション及びサーバ装置等の診断支援装置を用いてもよい。この場合、入力装置１５及びモニタ装置１６は、それぞれワークステーション等に接続した複数の端末ごとに設けられる。更に、医用画像処理装置１４として、医療レポート等の作成支援を行う診療業務支援装置を用いてもよい。
【００５９】
医用画像処理装置１４は、内視鏡画像３８の取得、及び内視鏡画像３８の記憶を行う。医用画像処理装置１４は、モニタ装置１６の再生制御を行う。なお、本明細書における画像という用語は、画像を表す電気信号及び画像を表す情報等の画像データという意味が含まれている。すなわち、本明細書における画像という用語は、画像自身及び画像データの少なくともいずれかを意味している。
【００６０】
また、画像の記憶という用語は、画像の保存及び画像の格納等と読み替えることが可能である。ここでいう画像の記憶は、画像の非一時的記憶を意味する。医用画像処理装置１４は画像を一時記憶する一時記憶用のメモリを備えてもよい。
【００６１】
入力装置１５は、医用画像処理装置１４に対する操作指示の入力に用いられる。モニタ装置１６は、医用画像処理装置１４の制御の下、内視鏡画像３８の表示を行う。モニタ装置１６は、医用画像処理装置１４における各種情報の表示部として機能してもよい。
【００６２】
医用画像処理装置１４は、図１に図示しないネットワークを介して、図示しない記憶装置と接続され得る。画像の格納形式、及びネットワークを経由した各装置間の通信は、ＤＩＣＯＭ規格、及びＤＩＣＯＭ規格に準拠したプロトコル等を適用可能である。
【００６３】
図示しない記憶装置は、データを非一時的に記憶するストレージ等を適用可能である。記憶装置は、図示しないサーバ装置を用いて管理されてもよい。サーバ装置は、各種データを記憶して管理するコンピュータを適用可能である。
【００６４】
［医用画像処理装置のハードウェア構成］
図２は医用画像処理装置のハードウェア構成を示すブロック図である。図２に示す医用画像処理装置１４は、制御部１２０、メモリ１２２、ストレージ装置１２４、ネットワークコントローラ１２６、電源装置１２８、ディスプレイコントローラ１３０、入出力インターフェース１３２、及び入力コントローラ１３４を備える。なお、図２に示すＩ／Ｏは入出力インターフェースを表す。
【００６５】
制御部１２０、メモリ１２２、ストレージ装置１２４、ネットワークコントローラ１２６、ディスプレイコントローラ１３０、及び入出力インターフェース１３２は、バス１３６を介してデータ通信が可能に接続される。
【００６６】
〔制御部〕
制御部１２０は、医用画像処理装置１４の全体制御部、各種演算部、及び記憶制御部として機能する。制御部１２０は、メモリ１２２に具備されるＲＯＭ（read only memory）に記憶されているプログラムを実行する。
【００６７】
制御部１２０は、ネットワークコントローラ１２６を介して、図示しない外部の記憶装置からプログラムをダウンロードし、ダウンロードしたプログラムを実行してもよい。外部の記憶装置は、ネットワーク１４０を介して医用画像処理装置１４と通信可能に接続されていてもよい。
【００６８】
制御部１２０は、メモリ１２２に具備されるＲＡＭ（random access memory）を演算領域とし、各種プログラムと協働して、各種処理を実行する。これにより、医用画像処理装置１４の各種機能が実現される。
【００６９】
制御部１２０は、ストレージ装置１２４からのデータの読み出し、及びストレージ装置１２４へのデータの書き込みを制御する。制御部１２０は、ネットワークコントローラ１２６を介して、外部の記憶装置から各種データを取得してもよい。制御部１２０は、取得した各種データを用いて、演算等の各種処理を実行可能である。
【００７０】
制御部１２０は、一つ、又は二つ以上のプロセッサ（processor）が含まれてもよい。プロセッサの一例として、ＦＰＧＡ（Field Programmable Gate Array）、及びＰＬＤ（Programmable Logic Device）等が挙げられる。ＦＰＧＡ、及びＰＬＤは、製造後に回路構成を変更し得るデバイスである。
【００７１】
プロセッサの他の例として、ＡＳＩＣ（Application Specific Integrated Circuit）が挙げられる。ＡＳＩＣは、特定の処理を実行させるために専用に設計された回路構成を備える。
【００７２】
制御部１２０は、同じ種類の二つ以上のプロセッサを適用可能である。例えば、制御部１２０は二つ以上のＦＰＧＡを用いてもよいし、二つのＰＬＤを用いてもよい。制御部１２０は、異なる種類の二つ以上プロセッサを適用してもよい。例えば、制御部１２０は一つ以上のＦＰＧＡと一つ以上のＡＳＩＣとを適用してもよい。
【００７３】
複数の制御部１２０を備える場合、複数の制御部１２０は一つのプロセッサを用いて構成してもよい。複数の制御部１２０を一つのプロセッサで構成する一例として、一つ以上のＣＰＵ（Central Processing Unit）とソフトウェアとの組合せを用いて一つのプロセッサを構成し、このプロセッサが複数の制御部１２０として機能する形態がある。なお、本明細書におけるソフトウェアはプログラムと同義である。
【００７４】
複数の制御部１２０を一つのプロセッサで構成する他の例として、複数の制御部１２０を含むシステム全体の機能を一つのＩＣチップで実現するプロセッサを使用する形態が挙げられる。複数の制御部１２０を含むシステム全体の機能を一つのＩＣチップで実現するプロセッサの代表例として、ＳｏＣ（System On Chip）が挙げられる。なお、ＩＣは、Integrated Circuitの省略語である。
【００７５】
このように、制御部１２０は、ハードウェア的な構造として、各種のプロセッサを一つ以上用いて構成される。
【００７６】
〔メモリ〕
メモリ１２２は、図示しないＲＯＭ、及び図示しないＲＡＭを備える。ＲＯＭは、医用画像処理装置１４において実行される各種プログラムを記憶する。ＲＯＭは、各種プログラムの実行に用いられるパラメータ、及びファイル等を記憶する。ＲＡＭは、データの一時記憶領域、及び制御部１２０のワーク領域等として機能する。
【００７７】
〔ストレージ装置〕
ストレージ装置１２４は、各種データを非一時的に記憶する。ストレージ装置１２４は、医用画像処理装置１４の外部に外付けされてもよい。ストレージ装置１２４に代わり、又はこれと併用して、大容量の半導体メモリ装置を適用してもよい。
【００７８】
〔ネットワークコントローラ〕
ネットワークコントローラ１２６は、外部装置との間のデータ通信を制御する。データ通信の制御は、データ通信のトラフィックの管理が含まれてもよい。ネットワークコントローラ１２６を介して接続されるネットワーク１４０は、ＬＡＮなどの公知のネットワークを適用し得る。
【００７９】
〔電源装置〕
電源装置１２８は、ＵＰＳ(Uninterruptible Power Supply)などの大容量型の電源装置が適用される。電源装置１２８は停電等に起因して商用電源が遮断された際に、医用画像処理装置１４の各部へ電源を供給する。
【００８０】
〔ディスプレイコントローラ〕
ディスプレイコントローラ１３０は、制御部１２０から送信される指令信号に基づいてモニタ装置１６を制御するディスプレイドライバーとして機能する。
【００８１】
〔入出力インターフェース〕
入出力インターフェース１３２は、医用画像処理装置１４と外部機器とを通信可能に接続する。入出力インターフェース１３２は、ＵＳＢ（Universal Serial Bus）などの通信規格を適用し得る。
【００８２】
〔入力コントローラ〕
入力コントローラ１３４は、入力装置１５を用いて入力された信号の形式を医用画像処理装置１４の処理に適した形式に変換する。入力コントローラ１３４を介して入力装置１５から入力された情報は、制御部１２０を介して各部へ送信される。
【００８３】
なお、図２に示す医用画像処理装置１４のハードウェア構成は一例であり、適宜、追加、削除、及び変更が可能である。また、図２に示す医用画像処理装置１４のハードウェア構成は、以下に説明する各実施形態及び変形例に適用し得る。
【００８４】
［第一実施形態に係る医用画像処理装置］
〔機能ブロックの説明〕
図３は第一実施形態に係る医用画像処理装置の機能ブロック図である。医用画像処理装置１４は、画像取得部４０、注目領域検出部４１、強調領域設定部４２、更新間隔設定部４３、表示制御部４４、及び記憶部４６を備える。
【００８５】
画像取得部４０は、プロセッサ装置１２から内視鏡画像３８を取得する。画像取得部４０は、内視鏡画像３８を内視鏡画像記憶部４７へ記憶する。
【００８６】
画像取得部４０は、メモリカード等の情報記憶媒体を介して、プロセッサ装置１２から内視鏡画像３８を取得してもよい。画像取得部４０は、図２に示すネットワーク１４０を介して内視鏡画像３８を取得してもよい。
【００８７】
画像取得部４０は、時系列のフレーム画像３８ｂから構成される動画像３８ａを取得し得る。画像取得部４０は動画像３８ａの撮像途中に静止画撮影が実施された場合に、静止画像３９を取得し得る。
【００８８】
注目領域検出部４１は、内視鏡画像３８から注目領域を検出する。注目領域検出部４１は、内視鏡画像３８を構成するフレーム画像３８ｂを複数の局所領域に分割し、局所領域ごとに特徴量を算出し、局所領域ごとの特徴量に基づいて注目領域を検出し得る。
【００８９】
強調領域設定部４２は、内視鏡画像３８から検出された注目領域を強調する強調領域を設定する。強調領域設定部４２は、強調領域として注目領域を囲む枠を設定し得る。強調領域設定部４２は注目領域が検出されたすべての内視鏡画像３８について強調領域を設定し得る。
【００９０】
強調領域設定部４２は、注目領域の位置を表す注目領域の座標値に基づいて強調領域を設定し得る。注目領域の位置及び強調領域の位置を表す座標系として二次元直交座標系を適用し得る。
【００９１】
強調領域設定部４２は、注目領域の座標値として注目領域の重心の座標値を取得し得る。強調領域設定部４２は、注目領域の座標値として注目領域の縁を構成する閉曲線上の座標値を取得し得る。強調領域設定部４２は、注目領域の縁を構成する閉曲線が内接する四角形を強調領域として設定し得る。強調領域は、四角形に代わり円又は四角形以外の多角形を適用し得る。
【００９２】
更新間隔設定部４３は、モニタ装置１６を用いて内視鏡画像３８に強調領域を重畳表示させる際の、強調領域の更新間隔を設定する。更新間隔設定部４３は、内視鏡画像３８に適用される更新間隔を超える更新間隔を、強調領域の更新間隔として設定する。なお、更新間隔とは、任意の更新タイミングと次の更新タイミングとの間の期間を意味する。更新間隔は更新期間と読み替えてもよい。
【００９３】
更新間隔設定部４３は、入力装置１５を用いて入力された更新間隔を表す情報を取得してもよい。すなわち、医用画像処理装置１４は、更新間隔表す信号を受信する信号受信部を備えてもよい。信号受信部として、入力装置１５を接続する入出力インターフェースを適用し得る。
【００９４】
表示制御部４４は、内視鏡画像３８及び強調領域をモニタ装置１６へ表示させる表示制御信号をモニタ装置１６へ送信する。表示制御部４４は、規定の更新間隔を適用して内視鏡画像３８を更新する。表示制御部４４は、更新間隔設定部４３を用いて設定された強調領域の更新間隔を適用して強調領域を更新する。
【００９５】
モニタ装置１６は、表示制御部４４から送信される表示制御信号を取得し、内視鏡画像３８及び強調領域を表示する。モニタ装置１６は強調領域を内視鏡画像３８に重畳表示し得る。
【００９６】
記憶部４６は、内視鏡画像記憶部４７、注目領域記憶部４８、及び強調領域記憶部４９を備える。内視鏡画像記憶部４７は、画像取得部４０を用いて取得した内視鏡画像３８を記憶する。
【００９７】
注目領域記憶部４８は、注目領域の情報を記憶する。注目領域記憶部４８は、注目領域を検出した内視鏡画像３８と関連付けされた注目領域の情報を記憶し得る。注目領域の情報は内視鏡画像３８における注目領域の座標値を適用し得る。注目領域の座標値は、強調領域を設定する際に適用される注目領域の座標値と同一である。
【００９８】
強調領域記憶部４９は、強調領域の情報を記憶する。強調領域記憶部４９は、強調領域が設定された内視鏡画像３８と関連付けされた強調領域の情報を記憶し得る。
【００９９】
記憶部４６は、一つ以上の記憶素子を適用し得る。すなわち、記憶部４６は、内視鏡画像記憶部４７、注目領域記憶部４８、及び強調領域記憶部４９のそれぞれに対応する三つの記憶素子を備え得る。また、内視鏡画像記憶部４７、注目領域記憶部４８、及び強調領域記憶部４９は、それぞれ複数の記憶素子を適用し得る。更に、内視鏡画像記憶部４７、注目領域記憶部４８、及び強調領域記憶部４９のうち二つ又は全てを、一つの記憶素子を用いて構成し得る。
【０１００】
〔内視鏡画像及び強調領域の更新間隔〕
本実施形態に示す医用画像処理装置１４は、内視鏡画像３８から注目領域を検出し、注目領域を強調する強調領域を設定し、注目領域及び強調領域に基づき診断を支援する。一方、注目領域を強調する強調領域が毎フレームにおいて変動した場合、画面にちらつきが発生し、医師の診断の妨げになる懸念がある。
【０１０１】
そこで、本実施形態に示す医用画像処理装置１４は、強調領域の表示処理を内視鏡画像３８の表示処理と異なる間隔を適用して更新する。これにより、強調領域の変動に起因する画面のちらつきを抑制し得る。
【０１０２】
図４は内視鏡画像及び強調領域の更新間隔の説明図である。図４には強調領域の更新遅延のイメージを示す。図４に示すタイミングｔ１からタイミングｔ８は、内視鏡画像３８の表示が更新されるタイミングを表す。図４には、内視鏡画像３８の表示が更新されるタイミングｔ１からタイミングｔ８までにおけるフレーム画像３８ｂ１からフレーム画像３８ｂ８までの八枚のフレーム画像３８ｂを示す。
【０１０３】
注目領域はフレーム画像３８ｂごとに検出される。すなわち、フレーム画像３８ｂ１からフレーム画像３８ｂ８において注目領域１５０が検出される。図４では、注目領域１５０を模式的に図示する。図４では注目領域を表す符号１５０の図示を適宜省略する。後述する強調領域１５２も同様である。
【０１０４】
フレーム画像３８ｂの更新レートは、例えば、３０フレーム毎秒のように、システムに予め設定された設定値を適用し得る。更新レートが３０フレーム毎秒の場合、更新間隔は０．０３秒となる。
【０１０５】
フレーム画像３８ｂ１からフレーム画像３８ｂ８までのそれぞれは、注目領域１５０に対応する強調領域１５２が設定される。一方、タイミングｔ１及びタイミングｔ７では強調領域１５２の表示の更新が実施されるが、タイミングｔ２からタイミングｔ６まで及びタイミングｔ８では、強調領域１５２の表示の更新は実施されない。
【０１０６】
図４には、強調領域１５２の更新レートを、フレーム画像３８ｂの更新レートの六分の一とする例を示した。フレーム画像３８ｂの更新レートが３０フレーム毎秒の場合、強調領域１５２の更新レートは５フレーム毎秒である。ｎを１を超える任意の数とした場合に、強調領域１５２の更新レートはフレーム画像３８ｂの更新レートのｎ分の一とし得る。ｎは２以上の整数としてもよい。
【０１０７】
このように、フレーム画像３８ｂごとに注目領域１５０の位置が変動した場合でも、強調領域１５２の表示の更新間隔は、フレーム画像３８ｂの表示の更新間隔と比較して遅くなる。これにより、注目領域１５０を強調する強調領域１５２を表示する場合に、フレーム画像３８ｂの更新に対して遅れて強調領域１５２の位置が更新され、内視鏡画像３８のちらつきを抑制し得る。
【０１０８】
本実施形態では、強調領域１５２の表示の更新間隔設定の例として、一秒間あたりのフレーム数を用いて表す更新レートを例示したが、強調領域１５２の表示の更新間隔を表す期間を設定してもよい。ｍを１を超える任意の数とした場合に、強調領域１５２の更新間隔はフレーム画像３８ｂの更新間隔のｍ倍とし得る。ｍは２以上の整数としてもよい。
【０１０９】
また、強調領域１５２の表示の更新間隔設定は、フレーム画像３８ｂの更新レートに応じて設定してもよい。上記のように、強調領域１５２の表示の更新レートをフレーム画像３８ｂの更新レートの六分の一といった設定も可能である。
【０１１０】
〔強調領域の表示の更新の具体例〕
図５は図４のタイミングｔ１におけるフレーム画像の模式図である。図５に示すフレーム画像３８ｂ１は、注目領域１５０１が検出され、かつ、注目領域１５０１に基づく強調領域１５２１が設定され、強調領域１５２１が注目領域１５０１に重畳表示されている。
【０１１１】
強調領域１５２１は、注目領域１５０１の重心１５４１の座標値に基づいて設定される。注目領域１５０１が検出された場合、注目領域１５０１の重心１５４１の座標値が算出され、強調領域１５２１の重心の座標値として、注目領域１５０１の重心１５４１の座標値が設定される。
【０１１２】
また、注目領域１５０１の縁を構成する閉曲線の座標値が算出され、注目領域１５０１の縁を構成する閉曲線の座標値に基づいて強調領域１５２１である四角形を構成する各辺の座標値が算出される。
【０１１３】
図６は図４のタイミングｔ２におけるフレーム画像の模式図である。図６に示すフレーム画像３８ｂ２は注目領域１５０２が検出される。フレーム画像３８ｂ２は、強調領域１５２２が設定されるものの、強調領域１５２２の表示の更新は実施されない。すなわち、フレーム画像３８ｂ２は、フレーム画像３８ｂ２から検出された注目領域１５０２に基づく強調領域１５２２ではなく、一つ前のフレーム画像３８ｂ１において更新された強調領域１５２１が表示される。
【０１１４】
なお、符号１５４２はフレーム画像３８ｂ２における注目領域１５０２の重心を表す。重心１５４１を起点とし重心１５４２を終点とする矢印線は、フレーム画像３８ｂ２において、注目領域１５０２の位置がフレーム画像３８ｂ１の注目領域１５０１の位置から移動したことを表す。
【０１１５】
図７は図４のタイミングｔ３におけるフレーム画像の模式図である。フレーム画像３８ｂ３においても、注目領域１５０３に基づく強調領域１５２３は設定されるものの、強調領域１５２３の表示の更新は実施されない。すなわち、フレーム画像３８ｂ３において注目領域１５０３が検出され、強調領域１５２３が設定された場合、フレーム画像３８ｂ３の注目領域１５０３の表示は更新されるものの、フレーム画像３８ｂ３は、二つ前のフレーム画像３８ｂ１において設定された強調領域１５２１が表示される。
【０１１６】
なお、符号１５４３は、フレーム画像３８ｂ３における注目領域１５０３の重心を表す。重心１５４２を起点とし重心１５４３を終点とする矢印線は、フレーム画像３８ｂ３において、注目領域１５０３の位置がフレーム画像３８ｂ２の注目領域１５０２の位置から移動したことを表す。図４のタイミングｔ４におけるフレーム画像３８ｂ４、タイミングｔ５におけるフレーム画像３８ｂ５、及びタイミングｔ６におけるフレーム画像３８ｂ６の詳細な図示は省略する。
【０１１７】
図８は図４のタイミングｔ７におけるフレーム画像の模式図である。フレーム画像３８ｂ７から注目領域１５０７が検出された場合、注目領域１５０７に基づく強調領域１５２７が設定される。フレーム画像３８ｂ７は、注目領域１５０７の表示が更新され、かつ強調領域１５２７の表示が更新される。
【０１１８】
なお、符号１５４７は、フレーム画像３８ｂ７における注目領域１５０７の重心を表す。重心１５４３を起点とし重心１５４７を終点とする矢印線は、フレーム画像３８ｂ７において、フレーム画像３８ｂ４の注目領域１５０３の位置から図示を省略したフレーム画像の注目領域１５０の位置を経て、注目領域１５０７の位置が移動したことを表す。図４のタイミングｔ８におけるフレーム画像３８ｂ８の詳細な図示は省略する。
【０１１９】
〔医用画像処理方法のフローチャート〕
図９は第一実施形態に係る医用画像処理方法のフローチャートである。第一実施形態に係る医用画像処理方法は、内視鏡画像取得工程Ｓ１０、注目領域検出工程Ｓ１２、強調領域設定工程Ｓ１４、更新間隔設定工程Ｓ１６、更新タイミング判定工程Ｓ１８、強調領域更新工程Ｓ２０、表示工程Ｓ２２、及び最終フレーム画像判定工程Ｓ２４を含んで構成される。
【０１２０】
内視鏡画像取得工程Ｓ１０では、図３に示す医用画像処理装置１４は、画像取得部４０を用いて内視鏡システム９から内視鏡画像３８を構成するフレーム画像３８ｂを取得する。内視鏡画像取得工程Ｓ１０の後に注目領域検出工程Ｓ１２へ進む。
【０１２１】
注目領域検出工程Ｓ１２では、注目領域検出部４１は、フレーム画像３８ｂから注目領域１５０を検出し、注目領域１５０の位置及び形状を特定する。医用画像処理装置１４は、注目領域１５０の情報として、注目領域１５０の位置を表す座標値の情報及び注目領域１５０の形状の情報を注目領域記憶部４８へ記憶する。注目領域検出工程Ｓ１２の後に強調領域設定工程Ｓ１４へ進む。
【０１２２】
強調領域設定工程Ｓ１４では、強調領域設定部４２は、注目領域検出工程Ｓ１２において検出された注目領域１５０の位置及び形状に基づいて強調領域１５２の位置及び形状を設定する。強調領域設定部４２は、強調領域１５２の情報として強調領域１５２の位置の情報及び強調領域１５２の形状の情報を強調領域記憶部４９へ記憶する。強調領域設定工程Ｓ１４の後に更新間隔設定工程Ｓ１６へ進む。
【０１２３】
更新間隔設定工程Ｓ１６では、更新間隔設定部４３は、強調領域１５２の更新間隔として、予め設定されているフレーム画像３８ｂの更新間隔を超える更新間隔を設定する。更新間隔設定部４３は、更新間隔の情報を記憶部４６へ記憶してもよい。
【０１２４】
更新間隔設定工程Ｓ１６は、内視鏡画像取得工程Ｓ１０の前など、強調領域設定工程Ｓ１４の前の工程として実施されてもよい。すなわち、更新間隔設定工程Ｓ１６は、内視鏡検査を開始する前に実施されてもよいし、内視鏡検査の途中に実施されてもよい。更新間隔設定工程Ｓ１６は、予め規定された強調領域１５２の表示の更新間隔の初期値が変更されてもよい。
【０１２５】
更新間隔設定工程Ｓ１６では、ユーザが入力装置１５を用いて強調領域１５２の表示の更新間隔として入力した値を取得してもよい。更新間隔設定工程Ｓ１６の後に更新タイミング判定工程Ｓ１８へ進む。
【０１２６】
更新タイミング判定工程Ｓ１８では、表示制御部４４は、強調領域１５２の更新タイミングであるか否かを判定する。更新タイミング判定工程Ｓ１８において、表示制御部４４が規定の更新タイミングではないと判定した場合はＮｏ判定となり、強調領域１５２の表示を更新せずに表示工程Ｓ２２へ進む。一方、表示制御部４４が規定の更新タイミングであると判定した場合はＹｅｓ判定となり、強調領域更新工程Ｓ２０へ進む。
【０１２７】
強調領域更新工程Ｓ２０では、表示制御部４４は強調領域１５２の表示を更新する。強調領域更新工程Ｓ２０の後に表示工程Ｓ２２へ進む。実施形態に示す強調領域更新工程Ｓ２０は、医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御工程の一例である。
【０１２８】
表示工程Ｓ２２では、表示制御部４４は、注目領域１５０及び強調領域１５２を表す信号をモニタ装置１６へ送信する。モニタ装置１６は表示制御部４４から送信された信号に基づいて注目領域１５０及び強調領域１５２を表示する。表示工程Ｓ２２の後に最終フレーム画像判定工程Ｓ２４へ進む。
【０１２９】
最終フレーム画像判定工程Ｓ２４では、画像取得部４０は、内視鏡画像取得工程Ｓ１０において取得したフレーム画像３８ｂが最終のフレーム画像３８ｂであるか否かを判定する。画像取得部４０は、フレーム画像３８ｂを取得した後に、次のフレーム画像３８ｂが入力されない期間が規定の期間以上の場合に、最終のフレーム画像３８ｂを取得したと判定し得る。画像取得部４０は、内視鏡画像３８の送信終了を表す信号を受信した際に、最終のフレーム画像３８ｂを取得したと判定し得る。
【０１３０】
最終フレーム画像判定工程Ｓ２４において、画像取得部４０が最終のフレーム画像３８ｂではないフレーム画像３８ｂを取得したと判定した場合はＮｏ判定となり、内視鏡画像取得工程Ｓ１０へ進む。以降、最終フレーム画像判定工程Ｓ２４においてＹｅｓ判定となるまで、内視鏡画像取得工程Ｓ１０から最終フレーム画像判定工程Ｓ２４までの各工程を繰り返し実施する。
【０１３１】
一方、最終フレーム画像判定工程Ｓ２４において、画像取得部４０が最終のフレーム画像３８ｂを取得したと判定した場合はＮｏ判定となり、規定の終了処理が実施された後に医用画像処理方法を終了する。
【０１３２】
〔強調領域設定の変形例〕
〈第一変形例〉
第一変形例に係る強調領域設定では、直前の更新フレームから自フレームまでの各フレーム画像３８ｂに設定された強調領域１５２を用いて、自フレームにおける強調領域１５２が設定される。直前の更新フレームとは一つ前の強調領域１５２の表示の更新が実施されたフレーム画像３８ｂである。自フレームとは、強調領域１５２の表示の更新が実施されるフレーム画像３８ｂである。
【０１３３】
図１０は強調領域設定の第一変形例の説明図である。図１０に示すフレーム画像３８ｂ７は、図４に示すタイミングｔ７におけるフレーム画像３８ｂである。フレーム画像３８ｂ７において表示される強調領域１５２の位置は、フレーム画像３８ｂ７以前のフレーム画像３８ｂである、フレーム画像３８ｂ１の強調領域１５２１からフレーム画像３８ｂ７の強調領域１５２７までの平均位置が適用される。平均位置に代わり、フレーム画像３８ｂ１の強調領域１５２１から、フレーム画像３８ｂ７の強調領域１５２７までの任意のフレーム画像の強調領域の位置を、フレーム画像３８ｂ７において表示される強調領域１５２の位置としてもよい。
【０１３４】
図４におけるタイミングｔ１からタイミングｔ６までは強調領域１５２１の表示が維持され、その後、タイミングｔ７において強調領域１５２７が表示された場合、ちらつきの発生が懸念される。
【０１３５】
そこで、タイミングｔ７における強調領域の位置として、重心１５４１の座標値から重心１５４７までの座標値を用いて重心１５４の座標値を算出し、重心１５４の位置を強調領域１５２の位置として設定する。
【０１３６】
例えば、重心１５４の座標値は、重心１５４１の座標値から重心１５４７までの座標値の平均値を適用し得る。重心１５４の座標値は、重心１５４１の座標値から重心１５４７までの全ての座標値を用いる必要はなく、重心１５４１の座標値から重心１５４７までの任意の二つ以上の座標値を用いればよい。
【０１３７】
〈第二変形例〉
図１１は強調領域設定の第二変形例の説明図である。第二変形例に係る強調領域設定では、強調領域１５２の表示の更新タイミング以外のフレーム画像３８ｂでは期間経過に応じて、強調領域１５２の表示が弱められる。図１１に示すフレーム画像３８ｂのうち、更新タイミング以外のフレーム画像３８ｂは、フレーム画像３８ｂ２、フレーム画像３８ｂ３、フレーム画像３８ｂ４、フレーム画像３８ｂ５、フレーム画像３８ｂ６、及びフレーム画像３８ｂ８である。
【０１３８】
強調領域１５２の表示を弱める一例として、強調領域１５２を示す枠の濃度を薄くする例が挙げられる。濃度を薄くする際に色を変更してもよい。強調領域１５２の表示を弱める他の例として、強調領域１５２を示す枠の太さを細くする例、強調領域１５２を示す枠の線の種類を変更する例が挙げられる。強調領域１５２を示す枠の変更は連続的に変更してもよいし、段階的に変更してもよい。
【０１３９】
強調領域１５２の表示を弱める他の例として、強調領域１５２を示す枠を点滅させる例が挙げられる。強調領域１５２を示す枠を一定の周期を適用して点滅させてもよいし、経時により点滅周期を変動させてもよい。
【０１４０】
このようにして、強調領域１５２の表示を弱めることにより、強調領域１５２の位置の変動に起因する視覚的な違和感が低減され、ちらつきを抑制し得る。
【０１４１】
〈第三変形例〉
図１２は強調領域設定の第三変形例の説明図である。第三変形例に係る画像処理では、複数のフレーム画像３８ｂにおいて設定された強調領域１５２が統合される。図１２には、現在のフレーム画像３８ｂにおける強調領域１５２ａに対して、一つ前のフレーム画像３８ｂにおける強調領域１５２ｂを統合する例を示す。実施形態に示す現在のフレーム画像３８ｂの一つ前のフレーム画像３８ｂは、過去のフレームの一例である。
【０１４２】
図１２の上段に示すフレーム画像３８ｂは、注目領域１５０ａが検出され、注目領域１５０ａに基づく強調領域１５２ａが設定されている。図１２の上段に示すフレーム画像３８ｂに示した符号１５４ａは注目領域１５０ａの重心である。
【０１４３】
図１２の上段に示すフレーム画像３８ｂには、一つ前のフレーム画像３８ｂにおいて検出した注目領域１５０ｂ、注目領域１５０ｂに基づいて設定された強調領域１５２ｂ、及び注目領域１５０ｂの重心１５４ｂを示す。
【０１４４】
図１２の下段に示すフレーム画像３８ｂは、強調領域１５２ａと強調領域１５２ｂとが統合された強調領域１５２が表示される。注目領域１５０ａの重心１５４ａの座標値及び注目領域１５０ｂの重心１５４ｂ座標値を用いて、強調領域１５２を設定する際の重心１５４の座標値が導出される。強調領域１５２を表す枠の座標値は、重心１５４の座標値、強調領域１５２ａを表す枠の座標値、及び強調領域１５２ｂを表す枠の座標値に基づいて導出される。
【０１４５】
このようにして、強調領域１５２を統合することにより、強調領域１５２の変動に起因するちらつきを抑制し得る。本変形例では二つの強調領域１５２を統合する例を示したが、三つ以上の強調領域１５２を統合してもよい。
【０１４６】
〈第四変形例〉
内視鏡画像３８において、注目領域１５０が存在するにもかかわらず、注目領域１５０が検出されない場合があり得る。注目領域１５０が検出されないフレーム画像３８ｂの存在はちらつきの原因となり得る。そこで、注目領域１５０について時間積分を行うことで、ちらつきを抑制し得る。
【０１４７】
［第一実施形態の作用効果］
上記の如く構成された第一実施形態に係る医用画像処理装置１４によれば、以下の作用効果を得ることが可能である。
【０１４８】
〔１〕
強調領域１５２の表示の更新間隔として、内視鏡画像３８の表示の更新間隔を超える期間を適用する。これにより、内視鏡画像３８の更新に対して遅れて強調領域１５２が更新され、強調領域１５２の位置の移動に起因する内視鏡画像３８を表示する画面のちらつきを抑制し得る。
【０１４９】
〔２〕
強調領域１５２が更新された後のフレーム画像３８ｂでは、次に強調領域１５２が更新されるフレーム画像３８ｂまで、最後に更新された強調領域１５２の位置が維持される。これにより、フレーム画像３８ｂ間における強調領域１５２の位置の移動が抑制され、内視鏡画像３８を表示する画面のちらつきを抑制し得る。
【０１５０】
〔３〕
強調領域１５２が更新されたフレーム画像３８ｂにおいて、強調領域１５２が更新されたフレーム画像３８ｂ以前の二以上のフレーム画像３８ｂの平均位置に強調領域１５２を表示する。これにより、フレーム画像３８ｂ間における強調領域１５２の位置の移動が抑制され、内視鏡画像３８を表示する画面のちらつきを抑制し得る。
【０１５１】
〔４〕
更新タイミング以外のフレーム画像３８ｂでは、期間経過に応じて強調領域１５２の表示が弱められる。これにより、フレーム画像３８ｂ間における強調領域１５２の変動が抑制され、内視鏡画像３８を表示する画面のちらつきを抑制し得る。
【０１５２】
［第二実施形態に係る医用画像処理装置］
図１３は第二実施形態に係る医用画像処理装置の機能ブロック図である。第二実施形態に係る医用画像処理装置２１４は鑑別部２２０を備える。記憶部２４６は鑑別結果記憶部２５０を備える。
【０１５３】
鑑別部２２０は、注目領域１５０が病変であるか否かを鑑別し得る。鑑別部２２０は注目領域１５０が腫瘍であるか又は非腫瘍であるかを鑑別し得る。鑑別部２２０は注目領域１５０が炎症領域であるか否かを鑑別し得る。医用画像処理装置２１４は、注目領域検出部４１の検出結果に代わり、血管パターンの情報及び体腔内に着色剤を投与した際の体腔内の色の情報等を用いて内視鏡画像３８の鑑別を実施してもよい。
【０１５４】
鑑別部２２０を用いた鑑別には、ＮＩＣＥ分類及びＪＮＥＴ分類などの規定の分類を適用し得る。なお、ＮＩＣＥは、NBI International Colorectal Endoscopic Classificationの省略語である。ＪＮＥＴは、The Japan NBI Expert Teamの省略語である。ＮＢＩは、Narrow Band Imagingの省略語である。
【０１５５】
表示制御部４４は、鑑別結果記憶部２５０から鑑別結果を読み出し、鑑別結果を表す信号をモニタ装置１６へ送信し得る。モニタ装置１６は、内視鏡画像３８に鑑別結果を重畳表示し得る。モニタ装置１６は、内視鏡画像３８と鑑別結果とを別々の領域に表示してもよい。鑑別結果は鑑別結果を表す文字情報を適用し得る。
【０１５６】
表示制御部４４は、鑑別結果の表示を更新する際に、内視鏡画像３８の表示の更新間隔を超える更新間隔を適用してもよい。表示制御部４４は、鑑別結果の表示を更新する際に、強調領域の表示の更新間隔を適用してもよい。
【０１５７】
更新間隔設定部２４３は、鑑別結果の表示の更新間隔を設定し得る。更新間隔設定部２４３は、強調領域の表示の更新間隔を設定する強調更新間隔設定部、及び鑑別結果の表示の更新間隔を設定する鑑別更新間隔設定部を備えてもよい。
【０１５８】
〔変形例〕
医用画像処理装置２１４は内視鏡画像３８の鑑別結果に応じて、強調領域１５２の表示の更新間隔を設定してもよい。例えば、鑑定結果が炎症の場合、炎症は内視鏡画像の広範囲に存在し、炎症を強調する強調領域１５２は腫瘍等の強調領域１５２と比較して広範囲となる。そこで、鑑別結果が炎症の場合、他の鑑別結果の場合よりも強調領域１５２の表示の更新間隔を長くしてもよい。
【０１５９】
広範囲の強調領域１５２はフレーム画像３８ｂ間の移動距離が相対的に短いと考えられる。そうすると、強調領域１５２を短期間で更新する必要がなく、強調領域１５２の表示の更新間隔を長くしても、内視鏡画像３８の視認への影響が少なく、内視鏡画像３８のちらつきを効果的に抑制し得る。
【０１６０】
鑑別結果が癌などの領域性がある病変の場合、他の鑑別結果の場合よりも強調領域１５２の表示の更新間隔を短くしてもよい。これにより、鑑別結果が癌などの領域性がある病変の場合に、内視鏡画像３８の視認への影響を抑制し、かつ、内視鏡画像３８のちらつきを効果的に抑制し得る。
【０１６１】
［第二実施形態の作用効果］
上記の如く構成された第二実施形態に係る医用画像処理装置２１４によれば、以下の作用効果を得ることが可能である。
【０１６２】
〔１〕
内視鏡画像３８はフレーム画像３８ｂごとに自動鑑別を実施するものの、鑑別結果が得られないフレーム画像３８ｂが存在し、自動鑑別のちらつきが発生し得る。そこで、内視鏡画像３８の自動鑑別を実施し、鑑別結果を表示する際に、内視鏡画像３８の表示の更新間隔を超える更新間隔を適用して、鑑別結果の表示を更新する。これにより、鑑別結果のちらつきを効果的に抑制し得る。
【０１６３】
〔２〕
鑑別結果の表示の更新間隔として、強調領域１５２の表示の更新間隔を適用する。これにより、強調領域の表示の更新間隔を用いて、鑑別結果の表示を更新し得る。
【０１６４】
〔３〕
鑑別結果が炎症の場合は、他の鑑別結果の場合に適用される強調領域１５２の表示の更新間隔よりも長い更新間隔が適用される。これにより、鑑別結果が炎症の場合において、内視鏡画像３８のちらつきを効果的に抑制し得る。
【０１６５】
〔４〕
鑑別結果が癌などの領域性がある病変の場合、他の鑑別結果の場合よりも強調領域１５２の表示の更新間隔よりも短い更新間隔が適用される。これにより、鑑別結果が癌などの領域性がある病変の場合に、内視鏡画像３８の視認への影響を抑制し、かつ、内視鏡画像３８のちらつきを効果的に抑制し得る。
【０１６６】
［第三実施形態に係る医用画像処理装置］
図１４は第三実施形態に係る医用画像処理装置の機能ブロック図である。第三実施形態に係る医用画像処理装置３１４は内視鏡情報取得部３２０を備える。記憶部３４６は内視鏡情報記憶部３５０を備える。
【０１６７】
内視鏡情報取得部３２０は、内視鏡１０の先端部２７の移動速度を取得する。内視鏡情報取得部３２０は、内視鏡１０の先端部２７の移動速度を内視鏡情報記憶部３５０へ記憶する。
【０１６８】
内視鏡１０の先端部２７の移動速度は、内視鏡画像３８に画像解析処理を施してフレーム画像３８ｂの移動ベクトルを導出し、移動ベクトルから導出してもよい。内視鏡１０の先端部２７の移動速度は、内視鏡１０に具備される速度センサの検出結果を適用してもよい。
【０１６９】
更新間隔設定部３４３は、内視鏡１０の先端部２７の移動速度に応じて、強調領域１５２の表示の更新間隔を設定する。例えば、内視鏡１０の先端部２７の移動速度が相対的に速い場合は、強調領域１５２の表示の更新間隔を相対的に速く設定し、内視鏡１０の先端部２７の移動速度が相対的に遅い場合は、強調領域１５２の表示の更新間隔を相対的に遅く設定する。実施形態に記載の内視鏡１０の先端部２７の移動速度は、撮像装置の動きの一例である。
【０１７０】
なお、本明細書における速度という用語は、速度の絶対値として表される速さの概念を含み得る。本明細書では、速度と速さを相互に読み替えることが可能である。
【０１７１】
［第三実施形態の作用効果］
上記の如く構成された第三実施形態に係る医用画像処理装置３１４によれば、以下の作用効果を得ることが可能である。
【０１７２】
〔１〕
内視鏡１０の先端部２７の移動速度に応じて強調領域１５２の表示の更新間隔を設定する。これにより、内視鏡１０の先端部２７の移動速度が変動した場合でも、強調領域１５２の表示に起因するちらつきを抑制し得る。
【０１７３】
〔２〕
内視鏡１０の先端部２７の移動速度が相対的に速い場合は、強調領域１５２の表示の更新間隔を相対的に短い期間に設定する。これにより、フレーム画像３８ｂ間の変動が大きい場合でも、強調領域１５２の表示を追従させることが可能となる。
【０１７４】
［内視鏡システムの変形例］
〔プロセッサ装置の変形例〕
プロセッサ装置１２は、医用画像処理装置１４の機能を有してもよい。すなわち、プロセッサ装置１２は、医用画像処理装置１４と一体に構成されてもよい。かかる態様では、表示装置１３はモニタ装置１６と兼用し得る。プロセッサ装置１２は入力装置１５を接続させる接続端子を備え得る。
【０１７５】
〔照明光の変形例〕
本実施形態に示す内視鏡システム９を用いて取得可能な医用画像の一例として、白色帯域の光、又は白色帯域の光として複数の波長帯域の光を照射して得た通常光画像が挙げられる。
【０１７６】
本実施形態に示す内視鏡システム９を用いて取得可能な医用画像の他の例として、特定の波長領域の光を照射して得た画像が挙げられる。特定の波長帯域は白色帯域よりも狭い帯域を適用可能である。以下の変形例の適用が可能である。
【０１７７】
〈第１変形例〉
特定の波長帯域の第１例は、可視域の青色帯域又は緑色帯域である。第１例の波長帯域は、３９０ナノメートル以上４５０ナノメートル以下、又は５３０ナノメートル以上５５０ナノメートル以下の波長帯域を含み、かつ第１例の光は、３９０ナノメートル以上４５０ナノメートル以下、又は５３０ナノメートル以上５５０ナノメートル以下の波長帯域内にピーク波長を有する。
【０１７８】
〈第２変形例〉
特定の波長帯域の第２例は、可視域の赤色帯域である。第２例の波長帯域は、５８５ナノメートル以上６１５ナノメートル以下、又は６１０ナノメートル以上７３０ナノメートル以下の波長帯域を含み、かつ第２例の光は、５８５ナノメートル以上６１５ナノメートル以下、又は６１０ナノメートル以上７３０ナノメートル以下の波長帯域内にピーク波長を有する。
【０１７９】
〈第３変形例〉
特定の波長帯域の第３例は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ第３例の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する。この第３例の波長帯域は、４００±１０ナノメートル、４４０±１０ナノメートル、４７０±１０ナノメートル、又は６００ナノメートル以上７５０ナノメートル以下の波長帯域を含み、かつ第３例の光は、４００±１０ナノメートル、４４０±１０ナノメートル、４７０±１０ナノメートル、又は６００ナノメートル以上７５０ナノメートル以下の波長帯域にピーク波長を有する。
【０１８０】
〈第４変形例〉
特定の波長帯域の第４例は、生体内の蛍光物質が発する蛍光の観察に用いられ、かつこの蛍光物質を励起させる励起光の波長帯域である。例えば、３９０ナノメートル以上４７０ナノメートル以下の波長帯域である。なお、蛍光の観察は蛍光観察と呼ばれる場合がある。
【０１８１】
〈第５変形例〉
特定の波長帯域の第５例は、赤外光の波長帯域である。この第５例の波長帯域は、７９０ナノメートル以上８２０ナノメートル以下、又は９０５ナノメートル以上９７０ナノメートル以下の波長帯域を含み、かつ第５例の光は、７９０ナノメートル以上８２０ナノメートル以下、又は９０５ナノメートル以上９７０ナノメートル以下の波長帯域にピーク波長を有する。
【０１８２】
〔特殊光画像の生成例〕
プロセッサ装置１２は、白色光を用いて撮像して得られた通常光画像に基づいて、特定の波長帯域の情報を有する特殊光画像を生成してもよい。なお、ここでいう生成は取得が含まれる。この場合、プロセッサ装置１２は、特殊光画像取得部として機能する。そして、プロセッサ装置１２は、特定の波長帯域の信号を、通常光画像に含まれる赤、緑、及び青、或いはシアン、マゼンタ、及びイエローの色情報に基づく演算を行うことで得る。
【０１８３】
なお、赤、緑、及び青は、ＲＧＢ（Red,Green,Blue）と表されることがある。また、シアン、マゼンタ、及びイエローは、ＣＭＹ（Cyan,Magenta,Yellow）と表されることがある。
【０１８４】
〔特徴量画像の生成例〕
医用画像として、白色帯域の光、又は白色帯域の光として複数の波長帯域の光を照射して得る通常画像、並びに特定の波長帯域の光を照射して得る特殊光画像の少なくともいずれかに基づく演算を用いて、特徴量画像を生成し得る。
【０１８５】
［コンピュータを画像処理装置として機能させるプログラムへの適用例］
上記した医用画像処理方法は、コンピュータを用いて、医用画像処理方法における各工程に対応する機能を実現させるプログラムとして構成可能である。例えば、コンピュータに、医用画像を取得する画像取得機能、医用画像から注目領域を検出する注目領域検出機能、表示装置を用いて医用画像を表示する際に、注目領域を強調する強調領域の位置を注目領域の位置に応じて設定する強調領域設定機能、及び医用画像の表示の更新間隔を超える更新間隔を適用して、強調領域の表示を更新する表示制御機能を実現させるプログラムを構成し得る。
【０１８６】
上記した画像処理機能をコンピュータに実現させるプログラムを、有体物である非一時的な情報記憶媒体である、コンピュータが読取可能な情報記憶媒体に記憶し、情報記憶媒体を通じてプログラムを提供することが可能である。
【０１８７】
また、非一時的な情報記憶媒体にプログラムを記憶して提供する態様に代えて、ネットワークを介してプログラム信号を提供する態様も可能である。
【０１８８】
［実施形態及び変形例等の組み合わせについて］
上記した実施形態で説明した構成要素、及び変形例で説明した構成要素は、適宜組み合わせて用いることができ、また、一部の構成要素を置き換えることもできる。
【０１８９】
以上説明した本発明の実施形態は、本発明の趣旨を逸脱しない範囲で、適宜構成要件を変更、追加、削除することが可能である。本発明は以上説明した実施形態に限定されるものではなく、本発明の技術的思想内で当該分野の通常の知識を有する者により、多くの変形が可能である。
【符号の説明】
【０１９０】
９  内視鏡システム
１０  内視鏡
１１  光源装置
１２  プロセッサ装置
１３  表示装置
１４  医用画像処理装置
１５  入力装置
１６  モニタ装置
２０  挿入部
２１  操作部
２２  ユニバーサルコード
２５  軟性部
２６  湾曲部
２７  先端部
２７ａ  先端面
２８  撮像素子
２９  湾曲操作ノブ
３０  送気送水ボタン
３１  吸引ボタン
３２  静止画像撮像指示部
３３  処置具導入口
３５  ライトガイド
３６  信号ケーブル
３７ａ  コネクタ
３７ｂ  コネクタ
３８  内視鏡画像
３８ａ  動画像
３８ｂ  フレーム画像
３８ｂ１  フレーム画像
３８ｂ２  フレーム画像
３８ｂ３  フレーム画像
３８ｂ４  フレーム画像
３８ｂ５  フレーム画像
３８ｂ６  フレーム画像
３８ｂ７  フレーム画像
３８ｂ８  フレーム画像
３９  静止画像
４０  画像取得部
４１  注目領域検出部
４２  強調領域設定部
４３  更新間隔設定部
４４  表示制御部
４６  記憶部
４７  内視鏡画像記憶部
４８  注目領域記憶部
４９  強調領域記憶部
１２０  制御部
１２２  メモリ
１２４  ストレージ装置
１２６  ネットワークコントローラ
１２８  電源装置
１３０  ディスプレイコントローラ
１３２  入出力インターフェース
１３４  入力コントローラ
１３６  バス
１４０  ネットワーク
１５０  注目領域
１５０ａ  注目領域
１５０ｂ  注目領域
１５２  強調領域
１５２ａ  強調領域
１５２ｂ  強調領域
１５４  重心
１５４ａ  重心
１５４ｂ  重心
２１４  医用画像処理装置
２２０  鑑別部
２４６  記憶部
２５０  鑑別結果記憶部
３１４  医用画像処理装置
３２０  内視鏡情報取得部
３４３  更新間隔設定部
３４６  記憶部
３５０  内視鏡情報記憶部
１５０１  注目領域
１５０２  注目領域
１５０３  注目領域
１５０７  注目領域
１５２１  強調領域
１５２２  強調領域
１５２３  強調領域
１５２７  強調領域
１５４１  重心
１５４２  重心
１５４３  重心
１５４７  重心
Ｓ１０からＳ２４  医用画像処理方法の各工程
【図１】
2020059526.tif 000003
【図２】
2020059526.tif 000004
【図３】
2020059526.tif 000005
【図４】
2020059526.tif 000006
【図５】
2020059526.tif 000007
【図６】
2020059526.tif 000008
【図７】
2020059526.tif 000009
【図８】
2020059526.tif 000010
【図９】
2020059526.tif 000011
【図１０】
2020059526.tif 000012
【図１１】
2020059526.tif 000013
【図１２】
2020059526.tif 000014
【図１３】
2020059526.tif 000015
【図１４】
2020059526.tif 000016
【手続補正書】
【提出日】令和3年5月7日(2021.5.7)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
【図１】図１は実施形態に係る医用画像処理装置を含む内視鏡システムの全体構成図である。
【図２】図２は医用画像処理装置のハードウェア構成を示すブロック図である。
【図３】図３は第一実施形態に係る医用画像処理装置の機能ブロック図である。
【図４】図４は内視鏡画像及び強調領域の更新間隔の説明図である。
【図５】図５は図４のタイミングｔ１におけるフレーム画像の模式図である。
【図６】図６は図４のタイミングｔ２におけるフレーム画像の模式図である。
【図７】図７は図４のタイミングｔ３におけるフレーム画像の模式図である。
【図８】図８は図４のタイミングｔ７におけるフレーム画像の模式図である。
【図９】図９は第一実施形態に係る医用画像処理方法のフローチャートである。
【図１０】図１０は強調領域設定の第一変形例の説明図である。
【図１１】図１１は強調領域設定の第二変形例の説明図である。
【図１２】図１２は強調領域設定の第三変形例の説明図である。
【図１３】図１３は第二実施形態に係る医用画像処理装置の機能ブロック図である。
【図１４】図１４は第三実施形態に係る医用画像処理装置の機能ブロック図である。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００５０
【補正方法】変更
【補正の内容】
【００５０】
白色光は、白色の波長帯域の光又は複数の波長帯域の光のいずれでもよい。特定の波長帯域は、白色の波長帯域よりも狭い帯域である。特定の波長帯域の光は、一種類の波長帯域の光を適用してもよいし、複数の波長帯域の光を適用してもよい。特定の波長帯域の光は、特殊光と呼ばれる場合がある。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００５４
【補正方法】変更
【補正の内容】
【００５４】
内視鏡画像３８の生成の際に、プロセッサ装置１２はホワイトバランス調整、及びシェーディング補正等のデジタル信号処理を適用した画質の補正を行う。プロセッサ装置１２はＤＩＣＯＭ規格で規定された付帯情報を内視鏡画像３８へ付加してもよい。なお、ＤＩＣＯＭは、Digital Imaging and Communications in Medicineの省略語である。実施形態に示すプロセッサ装置１２は、内視鏡を制御する内視鏡制御部を備えるプロセッサ装置の一例である。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００７４
【補正方法】変更
【補正の内容】
【００７４】
複数の制御部１２０を一つのプロセッサで構成する他の例として、複数の制御部１２０を含むシステム全体の機能を一つのＩＣチップで実現するプロセッサを使用する形態が挙げられる。複数の制御部１２０を含むシステム全体の機能を一つのＩＣチップで実現するプロセッサの代表例として、ＳｏＣ（System On a Chip）が挙げられる。なお、ＩＣは、Integrated Circuitの省略語である。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０１０９
【補正方法】変更
【補正の内容】
【０１０９】
また、強調領域１５２の表示の更新間隔は、フレーム画像３８ｂの更新レートに応じて設定してもよい。上記のように、強調領域１５２の表示の更新レートをフレーム画像３８ｂの更新レートの六分の一といった設定も可能である。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１３６
【補正方法】変更
【補正の内容】
【０１３６】
例えば、重心１５４の座標値は、重心１５４１の座標値から重心１５４７までの座標値の平均値を適用し得る。重心１５４の座標値は、重心１５４１の座標値から重心１５４７の座標値までの全ての座標値を用いる必要はなく、重心１５４１の座標値から重心１５４７の座標値までの任意の二つ以上の座標値を用いればよい。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０１３７
【補正方法】変更
【補正の内容】
【０１３７】
〈第二変形例〉
図１１は強調領域設定の第二変形例の説明図である。第二変形例に係る強調領域設定では、強調領域１５２の表示の更新タイミング以外のタイミングのフレーム画像３８ｂでは期間経過に応じて、強調領域１５２の表示が弱められる。図１１に示すフレーム画像３８ｂのうち、更新タイミング以外のフレーム画像３８ｂは、フレーム画像３８ｂ ２、フレーム画像３８ｂ ３、フレーム画像３８ｂ ４、フレーム画像３８ｂ ５、フレーム画像３８ｂ ６、及びフレーム画像３８ｂ ８である。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０１５１
【補正方法】変更
【補正の内容】
【０１５１】
〔４〕
更新タイミング以外のタイミングのフレーム画像３８ｂでは、期間経過に応じて強調領域１５２の表示が弱められる。これにより、フレーム画像３８ｂ間における強調領域１５２の変動が抑制され、内視鏡画像３８を表示する画面のちらつきを抑制し得る。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１５８
【補正方法】変更
【補正の内容】
【０１５８】
〔変形例〕
医用画像処理装置２１４は内視鏡画像３８の鑑別結果に応じて、強調領域１５２の表示の更新間隔を設定してもよい。例えば、鑑別結果が炎症の場合、炎症は内視鏡画像の広範囲に存在し、炎症を強調する強調領域１５２は腫瘍等の強調領域１５２と比較して広範囲となる。そこで、鑑別結果が炎症の場合、他の鑑別結果の場合よりも強調領域１５２の表示の更新間隔を長くしてもよい。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０１６５
【補正方法】変更
【補正の内容】
【０１６５】
〔４〕
鑑別結果が癌などの領域性がある病変の場合、他の鑑別結果の場合に適用される強調領域１５２の表示の更新間隔よりも短い更新間隔が適用される。これにより、鑑別結果が癌などの領域性がある病変の場合に、内視鏡画像３８の視認への影響を抑制し、かつ、内視鏡画像３８のちらつきを効果的に抑制し得る。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】０１８４
【補正方法】変更
【補正の内容】
【０１８４】
〔特徴量画像の生成例〕
医用画像として、白色帯域の光、又は白色帯域の光として複数の波長帯域の光を照射して得る通常光画像、並びに特定の波長帯域の光を照射して得る特殊光画像の少なくともいずれかに基づく演算を用いて、特徴量画像を生成し得る。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】０１９０
【補正方法】変更
【補正の内容】
【０１９０】
９  内視鏡システム
１０  内視鏡
１１  光源装置
１２  プロセッサ装置
１３  表示装置
１４  医用画像処理装置
１５  入力装置
１６  モニタ装置
２０  挿入部
２１  操作部
２２  ユニバーサルコード
２５  軟性部
２６  湾曲部
２７  先端部
２７ａ  先端面
２８  撮像素子
２９  湾曲操作ノブ
３０  送気送水ボタン
３１  吸引ボタン
３２  静止画像撮像指示部
３３  処置具導入口
３５  ライトガイド
３６  信号ケーブル
３７ａ  コネクタ
３７ｂ  コネクタ
３８  内視鏡画像
３８ａ  動画像
３８ｂ  フレーム画像
３８ｂ１  フレーム画像
３８ｂ２  フレーム画像
３８ｂ３  フレーム画像
３８ｂ４  フレーム画像
３８ｂ５  フレーム画像
３８ｂ６  フレーム画像
３８ｂ７  フレーム画像
３８ｂ８  フレーム画像
３９  静止画像
４０  画像取得部
４１  注目領域検出部
４２  強調領域設定部
４３  更新間隔設定部
４４  表示制御部
４６  記憶部
４７  内視鏡画像記憶部
４８  注目領域記憶部
４９  強調領域記憶部
１２０  制御部
１２２  メモリ
１２４  ストレージ装置
１２６  ネットワークコントローラ
１２８  電源装置
１３０  ディスプレイコントローラ
１３２  入出力インターフェース
１３４  入力コントローラ
１３６  バス
１４０  ネットワーク
１５０  注目領域
１５０ａ  注目領域
１５０ｂ  注目領域
１５２  強調領域
１５２ａ  強調領域
１５２ｂ  強調領域
１５４  重心
１５４ａ  重心
１５４ｂ  重心
２１４  医用画像処理装置
２２０  鑑別部
２４３  更新間隔設定部
２４６  記憶部
２５０  鑑別結果記憶部
３１４  医用画像処理装置
３２０  内視鏡情報取得部
３４３  更新間隔設定部
３４６  記憶部
３５０  内視鏡情報記憶部
１５０１  注目領域
１５０２  注目領域
１５０３  注目領域
１５０７  注目領域
１５２１  強調領域
１５２２  強調領域
１５２３  強調領域
１５２７  強調領域
１５４１  重心
１５４２  重心
１５４３  重心
１５４７  重心
Ｓ１０からＳ２４  医用画像処理方法の各工程
【国際調査報告】
2020059526.tif 000017
2020059526.tif 000018