(57)【要約】【課題】手術中の医師が観察画像内で病変位置と領域を容易に識別することを可能にする医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラムを提供する。【解決手段】撮像装置が撮像した被観察体の観察画像のデータおよび被観察体の病理診断情報を用いて観察画像における被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出する算出部と、相対情報に基づいて観察画像のデータに病理診断情報を加えた表示用観察画像のデータを生成する表示用観察画像生成部と、を備える。【選択図】図２
2020151404.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出する算出部と、
前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する表示用観察画像生成部と、
を備える医療用画像処理装置。
【請求項２】
前記算出部は、
前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域を示す病変領域画像のデータおよび倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、
前記表示用観察画像生成部は、
前記相対情報に基づいて前記病変領域画像を変換し、変換後の前記病変領域画像を前記観察画像に重畳することによって前記表示用観察画像のデータを生成する請求項１に記載の医療用画像処理装置。
【請求項３】
前記算出部は、
前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域に関する病変領域情報および倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、
前記表示用観察画像生成部は、
前記相対情報に基づいて前記観察画像における病変領域を特定し、特定した病変領域に対して他の領域と異なる画像処理を施すことにより、前記表示用観察画像のデータを生成する請求項１に記載の医療用画像処理装置。
【請求項４】
前記表示用観察画像生成部は、
前記表示用観察画像のデータを生成する際、病変領域の境界を示す病変領域画像のデータを生成し、前記観察画像に重畳する請求項３に記載の医療用画像処理装置。
【請求項５】
前記病理診断情報は、前記被観察体から標本を採取する標本採取装置が採取した標本を用いた病理診断結果を含み、
前記病理診断位置は、前記標本の採取位置であり、
前記表示用観察画像生成部は、
前記表示用観察画像のデータを生成する際、前記観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳する請求項１〜４のいずれか一項に記載の医療用画像処理装置。
【請求項６】
請求項１〜５のいずれか一項に記載の医療用画像処理装置と、
前記観察画像のデータを生成する撮像装置と、
を備える医療用観察装置。
【請求項７】
請求項６に記載の医療用観察装置と、
前記撮像装置の３次元的な位置を測定する位置測定装置と、
を備える医療用観察システム。
【請求項８】
前記被観察体を撮像して病理診断用の画像データを生成する撮像部と、前記病理診断用の画像データを解析して病理診断を行う解析部と、を有する病理診断装置
をさらに備える請求項７に記載の医療用観察システム。
【請求項９】
算出部が、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、
表示用画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する
医療用画像処理装置の作動方法。
【請求項１０】
撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、
表示用画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成すること、
をコンピュータに実行させる医療用画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラムに関する。
【背景技術】
【０００２】
外科手術のうち、病変部の切離、摘出を目的とするものは、再発のリスクを最小化するため、マージンを含む病変部をできうる限り切離、摘出することが求められる。一方、合併症リスクの最小化および、機能温存のためには切離、摘出は必要最小限に止める必要があり、正確な切離ラインの同定が求められる。
【０００３】
例えば、脳神経外科における顕微鏡手術では、５−ＡＬＡやフルオレセインなどの薬剤を用いた蛍光観察によって腫瘍を識別し、切離ラインの見極めを行う技術が知られている（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１６−２０２７２６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した技術では、観察結果を別モニタで表示するため、手術中の医師が観察画像内で病変位置と領域を容易に識別することができるとは言い難かった。
【０００６】
本開示は、上記に鑑みてなされたものであって、手術中の医師が観察画像内で病変位置と領域を容易に識別することを可能にする医療用画像処理装置、医療用観察装置、医療用観察システム、医療用画像処理装置の作動方法および医療用画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本開示に係る医療用画像処理装置は、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出する算出部と、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する表示用観察画像生成部と、を備える。
【０００８】
本開示に係る医療用画像処理装置は、上記開示において、前記算出部は、前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域を示す病変領域画像のデータおよび倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、前記表示用観察画像生成部は、前記相対情報に基づいて前記病変領域画像を変換し、変換後の前記病変領域画像を前記観察画像に重畳することによって前記表示用観察画像のデータを生成する。
【０００９】
本開示に係る医療用画像処理装置は、上記開示において、前記算出部は、前記観察画像のデータおよび倍率情報と、前記被観察体を病理診断する病理診断装置が生成した前記被観察体の病変領域に関する病変領域情報および倍率情報と、物体の３次元的な位置を測定する位置測定装置がそれぞれ測定した前記撮像装置および前記病理診断装置の位置情報とを用いることにより、前記観察画像に対する前記病変領域の前記相対情報を算出し、前記表示用観察画像生成部は、前記相対情報に基づいて前記観察画像における病変領域を特定し、特定した病変領域に対して他の領域と異なる画像処理を施すことにより、前記表示用観察画像のデータを生成する。
【００１０】
本開示に係る医療用画像処理装置は、上記開示において、前記表示用観察画像生成部は、前記表示用観察画像のデータを生成する際、病変領域の境界を示す病変領域画像のデータを生成し、前記観察画像に重畳する。
【００１１】
本開示に係る医療用画像処理装置は、上記開示において、前記病理診断情報は、前記被観察体から標本を採取する標本採取装置が採取した標本を用いた病理診断結果を含み、前記病理診断位置は、前記標本の採取位置であり、前記表示用観察画像生成部は、前記表示用観察画像のデータを生成する際、前記観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳する。
【００１２】
本開示に係る医療用観察装置は、上記開示に記載の医療用画像処理装置と、前記観察画像のデータを生成する撮像装置と、を備える。
【００１３】
本開示に係る医療用観察システムは、上記開示に記載の医療用観察装置と、前記撮像装置の３次元的な位置を測定する位置測定装置と、を備える。
【００１４】
本開示に係る医療用観察システムは、上記開示において、前記被観察体を撮像して病理診断用の画像データを生成する撮像部と、前記病理診断用の画像データを解析して病理診断を行う解析部と、を有する病理診断装置をさらに備える。
【００１５】
本開示に係る医療用画像処理装置の作動方法は、算出部が、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、表示用画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成する。
【００１６】
本開示に係る医療用画像処理プログラムは、撮像装置が撮像した被観察体の観察画像のデータおよび前記被観察体の病理診断情報を用いて前記観察画像における前記被観察体の病理診断位置の相対的な位置関係を含む相対情報を算出し、表示用画像生成部が、前記相対情報に基づいて前記観察画像のデータに前記病理診断情報を加えた表示用観察画像のデータを生成すること、をコンピュータに実行させる。
【発明の効果】
【００１７】
本開示によれば、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
【図面の簡単な説明】
【００１８】
【図１】図１は、本開示の実施の形態１に係る医療用観察システムを模式的に示す図である。
【図２】図２は、本開示の実施の形態１に係る医療用観察システムの機能構成を示すブロック図である。
【図３】図３は、本開示の実施の形態１に係る医療用画像処理装置が行う処理の概要を示すフローチャートである。
【図４】図４は、変換前後の病変領域画像を示す図である。
【図５】図５は、本開示の実施の形態１において、表示装置が表示する表示用観察画像の表示例を示す図である。
【図６】図６は、本開示の実施の形態２に係る医療用画像処理装置が行う処理の概要を示すフローチャートである。
【図７】図７は、本開示の実施の形態３に係る医療用観察システムの機能構成を示すブロック図である。
【図８】図８は、本開示の実施の形態３に係る医療用画像処理装置が行う処理の概要を示すフローチャートである。
【図９】図９は、本開示の実施の形態３において、表示装置が表示する表示用観察画像の表示例を示す図である。
【図１０】図１０は、本開示の他の実施の形態に係る医療用観察システムの機能構成を示すブロック図である。
【発明を実施するための形態】
【００１９】
以下、添付図面を参照して、本開示を実施するための形態（以下、「実施の形態」という）を説明する。
【００２０】
（実施の形態１）
図１は、本開示の実施の形態１に係る医療用観察システムを模式的に示す図である。同図に示す医療用観察システム１は、医療用観察装置２と、病理診断装置３と、位置測定装置４と、表示装置５とを備える。医療用観察装置２は手術用顕微鏡であり、撮像装置としての顕微鏡装置６と、医療用画像装置としての制御装置７とを備える。
【００２１】
顕微鏡装置６の外観構成を説明する。顕微鏡装置６は、被観察体の微細構造を拡大して撮像する顕微鏡部６ａと、顕微鏡部６ａを支持する支持部６ｂと、支持部６ｂの基端を保持するとともに制御装置７を内蔵するベース部６ｃとを有する。
【００２２】
顕微鏡部６ａは、円柱状をなす筒状部を有する。本体部の下端部の開口面にはカバーガラスが設けられている（図示せず）。筒状部は、ユーザによって把持可能であり、ユーザが顕微鏡部６ａの撮像視野を変更する際に把持しながら移動させることが可能な大きさを有している。なお、筒状部の形状は円筒状に限られるわけではなく、多角筒状をなしていてもよい。
【００２３】
支持部６ｂは、複数のアームを有し、隣接するアーム同士が関節部を介して回動可能に連結されている。支持部６ｂの内部に形成された中空部には、顕微鏡部６ａと制御装置７との間で各種信号を伝送する伝送ケーブルおよび制御装置７が発生する照明光を顕微鏡部６ａに伝送するライトガイドが通っている。
【００２４】
病理診断装置３は、病理診断用の画像を取得する装置である。病理診断装置３は、被観察体を撮像するカメラ部３ａと、カメラ部３ａが撮像した画像のデータを取得して病理診断を行う機器が内蔵されたベース部３ｂとを有する。
【００２５】
位置測定装置４は、顕微鏡部６ａおよびカメラ部３ａの３次元的な位置を測定する装置である。位置測定装置４は、顕微鏡部６ａおよびカメラ部３ａから照射される赤外線を撮像する赤外線カメラ部４ａと、赤外線カメラ部４ａが撮影した赤外線をもとに顕微鏡部６ａおよびカメラ部３ａの３次元位置をそれぞれ測定する機器が内蔵されたベース部４ｂと、赤外線カメラ部４ａとベース部４ｂとを連結し、伝送ケーブルが設けられた連結部４ｃと、を有する。
【００２６】
図２は、医療用観察システム１の機能構成を示すブロック図である。図２を参照して、医療用観察装置２、病理診断装置３、位置測定装置４、および表示装置５の機能構成を説明する。
【００２７】
＜顕微鏡装置６＞
顕微鏡装置６は、撮像部６１と、入力部６２と、ブレーキ部６３と、発光部６４と、制御部６５とを有する。
【００２８】
撮像部６１は、フォーカスおよびズーム機能を有する光学系と、光学系によって結像された被観察体の像を受光して光電変換を行うことによって画像信号を生成する撮像素子と、を有する。光学系および撮像素子は、顕微鏡部６ａの筒状部の内部に設けられている。撮像素子は、ＣＣＤ（Charge  Coupled  Device）またはＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）などのイメージセンサを用いて構成される。撮像部６１が生成する観察画像のデータを含む信号は、伝送ケーブルを介して制御装置７に伝送される。なお、撮像部６１が、各々の視野に所定の視差を設けた２つの撮像素子を有し、３次元観察画像のデータを生成するようにしてもよい。
【００２９】
入力部６２は、撮像部６１の操作信号やブレーキ部６３の操作信号等の入力を受け付ける。入力部６２は、顕微鏡部６ａの筒状部の側面のうち、ユーザが顕微鏡部６ａを把持した状態で操作可能な位置に設けられている。なお、ユーザが足で操作可能なフットスイッチをさらに用いて入力部６２を構成してもよい。
【００３０】
ブレーキ部６３は、支持部６ｂが有する複数の関節部にそれぞれ設けられる複数の電磁ブレーキを有する。電磁ブレーキは、入力部６２が解除指示の入力を受け付けた場合に解除される。電磁ブレーキが解除されると、その電磁ブレーキによって動きを規制していた２つのアームにおいて、一方の他方に対する回動が可能となる。なお、アームの動きをアシストするアクチュエータを関節部にさらに設けてもよい。
【００３１】
発光部６４は、顕微鏡部６ａの側面の所定位置に固定され、赤外線をそれぞれ発光する３つのＬＥＤ（Light  Emitting  Diode）を用いて構成される。発光部６４が発光する赤外線は、位置測定装置４が顕微鏡装置６の３次元位置を測定する際に使用される。図２に示す破線の矢印は、発光部６４が発光する赤外線を模式的に示している。
【００３２】
制御部６５は、制御装置７の制御部７６と連携して顕微鏡装置６の動作を制御する。制御部６５は、ＣＰＵ（Central  Processing  Unit）、ＦＰＧＡ（Field  Programmable  Gate  Array）、およびＡＳＩＣ（Application  Specific  Integrated  Circuit）等の少なくともいずれか一つのプロセッサを用いて構成される。
【００３３】
＜制御装置７＞
制御装置７は、取得部７１と、入力部７２と、光源部７３と、算出部７４と、表示用観察画像生成部７５と、制御部７６と、記憶部７７と、を備える。制御装置７は、実施の形態１に係る医療用画像処理装置の機能を有する。
【００３４】
取得部７１は、顕微鏡装置６が撮像し、伝送ケーブルによって伝送される画像データを取得する。画像データには、撮像時のフォーカス位置、ズーム、露光時間、撮像時間等の撮像に関する情報も含まれる。
【００３５】
入力部７２は、画像の明るさレベルを変化させる指示信号を含む各種情報の入力を受け付ける。入力部７２は、キーボード、マウス、タッチパネル、フットスイッチ等のユーザインタフェースを用いて構成される。なお、入力部７２に顕微鏡装置６の入力部６２の少なくとも一部の機能を兼備させてもよい。
【００３６】
光源部７３は、ライトガイドを介して顕微鏡装置６に供給する照明光を発生する。光源部７３は、キセノンランプやメタルハライドランプ等の放電ランプ、ＬＥＤ（Light  Emitting  Diode）やＬＤ（Laser  Diode）等の固体発光素子、レーザ光源またはハロゲンランプ等の発光部材等を用いて構成される。
【００３７】
算出部７４は、顕微鏡装置６が生成した被観察体の観察画像のデータおよび撮像時の倍率情報、病理診断装置３が生成した前記被観察体の病変領域の境界を示す病変領域画像のデータおよび撮像時の倍率情報、ならびに位置測定装置４が測定した顕微鏡装置６の位置情報および病理診断装置３の位置情報を用いて、観察画像に対する病変領域の相対位置および相対倍率を含む相対情報を算出する。
【００３８】
表示用観察画像生成部７５は、算出部７４が算出した相対情報に基づいて、病変領域画像を観察画像内において適合する位置、形状およびサイズとなるように変換し、変換後の病変領域画像を観察画像に重畳することによって表示用観察画像のデータを生成する。
【００３９】
制御部７６は、制御装置７の動作を制御するとともに、顕微鏡装置６の制御部６５と連携して医療用観察装置２の動作を統括して制御する。制御部７６は、算出部７４、表示用観察画像生成部７５とともに、ＣＰＵ、ＦＰＧＡ、およびＡＳＩＣ等の一つまたは複数のプロセッサを用いて構成される。
【００４０】
記憶部７７は、制御装置７が実行する医療用画像処理プログラムを含む各種プログラムを記憶するとともに、制御装置７が演算処理中のデータを一時的に記憶する。記憶部７７は、ＲＯＭ（Read  Only  Memory）やＲＡＭ（Random  Access  Memory）等を用いて構成される。なお、医療用画像処理プログラムは、ハードディスク、フラッシュメモリ、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、フレキシブルディスク等のコンピュータ読み取り可能な記録媒体に記録して広く流通させることも可能である。
【００４１】
＜病理診断装置３＞
病理診断装置３は、撮像部３１と、入力部３２と、発光部３３と、解析部３４と、病変領域情報生成部３５と、制御部３６と、記憶部３７とを備える。
【００４２】
撮像部３１は、フォーカスおよびズーム機能を有する光学系と、ＣＣＤまたはＣＭＯＳ等のイメージセンサを用いて構成される撮像素子と、を有する。撮像部３１は、カメラ部３ａの内部に設けられている。
【００４３】
入力部３２は、撮像部３１の操作信号等の入力を受け付ける。
【００４４】
発光部３３は、赤外線をそれぞれ発光する３つのＬＥＤを用いて構成され、カメラ部３ａの所定位置に固定される。発光部３３が発光する赤外線は、位置測定装置４が病理診断装置３の３次元位置を測定する際に使用される。
【００４５】
解析部３４は、撮像部３１が生成した病理観察画像のデータをもとに病理診断を行うことによって、病変部を特定する。
【００４６】
病変領域情報生成部３５は、解析部３４の解析結果に基づいて病変部の領域に関する病変領域情報として、病変領域の形状および範囲を示す病変領域画像のデータを生成する。
【００４７】
制御部３６は、病理診断装置３の動作を制御する。制御部３６は、解析部３４、病変領域情報生成部３５とともに、ＣＰＵ、ＦＰＧＡ、およびＡＳＩＣ等の一つまたは複数のプロセッサを用いて構成される。
【００４８】
記憶部３７は、病理診断装置３が実行する各種プログラムを記憶するとともに、病理診断装置３が演算処理中のデータを一時的に記憶する。記憶部３７は、ＲＯＭやＲＡＭ等を用いて構成される。
【００４９】
＜位置測定装置４＞
位置測定装置４は、撮像部４１と、測定部４２と、制御部４３と、記憶部４４とを備える。
【００５０】
撮像部４１は、ＣＣＤまたはＣＭＯＳ等のイメージセンサを用いて構成され、顕微鏡装置６の発光部６４によって照射される赤外線を検知するとともに、病理診断装置３の発光部３３によって照射される赤外線を撮像する。撮像部４１は、赤外線カメラ部４ａの内部に設けられている。
【００５１】
測定部４２は、撮像部４１が取得した赤外線を用いて、顕微鏡装置６の顕微鏡部６ａの３次元的な位置を測定するとともに、病理診断装置３のカメラ部３ａの３次元的な位置を測定する。
【００５２】
制御部４３は、位置測定装置４の動作を制御する。制御部４３は、測定部４２とともに、ＣＰＵ、ＦＰＧＡ、およびＡＳＩＣ等の一つまたは複数のプロセッサを用いて構成される。
【００５３】
記憶部４４は、位置測定装置４が実行する各種プログラムを記憶するとともに、位置測定装置４が演算処理中のデータを一時的に記憶する。記憶部４４は、ＲＯＭやＲＡＭ等を用いて構成される。
【００５４】
＜表示装置５＞
表示装置５は、制御装置７が生成した表示用の画像信号を制御装置７から受信し、該画像信号に対応する画像を表示する。表示装置５は、液晶または有機ＥＬ（Electro  Luminescence）からなる表示パネルを有する。
【００５５】
図３は、制御装置７が行う処理の概要を示すフローチャートである。
まず、まず、算出部７４は、顕微鏡装置６から取得した観察画像のデータおよび倍率情報、病理診断装置３から取得した病変領域画像のデータおよび倍率情報、ならびに位置測定装置４からそれぞれ取得した顕微鏡装置６の位置情報および病理診断装置３の位置情報を用いて、観察画像に対する病変領域画像の相対情報を算出する（ステップＳ１）。この算出部７４の処理により、もとの病変領域画像を観察画像で見たときの病変領域画像に変換する演算が求まる。
【００５６】
続いて、表示用観察画像生成部７５は、算出部７４が算出した相対情報を用いて病変領域画像を変換する（ステップＳ２）。この変換により、図４に示すように、病変領域画像は、病変領域情報生成部３５が生成した病変領域Ｒ１が変形して、観察画像の視野で見たときの形状に相当する病変領域Ｒ２となる。
【００５７】
この後、表示用観察画像生成部７５は、変換した病変領域画像のデータを観察画像のデータに対して位置合わせして重畳することにより、表示用観察画像のデータを生成する（ステップＳ３）。
【００５８】
続いて、制御部７６は、表示用観察画像のデータを表示装置５に出力して表示装置５に表示させる制御を行う（ステップＳ４）。図５は、表示装置５が表示する表示用観察画像の表示例を示す図である。同図に示す表示用観察画像１０１には、病変領域が重畳して表示されている。
【００５９】
以上説明した本開示の実施の形態１によれば、観察画像のデータおよび倍率情報と、病理診断装置が生成した病変領域画像のデータおよび倍率情報と、位置測定装置がそれぞれ測定した顕微鏡装置および病理診断装置の位置情報とを用いることによって算出した相対情報に基づいて病変領域画像を変換し、変換後の病変領域画像を観察画像に重畳して表示用観察画像のデータを生成するため、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
【００６０】
また、本実施の形態１によれば、病理診断結果を、手術用ビデオ顕微鏡の観察画像に、位置合わせをして一つの画像として表示することにより、より正確な切除範囲を決定することが可能となり、術成績（摘出率の向上と合併症率低減）の向上が見込める。さらに、単独の観察画像によってのみ手術を完遂することが可能となり、術効率（術時間の短縮）の改善が見込める。
【００６１】
また、本実施の形態１によれば、術中に標本を採取することなく、in  situで細胞レベルの病理診断をリアルタイムで行うため、低侵襲で術時間を短縮することができる。
【００６２】
（実施の形態２）
本開示の実施の形態２に係る医療用観察システムは、実施の形態１で説明した医療用観察システム１と同様の構成を有する。以下、本実施の形態２に係る医療用観察システムの構成要素には、対応する医療用観察システム１の構成要素と同じ符号を付して説明する。
【００６３】
本実施の形態２では、病理診断装置３の病変領域情報生成部３５が病変領域の位置を示す座標値等の数値データを生成して病変領域情報として制御装置７に出力し、制御装置７は数値データをもとに観察画像において特定した病変領域に対して他の領域と異なる画像処理を施すことにより、表示用観察画像のデータを生成する。
【００６４】
図６は、本開示の実施の形態２に係る制御装置７が行う処理の概要を示すフローチャートである。まず、算出部７４は、顕微鏡装置６から取得した観察画像のデータおよび倍率情報、病理診断装置３から取得した病変領域情報および倍率情報、ならびに位置測定装置４からそれぞれ取得した顕微鏡装置６の位置情報および病理診断装置３の位置情報を用いて、観察画像に対する病変領域画像の相対情報を算出する（ステップＳ１１）。
【００６５】
続いて、表示用観察画像生成部７５は、算出部７４が算出した相対情報に基づいて病変領域情報を変換し、観察画像における病変領域を特定する（ステップＳ１２）。
【００６６】
この後、表示用観察画像生成部７５は、特定した病変領域に対して他の領域と異なる画像処理を施すことによって表示用観察画像のデータを生成する（ステップＳ１３）。例えば、表示用観察画像生成部７５は、病変領域に相当する部分におけるコントラストや明るさ等の画質パラメータを変更することにより、病変領域を強調して表示する表示用観察画像のデータを生成する。これにより生成された表示用観察画像は、病変領域の視認性を向上させることができる。
【００６７】
続いて、制御部７６は、表示用観察画像のデータを表示装置５に出力して表示装置５に表示させる制御を行う（ステップＳ１４）。
【００６８】
なお、本実施の形態２において、表示用観察画像生成部７５は、病理診断装置３から取得した数値データを用いて病変領域画像のデータを生成し、観察画像に対してさらに病変領域画像を重畳して表示用観察画像のデータを生成してもよい。
【００６９】
以上説明した本開示の実施の形態２によれば、観察画像のデータおよび倍率情報と、病理診断装置が生成した病変領域情報および倍率情報と、位置測定装置がそれぞれ測定した顕微鏡装置および病理診断装置の位置情報とを用いることによって算出した観察画像に対する病変領域の相対情報に基づいて観察画像における病変領域を特定し、特定した病変領域に対して他の領域と異なる画像処理を施すことにより、表示用観察画像のデータを生成するため、実施の形態１と同様、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
【００７０】
また、本実施の形態２によれば、病変領域の画像処理を他の領域と帰るだけであるため、装置全体の構成を単純化することができる。
【００７１】
（実施の形態３）
図７は、本開示の実施の形態３に係る医療用観察システムの機能構成を示すブロック図である。同図に示す医療用観察システム８は、医療用観察装置２と、位置測定装置４と、表示装置５と、標本採取装置９とを備える。
【００７２】
標本採取装置９は、病理診断を行うために被観察体から標本を採取する装置である。標本採取装置９は、標本を採取する処置具を有する。処置具の所定位置には、位置検出用の赤外線を発光する発光部９１が設けられている。発光部９１は、上述した発光部６４等と同様に、３つのＬＥＤを有する、
【００７３】
標本採取装置９が採取した標本は、病理室に搬送された後、担当の医師によって病理診断される。病理診断結果は手術室に送られ、制御装置７の入力部７２が入力を受け付ける。病理診断結果としては、例えば標本中の病変領域をグレードにより分類した結果を挙げることができる。
【００７４】
図８は、本開示の実施の形態３に係る制御装置７が行う処理の概要を示すフローチャートである。まず、算出部７４は、顕微鏡装置６から取得した観察画像のデータおよび倍率情報と、位置測定装置４からそれぞれ取得した顕微鏡装置６の位置情報および標本採取装置９の位置情報とを用いて、観察画像における病理診断位置である被観察体からの標本の採取位置を算出する（ステップＳ２１）。
【００７５】
続いて、表示用観察画像生成部７５は、算出部７４が算出した観察画像における標本の採取位置を示す情報および入力部７２が受け付けた病理診断結果を観察画像に重畳することによって表示用観察画像のデータを生成する（ステップＳ２２）。
【００７６】
続いて、制御部７６は、表示用観察画像のデータを表示装置５に出力して表示装置５に表示させる制御を行う（ステップＳ２３）。図９は、表示装置５が表示する表示用観察画像の表示例を示す図である。同図に示す表示用観察画像１０２には、標本の採取位置が「＋」で表示されるとともに、診断結果としてグレード数「３」が表示されている。
【００７７】
以上説明した本開示の実施の形態３によれば、被観察体から標本を採取する標本採取装置が採取した標本を用いた病理診断結果を含む病理診断情報を用いて、観察画像のデータに前記標本の採取位置および前記病理診断結果を重畳することによって表示用観察画像のデータを生成するため、実施の形態１と同様、手術中の医師が観察画像内で病変位置と領域を容易に識別することが可能となる。
【００７８】
また、本実施の形態３によれば、従来の病理診断環境においても、顕微鏡視野内で病理診断結果を参照することが可能となり、正確な切離範囲の決定が可能となる。
【００７９】
（その他の実施の形態）
ここまで、本開示を実施するための形態を説明してきたが、本開示は、上述した実施の形態１〜３によってのみ限定されるべきものではない。例えば、図１０のブロック図に示す医療用観察システム１０のように、実施の形態１または２に実施の形態３を追加し、顕微鏡装置６が生成した観察画像に対して、病理診断装置３が生成した病変領域情報と、病理標本の診断結果とを重畳することにより、表示用観察画像のデータを生成してもよい。
【００８０】
また、病理診断装置３の解析部３４および病変領域情報生成部３５の少なくとも１つの機能を制御装置７が具備してもよい。
【００８１】
また、位置測定装置が上述した光学式の３次元計測方法を適用する代わりに、磁気式の３次元計測方法を適用してもよい。これらは、外科手術向けのナビゲーションシステムを援用してもよい。
【００８２】
また、顕微鏡装置６の支持部６ｂのアーム間の関節部にエンコーダを設置し、隣接するアーム間の角度情報をもとに顕微鏡部６ａの３次元位置を測定してもよい。なお、病理診断装置３のカメラ部３ａを複数のアームを有する支持部によって支持する構成とすれば、顕微鏡装置６と同様にアーム間の関節部にエンコーダを設置することにより、カメラ部３ａの３次元位置を測定することができる。このような構成によれば、位置測定装置を別に設ける必要がなくなり、省スペース化を実現することができる。
【００８３】
また、顕微鏡装置６が３次元画像データを生成する機能を有している場合には、３次元画像データを用いて病理診断装置３または標本採取装置９の位置を測定するようにしてもよい。この場合にも、位置測定装置を別に設ける必要がなくなり、省スペース化を実現することができる。
【００８４】
また、医療用観察装置として、被観察体に挿入されて被観察体の内部を撮像する医療用内視鏡を適用してもよい。
【００８５】
また、特許文献１に記載された光線力学診断装置のうち、蛍光撮像装置を病理診断装置として適用してもよい。
【符号の説明】
【００８６】
１、８、１０  医療用観察システム
２  医療用観察装置
３  病理診断装置
３ａ  カメラ部
３ｂ、４ｂ、６ｃ  ベース部
４  位置測定装置
４ａ  赤外線カメラ部
４ｃ  連結部
５  表示装置
６  顕微鏡装置
６ａ  顕微鏡部
６ｂ  支持部
７  制御装置
９  標本採取装置
３１、４１、６１  撮像部
３２、６２、７２  入力部
３３、６４、９１  発光部
３４  解析部
３５  病変領域情報生成部
３６、４３、６５、７６  制御部
３７、４４、７７  記憶部
４２  測定部
６３  ブレーキ部
７１  取得部
７３  光源部
７４  算出部
７５  表示用観察画像生成部
１０１、１０２  表示用観察画像
Ｒ１、Ｒ２  病変領域
【図１】
2020151404.tif 000003
【図２】
2020151404.tif 000004
【図３】
2020151404.tif 000005
【図４】
2020151404.tif 000006
【図５】
2020151404.tif 000007
【図６】
2020151404.tif 000008
【図７】
2020151404.tif 000009
【図８】
2020151404.tif 000010
【図９】
2020151404.tif 000011
【図１０】
2020151404.tif 000012