(57)【要約】      （修正有）【課題】医療画像中の患部を表示画面に見易く表示する医療画像処理装置を提供する。【解決手段】医療画像処理装置２０の取得部２１１は、ダーモスコープを介して撮影されたダーモスコピー画像を取得する。特定部２１３は、ダーモスコピー画像から皮膚患部を特定する。調整部２１５は、表示部２３に表示される座標系の軸に、特定部２１３で特定した皮膚患部が接触するように、その皮膚患部を合わせる。表示制御部２１７は、調整部２１５により座標系の軸に合わせた皮膚患部を、座標系とともに表示部２３に表示する。【選択図】図４
2019069178.tif 000002
【特許請求の範囲】
【請求項１】
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段と、
表示手段に表示される実寸の目盛り付きの座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を合わせる調整手段と、
前記調整手段により前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表示手段に表示する表示制御手段と、
を備えたことを特徴とする医療画像処理装置。
【請求項２】
前記調整手段は、前記表示手段に表示される実寸の目盛り付きの座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を移動させる移動手段を含む、
ことを特徴とする請求項１に記載の医療画像処理装置。
【請求項３】
前記特定手段は、前記ダーモスコピー画像を２値化処理又はエッジ強調処理することにより前記皮膚患部の輪郭線を抽出して、該皮膚患部を特定する、
ことを特徴とする請求項１または２に記載の医療画像処理装置。
【請求項４】
前記特定手段は、前記ダーモスコピー画像をＨＤＲ（High Dynamic Range）変換処理する手段を含む、
ことを特徴とする請求項１乃至３の何れか一項に記載の医療画像処理装置。
【請求項５】
前記特定手段が特定した皮膚患部の輪郭線上の２点間を結ぶ第１の線分と、該第１の線分の中点に垂直に交わる第２の線分と、を抽出する線分抽出手段を備え、
前記移動手段は、
前記第１の線分が前記座標系のＸ軸に、前記第２の線分が前記座標系のＹ軸に、それぞれ平行になるように、前記皮膚患部を回転させる回転手段と、
前記第１の線分の２つの端点のうち、前記Ｙ軸に近い方の端点が、該Ｙ軸に接触するように、前記皮膚患部を直線移動させる第１直線移動手段と、
前記第２の線分の２つの端点のうち、前記Ｘ軸に近い方の端点が、該Ｘ軸に接触するように、前記皮膚患部を直線移動させる第２直線移動手段と、
を含む、
ことを特徴とする請求項２に記載の医療画像処理装置。
【請求項６】
前記線分抽出手段は、前記輪郭線上の複数の点のうち、２点間を結ぶ線分が最も長い線分を前記第１の線分として抽出する、
ことを特徴とする請求項５に記載の医療画像処理装置。
【請求項７】
前記移動手段は、前記皮膚患部を移動後、該皮膚患部の中心が前記座標系の原点に重なるように、該皮膚患部をさらに移動させる、
ことを特徴とする請求項２に記載の医療画像処理装置。
【請求項８】
前記表示制御手段は、撮影時刻が異なる複数のダーモスコピー画像がある場合、該複数のダーモスコピー画像からそれぞれ特定された皮膚患部が前記移動手段により移動された後、該移動後の皮膚患部を前記表示手段に時系列で複数重ねて表示する、
ことを特徴とする請求項２に記載の医療画像処理装置。
【請求項９】
前記表示制御手段は、前記表示手段に前記皮膚患部の実寸の数値を表示する、
ことを特徴とする請求項１乃至８の何れか一項に記載の医療画像処理装置。
【請求項１０】
前記特定手段が前記皮膚患部を特定できない場合、該皮膚患部に代わる疑似患部を、ユーザ操作に基づいて受け付ける受付手段を備え、
前記調整手段は、前記表示手段に表示される実寸の目盛り付きの座標系の軸に、前記受付手段で受け付けた疑似患部が接触するように、該疑似患部を合わせ、
前記表示制御手段は、前記調整手段により前記座標系の軸に合わせた疑似患部を、前記座標系とともに前記表示手段に表示する、
ことを特徴とする請求項１乃至９の何れか一項に記載の医療画像処理装置。
【請求項１１】
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定ステップと、
表示手段に表示される実寸の目盛り付きの座標系の軸に、前記特定ステップにおいて特定した皮膚患部が接触するように、該皮膚患部を合わせる調整ステップと、
前記調整ステップにおいて前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表示手段に表示する表示制御ステップと、
を備えたことを特徴とする医療画像処理方法。
【請求項１２】
コンピュータを、
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段、
表示手段に表示される実寸の目盛り付きの座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を合わせる調整手段、
前記調整手段により前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表示手段に表示する表示制御手段、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、医療画像処理装置、医療画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
医療現場においては、医師が患者の患部を撮影して、画面上に患部の大きさが分かるように表示するものがある（例えば、特許文献１参照）。
特許文献１記載の発明は、より簡易で的確な超音波画像診断装置を提供するもので、撮像されたマーカの位置および向きに基づいた位置、形状および大きさの表示用超音波画像データを生成する表示用画像生成部と、生体の外観を撮像して取得した表示用生体画像に、表示用超音波画像データによる表示用超音波画像を重畳して表示するものである。
【０００３】
皮膚患部をダーモスコープなどの拡大鏡付きカメラで撮影する場合、医師は、撮影後に皮膚患部が写った画像をカメラやＰＣなどの表示画面で確認する。この場合、画像中の皮膚患部は、医師にとって見易く表示するのが好ましい。
特許文献１記載の発明では、生体の概観との対比により患部である超音波画像の大きさを把握することができるが、実寸までは分からない。
ここで、特許文献２には、撮影した画像中の被写体を特定し、特定した被写体の周りに実寸の目盛りを固定して表示することが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−２２１１７５号公報
【特許文献２】特開２００９−２７４０２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記特許文献２では、単に実寸の目盛りを固定表示するだけで、医師にとって見易さの観点で十分でなかった。特に、医療現場に用いられる医療画像では、医師が観察して正確に診断するという観点から、一般の画像よりも見易さが要求される。
【０００６】
そこで、本発明は、上述のような事情に鑑みてなされたものであり、医療画像中の患部を表示画面に見易く表示する医療画像処理装置等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、本発明の第１の観点に係る医療画像処理装置は、
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手
段と、
表示手段に表示される実寸の目盛り付きの座標系の軸に、前記特定手段で特定した皮膚
患部が接触するように、該皮膚患部を合わせる調整手段と、
前記調整手段により前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表
示手段に表示する表示制御手段と、
を備えたことを特徴とする。
【発明の効果】
【０００８】
本発明によれば、医療画像中の患部を表示画面に見易く表示することができる。
【図面の簡単な説明】
【０００９】
【図１】実施形態に係る医療画像処理装置と撮像装置とを示す図である。
【図２】ダーモスコピー診断の様子を示す図である。
【図３】ダーモスコピー画像の例を示す図である。
【図４】実施形態に係る医療画像処理装置の構成を示すブロック図である。
【図５】ＨＤＲ変換後のダーモスコピー画像の例を示す図である。
【図６】表示制御処理のフローチャートの一例を示す図である。
【図７】皮膚患部を座標系の軸とともに表示した状態を示す図である。
【図８】皮膚患部の輪郭線上に複数の点をプロットした状態を示す図である。
【図９】皮膚患部内に２つの線分を描画した状態を示す図である。
【図１０】皮膚患部を回転した状態を示す図である。
【図１１】皮膚患部をＹ軸に直線移動した状態を示す図である。
【図１２】皮膚患部をＸ軸に直線移動した状態を示す図である。
【図１３】座標系の軸に実寸の目盛りを付与した状態を示す図である。
【図１４】皮膚患部を表示部に表示した状態を示す図である。
【図１５】変形例に係る医療画像処理装置の構成を示すブロック図である。
【図１６】変形例に係るダーモスコピー画像の例を示す図である。
【図１７】疑似患部を座標系の軸とともに表示した状態を示す図である。
【図１８】疑似患部内に２つの線分を描画した状態を示す図である。
【図１９】疑似患部を直線移動した状態を示す図である。
【図２０】疑似患部を表示部に表示した状態を示す図である。
【図２１】皮膚患部を複数重ねて表示部に表示した状態を示す図である。
【図２２】皮膚患部の中心を座標系の原点に重ねて表示部に表示した状態を示す図である。
【発明を実施するための形態】
【００１０】
以下、本発明の実施形態について図面を参照して説明する。
図１は、本発明の実施形態に係る医療画像処理装置２０と撮像装置１０とを示す図である。
【００１１】
図１に示す撮像装置１０は、カメラであって、有線（ＵＳＢ（Universal Serial Bus）ケーブルなど）で医療画像処理装置２０と通信可能である。この撮像装置１０は、医師が患者Ｋを診察する際に用いられ、医師の操作に基づいて患者診断用の医療画像を撮影する。
【００１２】
医療画像処理装置２０は、例えばＰＣ（Personal Computer）であって、撮像装置１０から医療画像を受信し、その医療画像に画像処理を行う。なお、医療画像は有線でなくとも、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信や撮像装置１０内のＳＤ（Secure Digital）カードを介して受信してもよい。
【００１３】
この実施形態では、撮像装置１０及び医療画像処理装置２０のユーザは医師であり、医師は自身が撮影した患者Ｋの医療画像を医療画像処理装置２０で確認する。医療画像処理装置２０は、その確認前に医療画像に画像処理を行って、画像処理後の医療画像を表示する。
【００１４】
ここで、医療画像処理装置２０の具体的な説明に先立って、前提となる医療現場において医師が診断に用いる撮像装置１０や医療画像などについて説明する。
【００１５】
図２は、ダーモスコピー診断の様子を示す図である。ダーモスコピー診断とは、皮膚患部を１０〜３０倍に拡大して観察するダーモスコープ１００を用いた診断である。ダーモスコープ１００は、ハロゲンランプや白色ＬＥＤ（Light Emitting Diode）などの光源と、反射光を抑える偏光フィルタと、を備えた拡大鏡である。図中に示すように、ダーモスコープ１００は、撮像装置１０にアタッチメントなどを介して装着された状態で使用される。
【００１６】
このダーモスコピー診断によれば、皮膚の角質による乱反射がなくなるので、医師は、皮膚の表皮層から真皮浅層までの色素分布を捉えた皮膚患部を拡大して診断することができる。
【００１７】
そして、医師は、皮膚患部を特定してダーモスコープ１００付きの撮像装置１０で患者Ｋの皮膚患部を撮影する。図３に、ダーモスコープ１００を介して撮影された画像であるダーモスコピー画像の例を示す。このダーモスコピー画像中の皮膚患部を観察することで、医師は、皮膚患部が良性（ほくろなど）か、悪性（メラノーマなど）か、などを診断することができる。
【００１８】
この実施形態において、医療画像処理装置２０は、図３に示すようなダーモスコピー画像中の皮膚患部を、医師にとって見易く、かつ、診断が容易になるように画像処理を行う。
【００１９】
以上の医療現場を前提として、医療画像処理装置２０の具体的な構成について図４を参照しながら説明する。
この医療画像処理装置２０は、医師の診察室内に設置され、撮像装置１０から受信したダーモスコピー画像に画像処理を行う。この医療画像処理装置２０は、制御部２１、入力部２２、表示部２３、通信部２４及び記憶部２５を備える。
【００２０】
制御部２１は、例えばＣＰＵ（Central Processing Unit）やＲＯＭ(Read Only Memory)などにより構成される。制御部２１は、ＲＯＭに記憶されたプログラムに従って制御することにより、各部（取得部２１１、画像変換部２１２、特定部２１３、線分抽出部２１４、調整部２１５、表示制御部２１７）の機能を実現する。これら各部の機能については後述する。
【００２１】
入力部２２は、例えばキーボードやマウスなどから構成され、ユーザである医師が操作内容を入力するために用いられる。
表示部２３は、例えば、ＬＣＤ（Liquid Crystal Display）やＥＬ（Electroluminescence）ディスプレイなどによって構成される。
【００２２】
通信部２４は、撮像装置１０と通信を行うための通信インターフェイス（ＵＳＢポートなど）である。制御部２１は、通信部２４を介して撮像装置１０からダーモスコピー画像を受信する。
記憶部２５は、ＨＤＤ（Hard Disk Drive）などの不揮発性メモリから構成され、撮像装置１０から受信したダーモスコピー画像や各種データを記憶する。記憶部２４は、データとして、ダーモスコピー画像中の皮膚患部の実寸を求めるために必要な情報を記憶する。実寸を求めるために必要な情報とは、例えば、撮像装置１０の焦点距離、画角に関する情報である。
【００２３】
なお、撮像装置１０はダーモスコープ１００を装着して撮影することから、撮像装置１０の規定の焦点距離、画角に関する情報だけでは正確に実寸を求めることができない。このため、ユーザ（医師）は、ダーモスコピー画像撮影前に、撮像装置１０にダーモスコープ１００を装着の上、実寸の目盛り付きの物差し（例えば、５ｍｍ程度の物差し）を撮影してキャリブレーションを行う。そして、撮像装置１０は、その撮影時のキャリブレーション情報（被写体距離、焦点距離、画角に関する情報）を記憶する。
【００２４】
そして、医療画像処理装置２０は、撮像装置１０からダーモスコピー画像受信時に、上記キャリブレーション情報をあわせて受信するようにする。このキャリブレーション情報は、ダーモスコピー画像の付帯情報（Exif: Exchangeable Image File Format）として受信してもよい。
【００２５】
次に、制御部２１の各部（取得部２１１、画像変換部２１２、特定部２１３、線分抽出部２１４、調整部２１５、表示制御部２１７）の機能について説明する。
【００２６】
取得部２１１は、ダーモスコープ１００を介して撮影されたダーモスコピー画像を取得する。ここでは、取得部２１１は、ダーモスコピー画像を取得できればいいので、取得の手法は能動受動を問わない。例えば、取得部２１１は、画像取得要求により撮像装置１０からダーモスコピー画像を取得してもいいし、撮像装置１０から送信されるダーモスコピー画像を受信して取得してもいい。なお、取得部２１１は、取得手段に相当する。
【００２７】
画像変換部２１２は、取得したダーモスコピー画像を画像変換する。具体的には、画像変換部２１２は、ダーモスコピー画像（図３参照）をＨＤＲ（High Dynamic Range）変換する。ＨＤＲ変換は、画像のコントラストを数段階に分けて調整後、再び合成することで、画像のダイナミックレンジを広げる変換である。これにより、ダーモスコピー画像の色調や皮膚患部（ダーモスコピー構造物）をより鮮明に把握できる（図５参照）。
【００２８】
なお、画像変換部２１２は、ＨＤＲ変換に限らず、ダーモスコピー画像中の他の皮膚患部（例えば、血管腫など）を診断する場合は、血管強調変換をするとよい。この血管強調変換は、血管部分を目立たせる変換であって、ダーモスコピー画像の色空間を変換（ＲＧＢ色空間からＣＩＥＬａｂ色空間）後、各種フィルタ処理（輝度成分分解フィルタやエッジ強調フィルタなどの処理）を行い、再び色空間を戻して、ダーモスコピー画像中の血管を強調する。
【００２９】
図４に戻って、特定部２１３は、ＨＤＲ変換後のダーモスコピー画像から皮膚患部を特定する。この特定の方法は任意であるが、例えば、皮膚患部の輪郭線を抽出することでその皮膚患部を抽出することができる。輪郭線の抽出は、ダーモスコピー画像に２値化処理（画素値の閾値以上を「１」、閾値未満を「０」としてモノクロにする処理）をする、あるいは輪郭部分の濃度勾配を急峻にするエッジ強調処理をすればよい。
【００３０】
また、別の手法として、複数の皮膚患部のテンプレート画像とダーモスコピー画像中の皮膚患部とのパターンマッチングを行ってもいいし、ダーモスコピー画像中の色や形状の特徴量を抽出して皮膚患部を特定してもよい。特徴量としては、例えば、画像の局所領域から輝度勾配、輝度強度を抽出するＨＯＧ(Histograms of Oriented Gradients)特徴量を用いることができる。なお、特定部２１３は、特定手段に相当する。
【００３１】
線分抽出部２１４は、特定部２１３が特定した皮膚患部の輪郭線上の２点間を結ぶ第１の線分と、その第１の線分の中点に垂直に交わる第２の線分と、を抽出する。この抽出方法については後述する。なお、線分抽出部２１４は、線分抽出手段に相当する。
【００３２】
調整部２１５は、ディスプレイである表示部２３に表示される２次元直交座標系（以下、座標系という）の軸に、特定した皮膚患部が接触するように、その皮膚患部を合わせる。具体的には、調整部２１５が含む移動部２１６が表示部２３に表示される座標系の軸に、特定した皮膚患部が接触するように、その皮膚患部を移動させる。この移動方法については後述する。なお、調整部２１５は調整手段に、移動部２１６は移動手段に、それぞれ相当する。
【００３３】
表示制御部２１７は、移動部２１６による移動後の皮膚患部を、座標系とともに表示手段２３に表示する。なお、表示制御部２１７は、表示制御手段に相当する。
【００３４】
以上の各部を備えた医療画像処理装置２０の制御部２１は、ＲＯＭに記憶されたプログラムに従って各部を適宜制御することにより、表示制御処理を実行する。この表示制御処理について、図６を参照しながら説明する。この表示制御処理の前提として、医療画像処理装置２０は、ダーモスコピー画像と、そのダーモスコピー画像撮影時のキャリブレーション情報と、を撮像装置１０から取得しておく。
【００３５】
そして、医師が患者Ｋを診断中又は診断後に撮影したダーモスコピー画像を医療画像処理装置２０の表示部２３で確認するために、入力部２２を介してダーモスコピー画像の表示操作をしたとする。表示制御処理は、このダーモスコピー画像の表示操作を受け付けたことを契機として開始される。
【００３６】
まず、画像変換部２１２は、ダーモスコピー画像を画像変換する（ステップＳ１１）。具体的には、画像変換部２１２は、ダーモスコピー画像（図３参照）を、上述したようにＨＤＲ変換する（図５参照）。
【００３７】
次に、特定部２１３は、皮膚患部を特定する（ステップＳ１２）。具体的には、特定部２１３は、ＨＤＲ変換後のダーモスコピー画像に対して、上述した任意の手法により（例えば、輪郭線抽出により）、皮膚患部を特定する。この特定した皮膚患部は、座標系の軸とともに医療画像処理装置２０の内部で（つまり、表示部２３に表示せずに）処理される。この内部処理について、図７を参照して説明する。
【００３８】
図７では、理解を容易にするために、特定された皮膚患部Ｄを左右対称な楕円形として説明する。実際には、特定された皮膚患部は左右非対称の楕円形である場合が多い。また、皮膚患部Ｄは、楕円形の黒点で示す複数の色素小球を含む。この色素小球は、実際には、メラニン色素の量に応じて様々な色調（例えば、茶、青、灰など）を示す。
ステップＳ１２において、皮膚患部が特定されると、医療画像処理装置２０の内部としては、図７のように、座標系の軸とともに皮膚患部が表示された状態となる。
【００３９】
図６に戻って、線分抽出部２１４は、特定した皮膚患部の輪郭線上に複数の点をプロットする（ステップＳ１３）。複数の点をプロットした状態を図８に示す。この複数の点は、ステップＳ１３以降の処理において、線分を抽出する際に利用される。
【００４０】
次に、線分抽出部２１４は、第１の線分を抽出する（ステップＳ１４）。具体的には、線分抽出部２１４は、図８の複数の点のうち、任意の点を基点として、その基点と他の点とを結ぶ２点間の線分を複数抽出する。続いて、線分抽出部２１４は、任意の点とは異なる点を新たな基点として、全ての基点について線分を抽出し終わるまで線分抽出を繰り返す。
【００４１】
すなわち、線分抽出部２１４は、基点を変えながら総当たりで線分を抽出していく。全線分を抽出後、線分抽出部２１４は、２点間を結ぶ複数の線分のうち、最も長い線分を第１の線分として抽出する（図９の実線）。なお、最長の線分が複数ある場合は、線分抽出部２１４は、任意に選択した１つの線分を第１の線分とする。
【００４２】
図６に戻って、線分抽出部２１４は、第２の線分を抽出する（ステップＳ１５）。具体的には、線分抽出部２１４は、第１の線分の中点に垂直に交わる線分を第２の線分として抽出する（図９の破線）。これら第１及び第２の線分は、軸合わせ並びに軸への接触をする際の基準となり、第１の線分はＸ軸の線分として、第２の線分はＹ軸の線分として、それぞれ機能する。
【００４３】
次に、移動部２１６は、皮膚患部Ｄを回転する（ステップＳ１６）。具体的には、移動部２１６は、軸合わせのために、皮膚患部Ｄの第１の線分（Ｘ軸の線分）がＸ軸に平行になるように、第２の線分（Ｙ軸の線分）がＹ軸に平行になるように、皮膚患部Ｄを回転する。回転方向は、最短で軸合わせできる方向が好ましく、図９の例の場合、移動部２１６は、時計方向に皮膚患部Ｄを回転させる。この回転の後、皮膚患部Ｄは図１０に示す状態となる。
【００４４】
次に、移動部２１６は、皮膚患部ＤをＹ軸に直線移動する（ステップＳ１７）。具体的には、移動部２１６は、図１０に実線で示す第１の線分の２つの端点のうち、Ｙ軸に近い方の端点が、そのＹ軸に接触するように、皮膚患部Ｄを直線移動させる。これにより、皮膚患部ＤがＹ軸に接触する（図１１参照）。
【００４５】
次に、移動部２１６は、皮膚患部ＤをＸ軸に直線移動する（ステップＳ１８）。具体的には、移動部２１６は、図１１に破線で示す第２の線分の２つの端点のうち、Ｘ軸に近い方の端点が、そのＸ軸に接触するように、皮膚患部Ｄを直線移動させる。これにより、皮膚患部ＤがＸ軸に接触する（図１２参照）。
【００４６】
なお、皮膚患部Ｄは、結果的にＸ軸、Ｙ軸両方に接触すればいいので、ステップＳ１７とＳ１８の処理は入れ替えてもよい。また、皮膚患部Ｄは、形状によっては（実際の皮膚患部は左右非対称の楕円形が多いので）、第１及び第２の線分の軸に近い方の端点が何れも軸（Ｘ軸とＹ軸）に接触しない場合がある。
【００４７】
すなわち、実際の皮膚患部は移動処理を行ってもＸ軸又はＹ軸何れか一方しか接触しない場合がある。この場合は、何れか一方が接触すればよい。両方接触しなくとも少なくとも一方が接触していれば見易くなるからである。
【００４８】
次に、制御部２１は、軸に実寸の目盛りを付与する（ステップＳ１９）。具体的には、制御部２１は、予め受信しておいたダーモスコピー画像のキャリブレーション情報に基づいて、皮膚患部Ｄの実寸の長さを求め、求めた長さと同じスケールで（例えば、皮膚患部Ｄがミリ単位であれば同じミリ単位で）座標系の軸（Ｘ軸とＹ軸）に実寸の目盛りを付与する（図１３参照）。
【００４９】
なお、この実寸の求め方は公知だが、例えば、キャリブレーション情報に含まれるダーモスコピー画像撮影時の被写体距離、焦点距離、画角に基づいて、そのダーモスコピー画像の一辺の実寸の長さを求め、その画像の一辺の画素数から１ピクセル当たりの実寸の長さ（ｍｍ／ｐｉｘ）を求める。そして、皮膚患部Ｄの実寸を求めればよい。
【００５０】
図６に戻って、表示制御部２１７は、皮膚患部Ｄを座標系の軸とともに表示部２３に表示する（ステップＳ２０）。これにより、図１４に示すように、医療画像処理装置２０の表示部２３に実寸の目盛り付きの軸とともに、皮膚患部Ｄが表示される。この際、表示制御部２１７は、表示部２３に皮膚患部Ｄの実寸の数値（図１４の例ではＸ：７ｍｍ、Ｙ：３．５ｍｍ）をあわせて表示する。その後、処理を終了する。
【００５１】
以上、図６を参照しながら説明した表示制御処理においては、医療画像処理装置２０が各部（取得部２１１、画像変換部２１２、特定部２１３、線分抽出部２１４、移動部２１６、表示制御部２１７）を備えたことにより、表示部２３に表示される座標系の軸に、特定した皮膚患部が接触するように、その皮膚患部を移動させることができる。このため、医療画像であるダーモスコピー画像中の皮膚患部を表示部２３の画面に見易く表示することができる。
【００５２】
また、表示部２３に表示される座標系の軸は、実寸の目盛り付きである。このため、医師が即座に皮膚患部の実寸を把握することができるので、診断を迅速に行うことができる。
【００５３】
なお、図６に示した表示制御処理においては、軸に実寸の目盛りを付与するタイミングは、移動部２１６による移動後を例にとって説明したが、これに限られない。要は、表示部２３に表示する前までに実寸の目盛りが付与されればよく、例えば、ステップＳ１２で皮膚患部Ｄを特定した段階で実寸を求めて座標系の軸に目盛りを付与してもよい。この場合、図７の段階で目盛りが付与されることになる。
【００５４】
また、図６に示した表示制御処理においては、移動部２１６による皮膚患部Ｄの回転の後に直線移動を行うようにしたが、これに限られない。要は、移動後に皮膚患部Ｄが軸（Ｘ軸とＹ軸）に接触すればよく、これに矛盾しない範囲で適宜処理を変更してもよい。例えば、皮膚患部Ｄを直線移動した後に回転を行っても構わないし、回転しながら移動を行ってもよい。
【００５５】
また、図６に示した表示制御処理においては、第１の線分をＸ軸の線分、第２の線分をＹ軸の線分として説明したが、第１の線分をＹ軸の線分、第２の線分をＸ軸の線分として、表示制御処理を行ってもよい。
また、図６に示した表示制御処理においては、左右対称の楕円形の皮膚患部Ｄを前提に説明したが、皮膚患部Ｄの形状としてはこれに限られないことはもちろんである。表示制御処理は、線形・非線形問わず皮膚患部のとり得るおよそ全ての形状（三角形や四角形などの多角形や楕円以外の歪な円など）に適用することができる。
【００５６】
また、図６に示した表示制御処理においては、ステップＳ２０において皮膚患部Ｄを座標系の軸とともに表示部２３に表示するまでは、医療画像処理装置２０の内部処理であることを前提に説明したが、これに限られない。例えば、ステップＳ１２において皮膚患部を特定した時点で軸とともに表示部２３に表示して、以後の処理（図７乃至図１３）を全て表示部２３に表示した状態で行ってもよい。
【００５７】
以上で実施形態の説明を終了するが、上記実施形態は一例であり、医療画像処理装置２０の構成や表示制御処理の内容などが上記実施形態で説明したものに限られないことはもちろんである。
【００５８】
（変形例１）
上述した実施形態においては、特定部２１３がダーモスコピー画像中から皮膚患部を特定することができる前提で説明した。しかし、現実的には、皮膚患部の輪郭線を抽出できないなどにより、皮膚患部を特定できない場合がある。例えば、皮膚患部がメラノーマやほくろなどの色素性皮膚疾患であれば特定できたとしても、皮膚患部が血管に係る血管腫などの場合は特定できない場合がある。
【００５９】
そこで、変形例１に係る図１５の医療画像処理装置２０’は、皮膚患部を特定できない場合に備えた機能を有する。この医療画像処理装置２０’は、受付部２１８を備えた点が医療画像処理装置２０と異なる。以下では、この異なる点を中心に説明する。
【００６０】
受付部２１８は、特定部２１３が皮膚患部を特定できない場合、その皮膚患部に代わる疑似患部を、ユーザ操作に基づいて受け付ける。図１６に皮膚患部を特定できない場合のダーモスコピー画像Ｇの例を示す。図１６のダーモスコピー画像Ｇは、実線で示す血管と複数の色素小球とからなる。
【００６１】
この場合、表示制御部２１７は、ダーモスコピー画像Ｇの画像領域を座標系の軸とともに表示部２３に表示する。そして、受付部２１８は、医師のマウスなどの入力部２２による操作を受け付ける。図１７では、医師が実線で示す部分を疑似患部Ｐとして入力した場合を示す。受付部２１８は、この疑似患部Ｐを受け付ける。なお、受付部２１８は、受付手段に相当する。
【００６２】
受付部２１８が疑似患部Ｐを受け付けると、医療画像処理装置２０’は、上述した表示制御処理におけるステップＳ１３以降の処理を、皮膚患部Ｄに代えて疑似患部Ｐにより行う。
【００６３】
具体的には、医療画像処理装置２０’の線分抽出部２１４は、ステップＳ１３乃至１５の処理を装置内部で行って、疑似患部Ｐの輪郭線上に複数の点をプロットした上で、第１及び第２の線分を抽出する（図１８参照）。
【００６４】
次に、移動部２１６は、ステップＳ１６乃至１８の処理を装置内部で行って、疑似患部Ｐを回転・平行移動して軸（Ｘ軸とＹ軸）に接触させる（図１９参照）。
次に、制御部２１は、ステップＳ１９において軸に目盛りを付与した後、表示制御部２１７は、疑似患部Ｐを座標系の軸とともに表示部２３に表示する（図２０参照）。
【００６５】
以上、この変形例１に係る医療画像処理装置２０’によれば、特定部２１３が皮膚患部を特定できない場合、その皮膚患部に代わる疑似患部を医師の操作に基づいて受け付ける。そして、受け付けた疑似患部が座標系の軸に接触するように移動させて表示部２３に表示する。
【００６６】
このため、皮膚患部が血管腫など特定困難である場合であっても、医師がダーモスコピー画像中から患部箇所を判断できる限り、その判断に基づく疑似患部を実寸のサイズとともに表示部２３に見易く表示することができる。
【００６７】
なお、上述した変形例１においては、医師の操作次第では疑似患部がいびつな形になる場合もある。この場合、第１の線分（Ｘ軸の線分）又は第２の線分（Ｙ軸の線分）の何れか一方の軸に近い方の端点が、Ｘ軸又はＹ軸に接触すればよい。
【００６８】
また、上述した変形例１においては、医師はマウスなどの入力部２２を介して疑似領域Ｐを入力するようにしたが、これに限られない。表示部２３がタッチパネルであれば、医師は、タッチペンなどでなぞって疑似領域Ｐを入力してもよいことはもちろんである。
【００６９】
（変形例２）
上述した実施形態おいては、表示部２３に表示する皮膚患部は１つであることを前提に説明したが、これに限られない。例えば、医師が撮影した同じ箇所の皮膚患部が時系列で複数ある場合（例えば、医師が１回目と２回目の診断において同じ皮膚患部を撮影した場合）、それらを重ねて表示してもよい。
【００７０】
具体的には、撮影時刻が異なる複数のダーモスコピー画像がある場合、表示制御部２１７は、その複数のダーモスコピー画像から特定された皮膚患部がそれぞれ移動された後、表示部２３に時系列で重ねて表示する（図２１参照）。図２１において点線で示す皮膚患部Ｄ１は、実線で示す皮膚患部Ｄ２よりも前に撮影されたものである。
【００７１】
このレイヤー表示により、皮膚患部の経時的変化（例えば、皮膚患部自体のサイズの変化や色素小球の移動軌跡など）を把握することができるので、医師の診断を容易にすることができる。
【００７２】
（変形例３）
上述した実施形態においては、移動後の皮膚患部は座標系の第１象限であることを前提に説明したが、これに限られない。例えば、第２〜第４象限に表示してもいい。また、移動後の皮膚患部Ｄの中心をさらに原点に移動してもいい（図２２参照）。皮膚患部Ｄの表示箇所を事前に医師から受け付けるようにしておけば、医師の好みに応じた表示をすることができる。なお、皮膚患部Ｄの中心は厳密な図形の中心である必要はなく、形状に応じて所定誤差を設けてもよい。
【００７３】
なお、上述した変形例１乃至３は、矛盾しない範囲で適宜組み合わせてもよい。また、上述した実施形態及び変形例においては、ＰＣなどの医療画像処理装置２０，２０’が画像処理を行うことを前提に説明したが、これに限られない。例えば、撮像装置１０が表示制御処理を行うためのプログラムを記憶しておき、撮像装置１０にて表示制御処理を行ってもよい。この場合、移動後の皮膚患部は撮像装置１０の表示部に表示される。
【００７４】
また、この発明の医療画像処理装置２０の各機能は、通常のＰＣ等のコンピュータによっても実施することができる。
具体的には、上記実施形態では、医療画像処理装置２０が行う表示制御処理のプログラムが、制御部２１のＲＯＭに予め記憶されているものとして説明した。しかし、この表示制御処理のプログラムを、フレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＤＶＤ（Digital Versatile Disc）及びＭＯ（Magneto-Optical Disc）等のコンピュータ読み取り可能な記録媒体に格納して配布し、そのプログラムをコンピュータにインストールすることにより、上述の各部（取得部２１１、画像変換部２１２、特定部２１３、線分抽出部２１４、調整部２１５、移動部２１６、表示制御部２１７）の機能を実現することができるコンピュータを構成してもよい。また、プログラムをインターネット等の通信ネットワーク上のサーバ装置が有するディスク装置等に格納しておき、例えば、コンピュータがダウンロード等をすることができるようにしてもよい。
【００７５】
以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲が含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
【００７６】
（付記１）
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段と、
表示手段に表示される座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を合わせる調整手段と、
前記調整手段により前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表示手段に表示する表示制御手段と、
を備えたことを特徴とする医療画像処理装置。
【００７７】
（付記２）
前記調整手段は、前記表示手段に表示される座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を移動させる移動手段を含む、
ことを特徴とする付記１に記載の医療画像処理装置。
【００７８】
（付記３）
前記座標系の軸は、実寸の目盛り付きである、
ことを特徴とする付記１又は２に記載の医療画像処理装置。
【００７９】
（付記４）
前記特定手段は、前記ダーモスコピー画像を２値化処理又はエッジ強調処理することにより前記皮膚患部の輪郭線を抽出して、該皮膚患部を特定する、
ことを特徴とする付記１乃至３の何れか一つに記載の医療画像処理装置。
【００８０】
（付記５）
前記特定手段は、前記ダーモスコピー画像をＨＤＲ（High Dynamic Range）変換処理する手段を含む、
ことを特徴とする付記１乃至４の何れか一つに記載の医療画像処理装置。
【００８１】
（付記６）
前記特定手段が特定した皮膚患部の輪郭線上の２点間を結ぶ第１の線分と、該第１の線分の中点に垂直に交わる第２の線分と、を抽出する線分抽出手段を備え、
前記移動手段は、
前記第１の線分が前記座標系のＸ軸に、前記第２の線分が前記座標系のＹ軸に、それぞれ平行になるように、前記皮膚患部を回転させる回転手段と、
前記第１の線分の２つの端点のうち、前記Ｙ軸に近い方の端点が、該Ｙ軸に接触するように、前記皮膚患部を直線移動させる第１直線移動手段と、
前記第２の線分の２つの端点のうち、前記Ｘ軸に近い方の端点が、該Ｘ軸に接触するように、前記皮膚患部を直線移動させる第２直線移動手段と、
を含む、
ことを特徴とする付記２に記載の医療画像処理装置。
【００８２】
（付記７）
前記線分抽出手段は、前記輪郭線上の複数の点のうち、２点間を結ぶ線分が最も長い線分を前記第１の線分として抽出する、
ことを特徴とする付記６に記載の医療画像処理装置。
【００８３】
（付記８）
前記移動手段は、前記皮膚患部を移動後、該皮膚患部の中心が前記座標系の原点に重なるように、該皮膚患部をさらに移動させる、
ことを特徴とする付記２に記載の医療画像処理装置。
【００８４】
（付記９）
前記表示制御手段は、撮影時刻が異なる複数のダーモスコピー画像がある場合、該複数のダーモスコピー画像からそれぞれ特定された皮膚患部が前記移動手段により移動された後、該移動後の皮膚患部を前記表示手段に時系列で複数重ねて表示する、
ことを特徴とする付記２に記載の医療画像処理装置。
【００８５】
（付記１０）
前記表示制御手段は、前記表示手段に前記皮膚患部の実寸の数値を表示する、
ことを特徴とする付記１乃至９の何れか一つに記載の医療画像処理装置。
【００８６】
（付記１１）
前記特定手段が前記皮膚患部を特定できない場合、該皮膚患部に代わる疑似患部を、ユーザ操作に基づいて受け付ける受付手段を備え、
前記調整手段は、前記表示手段に表示される座標系の軸に、前記受付手段で受け付けた疑似患部が接触するように、該疑似患部を合わせ、
前記表示制御手段は、前記調整手段により前記座標系の軸に合わせた疑似患部を、前記座標系とともに前記表示手段に表示する、
ことを特徴とする付記１乃至１０の何れか一つに記載の医療画像処理装置。
【００８７】
（付記１２）
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定ステップと、
表示手段に表示される座標系の軸に、前記特定ステップにおいて特定した皮膚患部が接触するように、該皮膚患部を合わせる調整ステップと、
前記調整ステップにおいて前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表示手段に表示する表示制御ステップと、
を備えたことを特徴とする医療画像処理方法。
【００８８】
（付記１３）
コンピュータを、
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段、
表示手段に表示される座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を合わせる調整手段、
前記調整手段により前記座標系の軸に合わせた皮膚患部を、前記座標系とともに前記表示手段に表示する表示制御手段、
として機能させるためのプログラム。
【符号の説明】
【００８９】
１０…撮像装置、２０，２０’…医療画像処理装置、２１…制御部、２２…入力部、２３…表示部、２４…通信部、２５…記憶部、１００…ダーモスコープ、２１１…取得部、２１２…画像変換部、２１３…特定部、２１４…線分抽出部、２１５…調整部、２１６…移動部、２１７…表示制御部、２１８…受付部
【図１】
2019069178.tif 000003
【図２】
2019069178.tif 000004
【図３】
2019069178.tif 000005
【図４】
2019069178.tif 000006
【図５】
2019069178.tif 000007
【図６】
2019069178.tif 000008
【図７】
2019069178.tif 000009
【図８】
2019069178.tif 000010
【図９】
2019069178.tif 000011
【図１０】
2019069178.tif 000012
【図１１】
2019069178.tif 000013
【図１２】
2019069178.tif 000014
【図１３】
2019069178.tif 000015
【図１４】
2019069178.tif 000016
【図１５】
2019069178.tif 000017
【図１６】
2019069178.tif 000018
【図１７】
2019069178.tif 000019
【図１８】
2019069178.tif 000020
【図１９】
2019069178.tif 000021
【図２０】
2019069178.tif 000022
【図２１】
2019069178.tif 000023
【図２２】
2019069178.tif 000024
【手続補正書】
【提出日】平成30年12月25日(2018.12.25)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段と、
前記特定された皮膚患部を表示部に表示させる表示制御手段と、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段と、
前記特定された皮膚患部の中心を前記座標軸の原点に重なるように調整する調整手段と、
を備えたことを特徴とする医療画像処理装置。
【請求項２】
ダーモスコープを介してダーモスコピー画像を撮像する撮像手段と、
前記撮像されたダーモスコピー画像から皮膚患部を特定する特定手段と、
前記特定された皮膚患部を表示部に表示させる表示制御手段と、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段と、
前記撮像手段の焦点距離、画角に関する情報、及び所定の目盛りを撮像した情報をもとにキャリブレーションを行ない、キャリブレーション情報を得るキャリブレーション手段と、
前記キャリブレーション情報により前記座標軸の表示を調整する調整手段と、
前記調整された座標軸に合わせるように前記特定された皮膚患部を移動して前記表示部に表示させる移動手段と、
を備えたことを特徴とする医療画像処理装置。
【請求項３】
前記特定手段が前記皮膚患部を特定できない場合、擬似患部を受け付け、前記特定された皮膚患部とする、請求項１又は２に記載の医療画像処理装置。
【請求項４】
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段と、
前記特定された皮膚患部を表示部に表示させる表示制御手段と、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段と、
前記表示部に表示される座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を移動させる移動手段と、を備え、
前記表示制御手段は、前記特定された皮膚患部として、撮影時刻が異なる複数のダーモスコピー画像から特定された皮膚患部がそれぞれ前記移動手段により移動された後、前記表示部に時系列で重ねて表示することを特徴とする医療画像処理装置。
【請求項５】
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定ステップと、
前記特定された皮膚患部を表示部に表示させる表示制御ステップと、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御ステップと、
前記特定された皮膚患部の中心を前記座標軸の原点に重なるように調整する調整ステップと、
を備えたことを特徴とする医療画像処理方法。
【請求項６】
ダーモスコープを介してダーモスコピー画像を撮像する撮像ステップと、
前記撮像されたダーモスコピー画像から皮膚患部を特定する特定ステップと、
前記特定された皮膚患部を表示部に表示させる表示制御ステップと、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御ステップと、
前記撮像ステップにおける焦点距離、画角に関する情報、及び所定の目盛りを撮像した情報をもとにキャリブレーションを行ない、キャリブレーション情報を得るキャリブレーションステップと、
前記キャリブレーション情報により前記座標軸の表示を調整する調整ステップと、
前記調整された座標軸に合わせるように前記特定された皮膚患部を移動して前記表示部に表示させる移動ステップと、
を備えたことを特徴とする医療画像処理方法。
【請求項７】
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定ステップと、
前記特定された皮膚患部を表示部に表示させる表示制御ステップと、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御ステップと、
前記表示部に表示される座標系の軸に、前記特定ステップで特定した皮膚患部が接触するように、該皮膚患部を移動させる移動ステップと、を備え、
前記表示制御ステップで、前記特定された皮膚患部として、撮影時刻が異なる複数のダーモスコピー画像から特定された皮膚患部がそれぞれ前記移動ステップにより移動された後、前記表示部に時系列で重ねて表示することを特徴とする医療画像処理方法。
【請求項８】
コンピュータを、
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段、
前記特定された皮膚患部を表示部に表示させる表示制御手段、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段、
前記特定された皮膚患部の中心を前記座標軸の原点に重なるように調整する調整手段、
として機能させるためのプログラム。
【請求項９】
コンピュータを、
ダーモスコープを介してダーモスコピー画像を撮像する撮像手段、
前記撮像されたダーモスコピー画像から皮膚患部を特定する特定手段、
前記特定された皮膚患部を表示部に表示させる表示制御手段、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段、
前記撮像手段の焦点距離、画角に関する情報、及び所定の目盛りを撮像した情報をもとにキャリブレーションを行ない、キャリブレーション情報を得るキャリブレーション手段、
前記キャリブレーション情報により前記座標軸の表示を調整する調整手段、
前記調整された座標軸に合わせるように前記特定された皮膚患部を移動して前記表示部に表示させる移動手段、
として機能させるためのプログラム。
【請求項１０】
コンピュータを、
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段、
前記特定された皮膚患部を表示部に表示させる表示制御手段、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段、
前記表示部に表示される座標系の軸に、前記特定手段で特定した皮膚患部が接触するように、該皮膚患部を移動させる移動手段、として機能させ、
前記前記表示制御手段は、前記特定された皮膚患部として、撮影時刻が異なる複数のダーモスコピー画像から特定された皮膚患部がそれぞれ前記移動手段により移動された後、前記表示部に時系列で重ねて表示させることを特徴とするプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
上記目的を達成するため、本発明の第１の観点に係る医療画像処理装置は、
ダーモスコープを介して撮影されたダーモスコピー画像から皮膚患部を特定する特定手段と、
前記特定された皮膚患部を表示部に表示させる表示制御手段と、
前記表示部に所定の座標系の座標軸を表示させる座標軸表示制御手段と、
前記特定された皮膚患部の中心を前記座標軸の原点に重なるように調整する調整手段と、
を備えたことを特徴とする。