(57)【要約】  切離プロセス推定装置を，切離対象臓器の切離部位に応じた切離面と切離の進展に関する情報とを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，前記標準切離面及び前記標準切離プロセスを，患者固有の三次元医用画像データにマッチングし，患者固有の切離面及び切離プロセスを推定する患者固有切離プロセス推定部とで構成する。
2018030015.tif 000002
【特許請求の範囲】
【請求項１】
切離対象臓器の切離部位に応じた切離面と，切離の進展に関する情報を与える切離プロセスとを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離面及び前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離面及び切離プロセスを推定する患者固有切離プロセス推定部と
を有する切離プロセス推定装置。
【請求項２】
請求項１に記載の切離プロセス推定装置において，
表示画面上に表示された患者固有の三次元医用画像に対する１つ又は複数の切離点の入力を受け付ける切離点受付部
を更に有する切離プロセス推定装置。
【請求項３】
請求項１に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記マッチングの前処理として，(i) 撮像条件の違いによる前記患者固有の三次元医用画像データに撮像された臓器の大きさの違いを補正するための拡大又は縮小処理と，(ii) 患者固有の前記臓器の大きさと標準臓器の大きさとの違いを補正するひずみ補正処理と，(iii)前記処理の全て又はいずれか一つを実行する
ことを特徴とする切離プロセス推定装置。
【請求項４】
請求項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記標準切離プロセスと，前記患者固有の三次元医用画像データから抽出された解剖学的参照点と，ユーザーから受け付けた前記切離点とに基づいて前記患者固有の切離プロセスを推定する
ことを特徴とする切離プロセス推定装置。
【請求項５】
請求項４に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，ユーザーにより指定された１つ又は複数の前記切離点の近くを通る前記切離面を，前記切離点の位置を制約条件とする最小化問題の解として計算する
ことを特徴とする切離プロセス推定装置。
【請求項６】
請求項２に記載の切離プロセス推定装置において，
前記標準切離プロセス生成部は，前記手術プロセス事例データベースに格納された個別の前記事例データを組み合わせて前記標準切離面及び標準切離プロセスを生成する際，前記患者固有の三次元医用画像データから抽出された前記解剖学的参照点とユーザーから受け付けた前記切離点とに近似する組み合わせが得られるように組合せ対象である前記事例データの重みづけを行う
ことを特徴とする切離プロセス推定装置。
【請求項７】
請求項１に記載の切離プロセス推定装置において，
前記切離面は，個々の切離の進展に応じて生じる部分曲面から構成され，
前記切離プロセスは，前記部分曲面に対応する切離の順序を与える
ことを特徴とする切離プロセス推定装置。
【請求項８】
請求項４に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記切離点のいずれかを通る部分曲面を，前記標準切離面及び前記標準切離プロセスに基づいて推定する
ことを特徴とする切離プロセス推定装置。
【請求項９】
請求項８に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記解剖学的参照点の解剖学的構造を用いて前記部分曲面を推定する
ことを特徴とする切離プロセス推定装置。
【請求項１０】
請求項２に記載の切離プロセス推定装置において，
前記切離点受付部は，１つ又は複数の前記切離点の入力を受け付けると同時に，入力した切離点の切離順序を受け付ける
ことを特徴とする切離プロセス推定装置。
【請求項１１】
請求項１０に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記患者固有の三次元医用画像データに対して入力された１つ又は複数の前記切離点の位置と入力順序を，標準臓器を構成するメッシュの頂点に対応付けて前記手術プロセス事例データベースに記録する
ことを特徴とする切離プロセス推定装置。
【請求項１２】
請求項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記標準切離面を，ユーザーが指定した前記切離点に対応する前記患者固有の三次元医用画像データの頂点情報に対応付ける
ことを特徴とする切離プロセス推定装置。
【請求項１３】
請求項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記患者固有の切離プロセスとユーザーが指定した前記切離点に対応する前記患者固有の三次元医用画像の頂点情報を標準臓器の頂点情報に対応付ける
ことを特徴とする切離プロセス推定装置。
【請求項１４】
切離対象臓器の切離部位に応じた切離面と，切離の進展に関する情報を与える切離プロセスとを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離面及び前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離面及び切離プロセスを推定する患者固有切離プロセス推定部と
を有し，
前記切離の進展に関する情報は，前記切離対象臓器を表現するメッシュの頂点の集合Vと要素集合Eとを用いて表され，
前記集合Vは，各頂点に付与された複数の情報で構成される頂点ベクトルviにより，
V＝｛v0，v1，．．．,vn-1｝
として表され，
前記頂点ベクトルviは，各頂点の情報を与える頂点座標(x,y,z)，タイムスタンプ(time)，解剖学的構造ラベル(label)，第１の属性情報(isFreezed),第２の属性情報(isCutpath),第３の属性情報(isSurface)を用いて，
vi＝（x, y, z, time, label, isFreezed, isCutpath, isSurface）
と表され，
タイムスタンプ(time)は，対応する頂点が何番目に切離されるかを示し，
解剖学的構造ラベル(label)は，解剖学上の構造を示す値であり，
第１の属性情報(isFreezed)は，対応する頂点が固定点か自由点かを示し，
第２の属性情報(isCutpath)は，対応する頂点が切離面上にあるか否かを示し，
第３の属性情報(isSurface)は，対応する頂点が前記切離対象臓器の表面上にあるか内部にあるかを示し、
前記要素集合Eは，前記メッシュを構成する個々の最小要素を与える頂点の組み合わせの集合である
切離プロセス推定装置。
【請求項１５】
切離対象臓器の切離部位に応じた切離面と，切離の進展に関する情報を与える切離プロセスとを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離プロセスを推定する患者固有切離プロセス推定部と，
前記患者固有切離プロセス推定部において推定された前記患者固有の切離プロセスを表示する表示装置と
を有する切離プロセスナビゲーションシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は，患者の臓器構造に固有の切離プロセスを自動的に推定する装置及び推定された切離プロセスを提示するナビゲーションシステムに関する。
【背景技術】
【０００２】
切離部位の内部構造に応じた切離計画を手術に先立って把握することは，医師その他の医療従事者（以下「医療従事者」という。）にとって極めて重要である。切離計画は，切離する臓器の部位，切離する部位の内部構造，術者の経験等に応じて決まる。例えば臓器内部の血管などの重要構造物に沿うようにメス（メスだけでなく，その他の切離器具も含む。以下「メス」という。）を進展させ，メスが所定の深さに達して臓器内部の構造が確認できると，その時点でメスの進展を停止し，今度は別の部位からメスを入れて所定深さまで進展させるという具合である。この際，２番目のメスの進展は，最初に切離した部位とは反対側の臓器面から入れる手法もあれば，最初のメスの進展方向とは少し異なる方向に入れる手法もある。【０００３】
このように，切離計画は，多くの要素の組み合わせを通じて進展するが，中でも，臓器内部の血管や腫瘍の構造，それらの三次元的位置関係を臓器外部から推定し，最初に切離を開始する部位を決定する判断は非常に重要である。もし，切離を開始する部位が適当でない場合，医療従事者は，より最適な部位にメスを入れ直す必要があるが，メスの入れ直しによる余計な切離は臓器に負担をかけてしまう。【０００４】
また，切離の進展方向に誤りがあったり，進展の深さに誤りがあったりすると，切離の進展において重要な指標となる臓器内部の解剖学的構造（例えば血管，リンパ管その他の脈管構造）を確認することができず，以降の切離の進展に支障が生じてしまう。また，切離の順序が不適切であると（例えば，最初に適切でない部位にメスを入れた場合），腫瘍とのマージンがとれないだけでなく，不要な出血の原因となり，結果的に余計な切離を要することになる。【０００５】
このため，医療従事者による臓器内部の把握を支援する目的で，現在，画像処理技術や可視化技術を利用した各種のソフトウェアが広く活用されている。例えば特許文献１には，対象臓器に存在する異常領域の位置だけでなく，対象臓器とその周辺に位置する臓器との位置関係も考慮した切離方法を提示する手術支援装置等が記載されている（段落［００１０］参照）。具体的には，特許文献１には，切離される体積を最小化する切離方法，切離される表面積を最小化する切離方法，切離部位の表面からの距離を最小化する切離方法を提供する技術が記載されている。【０００６】
また，特許文献２には，手術時における臓器の変形度合等を考慮した画像シミュレーションが可能な画像診断支援技術が記載されている（段落［０００６］参照）。具体的には，特許文献１には，隣接する頂点が互いに連結された四面体ブロック（いわゆるポリゴン）によって構成される四面体モデルに対する任意の切離パターンを予め演算しておくことにより，医療従事者による切離位置の指定に応じた画像シミュレーションを提供する技術が記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１３−１５４０３７号公報
【特許文献２】特開２０１４−１７６４２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
特許文献１に記載の技術は，複数の観点から異常領域の部分曲面の候補を提示することができるものの，当該部分曲面の候補のいずれが標準的な部分曲面であるかは分からない。また，当該技術では，部分曲面の候補は分かっても，選択した部分曲面について，どの順番に臓器を切離するかについては何ら示していない。【０００９】
一方，特許文献２に記載の技術は，対象臓器を構成する全てのポリゴンについて，想定される全ての四面体分割パターンを予め計算しておく必要があり，計算負荷が非常に大きいという問題がある。また，当該技術では，切離部位に位置するポリゴンの全ての頂点位置を医療従事者が順番に指定する必要がある。つまり，この手法では，医療従事者が逐次ポイントを与えない限り，シミュレーションは進行しない。また，当該技術は，あくまでもポリゴンをベースとして患者毎に作成され，医用画像への応用は想定されていない。また，作製されたポリゴンモデルは個々の患者に固有であり，他の患者への応用は想定されていない。このため，特許文献１に記載の技術は，切離プロセスのトレーニング用途に留まっている。【００１０】
すなわち，いずれの文献にも，どの部位にメスを入れるか，メスをどの方向に進展させるか，進展中のメスの深さをどうするか，メスを入れる順序等に関する情報を与える切離プロセスを，利用者による逐次的な指定入力が無くても自動的に提示できる仕組みは考慮されていない。
【課題を解決するための手段】
【００１１】
本明細書は，前述の課題を解決する手段を複数含んでおり，その一例として，項１〜項２０に示す手段がある。
・項１
切離対象臓器の切離部位に応じた切離面と切離の進展に関する情報とを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離面及び前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離面及び切離プロセスを推定する患者固有切離プロセス推定部と
を有する切離プロセス推定装置。
・項２
前記項１に記載の切離プロセス推定装置において，
表示画面上に表示された患者固有の三次元医用画像に対する１つ又は複数の切離点の入力を受け付ける切離点受付部
を更に有する切離プロセス推定装置。
・項３
前記項１に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記マッチングの前処理として，（i）撮像条件の違いによる前記患者固有の三次元医用画像データに撮像された臓器の大きさの違いを補正するための拡大又は縮小処理と，(ii)患者固有の前記臓器の大きさと標準臓器の大きさとの違いを補正するひずみ補正処理と，(iii)前記処理の全て又は前記処理の組み合わせ又はいずれか一つを実行する
ことを特徴とする切離プロセス推定装置。
・項４
前記項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記標準切離プロセスと，前記患者固有の三次元医用画像データから抽出された解剖学的参照点と，ユーザーから受け付けた前記切離点とに基づいて前記患者固有の切離プロセスを推定する
ことを特徴とする切離プロセス推定装置。
・項５
前記項４に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，ユーザーにより指定された１つ又は複数の前記切離点の近くを通る前記切離面を，前記切離点の位置を制約条件とする最小化問題の解として計算する
ことを特徴とする切離プロセス推定装置。
・項６
前記項２に記載の切離プロセス推定装置において，
前記標準切離プロセス生成部は，前記手術プロセス事例データベースに格納された個別の前記事例データを組み合わせて前記標準切離面及び標準切離プロセスを生成する際，前記患者固有の三次元医用画像データから抽出された前記解剖学的参照点とユーザーから受け付けた前記切離点とに最も近似する組み合わせが得られるように組合せ対象である前記事例データの重みづけを行う
ことを特徴とする切離プロセス推定装置。
・項７
前記項１に記載の切離プロセス推定装置において，
前記切離面は，個々の切離の進展に応じて生じる部分曲面から構成され，
前記切離プロセスは，前記部分曲面に対応する切離の順序を与える
ことを特徴とする切離プロセス推定装置。
・項８
前記項４に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記切離点のいずれかを通る部分曲面を，前記標準切離面及び前記標準切離プロセスに基づいて推定する
ことを特徴とする切離プロセス推定装置。
・項９
前記項８に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記解剖学的参照点の解剖学的構造を考慮して前記部分曲面を推定する
ことを特徴とする切離プロセス推定装置。
・項１０
前記項２に記載の切離プロセス推定装置において，
前記切離点受付部は，１つ又は複数の前記切離点の入力を受け付けると同時に，入力した切離点の切離順序を受け付ける
ことを特徴とする切離プロセス推定装置。
・項１１
前記項１０に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記患者固有の三次元医用画像データに対して入力された１つ又は複数の前記切離点の位置と入力順序を，標準臓器を構成するメッシュの頂点に対応付けて前記手術プロセス事例データベースに記録する
ことを特徴とする切離プロセス推定装置。
・項１２
前記項１に記載の切離プロセス推定装置は，
ユーザーが患者固有の１つ又は複数の切離点を指定した場合に，前記切離点を制約条件とする最適な切離面と切離プロセスをユーザーに提示する切離ナビゲーションシステムとして機能する
ことを特徴とする切離プロセス推定装置。
・項１３
前記項１に記載の切離プロセス推定装置は，
ユーザーが患者固有の１つ又は複数の切離点と切離順序を指定した場合に，前記切離点と入力順序を制約条件とする最適な切離面と切離プロセスをユーザーに提示する切離ナビゲーションシステムとして機能する
ことを特徴とする切離プロセス推定装置。
・項１４
前記項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記標準切離面を，ユーザーが指定した前記切離点に対応する前記患者固有の三次元医用画像データの頂点情報に対応付ける処理機能を更に有する
ことを特徴とする切離プロセス推定装置。
・項１５
前記項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記患者固有の切離プロセスとユーザーが指定した前記切離点に対応する前記患者固有の三次元医用画像の頂点情報を標準臓器の頂点情報に対応付ける処理機能を更に有する
ことを特徴とする切離プロセス推定装置。
・項１６
前記項１に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，推定された前記患者固有の切離プロセスの進展に伴って，前記患者固有の三次元医用画像に重ねるように前記解剖学的参照点の一部又は全部を透過的に表示する
ことを特徴とする切離プロセス推定装置。
・項１７
切離対象臓器の切離部位に応じた切離面と切離の進展に関する情報とを記述した手術プロセスの事例データを記憶する
切離プロセス事例データベース。
・項１８
切離対象臓器の切離部位に応じた切離面と切離の進展に関する情報とを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離プロセスを推定する患者固有切離プロセス推定部と，
前記患者固有切離プロセス推定部において推定された前記患者固有の切離プロセスを表示する表示装置と
を有する切離プロセスナビゲーションシステム。
・項１９
前記項１８に記載の切離プロセスナビゲーションシステムにおいて，
前記表示装置は，ユーザーが患者固有の１つ又は複数の切離点を指定した場合に，前記切離点を制約条件とする最適な切離面と切離プロセスをユーザーに提示する
ことを特徴とする切離プロセスナビゲーションシステム。
・項２０
前記項１８に記載の切離プロセスナビゲーションシステムにおいて，
前記表示装置は，ユーザーが患者固有の１つ又は複数の切離点と前記切離点それぞれの入力順序を指定した場合に，前記切離点を制約条件とする最適な切離面と前記切離プロセスをユーザーに提示する
ことを特徴とする切離プロセスナビゲーションシステム。
【発明の効果】
【００１２】
本発明によれば，どの部位にメスを入れるか，メスをどの方向に進展させるか，進展中のメスの深さをどうするか，メスを入れる順序等に関する情報を与える切離プロセスを，利用者による逐次的な指定入力が無くても自動的に推定することができる。
【図面の簡単な説明】
【００１３】
【図１】実施例１に係る切離プロセスナビゲーションシステムの概略構成を示す図。
【図２】三次元医用画像データのデータ構造を説明する図。
【図３】（A）〜（D）は標準切離面と標準切離プロセスのイメージを示す図。
【図４】（A）〜（C）は実施例１に係る患者固有切離プロセス推定部において実行される推定処理手順を示す図。
【図５】実施例１に係るナビゲーション画面として表示される切離面と解剖学的参照点の例を示す図。
【図６】（A）〜（C）はナビゲーション画面における切離の進展を説明する図。
【図７】実施例２に係る切離プロセスナビゲーションシステムの概略構成を示す図。
【図８】（A）〜（C）は実施例２に係る患者固有切離プロセス推定部において実行される推定処理手順を示す図。
【図９】実施例２に係るナビゲーション画面として表示される切離面と解剖学的参照点の例を示す図。
【図１０】実施例３に係る切離プロセスナビゲーションシステムの概略構成を示す図。
【図１１】（A）〜（C）は実施例３に係る患者固有切離プロセス推定部において実行される推定処理手順を示す図。
【図１２】実施例３に係るナビゲーション画面として表示される切離面と解剖学的参照点の例を示す図。
【図１３】新たに生成された事例データの例を示す図。
【図１４】新たに生成された事例データの例を示す図。
【発明を実施するための形態】
【００１４】
以下，図面に基づいて，本発明の実施例を説明する。なお，本発明は，後述する実施例に限定されるものではなく，その技術思想の範囲において，種々の変形が可能である。
【００１５】
（１）実施例１
最初に最も単純な装置構成を有する実施例について説明する。具体的には，患者固有の三次元医用画像データを与えると，標準的な切離部位，切離の進展方向，切離の深さ，切離の順序をナビゲーションしてくれる装置について説明する。
【００１６】
（１−１）装置構成
（１−１−１）全体構成
図１に，本実施例における切離プロセスナビゲーションシステム１００の概略構成を示す。切離プロセスナビゲーションシステム１００は，切離プロセス推定装置１１０，患者固有三次元医用画像データ記憶装置１２０，手術プロセス事例データベース１３０，表示装置１４０を有している。切離プロセスナビゲーションシステム１００は，医療機関内の端末を用いて構築しても良いし，医療機関内の端末からネットワーク経由でアクセスされるクラウドサーバとして構築しても良い。なお，ナビゲーションシステムをクラウドサーバ上で構成する場合，医療機関内の端末はクラウドサーバに対する入出力装置として使用される。
【００１７】
切離プロセス推定装置１１０は，いわゆるコンピュータによって構成される。すなわち，切離プロセス推定装置１１０は，主記憶装置，演算装置，制御装置，入出力装置によって構成される。切離プロセス推定装置１１０は，後述する各種の機能をプログラムの実行を通じて実現する。なお，機能の一部又は全てをハードウェアによって実現しても良い。切離プロセス推定装置１１０が実行する各種の機能については後述する。
【００１８】
患者固有三次元医用画像データ記憶装置１２０と手術プロセス事例データベース１３０は，それぞれ後述するデータを保存する記憶装置により構成される。本実施例の場合，記憶装置の記憶媒体には磁気ディスクを使用する。もっとも，その他の記憶媒体，例えば光ディスク，半導体メモリ，磁気テープなどを用いても良い。患者固有三次元医用画像データ記憶装置１２０と手術プロセス事例データベース１３０は，いずれも独立した記憶装置として実現しても良いが，その一部又は全部を１つの記憶装置の異なる記憶領域として実現しても良い。また，これらの記憶装置を切離プロセス推定装置１１０と同一の筐体内に配置しても良いし，ネットワーク経由で接続しても良い。ネットワークには，例えば専用線，インターネットなどが使用される。なお，接続形態は，有線接続でも無線接続でも構わない。
【００１９】
患者固有三次元医用画像データ記憶装置１２０は，患者固有の三次元医用画像データを記憶する記憶装置である。患者固有の三次元医用画像データには，例えばCT（Computed Tomography）画像データ，MRI（Magnetic Resonance Imaging）画像データ，PET（Positron Emission Tomography）画像データ，SPECT（Single Photon Emission Computed Tomography）画像データが含まれる。なお，三次元医用画像データは，これら全ての画像データである必要は無く，それらのうちの一つ以上であれば良い。
【００２０】
ここでの三次元医用画像データは，二次元断層画像の集合であり，ボクセルと呼ばれる単位正規格子の集合によって定義される。ボクセルは，二次元画像のピクセルに対応する。三次元医用画像データでは，三次元座標が決まると一つのボクセル値が定まる。ここでは，三次元座標(x, y, z)に対応するボクセル値をI (x, y, z) ＝｛…，（voxel）,…｝と表記する。図２に，三次元医用画像データのデータ構造を示す。左図は三次元医用画像データの外観イメージであり，右図は三次元医用画像データの一部を破断して示す内部構造である。右図に示すように，三次元医用画像データの内部には，ボクセルが隙間なく配置されている。
【００２１】
手術プロセス事例データベース１３０は，切離対象臓器の切離部位に応じて収集された手術プロセスの事例データを記憶する記憶装置である。事例データは，標準臓器について記録されている。標準臓器は，例えば肝臓，肺，泌尿器，呼吸器，脳その他である。手術プロセスは，切離面と切離の進展に関する情報とによって構成される。切離部位は，臓器から切離する部位をいい，例えば肝臓であればS1〜S8，肺であれば上葉，中葉，下葉等をいう。本実施例の場合，切離面とは，切離の最終段階で現れる臓器の断面をいう。切離面には，メスによる切離の進展に応じて逐次出現する複数の部分曲面を経て到達する。なお，部分曲面の形状は，メスによる切離の進展に応じて変化する。
【００２２】
切離プロセスとは，切離面に至るまでの切離に関連する情報である。例えばどの部位にメスを入れるか，メスをどの方向に進展させるか，進展中のメスの深さをどうするか，メスを入れる順序等に関する情報をいう。本実施例の場合，手術プロセス事例データベース１３０には，標準臓器に対応付けて切離面と切離プロセスが記憶されている。なお，切離面や切離プロセスは，標準臓器を表す三次元医用画像データの三次元座標に対応付けられている。標準臓器の解剖学的構造は既知である。このため，事例データを構成する各三次元座標の値I (x, y, z)は，医用画像が持つボクセル値voxelと，解剖学的構造ラベルのラベル値labelを用いて｛…，（voxel, label）,…｝で表される。ラベル値については後述する。
【００２３】
表示装置１４０は，切離プロセス推定装置１１０に接続されており，ユーザインタフェース画面の提供に用いられる。ユーザインタフェース画面には，例えば患者固有の三次元医用画像や切離プロセス推定装置１１０で推定された切離プロセスが表示される。表示装置１４０には，例えば液晶モニタ等のフラットディスプレイ装置が使用される。
【００２４】
（１−１−２）詳細構成
切離プロセス推定装置１１０の詳細構成を説明する。切離プロセス推定装置１１０は，プログラムの実行を通じて各種の機能を提供する。本実施例の場合，切離プロセス推定装置１１０は，標準切離プロセス生成部１１１，解剖学的参照点抽出部１１２，患者固有切離プロセス推定部１１３に対応する機能を提供する。
【００２５】
標準切離プロセス生成部１１１は，システムの利用者である医療従事者が予め指定した臓器及び切離部位に対応する事例データを手術プロセス事例データベース１３０から読み出し，標準切離面と標準切離プロセスPs(t)を生成する。パラメータｔは，切離の進展の具合又は切離順序の情報を意味するタイムスタンプを意味する。
【００２６】
標準切離プロセス生成部１１１は，手術プロセス事例データベース１３０に格納された個別の事例データを組み合わせて標準切離面及び標準切離プロセスPs(t)を生成する。本実施例における標準切離プロセス生成部１１１は，複数の事例データを重み付け演算し，標準切離面及び標準切離プロセスPs(t)を生成する。この際，標準切離プロセス生成部１１１は，重み付け演算で生成された標準臓器内の解剖学的参照点が，患者固有の三次元医用画像データから抽出された解剖学的参照点Paに最も近づく重みの組を決定し，当該重みの組を用いて算出された切離面と切離プロセスを「標準切離面」と「標準切離プロセス」として使用する。
【００２７】
本実施例では，以下に示すデータ構造を有する標準切離プロセスデータMatlasを使用する。標準切離プロセスデータMatlasは，頂点集合Vと要素集合Eを用いて以下のように表される。
Matlas＝（V，E）
Vは，標準臓器を表す三次元医用画像データを構成する各メッシュの頂点の集合であり，頂点ベクトルviを用いて以下のように表される。
V＝｛v0，v1，．．．,vn-1｝
頂点ベクトルviは，頂点座標(x,y,z)，タイムスタンプtime，解剖学的構造ラベルlabel，頂点の属性情報（isFreezed, isCutpath, isSurface）を用いて，以下のように表される。
vi＝（x, y, z, time, label, isFreezed, isCutpath, isSurface）
x, y, zは，対応する頂点の三次元位置を浮動小数で保存した値である。
timeは，対応する頂点を何番目に切離するかを示すタイムスタンプであり，例えば[0, n-1]の整数で与えられる。なお，切離されない頂点には，これらの整数値が付与されないか，これらの整数値以外の値が付与される。
labelは，解剖学的構造を示す整数のラベル値であり，例えば上葉には”0”, 中葉には”1”,下葉には”2”，動脈には”3”，静脈には”4”などが与えられる。
isFreezedは属性情報１であり，固定頂点には”1”が，自由頂点には”0”が与えられる。
isCutpathは属性情報２であり,切離面上の頂点には”1”が，それ以外の頂点には”0”が与えられる。
isSurfaceは属性情報３であり,臓器の表面上の頂点には”1”が，臓器の内部に位置する頂点には”0”が与えられる。
【００２８】
要素集合Eは，どの頂点によってメッシュ形式の最小要素が構成されるかを，整数からなる頂点の番号の組で与える。三角形メッシュの場合，要素集合Eは三つの頂点の組で表される。最小要素が四面体の場合，要素集合Eは，例えばE = [(0, 1, 2, 3), (0, 3, 6, 9), …, (p, q, r, s), …]のように四つの頂点の組で表される。
【００２９】
図３に，標準切離プロセス生成部１１１により生成される標準切離面１１と標準切離プロセスデータMatlasのイメージ図を示す。図３は，標準臓器１０である肺の右下葉を切除する例を表している。タイムスタンプｔ＝０，１，２，３に対応する４つの時点は，標準切離プロセスPs(0)，Ps(1)，Ps(2)，Ps(3)に対応する。タイムスタンプｔ＝０（図３（Ａ）参照）は，切離が開始される前の時点に対応し，これから生成する切離予定面を与える標準切離面１１と肺１０から切り離される部位（下葉）との関係を表している。図３の場合，標準切離面１１は平面で表しているが，これは理解を容易にするためであり，実際には自由曲面で定義される。
【００３０】
タイムスタンプｔ＝１，２，３（図３（Ｂ），図３（Ｃ），図３（Ｄ）参照）に対応するイメージ図はそれぞれ，頂点集合Vのうち同じタイムスタンプが付与された頂点同士を接続するようにメスで切り開いた場合の臓器の変形を表現している。図中の切り込み２１〜２３は，臓器表面のどの部位からメスを入れ，どの方向にメスを進展させるか，どの程度の深さまでメスを入れるか，メスをどの順番に入れるかといった情報を表現している。
【００３１】
解剖学的参照点抽出部１１２は，既存の領域抽出アルゴリズムを使用し，患者固有の三次元医用画像データから切離部位に存在する管状構造及び病変部を解剖学的参照点Paとして抽出する機能を提供する。例えば解剖学的参照点抽出部１１２は，患者固有の三次元医用画像データの輝度分布に基づいて肺，肝臓その他の解剖学的情報，管状構造（例えば血管，リンパ管），病変部（例えば腫瘍）等を抽出する。解剖学的参照点抽出部１１２は，抽出された解剖学的参照点Paに応じたラベル値を付し，患者固有の三次元医用画像データMpatientを生成する。
【００３２】
ここで，患者固有の三次元医用画像データMpatientは，前述のボクセル値I (x, y, z)に解剖学的構造ラベルのラベル値labelを付したI (x, y, z)＝｛…，（voxel, label）,…｝として表現される。患者個人の三次元医用画像データMpatientは，頂点集合V+と要素集合Eで表される。ただし，ここでの頂点集合V+を与えるベクトルデータはタイムスタンプ等を含まないため，頂点ベクトルv+iは，頂点座標(x,y,z)と解剖学的構造ラベルlabelによって以下のように表される。
v+i = (x, y, z, label)
【００３３】
患者固有切離プロセス推定部１１３は，標準切離面と標準切離プロセスデータMatlasを，患者固有の三次元医用画像データMpatientにマッチングし，患者固有の切離面及び切離プロセスデータM’を推定する機能を提供する。なお，マッチングの前処理として，患者固有切離プロセス推定部１１３は，(i) 撮像条件の違いによる患者固有の臓器の大きさの違いを補正するための拡大又は縮小処理と，(ii) 個体差に起因する患者固有の臓器の大きさや部分的な形状の差異と標準臓器の大きさや形状との違いを補正するひずみ補正と，(iii)前記処理の全て又は前記処理の組み合わせ又はいずれか一つを実行する。これにより，後続するマッチング処理の精度を高めることが可能になる。
【００３４】
次に，患者固有切離プロセス推定部１１３は，標準臓器を構成するボクセルの各頂点を患者固有の三次元医用画像データMpatientを構成するボクセルの各頂点に対応付けることにより，患者固有の切離面及び切離プロセスデータM’を推定する。ここでの標準切離面と標準切離プロセスデータMatlasは，重み付け演算で生成される標準臓器の解剖学的参照点が患者固有の解剖学的参照点Paに最も近づくように選択されているので，患者の手術に最適な切離面と切離プロセスデータM’を与えることになる。
【００３５】
患者固有切離プロセス推定部１１３は，患者固有の切離面及び切離プロセスデータM’の推定が終了すると，推定された切離面と切離プロセスデータM’に基づいてナビゲーション画面を生成し，表示装置１４０の画面上に表示する。ナビゲーション画面には，どの部位にメスを入れるか，メスをどの方向に進展させるか，進展中のメスの深さをどうするか，メスを入れる順序等が時系列に提示される。従って，医療従事者は，患者個人の三次元医用画像データMpatient以外には何も入力しなくても，患者個人に適した切離面と切離プロセスを確認することができる。
【００３６】
（１−２）処理動作
切離プロセスナビゲーションシステム１００の処理動作の概要を，図４を用いて説明する。
まず，切離プロセス推定装置１１０は，標準切離プロセス生成部１１１を使用し，標準臓器１０についての標準切離面１１と標準切離プロセスデータMatlasを計算する。前述したように，標準切離プロセスデータMatlasには，標準切離面１１に至る切離の進展に関する一連の情報が含まれている。図４（Ａ）では，標準切離面１１のみを表している。
【００３７】
次に，患者固有切離プロセス推定部１１３は，患者の臓器（肺２０）について計算された三次元医用画像データMpatientを解剖学的参照点抽出部１１２から取得し，標準切離プロセスデータMatlasとのマッチングを行う（図４（Ｂ）参照）。このマッチング処理の際，切離プロセス推定装置１１０は，標準切離プロセスデータMatlasのｎ個の頂点集合V＝｛v0，v1，…,vn-1｝を，患者固有の三次元医用画像データMpatientのｍ個の頂点集合V+＝[v+0, v+1,…, v+m-1]に位置合わせする。
【００３８】
vi ＝ (x, y, z, time, label, isFreezed, isCutpath, isSurface,…)
ただし，i = [0, n-1]
v+j ＝ (x’, y’, z’, label’)
ただし，j = [0, m-1]
患者固有の頂点集合V+に位置合わせした後の切離プロセスデータM’は，次式で表される。
M’＝ (x*, y*, z*, time, label, isFreezed, isCutpath, isSurface, …)
この結果，切離プロセス推定装置１１０は，図４（Ｃ）に示すように，患者の臓器２０についての患者固有の切離面３１を計算することができる。
【００３９】
図５及び図６に，ナビゲーション画面の概念例を示す。図５と図６は，図３及び図４の例とは異なり，肺２０の中葉を切離する場合について表している。図５は，ナビゲーション画面の初期画面である。図５には，患者固有の三次元医用画像データMpatientについて推定された切離面５０と，後述する切離プロセスにおいて参照される解剖学的参照点Paのうちの一部のPaを含む臓器内部の解剖学的構造を透過的に示している。なお，図５の例では，表示態様の一例として，臓器（この例では肺２０）から切り離される予定の部位の解剖学的構造のみを透過的に示しているが，残存予定の部位についてのみ又は臓器全体について解剖学的構造を透過的に表示することも可能である。この表示から，医療従事者は，臓器外部からは観察できない臓器内部の解剖学的構造，例えば動脈，静脈，腫瘍などの位置を把握することができる。ただし，この初期画面だけでは，どの部位からメスを入れればよいか，メスをどの方向に進展させればよいか，進展中のメスの深さをどうすればよいか，メスを入れる順序はどうかについての情報を得ることはできない。
【００４０】
患者固有切離プロセス推定部１１３は，図６（Ａ）〜（Ｃ）に示すナビゲーション画像を時間順に表示する。図６（Ａ）〜（Ｃ）は，時間軸上の一点に対応するもので，実際には，メスの進展に応じた部分曲面６１Ａ，６１Ｂや臓器の形状が連続的に変化するように表示される。図６（Ａ）は，肺２０を前方から見た図である。本図は，太線で示す曲線６０Ａに沿うように臓器に挿入したメスの刃を進展することで部分曲面６１Ａが出現した状態を表している。すなわち，曲線６０Ａはメスを入れる臓器表面の位置を示している。なお，ナビゲーション画面上では，切離箇所の視認を容易にする目的で曲線６０Ａに特定の色が付されている。この曲線６０Ａに対応する頂点の三次元医用画像データには同じタイムスタンプが付与されている。図中の矢印は，メスを進展する方向である。図６（Ａ）の表示内容より，メスは，解剖学的参照点Paである動脈が見える深さまで入れることが分かる。
【００４１】
図６（Ｂ）の曲線６０Ｂは，２番目のメスを入れる部位を示す。２番目のメスは，肺２０の後方側から切り進めるためである。図６（Ｂ）においても，メスを入れる臓器表面の位置を容易にする目的で曲線６０Ｂには特定の色が付されている。図６（Ｂ）の表示を確認した医療従事者は，２番目のメスは肺の後方から曲線６０Ｂに沿って進展すべきことを理解できる。また，メスは，解剖学的参照点Paである静脈が見える深さまで入れることが示される。２番目のメスの進展により部分曲面６１Ｂが出現する。図６（Ｃ）は，２番目のメスによる切離の進展後になされた更なる切離によって，切離面５０上の血管断面が新たに出現する様子を示している。なお，１番目のメスによる切離の進展により現れる部分曲面６１Ａと２番目のメスの切離の進展により現れる部分曲面６１Ｂとをお椀状に繋げることで，２つの部分曲面６１Ａ及び６１Ｂで挟まれた部分が臓器から切り離される。
【００４２】
図６（Ｃ）では，切離面５０の表面に出現する静脈等の解剖学的構造が示される他，臓器（この例では肺２０）から切り離される部位の血管等の解剖学的構造が透過的に示されている。これらの表示により，医療従事者は，臓器側に残存する部位に出現する血管や切り離される側の部位に含まれる血管の断面など，手術の進行に必要な情報を把握することができる。さらに，図６（Ｃ）の表示によれば，実際の臓器では外部から観察されないような，切り離される部位の内部の解剖学的構造を透過的に確認できるため，切除すべき腫瘍などが切除できたかどうかを確認することも可能である。なお，図６（Ａ）〜（Ｃ）においても，前述の図５と同様に，残存予定の部位についてのみ又は臓器全体について解剖学的構造を透過的に表示することも可能である。
【００４３】
ところで，患者固有切離プロセス推定部１１３は，メスが進展する曲線６０Ａ，６０Ｂと患者固有の三次元医用画像データMpatientの位置関係を把握している。このため，ナビゲーション画面には，メスの到達した深さや曲線６０Ａ，６０Ｂに沿ったメスの進展に応じて患者固有の臓器（肺２０）の形状を変形させるように表示する。ここでの臓器（肺２０）の変形には，患者固有の三次元医用画像データMpatientとして与えられた各メッシュの頂点集合V+の情報を利用できるため，ポリゴンを使用する特許文献２に比して計算量が小さく済む。このため，部分曲面６１Ａ，６１Ｂに現れる内部構造や形状の変化をリアルタイムで表示することができる。
【００４４】
（１−３）効果
前述した切離プロセスナビゲーションシステム１００を用いることにより，医療従事者は，患者固有の三次元医用画像データを入力するだけで，患者の臓器（肺２０）に適した切離面５０及び切離プロセスをナビゲーション画面の提示を受けることができる。すなわち，利用者である医療従事者による切離点の逐次的な指定入力が無くても切離面５０及び切離プロセスを自動的に推定することができる。この結果，医療従事者は，教科書的な情報に基づいた手術プロセス，特にどの部位にメスを入れ，メスをどの方向に進展させ，進展中のメスの深さをどうするか，メスを入れる順序をどうするかといった手順を自動的に確認できる。また，本システムを用いることにより，切離の進展に伴って出現すると予想される血管等の解剖学的構造や臓器の変形も，切離の進展に伴いながら可視化することができる。その際，切離面に直接現れる解剖学的構造は勿論，医療従事者の選択等により，臓器内部や切り離される部位の内部の解剖学的構造も透過的に可視化することもできる。その結果，医療従事者は，時系列的な可視化結果を参照して手術を実施することができる。
【００４５】
（２）実施例２
（２−１）装置構成
図７に，本実施例における切離プロセスナビゲーションシステム２００の概略構成を示す。図７には，図１との対応部分に同一符号を付して示している。切離プロセスナビゲーションシステム２００は，切離プロセス推定装置１１０Ａ，患者固有三次元医用画像データ記憶装置１２０，手術プロセス事例データベース１３０，表示装置１４０を有している。
【００４６】
本実施例の切離プロセス推定装置１１０Ａは，切離点受付部１１４Ａを有する点で実施例１の切離プロセス推定装置１１０（図１）と相違する。切離点受付部１１４Ａは，表示装置１４０の画面上に表示された患者固有の三次元医用画像に対する，医療従事者による１つ又は複数の切離点Pkの入力を受け付ける機能を提供する。この機能は，最終的に推定される切離面と切離プロセスを，医療従事者のイメージに近づける目的で用意されている。
【００４７】
本実施例の場合，切離点Pkの入力順序には意味がない。切離点Pkの入力は，三次元医用画像の表面上に位置決めされたポインタの位置入力を通じて実行される。切離点Pkの入力数には制限がない。従って，入力数は１つでもよい。
【００４８】
本実施例における標準切離プロセス生成部１１１は，手術プロセス事例データベース１３０に格納された個別の事例データを組み合わせて標準切離面１１及び標準切離プロセスを生成する際，患者固有の三次元医用画像データから抽出された解剖学的参照点Paとユーザーから受け付けた切離点Pkとに最も近似する組み合わせが得られるように組合せ対象である事例データの重みづけを行う。
【００４９】
本実施例における患者固有切離プロセス推定部１１３Ａは，医療従事者によって入力された切離点Pkの位置情報も考慮して，患者固有の切離面と切離プロセスを推定する。例えば患者固有切離プロセス推定部１１３Ａは，患者固有の切離面が切離点Pk＝｛p0,p1,…,pn-1｝の近傍を通るように，標準切離面をマッチングして求まる患者固有の切離面をリアルタイムで変形する機能を備えている。
【００５０】
（２−２）処理動作
切離プロセスナビゲーションシステム２００の処理動作の概要を，図４と図８を用いて説明する。
まず，患者固有切離プロセス推定部１１３Ａは，標準切離プロセス生成部１１１を使用し，標準臓器１０についての標準切離面１１（図４（Ａ）参照）と標準切離プロセスデータMatlasを計算する。この動作は実施例１と同じである。すなわち，図４（Ｃ）に示すように，標準切離面１１と標準切離プロセスデータMatlasが，患者固有の三次元医用画像データMpatientに適用され，患者固有の切離面３１と切離プロセスデータM’が算出される。図８（Ｂ）は，この状態を表している。
【００５１】
本実施例の場合，医療従事者は，自身の判断でメスが通過する位置を規定する切離点Pkを，切離点受付部１１１Ａを通じて入力している（図８（Ａ）参照）。このため，患者固有切離プロセス推定部１１３Ａは，これらの切離点Pkを，前述の患者固有の切離面３１と切離プロセスデータM’に対する制約条件として与え，患者固有の切離面３１と切離プロセスデータM’が切離点Pkの近傍を通るように修正を加える。図８（Ａ）の場合，切離点Pkは３つ入力されている。
【００５２】
患者固有切離プロセス推定部１１３Ａは，以下に示す計算式を使用し，修正処理を実行する。まず，患者固有切離プロセス推定部１１３Ａは，修正切離面４１上に位置するメッシュの頂点の集合（式中ではVの頭に＾を付けて示す。）を，次式(1)を用いて計算する。
【００５３】
【数１】
2018030015.tif 000003
【００５４】
ここで，Vは，患者固有の切離面３１上に位置するメッシュの頂点の集合であり，V＝｛v0, v1, …, vn-1｝で与えられる。vi（i＝0，1，…，n-1）は位置座標の初期位置であり，vi＾（式中では，vの頭に＾を付けて示す。）は，最小二乗法の解を与える位置座標である。なお，L(-)は，ラプラシアンである。また，pi（i＝0，1，…，n-1）は，ｉ番目の頂点についての位置制約である。N(vi)（i＝0，1，…，n-1）は，ｉ番目の頂点の近傍に位置する頂点の集合である。ここで，ｉ番目の頂点におけるラプラシアンベクトルは，次式(2)に示すように，重みwijを用いて計算することができる。
【００５５】
【数２】
2018030015.tif 000004
【００５６】
この計算手法の特徴の１つは，患者固有の切離面３１上に位置するメッシュの頂点の情報しか用いない点である。このため，標準モデル内の全てのポリゴンを計算する必要がある特許文献２に比して，必要計算量は非常に小さくなる。その結果，制約条件として与えられた３つの切離点Pkを通る修正切離面４１（図８（Ｃ）参照）をリアルタイムで計算することができる。なお，本実施例において，修正切離面４１を最小化問題として解いているのは，３つの切離点Pkを全て通る切離面が存在しない可能性があるためである。図９に，ナビゲーション画面の概念例を示す。図９は，図８とは異なり，肺の中葉を切離する場合について表している。図９では，修正切離面４１の縁部を破線で示している。勿論，図９の場合も，修正切離面４１に直接現れる解剖学的構造だけでなく，医療従事者の選択等により，臓器内部や切り離される部位の内部の解剖学的構造を透過的に可視化してもよい。
【００５７】
（２−３）効果
前述した切離プロセスナビゲーションシステム２００を用いることにより，実施例１の効果に加え，標準切離面と標準切離プロセスを適用して得られる初期の切り込み２１と切離プロセスを，医療従事者の指定した切離点Pkを通るように修正することができる。なお，修正処理の際に実行される計算では，患者固有の切離面３１上に位置するメッシュの頂点の情報しか用いないため計算負荷が小さく，リアルタイムで修正切離面４１と修正切離プロセスデータＭfinalを計算することができる。
【００５８】
（３）実施例３
（３−１）装置構成
図１０に，本実施例における切離プロセスナビゲーションシステム３００の概略構成を示す。図１０には，図７との対応部分に同一符号を付して示している。切離プロセスナビゲーションシステム３００の基本構成は，実施例２の切離プロセスナビゲーションシステム２００と同じである。
【００５９】
本実施例の特徴部分は，(1)切離点受付部１１４Ｂが切離点Pkの入力順序も患者固有切離プロセス推定部１１３Ｂに与えること，(2)患者固有切離プロセス推定部１１３Ｂが入力された切離点Pkの位置と入力順序を考慮して患者に適した修正切離面と修正切離プロセスを推定すること，(3)患者固有切離プロセス推定部１１３Ｂが入力された切離点Pkの位置と入力順序を，標準臓器を構成するメッシュの頂点に対応付けて手術プロセス事例データベース１３０に記録することの３つである。
【００６０】
（３−２）処理動作
以下では，前述した特徴部分に関連する処理動作を説明する。
まず，１つ目の特徴部分を説明する。本実施例における切離点受付部１１４Ｂは，医療従事者による切離点Pkの入力と同時にその入力順序を特定し，切離点Pk(t)として患者固有切離プロセス推定部１１３Ｂに出力する。図１１に，切離点Pk(t)の入力例を示す。図１１（Ａ）では，３つの切離点Pk(0)〜Pk(2)が入力されている。Pk(0)が１番目に入力された切離点の位置，Pk(1)が２番目に入力された切離点の位置，Pk(2)が３番目に入力された切離点の位置をそれぞれ示している。
【００６１】
次に，２つ目の特徴部分を説明する。本実施例における患者固有切離プロセス推定部１１３Ｂは，切離点Pk(0)〜Pk(2)の入力順序と標準切離プロセスにおける切離の展開（メスで臓器を切離する順番）が一致するか判定し，一致する場合には，実施例２と同じ手法で生成された修正切離面５１と修正切離プロセスデータMfinalを計算する（図１１（Ｂ），（Ｃ）参照）。これに対して，切離点Pk(0)〜Pk(2)の入力順序と標準切離プロセスにおける切離の展開順序が一致しない場合，患者固有切離プロセス推定部１１３Ｂは，例えば切離点Pk(0)〜Pk(2)の入力順序の情報を標準切離プロセス生成部１１１に与え，切離点Pk(0)〜Pk(2)の入力順序に一致する事例データを選択的に用いて標準切離面と標準切離プロセスデータを再計算する（図１１（Ｂ）参照）。
【００６２】
その後，再計算により得られた標準切離面と標準切離プロセスデータMatlasを切離点Pk(0)〜Pk(2)の位置に応じて修正し，修正切離面５１と修正切離プロセスデータMfinalを生成する（図１１（Ｃ）参照）。図１２に，本実施例におけるナビゲーション画面の例を示す。図１２も，前述の実施例と同じく，肺の中葉を切離する場合について表している。本実施例の場合，医療従事者による切離点Pk(0)〜Pk(3)の入力順序まで一致する修正切離面５１と修正切離プロセスデータMfinalが自動的に推定され，画面上に提示される。勿論，図１２の場合も，修正切離面５１に直接現れる解剖学的構造だけでなく，医療従事者の選択等により，臓器内部や切り離される部位の内部の解剖学的構造を透過的に可視化してもよい。
【００６３】
３つ目の特徴部分を説明する。この処理は，医療従事者によって入力された切離点Pk(t)の位置と入力順序の情報を，標準臓器を構成するメッシュの頂点に対応付けて保存する処理に当たる。この処理に際し，患者固有切離プロセス推定部１１３Ｂは，患者固有切離プロセス推定部１１３Ｂで使用された患者固有の三次元医用画像データを拡大又は縮小して標準臓器とのマッチング処理を実行し，マッチングした切離点Pk(ｔ)の位置とタイムスタンプを，標準臓器を構成するメッシュの頂点に割り当てる。図１３及び図１４に，新たに登録された事例データの例を示す。図１３は，右下葉切除に対応する事例データであり，図１４は左下葉切除に対応する事例データである。
【００６４】
（３−３）効果
前述した切離プロセスナビゲーションシステム３００を用いることにより，事例データの蓄積が進行し，標準切離面及び標準切離プロセスの推定精度を高めることができる。また，医療従事者の考える切離順序に近い切離面と切離プロセスを推定結果として提示することができる。また，本システムを用いることにより，それぞれの臓器における代表的な切離パターン，例えば図１３に示す右下葉切除や図１４に示す左下葉切除などをテンプレートとして標準切離プロセスデータとして保存しておくことで，従来までは紙でしか記述できなかった外科手術書（いわゆる「アトラス」）を電子的外科手術書として構築することができる。勿論，図１３や図１４の場合も，切離面に直接現れる解剖学的構造だけでなく，医療従事者の選択等により，臓器内部や切り離される部位の内部の解剖学的構造を透過的に可視化してもよい。
【００６５】
更に，これら標準テンプレートに当たる種々の標準切離プロセスデータが手術プロセス事例データベース１３０に予め格納されていれば，当該標準切離プロセスデータを目的関数に基づいて患者個人の三次元医用画像データに位置合わせることで標準的な切離方法を再現することができる。すなわち，新たな患者について用意された三次元医用画像データ（臓器の外形，腫瘍，血管などの解剖学的構造）に標準的な切離方法をカスタマイズ（個人化）して適用し，最終的に患者固有の最適な切離方法を可視化して再現できる。
【符号の説明】
【００６６】
１０…標準臓器，１１…標準切離面，２０…患者の臓器，２１，２２，２３…切り込み，３１…患者固有の切離面，４１，５１…修正切離面，５０…患者固有の三次元医療画像データに適用された切離面（標準切離面），６０Ａ，６０Ｂ…曲線（臓器表面の切離する部位），６１Ａ，６１Ｂ…部分曲面（メスによる切離により現れる面），１００，２００，３００…切離プロセスナビゲーションシステム，１１０，１１０Ａ，１１０Ｂ…切離プロセス推定装置，１１１…標準切離プロセス生成部，１１２…解剖学的参照点抽出部，１１３，１１３Ａ，１１３Ｂ…患者固有切離プロセス推定部，１１４Ａ，１１４Ｂ…切離点受付部，１２０…患者固有三次元医用画像データ記憶装置，１３０…手術プロセス事例データベース，１４０…表示装置，Pa…解剖学的参照点，Pk，Pk(t)…切離点，Ps(t)…標準切離プロセス，Matlas…標準切離プロセスデータ，Mpatient…患者固有の三次元医用画像データ，M’…患者に最適な切離プロセスデータ，Mfinal…M’を修正した後の切離プロセスデータ（修正切離プロセスデータ）
【図１】
2018030015.tif 000005
【図２】
2018030015.tif 000006
【図３】
2018030015.tif 000007
【図４】
2018030015.tif 000008
【図５】
2018030015.tif 000009
【図６】
2018030015.tif 000010
【図７】
2018030015.tif 000011
【図８】
2018030015.tif 000012
【図９】
2018030015.tif 000013
【図１０】
2018030015.tif 000014
【図１１】
2018030015.tif 000015
【図１２】
2018030015.tif 000016
【図１３】
2018030015.tif 000017
【図１４】
2018030015.tif 000018
【手続補正書】
【提出日】平成31年2月6日(2019.2.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
切離対象臓器の切離部位に応じた切離面と，切離の進展に関する情報を与える切離プロセスとを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離面及び前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離面及び切離プロセスを推定する患者固有切離プロセス推定部と
を有する切離プロセス推定装置。
【請求項２】
請求項１に記載の切離プロセス推定装置において，
表示画面上に表示された患者固有の三次元医用画像に対する１つ又は複数の切離点の入力を受け付ける切離点受付部
を更に有する切離プロセス推定装置。
【請求項３】
請求項１に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記マッチングの前処理として，(i) 撮像条件の違いによる前記患者固有の三次元医用画像データに撮像された臓器の大きさの違いを補正するための拡大又は縮小処理と，(ii) 患者固有の前記臓器の大きさと標準臓器の大きさとの違いを補正するひずみ補正処理と，(iii)前記処理の全て又はいずれか一つを実行する
ことを特徴とする切離プロセス推定装置。
【請求項４】
請求項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記標準切離プロセスと，前記患者固有の三次元医用画像データから抽出された解剖学的参照点と，ユーザーから受け付けた前記切離点とに基づいて前記患者固有の切離プロセスを推定する
ことを特徴とする切離プロセス推定装置。
【請求項５】
請求項４に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，ユーザーにより指定された１つ又は複数の前記切離点の近くを通る前記切離面を，前記切離点の位置を制約条件とする最小化問題の解として計算する
ことを特徴とする切離プロセス推定装置。
【請求項６】
請求項２に記載の切離プロセス推定装置において，
前記標準切離プロセス生成部は，前記手術プロセス事例データベースに格納された個別の前記事例データを組み合わせて前記標準切離面及び標準切離プロセスを生成する際，前記患者固有の三次元医用画像データから抽出された前記解剖学的参照点とユーザーから受け付けた前記切離点とに近似する組み合わせが得られるように組合せ対象である前記事例データの重みづけを行う
ことを特徴とする切離プロセス推定装置。
【請求項７】
請求項１に記載の切離プロセス推定装置において，
前記切離面は，個々の切離の進展に応じて生じる部分曲面から構成され，
前記切離プロセスは，前記部分曲面に対応する切離の順序を与える
ことを特徴とする切離プロセス推定装置。
【請求項８】
請求項４に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記切離点のいずれかを通る部分曲面を，前記標準切離面及び前記標準切離プロセスに基づいて推定する
ことを特徴とする切離プロセス推定装置。
【請求項９】
請求項８に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記解剖学的参照点の解剖学的構造を用いて前記部分曲面を推定する
ことを特徴とする切離プロセス推定装置。
【請求項１０】
請求項２に記載の切離プロセス推定装置において，
前記切離点受付部は，１つ又は複数の前記切離点の入力を受け付けると同時に，入力した切離点の切離順序を受け付ける
ことを特徴とする切離プロセス推定装置。
【請求項１１】
請求項１０に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記患者固有の三次元医用画像データに対して入力された１つ又は複数の前記切離点の位置と入力順序を，標準臓器を構成するメッシュの頂点に対応付けて前記手術プロセス事例データベースに記録する
ことを特徴とする切離プロセス推定装置。
【請求項１２】
請求項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記標準切離面を，ユーザーが指定した前記切離点に対応する前記患者固有の三次元医用画像データの頂点情報に対応付ける
ことを特徴とする切離プロセス推定装置。
【請求項１３】
請求項２に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，前記患者固有の切離プロセスとユーザーが指定した前記切離点に対応する前記患者固有の三次元医用画像の頂点情報を標準臓器の頂点情報に対応付ける
ことを特徴とする切離プロセス推定装置。
【請求項１４】
切離対象臓器の切離部位に応じた切離面と，切離の進展に関する情報を与える切離プロセスとを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離面及び前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離面及び切離プロセスを推定する患者固有切離プロセス推定部と
を有し，
前記切離の進展に関する情報は，前記切離対象臓器を表現するメッシュの頂点の集合Vと要素集合Eとを用いて表され，
前記集合Vは，各頂点に付与された複数の情報で構成される頂点ベクトルviにより，
V＝｛v0，v1，．．．,vn-1｝
として表され，
前記頂点ベクトルviは，各頂点の情報を与える頂点座標(x,y,z)，タイムスタンプ(time)，解剖学的構造ラベル(label)，第１の属性情報(isFreezed),第２の属性情報(isCutpath),第３の属性情報(isSurface)を用いて，
vi＝（x, y, z, time, label, isFreezed, isCutpath, isSurface）
と表され，
タイムスタンプ(time)は，対応する頂点が何番目に切離されるかを示し，
解剖学的構造ラベル(label)は，解剖学上の構造を示す値であり，
第１の属性情報(isFreezed)は，対応する頂点が固定点か自由点かを示し，
第２の属性情報(isCutpath)は，対応する頂点が切離面上にあるか否かを示し，
第３の属性情報(isSurface)は，対応する頂点が前記切離対象臓器の表面上にあるか内部にあるかを示し、
前記要素集合Eは，前記メッシュを構成する個々の要素を与える頂点の組み合わせの集合である
切離プロセス推定装置。
【請求項１５】
切離対象臓器の切離部位に応じた切離面と，切離の進展に関する情報を与える切離プロセスとを記述した手術プロセスの事例データを記憶する手術プロセス事例データベースと，
ユーザーにより指定された切離部位に応じた事例データを前記手術プロセス事例データベースから読み出し，読み出された複数の事例データに基づいて標準切離面及び標準切離プロセスを生成する標準切離プロセス生成部と，
解剖学的参照点を患者固有の三次元医用画像データから抽出する解剖学的参照点抽出部と，
前記標準切離プロセスを，前記患者固有の三次元医用画像データにマッチングし，患者固有の切離プロセスを推定する患者固有切離プロセス推定部と，
前記患者固有切離プロセス推定部において推定された前記患者固有の切離プロセスを表示する表示装置と
を有する切離プロセスナビゲーションシステム。
【請求項１６】
請求項１に記載の切離プロセス推定装置において，
前記患者固有切離プロセス推定部は，推定された前記患者固有の切離プロセスの進展に伴って，前記患者固有の三次元医用画像に重ねるように前記解剖学的参照点の一部又は全部を透過的に表示する
ことを特徴とする切離プロセス推定装置。
【請求項１７】
請求項１５に記載の切離プロセスナビゲーションシステムにおいて，
前記表示装置は，ユーザーが患者固有の１つ又は複数の切離点を指定した場合に，前記切離点を制約条件とする最適な切離面と切離プロセスをユーザーに提示する
ことを特徴とする切離プロセスナビゲーションシステム。
【請求項１８】
請求項１５に記載の切離プロセスナビゲーションシステムにおいて，
前記表示装置は，ユーザーが患者固有の１つ又は複数の切離点と前記切離点それぞれの入力順序を指定した場合に，前記切離点を制約条件とする最適な切離面と前記切離プロセスをユーザーに提示する
ことを特徴とする切離プロセスナビゲーションシステム。
【国際調査報告】
2018030015.tif 000019
2018030015.tif 000020
2018030015.tif 000021
2018030015.tif 000022