(57)【要約】遠隔手術および他の用途のためのロボットおよび／または測定デバイス（１０）、システム、および方法は、システムユーザ（１８）が、測定されている組織および他の構造を操作することを可能にするように、ツール（２６）に動作可能に連結された入力デバイス（１６）を採用する。システムは、立体画像からの３次元位置情報を利用し得る。２つ以上の離散点（２４２、２４４）を、直線または湾曲構造に沿った累積長、面積測定、体積測定等を提供するように、３次元内で指定されることができる。離散点は、単一の手術ツール（２４０）によって、または２つ以上の手術ツールを分離する距離によって、識別され得、ユーザは、随意で、構造に沿って一対のツールを「手を交互に動かし」進めることによって、立体画像捕捉デバイスの視野より長い構造を測定する。
2012529970.tif 000002
【特許請求の範囲】
【請求項１】
組織を測定する方法であって、
前記組織の画像を取得し、対応する画像データを生成することと、
第１のロボットツールで第１の組織場所を示すことと、
前記組織の画像上において前記第１の場所に第１のグラフィカルインジケータを重ねることと、
前記画像データを使用して、前記第１のグラフィカルインジケータと第２の組織場所との間の測定を生成することと
を含む、方法。
【請求項２】
前記組織の画像は、立体ディスプレイ上に示される左右の立体画像を備え、前記第１のツールは、立体画像を参照してシステムユーザによって前記第１の組織場所に誘導され、前記第１のツールおよび前記ディスプレイは、遠隔手術システムに含まれ、前記方法は、前記第１の場所および前記第２の場所が係合されるときに、前記ユーザによって、少なくとも１つの組織指定コマンドを入力することをさらに含む、請求項１に記載の方法。
【請求項３】
前記システムは、立体撮像データを前記立体ディスプレイに伝送する、立体画像捕捉デバイスを含み、前記グラフィカルインジケータは、前記組織の立体画像上に重ねられた３次元インジケータを備え、前記３次元インジケータは、３次元で前記第１の場所と一致して見え、前記システムは、前記第１のツールの前記立体撮像データを使用して、前記重ねられたインジケータの前記第１の場所を決定する、請求項２に記載の方法。
【請求項４】
前記第１のツールは、前記第１の組織場所を示し、前記第１のツールは、前記第２の組織場所も示し、前記第１の組織場所および前記第２の組織場所は、連続的に示される、請求項２に記載の方法。
【請求項５】
第２のロボットツールが、前記第２の組織場所を示し、前記第１の組織場所および前記第２の組織場所は、同時に示される、請求項２に記載の方法。
【請求項６】
前記画像は、前記第１のツールを含む複数のロボットツールを包含し、前記方法は、前記画像を使用して前記第１のツールを前記第１の組織場所に誘導する間、前記第１のツールと一致する表示の上にグラフィカルツール測定マーカを重ねることをさらに含む、請求項１に記載の方法。
【請求項７】
前記第１のツールを前記第１の場所に誘導する間、前記第１の場所および前記第２の場所の間に延在する移動線を重ねることをさらに含む、請求項６に記載の方法。
【請求項８】
少なくとも１つの追加の組織場所をロボット制御で示すことであって、前記測定は、連続的な一対の組織場所の間の３次元オフセット距離を含む、ことと、複数のオフセット距離の累計を決定することとをさらに含む、請求項１に記載の方法。
【請求項９】
前記第１のツールは、前記第１の組織場所で前記組織を把持して操作し、前記方法は、前記第１のツールと第２のロボットツールとを用いて、前記ツールのジョーで前記場所における組織を把持することによって、複数の追加の組織場所を交互に係合することと、前記把持した組織に沿って手を交互に動かした長さを測定するために、前記場所の間の距離を合計することとをさらに含む、請求項１に記載の方法。
【請求項１０】
囲まれた領域を規定する複数の追加の組織場所を示すことをさらに含み、前記測定は、面積測定を含む、請求項１に記載の方法。
【請求項１１】
前記第１のツールで前記第１の組織場所を触診することをさらに含む、請求項１に記載の方法。
【請求項１２】
前記ツールは、前記第１の組織場所を示すために、前記組織を操作し、前記組織を測定構成に移動させる、請求項１に記載の方法。
【請求項１３】
前記第１の組織場所は、前記第１の場所に向けて前記第１のツールを移動させ、組織表面の立体画像データを使用して、前記組織場所を、前記ツールから前記ツールに隣接する前記組織表面に素早く動かすことによって示される、請求項１に記載の方法。
【請求項１４】
前記組織は、生理学的に動いている組織を含み、前記画像は、前記第１のツールが前記第１の組織場所を示している間に取得された前記動いている組織の静止立体画像を含み、前記第２の組織場所は、前記第２の組織場所を示すために、前記静止立体画像上に重ねられた３次元グラフィカルインジケータを位置付けることによって示される、請求項１に記載の方法。
【請求項１５】
組織を測定するためのロボットシステムであって、
手術部位に向けて配向可能な画像捕捉デバイスであって、前記手術部位における前記組織の画像に対応する画像データを生成するように適合されている画像捕捉デバイスと、
前記画像をシステムユーザに示すために、前記画像捕捉デバイスに連結されたディスプレイと、
第１のロボットツールと、
前記第１のツールによって示される組織場所を指定するための入力と、
プロセッサと
を備え、
前記プロセッサは、前記入力を前記ディスプレイに連結し、第１の指定組織場所において、前記組織の前記画像の上に第１のグラフィカルインジケータを重ね、前記画像を使用して、前記第１のグラフィカルインジケータと第２の組織場所との間の測定を決定すし、
前記プロセッサは、前記入力を前記ディスプレイに連結し、前記第２の組織場所および追加の組織場所を示す追加の入力指定コマンドを受信し、連続的な複数対の組織場所の間の３次元オフセット距離を決定し、かつ、結果として生じる累積測定を前記画像の上に重ねるように適合されている、
システム。
【請求項１６】
前記画像捕捉デバイスは、立体画像捕捉デバイスを備え、前記ディスプレイは、立体ディスプレイを備え、前記システムは、前記ロボットツールに連結されたマスタコントローラをさらに備え、前記マスタコントローラは、システムユーザからの移動コマンドを受信し、前記ディスプレイ上に示された左右の立体画像を参照して前記第１のツールを前記第１の組織場所に誘導し、前記プロセッサは、前記ユーザが前記第１のツールを前記第１の組織場所に誘導する間、前記第１のツールと一致する画像の上にグラフィカルツール測定マーカを重ねる、請求項１５に記載のシステム。
【請求項１７】
前記プロセッサは、前記ユーザから連続的に組織指定コマンドを受信し、前記第１のツールを用いた前記第２の組織場所の指示を促進するように構成されている、請求項１６に記載のシステム。
【請求項１８】
前記プロセッサは、前記ユーザから組織指定コマンドを受信し、前記第１のツールで前記第１の組織場所を示し、かつ、第２のロボットツールで前記第２の組織場所を同時に示すように構成されている、請求項１６に記載のシステム。
【請求項１９】
前記プロセッサは、前記入力を前記ディスプレイに連結し、前記ユーザが前記第１のツールを前記第１の組織場所に誘導している間、前記第１の場所と前記第２の場所との間に延在する移動線を重ねる、請求項１６に記載のシステム。
【請求項２０】
前記プロセッサは、前記測定が、前記組織画像の上に重ねられ、かつ前記線から分離されて表示されるように、オフセット表示場所を決定するように構成されている、請求項１９に記載のシステム。
【請求項２１】
前記第１のツールおよび前記第２のツールは、それぞれ、ジョーを備え、前記組織指定入力は、前記ジョーに対するジョー関節動作入力を含み、前記プロセッサは、前記組織に沿った手を交互に動かした長さの測定における複数のオフセット距離を合計することによって、前記複数のオフセット距離を測定するよう構成されている、請求項１５に記載のシステム。
【請求項２２】
前記プロセッサは、前記入力を前記ディスプレイに連結し、囲まれた領域を規定するよう追加の入力指定コマンドを受信し、前記測定は、面積測定を含む、請求項１５に記載のシステム。
【請求項２３】
前記組織場所は、領域の境界を定める離散場所を含み、各組織場所は、関連付けられた指定コマンドを有する、請求項１５に記載のシステム。
【請求項２４】
前記画像捕捉デバイスは、立体画像捕捉デバイスを備え、前記プロセッサは、前記画像データに応答して、組織表面の３次元場所を決定し、前記プロセッサは、前記グラフィカルインジケータを、前記第１のツールから前記組織表面に素早く動かすことによって、前記第１の組織場所を指定する、請求項１５に記載のシステム。
【請求項２５】
前記組織は、生理学的に動いている組織を含み、前記画像は、前記動いている組織の静止立体画像を含み、前記システムは、前記プロセッサによって前記ディスプレイに連結された３次元入力デバイスをさらに備え、前記静止立体画像上に重ねられる３次元グラフィカルインジケータが、入力デバイスを使用して位置付けられることにより、前記第２の組織場所を示す、請求項１５に記載のシステム。
【請求項２６】
生理学的に動いている組織を測定するためのロボットシステムであって、
手術部位に向けて配向可能な立体画像捕捉デバイスであって、使用において、前記手術部位における前記組織の画像に対応するビデオ画像データを生成する画像捕捉デバイスと、
前記画像をシステムユーザに示すために、前記画像捕捉デバイスに連結されたディスプレイと、
組織場所を指定するための入力と、
プロセッサと
を備え、
前記プロセッサは、前記入力を前記ディスプレイに連結し、第１の指定組織場所が指定された場合に、前記組織の停止立体画像の上に重ねられた３次元グラフィカルインジケータを位置決めし、かつ、前記グラフィカルインジケータと前記第１の組織場所との間の測定を決定する、
システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、概して、改良型ロボットおよび／または測定デバイス、システム、および方法に関する。例示的実施形態は、長さ測定、面積測定、体積測定等を取得するように、組織（または他の構造）に沿った離散３次元（３Ｄ）点場所、連続３Ｄ輪郭、および他の３Ｄ構造情報を入力および指定するために、立体画像処理とともにロボットツールの遠隔操作の組み合わせを利用する、ロボット手術システムを提供する。
【背景技術】
【０００２】
低侵襲手術技法は、診断または外科的手技中に損傷される外部組織の量を低減し、それにより、患者の回復時間、不快感、および付随組織損傷を低減することを目的としている。結果として、低侵襲手術技法を使用して、標準的な手術の入院の平均的長さが有意に短縮され得る。また、患者の回復時間、患者の不快感、手術の副作用、および仕事を休む時間も、低侵襲手術で低減され得る。
【０００３】
内視鏡検査が、低侵襲手術の周知の形態であり、内視鏡検査の一般的な形態は、腹腔の内側の低侵襲検査および手術である、腹腔鏡検査である。標準的な腹腔鏡手術では、患者の腹部がガスで吹送され、腹腔鏡器具用の進入ポートを提供するように、カニューレスリーブが小（約１／２インチ以下）切開を通過させられる。
【０００４】
腹腔鏡手術器具は、概して、腹腔鏡または内視鏡（手術野を視認するため）と、作業ツールとを含む。作業ツールは、各ツールの作業端またはエンドエフェクタが、細長いシャフトによって、そのハンドルから分離されていることを除いて、従来の切開手術で使用されるものと同様である。手術器具のエンドエフェクタまたは作業部は、組織を操作または治療することができ、（例えば）クランプ、把持装置、鋏、吻合器、画像捕捉レンズ、または針ホルダを含み得る。
【０００５】
外科的手技を行うために、外科医は、作業ツールまたは器具を、内部手術部位までカニューレスリーブを通過させ、腹部の外側からツールまたは器具を操作する。外科医は、腹腔鏡から得られる手術部位の画像を表示するモニタを用いて、手技を視認する。同様の内視鏡技法が、例えば、関節鏡検査、後腹膜鏡検査、骨盤鏡検査、腎盂鏡検査、膀胱鏡検査、脳槽鏡検査、洞房鏡検査、子宮鏡検査、尿道鏡検査等で採用される。
【０００６】
低侵襲遠隔手術ロボットシステムは、内部手術部位内で作業する時に外科医の器用さを増大させるように、および随意的に、外科医が遠隔場所から患者に手術をすることを可能にするように、開発されている。遠隔手術システムでは、外科医にはしばしば、制御コンソールにおいて手術部位の画像が提供される。好適なビューアまたはディスプレイ上で手術部位の３Ｄ画像を視認しながら、外科医は、制御コンソールのマスタ入力または制御デバイスを操作することによって、患者に外科的手技を行う。マスタ入力デバイスのそれぞれは、サーボ機械的に操作される手術器具の運動を制御する。外科的手技中に、遠隔手術システムは、マスタ入力デバイスの操作に応答して、外科医にとって種々の機能、例えば、針を保持または駆動すること、血管を把持すること、組織を解離すること等を果たす、エンドエフェクタを有する種々の手術器具またはツールの機械的作動および制御を提供することができる。
【０００７】
新しい遠隔手術ロボットシステムは、患者への少ない外傷を伴って治療を行う外科医の能力を拡張するための驚異的な展望を有するが、多くの成功と同様に、依然としてさらなる改良が望ましいであろう。例えば、既知のロボットシステムはしばしば、エンドエフェクタの移動要求、場所等を計算するために、ロボット連結部の関節のそれぞれと関連付けられるセンサからの関節位置情報に依存する。そのような関節ベースの情報は、ほとんどの遠隔手術目的で、エンドエフェクタの十分に正確な相対移動を提供するが、この関節ベースのデータを使用して決定される、手術ツールの絶対的な場所は、全ての目的で十分に精密ではない場合がある。特に、ロボット手術システムを使用して、組織測定情報を取得することが有利となる時があり、関節ベースのデータによって提供される精度における何らかの改良が、そのような測定のために有益であり得る。
【０００８】
上記を踏まえて、手術および他の用途のための改良型ロボットおよび／または測定システムを提供することが望ましいであろう。理想的には、関節ベースのデータのみを使用して容易に提供されるものを超える精度の３次元測定を含む測定を用いて、医師が組織と相互作用するとともに組織を測定することをこれらの改良が可能にすれば、特に有用であろう。
【発明の概要】
【発明が解決しようとする課題】
【０００９】
本発明の側面は、概して、改良型ロボットおよび／または測定デバイス、システム、および方法を提供する。本発明の実施形態は、内視鏡カニューレスリーブ、天然開口等の低侵襲開口を通した、遠隔手術治療法での使用を見出し得る。そのような実施形態は、システムユーザが、測定されている組織を操作し、そうでなければそれと相互作用することを可能にするように、手術ツールに動作可能に連結される遠隔手術入力デバイスを採用し得る。単に関節ベースのデータに依存するよりもむしろ、システムは、立体画像から生成される３次元（３Ｄ）位置情報を利用し得、画像はまた、システムユーザにも提示される。組織上の２つ以上の離散点の間の３Ｄ位置オフセットに加えて、システムはまた、ユーザが、関心の組織に沿った位置の効果的に連続的な曲線を識別することを可能にし得る。次いで、システムは、３Ｄ線分の長さ測定、直線または湾曲組織に沿った累積長のポリライン測定、組織構造内の面積の測定、組織体積測定、縦横比等を決定することができる。離散点は、単一の手術ツールによって、または２つ以上の手術ツールを分離する距離によって、識別され得、ユーザは、随意で、組織構造に沿って一対のツールを「手を交互に動かし」進める（随意で組織構造を直線化または伸張しながら）ことによって、組織構造（立体画像捕捉デバイスの視野より長い構造、または部分的に隠れている）の長さを測定する。システムユーザが、測定される組織場所を識別しながら組織と相互作用することを可能にすることによって、かつ、測定を決定するために（随意で、関節ベースのデータと組み合わせて）撮像データを採用することによって、特に、少なくとも部分的に隠れている組織と連動するときに、組織測定の測定精度および容易性を有意に強化することができる。
【課題を解決するための手段】
【００１０】
第１の側面では、本発明は、組織を測定する方法を提供する。方法は、対応する画像データを生成するように、組織の画像を取得するステップを含む。第１の組織場所は、第１のロボットツールで示される。第１のグラフィカルインジケータが、第１の組織場所における組織の画像上に重ねられる。画像データを使用して、第１のグラフィカルインジケータと第２の組織場所との間の測定が生成される。
【００１１】
取得された組織の画像は、典型的には、立体ディスプレイ上に示される左右の立体画像の両方を含む。第１のツールは、それらの立体画像を参照してシステムユーザによって第１の組織場所に誘導され得る。ツールおよびディスプレイは、典型的には、遠隔手術システム内に含まれる。システムユーザはしばしば、組織場所が係合されるか、またはそうでなければロボットツールによって示されるときに、少なくとも１つの組織指定コマンドを入力する。立体画像捕捉デバイスはしばしば、立体撮像データを立体ディスプレイに伝送する。グラフィカルインジケータは、３次元で前記第１の場所と一致して見えるように、組織の立体画像上に重ねられる３Ｄインジケータを含み得る。システムは、第１のツールと関連付けられる立体撮像データを使用して、重ねられたインジケータの第１の場所を決定することができる。
【００１２】
第１のツールは、第１の組織場所および第２の組織場所の両方を示すために使用され得、組織場所は、連続的に示される。代替として、第２のロボットツールが、第２の組織場所を示し得、第２の組織場所は、第１の組織場所と同時に係合される。組織場所は、ツールで組織を係合または触診することによって示すことができ、ツールは、随意で、組織を直線化または伸張するように、または測定構成に移動させるように、組織を操作する。代替実施形態では、ツールは、ツールを組織表面に実際に接触させることなくツールを場所に近接させることによって、組織場所を示し得る。組織の３次元場所は、立体撮像データ等から決定することができ、次いで、グラフィカルインジケータは、ツールから組織表面へと素早く動かされることができる。
【００１３】
画像は、複数のロボットツールを含む、複数のツールを包含し得る。画像を使用して第１のツールを第１の組織場所に誘導する間、グラフィカルツール測定マーカが、第１のツールと一致するディスプレイ上に重ねられ得る。これは、どのツールが測定に使用されるべきかに関して混乱を回避することができ、また、システムユーザに対してツール上の測定データ点を識別することによって、精度を強化し得る。第１のツールを第１の場所に誘導する間、第１の場所と第２の場所との間に延在する移動線が、ディスプレイ上に重ねられ得、移動線は、ツール操作中に伸張線またはゴムバンドのように見える。１つ以上の追加の組織場所が、ロボット制御で示され得、測定は、連続的な一対の組織場所の間の３Ｄオフセット距離を含む。輪郭または複数の連続線分に沿った全長の測定を可能にするように、連続的な複数対間のオフセット距離の累計も提供され得る。
【００１４】
いくつかの実施形態では、組織場所は、第１のツールおよび第２のツールによって交互に示され得る。そのような実施形態では、ツールはそれぞれ、随意で、ツールのジョーで関連場所における組織を把持し得る。ツールによって把持される場所の間の距離は、把持された組織構造に沿って手を交互に動かした長さを測定するように合計され得る。組織場所は、ジョーの作動によって（随意で、ジョーの開放、ジョーの閉鎖等によって）指定され得る。連続的な一連の組織場所を指定するために単一のツールが使用される場合、ジョーを開閉するために使用される同じ種類の作動でシステムのハンドルを作動させることによって、組織場所を指定するコマンドがユーザによって入力され得る。追加の入力ボタン、フットペダル入力、プルダウンコマンドメニュー、口頭による入力コマンド等を含む、代替的な組織指定コマンドも採用され得、以前に入力された組織場所を再指定または除去するために、他の入力コマンドが採用され得る。
【００１５】
多くの実施形態では、ユーザは、第２の場所、多くの場合では複数の追加の組織場所をロボット制御で係合するか、またはそうでなければ示し得る。場所および／またはシステムユーザからの入力は、囲まれた領域を規定し得、測定は、その領域の測定を含む。いくつかの実施形態では、組織場所は、領域を境界する離散的に指定された場所を備え得る。代替として、組織場所は、密接して離間した時間間隔で、以前の場所から所望の分離距離を置いて等、ツール場所を識別すること等によって、領域を境界する実質的に連続的な線を備え得る。いずれの場合にも、面積の中心が識別され得、面積は、中心と境界に沿った組織場所との間で規定される三角形の面積を合計することによって計算され得る。領域の長さに対する領域の幅、長さに対する２つの組織特徴の間の幅等を決定すること等によって、場所によって規定される縦横比も決定され得る。
【００１６】
組織が生理学的に動いている組織（鼓動する心臓等）を備える場合、いったん第１のツールが第１の組織場所を示すと、立体ビデオ画像が測定のために停止させられ得る。次いで、第２の組織場所を示すように、静止または停止立体画像上に重ねられた３次元グラフィカルインジケータを位置付けることによって、第２の組織場所を示すことができる。
【００１７】
別の側面では、本発明は、組織を測定するためのシステムを提供する。システムは、手術部位に向かって配向される画像捕捉デバイスを備える。画像捕捉デバイスは、使用中に、手術部位における組織の画像に対応する画像データを生成する。画像をシステムユーザに示すように、ディスプレイが画像捕捉デバイスに連結される。第１のツールによって示される組織場所を指定するための入力とともに、第１のロボットツールが提供される。第１の指定組織場所における組織の画像上に第１のグラフィカルインジケータを重ねるように、プロセッサが入力をディスプレイに連結する。プロセッサはまた、画像を使用して第１のグラフィカルインジケータと第２の組織場所との間の測定も決定する。
【００１８】
さらに別の側面では、本発明は、生理学的に動いている組織を測定するためのロボットシステムを提供する。システムは、手術部位に向かって配向される立体画像捕捉デバイスを備える。使用中、画像捕捉デバイスは、手術部位における組織の画像に対応するビデオ画像データを生成する。画像をシステムユーザに示すように、ディスプレイが画像捕捉デバイスに連結される。３次元入力が組織場所を指定し、第１の指定組織場所が指定されるときに、組織の停止立体画像上に重ねられる３次元グラフィカルインジケータを位置決めするように、プロセッサが入力をディスプレイに連結する。グラフィカルインジケータと第１の組織場所との間の測定が、プロセッサによって決定される。
【図面の簡単な説明】
【００１９】
【図１】図１は、本発明の実施形態による、手術を行うために使用されている低侵襲ロボット手術システムの平面図である。
【図２】図２は、ロボット手術システム用の外科医の制御コンソールの正面図である。
【図３】図３は、ロボット手術システム視覚カートの正面図である。
【図４】図４は、図１のロボット手術システムのデータ処理構造を図式的に図示する。
【図５Ａ】図５Ａは、ロボット手術システムの患者側カート（手術ロボット）の正面図である。
【図５Ｂ】図５Ｂおよび５Ｃは、８ｍｍシャフトロボット手術ツールおよび５ｍｍシャフトロボット手術ツールのそれぞれの正面図である。
【図５Ｃ】図５Ｂおよび５Ｃは、８ｍｍシャフトロボット手術ツールおよび５ｍｍシャフトロボット手術ツールのそれぞれの正面図である。
【図６】図６は、図１のシステムを使用して組織を測定する方法に含まれるステップを概略的に図示する。
【図７】図７は、輪郭測定のため、具体的には、複数の組織または他の構造場所を指定するためのフローチャートである。
【図８】図８は、組織または他の構造場所を利用する輪郭測定ツールのクラス図である。
【図９】図９は、本発明の随意的な実施形態による、規則的に離間した場所またはサンプルを生成するための効果的に連続的なサンプリングモードのフローチャートである。
【図１０Ａ】図１０Ａおよび１０Ｂは、面積またはコンテナ計算およびディスプレイのクラス図である。
【図１０Ｂ】図１０Ａおよび１０Ｂは、面積またはコンテナ計算およびディスプレイのクラス図である。
【図１１】図１１は、測定のための手を交互に動かした組織または他の場所の指定用のソフトウェアを図示するフローチャートである。
【図１２】図１２は、指定場所および伸張線が重ねられる、ロボット手術ツール画像のスクリーンショットである。
【図１３】図１３は、累積長測定のための組織場所の間で輪郭または連続的な一連の線分を指定する、単一のロボット手術ツールの簡略図である。
【図１４】図１４は、組織構造の周囲および面積を測定するために使用されているツールのスクリーンショットである。
【図１５Ａ】図１５Ａは、手を交互に動かしたアプローチで、可撓性組織構造の長さを測定するために使用されている、２つの手術ロボットツールの簡略図である。
【図１５Ｂ】図１５Ｂは、手を交互に動かした測定を得る、２つのロボット手術ツールのスクリーンショットである。
【発明を実施するための形態】
【００２０】
本発明の側面は、概して、特に遠隔手術および他の医療ロボット用途のための改良型ロボットおよび／または測定デバイス、システム、および方法を提供する。本発明の実施形態は、１つ以上の低侵襲開口（カニューレまたは天然開口等）を通してアクセスされる内部手術部位に位置する組織および他の構造の測定のために、最も直接的な使用を見出し得る。本発明に関連した研究は、ロボット手術ツールを使用して測定される組織を係合および／または操作することによって、そのような部位での測定が強化され得ることを示している。移動コマンドを計算するために、ロボット連結部からの関節ベースのデータを使用して、非常に良好な精度でロボット操作を行うことができる一方で、内部手術部位内の測定精度は、内部手術部位内の組織および／またはロボット手術ツールの場所を決定するのに役立つように立体撮像データの画像処理を採用することによって、強化され得る。システムユーザに提示される立体画像上に適切な指標を重ねることによって、ユーザは、組織または他の構造場所を正確に指定し、長さ、面積、体積等を決定するように、３次元（３Ｄ）空間内で輪郭（平滑に湾曲する輪郭および／または一連の線分を含む）を測定することができる。
【００２１】
図１は、典型的には、手術台１４に横たわっている患者１２に低侵襲診断または外科的手技を行うために使用される、低侵襲ロボット手術（ＭＩＲＳ）システム１０の平面図である。システムは、手技中に外科医１８による使用のための外科医のコンソール１６を含むことができる。１人以上の助手２０も、手技に参加し得る。ＭＩＲＳシステム１０はさらに、患者側カート２２（手術ロボット）と、視覚カート２４とを含むことができる。患者側カート２２は、外科医１８がコンソール１６を通して手術部位を視認している間に、患者１２の身体の低侵襲切開を通して、少なくとも１つの可撤性に連結された器具またはツールアセンブリ２６（以降では単に「ツール」と呼ばれる）を操作することができる、マニピュレータ２３を含む。手術部位の画像は、内視鏡２８を位置付けて配向するように、患者側カート２２の別のマニピュレータ２３によって操作することができる、立体内視鏡等の内視鏡２８によって取得することができる。視覚カート２４は、外科医のコンソール１６を通して後に外科医１８に表示するために、内視鏡２８からの手術部位の画像を処理するために使用することができる。一度に使用される手術ツール２６の数は、概して、いくつかある要因の中でも、診断または外科的手技、および手術室内の空間的制約に依存する。随意で、特に３つ以上のツールが使用されるときに、２つ以上の外科医のコンソールが提供され得、それによって、その開示が参照することによって本明細書に組み込まれる、米国特許第６，６５９，９３９号（１９９９年１１月３日出願）でより完全に説明されているように、２人の外科医が協働すること、器具の制御を譲渡すること、および同等のことを行うことを可能にする。手技中に使用されているツール２６のうちの１つ以上を交換することが必要な場合、助手２０は、患者側カート２２から、その時にもはや使用されていないツール２６を除去し、それを手術室内のトレイ３０からの別のツール２６で置換し得る。
【００２２】
図２は、外科医のコンソール１６の正面図である。外科医のコンソール１６は、奥行き知覚を可能にする、手術部位の調整された立体像を外科医１８に提示するための左眼ディスプレイ３２および右眼ディスプレイ３４を含む。コンソール１６はさらに、１つ以上の制御デバイス３６（マスタ）を含み、それは順に、患者側カート２２（図１に示される）に１つ以上のツール（スレーブ）を操作させる。好ましくは、制御デバイス３６は、テレプレゼンス、つまり、外科医がツール２６を直接制御する強い感覚を有するように、制御デバイス３６がツール２６と一体であるという知覚を外科医に提供するように、関連ツール２６（図１に示される）と同じ自由度を提供する。この目的を達成するために、位置、力、および触覚フィードバックセンサ（図示せず）が、随意で、制御デバイス３６を通して外科医の手にツール２６からの位置、力、および触感を返送するために採用される。
【００２３】
外科医が、手技を直接監視し、必要であれば物理的に存在し、電話または他の通信媒体よりもむしろ直接助手に話し掛けてもよいように、外科医のコンソール１６は通常、患者と同じ部屋の中に位置する。しかしながら、外科医は、患者とは異なる部屋、異なる建物、または他の遠隔場所に位置することができ、したがって、遠隔手術手技を可能にすることが理解されるであろう。
【００２４】
図３は、視覚カート２４の正面図である。視覚カート２４は、内視鏡２８と連結することができ、外科医のコンソール上で、あるいは局所および／または遠隔に位置する任意の他の好適なディスプレイ上で、外科医等に後に表示するために、捕捉された画像を処理するプロセッサを含むことができる。例えば、立体内視鏡が使用される場合、視覚カート２４は、手術部位の調整された立体画像を外科医に提示するように、捕捉された画像を処理することができる。そのような調整は、対向画像間の整合を含むことができ、立体内視鏡の立体作業距離を調整するステップを含むことができる。別の実施例として、画像処理は、光学収差等の画像捕捉デバイスの撮像誤差を補うように、以前に決定されたカメラ較正パラメータの使用を含むことができる。使用することができる可能な画像処理の一部の例示的な詳細は、その全開示が参照することによって本明細書に組み込まれる、例えば、米国特許第７，２７７，１２０号（２００４年３月７日出願）を含む、Ｉｎｔｕｉｔｉｖｅ  Ｓｕｒｇｉｃａｌ，  Ｉｎｃ．に譲渡された多数の特許および特許出願で説明されている。
【００２５】
図４は、構成要素間の通信経路を示す、ロボット手術システム５０（図１のＭＩＲＳシステム１０等）を図式的に図示する。上述のように、外科医のコンソール５２（図１の外科医のコンソール１６等）は、低侵襲手技中に患者側カート（手術ロボット）５４（図１の患者側カート２２等）を制御するために外科医によって使用することができる。患者側カート５４は、手技部位の画像を捕捉し、捕捉された画像を視覚カート５６（図１の視覚カート２４等）に出力するために、立体内視鏡等の撮像デバイスを使用することができる。視覚カート５６は、後続の表示前に、種々の方法で捕捉された画像を処理することができる。代替として、患者側カート５４は、視覚カート５６の外側で処理するために捕捉された画像を出力することができる。例えば、患者側カート５４は、捕捉された画像を処理するために使用することができるプロセッサ５８に、捕捉された画像を出力することができる。画像はまた、合同で、連続して、および／またはそれらの組み合わせで、捕捉された画像を処理するように、ともに連結することができる、視覚カート５６およびプロセッサ５８の組み合わせによって処理することもできる。１つ以上の別個のディスプレイ６０も、手技部位の画像、または任意の他の関連画像等の画像の局所および／または遠隔表示のために、プロセッサ５８および／または視覚カート５６と連結することができる。
【００２６】
本明細書で説明されるプロセッサのそれぞれは、典型的には、本明細書で説明される方法のステップのうちのいくつかまたは全てを実装するためのコンピュータ可読命令またはソフトウェアを採用する、有形媒体（例えば、１つ以上の場所および／または記憶種類）５９を含む。有形媒体５９は、コンパクトディスクまたはデジタルビデオディスク等の光学記録媒体、ハードディスクドライブ、フロッピー（登録商標）ディスク、バックアップテープ等の磁気記録媒体、読み出し専用メモリ、ランダムアクセスメモリ、不揮発性メモリ、メモリスティック等のメモリを備え得る。有形媒体５９に記憶されたソフトウェアまたはコードは、有形記録媒体、インターネットまたは他のネットワークシステム、無線信号伝送等を介して、プロセッサに伝送され得る。プロセッサ５８と関連付けられた有形媒体として図４で概略的に示されているが、ソフトウェアは、外科医のコンソール５２、患者側カート５４、および視覚カート５６のプロセッサ、および／またはプロセッサ５８を含む、いくつかの異なるプロセッサに存在し得る。よって、ソフトウェアは、多種多様な集中型または分散型データ処理システムアーキテクチャのうちのいずれかにおいて、ロボット手術システム５０の構成要素のうちの１つ以上に物理的に載置される、１つ以上のプロセッサ回路またはプロセッサボードで作動し得る。同様に、ソフトウェアは、単一のモノリシックコードとして書き込まれてもよいが、しばしば、一連のサブルーチンに分割され、コードの異なる部分が、随意で、異なるプロセッサボード上で作動する。本明細書で説明されるモジュールに起因する機能性はしばしば、ソフトウェア（有形媒体５９上で具現化されるソフトウェアコード）、ハードウェア（プロセッサ５８のプロセッサ回路、またはロボット手術システム５０の他のプロセッサボードのうちの１つ）、および／またはデータ処理タスクに好適であるソフトウェアおよびハードウェアの組み合わせとして実装される。
【００２７】
図５Ａ、５Ｂ、および５Ｃは、それぞれ、患者側カート２２、８ｍｍシャフト手術ツール６２、および５ｍｍシャフト手術ツール６４を示す。手術ツール６２および６４は、手術ツール２６の実施例である。示された患者側カート２２は、３つの手術ツール２６、および外科的手技の部位の画像の捕捉に使用される立体内視鏡等の撮像デバイス２８の操作を提供する。操作は、いくつかのロボット関節を有するロボット機構によって提供される。撮像デバイス２８および手術ツール２６（例えば、エンドエフェクタ６６）は、必要な切開のサイズを最小限化するよう、運動学的旋回中心２５（図１参照）が切開において維持されるように、患者の切開を通して位置付け、操作することができる。手術部位の画像は、手術ツール２６の遠位端が撮像デバイス２８の視野内に位置付けられた場合に、手術ツール２６の遠位端の画像を含むことができる。
【００２８】
図１および５Ａを参照して理解することができるように、各ツール２６は、典型的には、マニピュレータ２３によって支持される。マニピュレータは、入力移動コマンドによって内部手術部位内でツールのエンドエフェクタを移動させるように、外科医のコンソール１６のプロセッサの指揮下で手術中に移動する。マニピュレータ２３は、概して、マニピュレータおよびツールが、手術に備えて手動で位置付けられることを可能にするように、受動支持連結部２７によって支持される。設定アーム（１つ以上の非電動式の係止可能な設定関節を含むことができる）と呼ばれることもある支持連結部２７はまた、ツールの位置および配向が手技中に変更されることも可能にし、助手２０が、典型的には、ツールを引き抜き、固定構成から手動可動構成に設定関節を解放し、マニピュレータ２３を新しい所望の場所に移動させ、設定関節を再び固定する。関節ベースのデータが、外科医１８の入力に応じた移動コマンドの計算のために、マニピュレータ２３および支持連結部２７の両方から、外科医カート１６のプロセッサに提供される。
【００２９】
ここで５Ｂおよび５Ｃを参照すると、ツール６２、６４は、典型的には、マニピュレータ２３によって支持可能な近位端６５と、近位端から遠位端６９まで延在する細長いシャフト６７とを含む。エンドエフェクタ７１は、連結部７３によってシャフト６７の遠位端６９に連結され、エンドエフェクタおよび連結部は、概して、連結部２３のモータによって駆動される。代替実施形態では、設定関節の自由度のうちの少なくともいくつかが電動式であり得、および／またはマニピュレータの自由度のうちのいくつかが受動的であり得る。旋回中心は、マニピュレータ２３の並行連結構造によって規定され得（遠隔中心連結部内に包含される）、またはマニピュレータの受動関節が、患者体内への開口の周囲でのツールの自然または環境的強制の旋回を可能にし得る。旋回移動の計算された遠隔中心が提供されることを可能にする、冗長関節駆動型連結部を含む、依然としてさらなる代替が可能である。
【００３０】
ここで図６を参照すると、ロボットシステム５０を使用した測定の方法１１０を理解することができる。測定は、フットペダル、プルダウンメニュー、補助入力デバイス（キーボード、マウス等）、ロボットシステムまたはアシスタントへの言葉によるコマンド、または多種多様な代替アプローチのうちのいずれかを使用して、測定モードを選択することによって開始され得る１１２。測定マーカまたは他の指標が、測定ツール上に重ねられ得る１１４。１つだけのツールが測定を行うために使用される場合、ツールのうちのどれが測定ツールであるかに関する視覚的指示を有することが、システムユーザにとって役立つ。同様に、両方のツールが測定に使用されるという指示、および／または識別されるべきツール上の測定場所に対する指示を有することが役立ち得る（例えば、システムがジョーの間の係合表面の遠位先端からのオフセットを計算する場合に、ユーザがジョーの旋回点から測定しないように）。ユーザは、以下でより詳細に説明されるように、利き手（例えば、右利きの外科医の右手）によって制御されるツールを指定するように、どのツールが測定ツールとして使用されるかを選択または変更し得る。測定はしばしば、１つまたは２つの器具を制御する１人のユーザからの入力を参照して説明されるが、特に、３つ以上の場所を指定する場合、測定のために３つ以上の場所で組織を同時に構成するときに、および／または同等のときに、２つより多くの器具の調整された運動が随意で採用される。３つ以上のツールを採用する、本明細書で説明されるシステムおよび方法の実施形態は、複数のシステムユーザからの同時３次元入力に適応する入力デバイスから利益を受け得る。例えば、一度に３つ以上の器具を制御している間に２人の外科医の協働を促進するために、二重外科医コンソール配列を使用することができる。
【００３１】
実際に測定を行うために、システムユーザは、典型的には、測定ツールで組織場所を示すように、マスタコントローラ（例えば、図２の制御デバイス３６）を操作する１１６。システムユーザは、随意で、ツールを組織に軽く接触させる、組織を触診する、または組織を把持および再構成する等、該場所で組織に係合し得る。代替として、ユーザは、実際に組織に触れることなく、正確な点指定となるように組織に十分近い場所へツールを運んでもよい。ツールの使用は、組織に触れることもなく、点指定が有効であることをユーザが確信することを可能にでき、マーカ上の場所マーカの位置付けを検証することにより、マーカ精度、再現性、および信頼性をさらに強化することができる。それにもかかわらず、組織と接触することにより、器具先端が意図された深さにあることを確認するために、有用な視覚的合図を提供することができる。
【００３２】
いったんツールの測定マーカが所望の場所に来ると、次いで、ユーザは、システムに組織場所を指定するために、（マスタコントローラ、随意で、測定ツールまたは異なるマスタコントローラと関連付けられた１つのマスタコントローラのハンドルを開く、および／または閉じること、フットペダルを押下すること等によって）入力を作動させ得る１１８。次いで、システムは、指定された組織場所のマーカを重ねることができる１２０。誤って指定された場所は、随意で、非利き手と関連付けられたマスタコントローラのハンドルを作動させること等によって、代替的な入力によって除去され得る。立体表示の画像上へのマーカの重畳、およびツール場所データの決定は、図４に示されるようにプロセッサ５８を使用して、視覚カート５６のプロセッサによって、手術ロボット５４のプロセッサによって、または代替的なプロセッサ構造によって実装され得ることに留意されたい。組織場所情報は、患者側カート５４から出力されるロボットデータから提供される情報を含み得、および／または利用し得、ロボットデータはしばしば、外科医のコンソール５２から、および患者側カート５４からの関節ベースのデータを備える。指定された組織場所に対応する３次元位置データはしばしば、少なくとも部分的に立体または他の画像捕捉デバイスに基づく。いくつかの実施形態では、手術部位内のツールの場所に関する情報のうちの少なくともいくらかは、（参照することによって本明細書に以前に組み込まれた、同時係属中の米国特許出願第１２／４２８，６９１号（２００９年４月２３日出願）でより完全に説明されているように）システムユーザに表示されるツールおよび手術部位の画像として表示されるデータを処理することによって、および／または多種多様な代替的な画像ベースのツール追跡システムのうちのいずれかから、提供され得る。
【００３３】
上述のように、ロボットツールによる組織場所の指示中の組織とツールとの間の相互作用は、組織の付近にある（が触れない）ことから、組織を活発に把持して再構成することに及び得る。例えば、ツールは、測定される組織構造を再配置し得、随意で、組織を把持し、組織構造を直線化し、介在組織または他の物体の後ろから構造を取り出し、カメラの視野の中へ持ち込む等を行う。いくつかの実施形態では、ツールは、随意で、軟組織表面より下側の場所を示し、測定場所の指定の精度および再現性を強化し、および／または同等のことを行うように、組織を触診する。ツールが組織表面からわずかに分離される実施形態では、組織表面および／または構造の３Ｄ場所を決定するために、種々の画像合致技法を、較正された立体カメラ（例えば、その全開示が参照することによって本明細書に組み込まれる、米国特許出願第１２／４１５，３７７号（２００９年３月２１日出願）で説明される構造および技法を使用して較正されるもの）からのデータと組み合わせることができる。一般論として、左右の画像の中の表面、特徴、または構造の場所は、較正情報とともに、カメラに対する構造の水平位置（Ｘ−Ｙ）、およびカメラとその表面、特徴、または構造との間の距離を決定するために使用することができる。その全開示が参照することによって本明細書に組み込まれる、米国特許出願第６１／２０４，０８２号（２００８年１２月３１日出願）でより詳細に説明されているように、左右の立体画像間の選択的でロバストな画像合致は、手術野内の組織表面上の１つ以上の選択された点の対応する左右の画像を効率的かつロバストに識別することができる。随意で、同様に参照することによって本明細書に組み込まれる、米国特許出願第６１／２０３，９７５号（２００８年１２月３１日出願）でより完全に説明されているように、適切なツールマーカの援助を受けて、ツールの場所を決定するために、関連技法を使用することができる。
【００３４】
例示的なスパース画像合致技法では、第１の画像からの関心の点が、第２の画像に合致するために識別される。そのような関心の点は、組織表面上の所望の場所または点を覆ってツール先端または同等物を位置付けることによって、識別され得、随意で、ツールが組織表面からわずかに分離されたままであるように（より具体的には、組織表面とカメラとの間）、先端がシステムユーザの利き眼で見られるような点の上に配置される。選択的に識別された関心の点は、選択的合致で第２の画像に（随意で、非利き眼に示されるように）合致させることができる。選択的合致は、領域合致、特徴合致、特徴補間、および／または以前に合致した点の補間を含み得る、画像の局所特徴に適切である合致で、選択的に識別された点を合致させることができる。例えば、選択された関心の点に応じて領域を識別することができ、領域は、選択的に識別された関心の点を合致させるために使用され得る。領域合致スコアは、領域が合致される場合に決定されることができ、十分に合致していない領域については、不十分に合致した領域の特徴が決定され、第２の画像に合致させられることにより、これらの特徴が第２の画像に関心の点を合致させるために使用されことができる。不十分な領域合致に応じた、この特徴合致の使用は、良好な合致速度を依然として提供しながら、よりロバストな合致を提供する。特に、手術野が組織からの異なる深さで干渉物体を含むときに、合致される関心の点を評価するために、柔軟なエピポーラ拘束および／または焦点拘束を使用することができる。特徴合致の信頼スコアが閾値を下回る場合、補間が使用されるか、または悪い点が拘束によって除外され得る。
【００３５】
実施例として、関心の点は、組織の右の画像のピクセル場所を参照して識別され得る。画像合致の出力は、概して、左の画像で見られるような組織表面の対応するピクセル場所を含み得る。各ピクセル場所は、その眼に対する関連Ｘ−Ｙ場所を効果的に提供し、座標系の間の視差オフセットは、概して、深さがカメラ較正データごとに決定されることを可能にする。合致は、ツールが指示場所にある間に（または邪魔になる場合は、組織表面場所とカメラとの間から移動した後に）発生し得、場所マーカは、ツールから組織表面へ素早く移動し得る。ツールの周囲の領域またはウィンドウの中の一連の合致した組織表面場所を決定すること、ツール上の測定場所の場所を決定すること、および、組織表面がツールに最も近い場合に、マーカを組織表面へ素早く移動させること等の代替的な場所指示技法およびシステムも採用され得る。
【００３６】
図６に示される例示的測定方法１１０を続けると、第１の組織場所が指定された後、次いで、システムユーザは、マスタコントローラを操作して、ツールを次の所望の組織場所に移動させ得る１２２。ツールがシステムユーザに提示された立体画像の中で移動するときに、以前の指定組織場所から、移動する測定ツールまで、より具体的には、測定ツール上に重ねられたままであるマーカまで、伸張線が部位の画像上に重ねられる１２４。伸張線の長さ等を含む、増分データが、マスタコントローラの移動中に表示され得る。随意で、全長（複数対の指定組織場所の間の以前のオフセットを含む）もまた、画像上に重ねられ得る。
【００３７】
マーカ等を、組織上、ロボット構造（ツール等）上、または画像で示されるような他の構造上に重ねる場合、しばしば、システムユーザに提示される立体画像において、下層構造が現れるのと同じ深さでマーカを現れさせることが有利となるであろう。マーカが下層組織または他の構造と同じ深さで現れるように、左右の画像の中の場所を合致させるために種々の方法が使用され得るが、参照することによって本明細書に以前に組み込まれる同時係属中の米国特許出願第６１／２０４，０８２号で説明されている、特に効率的でロバストな画像合致技法が、有意な利点を有する。
【００３８】
いったん測定ツールが（所望に応じて）次の組織場所を係合し、操作すると、ユーザは、組織場所を指定するように入力を作動させることができる１２８。画像から抽出されたデータに基づいて（随意で、画像ベースの場所情報を検証するために、関節ベースまたは運動学的ロボットデータも利用して）、オフセットデータを更新することができ１３０、別のマーカを指定組織場所に重ねることができる１３２。いくつかの実施形態では、伸張線が、直前の指定場所と移動するツールとの間のみに現れ得るが、代替実施形態は、ユーザが複数の指定組織場所によって規定された全体的輪郭を見ることができるように、伸張線分を限定し得る。指定組織場所は、上述のように、システムユーザに提示される立体画像の画像処理によって取得される、ツール追跡データから抽出され得、データはしばしば、組織場所の間の３Ｄオフセットを含む。データは、輪郭を規定するために、指定組織場所を接続する一連の直線分を含む、３Ｄポリラインを規定し得る。代替実施形態は、指定された点の間のスプラインまたは他の曲線を採用し得、あるいは、画像合致技法によって識別される下層または最も近い組織表面の上に線を投影し得る。システムユーザが、これが最後の場所であることを示す（および／または、面積を効果的に取り囲むこと、事前識別された数の関心の線分に達すること等によって、システムが最後の場所であると決定する）場合１３４、最終測定が表示され得１３６、表示はしばしば、再び手術部位に重ねられる。代替実施形態は、組織画像ウィンドウ外、別個のディスプレイ上、組織画像ディスプレイ内の別個のウィンドウ上等で、組織画像から始動させられる表示データを採用し得る。ユーザは、マスタ制御ハンドルをダブルクリックすること、フットペダルを押下すること、代替的なハンドル（または両方のハンドル）を作動させること等によって、最後の場所であることを示し得る。場所が最後の場所として識別されない場合、システムは、ユーザが再びマスタコントローラを操作し、追加の組織場所を指定すること等を可能にし得る１２２。
【００３９】
システム５０および方法１１０（それらの変化例を含む）は、低侵襲外科的手技中に体内３Ｄ測定が得られることを可能にすることができる。これらのシステムおよび方法は、開発されているロボット手術システム（ＣａｌｉｆｏｒｎｉａのＩｎｔｕｉｔｉｖｅ  Ｓｕｒｇｉｃａｌ，  Ｉｎｃ．から市販されているｄａ  Ｖｉｎｃｉ（登録商標）手術システムを含む）を活用することができる。代替実施形態は、現在開発されている、または将来開発されるロボット手術システムに基づいてもよく、またはそれらに追加され得る。本明細書で説明される技法およびシステムは、画像データを使用したツールの追跡と、グラフィカル情報を用いて（特に、測定ツール上、またはいずれの測定ツールとも無関係の測定カーソルまたはマーカを描写する３Ｄオーバーレイグラフィックを用いて）手術野を増強することとを伴ない得る。測定場所およびツールインジケータ、伸張線および他の測定マーカ、ならびに出力グラフィック（双方向３Ｄ数値的表示等）は、画像フィールド内の組織または他の構造上、画像フィールド外であるが外科医のディスプレイ内、および／または別の補助表示システム上に現れることができる。
【００４０】
例示的実施形態では、３次元で視野内の生体構造または他の構造と一致して見えるよう、３Ｄインジケータ視覚要素（点、線、および／または数値的表示を含む）がレンダリングされるように、外科医による生体構造の立体内視鏡像と整合する較正された立体カメラモデルを使用して、３Ｄオーバーレイ視覚要素がレンダリングされ得る。十分な速さでオーバーレイ視覚要素を更新することにより、外科医は、外科医のコンソール１６（図２参照）上のマスタ制御入力デバイス３６でマーカを効果的に操縦することによって、３Ｄマーカを対話形式で位置付け得る。マーカとともにツールを移動させることは、外科医が、測定を行うとき組織と相互作用することを可能にし、それは、組織表面と一致しない空間内の場所にマーカを配置することを回避し得、立体画像捕捉デバイスに向かって組織表面より上側の空間内にマーカを浮遊させることを回避し、または、効果的に組織表面内の場所にあるが、画像捕捉デバイスから離れた３Ｄ空間内の組織場所を越えた位置にマーカをおくことを回避する。
【００４１】
好ましくは、所望の測定のための３Ｄマーカを操作するために、器具先端のデカルト位置（または他の測定場所）が十分正確に決定される。デカルト位置はしばしば、カメラ参照フレーム内で決定され、ロボットシステムによって提供されるツールに対する制御は、予測可能な方式で器具先端、背景組織および他の構造等に対してマーカを移動させることを促進する。マーカ位置および移動の所望の精度を提供するために、カメラ視野内のツール位置を追跡する、画像ベースのツール追跡システムを採用することができる。代替的実施形態では、器具を指示するロボットマニピュレータ（随意で、カメラまたは他の画像捕捉デバイスを指示するマニピュレータ）は、カメラ参照フレーム内の器具先端位置誤差を最小限化するように較正され得る（典型的には、手術の開始前に）。
【００４２】
３Ｄオーバーレイ視覚要素を、器具に関する正確な情報と組み合わせることによって、種々の測定相互作用が達成され得る。これらの測定相互作用のうちの多くは、システムユーザによってロボット手術システムに入力される移動コマンドによる、器具先端のマスタ・スレーブ追従を使用することを伴う。ツールの移動を生じさせることに加えて、手術部位の表示上に重ねられた３Ｄマーカまたはカーソル、具体的には、ツールの先端上に重ねられた３Ｄマーカまたはカーソルの移動は、マーカに器具先端を密接に辿らせる。ツールの器具先端または遠位端が生体構造に触れると、３Ｄマーカは、その生体構造と十分に一致して、正確な場所指定を可能にする。ボタンを押すこと、またはフットスイッチを使用して、システムユーザは、マーカおよび器具先端の現在の位置をサンプリングする。器具の追加の移動およびボタンを押すことが、一連の点をサンプリングするために使用され得る。それらのサンプリングされた点の間の累積ユークリッド距離を、相互作用的に計算しユーザに表示することができる。しばしば、この基礎的器具測定相互作用を使用して、いくつかの測定モードがサポートされ得る。よって、外科医は、連続して２つ以上の点の間の距離を測定し得る。これらの点は、開放または閉鎖輪郭を形成し得る。閉鎖輪郭の表面積または点の凸包の体積等の他の数量が、これらの点から導出され得る。長い輪郭を測定するための相互作用は、規則的な距離または時間間隔を置いた点の自動サンプリング等によって、促進され得る。
【００４３】
多角形またはポリラインの表現に加えて、組織の構造をより良好に近似するために、その平滑性に向かう自然な傾向により、スプラインまたは同様のモデルがデータに適合させられることができる。適合プロセスは、点を特定する時の手の動きのいくらかのジッタリングを潜在的に除去することができる。点における誤差の非均一性（典型的には、視認方向により多くの誤差をもたらす）に対処するために、３Ｄ点の共分散行列が、視認幾何学形状をから導出されることができ、適合プロセスの利益になり得る。
【００４４】
いくつかのモードでは、楕円形、楕円体、柔軟なオブジェクト等の２次元または３Ｄパラメトリック幾何学形状を効果的に規定するために、コンピュータグラフィックで使用されるように、点も使用され、随意で、ほんのわずかな点の場所が使用される。幾何学形状の特性は、２次元形状の周囲および面積、３Ｄ形状の体積等を計算すること等によって、導出または決定することができる。
【００４５】
本明細書で説明される方法およびシステムはしばしば、適切に装備されたロボット手術システム、特に、画像ベースのツール追跡能力を既に有する、そのようなシステムに、追加のソフトウェアモジュールを追加することによって、実装され得る。本明細書で説明される仮想測定ソフトウェアツールは、システムとユーザとの間の相互作用の種々のモード、ならびに測定計算のための異なるモードをサポートし得る。システムユーザと計算モジュールとの間の相互作用の１つのそのような部類は、（例えば）３Ｄ輪郭の長さ、閉鎖輪郭の表面積、および／または同等物を測定するために単一のツールが使用される、片手測定を含み得る。システムユーザと測定計算モジュールとの間の別の種類の相互作用は、両手および２つの関連ツールの使用を伴い得、ツールは随意で、測定中に把持および操作を行う。これらの測定ツールは、概して、オーバーレイ視覚要素が３Ｄ立体像において器具先端と一致して見えるように、ツールエンドエフェクタまたは器具先端の位置を正確に決定する遠隔手術システムの能力、および、システムのディスプレイ上のオーバーレイ視覚要素におけるその位置上に正確にハイライトまたは描画する遠隔手術システムの能力に依存し得る。
【００４６】
ここで図７を参照すると、輪郭をサンプリングするか、または場所を指定するために、例示的なデータサンプリングまたは指定方法１５０が使用され得る。システムユーザはしばしば、測定器具先端の場所を制御するために利き手を使用し、サンプルを追加または除去するために非利き手でハンドルを把持するか、または作動させ得る。例えば、右利きのシステムユーザは、典型的には、ツールの操縦のために右手を使用し、場所を指定および／または指定解除するために左手を使用する。方法１５０については、右手が利き手であると仮定され、左手が非利き手であると仮定される。これは、設定メニュー、プルダウンメニュー等を使用して変更され得る。
【００４７】
サンプリングまたは指定方法１５０の全体を通して、器具把持装置またはジョーが閉じられたままであるように、右手は閉鎖把持状態のままであり得る。これは、組織に接触し、関心の点を指定するための有利な構成でジョーを有するツールを構成し得、随意で、それは、システムに対する測定ツールを識別し得る。ツールジョーは、典型的には、マスタコントローラのハンドルのパドルを閉じることによって閉じられる。右手がハンドルを把持している場合に１５２、ツールは、そのハンドルも閉じるように、左手で簡潔に把持することによって１５６、点を追加することができる１５４。点を追加および除去するために非利き手を使用することにより、ツール位置付けの精度に悪影響を及ぼし得る利き手の意図しない動きを阻止する。代替実施形態では、好ましくは、入力作動がツールの制御された配置に干渉しないように、フットペダルまたは外科医のコンソール上の追加のボタンが提供され得る。右手が開かれている場合に１５８、ツールは、左手で把持することによって１６２、点を除去することができる１６０。
【００４８】
ユーザとのシステムの相互作用は、測定モードであるときに、器具先端を対話形式で追跡する点が常に存在するようなものである。システムユーザは、器具を制御して、測定されるべき生体構造と一致するように、この点を位置付ける。場所に定着すると、点は、左手で把持することによって正確に置かれ得、それは、効果的に現在の場所に点または点マーカをドロップし、相互作用的に移動されるべき新しい点を追加する。ユーザインターフェース体験をさらに向上させるために、ポリライン可視化が、器具先端における最後の点まで順に各対の点の間の接続を表示する。これは、測定される生体構造に対して輪郭の方向を整合させるための追加の視覚的確認を提供する。サンプリング方法１５０のフローチャートは、測定されたポリラインの３Ｄ可視化が、ポリラインが変更された時にいつでも操作者のために再描画されるものと仮定することに留意されたい。
【００４９】
ここで図８を参照すると、輪郭関連測定ツールのクラス図、ならびにこれらのツール間の挙動のインヘリタンスが示されている。これらのツールは、測定された点の配置に対処するように、ボタンを押す事象および運動事象に応答する。ツールは、図７に示された同じ点配置相互作用モードをサポートするが、表示するための測定テキストを生じるように一連の点を処理する方法で異なり得る。サポートされる相互作用モードは、２つ点の間の距離を測定するための２点間配置、任意の輪郭を測定するためのポリライン点配置、および空間的に規則的にサンプリングされた測定を生じるための連続点配置を含む。
【００５０】
輪郭測定ツールはまた、図９に図示されるような連続サンプリングモードまたは場所指定方法１８０もサポートする。方法１８０は、規則的に離間したサンプルを生じる。操作者は、随意で、２つのサンプル点の間の最小間隔を決定する、所望のサンプリング許容値を特定し得る。０．１ミリメートルから２０ミリメートルの間の許容値が有用であり得、１ミリメートルの許容値がデフォルト値として使用され得るように、１ミリメートルの許容値がしばしば有用である。左右の把持は、概して上記で説明されるものと類似した方式で、点を追加または除去するために使用され得、新しいサンプルを追加することを正当化するほどにツールが十分遠くに移動させられた時を決定するために、距離測定ステップ１８２が使用される。サンプリングのための代替方法論は、時間ベースの周期的サンプリング、空間的数量差の変化（例えば、ツール経路の連続性および／または曲率に応じてサンプルが取得される）、または空間的および時間的数量に基づく何らかの複合測定基準（例えば、ツールの速度および／または加速度に応じてサンプルが取得される）等に依存し得る。
【００５１】
ここで図１０Ａおよび１０Ｂを参照すると、輪郭ツールは、概して、ポリライン３Ｄオブジェクトに依存し得る。これは、そこから長さおよび面積測定を計算する、一連のサンプリングされた３Ｄ点を記憶するために使用され得る。開放輪郭ツールは、以下の式を使用したポリライン３ＤオブジェクトのＣｏｍｐｕｔｅＬｅｎｇｔｈ方法を使用して、その測定値を生じることができる。
【００５２】
【数１】
2012529970.tif 000003
閉鎖輪郭ツールは、式１を使用して、その測定を生じ、次いで、順序の中の最後の点を順序の中の第１の点に接続する区分の長さを加算する。閉鎖輪郭面積は、随意で、三角形のモザイク状配列を使用して、閉鎖表面積を近似することによって計算される。次いで、面積は、各三角形の面積を積分することによって得られうる。表面をモザイク状に形成するための１つのアプローチは、３Ｄ輪郭の重心に固定点を伴う三角扇形を使用することである。これは、測定される輪郭の大部分を表す、凸面およびほぼ凸面の入力に特によく機能する。
【００５３】
本発明の実施形態はまた、手を交互に動かした測定と呼ばれる、両手での器具相互作用を可能にする。これは、２つの把持器具で組織を操作しながら、システムユーザが組織の長さを測定することを可能にするように実装することができ、操作のうちの一部または全てが画像捕捉デバイスの視野内で発生する。そのような測定のために、各ツールの把持装置に沿った点が追跡され得、現在把持されている組織の長さを測定するために、それらの点の間のユークリッド距離が使用される。相互作用はまた、システムユーザが、ツールの間で把持される組織の長さを連続的に累積することも可能にする。ツール間の距離は、ツール把持装置の関節動作に基づいて、自動的にサンプリングされ、累積される。ロボット手術システムとの手を交互に動かした相互作用の性質により、一方の手は、新しい場所を把持している（したがって指定している）と仮定することができる。いったん新しい場所が把持され、他方の手が組織を解放すると、システムは、器具間の距離を自動的にサンプリングし、累積する。このサンプリング条件は、ユーザが累積測定を行うことを決定する前に把持および再把持することを可能にするという点で便利であり、組織が右手ツールから解放され、外科医が左手ツールを越えて手を伸ばしている場合に、外科医は、左手ツールを解放することによって新しい把持場所を指定する前に、組織全体を移動させるか、または他の組織を邪魔にならない所に移動させ得る。加えて、システムユーザは、サンプリングされることが所望される線形区分の長さを最もうまく近似するために、測定されている組織を直線化するか、またはわずかに伸張さえする機会を有し得る。
【００５４】
ここで図１１を参照すると、手を交互に動かしたデータサンプリング方法２００は、測定された全長を累積しながら、画像捕捉デバイスの視野内で、および／または視野を通して、ユーザが組織を把持し、操作し、移動させることを可能にする。相互作用は、長いロープを引っ張るためにそれぞれの手を交互に使用することに類似した、直観的両手測定パラダイムを提供する。相互作用は、測定の方向または長さに制限を課さない。操作者は、一連の区分線形測定を行うことによって、任意の長い、または曲線の検体を測定し得る。この測定相互作用の１つの使用例は、消化管手技で腸の長さを測定するためである。手を交互に動かしたサンプリング方法２００では、システムユーザとシステムとの間の相互作用は、システムユーザが、一方の手で把持し、他方の手で測定するという交互パターンを使用することを可能にするように設計されている。測定は、操作者が一方または他方の手で測定される検体を把持することから開始される。把持していない手は、測定する手になる。システムは、左右の手と関連付けられたツールとマスタコマンド入力デバイスとの間の計算された距離、ならびに以前の測定の現在合計を継続的に計算し、表示する。把持する手を解放する前に２０２、把持していない手は、測定された長さを表明するために所望の把持を決める前に、自由に複数回把持および解放できる。把持する手を解放すると２０２、測定が表明され、手の間の関係が切り替えられる。測定を表明することは、２つのツール間の計算された距離を現在合計と加算することを伴う２０４。次いで、前の測定する手は、検体を把持したままにされ、前の把持する手は、ここでは、役割の切替により、新しい場所を自由に指定できる測定ツールである２０６。
【００５５】
図１２は、画像データを使用した２点間単一線分測定を図形的に示す、スクリーンショットである。表示された画像２２０は、マーカ２２４が重ねられているツール２２２を示す。マーカ２２６は、以前に指定された場所で示され、伸張線２２８は、以前に指定された場所とツール上のマーカとの間に延在する。伸張線の長さを示す数値的図形２３０が、伸張線からオフセットされ、撮像デバイスの視野内で提供される。表示された伸張線２２８を背景組織に対して可視的にするために、種々の色が伸張線に使用され得る。図１２によって図示された実施形態では、伸張線２２８は、明るい緑色である。同様に、種々の色が、表示されたマーカに使用され得る。
【００５６】
次に、図１３を参照すると、ポリライン測定が概略的に図示されている。ツール２４０が、２つの組織場所２４２、２４４を指定するために以前に使用されており、表示されたマーカは、ツールが移動した後に、それらの場所に残されている。線分２４６は、以前に指定された場所の間で固定されたままである。伸張線２４８は、ツール２４０とともに移動し、具体的には、直前に指定された場所２４４とツール上の測定場所２５０との間に延在する。測定中にツールとともに移動するように見えるように、マーカ２５２が、ツールの測定場所においてツールに重ねられる。マークされた場所は、一直線で、単一の平面内等で位置する必要はない（しばしばそうならない）ことに留意されたい。いったん組織場所が指定されると、表示されたマーカは、測定されている組織の代替的な部分を視認するようにカメラが移動するときに、組織とともに残り得る。
【００５７】
ここで図１４を参照すると、囲い込まれたポリライン測定の例示的実施形態を見ることができる。関心の組織構造の周囲および／または面積が表示され得、ここでは組織構造は、僧帽弁輪を備えることに留意されたい。異なる色が、異なる表示されたマーカまたは線に使用され得る。例えば、面積境界線２５４は、黄色で示され得、面積の中心２５８から表示されたマーカ２２６のそれぞれまで延在するモザイク状配列２５６は、白で示され得る。モザイク状配列の線は、面積境界線２５４内の面積を計算する際に使用され得る。
【００５８】
例示的な手を交互に動かした測定方法は、図１５Ａおよび１５Ｂを参照して理解することができる。測定ツール２６０は、可撓性組織または他の構造ＦＴ（ここでは測定テープ）に沿って移動し、測定ツール２６０と把持ツール２６２との間の測定距離を示す出力を生成する。いったん可撓性組織ＦＴに沿った所望の場所が識別され、組織が適切に直線化および／または伸張されると、測定ツール２６０は、把持ツール２６２は解放されているが、閉鎖把持モードのままであり得、ツール間の最新の分離を含むために、累積距離測定を更新する。分離距離は再び、２つのツールの役割が切り替わり、以前の測定ツール２６０が把持ツールである状態等で示され得る。
【００５９】
図１５Ｂの説明図は、巻き尺を使用した、手を交互に動かした測定相互作用の検証を示す。測定されている長さを表すように、線分が器具把持装置の間に３次元で重ね合わせられる。中間長さおよび累積測定長さを示すように、テキストメッセージが区分の中間点に相互作用的に表示される。
【００６０】
追加の実施形態は、オフセット、面積、体積、縦横比等の測定を促進するように、上記で説明される技法およびシステムのうちのいくつかを静止立体画像と組み合わせ得る。例えば、特に、閉胸式鼓動心臓手技中に心臓の組織構造の測定のために、動作する組織から測定を得ることが望ましいことがある。そのような生理学的動作中に正確な測定を促進するように、プロセッサは、システムユーザに提示される立体ビデオ画像（外科医のコンソールにおいて１人以上の外科医に提示される立体画像、関連ディスプレイにおいて助手または監督に提示される２次元画像）を停止させることができる。画像は、組織場所の指定に備えたシステムユーザからの入力によって、またはロボットツールが第１の組織場所に配置されている、またはそれに隣接していることを示す入力に応答して、停止させられ得る。いずれにしても、次いで、同じ（または異なる）システムユーザが、停止画像の中で１つ以上の組織場所を識別することができる。随意で、組織場所は、組織画像の所望の場所へ３Ｄカーソルを操縦するために外科医のコンソールのマスタ入力デバイスを使用することによって、識別することができる。代替として、システムユーザは、２つの停止立体画像のうちの１つの中で場所を単純に指定し得る。いずれにしても、組織指定コマンドがプロセッサによって受信されると、カーソルは、立体画像のうちの１つの中のカーソルの場所に基づいて、組織表面へと素早く動き得る。所望の組織場所が停止画像に入力されているときに、３次元オフセットおよび測定が、上記で説明されるように３次元画像データから決定され得る。組織場所の全てが、随意で、カーソル等を使用して示され得るが、ロボットツールを用いた少なくとも第１の場所の指示は、局所組織を安定させるのに役立ち得る。鼓動している心臓および／または他の周期的に動作する組織の測定のために、組織動作サイクルの異なる段階で一連の測定を生成するように、時系列画像が捕捉され、使用され得る。よって、そのようなシステムおよび方法は、（例えば）心臓の一連の周期的拍出状態を捕捉し、それらの状態の測定を行って、種々の心臓の症状の診断および治療を強化することができる。
【００６１】
理解を明確にするため、および一例として、例示的実施形態を説明してきたが、種々の修正、適合、および変更が当業者に明白となるであろう。よって、本発明の範囲は、添付の請求項のみによって限定される。
【００６２】
本発明はさらに、例えば、以下を提供する。
（項目１）
組織を測定する方法であって、
前記組織の画像を取得し、対応する画像データを生成することと、
第１のロボットツールで第１の組織場所を示すことと、
前記組織の画像上において前記第１の場所に第１のグラフィカルインジケータを重ねることと、
前記画像データを使用して、前記第１のグラフィカルインジケータと第２の組織場所との間の測定を生成することと
を含む、方法。
（項目２）
前記組織の画像は、立体ディスプレイ上に示される左右の立体画像を備え、前記第１のツールは、立体画像を参照してシステムユーザによって前記第１の組織場所に誘導され、前記第１のツールおよび前記ディスプレイは、遠隔手術システムに含まれ、前記方法は、前記第１の場所および前記第２の場所が係合されるときに、前記ユーザによって、少なくとも１つの組織指定コマンドを入力することをさらに含む、項目１に記載の方法。
（項目３）
前記システムは、立体撮像データを前記立体ディスプレイに伝送する、立体画像捕捉デバイスを含み、前記グラフィカルインジケータは、前記組織の立体画像上に重ねられた３次元インジケータを備え、前記３次元インジケータは、３次元で前記第１の場所と一致して見え、前記システムは、前記第１のツールの前記立体撮像データを使用して、前記重ねられたインジケータの前記第１の場所を決定する、項目２に記載の方法。
（項目４）
前記第１のツールは、前記第１の組織場所を示し、前記第１のツールは、前記第２の組織場所も示し、前記第１の組織場所および前記第２の組織場所は、連続的に示される、項目２に記載の方法。
（項目５）
第２のロボットツールが、前記第２の組織場所を示し、前記第１の組織場所および前記第２の組織場所は、同時に示される、項目２に記載の方法。
（項目６）
前記画像は、前記第１のツールを含む複数のロボットツールを包含し、前記方法は、前記画像を使用して前記第１のツールを前記第１の組織場所に誘導する間、前記第１のツールと一致する表示の上にグラフィカルツール測定マーカを重ねることをさらに含む、項目１に記載の方法。
（項目７）
前記第１のツールを前記第１の場所に誘導する間、前記第１の場所および前記第２の場所の間に延在する移動線を重ねることをさらに含む、項目６に記載の方法。
（項目８）
少なくとも１つの追加の組織場所をロボット制御で示すことであって、前記測定は、連続的な一対の組織場所の間の３次元オフセット距離を含む、ことと、複数のオフセット距離の累計を決定することとをさらに含む、項目１に記載の方法。
（項目９）
前記第１のツールは、前記第１の組織場所で前記組織を把持して操作し、前記方法は、前記第１のツールと第２のロボットツールとを用いて、前記ツールのジョーで前記場所における組織を把持することによって、複数の追加の組織場所を交互に係合することと、前記把持した組織に沿って手を交互に動かした長さを測定するために、前記場所の間の距離を合計することとをさらに含む、項目１に記載の方法。
（項目１０）
囲まれた領域を規定する複数の追加の組織場所を示すことをさらに含み、前記測定は、面積測定を含む、項目１に記載の方法。
（項目１１）
前記第１のツールで前記第１の組織場所を触診することをさらに含む、項目１に記載の方法。
（項目１２）
前記ツールは、前記第１の組織場所を示すために、前記組織を操作し、前記組織を測定構成に移動させる、項目１に記載の方法。
（項目１３）
前記第１の組織場所は、前記第１の場所に向けて前記第１のツールを移動させ、組織表面の立体画像データを使用して、前記組織場所を、前記ツールから前記ツールに隣接する前記組織表面に素早く動かすことによって示される、項目１に記載の方法。
（項目１４）
前記組織は、生理学的に動いている組織を含み、前記画像は、前記第１のツールが前記第１の組織場所を示している間に取得された前記動いている組織の静止立体画像を含み、前記第２の組織場所は、前記第２の組織場所を示すために、前記静止立体画像上に重ねられた３次元グラフィカルインジケータを位置付けることによって示される、項目１に記載の方法。
（項目１５）
組織を測定するためのロボットシステムであって、
手術部位に向けて配向可能な画像捕捉デバイスであって、使用において、前記手術部位における前記組織の画像に対応する画像データを生成する画像捕捉デバイスと、
前記画像をシステムユーザに示すために、前記画像捕捉デバイスに連結されたディスプレイと、
第１のロボットツールと、
前記第１のツールによって示される組織場所を指定するための入力と、
プロセッサと
を備え、
前記プロセッサは、前記入力を前記ディスプレイに連結し、第１の指定組織場所において、前記組織の前記画像の上に第１のグラフィカルインジケータを重ね、前記画像を使用して、前記第１のグラフィカルインジケータと第２の組織場所との間の測定を決定する、
システム。
（項目１６）
前記画像捕捉デバイスは、立体画像捕捉デバイスを備え、前記ディスプレイは、立体ディスプレイを備え、前記システムは、前記ロボットツールに連結されたマスタコントローラをさらに備え、前記マスタコントローラは、システムユーザからの移動コマンドを受信し、前記ディスプレイ上に示された左右の立体画像を参照して前記第１のツールを前記第１の組織場所に誘導し、前記プロセッサは、前記ユーザが前記第１のツールを前記第１の組織場所に誘導する間、前記第１のツールと一致する画像の上にグラフィカルツール測定マーカを重ねる、項目１５に記載のシステム。
（項目１７）
前記プロセッサは、前記ユーザから連続的に組織指定コマンドを受信し、前記第１のツールを用いた前記第２の組織場所の指示を促進するように構成されている、項目１６に記載のシステム。
（項目１８）
前記プロセッサは、前記ユーザから組織指定コマンドを受信し、前記第１のツールで前記第１の組織場所を示し、かつ、第２のロボットツールで前記第２の組織場所を同時に示すように構成されている、項目１６に記載のシステム。
（項目１９）
前記プロセッサは、前記入力を前記ディスプレイに連結し、前記ユーザが前記第１のツールを前記第１の組織場所に誘導している間、前記第１の場所と前記第２の場所との間に延在する移動線を重ねる、項目１６に記載のシステム。
（項目２０）
前記プロセッサは、前記測定が、前記組織画像の上に重ねられ、かつ前記線から分離されて表示されるように、オフセット表示場所を決定するように構成されている、項目１９に記載のシステム。
（項目２１）
前記プロセッサは、前記入力を前記ディスプレイに連結し、追加の組織場所を示す追加の入力指定コマンドを受信し、連続的な複数対の組織場所の間の３次元オフセット距離を決定し、かつ、オフセット距離を合計して、結果として生じる累積測定を前記画像の上に重ねる、項目１５に記載のシステム。
（項目２２）
前記第１のツールおよび前記第２のツールは、それぞれ、ジョーを備え、前記組織指定入力は、前記ジョーに対するジョー関節動作入力を含み、前記プロセッサは、前記組織に沿った手を交互に動かした長さの測定における複数のオフセット距離を合計することによって、前記複数のオフセット距離を測定するよう構成されている、項目１５に記載のシステム。
（項目２３）
前記プロセッサは、前記入力を前記ディスプレイに連結し、囲まれた領域を規定するよう追加の入力指定コマンドを受信し、前記測定は、面積測定を含む、項目１５に記載のシステム。
（項目２４）
前記組織場所は、領域の境界を定める離散場所を含み、各組織場所は、関連付けられた指定コマンドを有する、項目１５に記載のシステム。
（項目２５）
前記画像捕捉デバイスは、立体画像捕捉デバイスを備え、前記プロセッサは、前記画像データに応答して、組織表面の３次元場所を決定し、前記プロセッサは、前記グラフィカルインジケータを、前記第１のツールから前記組織表面に素早く動かすことによって、前記第１の組織場所を指定する、項目１５に記載のシステム。
（項目２６）
前記組織は、生理学的に動いている組織を含み、前記画像は、前記動いている組織の静止立体画像を含み、前記システムは、前記プロセッサによって前記ディスプレイに連結された３次元入力デバイスをさらに備え、前記静止立体画像上に重ねられる３次元グラフィカルインジケータが、入力デバイスを使用して位置付けられることにより、前記第２の組織場所を示す、項目１５に記載のシステム。
（項目２７）
生理学的に動いている組織を測定するためのロボットシステムであって、
手術部位に向けて配向可能な立体画像捕捉デバイスであって、使用において、前記手術部位における前記組織の画像に対応するビデオ画像データを生成する画像捕捉デバイスと、
前記画像をシステムユーザに示すために、前記画像捕捉デバイスに連結されたディスプレイと、
組織場所を指定するための入力と、
プロセッサと
を備え、
前記プロセッサは、前記入力を前記ディスプレイに連結し、第１の指定組織場所が指定された場合に、前記組織の停止立体画像の上に重ねられた３次元グラフィカルインジケータを位置決めし、かつ、前記グラフィカルインジケータと前記第１の組織場所との間の測定を決定する、
システム。
【図１】
2012529970.tif 000004
【図２】
2012529970.tif 000005
【図３】
2012529970.tif 000006
【図４】
2012529970.tif 000007
【図５Ａ】
2012529970.tif 000008
【図５Ｂ】
2012529970.tif 000009
【図５Ｃ】
2012529970.tif 000010
【図６】
2012529970.tif 000011
【図７】
2012529970.tif 000012
【図８】
2012529970.tif 000013
【図９】
2012529970.tif 000014
【図１０Ａ】
2012529970.tif 000015
【図１０Ｂ】
2012529970.tif 000016
【図１１】
2012529970.tif 000017
【図１２】
2012529970.tif 000018
【図１３】
2012529970.tif 000019
【図１４】
2012529970.tif 000020
【図１５Ａ】
2012529970.tif 000021
【図１５Ｂ】
2012529970.tif 000022
【国際調査報告】
2012529970.tif 000023
2012529970.tif 000024
2012529970.tif 000025
2012529970.tif 000026
2012529970.tif 000027