(57)【要約】【課題】内視鏡下での腹腔手術に際し多数の鉗子の中から、手術者の音声指示に基づき特定の鉗子を選び出し、該鉗子を手術者に差し出す手術支援行為を実現する。【解決手段】手術台１４の近傍に設置し得るスタンド１２と、スタンドに設けられ、所要数の鉗子を着脱自在に保持するホルダ２２と、スタンドに設けられ、ホルダ２２に保持した鉗子２０から所望の鉗子をピックアップし、鉗子を手術者へ差し出してから鉗子の解放を行なうアーム２４と、所望の鉗子を特定する手術者の音声指示に対応して、指示された鉗子の割出し指令を出力すると共に、アームへの動作指令を出力する音声認識制御手段２８と、手術者が音声指示した特定の鉗子の先端形状の映像を、内視鏡下での手術映像と合成してディスプレイ１６に表示する合成映像生成手段３０とからなり、音声指示に伴う割出し指令によって、ホルダまたはアームの何れかに所望の鉗子の割出し動作を行なわせる。【選択図】図１
2006122473.tif 000002
【特許請求の範囲】
【請求項１】
内視鏡下での腹腔手術に際して、手術者が当該手術に必要な特定の鉗子(20)を音声で指示することにより、手術台(14)の近傍に設置した手術支援ロボット(10)がその音声指示に応答し、予め準備された多数の鉗子(20)の中から特定の鉗子(20)を選び出して、該鉗子(20)を手術者に差し出す手術支援を行うようにしたことを特徴とする手術支援方法。
【請求項２】
手術台(14)の近傍に移動自在に設置し得るスタンド(12)と、
前記スタンド(12)に設けられ、所要数の鉗子(20)を着脱自在に保持するホルダ(22)と、
前記スタンド(12)に設けられ、前記ホルダ(22)に保持した鉗子(20)から所望の鉗子(20)をピックアップし、該鉗子(20)を手術者へ差し出してから該鉗子(20)の解放を行なうアーム(24)と、
所望の鉗子(20)を特定する手術者の音声指示に対応して、指示された鉗子(20)の割出し指令を出力すると共に、前記アーム(24)への動作指令を出力する音声認識制御手段(28)と、
手術者が音声指示した特定の鉗子(20)の先端形状の映像を、内視鏡下での手術映像と合成してディスプレイ(16)に表示する合成映像生成手段(30)とからなり、
前記音声指示に伴う割出し指令によって、前記ホルダ(22)またはアーム(24)の何れかに所望の鉗子(20)の割出し動作を行なわせるよう構成した
ことを特徴とする手術支援ロボット。
【請求項３】
前記ホルダ(22)は前記アーム(24)に対し回転を行なって、手術者の音声指示により特定された鉗子(20)の割出しを行なう請求項２記載の手術支援ロボット。
【請求項４】
前記アーム(24)は前記ホルダ(22)に対し回転を行なって、手術者の音声指示により特定された鉗子(20)の割出しを行なう請求項２記載の手術支援ロボット。
【請求項５】
前記夫々の鉗子(20)は、該鉗子(20)に固有の情報を識別管理する識別コードを備え、前記スタンド(12)に設けたリーダー(68)が読み取った各対応の識別コードを、前記合成映像生成手段(30)において該鉗子(20)の先端形状の画像と合成させるようになっている請求項２記載の手術支援ロボット。
【請求項６】
前記スタンド(12)に使用済みの鉗子(20)を受容する鉗子回収手段(64)を設け、前記アーム(24)は該鉗子回収手段(64)が受容した鉗子(20)をピックアップした後に、前記ホルダ(22)の所定位置に再保持させる戻し動作を行なう請求項２記載の手術支援ロボット。
【請求項７】
前記鉗子回収手段(64)は、手術者の動作領域に向けて開口する鉗子受け部材を備え、使用済みの鉗子(20)は該鉗子受け部材に回収される請求項６記載の手術支援ロボット。
【請求項８】
前記ホルダ(22)は前記スタンド(12)に着脱自在に設けられて、事後の滅菌処理に供される請求項２記載の手術支援ロボット。
【請求項９】
前記アーム(24)は鉗子(20)のピックアップ及び解放を行なうハンド(58)を備え、該ハンド(58)は該アーム(24)に対し着脱自在に設けられて事後の滅菌処理に供される請求項２記載の手術支援ロボット。
【請求項１０】
前記アーム(24)は鉗子(20)のピックアップ及び解放を行なうハンド(58)を備え、該ハンド(58)は該アーム(24)の先端に設けたリスト(56)に対し着脱自在に設けられて事後の滅菌処理に供される請求項２記載の手術支援ロボット。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、手術支援方法と、該方法を実施する手術支援ロボットに関し、更に詳細には、内視鏡下での腹腔手術に際し必要とされる多数の鉗子の中から、手術者の音声指示に基づき特定の鉗子を選び出して、該鉗子を手術者に差し出す手術支援行為をなし得る医療関連技術に関するものである。
【背景技術】
【０００２】
例えば患者の腹部疾患に関連する手術に際し、その疾患の部位や程度如何によっては、開腹手術に代えて内視鏡手術を行なった方が、患者の身体に及ぼす侵襲が緩和され、また手術跡の回復も早く且つ傷跡も小さくし得る等の多くの利点がある。このため最近では、内視鏡下での腹腔手術の研修体制も確立されており、今後は更に広く普及する傾向にある。
【０００３】
この内視鏡手術に当っては、患者の腹部を小さく切開して３〜４個所の穴を開け、夫々の穴に挿し込んだ中空スリーブ(カニューレ)に内視鏡や各種鉗子を対応的に挿入して腹腔内手術を実施するようになっている。内視鏡にはＣＣＤ撮像素子が組込まれ、該撮像素子で捕えられた内臓領域の映像(術野)は、手術台の向こう側に設置したディスプレイに映し出される。また鉗子の先端は、使用目的に応じて電気メスやピンセットその他鋏等の機能を有する形状になっており、手術部位の切開や切除、内臓部分の摘み上げや拡開、縫合糸の切断等の各種作業に供される。そして内視鏡の患部への挿入は手術者が行なうが、手術中における該内視鏡の保持・視野確保等は助手としての医師や看護師等が行なう。また鉗子の患部への挿入及び操作は、手術者及び助手としての医師が分担して行なう。
【特許文献１】特開２００４−１２９９５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
内視鏡手術では、手術の進行に伴って各種の鉗子が使い分けられるため、多数の鉗子の管理に当たる助手は、手術者からの口頭の指示に応じてトレー中の鉗子から特定の鉗子を選び出し、当該鉗子を手術者に手渡す作業を分担している。しかし多数の鉗子群の中から特定の鉗子を選び出し、その特定された鉗子を手術者に手渡すという作業は、高度の熟練と経験とが要求される内視鏡手術の作業環境下においては、どちらかと云えば単純で技巧を殆ど要しないものである。
【０００５】
このように鉗子の選び出し及び手術者への手渡し(更には使用済みの鉗子の戻し)は単純作業と捉えられるが、また反面手術を円滑に遂行する上で極めて重要な作業であるために、従来はこれを充分な医療知識を有し、または研修途次にある医師や看護師がこれを担当している。このため補佐的な役割とは云え、鉗子の管理担当者には専門性を有する人員を確保する必要があり、これが手術のコスト増大につながっている。また、他の手術に振り向けることの可能な人員でありながら、１つの内視鏡手術にそれらの人たちを集めなければならないために、医療体制での全体的な人員不足に拍車を掛ける事態に至っている。
【課題を解決するための手段】
【０００６】
そこで本願の発明者等は、前記の内視鏡手術に特有の鉗子の選択・手渡し作業が専門性を有する人員に頼っていた現況に対し発想を転換して、鉗子関連の付帯作業を「ロボット化した手術支援行為」と把えることに解決の端緒を見出した。すなわち内視鏡手術の流れを全体的に俯瞰した場合に、その殆どは高度の熟練と経験を積んだ人間技が必要とされているが、ロボット制御技術と音声認識制御技術とが進展した現在であるならば、手術者の音声による指示の下に、用意された多数の鉗子群の中から指示された特定の鉗子を選択的に取出し、当該鉗子を手術者の動作領域近傍まで差し出す作業をロボット化し得る、と判断するに至ったものである。この場合に、本願発明は、その構想を更に進めて、手術者が使用した後の鉗子を再使用のため所定の鉗子セット位置まで戻すことも、ロボット化による手術支援行為の一環に含ましめている。
【０００７】
前述した内視鏡手術に内在している鉗子手渡しに伴なう人員不足やコスト増大の課題を解決し、所期の目的を好適に達成するため本発明に係る手術支援方法は、内視鏡下での腹腔手術に際して、手術者が当該手術に必要な特定の鉗子を音声で指示することにより、手術台の近傍に設置した手術支援ロボットがその音声指示に応答し、予め準備された多数の鉗子の中から特定の鉗子を選び出して、該鉗子を手術者に差し出す手術支援を行うことを特徴とする。
【０００８】
同じく内視鏡手術に内在している前記課題を解決し、所期の目的を好適に達成するため本発明に係る手術支援ロボットは、手術台の近傍に移動自在に設置し得るスタンドと、
前記スタンドに設けられ、所要数の鉗子を着脱自在に保持するホルダと、
前記スタンドに設けられ、前記ホルダに保持した鉗子から所望の鉗子をピックアップし、該鉗子を手術者へ差し出してから該鉗子の解放を行なうアームと、
所望の鉗子を特定する手術者の音声指示に対応して、指示された鉗子の割出し指令を出力すると共に、前記アームへの動作指令を出力する音声認識制御手段と、
手術者が音声指示した特定の鉗子の先端形状の映像を、内視鏡下での手術映像と合成してディスプレイに表示する合成映像生成手段とからなり、
前記音声指示に伴う割出し指令によって、前記ホルダまたはアームの何れかに所望の鉗子の割出し動作を行なわせるよう構成したことを特徴とする。
【発明の効果】
【０００９】
本発明に係る手術支援ロボットによれば、内視鏡手術に際し必要不可欠な作業でありながら、それ自体は必ずしも医療従事者により行なわれることを要件としない鉗子の選択・手渡し作業をロボット化したことにより、その作業に従事していた医師や看護師等の高度の医療知識を有する者を、本来の人手による医療作業に振り向けることが可能となる。その結果として、特定の内視鏡手術に限って観察すれば、当該手術に待機・従事する医療技術者の数を低減させることができ、１回当りの手術に要する費用を削減することが可能になる。また手術室内での要員数を減らすことは、手術環境の空気汚染等のマイナス要因を改善することにもなり、更にロボット化により浮いた人員は他の一層専門性の高い各種医療業務に振り向けて、慢性的な人手不足の解消にも貢献し得るものである。
【発明を実施するための最良の形態】
【００１０】
次に、本発明に係る手術支援方法及びこれを実施する手術支援ロボットにつき、好適な実務例を挙げて、添付図面を参照しながら以下説明する。
【００１１】
図１及び図２は、本発明に係る手術支援ロボット１０を導入した手術室内の概略を示す斜視図であり、図３は手術支援ロボット１０の概略斜視図である。手術支援ロボット１０は、後述の如くキャスター付きのスタンド１２を有し、図１及び図２に示す手術台１４に近接した適宜の位置に、内視鏡手術の直前に移動設置される。手術台１４の向う側には液晶パネル等のディスプレイ１６が設けられ、手術台上の患者の腹腔に挿入された内視鏡(図示せず)により撮像された患部(術野)が、前記ディスプレイ１６に映し出されるようになっている。なお、内視鏡手術に際しては、主担当としての執刀者(以下手術者という)と、鉗子の操作等を担当して手術者を補佐する医師資格を有する助手その他看護師等とによるチームが結成される。
【００１２】
本発明では、内視鏡手術の進行に応じて手術者が音声で特定の鉗子を指示し、手術支援ロボット１０が、その音声指示に応答して各種先端形状の鉗子群中から特定の鉗子２０を選択し、該鉗子２０をピックアップして手術者の手元へ差し出す医療支援を行うことで、人手を軽減させることを内容としている。
【００１３】
(発明の全体構成について)
図３に示すように、実施例に係る手術支援ロボット１０は、キャスター１８により移動自在なスタンド１２と、このスタンド１２に設けられて、用途に応じた各種先端形状を有する多数の鉗子２０を着脱自在に保持するホルダ２２と、同じく前記スタンド１２に設けられて、後述の音声指示により動作して前記ホルダ２２から所要の鉗子２０をピックアップし、該鉗子２０を手術者へ差し出してから解放するアーム２４と、図７に示す制御部２６とを基本的に備えている。
【００１４】
図７の制御部２６は、例えばパソコン(図示せず)に取込まれており、手術者がマイクを介して所望の鉗子２０を特定する音声指示に対応して、前記ホルダ２２に支持された鉗子２０の割出し指令を出力する。この制御部２６は、前記アーム２４に所要の動作指令を出力する音声認識制御手段２８を備えると共に、前記ディスプレイ１６(内視鏡による術野が映し出されている)に、手術者が音声で指示した特定の鉗子２０の先端形状を、該術野と共に合成表示する合成映像生成手段３０も備えている。これにより手術者は、自分が指示した特定の鉗子２０の先端形状を視覚を通じて確認することができる。なお、前記ディスプレイ１６には、例えば使用頻度の高い順に複数の鉗子２０の先端形状をメニュー状に合成表示し、手術者がその映像中から必要とする鉗子２０を視認して特定するメニュー形式としてもよい。
【００１５】
図示の実施例は、多数の鉗子２０を保持したホルダ２２がアーム２４に対し回転して、該アーム２４が最もピックアップし易い定位置へ特定の鉗子２０を割出す構成としたが、これらホルダ２２とアーム２４との関係は相対的なものであるので、逆の構成としてもよい。すなわち多数の鉗子２０を保持しているホルダ２２に対してアーム２４の方が割出し動作を行ない、次いで特定の鉗子２０を該アーム２４がピックアップする構成も、本発明の範囲に含まれるものである。
【００１６】
(スタンドについて)
前記スタンド１２は、例えばフットペダルの操作により昇降して所望の高さに設定し得るエレベータ３２と、このエレベータ３２の頂部に水平に配設した支持板３４とを備えている。支持板３４の上面には、後述するホルダ２２及びアーム２４が搭載されると共に、該支持板３４の下面には、図４に示すように、これらホルダ２２及びアーム２４の駆動機構が配設されている。
【００１７】
(ホルダについて)
図４及び図５に示すように、ホルダ２２は、所要厚みの円板３６と、該円板３６の円周方向の端線部に所要間隔で設けたクリップ３８と、該円板３６の裏面中心に設けられて同軸的に延在する中空筒体４０と、該中空筒体４０の下端フランジに設けた所要直径の第１ギヤ４２とから構成されている。前記クリップ３８の夫々には、鉗子２０の軸部(シース)２０aが係脱自在に嵌入装着され、図６の如く、先端部を下方に指向させた状態で垂下保持されるようになっている。
【００１８】
なお、夫々の鉗子２０の適宜の位置には、種類その他を識別管理するデータ(製造元、材質その他の諸元を含んでもよい)を付与した識別コード、例えばバーコードが付され、このバーコードは後述のリーダー６８により読み取られて、前記制御部２６に記憶保持されるようになっている。この識別コードは、バーコード以外にも、例えばＱＲコード等の認識コードが適宜に採択使用される。また前記円板３６の周りの各クリップ３８にも、夫々の鉗子２０に付与した識別コードと一致するコードが割り振られており、定められたクリップ３８に対応の鉗子２０が保持されるようコード管理がなされている。但し、図３及び図４に示すように、支持板３８に立設したポール３９にリーダー６８を固定し、鉗子マガジンとして機能するホルダ２２を回転させることで、各鉗子２０に付された認識コードを読み取り可能である。このように構成した場合は、ホルダ２２上のどのクリップ３８に鉗子２０をセットしてもよい。
【００１９】
前記スタンド１２の支持板３４には支持軸４４が直立配置され、この支持軸４４に前記ホルダ２２の中空筒体４０が外挿されて、該ホルダ２２を該支持軸４４の周りに回転自在に支持し得るようになっている。図４に示すように、支持板３４の裏側には、例えばサーボモータ４６が直立状態で配置され、サーボモータ４６により駆動される減速機４８の出力軸は該支持板３４の上方に垂直に延出し、その先端に第２ギヤ５０を備えている。この第２ギヤ５０は、前記ホルダ２２の第１ギヤ４２と噛合し、前記制御部２６から出力される指令により該ホルダ２２に所要の割出し回転を付与するようになっている。このホルダ２２に対する最小の割出し角は、前記鉗子２０を着脱自在に保持するクリップ３８の数で全周角度を除して得られる回転角である。
【００２０】
図示のホルダ２２は、中空筒体４０の頂部に設けた前記円板３６とは別に、該中空筒体４０の略中間付近にも、同じく円周方向に所要数のクリップ３８を設けた第２の円板５２を有している。これは鉗子２０のシース２０ａが長尺であるため、該シース２０ａを上下の円板３６,５２における各対応のクリップ
３８で夫々保持して安定化させるためである。この第２の円板５２は、場合によっては配設を省略してもよい。なお機構については図示しないが、上下の円板３６,５２に設けた各クリップ３８は、後述するアーム２４の接近を確認して保持中の鉗子２０を解放するべく同期的に開放したり、戻ってきた鉗子２０をチャックするべく同期的に閉成したりするようになっている。但し、機構簡略化のために、前記クリップ３８には開閉用の動力手段を設けないで、スプリングにより該クリップ３８を閉成方向へ弾力付勢する構成としてもよい。
【００２１】
前記ホルダ２２は、常にはその中空筒体４０をスタンド１２に立設した支持軸４４に外挿させることで、周方向への回転自在に支持されているが、手術終了後は該ホルダ２２をそっくり該スタンド１２から外して減菌処理に回すことができる。このためスタンド１２自体は、ドレープ等で覆っておくことで足りる。
【００２２】
(アームについて)
殊に図３及び図４に示すように、前記スタンド１２における支持板３４の上部には、前記ホルダ２２と所要間隔で隣接するアーム２４が設けられている。このアーム２４は、基本的にアーム本体５４と、その上端部にリスト５６を介して設けたハンド５８とからなり、アーム本体５４の下端部はトラニオン６０により軸支されている。
【００２３】
図４に示すように、前記支持板３４の裏側にはアーム駆動機構６２が設けられ、前記アーム２４に各種自由度の動作を付与している。例えばアーム本体５４は、支持板３４に対し水平旋回及び垂直旋回が所要の角度範囲で与えられる。また前記ハンド５８は開閉可能に構成されると共に、リスト５６を介してアーム本体５４に対し垂直方向、水平方向及び旋回方向(捻り)に回動可能であって、把持対象物である鉗子２０のハンドル基部をクランプ及びアンクランプし得るようになっている。その開閉機構は、既存のロボットアームに採用されるそれと大差ないので、その詳細説明は省略する。なお、前記ハンド５８は、リスト５６と共にアーム２４に簡単な操作で着脱自在に設けられており、従って手術後には、該ハンド５８をアーム２４から取り外して滅菌処理に供することが出来る。また、前記ハンド５８をアーム２４の先端に設けたリスト５６に着脱自在に設けるようにして、該ハンド５８だけを事後の滅菌処理に供するようにしてもよい。
【００２４】
前述の自由度を与えることで、アーム本体５４の上端に設けたハンド５８を、前記ホルダ２２の定位置に割出された特定の鉗子２０に向けて所要角度だけ垂直方向に旋回上昇移動させてピックアップし、次いで垂直方向に旋回下降しつつ水平方向に所要角度だけ旋回して、該ハンド５８に把持した鉗子２０を手術者へ向けて差し出すようになっている。すなわち実施例のアーム２４は、支持板３４に対する垂直旋回及び水平旋回に、ハンド５８がアーム本体５４に対して持っている垂直旋回・水平旋回及び旋回方向(捻り)と、該ハンド５８の開閉動作とを加えた６つの自由度を有している。勿論、製造コストや現場からの使い勝手の要求度等を勘案して、より多くの自由度を有する多関節系アームとして構成したり、またコスト面の制約に鑑み、ハンド５８をアーム本体５４に対し垂直旋回させる機構を省略したりしてもよい。但し、一般にアーム側の自由度を高めれば、他の周辺機器の構成を簡易化することが出来る。また、逆にアーム側の自由度を低減させれば、他の周辺機器の構成を複雑化させる必要を生ずる。
【００２５】
(鉗子回収手段について)
前記アーム２４が特定の鉗子２０をホルダ２２からピックアップして手術者に差し出すと、手術者は該鉗子２０を受け取って直ちに使用するが、使用後の鉗子２０は同一手術である限り再度の使用が許容されるので、使用済みの鉗子２０を一時的に受け取る手段が必要になる。本実施例では、図４に示す形状をした鉗子回収手段６４が、この鉗子回収の用途に供される。例えば鉗子回収手段６４は、前記スタンド１２の基部近傍に支持されて上方に開口するホーン状の鉗子受け部材として構成され、その開口部は手術者が使用済みの鉗子２０をハンドルを上にして放り込むのに最も適した形状になっており、且つ手術者の動作に全く干渉することのない位置に向けられる。
【００２６】
また使用済みの鉗子２０は、前記鉗子回収手段６４へ戻された際に、該鉗子２０のハンドルがホーン状開口部より上に位置すると共に、前記アーム２４が該鉗子２０を回収するのを許容し得るよう、該アーム２４の動作領域にハンドル基部を臨ませ得るようになっている。従って使用済み鉗子２０の回収時には、アーム２４が鉗子回収手段６４に向けて下降・水平旋回移動し、ハンド５８が該鉗子２０のハンドル基部を把持した後に、上昇・水平旋回して該鉗子２０をホルダ２２の定められたクリップ３８に保持させる。このとき、鉗子２０に設けられた前記識別コードを、例えばハンド５８に配設したリーダーで読み取ってホルダ２２の定位置へ間違いなく戻すようになっている。また前述したように、固定側となるポール３９にリーダー６８を設け、ホルダ２２へ鉗子２０を返却する際に、認識コードを該リーダー６８により逐次読み取って確認するようにしてもよい。
【００２７】
鉗子回収手段６４は、前記アーム２４に付与されている自由度との兼合いにおいて、該アーム２４のハンド５８が使用済み鉗子２０を該鉗子回収手段６４からピックアップし易いように、該アーム２４の動作領域へ向いて前進・後退移動したり、上昇下降移動したりする機構を付与してもよい。これによりアーム２４の自由度が低くても、使用済み鉗子２０の回収を円滑に行ない得る。また前述した鉗子回収手段６４は、一例としてホーン状に構成したが、使用後の鉗子２０を手術者が支障無く所定の回収箇所へ戻し得る形状になっていれば、ホーン状でなくても各種の鉗子受け部材を採用することが出来る。例えば、ホーン状の鉗子受け部材に代えて、前記支持板３４に設けられて半径方向の斜め上方へ延出し、手術者が鉗子を戻し易い動作領域へ先端を臨ませた樋状部材としてもよい。この場合の樋状部材は、断面が上方へ開放したV溝に設定することが提案される。
【００２８】
(制御部について)
図７は、実施例に係る手術支援ロボット１０に関連する各種入力を受容し、また該ロボット１０に各種の出力を与えて鉗子２０の選択並びに差し出し動作を行なわせると共に、前記ディスプレイ１６に合成画像を送り出す制御部２６を示すブロック図である。先に概説した如く、制御部２６はパソコン内に取り込まれており、内部に音声認識制御手段２８及び合成映像生成手段３０を備えている。この制御部２６の入力端子には、例えば手術者の口部付近にセットされるマイク６６、前記認識コード読取り用のリーダー６８その他鉗子２０の先端画像取り込み用の撮像素子(カメラ)７０の各出力端子が接続される。なお、マイク６６やリーダー６８等と制御部２６との接続は、ケーブルによる有線や無線LAN等の何れであってもよい。前記マイク６６としては、骨伝導タイプのものが音声認識度を高める上で推奨されるが、それ以外のものであってもよい。また制御部２６の出力端子には、内視鏡による術野及び鉗子先端映像を合成表示するディスプレイ１６、手術支援ロボット１０に各種の動作指令を与えるコントローラ(乃至シーケンサ)７２その他各種指令に対する確認音を出すスピーカ７４の各入力端子が接続される。これら出力端子と入力端子の接続も、有線・無線の何れもが適宜選択的に使用される。
【００２９】
(音声認識制御について)
制御部２６が内蔵している音声認識制御手段２８には、手術者からの音声による鉗子選択指示が、マイク６６及びサウンドボード７６を介して入力される。音声認識制御手段２８は、音声認識用のソフトとして音声認識エンジン７８及びロボット制御コマンド部８０を有している。音声認識エンジン７８は、特定の手術者からの音声であるか否かを、例えば予め記憶させておいた当該手術者の肉声パターンとの照合等により本人確認を行なうと共に、その音声により指示された内容(例えば、１番鉗子、２番鉗子等の指示)の具体的な認識・把握を行なう。そして、音声認識エンジン７８により認識された特定の鉗子に付与されているデジタルコードを、前記ロボット制御コマンド部８０へ送り出す。ロボット制御コマンド部８０は、その入力されたデジタルコードを解析して、それに対応した指示を前記コントローラ７２へ出力し、該コントローラ７２は前記ホルダ２２の鉗子割出し動作及び前記アーム２４による特定の鉗子２０のピックアップ並びに手術者への差し出し動作を指示する。その一連の動作フローは、図９及び図１０のフローチャートに関連して後述する。
【００３０】
(合成映像生成について)
制御部２６が内蔵している合成映像生成手段３０は、前記リーダー６８で読み込んだ鉗子番号等のコードと、前記撮像素子７０により取り込んだ当該鉗子２０における実際の先端部(例えばピンセット状か、鋏状か等)の画像とを合成するソフトである。すなわち夫々の鉗子２０の先端画像は、前記撮像素子７０により予め撮影されて、合成映像生成手段３０に当該鉗子２０に対応するコードと共に登録されている。また、図示しない内視鏡カメラからの術野映像は、制御部２６に内蔵したビデオキャプチャーボード８２に取り込まれた後、合成映像生成手段３０において手術者が音声指示した特定の鉗子２０の先端画像及びコードと合成され、その合成画像が前記ディスプレイ１６に映し出される。
【００３１】
ディスプレイ１６に映し出される合成映像は、例えば図８に示すように、内視鏡によりリアルタイムで撮像されている術野を主画面とし、その下方に鉗子２０の先端形状と鉗子番号とからなる合成画像が副画面として映し出される。この場合に、鉗子先端形状は、例えば鉗子番号１〜４の如く複数の鉗子２０をメニュー表示するようにしてもよいし、また手術者が特定した鉗子２０の先端形状と番号だけを単独表示するようにしてもよい。但し、前者のメニュー表示の方が、手術者が全ての鉗子２０の形状及び対応番号を記憶しておかなくても、ディスプレイ１６上のメニュー画面から視覚により確認・選択をなし得る利点がある。
【００３２】
更に制御部２６は、音声合成エンジン８４を備え、前記サウンドボード７６を介してスピーカ７４へ音声による確認・否定・不存在の告知等を発声し得るようになっている。勿論、全てを合成音声とする必要はなく、単なる確認音を出すようにしてもよい。また確認や注意促しのための音声や音響に限らず、光や振動等を付帯させるようにしてもよい。
【００３３】
(ロボットの一連の動作について)
次に、実施例に係る手術支援ロボット１０の一連の動作を、図９のフローチャートを参照して説明する。但し、このフローチャートによる動作は、多様に考えられる動きの中で、先に述べたアーム２４の自由度、ホルダ２２の割出し動作及び制御部２６に盛込まれた制御内容の範囲で考えられる一例としてのものである。
【００３４】
内視鏡手術を開始するに際しては、当該手術に必要とされる鉗子２０が、前記ホルダ２２の各クリップ３８に対応的に嵌合保持(セット)されているものとする。なお鉗子２０に付した識別コードは、前記リーダー６８により予め読み取られ、鉗子先端形状の画像が制御部２６の合成映像生成手段３０に記憶させてある。
【００３５】
図９のフローチャートのステップＳ１において、リーダー６８は全ての鉗子２０が順番通りホルダ２２にセットされているかを確認し、ＹＥＳ(肯定)であればステップＳ２で手術者による音声指示を待機する。但し、リーダー６８は、鉗子２０を認識コードと逐次照合する確認を行っているので、鉗子２０がホルダ２２に順番通りセットされていることは必須要件でない。また確認結果がＮＯ(否定)であれば、ステップＳ３で音声による警告を行ない、手術関与者への注意喚起を行なう。なお、前記ステップＳ１での確認は、例えばホルダ２２の周回領域付近の固定部位に立設した前記ポール３９にリーダー６８を設け、該ホルダ２２を１回転させて各クリップ３８に保持した鉗子２０の識別コードを読み取ることで行なうが、これに限定されるものではない。
【００３６】
ステップＳ２の音声指示待機中に、手術者がマイク６６を介して特定の鉗子２０を音声で指示(ステップＳ４)すると、ステップＳ５においてディスプレイ１６に、特定された鉗子２０の先端形状及び鉗子番号等の情報が合成表示されると共に、当該鉗子２０に出された指示を確認する人工音声や確認音がスピーカ７４から出される。この場合に、前記ディスプレイ１６に所要数の鉗子２０を対応番号と共に予めメニュー表示しておいて、手術者がその中から特定の鉗子２０を視認した後に音声指示してもよいことは、先に述べた通りである。またディスプレイ１６への鉗子先端形状の合成表示は、前記制御部２６の合成映像生成手段３０で行なわれ、音声確認動作は音声認識制御手段２８で行なわれる。
【００３７】
次いでステップＳ６でホルダ２２の回転割出しを行なって、手術者が音声で特定した鉗子２０をアーム２４の最もピックアップし易い定位置まで到来させる。制御的には、制御部２６からコントローラ７２を介した指示により、サーボモータ４６の割出し回転が実行される。そしてステップＳ７で、例えば前記リーダー６８により定位置へ割出されて停止した特定の鉗子２０に付された識別コードを読み取ることにより、所望の鉗子２０が割出されたかの確認を行ない、結果がＮＯであればステップＳ６に戻って再度実行する。結果がＹＥＳであれば、ステップＳ８へ進んで前記コントローラ７２からアーム駆動機構６２へ所要の駆動指令を出力し、ホルダ２２の定位置に割出されて待機中の特定の鉗子２０に向けてアーム２４を移動させ、前記ハンド５８による該鉗子２０のクランプ(把持)を行なわせる。なお、ホルダ２２におけるどのクリップ３８に鉗子２０がセットされているかは、制御部２６が事前に記憶しているので、前記ステップＳ６は省略してもよい。
【００３８】
次いでステップＳ９で、前記ハンド５８が確実に鉗子２０を把持したかを確認し、結果がＮＯであれば、ステップＳ８で該ハンド５８による把持を再実行させ、結果がＹＥＳであれば、ステップＳ１０に進んでアーム２４を旋回移動させ、手術者の手元へ特定の鉗子２０を差し出す。なお、ハンド５８による鉗子把持の確認は、例えばストレインゲージ等の圧力センサを該ハンド５８に設けておき、該センサの圧力変化に伴なう電気信号を制御部２６へ出力することが考えられる。また、前記のような触覚センサでなくても、鉗子確認用として、例えばフォトセンサの如き非接触式の在荷センサを設けてもよい。
【００３９】
次にステップＳ１１で、アーム２４の旋回動作により差し出された鉗子２０を手術者が実際に手にしたかを確認し、結果がＹＥＳであればハンド５８を開いて鉗子２０に対する把持を解放する。結果がＮＯであれば、ステップＳ１１を再度実行する。このステップＳ１１は、特定の鉗子２０を手術者に手渡す際に必要であり、例えば手術者の手元へ鉗子２０を差し出してから所要の時間が経過(例えば３秒間)した時点でハンド５８を開放するとか、手術者が当該鉗子２０に手で触れた際の圧力変化を前記圧力センサで検出してハンド５８を開放する等が考えられる。なお、時間経過をファンクションとする制御その他圧力センサの配設等に代えて、機械的な構造を付加することで、手元へ差し出された鉗子２０を手術者が手でもぎ取る動作により、該鉗子２０がハンド５８から外されるようにしてもよい。一例として、フィンガー状のハンド５８に、常には該ハンド５８を閉じる方向へ弾力的に付勢するスプリング(図示せず)を介装しておく。そしてハンド５８が所定の鉗子受け渡し位置まで到来して停止すると、所要の位置決め完了信号を受けて該ハンド５８を前記スプリングの弾力に抗して僅かに開放させる。この開放加減は、鉗子２０をハンド５８が軽く把持しており、手術者が該鉗子２０を手に取って移動させた際に簡単に外れる程度に設定される。鉗子２０がハンド５８から取り外されると、所要のセンサが「鉗子無し」を検知し、ハンド５８は前記スプリングの弾力に抗して完全に開放し、次の鉗子取出し位置へ帰還する。
【００４０】
何れにしても、ハンド５８が不用意に開放して鉗子２０を取り落すことのないよう、予め所要の対策が施してあるものとする。ステップＳ１２では、鉗子２０が手術者に手渡されたか、すなわちハンド５８が鉗子２０の把持を解放したかを確認し、結果がＮＯであれば該ステップＳ１２を再実行する。結果がＹＥＳであれば、ステップＳ１３においてアーム２４を原点となる所要の待機位置へ戻らせて停止し、そのサイクルを終了する。
【００４１】
(使用済み鉗子を戻すフローについて)
内視鏡手術では、一度使用した鉗子２０でも、当該手術中であるならば繰返し使用し得るので、実施例に係る手術支援ロボット１０では、前記鉗子回収手段６４を設けることで、該鉗子２０をホルダ２２の定位置へ戻すことができる。図１０は、そのフローチャートを示すもので、ステップＳ１４で使用済みの鉗子２０が鉗子回収手段６４に回収されているか否かを確認し、鉗子２０がなければアーム２４をステップＳ１９の原点待機位置で引続き待機させる。鉗子回収手段６４に鉗子２０が回収されていれば、アーム２４はステップ１５で鉗子回収のため移動し、ハンド５８により該鉗子２０の把持を行なう。この場合に、鉗子回収手段６４に使用済み鉗子２０が回収されているか否かは、例えば撮像手段(カメラ)その他各種センサを採用し、その出力を制御部２６へ送ることで容易に確認できるので、図示は省略してある。
【００４２】
ステップＳ１６では、鉗子回収手段６４に回収された鉗子２０をハンド５８が把持したか否かを確認し、結果がＮＯであれば、該ステップＳ１６を再実行する。結果がＹＥＳであれば、次のステップ１７へ進んでアーム２４をホルダ２２の定位置へ向け移動させる。このときホルダ２２は割出し回転がなされて、回収された鉗子２０を前に待機していたクリップ３８を定位置に到来させて、該鉗子２０の保持を行なう。この保持は、前述した如く、例えば開放中のクリップ３８がアーム２４の所定位置までの接近を検知して閉成することで、鉗子２０を再保持させる動作が考えられる。
【００４３】
次いでステップＳ１８では、鉗子２０をクリップ３８が再保持した後に、ハンド５８がその保持を解放したか否かを確認し、結果がＮＯであれば該ステップＳ１８を再実行する。結果がＹＥＳであれば、ステップＳ１９に進んで、アーム２４を原点の待機位置へ戻させて、次の動作を待機させる。
【００４４】
以上に説明したように、本発明に係る手術支援ロボットによれば、内視鏡手術に際し鉗子の選択・手渡し作業をロボット化することができ、その作業に従事していた高度の医療従事者を、他の医療作業に振り向けることが可能となり、その結果として当該手術に待機・従事する医療技術者の数を低減させることができて、手術費用を削減することができる。また各種医療業務における、慢性的な人手不足の解消にも貢献し得る。
【図面の簡単な説明】
【００４５】
【図１】本発明の実施例に係る手術支援ロボットを導入した手術室内を、手術台の手前斜め上方側から観察した斜視図である。
【図２】実施例に係る手術支援ロボットを導入した手術室内を、手術者の背面斜め上方側から観察した斜視図である。
【図３】手術支援ロボットの概略斜視図である。
【図４】手術支援ロボットの側面図である。
【図５】手術支援ロボットの平面図である。
【図６】手術支援ロボットにおけるホルダの拡大斜視図である。
【図７】手術支援ロボットの制御部を示すブロック図である。
【図８】ディスプレイに鉗子をメニュー表示して示す説明図である。
【図９】実施例に係る手術支援ロボットの一連の動作を示すフローチャート図である。
【図１０】実施例に係る手術支援ロボットの使用済み鉗子をホルダの定位置へ戻す一連の動作を示すフローチャート図である。
【符号の説明】
【００４６】
１０  手術支援ロボット              １２  スタンド
１４  手術台                        １６  ディスプレイ
１８  キャスター                    ２０  鉗子
２０ａ  シース                      ２２  ホルダ
２４  アーム                        ２６  制御部
２８  音声認識制御手段              ３０  合成映像生成手段
３２  エレベータ                    ３４  支持板
３６  円板                          ３８  クリップ
３９  ポール                        ４０  中空筒体
４２  第１ギヤ                      ４４  支持軸
４６  サーボモータ                  ４８  減速機
５０  第２ギヤ                      ５２  第２の円板
５４  アーム本体                    ５６  リスト
５８  ハンド                        ６０  トラニオン
６２  アーム駆動機構                ６４  鉗子回収手段
６６  マイク                        ６８  リーダー
７０  撮像素子(カメラ)              ７２  コントローラ
７４  スピーカ                      ７６  サウンドボード
７８  音声認識エンジン              ８０  ロボット制御コマンド部
８２  ビデオキャプチャーボード      ８４  音声合成エンジン
【図１】
2006122473.tif 000003
【図２】
2006122473.tif 000004
【図３】
2006122473.tif 000005
【図４】
2006122473.tif 000006
【図５】
2006122473.tif 000007
【図６】
2006122473.tif 000008
【図７】
2006122473.tif 000009
【図８】
2006122473.tif 000010
【図９】
2006122473.tif 000011
【図１０】
2006122473.tif 000012