(57)【要約】本発明の内視鏡装置１では、ナビケーション画面５１を表示させ、このナビゲーション画面５１は、気管支鏡２からのライブ画像を表示する内視鏡ライブ画像表示エリア５２と、ＶＢＳ画像を表示するＶＢＳ画像表示エリア５３と、ルートの全ての分岐点でのＶＢＳ画像を縮小して分岐サムネイルＶＢＳ画像として表示する分岐サムネイルＶＢＳ画像エリア５４とからなる。これにより、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションすることができる。
2004010857.tif 000002
【特許請求の範囲】
【請求項１】
本発明の内視鏡装置は、
被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、
前記被検体内の体腔路を撮像する内視鏡と、
前記被検体内の体腔路への前記内視鏡の挿入経路を案内しながら、前記被検体内を観察・処置するために、前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成するナビケーション画像生成手段とを備え、
前記ナビゲーション画像生成手段は、前記被検体内の体腔路が分岐する全分岐点での前記３次元画像の縮小画像を前記ナビゲーション画像に付加して前記ナビゲーション画像を生成することを特徴とするもの。
【請求項２】
クレーム１の内視鏡装置において、前記ナビゲーション画像生成手段は、前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手段と、このルート指示手段による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する画像処理部と、を有することを特徴とするもの。
【請求項３】
クレーム２の内視鏡撮像装置において、前記ナビゲーション画像生成手段の前記画像処理部により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手段と、を備えたことを特徴とするもの。
【請求項４】
クレーム２の内視鏡装置において、前記画像処理部により生成される前記ナビケーション画像は、前記内視鏡画像と前記３次元画像と前記ルート指示手段より設定したルート内の前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像とを有して構成されたもの。
【請求項５】
クレーム２の内視鏡装置において、前記ルート指示手段は、前記内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを、複数指示し算出可能とすることを特徴とするもの。
【請求項６】
クレーム２の内視鏡装置において、前記ルート指示手段は、前記３次元画像生成手段により生成された前記被検体内の体腔路の３次元画像の表示画面を見ながら前記ルートを指示することを特徴とするもの。
【請求項７】
クレーム２の内視鏡装置において、前記ナビゲーション画像生成手段は、前記被検体の３次元領域の画像データに基づき前記被検体内の体腔路の多画面再構築画像を生成する多画面再構築画像生成手段を有し、前記ルート指示手段は、前記多画面再構築画像生成手段により生成された前記多画面再構築画像の表示画面を見ながら前記ルートを指示することを特徴とするもの。
【請求項８】
クレーム７の内視鏡装置において、前記３次元画像は、前記被検体の３次元領域の画像データであるＣＴ画像データに基づき生成された前記被検体内の体腔路の仮想的なＶＢＳ画像であり、前記多画面再構築画像は、前記ＣＴ画像データに基づき生成された前記被検体内の体腔路のＭＲＴ画像であることを特徴とするもの。
【請求項９】
クレーム８の内視鏡装置において、前記画像処理部は、前記ルート指示手段からの算出結果に基づき、前記多画面再構築画像生成手段により生成された前記ＭＲＴ画像を用いて前記３次元画像の縮小画像を生成することを特徴とするもの。
【請求項１０】
クレーム８の内視鏡装置において、前記３次元画像生成手段は、前記内視鏡画像と同期させて、前記ルート指示部により設定されたルートの連続した前記ＶＢＳ画像をフレーム単位で生成することを特徴とするもの。
【請求項１１】
クレーム８の内視鏡装置において、さらに、前記ＣＴ画像データを取り込む取り込み部と、この取り込み部によって取り込まれた前記ＣＴ画像データを格納する第１の格納部と、前記ＶＢＳ画像に基づく画像データを格納する第２の格納部と、を有して構成されたことを特徴とするもの。
【請求項１２】
クレーム３の内視鏡装置において、前記内視鏡の挿入量を算出する挿入量算出手段とを有し、前記画像表示制御手段は、前記挿入量算出手段による挿入量算出結果に基づき、前記ナビゲーション画像内の前記内視鏡画像を表示させることを特徴とするもの。
【請求項１３】
クレーム３の内視鏡装置において、さらに、前記ルート指示手段及び前記画像表示制御手段に操作指示を与える操作入力手段を設けたことを特徴とするもの。
【請求項１４】
クレーム３の内視鏡装置において、前記画像表示制御手段は、モニタ表示された前記ナビゲーション画像内の前記３次元画像を回転表示させることを特徴とするもの。
【請求項１５】
本発明の内視鏡装置は、
被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、
前記被検体内の体腔路を撮像する内視鏡と、
前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成する第１のナビケーション画像生成手段と、
前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手段と、
前記ルート指示手段による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する第２のナビゲーション画像生成手段と、
前記第２のナビゲーション画像生成手段により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手段と、
を備えたことを特徴とするもの。
【請求項１６】
本発明の内視鏡装置のナビゲーション方法は、
被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手順と、
前記被検体内の体腔路を撮像する内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成する第１のナビケーション画像生成手順と、
前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手順と、
前記ルート指示手順による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する第２のナビゲーション画像生成手順と、
前記第２のナビゲーション画像生成手順により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手順と、
を含むことを特徴とするもの。
【請求項１７】
内視鏡画像用の表示方法において、
前記内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、
前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、
前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、
前記内視鏡画像データに基づいて前記内視鏡画像を表示する内視鏡画像表示ステップと、
前記第１の被検体画像データに基づいて前記第１の被検体画像を表示する第１の被検体画像表示ステップと、
前記第２の被検体画像データに基づいて前記第２の被検体画像を表示する第２の被検体画像表示ステップと、
を有することを特徴とする内視鏡用画像の表示方法。
【請求項１８】
クレーム１７の内視鏡用画像の表示方法において、前記被検体の３次元データは、気管支のデータであることを特徴とするもの。
【請求項１９】
クレーム１８の内視鏡用画像の表示方法において、前記第１の被検体画像生成ステップでは前記気管支の分岐部の画像を生成することを特徴とするもの。
【請求項２０】
クレーム１８の内視鏡用画像の表示方法において、前記第２の被検体画像生成ステップでは複数の異なる前記気管支の分岐部の画像を生成し、前記第２の被検体画像表示ステップで複数の異なる前記気管支の分岐部の画像を表示することを特徴とするもの。
【請求項２１】
クレーム２０の内視鏡用画像の表示方法において、前記第２の被検体画像表示ステップで表示される前記気管支の分岐部の少なくとも一部は前記内視鏡の挿入経路順に並んで表示されていることを特徴とするもの。
【請求項２２】
内視鏡用画像の表示プログラムにおいて、
前記内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、
前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、
前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、
前記内視鏡画像データに基づいて前記内視鏡画像を表示する内視鏡画像表示ステップと、
前記第１の被検体画像データに基づいて前記第１の被検体画像を表示する第１の被検体画像表示ステップと、
前記第２の被検体画像データに基づいて前記第２の被検体画像を表示する第２の被検体画像表示ステップと、
を有することを特徴とする内視鏡用画像表示プログラム。
【請求項２３】
クレーム２２の内視鏡用画像表示プログラムにおいて、前記被検体の３次元データは、気管支のデータであることを特徴とするもの。
【請求項２４】
クレーム２３の内視鏡用画像表示プログラムにおいて、前記第１の被検体画像生成ステップでは前記気管支の分岐部の画像を生成することを特徴とするもの。
【請求項２５】
クレーム２３の内視鏡用画像表示プログラムにおいて、前記第２の被検体画像生成ステップでは複数の異なる前記気管支の分岐部の画像を生成し、前記第２の被検体画像表示ステップで複数の異なる前記気管支の分岐部の画像を表示することを特徴とするもの。
【請求項２６】
クレーム２５の内視鏡用画像表示プログラムにおいて、前記第２の被検体画像表示ステップで表示される前記気管支の分岐部の少なくとも一部は前記内視鏡の挿入経路順に並んで表示されていることを特徴とするもの。
【請求項２７】
内視鏡用画像の表示方法において、
前記内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、
前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、
前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、
前記内視鏡画像データ入力ステップで入力された前記内視鏡画像データに基づく内視鏡画像と前記第１の被検体画像データ生成ステップで生成された第１の被検体画像と前記第２の被検体画像データ生成ステップで生成された第２の被検体画像とを表示する表示ステップと、
を有することを特徴とする内視鏡用画像の表示方法。
【発明の詳細な説明】
【技術分野】  本発明は、内視鏡装置に関し、特に例えば気管支等のような体内の管路への内視鏡挿入をナビゲーションする内視鏡装置に関する。
【背景技術】  近年、画像による診断が広く行われるようになっており、例えばＸ線ＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）装置等により被検体の断層像を撮像することにより被検体内に３次元画像データを得て、該３次元画像データを用いて患部の診断が行われるようになってきた。
ＣＴ装置では、Ｘ線照射・検出を連続的に回転させつつ被検体を体軸方向に連続送りすることにより、被検体の３次元領域について螺旋状の連続スキャン（ヘリカルスキャン：ｈｅｌｉｃａｌ  ｓｃａｎ）を行い、３次元領域の連続するスライスの断層像から、３次元画像を作成することが行われる。
そのような３次元画像の１つに、肺の気管支の３次元像がある。気管支の３次元像は、例えば肺癌等が疑われる異常部の位置を３次元的に把握するのに利用される。そして、異常部を生検によって確認するために、気管支内視鏡を挿入して先端部の生検針で組織のサンプル（ｓａｍｐｌｅ）を採取することが行われる。
図３１に示す気管支５００のように、多段階の分岐を有する体内の管路では、異常部の所在が分支の末端に近いとき、内視鏡の先端を短時間で正しく目的部位に到達させることが難しいために、例えば日本特開２０００−１３５２１５号公報等では、被検体の３次元領域の画像データに基づいて前記被検体内の管路の３次元像を作成し、前記３次元像上で前記管路に沿って目的点までの経路を求め、前記経路に沿った前記管路の仮想的な内視像を前記画像データに基づいて作成し、前記仮想的な内視像を表示することで、気管支内視鏡を目的部位にナビゲーションする装置が提案されている。
しかしながら、上記日本特開２０００−１３５２１５号公報の装置による目的部位へのナビゲーションでは、気管支内視鏡が撮像したライブの内視鏡像を表示すると共に、気管支の分岐での仮想的な内視像を表示し挿入先を案内しているのではあるが、上述したように気管支は多段階の分岐を有するばかりでなく、分岐での各画像は複数の分岐先経路を持つ類似の画像となるため、単に仮想的な内視像を表示するだけでは、ライブの内視鏡像の実際の分岐位置と異なる分岐位置の仮想の内視像が表示されても、術者が正しい分岐位置での仮想の内視像と誤認する可能性があり、このような誤認は気管支内視鏡の目的部位へのナビゲーションに重大な支障を及ぼすといった問題がある。
本発明は、上記事情に鑑みてなされたものであり、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションすることのできる内視鏡装置を提供することを目的としている。
【発明の開示】
本発明の内視鏡装置は、被検体の３次元領域の画像に基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、前記被検体内の体腔路を撮像する内視鏡と、前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成するナビゲーション画像生成手段とを備え、前記被検体内の体腔路への前記内視鏡の挿入経路を案内しながら、前記被検体内を観察・処置する内視鏡装置において、前記ナビゲーション画像生成手段は、前記被検体内の体腔路が分岐する全分岐点での前記３次元画像の縮小画像を前記ナビゲーション画像に付加して前記ナビゲーション画像を生成するように構成される。この構成により、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションさせる。
【図面の簡単な説明】  図１は、本発明の一実施の形態に係る内視鏡装置の構成を示す構成図であり、図２は、図１の入力部の構成を示す構成図であり、図３は、図１の気管支鏡ナビゲーション装置によるナビゲーションデータの生成処理の流れを示すフローチャートであり、図４は、図３の処理で展開されるルート設定画面を示す第１の図であり、図５は、図３の処理で展開されるルート設定画面を示す第２の図であり、図６は、図３のルート設定処理の流れを示すフローチャートであり、図７は、図６の処理で展開されるルート設定画面を示す第１の図であり、図８は、図６の処理で展開されるルート設定画面を示す第２の図であり、図９は、図６の処理で展開されるルート設定画面を示す第３の図であり、図１０は、図１の気管支鏡ナビゲーション装置によるルート探索の変形例を説明する図であり、図１１は、図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第１のフローチャートであり、図１２は、図１１の処理で展開されるナビゲーション画面を示す第１の図であり、図１３は、図１１の処理で展開されるナビゲーション画面を示す第２の図であり、図１４は、図１１の処理で展開されるナビゲーション画面を示す第３の図であり、図１５は、図１１の処理で展開されるナビゲーション画面を示す第４の図であり、図１６は、図１１の処理で展開されるナビゲーション画面を示す第５の図であり、図１７は、図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第２のフローチャートであり、図１８は、図１７の処理で展開されるナビゲーション画面を示す第１の図であり、図１９は、図１７の処理で表示される動画を説明する図であり、図２０は、図１７の処理で展開されるナビゲーション画面を示す第２の図であり、図２１は、図１７の処理で展開されるナビゲーション画面を示す第３の図であり、図２２は、図１７の処理で展開されるナビゲーション画面を示す第３の図であり、図２３は、図１４のナビゲーション画面の第１の変形例を示す図であり、図２４は、図１４のナビゲーション画面の第２の変形例を示す図であり、図２５は、図１４のナビゲーション画面の第３の変形例を示す図であり、図２６は、図１４のナビゲーション画面の第４の変形例を示す図であり、図２７は、図１４のナビゲーション画面の第５の変形例を示す図であり、図２８は、図１４のナビゲーション画面の第６の変形例を示す図であり、図２９は、図１４のナビゲーション画面の第７の変形例を示す図であり、図３０は、図１４のナビゲーション画面の第８の変形例を示す図であり、図３１は、気管支の構造を示す図である。
【発明を実施するための最良の形態】  以下、図面を参照しながら本発明の実施の形態について述べる。
図１ないし図３０は本発明の一実施の形態に係わり、図１は内視鏡装置の構成を示す構成図、図２は図１の入力部の構成を示す構成図、図３は図１の気管支鏡ナビゲーション装置によるナビゲーションデータの生成処理の流れを示すフローチャート、図４は図３の処理で展開されるルート設定画面を示す第１の図、図５は図３の処理で展開されるルート設定画面を示す第２の図、図６は図３のルート設定処理の流れを示すフローチャート、図７は図６の処理で展開されるルート設定画面を示す第１の図、図８は図６の処理で展開されるルート設定画面を示す第２の図、図９は図６の処理で展開されるルート設定画面を示す第３の図、図１０は図１の気管支鏡ナビゲーション装置によるルート探索の変形例を説明する図、図１１は図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第１のフローチャート、図１２は図１１の処理で展開されるナビゲーション画面を示す第１の図、図１３は図１１の処理で展開されるナビゲーション画面を示す第２の図、図１４は図１１の処理で展開されるナビゲーション画面を示す第３の図、図１５は図１１の処理で展開されるナビゲーション画面を示す第４の図、図１６は図１１の処理で展開されるナビゲーション画面を示す第５の図、図１７は図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第２のフローチャート、図１８は図１７の処理で展開されるナビゲーション画面を示す第１の図、図１９は図１７の処理で表示される動画を説明する図、図２０は図１７の処理で展開されるナビゲーション画面を示す第２の図、図２１は図１７の処理で展開されるナビゲーション画面を示す第３の図、図２２は図１７の処理で展開されるナビゲーション画面を示す第３の図、図２３は図１４のナビゲーション画面の第１の変形例を示す図、図２４は図１４のナビゲーション画面の第２の変形例を示す図、図２５は図１４のナビゲーション画面の第３の変形例を示す図、図２６は図１４のナビゲーション画面の第４の変形例を示す図、図２７は図１４のナビゲーション画面の第５の変形例を示す図、図２８は図１４のナビゲーション画面の第６の変形例を示す図、図２９は図１４のナビゲーション画面の第７の変形例を示す図、図３０は図１４のナビゲーション画面の第８の変形例を示す図である。
図１に示すように、本実施の形態の内視鏡装置１は、患者体内の気管支に挿入し気管支内を撮像し気管支末端の患部組織を生検する気管支鏡２と、気管支鏡２の挿入部の患者体内への挿入量を検出する、例えばエンコーダ等から構成される挿入量検出装置３と、気管支鏡２の手元側に設けられた複数のスイッチをフィルム状に形成したフレキシブルシートからなる入力部４と、ＣＴ画像データに基づき気管支内部の仮想の内視鏡像（以下、ＶＢＳ像と記す）を生成すると共に気管支鏡２からの撮像信号、挿入量検出装置３からの検出信号及び入力部４からの入力信号に基づき、気管支鏡２により得られる内視鏡画像（以下、ライブ画像と記す）とＶＢＳ画像を合成してモニタ５に表示し気管支鏡２の気管支へのナビゲーションを行う気管支鏡ナビゲーション装置６とを備えて構成される。
なお、前記入力部４は、気管支鏡２の手元側に設けられるとしたが、フットスイッチにより構成してもよい。
気管支鏡ナビゲーション装置６は、患者のＸ線断層像を撮像する図示しない公知のＣＴ装置で生成された３次元画像データを、例えばＭＯ（Ｍａｇｎｅｔｉｃ  Ｏｐｔｉｃａｌ  ｄｉｓｋ）装置やＤＶＤ（Ｄｉｇｉｔａｌ    Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）装置等、可搬型の記憶媒体を介して取り込むＣＴ画像データ取り込み部１１と、ＣＴ画像データ取り込み部１１によって取り込まれた３次元画像データを格納するＣＴ画像データ格納部１２と、ＣＴ画像データ格納部１２に格納されている３次元画像データに基づきＭＰＲ画像を生成するＭＰＲ画像生成部１３と、ＭＰＲ画像生成部が生成したＭＰＲ画像を有する後述するルート設定画面を生成し気管支鏡２の気管支へのナビゲーションルート（以下、単にルートと記す）を設定するルート設定部１４と、ＣＴ画像データ格納部１２に格納されている３次元画像データに基づきルート設定部１４によって設定されたルートの連続したＶＢＳ画像をフレーム単位で生成するＶＢＳ画像生成部１５と、ＶＢＳ画像生成部１５が生成したＶＢＳ画像を格納するＶＢＳ画像格納部１６と、気管支鏡２からの撮像信号、挿入量検出装置３からの検出信号及び入力部４からの入力信号を入力し、ライブ画像、ＶＢＳ画像及び複数のサムネイルＶＢＳ画像からなる後述するナビゲーション画面を生成する画像処理部１７と、ルート設定部１４が生成したルート設定画面及び画像処理部１７が生成したナビゲーション画面をモニタ５に表示させる画像表示制御部１８と、ルート設定部１４に対して設定情報を入力するキーボード及びポインティングデバイスからなる設定情報入力部１９とから構成される。
なお、ＣＴ画像データ格納部１２及びＶＢＳ画像格納部１６は、１つのハードディスクによって構成してもよく、また、ＭＰＲ画像生成部１３、ルート設定部１４、ＶＢＳ画像生成部１５及び画像処理部１７は１つの演算処理回路で構成することができる。また、ＣＴ画像データ取り込み部１１はＭＯあるいはＤＶＤ等の可搬型の記憶媒体を介してＣＴ画像データを取り込みとしたが、ＣＴ装置あるいはＣＴ画像データを保存している院内サーバが院内ＬＡＮに接続されている場合には、ＣＴ画像データ取り込み部１１を該院内ＬＡＮに接続可能なインターフェイス回路により構成し、院内ＬＡＮを介してＣＴ画像データを取り込むようにしてもよい。
入力部４は、図２に示すように、ナビゲーション画面に表示する気管支の分岐点毎のＶＢＳ画像の更新を指示する次ＶＢＳスイッチであるＳＷ１と、ＶＢＳ画像を自動回転させライブ画像の向きに対応させる指示を行う画像回転自動スイッチであるＳＷ２と、ＶＢＳ画像を所定回転角づつ回転させライブ画像の向きに対応させる指示を行う画像回転手動スイッチであるＳＷ３と、ライブ画像の静止画像の取り込みを指示するフリーズスイッチであるＳＷ４とから構成される。
このように構成された本実施の形態の作用について説明する。
図３に示すように、気管支鏡２による観察・処置に先立ち、気管支鏡ナビゲーション装置６は、ステップＳ１でＣＴ画像データ取り込み部１１によりＣＴ装置で生成された患者の３次元画像データを取り込み、ステップＳ２で取り込んだ３次元画像データをＣＴ画像データ格納部１２に格納する。
ステップＳ３でルート設定部１４により、図４に示すようなルート設定画面２１をモニタ５に表示させ、ルート設定画面２１上の患者情報タグ画面２２で患者情報を選択する。この選択により、ステップＳ４で選択された患者の例えば３つの異なる多断面像からなるＭＰＲ画像が生成され、ステップＳ５でこのＭＰＲ画像２３がルート設定画面２１に表示される。
なお、患者情報タグ画面２２での患者情報の選択は、設定情報入力部１９により患者を識別する患者ＩＤを入力することで行われる。
次に、ステップＳ６でルート設定画面２１上のルート設定タグ２４（図４参照）を設定情報入力部１９により選択すると、図５に示すようなルート設定タグ画面２５がルート設定画面２１に表示され、後述するルート設定処理を行い、気管支での気管支鏡２の挿入ナビゲーションのルートを設定する。
挿入ナビゲーションのルートが設定されると、ステップＳ７でＶＢＳ画像生成部１５により設定した全ルートの連続したＶＢＳ画像をフレーム単位で生成し、ステップＳ８で生成したＶＢＳ画像をＶＢＳ画像格納部１６に格納する。
本実施の形態の気管支鏡ナビゲーション装置６では、例えば後述するように２つのナビゲーション方法で気管支での気管支鏡２の挿入をナビゲーションすることができるので、この方法をモード１及びモード２として、ステップＳ９で設定情報入力部１９によりモード（ナビゲーションモード）をルート設定部１４に設定する。このナビゲーションモードの情報はルート設定部１４を介して画像処理部１７にも送信され、モード情報がそれぞれに記憶される。
上記のステップＳ１〜Ｓ９の処理により、気管支鏡２による観察・処置時の気管支鏡ナビゲーション装置６によるナビゲーションの準備が完了する。
ここで、上記ステップＳ６のルート設定処理を図６を用いて説明する。
図６に示すように、ステップＳ６のルート設定処理では、設定情報入力部１９を操作することで、図５に示したルート設定タグ画面２５上のルート探索ボタンをクリックすると、ステップＳ１１で図７に示すようなルートの始点の入力を促す始点入力指示ウインドウ３１がルート設定画面２１上に表示され、ルート設定画面２１上にカーソル３０を用いてＭＰＲ画像２３のうちの１つの断層像上で始点を設定する。始点を設定すると他のＭＰＲ画像２３の２つの断層像上にも対応する位置に始点が設定されると共に、図８に示すようなルートの終点の入力を促す終点入力指示ウインドウ３２がルート設定画面２１上に表示さる。
そこで、ステップＳ１２で始点の設定と同様に、ルート設定画面２１上にカーソル３０を用いてＭＰＲ画像２３のうちの１つの断層像上で終点を設定する。終点を設定すると他のＭＰＲ画像２３の２つの断層像上にも対応する位置に終点が設定される。
始点と終点が設定されると、ステップＳ１３でルート設定部１４は始点から終点に至る気管支内のルートを探索する。気管支は複雑な経路を有しているので、始点から終点に至る気管支内のルートが一意的に決まるとは限らないので、ルート設定部１４ではステップＳ１３では、始点から終点に至る気管支内のルートの第１候補を探索する。
そして、ルート設定部１４はルート設定画面２１上において、図９に示すように、ステップＳ１４で探索されたルートをＭＰＲ画像２３に重畳して表示すると共に、ルートの確定等の入力を促すルート確定ウインドウ３３を表示する。
ルート確定ウインドウ３３には、探索したルートの確定を指示するルート確定ボタン４１と、次候補のルートの探索を指示する次候補探索ボタン４２と、始点及び終点を再設定し直すルート再設定ボタン４３と、ルート探索処理をキャンセルするキャンセルボタン４４とを備えている。
ステップＳ１５で次候補探索ボタン４２がクリックされたかどうか判断し、クリックされたならばステップＳ１６で次候補のルートを自動探索してステップＳ１７に進み、クリックされない場合にはステップＳ１８に進む。ステップＳ１７では次候補を探索した結果、次候補が存在するかどうかを判断し、存在しない場合には図示はしないが次候補ルートが存在しない旨の警告を表示しステップＳ１３に戻り、存在する場合にはステップＳ１４に戻る。
ステップＳ１８では、ルート再設定ボタン４３がクリックされたかどうか判断し、クリックされたならばステップＳ１１に戻り、クリックされない場合にはステップＳ１９に進む。
ステップＳ１９では、ルート確定ボタン４１がクリックされたかどうか判断し、クリックされない場合にはステップＳ１５に戻り、クリックされたならばステップＳ２０に進み、ステップＳ２０でルート及びルート内の各分岐点の位置情報を決定して図６のステップＳ７に戻る。
ステップＳ２０でルート内の各分岐点の３次元の位置情報が決定されると、始点１０１から終点１０２に至るまでの挿入経路における分岐の順番を、各分岐点のＶＢＳ画像データに付して、ステップＳ８によりＶＢＳ画像格納部１６に格納する。従って分岐点を示す各ＶＢＳ画像データは分岐部の仮想画像と、分岐部の３次元位置情報と、選択された挿入経路における分岐の順番を有している。
なお、ＭＰＲ画像を使ったルート探索処理について述べたが、図１０に示すようなボリュームレンダリング（Ｖｏｌｕｍｅ  Ｒｅｎｄｅｒｉｎｇ  Ｔｅｃｈｎｉｑｕｅ）画像１００を用いて、始点１０１及び終点１０２を指定してルート探索を行うようにしてもよい。
このようにしてルート設定がなされた気管支鏡ナビゲーション装置６による気管支鏡２による観察・処置時の挿入のナビゲーションについて説明する。なお、以下では、ルートの分岐点が１０カ所の場合を例に説明する。
図１１に示すように、気管支鏡ナビゲーション装置６によるナビゲーションを開始すると、ステップＳ２１でモニタ５に図１２に示すようなナビゲーション画面５１を表示する。
このナビゲーション画面５１は、気管支鏡２からのライブ画像を表示する内視鏡ライブ画像表示エリア５２と、ＶＢＳ画像を表示するＶＢＳ画像表示エリア５３と、ルートの全ての分岐点でのＶＢＳ画像を縮小して分岐サムネイルＶＢＳ画像として表示する分岐サムネイルＶＢＳ画像エリア５４とからなり、気管支鏡２の挿入前であるステップＳ２１では、内視鏡ライブ画像表示エリア５２にはライブ画像は表示されないが、ＶＢＳ画像表示エリア５３にはルートの最初の分岐点のＶＢＳ画像５３ａが表示され、分岐サムネイルＶＢＳ画像エリア５４には全ての分岐点での分岐サムネイルＶＢＳ画像５４（ａ）〜５４（ｊ）が表示される。
なお、ＶＢＳ画像５３ａにはルートに進む経路穴にマーカ５５を重畳して表示している。また、ＶＢＳ画像表示エリア５３に表示されるＶＢＳ画像５３ａと同じ分岐サムネイルＶＢＳ画像の枠が太枠あるいはカラー表示され、他の分岐サムネイルＶＢＳ画像と識別可能となっており、術者はＶＢＳ画像表示エリア５３に表示されるＶＢＳ画像がどの分岐の画像かを容易に認識できるようになっている。このステップＳ２１の段階では分岐サムネイルＶＢＳ画像５４（ａ）の枠が太枠あるいはカラー表示される。
そして、ステップＳ２２で気管支鏡２の気管支内への挿入を開始すると、図１３に示すように、ステップＳ２３でナビゲーション画面５１には内視鏡ライブ画像表示エリア５２に気管支鏡２からのライブ画像５２ａが表示される。尚、図１３においてもＶＢＳ画像表示エリア５３にはルートの最初の分岐点のＶＢＳ画像５３ａが表示され、分岐サムネイルＶＢＳ画像エリア５４には全ての分岐点での分岐サムネイルＶＢＳ画像５４（ａ）〜５４（ｊ）が表示され、分岐サムネイルＶＢＳ画像５４（ａ）の枠が太枠あるいはカラー表示される。
次に、ステップＳ２４でライブ画像を受信した画像処理部１７において、ナビゲーションモードがモード１かどうか判断する。
以下、まず、ナビゲーションモードがモード１の場合の気管支鏡ナビゲーション装置６のナビゲーション処理について説明する。
まず、気管支鏡２の先端が最初（第１）の分岐点に到達すると、術者はフリーズスイッチであるＳＷ４を押下するかどうか判断する。術者はＶＢＳ画像表示エリア５３のＶＢＳ画像５３ａとライブ画像５２ａを目視するだけでマーカ５５が示す経路穴をライブ画像５２ａ上で見いだせる場合はそのまま挿入を続行するが、ライブ画像５２ａ上でマーカ５５が示す経路穴を見つけるのが困難な場合にはフリーズスイッチであるＳＷ４を押下する。
そこで、ステップＳ２５でフリーズスイッチであるＳＷ４がＯＮされたかどうか判断し、ＯＮされたならばステップＳ２６でライブ画像５２ａの静止画像を取り込み、該静止画像と最初の分岐点のＶＢＳ画像５３ａとが公知の画像処理によって類似度が比較され、ＯＮされないならばステップＳ２７に進む。
なお、ステップＳ２６において、所定値以下の類似度の場合には設定したルート以外のルートに挿入された（あるいは異なる分岐点のＶＢＳ画像と比較している）と判断し警告を表示する（図示せず）。
ステップＳ２６にて、所定値を超える類似度でライブ画像５２ａの静止画像とＶＢＳ画像５３ａとが類似していると判断すると、両画像が同一の分岐点での画像であるとし、術者が画像回転自動スイッチであるＳＷ２あるいは画像回転手動スイッチであるＳＷ３を操作することで、ＶＢＳ画像５３ａを回転させ、ライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させた後、ステップＳ２７に進む。
なお、画像回転自動スイッチであるＳＷ２を術者が押下すると、例えばパターン認識処理によりライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを自動的に一致させる。また、画像回転手動スイッチであるＳＷ３を術者が押下すると、所定角度だけＶＢＳ画像５３ａを回転させ、術者がＳＷ３の押下を繰り返すことで手動にてライブ画像５２ａとＶＢＳ画像５３ａとを一致させる。
このようにしてライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させると、術者はマーカ５５が示す経路穴をライブ画像５２ａ上で容易に見いだせるので、マーカ５５の指示に従って挿入を続行する。
ステップＳ２７では、次ＶＢＳスイッチであるＳＷ１が術者によって押下されたかどうか判断し、押下されない場合にはステップＳ２５に戻り、ＳＷ１が術者によって押下された場合には、ステップＳ２８でＶＢＳ画像表示エリア５３に次（第２）の分岐サムネイルＶＢＳ画像（ｂ）のＶＢＳ画像５３ａを表示する。このとき第２の分岐サムネイルＶＢＳ画像５４（ｂ）の枠が太枠あるいはカラー表示され、分岐サムネイルＶＢＳ画像５４（ａ）の枠は他の分岐サムネイルＶＢＳ画像の枠表示になる。
そして、ステップＳ２９で病変部に達したか（すなわち、ナビゲーションの終点に達したか）どうかを判断し、病変部に到達した場合は処理を終了し、病変部に到達していない場合にはステップＳ２５に戻り、病変部に到達するまで、ステップＳ２５〜Ｓ２９の処理を繰り返す。
上記ステップＳ２５〜Ｓ２９の処理の具体例をナビゲーション画面５１を用いて説明する。図１４に示すように、例えば第８の分岐点に到達した場合のナビゲーションにおいては、ＶＢＳ画像表示エリア５３には第８の分岐サムネイルＶＢＳ画像５４（ｈ）のＶＢＳ画像５３ａが表示され、内視鏡ライブ画像表示エリア５２には第８の分岐点近傍のライブ画像５２ａが表示される。このとき分岐サムネイルＶＢＳ画像５４（ｈ）の枠のみが太枠あるいはカラー表示され、術者に第８の分岐点におけるナビゲーションであることを認識させる。
この状態で術者がフリーズスイッチであるＳＷ４を押下（ステップＳ２５）すると、ライブ画像の静止画像が取り込まれ、例えば術者が画像回転自動スイッチであるＳＷ２を押下すると、図１５に示すように、ＶＢＳ画像５３ａを回転させ、ライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させる（ステップＳ２６）。
次に術者が挿入先の経路穴を認識し、次ＶＢＳスイッチであるＳＷ１を押下（ステップＳ２７）すると、図１６に示すように、ＶＢＳ画像表示エリア５３には第９の分岐サムネイルＶＢＳ画像５４（ｉ）のＶＢＳ画像５３ａが表示され、分岐サムネイルＶＢＳ画像５４（ｉ）の枠のみが太枠あるいはカラー表示され、術者に次のナビゲーションの位置が第９の分岐点であることを認識させ（ステップＳ２８）、病変部（すなわち、ナビゲーションの終点）に到達するまで（ステップＳ２９）同様なナビゲーションは行われる。
次に、ナビゲーションモードがモード２の場合の気管支鏡ナビゲーション装置６のナビゲーション処理について説明する。
図１１のステップＳ２４でライブ画像を受信した画像処理部１７において、ナビゲーションモードがモード１でない、すなわちモード２と判断すると、図１７のステップＳ４１に処理が移行する。
モード２のナビゲーションモードは、気管支への挿入術に習熟している術者が利用するモードであって、ナビゲーションは期待するが、ほとんどの分岐点での挿入先の経路穴を熟知している場合には、モード１のように所定位置までの各分岐点でのナビゲーションを必要としないモードである。
しかし、モード１の場合は各分岐点に達する毎に次ＶＢＳスイッチであるＳＷ１を押下するので、ライブ画像の分岐点位置とＶＢＳ画像の分岐点位置を同一とすることが可能であるが、所定位置までの各分岐点でのナビゲーションを必要としないで挿入を続行し、ある位置における分岐点でのナビゲーションを期待する場合、ナビゲーションしたい分岐点位置の分岐サムネイルＶＢＳ画像を見つけることが難しくなる。
そこで、モード２のナビゲーションモードでは、気管支鏡の挿入部の挿入量に基づいてナビゲーションしたい分岐点位置の分岐サムネイルＶＢＳ画像を検索し、ＶＢＳ画像５３ａをＶＢＳ画像表示エリア５３に表示させ、ナビゲーションを可能とする。
すなわち、モード２のナビゲーションモードにおいては、術者はナビゲーションを必要としない場合は、ライブ画像をモニタしながら気管支鏡２の挿入を続行するが、ナビゲーションを必要とする分岐点に気管支鏡２の先端が到達した場合、術者はフリーズスイッチであるＳＷ４を押下する。
モード２での気管支鏡ナビゲーション装置６のナビゲーション処理は、図１７に示すように、ステップＳ４１でフリーズスイッチであるＳＷ４が押下されるのを待ち、ＳＷ４が押下されると、図１８に示すように、ステップＳ４２で内視鏡ライブ画像表示エリア５２のライブ画像５２ａにフリーズスイッチであるＳＷ４が押下された時点での静止画像の縮小画像６０が重畳されて表示される。
なお、図１８においては、フリーズスイッチであるＳＷ４が押下された時点が第８の分岐点であって、この時点までナビゲーションを必要としていない場合でフリーズスイッチであるＳＷ４がこの時点で初めて押下された状態の図であって、ＶＢＳ画像表示エリア５３に表示されるＶＢＳ画像５３ａは、第１の分岐サムネイルＶＢＳ画像５４（ａ）のＶＢＳ画像となっている。
そして、ステップＳ４３で挿入量検出装置３により気管支鏡２の挿入部の患者体内への挿入量を検出し、ステップＳ４４で検出した挿入量に基づき気管支鏡２の先端位置及びその近傍の分岐点を算出する。
ステップＳ４５では、算出した分岐点を基準に１つ手前の分岐点から１つ後の分岐点までのＶＢＳ画像を動画にてＶＢＳ画像表示エリア５３に表示する。また算出した分岐点の分岐サムネイルＶＢＳ画像のみ枠が太枠あるいはカラー表示される。
図１９は、図１８における第８の分岐点を基準に第７の分岐点から第９の分岐点までのＶＢＳ画像の動画表示の様子を示し、図２０は動画表示の開始時点の第７の分岐点のＶＢＳ画像５３ａがＶＢＳ画像表示エリア５３に表示されたナビゲーション画面５１を示し、図２１は動画表示の終了時点の第９の分岐点のＶＢＳ画像５３ａがＶＢＳ画像表示エリア５３に表示されたナビゲーション画面５１を示している。
なお、図２０及び図２１に示すように、ＶＢＳ画像表示エリア５３に動画表示される領域を示す、分岐サムネイルＶＢＳ画像エリア５４に表示されている分岐サムネイルＶＢＳ画像の下に動画領域バー７１が表示される。図２０及び図２１の場合は、第７の分岐点の分岐サムネイルＶＢＳ画像５４（ｇ）から第９の分岐点の分岐サムネイルＶＢＳ画像５４（ｉ）の下に動画領域バー７１が表示されている表示例を示し、このとき、算出した分岐点の分岐サムネイルＶＢＳ画像５４（ｈ）のみ枠が太枠あるいはカラー表示される。
これにより術者は現在の挿入部の先端位置がどの分岐点位置にあるかどうかが認識できるので、術者は近傍の分岐点のライブ画像を見いだすように挿入を前後させ、内視鏡ライブ画像表示エリア５２のライブ画像５２ａを分岐点のライブ画像５２ａを得る。
このようにしてナビゲーションを必要とする位置でのライブ画像５２ａを得ると、ステップＳ４６でフリーズスイッチであるＳＷ４がＯＮされるのを待ち、ＯＮされたならば、ステップＳ４７でライブ画像５２ａの静止画像を取り込み算出した分岐点のＶＢＳ画像５３ａをＶＢＳ画像表示エリア５３に表示し、ステップＳ４８においてライブ画像５２ａの静止画像と算出した分岐点のＶＢＳ画像５３ａとの類似度を公知の画像処理によって比較し、モード１と同様な処理を行う。
なお、図２１の状態でフリーズスイッチであるＳＷ４がＯＮされると、図２２に示すように、算出した分岐点の分岐サムネイルＶＢＳ画像５４（ｈ）のＶＢＳ画像５３ａをＶＢＳ画像表示エリア５３に表示すると共に、分岐サムネイルＶＢＳ画像５４（ｈ）のみ枠が太枠あるいはカラー表示される。
なお、ステップＳ４８においては、モード１と同様に、所定値以下の類似度の場合には設定したルート以外のルートに挿入された（あるいは異なる分岐点のＶＢＳ画像と比較している）と判断し警告を表示する（図示せず）。
また、ステップＳ４８では、モード１同様に、所定値を超える類似度でライブ画像５２ａの静止画像とＶＢＳ画像５３ａとが類似していると判断すると、両画像が同一の分岐点での画像であるとし、術者が画像回転自動スイッチであるＳＷ２あるいは画像回転手動スイッチであるＳＷ３を操作することで、ＶＢＳ画像５３ａを回転させ、ライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させた後、ステップＳ４９に進む。
このようにしてライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させると、術者はマーカ５５が示す経路穴をライブ画像５２ａ上で容易に見いだせるので、マーカ５５の指示に従って挿入を続行する。
そして、ステップＳ４９で病変部に達したか（すなわち、ナビゲーションの終点に達したか）どうかを判断し、病変部に到達した場合は処理を終了し、病変部に到達していない場合にはステップＳ４１に戻り、病変部に到達するまで、ステップＳ４１〜Ｓ４９の処理を繰り返す。
なお、ステップＳ４５で算出した分岐点を基準に１つ手前の分岐点から１つ後の分岐点までのＶＢＳ画像を動画にてＶＢＳ画像表示エリア５３に表示するとしたが、これに限らず、例えば算出した分岐点を基準に２つ手前の分岐点から２つ後の分岐点までのＶＢＳ画像を動画にてＶＢＳ画像表示エリア５３に表示するようにしてもよい。
このように本実施の形態では、モード１のナビゲーションにおいては、分岐サムネイルＶＢＳ画像エリア５４に全ての分岐点の分岐サムネイルＶＢＳ画像を表示すると共に、ライブ画像５２ａと比較しているＶＢＳ画像５３ａに対応する分岐サムネイルＶＢＳ画像枠を太枠あるいはカラー表示するので、ライブ画像５２ａがどの分岐点の画像かを容易に認識できる。
また、モード２のナビゲーションにおいては、ナビゲーションが必要なときに対象となる分岐点のＶＢＳ画像５３ａを簡単に探索し、ライブ画像５２ａ近傍のＶＢＳ画像５３ａを動画にて表示するので、ライブ画像５２ａがどの分岐点の画像かを容易に認識できる。
さらにモード１及び２のナビゲーションにおいては、ライブ画像５２ａとＶＢＳ画像５３ａの比較において、画像処理にて両画像の類似度を算出し、所定値以下の類似度の場合、警告を行うので術者が誤認した分岐点での挿入続行を中断でき、容易に適切な分岐点位置に気管支鏡２の先端を位置させる処置を行うことが可能となる。
なお、ナビゲーション画面５１において、ＶＢＳ画像５３ａに対応する分岐サムネイルＶＢＳ画像エリア５４の分岐サムネイルＶＢＳ画像の枠を太枠あるいはカラー表示するとしたが、図２３に示すように、ＶＢＳ画像５３ａに対応する分岐サムネイルＶＢＳ画像を拡大して、且つ拡大した分岐サムネイルＶＢＳ画像の枠を太枠あるいはカラー表示するようにしてもよい。図２３では分岐点が９個の場合において、第７の分岐サムネイルＶＢＳ画像のＶＢＳ画像５３ａが表示された状態を示している。
また、ナビゲーション画面５１においては分岐サムネイルＶＢＳ画像を１列表示としたが、分岐点が多い場合には図２４に示すように、２列以上にわたって分岐サムネイルＶＢＳ画像を表示するようにしてもよい。また、図２５に示すように、分岐サムネイルＶＢＳ画像エリア５４をスクロール可能なフレーム構成することで、複数の分岐サムネイルＶＢＳ画像をスクロールさせて表示するようにしてもよい。
さらに、ナビゲーション画面５１においてＶＢＳ画像５３ａにはルートに進む経路穴にマーカ５５を重畳して表示するとしたが、これに限らず、例えば図２６に示すように、ＶＢＳ画像５３ａ上のルートに進む経路穴の輪郭を強調表示したり経路穴内をカラー表示してもよい。
さらにまた、図２７に示すように、ナビゲーション画面５１においてＶＢＳ画像５３ａ上に、患者の姿勢に応じた上下方向（重力方向）を表示させてもよい。なお図２８に示すようにライブ画像５２ａ上に表示してもよい。
また、図２９に示すように、ＶＢＳ画像５３ａ上に挿入先にある生検対象の組織の位置をマーカ８１にて表示し、現在位置から生検対象の組織の位置までの距離や生検対象の組織の大きさ等をＶＢＳ画像５３ａ上に表示するようにしてよい。またマーカ８１ではなく図３０に示すように、組織の大きさや形状を模した組織像８２をＶＢＳ画像５３ａ上に表示するようにしてもよい。
したがって、本実施の形態によれば、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションすることができる。
本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。
産業上の利用分野
以上のように、本発明にかかる内視鏡装置は、体内の管路への内視鏡挿入をナビゲーションする内視鏡装置として、また、気管支等のような体内の管路への気管支内視鏡挿入をナビゲーションする内視鏡装置として、さらに、多段階の分岐点を有する管路への内視鏡挿入をナビゲーションする工業用内視鏡装置等として有用であり、特に目的部位が気管支等のような多段階の分岐点を有する体内の管路内の末端にある場合に気管支内視鏡先端部を確実にナビケーションするのに適している。
【図１】
2004010857.tif 000003
【図２】
2004010857.tif 000004
【図３】
2004010857.tif 000005
【図４】
2004010857.tif 000006
【図５】
2004010857.tif 000007
【図６】
2004010857.tif 000008
【図７】
2004010857.tif 000009
【図８】
2004010857.tif 000010
【図９】
2004010857.tif 000011
【図１０】
2004010857.tif 000012
【図１１】
2004010857.tif 000013
【図１２】
2004010857.tif 000014
【図１３】
2004010857.tif 000015
【図１４】
2004010857.tif 000016
【図１５】
2004010857.tif 000017
【図１６】
2004010857.tif 000018
【図１７】
2004010857.tif 000019
【図１８】
2004010857.tif 000020
【図１９】
2004010857.tif 000021
【図２０】
2004010857.tif 000022
【図２１】
2004010857.tif 000023
【図２２】
2004010857.tif 000024
【図２３】
2004010857.tif 000025
【図２４】
2004010857.tif 000026
【図２５】
2004010857.tif 000027
【図２６】
2004010857.tif 000028
【図２７】
2004010857.tif 000029
【図２８】
2004010857.tif 000030
【図２９】
2004010857.tif 000031
【図３０】
2004010857.tif 000032
【図３１】
2004010857.tif 000033
【手続補正書】
【提出日】平成16年10月6日(2004.10.6)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【書類名】明細書
【特許請求の範囲】
【請求項１】
被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、
前記被検体内の体腔路への内視鏡の挿入経路を案内しながら、前記被検体内を観察・処理するために、前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成するナビゲーション画像生成手段とを備え、
前記ナビゲーション画像生成手段は、前記被検体内の体腔路が分岐する全分岐点での前記３次元画像の縮小画像を前記ナビゲーション画像に付加して前記ナビゲーション画像を生成することを特徴とする内視鏡装置。  
【請求項２】  
前記ナビゲーション画像生成手段は、前記内視鏡の挿入経路を案内するための内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手段と、このルート指示手段による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する画像処理部と、を有することを特徴とする請求項１に記載の内視鏡装置。
【請求項３】  
前記ナビゲーション画像生成手段の前記画像処理部により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手段を備えたことを特徴とする請求項２に記載の内視鏡装置。
【請求項４】  
前記画像処理部により生成される前記ナビケーション画像は、前記内視鏡画像と前記３次元画像と前記ルート指示手段より設定したルート内の前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像とを有して構成されることを特徴とする請求項２に記載の内視鏡装置。
【請求項５】
前記ルート指示手段は、前記内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを、複数指示し算出可能とすることを特徴とする請求項２に記載の内視鏡装置。
【請求項６】
前記ルート指示手段は、画像処理部より生成された前記被検体内の体腔路の３次元画像の表示画面を見ながら前記ルートを指示することを特徴とする請求項２に記載の内視鏡装置。
【請求項７】
前記ナビゲーション画像生成手段は、前記被検体の３次元領域の画像データに基づき前記被検体内の体腔路の多画面再構築画像を生成する多画面再構築画像生成手段を有し、前記ルート指示手段は、前記多画面再構築画像生成手段により生成された前記多画面再構築画像の表示画面を見ながら前記ルートを指示することを特徴とする請求項２に記載の内視鏡装置。
【請求項８】
前記３次元画像は、前記被検体の３次元領域の画像データであるＣＴ画像データに基づき生成された前記被検体内の体腔路の仮想的なＶＢＳ画像であり、前記多画面再構築画像は、前記ＣＴ画像データに基づき生成された前記被検体内の体腔路のＭＲＴ画像であることを特徴とする請求項７に記載の内視鏡装置。
【請求項９】  
前記画像処理部は、前記ルート指示手段からの算出結果に基づき、前記多画面再構築画像生成手段により生成された前記ＭＲＴ画像を用いて前記３次元画像の縮小画像を生成することを特徴とする請求項８に記載の内視鏡装置。
【請求項１０】  
前記画像処理部は、前記内視鏡画像と同期させて、前記ルート指示部により設定されたルートの連続した前記ＶＢＳ画像をフレーム単位で生成することを特徴とする請求項８に記載の内視鏡装置。
【請求項１１】  前記ＣＴ画像データを取り込む取り込み部と、この取り込み部によって取り込まれた前記ＣＴ画像データを格納する第１の格納部と、前記ＶＢＳ画像に基づく画像データを格納する第２の格納部と、を有して構成されたことを特徴とする請求項８に記載の内視鏡装置。
【請求項１２】  
内視鏡の挿入量を算出する挿入量算出手段を有し、前記画像表示制御手段は、前記挿入量算出手段による挿入量算出結果に基づき、前記ナビゲーション画像内の前記内視鏡画像を表示させることを特徴とする請求項３に記載の内視鏡装置。
【請求項１３】
前記ルート指示手段及び前記画像表示制御手段に操作指示を与える操作入力手段を設けたことを特徴とする請求項３に記載の内視鏡装置。
【請求項１４】
前記画像表示制御手段は、モニタ表示された前記ナビゲーション画像内の前記３次元画像を回転表示させることを特徴とする請求項３に記載の内視鏡装置。
【請求項１５】  
被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、
前記被検体内の体腔路を撮像する内視鏡と、
前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成する第１のナビケーション画像生成手段と、
前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手段と、
前記ルート指示手段による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する第２のナビゲーション画像生成手段と、
前記第２のナビゲーション画像生成手段により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手段と、
を備えたことを特徴とする内視鏡装置。
【請求項１６】  
被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手順と、
前記被検体内の体腔路を撮像する内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成する第１のナビケーション画像生成手順と、
前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手順と、
前記ルート指示手順による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する第２のナビゲーション画像生成手順と、
前記第２のナビゲーション画像生成手順により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手順と、
を含むことを特徴とする内視鏡装置のナビゲーション方法。
【請求項１７】
内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、
前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、
前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、
前記内視鏡画像データに基づいて前記内視鏡画像を表示する内視鏡画像表示ステップと、
前記第１の被検体画像データに基づいて前記第１の被検体画像を表示する第１の被検体画像表示ステップと、
前記第２の被検体画像データに基づいて前記第２の被検体画像を表示する第２の被検体画像表示ステップと、
を有することを特徴とする内視鏡用画像の表示方法。
【請求項１８】
前記被検体の３次元データは、気管支のデータであることを特徴とする請求項１７に記載の内視鏡用画像表示方法。
【請求項１９】
前記第１の被検体画像生成ステップは、前記気管支の分岐部の画像を生成することを特徴とする請求項１８に記載の内視鏡用画像の表示方法。
【請求項２０】
前記第２の被検体画像生成ステップは、複数の異なる前記気管支の分岐部の画像を生成し、前記第２の被検体画像表示ステップで複数の異なる前記気管支の分岐部の画像を表示することを特徴とする請求項１８に記載の内視鏡用画像の表示方法。
【請求項２１】
前記第２の被検体画像表示ステップで表示される前記気管支の分岐部の少なくとも一部は前記内視鏡の挿入経路順に並んで表示されていることを特徴とする請求項２０に記載の内視鏡用画像の表示方法。
【請求項２２】
内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、
前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、
前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、
前記内視鏡画像データに基づいて前記内視鏡画像を表示する内視鏡画像表示ステップと、
前記第１の被検体画像データに基づいて前記第１の被検体画像を表示する第１の被検体画像表示ステップと、
前記第２の被検体画像データに基づいて前記第２の被検体画像を表示する第２の被検体画像表示ステップと、
を有することを特徴とする内視鏡用画像表示プログラム。
【請求項２３】
前記被検体の３次元データは、気管支のデータであることを特徴とする請求項２２に記載の内視鏡用画像表示プログラム。
【請求項２４】
前記第１の被検体画像生成ステップでは前記気管支の分岐部の画像を生成することを特徴とする請求項２３に記載の内視鏡用画像表示プログラム。
【請求項２５】
前記第２の被検体画像生成ステップでは複数の異なる前記気管支の分岐部の画像を生成し、前記第２の被検体画像表示ステップで複数の異なる前記気管支の分岐部の画像を表示することを特徴とする請求項２３に記載の内視鏡用画像表示プログラム。
【請求項２６】
前記第２の被検体画像表示ステップで表示される前記気管支の分岐部の少なくとも一部は前記内視鏡の挿入経路順に並んで表示されていることを特徴とする請求項２５に記載の内視鏡用画像表示プログラム。
【請求項２７】  
内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、
前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、
前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、
前記内視鏡画像データ入力ステップで入力された前記内視鏡画像データに基づく内視鏡画像と前記第１の被検体画像データ生成ステップで生成された第１の被検体画像と前記第２の被検体画像データ生成ステップで生成された第２の被検体画像とを表示する表示ステップと、
を有することを特徴とする内視鏡用画像の表示方法。
【請求項２８】
複数の分岐からなる体腔路を備えた被検体の３次元領域の画像データに対して、前記画像データの所望の画像に目的点を設定する目的点設定手段と、
前記目的点設定手段で設定された目標点に至る前記体腔路のルートを前記画像データから抽出するルート抽出手段と、
前記ルート抽出手段で抽出した前記体腔路の仮想画像を生成する仮想画像生成手段と、
前記仮想内視鏡画像に基づいて、前記被検体内の体腔路が分岐する分岐点での分岐点画像を抽出する分岐点画像抽出手段と、
前記ルートの順序に従って前記分岐点画像の縮小画像を生成する縮小画像生成手段と、
前記縮小画像と前記仮想画像とを有するナビゲーション画像を生成する画像処理手段と、
前記ナビゲーション画像を表示手段に表示可能とする画像表示制御手段と、
を具備することを特徴とする内視鏡装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、特に例えば気管支等のような体内の管路への内視鏡挿入をナビゲーションする内視鏡装置、内視鏡装置のナビゲーション方法、内視鏡画像の表示方法及び内視鏡用画像表示プログラムに関する。
【０００２】
【従来の技術】
近年、画像による診断が広く行われるようになっており、例えばＸ線ＣＴ（Ｃｏｍｐｕｔｅｄ   Ｔｏｍｏｇｒａｐｈｙ）装置等により被検体の断層像を撮像することにより被検体内に３次元画像データを得て、該３次元画像データを用いて患部の診断が行われるようになってきた。
【０００３】
ＣＴ装置では、Ｘ線照射・検出を連続的に回転させつつ被検体を体軸方向に連続送りすることにより、被検体の３次元領域について螺旋状の連続スキャン（ヘリカルスキャン：ｈｅｌｉｃａｌ ｓｃａｎ）を行い、３次元領域の連続するスライスの断層像から、３次元画像を作成することが行われる。
【０００４】
そのような３次元画像の１つに、肺の気管支の３次元像がある。気管支の３次元像は、例えば肺癌等が疑われる異常部の位置を３次元的に把握するのに利用される。そして、異常部を生検によって確認するために、気管支内視鏡を挿入して先端部の生検針で組織のサンプル（ｓａｍｐｌｅ）を採取することが行われる。
【０００５】
図３１に示す気管支５００のように、多段階の分岐を有する体内の管路では、異常部の所在が分支の末端に近いとき、内視鏡の先端を短時間で正しく目的部位に到達させることが難しいために、例えば日本特開２０００−１３５２１５号公報等では、被検体の３次元領域の画像データに基づいて前記被検体内の管路の３次元像を作成し、前記３次元像上で前記管路に沿って目的点までの経路を求め、前記経路に沿った前記管路の仮想的な内視像を前記画像データに基づいて作成し、前記仮想的な内視像を表示することで、気管支内視鏡を目的部位にナビゲーションする装置が提案されている。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記日本特開２０００−１３５２１５号公報の装置による目的部位へのナビゲーションでは、気管支内視鏡が撮像したライブの内視鏡像を表示すると共に、気管支の分岐での仮想的な内視像を表示し挿入先を案内しているのではあるが、上述したように気管支は多段階の分岐を有するばかりでなく、分岐での各画像は複数の分岐先経路を持つ類似の画像となるため、単に仮想的な内視像を表示するだけでは、ライブの内視鏡像の実際の分岐位置と異なる分岐位置の仮想の内視像が表示されても、術者が正しい分岐位置での仮想の内視像と誤認する可能性があり、このような誤認は気管支内視鏡の目的部位へのナビゲーションに重大な支障を及ぼすといった問題がある。
【０００７】
本発明は、上記事情に鑑みてなされたものであり、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションすることのできる内視鏡装置、内視鏡装置のナビゲーション方法、内視鏡画像の表示方法、及び内視鏡用画像表示プログラムを提供することを目的としている。
【０００８】
【課題を解決するための手段】  
請求項１に記載の内視鏡装置は、複数の分岐からなる体腔路を備えた被検体の３次元領域の画像データに対して、前記画像データの所望の画像に目的点を設定する目的点設定手段と、前記目的点設定手段で設定された目標点に至る前記体腔路のルートを前記画像データから抽出するルート抽出手段と、前記ルート抽出手段で抽出した前記体腔路の仮想画像を生成する仮想画像生成手段と、前記仮想内視鏡画像に基づいて、前記被検体内の体腔路が分岐する分岐点での分岐点画像を抽出する分岐点画像抽出手段と、前記ルートの順序に従って前記分岐点画像の縮小画像を生成する縮小画像生成手段と、前記縮小画像と前記仮想画像とを有するナビゲーション画像を生成する画像処理手段と、前記ナビゲーション画像を表示手段に表示可能とする画像表示制御手段と、を具備することを特徴とする。
【０００９】
請求項１５に記載の内視鏡装置は、被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、前記被検体内の体腔路を撮像する内視鏡と、前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成する第１のナビケーション画像生成手段と、前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手段と、前記ルート指示手段による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する第２のナビゲーション画像生成手段と、前記第２のナビゲーション画像生成手段により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手段と、を備えたことを特徴とする。
【００１０】
請求項１６に記載の内視鏡装置のナビゲーション方法は、被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手順と、前記被検体内の体腔路を撮像する内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成する第１のナビケーション画像生成手順と、前記内視鏡の挿入経路を案内するための該内視鏡の挿入地点から前記被検体の目的部位到達地点までのルートを指示し算出するルート指示手順と、前記ルート指示手順による算出結果に基づき、設定したルートの前記体腔路が分岐する全分岐点での前記３次元画像の縮小画像を生成するとともに、これを付加して前記ナビゲーション画像を生成する第２のナビゲーション画像生成手順と、前記第２のナビゲーション画像生成手順により生成された前記ナビゲーション画像をモニタ表示させる画像表示制御手順と、を含むことを特徴とする。
【００１１】
請求項１７に記載の内視鏡用画像の表示方法は、内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、前記内視鏡画像データに基づいて前記内視鏡画像を表示する内視鏡画像表示ステップと、前記第１の被検体画像データに基づいて前記第１の被検体画像を表示する第１の被検体画像表示ステップと、前記第２の被検体画像データに基づいて前記第２の被検体画像を表示する第２の被検体画像表示ステップと、を有することを特徴とする。
【００１２】
請求項２２に記載の内視鏡用画像表示プログラムは、内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、前記内視鏡画像データに基づいて前記内視鏡画像を表示する内視鏡画像表示ステップと、前記第１の被検体画像データに基づいて前記第１の被検体画像を表示する第１の被検体画像表示ステップと、前記第２の被検体画像データに基づいて前記第２の被検体画像を表示する第２の被検体画像表示ステップと、を有することを特徴とする。
【００１３】
請求項２７に記載の内視鏡用画像の表示方法は、内視鏡により撮像された被検体の管路の画像データを入力する内視鏡画像データ入力ステップと、前記被検体の３次元データに基づいて管路を示す第１の被検体画像データを生成する第１の被検体画像データ生成ステップと、前記被検体内の３次元データに基づいて管路を示す第２の被検体画像データを生成する第２の被検体画像データ生成ステップと、前記内視鏡画像データ入力ステップで入力された前記内視鏡画像データに基づく内視鏡画像と前記第１の被検体画像データ生成ステップで生成された第１の被検体画像と前記第２の被検体画像データ生成ステップで生成された第２の被検体画像とを表示する表示ステップと、を有することを特徴とする。
【００１４】
請求項２８に記載の内視鏡装置は、被検体の３次元領域の画像データに基づき前記被検体内の体腔路の３次元画像を生成する３次元画像生成手段と、前記被検体内の体腔路への内視鏡の挿入経路を案内しながら、前記被検体内を観察・処理するために、前記内視鏡により撮像された前記被検体内の体腔路の内視鏡画像と前記３次元画像とからなるナビゲーション画像を生成するナビゲーション画像生成手段とを備え、
前記ナビゲーション画像生成手段は、前記被検体内の体腔路が分岐する全分岐点での前記３次元画像の縮小画像を前記ナビゲーション画像に付加して前記ナビゲーション画像を生成することを特徴とする。
【００１５】
【発明の実施の形態】
以下、図面を参照しながら本発明の実施の形態について述べる。
【００１６】
図１ないし図３０は本発明の一実施の形態に係わり、図１は内視鏡装置の構成を示す構成図、図２は図１の入力部の構成を示す構成図、図３は図１の気管支鏡ナビゲーション装置によるナビゲーションデータの生成処理の流れを示すフローチャート、図４は図３の処理で展開されるルート設定画面を示す第１の図、図５は図３の処理で展開されるルート設定画面を示す第２の図、図６は図３のルート設定処理の流れを示すフローチャート、図７は図６の処理で展開されるルート設定画面を示す第１の図、図８は図６の処理で展開されるルート設定画面を示す第２の図、図９は図６の処理で展開されるルート設定画面を示す第３の図、図１０は図１の気管支鏡ナビゲーション装置によるルート探索の変形例を説明する図、図１１は図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第１のフローチャート、図１２は図１１の処理で展開されるナビゲーション画面を示す第１の図、図１３は図１１の処理で展開されるナビゲーション画面を示す第２の図、図１４は図１１の処理で展開されるナビゲーション画面を示す第３の図、図１５は図１１の処理で展開されるナビゲーション画面を示す第４の図、図１６は図１１の処理で展開されるナビゲーション画面を示す第５の図、図１７は図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第２のフローチャート、図１８は図１７の処理で展開されるナビゲーション画面を示す第１の図、図１９は図１７の処理で表示される動画を説明する図、図２０は図１７の処理で展開されるナビゲーション画面を示す第２の図、図２１は図１７の処理で展開されるナビゲーション画面を示す第３の図、図２２は図１７の処理で展開されるナビゲーション画面を示す第３の図、図２３は図１４のナビゲーション画面の第１の変形例を示す図、図２４は図１４のナビゲーション画面の第２の変形例を示す図、図２５は図１４のナビゲーション画面の第３の変形例を示す図、図２６は図１４のナビゲーション画面の第４の変形例を示す図、図２７は図１４のナビゲーション画面の第５の変形例を示す図、図２８は図１４のナビゲーション画面の第６の変形例を示す図、図２９は図１４のナビゲーション画面の第７の変形例を示す図、図３０は図１４のナビゲーション画面の第８の変形例を示す図である。
【００１７】
図１に示すように、本実施の形態の内視鏡装置１は、患者体内の気管支に挿入し気管支内を撮像し気管支末端の患部組織を生検する気管支鏡２と、気管支鏡２の挿入部の患者体内への挿入量を検出する、例えばエンコーダ等から構成される挿入量検出装置３と、気管支鏡２の手元側に設けられた複数のスイッチをフィルム状に形成したフレキシブルシートからなる入力部４と、ＣＴ画像データに基づき気管支内部の仮想の内視鏡像（以下、ＶＢＳ像と記す）を生成すると共に気管支鏡２からの撮像信号、挿入量検出装置３からの検出信号及び入力部４からの入力信号に基づき、気管支鏡２により得られる内視鏡画像（以下、ライブ画像と記す）とＶＢＳ画像を合成してモニタ５に表示し気管支鏡２の気管支へのナビゲーションを行う気管支鏡ナビゲーション装置６とを備えて構成される。
【００１８】
なお、前記入力部４は、気管支鏡２の手元側に設けられるとしたが、フットスイッチにより構成してもよい。
【００１９】
気管支鏡ナビゲーション装置６は、患者のＸ線断層像を撮像する図示しない公知のＣＴ装置で生成された３次元画像データを、例えばＭＯ（Ｍａｇｎｅｔｉｃ   Ｏｐｔｉｃａｌ ｄｉｓｋ）装置やＤＶＤ（Ｄｉｇｉｔａｌ   Ｖｅｒｓａｔｉｌｅ   Ｄｉｓｋ）装置等、可搬型の記憶媒体を介して取り込むＣＴ画像データ取り込み部１１と、ＣＴ画像データ取り込み部１１によって取り込まれた３次元画像データを格納するＣＴ画像データ格納部１２と、ＣＴ画像データ格納部１２に格納されている３次元画像データに基づきＭＰＲ画像を生成するＭＰＲ画像生成部１３と、ＭＰＲ画像生成部が生成したＭＰＲ画像を有する後述するルート設定画面を生成し気管支鏡２の気管支へのナビゲーションルート（以下、単にルートと記す）を設定するルート設定部１４と、ＣＴ画像データ格納部１２に格納されている３次元画像データに基づきルート設定部１４によって設定されたルートの連続したＶＢＳ画像をフレーム単位で生成するＶＢＳ画像生成部１５と、ＶＢＳ画像生成部１５が生成したＶＢＳ画像を格納するＶＢＳ画像格納部１６と、気管支鏡２からの撮像信号、挿入量検出装置３からの検出信号及び入力部４からの入力信号を入力し、ライブ画像、ＶＢＳ画像及び複数のサムネイルＶＢＳ画像からなる後述するナビゲーション画面を生成する画像処理部１７と、ルート設定部１４が生成したルート設定画面及び画像処理部１７が生成したナビゲーション画面をモニタ５に表示させる画像表示制御部１８と、ルート設定部１４に対して設定情報を入力するキーボード及びポインティングデバイスからなる設定情報入力部１９とから構成される。
【００２０】
なお、ＣＴ画像データ格納部１２及びＶＢＳ画像格納部１６は、１つのハードディスクによって構成してもよく、また、ＭＰＲ画像生成部１３、ルート設定部１４、ＶＢＳ画像生成部１５及び画像処理部１７は１つの演算処理回路で構成することができる。また、ＣＴ画像データ取り込み部１１はＭＯあるいはＤＶＤ等の可搬型の記憶媒体を介してＣＴ画像データを取り込みとしたが、ＣＴ装置あるいはＣＴ画像データを保存している院内サーバが院内ＬＡＮに接続されている場合には、ＣＴ画像データ取り込み部１１を該院内ＬＡＮに接続可能なインターフェイス回路により構成し、院内ＬＡＮを介してＣＴ画像データを取り込むようにしてもよい。
【００２１】
入力部４は、図２に示すように、ナビゲーション画面に表示する気管支の分岐点毎のＶＢＳ画像の更新を指示する次ＶＢＳスイッチであるＳＷ１と、ＶＢＳ画像を自動回転させライブ画像の向きに対応させる指示を行う画像回転自動スイッチであるＳＷ２と、ＶＢＳ画像を所定回転角づつ回転させライブ画像の向きに対応させる指示を行う画像回転手動スイッチであるＳＷ３と、ライブ画像の静止画像の取り込みを指示するフリーズスイッチであるＳＷ４とから構成される。
【００２２】
このように構成された本実施の形態の作用について説明する。
【００２３】
図３に示すように、気管支鏡２による観察・処置に先立ち、気管支鏡ナビゲーション装置６は、ステップＳ１でＣＴ画像データ取り込み部１１によりＣＴ装置で生成された患者の３次元画像データを取り込み、ステップＳ２で取り込んだ３次元画像データをＣＴ画像データ格納部１２に格納する。
【００２４】
ステップＳ３でルート設定部１４により、図４に示すようなルート設定画面２１をモニタ５に表示させ、ルート設定画面２１上の患者情報タグ画面２２で患者情報を選択する。この選択により、ステップＳ４で選択された患者の例えば３つの異なる多断面像からなるＭＰＲ画像が生成され、ステップＳ５でこのＭＰＲ画像２３がルート設定画面２１に表示される。
【００２５】
なお、患者情報タグ画面２２での患者情報の選択は、設定情報入力部１９により患者を識別する患者ＩＤを入力することで行われる。
【００２６】
次に、ステップＳ６でルート設定画面２１上のルート設定タグ２４（図４参照）を設定情報入力部１９により選択すると、図５に示すようなルート設定タグ画面２５がルート設定画面２１に表示され、後述するルート設定処理を行い、気管支での気管支鏡２の挿入ナビゲーションのルートを設定する。
【００２７】
挿入ナビゲーションのルートが設定されると、ステップＳ７でＶＢＳ画像生成部１５により設定した全ルートの連続したＶＢＳ画像をフレーム単位で生成し、ステップＳ８で生成したＶＢＳ画像をＶＢＳ画像格納部１６に格納する。
【００２８】
本実施の形態の気管支鏡ナビゲーション装置６では、例えば後述するように２つのナビゲーション方法で気管支での気管支鏡２の挿入をナビゲーションすることができるので、この方法をモード１及びモード２として、ステップＳ９で設定情報入力部１９によりモード（ナビゲーションモード）をルート設定部１４に設定する。このナビゲーションモードの情報はルート設定部１４を介して画像処理部１７にも送信され、モード情報がそれぞれに記憶される。
【００２９】
上記のステップＳ１〜Ｓ９の処理により、気管支鏡２による観察・処置時の気管支鏡ナビゲーション装置６によるナビゲーションの準備が完了する。
【００３０】
ここで、上記ステップＳ６のルート設定処理を図６を用いて説明する。
【００３１】
図６に示すように、ステップＳ６のルート設定処理では、設定情報入力部１９を操作することで、図５に示したルート設定タグ画面２５上のルート探索ボタンをクリックすると、ステップＳ１１で図７に示すようなルートの始点の入力を促す始点入力指示ウインドウ３１がルート設定画面２１上に表示され、ルート設定画面２１上にカーソル３０を用いてＭＰＲ画像２３のうちの１つの断層像上で始点を設定する。始点を設定すると他のＭＰＲ画像２３の２つの断層像上にも対応する位置に始点が設定されると共に、図８に示すようなルートの終点の入力を促す終点入力指示ウインドウ３２がルート設定画面２１上に表示さる。
【００３２】
そこで、ステップＳ１２で始点の設定と同様に、ルート設定画面２１上にカーソル３０を用いてＭＰＲ画像２３のうちの１つの断層像上で終点を設定する。終点を設定すると他のＭＰＲ画像２３の２つの断層像上にも対応する位置に終点が設定される。
【００３３】
始点と終点が設定されると、ステップＳ１３でルート設定部１４は始点から終点に至る気管支内のルートを探索する。気管支は複雑な経路を有しているので、始点から終点に至る気管支内のルートが一意的に決まるとは限らないので、ルート設定部１４ではステップＳ１３では、始点から終点に至る気管支内のルートの第１候補を探索する。
【００３４】
そして、ルート設定部１４はルート設定画面２１上において、図９に示すように、ステップＳ１４で探索されたルートをＭＰＲ画像２３に重畳して表示すると共に、ルートの確定等の入力を促すルート確定ウインドウ３３を表示する。
【００３５】
ルート確定ウインドウ３３には、探索したルートの確定を指示するルート確定ボタン４１と、次候補のルートの探索を指示する次候補探索ボタン４２と、始点及び終点を再設定し直すルート再設定ボタン４３と、ルート探索処理をキャンセルするキャンセルボタン４４とを備えている。
【００３６】
ステップＳ１５で次候補探索ボタン４２がクリックされたかどうか判断し、クリックされたならばステップＳ１６で次候補のルートを自動探索してステップＳ１７に進み、クリックされない場合にはステップＳ１８に進む。ステップＳ１７では次候補を探索した結果、次候補が存在するかどうかを判断し、存在しない場合には図示はしないが次候補ルートが存在しない旨の警告を表示しステップＳ１３に戻り、存在する場合にはステップＳ１４に戻る。
【００３７】
ステップＳ１８では、ルート再設定ボタン４３がクリックされたかどうか判断し、クリックされたならばステップＳ１１に戻り、クリックされない場合にはステップＳ１９に進む。
【００３８】
ステップＳ１９では、ルート確定ボタン４１がクリックされたかどうか判断し、クリックされない場合にはステップＳ１５に戻り、クリックされたならばステップＳ２０に進み、ステップＳ２０でルート及びルート内の各分岐点の位置情報を決定して図６のステップＳ７に戻る。
【００３９】
ステップＳ２０でルート内の各分岐点の３次元の位置情報が決定されると、始点１０１から終点１０２に至るまでの挿入経路における分岐の順番を、各分岐点のＶＢＳ画像データに付して、ステップＳ８によりＶＢＳ画像格納部１６に格納する。従って分岐点を示す各ＶＢＳ画像データは分岐部の仮想画像と、分岐部の３次元位置情報と、選択された挿入経路における分岐の順番を有している。
【００４０】
なお、ＭＰＲ画像を使ったルート探索処理について述べたが、図１０に示すようなボリュームレンダリング（Ｖｏｌｕｍｅ  Ｒｅｎｄｅｒｉｎｇ  Ｔｅｃｈｎｉｑｕｅ）画像１００を用いて、始点１０１及び終点１０２を指定してルート探索を行うようにしてもよい。
【００４１】
このようにしてルート設定がなされた気管支鏡ナビゲーション装置６による気管支鏡２による観察・処置時の挿入のナビゲーションについて説明する。なお、以下では、ルートの分岐点が１０カ所の場合を例に説明する。
【００４２】
図１１に示すように、気管支鏡ナビゲーション装置６によるナビゲーションを開始すると、ステップＳ２１でモニタ５に図１２に示すようなナビゲーション画面５１を表示する。
【００４３】
このナビゲーション画面５１は、気管支鏡２からのライブ画像を表示する内視鏡ライブ画像表示エリア５２と、ＶＢＳ画像を表示するＶＢＳ画像表示エリア５３と、ルートの全ての分岐点でのＶＢＳ画像を縮小して分岐サムネイルＶＢＳ画像として表示する分岐サムネイルＶＢＳ画像エリア５４とからなり、気管支鏡２の挿入前であるステップＳ２１では、内視鏡ライブ画像表示エリア５２にはライブ画像は表示されないが、ＶＢＳ画像表示エリア５３にはルートの最初の分岐点のＶＢＳ画像５３ａが表示され、分岐サムネイルＶＢＳ画像エリア５４には全ての分岐点での分岐サムネイルＶＢＳ画像５４（ａ）〜５４（ｊ）が表示される。
【００４４】
なお、ＶＢＳ画像５３ａにはルートに進む経路穴にマーカ５５を重畳して表示している。また、ＶＢＳ画像表示エリア５３に表示されるＶＢＳ画像５３ａと同じ分岐サムネイルＶＢＳ画像の枠が太枠あるいはカラー表示され、他の分岐サムネイルＶＢＳ画像と識別可能となっており、術者はＶＢＳ画像表示エリア５３に表示されるＶＢＳ画像がどの分岐の画像かを容易に認識できるようになっている。このステップＳ２１の段階では分岐サムネイルＶＢＳ画像５４（ａ）の枠が太枠あるいはカラー表示される。
【００４５】
そして、ステップＳ２２で気管支鏡２の気管支内への挿入を開始すると、図１３に示すように、ステップＳ２３でナビゲーション画面５１には内視鏡ライブ画像表示エリア５２に気管支鏡２からのライブ画像５２ａが表示される。尚、図１３においてもＶＢＳ画像表示エリア５３にはルートの最初の分岐点のＶＢＳ画像５３ａが表示され、分岐サムネイルＶＢＳ画像エリア５４には全ての分岐点での分岐サムネイルＶＢＳ画像５４（ａ）〜５４（ｊ）が表示され、分岐サムネイルＶＢＳ画像５４（ａ）の枠が太枠あるいはカラー表示される。
【００４６】
次に、ステップＳ２４でライブ画像を受信した画像処理部１７において、ナビゲーションモードがモード１かどうか判断する。
【００４７】
以下、まず、ナビゲーションモードがモード１の場合の気管支鏡ナビゲーション装置６のナビゲーション処理について説明する。
【００４８】
まず、気管支鏡２の先端が最初（第１）の分岐点に到達すると、術者はフリーズスイッチであるＳＷ４を押下するかどうか判断する。術者はＶＢＳ画像表示エリア５３のＶＢＳ画像５３ａとライブ画像５２ａを目視するだけでマーカ５５が示す経路穴をライブ画像５２ａ上で見いだせる場合はそのまま挿入を続行するが、ライブ画像５２ａ上でマーカ５５が示す経路穴を見つけるのが困難な場合にはフリーズスイッチであるＳＷ４を押下する。
【００４９】
そこで、ステップＳ２５でフリーズスイッチであるＳＷ４がＯＮされたかどうか判断し、ＯＮされたならばステップＳ２６でライブ画像５２ａの静止画像を取り込み、該静止画像と最初の分岐点のＶＢＳ画像５３ａとが公知の画像処理によって類似度が比較され、ＯＮされないならばステップＳ２７に進む。
【００５０】
なお、ステップＳ２６において、所定値以下の類似度の場合には設定したルート以外のルートに挿入された（あるいは異なる分岐点のＶＢＳ画像と比較している）と判断し警告を表示する（図示せず）。
【００５１】
ステップＳ２６にて、所定値を超える類似度でライブ画像５２ａの静止画像とＶＢＳ画像５３ａとが類似していると判断すると、両画像が同一の分岐点での画像であるとし、術者が画像回転自動スイッチであるＳＷ２あるいは画像回転手動スイッチであるＳＷ３を操作することで、ＶＢＳ画像５３ａを回転させ、ライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させた後、ステップＳ２７に進む。
【００５２】
なお、画像回転自動スイッチであるＳＷ２を術者が押下すると、例えばパターン認識処理によりライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを自動的に一致させる。また、画像回転手動スイッチであるＳＷ３を術者が押下すると、所定角度だけＶＢＳ画像５３ａを回転させ、術者がＳＷ３の押下を繰り返すことで手動にてライブ画像５２ａとＶＢＳ画像５３ａとを一致させる。
【００５３】
このようにしてライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させると、術者はマーカ５５が示す経路穴をライブ画像５２ａ上で容易に見いだせるので、マーカ５５の指示に従って挿入を続行する。
【００５４】
ステップＳ２７では、次ＶＢＳスイッチであるＳＷ１が術者によって押下されたかどうか判断し、押下されない場合にはステップＳ２５に戻り、ＳＷ１が術者によって押下された場合には、ステップＳ２８でＶＢＳ画像表示エリア５３に次（第２）の分岐サムネイルＶＢＳ画像（ｂ）のＶＢＳ画像５３ａを表示する。このとき第２の分岐サムネイルＶＢＳ画像５４（ｂ）の枠が太枠あるいはカラー表示され、分岐サムネイルＶＢＳ画像５４（ａ）の枠は他の分岐サムネイルＶＢＳ画像の枠表示になる。
【００５５】
そして、ステップＳ２９で病変部に達したか（すなわち、ナビゲーションの終点に達したか）どうかを判断し、病変部に到達した場合は処理を終了し、病変部に到達していない場合にはステップＳ２５に戻り、病変部に到達するまで、ステップＳ２５〜Ｓ２９の処理を繰り返す。
【００５６】
上記ステップＳ２５〜Ｓ２９の処理の具体例をナビゲーション画面５１を用いて説明する。図１４に示すように、例えば第８の分岐点に到達した場合のナビゲーションにおいては、ＶＢＳ画像表示エリア５３には第８の分岐サムネイルＶＢＳ画像５４（ｈ）のＶＢＳ画像５３ａが表示され、内視鏡ライブ画像表示エリア５２には第８の分岐点近傍のライブ画像５２ａが表示される。このとき分岐サムネイルＶＢＳ画像５４（ｈ）の枠のみが太枠あるいはカラー表示され、術者に第８の分岐点におけるナビゲーションであることを認識させる。
【００５７】
この状態で術者がフリーズスイッチであるＳＷ４を押下（ステップＳ２５）すると、ライブ画像の静止画像が取り込まれ、例えば術者が画像回転自動スイッチであるＳＷ２を押下すると、図１５に示すように、ＶＢＳ画像５３ａを回転させ、ライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させる（ステップＳ２６）。
【００５８】
次に術者が挿入先の経路穴を認識し、次ＶＢＳスイッチであるＳＷ１を押下（ステップＳ２７）すると、図１６に示すように、ＶＢＳ画像表示エリア５３には第９の分岐サムネイルＶＢＳ画像５４（ｉ）のＶＢＳ画像５３ａが表示され、分岐サムネイルＶＢＳ画像５４（ｉ）の枠のみが太枠あるいはカラー表示され、術者に次のナビゲーションの位置が第９の分岐点であることを認識させ（ステップＳ２８）、病変部（すなわち、ナビゲーションの終点）に到達するまで（ステップＳ２９）同様なナビゲーションは行われる。
【００５９】
次に、ナビゲーションモードがモード２の場合の気管支鏡ナビゲーション装置６のナビゲーション処理について説明する。
【００６０】
図１１のステップＳ２４でライブ画像を受信した画像処理部１７において、ナビゲーションモードがモード１でない、すなわちモード２と判断すると、図１７のステップＳ４１に処理が移行する。
【００６１】
モード２のナビゲーションモードは、気管支への挿入術に習熟している術者が利用するモードであって、ナビゲーションは期待するが、ほとんどの分岐点での挿入先の経路穴を熟知している場合には、モード１のように所定位置までの各分岐点でのナビゲーションを必要としないモードである。
【００６２】
しかし、モード１の場合は各分岐点に達する毎に次ＶＢＳスイッチであるＳＷ１を押下するので、ライブ画像の分岐点位置とＶＢＳ画像の分岐点位置を同一とすることが可能であるが、所定位置までの各分岐点でのナビゲーションを必要としないで挿入を続行し、ある位置における分岐点でのナビゲーションを期待する場合、ナビゲーションしたい分岐点位置の分岐サムネイルＶＢＳ画像を見つけることが難しくなる。
【００６３】
そこで、モード２のナビゲーションモードでは、気管支鏡の挿入部の挿入量に基づいてナビゲーションしたい分岐点位置の分岐サムネイルＶＢＳ画像を検索し、ＶＢＳ画像５３ａをＶＢＳ画像表示エリア５３に表示させ、ナビゲーションを可能とする。
【００６４】
すなわち、モード２のナビゲーションモードにおいては、術者はナビゲーションを必要としない場合は、ライブ画像をモニタしながら気管支鏡２の挿入を続行するが、ナビゲーションを必要とする分岐点に気管支鏡２の先端が到達した場合、術者はフリーズスイッチであるＳＷ４を押下する。
【００６５】
モード２での気管支鏡ナビゲーション装置６のナビゲーション処理は、図１７に示すように、ステップＳ４１でフリーズスイッチであるＳＷ４が押下されるのを待ち、ＳＷ４が押下されると、図１８に示すように、ステップＳ４２で内視鏡ライブ画像表示エリア５２のライブ画像５２ａにフリーズスイッチであるＳＷ４が押下された時点での静止画像の縮小画像６０が重畳されて表示される。
【００６６】
なお、図１８においては、フリーズスイッチであるＳＷ４が押下された時点が第８の分岐点であって、この時点までナビゲーションを必要としていない場合でフリーズスイッチであるＳＷ４がこの時点で初めて押下された状態の図であって、ＶＢＳ画像表示エリア５３に表示されるＶＢＳ画像５３ａは、第１の分岐サムネイルＶＢＳ画像５４（ａ）のＶＢＳ画像となっている。
【００６７】
そして、ステップＳ４３で挿入量検出装置３により気管支鏡２の挿入部の患者体内への挿入量を検出し、ステップＳ４４で検出した挿入量に基づき気管支鏡２の先端位置及びその近傍の分岐点を算出する。
【００６８】
ステップＳ４５では、算出した分岐点を基準に１つ手前の分岐点から１つ後の分岐点までのＶＢＳ画像を動画にてＶＢＳ画像表示エリア５３に表示する。また算出した分岐点の分岐サムネイルＶＢＳ画像のみ枠が太枠あるいはカラー表示される。
【００６９】
図１９は、図１８における第８の分岐点を基準に第７の分岐点から第９の分岐点までのＶＢＳ画像の動画表示の様子を示し、図２０は動画表示の開始時点の第７の分岐点のＶＢＳ画像５３ａがＶＢＳ画像表示エリア５３に表示されたナビゲーション画面５１を示し、図２１は動画表示の終了時点の第９の分岐点のＶＢＳ画像５３ａがＶＢＳ画像表示エリア５３に表示されたナビゲーション画面５１を示している。
【００７０】
なお、図２０及び図２１に示すように、ＶＢＳ画像表示エリア５３に動画表示される領域を示す、分岐サムネイルＶＢＳ画像エリア５４に表示されている分岐サムネイルＶＢＳ画像の下に動画領域バー７１が表示される。図２０及び図２１の場合は、第７の分岐点の分岐サムネイルＶＢＳ画像５４（ｇ）から第９の分岐点の分岐サムネイルＶＢＳ画像５４（ｉ）の下に動画領域バー７１が表示されている表示例を示し、このとき、算出した分岐点の分岐サムネイルＶＢＳ画像５４（ｈ）のみ枠が太枠あるいはカラー表示される。
【００７１】
これにより術者は現在の挿入部の先端位置がどの分岐点位置にあるかどうかが認識できるので、術者は近傍の分岐点のライブ画像を見いだすように挿入を前後させ、内視鏡ライブ画像表示エリア５２のライブ画像５２ａを分岐点のライブ画像５２ａを得る。
【００７２】
このようにしてナビゲーションを必要とする位置でのライブ画像５２ａを得ると、ステップＳ４６でフリーズスイッチであるＳＷ４がＯＮされるのを待ち、ＯＮされたならば、ステップＳ４７でライブ画像５２ａの静止画像を取り込み算出した分岐点のＶＢＳ画像５３ａをＶＢＳ画像表示エリア５３に表示し、ステップＳ４８においてライブ画像５２ａの静止画像と算出した分岐点のＶＢＳ画像５３ａとの類似度を公知の画像処理によって比較し、モード１と同様な処理を行う。
【００７３】
なお、図２１の状態でフリーズスイッチであるＳＷ４がＯＮされると、図２２に示すように、算出した分岐点の分岐サムネイルＶＢＳ画像５４（ｈ）のＶＢＳ画像５３ａをＶＢＳ画像表示エリア５３に表示すると共に、分岐サムネイルＶＢＳ画像５４（ｈ）のみ枠が太枠あるいはカラー表示される。
【００７４】
なお、ステップＳ４８においては、モード１と同様に、所定値以下の類似度の場合には設定したルート以外のルートに挿入された（あるいは異なる分岐点のＶＢＳ画像と比較している）と判断し警告を表示する（図示せず）。
【００７５】
また、ステップＳ４８では、モード１同様に、所定値を超える類似度でライブ画像５２ａの静止画像とＶＢＳ画像５３ａとが類似していると判断すると、両画像が同一の分岐点での画像であるとし、術者が画像回転自動スイッチであるＳＷ２あるいは画像回転手動スイッチであるＳＷ３を操作することで、ＶＢＳ画像５３ａを回転させ、ライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させた後、ステップＳ４９に進む。
【００７６】
このようにしてライブ画像５２ａの静止画像とＶＢＳ画像５３ａとを一致させると、術者はマーカ５５が示す経路穴をライブ画像５２ａ上で容易に見いだせるので、マーカ５５の指示に従って挿入を続行する。
【００７７】
そして、ステップＳ４９で病変部に達したか（すなわち、ナビゲーションの終点に達したか）どうかを判断し、病変部に到達した場合は処理を終了し、病変部に到達していない場合にはステップＳ４１に戻り、病変部に到達するまで、ステップＳ４１〜Ｓ４９の処理を繰り返す。
【００７８】
なお、ステップＳ４５で算出した分岐点を基準に１つ手前の分岐点から１つ後の分岐点までのＶＢＳ画像を動画にてＶＢＳ画像表示エリア５３に表示するとしたが、これに限らず、例えば算出した分岐点を基準に２つ手前の分岐点から２つ後の分岐点までのＶＢＳ画像を動画にてＶＢＳ画像表示エリア５３に表示するようにしてもよい。
【００７９】
このように本実施の形態では、モード１のナビゲーションにおいては、分岐サムネイルＶＢＳ画像エリア５４に全ての分岐点の分岐サムネイルＶＢＳ画像を表示すると共に、ライブ画像５２ａと比較しているＶＢＳ画像５３ａに対応する分岐サムネイルＶＢＳ画像枠を太枠あるいはカラー表示するので、ライブ画像５２ａがどの分岐点の画像かを容易に認識できる。
【００８０】
また、モード２のナビゲーションにおいては、ナビゲーションが必要なときに対象となる分岐点のＶＢＳ画像５３ａを簡単に探索し、ライブ画像５２ａ近傍のＶＢＳ画像５３ａを動画にて表示するので、ライブ画像５２ａがどの分岐点の画像かを容易に認識できる。
【００８１】
さらにモード１及び２のナビゲーションにおいては、ライブ画像５２ａとＶＢＳ画像５３ａの比較において、画像処理にて両画像の類似度を算出し、所定値以下の類似度の場合、警告を行うので術者が誤認した分岐点での挿入続行を中断でき、容易に適切な分岐点位置に気管支鏡２の先端を位置させる処置を行うことが可能となる。
【００８２】
なお、ナビゲーション画面５１において、ＶＢＳ画像５３ａに対応する分岐サムネイルＶＢＳ画像エリア５４の分岐サムネイルＶＢＳ画像の枠を太枠あるいはカラー表示するとしたが、図２３に示すように、ＶＢＳ画像５３ａに対応する分岐サムネイルＶＢＳ画像を拡大して、且つ拡大した分岐サムネイルＶＢＳ画像の枠を太枠あるいはカラー表示するようにしてもよい。図２３では分岐点が９個の場合において、第７の分岐サムネイルＶＢＳ画像のＶＢＳ画像５３ａが表示された状態を示している。
【００８３】
また、ナビゲーション画面５１においては分岐サムネイルＶＢＳ画像を１列表示としたが、分岐点が多い場合には図２４に示すように、２列以上にわたって分岐サムネイルＶＢＳ画像を表示するようにしてもよい。また、図２５に示すように、分岐サムネイルＶＢＳ画像エリア５４をスクロール可能なフレーム構成することで、複数の分岐サムネイルＶＢＳ画像をスクロールさせて表示するようにしてもよい。
【００８４】
さらに、ナビゲーション画面５１においてＶＢＳ画像５３ａにはルートに進む経路穴にマーカ５５を重畳して表示するとしたが、これに限らず、例えば図２６に示すように、ＶＢＳ画像５３ａ上のルートに進む経路穴の輪郭を強調表示したり経路穴内をカラー表示してもよい。
【００８５】
さらにまた、図２７に示すように、ナビゲーション画面５１においてＶＢＳ画像５３ａ上に、患者の姿勢に応じた上下方向（重力方向）を表示させてもよい。なお図２８に示すようにライブ画像５２ａ上に表示してもよい。
【００８６】
また、図２９に示すように、ＶＢＳ画像５３ａ上に挿入先にある生検対象の組織の位置をマーカ８１にて表示し、現在位置から生検対象の組織の位置までの距離や生検対象の組織の大きさ等をＶＢＳ画像５３ａ上に表示するようにしてよい。またマーカ８１ではなく図３０に示すように、組織の大きさや形状を模した組織像８２をＶＢＳ画像５３ａ上に表示するようにしてもよい。
【００８７】
したがって、本実施の形態によれば、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションすることができる。
【００８８】
本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。
【００８９】
以上のように、本発明にかかる内視鏡装置は、体内の管路への内視鏡挿入をナビゲーションする内視鏡装置として、また、気管支等のような体内の管路への気管支内視鏡挿入をナビゲーションする内視鏡装置として、さらに、多段階の分岐点を有する管路への内視鏡挿入をナビゲーションする工業用内視鏡装置等として有用であり、特に目的部位が気管支等のような多段階の分岐点を有する体内の管路内の末端にある場合に気管支内視鏡先端部を確実にナビケーションするのに適している。
【００９０】
【発明の効果】
以上説明したように本発明によれば、実際の分岐位置に対応した案内画像により、内視鏡を目的部位に確実にナビゲーションすることのできるという効果を有する。
【図面の簡単な説明】
【図１】本発明の一実施の形態に係る内視鏡装置の構成を示す構成図である。
【図２】図１の入力部の構成を示す構成図である。
【図３】図１の気管支鏡ナビゲーション装置によるナビゲーションデータの生成処理の流れを示すフローチャートである。
【図４】図３の処理で展開されるルート設定画面を示す第１の図である。
【図５】図３の処理で展開されるルート設定画面を示す第２の図である。
【図６】図３のルート設定処理の流れを示すフローチャートである。
【図７】図６の処理で展開されるルート設定画面を示す第１の図である。
【図８】図６の処理で展開されるルート設定画面を示す第２の図である。
【図９】図６の処理で展開されるルート設定画面を示す第３の図である。
【図１０】図１の気管支鏡ナビゲーション装置によるルート探索の変形例を説明する図である。
【図１１】図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第１のフローチャートである。
【図１２】図１１の処理で展開されるナビゲーション画面を示す第１の図である。
【図１３】図１１の処理で展開されるナビゲーション画面を示す第２の図である。
【図１４】図１１の処理で展開されるナビゲーション画面を示す第３の図である。
【図１５】図１１の処理で展開されるナビゲーション画面を示す第４の図である。
【図１６】図１１の処理で展開されるナビゲーション画面を示す第５の図である。
【図１７】図１の気管支鏡ナビゲーション装置によるナビゲーション処理の流れを示す第２のフローチャートである。
【図１８】図１７の処理で展開されるナビゲーション画面を示す第１の図である。
【図１９】図１７の処理で表示される動画を説明する図である。
【図２０】図１７の処理で展開されるナビゲーション画面を示す第２の図である。
【図２１】図１７の処理で展開されるナビゲーション画面を示す第３の図である。
【図２２】図１７の処理で展開されるナビゲーション画面を示す第４の図である。
【図２３】図１４のナビゲーション画面の第１の変形例を示す図である。
【図２４】図１４のナビゲーション画面の第２の変形例を示す図である。
【図２５】図１４のナビゲーション画面の第３の変形例を示す図である。
【図２６】図１４のナビゲーション画面の第４の変形例を示す図である。
【図２７】図１４のナビゲーション画面の第５の変形例を示す図である。
【図２８】図１４のナビゲーション画面の第６の変形例を示す図である。
【図２９】図１４のナビゲーション画面の第７の変形例を示す図である。
【図３０】図１４のナビゲーション画面の第８の変形例を示す図である。
【図３１】気管支の構造を示す図である。
【符号の説明】
１・・・内視鏡装置
２・・・気管支鏡
３・・・挿入量検出装置
４・・・入力部
５・・・モニタ
６・・・気管支鏡ナビゲーション装置
１１・・・ＣＴ画像データ取り込み部
１２・・・ＣＴ画像データ格納部
１３・・・ＭＰＲ画像生成部
１４・・・ルート設定部
１５・・・ＶＢＳ画像生成部
１６・・・ＶＢＳ画像格納部
１７・・・画像処理部
１８・・・画像表示制御部
１９・・・設定情報入力部
【国際調査報告】
2004010857.tif 000034
2004010857.tif 000035