(57)【要約】【課題】Ｍモード画像に関連する部位の位置を操作者が表示画面上３次元的に確実に把握できるように表示させることで、操作者の使い勝手の向上を図ることのできる表示画像生成装置、この表示画像生成装置を備える超音波画像診断装置及び表示画像生成プログラムを提供する。【解決手段】Ｍラインの位置情報を設定する位置情報設定部１３と、Ｍラインの位置情報及び３次元画像データから２次元画像を生成する２次元画像生成部１４と、２次元画像とＭラインを示す画像とを重畳して示す２次元重畳画像を生成する２次元画像−Ｍライン重畳部１５と、Ｍラインの位置情報及び３次元画像データからＭモード画像を生成するＭモード画像生成部１６と、３次元画像データから３次元画像を生成する３次元画像生成部１７と、Ｍモード画像と３次元画像とを重畳して示す３次元重畳画像を生成するＭモード画像−３次元画像重畳部１８とを備える。【選択図】図２
2012143332.tif 000002
【特許請求の範囲】
【請求項１】
表示される超音波画像の位置を示すＭラインに関する位置情報を設定する位置情報設定部と、
前記Ｍラインの位置情報及び、超音波プローブが収集した３次元画像データを基に２次元画像を生成する２次元画像生成部と、
前記２次元画像生成部において生成された前記２次元画像と前記Ｍラインを示す画像とを重畳して示す２次元重畳画像を生成する２次元画像−Ｍライン重畳部と、
前記Ｍラインの位置情報及び前記３次元画像データを基にＭモード画像を生成するＭモード画像生成部と、
前記３次元画像データを基に３次元画像を生成する３次元画像生成部と、
前記Ｍモード画像生成部において生成された前記Ｍモード画像と前記３次元画像生成部において生成された前記３次元画像とを重畳して示す３次元重畳画像を生成するＭモード画像−３次元画像重畳部と、
を備えることを特徴とする表示画像生成装置。
【請求項２】
複数の前記Ｍラインの指定がなされた場合に、前記位置情報設定部が前記複数のＭラインの位置情報を前記２次元画像生成部、前記２次元画像−Ｍライン重畳部、前記Ｍモード画像生成部、前記Ｍモード画像−３次元画像重畳部へ送信し、前記２次元画像生成部、前記２次元画像−Ｍライン重畳部、前記Ｍモード画像生成部、前記Ｍモード画像−３次元画像重畳部が前記複数のＭラインの位置情報に基づいて、前記２次元重畳画像、前記Ｍモード画像、前記３次元重畳画像を生成することを特徴とする請求項１に記載の表示画像生成装置。
【請求項３】
前記Ｍラインに替えて領域の指定がなされた場合に、前記位置情報設定部が前記領域の位置情報を前記２次元画像生成部、前記２次元画像−Ｍライン重畳部、前記Ｍモード画像生成部、前記Ｍモード画像−３次元画像重畳部へ送信し、前記２次元画像生成部、前記２次元画像−Ｍライン重畳部、前記Ｍモード画像生成部、前記Ｍモード画像−３次元画像重畳部が前記領域の位置情報に基づいて、前記２次元重畳画像、前記Ｍモード画像、前記３次元重畳画像を生成することを特徴とする請求項１に記載の表示画像生成装置。
【請求項４】
前記Ｍモード画像、前記３次元重畳画像として複数の前記Ｍモード画像が表示される場合に、選択されたＭモード画像について前記３次元重畳画像において強調した表示がなされるとともに、選択されたＭモード画像が表示される複数のＭモード画像の最前面に表示されることを特徴とする請求項２または請求項３に記載の表示画像生成装置。
【請求項５】
前記表示画像生成装置は、さらに複数の前記Ｍモード画像の中から高輝度に示されるラインを抽出する高輝度ライン抽出・生成部を備え、前記Ｍモード画像、前記３次元重畳画像において複数の前記Ｍモード画像が表示される場合に、これら複数の前記Ｍモード画像の中で抽出された前記高輝度ラインを互いに連結し互いに直交する２つの軸と１つの時間軸とで３次元的に表示させることを特徴とする請求項２ないし請求項４のいずれかに記載の表示画像生成装置。
【請求項６】
超音波の送受波を行う超音波振動子を備える超音波プローブと、
前記超音波振動子を駆動して超音波ビームの送受信を行う超音波送受信部と、
前記超音波送受信部が受信した画像データから３次元画像データを生成する３次元画像データ生成部と、
前記３次元画像データ生成部において生成された前記３次元画像データを基に表示部に表示するための画像を生成する請求項１ないし請求項５のいずれかに記載の表示画像生成装置と、
を備えることを特徴とする超音波画像診断装置。
【請求項７】
位置情報設定部が備える表示される超音波画像の位置を示すＭラインに関する位置情報及び超音波プローブが収集した３次元画像データを基に２次元画像生成部が２次元画像を生成するステップと、
前記２次元画像生成部において生成された前記２次元画像と前記Ｍラインを示す画像とを基に、２次元画像−Ｍライン重畳部によって両画像を重畳して示す２次元重畳画像を生成するステップと、
前記Ｍラインの位置情報及び前記３次元画像データを基にＭモード画像生成部によってＭモード画像を生成するステップと、
前記３次元画像データを基に３次元画像生成部によって３次元画像を生成するステップと、
前記Ｍモード画像生成部において生成された前記Ｍモード画像と前記３次元画像生成部において生成された前記３次元画像とを基に、Ｍモード画像−３次元画像重畳部によって両画像を重畳して示す３次元重畳画像を生成するステップと、
を超音波画像診断装置が備えるコンピュータに実行させることを特徴とする表示画像生成プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施の形態は、表示画像生成装置、この表示画像生成装置を備える超音波画像診断装置及び表示画像生成プログラムに関する。
【背景技術】
【０００２】
超音波画像診断装置は、超音波プローブに内蔵された超音波振動子から発生する超音波を被検体内に放射し、被検体組織の音響インピーダンスの差異によって生ずる反射信号を超音波振動子により受信してモニタ（表示部）に表示する装置である。特に、心臓等の組織における超音波診断では、その機能を客観的かつ定量的に評価することが極めて重要であるとされ、その検査項目として心臓組織の運動機能、血流の速度や乱れ、心腔の面積や容積等の計測が行われる。
【０００３】
表示方法としては、例えば、所定方向に超音波の送受信を繰り返し行い、このときに得られる組織からの反射信号から反射部位の位置の時間的変化の観測結果を表示する方法が挙げられる。この方法は、いわゆるＭモード法であり、心臓の弁や壁等の動きを定量化して示す方法として利用される。このＭモード法を採用する際に生成される画像がＭモード画像であり、このＭモード画像を介することで動きのある部位の動きを時系列で観察することができる。
【０００４】
また、２次元画像上に任意に設定された線分（関心領域）に沿って、その部位における組織移動速度等の生体情報を抽出し、この生体情報の時間的変化を上述したＭモード画像と同様な方法で表示する方法もある（以下の特許文献１参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００４−７３２８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記特許文献１において開示されている発明では、次の点について配慮がなされていない。
【０００７】
すなわち、近年超音波プローブとして、例えば、Ｍｅｃｈａ４Ｄプローブや２ＤＡｒｒａｙプローブを使用することが可能な超音波画像診断装置が利用されつつある。このような超音波画像診断装置では、超音波プローブによって被検体の組織の３次元（以下、適宜「３Ｄ（３  dimensional）」と表わす。）データをリアルタイムで複数のボリューム取得することが可能である。このように取得されるデータは、３Ｄデータに時間の次元が追加されたデータであると言え、４次元画像データと表わすことができる。
【０００８】
但し、これまでの超音波画像診断装置にて上述したようなＭモード画像を表示させる方法では、当該画像が表示する場所の３次元的な位置把握が困難である。また、Ｍモード画像が表示される際には、併せて２次元（以下、適宜「２Ｄ（２  dimensional）」と表わす。）の画像上でＭモード画像表示を行う方向を示すライン（以下、「Ｍライン」と表わす。）が表示される。但し、このＭラインはあくまでも２Ｄ表示される画像（いわゆる「Ｂ画像」）上に表示されるだけであり、このＭラインだけでは３次元的な位置把握が困難であることに変わりはない。
【０００９】
本発明は上記課題を解決するためになされたものであり、本発明の目的は、表示されるＭモード画像に関連する部位の位置を操作者が表示画面上３次元的に確実に把握できるように表示させることによって、操作者の使い勝手の向上を図ることのできる表示画像生成装置、この表示画像生成装置を備える超音波画像診断装置及び表示画像生成プログラムを提供することにある。
【課題を解決するための手段】
【００１０】
請求項１に記載の発明の特徴は、表示画像生成装置において、表示される超音波画像の位置を示すＭラインに関する位置情報を設定する位置情報設定部と、Ｍラインの位置情報及び超音波プローブが収集した３次元画像データを基に２次元画像を生成する２次元画像生成部と、２次元画像生成部において生成された２次元画像とＭラインを示す画像とを重畳して示す２次元重畳画像を生成する２次元画像−Ｍライン重畳部と、Ｍラインの位置情報及び３次元画像データを基にＭモード画像を生成するＭモード画像生成部と、３次元画像データを基に３次元画像を生成する３次元画像生成部と、Ｍモード画像生成部において生成されたＭモード画像と３次元画像生成部において生成された３次元画像とを重畳して示す３次元重畳画像を生成するＭモード画像−３次元画像重畳部とを備える。
【００１１】
請求項６に記載の発明の特徴は、超音波画像診断装置であって、超音波の送受波を行う超音波振動子を備える超音波プローブと、超音波振動子を駆動して超音波ビームの送受信を行う超音波送受信部と、超音波送受信部が受信した画像データから３次元画像データを生成する３次元画像データ生成部と、３次元画像データ生成部において生成された３次元画像データを基に表示部に表示するための画像を生成する表示画像生成装置と、を備え、表示画像生成装置は、表示される超音波画像の位置を示すＭラインに関する位置情報を備える位置情報設定部と、Ｍラインの位置情報及び３次元画像データを基に２次元画像を生成する２次元画像生成部と、２次元画像生成部において生成された２次元画像とＭラインを示す画像とを重畳して示す２次元重畳画像を生成する２次元画像−Ｍライン重畳部と、Ｍラインの位置情報及び３次元画像データを基にＭモード画像を生成するＭモード画像生成部と、３次元画像データを基に３次元画像を生成する３次元画像生成部と、Ｍモード画像生成部において生成されたＭモード画像と３次元画像生成部において生成された３次元画像とを重畳して示す３次元重畳画像を生成するＭモード画像−３次元画像重畳部とを備える。
【００１２】
請求項７に記載の発明の特徴は、超音波画像診断装置が備えるコンピュータに実行させることを特徴とする表示画像生成プログラムにおいて、位置情報設定部が備える表示される超音波画像の位置を示すＭラインに関する位置情報及び超音波プローブが収集した３次元画像データを基に２次元画像生成部が２次元画像を生成するステップと、２次元画像生成部において生成された２次元画像と前記Ｍラインを示す画像とを基に、２次元画像−Ｍライン重畳部によって両画像を重畳して示す２次元重畳画像を生成するステップと、Ｍラインの位置情報及び３次元画像データを基にＭモード画像生成部によってＭモード画像を生成するステップと、３次元画像データを基に３次元画像生成部によって３次元画像を生成するステップと、Ｍモード画像生成部において生成されたＭモード画像と３次元画像生成部において生成された３次元画像とを基に、Ｍモード画像−３次元画像重畳部によって両画像を重畳して示す３次元重畳画像を生成するステップとを備える。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施の形態における超音波画像診断装置の全体構成を示すブロック図である。
【図２】本発明の第１及び第２の実施の形態における表示画像生成装置の内部構成を示すブロック図である。
【図３】本発明の第１の実施の形態における表示画像である２次元重畳画像の生成の流れを示すフローチャートである。
【図４】本発明の第１の実施の形態における表示画像であるＭモード画像の生成の流れを示すフローチャートである。
【図５】本発明の第１の実施の形態における表示画像である３次元重畳画像の生成の流れを示すフローチャートである。
【図６】本発明の第１の実施の形態における２次元重畳画像、Ｍモード画像及び３次元重畳画像の表示態様を示す画面例である。
【図７】本発明の第２の実施の形態における表示画像である２次元重畳画像の生成の流れを示すフローチャートである。
【図８】本発明の第２の実施の形態における２次元重畳画像、Ｍモード画像及び３次元重畳画像の表示態様を示す画面例である。
【図９】本発明の第２の実施の形態における２次元重畳画像、Ｍモード画像及び３次元重畳画像の表示態様を示す画面例である。
【図１０】本発明の第３の実施の形態における表示画像生成装置の内部構成を示すブロック図である。
【図１１】本発明の第３の実施の形態における表示画像であるＭモード画像の生成及び高輝度ラインを示す画像の生成の流れを示すフローチャートである。
【図１２】本発明の第３の実施の形態における高輝度ラインを表示させるための準備画面の画面例である。
【図１３】本発明の第３の実施の形態における２次元重畳画像、高輝度ラインを示すＭモード画像及び高輝度ラインの表示を含む３次元重畳画像の表示態様を示す画面例である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施の形態について図面を参照して詳細に説明する。
【００１５】
（第１の実施の形態）
図１は、本発明の実施の形態における超音波画像診断装置１の全体構成を示すブロック図である。本発明の実施の形態における超音波画像診断装置１は、後述する表示画像生成装置内の各機能がその能力を発揮すべく、４次元画像データの収集、処理、表示が可能であることが前提とされる。
【００１６】
超音波画像診断装置１は、ＣＰＵ（Central Processing Unit）１ａと、ＲＯＭ(Read Only Memory)１ｂと、ＲＡＭ（Random Access Memory）１ｃ及び入出力インターフェイス１ｄがバス１ｅを介して接続されている。入出力インターフェイス１ｄには、入力部１ｆと、表示部１ｇと、通信制御部１ｈと、記憶部１ｉと、超音波送受信部１ｊとが接続されている。この超音波送受信部１ｊには、例えば、Ｍｅｃｈａ４Ｄプローブや２ＤＡｒｒａｙプローブといった４次元画像データを収集することの可能な超音波プローブＰが接続される。超音波プローブＰは超音波の送受波を行う超音波振動子を備えており、超音波送受信部１ｊからの指示に基づきこの超音波振動子が駆動する。超音波プローブＰが収集した被検体に関する４次元画像データは、超音波送受信部１ｊにて受信される。さらに、入出力インターフェイス１ｄを介して３次元画像データ生成部１ｋ及び表示画像生成装置１０も接続されている。
【００１７】
ＣＰＵ１ａは、入力部１ｆからの入力信号に基づいてＲＯＭ１ｂから超音波画像診断装置１を起動するためのブートプログラムを読み出して実行し、記憶部１ｉに格納されている各種オペレーティングシステムを読み出す。またＣＰＵ１ａは、入力部１ｆや入出力インターフェイス１ｄを介して、図１において図示していないその他の外部機器からの入力信号に基づいて各種装置の制御を行う。
【００１８】
さらにＣＰＵ１ａは、ＲＡＭ１ｃや記憶部１ｉ等に記憶されたプログラム及びデータを読み出してＲＡＭ１ｃにロードするとともに、ＲＡＭ１ｃから読み出されたプログラムのコマンドに基づいて、表示画像生成のための処理やデータの計算、加工等、一連の処理を実現する処理装置である。
【００１９】
入力部１ｆは、超音波画像診断装置１の操作者（例えば、医師や検査技師）が各種の操作を入力するキーボード、ダイヤル等の入力デバイスにより構成されており、操作者の操作に基づいて入力信号を作成しバス１ｅを介してＣＰＵ１ａに送信される。また、超音波画像診断装置１には、キーボード等だけでなく専用の操作パネルが設けられており、その操作パネル上の入力デバイスを介して操作画面に対する操作を行うこともできる。
【００２０】
表示部１ｇは、例えば液晶ディスプレイである。この表示部１ｇは、ＣＰＵ１ａからバス１ｅを介して出力信号を受信し、例えば超音波プローブＰを介して取得され生成された画像や撮影の際や画像処理を行う際の諸条件の設定を行うにあたって必要な画像等、或いはＣＰＵ１ａの処理結果等を表示する。
【００２１】
通信制御部１ｈは、ＬＡＮカードやモデム等の手段であり、超音波画像診断装置１をインターネットやＬＡＮ等の通信ネットワークに接続することを可能とする手段である。通信制御部１ｈを介して通信ネットワークと送受信したデータは入力信号または出力信号として、入出力インターフェイス１ｄ及びバス１ｅを介してＣＰＵ１ａに送受信される。
【００２２】
記憶部１ｉは、半導体や磁気ディスクで構成されており、ＣＰＵ１ａで実行されるプログラムやデータが記憶されている。
【００２３】
３次元画像データ生成部１ｋは、超音波プローブＰが収集した被検体の内部情報に関するボリュームデータを基に３次元画像データを生成する。この３次元画像データを時系列に並べることで４次元画像データが生成される。この生成された３次元画像データは、いずれに記憶されていても良いが、本発明の実施の形態においては、超音波画像診断装置１の記憶部１ｉに記憶される。
【００２４】
表示画像生成装置１０は入出力インターフェイス１ｄに接続され、３次元画像データ生成部１ｋによって生成された３次元画像データを基に、２次元重畳画像、Ｍモード画像、及び３次元重畳画像を生成する。
【００２５】
なお、「２次元画像」とは、２次元空間に対応する画素を配置した画像データをいい、「３次元画像」とは、３次元空間に対応する画素（空間的な３軸方向に対応する画素）を配置した画像データをいう。
【００２６】
また、本発明の実施の形態では、表示画像生成装置１０を超音波画像診断装置１に搭載した例を挙げて以下、説明を行う。但し、この表示画像生成装置１０は、超音波画像診断装置１から独立して存在し、図示しない通信ネットワークを介して超音波画像診断装置１とは別の医用画像診断装置と接続されるようにされていても良い。この場合には、さらに表示画像生成装置１０が例えば、病院情報管理システム（ＨＩＳ：Hospital Information System）、放射線部門情報管理システム（ＲＩＳ：Radiological Information System）、医用画像管理システム（ＰＡＣＳ：Picture Archiving Communication System）といった医療機関内に構築された各種管理システムと組み合わされて用いられても良い。
【００２７】
この通信ネットワークの例としては、ＬＡＮ（Local Area Network）やインターネット等のネットワークを挙げることができる。また、この通信ネットワークで使用される通信規格は、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）等、いずれの規格であっても良い。
【００２８】
また、本発明の実施の形態においては表示画像生成装置１０が画像処理を行うが、その処理は表示画像生成装置１０によってではなく、記憶部１ｉに格納されている表示画像生成プログラムを利用することで行うこともできる。この場合は、記憶部１ｉに格納されている表示画像生成プログラムがコンピュータ（ＣＰＵ１ａ）に読み込まれ実行されることにより、表示画像生成装置が超音波画像診断装置１に実装されることになる。
【００２９】
図２は、本発明の第１及び第２の実施の形態における表示画像生成装置１０の内部構成を示すブロック図である。表示画像生成装置１０は、受信部１１と、画像生成制御部１２と、位置情報設定部１３と、２次元画像生成部１４と、２次元画像−Ｍライン重畳部（図面では「２次元画像」を「２Ｄ画像」と表わす）１５と、Ｍ画像生成部１６（図面では「Ｍモード画像」を「Ｍ画像」と表わす）と、３次元画像生成部（図面では「３次元画像」を「３Ｄ画像」と表わす）１７と、Ｍモード画像−３次元画像重畳部（図面では「Ｍ画像−３Ｄ画像重畳部」と表わす）１８と、送信部１９とから構成される。
【００３０】
画像生成制御部１２は、入力部１ｆからの画像生成に関する指示を受信し、各部における表示部１ｇに表示する画像の生成を制御する。位置情報設定部１３は、表示部１ｇに表示される超音波画像の位置を示すＭラインに関する位置情報を把握（記憶）している。Ｍラインに関する位置情報は２次元画像、Ｍモード画像、２次元画像とＭラインとの重畳画像、３次元画像とＭモード画像との重畳画像を生成する上で非常に重要な情報であることから、２次元画像生成部１４、２次元画像−Ｍライン重畳部１５、Ｍ画像生成部１６、Ｍモード画像−３次元画像重畳部１８の各部へその位置情報が送信される。
【００３１】
２次元画像生成部１４、Ｍ画像生成部１６、３次元画像生成部１７は、それぞれ２次元画像、Ｍモード画像、３次元画像を生成する。さらに２次元画像−Ｍライン重畳部１５は、２次元画像とＭラインとを重ねて（重畳して）表示される画像（以下、適宜「２次元重畳画像」と表わす）を生成する。Ｍモード画像−３次元画像重畳部１８は、Ｍモード画像と３次元画像とＭラインとを重ねて表示される画像（以下、適宜「３次元重畳画像」と表わす）を生成する。
【００３２】
超音波画像診断装置１の表示部１ｇに表示される画像は、２次元画像−Ｍライン重畳画像、Ｍモード画像、及び３次元画像−Ｍライン重畳画像の３種類である。そこで以下、これら３種類の画像の生成の流れを説明するとともに、表示画像生成装置１０を構成する各部の機能を併せて説明する。
【００３３】
図３は、本発明の第１の実施の形態における表示画像である２次元画像−Ｍライン重畳画像（２次元重畳画像）の生成の流れを示すフローチャートである。図４は、本発明の第１の実施の形態における表示画像であるＭモード画像の生成の流れを示すフローチャートである。さらに、図５は、本発明の第１の実施の形態における表示画像であるＭモード画像−３次元画像重畳画像（３次元重畳画像）の生成の流れを示すフローチャートである。
【００３４】
２次元重畳画像とは、いわゆる「Ｂ／Ｍモード画像」と言われる画像である。この画像は、２次元で示されるＢ画像にＭモード画像を表示する方向を示すライン（Ｍライン）を重畳して示した画像である。
【００３５】
２次元重畳画像を生成するに当たっては、まず、２次元画像生成部１４が画像生成制御部１２からの生成指示を受信するとともに、３次元画像データを記憶部１ｉから入手する（ＳＴ１）。記憶部１ｉ内には、上述したように、超音波プローブＰが収集した被検体の内部情報に関するボリュームデータを基に３次元画像データ生成部１ｋが生成した３次元画像データが記憶されている。２次元画像生成部１４は、この記憶部１ｉ内に記憶されている３次元画像データを入手する。
【００３６】
なお、超音波画像診断装置１にて超音波画像として診察対象となる部位によって、例えば、心臓弁や心室を診察する場合と胎児の心臓を診察する場合とでは使用される超音波プローブＰの種類も異なる。従って、ボリュームデータは診察対象に合わせて適切な超音波プローブＰを使用して適切な方法で収集される。但し、以下に説明する表示態様についてはいずれの収集方法を採用しても同じである。
【００３７】
併せて２次元画像生成部１４は、位置情報設定部１３からＭラインの位置情報を入手する（ＳＴ２）。２次元重畳画像として表示されることになる２次元画像は、後述するように、２次元画像−Ｍライン重畳部１５にてＭラインと重ね合わせられることから、その位置関係が２次元画像とＭラインとで合致している必要がある。２Ｄ画像の表示位置とＭラインの表示位置とがずれていては重ね合わせることができないからである。また、２次元画像とこの２次元画像と重畳して示されるＭラインとがばらばらの位置関係のままでは、両者が重畳して表示されても実際にＭモード画像として表示される位置をＢ／Ｍモード画像から把握することはできない。
【００３８】
そこで、２次元画像生成部１４では、Ｍラインが表示される位置を予め位置情報設定部１３から入手して把握し、そのＭラインの画像を重ねることができるような位置で２次元画像を生成する（ＳＴ３）。Ｍラインの表示位置を考慮して生成された２次元画像は、２次元画像−Ｍライン重畳部１５に送られる。
【００３９】
２次元画像−Ｍライン重畳部１５には、位置情報設定部１３から予めＭラインの位置情報が送信されており、この位置情報を基にＭラインの画像が生成される。そして、２次元画像−Ｍライン重畳部１５においてＭラインの画像と重ねられて、２次元重畳画像が生成される（ＳＴ４）。生成された２次元重畳画像は、送信部１９を介して表示部１ｇに表示される。
【００４０】
図６は、本発明の第１の実施の形態における２次元重畳画像、Ｍモード画像及び３次元重畳画像の表示態様を示す画面例である。超音波画像診断装置１の表示部１ｇには、図６に示す画面例以外の要素も表示させることが可能であるが、ここでは本発明の実施の形態において必要となる領域のみを示している。画面例では、表示領域が上下２分割され、上部はさらに２分割され、合計３分割されている。２次元重畳画像は、上段左側の領域Ｂで示される領域に表示される。上述したように、２次元画像とＭラインの画像とが重畳して示されており、Ｍラインが２次元画像（にて示される部位）上、どの位置にあるかが明瞭に示されている。
【００４１】
次に、Ｍモード画像生成の流れである。図４のフローチャートに示すように、Ｍモード画像生成部１６は、画像生成制御部１２からＭモード画像の生成指示と、超音波画像診断装置１の記憶部１ｉから３次元画像データを入手する（ＳＴ１１）。Ｍモード画像は、Ｂ／Ｍモード画像、すなわち、２次元画像−Ｍライン重畳画像に示されるＭラインの位置における組織の周期的な動きが波形で表示される画像である。従って、超音波プローブＰを走査させて超音波画像診断装置１上に表示させる位置を示すＭラインの位置情報は重要である。Ｍモード画像生成部１６ではこのＭラインの位置情報を入手し（ＳＴ１２）、このＭラインの位置情報を基にＭモード画像を生成する（ＳＴ１３）。生成されたＭモード画像は、送信部１９を介して表示部１ｇに表示される。生成されたＭモード画像が表示されることで、例えば、操作者は表示対象となった部位の内膜を計測することが可能となる。
【００４２】
図６に示す画面例では、Ｍモード画像は下段の領域Ｍに示されている。Ｍモード画像は、Ｂ領域のＢ／Ｍ画像に示されるＭラインにおける組織の動きを時系列に表示している。従って、組織の動きが波形となって表わされる。図６に示すＢ／Ｍ画像では、Ｍラインは２次元画像に示す組織において線状に示される３カ所の位置における動きを示している。そのためＭモード画像においては、３カ所それぞれに対応した波形が示されている。
【００４３】
なお、表示部１ｇに表示される２次元重畳画像、Ｍモード画像、及び３次元重畳画像は、それぞれ超音波プローブＰから送信される最新の情報に基づいて順次更新されるが、特に超音波プローブＰからの情報に基づいて最初にＭモード画像が表示される際の表示方法については、次のいずれであっても良い。すなわち、Ｍモード画像は組織の動きを時系列に表示する画像であるため、２次元重畳画像が生成されたばかりで２次元重畳画像におけるＭラインの位置が定まったばかりの時には、まだ表示するに十分な波形が取得できていない。
【００４４】
そこで、Ｍモード画像の表示方法としては、Ｍ領域において時間の経過に従って順次波形を表示する方法を採用することができる。この方法では更新の度に、Ｍ領域内において、あたかも波形がＢ領域側からＶＭ領域側へと伸びていくように表示される。また、或いは、Ｍモード画像としてＭ領域に表示されるに十分な波形を取得できた時点になって初めてＭ領域にＭモード画像を表示させる方法も採用することができる。この方法の場合には、Ｍ領域に表示可能な分の波形が最初から一括して表示されることになる。いずれの方法を採用するかは任意に選択することが可能とされている。なお、一旦表示されたＭモード画像は、超音波プローブＰから送信される最新の情報に基づいて順次更新される。
【００４５】
次に、３次元画像生成の流れである。３次元画像生成部１７は画像生成制御部１２からの指示を受信するとともに、３次元画像データを記憶部１ｉから入手する（ＳＴ２１）。３次元画像生成部１７は、Ｍラインの画像及びＭモード画像を重ねることができるように３次元画像を生成する（ＳＴ２２）。
【００４６】
生成された３次元画像は、Ｍモード画像−３次元画像重畳部１８に送られる。Ｍモード画像−３次元画像重畳部１８には、位置情報設定部１３から予めＭラインの位置情報が送信されており、この位置情報を基にＭラインの画像が生成される。そして、Ｍモード画像−３次元画像重畳部１８においてＭモード画像、３次元画像と、及び、Ｍラインの画像とが重ねられて、３次元重畳画像が生成される（ＳＴ２３）。生成された３次元重畳画像は、送信部１９を介して表示部１ｇに表示される。
【００４７】
図６に示す画面例では、３次元重畳画像は上段の右側、ＶＭ領域に示されている。図６では３次元重畳画像として表示される３次元画像の輪郭のみを示しているが、３次元画像生成部１７において生成される３次元画像は、基本的に表示対象となる部位がそのまま３次元画像として表示される。また、図６のＶＭの領域に示される３次元重畳画像の輪郭は実線で示されているが、破線で示すことも可能である。３次元画像は、Ｍラインの位置を３次元的に把握するために重畳して示される画像であることから、操作者にとって把握しやすいように表示を切り替えることが可能である。
【００４８】
また、３次元重畳画像においてＭラインの画像に重畳させるＭモード画像は、Ｍラインに対して直交する方向に時間軸を有する。従って、Ｍラインを起点としてＭラインから離れる方向に表示対象となる部位の動きを示す波形が伸びるように表示される。Ｍモード画像は、Ｍラインを中心に３６０度自由に回転させて表示させることが可能であり、操作者が視認し易い位置で表示させることができる。なお、図６に示す画面例では、Ｍラインに対してＭモード画像は傾けて表示させた例を示している。
【００４９】
当然のことながら、Ｂ領域に示されているＭラインはＶＭ領域における３次元重畳画像上に示されるＭラインと同一の位置を示している。また、ＶＭ領域の３次元重畳画像に示されているＭモード画像は、Ｍ領域に示されるＭモード画像と同一である。そのため、Ｂ領域及びＭ領域とともに、ＶＭ領域にＭモード画像、３次元画像及び、Ｍラインの重畳した画像が表示されることによって、Ｍモード画像として表示されている位置を３次元画像上で容易に把握することができる。
【００５０】
従って、表示されるＭモード画像に関連する部位の位置を操作者が表示画面上３次元的に確実に把握できるように表示させることによって、操作者の使い勝手の向上を図ることのできる表示画像生成装置、この表示画像生成装置を備える超音波画像診断装置及び表示画像生成プログラムを提供することが可能となる。
【００５１】
なお、３次元重畳画像においては、３次元画像上にＭラインが明瞭に表示されるように重畳処理される。このように表示するのは、上述したように、Ｍラインの位置を３次元画像上にて簡易に把握することができるようにするためである。そこで、Ｍモード画像−３次元画像重畳部１８において３次元重畳画像を生成する際、３次元画像に含まれる様々な情報を考慮する。
【００５２】
考慮される情報としてまず、不透明度の情報が考慮される。この不透明度の情報は、例えば、透明を「０」、不透明を「１」とし、不透明度の情報が０に近づけば近づくほどこの３次元画像は透明に表示される。従って、この場合、表示部１ｇには３次元画像が表示されていないように見えるように表示される（表示されてはいるが不透明度の情報から見えるようには表示されない）。一方、不透明度の情報が１に近づくと、それだけ３次元画像として明瞭に表示される。但しこのような場合、重畳画像として表示される、例えば、Ｍラインの画像については３次元画像に隠れるように表示されることになってしまう。
【００５３】
そこで、３次元画像に重畳して表示される最も必要なＭラインの画像を明瞭に表示するため、３次元画像の不透明度の情報を操作して、Ｍラインの位置が３次元画像上把握できるように表わす。３次元画像の不透明度の情報の操作は、Ｍモード画像−３次元画像重畳部１８が３次元重畳画像を生成する際に行う。或いは、予めＭラインの画像情報との関係で３次元画像の不透明度をある値に設定しておくこともできる。
【００５４】
次にデプス情報も考慮する。この「デプス情報」は、重畳して表示される画像の奥行き方向の位置関係を示す情報である。３次元重畳画像は、３次元画像、Ｍモード画像及びＭラインを示す画像の３種を重畳して示す画像である。３次元画像のデプス情報を考慮することで、これら３種の画像相互の位置関係が明確になることから、３次元画像におけるＭラインの位置をより正確に把握することが可能となる。
【００５５】
また、図６のＶＭ領域に示す３次元重畳画像のＭラインは垂直となるように示されている（その分、３次元画像とＭモード画像とが傾いて示されている）とともに、ＶＭ領域内においてＢ領域側に偏る形で示されている。但し、このような表示も任意に変更することが可能であり、例えば、Ｍモード画像に表示されている波形をＶＭ領域の上枠と平行となるように表示させることが可能である。この場合、ＭラインはＢ領域とＶＭ領域とを隔てる枠に対して傾きをもって表示されることになる。
【００５６】
さらには、Ｍラインの表示角度はそのままに、３次元重畳画像が表示されるＶＭ領域の中央にＭラインを固定させて表示することも可能である。すなわち、Ｍラインの表示方法に従って、３次元画像とＭモード画像とを任意に回転、移動させて表示させることが可能である。
【００５７】
さらには、３次元重畳画像上に、表示対象となった部位に対するデータ取得方向を表示させるために、例えば、プローブマーク等を重ねて表示させることも可能である。また、３次元重畳画像内に２次元画像生成部１４において生成された２次元画像を重畳して示すように設定することも可能である。このような表示を行うことで、３次元的にＭモード画像にて表示される表示対象の動きがどの３次元画像のどの部分に当たるのかを簡単に把握することができる。
【００５８】
（第２の実施の形態）
次に本発明における第２の実施の形態について説明する。なお、第２の実施の形態において、上述の第１の実施の形態において説明した構成要素と同一の構成要素には同一の符号を付し、同一の構成要素の説明は重複するので省略する。
【００５９】
操作者によっては、表示対象となる部位によって複数のＭラインを設定して表示させたい場合も考えられる。或いは、表示させたい領域のみを指定してその領域内におけるＭモード画像や３次元重畳画像を表示させたい場合も考えられる。そこで第２の実施の形態においては、第１の実施の形態における説明に加えて、Ｍラインを複数指定した場合、或いは、Ｍラインに替わりＭモード画像を表示させたい領域（以下、この領域を「関心領域」と表わす）を指定した場合の処理について説明する。
【００６０】
図７は、本発明の第２の実施の形態における表示画像である２次元重畳画像の生成の流れを示すフローチャートである。図８は、本発明の第２の実施の形態における２次元重畳画像、Ｍモード画像及び３次元重畳画像の表示態様（複数のＭラインの場合）を示す画面例である。さらに図９は、本発明の第２の実施の形態における２次元重畳画像、Ｍモード画像及び３次元重畳画像の表示態様（関心領域の場合）を示す画面例である。
【００６１】
第２の実施の形態においては、例えば、図８、図９に示されているように、Ｂ領域には、心臓弁を短軸で輪切りにしたように示される２次元重畳画像が示されている場合を例に挙げて説明する。図８に示す２次元重畳画像においては、複数のＭラインが設定されている。図９に示す２次元重畳画像においては、表示される心臓弁の周囲を囲むように関心領域が設定されている。
【００６２】
Ｍラインの設定に当たっては、操作者がその設定位置（設定領域）や設定本数を入力部１ｆを介して自由に設定することが可能である。なお、設定に際してはＭラインの位置、或いは、関心領域の位置を設定することになるため、設定されたＭラインや関心領域の位置情報については、位置情報設定部１３が把握する。
【００６３】
２次元重畳画像、Ｍモード画像、及び３次元重畳画像の生成方法については、第１の実施の形態において説明した通りである。上述したように各重畳画像に示されるＭラインが複数設定されているか、或いは、Ｍラインに替えて関心領域として領域設定がされているか、のみが第１の実施の形態において説明したことと相違する。従って、以下では２次元重畳画像の生成を例に挙げて説明する。
【００６４】
操作者によってＭラインが複数設定される場合、或いは、関心領域が設定される場合は、まず、位置情報設定部１３がその設定情報を取得する（ＳＴ３１）。すなわち、操作者が入力部１ｆを介して入力したＭライン、或いは関心領域に関する設定情報は位置情報設定部１３に記憶される。
【００６５】
一方、関心領域の設定に当たっては、領域の設定がなされると、その領域内に自動的に複数枚のＭモード画像の表示がなされるように設定されることになる。関心領域内にいくつのＭモード画像の表示がなされるか、すなわち隣接するＭモード画像間の間隔をどのように設定するかは、予め設定しておくことが可能である。或いは、関心領域の設定に合わせて適宜自由に隣接するＭモード画像間の間隔を設定することにしても良い。図９のＶＭＭ領域の３次元重畳画像には、関心領域が設定された場合の３次元重畳画像が示されているが、この場合は関心領域として示される平面の中に４枚のＭモード画像が等間隔となるよう表示されている。
【００６６】
次に２次元画像生成部１４が画像生成制御部１２からの生成指示を受信するとともに、３次元画像データを記憶部１ｉから入手する（ＳＴ３２）。併せて位置情報設定部１３から複数のＭライン、或いは、関心領域の位置情報を入手し（ＳＴ３３）、それらの位置情報に基づいて２次元画像を生成する（ＳＴ３４）。
【００６７】
生成された２次元画像に関する画像情報は、２次元画像−Ｍライン重畳部１５に送信される。２次元画像−Ｍライン重畳部１５には、位置情報設定部１３から複数のＭライン、或いは、関心領域の位置情報が送信されている。そこで、複数のＭライン、或いは、関心領域を示す画像と２次元画像とを重畳して１つの２次元重畳画像として生成する（ＳＴ３５）。なお、図２においては、「２次元画像−Ｍライン重畳部」と表示されているが、関心領域が設定された場合にもこの「２次元画像−Ｍライン重畳部」において２次元重畳画像が生成される。
【００６８】
このように、位置情報設定部１３において把握された位置情報を基に、複数のＭライン、或いは、関心領域において示されているＭモード画像、３次元重畳画像が生成される。
【００６９】
図８は、複数のＭラインを設定した場合の画面例である。Ｂ領域における２次元重畳画像には複数（図８では３本）のＭラインが表示されている。この設定されたＭラインに併せてＭモード画像も３枚ＭＭ領域に表示されている。ＶＭＭ領域の３次元重畳画像には、３次元画像と複数のＭライン、及びこのＭラインに対応する複数のＭモード画像（ＭＭ領域に表示されているＭモード画像と同一）が表示されている。
【００７０】
図９は、関心領域を設定した場合の画面例である。Ｂ領域に示されている心臓弁をその内部に含むように破線で示す関心領域が設定されている。この関心領域を３次元重畳画像で示すと、ＶＭＭ領域に示されているような位置に該当する。図９に示す画面例では、３次元重畳画像として設定された関心領域内に４枚のＭモード画像が表示されている。４枚示されているＭモード画像のうち、前から２番目に表示されているＭモード画像は、その輪郭が他のＭモード画像とは異なり一点鎖線で示されている。これは、操作者が適宜選択したＭモード画像であり、この選択されたＭモード画像がＭＭ領域の最前面に示される。
【００７１】
なお、複数表示されるＭモード画像のいずれを選択して表示させるかは、任意に行うことができる。また、選択されたＭモード画像を強調して表示させることも可能である。強調表示の方法については、図９の３次元重畳画像に示すようにその輪郭を他のＭモード画像と変えて表示させる他、選択されたＭモード画像を点滅させる等、どのような方法が採用されても良い。
【００７２】
以上の説明より、複数表示されるＭモード画像に関連する部位の位置を操作者が表示画面上３次元的に確実に把握できるように表示させることによって、操作者の使い勝手の向上を図ることのできる表示画像生成装置、この表示画像生成装置を備える超音波画像診断装置及び表示画像生成プログラムを提供することが可能となる。
【００７３】
特に複数のＭライン、或いは、関心領域を指定することで複数のＭモード画像が一度に生成され、操作者が選択すればすぐに選択されたＭモード画像がＭＭ領域に表示される。このような表示を可能とすることで、操作者が表示対象、すなわち診察対象とする部位の全体の状態をすぐに把握することが可能となり、より一層の使い勝手の向上を提供することができる。
【００７４】
また関心領域の指定は、複数のＭラインの設定といった細かな操作を不要とするため、設定の煩雑さを排除して使い勝手の向上に寄与する。
【００７５】
さらに複数のＭモード画像を表示可能とすることで、マルチスライスすることによる効果、例えば、心臓弁の部分的な運動異常等を把握することが可能となる。そのため、例えば、弁の置換を部分的に行った場合等、術後の運動機能観察時等に利用することが可能となる。
【００７６】
（第３の実施の形態）
次に本発明における第３の実施の形態について説明する。なお、第３の実施の形態において、上述の第１または第２の実施の形態において説明した構成要素と同一の構成要素には同一の符号を付し、同一の構成要素の説明は重複するので省略する。
【００７７】
本発明の第３の実施の形態においては、Ｍモード画像を３次元的に表示させることを特徴とする。すなわち、そもそもＭモード画像は、Ｍライン上の表示対象である部分の動きを時系列に表示するものであり、例えば図６のＭ領域に示されているように、縦軸を動きを表す軸、横軸を時間軸として、いわば２次元的に表示されている。このＭモード画像を第２の実施の形態において説明したように複数のＭライン或いは、関心領域の設定によって複数枚生成し、それらの波形を奥行き方向に連続して示すことにより、あたかも画面上３次元的に見えるように表示させるものである。
【００７８】
図１０は、本発明の第３の実施の形態における表示画像生成装置３０の内部構成を示すブロック図である。表示画像生成装置３０は、第１、及び第２の実施の形態において説明した表示画像生成装置１０と基本的に同様の構成とされている。但し特徴的なのは、表示画像生成装置１０の各構成に加えて高輝度ライン抽出・生成部３１が設けられていることと、Ｍモード画像−３次元画像重畳部３２の機能がＭモード画像−３次元画像重畳部１８の機能と一部相違する点である。
【００７９】
高輝度ライン抽出・生成部３１及び、Ｍモード画像−３次元画像重畳部３２の機能については、図１１に示すフローチャートを利用しつつ、本発明の第３の実施の形態における表示画像であるＭモード画像の生成及び高輝度ラインを示す画像の生成の流れを説明する際に併せて説明する。
【００８０】
まず位置情報設定部１３において複数のＭライン又は関心領域の指定に関する情報を入手する（ＳＴ４１）。次にＭモード画像生成部１６が画像生成制御部１２からの生成指示を受信するとともに、３次元画像データを記憶部１ｉから入手する（ＳＴ４２）。併せて位置情報設定部１３から複数のＭライン、或いは、関心領域の位置情報を入手し（ＳＴ４３）、それらの位置情報に基づいてＭモード画像を生成する（ＳＴ４４）。ここまでのＭモード画像生成の流れは、第２の実施の形態において複数のＭライン、或いは、関心領域の設定がなされた場合の画像生成の流れを２次元画像の生成を例に挙げて説明した通りである。  
【００８１】
複数のＭライン、或いは、関心領域の設定がなされた場合のＭモード画像の表示は、図８、或いは図９の画面例に示す通りである。設定された複数のＭラインに合わせて、或いは、設定された関心領域内で予め設定されている間隔でＭモード画像が表示される。このように表示されるＭモード画像を３次元的に表示させるため、次に、高輝度ラインの抽出が行われる。
【００８２】
高輝度ラインの抽出処理は、例えば、高輝度ライン抽出・生成部３１内に予め設定されている閾値と比較することで行われる。輝度は、「０」ないし「２５５」までの２５６段階に分かれている。そこで、閾値として、例えば、「２００」を採用し、２００以上の輝度で表わされる波形を抽出する（ＳＴ４５）。抽出された波形については、例えば、ＭＭ領域に示される該当する波形を強調して表示させる。強調表示の方法については、例えば、該当する波形を囲んだり、或いは、波形自体を点滅させる等、様々な方法を採用することができる。
【００８３】
高輝度ラインの抽出処理については、また、次のような方法を採用することも可能である。抽出に当たり、まず高輝度ラインを抽出する範囲、対象を特定する。例えば、操作者によって高輝度ラインを抽出する範囲としてある領域が指定された場合、その領域に関する情報が位置情報設定部１３に送信される。位置情報設定部１３は、特定された抽出範囲を示す位置情報を２次元画像生成部１４、及び２次元画像−Ｍライン重畳部１５に送信し、この位置情報に基づいて２次元重畳画像が生成される。
【００８４】
図１２は、本発明の第３の実施の形態における高輝度ラインを表示させるための準備画面の画面例である。図１２に示す画面例のＢ領域には破線で示される、Ｍモード画像の生成範囲を示す関心領域内に、２点鎖線で囲まれる高輝度ラインを抽出範囲が示されている。この２点鎖線で囲まれた領域の位置情報は上述したように位置情報設定部１３にて把握されており、この位置情報を基にこの領域内の動きを示す波形の中から高輝度ラインが抽出される。
【００８５】
高輝度ライン抽出・生成部３１は、位置情報設定部１３から送信される高輝度ラインの抽出範囲に関する位置情報と上述した輝度に関する閾値を基に、抽出範囲内における高輝度ラインを抽出する。抽出結果は、例えば、図１２のＭＭ領域に表示されるように、該当波形が抽出範囲を示す２点鎖線によって囲まれることで表示される。
【００８６】
なお、高輝度ラインを抽出する範囲が設定されることによって、高輝度ライン抽出・生成部３１は、表示部１ｇに表示される全てのＭモード画像の中から該当する波形を抽出する。例えば、図１２に示すＭモード画像の場合、ＭＭ領域に示されているように最前列のＭモード画像の最上段の波形が抽出されるとともに、関心領域内において生成された他のＭモード画像の最上段の波形が抽出される。従って、例えば、最下段の波形が抽出された場合、関心領域内において生成された全てのＭモード画像（図１２では４枚のＭモード画像が示されているがこの４枚全てのＭモード画像）の最下段の波形が高輝度ラインとして抽出される。
【００８７】
また、高輝度ラインの抽出範囲を設定する方法として、領域を指定する方法を説明したが、Ｍラインを設定することによって高輝度ラインを抽出する対象を設定することも可能である。
【００８８】
高輝度ラインが抽出されると、複数のＭモード画像における高輝度ラインを連結する（ＳＴ４６）。図１３は、本発明の第３の実施の形態における２次元重畳画像、高輝度ラインを示すＭモード画像及び高輝度ラインの表示を含む３次元重畳画像の表示態様を示す画面例である。
【００８９】
図１３のＭ３Ｄ領域には、複数のＭモード画像にて抽出された高輝度ラインをその山の部分において連結した画像が表示されている。これまで説明してきたように、Ｍモード画像は時間軸（図１３では「Ｔ」で示される軸）ともう１つの軸（図１３で示すＹ軸）の２つの軸で示される、いわば２次元的に表示される。これは対象となる表示箇所の動きを時系列で表示するためである。
【００９０】
第３の実施の形態においては、このＴ軸及びＹ軸の他、両軸にそれぞれ直交する方向に伸ばされる軸（図１３におけるＸ軸）を設け、抽出された高輝度ラインを互いに連結してＸ軸方向（画面上奥行き方向）に表示させることによって、いわばＭモード画像を３次元的に表示させている。高輝度ラインとして抽出された波形の各山の部分をＸ軸方向に連結して表示させることによって、例えば、表示対象とされる部位において機能的に弱っているため振幅が小さくなっている場所を明示的に表示させることが可能となる。
【００９１】
高輝度ライン抽出・生成部３１によって生成されたＭモード画像の３次元的な表示に関する情報は、Ｍモード画像−３次元画像重畳部３２に送られ、３次元重畳画像として生成される（ＳＴ４７）。生成された３次元重畳画像は、図１３に示されるようにＶＭ３Ｄ領域に表示される。
【００９２】
以上の説明から、複数表示されるＭモード画像に関連する部位の位置を操作者が表示画面上３次元的に確実に把握できるように表示させることによって、操作者の使い勝手の向上を図ることのできる表示画像生成装置、この表示画像生成装置を備える超音波画像診断装置及び表示画像生成プログラムを提供することが可能となる。
【００９３】
特に、超音波画像診断装置を利用して行われる診察で有用なＭモード画像を、高輝度に表示される箇所を連結し、１つの時間軸とこの時間軸に互いに直交する２つの軸上に表示させ、あたかも３次元的な表示とすることによって、操作者がより一層簡易に注意箇所を発見することが可能となる。このような表示を行うことで、操作者の使い勝手の向上をさらに図ることができる。
【００９４】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００９５】
１    超音波画像診断装置
１０    表示画像生成装置
１１    受信部
１２    画像生成制御部
１３    位置情報設定部
１４    ２次元画像生成部
１５    ２次元画像−Ｍライン重畳部
１６    Ｍモード画像生成部
１７    ３次元画像生成部
１８    Ｍモード画像−３次元画像重畳部
１９    送信部
３１    高輝度ライン抽出・生成部
３２    Ｍモード画像−３次元画像重畳部
Ｂ，Ｍ，ＭＭ，Ｍ３Ｄ，ＶＭ，ＶＭＭ，ＶＭ３Ｄ  画像表示領域
【図１】
2012143332.tif 000003
【図２】
2012143332.tif 000004
【図３】
2012143332.tif 000005
【図４】
2012143332.tif 000006
【図５】
2012143332.tif 000007
【図６】
2012143332.tif 000008
【図７】
2012143332.tif 000009
【図８】
2012143332.tif 000010
【図９】
2012143332.tif 000011
【図１０】
2012143332.tif 000012
【図１１】
2012143332.tif 000013
【図１２】
2012143332.tif 000014
【図１３】
2012143332.tif 000015