(57)【要約】  超音波画像を収集する際にアーチファクトの検出及び可視化を可能にする方法は、超音波システム内のプロセッサによって実行される。該方法は、超音波探触子から超音波画像データを受信するステップと、超音波画像データ内のアーチファクトを含むエリアを検出するステップと、アーチファクトを含むエリアを複数の利用可能なアーチファクトのクラスのうちの１つに分類するステップと、超音波ベースの画像のアーチファクトを含むエリアの指標を生成するステップであって、指標には、アーチファクトのクラスの名称が含まれる、ステップと、超音波ベースの画像及びアーチファクトを含むエリアの指標を操作者に提示するステップとを含む。
2021506470.tif 000002
【特許請求の範囲】
【請求項１】
超音波探触子と結合されたプロセッサによって、超音波画像データを受信するステップと、
前記プロセッサによって、前記超音波画像データ内でアーチファクトを含むエリアを検出するステップと、
前記プロセッサによって、アーチファクトを含む前記エリアを、複数の利用可能なアーチファクトのクラスのうちの１つに分類するステップと、
前記プロセッサによって、超音波ベースの画像のアーチファクトを含む前記エリアの指標を生成するステップであって、前記指標には、前記アーチファクトのクラスの名称が含まれる、ステップと、
操作者に、前記超音波ベースの画像及びアーチファクトを含む前記エリアの前記指標を提示するステップと
を含む、方法。
【請求項２】
前記超音波画像データには、２次元Ｂモード画像が含まれる、請求項１に記載の方法。
【請求項３】
前記超音波画像データには、Ｃモード画像として編集するための複数のＢモード画像が含まれる、請求項１に記載の方法。
【請求項４】
前記分類するステップは、アーチファクトの分類を実行するために、畳み込みニューラル・ネットワークを使用するステップを含む、請求項１に記載の方法。
【請求項５】
前記複数のアーチファクトのクラスには、恥骨の影クラス、腸内ガスの影クラス、及び不適切な結合クラスが含まれる、請求項１に記載の方法。
【請求項６】
前記プロセッサによって、前記超音波画像内で標的対象物を検出するステップと、
前記プロセッサによって、標的対象物に基づいて、結果を、前記分類するステップと同時に計算するステップと
をさらに含む、請求項１に記載の方法。
【請求項７】
前記分類するステップは、
以前に認識されたアーチファクトの種類を使った訓練画像の画素グループに基づいて、前記アーチファクトのクラスの予め訓練されたモデルを開発するステップ
を含む、請求項１に記載の方法。
【請求項８】
ローカル・メモリ内に、前記予め訓練されたモデルを記憶するステップと、
前記予め訓練されたモデルに基づいて、前記超音波画像データからの画素グループ、及び前記訓練画像からの画素グループのマッチングを行うステップと
をさらに含む、請求項７に記載の方法。
【請求項９】
前記提示するステップは、標的対象物に関する前記超音波画像内の、アーチファクトを含む前記エリアの場所を示す、請求項１に記載の方法。
【請求項１０】
前記標的対象物は、膀胱、大動脈、前立腺、腎臓、血管、又は甲状腺のうちの１つを含む臓器である、請求項９に記載の方法。
【請求項１１】
命令を記憶するメモリ・デバイスと、
プロセッサと
を備えるデバイスであって、前記プロセッサは、
超音波探触子から超音波画像データを受信することと、
前記超音波画像データ内でアーチファクトを含むエリアを検出することと、
アーチファクトを含む前記エリアを、複数の利用可能なアーチファクトのクラスのうちの１つに分類することと、
超音波画像の少なくとも１つのアーチファクトを含む前記エリアの指標を生成することであって、前記指標には、前記アーチファクトのクラスの名称が含まれる、生成することと、
操作者に、前記超音波画像及び少なくとも１つのアーチファクトを含む前記エリアの前記指標を提示することと
を行うよう構成される、デバイス。
【請求項１２】
前記超音波画像データには、２次元Ｂモード画像が含まれる、請求項１１に記載のデバイス。
【請求項１３】
アーチファクトを含む前記エリアを分類するときに、前記プロセッサは、機械学習を適用するようさらに構成される、請求項１１に記載のデバイス。
【請求項１４】
前記複数のアーチファクトのクラスには、恥骨の影クラス、腸内ガスの影クラス、及び不適切な結合クラスが含まれる、請求項１１に記載のデバイス。
【請求項１５】
前記プロセッサは、
前記超音波画像内で標的対象物の指標を生成し、
前記標的対象物の前記指標に基づく結果を、前記分類することと並行して計算する
ようさらに構成される、請求項１１に記載のデバイス。
【請求項１６】
前記プロセッサは、
前記超音波画像内で標的対象物の指標を生成し、
前記標的対象物の前記指標に基づく結果を、前記提示することの後に計算する
ようさらに構成される、請求項１１に記載のデバイス。
【請求項１７】
アーチファクトを含む前記エリアを分類するときに、前記プロセッサは、
前記メモリ・デバイスに、以前に認識されたアーチファクトの種類を使った訓練画像の画素グループに基づく、前記利用可能なアーチファクトのクラスの予め訓練されたモデルを記憶し、
前記予め訓練されたモデルに基づいて、前記超音波画像データからの画素グループと、前記訓練画像からの画素グループとのマッチングを行う
ようさらに構成される、請求項１１に記載のデバイス。
【請求項１８】
少なくとも１つのプロセッサによって実行可能な命令を格納する非一時的コンピュータ可読媒体であって、前記コンピュータ可読媒体は、
超音波探触子から超音波画像データを受信することと、
前記超音波画像データ内でアーチファクトを含むエリアを検出することと、
少なくとも１つのアーチファクトを含む前記エリアを、複数の利用可能なアーチファクトのクラスのうちの１つに分類することと、
超音波画像の少なくとも１つのアーチファクトを含む前記エリアの指標を生成することであって、前記指標には、前記アーチファクトのクラスの名称が含まれる、生成することと、
操作者に、前記超音波画像及び少なくとも１つのアーチファクトを含む前記エリアの前記指標を提示することと
を行うための１つ又は複数の命令を有する、非一時的コンピュータ可読媒体。
【請求項１９】
分類するための前記命令は、
メモリに、以前に認識されたアーチファクトの種類を使った訓練画像の画素グループに基づく、前記利用可能なアーチファクトのクラスの予め訓練されたモデルを記憶する
ための１つ又は複数の命令をさらに有し、前記利用可能なアーチファクトのクラスには、恥骨の影クラス、腸内ガスの影クラス、及び不適切な結合クラスが含まれる、請求項１８に記載の非一時的コンピュータ可読媒体。
【請求項２０】
アーチファクトを含む前記エリアを分類するための前記命令は、
ニューラル・ネットワークを適用して、前記超音波画像の特徴を抽出し、アーチファクトの分類に向けた、前記予め訓練されたモデルとのマッチングを行う
ための１つ又は複数の命令をさらに有する、請求項１９に記載の非一時的コンピュータ可読媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、超音波システムのためのエコー窓のアーチファクト分類及び視覚的インジケータに関する。
【背景技術】
【０００２】
超音波スキャナは、通常、標的臓器又は体内の別の構造体を識別し、且つ／又は構造体のサイズ又は臓器内の流体の容積など、標的臓器／構造体に関連する特徴を判断するために使用される。経験豊富な操作者でさえも、適切な品質の超音波画像を取得することは困難な場合がある。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
人間の対象者に対して超音波画像技術を使用すると、操作者はしばしば、恥骨、不十分なゲル、腸内ガスなど、様々な発生源からの好ましからざる画像アーチファクトを見つける。こうしたアーチファクトは、正確な臓器測定及び対応する臨床的判断を行うために必要な重要な情報を隠す可能性がある。経験豊富な操作者は、遮断している骨を回避するために探触子を動かす又はより多くのゲルを塗布するなど、好ましからざるアーチファクトを回避するための調整を行うことができる場合がある。しかし、ほとんどの操作者にとって、エラーの種類の自動表示は、操作者が、より迅速且つ効果的に正しい調整を行い、標的臓器のより良い画像を得るのに役立ち得る。
【図面の簡単な説明】
【０００４】
【図１】本明細書で説明するシステム及び方法が実施され得る、走査システムの概略図である。
【図２】例示的な実施態様による、図１のシステムに実装された機能論理構成要素の構成図である。
【図３Ａ】図１の超音波探触子の例示的なＢモード走査面を示す、概略図である。
【図３Ｂ】図１の超音波探触子の例示的なＢモード走査面を示す、概略図である。
【図３Ｃ】図１の超音波探触子の例示的なＣモード走査面を示す、概略図である。
【図４Ａ】図２のデータ取得ユニットで生成され得る、サンプルのＢモード画像の図である。
【図４Ｂ】図２のデータ取得ユニットで生成され得る、サンプルのＢモード画像の図である。
【図５Ａ】図２のデータ取得ユニットで生成され得る、サンプルのＣモード画像の図である。
【図５Ｂ】図２のデータ取得ユニットで生成され得る、サンプルのＣモード画像の図である。
【図６Ａ】図４ＡのＢモード画像に加えられた、サンプルの可視化物（ｖｉｓｕａｌｉｚａｔｉｏｎｓ）の図である。
【図６Ｂ】図４ＢのＢモード画像に加えられた、サンプルの可視化物の図である。
【図７Ａ】図５ＡのＣモード画像に加えられたサンプルの可視化物の図である。
【図７Ｂ】図５ＢのＣモード画像に加えられたサンプルの可視化物の図である。
【図８】図１の走査システム内での、機能論理構成要素間の通信を示す構成図である。
【図９】図１及び図２の走査システム内で、エコー窓のアーチファクトを分類し、視覚的インジケータを生成するための、例示的な通信の構成図である。
【図１０】図１及び図２の走査システム内で、エコー窓のアーチファクトを分類し、視覚的インジケータを生成するための、別の実施例による例示的な通信の構成図である。
【図１１】超音波画像を収集する間に、アーチファクトの検出及び可視化を可能にするプロセスの流れ図である。
【図１２】図１のシステムの基本ユニットの例示的な構成要素を示す概略図である。
【発明を実施するための形態】
【０００５】
添付図面を参照して、以下に詳細に説明する。相異なる図面での同じ参照番号により、同じ又は類似の要素を特定することができる。
【０００６】
本明細書で説明する実施態様は、機械学習を利用して、Ｂモード超音波エコーからのアーチファクト情報を超音波撮像システム内で単純な視覚的指標に分類し、より適切に狙いをつけ、より正確な定量分析を可能にすることを支援する。一実例によれば、畳み込みニューラル・ネットワークを使用して、Ｂモード画像内の相異なる発生源からの影に対応する確率マップを生成できる。次いで、マップから単純な視覚的指標を作成でき、より優れた画質及びより高い測定精度を実現するために、操作者が調整を行う。
【０００７】
一実施態様では、超音波画像を収集する際にアーチファクトの検出及び可視化を可能にする方法が、超音波システム内のプロセッサによって実行され得る。該方法は、超音波探触子から超音波画像データを受信するステップと、超音波画像データ内のアーチファクトを含むエリアを検出するステップと、アーチファクトを含むエリアを利用可能なアーチファクトのクラスのグループから選択されたクラスに分類するステップと、超音波ベースの画像のアーチファクトを含むエリアの指標を生成するステップであって、指標には選択したクラスの名称が含まれる、ステップと、超音波ベースの画像及びアーチファクトを含むエリアの指標を操作者に提示するステップとを含み得る。本明細書でさらに説明するように、超音波ベースの画像には、一般に、Ｂモード画像、Ｃモード画像、又は超音波データから導出された別の種類の画像が含まれ得る。
【０００８】
図１は、本明細書で説明するシステム及び方法が実施され得る、走査システム１００の概略図である。図１を参照すると、走査システム１００は、探触子１１０、基本ユニット１２０、及びケーブル１３０を備える。
【０００９】
探触子１１０は、ハンドル部分、トリガ、及びノーズ（又はドーム）部分を備える。医療従事者は、ハンドルを使って探触子１１０を保持し、トリガ１１２を押して、ノーズ部分に位置する１つ又は複数の超音波トランシーバをアクティブ化し、臓器（たとえば膀胱、大動脈、腎臓など）又は非臓器構造体（たとえばカテーテル、針、又は別の医用デバイス）が含まれ得る、関心のある標的対象物に向けて超音波信号を送信することができる。たとえば、図１に示すように、探触子１１０は、患者１５０の骨盤エリア、及びこの実例では患者の膀胱である、関心のある標的対象物１５２の上に位置している。
【００１０】
探触子１１０のドームは、通常、解剖学的部分に適切な音響インピーダンス整合をもたらし、且つ／又は超音波エネルギーが解剖学的部分に投射されるときに正確に集束することを可能にする材料で形成される。たとえば、図１のエリア１５４に示している音響ジェル又はジェル・パッドを患者の皮膚の関心領域（ＲＯＩ：ｒｅｇｉｏｎ  ｏｆ  ｉｎｔｅｒｅｓｔ）上に塗布し、ドームを皮膚に当てたときに音響インピーダンスを整合させることができる。
【００１１】
探触子１１０は、ドームから外向きに超音波エネルギーを送信し、解剖学的部分内の内部構造体／組織で生成された音響反射、すなわちエコーを受信する、ドーム内の１つ又は複数の超音波トランシーバ要素及び１つ又は複数のトランスデューサ要素を備える。たとえば、１つ又は複数の超音波トランスデューサ要素は、トランシーバ要素による超音波信号の送信に対して相異なるスキャン方向を可能にするために、モータによってドーム内を動くことができる、圧電素子の１次元又は２次元アレイを備えることができる。別法として、トランスデューサ要素は、選択された解剖学的領域が、アレイ内の素子に選択的にエネルギーを与えることによって走査できるように、探触子１１０に対して固定であってもよい。
【００１２】
探触子１１０は、ケーブル１３０を介するなど、有線接続を介して、基本ユニット１２０と通信できる。他の実施態様では、探触子１１０は、無線接続（たとえば、Ｂｌｕｅｔｏｏｔｈ、Ｗｉ−Ｆｉなど）を介して、基本ユニット１２０と通信できる。いずれの場合も、基本ユニット１２０は、操作者が超音波スキャンからの処理結果を見ることを可能にし、且つ／又は探触子１１０を操作中の操作者に対して、操作上の対話を可能にするディスプレイ１２２を備える。たとえば、ディスプレイ１２２は、液晶ディスプレイ（ＬＣＤ：ｌｉｑｕｉｄ  ｃｒｙｓｔａｌ  ｄｉｓｐｌａｙ）、発光ダイオード（ＬＥＤ：ｌｉｇｈｔ  ｅｍｉｔｔｉｎｇ  ｄｉｏｄｅ）ベースのディスプレイ、又は操作者にテキスト及び／若しくは画像データを提示する他の種類のディスプレイなどの、出力ディスプレイ／画面を備えることができる。たとえば、ディスプレイ１２２は、超音波スキャンの品質／精度を判断する助けとなるように、Ｂモード画像上に重ね合わされる、アーチファクトの可視化物を提示できる。ディスプレイ１２２はまた、選択された解剖学的領域の２次元又は３次元画像を表示できる。
【００１３】
患者の選択された解剖学的部分を走査するために、探触子１１０のドームは、図１に示すように、走査されるべき解剖学的部分に最も近い患者１５０の表面部分に接して配置され得る。操作者は、トランシーバ要素及びトランスデューサ要素を作動させ、トランシーバに、超音波信号を体内に送信させ、選択された解剖学的部分の超音波画像を生成するために、トランシーバで少なくとも部分的に処理され得る、対応する戻りのエコー信号を受信させる。特定の実施例では、トランシーバは、約２メガヘルツ（ＭＨｚ）から約１０ＭＨｚ以上に及ぶ範囲の中心周波数を有する超音波信号を送信する。
【００１４】
一実施例では、探触子１１０は、所定の周波数及び／又はパルス繰返し速度で超音波エネルギーを生成し、超音波エネルギーをトランシーバに移送するよう構成された基本ユニット１２０に結合され得る。基本ユニット１２０は、走査された解剖学的領域の画像を生成するために、トランシーバによって受信された、反射された超音波エネルギーを処理するよう構成された、１つ又は複数のプロセッサ又は処理ロジックも備える。
【００１５】
さらに別の特定の実施例では、探触子１１０は、探触子１１０内に構成された１つ又は複数のマイクロプロセッサ又は処理ロジックと、トランシーバ要素及びトランスデューサ要素を動作可能に制御し、超音波画像を生成するために反射された超音波エネルギーを処理する、マイクロプロセッサに関連するソフトウェアとを有する、自己完結型デバイスであり得る。したがって、探触子１１０のディスプレイを使用して、生成された画像を表示し、且つ／又はアーチファクトの可視化物及びトランシーバの動作に関連する他の情報を見ることができる。他の実施態様では、トランシーバは、トランシーバ要素及びトランスデューサ要素の動作を少なくとも部分的に制御するソフトウェアを有し、また、走査された解剖学的領域の画像が生成され得るように、トランシーバから転送された情報を処理するソフトウェアを有する、ラップトップ又はデスクトップ・コンピュータなどの汎用コンピュータに結合され得る。
【００１６】
図２は、例示的な実施態様によるシステム１００に実装された機能論理構成要素の構成図である。図２を参照すると、システム１００は、データ取得ユニット２１０と、アーチファクト識別ユニット２２０と、視覚的指標生成器２３０と、主処理ロジック２４０とを備える。例示的な実施態様では、データ取得ユニット２１０は、探触子１１０の一部であってもよく、他の機能ユニット（たとえば、アーチファクト識別ユニット２２０、視覚的指標生成器２３０、及び主処理ロジック２４０）は、基本ユニット１２０に実装されてもよい。別法として、データ取得ユニット２１０、アーチファクト識別ユニット２２０、視覚的指標生成器２３０、及び主処理ロジック２４０は、探触子１１０に実装されてもよい。他の実施態様では、特定のユニット及び／又はロジックは、探触子１１０及び基本ユニット１２０の両方に対して外部に位置するコンピューティング・デバイス又はサーバ（たとえば、インターネットへの無線接続又は病院内の構内ネットワークなどを介してアクセス可能な）によるなど、他のデバイスによって実装されてもよい。たとえば、探触子１１０は、たとえば無線接続（たとえば、Ｗｉ−Ｆｉ又は他の何らかの無線プロトコル／技術）を介して、エコー・データ及び／又は画像データを、探触子１１０及び基本ユニット１２０から遠隔に位置する処理システムに送信できる。
【００１７】
上記のように、探触子１１０は、超音波信号を生成し、送信された信号からのエコーを受信し、受信されたエコーに基づいて画像データを生成するトランシーバを備えることができる。データ取得ユニット２１０は、たとえば、復調、間引き、ログ圧縮、及びフィルタ処理サブモジュールを備え、人間が見えるように提示され得る画像を生成することができる。回転トランスデューサ又はトランスデューサ・アレイは、探触子１１０と共に、複数のスキャン面に沿って走査できる。
【００１８】
図３Ａ及び図３Ｂは、超音波画像を取り込むために探触子１１０が使用できる、スキャン面３１０（たとえば、面３１０−１、３１０−２、及び３１０−３）及び３１５（たとえば、面３１５−１、３１５−２、３１５−３など）の簡略図を提示する。データ取得ユニット２１０は、１つ又は複数のスキャン面３１０又は３１５からの画像データを使用して、図４Ａ及び図４Ｂにそれぞれ示すＢモード画像４１０及び４２０などの、２次元Ｂモード画像を生成できる。図３Ａ及び図３Ｂにはそれぞれ、３つのスキャン面３１０及び１０のスキャン面３１５を示しているが、実際には、より多くのスキャン面を使用して、標的対象物の包括的な画像を編集する。たとえば、数十のスキャン面が数個の探触子１１０で使用され得る。例示的な実施態様では、データ取得ユニット２１０は、患者１５０の関心領域に対応する複数のスキャン面に関連するデータを取得する。
【００１９】
図３Ｃは、Ｃモード画像面３２０の簡略図を提示する。Ｃモード画像には、一般に、たとえば、一般的なＢモードスキャン面３１０に垂直に向けられた画像が含まれ得る。一実施態様では、Ｃモード画像には、平面３２０−１で示すように、特定の深さでのスキャン面３１０又は３１５の超音波データから生成される断面画像が含まれ得る。したがって、データ取得ユニット２１０は、スキャン面３１０又は３１５のそれぞれにおける特定の深度からの画像データを使用して、Ｃモード画像を生成できる。別の実施態様では、Ｃモード画像には、面３２０−２で示すように、Ｚ軸が深度を表す「ＸＹ」平面上への３Ｄ超音波データの「陰影像」又は「投影図」が含まれ得る。Ｃモード画像は、超音波画像又は漫画的なグラフィックとして表示され得る。Ｃモード画像５１０及び５２０の簡略図を、それぞれ図５Ａ及び図５Ｂに示す。
【００２０】
再び図２を参照すると、アーチファクト識別ユニット２２０は、Ｂモード画像、Ｃモード画像、又は別の種類の超音波画像であり得る、画像の前処理を実行し、超音波アーチファクト（たとえば、影、空気／不十分な結合、腸内ガス、及び他の種類の妨害による、偽陽性エコー又は偽陰性エコー）がエコー窓内に存在するかどうかをリアルタイムで検出できる。たとえば、アーチファクト識別ユニット２２０は、データ取得ユニット２１０から入力画像（たとえば、画像４１０、４２０、５１０、５２０などのいずれでも）を受信し、超音波アーチファクトを示すエコー窓内の特徴を検出できる。本明細書でさらに説明するように、アーチファクト識別ユニット２２０は、複数クラスへのアーチファクト分類化アルゴリズムを使用して、Ｂモード画像データ、Ｃモード画像データ、又は他の種類の画像データを分析し、影、ガス、空気境界面など、１種又は複数種類のアーチファクトを認識できる。
【００２１】
たとえば、図４Ａを参照すると、アーチファクト識別ユニット２２０は、膀胱４１６を標的とするＢモード画像４１０内の空気スキャン（ａｉｒ  ｓｃａｎ）・エリア４１２及び恥骨の影４１４を検出できる。別の実例として、図４Ｂを参照すると、アーチファクト識別ユニット２２０は、大動脈４２４を標的とするＢモード画像４２０内の腸内ガスのエリア４２２を検出できる。図５Ａを参照すると、Ｃモード画像は、Ｂモード画像を編集することによって生成される。アーチファクト識別ユニット２２０は、膀胱５１６を標的とするＣモード画像５１０内で、空気スキャン・エリア５１２及び恥骨の影５１４を同様に検出できる（通常、空気スキャン・エリア５１２及び恥骨の影５１４は、従来のＣモード画像内で示すことはできないが）。図５Ｂを参照すると、アーチファクト識別ユニット２２０は、大動脈５２６を標的とするＣモード画像５２０内の腸内ガスのエリア５２２及び空気スキャン・エリア５２４を検出できる。経験豊富な操作者は、空気スキャン・エリア４１２、恥骨の影４１４、腸内ガス４２２などのアーチファクトを識別できるが、アーチファクトを自動的にリアルタイムで検出及び可視化すること（又は視覚的に強化すること）により、探触子１１０の狙いづけが簡素化され、経験豊富な操作者と経験のない操作者との両方にとって確実に、精度がより向上し得る。Ｂモード画像でのこうしたアーチファクトの検出及び除去により、より正確なＣモード画像も提供され得る。アーチファクト識別ユニット２２０については、たとえば、図９と共にさらに説明する。
【００２２】
図２に戻ると、視覚的指標生成器２３０は、アーチファクト識別ユニット２２０によって検出されたアーチファクトに対して、画像上のオーバレイなどの視覚的指標を与えることができる。たとえば、アーチファクト識別ユニット２２０によって検出されたアーチファクトの種類に基づいて、視覚的指標生成器２３０は、アーチファクト・エリアの強調表示又は輪郭線を提供できる。図６Ａ〜図７Ｂは、視覚的指標生成器２３０によって生成され得るサンプル出力の実例を提示する。図６Ａ及び図６Ｂはそれぞれ、Ｂモード画像４１０及び４２０に加えられた可視化物を示す。図７Ａ及び図７Ｂはそれぞれ、Ｃモード画像５１０及び５２０に加えられた可視化物を示す。
【００２３】
図６Ａを参照すると、視覚的指標生成器２３０は、膀胱のスキャン出力６１０を提供できる。出力６１０には、Ｂモード画像４１０、空気アーチファクト識別子６１２、影アーチファクト識別子６１４、及び臓器の輪郭線６１６が含まれ得る。Ｂモード画像４１０は、図３Ａ又は図３Ｂのスキャン面３１０又は３１５のうちの一方からのエコー・データに対応し得る。空気アーチファクト識別子６１２は、（たとえば、アーチファクト識別ユニット２２０で検出される）空気スキャン・エリア４１２を強調表示する輪郭線、対照的なエリア、又は別の可視インジケータであり得る。影アーチファクト識別子６１４は、恥骨の影４１４を強調表示する別の輪郭線、対照的なエリア、又は異なる可視インジケータであり得る。臓器の輪郭線６１６は、膀胱４１６の推定される形状と一致することができ、別の輪郭線又は可視インジケータが含まれ得る。一実施態様では、空気アーチファクト識別子６１２及び影アーチファクト識別子６１４は、アーチファクトのそれぞれの種類（たとえば、空気及び影）を示すように色分けされ得る。別の実施態様では、アーチファクト識別子（空気アーチファクト識別子６１２、影アーチファクト識別子６１４、及び本明細書で説明する他のアーチファクト識別子を含む）は、操作者への可視又は可聴テキストでの教示によって補足されてもよい。たとえば、出力６１０に、色又はアーチファクトのマークづけを説明する別個の凡例が加わってもよい。
【００２４】
図６Ａに示すように、Ｂモード画像４１０のエコー窓は、恥骨（たとえば、不適切な狙いによる）及び空気（たとえば、不十分な結合による）によって部分的に遮断される。具体的には、膀胱４１６は、恥骨の影４１４によって部分的に閉塞されており、これは、臓器の輪郭線６１６によって示すように、膀胱４１６の推定される形状が不正確な場合があることを意味する。出力６１０のインジケータ６１２、６１４、及び６１６は、複雑な処理での発見的手法又は遅延なしに、アーチファクト（たとえば、空気スキャン・エリア４１２及び恥骨の影４１４）がどのように所望の標的（たとえば、膀胱４１６）測定に影響を与える可能性があるかの、明確な視覚的指標を提供する。したがって、インジケータ６１２、６１４、及び６１６は、正確な膀胱のスキャンを得るために探触子１１０の調整が必要であるという、リアルタイムでの情報を操作者に提供できる。
【００２５】
図６Ｂを参照すると、視覚的指標生成器２３０は、大動脈のスキャンの出力６２０を提供できる。出力６２０には、Ｂモード画像４２０、ガス・アーチファクト識別子６２２、及び臓器の輪郭線６２４が含まれ得る。Ｂモード画像４２０は、図３Ａのスキャン面３１０又は図３Ｂのスキャン面３１５のうちの一方からのエコー・データに対応し得る。ガス・アーチファクト識別子６２２は、（たとえば、アーチファクト識別ユニット２２０で検出される）腸内ガスのエリア４２２を強調表示する輪郭線、対照的なエリア、又は別の可視インジケータであり得る。臓器の輪郭線６２４は、大動脈４２４の推定される形状と一致することができ、別の輪郭線又はインジケータが含まれ得る。上記のアーチファクト識別子６１２及び６１４と同様に、ガス・アーチファクト識別子６２２は、色分けされ、且つ／又は説明的なテキストで補足されてもよい。
【００２６】
図６Ｂに示すように、Ｂモード画像４２０のエコー窓は、腸内ガスにより部分的に遮断されている。しかし、大動脈４２４は、障害物がなく完全に可視である。出力６２０のインジケータ６２２及び６２４は、複雑な処理での発見的手法又は遅延を必要とせずに、アーチファクト（たとえば、腸内ガスのエリア４２２）が所望の標的（たとえば、大動脈４２４）測定に影響を与えていないという明確な視覚的指標を提供する。したがって、インジケータ６２２及び６２４は、正確なスキャンを得るための探触子１１０の調整は不要であるという、リアルタイムでの情報を操作者に提供できる。
【００２７】
図７Ａを参照すると、視覚的指標生成器２３０は、膀胱のスキャンの出力７１０を提供できる。出力７１０には、Ｃモード画像５１０、空気アーチファクト識別子７１２、影アーチファクト識別子７１４、及び臓器の輪郭線７１６が含まれ得る。Ｃモード画像５１０は、図３ＣのＣモード画像面３２０からのエコー・データに対応し得る。空気アーチファクト識別子７１２は、（たとえば、アーチファクト識別ユニット２２０で検出される）空気スキャン・エリア５１２を強調表示する輪郭線、対照的な色、又は別の可視インジケータであり得る。影アーチファクト識別子７１４は、恥骨の影５１４を強調表示する別の輪郭線、対照的な色、又は異なる可視インジケータであり得る。臓器の輪郭線７１６は、膀胱５１６の推定される形状と一致することができ、別の輪郭線、色、又はインジケータが含まれ得る。一実施態様では、空気アーチファクト識別子７１２及び影アーチファクト識別子７１４は、アーチファクトのそれぞれの種類（たとえば、空気、影など）を示すように色分けされ得る。別の実施態様では、アーチファクト識別子（空気アーチファクト識別子７１２、影アーチファクト識別子７１４、及び本明細書で説明する他のアーチファクト識別子を含む）は、操作者への可視又は可聴テキストでの教示によって補足されてもよい。
【００２８】
図７Ａに示すように、一般にＣモード画像５１０のエコー窓、及び具体的には標的の膀胱５１６は、恥骨の影（たとえば、不適切な狙いによる）及び空気（たとえば、不十分な探触子と皮膚との結合による）によって部分的に遮断される。出力７１０のインジケータ７１２、７１４、及び７１６は、アーチファクトがどのように所望の標的測定（たとえば、膀胱の体積又はサイズ測定）を妨げるかの、明確な視覚的指標を提供する。したがって、インジケータ７１２、７１４、及び７１６は、正確な膀胱のスキャンを得るために探触子１１０の調整が必要であるという、リアルタイムでの情報を操作者に提供できる。
【００２９】
図７Ｂを参照すると、視覚的指標生成器２３０は、大動脈のスキャンの出力７２０を提供できる。出力７２０には、Ｃモード画像５２０、ガス・アーチファクト識別子７２２、空気アーチファクト識別子７２４、及び臓器の輪郭線７２６が含まれ得る。Ｃモード画像５１０は、図３ＣのＣモード画像面３２０からのエコー・データに対応し得る。ガス・アーチファクト識別子７２２は、（たとえば、アーチファクト識別ユニット２２０で検出される）腸内ガスのエリア５２２を強調表示する輪郭線、対照的なエリア、又は別の可視インジケータであり得る。空気アーチファクト識別子７２４は、（たとえば、アーチファクト識別ユニット２２０で検出される）空気スキャン・エリア５２４を強調表示する輪郭線、対照的な色、又は別の可視インジケータであり得る。臓器の輪郭線７２６は、大動脈５２６の推定される形状と一致することができ、別の輪郭線又はインジケータが含まれ得る。上記の他のアーチファクト識別子と同様に、ガス・アーチファクト識別子７２２は、色分けされ、且つ／又は説明的なテキスト（たとえば、空気に対して「Ａ」、ガスに対して「Ｇ」、影に対して「Ｓ」、単語「空気」、「ガス」、「影」など）で補足されてもよい。
【００３０】
図７Ｂに示すように、Ｃモード画像５２０のエコー窓の一部分は、空気スキャン及び腸内ガスにより遮断されている。しかし、大動脈５２６は、障害物がなく可視である。出力７２０のインジケータ７２２、７２４及び７２６は、複雑な処理での発見的手法又は関連する遅延を必要とせずに、アーチファクト（たとえば、腸内ガスのエリア５２２及び空気スキャン・エリア５２４）が所望の標的（たとえば、大動脈５２６）測定に影響を与えていないという明確な視覚的指標を提供する。したがって、インジケータ７２２、７２４及び７２６は、正確なスキャンを得るための探触子１１０の調整は不要であるという、リアルタイムでの情報を操作者に提供できる。
【００３１】
一方、図６Ａ〜図７Ｂは、膀胱及び大動脈のＢモードのスキャン及びＣモードのスキャンの視覚的アーチファクト・インジケータの実例を提示する。他の実施態様では、視覚的指標生成器２３０は、他のスキャン・モードでのアーチファクト及び／又は他の標的対象物の視覚的インジケータを、出力に提供できる。
【００３２】
再び図２を参照すると、主処理ロジック２４０は、データ取得ユニット２１０で取得されたＢモード、Ｃモード、又は他の種類の画像を使って、腔の種類認識、体積推定、直径若しくはサイズ推定、又は他の臨床的に有用な情報など、標的対象物（たとえば、膀胱４１６、大動脈４２４など）の付加的な分析を提供できる。たとえば、主処理ロジック２４０は、腔を膀胱として識別し、膀胱の体積を推定するか、又は大動脈の直径を確認できる。
【００３３】
図１及び図２に示す例示的な構成は、話を簡単にするために提供している。システム１００は、図１及び図２に示すより多い又は少ない論理ユニット／デバイスを備えてもよい。たとえば、システム１００は、複数のデータ取得ユニット２１０、及び受信したデータを処理する複数の処理ユニットを備えてもよい。加えて、システム１００は、外部ネットワークを介して情報を送受信し、超音波信号を分析して関心のある標的対象物を識別するのを補助する通信インタフェース（たとえば、無線周波数トランシーバ）などの、追加の要素を備えてもよい。さらに、本明細書の説明図及び記述は、主に膀胱及び大動脈への適用に言及しているが、他の実施例は、前立腺／腎臓の境界、他の血管、甲状腺などの他の臓器の壁境界検出に適用できる。
【００３４】
図８は、走査システム１００内の機能論理構成要素間の通信を示す構成図である。図８に示すように、Ｂモード画像８１０（たとえば、データ取得ユニット２１０から）は、アーチファクト識別ユニット２２０で受信され得る。アーチファクト識別ユニット２２０は、各Ｂモード画像８１０内の画素及び／又は画素グループの特徴を検出して、アーチファクトの分類を可能にすることができる。
【００３５】
アーチファクト識別ユニット２２０は、Ｂモード画像８１０のアーチファクト部分（たとえば、画素）を、訓練データからの基準に基づいて１つ又は複数のクラスに関連づけることができる。一実施態様では、アーチファクト識別ユニット２２０は、予め訓練された深層畳み込みニューラル・ネットワーク（ＤＣＮＮ：ｄｅｅｐ  ｃｏｎｖｏｌｕｔｉｏｎａｌ  ｎｅｕｒａｌ  ｎｅｔｗｏｒｋ）を適用することができる。ＤＣＮＮ又は他の画像分類アルゴリズムは、迅速な画像分類を提供するために、フィールドプログラマブル・ゲート・アレイ（ＦＰＧＡ：ｆｉｅｌｄ−ｐｒｏｇｒａｍｍａｂｌｅ  ｇａｔｅ  ａｒｒａｙ）、特定用途向け集積回路（ＡＳＩＣ：ａｐｐｌｉｃａｔｉｏｎ  ｓｐｅｃｉｆｉｃ  ｉｎｔｅｇｒａｔｅｄ  ｃｉｒｃｕｉｔ）などのハードウェアで実現される回路の使用に最適であり得る。各種アーチファクトは、検出され得る超音波画像内で、確率マッチングを使用して、結果として相異なる種類の画素グループになることがある。一実例によれば、アーチファクト識別ユニット２２０は、Ｂモード画像内の相異なる種類の影（たとえば、恥骨による暗い影対腸内ガスによるより明るい影）及び他のアーチファクト（不十分な探触子と皮膚との結合による残響）に対応する確率マップを有することができる。一実施態様では、アーチファクトの輪郭（ｄｅｆｉｎｉｔｉｏｎ）は、機械学習システムによってオフラインで生成され、アーチファクト識別ユニット２２０に記憶できる。別の実施態様では、アーチファクト識別ユニット２２０は、動的学習機能を有することができ、ここで実際に処理された画像及び可視化物（たとえば、可視化物６１２、７１２など）に対するユーザの反応を使用して、アーチファクト識別ユニット２２０を改善できる。
【００３６】
図８の実例では、アーチファクト識別ユニット２２０は、恥骨による影８２０、腸内ガスによる影８２２、不適切な結合によるアーチファクト８２４、及び他の発生源からのアーチファクト８２６の、４つの相異なるクラスを使用できる。恥骨による影８２０、腸内ガスによる影８２２、不適切な結合によるアーチファクト８２４は、Ｂモード画像の画素グループから検出可能な、主要な既知のアーチファクトのクラスを示すことができる。他の発生源によるアーチファクト８２６には、任意の未確認のアーチファクト、或いはカテーテル若しくは針の影のクラス、肋骨の影のクラス、又は走査画像の品質及び関連する定量分析の精度に影響を与える他のクラスなどの、主要な既知のアーチファクトのクラスにない他の種類の既知のアーチファクトが含まれ得る。一実施態様では、他の発生源によるアーチファクト８２６は、カテーテル又は針の影のクラス、肋骨の影のクラス、及び未知のクラスに対する別個のグループなど、複数のクラス又はサブクラスに分離することができる。場合によっては、画素は、複数のクラスの下に分類されることがある。アーチファクト識別ユニット２２０は、訓練データセット内の超音波画像の量が各カテゴリに対応する限り、出力する任意の数のカテゴリに対応できる。ただし、カテゴリの総数が増えると、２つのカテゴリ間の分類距離（たとえば画像の特徴空間に関して）が減少する可能性があり、正しい分類が困難になり、人間の操作者に混乱が生じる可能性がある。一実施態様では、アーチファクト識別ユニット２２０は、６つ以下のカテゴリを使用できる。
【００３７】
図８に示す特定のアーチファクトのクラス８２０、８２２、８２４、及び８２６は、膀胱のスキャンの実施など、特定の超音波用途に適し得る。他の実施態様では、アーチファクト識別ユニット２２０において、相異なる種類又は数のアーチファクトのクラスを使用できる。たとえば、腹部大動脈瘤（ＡＡＡ：ａｂｄｏｍｉｎａｌ  ａｏｒｔｉｃ  ａｎｅｕｒｙｓｍ）のスキャンでは、不適切な結合によるアーチファクト及び腸内ガスの影が、他のアーチファクトについての未定義（又は「他の発生源」）クラスと共に主要なクラスになり得る。逆に、新しい種類の人間の心臓のスキャンでは、肋骨による影及び医用デバイスによる影が、２つの主要なアーチファクト分類になり得る（たとえば「他の発生源」クラス内に一緒にグループ化されるのではなく）。
【００３８】
アーチファクト識別ユニット２２０は、分類された画素の場所及びクラスを視覚的指標生成器２３０に転送できる。視覚的指標生成器２３０は、アーチファクト画素の場所及びクラスに対応するオーバレイを生成できる。Ｂモード可視化物ユニット８３０は、直接Ｂモード画像に可視化物（たとえば、空気アーチファクト識別子６１２、ガス・アーチファクト識別子６２２など）を加えることができる。Ｃモード画像の場合、Ｃモード可視化物ユニット８４０が、他のＢモード・データと共にＢモード可視化物の場所を受信して編集し、Ｃモード可視化物（たとえば、空気アーチファクト識別子７１２、ガス・アーチファクト識別子７２２など）を生成できる。３次元レンダリングなどの他の種類の画像の場合、他の可視化物ユニット８５０は、他の画像データと共にＢモード可視化物の場所を受信して編集し、他の種類の超音波画像を生成できる。
【００３９】
図９は、走査システム１００内の、リアルタイムでアーチファクト可視化物を生成する、例示的な通信の構成図である。操作者９００は、超音波探触子１１０を使用して、リアルタイムで標的とする解剖学的領域からデータを取得できる。たとえば、操作者９００は、探触子１１０を制御して、関心のある臓器（たとえば、図１の臓器１５２）に向けて探触子１１０のノーズを配置し９０５、超音波信号を放射できる。
【００４０】
データ取得ユニット２１０は、エコー・データを受信し、エコー・データを処理して、たとえば、２次元Ｂモード画像９１０を生成できる。データ取得ユニット２１０は、Ｂモード画像９１０をアーチファクト識別ユニット２２０に転送できる。
【００４１】
アーチファクト識別ユニット２２０は、たとえば、画像９１０の相異なるエリア（たとえば画素）を、空気スキャン・エリア４１２、恥骨の影４１４などの、複数の相異なるアーチファクトのカテゴリのうちの１つ又は複数に分類する、複数クラスへのアーチファクト分類化アルゴリズムを使用して、画像９１０を分析できる。一実施態様によれば、画像９１０の画素は、２つの別個のカテゴリに同時に含まれ得る。たとえば、アーチファクト識別ユニット２２０は、画像９１０内のいくつかの画素を、暗い影と残響との両方を有するものとして識別できる。アーチファクト識別ユニット２２０は、画像９１０の画素のカテゴリ関連づけ９１５を視覚的指標生成器２３０に転送できる。
【００４２】
視覚的指標生成器２３０は、カテゴリ関連づけ９１５を受信し、カテゴリ関連づけ９１５に基づいてアーチファクト可視化物を生成できる。一実施態様によれば、視覚的指標生成器２３０は、カテゴリ関連づけ９１５を、表を使用して、特定の色、指標、及び／又はテキストの参考文と照合できる。
【００４３】
視覚的指標生成器２３０は、画像９１０内の画素のカテゴリに対応する適切な可視化物／テキストを選択し、操作者９００に対して表示するために、拡張された画像９２０（たとえば、出力６１０、６２０など）をディスプレイ１２２に提出できる。アーチファクト可視化物（たとえば、ガス・アーチファクト識別子６２２など）は、画面（たとえば、ディスプレイ１２２）上に表示され、且つ任意選択でスピーカを使って音声で出力され、操作者にリアルタイムでのフィードバックと、最高品質のデータ及び体積又はサイズの測定値など、その後の正確な計算結果を操作者が取得するのを支援する教示とを提供できる。
【００４４】
アーチファクト識別ユニット２２０は、個々のＢモード画像（たとえば、２次元画像）を分析するので、視覚的指標生成器２３０からの拡張された画像９２０は、リアルタイム（たとえば、０．５秒未満の遅延）で提示され得る（ディスプレイ１２２を介して）。Ｂモードの可視化物から生成されるＣモード画像のアーチファクト可視化物も同様に、大幅な遅延なしに提示できる。
【００４５】
操作者９００は、ディスプレイ１２２から、拡張された画像９２０を見つける９２５ことができる。拡張された画像９２０が、ユーザに探触子１１０を調整することを要求するアーチファクト可視化物を含む場合、操作者９００は、探触子１１０を再配置する９０５（又はアーチファクトを補正するための他の措置をとる）ことができる。データ取得ユニット２１０は、新しいエコー・データを受信し、新しいエコー・データを処理して、別のＢモード画像９１０、Ｃモード画像などを生成できる。アーチファクト識別ユニット２２０は、アーチファクトの画素に関して画像９１０を分析し、カテゴリ関連づけ９１５を視覚的指標生成器２３０に再び供給できる。
【００４６】
拡張された画像９２０が標的対象物を遮らないアーチファクト可視化物を含む場合、操作者９００は、探触子１１０を調整しないことを選択できる。視覚的指標生成器２３０は、遮られていない／受容された画像９３０を主処理ロジック２４０に転送できる。
【００４７】
主処理ロジック２４０は、必要に応じて、画像９３０及びその後に続く画像９３０を受信して、画像９３０に基づいて、臓器の境界、膀胱の体積の推定、腔の認識、大動脈のサイズなど、所望の測定値又は計算値を提供できる。主処理ロジック２４０は、計算結果９３５をディスプレイ１２２に供給して、操作者９００に対して表示できる。
【００４８】
図１０は、別の実施態様による、走査システム１００内の、リアルタイムでアーチファクト可視化物を生成する、例示的な通信の構成図である。図１０の通信は、操作者に提供される、要求された出力を含むフィードバックを示す。
【００４９】
図９に関連して説明した通信と同様に、図１０では、操作者９００は探触子１１０を制御して、探触子１１０のノーズを関心のある臓器に向けて配置し９０５、超音波信号を放射できる。データ取得ユニット２１０は、エコー・データを受信し、エコー・データを処理して画像９１０を生成できる。データ取得ユニット２１０は、画像９１０をアーチファクト識別ユニット２２０に送信できる。アーチファクト識別ユニット２２０は、画像９１０を分析し、画像９１０内の画素グループ又は画素エリアを、１つ又は複数のアーチファクトのカテゴリに分類できる。アーチファクト識別ユニット２２０は、画像９１０のカテゴリ関連づけ９１５を視覚的指標生成器２３０に供給できる。
【００５０】
データ取得ユニット２１０は、画像９１０をアーチファクト識別ユニット２２０に送信することに加えて（且つ同時に）、画像９１０を主処理ロジック２４０に送信できる。主処理ロジック２４０は、必要に応じて、画像９１０及びその後に続く画像９１０を受信し、画像９１０に基づいて、標的対象物（たとえば、膀胱、腎臓、大動脈、医用デバイスなど）を検出し、臓器の境界／形状又は膀胱の体積の推定など、所望の測定値又は計算値を提供できる。したがって、（アーチファクト識別ユニット２２０からの）アーチファクトの評価、及び（主処理ロジック２４０からの）計算された測定値を同時に得ることができる。主処理ロジック２４０は、計算結果１０１０を視覚的指標生成器２３０に供給できる。
【００５１】
視覚的指標生成器２３０は、カテゴリ関連づけ９１５及び計算結果１０１０を受信できる。視覚的指標生成器２３０は、カテゴリ関連づけ９１５及び計算結果１０１０を使用して、操作者９００向けにアーチファクト・エリアの可視化物を生成できる。一実施態様では、視覚的指標生成器２３０は、アーチファクトの存在に起因する計算結果の潜在的エラーを示す、付加的なガイダンスを伴う計算結果１０１０を提供できる。
【００５２】
視覚的指標生成器２３０は、画像９１０内で検出されたアーチファクトのクラスに対応する適切な可視化物を選択し、操作者９００に対して表示するための出力１０２０として、アーチファクト可視化物と共に画像をディスプレイ１２２に提出できる。たとえば、出力１０２０は、上記の出力６１０、６２０、７１０、又は７２０に対応することができ、ディスプレイ１２２を介して提示され得る。操作者９００は、ディスプレイ１２２上で、出力１０２０を見つける１０２５ことができる。操作者９００は、探触子１１０を調整して再走査するか、又は単に可視化されたアーチファクト（存在する場合）に対する標的対象物の場所に基づいて結果を受容するかを選択できる。
【００５３】
図１１は、リアルタイムで超音波スキャンのアーチファクト可視化物を生成する、例示的なプロセス１１００を示す流れ図である。プロセス１１００は、たとえば、システム１００の基本ユニット１２０で実行され得る。別の実施態様では、プロセス１１００は、探触子１１０と連動して基本ユニット１２０で実行され得る。一実施態様では、プロセス１１００は、探触子１１０が上記のように超音波画像を取得した後に開始できる。
【００５４】
プロセス１１００は、スキャン画像を受信するステップ及び処理するステップを含み得る（ブロック１１１０）。たとえば、データ取得ユニット２１０は、探触子１１０から１つ又は複数のＢモード超音波画像を受信し、ノイズ低減及び／又は他の前処理技法を施して、画像からスペックル及び背景ノイズを除去できる。いくつかの実施例では、軸方向解像度と横方向解像度との間の差異を補正するために、生のＢモード画像の縦横比を、サイズ変更プロセスによって調整できる。膀胱走査用途などの他の実施態様では、膀胱の形状に、典型的な膀胱の実際の形状をより正確に反映させるために、スキャン変換を施すこともできる。
【００５５】
プロセス１１００はまた、スキャン画像内の超音波アーチファクトを検出するステップ（ブロック１１２０）と、検出されたアーチファクト・エリアを可視化するステップ（ブロック１１３０）とを含み得る。たとえば、アーチファクト識別ユニット２２０は、データ取得ユニット２１０から、画像９１０などの前処理された画像を受信できる。アーチファクト識別ユニット２２０は、たとえば、画像９１０のエリアを複数の相異なるアーチファクトのカテゴリ（たとえば、恥骨の影、腸内ガスの影、残響など）のうちの１つ又は複数に分類する、複数クラスへの画像分類化アルゴリズムを使用して、画像９１０の画素グループを分析できる。視覚的指標生成器２３０は、相異なる種類のアーチファクトの可視インジケータをリアルタイムで生成し、操作者９００に対して表示するために、スキャン画像上にアーチファクト可視化物を重ね合わせることができる。
【００５６】
操作者は、スキャンを受容することについて判断できる（ブロック１１４０）。たとえば、標的対象物に対する可視化されたアーチファクトの場所に基づいて、操作者９００は、付随的なアーチファクトの存在にかかわらずスキャンが許容可能であると判断できる。或いは、操作者９００は、（たとえば、可視化物６１２、７１２などによって示すような）アーチファクトでは探触子の調整及び再走査が必要であると判断できる。
【００５７】
操作者がスキャンを受容しない場合（ブロック１１４０のいいえ）、プロセス１１００は、操作者が探触子を調整するステップ（ブロック１１５０）、及びブロック１１１０に戻ってスキャン画像を受信して処理するステップを含み得る。たとえば、操作者９００は、標的対象物を閉塞するアーチファクトを示す出力（たとえば、出力６１０、７１０）を伴うスキャンを拒否できる。操作者９００は、スキャン結果を改善するために、探触子１１０の位置を調整するか、より多くのゲルを皮膚に塗布するか、又は他の補正措置を講じ、もう一度スキャンを開始できる。
【００５８】
操作者がスキャンを受容する場合（ブロック１１４０のはい）、プロセス１１００は、主な処理を実行するステップ（ブロック１１６０）及び結果を提示するステップ（ブロック１１７０）を含み得る。たとえば、操作者９００は、アーチファクトがない、又は出力が、エコー窓内のアーチファクトが標的対象物を見るのに影響を与えないことを示す（たとえば、出力６２０、７２０）スキャンを受容できる。主処理ロジック２４０は、標的対象物についての計算／測定要求を実行し、結果（たとえば、膀胱の体積、大動脈の直径など）を操作者９００に返すことができる。
【００５９】
図１１は、プロセス１１１０のブロックの特定の順序を示しているが、他の実施態様では、プロセス１１００は、異なる順序で実行され得る。たとえば、一実施態様では、ブロック１１６０の主なデータ処理は、ブロック１１２０及び／又は１１３０と同時に実行できる。
【００６０】
図１２は、基本ユニット１２０の例示的な物理的構成要素を示す概略図である。基本ユニット１２０は、バス１２１０、プロセッサ１２２０、メモリ１２３０、入力構成要素１２４０、出力構成要素１２５０、及び通信インタフェース１２６０を備えることができる。他の実施態様では、探触子１１０は、同様の構成要素を備えることができる。
【００６１】
バス１２１０は、基本ユニット１２０の構成要素間の通信を可能にする経路を備えることができる。プロセッサ１２２０には、プロセッサ、マイクロプロセッサ、ＡＳＩＣ、コントローラ、プログラム可能な論理デバイス、チップセット、ＦＰＧＡ、グラフィック処理ユニット（ＧＰＵ：ｇｒａｐｈｉｃｓ  ｐｒｏｃｅｓｓｉｎｇ  ｕｎｉｔ）、特定用途向け命令セット・プロセッサ（ＡＳＩＰ：ａｐｐｌｉｃａｔｉｏｎ  ｓｐｅｃｉｆｉｃ  ｉｎｓｔｒｕｃｔｉｏｎ−ｓｅｔ  ｐｒｏｃｅｓｓｏｒ）、システムオンチップ（ＳｏＣ：ｓｙｓｔｅｍ−ｏｎ−ｃｈｉｐ）、中央処理ユニット（ＣＰＵ：ｃｅｎｔｒａｌ  ｐｒｏｃｅｓｓｉｎｇ  ｕｎｉｔ）（たとえば、１つ又は複数のコア）、マイクロコントローラ、並びに／又は命令及び／若しくはデータを解釈及び／若しくは実行する他のいくつかの種類の構成要素が含まれ得る。プロセッサ１２２０は、ハードウェア（たとえば、ＦＰＧＡなど）、ハードウェアとソフトウェアとの組合せ（たとえば、ＳｏＣ、ＡＳＩＣなど）として実装されてもよく、１つ又は複数のメモリ（たとえば、キャッシュなど）などを備えてもよい。
【００６２】
メモリ１２３０には、プロセッサ１２２０が実行するための情報及び命令（たとえば、ソフトウェア１２３５）を記憶できる任意の種類の動的記憶デバイス、及び／又はプロセッサ１２２０が使用するための情報を記憶できる任意の種類の不揮発性記憶デバイスが含まれ得る。
【００６３】
ソフトウェア１２３５には、機能及び／又はプロセスを提供するアプリケーション又はプログラムが含まれる。ソフトウェア１２３５は、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語（ＨＤＬ：ｈａｒｄｗａｒｅ  ｄｅｓｃｒｉｐｔｉｏｎ  ｌａｎｇｕａｇｅ）、及び／又は他の形式の命令を含むことも意図している。
【００６４】
入力構成要素１２４０には、キーボード、キーパッド、釦、スイッチ、タッチ画面など、操作者が基本ユニット１２０に情報を入力することを可能にする仕組みが含まれ得る。出力構成要素１２５０には、ディスプレイ（たとえば、ディスプレイ１２２）、スピーカ、１つ又は複数の発光ダイオード（ＬＥＤ）など、操作者に情報を出力する仕組みが含まれ得る。
【００６５】
通信インタフェース１２６０には、基本ユニット１２０が無線通信、有線通信、又は無線及び有線通信の組合せを介して他のデバイス及び／又はシステムと通信することを可能にするトランシーバが含まれ得る。たとえば、通信インタフェース１２６０には、ネットワークを介して、探触子１１０などの別のデバイス若しくはシステムと、又は複数の基本ユニットの動作を監視するシステム制御コンピュータ（たとえば、病院又は別の種類の医用監視施設内の）などの他のデバイス／システムと通信する仕組みが含まれ得る。一実施態様では、通信インタフェース１２６０は、入力及び出力ポート、入力及び出力システム、並びに／又は他のデバイスへの／からのデータ伝送を容易にする他の入力及び出力構成要素を備える論理構成要素であり得る。
【００６６】
基本ユニット１２０は、プロセッサ１２２０が、メモリ１２３０などのコンピュータ可読媒体に格納されるソフトウェア命令（たとえば、ソフトウェア１２３５）を実行することに応答して、特定の動作を実行できる。コンピュータ可読媒体は、非一時的なメモリ・デバイスと規定され得る。非一時的メモリ・デバイスは、単一の物理メモリ・デバイス内のメモリ空間を有するか、又は複数の物理メモリ・デバイスにわたって分散してもよい。ソフトウェア命令は、別のコンピュータ可読媒体から、又は別のデバイスからメモリ１２３０に読み込まれ得る。メモリ１２３０に格納されたソフトウェア命令は、プロセッサ１２２０に、本明細書で説明するプロセスを実行させることができる。或いは、ＡＳＩＣ、ＦＰＧＡなどのハードウェアで実行される回路を、ソフトウェア命令の代わりに、又はソフトウェア命令と組み合わせて使用し、本明細書で説明するプロセスを実施できる。したがって、本明細書で説明する実施態様は、ハードウェア回路及びソフトウェアのどんな特定の組合せにも限定されない。
【００６７】
基本ユニット１２０は、図１２に示すものよりも少ない構成要素、追加の構成要素、相異なる構成要素、及び／又は異なって配置構成された構成要素を備えてもよい。一実例として、基本ユニット１２０は、バス１２１０の代わりに、又はバス１２１０に加えて、１つ又は複数のスイッチ・ファブリックを備えることができる。追加的に又は代替として、基本ユニット１２０の１つ又は複数の構成要素は、基本ユニット１２０の１つ又は複数の他の構成要素によって実行されるものとして説明した、１つ又は複数のタスクを実行できる。
【００６８】
本明細書で説明するシステム及び方法は、超音波走査中に操作者に、リアルタイムでアーチファクトの可視化物を提供する。リアルタイムでのアーチファクトの可視化は、経験の浅い操作者ばかりでなく経験豊富な操作者にとっても、高品質の超音波データを取得し、膀胱の体積の測定値、大動脈の直径などの正確に計算された臓器の寸法を得るのに役立つ。深層畳み込みニューラル・ネットワークなどの機械学習により、リアルタイムでのフィードバックを提供するために使用され得るスキャン画像内の、アーチファクト・エリアを迅速に分類できる。
【００６９】
本明細書で説明するシステム及び方法は、操作者が超音波画像内のアーチファクトを解釈し、そのタスクをシステム１００内のロジックに転送する必要性を最小限に抑える。従来の超音波システムでは、アーチファクトがスキャン結果に影響を与えているかどうかを判断するために、操作者が画像の内容を解釈するか、完全なスキャン結果を待つ必要がある。経験の浅いユーザにとって、超音波画像で何が起こるかを正しく理解することは、簡単なタスクではない。本明細書で説明するシステム及び方法は、操作者にとって初期レベルのアーチファクト検出を実行して、画像解釈の負担、及び探触子操作者がエラーを見つける前の完全なスキャン計算による遅延を最小限に抑える。
【００７０】
例示的な実施態様の前述の説明は、例示及び説明を提供するが、網羅的であること、又は本明細書で説明する実施例を開示された正確な形態に限定することは意図していない。修正及び変更が、上記の教示に照らして可能であるか、又は実施例の実行により得ることができる。
【００７１】
上記で本発明を詳細に説明してきたが、本発明の精神から逸脱することなく本発明を修正できることが当業者には明らかであろうことは、明確に理解されたい。本発明の精神及び範囲から逸脱することなく、本発明に、形態、設計、又は配置構成についての様々な変更を加えることができる。
【００７２】
本出願の説明で使用する要素、動作、又は命令は、明示的に説明していない限り、本発明にとって重要又は必須であると解釈されるべきではない。また、本明細書で使用する場合、冠詞「ａ」は、１つ又は複数のものを含むことを意図している。さらに、「に基づいて」という語句は、特に明記しない限り、「少なくとも部分的に基づいて」を意味することを意図する。
【００７３】
特許請求の範囲での、クレーム要素を修飾する「第１」、「第２」、「第３」などの序数用語の使用は、それ自体で、あるクレーム要素が別のクレーム要素を越えるどんなプライオリティ、優先順位、又は順序、方法の動作が実行される時間的順序、デバイスが実行する命令が行われる時間的順序なども含意するものではなく、クレーム要素を区別するため、単に、ある名前を持つ１つのクレーム要素を、同じ名前を持つ（しかし、序数用語を使用するようになされた）別の要素から区別するためのラベルとして使用される。
【図１】
2021506470.tif 000003
【図２】
2021506470.tif 000004
【図３Ａ】
2021506470.tif 000005
【図３Ｂ】
2021506470.tif 000006
【図３Ｃ】
2021506470.tif 000007
【図４Ａ】
2021506470.tif 000008
【図４Ｂ】
2021506470.tif 000009
【図５Ａ】
2021506470.tif 000010
【図５Ｂ】
2021506470.tif 000011
【図６Ａ】
2021506470.tif 000012
【図６Ｂ】
2021506470.tif 000013
【図７Ａ】
2021506470.tif 000014
【図７Ｂ】
2021506470.tif 000015
【図８】
2021506470.tif 000016
【図９】
2021506470.tif 000017
【図１０】
2021506470.tif 000018
【図１１】
2021506470.tif 000019
【図１２】
2021506470.tif 000020
【手続補正書】
【提出日】令和2年8月19日(2020.8.19)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
超音波探触子と結合されたプロセッサによって、超音波画像データを受信するステップと、
前記プロセッサによって、前記超音波画像データ内でアーチファクトを含むエリアを検出するステップと、
前記プロセッサによって、アーチファクトを含む前記エリアを、複数の利用可能なアーチファクトのクラスのうちの１つに分類するステップと、
前記プロセッサによって、超音波ベースの画像のアーチファクトを含む前記エリアの指標を生成するステップであって、前記指標には、前記アーチファクトのクラスの名称が含まれる、ステップと、
操作者に、前記超音波ベースの画像及びアーチファクトを含む前記エリアの前記指標を提示するステップと
を含む、方法。
【請求項２】
前記超音波画像データには、２次元Ｂモード画像が含まれる、請求項１に記載の方法。
【請求項３】
前記超音波画像データには、Ｃモード画像として編集するための複数のＢモード画像が含まれる、請求項１に記載の方法。
【請求項４】
前記分類するステップは、アーチファクトの分類を実行するために、畳み込みニューラル・ネットワークを使用するステップを含む、請求項１に記載の方法。
【請求項５】
前記複数のアーチファクトのクラスには、恥骨の影クラス、腸内ガスの影クラス、及び不適切な結合クラスが含まれる、請求項１に記載の方法。
【請求項６】
前記プロセッサによって、前記超音波画像内で標的対象物を検出するステップと、
前記プロセッサによって、標的対象物に基づいて、結果を、前記分類するステップと同時に計算するステップと
をさらに含む、請求項１に記載の方法。
【請求項７】
前記分類するステップは、
以前に認識されたアーチファクトの種類を使った訓練画像の画素グループに基づいて、前記アーチファクトのクラスの予め訓練されたモデルを開発するステップ
を含む、請求項１に記載の方法。
【請求項８】
ローカル・メモリ内に、前記予め訓練されたモデルを記憶するステップと、
前記予め訓練されたモデルに基づいて、前記超音波画像データからの画素グループ、及び前記訓練画像からの画素グループのマッチングを行うステップと
をさらに含む、請求項７に記載の方法。
【請求項９】
前記提示するステップは、標的対象物に関する前記超音波画像内の、アーチファクトを含む前記エリアの場所を示す、請求項１に記載の方法。
【請求項１０】
前記標的対象物は、膀胱、大動脈、前立腺、腎臓、血管、又は甲状腺のうちの１つを含む臓器である、請求項９に記載の方法。
【請求項１１】
命令を記憶するメモリ・デバイスと、
プロセッサと
を備えるデバイスであって、前記プロセッサは、
超音波探触子から超音波画像データを受信することと、
前記超音波画像データ内でアーチファクトを含むエリアを検出することと、
アーチファクトを含む前記エリアを、複数の利用可能なアーチファクトのクラスのうちの１つに分類することと、
超音波画像の少なくとも１つのアーチファクトを含む前記エリアの指標を生成することであって、前記指標には、前記アーチファクトのクラスの名称が含まれる、生成することと、
操作者に、前記超音波画像及び少なくとも１つのアーチファクトを含む前記エリアの前記指標を提示することと
を行うよう構成される、デバイス。
【請求項１２】
アーチファクトを含む前記エリアを分類するときに、前記プロセッサは、機械学習を適用するようさらに構成される、請求項１１に記載のデバイス。
【請求項１３】
前記プロセッサは、
前記超音波画像内で標的対象物の指標を生成し、
前記標的対象物の前記指標に基づく結果を、前記提示することの後に計算する
ようさらに構成される、請求項１１に記載のデバイス。
【請求項１４】
アーチファクトを含む前記エリアを分類するときに、前記プロセッサは、
前記メモリ・デバイスに、以前に認識されたアーチファクトの種類を使った訓練画像の画素グループに基づく、前記利用可能なアーチファクトのクラスの予め訓練されたモデルを記憶し、
前記予め訓練されたモデルに基づいて、前記超音波画像データからの画素グループと、前記訓練画像からの画素グループとのマッチングを行う
ようさらに構成される、請求項１１に記載のデバイス。
【国際調査報告】
2021506470.tif 000021
2021506470.tif 000022
2021506470.tif 000023