(57)【特許請求の範囲】
【請求項１】
コンピューティング装置の作動方法であって、
前記コンピューティング装置のプロセッサが、電子的にフォーマットされた診療レポートを視覚的に表示するステップであって、前記電子的にフォーマットされた診療レポートが電子的にフォーマットされたイメージのセットを参照するステップと、
前記プロセッサが、前記電子的にフォーマットされた診療レポートから、電子的にフォーマットされたイメージの前記セットに対する参照を抽出するステップと、
前記プロセッサが、測定が行われた、電子的にフォーマットされたイメージの前記セットの各イメージ内の組織の識別を、抽出した前記参照から決定すること、前記測定が行われた前記イメージに関連する説明を、前記抽出した参照から抽出すること、前記抽出した参照内の前記電子的にフォーマットされた、測定値があるイメージを、電子的にフォーマットされたイメージの前記セットから取り出すこと、並びに、取り出した前記イメージに前記組織の識別及び前記説明を関連付けることによって、前記電子的にフォーマットされた診療レポートと、電子的にフォーマットされたイメージの前記セットとをリンクするステップと、
前記プロセッサが、取り出した前記イメージを前記参照及び前記説明と共に視覚的に表示するステップと
を含む、コンピューティング装置の作動方法。
【請求項２】
前記プロセッサが、ユーザ入力を受信したことに応答して、前記参照及び前記説明を伴う、視覚的に表示した前記取り出したイメージから、視覚的に表示した前記診療レポートに情報を移動するステップをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項３】
前記プロセッサが、自然言語処理モジュールを利用して、前記電子的にフォーマットされた診療レポートから前記参照を抽出するステップをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項４】
前記プロセッサが、自然言語処理モジュールを利用して、抽出した前記参照から組織の前記識別を抽出するステップをさらに含む、請求項３に記載のコンピューティング装置の作動方法。
【請求項５】
前記プロセッサが、自然言語処理モジュールを利用して前記説明を抽出するステップをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項６】
前記プロセッサが、前記抽出した参照から前記説明を抽出するステップをさらに含む、請求項５に記載のコンピューティング装置の作動方法。
【請求項７】
前記プロセッサが、前記イメージ上の測定値から前記組織の前記識別を抽出するステップをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項８】
前記プロセッサが、前記イメージ上の注釈から前記組織の前記識別を抽出するステップをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項９】
前記プロセッサが、前記電子的にフォーマットされた診療レポートから、所見及び対応する解剖学的位置を抽出するステップと、
前記プロセッサが、前記イメージ内の前記組織を解剖学的ラベルでラベル付けするステップと、
前記プロセッサが、前記イメージ内の前記組織を前記ラベル付けすることに基づいて、解剖学的ラベルで前記イメージ上の注釈をラベル付けするステップと、
前記プロセッサが、前記所見と前記注釈とを突き合わせるステップと、
前記プロセッサが、前記診療レポート内の前記所見の位置に前記イメージに対するリンクを追加し、前記イメージ内の前記注釈の位置に前記診療レポートに対するリンクを追加するステップとをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項１０】
前記診療レポート内の前記イメージに対する前記リンクがハイパーリンクであり、前記イメージ内の前記診療レポートに対する前記リンクがハイパーリンクである、請求項９に記載のコンピューティング装置の作動方法。
【請求項１１】
前記プロセッサが、自然言語処理モジュールを利用して、前記電子的にフォーマットされた診療レポートから前記所見及び対応する解剖学的位置を抽出するステップをさらに含む、請求項９又は１０に記載のコンピューティング装置の作動方法。
【請求項１２】
前記プロセッサが、解剖学的アトラス又は統計的アルゴリズムを使用して前記イメージ内の前記組織をラベル付けするステップをさらに含む、請求項１に記載のコンピューティング装置の作動方法。
【請求項１３】
前記注釈の少なくとも１つが、前記イメージ内で可視ではない、請求項８〜１１のいずれか１項に記載のコンピューティング装置の作動方法。
【請求項１４】
少なくとも１つのコンピュータ可読命令を有するメモリと、
前記少なくとも１つのコンピュータ可読命令を実行するプロセッサと
を備えるコンピューティング装置であって、前記プロセッサが、前記少なくとも１つのコンピュータ可読命令を実行することに応答して、
電子的にフォーマットされた診療レポートを視覚的に表示し、電子的にフォーマットされた前記診療レポートが、電子的にフォーマットされたイメージのセットを参照し、
前記電子的にフォーマットされた診療レポートから、電子的にフォーマットされたイメージの前記セットに対する参照を抽出し、
測定が行われた、電子的にフォーマットされたイメージの前記セットの各イメージ内の組織の識別を、抽出した前記参照から決定すること、前記測定が行われた前記イメージに関連する説明を、前記抽出した参照から抽出すること、前記抽出した参照内の前記電子的にフォーマットされた、測定値があるイメージを、電子的にフォーマットされたイメージの前記セットから取り出すこと、並びに、取り出した前記イメージに前記組織の識別及び前記説明を関連付けることによって、前記電子的にフォーマットされた診療レポートと、電子的にフォーマットされたイメージの前記セットとをリンクし、
取り出した前記イメージを前記参照及び前記説明と共に視覚的に表示する、
コンピューティング装置。
【請求項１５】
コンピュータ可読命令で符号化されたコンピュータ可読記憶媒体であって、プロセッサによって実行されるとき、前記コンピュータ可読命令が、
電子的にフォーマットされた診療レポートを視覚的に表示することであって、前記電子的にフォーマットされた診療レポートが電子的にフォーマットされたイメージのセットを参照することと、
前記電子的にフォーマットされた診療レポートから、電子的にフォーマットされたイメージの前記セットに対する参照を抽出することと、
測定が行われた、電子的にフォーマットされたイメージの前記セットの各イメージ内の組織の識別を、抽出した前記参照から決定すること、前記測定が行われた前記イメージに関連する説明を、前記抽出した参照から抽出すること、前記抽出した参照内の前記電子的にフォーマットされた、測定値があるイメージを、電子的にフォーマットされたイメージの前記セットから取り出すこと、並びに、取り出した前記イメージに前記組織の識別及び前記説明を関連付けることによって、前記電子的にフォーマットされた診療レポートと、電子的にフォーマットされたイメージの前記セットとをリンクすることと、
取り出した前記イメージを前記参照及び前記説明と共に視覚的に表示することと
を前記プロセッサに行わせる、コンピュータ可読記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
以下は、一般には、診療レポートと、その中で参照されるイメージとをリンクすることに関する。
【背景技術】
【０００２】
報告は、放射線科の日々の手順の中で時間がかかる部分であることがある。典型的な放射線報告ワークフローは、放射線科医が、撮像研究対象の複数のイメージに目を通し、観察した所見を記述する説明レポートを書くか、又は口述することを含む。所見説明と共に、多くの場合、放射線科医は、特定のイメージスライス（例えば、「約１７ｍｍと測定される右上円錐外空間内の神経線維腫（シリーズ５、イメージ１０４）」）に対する参照も含めることになる。これらの特定の参照はしばしば、主要なイメージに対応する。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
レポートは、放射線科情報システム（ＲＩＳ）内で作成され、記憶されるのに対して、イメージは、ピクチャアーカイビングシステム（ＰＡＣＳ）内に記憶される。ＰＡＣＳユーザインターフェースでは、基本的測定値、例えば関心領域（ＲＯＩ）内の長さ又は平均ハウンスフィールド単位ＨＵ値、又は注釈、例えばイメージ内の関心領域をマークするための矢印を作成するためにツールが利用可能である。通常は、ＰＡＣＳ内のイメージが、程度の差はあるが患者の健康記録にリンクされるような、統合型ソリューションがある。しかしながら、イメージ及び／又はイメージ上の注釈と、レポート内の所見との間の関連付けはない。
【課題を解決するための手段】
【０００４】
本明細書に記載の態様は、上記で参照した問題及びその他に対処する。
【０００５】
一態様では、方法が、電子的にフォーマットされた診療レポートを視覚的に表示するステップであって、電子的にフォーマットされた診療レポートが電子的にフォーマットされたイメージのセットを参照するステップと、電子的にフォーマットされたイメージのセットを取得するステップと、電子的にフォーマットされた診療レポートと、電子的にフォーマットされたイメージのセットとをリンクするステップとを含む。
【０００６】
別の態様では、コンピューティング装置（１０２）が、少なくとも１つのコンピュータ可読命令（１０６）を有するメモリ（１０８）と、少なくとも１つのコンピュータ可読命令を実行するプロセッサ（１０４）とを含む。プロセッサは、少なくとも１つのコンピュータ可読命令を実行することに応答して、電子的にフォーマットされた診療レポートを視覚的に表示し、電子的にフォーマットされた診療レポートは、電子的にフォーマットされたイメージのセットを参照する。プロセッサは、電子的にフォーマットされたイメージのセットを取得し、電子的にフォーマットされた診療レポートと、電子的にフォーマットされたイメージのセットとをリンクする。
【０００７】
別の態様では、コンピュータ可読記憶媒体にコンピュータ可読命令が符号化されており、これらの命令は、プロセッサによって実行されるとき、電子的にフォーマットされた診療レポートを視覚的に表示することであって、電子的にフォーマットされた診療レポートが電子的にフォーマットされたイメージのセットを参照すること、電子的にフォーマットされたイメージのセットを取得すること、及び電子的にフォーマットされた診療レポートと、電子的にフォーマットされたイメージのセットとをリンクすることをプロセッサに行わせる。
【０００８】
本発明は、様々な構成要素及び構成要素の配置、並びに様々なステップ及びステップの配置の形態を取る。図面は好ましい実施形態を示すためのものに過ぎず、本発明を限定するものと解釈すべきではない。
【図面の簡単な説明】
【０００９】
【図１】レポート／イメージリンキングモジュールを有する例示的コンピューティングシステムを概略的に示す図である。
【図２】レポート／イメージリンキングモジュールの一例を概略的に示す図である。
【図３】測定値又は注釈のない例示的イメージを示す図である。
【図４】測定値があるが注釈のない例示的イメージを示す図である。
【図５】測定値及び注釈のある例示的イメージを示す図である。
【図６】例示的レポート作成／編集ウィンドウ及びイメージウィンドウを示す図である。
【図７】レポート／イメージリンキングモジュールの別の例を概略的に示す図である。
【図８】レポートとイメージとをリンクする例示的方法を示す図である。
【図９】レポートとイメージとをリンクする別の例示的方法を示す図である。
【発明を実施するための形態】
【００１０】
図１はシステム１００を概略的に示す。システム１００はコンピューティング装置１０２を含む。コンピューティング装置１０２はプロセッサ１０４を含み、プロセッサ１０４は、コンピュータ可読記憶媒体（「メモリ」）１０８内に記憶されたコンピュータ可読命令１０６を実行し、コンピュータ可読記憶媒体１０８は、一時的媒体を除外し、物理メモリ及び／又は他の非一時的記憶媒体を含む。プロセッサ１０４はまた、搬送波、信号、又は他の一時的媒体によって搬送される１つ又は複数のコンピュータ可読命令を実行することができる。コンピューティング装置１０２は、キーボード、マウス、タッチスクリーンなどの入力デバイス１１０と、表示モニタなどの出力デバイス１１２とを含む。
【００１１】
コンピューティング装置１０２は、ネットワーク１１６を通じて、電子的にフォーマットされたイメージを記憶するイメージリポジトリ１１８と通信する。イメージリポジトリ１１８の一例は、ピクチャアーカイビング及び通信システム（ＰＡＣＳ）、データベースなどである。コンピューティング装置１０２はまた、ネットワーク１１６を通じて、電子的にフォーマットされたレポートを記憶するレポートリポジトリ１２０とも通信する。レポートリポジトリ１２０の一例は、放射線科情報システム（ＲＩＳ）、データベースなどである。イメージ及び／又はレポートを記憶する他のシステムには、病院情報システム（ＨＩＳ）、電子診療記録（ＥＭＲ）などが含まれる。イメージは、ＣＴ、ＭＲ、ＰＥＴ、ＳＰＥＣＴ、Ｘ線などのイメージでよい。
【００１２】
コンピューティング装置１０２は、診療室、保健施設、撮像センタなどに配置された臨床サポートシステム、コンピュータなどでよい。コンピュータ可読命令１０６はレポート／イメージリンキングモジュール１２２を含み、レポート／イメージリンキングモジュール１２２は、プロセッサ１０４によって実行されるとき、レポート及び対応するイメージのセットをプロセッサ１０４に処理させる。以下でより詳細に説明するように、プロセッサ１０４は、レポート／イメージリンキングモジュール１２２の命令を実行することに応答して、レポートと、対応するイメージのセットとをリンクする。リンキングを用いると、レポートを作成／閲覧する放射線科医は、対応するイメージのセットを探索し、見つけ、取り出す必要がなく、イメージのセットを閲覧する放射線科医は、対応するレポートを探索し、見つけ、取り出す必要がない。
【００１３】
図２は、レポート／イメージリンキングモジュール１２２の一例を概略的に示す。レポート／イメージリンキングモジュール１２２はレポートエディタ２０２を含み、レポートエディタ２０２は、新しいレポートの作成、及び／又は既存のレポートの編集を可能にする。一例では、レポートエディタ２０２は、ディスプレイ出力デバイス１１２を介して、レポート作成／編集ウィンドウを有するグラフィカルユーザインターフェースを視覚的に提示する。
【００１４】
レポート／イメージリンキングモジュール１２２はイメージ参照抽出器２０４をさらに含む。一例では、イメージ参照抽出器２０４は、自然言語処理（ＮＬＰ）アルゴリズムを利用して、現レポートからイメージ参照を抽出する。一例では、イメージ参照抽出器２０４は、ＮＬＰアルゴリズムを使用して、レポートからセクション、パラグラフ、文などを決定する。
【００１５】
イメージ参照抽出器２０４は、レポートの「所見」セクション内の文を処理し、例えば正規表現を使用して、文のうちの１つ又は複数からイメージ参照を抽出する。あるレポートでは、このことは、「左肝臓の参照病変（シリーズ番号１１、イメージ番号７９）が約６．４×５．４ｃｍと測定される」という文から「シリーズ１１」及び「イメージ番号７９」を抽出することを含む。
【００１６】
適切なアルゴリズムの一例が、Ｍａｂｏｔｕｗａｎａ  Ｔ、Ｑｉａｎ  Ｙ、Ｓｅｖｅｎｓｔｅｒ  Ｍ．、「Ｕｓｉｎｇ  ｉｍａｇｅ  ｒｅｆｅｒｅｎｃｅｓ  ｉｎ  ｒａｄｉｏｌｏｇｙ  ｒｅｐｏｒｔｓ  ｔｏ  ｓｕｐｐｏｒｔ  ｅｎｈａｎｃｅｄ  ｒｅｐｏｒｔ−ｔｏ−ｉｍａｇｅ  ｎａｖｉｇａｔｉｏｎ．」  ＡＭＩＡ  Ａｎｎｕ  Ｓｙｍｐ  Ｐｒｏｃ．、２０１３：９０８〜１６で説明されている。本明細書では他のアルゴリズムも企図される。
【００１７】
一変形形態では、イメージ参照抽出器２０４はまた、文レベルで、文が含む日付情報を抽出する。例えば、「２０１１年１０月１６日のスキャン上で、小結節が３ｃｍと測定される（シリーズ５、イメージ２６）」という文についいて、イメージ参照抽出器２０４は、「シリーズ５」、「イメージ２６」、「２０１１年１０月１６日」を抽出する。
【００１８】
レポート／イメージリンキングモジュール１２２はイメージ説明抽出器２０６をさらに含む。イメージ説明抽出器２０６は、レポートのセクション、パラグラフ、文などを処理する。一例では、これには、最大エントロピー分類器を利用して、テキスト内の文終了マーカ（「．」、「：」、「！」、「？」、「＼ｎ」）に以下の４つのラベルのうちの１つを割り当てることが含まれる：文の終了ではない（例えば、「Ｄｒ．  Ｄｏｅ」内のピリオド）；文の終了であり、文はセクションヘッダである（例えば、所見：セクション内のコロン）；文の終了であり、文はパラグラフ内の最後の文である；文の終了であり、上記のクラスのいずれでもない。
【００１９】
イメージ説明抽出器２０６は、イメージ参照が抽出された各文について、標準ＮＬＰ技法を使用して、イメージ参照に関連する主な名詞句を識別する。例えば、「左肝臓の参照病変（シリーズ番号１１、イメージ番号７９）が約６．４×５．４ｃｍと測定される」というフレーズから、イメージ説明抽出器２０６は、イメージ参照に関連する主要名詞句として「左肝臓の参照病変」を抽出する。
【００２０】
別の実施形態では、明示的なイメージ参照がレポートテキスト内で言及されていない場合、全体のセクション−パラグラフ−文構造を再構築することができる。後処理ステップでは、認識されたセクションヘッダ（例えば、所見）及びパラグラフヘッダ（例えば、膵臓、肝臓など）が、既知のヘッダのリストに対して正規化される。これが行われた後に、イメージ説明抽出器２０６は、各パラグラフヘッダに関連する名詞句を識別する。合致する測定値を有する名詞句に優先順位が与えられる。
【００２１】
測定値及び身体部分／器官の代わりに、合致する測定値だけに基づいて名詞句を識別することも可能である。測定値が存在しないとき、抽出された情報（すなわち、パラグラフヘッダ及び名詞句）が、識別された器官と組み合わされ、主要イメージに関連する説明が決定される。イメージに所見説明（例えば、「膵臓腫瘤」）の注釈が付けられるとき、この情報は、主要イメージに関連する説明として使用される。
【００２２】
レポート／イメージリンキングモジュール１２２は解剖学的構造識別器２０８をさらに含む。解剖学的構造識別器２０８は、測定が行われる研究対象のイメージ内の解剖学的構造を識別する。一例では、この情報は、ＤＩＣＯＭ「研究対象説明フィールド」、「プロトコル名フィールド」、「シリーズ説明フィールド」、及び／又は解剖学的構造関連情報を含む他のフィールドから識別される。例えば、これらのフィールドのうちの１つが「膵臓腫瘤」を含み、解剖学的構造識別器２０８は「膵臓」を識別する。
【００２３】
これらのＤＩＣＯＭフィールド及び／又は他のＤＩＣＯＭフィールドのうちの２つ以上が解剖学的構造関連情報を含む場合、ルールベースの手法及び／又は他の手法を使用して、測定が行われる当該の研究対象内の解剖学的構造を識別することができる。適切なアルゴリズムの一例が、Ｍａｂｏｔｕｗａｎａ  Ｔ、Ｑｉａｎ  Ｙ、「Ｄｅｔｅｒｍｉｎｉｎｇ  ｓｃａｎｎｅｄ  ｂｏｄｙ  ｐａｒｔ  ｆｒｏｍ  ＤＩＣＯＭ  ｓｔｕｄｙ  ｄｅｓｃｒｉｐｔｉｏｎ  ｆｏｒ  ｒｅｌｅｖａｎｔ  ｐｒｉｏｒ  ｓｔｕｄｙ  ｍａｔｃｈｉｎｇ．」  Ｓｔｕｄ  Ｈｅａｌｔｈ  Ｔｅｃｈｎｏｌ  Ｉｎｆｏｒｍ．、２０１３；１９２：６７〜７１で説明されている。
【００２４】
一変形形態では、解剖学的構造識別器２０８は、テキスト、数値、グラフィックなどのイメージオーバーレイから解剖学的構造を識別する。図示される解剖学的構造識別器２０８は、解剖学的構造識別アルゴリズム２１０からのアルゴリズムを利用する。図３、図４、及び図５は非限定的なアルゴリズムを示す。図３では、器官「肝臓」がＤＩＣＯＭフィールドから抽出される。図４では、測定値「５４．１ｍｍ」がイメージからさらに抽出される。図５では、テキスト「肝臓の参照病変」が、「肝臓」を示すイメージからさらに抽出される。
【００２５】
図２に戻ると、レポート／イメージリンキングモジュール１２２はイメージ検索器２１２をさらに含む。イメージ検索器２１２は、イメージリポジトリ１１８から識別したイメージを取り出す。例えば、解析された入力「シリーズ５」、「イメージ２６」、「２０１１年１０月１６日」について、イメージ検索器２１２はイメージリポジトリ１１８と通信して、イメージリポジトリ１１８から関連イメージをフェッチするのに必要な内部ＤＩＣＯＭ情報を決定する。
【００２６】
次いで、取り出されたイメージがイメージ説明抽出器２０６によって決定された説明に関連付けられる。イメージ検索器２１２は、取り出されたイメージを、ディスプレイ１１２を通じて視覚的に提示されるグラフィカルユーザインターフェース内のイメージウィンドウ内に視覚的に提示する。一例では、イメージウィンドウは、レポート作成／編集ウィンドウと共に提示される。別の例では、イメージウィンドウは、レポート作成／編集ウィンドウの代わりに提示される。
【００２７】
レポート作成／編集ウィンドウ６０２及び同時に表示されるイメージウィンドウ６０４の一例が図６に示されている。この例では、イメージウィンドウ６０４は、対応する情報を有する複数のイメージを含む。イメージウィンドウ６０４は、ユーザがイメージウィンドウ６０４からレポート作成／編集ウィンドウ６０２内のレポート内に情報を移動、コピーなどを行うことを可能にする。ユーザはまた、イメージウィンドウ６０４内の所見説明又はレポート作成／編集ウィンドウ６０２内の報告環境を直接的に更新／編集することができる。
【００２８】
図７に進むと、レポート／イメージリンキングモジュール１２２の別の例が概略的に示されている。一般には、この実施形態では、レポート／イメージリンキングモジュール１２２は、注釈によってマークされるイメージ内の所見と、レポート内の対応するキーワードとの間のリンクを生成する。このことは、レポート内のキーワードを、イメージ内の注釈と自動的にリンクすることを含む。これらの注釈は、測定値、矢印、又は任意の他の利用可能なツールからのマーキングでよい。
【００２９】
この例では、レポート／イメージリンキングモジュール１２２はテキスト抽出器７０２を含む。テキスト抽出器７０２は、レポートが書かれ、又は口述される間、又はその後に、キーワード、例えば診断、異常、測定値、位置、及び／又は他の情報をレポートから抽出する。先に生成されたレポートは、レポートリポジトリ１２０から得ることができる。現在作成中のレポートは、レポートエディタ１２４から得ることができる。
【００３０】
一例では、テキスト抽出器７０２は、ＮＬＰアルゴリズムを使用してキーワードを抽出する。適切なアルゴリズムの一例が、Ｍ．  Ｓｅｖｅｎｓｔｅｒ等、「Ａｕｔｏｍａｔｉｃａｌｌｙ  Ｃｏｒｒｅｌａｔｉｎｇ  Ｃｌｉｎｉｃａｌ  Ｆｉｎｄｉｎｇｓ  ａｎｄ  Ｂｏｄｙ  Ｌｏｃａｔｉｏｎｓ  ｉｎ  Ｒａｄｉｏｌｏｇｙ  Ｒｅｐｏｒｔｓ  Ｕｓｉｎｇ  ＭｅｄＬＥＥ」、Ｊ  Ｄｉｇｉｔ  Ｉｍａｇｉｎｇ、ｎｏ．  ２５、２４０〜２４９頁、２０１２年で説明されている。他のアルゴリズムもその中で企図される。テキスト抽出器７０２は、所見のリストを含む信号を、その対応する解剖学的位置と共に出力する。
【００３１】
レポート／イメージリンキングモジュール１２２は解剖学的構造ラベラ７０４をさらに含む。解剖学的構造ラベラ７０４はイメージ内の解剖学的構造をラベル付けする。例えば、解剖学的構造ラベラ７０４はイメージを処理して、その中の組織（例えば、心臓）及び組織の位置を識別する。一例では、解剖学的構造検出の細部のレベルは、レポート内で通常記述されるような、心室、肝葉、脳内の皮質領域などのような器官を大まかに識別できるようなものである。
【００３２】
これについて、最初の検出で、身体部分（例えば、胸郭）に対して、次いで器官（例えば、心臓）、さらに、検出の信頼度が十分に高い場合、精密な位置（例えば、左心房）に対しても階層的割振りを利用することができる。図示する実施形態では、解剖学的構造ラベラ７０４は、ラベリングアルゴリズム７０６からの解剖学的構造ラベリングアルゴリズムを利用する。そのようなアルゴリズムは、アトラスベースの、統計ベースの、かつ／又は他の解剖学的構造ラベリングアルゴリズムを含む。
【００３３】
アトラスアルゴリズムが使用される場合、この情報は、階層構造も考慮に入れて直接的に符号化することができる。一変形形態では、ナビゲート可能かつ解析可能な方式で解剖学的構造についての知識を与えるモデルをその中に統合することができる。統計的アルゴリズムでは、解剖学的構造の検出は正確である必要はなく、むしろ可能性の高い決定である。例えば、一定の位置を、例えば０．４の確率で心臓に、０．６の確率で肝臓に割り当てることができる。
【００３４】
イメージは、イメージリポジトリ１１８及び／又は他のソースから得ることができる。適切なアルゴリズムは、Ｖｉｋ等、「Ａ  ｎｅｗ  ｍｅｔｈｏｄ  ｆｏｒ  ｒｏｂｕｓｔ  ｏｒｇａｎ  ｐｏｓｉｔｉｏｎｉｎｇ  ｉｎ  ＣＴ  ｉｍａｇｅｓ」、ｉｎ  ＩＥＥＥ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｓｙｍｐｏｓｉｕｍ  ｏｎ  Ｂｉｏｍｅｄｉｃａｌ  Ｉｍａｇｉｎｇ  （ＩＳＢＩ）、２０１２年、Ｒｏｈｌｆｉｎｇ等、「Ｑｕｏ  Ｖａｄｉｓ，  Ａｔｌａｓ−Ｂａｓｅｄ  Ｓｅｇｍｅｎｔａｔｉｏｎ」、ｉｎ  Ｔｈｅ  Ｈａｎｄｂｏｏｋ  ｏｆ  Ｍｅｄｉｃａｌ  Ｉｍａｇｅ  Ａｎａｌｙｓｉｓ：  Ｓｅｇｍｅｎｔａｔｉｏｎ  ａｎｄ  Ｒｅｇｉｓｔｒａｔｉｏｎ  Ｍｏｄｅｌｓ、Ｋｌｕｗｅｒ、２００５年、並びに／或いは１つ又は複数の他のアルゴリズムを含む。
【００３５】
レポート／イメージリンキングモジュール１２２は注釈ラベラ７０８をさらに含む。注釈ラベラ７０８は、イメージ上に注釈をラベル付けする。図示される注釈ラベラ７０８は、解剖学的構造ラベラ７０４によってイメージに割り当てられた解剖学的ラベルを、イメージ上の注釈にマッピングする。例えば、解剖学的構造の位置に対応するイメージ上の注釈にラベル「心臓」が割り当てられる。このようにして、解剖学的構造ラベル付けイメージに基づいて、各注釈が特定の解剖学的構造に割り当てられる。
【００３６】
イメージ上にマーキングを行う既知のツール又は他のツールで、注釈（例えば、長さ又は体積測定値、矢印、平均ＨＵ値測定値など）を作成することができる。注釈はまた、例えば、乱雑になり、それによって報告する医師の気を散らすことを避けるために図示されない、イメージ上に作成されたマークである「隠しブックマーク」をも含む。得られる、ラベル付けされた注釈のセットを、リストとして、かつ／又はその他の方法で内部に記憶することができる。
【００３７】
非限定的な例として、隠しブックマークについて、臨床医が注目するものに遭遇したとき、臨床医は、イメージ内の位置をクリックすることができる。マーカ、例えば小さい十字を、クリックの領域に一時的に視覚的に表示し、次いで透明にし、又は隠すことができる。これらのブックマークが記憶され、レポートとのリンクのためにも使用される。隠しブックマークは、例えば編集のために、要求時及び／又はその他のときに、再び視覚的に表示することができる。
【００３８】
レポート／イメージリンキングモジュール１２２はリンクジェネレータ７１０をさらに含む。リンクジェネレータ７１０は、レポート内の抽出されたテキストと、ラベル付けされた注釈との間のリンクを作成する。例えば、リンクジェネレータ７１０は、所見のリスト及び注釈のリストを処理し、それらの位置を相関させる。これについて、リンクジェネレータ７１０は、解剖学的構造及びオントロジ関係についての知識７１２を利用する。リンクジェネレータ７１０は、大動脈弁のような厳密な解剖学的位置、並びに上腹部のようなより大まかな説明を扱うことができなければならないからである。
【００３９】
リンクジェネレータ７１０は、最も可能性の高い所見と注釈の組合せを識別する。一例では、リンクジェネレータ７１０は、有効なリンクだけが作成されるように所定の感度（例えば、１００％、９０％、７５％など）を達成する。不確かである場合、リンクを除外することができ、又はユーザに確認するためにプロンプト指示することができる。リンクジェネレータ７１０は、レポート内の所見とイメージ内の注釈との合致に応答して、レポートとイメージの両方についてハイパーリンクなどのリンクを作成する。
【００４０】
一例では、リンクジェネレータ７１０は、解剖学的知識を使用して自動的にリンクを生成する。すなわち、あらゆる注釈について、レポートで述べられる所見及びその位置に注釈を自動的にリンクすることができるように、解剖学的位置を知る必要がある。例えば、リンクジェネレータ７１０は、右肝葉内にあると自動的に判定された測定値に対して所見「右肝葉内の肝細胞癌」に対するリンクを生成することができる。
【００４１】
レポート／イメージリンキングモジュール１２２はレポート／イメージアップデータ７１４をさらに含む。レポート／イメージアップデータ７１４は、レポートにレポートハイパーリンクを追加する。レポートハイパーリンクは、起動されたことに応答して、リンクされたイメージを取り出し、リンクされたイメージを表示することができ、かつ／又はその他の方法で使用することができる。レポート／イメージアップデータ７１４は、イメージにイメージハイパーリンクをさらに追加する。イメージハイパーリンクは、起動されたことに応答して、リンクされたレポートを取り出し、リンクされたレポートを表示することができ、かつ／又はその他の方法で使用することができる。
【００４２】
ハイパーリンクは、例えばマウスを使用してクリックすることによって、入力デバイス１１０を通じた入力を介して起動することができる。このことは、レポート内のハイパーリンクをクリックすることによって、レポートリポジトリ１２０が、注釈に対応するスライスでのイメージを示し、注釈をクリックすることによって、対応するレポートが所見の位置に示されることを意味する。このことは、より古いレポート又は取得が現報告セッションで考慮に入れられる場合に特に役立つ。
【００４３】
一変形形態では、リンクジェネレータ７１０は、例えば、人工心臓弁が常に心臓内にあるが、断裂は軟組織上の注釈に決して対応しないなど、所見と注釈の位置の可能性の高い組合せ及び可能性の低い組合せについて学習することができる。一定の診断と注釈タイプとの組合せ、例えば腫瘍又はステントと直径測定値との組合せ、出血とＨＵ値測定値との組合せ、断裂又は動脈瘤と矢印との組合せについて知ることもできる。
【００４４】
別の一変形形態では、リンクジェネレータ７１０は、いくつかの研究対象にわたる所見をリンクすることができる。そのため現レポート内の腫瘍ハイパーリンクをクリックすることによって、腫瘍が現研究対象内で示されるだけでなく、前の研究対象内でも示される。リンク付けは、ＰＡＣＳ−ＲＩＳ、及び／又は時間的に構築される方式で患者の検査及び所見を示すタイムラインのような他のツールについての所見に対する注釈間のものでよい。
【００４５】
リンクは様々なシナリオで役立つことがある。例えば、いくつかの状況では、レポートがまずレジデントによって書かれ、次いで主治医によって校正される。レポート内のキーワードを、この診断を導いたイメージ内の位置にリンクすることによって、主治医は、レジデントがどのようにその診断に到達したかはっきりしないケースでより容易に把握することができる。このことにより、レポートをより早く、かつ容易に検討することができる。
【００４６】
別の例では、追跡検査シナリオで前のレポートが調べられるとき、ハイパーリンクは、前の診断をより早く理解するのを助けることができ、疑わしい領域のより早い比較も可能にする。別の例では、ハイパーリンクを教育のために使用することができる。ここでもやはり、診断所見と対応するイメージとの間のハイパーリンクは、症例をより早く検討することを助けることができる。
【００４７】
図８は、本明細書の開示による例示的方法を示す。
【００４８】
本明細書に記載の方法の中の動作の順序は限定的なものではないことを理解されたい。したがって、本明細書では他の順序も企図される。さらに、１つ又は複数の動作を省略することができ、かつ／又は１つ又は複数の追加の動作を含めることができる。
【００４９】
８０２では、現診療レポート内のイメージに対する参照が識別され、診療レポートから抽出される。
【００５０】
８０４では、抽出された各参照から組織の識別が決定される。
【００５１】
８０６では、測定が行われたイメージに関連する説明が、抽出された参照のそれぞれから抽出される。
【００５２】
８０８では、測定値のある、参照内のイメージが取り出される。
【００５３】
８１０では、取り出されたイメージが、抽出された参照からの組織の識別に関連付けられる。
【００５４】
８１０では、取り出されたイメージが、参照及び説明と共にイメージウィンドウ内に表示される。
【００５５】
８１２では、入力デバイス１１０を介するユーザ入力に応答して、プロセッサ１０４は、イメージウィンドウ内で選択された情報を、レポート作成／編集ウィンドウ内のレポートに移動する。
【００５６】
上記は、コンピュータ可読記憶媒体上に符号化され、組み込まれたコンピュータ可読命令によって実装され、コンピュータ可読命令は、コンピュータプロセッサによって実行されるとき、記載の動作をプロセッサに実施させる。追加又は代替として、コンピュータ可読命令のうちの少なくとも１つは、信号、搬送波、又は他の一時的媒体によって搬送される。
【００５７】
図９は、本明細書の開示による例示的方法を示す。
【００５８】
９０２では、所見及び対応する解剖学的位置が、診療レポートから抽出される。
【００５９】
９０４では、イメージ内の組織が、本明細書で説明されるように、かつ／又はその他の方法で、解剖学的ラベルでラベル付けされる。
【００６０】
９０６では、イメージ上の注釈が、イメージ内の組織のラベル付けに基づいて解剖学的ラベルでラベル付けされる。
【００６１】
９０８では、所見と注釈が突き合わされる。
【００６２】
９１０では、イメージに対するハイパーリンクが、レポート内の所見の位置に挿入され、レポートに対するハイパーリンクが、イメージの注釈の位置に追加される。
【００６３】
上記は、コンピュータ可読記憶媒体上に符号化され、組み込まれたコンピュータ可読命令によって実装され、コンピュータ可読命令は、コンピュータプロセッサによって実行されるとき、記載の動作をプロセッサに実施させる。追加又は代替として、コンピュータ可読命令のうちの少なくとも１つは、信号、搬送波、又は他の一時的媒体によって搬送される。
【００６４】
好ましい実施形態を参照しながら本発明を説明した。先行する詳細な説明を読み、理解するときに、修正及び変更が他の人に思い浮かぶ。添付の特許請求の範囲又はその均等物の範囲内で、すべてのそのような修正及び変更を含むものとして本発明が構築されるものとする。
【図１】
0006657210.tif 000002
【図２】
0006657210.tif 000003
【図３】
0006657210.tif 000004
【図４】
0006657210.tif 000005
【図５】
0006657210.tif 000006
【図６】
0006657210.tif 000007
【図７】
0006657210.tif 000008
【図８】
0006657210.tif 000009
【図９】
0006657210.tif 000010