(57)【要約】【課題】  関心領域を精度よく設定できる装置を提供する。【解決手段】  第１の医用画像に含まれる第１の関心領域を含む第１のＲＯＩ画像と、第２の医用画像に含まれる第２の関心領域を含む第２のＲＯＩ画像とを取得し、第１のＲＯＩ画像と第２のＲＯＩ画像とに基づいて第３のＲＯＩ画像を生成し、第３の医用画像と第３のＲＯＩ画像とを重畳して表示部に表示させる。【選択図】  図３
2019098167.tif 000002
【特許請求の範囲】
【請求項１】
第１の医用画像に含まれる第１の関心領域を含む第１のＲＯＩ画像と、前記第１の医用画像と異なる第２の医用画像に含まれる第２の関心領域を含む第２のＲＯＩ画像とを取得する取得手段と、
前記第１のＲＯＩ画像と前記第２のＲＯＩ画像とに基づいて第３のＲＯＩ画像を生成する生成手段と、
前記第１の医用画像及び前記第２の医用画像と異なる第３の医用画像と、前記第３のＲＯＩ画像とを重畳して表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項２】
前記生成手段は、前記第１のＲＯＩ画像と前記第２のＲＯＩ画像との差分の領域に基づいて前記第３のＲＯＩ画像を生成することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記第３のＲＯＩ画像は、前記第１のＲＯＩ画像と前記第２のＲＯＩ画像との中間に位置することを特徴とする請求項２に記載の情報処理装置。
【請求項４】
前記生成手段は、前記第１のＲＯＩ画像と前記第２のＲＯＩ画像との差分の領域を示す帯状の領域を第３のＲＯＩ画像として生成することを特徴とする請求項２に記載の情報処理装置。
【請求項５】
前記表示制御手段は、前記第３の医用画像に前記第１のＲＯＩ画像と前記第２のＲＯＩ画像と前記第３のＲＯＩ画像とを重畳して表示させることを特徴とする請求項１乃至請求項４のいずれか１項に記載の情報処理装置。
【請求項６】
前記表示制御手段は、ユーザの操作入力に基づいて前記第３の医用画像に重畳して表示させる画像を切り替え可能に構成されていることを特徴とする請求項１乃至請求項５のいずれか１項に記載の情報処理装置。
【請求項７】
前記表示制御手段は、ユーザの操作入力に基づいて、前記第３の医用画像に重畳して表示されている前記第３のＲＯＩ画像から、前記第１のＲＯＩ画像又は前記第２のＲＯＩ画像のいずれかの画像に切り替えて表示させることを特徴とする請求項６に記載の情報処理装置。
【請求項８】
前記取得手段は外部記憶装置から前記第１のＲＯＩ画像と前記第２のＲＯＩ画像とを取得することを特徴とする請求項１乃至請求項７のいずれか１項に記載の情報処理装置。
【請求項９】
前記取得手段は、外部記憶装置に対して前記第１のＲＯＩ画像が記憶されているかを問い合わせ、
前記問い合わせの結果、前記外部記憶装置に前記第１のＲＯＩ画像が記憶されている場合には、前記取得手段は前記第１のＲＯＩ画像を前記外部記憶装置から取得し、
前記問い合わせの結果、前記外部記憶装置に前記第１のＲＯＩ画像が記憶されていない場合には、前記取得手段は前記第１の医用画像を前記外部記憶装置から取得し、前記生成手段は前記取得された第１の医用画像から前記第１のＲＯＩ画像を生成し、前記生成された第１のＲＯＩ画像に基づいて前記第３のＲＯＩ画像を生成することを特徴とする請求項１乃至請求項８のいずれか１項に記載の情報処理装置。
【請求項１０】
前記第３のＲＯＩ画像に含まれる第３の関心領域に該当する前記第３の医用画像に基づいて、診断指標を取得する診断指標取得部を有する
ことを特徴とする請求項１乃至請求項９のいずれか１項に記載の情報処理装置。
【請求項１１】
前記第１の医用画像は、被検体に照射した超音波が前記被検体の内部で反射した反射波に基づいて撮像された超音波画像であり、
前記第２の医用画像は、磁場中の被検体における核磁気共鳴現象に基づいて撮像されたＭＲＩ画像であり、
前記第３の医用画像は、被検体に光を照射して得られる音響波に基づいて撮像された光音響画像であることを特徴とする請求項１乃至請求項１０のいずれか１項に記載の情報処理装置。
【請求項１２】
前記第３の医用画像が被検体に光を照射して得られる音響波に基づいて撮像された光音響画像である場合に、前記生成手段は前記第３のＲＯＩ画像を生成することを特徴とする請求項１乃至請求項１０のいずれか１項に記載の情報処理装置。
【請求項１３】
前記第３の医用画像が被検体に光を照射して得られる音響波に基づいて撮像された光音響画像である場合に、
前記取得手段は、被検体に照射した超音波が前記被検体の内部で反射した反射波に基づいて撮像された超音波画像から生成されたＲＯＩ画像を前記第１のＲＯＩ画像として取得し、
磁場中の前記被検体に対する核磁気共鳴現象に基づいて撮像されたＭＲＩ画像から生成されたＲＯＩ画像を前記第２のＲＯＩ画像として取得することを特徴とする請求項１乃至請求項１０のいずれか１項に記載の情報処理装置。
【請求項１４】
前記関心領域は、被検体の腫瘍の領域であることを特徴とする請求項１乃至請求項１３のいずれか１項に記載の情報処理装置。
【請求項１５】
第１の医用画像に含まれる第１の関心領域と、前記第１の医用画像とは異なる第２の医用画像に含まれる第２の関心領域とを比較する比較手段と、
前記比較の結果に基づいて、前記第１の関心領域と前記第２の関心領域との差分を示す情報と、前記第１の医用画像及び前記第２の医用画像と異なる前記第３の医用画像とを重畳して表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項１６】
第１の医用画像に含まれる第１の関心領域を含む第１のＲＯＩ画像と、前記第１の医用画像と異なる第２の医用画像に含まれる第２の関心領域を含む第２のＲＯＩ画像とを取得する取得手段と、
前記第１のＲＯＩ画像と前記第２のＲＯＩ画像とに基づいて第３のＲＯＩ画像を生成する生成手段と、
前記第１の医用画像及び前記第２の医用画像と異なる第３の医用画像と、前記第３のＲＯＩ画像とを重畳して表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理システム。
【請求項１７】
第１の医用画像に含まれる関心領域を含む第１のＲＯＩ画像と、前記第１の医用画像と異なる第２の医用画像に含まれる関心領域を含む第２のＲＯＩ画像とを取得する工程と、
前記第１のＲＯＩ画像と前記第２のＲＯＩ画像とに基づいて第３のＲＯＩ画像を生成する工程と、
前記第１の医用画像及び前記第２の医用画像と異なる第３の医用画像と、前記第３のＲＯＩ画像とを重畳して表示部に表示させる工程と、
を有することを特徴とする情報処理方法。
【請求項１８】
第１の医用画像に含まれる第１の関心領域と、前記第１の医用画像とは異なる第２の医用画像に含まれる第２の関心領域とを比較する工程と、
前記比較の結果に基づいて、前記第１の関心領域と前記第２の関心領域との差分を示す情報と、前記第１の医用画像及び前記第２の医用画像と異なる前記第３の医用画像とを重畳して表示部に表示させる工程と、
を有することを特徴とする情報処理方法。
【請求項１９】
請求項１７又は請求項１８に記載の情報処理方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本明細書の開示は、情報処理装置、情報処理システム、情報処理方法およびプログラムに関する。
【背景技術】
【０００２】
医師は医用画像の観察において、例えば病変領域など関心をもって観察する一部の領域を、関心領域（ｒｅｇｉｏｎ  ｏｆ  ｉｎｔｅｒｅｓｔ：ＲＯＩ）として当該医用画像に設定する場合がある。
【０００３】
特許文献１には、複数の医用画像の比較読影を簡便に行うことを目的として、医用画像データから取得した関心領域の画像データを、他の医用画像や、異種のモダリティで収集された医用画像に重畳表示することが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−２３９２１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
医用画像が撮像される状況や撮像装置の原理によって、関心領域の部位が医用画像に描出される態様が、異なる場合がある。このような場合にも、より精度よく関心領域を設定できるように、さらなる改善が求められている。
【課題を解決するための手段】
【０００６】
本発明の実施形態に係る情報処理装置は、第１の医用画像に含まれる第１の関心領域を含む第１のＲＯＩ画像と、前記第１の医用画像と異なる第２の医用画像に含まれる第２の関心領域を含む第２のＲＯＩ画像とを取得する取得手段と、前記第１のＲＯＩ画像と前記第２のＲＯＩ画像とに基づいて第３のＲＯＩ画像を生成する生成手段と、前記第１の医用画像及び前記第２の医用画像と異なる第３の医用画像と、前記第３のＲＯＩ画像とを重畳して表示部に表示させる表示制御手段と、を有することを特徴とする。
【発明の効果】
【０００７】
本発明の実施形態に係る情報処理装置によれば、医用画像における関心領域をより精度よく表示することができる。
【図面の簡単な説明】
【０００８】
【図１】比較例に係る医用画像の表示例。
【図２】第１の実施形態に係る情報処理装置の機能構成の一例を示すブロック図。
【図３】第１の実施形態に係る情報処理装置により行われる処理の一例を示すフロー図。
【図４】第１の実施形態に係る情報処理装置により表示される画面の一例を示す図。
【図５】第２の実施形態に係る情報処理装置により行われる処理の一例を示すフロー図。
【図６】第３の実施形態に係る情報処理装置の機能構成の一例を示すブロック図。
【図７】第３の実施形態に係る情報処理装置により行われる処理の一例を示すフロー図。
【発明を実施するための形態】
【０００９】
［第１の実施形態］
医用画像撮像装置（以下、モダリティと称する。）により生成されたボリュームデータに基づいた画像を表示するイメージング技術として、超音波イメージング、核磁気共鳴イメージング、光音響イメージングなどがある。
【００１０】
超音波イメージングは、被検体に照射された超音波が被検体内で反射し、戻ってきた超音波に基づいて組織の形状や性状を画像化するものである。より具体的には、超音波イメージングは、被検体に照射された超音波が生体内の組織の境界で反射される、エコー信号の強弱に基づいて、周辺組織と異なる組織を、周辺組織と異なる輝度で画像化する。超音波イメージングにより取得された画像を、以下では超音波画像と称する。本実施形態においては、超音波画像の一例として、乳房に対する超音波ビームの走査に合わせて形成された断層像である、乳房のＢモード画像を用いて説明する。
【００１１】
核磁気共鳴イメージング（以下、ＭＲＩと称する。）は、一定の磁場中におかれた被検体に対してラジオ波を照射して生じる磁気共鳴現象を利用して、組織の磁気的性質の違いを画像化するものである。ＭＲＩにより取得された画像を、以下ではＭＲＩ画像と称する。本実施形態においては、ＭＲＩ画像の一例として、ガドリニウム造影剤を用いてＭＲＩマンモグラフィにより撮像された乳房の断層像を用いて説明する。
【００１２】
光音響イメージングは、光源から発生したパルス光を生体に照射し、生体内で伝播・拡散したパルス光のエネルギーを吸収した生体組織から発生した光音響波を検出して当該パルス光のエネルギーを吸収した生体組織（光吸収体）の空間分布を画像化するものである。光音響イメージングでは、腫瘍などの被検部位とそれ以外の組織との光エネルギーの吸収率の差を利用し、被検部位が照射された光エネルギーを吸収して瞬間的に膨張する際に発生する弾性波（光音響波）をトランスデューサで受信する。より具体的には、光音響イメージングは、光音響波の発生音圧（初期音圧）、光吸収エネルギー密度、及び光吸収係数、生体を構成する物質の濃度（酸素飽和度など）などの少なくとも一つの生体情報の３次元空間分布を表すボリュームデータを取得する。光音響イメージングにより、被検体内部の光学特性に応じた、様々な種類の画像を得ることができる。光音響イメージングにより取得された画像を、以下では光音響画像と称する。例えば、光音響画像には吸収密度分布を示す吸収係数画像が含まれる。また、吸収係数画像から、酸化ヘモグロビン、還元ヘモグロビン、水、脂肪、コラーゲンといった生体分子の存在や、比率等を示す画像が生成される。例えば、酸化ヘモグロビンと還元ヘモグロビンとの比率に基づいて、ヘモグロビンの酸素との結合状況を示す指標である酸素飽和度に関する画像が得られる。本実施形態においては、光音響画像の一例として乳房における血管を画像化した断層像を用いて説明する。また、以下では超音波と光音響波とを音響波と称する場合がある。
【００１３】
また近年では、上述の各種の医用画像を含め、診断に用いられる医用画像や診断に関する各種の情報が電子化されている。医用画像を撮像する装置と、当該装置と接続される各種の装置との間の情報連携のために、例えばＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ  ｉｎ  Ｍｅｄｉｃｉｎｅ）規格が用いられることが多い。ＤＩＣＯＭは医用画像のフォーマットと、それらの画像を扱う装置間の通信プロトコルを定義した規格である。ＤＩＣＯＭに基づいてやりとりされる対象となるデータは情報オブジェクト（ＩＯＤ：Ｉｎｆｏｒｍａｔｉｏｎ  Ｏｂｊｅｃｔ  Ｄｅｆｉｎｉｔｉｏｎｓ）と呼ばれる。以下では、情報オブジェクトをＩＯＤ、或いはオブジェクトと称する場合がある。ＩＯＤの例としては、医用画像、患者情報、検査情報、構造化レポート等が挙げられ、医用画像を用いた検査や治療にかかわる様々なデータがその対象となり得る。
【００１４】
ＤＩＣＯＭに基づいて取り扱われる画像、すなわちＩＯＤである画像は、付帯情報と画像データとで構成される。付帯情報には、例えば患者、検査、シリーズ、画像に関する情報が含まれる。付帯情報はＤＩＣＯＭデータエレメントと呼ばれるデータ要素の集まりで構成される。各々のＤＩＣＯＭデータエレメントにはデータ要素を識別するためのタグが付加される。ＤＩＣＯＭデータエレメントの一例である、ピクセルデータ（画像データ）には、画像データであることを示すタグが付加される。付帯情報のそれぞれにおいても、例えば患者氏名には、患者氏名であることを示すタグが付加される。当該付帯情報と当該画像データをＤＩＣＯＭデータセットとする場合、ＩＯＤは当該ＤＩＣＯＭデータセットに対するＤＩＣＯＭファイルメタ情報をさらに含んでもよい。ＤＩＣＯＭファイルメタ情報は、例えばＩＯＤ（ＤＩＣＯＭファイル）を作成したアプリケーションの情報を含む。
【００１５】
医師は、例えば乳房を撮像した医用画像を観察し、腫瘍と考えられる部位を関心領域として設定する。造影剤を用いて取得された画像では、関心領域を腫瘍領域とした場合に、関心領域が実際の生体内の腫瘍領域よりも大きく設定される傾向がある。これは、腫瘍領域では腫瘍血管などから造影剤が周囲に染み出すことによると考えられる。また、超音波診断装置で収集された超音波画像を用いると、腫瘍領域と同程度の大きさの関心領域が設定される傾向にある。しかしながら、超音波画像では、腫瘍領域の後方境界が不鮮明となることがあり、関心領域が小さく設定される場合もある。
【００１６】
図１（ａ）〜（ｃ）は、同じ被検体を異なるモダリティによりそれぞれ取得した医用画像の一例を示す図である。図１（ａ）は、血管１０１を画像化した光音響画像１２０である。血管１０１は、血管内の血液中に存在するヘモグロビンの吸収係数を画像輝度として表示させたものである。図１（ｂ）は、腫瘍１１１が描出された超音波画像１００である。図１（ｃ）は、造影剤により腫瘍１２１を強調して画像化したＭＲＩ画像１１０である。
【００１７】
図１（ａ）から分かるように、血管１０１を描出する光音響画像１２０のみでは、腫瘍の領域を確定することが難しい場合がある。これは、光音響画像１２０が腫瘍組織の情報を反映しない場合があるためである。このため、光音響画像１２０を用いて腫瘍の周辺や内部で血管新生により発生した血管を把握するためには、光音響画像１２０と、超音波画像１００やＭＲＩ画像１１０などの腫瘍が画像化されている画像とを比較する場合がある。複数の医用画像を比較する手法は、例えば複数の医用画像を並列に表示させる手法や、重畳表示が挙げられる。例えば、乳がんを含む乳房を被検体とした場合、乳房内および乳がんに関連する血管を表示する光音響画像と、乳がんの腫瘍領域を表示する超音波画像やＭＲＩ画像とを取得する。取得した光音響画像１００と、超音波画像１００やＭＲＩ画像１１０などを重畳表示して、情報を補完する方法があるが、互いの画像の輝度が干渉し合うため、それぞれの画像の視認性が低下する場合がある。
【００１８】
また別の方法として、医用画像における腫瘍領域に対する関心領域を含む画像データを生成して、当該医用画像に重畳表示する方法がある。本実施形態においてはＲＯＩとして医用画像における腫瘍領域を抽出した領域である場合を例に説明する。また、以下ではＲＯＩを含む画像データをＲＯＩ画像と称する。図１（ｂ）のＲＯＩ画像１３０は、超音波画像１００の腫瘍１１１の領域から抽出した、ＲＯＩ１３１を含むボリュームデータである。また、図１（ｃ）のＲＯＩ画像１４０は、ＭＲＩ画像１１０の腫瘍１２１の領域から抽出した、ＲＯＩ１４１を含むボリュームデータである。
【００１９】
ここで、ＲＯＩ１３１とＲＯＩ１４１は同じ生体の腫瘍から生成したＲＯＩであるにも関わらず、ＲＯＩの大きさが異なることが分かる。具体的には、ＲＯＩ１４１の方がＲＯＩ１３１よりも大きくなっている。これは、超音波画像１００とＭＲＩ画像１１０の特徴の差によるものである。超音波画像１００では、腫瘍１１１は前述のとおり実際の腫瘍と同程度の大きさで画像化される場合が多いが、超音波画像上で画像化される腫瘍の境界は不鮮明な場合が多く、誤検出される場合もある。具体的には、腫瘍表面の凹凸等の影響を受けて、実際の腫瘍よりも小さく画像化されることがある。超音波画像１００の腫瘍１１１は、実施の腫瘍よりも小さく画像化された例であり、ＲＯＩ１３１も実際の腫瘍よりも小さい大きさとなっている。ＭＲＩ画像１１０では、腫瘍１２１は実際の腫瘍よりも大きく画像化されることが多い。これは、腫瘍内に注入された造影剤が、時間経過とともに周辺組織へ染み出すことが、理由と考えられる。
【００２０】
図１（ａ）に、光音響画像１２０にＲＯＩ１３１とＲＯＩ１４１を重畳表示した例を併せて示している。図から分かるように、同じ腫瘍に対して抽出された二つのＲＯＩが、異なる大きさで光音響画像１００に表示されていることが分かる。つまり、ユーザが例えば光音響画像とＲＯＩを併せて観察する際、ＲＯＩ画像を生成するのに用いた医用画像によって、光音響画像を観察する医師にとって観察対象となる腫瘍の大きさが異なって見えるおそれがある。
【００２１】
本実施形態に係る情報処理装置は、異なる複数のモダリティで取得された医用画像から抽出されたＲＯＩに基づいて、新たにＲＯＩを生成する。これにより、複数のモダリティにおいてＲＯＩとして設定されるべき領域が描出される態様が異なっていても、ＲＯＩを精度よく設定できるようにすることを目的とする。
【００２２】
以下に図面を参照しつつ、本実施形態について説明する。ただし、以下に記載されている構成部品の寸法、材質、形状およびそれらの相対配置などは、発明が適用される装置の構成や各種条件により適宜変更されるべきものであり、本発明の範囲を以下の記載に限定する趣旨のものではない。
【００２３】
第１の実施形態は、光音響画像に、第１のＲＯＩと第２のＲＯＩの差分領域の中間値から生成した、第３のＲＯＩを示す画像を光音響画像に重畳表示する、情報処理装置２００の例を説明する。
【００２４】
＜情報処理装置２００の構成＞
図２は第１の実施形態に係る情報処理装置２００の機能構成の一例を示す図である。情報処理装置２００は、記憶部２２０、ＲＯＩ生成部２３０、表示制御部２４０、ユーザ指示取得部２６０を有する。また、情報処理装置２００は外部記憶部２１０及び表示部２５０と接続されている。
【００２５】
＜＜外部記憶部２１０＞＞
外部記憶部２１０は、様々なモダリティによりそれぞれ取得された、複数の医用画像を記憶する。外部記憶部２１０は、情報処理装置２００の外部に配置されている。本実施形態において外部記憶部２１０は、サーバなどの記録媒体から構成され、通信ネットワークに接続されている。外部記憶部２１０は、例えばＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍ）である。
【００２６】
本実施形態において外部記憶部２１０は、それぞれ異なるモダリティにより取得された第１の医用画像１００と第２の医用画像１１０と第３の医用画像１２０とを少なくとも記憶する。第１の医用画像１００は例えば超音波画像であり、第２の医用画像１１０は例えばＭＲＩ画像であり、第３の医用画像１２０は例えば光音響画像である。
【００２７】
本実施形態において、第１の医用画像１００、第２の医用画像１１０、第３の医用画像１２０はそれぞれＤＩＣＯＭ規格に則って記憶される。これらの医用画像はそれぞれが取得されたモダリティにより、撮像時の被検体の体位が異なるため、それぞれの医用画像の位置情報が異なる場合がある。この場合は、少なくともいずれか一つの医用画像を変形する処理を行って、位置情報を合わせることができる。以下では、位置情報を合わせるために少なくともいずれか一つの医用画像を変形する処理を位置合わせと称する。本実施形態において、第１の医用画像１００、第２の医用画像１１０、第３の医用画像１２０は予め位置合わせされているものとする。
【００２８】
また、外部記憶部２１０は第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とを記憶する。第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０は、異なるモダリティで取得された医用画像を用いて生成されたＲＯＩ画像である。本実施形態では、第１のＲＯＩ画像１５０は第１の医用画像１００を用いて生成されたＲＯＩ画像であり、第２のＲＯＩ画像１６０は第２の医用画像１１０を用いて生成されたＲＯＩ画像である。本実施形態では、位置合わせされた医用画像を元に生成された、ＲＯＩを含むボリュームデータである第１のＲＯＩ画像１５０、第２のＲＯＩ画像１６０がそれぞれ記憶される。すなわち、本実施形態において第１のＲＯＩ画像１５０と第２のＲＯＩ画像は、第１の医用画像１００及び第２の医用画像１１０と同じボリュームサイズを有していて、ボリューム内にＲＯＩの情報のみが格納されている画像となる。
【００２９】
本実施形態において、第１のＲＯＩ画像１５０、第２のＲＯＩ画像１６０は、ＤＩＣＯＭ規格に則って記憶される。第１のＲＯＩ画像１５０は、第１のＲＯＩ画像１５０を生成するのに用いられた医用情報である第１の医用画像１００の付帯情報を有していてもよい。例えば、第１のＲＯＩ画像１５０は、第１の医用画像１００を取得したモダリティの情報を付帯情報に有していてもよい。それぞれの抽出元の生体情報画像のモダリティ情報を画像に格納することができる。例えば、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０がＤＩＣＯＭ画像であった場合、ＤＩＣＯＭ画像のヘッダー情報内に任意のタグ番号に対応したデータ要素として、モダリティ情報を格納することができる。ユーザは、このヘッダー情報を参照することで、ＲＯＩ画像の抽出元の生体情報画像のモダリティ情報を確認することができる。
【００３０】
＜＜記憶部２２０＞＞
記憶部２２０は、ハードディスクやフラッシュメモリなどの記録媒体から構成される。外部記憶部２１０から通信ネットワークを介して、医用画像やＲＯＩ画像を取り込み保存する。本実施形態においては、記憶部２２０は医師などのユーザが観察の対象として選択した第３の医用画像１２０と、ユーザが指定したＲＯＩ画像（第１のＲＯＩ画像１５０、第２のＲＯＩ画像１６０）とを外部記憶部２１０から取得する。記憶部２２０は、ユーザの操作入力に応じて、記憶しているデータやファイルを外部記憶部２１０に出力してもよい。
【００３１】
＜＜ＲＯＩ生成部２３０＞＞
ＲＯＩ生成部２３０は、第３のＲＯＩ画像１７０を生成する。ＲＯＩ生成部２３０としての画像処理機能を担うユニットは、ＣＰＵやＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等のプロセッサ、ＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）チップ等の演算回路で構成される。これらのユニットは、単一のプロセッサや演算回路から構成されるだけでなく、複数のプロセッサや演算回路から構成されていてもよい。本実施形態において、プロセッサと称する場合にＦＰＧＡを含んでよい。
【００３２】
ＲＯＩ生成部２３０は、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とに基づいて、第３のＲＯＩ画像１７０を生成する。ＲＯＩ生成部２３０は、ユーザによって選択された医用画像と対応するＲＯＩ画像を取得する。ＲＯＩ生成部２３０は、取得した第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０との差分領域から、第３のＲＯＩ画像１７０を生成する。本実施形態においては、ＲＯＩ生成部２３０は差分領域の中間値に基づいて第３のＲＯＩ画像１７０を生成する。例えば、第１のＲＯＩ画像の重心から放射状に線を引き、第１のＲＯＩ画像の外縁と第２のＲＯＩ画像の外縁に交わる線分の中点を当該中間値とする。第２のＲＯＩ画像の重心から放射状に線を引き、第２のＲＯＩ画像の外縁と第１のＲＯＩ画像の外縁に交わる線分の中点を当該中間値としてもよい。別の実施形態では、ＲＯＩ生成部２３０は第２のＲＯＩ画像から第１のＲＯＩ画像を差分した差分領域において、第１のＲＯＩ画像の外縁の各点から、当該各点からの法線が第２のＲＯＩ画像の外縁と交わる点までの線分の中点を当該中間値とする。それぞれの中点からなる面が第３のＲＯＩ画像の外縁となる。本実施形態において、第３のＲＯＩ画像は中間値に基づいて生成された外縁のみを有するアノテーション画像である。
【００３３】
ＲＯＩ生成部２３０は、条件取得部２６１が受け付けたユーザの条件に基づいて、第３のＲＯＩ画像１７０を生成してもよい。また、ＲＯＩ生成部２３０で生成された第３のＲＯＩ画像１７０は、記憶部２２０へ保存されてもよい。保存される場合は、第３のＲＯＩ画像１７０が重畳して表示される第３の医用画像と関連づけて保存されてもよいし、第３のＲＯＩ画像を生成するのに用いられた第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０との少なくともいずれか一方に関連づけて保存されてもよい。
【００３４】
＜＜表示制御部２４０＞＞
表示制御部２４０は、集積回路やビデオＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などで構成される。表示制御部２４０は、信号取得部２６２からのユーザ指示を示す信号を受けて、表示部２５０へ表示する医用画像や、当該医用画像に重畳表示するＲＯＩ画像などの表示内容を制御する。また、表示制御部２４０はボリュームデータに基づいた画像を操作するためのＧＵＩを表示部２５０に表示させてもよい。
【００３５】
＜＜表示部２５０＞＞
表示部２５０は、例えば液晶ディスプレイや有機ＥＬ（Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）、ＦＥＤ（Ｆｉｅｌｄ  Ｅｍｉｓｓｉｏｎ  Ｄｉｓｐｌａｙ）、メガネ型ディスプレイ、ヘッドマウントディスプレイなどのディスプレイである。表示部２５０は情報処理装置２００と接続されている。表示部２５０は表示制御部２４０からの制御に基づいて、医用画像やＲＯＩ画像を表示する。
【００３６】
＜＜ユーザ指示取得部２６０＞＞
ユーザ指示取得部２６０は、条件取得部２６１と信号取得部２６２とを含む。条件取得部２６１は、ＲＯＩ生成部２３０が第３のＲＯＩ画像１７０を生成するための条件や、表示制御部２４０で制御する表示内容に関するユーザ入力を取得する。条件取得部２６１は、例えばこれらの条件が記載されたテキストファイルなどを保存する。別の実施形態では、条件取得部２６１は表示制御部２４０を介して表示部２５０に、ユーザが条件を入力するためのＧＵＩを表示させてもよい。
【００３７】
信号取得部２６２は、入力部（不図示）を介してユーザにより入力される信号を取得する。入力部（不図示）は、例えばマウス、キーボード、タッチパネル、ジョイスティック、スイッチボックス、音声を含む音を受信するマイクや、特定のジェスチャーを受け付ける入力部などである。入力部（不図示）は、情報処理装置２００に接続されている。
【００３８】
図３は、情報処理装置２００により行われる処理の一例を示すフローチャートである。
【００３９】
（Ｓ３１０：観察対象の医用画像を取得する工程）
記憶部２２０は、ユーザの選択に基づいて外部記憶部２１０から医用画像を取得する。本実施形態では、光音響画像である第３の医用画像１２０をユーザが観察対象として選択したものとする。
【００４０】
（Ｓ３２０：第１のＲＯＩ画像を取得する工程）
記憶部２２０は、ユーザの選択に基づいて第１のＲＯＩ画像１５０として、超音波画像である第１の医用画像１００を元に生成されたＲＯＩを含むボリュームデータを取得する。第１のＲＯＩ画像１５０は複数の断層画像が連続した画像であってもよい。
【００４１】
（Ｓ３３０：第２のＲＯＩ画像を取得する工程）
記憶部２２０は、ユーザの選択に基づいて第２のＲＯＩ画像１６０として、ＭＲＩ画像である第２の医用画像１１０を元に生成されたＲＯＩを含むボリュームデータを取得する。第２のＲＯＩ画像１６０は、複数の断層画像が連続した画像であってもよい。
【００４２】
（Ｓ３４０：医用画像を表示する工程）
工程Ｓ３１０で取得された第３の医用画像１２０が、表示制御部２４０により表示部２５０に表示される。ユーザは入力部（不図示）を介して操作入力を行い、当該操作入力を示す信号を信号取得部２６２が取得して表示制御部２４０へ信号を入力し、医用画像１００の表示部２５０への表示を制御してもよい。
【００４３】
（Ｓ３５０：第１のＲＯＩ画像と第２のＲＯＩ画像とを観察対象の医用画像に重畳表示する工程）
工程Ｓ３２０で取得された第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とが、表示制御部２４０により、表示部２５０に表示されている第３の医用画像１２０へ重畳表示される。図４（ａ）に、光音響画像である第３の医用画像１２０に、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とを重畳表示した表示例を示す。ここで重畳表示される第１のＲＯＩ画像１５０及び第２のＲＯＩ画像１６０はＲＯＩの輪郭のみを示すアノテーション画像である。ユーザの操作入力を信号取得部２６２が取得して表示制御部２４０に信号を入力することで、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０を重畳表示してもよい。
【００４４】
（Ｓ３６０：ユーザ指示条件を取得する工程）
条件取得部２６１は、第３のＲＯＩ画像１７０を生成するための条件をユーザ指示条件として、ユーザの操作入力に基づいて取得する。ユーザは、第３のＲＯＩ画像１７０は、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０との差分領域から生成されるが、どちらの画像を元画像とし、どちらの画像を差し引くかをユーザ指示条件として情報処理装置２００に入力することができる。ユーザは、表示部２５０に表示されている二つのＲＯＩ画像の関係を確認した上で、ユーザ指示条件を入力することができる。またユーザは、当該差分領域内における第３のＲＯＩ画像１７０の位置をユーザ指示条件として入力することができる。また表示制御部２４０は、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０のそれぞれのモダリティ情報を表示部２５０に表示させ、ユーザは当該モダリティ情報を確認して、第３のＲＯＩ画像１７０の位置をユーザ指示条件として入力することができる。
【００４５】
本実施形態では、第２のＲＯＩ画像１６０から第１のＲＯＩ画像１５０を差し引いた差分領域の中間値を第３のＲＯＩ画像１７０の位置とする場合を例に説明する。第３のＲＯＩ画像１７０を生成するための条件は上記に限らず、例えば、第３のＲＯＩ画像１７０を、第２のＲＯＩ画像１６０から第１のＲＯＩ画像１５０を差し引いた、帯状の領域としてもよい。
【００４６】
（Ｓ３７０：第３のＲＯＩ画像を生成する工程）
工程Ｓ３２０と工程Ｓ３３０とでそれぞれ取得されたＲＯＩ画像と、工程Ｓ３６０で取得されたユーザ指示条件とに基づいて、ＲＯＩ生成部２３０は第３のＲＯＩ画像１７０を生成する。一つの実施形態において、生成された第３のＲＯＩ画像１７０も、医用画像１００〜１３０と同じボリュームサイズを有するボリュームデータである。第３のＲＯＩ画像１７０は複数の断層画像が連続した画像であってもよい。また、第３のＲＯＩ画像１７０は生成に用いられた画像に関する情報を、付帯情報あるいは画像内（たとえばアノテーションとして）に有していてもよい。例えば、第３のＲＯＩ画像１７０がＤＩＣＯＭ画像であった場合、ＤＩＣＯＭ画像のヘッダー情報内に任意のタグ番号に対応したデータ要素として、生成に用いられた画像に関する情報を格納することができる。
【００４７】
（Ｓ３８０：第３のＲＯＩ画像を観察対象の医用画像に重畳表示する工程）
表示制御部２４０は、工程Ｓ３７０で生成された第３のＲＯＩ画像１７０を医用画像１３０に重畳表示する。図４（ｂ）に、図４（ａ）の表示に第３のＲＯＩ画像１７０を重畳表示した表示例を示す。信号取得部２６２は入力部（不図示）を介したユーザの操作入力を示す信号を取得して表示制御部２４０に入力することで、第３のＲＯＩ画像１７０を重畳表示してもよい。
【００４８】
以上により、第１の実施形態に係る情報処理装置２００は第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０に基づいて生成された第３のＲＯＩ画像１７０を観察対象の医用画像である第３の医用画像１２０へ重畳表示する。すなわち、医用画像が取得されたモダリティの違いによりＲＯＩの大きさが異なっている場合にも、情報処理装置２００は精度よくＲＯＩを設定し、ＲＯＩ画像としてユーザに提示する。ユーザは、実際の腫瘍領域により近いと考えられるＲＯＩの位置をＲＯＩ画像により確認することができる。
【００４９】
［第２の実施形態］
第２の実施形態に係る情報処理装置２００は、観察対象の医用画像に複数のＲＯＩ画像を重畳表示させ、ユーザからの指示に応じて、表示するＲＯＩ画像を切り替える。
【００５０】
第２の実施形態に係る情報処理装置２００の機能構成及びハードウェア構成は第１の実施形態において説明したのと同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００５１】
図５は、本実施形態に係る情報処理装置の処理の一例を示すフローチャートである。工程Ｓ５１０〜Ｓ５８０は、それぞれ図３に示す工程Ｓ３１０〜３８０と同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。第１の実施形態と異なる点は工程Ｓ５９０で、ユーザ指示に応じて表示するＲＯＩ画像を切り替える工程が追加されている。
【００５２】
（Ｓ５９０：ユーザ指示に応じて表示するＲＯＩ画像を切り替える工程）
表示制御部２４０は、ユーザの操作入力に応じて、観察対象である医用画像に重畳して表示させるＲＯＩ画像を切り替えて表示する。より具体的には、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０、第３のＲＯＩ画像１７０のいずれか１つのＲＯＩ画像が、ユーザの操作入力に応じて、切り替えて第３の医用画像１２０に重畳表示される。ユーザは入力部（不図示）を介して操作入力を行い、信号取得部２６２は当該操作入力を示す信号を取得して表示制御部２４０に入力する。表示制御部２４０は信号取得部２６２から入力される信号に応じて、表示部２５０に表示するＲＯＩ画像を切り替える。一つの実施形態において入力部（不図示）はマウスであり、マウスのボタンに表示切替え機能を割り当てる。例えば、マウスの左ボタンにＲＯＩ画像の非表示機能、右ボタンにＲＯＩ画像の表示機能を割り当てることができる。信号取得部２６２は、マウスの左ボタンのクリックに伴う信号を取得し、表示制御部２４０はクリック時に表示部２５０に表示されているＲＯＩ画像を非表示にする。また信号取得部２６２は、マウスの右ボタンのクリックに伴う信号を取得し、表示制御部２４０は表示部２５０に、クリック時に表示されているＲＯＩ画像とは異なるＲＯＩ画像を表示させる。例えば、右クリックが行われる毎に表示制御部２４０は、第３のＲＯＩ画像１７０、第１のＲＯＩ画像１５０、第２のＲＯＩ画像１６０の順に切り替えて表示部２５０に表示させる。クリック時にＲＯＩ画像が非表示である場合には、表示制御部２４０は表示部２５０に非表示の処理が行われた際のＲＯＩ画像を表示させる。表示制御部２４０は、ＲＯＩ画像を非表示にする方法として、所定の時間内で表示輝度が減少していくフェードアウト表示を行ってもよい。このとき条件取得部２６１は、フェードアウトに要する時間をユーザ指示条件としてユーザの入力する条件を取得することができる。また別の実施形態では、信号取得部２６２は表示部２５０にＧＵＩを表示させ、表示制御部２４０は当該ＧＵＩを介した操作入力に基づいて表示するＲＯＩ画像を切り替えてもよい。
【００５３】
以上により、第２の実施形態に係る情報処理装置２００は異なる複数のモダリティにより取得されたＲＯＩの位置や、生成されたＲＯＩ画像による実際の腫瘍領域に近いＲＯＩの位置について、ＲＯＩ画像の表示を切り替えて表示する。これにより、医師などのユーザは、ＲＯＩ画像を観察対象の医用画像に重畳表示しないで当該医用画像の観察を行うことができ、かつ、所望のＲＯＩ画像の重畳表示により複数のＲＯＩ画像及び観察対象の医用画像との関係性を確認することができる。
【００５４】
［第３の実施形態］
第３の実施形態に係る情報処理装置２００は、第３のＲＯＩ画像を第１のＲＯＩ画像と第２のＲＯＩ画像の差分から生成される帯状の領域を示す画像とし、その画像領域内に表示される医用画像の領域から診断指標を取得して表示する。
【００５５】
＜情報処理装置の構成＞
図６は、本実施形態に係る情報処理装置の機能構成の一例を示す図である。第１の実施形態及び第２の実施形態と共通する機能構成については、図２と同様の符号を付し、上述した説明を援用することによりここでの詳しい説明を省略する。第１の実施形態及び第２の実施形態との差異は、診断指標取得部２７０が設けられている点である。
【００５６】
＜＜ＲＯＩ生成部２３０＞＞
ＲＯＩ生成部２３０は、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とに基づいて、第３のＲＯＩ画像１７０を生成する。第３の実施形態においては、第３のＲＯＩ画像は第１のＲＯＩ画像と第２のＲＯＩ画像の差分から生成される帯状の領域を有するボリュームデータである。この帯状の画像領域は、実際の腫瘍の境界位置を中心として、腫瘍外側の腫瘍周辺部や腫瘍内側を含む領域となる。
【００５７】
＜＜診断指標取得部２７０＞＞
診断指標取得部２７０は、観察対象の医用画像に対する画像処理により、医師の診断の補助となるような診断指標を取得する。診断指標取得部２７０は、ＣＰＵやＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等のプロセッサ、ＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）チップ等の演算回路で構成される。診断指標取得部２７０は、ＲＯＩ生成部２３０と統合されてもよい。
【００５８】
観察対象の医用画像として光音響画像を用いる場合、例えば第３のＲＯＩ画像１７０の画像領域に該当する第３の医用画像１２０の領域内に存在する、血管の本数を診断指標として取得することができる。診断指標取得部２７０は、光音響画像から血管を抽出し、抽出された血管本数を診断指標としてカウントする。一つの実施形態において診断指標取得部２７０は診断指標として、第３のＲＯＩ画像１７０の画像領域に該当する第３の医用画像１２０の領域内の血管分布情報を取得する。血管分布情報は、例えば第３のＲＯＩ画像１７０の画像領域に該当する第３の医用画像１２０の領域内における血管の粗密の程度を示す情報である。一つの実施形態において診断指標取得部２７０は診断指標として、取得された血管の血管径の情報を取得する。
【００５９】
腫瘍周辺では血管新生により血管が発生して腫瘍に向かって集簇することが知られている。また、腫瘍周辺から腫瘍内部に入ると血管径が細くなることも知られている。また、上記の血管本数に関する診断指標においては、血管本数が多いほど腫瘍（ＲＯＩ）の悪性度が高いと考えられる。また、血管本数が所定の値より多い場合に、血管径に関する診断指標においては、血管系が細いほど、腫瘍（ＲＯＩ）の悪性度が高いと考えられる。
【００６０】
一つの実施形態において診断指標取得部２７０は診断指標として、光音響画像である酸素飽和度画像に基づいて血管の酸素飽和度を取得する。診断指標は、血管１本毎の酸素飽和度、酸素飽和度別の血管本数頻度、第３のＲＯＩ画像１７０の領域における酸素飽和度分布情報などである。腫瘍が活発に酸素を取り込むため、腫瘍周辺では酸素飽和度が低下傾向にあることが知られている。上記の酸素飽和度に関する診断指標においては、腫瘍の周辺領域すなわち第３のＲＯＩ画像の領域において酸素飽和度が低いほど、腫瘍（ＲＯＩ）の悪性度が高いと考えられる。なお、上記の診断指標はそれぞれ一例であり、上記の例に限定されない。本実施形態の第３のＲＯＩ画像１７０は、上記の血管の変化が起きやすい領域を包含した画像領域を持つ。
【００６１】
図７は第３の実施形態に係る情報処理装置２００により行われる処理の一例を示すフローチャートである。工程Ｓ７１０〜Ｓ７６０はそれぞれ、図３に示す工程Ｓ３１０〜３６０と同様であり、工程Ｓ７９０は工程Ｓ３８０と同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００６２】
（Ｓ７７０：第３のＲＯＩ画像を生成する工程）
ＲＯＩ生成部２３０は、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０との差分領域から、第３のＲＯＩ画像１７０を生成する。本実施形態において第３のＲＯＩ画像１７０は、帯状の画像領域を有する。
【００６３】
（Ｓ７８０：診断指標を取得する工程）
診断指標取得部２７０は、第３のＲＯＩ画像１７０の画像領域に該当する、第３の医用画像１２０の領域から診断指標を取得する。本実施形態では、診断指標取得部２７０が血管の本数と画像領域内での分布情報とを取得する場合を例に説明する。ユーザが光音響画像である第３の医用画像１２０に酸素飽和度画像が追加する場合、診断指標取得部２７０は取得された各血管に対応する酸素飽和度を併せて取得してもよい。
【００６４】
（Ｓ８００：診断指標を表示する工程）
表示制御部２４０は、工程Ｓ７８０で取得された診断指標を表示部２５０に表示する。本実施形態では、表示制御部２４０は第３の医用画像１２０に診断指標を重畳表示する。表示制御部２４０は取得された血管本数を生体情報画像の画像領域外に表示してもよい。また表示制御部２４０は、取得された血管本数を血管径に対応するヒストグラムとして表示してもよい。表示制御部２４０は、血管本数の分布情報を第３の画像領域１７０上に等高線図として表示してもよい。本実施形態で、光音響画像として酸素飽和度画像を用いた場合、表示制御部２４０は第３のＲＯＩ画像１７０の画像領域上に酸素飽和度分布を等高線図として表示してもよい。
【００６５】
上記等高線図を表示する場合に、表示制御部２４０は第１の実施形態に記載の第３のＲＯＩ画像１７０（図４（ｂ））を重畳表示してもよい。これにより、ユーザは診断指標を腫瘍位置に照らし合わせて確認することができる。
【００６６】
以上により、第３の実施形態に係る情報処理装置２００は第３のＲＯＩ画像を生成し、第３のＲＯＩ画像で示される腫瘍周辺の領域に基づいてから診断指標を取得して表示する。
【００６７】
［変形例］
医用画像の例として超音波画像、ＭＲＩ画像、光音響画像の３種を説明したが、本発明の対象はこれに限定されるものではない。対象とする医用画像は、ＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）装置、デジタルラジオグラフィ、ＳＰＥＣＴ（Ｓｉｎｇｌｅ  Ｐｈｏｔｏｎ  Ｅｍｉｓｓｉｏｎ  ＣＴ）装置、ＰＥＴ（Ｐｏｓｉｔｒｏｎ  Ｅｍｉｓｓｉｏｎ  Ｔｏｍｏｇｒａｐｈｙ）装置、眼底カメラといった撮像装置の少なくともいずれかを用いて取得された医用画像でもよい。対象とする病変は腫瘍に限らず、被検体のいかなる部位の病変であってよい。
【００６８】
それぞれ異なるモダリティで取得された医用画像を第１の医用画像、第２の医用画像、第３の医用画像として用いる場合を例に説明したが、本発明はこれに限らない。例えば同じモダリティで取得された医用画像であって、画像化の手法が異なる医用画像を用いてもよい。同じモダリティで取得された医用画像であっても、造影剤の使用の有無や、取得された信号を画像化する手法の違いによって、腫瘍などの関心領域の描出のされ方が異なる場合が考えられる。したがって、造影剤を用いて撮像されたＭＲＩ画像を第１の医用画像とし、造影剤を用いないで撮像されたＭＲＩ画像を第２の医用画像とし、それぞれ第１のＲＯＩ画像と第２のＲＯＩ画像とを取得してもよい。そして、第３の医用画像を例えばＣＴ画像とし、第１のＲＯＩ画像と第２のＲＯＩ画像とに基づいて取得された第３のＲＯＩ画像と第３の医用画像とを重畳して表示させてもよい。すなわち、第３の医用画像は第１の医用画像及び第２の医用画像とは異なる原理により取得された医用画像であればよい。
【００６９】
記憶部２２０は、ユーザが指定した医用画像（第３の医用画像）に含まれる付帯情報に基づいて、関連するＲＯＩ画像が記憶されているか否かを外部記憶部２１０に問い合わせ、該当するＲＯＩ画像を外部記憶部２１０から取得してもよい。
【００７０】
ＲＯＩ生成部２３０は、記憶部２２０を介して第１の医用画像１００を取得し、当該取得した第１の医用画像１００に基づいて第１のＲＯＩ画像１５０を生成してもよい。また、ＲＯＩ生成部２３０は、記憶部２２０を介して第２の医用画像１１０を取得し、当該取得した第２の医用画像１１０に基づいて第２のＲＯＩ画像１６０を生成してもよい。記憶部２２０が第３の医用画像に含まれる付帯情報に基づいて第１のＲＯＩ画像１５０及び第２のＲＯＩ画像１６０が記憶されているか否かを外部記憶部２１０に問い合わせ、外部記憶部２１０に記憶されていないＲＯＩ画像があった場合に、ＲＯＩ生成部２３０は外部記憶部２１０に記憶されていないＲＯＩ画像を生成してもよい。
【００７１】
ＲＯＩ画像を生成する処理は、例えば医用画像から腫瘍である可能性が高い領域をセグメンテーションする処理を含む。外部記憶部２１０に記憶されているＲＯＩ画像及びＲＯＩ生成部２３０により生成されるＲＯＩ画像は以下の手法により生成されてよい。セグメンテーションは、二値化や領域拡張といった手法、空間フィルタ（ＳｏｂｅｌフィルタやＬａｐｌａｃｉａｎ  ｏｆ  Ｇａｕｓｓｉａｎフィルタ）などにより抽出したエッジを用いる手法、統計的分類器などによって画素ごとに領域か背景かを判定する分類器・クラスタリングを用いた手法、Ｓｎａｋｅｓ、動的輪郭モデル、レベルセットなど可変形状モデルを用いた手法、グラフカットなどの手法の少なくともいずれかの手法で行われる。
【００７２】
ＲＯＩ画像は抽出された腫瘍領域の画像を含むボリュームデータである場合を例に説明したが、本発明はこれに限らない。ＲＯＩ画像は、腫瘍領域を示すアノテーション画像であってもよい。当該アノテーション画像は、ボリュームデータであってよく、複数の断層画像が連続した画像であってもよい。第１のＲＯＩ画像１５０及び第２のＲＯＩ画像１６０がそれぞれアノテーション画像で表現される場合に、ＲＯＩ生成部２３０は第３のＲＯＩ画像１７０をアノテーション画像として生成する。アノテーション画像を生成する場合にも、上述のようにＲＯＩ生成部２３０は第１のＲＯＩ画像と第２のＲＯＩ画像との差分領域に基づいて第３のＲＯＩ画像を生成する。
【００７３】
ＲＯＩ生成部２３０がＲＯＩ画像を生成するための条件をユーザ指示条件として条件取得部２６１が取得する場合を例に説明したが、本発明はこれに限らない。例えば情報処理装置２００はユーザ指示条件を取得しなくてもよい。ＲＯＩ生成部２３０は、位置合わせされた第１のＲＯＩ画像及び第２のＲＯＩ画像とでＲＯＩを示す画像領域を比較して第１のＲＯＩ画像と第２のＲＯＩ画像との差分領域を求めてもよい。具体的には、ＲＯＩ生成部２３０は第１のＲＯＩ画像と第２のＲＯＩ画像とで大きい方のＲＯＩ画像から小さい方のＲＯＩ画像を差分することにより差分領域を求めてもよい。別の実施形態では、ＲＯＩ生成部２３０は第１のＲＯＩ画像と第２のＲＯＩ画像との差分の絶対値を差分領域として求めてもよい。
【００７４】
この観点で、ＲＯＩ生成部２３０は第１の医用画像に含まれる第１の関心領域と、第２の医用画像に含まれる第２の関心領域とを比較する比較手段ととらえることができる。また、第３のＲＯＩ画像は当該第１の関心領域と当該第２の関心領域との差分を示す情報ととらえることができる。
【００７５】
ＲＯＩ生成部２３０は、観察対象である医用画像の付帯情報に基づいて、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とを選択してもよい。例えば、観察対象である医用画像を取得したモダリティの種類に応じて、第１のＲＯＩ画像１５０と第２のＲＯＩ画像１６０とを選択してもよい。すなわち、ＲＯＩ生成部２３０は第３の医用画像の付帯情報からモダリティの種類の情報を読み出して、第１のＲＯＩ画像と第２のＲＯＩ画像とを選択してもよい。ＲＯＩ生成部２３０は観察対象の医用画像が光音響画像である場合に、ＭＲＩ画像と超音波画像とにそれぞれ基づくＲＯＩ画像を選択してもよい。ユーザは、観察対象である医用画像のモダリティと、選択するＲＯＩ画像のモダリティとを予め設定しておいてもよく、ＲＯＩ生成部２３０は当該設定に基づいてＲＯＩ画像を選択してもよい。ここで、選択の処理はＲＯＩ生成部２３０が外部記憶部２１０に問い合わせを行い、問合せ結果に基づいて記憶部２２０を介して該当するデータを取り込んで取得する処理を含んでよい。
【００７６】
ＲＯＩ生成部２３０は、取得した第１のＲＯＩ画像と第２のＲＯＩ画像とが位置合わせされていない場合、位置合わせ処理を行ってもよい。その場合、第１の医用画像１００と第２の医用画像１１０とをそれぞれ取得して、位置合わせ処理を行ってもよい。また、ＲＯＩ生成部２３０は第１のＲＯＩ画像及び第２のＲＯＩ画像と、第３のＲＯＩ画像とが位置合わせされていない場合、位置合わせ処理を行ってよい。その場合、当該位置合わせが行われた第３の医用画像に対して、第３のＲＯＩ画像が重畳される。
【００７７】
位置合わせ処理とは、２つの画像の対応する特徴同士の位置を合わせる処理であり、一方の画像上の位置（座標）を他方の画像上の位置（座標）へ写像する空間変換関数を取得する処理を含む。
【００７８】
上述の実施形態においては、第１のＲＯＩ画像と第２のＲＯＩ画像とがそれぞれ医用画像から生成された３次元画像である場合を例に説明したが、本発明はこれに限らない。第１のＲＯＩ画像は第１の医用画像における関心領域の座標を示すデータであってもよく、第２のＲＯＩ画像は第２の医用画像における関心領域の座標を示すデータであってもよい。本明細書において、「第１のＲＯＩ画像」及び「第２のＲＯＩ画像」はそれぞれ、関心領域の座標を示すデータの意味を含む。すなわち、ＲＯＩ画像は、関心領域を表す情報のことである。
【００７９】
第１の実施形態における工程Ｓ３５０、第２の実施形態における工程Ｓ５５０、第３の実施形態における工程Ｓ７５０はそれぞれ必須の工程ではない。また、第１の実施形態における工程Ｓ３２０〜Ｓ３４０の順序は図３の例に限らず、並行して行われても任意の順序で行われてもよい。第２の実施形態における工程Ｓ５２０〜Ｓ５４０の順序は図５の例に限らず、並行して行われても任意の順序で行われてもよい。第３の実施形態における工程Ｓ７２０〜Ｓ７４０の順序は図７の例に限らず、並行して行われても任意の順序で行われてもよい。
【００８０】
上述の実施形態においては、第１のＲＯＩ画像と第２のＲＯＩ画像との二つのＲＯＩ画像に基づいて第３のＲＯＩ画像を生成する場合を例に説明したが、本発明はこれに限らない。例えば第１のＲＯＩ画像のみを用いて第３のＲＯＩ画像を生成してもよい。第１の医用画像が超音波画像である場合には、第１のＲＯＩ画像は実際の関心領域よりも小さい領域を示す可能性が有るので、ＲＯＩ生成部２３０は第３のＲＯＩ画像として第１のＲＯＩ画像から拡大した領域を示す画像を生成する。当該拡大の程度は操作者が事前に設定しておいてもよいし、初期値として生成したＲＯＩ画像を操作者が任意に変更できる構成としてもよい。ＲＯＩ生成部２３０は造影ＭＲＩ画像など、実際の関心領域よりも大きい領域を示す可能性が有るＲＯＩ画像についても同様に、適宜縮小した画像をＲＯＩ画像として生成してもよい。第１のＲＯＩ画像を拡大または縮小して第３のＲＯＩ画像を生成する場合、ＲＯＩ生成部２３０は第１のＲＯＩ画像が示し領域と、拡大または縮小されたマージンの領域とを区別可能に第３のＲＯＩ画像を生成してもよい。
【００８１】
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【００８２】
上述の各実施形態における情報処理装置は、単体の装置として実現してもよいし、複数の装置を互いに通信可能に組合せて上述の処理を実行する形態としてもよく、いずれも本発明の実施形態に含まれる。共通のサーバ装置あるいはサーバ群で、上述の処理を実行することとしてもよい。情報処理装置および情報処理システムを構成する複数の装置は所定の通信レートで通信可能であればよく、また同一の施設内あるいは同一の国に存在することを要しない。
【００８３】
本発明の実施形態には、前述した実施形態の機能を実現するソフトウェアのプログラムを、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムのコードを読み出して実行するという形態を含む。
【００８４】
したがって、実施形態に係る処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明の実施形態の一つである。また、コンピュータが読み出したプログラムに含まれる指示に基づき、コンピュータで稼働しているＯＳなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。
【００８５】
上述の実施形態を適宜組み合わせた形態も、本発明の実施形態に含まれる。
【図１】
2019098167.tif 000003
【図２】
2019098167.tif 000004
【図３】
2019098167.tif 000005
【図４】
2019098167.tif 000006
【図５】
2019098167.tif 000007
【図６】
2019098167.tif 000008
【図７】
2019098167.tif 000009