(57)【要約】【課題】  光音響画像に関する情報を効率良く外部装置に出力することができる装置を提供する。【解決手段】  情報処理装置は、光音響信号に基づいて生成される複数の種類の光音響画像の種類に関する情報に基づいて、光音響画像を外部装置に出力するか否かを判定し、画像を外部装置に出力すると判定された場合には、光音響画像と光音響画像に関するメタデータとを外部装置に出力し、画像を外部装置に出力しないと判定された場合には、光音響画像とメタデータのうちメタデータのみを前記外部装置に出力する。【選択図】  図２
2018082830.tif 000002
【特許請求の範囲】
【請求項１】
被検体に光を照射することにより得られる光音響信号に基づいて生成される光音響画像の種類に関する情報に基づいて、前記光音響画像を外部装置に出力するか否かを判定する判定手段と、
前記判定手段により前記光音響画像を前記外部装置に出力すると判定された場合には、前記光音響画像と前記光音響画像に関するメタデータとを前記外部装置に出力し、
前記判定手段により前記光音響画像を前記外部装置に出力しないと判定された場合には、前記光音響画像と前記メタデータとのうち前記メタデータのみを前記外部装置に出力する出力手段と、
を有することを特徴とする情報処理装置。
【請求項２】
前記判定手段は、複数の種類の光音響画像のうち、出力される光音響画像に基づいて生成することができる種類の光音響画像を前記外部装置に出力しないと判定することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記判定手段は、複数の種類の光音響画像をそれぞれ生成するための方法に基づいて、前記光音響画像を前記外部装置に出力するか否かを判定することを特徴とする請求項１又は請求項２のいずれか１項に記載の情報処理装置。
【請求項４】
前記判定手段は、複数の種類の光音響画像のうちユーザが診断に用いる種類の光音響画像を前記外部装置に出力すると判定することを特徴とする請求項１に記載の情報処理装置。
【請求項５】
前記出力手段は、前記判定手段により前記光音響画像を前記外部装置に出力しないと判定された場合には、前記光音響画像を前記外部装置で表示可能にするための方法に関する情報を含む前記メタデータを前記外部装置に出力することを特徴とする請求項１乃至請求項４のいずれか１項に記載の情報処理装置。
【請求項６】
前記外部装置で表示可能にするための方法は、前記光音響画像を生成するための方法であることを特徴とする請求項５に記載の情報処理装置。
【請求項７】
前記外部装置で表示可能にするための方法は、前記光音響画像を取得するための方法であることを特徴とする請求項６に記載の情報処理装置。
【請求項８】
前記出力手段は、前記メタデータをＤＩＣＯＭエレメントとして含む情報オブジェクトを前記外部装置に出力することを特徴とする請求項１乃至請求項７のいずれか１項に記載の情報処理装置。
【請求項９】
前記光音響画像は、吸収係数、酸素飽和度、生体内の物質の分布に関する情報、の少なくともいずれかを表す画像であることを特徴とする請求項１乃至請求項８のいずれか１項に記載の情報処理装置。
【請求項１０】
前記光音響信号に基づいて複数の種類の光音響画像のうち少なくとも一つの種類の光音響画像を取得する画像取得手段をさらに有することを特徴とする請求項１乃至請求項９のいずれか１項に記載の情報処理装置。
【請求項１１】
複数の種類の光音響画像のうち、前記外部装置に出力する光音響画像の種類に関する設定を行う設定手段をさらに有し、
前記判定手段は前記設定に基づいて判定することを特徴とする請求項１乃至請求項１０のいずれか１項に記載の情報処理装置。
【請求項１２】
被検体に光を照射することにより得られる光音響信号に基づいて生成される複数の種類の光音響画像を取得する画像取得手段と、
前記光音響画像に関するメタデータを取得する情報取得手段と、
前記複数の種類のうち第１の種類の光音響画像に関する第１のメタデータのみを外部装置に出力し、前記複数の種類のうち第２の種類の光音響画像に関する第２のメタデータと前記第２の種類の光音響画像とを前記外部装置に出力する出力手段と、
を有することを特徴とする情報処理装置。
【請求項１３】
前記第１の種類の光音響画像は、前記被検体の内部の物質の分布に関する光音響画像であることを特徴とする請求項１２に記載の情報処理装置。
【請求項１４】
前記第２の種類の光音響画像は、前記被検体の内部の物質の分布に関する光音響画像であることを特徴とする請求項１２に記載の情報処理装置。
【請求項１５】
被検体に光を照射することにより得られる光音響信号に基づいて生成される、複数の種類の光音響画像を取得する画像取得手段と、
前記種類に関する情報に応じて、前記光音響画像を生成して表示するための情報を含むメタデータを取得する情報取得手段と、
前記メタデータを外部装置に出力する出力手段と、
を有することを特徴とする情報処理装置。
【請求項１６】
前記出力手段は、前記画像の種類に応じて、複数の種類の光音響画像のうち一部の光音響画像を前記外部装置に出力しないことを特徴とする請求項１５に記載の情報処理装置。
【請求項１７】
被検体に光を照射することにより得られる光音響信号に基づいて生成される光音響画像に関するオブジェクトを受信する受信手段と、
前記オブジェクトに含まれる、メタデータに基づいて前記光音響画像を取得する取得手段と、
前記取得された前記光音響画像を表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項１８】
被検体に光を照射することにより得られる光音響信号に基づいて生成される、複数の種類の光音響画像のうち第１の種類の光音響画像を生成するために必要なデータであって、前記第１の種類の光音響画像とは異なるデータを識別するための情報と、前記データを用いて前記第１の種類の光音響画像を生成するための方法を示す情報とを少なくとも含むオブジェクトを取得する取得手段と、
前記オブジェクトを外部装置に出力する出力手段と、
を有することを特徴とする情報処理装置。
【請求項１９】
被検体に光を照射することにより得られる光音響信号に基づいて生成される、複数の種類の光音響画像のうち第１の種類の光音響画像が、前記複数の種類のうち前記第１の種類とは異なる種類の光音響画像に基づいて生成可能か否かを判定する判定手段と、
前記判定手段により生成可能と判定された場合には、前記第１の種類の光音響画像とメタデータとのうち、前記メタデータのみを含む第１のオブジェクトであって、前記メタデータが前記第１の種類の光音響画像を生成するための情報を含む第１のオブジェクトを外部装置に出力し、
前記判定手段により生成可能でないと判定された場合には、前記第１の種類の光音響画像とメタデータとを含む第２のオブジェクトを外部装置に出力する出力手段と、
を有する情報処理装置。
【請求項２０】
前記複数の種類の光音響画像は、ユーザが前記外部装置に出力するように要求した種類の光音響画像であることを特徴とする請求項１９に記載の情報処理装置。
【請求項２１】
被検体に光を照射することにより得られる光音響信号に基づいて生成される、異なる複数の種類の光音響画像を取得する画像取得手段と、
前記種類に関する情報に基づいて、前記光音響画像を外部装置に出力するか否かを判定する判定手段と、
前記判定手段により前記光音響画像を前記外部装置に出力すると判定された場合には、前記光音響画像と前記光音響画像に関するメタデータとを前記外部装置に出力し、
前記判定手段により前記光音響画像を前記外部装置に出力しないと判定された場合には、前記光音響画像に関するメタデータのみを前記外部装置に出力する出力手段と、
を有することを特徴とする情報処理システム。
【請求項２２】
前記判定手段は、ＰＡＣＳサーバが有することを特徴とする請求項２１に記載の情報処理システム。
【請求項２３】
被検体に光を照射することにより得られる光音響信号に基づいて生成される光音響画像の種類に関する情報に基づいて、前記光音響画像を外部装置に出力するか否かを判定する判定手段と、
前記判定手段により前記光音響画像を前記外部装置に出力すると判定された場合には、前記光音響画像と前記光音響画像に関するメタデータとを前記外部装置に出力し、
前記判定手段により前記光音響画像を前記外部装置に出力しないと判定された場合には、前記光音響画像と前記メタデータとのうち前記メタデータのみを前記外部装置に出力する出力手段と、
を有することを特徴とする情報処理システム。
【請求項２４】
被検体に光を照射することにより得られる光音響信号に基づいて生成される、複数の種類の光音響画像のうち第１の種類の光音響画像を生成するために必要なデータであって、前記第１の種類の光音響画像とは異なるデータを識別するための情報と、前記データを用いて前記第１の種類の光音響画像を生成するための方法を示す情報とを少なくとも含むオブジェクトを取得する取得手段と、
前記オブジェクトに含まれる、前記データを用いて前記第１の種類の光音響画像を生成するための方法を読みだして取得された前記第１の光音響画像を表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理システム。
【請求項２５】
被検体に光を照射することにより得られる光音響信号に基づいて生成される光音響画像の種類に関する情報に基づいて、前記光音響画像を外部装置に出力するか否かを判定する判定工程と、
前記判定工程において前記光音響画像を前記外部装置に出力すると判定された場合には、前記光音響画像と前記光音響画像に関するメタデータとを前記外部装置に出力し、
前記判定工程において前記光音響画像を前記外部装置に出力しないと判定された場合には、前記光音響画像と前記メタデータとのうち前記メタデータのみを前記外部装置に出力する出力工程と、
を有することを特徴とする情報処理方法。
【請求項２６】
請求項２５に記載の情報処理方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、情報処理システム及びプログラムに関する。
【背景技術】
【０００２】
被検体内部の状態を低侵襲に画像化する手法として、光音響イメージングの研究が進められている。光音響イメージングは、光に比べて生体内での散乱が少ない超音波の特性を利用して、生体内の光学特性値分布を高解像度に求める手法である。非特許文献１には、被検体内部で発生した超音波の信号に基づいて画像再構成を行い、被検体内部における音圧の分布を得ることが開示されている。さらに、音圧の分布に基づいて被検体内部における物質の吸収係数を画像化し、被検体内部における物質の成分比率や代謝といった機能に関する情報を表す様々な種類の画像が得られることが知られている。
【先行技術文献】
【非特許文献】
【０００３】
【非特許文献１】Ｍ，Ｘｕ，Ｌ．Ｖ．Ｗａｎｇ“Ｐｈｏｔｏａｃｏｕｓｔｉｃ  ｉｍａｇｉｎｇ  ｉｎ  ｂｉｏｍｅｄｉｃｉｎｅ”，Ｒｅｖｉｅｗ  ｏｆ  ｓｃｉｅｎｔｉｆｉｃ  ｉｎｓｔｒｕｍｅｎｔｓ，７７，０４１１０１（２００６）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
光音響イメージングを利用した撮像装置を用いて、被検体内部で発生した超音波のある信号から、様々な種類の画像を取得することができる。しかしながら、一回の検査で得られた様々な種類の画像を全て保存したり、外部の装置に出力したりする場合には、保存や通信のための容量を圧迫するおそれがある。
【課題を解決するための手段】
【０００５】
本発明の実施形態に係る情報処理装置は、被検体に光を照射することにより得られる光音響信号に基づいて生成される複数の種類の光音響画像の種類に関する情報に基づいて、前記光音響画像を外部装置に出力するか否かを判定する判定手段と、前記判定手段により前記光音響画像を前記外部装置に出力すると判定された場合には、前記光音響画像と前記光音響画像に関するメタデータとを前記外部装置に出力し、前記判定手段により前記光音響画像を前記外部装置に出力しないと判定された場合には、前記光音響画像と前記メタデータのうち前記メタデータのみを前記外部装置に出力する出力手段と、を有することを特徴とする。
【発明の効果】
【０００６】
本発明によれば、光音響画像の種類に応じたメタデータを利用することで、光音響画像の外部装置への出力を省略できる場合がある。その場合には、保存や通信における負荷を低減することができる。
【図面の簡単な説明】
【０００７】
【図１】第１の実施形態に係る情報処理装置の機能構成の一例を示す図である。
【図２】第１の実施形態に係る情報処理装置により取得される情報の一例を示す図である。
【図３】第１の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図４】第１の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図５】第１の実施形態に係る情報処理装置により取得される情報の一例を示す図である。
【図６】第１の実施形態に係る情報処理装置により取得される情報の一例を示す図である。
【図７】第１の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図８】第２の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図９】本発明の実施形態に係る情報処理装置により表示部に表示される画面の一例を示す図である。
【図１０】本発明の実施形態に係る情報処理装置を含むシステムの構成の一例を示す図である。
【図１１】本発明の実施形態に係る情報処理装置のハードウェア構成の一例を示す図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明の実施形態を説明する。
【０００９】
［第一の実施形態］
本願明細書では、被検体に光を照射し、被検体内部で生じた膨張によって発生する音響波を光音響波と称する。
【００１０】
被検体内部の状態を低侵襲に画像化する方法として、光音響イメージングが着目されている。光音響イメージングでは、光源から発生したパルス光を生体に照射し、生体内で伝播・拡散したパルス光のエネルギーを吸収した生体組織から発生した光音響波を検出する。光音響波を用いて画像化された画像を以下では光音響画像と称する。光音響イメージングでは、腫瘍などの被検部位とそれ以外の組織との光エネルギーの吸収率の差を利用し、被検部位が照射された光エネルギーを吸収して瞬間的に膨張する際に発生する弾性波（光音響波）をトランスデューサで受信する。この検出信号を以下では光音響信号と称する。光音響撮像装置は、光音響信号を解析処理することにより、生体内の光学特性分布、特に、光エネルギー吸収密度分布を得ることができる。光音響画像には、被検体内部の光学特性に応じた、様々な種類の画像がある。たとえば、光音響画像には吸収密度分布を示す吸収係数画像が含まれる。また、吸収係数画像から、酸化ヘモグロビン、還元ヘモグロビン、水、脂肪、コラーゲンといった生体分子の存在や、比率等を示す画像が生成される。たとえば、酸化ヘモグロビンと還元ヘモグロビンとの比率に基づいて、ヘモグロビンの酸素との結合状況を示す指標である酸素飽和度に関する画像が得られる。
【００１１】
また近年では、上述の光音響画像を含め、診断に用いられる医用画像や診断に関する各種の情報が電子化されている。撮像装置と、当該撮像装置と接続される各種の装置との間の情報連携のために、たとえばＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ  ｉｎ  Ｍｅｄｉｃｉｎｅ）規格が用いられることが多い。ＤＩＣＯＭは医用画像のフォーマットと、それらの画像を扱う装置間の通信プロトコルを定義した規格である。ＤＩＣＯＭに基づいてやりとりされる対象となるデータは情報オブジェクト（ＩＯＤ：Ｉｎｆｏｒｍａｔｉｏｎ  Ｏｂｊｅｃｔ  Ｄｅｆｉｎｉｔｉｏｎｓ）と呼ばれる。以下では、情報オブジェクトをＩＯＤ、或いはオブジェクトと称する場合がある。ＩＯＤの例としては、医用画像、患者情報、検査情報、構造化レポート等が挙げられ、医用画像を用いた検査や治療にかかわる様々なデータがその対象となり得る。
【００１２】
ＤＩＣＯＭに基づいて取り扱われる画像、すなわちＩＯＤである画像は、メタデータと画像データとで構成される。メタデータには、たとえば患者、検査、シリーズ、画像に関する情報が含まれる。メタデータはＤＩＣＯＭデータエレメントと呼ばれるデータ要素の集まりで構成される。各々のＤＩＣＯＭデータエレメントにはデータ要素を識別するためのタグが付加される。例えば、ＤＩＣＯＭデータエレメントには、ピクセルデータである画像データに対して、画像データであることを示すタグが付加される。
【００１３】
光音響画像を医療施設内における様々な装置で利用するために、光音響画像もＤＩＣＯＭ規格に則ってＩＯＤとして光音響撮像装置から出力されることが好ましい。光音響イメージングでは、上述したように１回の撮影に係る光音響信号から様々な種類の光音響画像を取得できるが、取得された複数の光音響画像を全て保存したり、通信したりすると、保存や通信に係る容量を圧迫するおそれがある。第１の実施形態では、光音響画像に関するメタデータを利用して、保存や通信に係る容量を低減できるようにＩＯＤを出力することを目的とする。
【００１４】
［情報処理装置の構成］
図１０は、第１の実施形態に係る情報処理装置１００を含むシステム１０００の構成の一例を示す図である。システム１０００は、情報処理装置１００と、光音響撮像装置１０１０とを含む。情報処理装置１００には操作部１００１と表示部１００２とが接続されている。情報処理装置１００はネットワーク１０２０に接続する。ネットワーク１０２０には、ＨＩＳ１０２１、オーダリング装置１０２２、ＰＡＣＳ１０２３、Ｖｉｅｗｅｒ１０２４、Ｐｒｉｎｔｅｒ１０２５が接続されている。システム１０００は、たとえば医療施設内の情報システムである。システム１０００に含まれる各構成は、同じ施設内に設置されている必要はなく、通信可能に接続されていればよい。
【００１５】
情報処理装置１００は、光音響画像の撮像を含む検査に関する情報をオーダリング装置１０２２から取得し、当該検査が行われる際に光音響撮像装置１０１０（以下では、撮像装置１０１０と称する。）を制御する。情報処理装置１００は、撮像装置１０１０から光音響信号を取得する。情報処理装置１００は、光音響信号に基づいて光音響画像を取得する。情報処理装置１００は、ＨＬ７（Ｈｅａｌｔｈ  ｌｅｖｅｌ  ７）及びＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ  ｉｎ  Ｍｅｄｉｃｉｎｅ）といった規格に準じて、ＨＩＳ１０２１、オーダリング装置１０２２、ＰＡＣＳ１０２３といった外部装置との間で情報の送受信を行う。
【００１６】
操作部１００１は、ユーザの操作入力に関する情報を情報処理装置１００に送信する。操作部１００１は、たとえばキーボードやトラックボールや、検査に関する操作入力を行うための各種のボタンである。
【００１７】
表示部１００２は、情報処理装置１００からの制御に基づいて、システム１０００で撮像された画像や、検査に関する情報を表示する。表示部１００２は、情報処理装置１００からの制御に基づいて、ユーザの指示を受け付けるためのインタフェースを提供する。表示部１００２は、たとえば液晶ディスプレイである。
【００１８】
なお、表示部１００２と操作部１００１はタッチパネルディスプレイとして統合されていてもよい。また、情報処理装置１００と表示部１００２と操作部１００１は別体の装置である必要はなく、これらの構成が統合された操作卓として実現されてもよい。情報処理装置１００は、複数のプローブを有していてもよい。
【００１９】
撮像装置１０１０は、光音響イメージングの手法により、光音響信号を取得する。対象とする被検体内の領域は、たとえば循環器領域、乳房、径部、腹部、手指および足指を含む四肢といった領域である。特に、被検体内の光吸収に関する特性に応じて、新生血管や血管壁のプラークを含む血管領域を、光音響画像の撮像の対象としてもよい。システム１０００では、たとえばメチレンブルー（ｍｅｔｈｙｌｅｎｅ  ｂｌｕｅ）やインドシアニングリーン（ｉｎｄｏｃｙａｎｉｎｅ  ｇｒｅｅｎ）といった色素や、金微粒子、それらを集積あるいは化学的に修飾した物質を造影剤として投与した被検体１０３０の光音響画像を撮像してもよい。
【００２０】
撮像装置１０１０は、被検体１０３０に光を照射する照射部１０１２と、被検体１０３０からの光音響波を受信する受信部１０１１とを含む。
【００２１】
受信部１０１１は、少なくとも１つのトランスデューサ（不図示）と、整合層（不図示）、ダンパー（不図示）、音響レンズ（不図示）を含む。トランスデューサ（不図示）はＰＺＴ（ｌｅａｄ  ｚｉｒｃｏｎａｔｅ  ｔｉｔａｎａｔｅ）やＰＶＤＦ（ｐｏｌｙｖｉｎｙｌｉｄｅｎｅ  ｄｉｆｌｕｏｒｉｄｅ）といった、圧電効果を示す物質からなる。トランスデューサ（不図示）は圧電素子以外のものでもよく、たとえば静電容量型トランスデューサ（ＣＭＵＴ：ｃａｐａｃｉｔｉｖｅ  ｍｉｃｒｏ−ｍａｃｈｉｎｅｄ  ｕｌｔｒａｓｏｎｉｃ  ｔｒａｎｓｄｕｃｅｒｓ）、ファブリペロー干渉計を用いたトランスデューサである。典型的には、光音響信号は０．１〜１００ＭＨｚの周波数成分からなり、トランスデューサ（不図示）は、たとえばこれらの周波数を検出できるものが用いられる。トランスデューサ（不図示）により得られる信号は時間分解信号である。受信された信号の振幅は各時刻にトランスデューサで受信される音圧に基づく値を表したものである。受信部１０１１は、電子フォーカスのための回路（不図示）もしくは制御部を含む。トランスデューサ（不図示）の配列形は、たとえばセクタ、リニアアレイ、コンベックス、アニュラアレイ、マトリクスアレイである。受信部１０１１は、トランスデューサ（不図示）が受信した時系列のアナログ信号を増幅する増幅器（不図示）を備えていてもよい。
【００２２】
照射部１０１２は、光音響信号を取得するための光源（不図示）と、光源（不図示）から射出されたパルス光を被検体へ導く光学系（不図示）とを含む。光源（不図示）が射出する光のパルス幅は、たとえば１ｎｓ以上、１００ｎｓ以下のパルス幅である。また、光源（不図示）が射出する光の波長は、たとえば４００ｎｍ以上、１６００ｎｍ以下の波長である。被検体の表面近傍の血管を高解像度でイメージングする場合は、４００ｎｍ以上、７００ｎｍ以下の、血管での吸収が大きい波長が好ましい。また、被検体の深部をイメージングする場合には、７００ｎｍ以上、１１００ｎｍ以下の、水や脂肪といった組織で吸収されにくい波長が好ましい。
【００２３】
光源（不図示）は、たとえばレーザーや発光ダイオードである。照射部１０１２は、複数の波長の光を用いて光音響信号を取得するために、波長を変換できる光源を用いてもよい。あるいは、照射部１０１２は、互いに異なる波長の光を発生する複数の光源を備え、それぞれの光源から交互に異なる波長の光を照射できる構成であってもよい。レーザーは、たとえば固体レーザー、ガスレーザー、色素レーザー、半導体レーザーである。光源（不図示）として、Ｎｄ：ＹＡＧレーザーやアレキサンドライトレーザーといったパルスレーザーを用いてもよい。また、Ｎｄ：ＹＡＧレーザーの光を励起光とするＴｉ：ｓａレーザーやＯＰＯ（ｏｐｔｉｃａｌ  ｐａｒａｍｅｔｒｉｃ  ｏｓｃｉｌｌａｔｏｒｓ）レーザーを光源（不図示）として用いてもよい。また、光源（不図示）として、マイクロウェーブ源を用いてもよい。
【００２４】
光学系（不図示）には、レンズ、ミラー、光ファイバといった光学素子が用いられる。被検体が乳房である場合には、パルス光のビーム径を広げて照射することが好ましいため、光学系（不図示）は射出される光を拡散させる拡散板を備えていてもよい。あるいは解像度を上げるために、光学系（不図示）はレンズ等を備え、ビームをフォーカスできる構成であってもよい。
【００２５】
撮像装置１０１０は、受信部１０１１が受信した光音響波のアナログ信号をデジタル信号である光音響信号に変換し、情報処理装置１００に送信する。
【００２６】
ＨＩＳ（Ｈｏｓｐｉｔａｌ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｓｙｓｔｅｍ）１０２１は、病院の業務を支援するシステムである。ＨＩＳは、電子カルテシステム、オーダリングシステムや医事会計システムを含む。ＨＩＳ１０２１は、検査が完了したことを示す情報を情報処理装置１００又はオーダリング装置１０２２から受信すると、会計のための処理を行う。
【００２７】
オーダリング装置１０２２は、検査情報を管理し、撮像装置のそれぞれの検査の進捗を管理するシステムである。放射線部門におけるオーダリング装置１０２２は、たとえばＲＩＳ（Ｒａｄｉｏｌｏｇｙ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｓｙｓｔｅｍ）である。検査情報は、検査を一意に識別するための検査ＩＤや、当該検査に含まれる撮影手技に関する情報を含む。オーダリング装置１０２２は、情報処理装置１００からの問い合わせに応じて、撮像装置１０１０で行う検査の情報を情報処理装置１００に送信する。オーダリング装置１０２２は、情報処理装置１００から検査の進捗に関する情報を受信する。
【００２８】
ＨＩＳ１０２１及びオーダリング装置１０２２により、検査のオーダ発行から会計までが連携して管理される。
【００２９】
ＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍ）１０２３は、施設内外の各種の撮像装置で得られた画像を保持するデータベースシステムである。ＰＡＣＳ１０２３はたとえばＰＡＣＳサーバである。ＰＡＣＳ１０２３は、医用画像及びかかる医用画像の撮影条件や、再構成を含む画像処理のパラメータや患者情報といった付帯情報を記憶する記憶部（不図示）と、当該記憶部に記憶される情報を管理するコントローラ（不図示）とを有する。ＰＡＣＳ１０２３は、情報処理装置１００から出力されたオブジェクトである、超音波画像や光音響画像や重畳画像を記憶する。ＰＡＣＳ１０２３と情報処理装置１００との通信や、ＰＡＣＳ１０２３に記憶される各種の画像はＨＬ７やＤＩＣＯＭといった規格に則していることが好ましい。情報処理装置１００から出力される各種の画像は、ＤＩＣＯＭ規格に則って各種のタグに付帯情報が関連付けられ、記憶されている。
【００３０】
Ｖｉｅｗｅｒ１０２４は、画像診断用の端末であり、ＰＡＣＳ１０２３等に記憶された画像を読み出し、診断のために表示する。医師は、Ｖｉｅｗｅｒ１０２４に画像を表示させて観察し、当該観察の結果得られた情報を画像診断レポートとして記録する。Ｖｉｅｗｅｒ１０２４を用いて作成された画像診断レポートは、Ｖｉｅｗｅｒ１０２４に記憶されていてもよいし、ＰＡＣＳ１０２３やレポートサーバ（不図示）に出力され、記憶されてもよい。
【００３１】
Ｐｒｉｎｔｅｒ１０２５は、ＰＡＣＳ１０２３等に記憶された画像を印刷する。Ｐｒｉｎｔｅｒ１０２５はたとえばフィルムプリンタであり、ＰＡＣＳ１０２３等に記憶された画像をフィルムに印刷することにより出力する。
【００３２】
図１１は、情報処理装置１００のハードウェア構成の一例を示す図である。情報処理装置１００は、たとえばコンピュータである。情報処理装置１００は、ＣＰＵ１１０１、ＲＯＭ１１０２、ＲＡＭ１１０３、記憶装置１１０４、ＵＳＢ１１０５、通信回路１１０６、グラフィックスボード１１０７を有する。これらはＢＵＳにより通信可能に接続されている。ＢＵＳは接続されたハードウェア間でのデータの送受信や、ＣＰＵ１１０１から他のハードウェアへの命令を送信するために使用される。
【００３３】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１０１は情報処理装置１００及びこれに接続する各部を統合的に制御する制御回路である。ＣＰＵ１１０１はＲＯＭ１１０２に格納されているプログラムを実行することにより制御を実施する。またＣＰＵ１１０１は、表示部１００２を制御するためのソフトウェアであるディスプレイドライバを実行し、表示部１００２に対する表示制御を行う。さらにＣＰＵ１１０１は、操作部１００１に対する入出力制御を行う。
【００３４】
ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１１０２は、ＣＰＵ１１０１による制御の手順を記憶させたプログラムやデータを格納する。ＲＯＭ１１０２は、情報処理装置１００のブートプログラムや各種初期データを記憶する。また、情報処理装置１００の処理を実現するための各種のプログラムを記憶する。
【００３５】
ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１１０３は、ＣＰＵ１１０１が命令プログラムによる制御を行う際に作業用の記憶領域を提供するものである。ＲＡＭ１１０３は、スタックとワーク領域とを有する。ＲＡＭ１１０３は、情報処理装置１００及びこれに接続する各部における処理を実行するためのプログラムや、画像処理で用いる各種パラメータを記憶する。ＲＡＭ１１０３は、ＣＰＵ１１０１が実行する制御プログラムを格納し、ＣＰＵ１１０１が各種制御を実行する際の様々なデータを一時的に格納する。
【００３６】
記憶装置１１０４は、超音波画像や光音響画像などの各種のデータを保存する補助記憶装置である。記憶装置１１０４は、たとえばＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）や、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）である。
【００３７】
ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）１１０５は操作部１００１と接続する接続部である。
【００３８】
通信回路１１０６はシステム１０００を構成する各部や、ネットワーク１０２０に接続されている各種の外部装置との通信を行うための回路である。通信回路１１０６は、たとえば出力する情報を転送用パケットに格納してＴＣＰ／ＩＰといった通信技術により、ネットワーク１０２０を介して外部装置に出力する。情報処理装置１００は、所望の通信形態にあわせて、複数の通信回路を有していてもよい。
【００３９】
グラフィックスボード１１０７は、ＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ビデオメモリを含む。ＧＰＵは、たとえば光音響信号から光音響画像を生成するための再構成処理に係る演算を行う。
【００４０】
ＨＤＭＩ（登録商標）（Ｈｉｇｈ  Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）１１０８は、表示部１００２と接続する接続部である。
【００４１】
ＣＰＵ１１０１やＧＰＵはプロセッサの一例である。また、ＲＯＭ１１０２やＲＡＭ１１０３や記憶装置１１０４はメモリの一例である。情報処理装置１００は複数のプロセッサを有していてもよい。第１の実施形態においては、情報処理装置１００のプロセッサがメモリに格納されているプログラムを実行することにより、情報処理装置１００の各部の機能が実現される。
【００４２】
また、情報処理装置１００は特定の処理を専用に行うＣＰＵやＧＰＵ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）を有していても良い。情報処理装置１００は特定の処理あるいは全ての処理をプログラムしたＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）を有していてもよい。
【００４３】
図１は、情報処理装置１００の機能構成の一例を示す図である。情報処理装置１００は、検査制御部１０１、撮影制御部１０２、画像処理部１０３、出力制御部１０４、通信部１０５、表示制御部１０６を有する。
【００４４】
検査制御部１０１は、検査制御部１０１は、オーダリング装置１０２２から検査オーダの情報を取得する。検査オーダには、検査を受ける患者の情報や、撮影手技に関する情報が含まれる。また、検査オーダには光音響信号により生成される複数種類の光音響画像のうち医師等のユーザが要求する光音響画像の種類を示す情報が含まれていてもよい。検査制御部１０１は、撮影制御部１０２に検査オーダに関する情報を送信する。また、検査制御部１０１は、表示制御部１０６を介してユーザに検査に関する情報を提示するために表示部１００２に当該検査の情報を表示させる。表示部１００２に表示される検査の情報には、検査を受ける患者の情報や、当該検査に含まれる撮影手技の情報や、既に撮像が完了して生成された画像が含まれる。さらに検査制御部１０１は、通信部１０５を介して当該検査の進捗に関する情報をオーダリング装置１０２２に送信する。
【００４５】
撮影制御部１０２は、検査制御部１０１から受信した撮影手技の情報に基づいて撮像装置１０１０を制御し、光音響信号を撮像装置１０１０から取得する。撮影制御部１０２は、照射部１０１２への指示と受信部１０１１への指示とをユーザの操作入力や撮影手技の情報に基づいて実行する。撮影制御部１０２は、照射部１０１２に対して光の照射を指示する。また、撮影制御部１０２は受信部１０１１に対して光音響波の受信を指示する。撮影制御部１０２は、撮像装置１０１０においてデジタル信号に変換された光音響信号を取得する。すなわち、撮影制御部１０２は、光音響信号を取得する信号取得手段の一例である。
【００４６】
画像処理部１０３は、光音響画像を生成する。また、画像処理部１０３は光音響画像からなる動画像を生成する。
【００４７】
具体的には、画像処理部１０３は撮影制御部１０２により取得された光音響信号に基づいて光音響画像を生成する。画像処理部１０３は、光音響信号に基づいて光が照射された時の音響波の分布（以下、初期音圧分布と称する。）を再構成する。画像処理部１０３は、予め被検体に照射される光の強度分布を取得して、たとえば以下に示す考え方により光フルエンスに関する情報を取得する。
【００４８】
画像処理部１０３は、光を吸収、散乱する媒質における光エネルギーの挙動を示す輸送方程式や拡散方程式を数値的に解く方法により、被検体の内部における光フルエンスの空間分布を算出することができる。数値的に解く方法としては、有限要素法、差分法、モンテカルロ法等を採用することができる。例えば、画像処理部１０３は、既知の光拡散方程式を解くことにより、被検体の内部における光フルエンスの空間分布（光フルエンス分布、光量分布）を算出してもよい。
【００４９】
画像処理部１０３は、再構成された初期音圧分布を、被検体に照射された光の被検体の光フルエンス分布（光量分布）で除することにより、被検体内における光の吸収係数分布を取得する。また、被検体に照射する光の波長に応じて、被検体内で光の吸収の度合いが異なることを利用して、複数の波長に対する吸収係数分布から被検体内の物質の濃度分布を取得する。たとえば画像処理部１０３は、オキシヘモグロビンとデオキシヘモグロビンの被検体内における物質の濃度分布を取得する。さらに画像処理部１０３は、オキシヘモグロビン濃度のデオキシヘモグロビン濃度に対する割合として酸素飽和度分布を取得する。画像処理部１０３により生成される光音響画像は、たとえば上述した初期音圧分布、光フルエンス分布、吸収係数分布、物質の濃度分布および酸素飽和度分布の少なくとも一つの情報を示す画像である。上述したように、吸収係数分布、物質の濃度分布及び酸素飽和度分布のそれぞれに関する画像は、初期音圧分布及び光フルエンス分布に関する画像に基づいて生成される。また、物質の濃度分布及び酸素飽和度分布のそれぞれに関する画像は、２波長分の吸収係数分布に関する画像に基づいて生成される。すなわち、画像処理部１０３は複数種類の光音響画像を取得する。画像処理部１０３は光音響画像を取得する画像取得手段の一例である。
【００５０】
出力制御部１０４は、画像に関するメタデータの生成に係る情報を取得し、外部装置に出力するためのオブジェクト（以下、ＤＩＣＯＭオブジェクトと称する場合がある）を生成する。出力制御部１０４は、設定部１０４１、判定部１０４２、情報取得部１０４３を含む。
【００５１】
設定部１０４１は、ＤＩＣＯＭオブジェクトとして出力すべき情報と、画像データの種別とに関する設定を、ＲＡＭ１１０３といったメモリから読み出して取得する。画像処理部１０３の説明において述べたように、ある一群の光音響信号に基づいて生成される複数の種類の光音響画像のうち、いくつかの種類の光音響画像は他の光音響画像に基づいて生成される。たとえば、物質の濃度分布に関する画像は複数の波長の吸収係数分布に関する画像に基づいて生成される。設定部１０４１は、ある種類の光音響画像を生成するために必要な種類の光音響画像に関する情報を記憶する。当該設定は、検査に先だってユーザが入力しておいてもよい。
【００５２】
判定部１０４２は、光音響画像と光音響画像に関するメタデータのうち光音響画像に関するメタデータのみを外部装置に出力するか、光音響画像とメタデータとを外部装置に出力するか判定する。判定部１０４２は、例えば、検査制御部１０１、撮影制御部１０２の少なくともいずれかにおいて取得された情報と、設定部１０４１に記憶された情報とに基づいて、光音響画像に関するメタデータのみを外部装置に出力するか、光音響画像とメタデータとを外部装置に出力するか判定する。判定部１０４２は、設定部１０４１に記憶された光音響画像の生成に必要な種類の光音響画像に関する情報に基づいて、判定を行う。判定部１０４２は、外部装置において生成可能である種類の光音響画像についてはメタデータのみのＩＯＤを出力し、外部装置において生成不可能である種類の光音響画像についてはメタデータと当該光音響画像とを含むＩＯＤを出力するように判定する。すなわち判定部１０４２は外部装置に出力しようとする光音響画像の種類に関する情報に基づいて、当該光音響画像を外部装置に出力するか否かを判定する。光音響画像とメタデータとを外部装置に出力すると判定した場合には、判定部１０４２は画像処理部１０３を制御して当該光音響画像を生成させる。判定部１０４２は判定手段の一例である。
【００５３】
情報取得部１０４３は、外部装置に出力するためのＤＩＣＯＭオブジェクトを取得する。また、情報取得部１０４３はＤＩＣＯＭオブジェクトを生成するために必要な情報を取得する。たとえば情報取得部１０４３は検査制御部１０１、撮影制御部１０２や撮像装置１０１０から、患者情報や検査情報といった光音響画像の取得に関する情報を取得する。情報取得部１０４３は、当該ＤＩＣＯＭオブジェクトに含まれるメタデータの情報を取得する。情報取得部１０４３は、メタデータに記載すべき情報を、ＤＩＣＯＭ規格に則った形式に変換することにより、メタデータの情報を取得してもよい。情報取得部１０４３は、当該メタデータの情報をＤＩＣＯＭエレメントとして取得する。ＤＩＣＯＭエレメントは、ＤＩＣＯＭタグ（ｇｇｇｇ，ｅｅｅｅ）の形式で表される識別子と、データの内容を表す情報とで構成される。また、情報取得部１０４３は画像処理部１０３において生成された光音響画像の画像データを取得する。情報取得部１０４３は、情報取得手段の一例である。
【００５４】
通信部１０５は、ネットワーク１０２０を介してＨＩＳ１０２１、オーダリング装置１０２２、ＰＡＣＳ１０２３、Ｖｉｅｗｅｒ１０２４といった外部装置と情報処理装置１００との間での、情報の送受信を制御する。
【００５５】
表示制御部１０６は、表示部１００２を制御して、表示部１００２に情報を表示させる。表示制御部１０６は、他のモジュールからの入力や、操作部１００１を介したユーザの操作入力に応じて、表示部１００２に情報を表示させる。表示制御部１０６は、表示制御手段の一例である。
【００５６】
図２は、出力制御部１０４により取得されるＤＩＣＯＭオブジェクトの構成の一例を説明するための図である。図２（ａ）は、画像データとメタデータとを含むＩＯＤの構成の一例である。ＩＯＤ２００はメタデータ２０１と画像データ２０６とを含む。メタデータ２０１は、患者情報２０２と検査情報２０３とシリーズ情報２０４と画像情報２０５とを含む。
【００５７】
患者情報２０２は、ＩＯＤ２００に関する患者（たとえば被検体１０３０）の情報である。患者情報２０２には、たとえば患者を一意に識別するための患者ＩＤや、患者名、生年月日、性別に関する情報が含まれる。
【００５８】
検査情報２０３は、ＩＯＤ２００に関する検査の情報である。検査情報２０３には、たとえば検査を一意に識別するための検査ＩＤ（Ｓｔｕｄｙ  Ｉｎｓｔａｎｃｅ  ＵＩＤ）や、検査日、検査時間に関する情報が含まれる。
【００５９】
シリーズ情報２０４は、検査情報２０３により示される検査に含まれるシリーズに関する情報である。シリーズ情報２０４は、たとえばシリーズを一意に識別するためのシリーズＩＤ（Ｓｅｒｉｅｓ  Ｉｎｓｔａｎｃｅ  ＵＩＤ）が含まれる。
【００６０】
画像情報２０５は、画像に関する情報である。画像情報２０５は、画素数、ビット数、患者の向き、画像を一意に識別するための画像ＩＤが含まれる。画像ＩＤは、たとえばＳＯＰ（Ｓｅｒｖｉｃｅ  Ｏｂｊｅｃｔ  Ｐａｉｒ）  Ｉｎｓｔａｎｃｅ  ＵＩＤである。また、画像情報２０５はたとえば造影剤の使用の有無など、光音響撮像に関する情報を含んでいてもよい。
【００６１】
画像データ２０６は、画像のピクセルデータである。画像データ２０６は画像処理部１０３で生成される。
【００６２】
図２（ｂ）はメタデータのみからなるＩＯＤである。ＩＯＤ２０８は画像データ２０６を含まない。ＩＯＤ２０８は、画像データ２０６を生成するための方法に関する情報である、画像データ生成方法２０７を含む。画像データ生成方法２０７は、ＩＯＤ２０８に関する画像データを生成するための方法に関する情報を含む。画像データを生成するための方法には、たとえば当該画像データを生成するために必要な情報を識別するための情報と、必要な情報を用いた演算の方法とを含む。別の観点では、画像データ生成方法２０７は、Ｖｉｅｗｅｒ１０２４で画像データを表示可能にするための方法ととらえてもよい。
【００６３】
［情報処理装置により行われる一連の処理］
図３は、情報処理装置１００が外部装置に出力するためのオブジェクトであるＩＯＤを取得する一連の処理の一例を示すフローチャートである。図４は、図３に示すステップＳ３０１の処理の詳細の一例を示すフローチャートである。下記の処理において、特に断りがない場合、各処理を実現する主体は、ＣＰＵ１１０１またはＧＰＵである。また、図５及び図６はそれぞれ、情報処理装置１００により取得される情報の一例を示す図である。
【００６４】
ステップＳ３００において、撮影制御部１０２は光音響信号を撮像装置１０１０から取得する。以下では、２つ以上の異なる波長の光を用いて計測した光音響信号を取得する場合を例に説明する。
【００６５】
ステップＳ３０１において、出力制御部１０４は、ステップＳ３００で取得された光音響信号に基づいて生成される光音響画像に関するＩＯＤを取得する。
【００６６】
図４は、ステップＳ３０１の詳細な処理の一例を示すフローチャートである。
【００６７】
ステップＳ４００において、判定部１０４２は、設定部１０４１に記憶された情報に基づいてステップＳ４０１で取得された光音響信号に関するＤＩＣＯＭオブジェクトを外部装置に出力する形態について判定する。判定部１０４２がメタデータのみを含むＩＯＤ（たとえば図２（ｂ）に示すＩＯＤ）を出力すると判定した場合にはステップＳ４０１に進み、画像データとメタデータとを含むＩＯＤ（たとえば図２（ａ）に示すＩＯＤ）を出力すると判定した場合にはステップＳ４０４に進む。
【００６８】
具体的には、判定部１０４２は検査制御部１０１から検査で取得する光音響画像の種類に関する情報を取得する。例えば、判定部１０４２は、検査制御部１０１が取得したオーダに含まれる取得すべき光音響画像の種類を示す情報を検査で取得する光音響画像の種類に関する情報として取得する。また、判定部１０４２は検査に際して、取得する光音響画像の種類に関してユーザインタフェースを介してユーザが入力した指示の内容を取得することとしてもよい。判定部１０４２は、例えば、後述する図９のユーザインタフェースを介して検査に際して取得すべき光音響画像の種類に関する情報を取得する。なお、判定部１０４２はオーダまたはユーザからの入力によって取得すべき光音響画像の種類が特に指定されていない場合は、取得可能な全ての光音響画像に関するＩＯＤを取得するように判定してもよい。また、判定部１０４２は、予め指定された種類（たとえば、酸素飽和度といった、被検体の内部の物質に関する画像）のみに関するＩＯＤを取得するように判定してもよい。
【００６９】
例えば、オーダに初期音圧分布を示す画像、光量分布を示す画像および吸収係数分布を示す画像が取得すべき光音響画像である旨の情報が含まれている場合を考える。この場合、判定部１０４２は、後述する図５に示すテーブルを参照することで、吸収係数分布を示す画像はオーダに含まれている初期音圧分布を示す画像および光量分布を示す画像から生成可能であると判定する。そして、判定部１０４２は、吸収係数分布を示す画像に関しては、光音響画像およびメタデータのうちメタデータのみＩＯＤを外部装置に出力すると判定する。すなわち、判定部１０４２は取得すべき複数種類の光音響画像に含まれる所定の光音響画像に関して、取得すべき複数種類の光音響画像に含まれる他の複数の光音響画像により生成可能である場合には、所定の光音響画像に関して光音響画像およびメタデータのうちメタデータのみＩＯＤを外部装置に出力すると判定する。なお、判定部１０４２は、例えば図５に示すテーブルに、初期音圧分布を示す画像および光量分布を示す画像が記載されていないことから、初期音圧分布を示す画像および光量分布を示す画像はオーダに含まれる光音響画像から生成することができないと判定する。すなわち、判定部１０４２は、初期音圧分布を示す画像および光量分布を示す画像に関しては、光音響画像およびメタデータを含むＩＯＤを外部装置に出力すると判定する。
【００７０】
すなわち、判定部１０４２は外部装置に出力する複数の種類の光音響画像のうち、出力される他の光音響画像を用いて生成可能な種類については画像データを出力しないように判定する。他の光音響画像を用いて生成されない画像データのみを外部装置に出力するようにすることで、通信や保存にかかる容量を低減することができる。ある観点では、判定部１０４２は外部装置に出力する画像データの数が少なくなるように、ＩＯＤの形態に関する判定を行う。
【００７１】
また、判定部１０４２は、オーダに含まれている種類の光音響画像に関しては、光音響画像およびメタデータを含むＩＯＤを外部装置に出力すると判定することとしてもよい。この場合、オーダに含まれない種類の光音響画像に関しては、判定部１０４２は画像データとメタデータとのうちメタデータのみを含むＩＯＤを出力すると判定してもよい。これにより、たとえばユーザがＶｉｅｗｅｒ１０２４を用いてある検査のＩＯＤを取得しようとした場合に、検査オーダで要求した種類の光音響画像を含むＩＯＤを取得でき、速やかにそれを表示できる。さらに、Ｖｉｅｗｅｒ１０２４は検査オーダで要求しなかった種類の光音響画像についても、ＩＯＤが存在することにより、Ｖｉｅｗｅｒ１０２４はそれらの種類の光音響画像を取得可能であることを認識し、表示させる画像データの候補としてユーザに提示することができる。
【００７２】
さらに、後述する図９のユーザインタフェースを介して取得すべき光音響画像の種類が指定された場合でも同様に、判定部１０４２は指定された種類以外の光音響画像に関して、画像データとメタデータとのうちメタデータのみを含むＩＯＤを出力することと判定してもよい。
【００７３】
外部装置に出力する光音響画像の種類のそれぞれについて、判定部１０４２は設定部１０４１に記憶された情報を取得する。設定部１０４１は、ある種類の光音響画像を生成するのに必要な種類の光音響画像に関する情報が記憶される。また、後述する図９のユーザインタフェースを介して入力された情報を取得する。判定部１０４２はある光音響画像の種類について、メタデータのみを含むＩＯＤとして外部装置に出力するか、メタデータと画像データとを含むＩＯＤとして外部装置に出力するかを示す情報を取得する。判定部１０４２は、当該設定の情報に基づいて判定を行い、他の種類の光音響画像に基づいて生成可能である場合には、メタデータのみを含むＩＯＤとして外部装置に出力すると判定する。すなわち判定部１０４２は、ある種類の光音響画像を外部装置に出力するか否かを判定する。そして、光音響画像を出力すると判定された場合には、当該光音響画像と当該光音響画像に関するメタデータとを含むＩＯＤを外部装置に出力するように以下の処理で制御される。光音響画像を出力しないと判定された場合には、当該光音響画像に関するメタデータのみを含むＩＯＤを外部装置に出力するように以下の処理で制御される。
【００７４】
ステップＳ４０１において、情報取得部１０４３はメタデータのみのＩＯＤを出力する種類の光音響画像を生成するための方法に関する情報を設定部１０４１から取得する。
【００７５】
図５は、複数の種類の光音響画像のそれぞれを生成するための方法（以下では、生成方法と称する。）に関する情報の一例である。図５は設定部１０４１に記憶される情報の一例である。生成方法は、たとえばテーブル形式で記憶される。
【００７６】
列５００は、生成する対象となる光音響画像の種類である「生成データ」の情報を含む。
【００７７】
列５０１及び列５０２は、列５００に示される光音響画像の種類のそれぞれを生成するのに必要な光音響画像の種類である「必要データ」の情報を含む。
【００７８】
列５０３は、列５００に示される光音響画像の種類のそれぞれを生成するのに必要なパラメータの情報を含む。
【００７９】
列５０４は、列５００に示される光音響画像の種類のそれぞれを生成するための「生成方法」の情報を含む。「生成方法」は列５０１から列５０３に記載された情報を用いて列５００の光音響画像を生成するための方法を示す。
【００８０】
行５０５は、たとえば吸収係数に関する画像を生成するために必要なデータ、パラメータ及び生成方法を示す。具体的には、吸収係数に関する画像を生成するためには初期音圧に関する画像と光量分布（光フルエンス分布）に関する画像が必要であり、パラメータとしてグリュナイゼン係数が必要であることが示されている。そして、吸収係数に関する画像は、初期音圧のデータを、光量分布のデータとグリュナイゼン係数の乗算結果で除することにより得られることが示されている。
【００８１】
行５０６は、酸素飽和度に関する画像を生成するために必要な情報を示す。行５０７は、ヘモグロビン量に関する画像を生成するために必要な情報を示す。なお、生成方法を記憶するための態様は図５に示した例に限られない。
【００８２】
ステップＳ４０２において、情報取得部１０４３はステップＳ４０１で取得した生成方法に関する情報を、ＩＯＤのメタデータに記載するための情報を取得する。具体的には、情報取得部１０４３は当該生成方法に関する情報をＤＩＣＯＭ規格に則った形式に変換する。
【００８３】
図６は、生成方法に関する情報をＤＩＣＯＭ規格に則った形式に変換した場合の一例を示す図である。ここでは、吸収係数に関する画像の生成方法（図５の行５０５）をタグとその値で示す例を説明する。
【００８４】
タグ６００は、吸収係数に関する画像の生成方法に対応するプライベートタグである。タグ６０１及びタグ６０２は、吸収係数に関する画像を生成するための必要データに対応するプライベートタグである。タグ６０３は、吸収係数に関する画像を生成するためのパラメータに対応するプライベートタグである。
【００８５】
値６０４はタグ６００の値であり、吸収係数に関する画像を生成するために必要な各種のデータを用いて行う演算を示す。値６０４は、生成方法を外部装置が取得するための情報であればよく、演算以外の情報でもよい。たとえば、値６０４は対象とする画像データを生成するための演算を識別するための情報でもよいし、生成方法に関する情報が保存されている保存先のパスの情報であってもよいし、リンク先の情報であってもよい。
【００８６】
値６０５及び値６０６はそれぞれタグ６０１及びタグ６０２の値であり、それぞれの必要データを一意に識別するための情報を示す。値６０５及び値６０６は、たとえば必要データのＳＯＰインスタンスＵＩＤであり、ＩＯＤ２０８を取得した装置は、ＳＯＰインスタンスＵＩＤに基づいて情報処理装置１００やＰＡＣＳ１０２３から必要データを取得することができる。値６０５及び値６０６は必要データを取得するための情報であればよく、たとえばＰＡＣＳ１０２３における保存先を示すパスの情報であってもよいし、リンク先の情報であってもよい。
【００８７】
値６０７はタグ６０３の値であり、パラメータの値を示す。図６に示した態様はあくまで一例であり、本発明がこれに限られないことは言うまでもない。
【００８８】
ステップＳ４０３において、情報取得部１０４３は、ステップＳ４０２でＤＩＣＯＭに適した形式に変換された生成方法に関する情報を、メタデータ２０１の画像データ生成方法２０７として追加する。
【００８９】
ステップＳ４０４において、画像処理部１０３はステップＳ３００で取得された光音響信号に基づいて、光音響画像を取得する。
【００９０】
以上の処理により、ある種類の光音響画像に関するＩＯＤが取得される。
【００９１】
ステップＳ３０２において、出力制御部１０４は外部装置に出力する全ての種類の光音響画像に関するＩＯＤを取得したか否か判定する。全ての種類の光音響画像に関するＩＯＤを取得していればステップＳ３０３に進み、まだ取得していない種類があればステップＳ３０２に進んで上述した処理を繰り返す。
【００９２】
ステップＳ３０３において、通信部１０５はステップＳ３０２までに取得されたＩＯＤをＰＡＣＳ１０２３やＶｉｅｗｅｒ１０２４といった外部装置に出力する。なお、ステップＳ３０２とステップＳ３０３の順序は上述した例に限られず、たとえば通信部１０５は取得されたＩＯＤから順次外部装置に出力してもよい。
【００９３】
図９は、表示制御部１０６により表示部１００２に表示される画面９００の一例である。画面９００は、たとえば図３の処理を行う間、表示制御部１０６により表示部１００２に表示される。画面９００はユーザが外部装置に出力する光音響画像の種類を選択したり、ＩＯＤを出力する装置を選択したり、画像データの形式を選択したり、画像データの保存期間を指定したりするためのユーザインタフェースを提供する。
【００９４】
列９０１は、光音響画像の種類が表示される。データの種類９０２の行には、その種類の光音響画像を外部装置に出力するか否かを選択するためのボタン９０３が表示される。ユーザはそれぞれのボタンに対する操作入力により、外部装置に出力する光音響画像の種類を選択することができる。ボタン９０３は、選択された場合と選択されていない場合とが区別可能な態様で表示される。図３に示すステップＳ３０１において出力制御部１０４は、画面９００に対する操作入力により選択された種類の光音響画像に関するＩＯＤを取得するようにしてもよい。
【００９５】
図９に示す例では、初期音圧分布と光量分布に関する画像データを出力することはデフォルトで設定されており、そのような場合、それらの画像データを出力するように選択するためのボタンは表示されない。すなわち、図９に示す例では、メタデータのみのＩＯＤで出力可能な種類の光音響画像に対して、画像データを外部装置に出力するか否かを選択することができる。
【００９６】
領域９０４には、ボタン９０３により選択された種類が表示される。領域９０５には、ボタン９０３により選択された種類の光音響画像がプレビュー表示される。領域９０５には、図４に示すステップＳ４０４で画像データが取得された後にプレビュー表示される。
【００９７】
領域９０６は、ボタン９０３に対する操作入力により選択された種類の光音響画像に関するＩＯＤを出力する対象を選択するための領域である。ボタン９０７は、ＰＡＣＳ１０２３に出力することを選択するためのボタンである。ボタン９０８は、Ｖｉｅｗｅｒ１０２４に出力することを選択するためのボタンである。ボタン９０９はユーザが任意に出力先を選択するためのボタンであり、領域９１０に対する操作入力により出力先を指定することができる。図３に示すステップＳ３０２において通信部１０５は、領域９０４に対する操作入力により選択された外部装置にＩＯＤを出力するようにしてもよい。
【００９８】
領域９１１は、ボタン９０３に対する操作入力により選択された種類の光音響画像の画像データの形式を指定するための領域である。ボタン９１２は、ＤＩＣＯＭ規格に則って非圧縮の画像データの形式に指定するためのボタンである。ボタン９１３は、ＤＩＣＯＭ規格に則って圧縮された画像データの形式（たとえばＪＰＥＧ２０００）に指定するためのボタンである。ボタン９１４はユーザが任意に形式を選択するためのボタンであり、領域９１５に対する操作入力により形式を指定することができる。
【００９９】
ボタン９２１は、ボタン９０３に対する操作入力により選択された種類の光音響画像に関するＩＯＤの出力を指示するためのボタンである。
【０１００】
図７は、図３乃至図６に示す例において取得されたＩＯＤに基づいて、Ｖｉｅｗｅｒ１０２４で光音響画像を表示するための処理の一例を示すフローチャートである。下記の処理において、特に断りがない場合、各処理を実現する主体は、ＣＰＵ１１０１またはＧＰＵである。Ｖｉｅｗｅｒ１０２４はたとえばコンピュータであり、Ｖｉｅｗｅｒ１０２４のハードウェア構成は図１１と同様である。
【０１０１】
ステップＳ７００において、Ｖｉｅｗｅｒ１０２４はＰＡＣＳ１０２３又は情報処理装置１００からＩＯＤを取得する。すなわち、Ｖｉｅｗｅｒ１０２４は光音響画像に関するオブジェクトを受信する。
【０１０２】
ステップＳ７０１において、Ｖｉｅｗｅｒ１０２４はステップＳ７００において取得したＩＯＤに画像データが含まれるか否か判定する。画像データを含まない、メタデータのみのＩＯＤである場合にはステップＳ７０２に進み、画像データを含むＩＯＤである場合にはステップＳ７０４に進む。
【０１０３】
ステップＳ７０２において、Ｖｉｅｗｅｒ１０２４はＩＯＤのメタデータ２０１に含まれる画像データ生成方法２０７の情報を取得する。
【０１０４】
ステップＳ７０３において、Ｖｉｅｗｅｒ１０２４は生成方法２０７の情報に基づいて、当該ＩＯＤが示す画像データを取得する。ステップＳ７０２で取得した生成方法２０７に含まれる必要データのＩＯＤをＶｉｅｗｅｒ１０２４が取得していない場合、Ｖｉｅｗｅｒ１０２４はＰＡＣＳ１０２３又は情報処理装置１００から当該ＩＯＤを取得する。そして、取得されたＩＯＤが画像データを含まないメタデータのみのＩＯＤである場合には、Ｖｉｅｗｅｒ１０２４は上述のステップＳ７０２と同様にして生成方法２０７の情報を取得し、当該生成方法に基づいて画像データを取得すればよい。すなわち、Ｖｉｅｗｅｒ１０２４は取得したオブジェクトのメタデータに基づいて光音響画像を取得する。
【０１０５】
ステップＳ７０４において、Ｖｉｅｗｅｒ１０２４は表示する全てのＩＯＤの画像データを取得したか否か判定する。表示する全てのＩＯＤの画像データを取得した場合には図７に示す処理を終了する。表示するＩＯＤのうちまだ画像データを取得していないものがある場合はステップＳ７０１に進んで上述した処理を繰り返す。
【０１０６】
これにより、Ｖｉｅｗｅｒ１０２４は取得したＩＯＤに関する画像データを表示部（不図示）に表示させることができる。Ｖｉｅｗｅｒ１０２４は、取得したＩＯＤのメタデータ、特に生成方法に関するＤＩＣＯＭタグに基づいて、光音響画像を表示する。ユーザは、Ｖｉｅｗｅｒ１０２４に図７に示す処理を実現させるために、図７に示す処理のプログラムをインストールしてもよい。
【０１０７】
図７に示す処理は、Ｖｉｅｗｅｒ１０２４にＩＯＤが取得された時点で行われてもよい。また、当該処理は、Ｖｉｅｗｅｒ１０２４を介してユーザが特定のＩＯＤの画像データを閲覧するための操作入力を行った時点で行われてもよい。また別の例では、当該処理が予め定められたタイミングで行われるように、ユーザはＶｉｅｗｅｒ１０２４を設定してもよい。
【０１０８】
第１の実施形態の構成により、情報処理装置１００は外部装置において画像を表示するために必要な画像データを外部装置に出力し、必要でない画像データは生成せず、当該画像データの生成方法を示す情報を含むメタデータを出力する。これにより、情報処理装置１００から出力されるデータの容量を低減でき、通信にかかる容量及び各種の装置の保存にかかる容量を低減できる。
【０１０９】
［第１の実施形態の変形例］
設定部１０４１は、さらにユーザがＶｉｅｗｅｒ１０２４といった外部装置において優先的に観察したい種類についての情報を記憶していてもよい。たとえば、ユーザが酸素飽和度といった物質の濃度分布に関する情報を優先的に観察したい種類の光音響画像については、メタデータと光音響画像とを含むＩＯＤが外部装置に出力されるように設定してもよい。たとえば、情報処理装置１００は診断に用いるための、被検体内部の物質の分布に関する画像データとメタデータとを含むＩＯＤをＰＡＣＳ１０２３に出力し、それ以外は画像データとメタデータとのうちメタデータのみを含むＩＯＤをＰＡＣＳ１０２３に出力する。これにより、情報処理装置１００から外部装置に出力されるデータの容量を低減でき、かつ外部装置では診断に用いるためのデータを容易に表示させることができる。優先的に観察したい種類以外の光音響画像については、少なくともそれらを生成可能なデータを情報処理装置１００の記憶装置１１０４に記憶しておき、メタデータに生成方法に関する情報または情報処理装置１００から取得するための情報を追加してもよい。情報処理装置１００から取得するための情報とは、たとえば情報処理装置１００における画像データの保存先のパスを示す情報である。情報取得部１０４３は、異なる複数の種類の光音響画像のうち、診断に用いるための被検体内部の物質の分布に関する画像データとメタデータとを含むＩＯＤを取得し、それ以外の種類の光音響画像はメタデータのみを含むＩＯＤを取得する。
【０１１０】
別の例としては、判定部１０４２は当該設定の情報を用いないでステップＳ４００の判定を行ってもよい。たとえば、判定部１０４２は、検査オーダ等において外部装置への出力が求められている光音響画像の種類の中で、外部装置に出力する画像データの数が最も少なくなるようにステップＳ４００の判定を行ってもよい。
【０１１１】
出力制御部１０４は、外部装置に出力する対象としてユーザが指定した光音響画像の種類の組合せが不適切な場合に、ユーザに警告を行ってもよい。たとえば出力制御部１０４は、全ての種類の画像データを出力しなければ外部装置で表示できない場合、つまり他に出力された画像データを用いて外部装置で生成できない組合せの場合に、ユーザに警告を行う。出力制御部１０４は、当該警告として表示制御部１０６を介して表示部１００２にユーザへのメッセージを表示させてもよい。出力制御部１０４は、ユーザが指定した組合せよりも効率的に画像データを出力できる種類の組合せをユーザに提示してもよい。
【０１１２】
図４に示す処理では、光音響画像とメタデータのうち、メタデータのみではなく光音響画像も外部装置に出力すると判定された場合に画像処理部１０３が光音響画像を取得する場合を例に説明した。本発明はこれに限らず、ステップＳ４００の判定の結果に関わらず、画像処理部１０３は光音響画像を取得してもよい。すなわち、ステップＳ４０４の処理は外部装置にＩＯＤが出力される前のいかなる時点で行われてもよい。その場合、ステップＳ４００において光音響画像とメタデータのうちメタデータのみを外部装置に出力すると判定された場合には、画像処理部１０３が光音響画像を取得していても出力制御部１０４は当該光音響画像を外部装置に出力しない。
【０１１３】
画像処理部１０３が予め被検体に照射される光の強度分布を取得し、光拡散方程式等に基づいて光フルエンス分布を取得する場合を例に説明したが、本発明はこれに限らない。たとえば、画像処理部１０３は被検体に一様に光が照射されたと仮定して光フルエンス分布を取得してもよい。また、その場合に画像処理部１０３は被検体の深さ方向の減衰をさらに考慮して光フルエンス分布を取得してもよい。
【０１１４】
［第２の実施形態］
第１の実施形態においては、情報処理装置１００から外部装置に画像データを効率的に出力するための処理として、外部装置で生成可能な種類の光音響画像については、生成方法に関する情報を含むメタデータのみのＩＯＤを取得し、外部装置に出力する例を示した。
【０１１５】
第２の実施形態においては、情報処理装置１００からメタデータのみのＩＯＤ又はメタデータと画像データとを含むＩＯＤを取得し、記憶しているＰＡＣＳ１０２３において、ユーザが表示を希望する画像データを取得して送信する場合を例に説明する。
【０１１６】
第２の実施形態にかかるＰＡＣＳ１０２３は、図１に示す情報処理装置１００の画像処理部１０３と同様の機能構成を有する。
【０１１７】
図８は、ＰＡＣＳ１０２３により行われる処理の一例を示すフローチャートである。下記の処理において、特に断りがない場合、各処理を実現する主体はＰＡＣＳ１０２３のプロセッサ（不図示）である。
【０１１８】
ステップＳ８００において、ＰＡＣＳ１０２３は、Ｖｉｅｗｅｒ１０２４といった外部装置から、画像データの送信要求を受け付ける。
【０１１９】
ステップＳ８０１において、ＰＡＣＳ１０２３は、ステップＳ８０１で取得した送信要求に基づいて、画像データを取得する。ＰＡＣＳ１０２３は、送信要求がなされた種類の光音響画像に関するＩＯＤを検索する。ＰＡＣＳ１０２３内に当該ＩＯＤが存在しない場合は、情報処理装置１００に出力を要求してもよい。ＰＡＣＳ１０２３は、検索されたＩＯＤに画像データが含まれない場合は、メタデータ２０１に含まれる画像データ生成方法２０７に基づいて画像データを取得する。生成方法２０７に基づいて画像データを取得するための処理は第１の実施形態において説明したのと同様である。上述した説明を援用することによりここでは詳しい説明を省略する。
【０１２０】
ステップＳ８０２において、ＰＡＣＳ１０２３はステップＳ８０１で受信した送信要求に対応する画像データを含むＩＯＤをＶｉｅｗｅｒ１０２４に出力する。
【０１２１】
第２の実施形態に係る構成により、ＰＡＣＳ１０２３は情報処理装置１００から受信したデータの保存にかかる容量を抑えることができる。そして、Ｖｉｅｗｅｒ１０２４で表示するための送信要求に対しては画像データを取得してＶｉｅｗｅｒ１０２４に出力することにより、Ｖｉｅｗｅｒ１０２４では容易に画像データを表示することができる。
【０１２２】
［第２の実施形態の変形例］
ＰＡＣＳ１０２３は、Ｖｉｅｗｅｒ１０２４の機能に応じて、メタデータのみのＩＯＤを出力するか、画像データとメタデータとを含むＩＯＤを出力するかを決定してもよい。たとえば、Ｖｉｅｗｅｒ１０２４が画像処理の機能を有する場合には、ステップＳ９０１で画像データを取得せず、ステップＳ９０２でメタデータのみのＩＯＤをＶｉｅｗｅｒ１０２４に出力してもよい。
【０１２３】
第２の実施形態の別の例として、情報処理装置１００は光音響画像に関するＩＯＤを以下のステップにより出力し、ＰＡＣＳ１０２３は当該ＩＯＤを取得してもよい。
（Ａ）情報処理装置１００が第１の光音響画像（例えば、初期音圧分布画像である。）を形成するための第１の光音響画像データ（例えば、３Ｄボリュームデータ）を取得するステップ。
（Ｂ）情報処理装置１００が前記第１の光音響画像データと他の情報（例えば、光フルエンス分布に関する情報）とを用いて、第２の光音響画像（例えば、吸収係数分布）を形成するための第２の光音響画像データ（例えば、ボリュームデータ）を取得するステップ。
（Ｃ）情報処理装置１００が前記第１の光音響画像データと前記第１の光音響画像に関する第１のメタデータとを含む第１のＩＯＤをＰＡＣＳ１０２３に送信するステップ。すなわち、ＰＡＣＳ１０２３が第１のＩＯＤを取得するステップ。
（Ｄ）ＰＡＣＳ１０２３が第２の光音響画像データを保持していない場合であっても、ＰＡＣＳ１０２３が第１の光音響画像データに基づき、第２の光音響画像データを生成できるようにするための情報を含む第２のメタデータを、情報処理装置１００がＰＡＣＳ１０２３に送信するステップ。ここでいう情報とは、例えば、光フルエンス分布に関する情報や、光源から被検体に照射される光強度と光強度分布から被検体内での光強度を推定する為の計算式に関する情報である。
【０１２４】
［変形例］
上述の実施形態では、光音響撮像装置において取得された光音響画像をＤＩＣＯＭオブジェクトとして出力する際の処理を説明したが、本発明はこれに限らない。たとえば、光音響信号と超音波信号とを取得可能な撮像装置において取得された超音波画像と光音響画像とを上述の処理の対象としてもよい。また、ＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）装置において取得されたＣＴ画像や、ＭＲＩ（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）装置において取得されたＭＲＩ画像を上述の処理の対象としてもよい。いずれの撮像装置で取得された医用画像であっても、ある一群の信号に基づいて生成される複数の種類の画像データであって、ある画像データに基づいて生成可能な画像データはＩＯＤに含めずメタデータにその生成方法を示す情報を記載することにより、かかる画像データの通信の負担を低減することができる。
【０１２５】
上述の実施形態では、光音響画像の画像データを含むＩＯＤと、光音響画像の画像データを含まないＩＯＤとを光音響画像の種類に応じて外部装置に出力する例を説明したが、本発明はこれに限らない。たとえば出力制御部１０４は、光音響画像の種類に応じて、光音響画像の高精細な画像データを含むＩＯＤと、光音響画像の簡易な画像データ及び当該簡易な画像データから高精細な画像データを得るための方法に関する情報を含むＩＯＤとを外部装置に出力してもよい。ＩＯＤを取得した外部装置はメタデータを読みだして、他の画像データや数値の情報に基づいて簡易な画像データから高精細な画像データを取得することができる。少なくとも一部の種類の光音響画像については高精細な画像データを出力しないように制御することにより、通信や保存にかかる容量を低減することができる。別の例では、たとえば出力制御部１０４は光音響画像のうち特定の領域（ＲＯＩ）の画像データとメタデータとを含むＩＯＤを外部装置に出力してもよい。その場合、出力制御部１０４は光音響画像のうちＲＯＩ以外の領域を生成するための情報をメタデータに記載する。Ｖｉｅｗｅｒ１０２４は、ＲＯＩの画像データを含むＩＯＤを取得し、ＲＯＩを容易にＶｉｅｗｅｒ１０２４の表示部（不図示）表示させることができる。また、Ｖｉｅｗｅｒ１０２４はメタデータを読みだすことにより、ＲＯＩ以外の領域の画像を取得することができる。
【０１２６】
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【０１２７】
上述の各実施形態における情報処理装置は、単体の装置として実現してもよいし、複数の装置を互いに通信可能に組合せて上述の処理を実行する形態としてもよく、いずれも本発明の実施形態に含まれる。共通のサーバ装置あるいはサーバ群で、上述の処理を実行することとしてもよい。情報処理装置および情報処理システムを構成する複数の装置は所定の通信レートで通信可能であればよく、また同一の施設内あるいは同一の国に存在することを要しない。
【０１２８】
たとえば、図１に示す機能構成の一部は情報処理装置１００ではなくＰＡＣＳ１０２３に含まれていてもよいし、Ｖｉｅｗｅｒ１０２４に含まれていてもよく、これらの装置から成るシステムとして上述の処理が実現されてもよい。たとえば、画像処理部１０３と出力制御部１０４とがＰＡＣＳ１０２３に含まれていてもよく、ＰＡＣＳ１０２３がＶｉｅｗｅｒ１０２４に出力するＩＯＤの形態を制御してもよい。
【０１２９】
本発明の実施形態には、前述した実施形態の機能を実現するソフトウェアのプログラムを、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムのコードを読みだして実行するという形態を含む。
【０１３０】
したがって、実施形態に係る処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明の実施形態の一つである。また、コンピュータが読みだしたプログラムに含まれる指示に基づき、コンピュータで稼働しているＯＳなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。
【０１３１】
上述の実施形態を適宜組み合わせた形態も、本発明の実施形態に含まれる。
【図１】
2018082830.tif 000003
【図２】
2018082830.tif 000004
【図３】
2018082830.tif 000005
【図４】
2018082830.tif 000006
【図５】
2018082830.tif 000007
【図６】
2018082830.tif 000008
【図７】
2018082830.tif 000009
【図８】
2018082830.tif 000010
【図９】
2018082830.tif 000011
【図１０】
2018082830.tif 000012
【図１１】
2018082830.tif 000013