(57)【要約】【課題】  複数の３次元画像間のある方向における位置関係を容易に把握することができる装置を提供する。【解決手段】  情報処理装置は、第１の３次元画像に含まれる２次元画像と、第２の３次元画像に含まれる２次元画像との位置に関する情報に基づいて、第１の３次元画像に含まれる２次元画像の存在する位置の範囲である第１の範囲と、第２の３次元画像に含まれる２次元画像の存在する位置の範囲である第２の範囲と、第１の３次元画像または第２の３次元画像の少なくともいずれかに含まれる２次元画像が存在する位置の範囲である第３の範囲と、に関する情報を取得し、第１の３次元画像に含まれる２次元画像または第２の３次元画像に含まれる２次元画像の少なくともいずれか一方の表示部に表示される大きさに合わせた大きさで、第３の範囲を示す図形を描画することにより表示部に表示させる。【選択図】  図１
2018175410.tif 000002
【特許請求の範囲】
【請求項１】
第１の３次元画像に含まれる２次元画像と、前記第１の３次元画像とは異なる第２の３次元画像に含まれる２次元画像との位置に関する情報に基づいて、前記第１の３次元画像に含まれる２次元画像の存在する位置の範囲である第１の範囲と、前記第２の３次元画像に含まれる２次元画像の存在する位置の範囲であって前記第１の範囲とは異なる第２の範囲と、に関する情報を取得する取得手段と、
前記第１の範囲を示す図形を前記第２の範囲に対する相対的な位置に描画することにより表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項２】
前記表示制御手段は、前記第１の範囲に含まれる２次元画像の位置と前記第２の範囲に含まれる２次元画像の位置とのうち、被検体の同一の位置の２次元画像が存在する位置を対応させて前記第１の範囲を示す図形を描画することにより、前記第２の範囲に対する前記相対的な位置に描画することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記取得手段は、前記第１の３次元画像に含まれる２次元画像と直交する方向の、前記２次元画像が存在する位置の範囲を前記第１の範囲として取得し、前記第２の３次元画像に含まれる２次元画像と直交する方向の、前記２次元画像が存在する位置の範囲を前記第２の範囲として取得することを特徴とする請求項１または請求項２に記載の情報処理装置。
【請求項４】
前記取得手段は、前記第１の３次元画像と前記第２の３次元画像とのいずれかに含まれる２次元画像の位置の範囲である第３の範囲に関する情報をさらに取得することを特徴とする請求項１乃至請求項３のいずれか１項に記載の情報処理装置。
【請求項５】
前記表示制御手段は、前記第１の範囲を示す図形を、前記第３の範囲を示す図形とともに描画することにより、前記第２の範囲に対する相対的な位置に描画することを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記表示制御手段は、前記第３の範囲を前記第１の３次元画像に含まれる２次元画像が描画される大きさに対応させ、前記第１の範囲を示す図形を前記第３の範囲における位置に描画することにより、前記第２の範囲に対する相対的な位置に描画することを特徴とする請求項４に記載の情報処理装置。
【請求項７】
前記表示制御手段は、前記第１の範囲を示す図形と、前記第２の範囲を示す図形とを描画することにより前記表示部に表示させることを特徴とする請求項１乃至請求項６のいずれか１項に記載の情報処理装置。
【請求項８】
前記第１の範囲を示す図形は目盛りであることを特徴とする請求項１乃至請求項７のいずれか１項に記載の情報処理装置。
【請求項９】
第１の３次元画像に含まれる２次元画像と、前記第１の３次元画像とは異なる第２の３次元画像に含まれる２次元画像との位置に関する情報に基づいて、前記第１の３次元画像に含まれる２次元画像の存在する位置の範囲である第１の範囲と、前記第２の３次元画像に含まれる２次元画像の存在する位置の範囲であって前記第１の範囲とは異なる第２の範囲と、前記第１の３次元画像または前記第２の３次元画像の少なくともいずれかに含まれる２次元画像が存在する位置の範囲である第３の範囲と、に関する情報を取得する取得手段と、
前記第１の３次元画像に含まれる２次元画像または前記第２の３次元画像に含まれる２次元画像の少なくともいずれか一方の表示部に表示される大きさに合わせた大きさで、前記第３の範囲を示す図形を描画することにより前記表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項１０】
前記表示制御手段は、前記第３の範囲を示す図形において前記第１の範囲と前記第２の範囲とを識別可能に表示させることを特徴とする請求項９に記載の情報処理装置。
【請求項１１】
前記表示制御手段は、前記第１の範囲と前記第２の範囲との重複の度合いに基づいて、前記第３の範囲を示す図形の態様を変更することを特徴とする請求項９または請求項１０に記載の情報処理装置。
【請求項１２】
第１の３次元画像に含まれる２次元画像と、前記第１の３次元画像とは異なる第２の３次元画像に含まれる２次元画像との位置に関する情報に基づいて、前記第１の３次元画像に含まれる２次元画像の存在する位置の範囲である第１の範囲と、前記第２の３次元画像に含まれる２次元画像の存在する位置の範囲であって前記第１の範囲とは異なる第２の範囲と、に関する情報を取得する取得手段と、
前記第１の範囲を示す図形を前記第２の範囲に対する相対的な位置に描画することにより表示部に表示させる表示制御手段と、
を有することを特徴とする情報処理システム。
【請求項１３】
第１の３次元画像に含まれる２次元画像と、前記第１の３次元画像とは異なる第２の３次元画像に含まれる２次元画像との位置に関する情報に基づいて、前記第１の３次元画像に含まれる２次元画像の存在する位置の範囲である第１の範囲と、前記第２の３次元画像に含まれる２次元画像の存在する位置の範囲であって前記第１の範囲とは異なる第２の範囲と、に関する情報を取得する工程と、
前記第１の範囲を示す図形を前記第２の範囲に対する相対的な位置に描画することにより表示部に表示させる工程と、
を有することを特徴とする情報処理方法。
【請求項１４】
請求項１３に記載の情報処理方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理システム、情報処理方法及びプログラムに関する。
【背景技術】
【０００２】
医師が医用画像を用いて診療を行う際に、病変部位の発見や経過観察のために、複数の医用画像を比較しながら観察することがある。特許文献１には、基準となるボリュームデータ（３次元画像）に含まれる断面画像（２次元画像）を指定可能な範囲を、基準となるボリュームデータの再構成された領域の範囲と、比較するボリュームデータの再構成された領域の範囲との少なくとも一方を含む範囲（和領域）に制限することが開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１１２５３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
あるボリュームデータの断面画像をユーザが指定しようとする場合に、当該ボリュームデータの断面画像を指定可能な範囲が他のボリュームデータとの和領域に拡張されるだけでは、それぞれのボリュームデータの断面画像の相対的な位置関係が把握できないおそれがある。
【課題を解決するための手段】
【０００５】
本発明の実施形態に係る情報処理装置は、第１の３次元画像に含まれる２次元画像と、前記第１の３次元画像とは異なる第２の３次元画像に含まれる２次元画像との位置に関する情報に基づいて、前記第１の３次元画像に含まれる２次元画像の存在する位置の範囲である第１の範囲と、前記第２の３次元画像に含まれる２次元画像の存在する位置の範囲であって前記第１の範囲とは異なる第２の範囲と、に関する情報を取得する取得手段と、前記第１の範囲を示す図形を前記第２の範囲に対する相対的な位置に描画することにより表示部に表示させる表示制御手段と、を有することを特徴とする。
【発明の効果】
【０００６】
本発明の実施形態に係る情報処理装置によれば、それぞれのボリュームデータの断面画像の相対的な位置関係を容易に把握することができる。
【図面の簡単な説明】
【０００７】
【図１】第１の実施形態に係る情報処理装置の機能構成の一例を示す図である。
【図２】第１の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図３】第１の実施形態に係る情報処理装置により行われる処理を説明するための図である。
【図４】第１の実施形態に係る情報処理装置により表示部に表示される画面の一例を示す図である。
【図５】第２の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図６】第３の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図７】第３の実施形態に係る情報処理装置により表示部に表示される画面の一例を示す図である。
【図８】第４の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図９】第５の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図１０】第５の実施形態に係る情報処理装置により表示部に表示される画面の一例を示す図である。
【図１１】第６の実施形態に係る情報処理装置により行われる処理の一例を示すフローチャートである。
【図１２】本発明の実施形態に係る情報処理装置のハードウェア構成の一例を示す図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明の実施形態を説明する。
【０００９】
［第１の実施形態］
医療の分野では、Ｘ線ＣＴ装置（Ｃｏｍｐｕｔｅｒ  Ｔｏｍｏｇｒａｐｈｙ）やＭＲＩ装置（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）等の撮影装置により得られた医用画像に基づいて診断を行う、画像診断が行われている。画像診断を行う医師は画像から得られる所見や各種の測定値から総合的に判断して、医用画像に描出される病変や被検体である患者の症状を特定する。画像診断において、異なる撮影装置により得られた複数の医用画像や、異なる時点で撮影された複数の医用画像を比較する場合がある。第１の実施形態に係る情報処理装置１０は、複数の医用画像を比較するための操作を簡便に行えるようにすることを目的とする。
【００１０】
具体的には、情報処理装置１０は表示される複数の医用画像のある方向における位置関係を、対応する断層位置が同じになるように表示する。情報処理装置１０は複数の医用画像のある方向において重複する位置の範囲を表示する。さらに情報処理装置１０は、これらの位置関係を示す目盛りを医用画像に隣接させて表示する。これにより、医用画像を観察するユーザは、観察の対象である複数の医用画像間の位置関係を容易に把握することができる。さらに、医用画像の観察と位置関係の把握とを視線を大きく動かすことなく行うことができる。
【００１１】
図１２は、第１の実施形態に係る情報処理装置１０のハードウェア構成の一例を示す図である。情報処理装置１０は、たとえばコンピュータである。情報処理装置１０は、ＣＰＵ１２０１、ＲＯＭ１２０２、ＲＡＭ１２０３、記憶装置１２０４、ＵＳＢ１２０５、通信回路１２０６、グラフィックスボード１２０７を有する。これらはＢＵＳにより通信可能に接続されている。ＢＵＳは接続されたハードウェア間でのデータの送受信や、ＣＰＵ１２０１から他のハードウェアへの命令を送信するために使用される。
【００１２】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１２０１は情報処理装置１０及びこれに接続する各部を統合的に制御する制御回路である。ＣＰＵ１２０１はＲＯＭ１２０２に格納されているプログラムを実行することにより制御を実施する。またＣＰＵ１２０１は、表示部１３を制御するためのソフトウェアであるディスプレイドライバを実行し、表示部１３に対する表示制御を行う。さらにＣＰＵ１２０１は、操作部１２に対する入出力制御を行う。
【００１３】
ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１２０２は、ＣＰＵ１２０１による制御の手順を記憶させたプログラムやデータを格納する。ＲＯＭ１２０２は、情報処理装置１０のブートプログラムや各種初期データを記憶する。また、情報処理装置１０の処理を実現するための各種のプログラムを記憶する。
【００１４】
ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１２０３は、ＣＰＵ１２０１が命令プログラムによる制御を行う際に作業用の記憶領域を提供するものである。ＲＡＭ１２０３は、スタックとワーク領域とを有する。ＲＡＭ１２０３は、情報処理装置１０及びこれに接続する各部における処理を実行するためのプログラムや、画像処理で用いる各種パラメータを記憶する。ＲＡＭ１２０３は、ＣＰＵ１２０１が実行する制御プログラムを格納し、ＣＰＵ１２０１が各種制御を実行する際の様々なデータを一時的に格納する。
【００１５】
記憶装置１２０４は、超音波画像や光音響画像などの各種のデータを保存する補助記憶装置である。記憶装置１２０４は、たとえばＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）や、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）である。
【００１６】
ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）１２０５は操作部１２と接続する接続部である。
【００１７】
通信回路１２０６は情報処理装置１０を含むシステムを構成する各部や、情報処理装置１０とネットワークを介して接続されている各種の外部装置との通信を行うための回路である。通信回路１２０６は、たとえば出力する情報を転送用パケットに格納してＴＣＰ／ＩＰといった通信技術により、ネットワークを介して外部装置に出力する。情報処理装置１０は、所望の通信形態にあわせて、複数の通信回路を有していてもよい。
【００１８】
グラフィックスボード１２０７は、ＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ビデオメモリを含む。
【００１９】
ＨＤＭＩ（登録商標）（Ｈｉｇｈ  Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）１１０８は、表示部１３と接続する接続部である。
【００２０】
ＣＰＵ１２０１やＧＰＵはプロセッサの一例である。また、ＲＯＭ１２０２やＲＡＭ１２０３や記憶装置１２０４はメモリの一例である。情報処理装置１０は複数のプロセッサを有していてもよい。情報処理装置１０は複数のメモリを有していてもよい。第１の実施形態においては、情報処理装置１０のプロセッサがメモリに格納されているプログラムを実行することにより、情報処理装置１０の各部の機能が実現される。
【００２１】
また、情報処理装置１０は特定の処理を専用に行うＣＰＵやＧＰＵ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）を有していても良い。情報処理装置１０は特定の処理あるいは全ての処理をプログラムしたＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）を有していてもよい。
【００２２】
図１は、本実施形態に係る情報処理装置１０に関する機能構成の一例を示す図である。第１の実施形態において情報処理装置１０は、データサーバ１１および操作部１２、表示部１３と接続されている。
【００２３】
データサーバ１１は、医用画像を記憶するサーバである。データサーバ１１は、たとえばＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍ）である。第１の実施形態において、データサーバ１１は第１の３次元画像と第２の３次元画像を保持している。第１の３次元画像および第２の３次元画像は、たとえば同一のモダリティで撮像された３次元画像（ボリュームデータ）であり、それぞれ異なる条件（日時、造影条件、撮像パラメータ、被検体の体位等）下で撮像された３次元画像である。ここで、モダリティはたとえばＭＲＩ（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）装置、Ｘ線ＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）装置、３次元超音波撮影装置、光音響トモグラフィ装置、ＰＥＴ（Ｐｏｓｉｔｒｏｎ  Ｅｍｉｓｓｉｏｎ  Ｔｏｍｏｇｒａｐｈｙ）／ＳＰＥＣＴ（Ｓｉｎｇｌｅ  Ｐｈｏｔｏｎ  Ｅｍｉｓｓｉｏｎ  ＣＴ）、ＯＣＴ（Ｏｐｔｉｃａｌ  Ｃｏｈｅｒｅｎｃｅ  Ｔｏｍｏｇｒａｐｈｙ）装置などのいずれかである。たとえば、第１の３次元画像および第２の３次元画像は、経過観察のために同一の被検体を同一モダリティ、同一体位で異なる日時に撮像した画像であってもよい。またたとえば、第１の３次元画像および第２の３次元画像は、同一患者を異なるモダリティや異なる造影条件、異なる撮像パラメータで撮像した画像であってもよい。また別の例では、第１の３次元画像および第２の３次元画像は異なる被検体を撮像した画像でもよいし、被検体の画像と標準画像でもよい。標準画像とはたとえば、多数の患者の画像から取得される平均的な情報（画素値、部位情報など）から生成される画像である。第１の３次元画像および第２の３次元画像は、画像取得部１１０を介して情報処理装置１０に入力される。
【００２４】
操作部１２は、たとえばマウスやキーボードである。ユーザは操作部１２を介した操作入力を行い、情報処理装置１０は操作入力の情報を受け付ける。
【００２５】
表示部１３は、たとえばモニタである。情報処理装置１０の制御に基づいて、表示部１３には第１の実施形態の実施形態に係る画面が表示される。
【００２６】
情報処理装置１０は、画像取得部１１０、断層画像取得部１２０、位置取得部１３０、範囲取得部１４０、表示制御部１５０を含む。
【００２７】
画像取得部１１０は、情報処理装置１０に入力される第１の３次元画像と第２の３次元画像とをデータサーバ１１から取得する。
【００２８】
以下では、画像取得部１１０は、医用画像のフォーマットと、それらの画像を扱う装置間の通信プロトコルを定義した規格であるＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ  ｉｎ  Ｍｅｄｉｃｉｎｅ）に準拠した医用画像を用いることとする。以下では、ＤＩＣＯＭに準拠したデータをＤＩＣＯＭオブジェクトと称する場合がある。たとえば、ＤＩＣＯＭオブジェクトである医用画像は画像データを記録する領域と、メタデータを記録する領域からなる。メタデータは、タグにより特定されるエレメントから構成される。メタデータを記録する領域にはたとえば、医用画像を取得した撮影装置に関する情報や、被検体（患者）に関する情報や、撮影領域に関する情報が含まれる。撮影領域に関する情報とは、たとえば医用画像が取得された被検体の解剖学的部位を特定するための情報であり、鎖骨といった被検体の特定の解剖学的構造からの距離といった数値で表現されていてもよい。以下の説明で述べる情報と同様の情報が得られる医用画像であれば、ＤＩＣＯＭに準拠していない医用画像であってもよい。
【００２９】
断層画像取得部１２０は、第１の３次元画像に含まれる第１の断層画像と、第２の３次元画像に含まれる第２の断層画像とを取得する。第１の断層画像は第１の３次元画像に含まれる複数の２次元画像（断層画像）の一つである。第２の断層画像は第２の３次元画像に含まれる複数の２次元画像（断層画像）の一つである。
【００３０】
位置取得部１３０は、第１の３次元画像に含まれる２次元画像が存在する位置と、第２の３次元画像に含まれる２次元画像が存在する位置との対応関係を示す対応位置情報を取得する。別の観点では、対応位置情報は第１の３次元画像に含まれる２次元画像に対する、第２の３次元画像に含まれる２次元画像の相対的な位置を示す情報である。また別の観点では、第１の３次元画像に含まれる２次元画像の位置の、第２の３次元画像に含まれる２次元画像の位置に対するずれ量を表す情報である。さらに別の観点では、第１の３次元画像に含まれる２次元画像の被検体における位置と、第２の３次元画像に含まれる２次元画像の被検体における位置とを示す情報である。
【００３１】
位置取得部１３０は、３次元画像に含まれる２次元画像が存在する位置を、ＤＩＣＯＭオブジェクトである当該３次元画像に含まれる情報から取得する。位置取得部１３０は、３次元画像の属性情報を取得する。属性情報とは、たとえばＤＩＣＯＭオブジェクトの構成要素であるエレメント（タグ）の特性を示す情報である。ＤＩＣＯＭにおける属性情報には、たとえば以下の情報がある。被検体（患者）の向きを示す情報として、Ｐａｔｉｅｎｔ  Ｏｒｉｅｎｔａｔｉｏｎ値またはＩｍａｇｅ  Ｏｒｉｅｎｔａｔｉｏｎ  （Ｐａｔｉｅｎｔ）値がある。被検体（患者）の位置を示す情報として、Ｉｍａｇｅ  Ｐｏｓｉｔｉｏｎ（Ｐａｔｉｅｎｔ）値またはＳｌｉｃｅ  Ｌｏｃａｔｉｏｎ値がある。属性情報のうち被検体の向きを示す情報に基づいて、各２次元画像に描出される被検体の向きを示す情報が得られる。また、被検体の位置を示す情報に基づいて、被検体のある基準点に対する各２次元画像の位置をたとえばｍｍ単位で示す情報が得られる。すなわち位置取得部１３０は、３次元画像に含まれる２次元画像の被検体における方向（被検体の向き）に関する情報に基づいて、３次元画像に含まれる２次元画像が存在する位置の範囲に関する情報を取得する。
【００３２】
範囲取得部１４０は、位置取得部１３０で取得した対応位置情報に基づいて、第１の３次元画像の第１の範囲と第２の３次元画像の第２の範囲を取得する。範囲とは、所定の基準座標系における、３次元画像に含まれる２次元画像が存在する位置の範囲を表す。範囲取得部１４０は、さらに、第１の範囲と第２の範囲の和の範囲を含む統合範囲と、積の範囲である共通範囲を取得する。
【００３３】
表示制御部１５０は、第１の断層画像と第２の断層画像とを表示部１３に表示させる。また表示制御部１５０は第１の範囲、第２の範囲、表示されている断層位置、統合範囲、共通範囲をそれぞれ示す図形を表示部１３に表示させる。統合範囲や共通範囲をそれぞれ示す図形は、たとえば目盛りである。
【００３４】
図２は、情報処理装置１０により行われる処理の一例を示すフローチャートである。
【００３５】
（Ｓ２１０）（３次元画像の取得）
ステップＳ２１０において画像取得部１１０は、情報処理装置１０に入力された第１の３次元画像と第２の３次元画像とを取得する。そして画像取得部１１０は、取得した第１の３次元画像と第２の３次元画像とを、断層画像取得部１２０、位置取得部１３０、範囲取得部１４０、表示制御部１５０へと出力する。
【００３６】
たとえば、図３で示すように、被検体３００の頭部から胸部までの範囲３１０の断層画像からなる第１の３次元画像と、同一被検体の胸部から腹部までの範囲３２０の断層画像からなる第２の３次元画像を取得する。範囲３１０は第１の範囲の一例であり、範囲３２０は第２の範囲の一例である。
【００３７】
（Ｓ２２０）（対応位置情報の取得）
ステップＳ２２０において位置取得部１３０は、ステップＳ２１０で取得した第１の３次元画像に含まれる２次元画像（断層画像）の位置と、第２の３次元画像に含まれる２次元画像（断層画像）の位置との対応関係を表す対応位置情報を取得する。そして位置取得部１３０は、取得した対応位置情報を、範囲取得部１４０と表示制御部１５０へと出力する。
【００３８】
ここで、位置取得部１３０は、操作部１２でユーザによるマウスやキーボードの操作を受けて、対応位置情報を取得できる。たとえば、ユーザは第１の３次元画像と第２の３次元画像のそれぞれの一つの２次元画像（断層画像）を、それらの２次元画像がある方向において対応する位置にある（対応する断層画像である）と指定することができる。位置取得部１３０はユーザの当該指定する操作入力に基づいて、指定された２次元画像間の対応関係に基づいて、３次元画像間の対応位置情報を取得する。たとえば位置取得部１３０は、第１の３次元画像のそれぞれの断層画像（Ｓ１＿ｉとする）と第２の３次元画像のそれぞれの断層画像（Ｓ２＿ｊとする）が対応する断層画像であるという情報を対応位置情報として保存する。あるいは位置取得部１３０は、Ｓ１＿ｉとＳ２＿ｊのそれぞれの３次元画像における断層位置をＰ１＿ｉとＰ２＿ｊとしたときに、画像間の位置のオフセットである（Ｐ１＿ｉ−Ｐ２＿ｊ）を取得して、オフセットの値を対応位置情報として保存する。
【００３９】
また、位置取得部１３０は、第１の３次元画像と第２の３次元画像の対応位置情報を、撮像装置上の被検体の撮像位置を表す装置座標を利用して取得することができる。装置座標は、たとえばそれぞれの３次元画像のヘッダー情報から取得できる。また位置取得部１３０は、３次元画像の撮像時に、被検体に付与したマーカの位置を外部装置により取得し、その位置を装置座標としてもよい。
【００４０】
また位置取得部１３０は、第１の３次元画像と第２の３次元画像との位置合わせを行うことにより対応位置情報を取得することができる。位置合わせとは、たとえば第１の３次元画像と第２の３次元画像との間の同一位置を表す画素が略一致するように少なくとも一方の画像を変形する画像処理である。たとえば位置取得部１３０は、画像間の画像類似度が高くなるように、画像間の剛体位置合わせを行うことにより対応位置情報を取得する。この場合、位置取得部１３０は、位置と姿勢の変換パラメータの、ある方向における並進量を対応位置情報として取得する。画像類似度には、Ｓｕｍ  ｏｆ  Ｓｑｕａｒｅｄ  Ｄｉｆｆｅｒｅｎｃｅ（ＳＳＤ）や相互情報量、相互相関係数などを用いることができる。また位置取得部１３０は、複数の３次元画像間のそれぞれに含まれる断層画像の間で、画素値の分布を表すヒストグラムの類似度を比較し、類似度が最大となる断層画像間のある方向におけるずれ量を対応位置情報として取得してもよい。
【００４１】
図３を用いて説明すると、対応位置情報により、第１の３次元画像と第２の３次元画像の間で共通する部位である胸部の断層画像の位置が一致するように、範囲３１０と範囲３２０との位置が対応付けられる。
【００４２】
（Ｓ２３０）（範囲の取得）
ステップＳ２３０において、範囲取得部１４０は、ステップＳ２１０で取得した第１の３次元画像と第２の３次元画像のそれぞれの範囲（第１の範囲と第２の範囲）を取得する。以下では、第１の３次元画像及び第２の３次元画像のそれぞれに含まれる横断面画像の範囲を取得する場合を例に説明する。範囲取得部１４０はまず、それぞれの３次元画像の、横断面画像と直交する方向である頭尾方向の画素数（スライス数）に、頭尾方向の画素サイズ（スライス厚）を乗じることで、それぞれの３次元画像の頭尾方向の幅（Ｄ１およびＤ２とおく）を取得する。範囲取得部１４０は、それぞれの３次元画像の頭尾方向の幅と、ステップＳ２２０で取得した対応位置情報に基づいて、所定の基準座標系におけるそれぞれの３次元画像の範囲を取得する。ここで、基準座標系には、たとえば、第１の３次元画像の画像内における頭尾方向の座標系を用いる。範囲取得部１４０は第１の３次元画像の上端位置（頭尾方向の最も頭側の断層画像の位置）を０として、第１の３次元画像の下端位置（頭尾方向の最も尾側、すなわち足側の断層画像の位置）であるＤ１までを第１の範囲とする。また範囲取得部１４０は、ステップＳ２２０で取得した対応位置情報に基づいて、前記基準座標系における第２の３次元画像の上端位置と下端位置を求めて、これを第２の範囲とする。範囲取得部１４０は取得した第１の範囲と第２の範囲とを、表示制御部１５０へと出力する。たとえば、３次元画像間の位置のオフセットを３次元画像間の対応位置情報として用いる場合、第１の範囲は０からＤ１、第２の範囲は（Ｐ１＿ｉ−Ｐ２＿ｊ）からＤ２＋（Ｐ１＿ｉ−Ｐ２＿ｊ）となる。
【００４３】
なお、上記の例では第１の３次元画像を基準として第２の範囲を取得したが、装置座標の原点を基準として第１の範囲と第２の範囲を取得してもよいし、ユーザが定めた任意の位置を基準にしてもよい。
【００４４】
（Ｓ２４０）（統合範囲の取得）
ステップＳ２４０において、範囲取得部１４０は、第１の範囲と第２の範囲の全てを含む範囲である統合範囲を取得する。範囲取得部１４０は、取得した統合範囲を表示制御部１５０へと出力する。統合範囲は、第１の３次元画像または第２の３次元画像の少なくともいずれかに含まれる２次元画像が存在する位置の範囲である第３の範囲の一例である。
【００４５】
図３の例では、第１の範囲の上端から第２の範囲の下端までの範囲３３０を、統合範囲として取得する。
【００４６】
（Ｓ２５０）（共通範囲の取得）
ステップＳ２５０において、範囲取得部１４０は、第１の範囲と第２の範囲の積の範囲である共通範囲を取得する。範囲取得部１４０は、取得した共通範囲を表示制御部１５０へと出力する。なお、２つの範囲に重複する部分が存在しない場合には、共通範囲は「なし」という情報を表示制御部１５０へと出力する。
【００４７】
図３の例では、第２の範囲の上端から第１の範囲の下端までの範囲３４０を、共通範囲として取得する。
【００４８】
（Ｓ２６０）（断層位置の取得）
ステップＳ２６０において、断層画像取得部１２０は、表示する断層画像の位置を取得する。上述の例では、断層画像取得部１２０は、ステップＳ２１０で取得した第１の３次元画像の頭尾方向における位置を、第１の断層位置として取得する。同様に、断層画像取得部１２０は、第２の３次元画像の頭尾方向における位置を、第２の断層位置として取得する。断層画像取得部１２０は、取得した第１の断層位置と第２の断層位置とを、表示制御部１５０へと出力する。
【００４９】
断層画像取得部１２０は、第１の断層位置および第２の断層位置は、ユーザによるマウスやキーボードといった操作部１２を介した操作入力を受けて取得される。ユーザが指定する断層位置は、それぞれの範囲の端や中央の位置であってもよい。また、断層画像取得部１２０は第１の断層位置を取得し、第２の断層位置を第１の断層位置と同じ位置にしてもよい。同様に断層画像取得部１２０は、第２の断層位置を取得し、第１の断層位置を第２の断層位置と同じ位置にしてもよい。断層画像取得部１２０は、取得した断層位置が、第１の範囲外であった場合、取得した断層位置と第１の範囲内のある方向に最も近い位置を第１の断層位置としてもよい。同様に断層画像取得部１２０は、取得した断層位置が、第２の範囲外であった場合、取得した断層位置と第２の範囲内のある方向に最も近い位置を第２の断層位置としてもよい。
【００５０】
（Ｓ２７０）（断層画像の表示）
ステップＳ２７０において、表示制御部１５０は、第１の３次元画像の第１の断層位置における第１の断層画像と、第２の３次元画像の第２の断層位置における第２の断層画像とを表示部１３に表示する制御を行う。
【００５１】
断層画像を表示部１３に表示の例としては、表示制御部１５０はたとえば１つの画面を縦または横に分割して第１の断層画像と第２の断層画像を並べて表示させてもよい。別の例では、表示制御部１５０は第１の断層画像と、第１の断層画像と異なる色で描画した第２の断層画像とを重ね合わせて表示させてもよい。また別の例では、表示制御部１５０は第１の断層画像および第２の断層画像の一方のみを表示させてもよいし、その場合に同一位置において第１の断層画像と第２の断層画像とを所定の時間で切り替えて表示させてもよい。さらに別の例では、表示制御部１５０は一方の画像の解像度に合わせ、他方の画像を拡大または縮小して表示させてもよいし、第１の断層画像と第２の断層画像とのそれぞれに描画される被検体の位置が対応するように並べて表示させてもよい。
【００５２】
なお表示制御部１５０は、第１の断層位置が、第１の範囲外であった場合、断層画像を表示させず、たとえば灰色や他の色の画面を表示させてもよい。また表示制御部１５０は、第１の断層位置と第１の範囲内のある方向に最も近い位置の断層画像を表示させてもよい。第２の断層位置範囲についても同様である。
【００５３】
（Ｓ２８０）（画像間の対応位置関係の表示）
ステップＳ２８０において、表示制御部１５０は、第１の範囲を示す図形を、第２の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。また、表示制御部１５０は、第２の範囲を示す図形を、第１の範囲に対する相対的な位置に描画することによる表示部１３に表示させる。表示制御部１５０は、第１の範囲を示す図形を第１の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。表示制御部１５０は、第２の範囲を示す図形を第２の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。
【００５４】
さらに表示制御部１５０は、第１の範囲を示す図形を、第１の断層位置を示す図形とともに表示させてもよく、統合範囲を示す図形と並べて表示させてもよい。加えて表示制御部１５０は、共通範囲を示す図形を第１の範囲を示す図形と並べて表示させてもよい。同様に表示制御部１５０は、第２の範囲を示す図形を、第２の断層位置を示す図形とともに表示させてもよく、統合範囲を示す図形と並べて表示させてもよい。加えて表示制御部１５０は、共通範囲を示す図形を第２の範囲を示す図形と並べて表示させてもよい。なお表示制御部１５０は、ステップＳ２５０で共通範囲が存在しないと判定された場合には、共通範囲を示す図形を表示させなくてもよい。
【００５５】
なお、ステップＳ２５０の処理は必須ではなく、範囲取得部１４０は共通範囲を取得しなくてもよい。また、ステップＳ２４０の処理とステップＳ２５０の処理とは、例示した順序に限定されない。また、３次元画像における横断面画像を断層画像として取得する場合を例に説明したが、これに限らない。３次元画像における断層画像は冠状面画像でもよいし、矢状面画像でもよいし、任意の断面の画像（いわゆるオブリーク画像）であってもよい。いずれの場合においても、範囲取得部１４０は、断層画像に直交する方向の範囲を取得する。
【００５６】
図４は、それぞれの３次元画像において２次元画像（断層画像）が存在する位置の範囲と断層画像の位置（断層位置）、統合範囲、共通範囲をそれぞれ示す表示の例である。
【００５７】
図４（ａ）は、表示部１３に表示される画面４００の一例である。画面４００には、第１の断層画像４１０と第２の断層画像４２０とが表示されている。第１の断層画像と第２の断層画像の上下端に接して表示されている指標４３０は、それぞれ統合範囲の両端を表す。すなわち指標４３０はそれぞれ、図３で示す統合範囲３３０の上下端の位置と対応する。実線部４５０と点線部４６０からなる目盛り４４０は、第１の範囲を示す図形の一例であり、図３で示す第１の範囲３１０と対応する。ここで、第１の範囲と対応する目盛り４４０は、第２の範囲に対する相対的な位置に描画される。別の観点では、第１の範囲と対応する目盛り４４０は、統合範囲（第３の範囲）に対する相対的な位置に描画される。すなわち第１の範囲と対応する目盛り４４０は、図３で示す第１の範囲３１０と第２の範囲３２０あるいは統合範囲３３０との位置関係と同じになるように描画される。このとき、目盛４４０に含まれる実線部４５０及び点線部４６０は、それぞれの（あるいは、所定の枚数毎の）断層画像の位置を表す。目盛りの間隔は、断層画像の間隔（当該断層画像と直交する方向における解像度の間隔）やユーザがあらかじめ指定した間隔などである。目盛りの間隔は、断層画像の拡大率に応じて変更されてもよい。実線部４５０は、第１の範囲に含まれる共通範囲を表す。点線部４６０は、第１の範囲において、第２の範囲と重複していない領域である。目盛り４７０は、第２の範囲を示す図形の一例であり、図３で示す第２の範囲３２０と対応する。バー４８０は第１の断層位置を示しており、バー４９０は第２の断層位置を示す。第１の範囲と対応する目盛り４４０と第２の範囲と対応する目盛り４７０とは、それぞれの範囲の相対的な位置に描画される。図４に示す例においてはさらに、統合範囲をそれぞれの断層画像の幅に合わせて、それぞれの目盛りを描画している。したがって、第１の範囲に含まれる断層位置と第２の範囲に含まれる断層位置とのうち、同じ断層位置にある実線または点線は、それぞれ同じ位置（高さ）に描画される。
【００５８】
図４（ａ）の例においては、複数の３次元画像に含まれる２次元画像の存在する位置のそれぞれの範囲が、それぞれ相対的な位置に描画されることにより、ユーザはそれぞれの３次元画像における断層位置を同じ基準で把握することができる。たとえばユーザは、断層位置を示すバー４８０とバー４９０との高さを合わせることで、それぞれの３次元画像において被検体の同じ位置（部位）の断層画像を表示部１３に表示させることができる。また、バー４８０とバー４９０との高さが異なる場合は、ユーザは第１の断層位置と第２の断層位置とがどれくらい離れているかを容易に把握することができる。また、ユーザは、統合範囲内の第１の範囲の位置を示す目盛り４４０を確認するだけで、第１の範囲と第２の範囲のそれぞれの相対的な位置を把握することができる。さらに、目盛りの実線部４５０を確認するだけで、第１の範囲及び第２の範囲の共通範囲を確認することができる。そして、第１の断層位置を示すバー４８０が存在する位置に応じて、第２の３次元画像と同一の被検体の位置の断層画像が存在する断層位置であるか、いずれか一方の３次元画像にしか断層画像が存在しない断層位置であるかを把握することができる。第２の範囲を示す目盛りと第２の断層位置を示すバーに関しても同様の効果が得られる。
【００５９】
第１の実施形態において、第１の範囲、第１の断層位置、統合範囲、共通範囲をそれぞれ示す図形は、目盛りや任意の図形でもよいし、スライダーバー等でもよい。第１の実施形態において、共通範囲を実線部、他の範囲を点線部で示したが、共通範囲と他の範囲とを識別可能な態様であれば、他の態様であってもよい。表示制御部１５０は、たとえば破線や鎖線など他の形状でそれぞれの範囲を示してもよいし、色を変えて示してもよい。また図４（ｂ）に例示するように、表示制御部１５０は共通範囲を示す図形のみを表示させてもよい。また図４（ｃ）に例示するように、表示制御部１５０はそれぞれの範囲を示す図形（目盛）を表示させ、共通範囲を示す図形としてバー４５５といった別の態様の図形をさらに表示させてもよい。
【００６０】
図４（ａ）では指標４３０の間に、第１の範囲や第１の断層位置、共通範囲をそれぞれ示す図形を表示したが、表示制御部１５０はそれぞれの図形を並べて表示させてもよい。また、統合範囲を第１の３次元画像の断層画像の幅に合わせる場合には、表示制御部１５０は指標４３０を表示させなくてもよい。統合範囲を示す図形を断層画像の縦幅に合わせて表示させる例を示したが、表示制御部１５０は統合範囲を示す図形を所定のサイズで表示させてもよいし、断層画像の横幅に合わせて表示させてもよいし、横向きや任意の向きの所定のサイズで表示させてもよい。上述した様々な表示態様は第２の範囲を示す図形、第２の断層位置を示す図形の表示にも適用される。表示制御部１５０は、第１の範囲、第１の断層位置、、第２の範囲、第２の断層位置をそれぞれ示す図形を、それぞれ並べて表示させてもよい。また、図４（ａ）では、それぞれの断層画像の右側に、断層画像の範囲や位置を示す図形を表示させる例を示したが、図４（ｄ）に例示するように、表示制御部１５０は一部またはすべての断層画像の左側に、断層画像の範囲や位置を示す図形を表示させてもよい。たとえば表示制御部１５０は、第１の断層画像の右側に第１の範囲を示す図形と第１の断層位置を示す図形を表示させ、第２の断層画像の左側に第２の範囲を示す図形と第２の断層位置を示す図形を表示させ、第１の断層画像と第２の断層画像とを左右に並べて表示させてもよい。これにより、第１の範囲を示す図形と、第２の範囲を示す図形とが近接した位置に表示されるため、ユーザはそれぞれの範囲を示す図形を、視線をあまり移動させずに効率的に確認することができる。
【００６１】
（Ｓ２９０）（断層位置を変更する？）
ステップＳ２９０において、断層画像取得部１２０は、操作部１２から入力されたユーザの操作入力に応じて、処理が分岐する。ユーザの操作入力が、断層位置を変更する指示であった場合、ステップＳ２６０へ進む。ユーザの操作入力が、終了の指示であった場合、図２に示す処理を終了する。
【００６２】
以上により、複数の３次元画像のそれぞれに含まれる２次元画像が存在する範囲を示す図形を、当該複数の３次元画像についてのそれぞれの範囲に対する相対的な位置に表示させることで、ユーザは表示部に表示されている断層画像の断層位置と、当該断層画像と直交する方向における相対的な位置関係を容易に把握することができる。別の観点では、ある３次元画像に含まれる２次元画像が存在する位置の範囲を示す図形を、当該範囲の複数の３次元画像のいずれかに含まれる２次元画像が存在する範囲に対する相対的な位置に表示させることで、ユーザはこれらの位置関係を容易に把握することができる。さらに、複数の３次元画像のそれぞれに含まれる２次元画像が存在する範囲の共通する範囲を、たとえば共通範囲を示す図形など識別可能に表示させることにより、ユーザは複数の３次元画像において共通する範囲を把握することができる。
【００６３】
［第1の実施形態の変形例１］
本第１の実施形態では、ステップＳ２８０において、図４の断層画像の上下端に接している指標４３０の幅によって統合画像範囲範囲を明示的に表示していたが、統合画像範囲範囲を表示せずに、固定幅で表示された表示物の幅を統合画像範囲範囲としてもよい。たとえば、画面上であらかじめ決められた目盛り表示領域の両端や、表示中の断層画像の幅を、統合画像範囲範囲を示す図形の両端としてもよいみなすことができる。これにより、図４の４３０を表示せずに、画像間の対応位置関係を表示できるため、同等の効果を得ることができる。
【００６４】
［第1の実施形態の変形例２］
本第１の実施形態では、ステップＳ２３０において、ある頭尾方向の画像範囲範囲を取得したが、ある頭尾方向をｚ方向とした場合、ｘ方向、ｙ方向または任意の方向の画像範囲範囲を取得してもよい。また、ステップＳ２７０において、ｘ方向、ｙ方向または任意の方向の断層画像を表示してもよい。たとえば、ステップＳ２７０でｘ方向と直交する断層画像を表示する場合、ステップＳ２８０では、ｘ方向の画像範囲範囲から取得した統合画像範囲範囲、共通画像範囲範囲、それぞれの画像範囲範囲と断層位置を同時に表示できる。これにより、ユーザは、ある特定の方向に限らず任意の方向において、複数の３次元画像のそれぞれに含まれる断層画像と画像間の対応相対的な位置関係を効率的に観察把握することができる。
【００６５】
［第２の実施形態］
第２の実施形態に係る情報処理装置１０は、共通範囲を取得せずに、３次元画像に含まれる２次元画像が存在する範囲と表示される断層画像の位置、統合範囲をそれぞれ示す図形を表示させることにより、複数の３次元画像間のある方向における相対的な位置関係をユーザに提示する。
【００６６】
第２の実施形態に係る情報処理装置１０のハードウェア構成は、図１２に示したのと同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００６７】
第２の実施形態に係る情報処理装置１０の機能構成は、図１に示したのと同様である。第１の実施形態において示したのと機能が異なる構成についてのみ以下で説明し、そのほかの構成については上述した説明を援用することによりここでの詳しい説明を省略する。
【００６８】
範囲取得部１４０は、第１の範囲及び第２の範囲と、それらの統合範囲を取得する。表示制御部１５０は、第１の断層画像と第２の断層画像と、それぞれの画像に含まれる断層画像の存在する位置の範囲を示す図形と、表示される断層画像の位置を示す図形と、統合範囲を表す目盛りといった図形とを表示部１３に表示させる表示制御を行う。
【００６９】
図５は、情報処理装置１０により行われる処理の一例を示すフローチャートである。ステップＳ５１０からＳ５４０、Ｓ５６０、Ｓ５７０、Ｓ５９０は、第１実施形態のステップＳ２１０からＳ２４０、Ｓ２６０、Ｓ２７０、Ｓ２９０とそれぞれ同様の処理であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００７０】
（Ｓ５８０）（画像間の対応位置関係の表示）
ステップＳ５８０において、表示制御部１５０は、第１の範囲を示す図形を、第２の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。また、表示制御部１５０は、第２の範囲を示す図形を、第１の範囲に対する相対的な位置に描画することによる表示部１３に表示させる。表示制御部１５０は、第１の範囲を示す図形を第１の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。表示制御部１５０は、第２の範囲を示す図形を第２の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。さらに表示制御部１５０は、第１の範囲を示す図形を、第１の断層位置を示す図形とともに表示させてもよく、統合範囲を示す図形と並べて表示させてもよい。第２の断層画像、第２の範囲を示す図形、第２の断層位置を示す図形についても同様である。
【００７１】
以上により、複数の３次元画像のそれぞれに含まれる２次元画像が存在する範囲を示す図形を、当該複数の３次元画像についてのそれぞれの範囲に対する相対的な位置に表示させることで、ユーザは表示部に表示されている断層画像の断層位置と、当該断層画像と直交する方向における相対的な位置関係を容易に把握することができる。別の観点では、ある３次元画像に含まれる２次元画像が存在する位置の範囲を示す図形を、当該範囲の複数の３次元画像のいずれかに含まれる２次元画像が存在する範囲に対する相対的な位置に表示させることで、ユーザはこれらの位置関係を容易に把握することができる。
【００７２】
［第３の実施形態］
第３の実施形態に係る情報処理装置１０は、統合範囲を取得せずに、３次元画像に含まれる２次元画像が存在する範囲と表示される断層画像の位置、共通範囲をそれぞれ示す図形を表示させることにより、複数の３次元画像間のある方向における相対的な位置関係をユーザに提示する。
【００７３】
第３の実施形態に係る情報処理装置１０のハードウェア構成は、図１２に示したのと同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００７４】
第３の実施形態に係る情報処理装置１０の機能構成は、図１に示したのと同様である。第１の実施形態において示したのと機能が異なる構成についてのみ以下で説明し、そのほかの構成については上述した説明を援用することによりここでの詳しい説明を省略する。
【００７５】
範囲取得部１４０は、第１の範囲及び第２の範囲と、それらの共通範囲を取得する。表示制御部１５０は、第１の断層画像と第２の断層画像と、それぞれの画像に含まれる断層画像の存在する位置の範囲を示す図形と、表示される断層画像の位置を示す図形と、共通範囲を表す目盛りといった図形とを表示部１３に表示させる表示制御を行う。
【００７６】
図６は、情報処理装置１０により行われる処理の一例を示すフローチャートである。ステップＳ６１０からＳ６３０、Ｓ６５０、Ｓ６７０、Ｓ６９０は、第１の実施形態のステップＳ２１０からＳ２３０、Ｓ２５０、Ｓ２７０、Ｓ２９０とそれぞれ同様の処理であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００７７】
（Ｓ６８０）（画像間の断層位置関係の表示）
第１の範囲を示す図形を、第２の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。また、表示制御部１５０は、第２の範囲を示す図形を、第１の範囲に対する相対的な位置に描画することによる表示部１３に表示させる。表示制御部１５０は、第１の範囲を示す図形を第１の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。表示制御部１５０は、第２の範囲を示す図形を第２の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。さらに表示制御部１５０は、共通範囲を示す図形を第１の範囲を示す図形と並べて表示させてもよい。
【００７８】
図７は、それぞれの３次元画像において断層画像が存在する位置の範囲と断層位置、共通範囲をそれぞれ示す表示の例である。図４に示した例と共通する構成については同じ符号を付し、上述した説明を援用することによりここでの詳しい説明を省略する。
【００７９】
目盛り７４０は、第１の範囲を表す図形である。実線部７５０は共通範囲、点線部７６０は第１の範囲において、第２の範囲に含まれる断層画像の位置が存在しない範囲を表す。目盛り７７０は、第２の範囲を表す図形である。バー７８０とバー７９０とは、それぞれ第１の断層位置と第２の断層位置とを表す。これにより、ユーザは、複数の３次元画像のそれぞれに含まれる２次元画像が存在する位置の共通範囲を容易に確認することができる。
【００８０】
なお、第１の範囲、第１の断層位置、共通範囲をそれぞれ示す図形は、並べて表示されてもよいし、第２の範囲、第２の断層位置をそれぞれ示す図形とさらに並べて表示されてもよい。また、表示制御部１５０は、第１の範囲と第２の範囲とをそれぞれ示す図形は表示させずに、共通範囲を示す図形と第１の断層位置及び第２の断層位置をそれぞれ示す図形を表示させてもよい。
【００８１】
以上により、複数の３次元画像のそれぞれに含まれる２次元画像の相対的な位置関係を、ユーザは容易に把握することができる。また、それぞれの範囲を示す図形の両端を、たとえば断層画像の幅に合わせて表示させることにより、図形を表示できる範囲が狭い場合にも、ユーザに相対的な位置関係を提示することができる。
【００８２】
［第４の実施形態］
第４の実施形態に係る情報処理装置１０は、第１の範囲と第２の範囲とを含むようにあらかじめ定められた範囲を統合範囲として取得し、統合範囲内でそれぞれの範囲を表示することにより、複数の３次元画像間のある方向における断層画像の相対的な位置関係をユーザに提示する。
【００８３】
第４の実施形態に係る情報処理装置１０のハードウェア構成は、図１２に示したのと同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００８４】
第４の実施形態に係る情報処理装置１０の機能構成は、図１に示したのと同様である。第１の実施形態において示したのと機能が異なる構成についてのみ以下で説明し、そのほかの構成については上述した説明を援用することによりここでの詳しい説明を省略する。
【００８５】
範囲取得部１４０は、第１の範囲と第２の範囲との両方を含む範囲を統合範囲として取得する。
【００８６】
図８は、情報処理装置１０により行われる処理の一例を示すフローチャートである。ステップＳ８１０とＳ８２０、Ｓ８６０、Ｓ８７０、Ｓ８９０は、第１の実施形態のステップＳ２１０とＳ２２０、Ｓ２６０、Ｓ２７０、Ｓ２９０とそれぞれ同様の処理であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００８７】
（Ｓ８３０）（範囲の取得）
ステップＳ８３０において、範囲取得部１４０は、第１の範囲と第２の範囲とを取得する。第４の実施形態において範囲取得部１４０は、装置座標系を基準座標系として用いて、当該基準座標系における第１の範囲と第２の範囲を取得する。それ以外の処理はステップＳ２３０と同様であるので説明を省略する。なお、装置座標系は、たとえば、第１の３次元画像または第２の３次元画像のヘッダー情報から取得できる。
【００８８】
（Ｓ８４０）（統合範囲の取得）
ステップＳ８４０において、範囲取得部１４０は、ステップＳ８３０で取得した装置座標系に基づいて統合範囲を取得する。そして、取得した統合範囲を表示制御部１５０へと出力する。
【００８９】
第４の実施形態では、統合範囲が第１の範囲と第２の範囲とを含むようにするために、範囲取得部１４０は統合範囲として、たとえば表示対象とする３次元画像を撮像した撮像装置において撮像可能な範囲を設定する。これにより統合範囲は、たとえば頭部から胸部を撮像した第１の３次元画像と、胸部から腹部を撮像した第２の３次元画像との両方の範囲を含むことができる。統合範囲の例としては、撮像装置の撮像可能な範囲によって決まる装置座標がとり得る値の全範囲とすることができる。
【００９０】
（Ｓ８８０）（画像間の対応位置関係の表示）
ステップＳ８８０において、表示制御部１５０は、第１の範囲を示す図形を、第２の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。また、表示制御部１５０は、第２の範囲を示す図形を、第１の範囲に対する相対的な位置に描画することによる表示部１３に表示させる。表示制御部１５０は、第１の範囲を示す図形を第１の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。表示制御部１５０は、第２の範囲を示す図形を第２の３次元画像の２次元画像上に、または当該２次元画像と並べて表示させてもよい。さらに表示制御部１５０は、第１の範囲を示す図形を、第１の断層位置を示す図形とともに表示させてもよく、統合範囲を示す図形と並べて表示させてもよい。第２の断層画像、第２の範囲を示す図形、第２の断層位置を示す図形についても同様である。
【００９１】
以上により、複数の３次元画像のそれぞれに含まれる２次元画像の相対的な位置関係をユーザは容易に把握することができる。特に、第１の範囲と第２の範囲との両方を含むようにあらかじめ定められた統合範囲に基づいて、それぞれの範囲が表示されることにより、ユーザは第１の範囲と第２の範囲との相対的な位置関係を、効率的に把握することができる。さらに、入力される３次元画像の組み合わせに関わらず一定の位置とスケールで、それぞれの３次元画像に含まれる２次元画像が存在する位置の目盛りを表示することができるため、第２の３次元画像に替えて、あるいは追加して他の３次元画像が入力された場合にも、第１の範囲を示す目盛りが表示される態様は変化しない。ユーザは、入力画像の組み合わせによる目盛りの位置や間隔の変化を意識せずに、複数の医用画像を観察することができる。
【００９２】
［第５の実施形態］
第５の実施形態においては、３つ以上の３次元画像のそれぞれに含まれる２次元画像が存在する位置の範囲の相対的な位置関係を表示する例を説明する。
【００９３】
第５の実施形態に係る情報処理装置１０のハードウェア構成は、図１２に示したのと同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【００９４】
第５の実施形態に係る情報処理装置１０の機能構成は、図１に示したのと同様である。第１の実施形態において示したのと機能が異なる構成についてのみ以下で説明し、そのほかの構成については上述した説明を援用することによりここでの詳しい説明を省略する。
【００９５】
画像取得部１１０は、情報処理装置１０に入力される３つ以上の３次元画像、たとえば第１の３次元画像、第２の３次元画像、第３の３次元画像を取得する。断層画像取得部１２０は、第１の断層画像と、第２の断層画像と、第３の３次元画像に含まれる断層画像の一つである第３の断層画像を取得する。
【００９６】
位置取得部１３０は、第１の３次元画像に含まれる２次元画像が存在する位置と、第２の３次元画像に含まれる２次元画像が存在する位置と、第３の３次元画像に含まれる２次元画像が存在する位置との対応関係を示す対応位置情報を取得する。
【００９７】
範囲取得部１４０は、対応位置情報に基づいて、第１の範囲、第２の範囲、第３の３次元画像に含まれる２次元画像が存在する位置の範囲のそれぞれと、これら３つの範囲の統合範囲を取得する。また、これら３つの組み合わせのそれぞれに関する共通範囲を取得する。
【００９８】
表示制御部１５０は、第１の３次元画像、第２の３次元画像、第３の３次元画像のそれぞれの断層画像を表示部１３に表示させる。また表示制御部１５０は、第１の範囲、第２の範囲、第３の３次元画像に含まれる２次元画像が存在する位置の範囲のそれぞれを示す図形を表示部１３に表示させる。さらに表示制御部１５０は、統合範囲や共通範囲をそれぞれ示す図形を表示部１３に表示させる。
【００９９】
図９は、情報処理装置１０により行われる処理の一例を示すフローチャートである。ステップＳ９９０は、第１の実施形態のステップＳ２９０と同様の処理であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【０１００】
（Ｓ９１０）（３次元画像の取得）
ステップＳ９１０において、画像取得部１１０は、情報処理装置１０に入力された第１の３次元画像と第２の３次元画像と第３の３次元画像とを取得する。そして画像取得部１１０は、取得した第１の３次元画像と第２の３次元画像と第３の３次元画像とを、断層画像取得部１２０、位置取得部１３０、表示制御部１５０へと出力する。
【０１０１】
（Ｓ９２０）（対応位置情報の取得）
ステップＳ９１０において、位置取得部１３０は、ステップＳ９１０で取得した複数の３次元画像の対応位置情報を取得する。そして位置取得部１３０は、取得した対応位置情報を、範囲取得部１４０と表示制御部１５０へと出力する。
【０１０２】
第５の実施形態において位置取得部１３０は、ステップＳ９１０で取得された複数の３次元画像の全て組み合わせにおける対応位置情報を取得することとする。別の例では、位置取得部１３０は、第１の３次元画像と第２の３次元画像の間と、第１の３次元画像と第３の３次元画像との間のそれぞれの対応位置情報を取得し、これらの対応位置情報から第２の３次元画像と第３の３次元画像の間の対応位置情報を取得してもよい。
【０１０３】
（Ｓ９３０）（範囲の取得）
ステップＳ９３０において、範囲取得部１４０は、ステップＳ９２０で取得した対応位置情報に基づいて、第１の範囲と、第２の範囲と、第３の３次元画像に含まれる２次元画像が存在する位置の範囲とを取得する。そして、取得したこれらの範囲に関する情報を表示制御部１５０へと出力する。
【０１０４】
（Ｓ９４０）（統合範囲の取得）
ステップＳ９４０において、範囲取得部１４０は、第１の範囲と第２の範囲と、第３の３次元画像に含まれる２次元画像が存在する位置の範囲との全てを含む範囲である統合範囲を取得する。範囲取得部１４０は、取得した統合範囲を表示制御部１５０へと出力する。
【０１０５】
（Ｓ９５０）（共通範囲の取得）
ステップＳ９５０において、範囲取得部１４０は、ステップＳ９２０で取得した対応位置情報に基づいて、第１の範囲と第２の範囲、第３の３次元画像に含まれる２次元画像が存在する位置の範囲のそれぞれの組み合わせ（６通り）における積の範囲である共通範囲を取得する。範囲取得部１４０は、取得した共通範囲を、表示制御部１５０へと出力する。ある組み合わせにおいて重複する部分が存在しない場合には、当該組み合わせにおける共通範囲を「なし」としてその情報を表示制御部１５０へ出力する。
【０１０６】
（Ｓ９６０）（断層位置の取得）
ステップＳ９６０において、断層画像取得部１２０は、表示する断層画像の位置を取得する。ここでは、断層画像取得部１２０はステップＳ９１０で取得した第１の３次元画像の頭尾方向における位置を、第１の断層位置として取得する。同様に、断層画像取得部１２０は第２の３次元画像の頭尾方向における位置と第３の３次元画像における頭尾方向における位置をそれぞれ、第２の断層位置及び第３の断層位置として取得する。断層画像取得部１２０は、取得した第１の断層位置と第２の断層位置と第３の断層位置とを、表示制御部１５０へと出力する。
【０１０７】
（Ｓ９７０）（断層画像の表示）
ステップＳ９７０において、表示制御部１５０は、第１の３次元画像の第１の断層位置における第１の断層画像と、第２の３次元画像の第２の断層位置における第２の断層画像と、第３の３次元画像の第３の断層位置における第３の断層画像とを表示部１３に表示する制御を行う。
【０１０８】
なお表示制御部１５０は、ステップＳ９６０で取得した断層画像の中の２つをユーザが指定する操作入力に応じて、第１の実施形態と同様に表示させてもよいし、３つ以上の断層画像を同時に表示させてもよい。
【０１０９】
（Ｓ９８０）（画像間の対応位置関係の表示）
ステップＳ９８０において、表示制御部１５０は、第１の範囲を示す図形を、第２の範囲および第３の３次元画像に含まれる２次元画像が存在する位置の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。また、表示制御部１５０は、第２の範囲を示す図形を第１の範囲および第３の３次元画像に含まれる２次元画像が存在する位置の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。さらに、表示制御部１５０は、第３の３次元画像に含まれる２次元画像が存在する位置の範囲を示す図形を、第１の範囲および第２の範囲に対する相対的な位置に描画することにより表示部１３に表示させる。そのほかの表示の例については第１の実施形態のステップＳ２８０と同様であるので、上述した説明を援用することによりここでの詳しい説明を省略する。
【０１１０】
図１０は、それぞれの３次元画像において２次元画像（断層画像）が存在する位置の範囲と断層画像の位置（断層位置）、統合範囲、共通範囲をそれぞれ示す表示の例である。図１０に示す例においては、図４（ａ）で示した第１の断層画像４１０と第２の断層画像４２０に加えて、第３の断層画像１０１０が表示されている。指標１０２０の範囲が統合範囲を示しており、目盛り１０３０、１０７０、１０８０がそれぞれ、第１の範囲、第２の範囲、第３の３次元画像に含まれる２次元画像が存在する位置の範囲を示す。範囲１０４０が３つの３次元画像の共通範囲を表しており、範囲１０５０は第１の範囲と第３の３次元画像に含まれる２次元画像が存在する位置の範囲との共通範囲、範囲１０９０は第２の範囲と第３の３次元画像に含まれる２次元画像が存在する位置の範囲の共通範囲を表している。このように表示制御部１５０は、、複数の３次元画像の間で対応する断層位置が存在する３次元画像の組み合わせや数に応じて（換言すれば、複数の３次元画像の間での範囲の重複の度合いに応じて）範囲を示す図形（たとえば目盛り）の表示態様を変えて表示させる。これにより、ユーザは目盛りといった、それぞれの範囲を示す図形を見るだけで、その断層位置に存在する断層画像の数や組み合わせを容易に把握することができる。さらにユーザは、同じ位置の図形の表示態様を比較することで、いずれの３次元画像間で対応する断層画像が存在するかを容易に確認することができる。
【０１１１】
なお上述の例では、ステップＳ９１０で取得された全ての３次元画像の組み合わせに関して共通範囲を取得したが、共通範囲を取得する３次元画像の組み合わせや、共通範囲を表示する３次元画像の組み合わせを限定してもよい。たとえば、共通範囲を表示する３次元画像の組み合わせを、対比が重要な組に限定してもよい。ユーザは画像の組み合わせごとに重要度を予め定義し、所定の条件（たとえば、重要度が所定値以上）の組にのみ共通範囲を表示するように設定することができる。また、共通範囲を表示する画像の組み合わせをユーザが自由に設定しカスタマイズできるようにしてもよい。
【０１１２】
また、図１０に示した例においては範囲１０５０と範囲１０９０をそれぞれ示す図形である目盛りが同じ態様で表示されているが、表示制御部１５０は範囲が共通する３次元画像の組み合わせによって表示態様を変えてそれぞれの範囲を示す図形を表示させてもよい。目盛りといった図形の表示態様を異ならせる例としては、図形の形状や色を変えてもよいし、図形と並べて対応する断層画像が存在する３次元画像のファイル名等をそれぞれ表示させてもよい。これによりユーザは目盛りといった図形の表示態様から、いずれの３次元画像に対応する断層画像が存在するかを把握することができる。
【０１１３】
なお、第５の実施形態では、説明を簡単化するため３つの３次元画像を対象に処理を行う場合を例に説明したが、４つ以上の３次元画像に対しても同様に処理できることは言うまでもない。
【０１１４】
以上により、３つ以上の３次元画像のそれぞれに含まれる２次元画像の相対的な位置関係をユーザは容易に把握することができる。特に、３次元画像のそれぞれに含まれる２次元画像が存在する位置の範囲と、当該位置が共通して含まれる３次元画像の組み合わせによって態様を変えて、当該範囲を示す図形を表示させることにより、ユーザは３次元画像間に含まれる２次元画像の相対的な位置関係を、効率的に把握することができる。
【０１１５】
［第６の実施形態］
第６の実施形態に係る情報処理装置１０は、ユーザの操作入力に応じて、複数の３次元画像のそれぞれに含まれる２次元画像の位置関係を表示させる方法を切り換える。これによりユーザは、観察したい医用画像に応じて、当該医用画像に含まれる２次元画像の位置の範囲を表示させることができ、効率的に当該医用画像を観察することができる。
【０１１６】
第６の実施形態に係る情報処理装置１０のハードウェア構成は、図１２に示したのと同様であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【０１１７】
第６の実施形態に係る情報処理装置１０の機能構成は、図１に示したのと同様である。第１の実施形態において示したのと機能が異なる構成についてのみ以下で説明し、そのほかの構成については上述した説明を援用することによりここでの詳しい説明を省略する。
【０１１８】
位置取得部１３０は、ユーザの操作入力に応じて、対応位置情報を取得するか否かを判定する。
【０１１９】
表示制御部１５０は、第１の３次元画像と第２の３次元画像とのそれぞれの断層画像を表示部１３に表示させる。また表示制御部１５０は、第１の範囲、第２の範囲、統合範囲、共通範囲、表示されている断層画像の位置をそれぞれ表す図形を、ユーザの操作入力に応じて切り換えて表示部１３に表示させる。
【０１２０】
図１１は、情報処理装置１０により行われる処理の一例を示すフローチャートである。ステップＳ１１１０、Ｓ１１２０、Ｓ１１３０、Ｓ１１４０、Ｓ１１５０、Ｓ１１６０、Ｓ１１７０、Ｓ１１８０は、第１の実施形態のステップＳ２１０、Ｓ２２０、Ｓ２３０、Ｓ２４０、Ｓ２５０、Ｓ２６０、Ｓ２７０、Ｓ２８０とそれぞれ同様の処理であるため、上述した説明を援用することによりここでの詳しい説明を省略する。
【０１２１】
（Ｓ１１００）（ユーザ入力の種類？）
ステップＳ１１００では、操作部１２から入力されたユーザの操作入力の種類に応じて、次に実行される処理が分岐する。操作入力の種類が、画像の取得指示であった場合、ステップＳ１１１０へと進む。操作入力の種類が、断層位置の変更指示であった場合、ステップＳ１１６０へと進む。操作入力の種類が、終了指示であった場合、図１１に示す処理を終了する。
【０１２２】
（Ｓ１１２５）（画像間の対応位置関係の取得？）
ステップＳ１１２５では、情報処理装置１０に入力されている情報に応じて次に実行する処理される処理が分岐する。入力されている３次元画像の数が２つであった場合、ステップＳ１１３０へと進む。入力されている３次元画像の数が１つであった場合、ステップＳ１１６０へと進む。
【０１２３】
（Ｓ１１７５）（画像間の対応位置関係の表示？）
ステップＳ１１７５において、表示制御部１５０は、それぞれの３次元画像に含まれる２次元画像の存在する位置の範囲間の相対的な位置関係を表示するか否かを判定する。当該表示を行うと判定された場合、ステップＳ１１８０へと進む。当該表示を行わないと判定された場合、ステップＳ１１８５へと進む。
【０１２４】
表示制御部１５０は、たとえば対応位置情報を取得できていない３次元画像の組み合わせの場合や、共通範囲が存在しない３次元画像の組み合わせの場合は、当該表示を行わないと判定する。表示制御部１５０は、たとえば、共通範囲が取得できた３次元画像の組み合わせの場合は、当該表示を行うと判定する。また表示制御部１５０は、３次元画像の間の付帯情報に応じて、たとえば同じ患者、同じモダリティ、同じ撮像部位などである場合に当該表示を行うと判定してもよい。
【０１２５】
表示制御部１５０は、たとえば、第１の断層位置と第２の断層位置を同時に切り替えて連動するようにユーザが操作できる場合は、連動操作時に当該表示を行うように制御してもよい。これにより、連動操作により複数の画像を同時に観察する場合、ユーザが画像間の対応位置関係の表示の指示を行わなくても、自動的に当該表示を行うことができる。一方、連動操作が行われていない場合、表示制御部１５０は当該表示を行わないと判定してもよい。また、情報処理装置１０が２つ以上の３次元画像を取得していない場合、ステップＳ１１７５は省略し、ステップＳ１１８５へと処理を進めてもよい。
【０１２６】
なお、画像間の対応位置関係の表示をするか否かを、ユーザが指定してもよい。その場合、操作部１２から入力されたユーザの操作入力の種類に応じて、次に実行する処理が決定される。ユーザが、画像間の対応位置関係を表示する指示を行った場合、ステップＳ１１８０へと進む。ユーザが、画像間の対応位置関係を表示しない指示を行った場合、ステップＳ１１８５へと進む。
【０１２７】
ユーザが画像間の対応位置関係の表示をするか否かに関する指示を行う操作入力の例としては、表示制御部１５０が断層画像を表示している画面上に、対応位置関係の表示をするか否かをユーザが指示するためのボタンを表示させ、当該ボタンが選択された場合に対応位置関係を表示する指示として受け付ける。表示制御部１５０はボタンに替えて、チェックボックスやセレクトボックスなどを表示させてもよい。
【０１２８】
（Ｓ１１８５）（断層位置の表示）
ステップＳ１１８５において、表示制御部１５０は、ステップＳ１１２０で取得した第１の範囲および第２の範囲と、ステップＳ１１６０で取得した第１の断層位置および第２の断層位置とをそれぞれ示す図形を、表示部１３に表示させる。
【０１２９】
第１の範囲を示す図形や第２の範囲を示す図形は、たとえば目盛りや、スライダーバーの可動範囲を示す矩形である。第１の断層位置を示す図形や第２の断層位置を示す図形は、たとえば目盛りや、バーである。たとえば第１の範囲と第１の断層位置とをそれぞれ目盛りで表す場合、第１の範囲を表す目盛りと第１の断層位置を表す目盛りとで表示態様を変えてもよい。
【０１３０】
［第６の実施形態の変形例］
第６の実施形態において、第１の実施形態と同様に、２つの３次元画像を対象として処理を行う場合を例に説明したが、入力する３次元画像の数は３つ以上でもよい。この場合、ステップＳ１１１０、Ｓ１１２０、Ｓ１１３０、Ｓ１１４０、Ｓ１１５０、Ｓ１１６０、Ｓ１１７０、Ｓ１１８０において、第５の実施形態のステップＳ９１０、Ｓ９２０、Ｓ９３０、Ｓ９４０、Ｓ９５０、Ｓ９６０、Ｓ９７０、Ｓ９８０とそれぞれ同様の処理を行う。
【０１３１】
［変形例］
第１の実施形態乃至第６の実施形態においては、図４や図１０に例示するように、第１の範囲や第２の範囲、統合範囲をそれぞれ示す図形を医用画像上に表示する場合を例に説明したが、本発明はこれに限らない。それぞれの図形が示す範囲と対応する医用画像が識別可能な態様であれば、表示部１３のいかなる場所に図形が表示されてもよい。
【０１３２】
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（たとえば、ＡＳＩＣ）によっても実現可能である。
【０１３３】
上述の各実施形態における情報処理装置は、単体の装置として実現してもよいし、複数の装置を互いに通信可能に組合せて上述の処理を実行する形態としてもよく、いずれも本発明の実施形態に含まれる。共通のサーバ装置あるいはサーバ群で、上述の処理を実行することとしてもよい。情報処理装置および情報処理システムを構成する複数の装置は所定の通信レートで通信可能であればよく、また同一の施設内あるいは同一の国に存在することを要しない。
【０１３４】
本発明の実施形態には、前述した実施形態の機能を実現するソフトウェアのプログラムを、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムのコードを読みだして実行するという形態を含む。
【０１３５】
したがって、実施形態に係る処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明の実施形態の一つである。また、コンピュータが読みだしたプログラムに含まれる指示に基づき、コンピュータで稼働しているＯＳなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。
【０１３６】
上述の実施形態を適宜組み合わせた形態も、本発明の実施形態に含まれる。
【図１】
2018175410.tif 000003
【図２】
2018175410.tif 000004
【図３】
2018175410.tif 000005
【図４】
2018175410.tif 000006
【図５】
2018175410.tif 000007
【図６】
2018175410.tif 000008
【図７】
2018175410.tif 000009
【図８】
2018175410.tif 000010
【図９】
2018175410.tif 000011
【図１０】
2018175410.tif 000012
【図１１】
2018175410.tif 000013
【図１２】
2018175410.tif 000014