(57)【要約】【課題】同一被写体を相異なる時点で撮影して得られた複数画像について、各画像の関心領域（ＲＯＩ）が修正された際には、修正後のＲＯＩと、それについての指標値のグラフを正しく表示する。【解決手段】複数の経時検査画像Ｔ１〜Ｔ４を画像表示手段に表示させ、表示された画像のうちの１つにＲＯＩ（関心領域）５を設定し、設定されたＲＯＩ５と解剖学的位置が同等であるＲＯＩ５を残りの画像において自動設定すると共に、各ＲＯＩ５について所定の指標値を求め、それらの指標値を画像の撮影時点順に並べて示すグラフ、およびＲＯＩ５を含む一部分を抽出したサムネイル画像Ｓ１〜Ｓ４を画像表示手段に表示させる。そして１つのＲＯＩ５を修正して新たなＲＯＩ５が設定されたとき、残りのＲＯＩ５も同じように修正すると共に、修正された各ＲＯＩ５に関する指標値を新たに求め、グラフおよびサムネイル画像Ｓ１〜Ｓ４の表示を、新たに求められたものに変える。【選択図】図４
2015016067.tif 000002
【特許請求の範囲】
【請求項１】
生体からなる同一の被写体を相異なる時点で撮影して得られた後、互いに解剖学的位置の対応付けがなされた複数の経時検査画像について、各画像の関心領域およびそれに関する指標値を表示する画像表示方法であって、
前記複数の経時検査画像を画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域を設定し、
この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変えることを特徴とする画像表示方法。
【請求項２】
前記関心領域を修正する処理が、サイズ、平面的な位置、深さ方向の位置、および形状のうちの少なくとも１つを変える処理である請求項１記載の画像表示方法。
【請求項３】
前記関心領域を修正する処理を、表示された前記経時検査画像または前記サムネイル画像に対する操作によって行う請求項１または２記載の画像表示方法。
【請求項４】
前記サムネイル画像を、該サムネイル画像が示す関心領域についての指標値がプロットされている前記グラフ上の位置の近傍において、全てグラフと同時表示させる請求項１から３いずれか１項記載の画像表示方法。
【請求項５】
前記サムネイル画像を、該サムネイル画像が示す関心領域についての指標値がプロットされている前記グラフ上の位置の近傍において、表示指令が与えられたときに１つだけ表示させる請求項１から３いずれか１項記載の画像表示方法。
【請求項６】
前記関心領域の形状を、矩形、楕円、フリーハンド形状、または病変部として自動認識された部分の輪郭に設定する請求項１から５いずれか１項記載の画像表示方法。
【請求項７】
前記経時検査画像および／またはサムネイル画像の表示形式を変更可能とした請求項１から６いずれか１項記載の画像表示方法。
【請求項８】
前記表示形式を変更する処理が、画像のサイズを変える処理、表示倍率を変える処理、平面的な位置を変える処理、深さ方向の位置を変える処理、および画像処理後の画像に変える処理のうちの少なくとも１つである請求項７記載の画像表示方法。
【請求項９】
同一の被写体を相異なる時点で撮影して得られた後、互いに解剖学的位置の対応付けがなされた複数の経時検査画像について、各画像の関心領域およびそれに関する指標値を表示する画像表示方法であって、
前記複数の経時検査画像を画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域を設定し、
この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変えるようにした画像表示方法をコンピュータに実行させるプログラム。
【請求項１０】
生体からなる同一の被写体を相異なる時点で撮影して得られた後、互いに解剖学的位置の対応付けがなされた複数の経時検査画像について、各画像の関心領域およびそれに関する指標値を表示する画像表示装置であって、
１つまたは複数の画像表示手段および、
前記複数の経時検査画像を前記画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域が設定されたとき、この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を前記画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変える表示制御手段を備えたことを特徴とする画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像表示方法に関し、特に詳細には、生体からなる同一の被写体を撮影して得られた複数の画像について、各画像の関心領域およびそれに関する指標値を表示するための画像表示方法に関するものである。
【０００２】
また本発明は、上述のような画像表示方法を実施するための画像表示装置、並びにその方法をコンピュータに実行させるためのプログラムに関するものである。
【背景技術】
【０００３】
従来、人間等の生体を検査・診断するために透過放射線画像、ＣＴ画像、ＭＲＩ画像等の各種医用画像が広く利用されている。そのような医用画像を利用するに当たっては、同一の被写体を例えば１か月毎などのように撮影時点を変えて撮影し、そうして得られた複数画像（経時検査画像）を比較観察して、病変部の経時変化等を観察することも多く行われている。
【０００４】
また、上述のような医用画像を生体の検査に利用する上で、画像を直接観察する他に、画像に設定した関心領域（Region Of Interest：ＲＯＩ）内の各種指標値を求めて、その指標値を観察することも行われている。そのような指標値として具体的には、関心領域の面積や最大径等の形状特徴量、関心領域内の画素値（濃度値）の最大値や平均値等の濃度特徴量、経時変化を数値化した特徴量が挙げられる。
【０００５】
上述したように同一の被写体に関する撮影時点が異なる複数画像や、それらの画像の各々に関する指標値を検査・診断に利用する場合は、各画像における関心領域および指標値を共に見やすく表示することが望まれる。例えば特許文献１には、同一の被写体を繰り返し撮影して時系列画像を取得し、各画像に共通に設定した関心領域と、その関心領域における指標値（特定複数画素の画素値の加算平均値）を時相に沿って並べて示したグラフとを、共通の画像表示手段に表示するようにした画像表示方法が示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平9-098961号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上記特許文献１に示された画像表示方法は、関心領域とそれに関する指標値とを共に見やすく表示するものであるが、画像やグラフを観察しているときに関心領域が修正された場合、修正後の関心領域についての指標値のグラフを正しく示すことは不可能となっている。
【０００８】
そこで本発明は、生体からなる同一の被写体を撮影して得られた複数の画像について、各画像の関心領域およびそれに関する指標値を見やすく表示可能で、関心領域が修正された際には、修正後の関心領域についての指標値のグラフを正しく示すことができる画像表示方法を提供することを目的とする。
【０００９】
また本発明は、上述のような画像表示方法を実施するための装置、並びにその方法をコンピュータに実行させるためのプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明による画像表示方法は、
生体からなる同一の被写体を相異なる時点で撮影して得られた後、互いに解剖学的位置の対応付けがなされた複数の経時検査画像について、各画像の関心領域およびそれに関する指標値を表示する画像表示方法であって、
前記複数の経時検査画像を画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域を設定し、
この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変えることを特徴とするものである。
【００１１】
なお、上記の関心領域を修正する処理は、例えばサイズ、平面的な位置、深さ方向の位置、および形状のうちの少なくとも１つを変える処理とされる。
【００１２】
また、上述のように関心領域を修正する処理は、表示された経時検査画像またはサムネイル画像に対する操作によって行うのが望ましい。
【００１３】
また本発明の画像表示方法においては、上記サムネイル画像を、該サムネイル画像が示す関心領域についての指標値がプロットされているグラフ上の位置の近傍において、全てグラフと同時表示させるのが望ましい。
【００１４】
あるいは上記サムネイル画像を、該サムネイル画像が示す関心領域についての指標値がプロットされているグラフ上の位置の近傍において、表示指令が与えられたときに１つだけ表示させるようにしてもよい。
【００１５】
また関心領域の形状は、例えば矩形、楕円、フリーハンド形状、さらには病変部として自動認識された部分の輪郭等に設定することができる。
【００１６】
また本発明の画像表示方法においては、前記経時検査画像および／またはサムネイル画像の表示形式を変更可能とするのが望ましい。
【００１７】
そのように表示形式を変更する処理は、画像のサイズを変える処理、表示倍率を変える処理、平面的な位置を変える処理、深さ方向の位置を変える処理、および画像処理後の画像に変える処理のうちの少なくとも１つであることが望ましい。
【００１８】
他方、本発明によるプログラムは、
同一の被写体を相異なる時点で撮影して得られた後、互いに解剖学的位置の対応付けがなされた複数の経時検査画像について、各画像の関心領域およびそれに関する指標値を表示する画像表示方法であって、
前記複数の経時検査画像を画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域を設定し、
この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変えるようにした画像表示方法をコンピュータに実行させるものである。
【００１９】
また、本発明による画像表示装置は、
生体からなる同一の被写体を相異なる時点で撮影して得られた後、互いに解剖学的位置の対応付けがなされた複数の経時検査画像について、各画像の関心領域およびそれに関する指標値を表示する画像表示装置であって、
１つまたは複数の画像表示手段および、
前記複数の経時検査画像を前記画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域が設定されたとき、この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を前記画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変える表示制御手段を備えたことを特徴とするものである。
【発明の効果】
【００２０】
本発明の画像表示方法によれば、
複数の経時検査画像を画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域を設定し、
この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変えるようにしたので、
複数の画像の関心領域およびそれに関する指標値を見やすく表示可能で、関心領域が修正された際には、修正後の関心領域についての指標値のグラフを正しく示すことが可能になる。
【００２１】
また本発明による画像表示装置は、
１つまたは複数の画像表示手段および、
前記複数の経時検査画像を前記画像表示手段に表示させ、
表示された複数画像のうちの１つに関心領域が設定されたとき、この設定された関心領域と解剖学的位置が同等である関心領域を残りの画像において自動設定すると共に、各関心領域について所定の指標値を求め、
それらの指標値を画像の撮影時点順に並べて示すグラフ、および前記経時検査画像から前記関心領域を含む一部分を抽出したサムネイル画像を前記画像表示手段に表示させ、
１つの関心領域を修正して新たな関心領域が設定されたとき、残りの関心領域も同じように修正すると共に、修正された各関心領域に関する前記所定の指標値を新たに求め、
前記グラフおよび前記サムネイル画像の表示をそれぞれ、前記新たに求められた指標値のグラフおよび新たな関心領域に関するサムネイル画像の表示に変える表示制御手段を備えたものであるので、この画像表示装置によれば、上述した本発明の画像表示方法を実施可能となる。
【図面の簡単な説明】
【００２２】
【図１】本発明の一実施形態による画像表示方法を実施する医療情報システムの概略構成図
【図２】図１のシステムにおける画像表示装置の構成を示す斜視図
【図３】図２の画像表示装置における表示画像の例を示す図
【図４】図２の画像表示装置における表示画像の別の例を示す図
【図５】図２の画像表示装置における表示画像のさらに別の例を示す図
【図６】図２の画像表示装置における表示画像のさらに別の例を示す図
【図７】図２の画像表示装置における表示画像のさらに別の例を示す図
【図８】図２の画像表示装置における表示画像のさらに別の例を示す図
【図９】図２の画像表示装置における表示画像のさらに別の例を示す図
【図１０】関心領域の修正の一例を説明する図
【図１１】図２の画像表示装置における表示画像のさらに別の例を示す図
【発明を実施するための形態】
【００２３】
以下、図面を参照して本発明の実施形態を詳細に説明する。図１は、本発明による画像表示方法が適用される医療情報システムの概略構成を示すものである。この医療情報システムは、医用画像の撮影装置（モダリティ）１、本発明の一実施形態としての画像表示方法が適用される読影ワークステーション２、画像サーバ３、および画像データベース４が、ネットワーク１０を介して互いに通信可能な状態に接続されて構成されている。本システムにおける各機器の動作は、ＣＤ−ＲＯＭ等の記録媒体からインストールされたプログラムによって制御される。なお、このプログラムは、インターネット等のネットワーク経由で接続されたサーバからダウンロードされた後にインストールされたものであってもよい。
【００２４】
モダリティ１には、被写体の検査対象部位を撮影することにより、その部位を表す画像の画像データを生成し、その画像データに検査情報および患者情報等の情報（タグ情報）を付加して出力する装置が含まれる。上記タグ情報は、例えばＤＩＣＯＭ（Digital Imaging and Communication in Medicine）規格等の標準化された規格および、そのモダリティ等のメーカーの規格に準拠したフォーマットのものである。モダリティ１の具体例としては、ＣＴ装置、ＭＲＩ装置、ＰＥＴ装置、ＣＲ装置、および超音波撮影装置等が挙げられる。
【００２５】
本例において画像を表示するための画像データとしては、例えばＣＴ装置において取得された、検査を受ける被写体の断層画像を示す３次元画像データ、より詳しくは、所定のスライス間隔およびスライス厚による軸位断画像や矢状断画像等を示す画像データの集合体が挙げられる。ただし、画像データはこのようなものに限られるものではなく、ＣＲ装置等によって撮影された１枚の画像を示す画像データであってもよい。
【００２６】
読影ワークステーション２は、そのユーザである画像読影医等が、画像の読影および読影レポートの作成に利用する装置である。読影ワークステーション２は図２にその概略構成を示すように、ＣＰＵ、ハードディスク等の記憶装置、メモリおよび各種インターフェース等を備えた処理装置２１、１台または２台の高精細ディスプレイ２２（１台のみ図示）、並びにキーボード２３およびマウス２４等の入力手段２５からなるコンピュータシステムにより構成されている。高精細ディスプレイ２２および処理装置２１はそれぞれ、本発明の画像表示装置における画像表示手段および表示制御手段を構成している。
【００２７】
読影ワークステーション２は、処理装置２１にインストールされたプログラムに基づいて、画像サーバ３に対する画像の閲覧要求、画像サーバ３から受信した画像に対する各種画像処理、ページング（頁送り）やパンニング（表示領域移動処理）さらにはズーミング（拡大・縮小処理）等の画像表示に関わる処理、画像中の構造物および病変らしい部分の自動検出および強調表示を含む各種解析処理、画像の表示、読影レポートの作成の支援、読影レポートサーバ（図示なし）に対する読影レポートの登録要求および閲覧要求、並びに読影レポートサーバから受信した読影レポートの表示等を行えるように構成されている。
【００２８】
画像サーバ３は、汎用の比較的処理能力の高いコンピュータにデータベース管理システム（DataBase Management System: DBMS）の機能を提供するソフトウェアプログラムがインストールされたものである。また、画像サーバ３は画像データベース４を構築する大容量ストレージを備えている。このストレージは、画像サーバ３とデータバスによって接続された大容量のハードディスク装置であってもよいし、ネットワーク１０に接続されているＮＡＳ（Network Attached Storage）やＳＡＮ（Storage Area Network）に接続されたディスク装置であってもよい。画像サーバ３も、モダリティ１および読影ワークステーション２等とネットワーク１０を介して通信を行う通信インターフェースを有している。この画像サーバ３は、モダリティ１からの画像の登録要求を受け付けると、その画像をデータベース用のフォーマットに整えて画像データベース４に登録する。
【００２９】
画像データベース４には、画像データと、その画像に関連するタグ情報とが登録される。タグ情報には、例えば、個々の画像を識別するための画像ＩＤ、被写体を識別するための患者ＩＤ、検査を識別するための検査ＩＤ、画像毎に割り振られるユニークなＩＤ（ＵＩＤ）、その画像が生成された検査日、検査時刻、その画像を取得するための検査で使用されたモダリティの種類、患者氏名、年齢、性別等の患者情報、検査部位（撮影部位）、撮影情報（撮影プロトコル、撮影シーケンス、撮像手法、撮影条件、造影剤の使用等）、１回の検査で複数の画像を取得したときのシリーズ番号あるいは採取番号等の情報が含まれ得る。
【００３０】
画像サーバ３は、読影ワークステーション２からの閲覧要求をネットワーク１０経由で受信すると、上記画像データベース４に登録されている画像を検索し、抽出された画像を要求元の読影ワークステーション２に送信する。
【００３１】
読影ワークステーション２は、画像読影医等のユーザによって読影対象画像の閲覧を要求する操作が行われると、画像サーバ３に対して閲覧要求を送信し、読影に必要な画像を取得する。そして読影ワークステーション２は、ユーザの指令に基づいてその画像に対する各種画像処理を行ったり、前述したページング、パンニングさらにはズーミング等の画像表示に関わる処理を行ったりした上で、ディスプレイ２２に画像を表示させる。
【００３２】
次に、上記ディスプレイ２２における画像表示について詳しく説明する。なお、以下で説明する１つの「検査」は、１人の「患者」に属する。また１つの「検査」は、複数の「シリーズ」からなり、そして１つの「シリーズ」は、複数の「画像」からなるものである。また、以下で説明する処理のうち、特に説明が有るもの以外は、全て前記ＣＰＵ等を備えた処理装置２１により、所定のプログラムに基づいて実行される。
【００３３】
ユーザ（操作者）が、ディスプレイ２２に表示された不図示の検査リストから「検査」を選択すると、図３に示すような画像表示画面がディスプレイ２２に表示される。この画像表示画面は一例として、左上に配置された検査リスト表示領域２２ａ、その右側に配置されたサムネイル表示領域２２ｂ、およびそれらの下側に配置された画像表示領域２２ｃから構成されている。また、画像表示領域２２ｃの上には、ユーザが画像表示に関わる各種指令を入力するためのＧＵＩ（Graphical User Interface）を構成する各種操作ボタン３０が横一列に並べて表示されている。
【００３４】
上記検査リスト表示領域２２ａには、患者に関する検査のリストが表示される。そしてこのリスト上で検査を選択すると、サムネイル表示領域が更新されるようになっている。サムネイル表示領域２２ｂには、「検査リストで選択されている検査」に属するシリーズのサムネイル画像が表示される。そしてユーザが上記サムネイル画像から１つを選択して、それを画像表示領域２２ｃにドラッグ＆ドロップすると、そのサムネイル画像が含まれているドラッグ元のシリーズの１枚あるいは複数の画像が画像表示領域２２ｃに表示される。
【００３５】
なお前述したＵＩＤには、基準座標系(ＦＯＲ：Frame of Reference)と被写体との位置関係を規定するＵＩＤが含まれ、同一シリーズの画像には共通の値の基準座標系ＵＩＤが付与されるので、この基準座標系ＵＩＤに基づいて画像データベース４から同一シリーズの画像を読み出すことができる。
【００３６】
読影の際にユーザは、画像表示領域２２ｃに表示されている各画像に対する操作、つまり階調や拡大率を変える操作等を行いながら読影を行う。各画像に対する操作は、主にマウス２４のクリックやドラッグ操作によって行われる。
【００３７】
そして、特に本発明の画像表示方法を実施する場合は、図示外の表示画面中の操作により、あるいはショートカットキーを用いる等により、例えば「経時変化表示」のメニューが選択される。このときの前提として、上記シリーズの複数の画像は、同一の被写体を相異なる時点で撮影して得られた後に、互いに解剖学的位置の対応付けがなされた複数の経時検査画像とされる。そのような複数の画像は、前述した画像データベース４に登録されたタグ情報により互いに対応付けられて、画像サーバ３に保存されている。
【００３８】
上記撮影時点が異なる複数画像は例えば、検査・診断のためにこの画像表示をする当日（例えば４月某日）に撮影された現在画像と、それよりも約１月ずつ前に撮影された複数の過去画像等である。ただし、本発明が対象とする撮影時点が相異なる複数画像はそのような画像に限られるものではなく、その他例えば、同日に相前後して撮影された造影剤を含む画像と含まない画像等であっても構わない。
【００３９】
ここで、上記解剖学的位置の対応付けは、例えば特開2009-219655号公報や特開2011-142974号公報に示されている、Adaboost手法に基づく学習で得られる判別器を利用して行うことができる。そのような解剖学的位置の対応付けは、画像データベース４に登録する際に行っておいてもよいし、あるいはそれに限らず、画像サーバ３から読影ワークステーション２に送信された画像に対して、上記「経時変化表示」のメニューが選択された時点で行うようにしてもよい。
【００４０】
そして上記サムネイル画像から１つが選択され、それが画像表示領域２２ｃにドラッグ＆ドロップされると、そのサムネイル画像が含まれているドラッグ元のシリーズが、画像表示領域２２ｃにシリーズ表示される。このとき、１シリーズに含まれる複数画像の表示状態は例えば図４に示すようなものとなる。つまり、前述したように対応付けがなされた経時検査画像Ｔ１〜Ｔ４が互いに並べて表示される。
【００４１】
「経時変化表示」のメニューを実行するときは、まず図４に示すように表示された複数画像のうちのいずれか（本例では左上の経時検査画像Ｔ３）の上にカーソルが置かれ、マウス２４が右クリックされる。すると、図示のように「ＲＯＩ（関心領域）設定」、「指標値設定」および「グラフ作成」を選択させるウインドウＷ１が表示される。そこで、「ＲＯＩ設定」にカーソルを合わせた状態でマウス２４の左ボタンがクリックされると、ＲＯＩの形状を設定するためのウインドウＷ２が表示される。
【００４２】
なお以下では、上述のように、ある表示○○にカーソルを合わせた状態でマウス２４のボタンがクリックされる操作を、「○○がマウスでクリックされる」と言うこととする。また、ユーザがマウス２４の左ボタンをクリックしなくても、「ＲＯＩ設定」等の表示にカーソルを合わせるだけでクリックした場合と同じ処理がなされるようにすることも可能であるが、そのようにする場合の説明は省略して、マウスでクリックする場合についてだけ説明する。
【００４３】
次に、ウインドウＷ２に表示されたＲＯＩの形状の１つがマウス２４でクリックされて選択されると、マウスモードはその形状を描くためのモードに変わる。すなわち、例えば図示のように「楕円ＲＯＩ」が選択された場合は、１つの表示画像のＲＯＩを設定したい位置にカーソルを置いてマウス２４の左ボタンがクリックされ、そのままマウス２４がドラッグされると、ドラッグで到達した位置と上記クリックした点とを２つの対角とする矩形に内接する形の楕円（正円を含む）が画面に表示される。望む位置において望む大きさおよび形状の楕円が表示されたところで左ボタンが離されると、表示されていた楕円が確定されてその表示が残される。
【００４４】
また例えば「矩形ＲＯＩ」が選択された場合は、上述したような矩形がそのまま表示されるので、望む位置において望む大きさおよび形状の矩形が表示されたところで左ボタンが離されると、表示されていた矩形が確定されてその表示が残される。また例えば「フリーハンドＲＯＩ」が選択された場合は、マウス２４の左ボタンを押した状態でドラッグさせたカーソルの軌跡がそのまま残されて表示される。また例えば「輪郭抽出」が選択された場合は、「◎◎病変部」、「△△病変部」といった抽出対象を選択・入力するためのウインドウがさらに表示され、そこで選択された病変部が公知のプログラムに基づいて自動抽出され、その抽出された領域の輪郭がＲＯＩとして表示される。
【００４５】
なお、設定されたＲＯＩは、例えば処理取消（undo）を指示するショートカットキーの操作等によって設定を解除できるようにしておくのが望ましい。そのようにすれば、ＲＯＩの設定を何回か実験的に繰り返して、最終的に最も適切なＲＯＩを設定することが可能になる。
【００４６】
以上の通りにして、複数画像のうちのいずれかにおいてＲＯＩが設定されると、その画像と解剖学的位置の対応付けがなされている他の全ての画像（本例では３画像）において、そのＲＯＩと解剖学的位置が同等であるＲＯＩが自動的に設定される。こうして全ての表示画像において互いに同等であるＲＯＩが設定された状態を図５に示す。ここに示すのは一例として楕円のＲＯＩであり、図中「５」を付して示す。また、この図５において、図４中の要素と同等の要素には同番号を付してあり、それらについての説明は特に必要のない限り省略する（以下、同様）。
【００４７】
この状態になった後、ウインドウＷ１の「指標値設定」がマウス２４でクリックされると、図５に示すように、また別のウインドウＷ３が表示される。このウインドウＷ３には、ＲＯＩに関する指標値が複数表示されており、それらの中の１つがマウス２４でクリックされると、グラフ化する指標値が選択される。図５の例では指標値として「面積」、「外周」、「最大値」、「最小値」、「平均値」および「標準偏差」が選択可能とされ、「最大値」および「平均値」が選択されてチェックマークが付与された状態が示されている。こうして指標値が選択されると、４つの表示画像の各ＲＯＩ５について、選択された指標値が計算される。
【００４８】
次にウインドウＷ１の「グラフ作成」がマウス２４でクリックされると、図６に示すように、画像表示領域２２ｃにグラフウインドウＷ４が表示される。このグラフウインドウＷ４においては、上述のように計算された各ＲＯＩの指標値が、撮影時点順に並べてグラフ表示される。つまり、本例では先に述べた通り撮影時点は４月、３月、２月および１月であるので、その月単位の撮影時点を横軸に取り、そしてこの場合の指標値である「最大値」と「平均値」を縦軸に取った各グラフが表示される。
【００４９】
またそれと併せてグラフウインドウＷ４においては、各表示画像のＲＯＩ５を含む部分を示すサムネイル画像Ｓ１、Ｓ２、Ｓ３およびＳ４が表示される。このときサムネイル画像Ｓ１、Ｓ２、Ｓ３およびＳ４の位置は、各表示画像が撮影された月に関する指標値がグラフにプロットされている位置の近傍とされる。このような表示がなされれば、ユーザである画像読影医等は、サムネイル画像Ｓ１〜Ｓ４が示すＲＯＩ内の状態を、指標値の経時変化を容易に参照しながら観察可能となるので、読影作業が効率良く行われるようになる。
【００５０】
なお以上のように、各撮影時点に関するサムネイル画像Ｓ１〜Ｓ４を全て同時に表示させる他、表示指令が与えられたときだけサムネイル画像を表示させるようにしてもよい。図７は、そのような表示形態の例を示すものである。ここでは一例として、ある撮影時点についての指標値がプロットされている位置にカーソルＣを置くと、それが表示指令となって、その位置の近傍に１つだけサムネイル画像Ｓ１が表示されるようになっている。
【００５１】
上述したように、表示指令が与えられたときだけサムネイル画像を表示する方法は、例えばグラフウインドウＷ４においてグラフ表示させる指標値が多い、あるいは指標値が取る値の範囲が広いといった事情が有る場合でも、グラフ表示に大きなスペースを確保することができるという効果を奏する。それに対して、サムネイル画像Ｓ１〜Ｓ４を全て同時に表示させる方法は、それらの比較観察が容易になるという効果を奏する。
【００５２】
また本実施形態では、グラフウインドウＷ４におけるサムネイル画像Ｓ１〜Ｓ４の表示形式を適宜変更することが可能となっている。そのために、一例としてグラフウインドウＷ４に表示されたサムネイル画像Ｓ１〜Ｓ４のいずれかがマウス２４で右クリックされると、図８に示すようにウインドウＷ５が表示される。このウインドウＷ５においては、変更する表示形式として「階調」、「拡大」、「サイズ」、「移動」、「ページング」および「画像処理」が示されている。
【００５３】
それらの表示形式のいずれかがマウス２４で左クリックして選択されると、サムネイル画像Ｓ１〜Ｓ４において、選択された表示形式が変更される。図８は「拡大」が左クリックされた直後の表示状態を示している。つまりここでは、図６に示された拡大前のサムネイル画像Ｓ１〜Ｓ４の表示状態と比べると、表示サイズは同一としたまま、表示画像が拡大されている。このとき、勿論ながら、ＲＯＩ５も被写体の画像と共に拡大される。なおこの図８および図７に示すように、グラフウインドウＷ４が表示されるようになったら、それまで画像表示領域２２ｃに表示されていた複数の経時検査画像は表示を止めるようにしてもよい。
【００５４】
他方、ウインドウＷ５の「サイズ」が選択された場合は、図９の左上側のグラフウインドウＷ４に示すように、サムネイル画像Ｓ１〜Ｓ４のうちの１つの輪郭上に制御点Ｐ１が示されて、サイズ変更モードに入っていることが知らされる。そこでユーザのマウス操作により、１つの制御点がドラッグされると、それに応じてサムネイル画像Ｓ１〜Ｓ４のサイズが変更される。なお同図では、矩形のサムネイル画像Ｓ４の右上頂点の制御点Ｐ１が右上方向にドラッグされて画像が拡大される場合を例示している。
【００５５】
こうして１つのサムネイル画像のサイズが変更されると、他の３つのサムネイル画像のサイズも同じように変更される。なおこのサイズ変更は、表示領域のサイズの変更であって、表示画像の倍率が変えられることはない。また、上記と同様に制御点をドラッグする操作により、サムネイル画像Ｓ１〜Ｓ４のサイズを縮小することも可能である。図９には、上記サイズ変更がなされた後のグラフウインドウＷ４を、図中の右下側に示す。
【００５６】
以上述べたようにサムネイル画像Ｓ１〜Ｓ４の表示形式を変更する処理は、複数種類併せて実行することも可能である。つまりグラフウインドウＷ４において、表示形式変更後のサムネイル画像Ｓ１〜Ｓ４のいずれかがマウス２４で右クリックされると、前述したウインドウＷ５が再度表示される。そしてこのウインドウＷ５において、変更する表示形式が選択され、その選択された形式に応じた所定の操作がなされれば、さらに表示形式が変更される。
【００５７】
例えば「階調」が選択された場合は、マウス操作により、ウインドウレベルとウインドウ幅を変更する処理がされる。一例として、マウスの上方向へのドラッグによりウインドウレベルを上げ、下方向へのドラッグによりウインドウレベルを下げる処理がなされる。また、右方向へのドラッグによりウインドウ幅を広げ、左方向へのドラッグによりウインドウ幅を狭める処理がなされる。それらの処理は、サムネイル画像Ｓ１〜Ｓ４に対して併行して同様になされる。
【００５８】
また「移動」が選択された場合は、サムネイル画像Ｓ１〜Ｓ４のうちの１つにおいてその中の任意点がマウス操作によりドラッグされると、そのサムネイル画像の表示域が全体的にドラッグの方向に移動する。例えば図９の右下側のグラフウインドウＷ４において、サムネイル画像Ｓ４中でＲＯＩ５が表示域の中央に存在するように表示域を変更したい場合は、サムネイル画像Ｓ４の中の任意点が左下方に向けてドラッグされる。このように１つのサムネイル画像の表示域を移動させると、他の３つのサムネイル画像の表示域も同様に移動する。
【００５９】
また「ページング」は、サムネイル画像Ｓ１〜Ｓ４の各々が複数画像のうちの代表画像１枚を示している場合に、それらの複数画像を頁送りする処理である。すなわち、この「ページング」が選択された場合は、例えばマウス２４のホイール（図示せず）が一方向に回転されると表示頁を第ｎ頁から第（ｎ＋１）頁側に送る処理がなされ、他方向に回転されると表示頁を第ｎ頁から第（ｎ−１）頁側に送る処理がなされる。それらの処理は、サムネイル画像Ｓ１〜Ｓ４に対して併行して同様になされる。なお、上述のような複数画像としては、例えば断面位置が相異なる複数の断層画像等が挙げられる。
【００６０】
また「画像処理」が選択された場合は図９の右下側のグラフウインドウＷ４に示すように、画像処理の種類を選択するためのウインドウＷ６が新たに表示される。そしてこのウインドウＷ６に示された画像処理の種類（本例では「鮮鋭化」、「平滑化」、「加算平均ＭＰＶＲ」および「最大値投影ＭＩＰ」）の中から１つがマウス２４のクリック操作により選択されると、その選択された画像処理がサムネイル画像Ｓ１〜Ｓ４に施され、サムネイルの表示画像は画像処理後のものに変えられる。
【００６１】
なお上記「加算平均ＭＰＶＲ」は、サムネイル画像Ｓ１〜Ｓ４の各々における表示画像を上述した複数の断層画像等の中の代表画像とする場合、図１０に示すように複数画像Ｇ１、Ｇ２・・・Ｇｎの相対応する位置の画素ｐｘ１、ｐｘ２・・・ｐｘｎに関する各画素値（濃度値等）を加算平均し、その加算平均値を当該位置の画素に関する代表値とする処理を画像面内の全画素について行い、それらの代表値で１枚の画像を構成する処理である。また「最大値投影ＭＩＰ」は、上述のような加算平均値を求める代わりに最大値を求め、それらの最大値で１枚の画像を構成する処理である。
【００６２】
また「鮮鋭化」や「平滑化」の処理を行う際には、前述したようなマウス２４のホイールの操作により、それらの処理の度合いを制御することができる。
【００６３】
以上説明したようにサムネイル画像Ｓ１〜Ｓ４の表示形式を変更可能としておけば、それらのサムネイル画像Ｓ１〜Ｓ４を、観察読影のためにより適したものとすることができる。
【００６４】
なお、以上説明した表示形式の変更処理は、サムネイル画像Ｓ１〜Ｓ４と併せて、それらの抽出元である経時検査画像Ｔ１〜Ｔ４に施してもよい。また、経時検査画像Ｔ１〜Ｔ４に対してのみ表示形式の変更処理を施すようにしてもよい。
【００６５】
次にＲＯＩの修正に関して、図１１を参照して説明する。グラフウインドウＷ４に示されたサムネイル画像Ｓ１〜Ｓ４のいずれか（本例ではサムネイル画像Ｓ４）の上にカーソルを置いた状態でマウス２４が右クリックされると、同図に示すようにグラフウインドウＷ４内に、先に述べたものと同様のウインドウＷ５が表示される。そしてこのウインドウＷ５に示されているメニュー「ＲＯＩ修正」がマウス２４のクリック操作により選択されると、上記カーソルが置かれているサムネイル画像Ｓ４に、ＲＯＩ５の上の何点かと、それが内接する矩形の輪郭上に制御点Ｐ２が示されて、ＲＯＩ修正モードに入っていることが知らされる。
【００６６】
そこでユーザのマウス操作により１つの制御点Ｐ２がドラッグされると、それに応じてＲＯＩ５の大きさが変えられる。図１１に示す例は、上記矩形の左下頂点の制御点Ｐ２が左下方にドラッグされて、この矩形が拡大される場合を示している。こうして矩形が拡大されると、楕円状のＲＯＩ５も、該矩形に内接する状態を保つように拡大する。このとき、ドラッグの方向次第で、楕円状のＲＯＩ５を変更の前後で相似形となるように拡大させることもできるし、楕円の形状が変わるように拡大させることもできる。
【００６７】
以上のようにして１つのサムネイル画像Ｓ４においてＲＯＩ５が修正されると、他のサムネイル画像Ｓ１〜Ｓ３においても同じようにＲＯＩ５が修正され、サムネイル画像Ｓ１〜Ｓ４におけるＲＯＩ５の表示が全て修正後のものに変えられる。また、各サムネイル画像Ｓ１〜Ｓ４の修正後のＲＯＩ５に関する指標値（本例では最大値および平均値）が新たに求められ、グラフの表示も、それらの新たな指標値を示すものに変えられる。なお、ウインドウＷ５に示されているメニュー「印刷」が、必要に応じてマウス２４のクリック操作により選択されると、画像表示領域２２ｃに表示されている画像が印刷される。
【００６８】
以上のようにＲＯＩ５およびグラフの表示を制御すれば、ユーザである画像読影医等は、修正されたＲＯＩ内の状態に関しても、指標値の経時変化を容易に参照しながら観察可能となるので、読影作業が効率良く行われるようになる。
【００６９】
なお、上に述べたように制御点Ｐ２を動かす手法により、ＲＯＩ５を縮小することも可能である。また、制御点Ｐ２を動かしてＲＯＩ５の大きさや形状を変える手法は、ＲＯＩ５が楕円形である場合のみならず、その他ＲＯＩ５が矩形である場合、フリーハンド形状である場合、さらには病変部等として自動認識された部分の輪郭である場合等にも適用可能である。
【００７０】
また上では、ＲＯＩ５のサイズや形状を修正する処理について説明したが、ＲＯＩ５の修正はその他、平面的な位置を変える処理や、深さ方向の位置を変える処理であってもよい。上記の「深さ方向の位置を変える処理」は、先に説明した「ページング」処理がなされる場合と同様に、サムネイル画像Ｓ１〜Ｓ４の各々がＲＯＩ設定用に複数画像のうちの代表画像１枚を示していて、それら複数画像が複数の断層画像であるような場合に、それまで表示されていた断層画像に代えて、深さ方向位置が異なる断層画像をＲＯＩ設定用代表画像として適用する処理である。その場合の断層画像は、実際に撮影により取得された断層画像であってもよいし、あるいは実際に撮影された２枚の断層画像から補間処理によって求めた、それらの中間位置の断層画像であってもよい。
【００７１】
さらに、上述した実施形態においては、複数の経時検査画像とグラフとを一つのディスプレイ２２に表示させているが、それらを互いに別の画像表示手段に表示させるようにしてもよい。
【００７２】
なお、以上説明した本発明による画像表示方法の手順をコンピュータに実行させるプログラムも、本発明の実施形態の一つである。さらには、そのようなプログラムを記録したコンピュータ読取り可能な記録媒体も、本発明の実施形態の一つである。
【符号の説明】
【００７３】
１    モダリティ
２    読影ワークステーション
３    画像サーバ
４    画像データベース
２１  処理装置
２２  ディスプレイ
２２ｃ  ディスプレイの画像表示領域
２３  キーボード
２４  マウス
２５  入力手段
Ｐ１、Ｐ２  制御点
Ｓ１〜Ｓ４  サムネイル画像
Ｔ１〜Ｔ４  経時検査画像
Ｗ４  グラフウインドウ
【図１】
2015016067.tif 000003
【図２】
2015016067.tif 000004
【図３】
2015016067.tif 000005
【図４】
2015016067.tif 000006
【図５】
2015016067.tif 000007
【図６】
2015016067.tif 000008
【図７】
2015016067.tif 000009
【図８】
2015016067.tif 000010
【図９】
2015016067.tif 000011
【図１０】
2015016067.tif 000012
【図１１】
2015016067.tif 000013