(57)【要約】【課題】簡易な操作で、任意の医用画像データを観察対象の領域に適した表示条件で表示することを可能にする。【解決手段】医用画像データを表示するための表示制御装置は、医用画像データから得られる縮小画像を用いて、医用画像データを選択するためのサムネイルを生成する。サムネイルには、医用画像データから得られる解剖学的領域にしたがって部分領域が設定される。表示制御装置は、表示されているサムネイルを選択する指示に応じて、その指示により特定される部分領域に対応する表示条件を取得し、取得された表示条件を用いて医用画像データを表示手段に表示させる。【選択図】図４
2018110944.tif 000002
【特許請求の範囲】
【請求項１】
医用画像データを表示するための表示制御装置であって、
医用画像データから得られる縮小画像を用いて、該医用画像データを選択するためのサムネイルを生成する生成手段と、
前記医用画像データから得られる解剖学的領域にしたがって、前記サムネイルに部分領域を設定する設定手段と、
表示されている前記サムネイルを選択する指示に応じて、前記指示により特定される部分領域に対応する表示条件を取得する取得手段と、
前記指示に応じて、前記取得手段により取得された表示条件を用いて前記医用画像データを表示手段に表示させる表示制御手段と、を備えることを特徴とする表示制御装置。
【請求項２】
前記表示条件は、前記指示により特定される部分領域に対応する解剖学的領域のための表示条件であることを特徴とする請求項１に記載の表示制御装置。
【請求項３】
前記表示条件は、前記医用画像データを前記表示手段に表示するための階調変換の条件を含むことを特徴とする請求項１または２に記載の表示制御装置。
【請求項４】
前記表示条件は、前記医用画像データを前記表示手段に表示する際の拡大率および表示する際の中央位置を指定するための情報の少なくとも何れかを含むことを特徴とする請求項１乃至３のいずれか１項に記載の表示制御装置。
【請求項５】
前記表示制御手段は、前記指示に応じて、医用画像データを表示するための複数の表示領域のうちの一つに前記医用画像データを表示することを特徴とする請求項１乃至４のいずれか１項に記載の表示制御装置。
【請求項６】
前記表示制御手段は、前記サムネイルが前記複数の表示領域のうちの一つの表示領域にドラッグアンドドロップされたことに応じて、ドラッグの開始時にポインタにより特定されていた部分領域に対応する表示条件を用いて前記医用画像データを前記一つの表示領域に表示させることを特徴とする請求項５に記載の表示制御装置。
【請求項７】
前記表示制御手段は、
前記複数の表示領域の配置にしたがって前記サムネイルを分割して得られる複数の分割領域と前記複数の表示領域を対応付け、
前記複数の表示領域のうちの、前記指示により特定される分割領域に対応する表示領域に前記医用画像データを表示する、ことを特徴とする請求項５に記載の表示制御装置。
【請求項８】
前記表示制御手段は、前記分割領域の境界を示す分割線を前記サムネイルに描画またはオーバーレイ表示することを特徴とする請求項７に記載の表示制御装置。
【請求項９】
前記表示制御手段は、
前記サムネイルがドラッグまたはフリックされた方向に基づいて前記複数の表示領域のうちの一つの表示領域を選択し、
前記ドラッグまたはフリックの開始位置によって特定される部分領域に対応付けられた表示条件を用いて前記医用画像データを前記選択された表示領域に表示させることを特徴とする請求項５に記載の表示制御装置。
【請求項１０】
前記設定手段が取得する解剖学的な領域は、前記医用画像データを取得するのに用いられたモダリティと撮像部位に応じて決められることを特徴とする請求項１乃至９のいずれか１項に記載の表示制御装置。
【請求項１１】
前記表示制御手段は、前記部分領域の境界を示す分割線を前記サムネイルに描画またはオーバーレイ表示することを特徴とする請求項１乃至１０のいずれか１項に記載の表示制御装置。
【請求項１２】
前記指示は、ポインティングデバイスにより操作されるポインタにより行われることを特徴とする請求項１乃至１１のいずれか１項に記載の表示制御装置。
【請求項１３】
前記表示条件は、前記医用画像データを取得するために用いられたモダリティと部分領域に対応する解剖学的領域に基づいて決められることを特徴とする請求項１に記載の表示制御装置。
【請求項１４】
請求項１乃至１３のいずれか１項に記載の表示制御装置と、
前記サムネイルおよび前記医用画像データを表示するための表示手段と、を備えることを特徴とする医用画像表示装置。
【請求項１５】
医用画像表示装置の表示制御方法であって、
医用画像データから得られる縮小画像を用いて、該医用画像データを選択するためのサムネイルを生成する生成工程と、
前記医用画像データから得られる解剖学的領域にしたがって、前記サムネイルに部分領域を設定する設定工程と、
表示されている前記サムネイルを選択する指示に応じて、前記指示により特定される部分領域に対応する表示条件を取得する取得工程と、
前記指示に応じて、前記取得工程で取得された表示条件を用いて前記医用画像データを表示手段に表示させる表示制御工程と、を有することを特徴とする表示制御方法。
【請求項１６】
請求項１５に記載された表示制御方法の各工程をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、医用画像のための表示制御装置および表示制御方法、該表示制御装置を用いた医用画像表示装置、およびプログラムに関する。
【背景技術】
【０００２】
医療現場では、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、ＰＥＴ（Positron Emission Tomography）装置などの医用画像撮影装置により、医用画像が撮像されている。撮像により得られた医用画像データには、様々な画像処理が施され、病院内のデータサーバに一定期間保存される。医師の画像診断業務は、医用画像表示装置（ビューワ（Viewer）とも呼ばれる）を用いて目的の医用画像データを検索してモニタ上に表示させ、医用画像表示装置の様々な機能を用いることで行われる。
【０００３】
図１３（Ａ）は一般的な医用画像表示装置の画面構成図の一例である。サムネイル表示領域１１０１は、ある患者における過去および現在に撮像された、少なくとも一つの医用画像データをサムネイル表示する領域であり、サムネイル１１０３〜１１０７は各医用画像データから作成されたサムネイルである。メイン画像表示領域１１０２は、ユーザが読影対象としている画像を表示する領域である。メイン画像表示領域１１０２に画像を表示することにより、表示した画像に対して、画像全体の拡大・縮小機能、濃度値変換機能、表示位置の平行移動機能、図形描画機能、濃度値計測機能等の医用画像表示装置の様々な機能が使用可能となる。
【０００４】
またメイン画像表示領域１１０２は、複数の領域に分割することができ、分割した複数の領域のそれぞれに異なる画像を同時に表示することができる。図１３におけるメイン画像表示領域１１０２は領域１１０８〜１１１１の４つの領域に分割されている。以下では、メイン画像表示領域の分割されたそれぞれの領域（例えば、領域１１０８〜１１１１）を単に表示領域と称する。ユーザは、読影対象または参考としたい医用画像データを、任意の表示領域に表示させ読影を行う。図１３（Ｂ）は、任意の医用画像データを任意の表示領域に表示させる一般的な手法の一例である。任意のサムネイル（例えばサムネイル１１０３）を任意の表示領域（例えば表示領域１１０９）上にドラッグアンドドロップすることにより、該サムネイル（例えばサムネイル１１０３）に対応する医用画像データを任意の表示領域（例えば表示領域１１０９）に表示できる。
【０００５】
一方、医用画像データにおいては、例え同一画像中に表示された領域であっても解剖学的に分類された領域（解剖学的領域）に応じて最適な表示条件は異なるため、ユーザは観察対象の領域に応じて画像の表示条件を変更して表示し読影を行う。例えば、医用画像表示装置が有する既知の濃度値変換機能を用いて表示条件を変更する。ここで、濃度値変換機能とは、グレイスケールの各画素値を所定の規則に従って変換する機能である。一般に、ＣＴ画像は１画素当たり１２ｂｉｔ階調（４，０９６階調）のＨＵ（Hounsfield Unit）値で表現され、このＨＵ値が画素値として保存されている。医師がＣＴ画像を観察する際は、ＤＩＣＯＭ規格に規定されたＷＬ（Window Level）とＷＷ（Window Width）の２つの濃度変換パラメータを用いて、１２ｂｉｔ階調の画素値（HU値）が８ｂｉｔ階調に変換され、ディスプレイに表示される。これにより、特定の臓器や組織のＨＵ値の差（濃度差）が見やすくなる。ＣＴ画像以外（ＭＲＩ画像、ＰＥＴ画像、超音波画像など）でも、画素値の差（濃度差）を見やすくするために上記と同様の濃度変換が行われている。より具体的には、同じ胸部領域のＣＴ画像においては、肺野領域を詳細に観察したい場合はＷＬを−６００、ＷＷを１５００に設定する。また、縦隔領域を詳細に観察したい場合にはＷＬを６０、ＷＷを４００に設定する。骨領域を詳細に観察したい場合にはＷＬを５００、ＷＷを２５００に設定する。
【０００６】
特許文献１は、３次元ボリュームデータの任意の領域を指定することによって、画像の表示条件を変更することが記載されている。この技術によれば指定した領域に対応した表示条件でのＣＴ画像の表示を効率よく実行することができるため、ユーザの手間を削減することができる。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１１−２１７９４７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、特許文献１の技術を用いたとしても、目的のサムネイルをメイン画像表示領域にドラッグアンドドロップした後に表示条件を変更する必要があり、読影の際に手間がかかるという課題があった。なお、ここでいうドラッグアンドドロップとは、図１３（Ｂ）で説明したように、サムネイル上にマウスポインタを移動してから画像を選択し、メイン画像表示領域上にマウスポインタを移動してからリリースするという操作を指す。
【０００９】
本発明は上記課題を鑑みてなされたものであり、簡易な操作で、任意の医用画像データを観察対象の領域に適した表示条件で表示することを可能にすることを目的とする。
【課題を解決するための手段】
【００１０】
上記の目的を達成するための本発明の一態様による表示制御装置は以下の構成を備える。すなわち、
医用画像データを表示するための表示制御装置であって、
医用画像データから得られる縮小画像を用いて、該医用画像データを選択するためのサムネイルを生成する生成手段と、
前記医用画像データから得られる解剖学的領域にしたがって、前記サムネイルに部分領域を設定する設定手段と、
表示されている前記サムネイルを選択する指示に応じて、前記指示により特定される部分領域に対応する表示条件を取得する取得手段と、
前記指示に応じて、前記取得手段により取得された表示条件を用いて前記医用画像データを表示手段に表示させる表示制御手段と、を備える。
【発明の効果】
【００１１】
本発明によれば、簡易な操作で、任意の医用画像データを観察対象の領域に適した表示条件で表示することが可能になる。
【図面の簡単な説明】
【００１２】
【図１】第１の実施形態に係る医用画像表示システムのブロック図。
【図２】第１の実施形態の全体処理を説明するフローチャート。
【図３】（Ａ），（Ｂ）は、第１の実施形態に係る画面構成の例を示した図、（Ｃ）は部分領域と解剖学的領域の対応付けの管理を説明する図。
【図４】（Ａ）〜（Ｃ）は、サムネイルの分割領域を選択した際の画面構成の例を示した図。
【図５】第１の実施形態の変形例１に係る画面構成の例を示した図。
【図６】第２の実施形態に係る医用画像表示システムのブロック図。
【図７】第２の実施形態の全体処理を説明するフローチャート。
【図８】（Ａ），（Ｂ）は、第２の実施形態に係る画面構成の例を示した図。
【図９】第３の実施形態に係る医用画像表示システムのブロック図。
【図１０】第３の実施形態の全体処理を説明するフローチャート。
【図１１】サムネイルに対する方向情報の入力方法を説明する図。
【図１２】（Ａ），（Ｂ）は、方向情報の入力範囲と選択する表示領域の関係を説明する図。
【図１３】（Ａ）は、一般的な医用画像表示装置の画面構成の一例を示す図、（Ｂ）は、メイン画像表示領域に医用画像データを表示した例を示す図。
【発明を実施するための形態】
【００１３】
以下に、図面を参照しながら、本発明の実施形態のいくつかについて説明する。ただし、発明の範囲は図示例に限定されるものではない。
【００１４】
［第１の実施形態］
図１は、第１の実施形態に係わる医用画像表示システムの全体構成を示す図である。医用画像表示システムは、医用画像データを表示するための医用画像表示装置１０と、医用画像データを格納するデータベース２２とを含んでおり、これらの装置は互いに通信可能に接続されている。本実施形態においては、医用画像表示装置１０とデータベース２２との通信にはＬＡＮ（Local Area Network）２１が用いられている。データベース２２は、医用画像データなどの検査情報を管理しており、医用画像表示装置１０は、データベース２２で管理されている医用画像データをＬＡＮ２１を介して取得し、表示する。
【００１５】
医用画像表示装置１０は、その機能的な構成として、通信ＩＦ（Interface）３１、ＲＯＭ（Read Only Memory）３２、ＲＡＭ（Random Access Memory）３３、記憶部３４、操作部３５、表示部３６、制御部３７を有する。通信ＩＦ３１は、例えば、ＬＡＮカード等で実現され、ＬＡＮ２１を介した外部装置（例えば、データベース２２）と医用画像表示装置１０との間の通信を司る。ＲＯＭ３２は、不揮発性のメモリ等で実現され、各種プログラム等を記憶する。ＲＡＭ３３は、揮発性のメモリ等で実現され、各種情報を一時的に記憶する。記憶部３４は、例えば、ＨＤＤ（Hard Disk Drive）等で実現され、各種情報を記憶する。操作部３５は、例えば、キーボードやマウス等で実現され、ユーザからの指示を装置内に入力する。表示部３６は、例えば、ディスプレイ等で実現され、各種情報をユーザ（例えば、医師）に向けて表示する。
【００１６】
制御部３７は、医用画像データの表示を制御する表示制御装置の一例であり、例えば、ＣＰＵ（Central Processing Unit）等で実現され、医用画像表示装置１０における処理を統括制御する。制御部３７は、その機能的な構成として、医用画像取得部４１、画像領域取得部４２、サムネイル作成部４３、選択領域取得部４４、表示処理部４５を具備する。
【００１７】
医用画像取得部４１は、通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から当該症例の医用画像データを取得し、画像領域取得部４２、サムネイル作成部４３及び表示処理部４５へと出力する。画像領域取得部４２は、医用画像取得部４１から取得した医用画像データに対して後述する画像処理を行い、当該医用画像データ中の解剖学的に分類された領域（以下、解剖学的領域という）を決定し、その領域情報を取得してサムネイル作成部４３へ出力する。
【００１８】
サムネイル作成部４３は、医用画像取得部４１で取得された当該症例の医用画像データの縮小画像と画像領域取得部４２で取得された当該医用画像データ中の解剖学的領域の情報を用いて、当該症例のサムネイルを作成し表示処理部４５へ出力する。選択領域取得部４４は、表示部３６に表示されているサムネイルに対して、ユーザが操作部３５を介して選択した選択領域情報を取得し表示処理部４５へ出力する。表示処理部４５は、サムネイル作成部４３で作成されたサムネイルを表示部３６に表示する。また、表示処理部４５は、選択領域取得部４４で取得した選択領域情報に応じて、表示部３６のメイン画像表示領域（たとえば、図３（Ａ）のメイン画像表示領域１０２）に医用画像取得部４１から取得した当該症例の医用画像データを表示する。
【００１９】
なお、制御部３７が具備する、上述した各部の少なくとも一部は独立した装置として実現されてもよい。また、夫々が機能を実現するソフトウェアとして実現されてもよい。本実施形態では各部は夫々ソフトウェアにより実現されているものとする。
【００２０】
次に図２〜図４を用いて、本実施形態における制御部３７による全体の処理手順を説明する。図２は、制御部３７が実行する処理を示すフローチャートである。図３（Ａ）及び図４（Ａ）は後述の処理によって表示部３６に表示される画面の例である。図３（Ｂ）及び図４（Ｂ）（Ｃ）は、図３（Ａ）及び図４（Ａ）で示されるサムネイル１０３をそれぞれ拡大して示したものである。
【００２１】
図３（Ａ）及び図４（Ａ）において、サムネイル表示領域１０１にはサムネイルが表示される。サムネイル１０３〜１０７は、サムネイル作成部４３が作成したサムネイルの表示例である。メイン画像表示領域１０２は、選択されたサムネイルに対応する医用画像データを表示するための領域である。メイン画像表示領域１０２は、医用画像データを表示するための複数の表示領域に分割されている。本実施形態では、メイン画像表示領域１０２が４つの表示領域１０８〜１１１に分割されている。また、以下では、例として胸部領域のＸ線ＣＴ画像の医用画像データを対象として説明するが、もちろん本発明の対象となる医用画像データはこれに限定されるものではない。
【００２２】
図２に示すフローチャートのステップＳ２００において、医用画像取得部４１は通信ＩＦ３１とＬＡＮ２１を介してデータベース２２から医用画像データを読み出す。ステップＳ２０１において、画像領域取得部４２はステップＳ２００において読み出した医用画像データから解剖学的領域を抽出し、その領域情報を取得する。解剖学的領域の抽出は、たとえば以下のように行われる。
【００２３】
まず、画像領域取得部４２は、医用画像データに対して、平滑化フィルタを用いてノイズ除去を行う。次に、画像の画素値に対する所定の閾値（例えば、ＨＵ値：−２００）を用いて二値化処理を行い体内領域と体外領域を分離する。さらに体内領域の内部において、別の閾値（例えば、ＨＵ値：３００）を用いて骨領域とその他の領域に分離する。さらにその他の領域内において、別の閾値（例えばＨＵ値：−５００）を用いて肺野内領域と軟部領域に分離する。なお、解剖学的領域の抽出処理は、読み出した当該医用画像データから定められた領域を抽出できればよく、本手法に限定されない。例えば、グラフカット処理をはじめとする既知の臓器セグメンテーション処理を用いて解剖学的領域を抽出してもよい。また、抽出する領域は例えば、表１に示すように、ＤＩＣＯＭ（Digital Imaging and COmmunication in Medicine）ヘッダ等から得られる画像情報と抽出する領域の対応を予め設定しておき、当該医用画像データに含まれる画像情報に対応する抽出領域を抽出する。表１に示されるように、医用画像データの撮像に用いられたモダリティと撮像部位に基づいて、その医用画像データから抽出されるべき解剖学的領域が決定される。
【００２４】
【表１】
2018110944.tif 000003
【００２５】
ステップＳ２０２において、サムネイル作成部４３は、以下の処理によりサムネイルを作成する。まず、サムネイル作成部４３は、ステップＳ２００で読み出した医用画像データに対応する画像データ（以下、対応画像データ）を作成する。ここで、読み出した医用画像データが２次元医用画像データ（一枚のスライス画像）の場合は、対応画像データはそのスライス画像そのもの、またはその一部分を切り出した画像である。一方、読み出した医用画像データが３次元医用画像データ（複数枚のスライス画像）の場合、対応画像データは、その３次元医用画像データを代表するスライス画像、または予め決めた位置の（例えば先頭の）スライス画像である。あるいは、そのスライス画像の一部分を切り出した画像でもよい。ここで、３次元医用画像データを代表するスライス画像は、表１に示されるような医用画像データの画像情報に応じて予め定められる抽出領域の全てを含むスライス画像、または、最も多くの種類の抽出領域を含むスライス画像としてもよい。その後、サムネイル作成部４３は、対応画像データから縮小画像を生成し、生成した縮小画像を用いてサムネイルを生成する。
【００２６】
次に、サムネイル作成部４３は、ステップＳ２０１で抽出した解剖学的領域に応じてサムネイルから部分領域を抽出する。例えば、ステップＳ２０１で体外領域、肺野内領域、軟部領域、骨領域を取得した場合であって、対応画像データにそれらの領域が含まれる場合、サムネイル作成部４３は縮小画像からそれら領域に対応する部分領域を抽出する。そして、抽出した部分領域が視認できるように、部分領域の境界を示す分割線（図３（Ｂ）の破線）を生成する。そして、縮小画像に分割線が描画またはオーバーレイ表示されたサムネイルを作成する。なお、図３（Ｂ）の分割線１１２は、体外領域と体内領域を分割し、分割線１１３は肺野内領域と軟部領域を分割し、分割線１１４は骨領域と軟部領域を分割している。こうして、サムネイル１０３において、分割線１１２〜１１４によって分割された部分領域１２２〜１２４が設定される。こうして、サムネイル作成部４３は、たとえば図３（Ｂ）に示されるように部分領域１２２〜１２４を設定し、図３（Ｃ）に示されるように各部分領域と解剖学的領域の対応を管理する。
【００２７】
サムネイル作成部４３は、ステップＳ２００で読み出した医用画像データが複数ある場合には、上述の処理を全ての医用画像データに対して行い、全ての医用画像データに対してサムネイルを作成する。表示処理部４５は、サムネイル作成部４３で作成したサムネイルをサムネイル表示領域に並べて表示する。図３（Ａ）の例では、サムネイル１０３〜１０７がサムネイル表示領域１０１に表示されている。
【００２８】
ステップＳ２０３において、選択領域取得部４４は、ユーザが操作部３５を用いて選択したサムネイルの部分領域を示す情報を取得する。例えば、ユーザが不図示のポインティングデバイス（たとえば、マウス）を用いてサムネイル１０３の部分領域１２３をクリックすると、選択領域取得部４４は、クリックされた部分領域１２３を示す情報を取得する。本操作時の表示部３６における画面例を図４（Ａ）〜図４（Ｃ）に示す。矢印１１５は、ポインティングデバイスにより操作されるポインタ（例えばマウスポインタ）であり、操作部３５によって示される入力の現在位置を表す。
【００２９】
ステップＳ２０４において、表示処理部４５は、ステップＳ２０３で選択されたサムネイルに対応した医用画像データを、その選択時に特定されていた部分領域の解剖学的領域に適した表示条件でメイン画像表示領域１０２に表示する。図４（Ｂ）の例ではサムネイル１０３の部分領域１２３（肺野領域）が矢印１１５で選択されており、図４（Ａ）に示すようにたとえば表示領域１０８にサムネイル１０３に対応した医用画像データが肺野内を観察するために適した表示条件で表示される。さらに、図４（Ｃ）には、矢印１１５によりサムネイル１０４が選択されるとともに軟部領域に対応する部分領域１３１が特定された様子が示されている。この場合、メイン画像表示領域１０２のうちの表示領域１１０にサムネイル１０４に対応した医用画像データが軟部領域内を観察するために適した表示条件で表示される。
【００３０】
ここで、選択されたサムネイルに対応した医用画像データを複数の表示領域（例えば，表示領域１０８〜１１１）のうちのどの表示領域に表示するかは、予め定めた法則に則って決定される。例えば、各表示領域の状態（現在、画像が表示されているか否か）を取得し、画像が表示されていない表示領域が存在する場合は、その表示領域に優先して医用画像データが表示される。また、全ての表示領域に画像が既に表示されている場合は、常に決められた表示領域（例えば、最も左上の表示領域）に表示するようにしてもよい。または、最も経時的に過去の時点に表示された画像が現在表示されている表示領域に医用画像データを表示するようにしてもよい。たとえば、表示領域１０８→表示領域１０９→表示領域１１０→表示領域１１１の順を繰り返すように新たな医用画像データを表示するための表示領域が決定されてもよい。または、ユーザによる操作が行われた記録が最も経時的に過去の時点である画像が現在表示されている表示領域に新たな医用画像データを表示するようにしてもよい。選択されたサムネイルに対応した医用画像データの表示先となる表示領域に既に別の医用画像データが表示されていた場合は、その別の医用画像データの表示を消去した後に、該対応した医用画像データが表示される。
【００３１】
ステップＳ２０５において、制御部３７は、操作部３５を介してユーザから読影終了の指示があったかどうかを判定する。読影終了の指示は、不図示の読影終了ボタンをユーザがクリックすることなどにより行われる。読影終了の指示があった場合は、図２の処理を終了する。読影終了の指示がなかった場合は、ステップＳ２０３に戻る。
【００３２】
以上のように、第１の実施形態に係る医用画像表示装置によれば、以下の効果を得られる。つまり、任意のサムネイルの任意の部分領域を選択することで、当該サムネイルに対応した医用画像データを、選択した部分領域に対応した表示条件でメイン画像表示領域に表示できる。従って、任意の医用画像データを選択する操作により、読影する際に適切な表示条件に合わせてメイン画像表示領域に医用画像データを表示することができるため、ユーザの手間が少ない医用画像表示装置及び医用画像表示方法を提供することができる。
【００３３】
（変形例１）
本実施形態では、ステップＳ２０４において選択したサムネイルの部分領域に対応して、画像の濃度値（ＨＵ値）を変更（階調変換）する例について説明した。しかし、変更される表示条件は濃度値に限られるものではない。例えば、画像全体の拡大・縮小機能、表示位置の平行移動機能、図形描画機能、濃度値計測機能などを表示条件として用いて、表示領域に医用画像データを表示するようにしてもよい。図５に、サムネイル１０３の左肺野内領域が選択された場合の表示例を示す。まず、サムネイル１０３に対応した医用画像データを、肺野に適した濃度値（例えば、ＷＬ：−６００、ＷＷ：１５００）を用いて階調変換し、表示部３６が表示可能な階調に整合させる。さらに、左肺野が表示領域１０８の中央位置に表示されるように医用画像データの表示位置を平行移動する。さらに、左肺野を観察しやすいサイズに画像全体を拡大した状態とした医用画像データを表示領域１０８に表示する。そして、表示領域１１０に、既知の濃度値計測機能を用いて計算される左肺野内の濃度値のヒストグラムを表示する。
【００３４】
ここで、選択された領域に対応する表示条件は、例えば、表２に示すように、ＤＩＣＯＭヘッダ等から得られる画像情報と選択されるサムネイル分割領域とによって予め設定しておく。表２に示されるように、医用画像データを撮像したモダリティとその撮像部位に応じて表示条件が決定される。そして、選択されたサムネイルに対応する医用画像データを、当該医用画像データの画像情報と選択された部分領域とに対応した表示条件でメイン画像表示領域に表示する。なお、表２中の拡大率Ｆｉｔは対応する領域が最も大きく見えるサイズになる拡大率であり、表２中の平行移動の中央とは、対応する領域が表示領域の中央に表示されるように画像全体を平行移動する条件である。
【００３５】
【表２】
2018110944.tif 000004
【００３６】
（変形例２）
本実施形態では、ステップＳ２０４において、選択されたサムネイルに対応する医用画像データが表示される表示領域は、予め定められた法則に則って選ばれるが、これに限られるものではない。たとえば、サムネイルをメイン画像表示領域内の任意の表示領域にドラッグアンドドロップすることで、医用画像データを表示する表示領域をユーザが指定できるようにしてもよい。より具体的には、任意のサムネイル上の任意の部分領域上にポインタ（矢印１１５）を移動してからドラッグを開始し、任意の表示領域上にポインタを移動してリリース（ドロップ）する。変形例２を実施することにより、任意のサムネイルに対応する医用画像データを任意の表示領域に適切な表示条件（ドラッグの開始時にポインタにより特定される部分領域が対応する解剖学的領域に適した表示条件）で表示させることができる。
【００３７】
以上のように、第１実施形態によれば、メイン画像表示領域に表示すべき医用画像データの指定とその際の表示条件の指定を同時に行うことができるため、医用画像データの表示に関わる手間を削減することができる。また、変形例２では、医用画像データの指定と表示条件の指定に加えて、表示領域の選択を簡易な操作で行うことができ、さらに操作性が向上する。
【００３８】
なお、上記実施形態ではメイン画像表示領域１０２を４つに均等に分割した例を示したが、分割数は４つに限られるものではないし、たとえば図１２に示されるように各表示領域の大きさが均等でなくてもよい。また、メイン画像表示領域は分割されていなくてもよい。その場合、メイン画像表示領域には、最近に選択された医用画像データ（１枚の医用画像）が、サムネイルの選択時に特定された部分領域に対応した表示条件で表示されることになる。なお、上記実施形態では、分割線１１２〜１１４によりサムネイル内の部分領域を明示したが、これら分割線の描画あるいはオーバーレイ表示は省略されてもよい。但し、サムネイルに分割線１１２〜１１４を表示することにより、ユーザはより明瞭にサムネイル内の分割領域を認識できる。また、ここで説明した画像情報や表示条件はあくまで一例であり、本発明はこの例に限定されない。
【００３９】
［第２の実施形態］
第１の実施形態では、サムネイルにおいて医用画像データの解剖学的領域に対応する部分領域を設定した。第２の実施形態に係る医用画像表示装置では、さらに、メイン画像表示領域の分割条件にしたがってサムネイルを複数の分割領域へ分割する。そして、サムネイルの選択時に特定された分割領域に応じて、選択されたサムネイルに対応する医用画像データを適切な表示条件で任意の表示領域に表示することを可能にする。
【００４０】
図６に、第２の実施形態に係る医用画像表示装置１０の構成例を示す。第１の実施形態に係る医用画像表示装置１０の構成例（図１）と比べると、分割条件取得部４６が追加されている。分割条件取得部４６以外の図示された各構成は、図１における各構成部と同様である。分割条件取得部４６は、表示部３６に表示されているメイン画像表示領域における複数の表示領域への分割条件を取得し表示処理部４５へ出力する。また、第１の実施形態と同様に、各部はソフトウェアにより実現されているものとする。
【００４１】
次に図７及び図８を用いて、第２の実施形態における制御部３７による処理手順を説明する。図７は、制御部３７が実行する処理を示すフローチャートである。図８（Ａ）は、後述の処理によって表示部３６に表示される画面の例である。図８（Ｂ）は、図８（Ａ）で示されるサムネイル１０３の画像を拡大したものである。
【００４２】
ステップＳ７００の処理は、第１の実施形態におけるステップＳ２００の処理と同様である。ステップＳ７０１において、分割条件取得部４６は表示部３６に表示されているメイン画像表示領域の分割条件を取得する。例えば、メイン画像表示領域の分割数をｌ、行数ｎを、列数をｍとすると、図８（Ａ）に示したようなメイン画像表示領域１０２の分割状態の場合、（ｌ、ｎ、ｍ）＝（４、２、２）が取得される。ここで説明した分割条件の取得方法は、あくまで一例であり、本発明はこの例に限定されない。
【００４３】
ステップＳ７０２の処理は、第１の実施形態におけるステップＳ２０１の処理と同様である。ステップＳ７０３の処理では、第１の実施形態におけるステップＳ２０２の処理に加えて次の処理が行われる。サムネイル作成部４３は、ステップＳ７０１で取得した分割条件に応じてサムネイルを分割する。例えば、ステップＳ７０１で（ｌ、ｎ、ｍ）＝（４、２、２）が取得された場合、サムネイル作成部４３は、サムネイルも同様に（ｌ、ｎ、ｍ）＝（４、２、２）の条件で分割する。すなわち、メイン画像表示領域の複数の表示領域の配置にしたがって、サムネイルを構成する縮小画像を分割して複数の分割領域を形成し、複数の分割領域の各々とメイン画像表示領域の複数の表示領域の各々を対応付ける。たとえば、本例の場合、図８（Ｂ）に示されるように、分割領域１１６〜１１９が得られ、それぞれ表示領域１０８〜１１１に対応付けられる。続いて、分割した領域が視認できるような分割線（図８（Ｂ）のＬ１０）を生成し、この分割線を縮小画像に描画あるいはオーバーレイ表示したサムネイルを作成する。
【００４４】
図８（Ｂ）のサムネイル１０３では、サムネイルを構成する縮小画像はステップＳ７０２で取得された解剖学的領域に応じて部分領域が抽出され、部分領域１２２〜１２４が得られる。さらに、サムネイル１０３を構成する縮小画像は、メイン画像表示領域１０２の分割条件にしたがって分割され、分割領域１１６〜１１９が得られる。こうして、図８（Ｂ）に示されるように、分割線１１２〜１１４と分割線Ｌ１０が縮小画像に描画あるいはオーバーレイ表示されたサムネイル１０３が作成される。
【００４５】
ステップＳ７０４において、制御部３７は、メイン画像表示領域の分割条件を取得し、分割条件の変更の有無を判定する。なお、メイン画像表示領域１０２の分割条件は、操作部３５を介したユーザの指示により変更可能である。分割数の変更方法は、従来の医用画像ビューワが有する既知の技術により実現されるので説明を省略する。ステップＳ７０４において、分割条件の変更がないと判定された場合は、処理はステップＳ７０５に進み、分割条件の変更があったと判定された場合は、処理はステップＳ７０１に戻る。
【００４６】
ステップＳ７０５の処理は、第１の実施形態におけるステップＳ２０３の処理と同様である。但し、取得される選択領域情報は、以下の２つの領域情報となる。すなわち、
・解剖学的な領域の情報によって分割された第一領域情報（つまり、図８の例では部分領域１２２〜１２４のいずれか一つ）。
・メイン画像表示領域の分割条件で分割された第二領域情報（つまり、図８の例では分割領域１１６〜１１９のいずれか一つ）。
【００４７】
ステップＳ７０６において、表示処理部４５は、ステップＳ７０５で選択されたサムネイルに対応した医用画像データを、ステップＳ７０５で選択された第一領域情報に対応した表示条件で、第二領域情報に対応した表示領域に表示する。図８（Ｂ）の例では、矢印１１５が、肺野内領域である部分領域１２３の分割領域１１９に属する部分を指示している。したがって、第一領域情報としてサムネイル１０３の部分領域１２３（肺野内領域）が選択され、第二領域情報として分割領域１１９（右下の領域）が得られる。その結果、図８（Ａ）に示されるように、サムネイル１０３に対応した医用画像データが、肺野内を観察するために適した表示条件（例えば、ＷＬ：−６００、ＷＷ：１５００）で、表示領域１１１に表示される。ここで、表示領域１１１に既に別の画像データが表示されていた場合は、表示処理部４５は、既に表示されていた画像データを表示領域１１１から消去した後、サムネイル１０３に対応した医用画像データを表示する。
【００４８】
ステップＳ７０７の処理は、第１の実施形態におけるステップＳ２０５の処理と同様の処理であり、読影終了の指示があったかどうかを判定する。読影終了の指示があった場合は図７の処理を終了し、読影終了の指示がなかった場合は処理はステップＳ７０４に戻る。
【００４９】
以上のように、第２の実施形態に係る医用画像表示装置によれば、以下の効果を得られる。つまり、任意のサムネイルの任意の部分領域と分割領域を選択することで、当該サムネイルに対応した医用画像データを、選択した部分領域に対応した表示条件で、かつ選択した分割領域に対応した表示領域に表示できる。従って、１回の選択操作で、任意の医用画像データを、読影する際に適切な表示条件で、任意の表示領域に表示させることができるため、ユーザの手間を減らすことができる。
【００５０】
なお、メイン画像表示領域の分割を示す分割線（たとえば図８（Ｂ）のＬ１０）を省略してもよい。たとえば図８（Ａ）に示すようにメイン画像表示領域１０２の分割の状態がそれほど複雑でなければ、分割線Ｌ１０が省略されてもユーザは４つの表示領域１０８〜１１１とサムネイルを構成する縮小画像上の位置との対応を把握することができるからである。
【００５１】
［第３の実施形態］
第３の実施形態に係る医用画像表示装置は、サムネイルの選択において、サムネイルを構成する縮小画像の任意の部分領域を選択するとともに、方向情報を得る。第３実施形態では、選択されたサムネイルに対応する医用画像データを、選択された部分領域の解剖学的領域に適した表示条件で、メイン画像表示領域の複数の表示領域のうちの方向情報により特定される表示領域に表示する。
【００５２】
図９に、本実施形態に係る医用画像表示装置の構成例を示す。第２の実施形態に係る構成例（図６）と比べると、方向取得部４７が追加されている。方向取得部４７以外の各構成部は、図６における各構成部と同様である。方向取得部４７は、表示部３６に表示されているサムネイルに対して、ユーザが操作部３５を介して入力した方向情報を取得し、表示処理部４５へ出力する。たとえば、方向取得部４７は、サムネイルがドラッグまたはフリックされた方向に基づいて方向情報を取得する。また、後述するように、分割条件取得部４６は、メイン画像表示領域の各表示領域の中心位置も取得する。なお、第２の実施形態と同様に、各部はソフトウェアにより実現されているものとする。
【００５３】
次に図１０及び図１１を用いて、第３の実施形態における制御部３７による全体の処理手順を説明する。図１０は、制御部３７が行う処理のフローチャートである。図１１は、図３（Ｂ）に示したサムネイル１０３に対して、ユーザが方向情報を入力する方法を説明するための図である。矢印１１５は、たとえばマウスポインタであり、操作部３５によって制御される位置情報を表す。Ｒ１０は、矢印１１５が示す位置を中心Ｏとした円である。矢印１１５の真右方向を０°とした時、中心Ｏから０°、９０°、１８０°、２７０°の方向に伸ばした直線と円Ｒ１０とが交わる点を、それぞれ点Ａ、Ｂ、Ｃ、Ｄとしている。
【００５４】
ステップＳ１０００〜Ｓ１００２の処理は、第１の実施形態におけるステップＳ２００〜Ｓ２０２の処理と同様である。また、ステップＳ１００３の処理は、第２の実施形態におけるステップＳ７０１の処理と同様である。ステップＳ１００４の処理は、第１の実施形態におけるステップＳ２０３の処理と同様である。
【００５５】
ステップＳ１００５において、ユーザは操作部３５を介して、ステップＳ１００４において選択したサムネイル分割領域に対して方向情報を入力する。例えば、不図示のポインティングデバイスを用いて図３（Ｂ）で示すサムネイル１０３の部分領域１２３を任意の方向にドラッグすることで方向情報を入力する。あるいは、表示部３６がタッチパネル式のモニタである場合は、一般にフリックと呼ばれる操作方法を用いて、サムネイル１０３の部分領域１２３に対して方向情報を入力してもよい。例えば、図１１において、サムネイル１０３をＡの方向に指で弾く（フリックする）ことにより方向情報０°が入力される。また例えば、線分ＯＣと線分ＯＤのちょうど中間に示した線分Ｌ２０に沿った方向に指で弾く（フリックする）することにより方向情報２２５°が入力される。
【００５６】
ステップＳ１００６において、表示処理部４５は、ステップＳ１００３で取得したメイン画像表示領域の分割条件とステップＳ１００５で取得した方向情報にしたがって、メイン画像表示領域の複数の表示領域のうちの一つを選択する。そして、表示処理部４５は、選択したサムネイルに対応した医用画像データを、選択した表示領域に表示する。その際、ステップＳ１００４で選択した部分領域に対応した表示条件で表示する。なお、選択した部分領域とは、たとえば、ドラッグまたはフリックの開始位置によって特定される、サムネイル内の部分領域である。また、表示条件は、第１の実施形態におけるステップＳ２０４や、第１の実施形態の変形例１で示した方法により決定される。
【００５７】
図３（Ｂ）に示されるサムネイル１０３の部分領域１２３に対してステップＳ１００５で入力された方向情報が、図１１で示される０°〜９０°の範囲だった場合について説明する。この場合、方向情報は右上方向と解釈され、図３（Ａ）のメイン画像表示領域１０２の右上に配置されている表示領域１１０に、サムネイル１０３に対応する医用画像データが、部分領域１２３に対応した表示条件で表示される。また、入力された方向情報が９０°〜１８０°の範囲だった場合は、メイン画像表示領域１０２の表示領域１０８に、当該医用画像データが、部分領域１２３に対応した表示条件で表示される。また、入力された方向情報が１８０°〜２７０°の範囲だった場合は、メイン画像表示領域１０２の表示領域１０９に、当該医用画像データが、部分領域１２３に対応した表示条件で表示される。さらに、入力された方向情報が２７０°〜０°の範囲だった場合は、メイン画像表示領域１０２の表示領域１１１に、当該医用画像データが、部分領域１２３に対応した表示条件で表示される。
【００５８】
入力される方向情報の範囲と、それによって選択される表示領域の関係を、図１２を用いてより詳細に述べる。図１２（Ａ）において、メイン画像表示領域１０２は、４つの表示領域（表示領域１０８〜１１１）に分割されている。但し、表示領域１０８〜１１１の大きさは全てが均一というものではなく、配置も図３（Ａ）とは異なる。また、Ｏａはメイン画像表示領域１０２の中心を示し、Ｏｂは表示領域１０８の中心を示し、Ｏｃは表示領域１０９の中心を示し、Ｏｄは表示領域１１０の中心を示し、Ｏｅは表示領域１１１の中心を示す。図１２（Ｂ）において、Ｏａを中心とする円をＲ２０とする。Ｏｂ→Ｏａ→Ｏｅのなす角を等分する線分をＬ２１、Ｏｂ→Ｏａ→Ｏｃのなす角を等分する線分をＬ２２、Ｏｃ→Ｏａ→Ｏｄのなす角を等分する線分をＬ２３、Ｏｄ→Ｏａ→Ｏｅのなす角を等分する線分をＬ２４とする。また、線分Ｌ２１とＲ２０の交点をＥ、線分Ｌ２２とＲ２０の交点をＦ、線分Ｌ２３とＲ２０の交点をＧ、線分Ｌ２４とＲ２０の交点をＨとする。ここで、入力される方向情報がＥ→Ｏａ→Ｆのなす角の範囲である場合には、その範囲内にある中心Ｏｂを持つ表示領域１０８が選択される。同様に、入力される方向情報がＦ→Ｏａ→Ｇのなす角の範囲である場合は、表示領域１０９が選択される。同様に、入力される方向情報がＧ→Ｏａ→Ｈのなす角の範囲である場合は表示領域１１０が選択される。同様に、入力される方向情報がＨ→Ｏａ→Ｅのなす角の範囲である場合は表示領域１１１が選択される。
【００５９】
このように、各表示領域の中心とメイン画像表示領域の中心によって作られる角度に応じて、方向情報の範囲を決定することで、当該方向情報の範囲に対応する表示領域を決定することができる。なお、メイン画像表示領域の分割条件が（ｌ、ｎ、ｍ）＝（９、３、３）のような場合、中央の表示領域は上述した方法では、選択する事ができない。このような場合は、サムネイルに対して方向情報を入力した操作とは別の操作を行うことにより選択すればよい。ここで、別の操作とは、タッチパネル上におけるピンチイン、ピンチアウト、ダブルタップ等の操作である。但し、これらの操作は一例であり、他の操作であってもよい。
【００６０】
ステップＳ１００７の処理は、第一の実施形態におけるステップＳ２０５の処理と同様の処理であり、読影終了の指示があったかどうかを判定する。読影終了の指示があった場合は図１０の処理を終了し、読影終了の指示がなかった場合は、処理はステップＳ１００３に戻る。
【００６１】
以上のように、第３の実施形態に係る医用画像表示装置によれば、以下の効果を得られる。つまり、任意のサムネイルの任意の部分領域に対して方向情報を付与することで、当該サムネイルに対応した医用画像データを、入力した方向情報に応じて決定される表示領域に、方向情報が付与された部分領域に対応した表示条件で表示することができる。従って、少ない手間で、ユーザの意図した表示領域に、ユーザの意図した表示条件で画像を表示することができる医用画像表示装置及び医用画像表示方法を提供することができる。
【００６２】
以上のように、上記各実施形態によれば、サムネイルに表示されている縮小画像に解剖学的領域に応じた部分領域が設定され、部分領域には解剖学的領域に応じた表示条件が対応付けられる。サムネイルの選択操作により、設定された部分領域のうちの任意の部分領域も特定することができるので、ユーザはサムネイルの選択操作により表示する医用画像データとその表示条件を指定することができる。したがって、ユーザの少ない操作で、選択されたサムネイルに対応するデータを任意の表示条件でメイン画像表示領域に表示することができるという効果がある。
【００６３】
なお、上記各実施形態では、サムネイル表示領域とメイン画像表示領域が同一の表示画面に表示されているが、サムネイル表示領域とメイン画像表示領域が別々の表示器により表示されてもよい。また、サムネイルの部分領域に対応した表示条件の取得においては、図３（Ｃ）に示したような、部分領域と解剖学的部位の対応付けを管理し、解剖学的部位に基づいて部分領域に対応する表示条件を取得したが、これに限られるものではない。たとえば、各部分領域に表示条件を直接対応付けて管理し、特定された部分領域の表示条件を取得するようにしてもよい。その場合、図３（Ｃ）の解剖学的領域の欄が表示条件となる。
【００６４】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００６５】
１０：画像表示装置、２１：ＬＡＮ、２２：データベース、３１：通信インターフェイス、３２：ＲＯＭ、３３：ＲＡＭ、３４：記憶部、３５：操作部、３６：表示部、３７：制御部、４１：医用画像取得部、４２：画像領域取得部、４３：サムネイル作成部、４４：選択領域取得部、４５：表示処理部、４６：分割条件取得部、４７：方向取得部
【図１】
2018110944.tif 000005
【図２】
2018110944.tif 000006
【図３】
2018110944.tif 000007
【図４】
2018110944.tif 000008
【図５】
2018110944.tif 000009
【図６】
2018110944.tif 000010
【図７】
2018110944.tif 000011
【図８】
2018110944.tif 000012
【図９】
2018110944.tif 000013
【図１０】
2018110944.tif 000014
【図１１】
2018110944.tif 000015
【図１２】
2018110944.tif 000016
【図１３】
2018110944.tif 000017
【手続補正書】
【提出日】平成30年5月17日(2018.5.17)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
３次元医用画像から解剖学的領域を抽出する抽出手段と、
前記３次元医用画像に含まれる複数の２次元画像から、前記２次元画像に含まれる前記解剖学的領域の数に基づいて代表画像を取得する取得手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記取得手段は、前記複数の２次元画像のうち最も多くの種類の前記解剖学的領域を含む前記２次元画像を前記代表画像として取得することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記代表画像に基づいてサムネイルを生成する生成手段を更に備えることを特徴とする請求項１または請求項２記載の画像処理装置。
【請求項４】
前記サムネイルを表示部に表示させる表示制御手段を更に備えることを特徴とする請求項３記載の画像処理装置。
【請求項５】
前記３次元医用画像は、ＣＴ画像またはＭＲＩ画像であることを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項６】
３次元医用画像から解剖学的領域を抽出する抽出工程と、
前記３次元医用画像に含まれる複数の２次元画像から、前記２次元画像に含まれる前記解剖学的領域の数に基づいて代表画像を取得する取得工程と、
を備えることを特徴とする画像処理方法。
【請求項７】
請求項６記載の画像処理方法の各工程をコンピュータに実行させることを特徴とするプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明の一態様による画像処理装置は、
３次元医用画像から解剖学的領域を抽出する抽出手段と、
前記３次元医用画像に含まれる複数の２次元画像から、前記２次元画像に含まれる前記解剖学的領域の数に基づいて代表画像を取得する取得手段と、
を備える。