(57)【要約】【課題】  医用画像を表示する表示部とレポートを表示する表示部との間の視線移動やマウス等の操作を減少させレポートの作成効率を向上させる。【解決手段】  医用画像表示部４１は、特定の患者の被写体を撮像した医用画像２を表示する。レポート表示部４３は、被写体を模式的に表した画像であるシェーマ画像３を含む読影レポートを表示する。情報入力部４５は、読影医等から、医用画像表示部４１、またはレポート表示部４３への操作を受け付けることで、情報を入力する。情報反映部４７は、医用画像表示部４１への操作により情報が入力された場合、入力された情報をレポート表示部４３へ反映させる。また、レポート表示部４３への操作により情報が入力された場合、入力された情報を医用画像表示部４１へ反映させる。【選択図】図４
2018169801.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像した医用画像を表示する医用画像表示部と、
被写体を表すシェーマ画像を含むレポートを表示するレポート表示部と、
前記医用画像表示部、または前記レポート表示部への操作により情報を入力する情報入力部と、
前記医用画像表示部への操作により入力された情報を前記レポート表示部に反映させる、または前記レポート表示部への操作により入力された情報を前記医用画像表示部に反映させる情報反映部と、
を備えることを特徴とする表示装置。
【請求項２】
前記情報入力部により、前記医用画像中、または前記シェーマ画像中の所定の位置に関する情報が入力された場合、
前記情報反映部は、入力された前記医用画像中の所定の位置に関する情報を前記シェーマ画像中の対応する位置に関連付けて反映させる、または入力された前記シェーマ画像中の所定の位置に関する情報を前記医用画像中の対応する位置に関連付けて反映させる
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記情報入力部により、前記医用画像中、または前記シェーマ画像中の所定の位置の病変種別の情報が入力された場合、
前記情報反映部は、入力された前記医用画像中の所定の位置の病変種別に応じたアノテーションを前記シェーマ画像中の対応する位置に表示する、または入力された前記シェーマ画像中の所定の位置の病変種別に応じたアノテーションを前記医用画像中の対応する位置に表示する
ことを特徴とする請求項１または請求項２に記載の表示装置。
【請求項４】
前記情報反映部は、入力された情報を反映させるタイミングを制御する
ことを特徴とする請求項１から請求項３のいずれかに記載の表示装置。
【請求項５】
前記情報反映部は、入力された情報をリアルタイムに反映させる
ことを特徴とする請求項４に記載の表示装置。
【請求項６】
前記情報反映部は、入力された情報の反映操作を受け付けると、情報を反映させる
ことを特徴とする請求項４に記載の表示装置。
【請求項７】
前記情報反映部は、
入力された情報について、反映させるか否かを選択させる反映可否選択部、を更に備え、反映させる旨の選択がされた前記情報のみ、反映させる
ことを特徴とする請求項１から請求項６のいずれかに記載の表示装置。
【請求項８】
前記情報入力部は、前記医用画像表示部への操作により入力される情報を、前記シェーマ画像への反映を意図した情報か、或いは、前記シェーマ画像以外への反映を意図した情報か、を選択させる情報種別選択部、を更に備える
ことを特徴とする請求項１から請求項７のいずれかに記載の表示装置。
【請求項９】
前記情報種別選択部により、前記シェーマ画像への反映を意図した情報である選択がされた場合、
前記情報反映部は、入力された前記情報を、前記レポート表示部の前記シェーマ画像に関連付けて反映させる
ことを特徴とする請求項８に記載の表示装置。
【請求項１０】
前記情報種別選択部により、前記シェーマ画像以外への反映を意図した情報である選択がされた場合、
前記情報反映部は、入力された前記情報を、前記レポート表示部の前記シェーマ画像に関連付けないで反映させる
ことを特徴とする請求項８に記載の表示装置。
【請求項１１】
前記医用画像表示部および前記レポート表示部は、異なる表示画面に表示される
ことを特徴とする請求項１から請求項１０のいずれかに記載の表示装置。
【請求項１２】
前記医用画像表示部および前記レポート表示部は、同一の表示画面に表示される
ことを特徴とする請求項１から請求項１０のいずれかに記載の表示装置。
【請求項１３】
前記医用画像表示部および前記レポート表示部の表示画面上における表示を制御する表示制御部、を更に備える
ことを特徴とする請求項１２に記載の表示装置。
【請求項１４】
前記表示制御部は、前記医用画像表示部の表示サイズを前記レポート表示部の表示サイズより大きくなるように制御する
ことを特徴とする請求項１３に記載の表示装置。
【請求項１５】
前記表示制御部は、前記レポート表示部の呼び出し操作があった場合に限り、前記レポート表示部を表示画面上に表示させる
ことを特徴とする請求項１３に記載の表示装置。
【請求項１６】
前記表示制御部は、
前記医用画像表示部への入力操作を検知すると、前記医用画像表示部の表示サイズを前記レポート表示部の表示サイズより大きくなるように制御し、
前記レポート表示部への入力操作を検知すると、前記レポート表示部の表示サイズを前記医用画像表示部の表示サイズより大きくなるように制御する
ことを特徴とする請求項１３に記載の表示装置。
【請求項１７】
前記医用画像から被写体の形状情報を検出する形状検出部と、
検出した前記形状情報に基づいて前記レポート表示部に表示されるシェーマ画像を生成するシェーマ生成部と、
を更に備えることを特徴とする請求項１から請求項１６のいずれかに記載の表示装置。
【請求項１８】
シェーマのテンプレート画像を記憶するテンプレート記憶部、を備え、
前記シェーマ生成部は、前記形状情報の特徴点と前記テンプレート画像の特徴点に基づいて変形パラメータを算出し、変形パラメータに基づいて前記テンプレート画像を変形した画像を、前記シェーマ画像として生成する
ことを特徴とする請求項１７に記載の表示装置。
【請求項１９】
前記シェーマ生成部は、前記形状情報に従って被写体の形状を描画した画像を、前記シェーマ画像として生成する
ことを特徴とする請求項１７に記載の表示装置。
【請求項２０】
被写体を撮像した医用画像を医用画像表示部に表示する医用画像表示ステップと、
被写体を表すシェーマ画像を含むレポートをレポート表示部に表示するレポート表示ステップと、
前記医用画像表示部、または前記レポート表示部への操作により情報を入力する情報入力ステップと、
前記医用画像表示部への操作により入力された情報を前記レポート表示部に反映させる、または前記レポート表示部への操作により入力された情報を前記医用画像表示部に反映させる情報反映ステップと、
を含むことを特徴とする表示方法。
【請求項２１】
コンピュータを、
被写体を撮像した医用画像を医用画像表示部に表示する医用画像表示手段と、
被写体を表すシェーマ画像を含むレポートをレポート表示部に表示するレポート表示手段と、
前記医用画像表示部、または前記レポート表示部への操作により情報を入力する情報入力手段と、
前記医用画像表示部への操作により入力された情報を前記レポート表示部に反映させる、または前記レポート表示部への操作により入力された情報を前記医用画像表示部に反映させる情報反映手段と、
して機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置、表示方法、およびプログラムに関し、詳細には、読影医等のレポート作成を支援するための技術に関する。
【背景技術】
【０００２】
医用画像を用いた診断を行うにあたり、主治医とは別に読影医が医用画像に基づいてレポートを作成する場合がある。この場合、通常、医用画像を表示するための医用画像表示装置とレポートを作成するためのレポート表示装置を起動し、読影医は、医用画像表示装置に表示される医用画像から所見を読み、レポート表示装置へ所見情報等を入力し読影レポートを作成する。
【０００３】
例えば、特許文献１にも、乳房画像を表示するビューワ機能を有しており、読影医等の読影に供する端末である画像ビューワ端末と、レポート生成画面を表示して、画像ビューワ端末に表示される乳房画像を確認しながら読影レポートを作成できるレポート生成管理装置と、を備えるシステムが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２２７２０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、医用画像表示装置に表示される医用画像から所見を読み、レポート表示装置で読影レポートを作成する従来のシステムでは、医用画像表示装置とレポート表示装置との間で視線移動が多く、また、マウス等の操作も増えるため、レポートの作成効率が悪化するという課題があった。
【０００６】
本発明は、前述した課題に鑑みてなされたものであり、その目的とすることは、医用画像を表示する表示部とレポートを表示する表示部との間の視線移動やマウス等の操作を減少させレポートの作成効率を向上させる、表示装置、表示方法およびプログラムを提供することである。
【課題を解決するための手段】
【０００７】
前述した目的を達成するための第１の発明は、被写体を撮像した医用画像を表示する医用画像表示部と、被写体を表すシェーマ画像を含むレポートを表示するレポート表示部と、前記医用画像表示部、または前記レポート表示部への操作により情報を入力する情報入力部と、前記医用画像表示部への操作により入力された情報を前記レポート表示部に反映させる、または前記レポート表示部への操作により入力された情報を前記医用画像表示部に反映させる情報反映部と、を備えることを特徴とする表示装置である。
【０００８】
また第２の発明は、被写体を撮像した医用画像を医用画像表示部に表示する医用画像表示ステップと、被写体を表すシェーマ画像を含むレポートをレポート表示部に表示するレポート表示ステップと、前記医用画像表示部、または前記レポート表示部への操作により情報を入力する情報入力ステップと、前記医用画像表示部への操作により入力された情報を前記レポート表示部に反映させる、または前記レポート表示部への操作により入力された情報を前記医用画像表示部に反映させる情報反映ステップと、を含むことを特徴とする表示方法である。
【０００９】
また第３の発明は、コンピュータを、被写体を撮像した医用画像を医用画像表示部に表示する医用画像表示手段と、被写体を表すシェーマ画像を含むレポートをレポート表示部に表示するレポート表示手段と、前記医用画像表示部、または前記レポート表示部への操作により情報を入力する情報入力手段と、前記医用画像表示部への操作により入力された情報を前記レポート表示部に反映させる、または前記レポート表示部への操作により入力された情報を前記医用画像表示部に反映させる情報反映手段と、して機能させることを特徴とするプログラムである。
【発明の効果】
【００１０】
本発明により、医用画像を表示する表示部とレポートを表示する表示部との間の視線移動やマウス等の操作を減少させレポートの作成効率を向上させる、表示装置、表示方法およびプログラムが提供される。
【図面の簡単な説明】
【００１１】
【図１】読影支援システム１の全体構成を示す図
【図２】読影支援システム１の全体構成の別例を示す図
【図３】各表示装置（医用画像表示装置１０、レポート表示装置２０、表示装置３０）に共通するハードウェア構成を示す図
【図４】読影支援システム１の機能構成を示す図
【図５】読影支援システム１の動作を示すフローチャート
【図６】医用画像表示部４１とレポート表示部４３の画面表示例を示す図
【図７】医用画像表示部４１とレポート表示部４３の画面表示例を示す図
【図８】医用画像表示部４１とレポート表示部４３の画面表示例を示す図
【図９】読影支援システム１Ａの機能構成を示す図
【図１０】読影支援システム１Ａの動作を示すフローチャート
【図１１】医用画像表示部４１とレポート表示部４３の画面表示例を示す図
【図１２】読影支援システム１Ｂの機能構成を示す図
【図１３】読影支援システム１Ｂの動作を示すフローチャート
【図１４】医用画像表示部４１とレポート表示部４３の画面表示例を示す図
【図１５】読影支援システム１Ｃの機能構成を示す図
【図１６】医用画像表示部４１とレポート表示部４３の画面表示例を示す図
【図１７】医用画像表示部４１とレポート表示部４３の表示制御例を示す図
【図１８】医用画像表示部４１とレポート表示部４３の表示制御例を示す図
【図１９】シェーマ生成エンジン５０の機能構成を示す図
【図２０】シェーマ生成処理の動作を示すフローチャート
【図２１】医用画像２中の画素ラインＬの画素値をプロットした図
【図２２】二値化画像２−１を示す図
【図２３】（ａ）二値化画像２Ａを示す図、（ｂ）二値化画像２Ｂを示す図、（ｃ）二値化画像２Ｃを示す図
【図２４】（ａ）二値化画像２Ｃを示す図、（ｂ）分離画像２Ｄを示す図
【図２５】画像走査により乳頭位置Ｎｐを検出する様子を示す図
【図２６】医用画像２中の胸筋ラインＭの初期開始点Ｍ１を示す図
【図２７】医用画像２の一番上の画素行のパッチの変化を示す図
【図２８】胸筋の有無の判定について説明する図
【図２９】胸筋ラインの検出について説明する図
【図３０】検出された胸筋ラインＭを示す図
【図３１】特徴点ｆ１、ｆ２、ｆ３を示す図
【図３２】アフィン変換パラメータＦの算出について説明する図
【図３３】テンプレート変形方式により生成されたシェーマ画像３Ａの例を示す図
【図３４】直接描画方式により生成されたシェーマ画像３Ｂの例を示す図
【発明を実施するための形態】
【００１２】
［第１の実施形態］
以下図面に基づいて、本発明の実施形態を詳細に説明する。尚、以下の説明及び添付図面において、略同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略することにする。
【００１３】
（読影支援システム１の全体構成）
図１は、本発明の読影支援システム１の全体構成を示す図である。図１に示すように、読影支援システム１は、医用画像表示装置１０とレポート表示装置２０とがサーバ１００とネットワーク２００を介して接続されて構成される。
【００１４】
医用画像表示装置１０は、読影医等の操作を受け付けることで、医用画像表示ソフトウェアを起動させる。医用画像表示ソフトウェアは、特定の患者の被写体を撮像した医用画像２をサーバ１００から取得し、表示画面上の表示ウィンドウや表示フレームなどの所定の表示エリア内に表示する。以降、医用画像２が表示される表示エリアを「医用画像表示部４１」と表記する。
【００１５】
レポート表示装置２０は、読影医等の操作を受け付けることで、読影レポートの作成を支援するレポート作成ソフトウェアを起動させる。レポート作成ソフトウェアは、被写体を模式的に表した画像であるシェーマ画像３を含む読影レポート（所見報告書）を表示画面上の表示ウィンドウや表示フレームなどの所定の表示エリア内に表示する。以降、読影レポートが表示される表示エリアを「レポート表示部４３」と表記する。
【００１６】
なお、本開示の例では、被写体を乳房とし、医用画像２は患者の乳房を撮像した乳房画像、シェーマ画像３は乳房を模式的に表した画像、とするが、本発明は被写体を乳房以外（例えば、胸部など）とした場合も適用可能である。
【００１７】
サーバ１００は、患者ごとの医用画像２を格納する医用画像データベース１２０を保持している。サーバ１００は、医用画像表示装置１０から特定の患者の医用画像２の送信要求を受けると、当該患者の医用画像２を医用画像表示装置１０へ送信する。なお、医用画像表示装置１０に医用画像データベース１２０を保持させることで、サーバ１００の構成を省略してもよい。
【００１８】
（読影支援システム１の全体構成の別例）
図２は、本発明の読影支援システム１の全体構成の別例を示す図である。図２の読影支援システム１は、表示装置３０とサーバ１００とがネットワーク２００を介して接続されて構成される。
【００１９】
表示装置３０は、図１の医用画像表示装置１０とレポート表示装置２０を１つの表示装置で実現したものである。
すなわち、表示装置３０は、医用画像表示ソフトウェアを起動させて被写体を撮像した医用画像２を医用画像表示部４１に表示し、且つ、レポート作成ソフトウェアを起動させて被写体を模式的に表した画像であるシェーマ画像３を含む読影レポートをレポート表示部４３に表示する。
医用画像表示部４１とレポート表示部４３は、表示装置３０が備える１つの表示画面に表示される。
なお、医用画像表示ソフトウェアとレポート作成ソフトウェアは別々のソフトウェアである必要はなく、医用画像表示ソフトウェアの機能とレポート作成ソフトウェアの機能を備えた１つのソフトウェアであってもよい。
【００２０】
サーバ１００は、図１の場合と同様に、表示装置３０から特定の医用画像２の送信要求を受けると、当該患者の医用画像２を表示装置３０へ送信する。なお、表示装置３０に医用画像データベース１２０を保持させることで、サーバ１００の構成を省略してもよい。
【００２１】
（各表示装置のハードウェア構成）
図３は、各表示装置（医用画像表示装置１０、レポート表示装置２０、表示装置３０）に共通するハードウェア構成を示す図である。
図に示すように、各表示装置は、制御部１１、記憶部１２、メディア入出力部１３、通信制御部１４、操作部１５、表示部１６、周辺機器Ｉ／Ｆ部１７等が、バス１８を介して接続される。また、通信制御部１４を介してサーバ１００と接続される。
【００２２】
制御部１１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等によって構成される。ＣＰＵは、記憶部１２、ＲＯＭ、記録媒体等に格納されるプログラムをＲＡＭ上のワークメモリ領域に呼び出して実行し、バス１８を介して接続された各装置を駆動制御し、本開示の読影支援システムの各手段（情報入力部４５、情報反映部４７、反映可否選択部４８、情報種別選択部４６、表示制御部４２、など）を機能させる。ＲＯＭは、不揮発性メモリであり、コンピュータのブートプログラムやＢＩＯＳ等のプログラム、データ等を恒久的に保持している。ＲＡＭは、揮発性メモリであり、記憶部１２、ＲＯＭ、記録媒体等からロードしたプログラム、データ等を一時的に保持するとともに、制御部１１が各種処理を行う為に使用するワークエリアを備える。
【００２３】
記憶部１２は、ＨＤＤ（Hard Disk Drive）等であり、制御部１１が実行するプログラム、プログラム実行に必要なデータ、ＯＳ（Operating System）等が格納される。プログラムに関しては、ＯＳに相当する制御プログラムや、後述する処理をコンピュータに実行させるためのアプリケーションプログラムが格納されている。これらの各プログラムコードは、制御部１１により必要に応じて読み出されてＲＡＭに移され、ＣＰＵに読み出されて各種の手段として実行される。
【００２４】
メディア入出力部１３（ドライブ装置）は、データの入出力を行い、例えば、ＣＤドライブ（−ＲＯＭ、−Ｒ、−ＲＷ等）、ＤＶＤドライブ（−ＲＯＭ、−Ｒ、−ＲＷ等）等のメディア入出力装置を有する。通信制御部１４は、通信制御装置、通信ポート等を有し、コンピュータとネットワーク間の通信を媒介する通信インタフェースであり、ネットワークを介して、他のコンピュータ間との通信制御を行う。ネットワークは、有線、無線を問わない。
【００２５】
操作部１５は、例えば、キーボード、マウス等のポインティングデバイス、テンキー等の入力装置である。操作部１５を介して、コンピュータに対して、情報の入力、操作指示、動作指示等を行うことができる。表示部１６は、液晶パネル等のディスプレイ装置、ディスプレイ装置と連携してコンピュータのビデオ機能を実現するための論理回路等（ビデオアダプタ等）を有する。なお、操作部１５及び表示部１６は、タッチパネルディスプレイのように、一体となっていてもよい。
【００２６】
周辺機器Ｉ／Ｆ（Interface）部１７は、コンピュータに周辺機器を接続させるためのポートであり、周辺機器Ｉ／Ｆ部１７を介してコンピュータは周辺機器とのデータの送受信を行う。周辺機器Ｉ／Ｆ部１７は、ＵＳＢ（Universal Serial Bus）やＩＥＥＥ１３９４やＲＳ−２３２Ｃ等によって構成されており、通常複数の周辺機器Ｉ／Ｆを有する。周辺機器との接続形態は有線、無線を問わない。バス１８は、各装置間の制御信号、データ信号等の授受を媒介する経路である。
【００２７】
（読影支援システム１の機能構成）
図４は、読影支援システム１の機能構成を示す図である。図に示すように、読影支援システム１は、医用画像表示部４１、レポート表示部４３、情報入力部４５、情報反映部４７、記憶部１２等から構成される。
【００２８】
医用画像表示部４１は、特定の患者の被写体を撮像した医用画像２を表示する表示部１６上（表示画面上）の表示エリアである。医用画像２は、前述したように、ネットワーク２００を介してサーバ１００の医用画像データベース１２０から取得される。
【００２９】
レポート表示部４３は、被写体を模式的に表した画像であるシェーマ画像３を含む読影レポート（所見報告書）を表示する表示部１６上（表示画面上）の表示エリアである。
【００３０】
情報入力部４５は、読影医等から、医用画像表示部４１、またはレポート表示部４３への操作を受け付けることで、情報を入力する。
情報とは、例えば、病変種別、病変位置、進行状態等の病変情報やその他の所見情報であるが、特にその内容は限定しない。
また、情報の入力とは、情報を新規に入力することだけでなく、一度入力した情報に対する情報の追記、削除等の編集も含む。
また、情報の入力とは、読影医等によって手動で入力される情報だけでなく、医用画像表示装置１０に備えられているＣＡＤ（Ｃｏｍｐｕｔｅｒ―Ａｉｄｅｄ  Ｄｉａｇｎｏｓｉｓ）機能を用いて自動で入力（取得）される情報も含む。
【００３１】
情報反映部４７は、医用画像表示部４１への操作により情報が入力された場合、入力された情報をレポート表示部４３に反映させる。一方、レポート表示部４３への操作により情報が入力された場合、入力された情報を医用画像表示部４１に反映させる。
反映させる情報は、入力された情報の全部または一部である。反映させる情報の表示形態や表示位置は、特に限定されない。
【００３２】
また、情報反映部４７は、医用画像表示部４１の医用画像２中の所定の位置（病変位置など）に関する情報（病変情報など）が入力された場合は、入力された情報をレポート表示部４３のシェーマ画像３中の対応する位置に関連付けて反映させる。一方、レポート表示部４３のシェーマ画像３中の所定の位置に関する情報が入力された場合は、入力された情報を医用画像表示部４１の医用画像２中の対応する位置に関連付けて反映させる。
【００３３】
また、情報反映部４７は、医用画像表示部４１の医用画像２中の所定の位置の病変種別（「石灰化」「腫瘍」など）の情報が入力された場合は、入力された病変種別に応じたアノテーションをレポート表示部４３のシェーマ画像３中の対応する位置に表示する。例えば、病変種別が「石灰化」の場合はアノテーションを円（●）、病変種別が「腫瘍」の場合はアノテーションを四角（■）などで表示する。一方、レポート表示部４３のシェーマ画像３中の所定の位置に病変種別の情報が入力された場合は、入力された病変種別に応じたアノテーションをレポート表示部４３のシェーマ画像３中の対応する位置に表示する。
【００３４】
なお、本発明において、レポート表示部４３から医用画像表示部４１への情報の反映は必ずしも必須ではない。
【００３５】
記憶部１２は、医用画像表示部４１に表示される医用画像２とレポート表示部４３に表示されるシェーマ画像３を格納する。
医用画像２とシェーマ画像３とは、互いに、画像上の位置の対応関係が取れていることが望ましい。これにより、例えば、読影医等の操作により、医用画像２中の所定の位置に関する情報が入力された場合、入力された情報をシェーマ画像３中の対応する位置に正確に反映させることができる。
【００３６】
読影支援システム１を図１の構成とした場合、上記した機能のうち、医用画像表示部４１は医用画像表示装置１０の機能となり、レポート表示部４３はレポート表示装置２０の機能となる。また、情報入力部４５、情報反映部４７は、医用画像表示装置１０、レポート表示装置２０の双方が備える機能となる。情報反映部４７は、医用画像表示装置１０とレポート表示装置２０との間で入力情報を送受信することで、医用画像表示部４１からレポート表示部４３への情報の反映、或いはレポート表示部４３から医用画像表示部４１への情報の反映を実現させる。
一方、読影支援システム１を図２の構成とした場合、表示装置３０が、上記した機能の全てを備えることになる。
【００３７】
（読影支援システム１の動作）
次に、図５のフローチャートを参照しながら、読影支援システム１の動作を説明する。
【００３８】
まず、読影支援システム１は、特定の患者の被写体を撮像した医用画像２を医用画像表示部４１に表示し（ステップＳ１）、被写体を模式的に表した画像であるシェーマ画像３を含む読影レポート（所見報告書）をレポート表示部４３に表示する（ステップＳ２）。
【００３９】
続いて、読影支援システム１は、読影医等から、医用画像表示部４１、またはレポート表示部４３への操作を受け付けることで、情報を入力する（ステップＳ３）。そして、読影支援システム１は、医用画像表示部４１への操作により情報が入力された場合には、入力された情報をレポート表示部４３に反映させ、レポート表示部４３への操作により情報が入力された場合には、入力された情報を医用画像表示部４１に反映させる（ステップＳ４）。
【００４０】
特に、医用画像表示部４１への操作により医用画像２中の所定の位置に関する情報が入力された場合は、入力された情報をレポート表示部４３のシェーマ画像３中の対応する位置に関連付けて反映させる。一方、レポート表示部４３への操作によりシェーマ画像３中の所定の位置に関する情報が入力された場合は、入力された情報を医用画像表示部４１の医用画像２中の対応する位置に関連付けて反映させる。
【００４１】
また、医用画像表示部４１への操作により入力された情報に、医用画像２中の所定の位置の病変種別の情報が含まれる場合は、病変種別に応じたアノテーションをレポート表示部４３のシェーマ画像３中の対応する位置に表示する。一方、レポート表示部４３への操作により入力された情報に、シェーマ画像３中の所定の位置の病変種別の情報が含まれる場合は、病変種別に応じたアノテーションを医用画像表示部４１の医用画像２中の対応する位置に表示する。
【００４２】
（画面表示例）
図６は、医用画像表示部４１とレポート表示部４３の画面表示例を示す図である。特に、医用画像表示部４１への操作により情報を入力し、レポート表示部４３に情報を反映させる画面表示例である。図６に示すように、医用画像表示部４１には患者の左側の乳房画像（医用画像２）が表示されており、レポート表示部４３の読影レポートには左右の乳房のシェーマ画像３が表示されている。
【００４３】
読影医等は、例えば、図６の医用画像表示部４１の医用画像２上で病変を発見した位置（病変位置）をマウスでクリックする。図の例では、Ｐ１が病変位置（マウスでクリックした位置）に相当する。そしてクリック操作を受け付けると、図に示すように、入力フォームが表示され、読影医等は、任意の情報を入力できるようになる。図の例では、読影医等が、入力フォームに入力情報４「病変：石灰化  カテゴリー：３  精密検査の必要あり」といった病変情報を入力している。
すなわち、図の例では、医用画像表示部４１への操作により入力された入力情報４は、医用画像表示部４１の医用画像２中の所定の病変位置Ｐ１に関する病変情報であり、且つ、入力情報４には病変種別（「石灰化」）の情報が含まれる。
【００４４】
医用画像表示部４１への情報の入力が完了すると、入力情報４がレポート表示部４３に反映される。図中、反映情報５（「病変：石灰化  カテゴリー：３  精密検査の必要あり」）が、入力情報４が反映された情報である。この反映情報５は、医用画像２中の位置Ｐ１に対応するシェーマ画像３の位置Ｑ１に関連づけて表示される。これにより、読影医等は、反映情報５がシェーマ画像３中のどの位置に関する情報かを把握できる。さらに、病変種別（「石灰化」）に応じたアノテーションＢ１（「●」）がシェーマ画像３中の位置Ｑ１に表示される（医用画像２中の位置Ｐ１にも病変種別（「石灰化」）に応じたアノテーションＡ１（「●」）が表示される）。
【００４５】
なお、反映情報５は入力情報４と必ずしも同一である必要はなく、入力情報４の一部の情報が反映されたものでもよい。また、反映情報５の表示形式は図６の例に限定されず、リスト形式、表形式など任意の表示形式で表示可能である。
【００４６】
また、入力情報４に対して、情報の追記、削除等を含む編集を行うことができる。例えば図６において、入力情報４を反映情報５に反映させたあと、医用画像２中の位置Ｐ１をマウスでクリックすると、入力情報４が入力された入力フォームが再度開く。読影医等は、この入力フォームで入力情報４の編集を行うことができる。また編集が完了すると、編集された入力情報４をレポート表示部４３の反映情報５に反映させてもよい。
【００４７】
また、反映情報５に対して、直接編集を行うこともできる。例えば図６において、入力情報４を反映情報５に反映させたあと、シェーマ画像３中の位置Ｑ１をマウスでクリックすると、反映情報５が入力された入力フォーム（不図示）が開く。読影医等は、この入力フォームで反映情報５の編集を行うことができる。編集が完了すると、編集された反映情報５を医用画像表示部４１の入力情報４に反映させてもよい。
【００４８】
以上、第１の実施形態によれば、例えば、医用画像表示部４１への操作により入力された情報が、レポート表示部４３に自動で反映される。また、レポート表示部４３への操作により入力された情報が、医用画像表示部４１に自動で反映される。このように、医用画像表示部４１、またはレポート表示部４３の一方に入力した情報が他方の表示部に自動で反映されるため、２つの表示部間で情報が連携し共有される。このため、医用画像表示部４１とレポート表示部４３との間の視線移動やマウス等の操作を減少させレポートの作成効率を向上させることが可能となる。
【００４９】
なお、図６は、医用画像表示部４１とレポート表示部４３が異なる表示画面に表示される画面表示例（読影支援システム１を図１の構成とした場合の画面表示例）を示しているが、医用画像表示部４１とレポート表示部４３が同一の表示画面に表示されるようにしてもよい（読影支援システム１を図２の構成としてもよい）。
【００５０】
［第２の実施形態］
次に、本発明の第２の実施形態について説明する。第２の実施形態は、第１の実施形態において、更に、情報を反映させるタイミングを制御することを特徴する。第２の実施形態の読影支援システム１の構成は、第１の実施形態と同様であるため重複する説明を省略する。
【００５１】
具体的には、図５のステップＳ４において、読影支援システム１（情報反映部４７）は、以下のような手段で情報を反映させるタイミングを制御する。
（１）入力された情報をリアルタイムに反映させる
（２）入力された情報の反映操作を受け付けると、情報を反映させる
【００５２】
（画面表示例）
図７は、上記（１）の画面表示例を示す図である。図７は、医用画像表示部４１の入力フォームに入力中の入力情報４（「病変：石灰化  カテゴリー：３  必」）がリアルタイムにレポート表示部４３の反映情報５ａ（「病変：石灰化  カテゴリー：３  必」）に反映されていることを示している。
【００５３】
図８は、上記（２）の画面表示例を示す図である。図の例では、全反映ボタン４２０または個別反映ボタン４１０を押下すると、入力された情報がレポート表示部４３に反映される。全反映ボタン４２０は入力された全ての情報を一括して反映させるための操作ボタンである。図の例では、入力情報は入力情報４ａの１つのみであるが、他の入力情報（例えば入力情報４ｂ、４ｃ）があれば、入力情報４ａ、４ｂ、４ｃの全ての入力情報が、レポート表示部４３に反映される。一方、個別反映ボタン４１０は、各入力情報の入力フォームに設けられた操作ボタンであり、入力情報を個別に反映させるためのものである。図の例では、入力情報４ａの個別反映ボタン４１０を押下すると、入力情報４ａのみがレポート表示部４３に反映される。
【００５４】
以上、第２の実施形態によれば、入力された情報を反映させるタイミングを制御することができる。例えば、医用画像表示部４１に入力される情報をレポート表示部４３へリアルタイムに反映させたり、或いは、読影医等の反映操作を待ってから情報を反映させることができる。
【００５５】
なお、図７、８は、医用画像表示部４１とレポート表示部４３が異なる表示画面に表示される画面表示例（読影支援システム１を図１の構成とした場合の画面表示例）を示しているが、医用画像表示部４１とレポート表示部４３が同一の表示画面に表示されるようにしてもよい（読影支援システム１を図２の構成としてもよい）。
【００５６】
［第３の実施形態］
次に、本発明の第３の実施形態について説明する。第３の実施形態は、第１または第２の実施形態において、更に、入力された情報ごとに情報の反映の可否を選択できる点を特徴とする。
【００５７】
（読影支援システム１Ａの機能構成）
図９は、第３の実施形態の読影支援システム１Ａの機能構成を示す図である。図に示すように、読影支援システム１Ａは、反映可否選択部４８を更に備える。
【００５８】
反映可否選択部４８は、入力された情報ごとに、情報を反映させるか否かを選択させる。
情報反映部４７は、反映可否選択部４８により反映させる旨の選択がされた情報のみを反映させる。
【００５９】
（読影支援システム１Ａの動作）
図１０は、第３の実施形態の読影支援システム１Ａの動作を示すフローチャートである。
ステップＳ３１&#12316;ステップＳ３３の処理は、図５のステップＳ１&#12316;ステップＳ３と同様である。すなわち、まず、読影支援システム１Ａは、特定の患者の被写体を撮像した医用画像２を医用画像表示部４１に表示し（ステップＳ３１）、被写体を模式的に表した画像であるシェーマ画像３を含む読影レポート（所見報告書）をレポート表示部４３に表示する（ステップＳ３２）。
【００６０】
続いて、読影支援システム１Ａは、読影医等から、医用画像表示部４１、またはレポート表示部４３への操作を受け付けることで、情報を入力する（ステップＳ３３）。
【００６１】
続いて、第３の実施形態では、読影支援システム１Ａは、入力された情報について、情報を反映させるか否かを選択させる（ステップＳ３４）。
そして、読影支援システム１Ａは、情報を反映させる選択がされた情報のみを反映させる（ステップＳ３５）。
【００６２】
（画面表示例）
図１１は、医用画像表示部４１とレポート表示部４３の画面表示例を示す図である。図の例では、医用画像表示部４１への操作により入力情報４ａと入力情報４ｂが入力されている。また入力情報４ａ、４ｂの入力フォームには、反映の可否を選択させる反映可否チェックボックス４３０が表示されている。読影医等は、この反映可否チェックボックス４３０の「反映する」「反映しない」のいずれかにチェックを入れることで、情報を反映させるか否かを選択できる。
【００６３】
図の例では、読影医等が、入力情報４ａは「反映する」にチェックを入れ、入力情報４ｂは「反映しない」にチェックを入れている。この状態で、反映ボタン４４０を押下すると、「反映する」にチェックを入れた入力情報４ａのみがレポート表示部４３に反映される。すなわち、図に示すように、入力情報４ａを反映した反映情報５ａのみがレポート表示部４３に表示される。
【００６４】
以上、第３の実施形態によれば、入力された情報ごとに情報を反映させるか否かを選択することができる。これにより、読影レポートに残したい情報のみを選択的に反映させることができ、一方、読影レポートには残したくない単なるメモのような情報が反映されることを防止できる。
【００６５】
なお、図１１は、医用画像表示部４１とレポート表示部４３が異なる表示画面に表示される画面表示例（読影支援システム１Ａを図１の構成とした場合の画面表示例）を示しているが、医用画像表示部４１とレポート表示部４３が同一の表示画面に表示されるようにしてもよい（読影支援システム１Ａを図２の構成としてもよい）。
【００６６】
［第４の実施形態］
次に、本発明の第４の実施形態について説明する。第４の実施形態は、第１から第３のいずれかの実施形態において、更に、医用画像表示部４１への操作により入力される情報の種別（項目）を選択させることを特徴とする。また、選択された情報の種別に応じた方法により情報を反映させる（或いは反映させない）ことができる。
【００６７】
（読影支援システム１Ｂの機能構成）
図１２は、第４の実施形態の読影支援システム１Ｂの機能構成を示す図である。図に示すように、読影支援システム１Ｂは、情報種別選択部４６を更に備える。
【００６８】
情報種別選択部４６は、医用画像表示部４１への操作により入力される情報の種別を、種別（１）シェーマ画像３への反映を意図した情報、種別（２）シェーマ画像３以外への反映を意図した情報、種別（３）医用画像２への入力だけを意図した情報、の中から選択させる。
【００６９】
情報反映部４７は、情報種別選択部４６により選択された情報の種別に応じた方法により情報を反映させる。
具体的には、選択された情報の種別が種別（１）の場合には、入力された情報を、レポート表示部４３のシェーマ画像３に関連付けて反映させる。
また、選択された情報の種別が種別（２）の場合には、入力された情報を、レポート表示部４３のシェーマ画像３に関連付けないで反映させる。
また、選択された種別が種別（３）の場合には、入力された情報をレポート表示部４３に反映させない。
【００７０】
（読影支援システム１Ｂの動作）
図１３は、第４の実施形態の読影支援システム１Ｂの動作を示すフローチャートである。
ステップＳ４１、Ｓ４２の処理は、図５のステップＳ１、Ｓ２と同様である。すなわち、まず、読影支援システム１Ｂは、特定の患者の被写体を撮像した医用画像２を医用画像表示部４１に表示する（ステップＳ４１）。また、読影支援システム１Ｂは、被写体を模式的に表した画像であるシェーマ画像３を含む読影レポート（所見報告書）をレポート表示部４３に表示する（ステップＳ４２）。
【００７１】
続いて、第４の実施形態では、読影支援システム１Ｂは、入力される情報の種別を選択させた上で（ステップＳ４３）、医用画像表示部４１への情報の入力を受け付ける（ステップＳ４４）。そして、読影支援システム１Ｂは、ステップＳ４３で選択された情報の種別に応じた方法により情報を反映させる（ステップＳ４５）。
【００７２】
（画面表示例）
図１４は、医用画像表示部４１とレポート表示部４３の画面表示例を示す図である。図に示すように、医用画像表示部４１には、入力される情報の種別を選択させる種別選択ボタン４５０が表示される。読影医等は、情報を入力する前に、種別選択ボタン４５０を押下することで情報の種別を選択する。図の例では種別選択ボタン４５０「シェーマ」が種別（１）、種別選択ボタン４５０「診断結果」が種別（２）、種別選択ボタン４５０「キー画像」が種別（３）に相当する。そして、種別選択ボタン４５０を押下したあと（情報の種別を選択したあと）、情報を入力すると、入力された情報がその情報の種別に応じた方法によりレポート表示部４３に反映される。
【００７３】
例えば、図１４の例では、種別選択ボタン４５０「シェーマ」を押下したあと（種別（１）を選択したあと）、情報を入力すると、図１４の反映情報５ａのように、シェーマ画像３と関連付けて入力情報が反映される。
【００７４】
また、種別選択ボタン４５０「診断結果」を押下したあと（種別（２）を選択したあと）、情報を入力すると、図１４の反映情報５ｂのように、シェーマ画像３以外の表示領域に、シェーマ画像３と関連付けないように反映される。
【００７５】
また、種別選択ボタン４５０「キー画像」を押下したあと（種別（３）を選択したあと）、情報を入力すると、入力された情報はレポート表示部４３に反映されず、医用画像表示部４１のみに表示される。
【００７６】
なお、図１４の例では、情報の入力前に、種別選択ボタン４５０から情報の種別を選択させたが、図１１のような入力フォーム（情報の入力と反映方法を選択できる入力フォーム）を用いることで、情報の入力中や入力後に情報の種別を選択させてもよい。
【００７７】
具体的には、図１１の入力フォーム中の反映可否選択ボックス４３０の「反映する」のチェックボックスを、「シェーマへ反映する」（種別（１）の反映）「診断結果へ反映する」（種別（２）の反映）の２つのチェックボックスに置き換える。また、反映可否選択ボックス４３０の「反映しない」のチェックボックスを、「キー画像へ反映する」（種別（３）の反映）のチェックボックスに置き換える。
【００７８】
読影医等は、情報の入力中や入力後の任意のタイミングで、上記の「シェーマへ反映する」「診断結果へ反映する」「キー画像へ反映する」のいずれかのチェックボックスにチェックを入れることで、情報の種別を選択する。情報の種別を選択したあと、反映ボタン４４０を押下すると、入力された情報が、情報の種別に応じた方法で反映される。
【００７９】
例えば「シェーマへ反映する」のチェックボックスにチェック（種別（１）を選択）を入れた状態で、反映ボタン４４０を押下すると、図１４の反映情報５ａのように、入力された情報が、レポート表示部４３のシェーマ画像３に関連付けて反映される。また、「診断結果へ反映する」のチェックボックスにチェック（種別（２）を選択）を入れた状態で、反映ボタン４４０を押下すると、図１４の反映情報５ｂのように、入力された情報が、レポート表示部４３のシェーマ画像３に関連付けないで反映される。また、「キー画像へ反映する」のチェックボックスにチェック（種別（３）を選択）を入れた状態で、反映ボタン４４０を押下すると、入力された情報が、レポート表示部４３に反映されず、医用画像表示部４１のみに表示される。
以上のように、図１１のような表示方法を用いることで、情報の入力中や入力後に情報の種別を選択させることも可能である。
【００８０】
なお、レポート表示部４３への反映を選択させる方法は上記例のチェックボックスに限定されない。例えば、コンボボックスやラジオボタンでもよい。
【００８１】
以上、第４の実施形態によれば、医用画像表示部４１への操作により入力される情報の種別を選択させ、情報の種別に応じた方法により情報を反映させることができる。これにより、例えば、被写体の特定の位置（病変位置など）に関する情報（病変情報など）については、シェーマ画像３の対応する位置と関連付けるように反映できる。また、シェーマ画像３とは関連付けたくない診断結果や補足的な所見情報については、シェーマ画像３と関連付けないように反映できる。また、医用画像表示部４１だけに入力情報を表示させ、レポート表示部４３には情報を表示（反映）させないといったことができる。
【００８２】
なお、図１４は、医用画像表示部４１とレポート表示部４３が異なる表示画面に表示される画面表示例（読影支援システム１Ｂを図１の構成とした場合の画面表示例）を示しているが、医用画像表示部４１とレポート表示部４３が同一の表示画面に表示されるようにしてもよい（読影支援システム１Ｂを図２の構成としてもよい）。
【００８３】
［第５の実施形態］
次に、本発明の第５の実施形態について説明する。第５の実施形態は、医用画像表示部４１とレポート表示部４３が同一の表示画面に表示される場合（読影支援システムを図２の構成とした場合）において、２つの表示部の表示を好適に制御する点を特徴とする。
【００８４】
（読影支援システム１Ｃの機能構成）
図１５は、第５の実施形態の読影支援システム１Ｃの機能構成を示す図である。図に示すように、読影支援システム１Ｃは、医用画像表示部４１とレポート表示部４３の表示を制御する表示制御部４２を更に備える。
【００８５】
表示制御部４２は、例えば、以下のような手段で医用画像表示部４１とレポート表示部４３の表示を制御する。
（１）医用画像表示部４１の表示サイズをレポート表示部４３の表示サイズより大きくなるように制御する
（２）通常は医用画像表示部４１のみを表示させておき、レポート表示部４３の呼び出し操作があった場合に限り、レポート表示部４３を表示画面上に表示させるように制御する
【００８６】
（画面表示例）
図１６は、医用画像表示部４１とレポート表示部４３の画面表示例を示す図である。図に示すように、第５の実施形態では、表示装置３０の表示部１６（表示画面）に、医用画像表示部４１とレポート表示部４３が並べて表示される。
【００８７】
図１７は、上記（１）の表示制御例を示す図である。図に示すように、医用画像表示部４１の表示サイズがレポート表示部４３の表示サイズより大きくなるように表示制御される。
【００８８】
図１８は、上記（２）の表示制御例を示す図である。図に示すように、医用画像表示部４１のみが表示画面に表示され、レポート表示部４３はバックグラウンドで動作している。そして、タスクバー４６０に表示されているレポート表示アイコン４７０の押下操作（レポート表示部４３の呼び出し操作）があった場合に限り、レポート表示部４３が表示画面上に表示される。
【００８９】
なお、表示制御は上記例に限定されない。例えば、医用画像表示部４１への入力操作を検知すると、医用画像表示部４１の表示サイズをレポート表示部４３の表示サイズより大きくなるように制御し、レポート表示部４３への入力操作を検知すると、レポート表示部４３の表示サイズを医用画像表示部４１の表示サイズより大きくなるように制御してもよい。また、レポート表示アイコン４７０の表示位置はタスクトレイなどでもよい。
【００９０】
以上、第５の実施形態によれば、医用画像表示部４１とレポート表示部４３が同一の表示画面に表示される場合において、医用画像表示部４１とレポート表示部４３の表示を好適に制御することができる。例えば、医用画像表示部４１への入力操作を容易にすることを目的に、医用画像表示部４１の表示サイズをレポート表示部４３の表示サイズより大きくなるように制御したり、或いは、レポート表示部４３の呼び出し操作があった場合に限り、レポート表示部４３を表示画面上に表示させるように制御することができる。
【００９１】
［第６の実施形態］
次に、本発明の第６の実施形態について説明する。第６の実施形態は、第１から第５のいずれかの実施形態において、レポート表示部４３に表示するシェーマ画像３として、患者の個体差を反映したシェーマ画像を用いる点を特徴とする。
【００９２】
図１９は、レポート表示部４３に表示する個体差を反映したシェーマ画像３を生成するシェーマ生成エンジン５０の機能構成を示す図である。図に示すように、シェーマ生成エンジン５０は、医用画像２を入力する医用画像入力部５１と、入力された医用画像２に基づいて形状情報（スキンラインＳ、乳頭位置Ｎｐ、胸筋ラインＭ）を検出する形状検出部５３と、検出した形状情報に基づいて個体差を反映したシェーマ画像３を生成するシェーマ生成部５５と、を備える。また、記憶部１２にはシェーマのテンプレート画像３Ｔが格納されている。
【００９３】
以下、図２０のフローチャートを参照しながら、シェーマ生成エンジン５０が個体差を反映したシェーマ画像３を生成する処理について説明する。
まず、シェーマ生成エンジン５０は、医用画像表示部４１に表示する医用画像２を入力し（ステップＳ１０１）、医用画像２に対して縮小処理を施す（ステップＳ１０２）。縮小は、後述する形状情報（スキンラインＳ、乳頭位置Ｎｐ、胸筋ラインＭ）の検出精度が良好に保たれる範囲で行う。
【００９４】
続いて、シェーマ生成エンジン５０は、以下に示すように、医用画像２から形状情報（スキンラインＳ、乳頭位置Ｎｐ、胸筋ラインＭ）を検出する。
【００９５】
（１．スキンラインＳの検出）
まず、シェーマ生成エンジン５０は、医用画像２からスキンラインＳを検出する（ステップＳ１０３）。
本実施形態では、二値化処理により肉体と背景を分離し、スキンラインＳを検出する。
図２１は、医用画像２中の画素ラインＬの画素値をプロットした図である。図に示すように、背景と肉体の境界付近が最も画素値が高い。このような性質の医用画像２に対して、単純に二値化をすると、図２２の二値化画像２−１に示すように乳頭部分が消えてしまうといった問題がある。
【００９６】
そこで、本実施形態では、以下の処理手順で二値化処理により肉体と背景を乳頭部分が消えないように好適に分離し、スキンラインＳを高精度に検出する。
（処理１）医用画像２を縮小（処理時間短縮のため）
（処理２）所定の閾値（最初は大きな閾値とする）で医用画像２を二値化
（処理３）二値化領域の連結判定（画像中央部分のみ）
・最も連結しづらい画像中央部分が連結していない場合（図２３（ａ）の二
値化画像２Ａのような場合）、閾値を小さくして（処理２）へ移行
・画像中央部分が連結している場合（図２３（ｂ）の二値化画像２Ｂのよう
な場合）、（処理４）へ移行
（処理４）画像中央からスタートして、画像上部、画像下部ごとに連結判定（図２３（ｂ）参照）
・画像上部、画像下部ともに画像端まで連結している場合（図２３（ｃ）の二値化画像２Ｃのような場合）、（処理５）へ移行
・それ以外の場合（例えば、２３（ｂ）の二値化画像２Ｂのように画像上部が連結していない場合）、閾値を小さくして（処理２）へ移行
（処理５）連結部分の座標から肉体と背景を分離し、肉体と背景の境界であるスキンラインＳを検出
【００９７】
以上のように二値化された領域が連結するまで閾値を徐々に小さくしながら繰り返し処理を行うことで、乳頭部分が消えないように肉体と背景を分離し、スキンラインＳを好適に検出することができる。
図２４（ａ）は、二値化された領域が完全に連結している二値化画像２Ｃを示す。図２４（ｂ）は、二値化画像２Ｃの連結部分の座標Ｓ１、Ｓ２、Ｓ３…を元に、肉体と背景を分離した分離画像２Ｄを示す。スキンラインＳは、図２４（ａ）に示す連結部分の座標Ｓ１、Ｓ２、Ｓ３…の集合として検出される。
【００９８】
（２．乳頭位置Ｎｐの検出）
図２０のフローチャートに戻る。次に、シェーマ生成エンジン５０は、乳頭位置Ｎｐを検出する（ステップＳ１０４）。具体的には、図２５に示すように、ステップＳ１０４で生成した分離画像２Ｄの画像左上端を走査開始点とし、上から下に向かって画像の走査（上下走査）を開始する。画像下端に到達すると、Ｘ座標を変化（右方向にシフト）させながら、肉体色を検出するまで画像の上下走査を続ける。そして、肉体色を最初に検出したＸ座標を乳頭位置ＮｐのＸ座標とする。また、乳頭位置ＮｐのＸ座標上の画素のうち、肉体色を持つ画素のＹ座標の平均値を乳頭位置ＮｐのＹ座標とする。
【００９９】
（３．胸筋ラインＭの検出）
図２０のフローチャートに戻る。次に、シェーマ生成エンジン５０は、医用画像２がＭＬＯ（内外斜位方向）撮影の医用画像である場合（被写体の側面から撮影した場合）には（ステップＳ１０５；Ｙｅｓ）、更に、胸筋ラインＭを検出する（ステップＳ１０６）。
まず、図２６に示すように、医用画像２中の胸筋ラインＭの初期開始点Ｍ１を検出する。具体的には、図２７に示すように、医用画像２の一番上の肉体領域中の画素行の中で、正の方向に最も変化が大きいパッチを初期開始点Ｍ１として検出する。パッチは図２７に示すように３×３の画素の合計値を算出するものであり、輝度値の変化を明確にし、ノイズの影響を減らす効果がある。
【０１００】
次に、画像によっては胸筋が写っていない場合があるため、胸筋の有無を判定する。具体的には、図２８に示すように、初期開始点Ｍ１のＸ座標が医用画像２の右端から予め設定した閾値以上である場合には「胸筋あり」、閾値未満の場合は「胸筋なし」と判定する。「胸筋なし」と判定された場合は、胸筋ラインＭの検出を終了する。
【０１０１】
一方、「胸筋あり」と判定された場合は、胸筋ラインＭの検出を続行する。具体的には、以下の処理を実行することで、胸筋ラインＭを検出する。
（処理１）開始点（最初は初期開始点Ｍ１）から医用画像２上部から下部へ線分を引いて、線分上の画素値の平均値を算出する。このとき、線分の角度を図２９（ａ）に示すように所定の角度θ１から所定の角度θ２まで変化させながら、線分上の平均値を算出する。線分の長さ（探索距離）は最大で画素の縦の長さの約１／１０とする。
（処理２）線分の平均画素値が最大となる角度を決定し、図２９（ｂ）に示すように、決定した角度方向へ探索距離分進んだ点を次の開始点（図２９（ｂ）のＭ２）とする。
（処理３）画像端に到達するまで、或いは、一定回数探索するまで上記（処理１）（処理２）を繰り返す。
【０１０２】
図３０は、以上の処理により検出された胸筋ラインＭの例を示す。図の例のように、（処理１）（処理２）を繰り返すことで得られる点Ｍ１、Ｍ２、Ｍ３の集合から胸筋ラインＭが検出される。
なお、医用画像２がＣＣ（頭尾方向）撮影の場合には（ステップＳ１０５；Ｎｏ）、胸筋ラインの検出処理は省略される。
【０１０３】
以上、形状情報（スキンラインＳ、乳頭位置Ｎｐ、胸筋ラインＭ）を検出する処理について説明した。
続いて、シェーマ生成エンジン５０は、検出した形状情報に基づいて個体差を反映したシェーマ画像３を生成する。本実施形態では、シェーマ画像３の生成方法として「テンプレート変形方式」と「直接描画方式」について説明する。「テンプレート変形方式」により生成されるシェーマ画像３をシェーマ画像３Ａと表記し、「直接描画方式」により生成されるシェーマ画像３をシェーマ画像３Ｂと表記する。いずれの方式でシェーマ画像３を生成するかは予め定めておいてもよいし、読影医等が適宜選択できるようにしてもよい。
【０１０４】
（テンプレート変形方式）
テンプレート変形方式によるシェーマ画像３Ａを生成する場合（ステップＳ１０７「テンプレート変形方式」）、シェーマ生成エンジン５０は、まず、シェーマのテンプレート画像３Ｔを記憶部１２から読込む（ステップＳ１０８）。
【０１０５】
次に、シェーマ生成エンジン５０は、分離画像２Ｄから特徴点を検出する（ステップＳ１０９）。
具体的には、図３１に示すように、スキンラインＳと乳頭位置Ｎｐから以下の３つの特徴点ｆ１、ｆ２、ｆ３を取得する。
（特徴点ｆ１）スキンラインＳの上端の点であり、分離画像２Ｄの画像上半分で最もＸ座標が大きい点
（特徴点ｆ２）スキンラインＳの下端の点であり、分離画像２Ｄの画像下半分で最もＸ座標が大きい点
（特徴点ｆ３）乳頭位置Ｎｐ
【０１０６】
次に、シェーマ生成エンジン５０は、図３２に示すように、予め設定されているテンプレート画像３Ｔの特徴点ｔ１、ｔ２、ｔ３と、検出した特徴点ｆ１、ｆ２、ｆ３と、に基づいて、アフィン変換パラメータＦを算出する（ステップＳ１１０）。アフィン変換パラメータＦは、最小二乗法等により、特徴点ｔ１、ｔ２、ｔ３を特徴点ｆ１、ｆ２、ｆ３に変換する変換行列として求まる。
【０１０７】
そして、シェーマ生成エンジン５０は、アフィン変換パラメータＦに基づいてテンプレート画像３Ｔを変形する（ステップＳ１１１）。これにより、テンプレート画像３Ｔの形状が医用画像２中の被写体の形状に近づくように変形され、個体差を反映したシェーマ画像３Ａが生成される。
【０１０８】
また、医用画像２がＭＬＯ（内外斜位方向）撮影の医用画像である場合（被写体の側面から撮影した場合）には（ステップＳ１１４；Ｙｅｓ）、シェーマ生成エンジン５０は、シェーマ画像３Ａ上に検出した胸筋ラインＭを描画する（ステップＳ１１５）。
そして、シェーマ画像３Ａ上に補助線Ｈを描画し（ステップＳ１１６）、シェーマ画像生成処理を終了する。補助線Ｈは、乳房の領域を上部、中央部、下部などの各領域に分ける境界線である。
【０１０９】
図３３は、テンプレート変形方式により生成されたシェーマ画像３Ａの例である。図に示すように、図３２のテンプレート画像３Ｔのスキンラインが医用画像２の被写体の形状に近づくように変形され、且つ、胸筋ラインＭと補助線Ｈが描画されたシェーマ画像３Ａが生成される。
【０１１０】
（直接描画方式）
一方、直接描画方式によりシェーマ画像３Ｂを生成する場合（ステップＳ１０７「直接描画方式」）、シェーマ生成エンジン５０は、検出したスキンラインＳを描画するとともに（ステップＳ１１２）、乳頭領域Ｎａを描画する（ステップＳ１１３）。
なお、乳頭領域Ｎａは、一般的に、乳頭中央（乳頭位置Ｎｐ）から半径「２ｃｍ」の領域と定められている。医用画像２には通常１画素あたりの実空間の長さが情報として保持されているので、医用画像２とシェーマ画像３Ｂの縮小倍率から２ｃｍ分のシェーマ画像３Ｂ上における画素数を算出し、乳頭位置Ｎｐから算出した画素数範囲の肉体領域を乳頭領域Ｎａとして決定することができる。
【０１１１】
また、医用画像２がＭＬＯ（内外斜位方向）撮影の医用画像である場合（被写体の側面から撮影した場合）には（ステップＳ１１４；Ｙｅｓ）、シェーマ生成エンジン５０は、シェーマ画像３Ｂ上に検出した胸筋ラインＭを描画する（ステップＳ１１５）。
そして、シェーマ画像３Ｂ上に補助線Ｈを描画し（ステップＳ１１６）、シェーマ画像生成処理を終了する。
【０１１２】
図３４は、直接描画方式により生成されたシェーマ画像３Ｂの例である。図に示すように、検出したスキンラインＳ、乳頭領域Ｎａ、胸筋ラインＭ、および補助線Ｈが医用画像２（または分離画像２Ｄ）に重畳描画されたシェーマ画像３Ｂが生成される。なお、図３４の例に依らず、スキンラインＳ、乳頭領域Ｎａ、胸筋ラインＭ、および補助線Ｈを描画するだけでもよい（医用画像２等に重畳しなくてもよい）。
【０１１３】
以上のようにして生成したシェーマ画像３（３Ａまたは３Ｂ）はレポート表示部４３のレポートに表示される。これにより、読影医等は、被写体の形状の違い等を反映したシェーマを用いて、レポートを作成することができる。
【０１１４】
なお、テンプレート変形方式によるシェーマ画像３Ａと医用画像２は、アフィン変換パラメータＦと両画像の縮小倍率によって画像間の位置の対応が取れる。また、直接描画方式によるシェーマ画像３Ｂと医用画像２は、両画像の縮小倍率のみによって画像間の位置の対応が取れる。
【０１１５】
したがって、例えば、読影医等の操作により、医用画像表示部４１において医用画像２中の所定の位置に関する情報が入力された場合、入力された情報を、レポート表示部４３の個体差を反映したシェーマ画像３（３Ａまたは３Ｂ）中の対応する位置に正確に反映させることができる。
【０１１６】
なお、本実施形態では、左側の乳房のシェーマ画像３を生成する場合を示しているが、右側の乳房のシェーマ画像３も同様の処理で生成可能である。
また、本実施形態では、撮影方向がＭＬＯ（内外斜位方向）の場合を主に説明したが、撮影方向がＣＣ（頭尾方向）の場合など、他の撮影方向であっても個体差を反映したシェーマ画像３を同様に生成可能である。
【０１１７】
以上、添付図面を参照しながら、本発明に係る好適な実施形態について説明したが、本発明はかかる例に限定されない。当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【０１１８】
１……………読影支援システム
２……………医用画像
３……………シェーマ画像
４……………入力情報
５……………反映情報
１０…………医用画像表示装置
２０…………レポート表示装置
３０…………表示装置
４１…………医用画像表示部
４２…………表示制御部
４３…………レポート表示部
４５…………情報入力部
４６…………情報種別選択部
４７…………情報反映部
４８…………反映可否選択部
５０…………シェーマ生成エンジン
５１…………医用画像入力部
５３…………形状検出部
５５…………シェーマ生成部
１００………サーバ
１２０………医用画像データベース
２００………ネットワーク
Ａ１…………アノテーション
Ｂ１…………アノテーション
【図１】
2018169801.tif 000003
【図２】
2018169801.tif 000004
【図３】
2018169801.tif 000005
【図４】
2018169801.tif 000006
【図５】
2018169801.tif 000007
【図６】
2018169801.tif 000008
【図７】
2018169801.tif 000009
【図８】
2018169801.tif 000010
【図９】
2018169801.tif 000011
【図１０】
2018169801.tif 000012
【図１１】
2018169801.tif 000013
【図１２】
2018169801.tif 000014
【図１３】
2018169801.tif 000015
【図１４】
2018169801.tif 000016
【図１５】
2018169801.tif 000017
【図１６】
2018169801.tif 000018
【図１７】
2018169801.tif 000019
【図１８】
2018169801.tif 000020
【図１９】
2018169801.tif 000021
【図２０】
2018169801.tif 000022
【図２１】
2018169801.tif 000023
【図２２】
2018169801.tif 000024
【図２３】
2018169801.tif 000025
【図２４】
2018169801.tif 000026
【図２５】
2018169801.tif 000027
【図２６】
2018169801.tif 000028
【図２７】
2018169801.tif 000029
【図２８】
2018169801.tif 000030
【図２９】
2018169801.tif 000031
【図３０】
2018169801.tif 000032
【図３１】
2018169801.tif 000033
【図３２】
2018169801.tif 000034
【図３３】
2018169801.tif 000035
【図３４】
2018169801.tif 000036