(57)【要約】【課題】トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることである。【解決手段】実施形態の医用画像処理装置は、画像取得部と、画像生成部とを備える。画像取得部は、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する。画像生成部は、前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する。【選択図】図１
2020141867.tif 000002
【特許請求の範囲】
【請求項１】
被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する画像取得部と、
前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する画像生成部と、を備える、
医用画像処理装置。
【請求項２】
前記画像取得部は、前記トモシンセシス撮影により取得された投影データに含まれる一部の投影データを前記第１の医用画像データとして取得し、
前記画像生成部は、前記一部の投影データを入力することで、前記被検体の第２の医用画像データを生成する、
請求項１に記載の医用画像処理装置。
【請求項３】
前記画像取得部は、前記第２の医用画像データに対応する照射角度に基づいて、前記一部の投影データを取得する、
請求項２記載の医用画像処理装置。
【請求項４】
前記画像取得部は、前記トモシンセシス撮影により取得された投影データ、当該投影データを再構成したボリュームデータの少なくとも何れかと、前記トモシンセシス撮影により取得された投影データ投影データに含まれ、前記第２の医用画像データに対応する照射角度に基づいて取得される一部の投影データとを組合わせたデータを前記第１の医用画像データとして取得し、
前記画像生成部は、前記組み合わせたデータを入力することで、前記被検体の第２の医用画像データを生成する、
請求項１に記載の医用画像処理装置。
【請求項５】
前記画像取得部により取得された前記第１の医用画像データに含まれる注目部位を抽出する抽出部と、
前記画像生成部により生成された前記被検体の第２の医用画像データにおいて、前記抽出部により抽出された前記注目部位に対応する部位を強調する強調部と、をさらに備える、
請求項１乃至４のいずれか一項に記載の医用画像処理装置。
【請求項６】
前記抽出部は、コンピュータ支援診断（CAD；Computer Aided Detection）によって検出される病変を前記注目部位として抽出する、
請求項５に記載の医用画像処理装置。
【請求項７】
前記画像生成部は、前記学習済みモデルの出力と、前記第１の医用画像データの断層画像データとを所定割合でブレンドして前記被検体の第２の医用画像データを生成する、
請求項１から６のいずれか１項に記載の医用画像処理装置。
【請求項８】
被検体のトモシンセシス撮影により取得された投影データ、または、当該投影データを再構成したボリュームデータを第１の医用画像データとし、前記被検体のＸ線撮影により取得された２次元画像データを第２の医用画像データとして、当該第１の医用画像データと前記第２の医用画像データとを組にしたデータセットに基づき、前記第１の医用画像データに基づいて前記第２の医用画像データを出力する学習済みモデルを生成する、
学習方法。
【請求項９】
前記２次元画像データは、前記被検体のトモシンセシス撮影において照射されたＸ線よりも大きい線量で前記Ｘ線撮影が行われることにより取得される、
請求項８に記載の学習方法。
【請求項１０】
前記被検体に対して行われる前記Ｘ線撮影はマンモグラフィ撮影である、
請求項８または９に記載の学習方法。
【請求項１１】
被検体に対して複数の角度からＸ線を照射することによりトモシンセシス撮影を行う撮影部と、
前記トモシンセシス撮影により取得された投影データ、または、当該投影データを再構成したボリュームデータを第１の医用画像データとして取得する画像取得部と、
前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する画像生成部と、を備える、
Ｘ線診断装置。
【請求項１２】
コンピュータが、被検体のトモシンセシス撮影により取得された投影データ、または、当該投影データを再構成したボリュームデータを第１の医用画像データとして取得し、
コンピュータが、前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する、
医用画像処理方法。
【請求項１３】
コンピュータを、
被検体のトモシンセシス撮影により取得された投影データ、または、当該投影データを再構成したボリュームデータを第１の医用画像データとして取得する画像取得部、
前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する画像生成部、として機能させる、
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、医用画像処理装置、学習方法、Ｘ線診断装置、医用画像処理方法、およびプログラムに関する。
【背景技術】
【０００２】
被検体に対して複数の角度からＸ線を照射することによって複数の投影データを順次取得するトモシンセシス撮影が知られている。トモシンセシス撮影により取得された複数の投影データを再構成して得られるボリュームデータによれば、基準方向（例えば撮影台の法線方向）と直交する方向の複数の断層像（スライス画像）が得られる。乳房のトモシンセシス撮影の場合、乳腺の重なりが少ない断層像が得られるため、マンモグラフィ撮影では描出困難な高濃度乳腺に臨床的な有用性がある。
【０００３】
一方、トモシンセシス撮影により取得された複数の断層像から１枚の２次元画像（合成２Ｄ画像）を生成する技術が知られている。例えば、複数の断層像のスライス方向に並ぶ各画素について、当該スライス方向と直交する方向に並ぶ画素群の中で最小値を投影することにより２次元画像を生成する、いわゆるＭｉｎＩＰ（Minimum Intensity Projection）と呼ばれる技術が知られている。この種の技術により生成される２次元画像によれば、トモシンセシス撮影により得られた複数の断層像を１枚の要約画像として提供できる。
【０００４】
しかし、上記技術により生成される２次元画像（合成２Ｄ画像）は、複数の断層像のスライス方向に並ぶ各画素について、当該スライス方向と直交する方向に並ぶ画素群の中で１つの画素値（ＭｉｎＩＰの場合は最小値）のみが反映され、その他の画素値は反映されない。そのため、例えば石灰化の背景にある乳腺の情報等が含まれない。また、トモシンセシス撮影で照射されるＸ線はマンモグラフィ撮影で照射されるＸ線よりも低い。そのため、上記技術により生成される２次元画像は、マンモグラフィ撮影により得られる画像と比べてコントラストが大きく異なる。さらに、トモシンセシス撮影は、Ｘ線管を移動させながらＸ線を照射させて行うので、トモシンセシス撮影により得られる断層像には、Ｘ線管の移動に伴うアーチファクトが含まれてしまう。これは、上記技術により生成される２次元画像にも影響を与える。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】米国特許第９７９２７０３号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明が解決しようとする課題は、トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることである。
【課題を解決するための手段】
【０００７】
実施形態の医用画像処理装置は、画像取得部と、画像生成部とを備える。画像取得部は、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する。画像生成部は、前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する。
【図面の簡単な説明】
【０００８】
【図１】第１の実施形態に係る医用画像処理装置１０の一構成例を示すブロック図。
【図２】第１の実施形態に係る学習機能２４の学習時におけるデータフローの一例を示す図。
【図３】第１の実施形態に係る学習機能２４の学習時におけるデータフローの他の一例を示す図。
【図４】第１の実施形態に係る画像生成機能２２の運用時におけるデータフローの一例を示す図。
【図５】第１の実施形態に係る画像生成機能２２の運用時におけるデータフローの他の一例を示す図。
【図６】第２の実施形態に係る学習機能２４の学習時におけるデータフローの一例を示す図。
【図７】第２の実施形態に係る画像生成機能２２の運用時におけるデータフローの一例を示す図。
【図８】第３の実施形態に係る学習機能２４の学習時におけるデータフローの一例を示す図。
【図９】第３の実施形態に係る画像生成機能２２の運用時におけるデータフローの一例を示す図。
【図１０】第３の実施形態に係る画像生成機能２２の運用時におけるデータフローのより詳細な一例を示す図。
【図１１】第４の実施形態に係る医用画像処理装置１０の一構成例を示すブロック図。
【図１２】第４の実施形態に係る画像生成機能２２の運用時におけるデータフローの一例を示す図。
【図１３】第５の実施形態に係る画像生成機能２２の運用時におけるデータフローの一例を示す図。
【図１４】ミニバッチ領域について説明するための図。
【図１５】第６の実施形態に係る学習機能２４の学習時におけるデータフローの一例を示す図。
【図１６】第６の実施形態に係る画像生成機能２２の運用時におけるデータフローの一例を示す図。
【図１７】第７の実施形態に係るＸ線診断装置１００Ｆの構成の一例を示す図。
【図１８】Ｘ線診断装置１による投影データの取得手法の一例を示す図。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、実施形態の医用画像処理装置、学習方法、Ｘ線診断装置、医用画像処理方法、およびプログラムを説明する。
【００１０】
（第１の実施形態）
図１は、第１の実施形態に係る医用画像処理装置１０の一構成例を示すブロック図である。医用画像処理装置１０は、入力回路１１、ディスプレイ１２、記憶回路１３、ネットワーク接続回路１４および処理回路１５を備える。
【００１１】
入力回路１１は、たとえばトラックボール、スイッチボタン、マウス、キーボード、テンキーなどの一般的な入力装置により構成され、ユーザの操作に対応した操作入力信号を処理回路１５に出力する。ディスプレイ１２は、たとえば液晶ディスプレイやＯＬＥＤ（Organic Light Emitting Diode）ディスプレイなどの一般的な表示出力装置により構成される。
【００１２】
記憶回路１３は、たとえば、ＲＡＭ（Random Access Memory）、フラッシュメモリ等の半導体メモリ素子、ハードディスク、光ディスク等の、プロセッサにより読み取り可能な記録媒体を含んだ構成を有し、処理回路１５が利用するプログラムやパラメータデータやその他のデータを記憶する。なお、記憶回路１３の記録媒体内のプログラムおよびデータの一部または全部は、ネットワーク１００を介した通信によりダウンロードされてもよいし、光ディスクなどの可搬型記憶媒体を介して記憶回路１３に与えられてもよい。
【００１３】
また、記憶回路１３は、ネットワーク１００を介して取得した被検体のトモシンセシス撮影にもとづく投影データまたはこの投影データにもとづいて再構成されたボリュームデータを記憶してもよい。
【００１４】
ネットワーク接続回路１４は、ネットワーク１００の形態に応じた種々の情報通信用プロトコルを実装する。ネットワーク接続回路１４は、この各種プロトコルに従ってネットワーク１００を介して他の電気機器と接続する。ネットワーク１００は、電気通信技術を利用した情報通信網全般を意味し、病院基幹ＬＡＮ（Local Area Network）などの無線／有線ＬＡＮやインターネット網のほか、電話通信回線網、光ファイバ通信ネットワーク、ケーブル通信ネットワークおよび衛星通信ネットワークなどを含む。
【００１５】
医用画像処理装置１０は、Ｘ線診断装置１０１および画像サーバ１０２とネットワーク１００を介して互いにデータ送受信可能に接続される。
【００１６】
Ｘ線診断装置１０１は、例えば、乳房のトモシンセシス撮影やマンモグラフィ撮影を行うマンモグラフィ装置や、長尺のトモシンセシス撮影を行うＸ線ＴＶ装置等から構成される。
【００１７】
処理回路１５は、医用画像処理装置１０を統括制御する機能を実現する。また、処理回路１５は、記憶回路１３に記憶されたプログラムを読み出して実行するプロセッサである。処理回路１５は、トモシンセシス撮影に対応する医用画像データに基づいて２次元画像データを生成する。トモシンセシス撮影に対応する医用画像データは、具体的には、トモシンセシス撮影により取得された投影データ、または、当該投影データを再構成したボリュームデータである。
【００１８】
図１に示すように、処理回路１５は、画像取得機能２１、画像生成機能２２、出力機能２３、学習機能２４を実現する。これらの各機能は、それぞれプログラムの形態で記憶回路１３に記憶されている。画像取得機能２１、画像生成機能２２は、学習済みモデル３２が生成された後に機能し、出力機能２３、学習機能２４は、学習済みモデル３２の生成のために機能する。
【００１９】
画像取得機能２１は、Ｘ線診断装置１０１または画像サーバ１０２から、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する。なお、画像取得機能２１は画像取得部の一例である。
【００２０】
画像生成機能２２は、画像取得機能２１により取得された第１の医用画像データに基づいて、被検体の２次元画像データを第２の医用画像データとして生成する。画像生成機能２２は、第１の医用画像データを入力することで第２の医用画像データを出力する学習済みモデル（後述の学習済みモデル３２）を用いる。画像生成機能２２は、学習済みモデルに対して、被検体のトモシンセシス撮影に対応する医用画像データ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成する。なお、画像生成機能２２は画像生成部の一例である。
【００２１】
出力機能２３は、Ｘ線診断装置１０１で行われた、被検体のトモシンセシス撮影に対応する医用画像データ（第１の医用画像データ）と、同一被検体のＸ線撮影に対応する２次元画像データである医用画像データ（第２の医用画像データ）とを学習用のデータセットとして出力する。
【００２２】
例えば、乳房のマンモグラフィ撮影は、乳房のトモシンセシス撮影において照射されるＸ線よりも大きい線量で行われる。また、一般的に、乳房のトモシンセシス撮影が行われる場合には、乳房のマンモグラフィ撮影も行われる。そのため、従来のワークフローにより得られる第１および第２の医用画像データを学習用データセットとして利用することができ、効率がよい。なお、出力機能２３は出力部の一例である。
【００２３】
学習機能２４は、出力機能２３により出力された学習用データセットに基づき深層学習を行う。図２に示すように、学習機能２４は、トレーニング入力データとして、被検体のトモシンセシス撮影に対応する複数の投影データ（第１の医用画像データ）を用いる。また、学習機能２４は、トレーニング出力データとして、同一被検体のＸ線撮影に対応する２次元画像データ（第２の医用画像データ）を用いる。
【００２４】
なお、トレーニング入力データとして用いられる第１の医用画像データは、トモシンセシス撮影により取得された投影データに代えて、当該投影データを再構成したボリュームデータでもよい。つまり、図３に示すように、学習機能２４は、トレーニング入力データとして、被検体の複数の投影データを再構成したボリュームデータ（第１の医用画像データ）を用いてもよい。また、トレーニング入力データとして用いられる第１の医用画像データは、トモシンセシス撮影により取得された投影データと、当該投影データを再構成したボリュームデータとの組み合わせでもよい。
【００２５】
学習機能２４は、学習用データセットが入力されるごとに、トレーニング入力データ（被検体のトモシンセシス撮影に対応する医用画像データ）をニューラルネットワーク３１で処理した結果がトレーニング出力データ（同一被検体のＸ線撮影に対応する２次元画像データ）に近づくようにニューラルネットワーク３１のパラメータデータを更新していく、いわゆる学習を行う。ニューラルネットワーク３１のパラメータデータは、例えば、ＣＮＮ（Convolution Neural Network）の誤差逆伝播（バックプロパゲーション）等の手法によって調整され、更新される。学習機能２４は、パラメータデータの変化割合が閾値以内に収束すると、学習が終了したと判断する。学習機能２４は、学習後のパラメータデータに基づいて、例えば、ＤＮＮ（Deep Neural Network）の形態を有する学習済みモデル３２を生成する。なお、学習済みモデル３２は、記憶回路１３に記憶され、運用時に記憶回路１３から読み出される。また、学習済みモデル３２は、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）などの集積回路によって構築されてもよい。
【００２６】
また、トレーニング入力データの種類と図４や図５に示す運用時の入力データの種類とは一致させるべきである。たとえば、学習時のトレーニング入力データとしての投影データ群の角度範囲および角度刻み（たとえばマイナス７．５度からプラス７．５まで１度刻みで計１６枚など）は、運用時の入力データの角度範囲および角度刻みと一致させるべきである。
【００２７】
以上のように構成された医用画像処理装置１０について、運用時における動作を以下に説明する。
【００２８】
画像取得機能２１は、Ｘ線診断装置１０１または画像サーバ１０２から、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する。画像生成機能２２は、画像取得機能２１により取得された第１の医用画像データに基づいて、被検体の２次元画像データを第２の医用画像データとして生成する。
【００２９】
例えば、図４に示したように、画像生成機能２２は、学習済みモデル３２に対して、被検体のトモシンセシス撮影に対応する複数の投影データ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成する。なお、図５に示したように、画像生成機能２２は、学習済みモデル３２に対して、被検体の複数の投影データを再構成したボリュームデータ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成してもよい。
【００３０】
画像生成機能２２により生成される２次元画像データは、マンモグラフィ撮影等の２次元画像のＸ線撮影に対応しているので、実際にマンモグラフィ撮影により得られる画像と比べてもコントラストは同様である。また、画像生成機能２２により生成される２次元画像データは、ＭｉｎＩＰ等の技術により生成される２次元画像（合成２Ｄ画像）と比べて、スライス方向と直交する方向に並ぶ情報量は多く、例えば石灰化の背景にある乳腺の情報等も確認できる。さらに、画像生成機能２２により生成される２次元画像データは、トモシンセシス撮影におけるＸ線管の移動に伴うアーチファクトの影響も除外されている。
【００３１】
以上、第１の実施形態によれば、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する画像取得機能２１と、第１の医用画像データに基づいてＸ線撮影に対応する２次元画像データである第２の医用画像データを生成する学習済みモデル３２に対して、第１の医用画像データを入力することで、同一被検体の第２の医用画像データを生成する画像生成機能２２と、を備えることにより、トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることができる。
【００３２】
（第２の実施形態）
以下、第２の実施形態について説明する。第２の実施形態は、第１の医用画像データの内容が第１の実施形態と異なるものである。
【００３３】
第２の実施形態における出力機能２３は、Ｘ線診断装置１０１で行われた、被検体のトモシンセシス撮影に対応する医用画像データ、より具体的には、トモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ（第１の医用画像データ）と、同一被検体のＸ線撮影に対応する２次元画像データである医用画像データ（第２の医用画像データ）とを学習用のデータセットとして出力する。なお、出力機能２３は、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データを第１の医用画像データとして出力してもよい。
【００３４】
学習機能２４は、出力機能２３により出力された学習用データセットに基づき深層学習を行う。図６に示すように、学習機能２４は、トレーニング入力データとして、被検体のトモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ（第１の医用画像データ）を用いる。また、学習機能２４は、トレーニング出力データとして、同一被検体のＸ線撮影に対応する２次元画像データ（第２の医用画像データ）を用いる。なお、学習機能２４は、トレーニング入力データとして、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データ（第１の医用画像データ）を用いてもよい。
【００３５】
学習機能２４は、学習用データセットが入力されるごとに、トレーニング入力データ（被検体のトモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ）をニューラルネットワーク３１で処理した結果がトレーニング出力データ（同一被検体のＸ線撮影に対応する２次元画像データ）に近づくようにニューラルネットワーク３１のパラメータデータを更新していく、いわゆる学習を行う。ニューラルネットワーク３１のパラメータデータは、例えば、ＣＮＮの誤差逆伝播等の手法によって調整され、更新される。学習機能２４は、パラメータデータの変化割合が閾値以内に収束すると、学習が終了したと判断する。学習機能２４は、学習後のパラメータデータに基づいて、例えば、ＤＮＮの形態を有する学習済みモデル３２を生成する。なお、学習済みモデル３２は、記憶回路１３に記憶され、運用時に記憶回路１３から読み出される。また、学習済みモデル３２は、ＡＳＩＣ、ＦＰＧＡなどの集積回路によって構築されてもよい。
【００３６】
また、トレーニング入力データの種類と図７に示す運用時の入力データの種類とは一致させるべきである。たとえば、学習時のトレーニング入力データとしての一部の投影データまたは断層画像データにおける角度（たとえばマイナス１．５度、マイナス０．５度、プラス０．５度、プラス１．５度など）は、運用時の入力データの角度と一致させるべきである。
【００３７】
以上のように構成された医用画像処理装置１０について、運用時における動作を以下に説明する。
【００３８】
画像取得機能２１は、Ｘ線診断装置１０１または画像サーバ１０２から、被検体のトモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データを、第１の医用画像データとして取得する。画像生成機能２２は、画像取得機能２１により取得された第１の医用画像データに基づいて、被検体の２次元画像データを第２の医用画像データとして生成する。なお、画像取得機能２１は、Ｘ線診断装置１０１または画像サーバ１０２から、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データを、第１の医用画像データとして取得してもよい。
【００３９】
例えば、図７に示すように、画像生成機能２２は、学習済みモデル３２に対して、被検体のトモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成する。なお、画像生成機能２２は、学習済みモデル３２に対して、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成してもよい。
【００４０】
画像生成機能２２により生成される２次元画像データは、マンモグラフィ撮影等の２次元画像のＸ線撮影に対応しているので、実際にマンモグラフィ撮影により得られる画像と比べてもコントラストは同様である。また、画像生成機能２２により生成される２次元画像データは、ＭｉｎＩＰ等の技術により生成される２次元画像（合成２Ｄ画像）と比べて、スライス方向と直交する方向に並ぶ情報量は多く、例えば石灰化の背景にある乳腺の情報等も確認できる。さらに、画像生成機能２２により生成される２次元画像データは、トモシンセシス撮影におけるＸ線管の移動に伴うアーチファクトの影響も除外されている。
【００４１】
以上、第２の実施形態によれば、被検体のトモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データを第１の医用画像データとして取得する画像取得機能２１と、第１の医用画像データに基づいてＸ線撮影に対応する２次元画像データである第２の医用画像データを生成する学習済みモデル３２に対して、第１の医用画像データを入力することで、同一被検体の第２の医用画像データを生成する画像生成機能２２と、を備えることにより、トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることができる。
【００４２】
また、第２の実施形態によれば、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータの断層画像のうち、２次元画像データに対応する角度が０度付近の一部の断層画像データを第１の医用画像データとして取得する画像取得機能２１と、第１の医用画像データに基づいてＸ線撮影に対応する２次元画像データである第２の医用画像データを生成する学習済みモデル３２に対して、第１の医用画像データを入力することで、同一被検体の第２の医用画像データを生成する画像生成機能２２と、を備えることにより、トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることができる。
【００４３】
（第３の実施形態）
以下、第３の実施形態について説明する。第３の実施形態は、第１の医用画像データの内容が第１または第２の実施形態と異なるものである。
【００４４】
第３の実施形態における出力機能２３は、Ｘ線診断装置１０１で行われた、被検体のトモシンセシス撮影に対応する医用画像データ、および、トモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ（第１の医用画像データ）と、同一被検体のＸ線撮影に対応する２次元画像データである医用画像データ（第２の医用画像データ）とを学習用のデータセットとして出力する。なお、出力機能２３は、被検体のトモシンセシス撮影に対応する医用画像データ、および、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データを第１の医用画像データとして出力してもよい。
【００４５】
学習機能２４は、出力機能２３により出力された学習用データセットに基づき深層学習を行う。図８に示すように、学習機能２４は、トレーニング入力データとして、被検体のトモシンセシス撮影により取得された複数の投影データと、複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データとを第１の医用画像データとして用いる。また、学習機能２４は、トレーニング出力データとして、同一被検体のＸ線撮影に対応する２次元画像データ（第２の医用画像データ）を用いる。なお、学習機能２４は、トレーニング入力データとして、複数の投影データを再構成したボリュームデータと、ボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データとを第１の医用画像データとして用いてもよい。
【００４６】
学習機能２４は、学習用データセットが入力されるごとに、トレーニング入力データ（被検体のトモシンセシス撮影に対応する医用画像データ、および、トモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ）をニューラルネットワーク３１で処理した結果がトレーニング出力データ（同一被検体のＸ線撮影に対応する２次元画像データ）に近づくようにニューラルネットワーク３１のパラメータデータを更新していく、いわゆる学習を行う。ニューラルネットワーク３１のパラメータデータは、例えば、ＣＮＮの誤差逆伝播等の手法によって調整され、更新される。学習機能２４は、パラメータデータの変化割合が閾値以内に収束すると、学習が終了したと判断する。学習機能２４は、学習後のパラメータデータに基づいて、例えば、ＤＮＮの形態を有する学習済みモデル３２を生成する。なお、学習済みモデル３２は、記憶回路１３に記憶され、運用時に記憶回路１３から読み出される。また、学習済みモデル３２は、ＡＳＩＣ、ＦＰＧＡなどの集積回路によって構築されてもよい。
【００４７】
また、トレーニング入力データの種類と図９に示す運用時の入力データの種類とは一致させるべきである。たとえば、学習時のトレーニング入力データとしての一部の投影データまたは断層画像データにおける角度（たとえばマイナス１．５度、マイナス０．５度、プラス０．５度、プラス１．５度など）は、運用時の入力データの角度と一致させるべきである。
【００４８】
以上のように構成された医用画像処理装置１０について、運用時における動作を以下に説明する。
【００４９】
画像取得機能２１は、Ｘ線診断装置１０１または画像サーバ１０２から、被検体のトモシンセシス撮影により取得された複数の投影データ、および、複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データを、第１の医用画像データとして取得する。画像生成機能２２は、画像取得機能２１により取得された第１の医用画像データに基づいて、被検体の２次元画像データを第２の医用画像データとして生成する。なお、画像取得機能２１は、Ｘ線診断装置１０１または画像サーバ１０２から、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータ、および、ボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データを、第１の医用画像データとして取得してもよい。
【００５０】
例えば、図９に示すように、画像生成機能２２は、学習済みモデル３２に対して、被検体のトモシンセシス撮影により取得された複数の投影データ、および、複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成する。なお、画像生成機能２２は、学習済みモデル３２に対して、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータ、および、ボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データ（第１の医用画像データ）を入力することで、当該被検体の２次元画像データを生成してもよい。
【００５１】
画像生成機能２２により生成される２次元画像データは、マンモグラフィ撮影等の２次元画像のＸ線撮影に対応しているので、実際にマンモグラフィ撮影により得られる画像と比べてもコントラストは同様である。また、画像生成機能２２により生成される２次元画像データは、ＭｉｎＩＰ等の技術により生成される２次元画像（合成２Ｄ画像）と比べて、スライス方向と直交する方向に並ぶ情報量は多く、例えば石灰化の背景にある乳腺の情報等も確認できる。さらに、画像生成機能２２により生成される２次元画像データは、トモシンセシス撮影におけるＸ線管の移動に伴うアーチファクトの影響も除外されている。
【００５２】
以上、第３の実施形態によれば、被検体のトモシンセシス撮影により取得された複数の投影データと、複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データとを第１の医用画像データとして取得する画像取得機能２１と、第１の医用画像データに基づいてＸ線撮影に対応する２次元画像データである第２の医用画像データを生成する学習済みモデル３２に対して、第１の医用画像データを入力することで、同一被検体の第２の医用画像データを生成する画像生成機能２２と、を備えることにより、トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることができる。
【００５３】
また、第３の実施形態によれば、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータと、ボリュームデータの断層画像データのうち、２次元画像データに対応する角度が０度付近の一部の断層画像データとを第１の医用画像データとして取得する画像取得機能２１と、第１の医用画像データに基づいてＸ線撮影に対応する２次元画像データである第２の医用画像データを生成する学習済みモデル３２に対して、第１の医用画像データを入力することで、同一被検体の第２の医用画像データを生成する画像生成機能２２と、を備えることにより、トモシンセシス撮影に対応する画像から高画質な２次元画像を得ることができる。
【００５４】
（第３の実施形態の詳細例）
第３の実施形態における学習済みモデル２２は、例えば、以下のような形態で生成される。図１０は、第３の実施形態に係る学習済みモデル２２の内容の一例を示す図である。学習済みモデル２２は、ＣＮＮを利用したネットワークである。図示するように、学習済みモデル２２は、例えば、コンボリューション層とプーリング層を有するＣＮＮのパラメータをバックプロパゲーションによって求めるディープラーニングによって生成される。コンボリューション層とプーリング層の間には、ＲｅＬＵなどの活性化関数が挟まれてもよい。学習済モデル２２は、例えば、入力層において、被検体のトモシンセシス撮影に対応する医用画像データに適用するＣＮＮと、参照投影データに適用するＣＮＮとを分離させている。参照投影データとは、検体のトモシンセシス撮影により取得された複数の投影データのうち、２次元画像データに対応する角度が０度付近の一部の投影データ、または、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータの断層画像データのうち、２次元画像データに対応する角度が０度付近の一部の断層画像データである。そして、出力層までの任意の層（ある程度、特徴が抽出されてきた層）において、それぞれのＣＮＮの出力が結合（コンカチネット）され、結合されたデータを更にＣＮＮに入力することで２次元画像データが得られるように学習されたものである。図では、被検体のトモシンセシス撮影に対応する医用画像データに適用されるＣＮＮはｎ層で構成され、参照投影データに適用されるＣＮＮはｍ層で構成されるものとしている。層の数ｎとｍは同じ値であってもよいし、異なる値であってもよい。また、参照投影データにはＣＮＮが適用されず、被検体のトモシンセシス撮影に対応する医用画像データ側のＣＮＮの中間層に参照投影データが結合されるようにしてもよい。なお、一般的なＣＮＮでは、出力層に近づくにつれて次元が小さくなるが、実施形態では、適宜、外枠部分を外挿により追加していくことで、同じ次元を維持して処理を進行させてよい。
【００５５】
（第４の実施形態）
以下、第４の実施形態について説明する。図１１は、第４の実施形態に係る医用画像処理装置１０の一構成例を示すブロック図である。医用画像処理装置１０は、入力回路１１、ディスプレイ１２、記憶回路１３、ネットワーク接続回路１４および処理回路１５を備える。処理回路１５以外の構成要素は、第１〜第３の実施形態で説明したものと同様である。
【００５６】
図１１に示すように、第４の実施形態に係る処理回路１５は、画像取得機能２１、画像生成機能２２、出力機能２３、学習機能２４、抽出機能２５、強調機能２６を実現する。
これらの各機能は、それぞれプログラムの形態で記憶回路１３に記憶されている。画像取得機能２１、画像生成機能２２は、学習済みモデル３２が生成された後に機能し、出力機能２３、学習機能２４は、学習済みモデル３２の生成のために機能する。また、抽出機能２５、強調機能２６は、学習済みモデル３２を用いて二次元画像データを生成する際に機能する。
【００５７】
画像取得機能２１、画像生成機能２２、出力機能２３、学習機能２４は、第１〜第３の実施形態のいずれかと同様の構成および機能を有する。すなわち、第１の医用画像データおよび学習済みモデルは、第１〜第３の実施形態のいずれかと同様であってよい。従って、学習時の処理についての説明を省略する。
【００５８】
図１２に示すように、運用時において抽出機能２５は、被検体のトモシンセシス撮影により取得された複数の投影データ（第１の医用画像データ）に対して画像処理を行い、画像中の病変候補の位置を抽出し、病変種類を特定する。抽出機能２５の画像処理においては、機械学習、モルフォロジー演算、エッジ抽出など任意の手法が用いられてよい。なお、抽出機能２５は、被検体のトモシンセシス撮影により取得された複数の投影データを再構成したボリュームデータ（第１の医用画像データ）に対して画像処理を行い、画像中の病変候補の位置を抽出し、病変種類を特定してもよい。
【００５９】
強調機能２６は、画像生成機能２２によって、被検体のトモシンセシス撮影により取得された複数の投影データを学習済みモデル２２に入力することで生成された２次元画像データに対して、抽出機能２５によって抽出された病変候補の位置を認識可能にするための画像処理を行い、処理後の画像をディスプレイ１２に表示させる。強調機能２６による画像処理は、病変候補の位置を強調するエフェクト画像を画像に追加したり、病変種類を示す情報（文字、図形等のアノテーションを含む）を付加したりする処理である。係る処理を行うことで、より分かりやすい形態で２次元画像データをディスプレイ１２に表示させることができる。
【００６０】
以上、第４の実施形態によれば、抽出機能２５および強調機能２６を更に備えることにより、より分かりやすい形態で２次元画像データをディスプレイ１２に表示させることができる。
【００６１】
（第５の実施形態）
以下、第５の実施形態について説明する。第５の実施形態の医用画像処理装置１０は、第４の実施形態の医用画像処理装置１０と同様の構成を有する。但し、第５の実施形態の医用画像処理装置１０は、強調機能２６を有してもよいし、有さなくてもよい。また、
第５の実施形態において、第１の医用画像データおよび学習済みモデルは、第１〜第３の実施形態のいずれかと同様であってよい。従って、学習時の処理についての説明を省略する。
【００６２】
図１３に示すように、第５の実施形態に係る画像生成機能２２は、出力画像を生成する際に、学習済モデル３２によって出力された２次元画像データに、トモシンセシス撮影により得られた複数の投影データを再構成したボリュームデータの任意の断層画像データを所定のブレンド比でブレンドして２次元画像データを生成する。任意の断層画像データとは、例えば、抽出機能２５によって抽出された病変候補の位置を含む断層画像データである。病変候補の位置がある程度の大きさを有する場合、例えば、病変候補の位置の範囲の中心部を貫通する断層画像のデータが、任意の断層画像データとして選択される。なお、これに限らず、利用者によって選択された断層画像データが選択されてもよいし、一律にボリュームデータの中心部を貫通する断層画像データが選択されてもよい。
【００６３】
画像生成機能２２は、抽出機能２５によって抽出された病変候補の位置を含む断層画像データにαを乗算した画像データと、学習済モデル２２が出力した２次元画像データに１マイナスαを乗算した画像データと、を加算して、ブレンドされた２次元画像データを生成する。αは、ゼロから１の間の値をとる係数である。
【００６４】
以上、第５の実施形態によれば、トモシンセシス撮影により得られた複数の投影データを再構成したボリュームデータの断層画像をブレンドすることで、被検体Ｐの内部状態の視認性を向上させることができる。
【００６５】
（第６の実施形態）
以下、第６の実施形態について説明する。第６の実施形態では、被検体のトモシンセシス撮影により得られた複数の投影データ、または複数の投影データを再構成したボリュームデータと、複数の投影データのうち２次元画像データに対応する角度が０度付近の一部の投影データ、またはボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データとのそれぞれを、スライス平面で分割したミニバッチ領域を対象として学習時および運用時の処理を行う。
【００６６】
図１４に示すように、第６の実施形態における出力機能２３は、トレーニング入力データを生成するために、被検体の被検体のトモシンセシス撮影により得られた複数の投影データと、複数の投影データのうち２次元画像データに対応する角度が０度付近の一部の投影データとのそれぞれについて、ｋ個のミニバッチ領域に対応するデータを切り出す処理を行う。ｋは自然数である。これに代えて、出力機能２３は、複数の投影データを再構成したボリュームデータと、ボリュームデータから抽出される、２次元画像データに対応する角度が０度付近の一部の断層画像データとのそれぞれについて、ｋ個のミニバッチ領域に対応するデータを切り出す処理を行ってもよい。ミニバッチ領域ｔ（１）〜ｔ（ｋ）は、それぞれが、スライス方向に直交する方向の情報を全て包含するように、複数の投影データをスライス平面内で分割した空間領域である。また、ミニバッチ領域ｒ（１）〜ｒ（ｋ）は、スライス平面においてミニバッチ領域ｔ（１）〜ｔ（ｋ）に対応する位置にある領域である。また、出力機能２３はトレーニング出力データを生成するために、同一被検体のＸ線撮影に対応する２次元画像データについても同様に、ミニバッチ領域ｏ（１）〜ｏ（ｋ）に対応するデータを切り出す処理を行う。ミニバッチ領域ｏ（１）〜ｏ（ｋ）は、スライス平面においてミニバッチ領域ｔ（１）〜ｔ（ｋ）に対応する位置にある領域である。
第６の実施形態に係る学習機能２４は、ミニバッチ領域のそれぞれについて、学習処理を行う。図１５に示すように、第６の実施形態におけるニューラルネットワーク３１は、被検体のトモシンセシス撮影により得られた複数の投影データにおけるミニバッチ領域ｔ（ｎ）が入力される部分と、複数の投影データのうち２次元画像データに対応する角度が０度付近の一部の投影データにおけるミニバッチ領域ｒ（ｎ）が入力される部分とで入力層が分かれており、任意の層までは別々に情報が伝播するモデルである。図中、ｎは１〜ｋであり、ミニバッチ領域の識別子である。ニューラルネットワーク３１は、任意の層において、両方向から伝播する情報が結合され、以降は、結合データから例えば全結合で情報が伝播するようになっている。学習機能２４は、学習用データセットが入力されるごとに、トレーニング入力データ（ミニバッチ領域ｔ（ｎ）およびミニバッチ領域ｒ（ｎ）のデータ）をニューラルネットワーク３１で処理した結果がトレーニング出力データ（ミニバッチ領域ｏ（ｎ）のデータ）に近づくようにニューラルネットワーク３１のパラメータデータを更新していく、いわゆる学習を行う。ニューラルネットワーク３１のパラメータデータは、例えば、ＣＮＮの誤差逆伝播等の手法によって調整され、更新される。学習機能２４は、パラメータデータの変化割合が閾値以内に収束すると、学習が終了したと判断する。学習機能２４は、学習後のパラメータデータに基づいて、例えば、ＤＮＮの形態を有する学習済みモデル３２を生成する。なお、学習済みモデル３２は、記憶回路１３に記憶され、運用時に記憶回路１３から読み出される。また、学習済みモデル３２は、ＡＳＩＣ、ＦＰＧＡなどの集積回路によって構築されてもよい。
【００６７】
以上のように構成された医用画像処理装置１０について、運用時における動作を以下に説明する。
【００６８】
図１６に示すように、画像生成機能２２は、被検体のトモシンセシス撮影により得られた複数の投影データにおけるミニバッチ領域ｔ（ｎ）のデータと、複数の投影データのうち２次元画像データに対応する角度が０度付近の一部の投影データにおけるミニバッチ領域ｒ（ｎ）のデータとを学習済みモデル２２に入力することで、当該被検体の２次元画像データのミニバッチ領域ｏ（ｎ）の部分を生成する。
【００６９】
以上、第６の実施形態によれば、、第１〜第３の実施形態と同様の効果を奏するのに加えて、学習データの数を増やすことができ、更に、プロセッサの処理負担を軽減することができる。
【００７０】
また、第６の実施形態によれば、画像における特徴部分が、周辺領域との関係で隠蔽されてしまうのを抑制することができる。
【００７１】
（第７の実施形態）
以下、第７の実施形態について説明する。第７の実施形態は、上記説明した第１〜第６の実施形態の医用画像処理装置を、Ｘ線診断装置に内蔵させたものである。以下の説明では、代表して第１の実施形態の医用画像処理装置１がＸ線診断装置に内蔵された例について説明する。
【００７２】
図１７は、第７の実施形態に係る医用画像処理を含むＸ線診断装置１００Ｆの構成の一例を示す図である。Ｘ線診断装置１００Ｆは、例えば、スタンド１１０と、Ｘ線管１２０と、高電圧発生器１２２と、撮影台１３０と、圧迫板１３２と、昇降駆動回路１３４と、Ｘ線検出器１４０と、信号処理回路１４２と、入力装置１５０と、表示装置１６０と、処理回路２００とを備える。
【００７３】
スタンド１１０は、撮影台１３０と、圧迫板１３２と、Ｘ線検出器１４０及び信号処理回路１４２とを、上下方向に（図中、Ｚ方向に）移動可能に支持する。
【００７４】
Ｘ線管１２０は、高電圧発生器１２２から供給される高電圧を用いて、Ｘ線を発生させる。Ｘ線管１２０により発生させられたＸ線は、被検体Ｐの乳房の位置（照射目標位置）に照射される。Ｘ線管１２０は、照射目標位置に対する照射角度を変化させられるように、図中、Ｙ軸回りに円弧を描くように移動可能である。高電圧発生器１２２は、Ｘ線管１２０に接続され、処理回路２００による制御に従って、Ｘ線を発生するための高電圧をＸ線管１２０に供給する。
【００７５】
撮影台１３０は、被検体Ｐの乳房を支持する台である。撮影台１３０は、被検体Ｐの乳房が載せられる支持面を有する。圧迫板１３２は、撮影台１３０の指示面に対向するように、撮影台１３０上方に（図中、＋Ｚ方向に）取り付けられている。圧迫板１３２は、撮影台１３０の指示面に対向する状態を維持したまま、撮影台１３０に対して離間または接近する方向に（図中、Ｚ方向に）移動可能である。
【００７６】
撮影台１３０と圧迫板１３２との間には、被検体Ｐの乳房が載置される。このため、圧迫板１３２が撮影台１３０に接近する方向に移動すると、被検体Ｐの乳房が圧迫される。これによって、被検体Ｐの乳房が薄く押し広げられ、乳腺の重なりが減少することで、より鮮明な画像を得ることができる。
【００７７】
昇降駆動回路１３４は、撮影台１３０に接続され、処理回路２００による制御に従って、撮影台１３０を上下方向に移動させる。また、昇降駆動回路１３４は、圧迫板１３２に接続され、処理回路２００による制御に従って、圧迫板１３２を上下方向に移動させる。
【００７８】
Ｘ線診断装置１００Ｆは、撮影台１３０及び圧迫板１３２の位置を、ＭＬＯ（Mediolateral-Oblique：内外斜位）方向やＣＣ（Cranio-Caudal：頭尾）方向で固定し、被検体Ｐの乳房への照射角度を一定に保った状態でＸ線を照射して収集された投影データに基づいて、ＭＬＯ画像やＣＣ画像等のマンモグラフィ画像を生成することができる。
【００７９】
Ｘ線検出器１４０は、例えば、ＦＰＤ（Flat Panel Detector）である。Ｘ線検出器１４０は、被検体Ｐを透過したＸ線を検出して電気信号に変換する。Ｘ線検出器１４０は、例えば、ＴＦＴ（Thin Film Transisor）センサ画素を有する。Ｘ線検出器１４０は、検出結果である電気信号を内部に保持する。信号処理回路１４２は、Ｘ線検出器１４０によって変換された電気信号を読み出し、電気信号に基づいて投影データを生成し、記憶回路１７０に格納する。
【００８０】
入力装置１５０は、Ｘ線診断装置１００Ｆを操作するオペレータによる入力操作を受け付ける。例えば、入力装置１５０は、マウス、キーボード、ボタン、トラックボール、ジョイスティック、タッチパネルなどを有する。入力装置１５０は、入力操作の内容を電気信号に変換して処理回路２００に出力する。
【００８１】
表示装置１６０は、処理回路２００によって生成された各種画像を表示する。各種画像には、オペレータのタッチ操作を受け付けるためのＧＵＩ（Graphical User Interface）画像や、トモシンセシスから生成される断面画像、２次元画像などが含まれる。
【００８２】
記憶回路１７０は、例えば、ＨＤＤやフラッシュメモリ、ＲＯＭなどの非一時的記憶媒体を有する記憶回路と、ＲＡＭやレジスタなどの記憶回路とを含む。記憶回路１７０は、投影データやトモシンセシス、２次元画像の、処理回路２００が実行するプログラム、学習済モデル１７２などを記憶する。なお、学習済モデル１７２はプログラムに埋め込まれる形で記述されてもよい。
【００８３】
処理回路２００は、例えば、システム制御機能２１０と、画像取得機能２２０と、画像再構成機能２３０と、画像生成機能２４０と、表示制御機能２５０とを備える。処理回路２００は、例えば、ハードウェアプロセッサが記憶回路１７０に記憶されたプログラムを実行することにより、これらの機能を実現するものである。ハードウェアプロセッサに関しては前述の通りである。
【００８４】
システム制御機能２１０は、Ｘ線診断装置１００Ｆの全体を制御する。例えば、システム制御機能２１０は、高電圧発生器１２２や昇降駆動回路１３４、Ｘ線検出器１４０などに対する制御信号を生成し、これらに出力する。
【００８５】
システム制御機能２１０による制御内容の一例について説明する。図１８は、Ｘ線診断装置１００Ｆによるトモシンセシス撮影の動作の一例を示す図である。例えば、撮影段階において、Ｘ線管１２０は、Ｘ線検出器１４０の検出面のＸ方向に関する中心点４０Ａを通る、検出面に対する法線ＣＬ上にある位置（中立位置）を中心に、マイナス７．５度からプラス７．５度の範囲内で円弧を描いて移動するように、図示しない駆動機構によって駆動される。前述した「角度がゼロ度」とは、Ｘ線管１２０が中立位置にある状態を指している。この過程で、Ｘ線検出器１４０および信号処理回路１４２は、Ｘ線管１２０の中心点４０Ａに対する角度幅が均等になるように、１７枚の投影データを生成する。この１７枚の投影データには、例えば、Ｘ線管１２０が法線ＣＬ上にある場合に生成される投影データが含まれる。このような動作によって、トモシンセシスを生成するための複数の投影データが取得される。
【００８６】
画像取得機能２２０は、記憶回路１７０から各種画像を読み出し、他の機能に提供する。例えば、画像取得機能２２０は、信号処理回路１４２によって記憶回路１７０に格納された投影データに対し、対数変換処理、オフセット補正処理、感度補正処理、ビームハードニング補正処理の処理を行なって、補正済の投影データを他の機能に提供する。
【００８７】
画像再構成機能２３０は、画像取得機能２２０により補正処理が行われた補正済の投影データに対して再構成処理を行い、トモシンセシスを生成する。例えば、画像再構成機能２３０は、例えば、複数の投影データに対して、逆ラドン変換に基づく画像逆投影処理を行うことで、トモシンセシスを生成する。画像逆投影処理の具体例としては、フィルタ補正逆投影法、逐次近似法（期待値最大化）、シフト加算法などが知られており、その具体的手法に関してＸ線診断装置１００Ｆは、任意の手法を採用することができる。
【００８８】
画像生成機能２４０は、被検体のトモシンセシス撮影に対応する医用画像データを学習済モデル１７２に入力することで、２次元画像を生成する。
【００８９】
表示制御機能２５０は、画像生成機能２４０によって生成された２次元画像などを表示装置１６０に表示させるための画像信号を生成し、表示装置１６０に出力する。
【００９０】
以上説明した第７の実施形態によれば、Ｘ線診断装置を第１〜第６の実施形態のいずれかの医用画像処理装置として動作させることができる。
【００９１】
（その他）
上記実施形態では、Ｘ線診断装置としてマンモグラフィ装置を例に説明したが、Ｘ線ＴＶ装置に適用する場合、Ｘ線ＴＶ装置において行われるトモシンセシス撮影で得られたデータから２次元画像（０度のＸ線撮影により得られるＸ線画像に相当する画像）を生成するようにしてもよい。
【００９２】
上記説明した実施形態は、以下のように表現することができる。
プログラムを記憶した記憶装置と、
ハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサは、前記プログラムを実行することにより、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得し、前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデルに対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する、
ように構成されている、医用画像処理装置。
【００９３】
以上説明した少なくともひとつの実施形態によれば、被検体のトモシンセシス撮影に対応する医用画像データを第１の医用画像データとして取得する画像取得部２１と、前記第１の医用画像データに基づいて２次元画像データである第２の医用画像データを生成する学習済みモデル３２に対して、前記第１の医用画像データを入力することで、前記被検体の第２の医用画像データを生成する画像生成部２２と、を持つことにより、より視認性の良い２次元画像を生成することができる。
【００９４】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【００９５】
１０  医用画像処理装置
１０  入力回路
１２  ディスプレイ
１３  記憶回路
１４  ネットワーク接続回路
１５  処理回路
２１  画像取得機能
２２  画像生成機能
２３  出力機能
２４  学習機能
２５  抽出機能
２６  強調機能
１００、１００Ｆ  Ｘ線診断装置
１２０  Ｘ線管
１４０  Ｘ線検出器
１４２  信号処理回路
１７０  記憶回路
１７２  学習済モデル
２００  処理回路
２２０  画像取得機能
２３０  画像再構成機能
２４０  画像生成機能
【図１】
2020141867.tif 000003
【図２】
2020141867.tif 000004
【図３】
2020141867.tif 000005
【図４】
2020141867.tif 000006
【図５】
2020141867.tif 000007
【図６】
2020141867.tif 000008
【図７】
2020141867.tif 000009
【図８】
2020141867.tif 000010
【図９】
2020141867.tif 000011
【図１０】
2020141867.tif 000012
【図１１】
2020141867.tif 000013
【図１２】
2020141867.tif 000014
【図１３】
2020141867.tif 000015
【図１４】
2020141867.tif 000016
【図１５】
2020141867.tif 000017
【図１６】
2020141867.tif 000018
【図１７】
2020141867.tif 000019
【図１８】
2020141867.tif 000020