(57)【要約】【課題】読影対象の医用画像と類似する類似医用画像の検索の情報端末を改善する。【解決手段】表示画面は、最上位階層の画像所見名の１階層下である複数の第１の区分階層の画像所見名毎に、複数の類似医用画像を区分して表示されており、複数の第１の区分階層の画像所見名のいずれかの選択を検知した場合、選択された第１の区分階層の画像所見名が、類似医用画像の付加情報に設定されている第１階層である場合、選択された第１の区分階層の画像所見名と対応付けられている第１階層の画像所見名に設定されている全ての病名を含む表示画面をディスプレイに表示させ、選択された第１の区分階層の画像所見名の１階層下の階層が、第１階層より上の第２の区分階層の画像所見名である場合、選択された第１の区分階層の画像所見名と対応付けられている複数の類似医用画像を、第２の区分階層の画像所見名で区分して表示されている表示画面をディスプレイに表示させる。【選択図】図２５
2018130408.tif 000002
【特許請求の範囲】
【請求項１】
医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、
（ａ）読影対象の医用画像と所定以上の類似度を有する複数の類似医用画像を、前記症例検索システムから受信させ、
前記複数の類似医用画像はそれぞれ付加情報を有し、
前記類似医用画像の付加情報には、病名と第１階層の画像所見名とが設定されており、
前記第１階層の画像所見名は、少なくとも１つの前記第１階層よりも上位の階層の画像所見名と対応付けられており、
前記第１階層よりも上位の階層の画像所見名は、最上位階層の画像所見名を含み、
前記最上位階層の画像所見名は、前記複数の類似医用画像が有する全ての前記第１階層の画像所見名が対応付けられている１つの画像所見名であり、
（ｂ）前記複数の類似医用画像を含む表示画面を前記ディスプレイに表示させ、
前記表示画面は、前記最上位階層の画像所見名の１階層下である複数の第１の区分階層の画像所見名毎に、前記複数の類似医用画像を区分して表示されており、
（ｃ）前記複数の第１の区分階層の画像所見名のいずれかの選択を検知した場合、
（i）前記選択された第１の区分階層の画像所見名が、前記類似医用画像の付加情報に設定されている前記第１階層である場合には、前記選択された第１の区分階層の画像所見名と対応付けられている前記第１階層の画像所見名に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させ
（ii）前記選択された第１の区分階層の画像所見名の１階層下の階層が、前記第１階層より上の階層である第２の区分階層の画像所見名である場合、前記選択された第１の区分階層の画像所見名と対応付けられている複数の類似医用画像を、前記第２の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させる
制御方法。
【請求項２】
前記工程（ｂ）において、前記複数の第１の区分階層の画像所見名が選択可能に表示されており、
前記工程（ｃ）において、前記複数の第１の区分階層の画像所見名のいずれかの選択を検知する、
請求項１に記載の制御方法。
【請求項３】
前記工程（ｂ）において、前記表示画面には、ユーザの病名表示の要求を受け付ける表示を含み、
さらに、
（ｄ）前記ユーザの病名表示の要求を検知した場合、前記ユーザの病名表示の要求を検知時の前記表示画面に表示されている全ての画像所見名が対応付けられている前記第１階層の画像所見名に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させる、
請求項１に記載の制御方法。
【請求項４】
前記工程（ｂ）において、
前記表示画面には、前記複数の医用画像から選択される所定数の医用画像が表示されており、
前記複数の第１の区分階層の画像所見名のそれぞれに対応する全ての医用画像から、画像特徴空間において、所定以上の分散を有する複数の医用画像が選択されて前記表示画面に表示されている、
請求項１に記載の制御方法。
【請求項５】
前記工程（ｂ）において、前記複数の医用画像は、前記読影対象の医用画像との画像特徴空間における類似度の順番であり、かつ、複数の第１の区分階層の画像所見名毎に区分して表示されている、
請求項１に記載の制御方法。
【請求項６】
前記工程（ｂ）において、前記複数の類似医用画像に、前記第１の画像所見名が前記複数の第１の区分階層の画像所見名から少なくとも２つが選択される組み合わせに対応付けられている類似医用画像を所定以上の枚数含む場合には、前記複数の第１の区分階層の画像所見名の組み合わせも区分して表示されている、
請求項１に記載の制御方法。
【請求項７】
類似医用画像の付加情報には、さらに、少なくとも１つ以上の臨床情報が設定されており、
前記工程（ｂ）において、前記複数の類似医用画像に、前記第１階層の画像所見と前記臨床情報との組み合わせを有する付加情報を有する類似医用画像が所定枚数以上含まれている場合、前記第１階層の画像所見と前記臨床情報との組み合わせも区分して表示されている、
請求項１に記載の制御方法。
【請求項８】
類似医用画像の付加情報には、さらに、少なくとも１つ以上の病気の進行度情報が設定されており、
前記工程（ｂ）において、前記複数の類似医用画像に、前記第１階層の画像所見と前記病気の進行度情報との組み合わせを有する付加情報を有する類似医用画像が所定枚数以上含まれている場合、前記第１階層の画像所見と前記臨床情報との組み合わせも区分して表示されている、
請求項１に記載の制御方法。
【請求項９】
さらに、
（ｄ）前記工程（ｃ）の（ii）において、前記第２の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させた後、前記第２の区分階層の画像所見名の選択を検知した場合、
（iii）前記選択された第２の区分階層の画像所見名が、前記類似医用画像の付加情報に設定されている前記第１階層である場合には、前記選択された第２の区分階層の画像所見名と対応付けられている前記第１階層の画像所見名に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させ
（ii）前記選択された第２の区分階層の画像所見名の１階層下の階層が、前記第１階層以上の階層である第３の区分階層の画像所見名である場合、前記選択された第２の区分階層の画像所見名と対応付けられている複数の類似医用画像を、前記第３の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させる、
請求項１に記載の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末の制御方法に関する。
【背景技術】
【０００２】
近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）等の医用画像装置が発達および普及している。これらＣＴ又はＭＲＩなどは、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１、２に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。
【０００３】
特許文献１には、疾患別の症例ＤＢから、代表的な症例画像を検索し、検索結果として、疾患別の症例画像を表示する技術が開示されている。
【０００４】
特許文献２には、特定の症例データ（誤診、名医による読影、詳細表示の要求回数が多い、など）が高い頻度で検索されるように追記学習する技術が開示されている。
【０００５】
特許文献３には、医用情報管理システムと症例検索システムとを連携させ、両システムの違いを意識せず使用できる技術が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００８−２５７２９２号公報
【特許文献２】特開２００７−２７９９４２号公報
【特許文献３】国際公開第２０１５／１５５８０７号
【非特許文献】
【０００７】
【非特許文献１】根本，清水，萩原，小畑，縄野，“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”，電子情報通信学会論文誌Ｄ−ＩＩ，Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ，Ｎｏ．２，ｐｐ．４１６−４２６，２００５年２月
【発明の概要】
【発明が解決しようとする課題】
【０００８】
特許文献３は、類似症例のサムネイル画像を多数（例えば、図６では１画面に２０個）表示する技術を開示しているが、特許文献１〜３には、多数の類似症例検索結果を所見別に分類して表示することで多数の類似症例画像の中から疾患鑑別に参考となる類似症例を取捨選択する技術については開示されていなかった。
【課題を解決するための手段】
【０００９】
本開示の一態様は、医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、（ａ）読影対象の医用画像と所定以上の類似度を有する複数の類似医用画像を、前記症例検索システムから受信させ、前記複数の類似医用画像はそれぞれ付加情報を有し、前記類似医用画像の付加情報には、病名と第１階層の画像所見名とが設定されており、前記第１階層の画像所見名は、少なくとも１つの前記第１階層よりも上位の階層の画像所見名と対応付けられており、前記第１階層よりも上位の階層の画像所見名は、最上位階層の画像所見名を含み、前記最上位階層の画像所見名は、前記複数の類似医用画像が有する全ての前記第１階層の画像所見名が対応付けられている１つの画像所見名であり、（ｂ）前記複数の類似医用画像を含む表示画面を前記ディスプレイに表示させ、前記表示画面は、前記最上位階層の画像所見名の１階層下である複数の第１の区分階層の画像所見名毎に、前記複数の類似医用画像を区分して表示されており、（ｃ）前記複数の第１の区分階層の画像所見名のいずれかの選択を検知した場合、（i）前記選択された第１の区分階層の画像所見名が、前記類似医用画像の付加情報に設定されている前記第１階層である場合、前記選択された第１の区分階層の画像所見名と対応付けられている前記第１階層の画像所見名を含む付加情報に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させ、（ii）前記選択された第１の区分階層の画像所見名の１階層下の階層が、前記第１階層より上の階層である第２の区分階層の画像所見名である場合、前記選択された第１の区分階層の画像所見名と対応付けられている複数の類似医用画像を、前記第２の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させる。
【発明の効果】
【００１０】
上記態様により、多数の類似症例検索結果を所見別に分類して表示することで、多数の類似症例画像の中から疾患鑑別を取捨選択するための支援が可能になる。
【図面の簡単な説明】
【００１１】
【図１】実施の形態１における情報端末が適用された病院情報システムの全体構成図である。
【図２】情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。
【図３】２台のディスプレイの外観図である。
【図４】情報端末の実装形態の構成例を示す図である。
【図５】情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。
【図６】情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。
【図７】症例表示領域に表示されるある１つの類似症例の表示領域を取り出して示した図である。
【図８】病名リスト表示領域の拡大図である。
【図９】「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。
【図１０】患者情報のデータ構成を示す図である。
【図１１】図１０に示す患者情報に登録された検査情報のデータ構成を示す図である。
【図１２】医用画像データベースのデータ構成を示す図である。
【図１３】診断レポートのデータ構成を示す図である。
【図１４】類似症例データのデータ構成を示す図である。
【図１５】スライス画像に設定された関心領域を模式的に示した図である。
【図１６】疾患体系のデータ構成を示す図である。
【図１７】情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムに対して類似症例検索の要求を行い、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
【図１８】検査リストの画面図である。
【図１９】検査が選択された後の検査リストの画面図である。
【図２０】ユーザによりシリーズが選択された際に医用画像ビューワに表示されるスライス画像を示した図である。
【図２１】症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を情報端末に返し、検索結果の初期画面を表示する処理を示すシーケンス図である。
【図２２】画像所見体系の一例を示す図である。
【図２３】検索結果の初期画面を生成する処理のフローチャートである。
【図２４】情報端末が検索結果として取得した全症例の画像所見毎の症例数を、図２２の画像所見体系と併せて示した図である。
【図２５】情報端末において検索結果を表示する初期画面について示した図である。
【図２６】情報端末が検索結果として取得した全症例の画像所見毎の症例数を、図２２の画像所見体系と併せて示した図の別の例である。
【図２７】情報端末において検索結果を表示する初期画面について示した図の別の例である。
【図２８】病名リストとして生成されたテーブル情報について示した図である。
【図２９】病名リストの表示の一例である。
【図３０】病名リストの表示の一例である。
【図３１】病名リストの表示の一例である。
【図３２】情報端末において検索結果を、画像所見で絞り込み表示した画面について示した図である。
【図３３】情報端末において検索結果を、画像所見で絞り込み表示した画面について示した図である。
【図３４】情報端末において、病名リストを強調表示した画面について示した図である。
【図３５】情報端末において、病名リストが初期表示されない画面について示した図である。
【図３６】情報端末において、病名リストが初期表示されない画面で病名リストが表示された画面を示した図である。
【図３７】情報端末において、病名リストが初期表示されない場合に、病名リストを表示させるボタンを設けた画面について示した図である。
【図３８】関心領域のなかに複数種類の病変を含む例を示した図である。
【図３９】実施の形態２における、類似症例データのデータ構成を示す図である。
【図４０】実施の形態２における、検索結果の初期画面を生成する処理のフローチャートである。
【図４１】実施の形態２における、画像所見名の表示アイコン兼選択ボタンの表示例である。
【図４２】実施の形態２における、画像所見名の表示アイコン兼選択ボタンの表示例である。
【図４３】実施の形態２における、画像所見名の表示アイコン兼選択ボタンの選択時の動作例である。
【図４４】実施の形態２における、画像所見名の表示アイコン兼選択ボタンの選択時の動作例である。
【図４５】実施の形態３における、類似症例データのデータ構成の説明図である。
【図４６】実施の形態３における、画像所見と臨床情報との表示例を示す説明図である。
【発明を実施するための形態】
【００１２】
（本発明の基礎となる知見）
最初に、本発明の基礎となる知見を説明する。特許文献３に開示された検索結果表示画面を用いて、読影対象症例の類似症例を多数提示し、画像診断結果に与える影響を検証する実験を行った。
【００１３】
実験方法は、以下の通りであった。被験者は、放射線科専門医（以下、「専門医」）５名と前期研修医または後期研修医（放射線科）４名（以下、「研修医」）であった。被験者は、まず、診断対象画像（計３問）に対し参考情報無しで画像診断を行う。
【００１４】
画像診断の結果として、読影レポートに画像所見と診断病名とを記載する。その後、特許文献３に開示された検索結果表示画面を用い、読影対象症例の類似症例と確定診断病名の組を多数個、被験者に提示する。被験者は、類似症例画像と確定診断病名の多数の組を参照して、読影レポートを修正することができる。また、被験者と異なる放射線科専門医２名により、問題毎に、挙げるべき画像所見（以下、「適切所見」）、及び、画像診断病名として挙げるべき疾患（以下、「適切疾患」）をリストアップした。
【００１５】
その実験で次のような結果を得た。類似症例を参照した後、読影レポートにおける画像所見は変化せず、読影レポートにおける診断病名は専門医で１問当たり０．７個、研修医で同１．３個追加されていた。この結果から、類似症例の効果として診断病名の想起支援効果があることが分かる。また、追加疾患のうち「適切疾患」であった割合は、専門医で８２％、研修医で４４％であった。この結果からは、多数表示された類似症例サムネイル画像の中から診断対象症例の診断として読影レポートに追加記載する疾患を、研修医は専門医ほど取捨選択できないということが推定される。さらに、読影レポートに記載した画像所見のうち「適切所見」であった割合は、専門医で６４％、研修医で３５％であった。なお、問題および被験者別の、「適切所見」率と、追加疾患のうちの「適切所見」率の相関係数は０．６２であった。このことから、所見を読み取る力と多数の類似症例画像の中から鑑別疾患を取捨選択する能力には相関があると考えられる。このような実験とその後の考察を経て、多数の類似症例検索結果を所見別に分類して表示することで多数の類似症例画像の中から鑑別疾患を取捨選択の支援を行う本発明について着想した。
【００１６】
本開示の一態様は、医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、（ａ）読影対象の医用画像と所定以上の類似度を有する複数の類似医用画像を、前記症例検索システムから受信させ、前記複数の類似医用画像はそれぞれ付加情報を有し、前記類似医用画像の付加情報には、病名と第１階層の画像所見名とが設定されており、前記第１階層の画像所見名は、少なくとも１つの前記第１階層よりも上位の階層の画像所見名と対応付けられており、前記第１階層よりも上位の階層の画像所見名は、最上位階層の画像所見名を含み、前記最上位階層の画像所見名は、前記複数の類似医用画像が有する全ての前記第１階層の画像所見名が対応付けられている１つの画像所見名であり、（ｂ）前記複数の類似医用画像を含む表示画面を前記ディスプレイに表示させ、前記表示画面は、前記最上位階層の画像所見名の１階層下である複数の第１の区分階層の画像所見名毎に、前記複数の類似医用画像を区分して表示されており、（ｃ）前記複数の第１の区分階層の画像所見名のいずれかの選択を検知した場合、（i）前記選択された第１の区分階層の画像所見名が、前記類似医用画像の付加情報に設定されている前記第１階層である場合、前記選択された第１の区分階層の画像所見名と対応付けられている前記第１階層の画像所見名を含む付加情報に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させ、（ii）前記選択された第１の区分階層の画像所見名の１階層下の階層が、前記第１階層より上の階層である第２の区分階層の画像所見名である場合、前記選択された第１の区分階層の画像所見名と対応付けられている複数の類似医用画像を、前記第２の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させる。
【００１７】
本様態によると、医用画像データベースを参照して医用画像を検索する症例検索システムから受信した複数の類似医用画像を、前記最上位階層の画像所見名の１階層下である複数の第１の区分階層の画像所見名毎に、前記複数の類似医用画像を区分して表示する。このように予め対応付けられている画像所見名を基に区分することで、単純に類似度順に類似医用画像を並べて表示させる方法などと比較して、ユーザが画像診断の熟練者でなくても、類似医用画像の画像所見を把握し易くなる効果が期待できる。
【００１８】
また、上記態様において、例えば、前記工程（ｂ）において、前記複数の第１の区分階層の画像所見名が選択可能に表示されており、前記工程（ｃ）において、前記複数の第１の区分階層の画像所見名のいずれかの選択を検知するようにしてもよい。これにより、画像所見名が表示と選択ボタンを兼ねることとなり、ユーザの操作や視線移動の負担を軽減する効果を期待できる。
【００１９】
また、上記態様において、例えば、前記工程（ｂ）において、前記表示画面には、ユーザの病名表示の要求を受け付ける表示を含み、さらに、（ｄ）前記ユーザの病名表示の要求を検知した場合、前記ユーザの病名表示の要求を検知時の前記表示画面に表示されている全ての画像所見名が対応付けられている前記第１階層の画像所見名に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させるようにしてもよい。これにより、類似医用画像が適切な画像所見に絞り込まれている状態である場合などは、表示画面に表示されている画像所見が前記第１階層の画像所見まで達していなくても、ユーザが病名リストを見たいタイミングで、病名を含む表示画面を確認することができる。
【００２０】
また、上記態様において、例えば、前記工程（ｂ）において、前記表示画面には、前記複数の医用画像から選択される所定数の医用画像が表示されており、前記複数の第１の区分階層の画像所見名のそれぞれに対応する全ての医用画像から、画像特徴空間において、所定以上の分散を有する複数の医用画像が選択されて前記表示画面に表示されているようにしてもよい。これにより、同一の画像所見名が対応づけられている医用画像群のうち、画像の多様なバリエーションを見せることで、ユーザが当該画像所見の特徴を理解し易くなる。
【００２１】
また、上記態様において、例えば、前記工程（ｂ）において、前記複数の医用画像は、前記読影対象の医用画像との画像特徴空間における類似度の順番であり、かつ、複数の第１の区分階層の画像所見名毎に区分して表示されているようにしてもよい。これにより、同一の画像所見名が対応づけられている医用画像群のうち、検索クエリ画像と類似度の高い画像が表示されるので、他の画像所見と区別し易くなるため画像所見を選択し易くなる。
【００２２】
また、上記態様において、例えば、前記工程（ｂ）において、前記複数の類似医用画像に、前記第１の画像所見名が前記複数の第１の区分階層の画像所見名から少なくとも２つが選択される組み合わせに対応付けられている類似医用画像を所定以上の枚数含む場合には、前記複数の第１の区分階層の画像所見名の組み合わせも区分して表示されているようにしてもよい。複数の画像所見名が対応付けられている類似医用画像を一覧で確認することで、複数の画像所見が対応づけられている類似医用画像のバリエーションをユーザが把握し易くなる。
【００２３】
また、上記態様において、例えば、類似医用画像の付加情報には、さらに、少なくとも１つ以上の臨床情報が設定されており、前記工程（ｂ）において、前記複数の類似医用画像に、前記第１階層の画像所見と前記臨床情報との組み合わせを有する付加情報を有する類似医用画像が所定枚数以上含まれている場合、前記第１階層の画像所見と前記臨床情報との組み合わせも区分して表示されているようにしてもよい。画像所見と臨床情報の組み合わせが一致する類似医用画像を一覧で確認することで、診断すべき疾患に近い類似医用画像をユーザが把握し易くなる。
【００２４】
また、上記態様において、例えば、類似医用画像の付加情報には、さらに、少なくとも１つ以上の病気の進行度情報が設定されており、前記工程（ｂ）において、前記複数の類似医用画像に、前記第１階層の画像所見と前記病気の進行度情報との組み合わせを有する付加情報を有する類似医用画像が所定枚数以上含まれている場合、前記第１階層の画像所見と前記進行度情報との組み合わせも区分して表示されているようにしてもよい。画像所見と進行度情報の組み合わせが一致する類似医用画像を一覧で確認することで、診断すべき疾患に近い類似医用画像をユーザが把握し易くなる。
【００２５】
また、上記態様において、例えば、さらに、（ｄ）前記工程（ｃ）の（ii）において、前記第２の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させた後、前記第２の区分階層の画像所見名の選択を検知した場合、（iii）前記選択された第２の区分階層の画像所見名が、前記類似医用画像の付加情報に設定されている前記第１階層である場合には、前記選択された第２の区分階層の画像所見名と対応付けられている前記第１階層の画像所見名に設定されている全ての病名を含む表示画面を前記ディスプレイに表示させ、（ii）前記選択された第２の区分階層の画像所見名の１階層下の階層が、前記第１階層以上の階層である第３の区分階層の画像所見名である場合、前記選択された第２の区分階層の画像所見名と対応付けられている複数の類似医用画像を、前記第３の区分階層の画像所見名で区分して表示されている表示画面を前記ディスプレイに表示させるようにしてもよい。このように画像所見の階層を順に辿り下位階層である詳細な画像所見で類似医用画像を区分して表示することで、経験の少ないユーザであっても、詳細な画像所見まで類似医用画像を絞り込んで確認することができる。
【００２６】
（実施の形態１）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号を用いる。
【００２７】
（全体構成）
図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、症例検索システム３００を備えている。なお、医用情報管理システム２００や症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバなどの上で動作するソフトウェアであってもよい。
【００２８】
情報端末１００としては、パーソナルコンピュータやタブレット端末などの情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍｓ）や電子カルテシステムなどが採用される。
【００２９】
図２は、情報端末１００、医用情報管理システム２００、および症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、病名リスト管理部１０６、通信制御部１０７を備える。
【００３０】
ディスプレイ１０１は、例えば、液晶モニタにより構成され、ユーザが画像診断を行う対象の医用画像及びカルテ情報や、画像診断の結果を記入するレポート入力画面などを表示する。なお、ディスプレイ１０１は最低１台必要だが、通常、画像診断においては２〜３台が用いられる。本実施の形態では２台を用いる例を示し、それぞれ第１ディスプレイ１０１ａ、第２ディスプレイ１０１ｂとする。また、第１ディスプレイ１０１ａの表示画面を第１表示画面、第２ディスプレイ１０１ｂの表示画面を第２表示画面と呼ぶ。２台構成の様子を図３に示す。図３では、第１ディスプレイ１０１ａには、医用画像ビューワの画面が表示されており、第２ディスプレイ１０１ｂに症例検索システム３００の画面が表示されている。
【００３１】
操作部１０２は、例えば、キーボードやマウスにより構成され、ディスプレイに表示する医用画像やカルテ情報における表示内容の選択、画像診断結果の入力など、情報端末１００に種々の情報を入力することができる。
【００３２】
入力制御部１０３は、操作部１０２へのユーザの操作入力を認識すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２よりマウス座標を受け取り、表示制御部１０４で生成されたＧＵＩの座標と比較することにより、ＧＵＩにおけるボタンオブジェクトが選択された状態などを判定し、他の構成要素に操作内容を通知する。
【００３３】
表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。
【００３４】
ＯＩ管理部１０５は、類似症例検索を行う際の関心領域（Ｒｅｇｉｏｎ  Ｏｆ  Ｉｎｔｅｒｅｓｔ）の管理を行う。
【００３５】
名リスト管理部１０６は、類似症例サムネイル表示領域７１０に表示された類似症例サムネイルの病名リストの管理を行う。
【００３６】
通信制御部１０７は、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１０７は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
【００３７】
図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、通信制御部２０６を備える。
【００３８】
患者情報蓄積部２０１は、患者の性別・年齢・既往歴などの臨床情報、血液検査などの検査情報を蓄積する。
【００３９】
患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された情報の入力・更新・出力について管理する。医用画像データ蓄積部２０３は、患者の検査画像を蓄積する。
【００４０】
医用画像データ管理部２０４は、患者の検査画像を表示する。
【００４１】
診断レポート管理部２０５は、患者の診断結果であるレポートの入力および表示の管理を行う。
【００４２】
通信制御部２０６は、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
【００４３】
図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、類似症例検索部３０３、画像所見体系格納部３０４を備える。
【００４４】
類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている症例のうち、類似症例検索の対象データとして選定された複数の症例について、それぞれから抽出された画像特徴、それぞれに付与された画像所見、それぞれのサムネイル画像などを蓄積する。
【００４５】
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信されたスライス画像のＩＤ（スライスＩＤ）およびＲＯＩ情報と、医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積された前記スライスＩＤに対応する医用画像データを基にして、画像特徴を抽出する。
【００４６】
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された複数の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。
【００４７】
画像所見体系格納部３０４は、予め定義された画像所見のツリー構造状の体系を格納する。なお、類似症例データ蓄積部３０１に蓄積された症例に付与されている画像所見は、この体系の中から付与される。この体系については後ほど説明する。
【００４８】
信制御部３０５は、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。
【００４９】
図４は、情報端末１００の実装形態の構成例を示す図である。図４に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。
【００５０】
アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。ＯＳ５０２は、携帯情報端末の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、病名リスト管理部１０６、通信制御部１０７の機能が実現される。
【００５１】
但し、本実施の形態では、情報端末１００は、アプリケーション５０１のみ単独で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。
【００５２】
図５、図６は、情報端末１００にて類似症例検索を起動した直後の画面構成を示す図である。なお、図５はディスプレイ１０１ａ、図６はディスプレイ１０１ｂの画面をそれぞれ表す。
【００５３】
図５に示すように、ディスプレイ１０１ａに表示された情報端末１００の基本画面は、医用画像ビューワ６１０で構成されている。医用画像は通常ＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  ＣＯｍｍｕｎｉｃａｔｉｏｎ  ｉｎ  Ｍｅｄｉｃｉｎｅ）フォーマットで記録されており、医用画像ビューワ６１０はＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、多数の断層画像（スライス画像ともいう）からなる胸部ＣＴ画像とする。医用画像ビューワに表示された胸部ＣＴ画像は、マウスやキーボードの操作により、スライス送りをすることができる。なお、胸部ＣＴ画像ではなく、ＭＲＩ（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像であってもよい。
【００５４】
医用画像ビューワ６１０には、類似症例検索を起動する元となった症例の画像が表示されている。胸部ＣＴ画像のうち、読影者が類似症例検索を起動したスライス位置の画像（すなわち、検索クエリ画像）が初期表示されている。なお、画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ  Ｏｆ  Ｉｎｔｅｒｅｓｔ）を重畳表示していてもよい。
【００５５】
図６に示すように、ディスプレイ１０１ｂに表示された情報端末１００の基本画面は、類似症例サムネイル表示領域７１０、症例数表示領域７１２、病名絞込み条件表示領域７１３、診断対象症例表示領域７２０、病名リスト表示領域７３０を備える。
【００５６】
類似症例サムネイル表示領域７１０は、検索クエリに類似した症例のサムネイル画像を画像所見別に表示する領域である。図６の例では、画像所見名の表示アイコン兼選択ボタン７１１ａ〜ｃのそれぞれの下方に、これら７１１ａ〜ｃのそれぞれの画像所見に“属する”類似症例が横方向に表示されている（この“属する”の意味については、後ほど、画像所見体系と共に説明する）。当該画像所見に属する症例が、画像所見別表示数（図６の例では５個）よりも多い場合は、横方向スクロールバー７１４ａ〜ｃにより横方向にスクロールして他の症例を閲覧することができる。また図６の例では画像所見として７１１ａ〜ｃの３個が表示されているが、検索結果として４個以上の画像所見に対応する症例が得られていれば、縦方向スクロールバー７１５により、縦方向にスクロールして他の画像所見に対応する類似症例を閲覧することができる。
【００５７】
症例数表示領域７１２は、検索結果として取得した類似症例のうち、画像所見の表示アイコン兼選択ボタン７１１や病名リスト７３０の機能により絞り込まれた後の症例数を示す領域である。
【００５８】
病名絞込み条件表示領域７１３は、病名リスト７３０の機能により絞り込んだ条件を表示する領域である。
【００５９】
また、各サムネイル症例の表示領域は、図７のように、確定診断病名表示領域７１６、および、距離表示領域７１７で構成される。
【００６０】
ここで、サムネイル画像向けの画像解像度や画素値の変換について少し補足する。オリジナルのＣＴ画像の解像度は５１２×５１２画素であるが、サムネイル画像は表示領域の大きさの制限のため、より低解像であっても構わない。さらに、オリジナルのＣＴ画像の画素値（ＣＴ値）の範囲については、−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ  Ｕｎｉｔ）であり、そのままでは通常の８ビット階調のディスプレイには表示できない。また表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約―９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜―５０ＨＵ）、水（ＣＴ値：０ＨＵ）、骨（ＣＴ値：１０００ＨＵ）を区別することは人間には難しい。よって、通常は別途ウィンドウレベルおよびウィンドウ幅を与えて、ディスプレイに表示するための８ビット輝度に変換を行う。
【００６１】
類似症例サムネイル表示領域７１０に複数（図５の例では１５個）の類似症例を表示しており、オリジナルのＣＴ画像（ＤＩＣＯＭフォーマット）からの画像解像度や画素値の変換をサムネイル表示の度に行うと処理に時間が費やされるため、表示速度向上のためには、予めオリジナルのＤＩＣＯＭ画像から、解像度変換と画素値変換を行って、サムネイル画像を作成しておくことが望ましい。
【００６２】
なお、表示されるサムネイル画像は、特徴ベクトル間の距離が所定の閾値以下の症例である。ここでは距離としてユークリッド距離を用いる。なお、市街地距離など別の距離尺度でもよい。また、特徴ベクトル間の距離ではなく、類似度を用いてもよい。類似度としてコサイン類似度などを使用することができる。
【００６３】
さらに、類似症例サムネイル表示領域７１０に表示する症例を、病名リスト表示領域７３０の操作により絞り込むことができる。現在表示されている症例の絞り込み条件は、表示条件表示領域７１３に表示される。図６の類似症例検索直後の状態では、何も絞り込みがされていないため、表示条件表示領域７１３には「全疾患」と表示される。
【００６４】
病名リスト表示領域７３０は、類似症例サムネイル表示領域７１０に表示された全ての類似症例の確定診断病名が表示される。類似症例検索対象の症例は、確定診断後の症例を用いるため、確定診断病名は予め各症例に付与されている。図８に病名リストの拡大図を示す。図８では、病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２，７３３、７３５、７３６、７３８、７３９、７４０、７４２、７４３、７４５）とに分けて表示されている。また、大分類病名および詳細分類病名の横には、その病名の症例数が表示されている。ユーザは、この病名リストにおける大分類病名または詳細分類病名の任意の行を選択することで、類似症例サムネイル表示領域７１０に表示される症例を限定することができる。図６のように類似症例検索直後の状態では、多様な疾患を含む６２症例が表示対象になっているが、図８の行７３１をマウスでクリックした場合は、図９のように大分類病名が真菌症（全１４件）の症例のみの表示になる。この時、表示条件表示領域７１４は、現在表示されている症例がどのような絞り込み条件であるか分かるように、図９では「真菌症」という表示に変わる。この機能により、例えば、画像診断を行う医師が想起した病名について、その疾患の類似症例を複数表示することで、診断対象の症例が想起した病名との整合性を確認しやすくなる。
【００６５】
図１０は、患者情報１０００の構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報蓄積部２０１で患者ごとに管理される。図１０に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、確定診断１９００を備える。患者ＩＤ１１００は、患者に固有の識別番号である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、主訴である。また、検査情報１８００は、図１１に示すように、当該患者が過去に受けた複数の検査に関する情報を表す。それぞれの検査は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別番号である。検査日時１８２０は、当該検査が行われた日時である。検査種１８２０は、当該検査の種類である。例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影などがある。検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ，ＧＰＴなど各種指標の値や、それを基に医師が下した判断などである。また、単純Ｘ線撮影やＣＴ撮影などの画像検査であれば、撮影された画像そのものへのポインタ情報や画像診断結果のレポートへのポインタ情報も含まれる。画像そのものは、ＤＩＣＯＭフォーマットにて、医用情報管理システム２００における医用画像データ蓄積部２０３に蓄積される。
【００６６】
また、検査種１８３０が単純Ｘ線、ＣＴ，ＭＲＩ，ＰＥＴなど画像検査の場合、医用情報管理システム２００における医用画像データ蓄積部２０３に、医用画像データ２０００が、図１２に示すように蓄積される。医用画像データ２０００は、検査ＩＤ１８１０（図１１の検査ＩＤと共通）およびシリーズＩＤを持つ。１回の検査で、複数の種類の画像撮影（例えば、単純ＣＴと造影ＣＴなど）を行う場合があるので、１つの検査ＩＤに対し、複数のシリーズＩＤ２１００が対応する場合もある。また、ＣＴ検査やＭＲＩ検査などの場合、１回の撮影で複数スライス画像を取得するので１つのシリーズＩＤには、複数のスライスＩＤが対応する。
【００６７】
検査種１８３０が単純Ｘ線、ＣＴ，ＭＲＩ，ＰＥＴなど画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５に、図１３に示すような診断レポート３０００が、蓄積される。診断レポート３０００は、検査ＩＤ１８１０（図１１の検査ＩＤと共通）、所見３１００、診断３２００を備える。
【００６８】
図１４は、類似症例データ４０００のデータ構成の一例を示す図である。類似症例データ４０００は、診断対象症例に対して類似する症例の検索時に参照されるデータであり、症例検索システム３００の類似症例データ蓄積部３０１に蓄積されている。類似症例データ４０００は、図１４に示すように、類似症例ＩＤ４１００、関心領域数４２００、確定診断数４３００、及び確定診断数４３００の個数分の疾患ＩＤ４４００を備える。
【００６９】
類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。図１４の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。
【００７０】
関心領域数４２００は、類似症例ＩＤで示される症例に対して事前に設定された関心領域の数である。なお、類似症例データ４０００は、この関心領域数４２００の個数分だけ、関心領域ＩＤ４２１０、スライスＩＤ４２２０、画像所見ＩＤ４２３０、関心領域座標４２４０、及び画像特徴データ４２５０、サムネイル画像データ４２６０の情報を持つ。関心領域ＩＤ４２１０は、類似症例ＩＤ４１００で示される類似症例に付与された関心領域のＩＤである。そのため、関心領域ＩＤ４２１０は、類似症例ＩＤ４１００で示す記号列の後に連番を付与して表現される。スライスＩＤ４２２０は、関心領域が設定されたスライス画像の識別子であり、図１２に示すスライスＩＤ２２００と同一である。画像所見ＩＤ４２３０は、後で説明する画像所見体系の中から設定された画像所見のＩＤである。関心領域座標４２４０は、スライス画像に設定された関心領域の位置を示す情報である。図１５は、スライス画像に設定された関心領域を模式的に示した図である。図１５の例では、関心領域は矩形状に設定されている。したがって、関心領域座標４２４０は、関心領域の左上の頂点の座標（ｘｌ、ｙｔ）と、右下の頂点の座標（ｘｒ、ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域座標４２４０として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域座標４２４０として採用される。画像特徴データ４２５０は、関心領域座標４２４０で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４２６０は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。本開示では、関心領域は、異なるスライス画像にまたがって複数設定可能である。そのため、類似症例ＩＤ４１００に対し、サムネイル画像の候補は複数存在する。ここでは、関心領域が付与されたスライス画像毎に、サムネイル画像が作成及び保持されているものとする。サムネイル画像データ４２６０は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。
【００７１】
確定診断数４３００は、確定診断として付与された病名の数である。この例では、類似症例ＩＤ４１００で示される症例に２つの病名が付与されたので、確定診断数４３００には「２」が登録されている。
【００７２】
疾患ＩＤ４４００は、確定診断数４３００の個数分だけ、疾患体系５０００（図１６）で定義された疾患ＩＤを格納する。図１４の例では、類似症例ＩＤで示される症例に「ＤＩＳ０１２＿００７」で示される病名と、「ＤＩＳ０１５＿０１９」で示される病名が付与されたので、疾患ＩＤ４４００には、「ＤＩＳ０１２＿００７」及び「ＤＩＳ０１２＿０１９」が登録されている。
【００７３】
次に、情報端末１００が医用画像管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。
【００７４】
図１７は、情報端末１００が、医用情報管理システム２００から読影対象症例を取得した後、症例検索システム３００に対して類似症例検索の要求を行い、症例検索システム３００が類似症例検索の要求を受け取るまでの流れを示すシーケンス図である。まず情報端末１００は、操作部１０２を通してユーザ（読影を行う医師）の読影対象検査リスト表示要求を受け付け、入力制御部１０３および通信制御部１１０を通して、医用画像管理システム２００の通信制御部２０６へ読影対象検査リスト表示要求を送信する（ステップＳ５１０）。通信制御部２０６は、患者情報管理部２０２へ読影対象検査リスト表示要求を送信する。患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、通信制御部２０６を通して、情報端末１００の通信制御部１１０に読影対象検査リストとして送信する（ステップＳ５２０）。情報端末１００の表示制御部１０４は、読影対象検査リストを受け、読影対象検査リストを表示する（ステップＳ５３０）。例えば、図１８のような画面が表示される。図１８の画面は、読影が未終了の検査リストを表示する領域８００と、検査ＩＤが含むシリーズ情報を表示する領域８１０とで構成される。ここでは、検査リスト８００の検査（行に対応）が選択されていないために、領域８１０には何も表示されていない。
【００７５】
ユーザは、リストの中から、これから読影を行う検査を選択する。選択が行われると、通信制御部１１０は、対象の検査ＩＤの検査画像の表示要求を、医用情報管理システム２００へ送信する（ステップＳ５４０）。医用情報管理システム２００は、患者情報管理部２０２で指定された検査ＩＤに含まれる全シリーズ画像（検査とシリーズの関係は図１２参照）を医用画像データ蓄積部２０３から取得し、通信制御部２０６を通して、情報端末１００に送信する（ステップＳ５５０）。情報端末１００の表示制御部１０４は、指定された検査ＩＤが含む全シリーズの情報を図１９の領域８１０のように表示し、ユーザにシリーズの選択を促す（ステップＳ５６０）。図１９の領域８００では選択された行が網掛け表示になっている。ユーザは、読影対象のシリーズを選択すると、表示制御部１０４により図２０のように医用画像ビューワが表示され、指定されたシリーズＩＤのシリーズ画像が全スライスをページ送りできる状態で表示される（ステップＳ５７０）。ユーザは、スライス送りをしながら画像診断を行う。画像診断に迷った場合は、類似症例検索を起動する。
【００７６】
類似症例検索の起動は、操作部１０２のキーボードでの予め定めたショートカットキーでもよいし、マウスで右クリックすることで医用画像ビューワのメニューを表示させ、その中から類似症例検索メニューを指定してもよい。類似症例検索の起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、関心領域（ＲＯＩ）の受け付け状態になる。ユーザは、操作部１０２を通して、注目するスライス上の病変に関心領域（ＲＯＩ）を設定する（ステップＳ５８０）。ここでは、マウスドラッグにより矩形を設定し、入力された矩形情報（例えば、左上の点と右下の点の座標）は、ＲＯＩ管理部が受け取った後、通信制御部１１０を通して、症例検索システム３００の通信制御部３０４に送信される（ステップＳ５９０）。同時に、医用情報管理システム１００からステップＳ５５０にて受け取った全シリーズ画像のうち、類似症例検索を行う対象のスライス画像も、症例検索システム３００の通信制御部３０４に送信される（ステップＳ６００）。なお、類似症例検索を行う対象のスライス画像そのものではなく、スライスＩＤでも構わない。その場合は、症例検索システム３００が、そのスライスＩＤを基に、医用情報管理システム２００からスライス画像を取得すればよい。
【００７７】
次に、症例検索システム３００が類似症例検索を行い、情報端末１００に類似症例検索結果を初期表示するまでの流れを説明する。
【００７８】
図２１は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を情報端末に返し、検索結果の初期画面表示までの流れを示すシーケンス図である。
【００７９】
症例検索システム３００の画像特徴抽出部３０２は、予め定めた複数次元の画像特徴を抽出する（ステップＳ６１０）。
【００８０】
「画像特徴量」としては、医用画像における臓器もしくは病変部分の形状に関するもの、または輝度分布に関するものなどがある。画像特徴量として、例えば、非特許文献１に４９０次元の特徴量を用いることが記載されている。本実施の形態においては、この画像特徴を用いる。もちろん、他の画像特徴でもよい。
【００８１】
類似症例検索部３０３は、画像特徴抽出部３０２で抽出した画像特徴と、類似症例データ蓄積部３０１に関心領域ＩＤ毎に蓄積された画像特徴（図１４における画像特徴データ４２５０）のそれぞれを比較し、距離を算出する（ステップＳ６２０）。そして、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の症例として決定する（ステップＳ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部に蓄積された類似症例データのうち、送信対象症例の関心領域ＩＤ４２１０、スライスＩＤ４２２０、画像所見ＩＤ４２３０、関心領域座標４２４０、サムネイル画像データ４２６０、確定診断数４３００分だけの疾患ＩＤ４４００及び、類似症例検索部３０３で算出された距離を、送信対象として決定された関心領域ＩＤの数の分だけ、関心領域ＩＤ毎に送信する（ステップＳ６４０）。
【００８２】
なお、検索の結果取得する類似症例として、距離が所定の閾値以下のものとしたが、常に所定の数を取得するようにしても良いし、常に所定の病名数が含まれるような症例数にするなど、別の決定方法でもよい。
【００８３】
以下、類似症例検索結果の初期画面の生成（ステップＳ６５０）について図２２の画像所見体系および図２３のフローチャートに従って説明する。
【００８４】
図２２は、本発明で使用する画像所見体系である。本発明では、「画像所見」を病変の画像的な特徴を表現した単語と定義する。画像所見体系は、図２２のように上位概念から下位概念までツリー状に表現される。それぞれの画像所見は、表記と対応する画像所見ＩＤとから構成される。例えば、画像所見ＩＤがＩＦ００００である表記は「粒状影」である。図２の画像所見体系格納部３０４には、図２２の画像所見体系が格納される。格納形式については詳細には説明しないが、各画像所見について、表記、ＩＤ、上位階層のＩＤが格納されればどのような形式でもよい。
【００８５】
なお、画像所見体系における最上位階層は、画像所見ＩＤがＩＦ０の「ｒｏｏｔ」である。
【００８６】
なお、画像所見体系については、図２２は一例であり、画像所見概念のツリー構造になっていれば他の体系で構わない。
【００８７】
先に説明した図１４の画像所見ＩＤ４２３０には、図２２の画像所見体系における画像所見ＩＤのうちのいずれかが格納される。類似症例データ４０００を作成する際、各症例について、画像所見体系の最下位階層の画像所見が付与されていることが望ましいが、判別が難しい症例の場合など、中間階層の画像所見を付与することでも構わない。
【００８８】
図２３は、類似症例検索結果の初期画面生成のフローチャートである。
【００８９】
まず、ステップＳ１０００にて、受信した類似症例の数を、検索結果件数表示領域７１２に表示する。
【００９０】
次に、ステップＳ１１００にて、表示条件表示領域７１３に、初期状態として「全疾患」と表示する。
【００９１】
次に、ステップＳ１２００にて、受信した全ての類似症例について、図２２の画像所見体系における画像所見ＩＤ毎の類似症例数をカウントする。カウントした結果の例を図２４に示す。図２４では、画像所見に対する類似症例数を矩形内の数字として、対応する画像所見の近くに配置している。例えば、画像所見ＩＤがＩＦ００００である「粒状影」に対応づけられた症例数は２個であることが分かる。この例においては、類似症例１個につき１個の画像所見が対応付けられているとすると、受信した類似症例数は２４個であることが分かる。
【００９２】
次に、ステップＳ１３００において、下位階層に受信した全ての類似症例を含む、最上位階層画像所見を特定する。図２４の例では画像所見ＩＤがＩＦ００である「肺実質病変」となる。
【００９３】
次に、ステップＳ１４００において、ステップＳ１３００で特定した最上位階層の画像所見名の１階層下である複数の第１の区分階層の画像所見を特定する。ここで、第１の区分階層の画像所見として特定する条件としては、自身および下位階層に、受信した類似症例を含むものとする。図２４の例では、画像所見ＩＤがＩＦ０００である「充実性陰影」、および、画像所見ＩＤがＩＦ００１である「すりガラス陰影」となる。
【００９４】
次に、ステップＳ１５００において、類似症例サムネイル表示領域７１０に、ステップＳ１４００で特定した第１の区分階層毎に、サムネイル画像、および、対応する確定診断、類似度を表示する。図２５は表示画像の例である。ステップＳ１４００において特定した第１の区分階層の画像所見は「充実性陰影」と「すりガラス陰影」であり、図２４においてそれぞれの画像所見の下位階層の症例（計１７症例と計７症例）を表示する。なお、画像所見体系において、画像所見Ａに対応する症例Ｘと、画像所見Ｂに対応する症例Ｙがあり、画像所見Ａの下位階層に画像所見Ｂがあるとき、症例Ｙは画像所見Ａに「属する」と表現する。図２５では横方向の表示可能数は５個であるため、残りの症例はスライドバー７１４ａ、７１４ｂにて操作して表示する。
【００９５】
また、ステップＳ１２００において、画像所見ＩＤ毎の類似症例数が図２６のような場合、ステップＳ１３００で特定する最上位階層画像所見は、図２４の場合と同じく「肺実質病変」であるが、ステップＳ１４００で第１の区分階層の画像所見を特定する場合、「充実性陰影」の代わりに「粒状影」を特定してもよい。その理由は、図２６の場合には「充実性陰影」の下位で類似症例が存在する画像所見は「粒状影」のみであるためである。その場合の画面は図２７のようになる。
【００９６】
ここで、第１の区分階層である「充実性陰影」「すりガラス陰影」に属する各症例の表示法について２通り説明する。
【００９７】
１つ目は、画像特徴空間において、所定以上の分散を有する画像特徴に対応する症例を選択する方法である。図２５では横方向の症例表示数は５であるため、表示対象の症例群の中から５個を選択する。具体的には、以下の方法を用いることができる。表示対象の症例群のそれぞれの画像特徴に対し、画像特徴空間でｋ−ｍｅａｎｓクラスタリングを行い、５個のクラスタ中心を決定し、それぞれのクラスタ中心に最も近い症例を選択する。この表示法の利点としては、同じ画像所見分類に属する症例のバリエーションを一目で把握可能であるということが挙げられる。図２４において「充実性陰影」に属する症例数は１４であるが、もっと症例数が多い場合は類似度順に表示すると見た目が似たような症例ばかりが表示され、スクロールバーを使わなければバリエーションを確認することができない。ある画像所見における症例のバリエーションを一目で把握したいユーザに関しては、そのような初期設定にしておいてもよいし、そのような状況のみ表示法を切り替えられるようにしてもよい。
【００９８】
もう一方は、検索元画像と検索結果画像との画像特徴量間の距離の小さい順に表示する方法である。この場合は、検索元画像と似ている画像が表示されるので、参考にする画像所見や症例を判断し易くなる。
【００９９】
最後にステップＳ１６００において、病名リストの生成・表示を行う。
【０１００】
まず、受信した類似症例（ここではＮＣ件とする）から、病名リストを生成する。病名リスト管理部１０６が、ＮＣ個の類似症例について、それぞれに付属している確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００を基に、病名リストを生成する。生成された病名リストは、図２８のようなテーブル情報として、病名リスト管理部１０６で管理される。病名リストでは、病名、病名ＩＤ（病名毎の固有ＩＤ）、件数、対応する類似症例ＩＤ（その病名の件数分）が管理される。そして、表示制御部１０４により、病名リスト表示領域７３０に表示させる。病名リストの表示の例を図２９、図３０、図３１に示す。図２９は、確定診断を詳細分類病名で表現している例、図３０は、確定診断を大分類病名で表現している例、図３１は、大分類病名毎の件数順に並べた上で、大分類病名ごとにその中に含まれる詳細分類病名の件数毎に表現した例である。この場合は、患者情報蓄積部２０１の確定診断が、大分類病名と詳細分類病名との階層構造で表現されている。ステップＳ１０００〜Ｓ１６００は、表示制御部１０４によって実行される。
【０１０１】
ユーザは図２５あるいは図２７のような検索結果初期画面から、画像所見の表示アイコン兼選択ボタン７１１を用いて、診断対象症例７２０を診断するために参考となる症例を絞り込み、病名リスト７３０を用いて、診断対象症例７２０の画像診断病名を１〜少数個特定する。ここでは図２７の例で説明する。
【０１０２】
発明が解決しようとする課題で触れたように、本発明は、診断対象症例を診断するための参考症例を、類似症例検索結果としての多数のサムネイル画像からうまく取捨選択できないレベルのユーザを主な対象としている。ユーザは図２７のように類似症例が「粒状影」と「すりガラス陰影」という、画像所見階層において上位の分かり易い区分で表示されており、さらに各画像所見で複数の事例が表示されているため、どちらの画像所見が診断対象症例に該当するかどうかを判断し易い。
【０１０３】
診断対象症例に該当する、更に詳細な画像所見を見極めたい場合は、画像所見の表示アイコン兼選択ボタン７１１を選択する。
【０１０４】
ここでは「粒状影」に該当するボタン７１１ａを押したときの動作について説明する。「粒状影」に該当するボタンを押した場合、図２６における粒状影の下位階層の画像所見である「非小葉性」「小葉性」に区分されて、図３２のように表示される。このとき、症例数表示領域７１２は、画像所見が「非小葉性」および「小葉性」に該当する症例の数が表示される。さらに、病名リスト７３０も画像所見が「非小葉性」および「小葉性」に該当する症例に対応する病名リストに更新される。
【０１０５】
取得した類似症例の中から「非小葉性」「小葉性」に該当する症例のみのサムネイル画像が表示されているので、ユーザにとって、どちらの画像所見が診断対象症例に該当するかどうかを判断し易くなる。
【０１０６】
また、類似症例検索性能が十分ではない場合、検索結果症例には不適切な症例が混在し、その結果として病名リスト７３０も不適切な病名が混在することになる。このような場合、類似症例検索結果から適切な症例を取捨選択できないユーザに対しては、このシステムを使いながらの画像診断および学習に悪影響を与える恐れがある。本発明を用い、類似症例検索結果を適切な画像所見で絞り込んでいくことで、病名リスト７３０も不適切な病名が除かれていくため、そのような悪影響を低減することができる。
【０１０７】
画像所見で絞り込む過程で、図３３のように、画像所見の表示アイコン兼選択ボタン７１１が類似症例の最終階層（図２６における「小葉中心性」「小葉辺縁性」）になっているときに、更にボタン７１１を押した場合は、これ以上、詳細な画像所見への展開が出来ないため、押された画像所見に該当する類似症例の病名リスト７３０を強調表示する。強調表示の方法としては、図３４のように拡大表示をしてもよいし、色を変更したり、外枠を点滅させたりしてもよい。なお、図３５のように、病名リストを最初から表示しない画面構成の場合は、最終階層まで絞り込んだ時点で、図３６のように病名リスト７３０を表示してもよい。
【０１０８】
なお、病名リストを最初から表示しない場合に、最終階層まで絞り込んでいない場合であってもユーザが病名リストを参照したい場合に備え、図３７のように病名リスト表示ボタン７５０を設けてもよい。
【０１０９】
なお、上記では、症例数表示領域７１２に、類似症例サムネイル表示領域７１０に表示される症例数として各画像所見の分類７１１ａ，ｂ，…に含まれる症例数の和を表示したが、各画像所見に該当する類似症例の件数をボタン７１１の横にそれぞれ表示してもよい。
【０１１０】
なお、上記では、症例検索システム３００にて画像特徴抽出する例を示したが、端末側で実施してもよい。  以上のように、検索結果を画像所見の分類で提示し、かつ、階層的な画像所見構造を用い上位概念の画像所見から下位概念の画像所見へと詳細分類させるユーザインタフェースにより、非熟練医であっても検索結果の画像所見を判断し易くなり、結果として診断の参考になる症例を選択することが容易になる。
【０１１１】
（実施の形態２）
以下に、実施の形態２について説明する。特に断らない限り、説明がない部分については、実施の形態１と同一である。
【０１１２】
本実施形態では、１つの関心領域ＩＤに対し、複数の画像所見ＩＤを付与することを許容する。例えば、図３８のように１つの関心領域内に複数種類の病変が含まれる場合に有効である。その場合の類似症例データ４０００のデータ構成は、図３９のように画像所見数４２２５をエントリとして新たに含み、画像所見ＩＤ４２３０の欄には画像所見数４２２５の個数分の画像所見ＩＤを格納する。
【０１１３】
本実施形態での類似症例検索結果の初期画面の生成（ステップＳ６５０）について図４０のフローチャートに従って説明する。
【０１１４】
ステップＳ１０００、Ｓ１１００、Ｓ１６００の動作は、実施の形態１と同様である。次にステップＳ１２０１にて、受信した類似症例の全てについて、「画像所見の組み合わせ」毎の類似症例数をカウントする。この時、受信した全ての類似症例についての画像所見ＩＤに対する類似症例数カウント結果は、画像所見ＩＤの組み合わせ毎に得られることになる。２つの画像所見ＩＤの組み合わせの場合は図２４を２次元へ、３つの画像所見ＩＤの組み合わせの場合は３次元へ拡張することになる。何個の画像所見の組み合わせを扱うかについては、予め決めておけばよく、２〜３が望ましい。本実施の形態では２つの画像所見ＩＤの組み合わせについて説明を行う。図２４を多次元拡張した図については省略する。
【０１１５】
次にステップＳ１３０１にて、最上位階層の「画像所見の組み合わせ」を特定する。図２４の多次元拡張において、ｒｏｏｔを除いた全ての画像所見の組み合わせに相当する類似症例が存在する場合について考えると、最上位階層の「画像所見の組み合わせ」はｒｏｏｔ（の組み合わせ）となる。
【０１１６】
次にステップＳ１４０１にて、第１の区分階層の「画像所見の組み合わせ」を特定する。その結果としては、肺実質病変、気管支病変、縦隔病変の全ての（即ち３通り）の組み合わせとなる。
【０１１７】
次にステップＳ１５０１にて、類似症例サムネイル表示領域７１０に、第１の区分階層の「画像所見の組み合わせ」毎にサムネイル画像、および、対応する確定診断、類似度を表示する。ここでは図示の簡略化のために、「画像所見の組み合わせ」の表示７１１についてのみ図４１に示す。ステップＳ１４０１で特定した３通りの組み合わせを、７１１ａ〜ｃにそれぞれ示している。ここで、さらに下位階層に展開可能な画像所見の表記に関しては、アンダーラインを付して、ユーザに展開可能であることを示している。「縦隔病変」については、図２２の画像所見体系において下位階層が存在しないため、アンダーラインは付していない。先に、説明の簡略化のために、ｒｏｏｔを除いた全ての画像所見の組み合わせに相当する類似症例が存在する場合について考えると記載したが、もし、「肺実質病変」の下位階層の画像所見と「気管支病変」の組み合わせに対応する類似症例は存在するが、「気管支病変」の下位階層の画像所見と「肺実質病変」との組み合わせに対応する類似症例が存在しない場合は、図４２のように「気管支病変」も展開不可能であるため、アンダーラインを付さない。
【０１１８】
次に、画像所見の表示アイコン兼選択ボタン７１１を用いて、表示症例を絞り込む際の動作について説明する。ここでは図４１の例について考える。図４１では、「肺実質病変」と「気管支病変」について選択（即ち、展開）可能になっており、７１１ａでの「肺実質病変」を選択した場合は、図４３のように、「肺実質病変」の下位である３つの画像所見と「気管支病変」との組み合わせに展開される。一方、７１１ａでの「気管支病変」を選択した場合は、図４４のように、「気管支病変」の下位である２つの画像所見と「肺実質病変」との組み合わせに展開される。
【０１１９】
以上のように、画像所見の組み合わせについて考慮することで、実施の形態１の効果を保ちつつ、図３８のように１つの関心領域内に複数種類の病変が含まれる場合も扱うことができる。
【０１２０】
（実施の形態３）
以下に、実施の形態３について説明する。特に断らない限り、説明がない部分については、実施の形態１と同一である。
【０１２１】
本実施の形態では、類似症例サムネイル表示領域７１０に表示された類似症例サムネイルを画像所見別に分類表示、さらに画像所見で絞り込む際、臨床情報も併せて利用する。ここでの「臨床情報」とは、図１０の患者情報１０００における、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００の情報を、量子化および構造化した情報を指す。患者情報１０００の内容が自由記述である場合、類似症例サムネイル表示領域７１０での分類表示や絞込みに利用するには、例えば、年齢１３００については、例えば「乳児」、「幼児」、「小学生」、「高校生」、「３０歳代」のように予め量子化・構造化をした分類表記、および、対応する臨床情報ＩＤを定義しておき、これらの表記とＩＤとを用いる。他の項目についても、例えば、主訴１７００や検査情報１８００などであれば、同義で表記が異なる単語や記載から、「腹痛」「熱発」のように構造化した分類表記に予め変換し、これに対応する臨床情報ＩＤを定義しておき、これらの表記とＩＤとを用いる。
【０１２２】
その場合の類似症例データ４０００のデータ構成は、図４５のように臨床情報ＩＤ４２７０をエントリとして新たに含み、臨床情報ＩＤを格納しておく。
【０１２３】
次に、画像所見の表示アイコン兼選択ボタン７１１を用いて、表示症例を絞り込む際の表示について説明する。ここでは図４６の例について考える。図４６では、画像所見と併せて臨床情報を表示している。画像所見に関しては、実施の形態１と同様に、下位階層の画像所見へ展開可能である。このような表示および動作にすることで、類似症例検索結果のサムネイル画像を、画像所見と臨床情報の組み合わせで表現することができ、画像情報だけでは診断できない疾患に対して、有効な診断支援が行える。
【０１２４】
なお、臨床情報の代わりに、疾患の進行度情報を用いてもよい。進行度としては、例えば、がんのステージ情報、慢性腎臓病の重症度分類、などを用いることができる。このような表示および動作にすることで、類似症例検索結果のサムネイル画像を、画像所見と疾患進行度の組み合わせで表現することができ、有効な診断支援が行える。
【産業上の利用可能性】
【０１２５】
本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。
【符号の説明】
【０１２６】
１００  情報端末
１０１  ディスプレイ
１０２  操作部
１０３  入力制御部
１０４  表示制御部
１０５  ＲＯＩ管理部
１０６  病名リスト管理部
１０７  通信制御部
２００  医用情報管理システム
２０１  患者情報蓄積部
２０２  患者情報管理部
２０３  医用画像データ蓄積部
２０４  医用画像データ管理部
２０５  診断レポート管理部
２０６  通信制御部
３００  症例検索システム
３０１  類似症例データ蓄積部
３０２  画像特徴抽出部
３０３  類似症例検索部
３０４  画像所見体系格納部
４００  病院ネットワーク
５０１  アプリケーション
５０２  ＯＳ
５０３  メモリ
【図１】
2018130408.tif 000003
【図２】
2018130408.tif 000004
【図３】
2018130408.tif 000005
【図４】
2018130408.tif 000006
【図５】
2018130408.tif 000007
【図６】
2018130408.tif 000008
【図７】
2018130408.tif 000009
【図８】
2018130408.tif 000010
【図９】
2018130408.tif 000011
【図１０】
2018130408.tif 000012
【図１１】
2018130408.tif 000013
【図１２】
2018130408.tif 000014
【図１３】
2018130408.tif 000015
【図１４】
2018130408.tif 000016
【図１５】
2018130408.tif 000017
【図１６】
2018130408.tif 000018
【図１７】
2018130408.tif 000019
【図１８】
2018130408.tif 000020
【図１９】
2018130408.tif 000021
【図２０】
2018130408.tif 000022
【図２１】
2018130408.tif 000023
【図２２】
2018130408.tif 000024
【図２３】
2018130408.tif 000025
【図２４】
2018130408.tif 000026
【図２５】
2018130408.tif 000027
【図２６】
2018130408.tif 000028
【図２７】
2018130408.tif 000029
【図２８】
2018130408.tif 000030
【図２９】
2018130408.tif 000031
【図３０】
2018130408.tif 000032
【図３１】
2018130408.tif 000033
【図３２】
2018130408.tif 000034
【図３３】
2018130408.tif 000035
【図３４】
2018130408.tif 000036
【図３５】
2018130408.tif 000037
【図３６】
2018130408.tif 000038
【図３７】
2018130408.tif 000039
【図３８】
2018130408.tif 000040
【図３９】
2018130408.tif 000041
【図４０】
2018130408.tif 000042
【図４１】
2018130408.tif 000043
【図４２】
2018130408.tif 000044
【図４３】
2018130408.tif 000045
【図４４】
2018130408.tif 000046
【図４５】
2018130408.tif 000047
【図４６】
2018130408.tif 000048