(57)【要約】      （修正有）【課題】読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示する。【解決手段】情報端末の制御方法は、類似医用画像を症例検索システムから受信させ、読影対象候補の中から一の対象医用画像が選択された場合、対象医用画像の表示に用いる第１表示領域と、複数の類似医用画像の中の所定数の画像を、対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、第３表示領域には、複数の病名を表示させ、複数の病名が選択された場合、各々に対応する対応類似医用画像を、複数の類似医用画像の中から選択させ、類似医用画像の横方向への配列表示に代えて、病名の各々の単位で対応類似医用画像を区分けして選択された一の対象医用画像との類似度が高い順番に縦方向に配列表示する第２表示領域を含む第２の表示画面を表示させる。【選択図】図４８
2020155135.tif 000002
【特許請求の範囲】
【請求項１】
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
読影対象候補の中から読影対象の医用画像である一の対象医用画像が選択された場合、前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、前記第３表示領域には、第１の病名と第２の病名とを含む複数の病名を表示させ、
前記第３表示領域を用いて前記第１の病名と前記第２の病名とを含む複数の病名が選択された場合、前記第１の病名と前記第２の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記類似医用画像の横方向への配列表示に代えて、前記第１の病名と前記第２の病名の各々の単位で前記対応類似医用画像を区分けして前記選択された一の対象医用画像との類似度が高い順番に縦方向に配列表示する第２表示領域を含む第２の表示画面を表示させる、
制御方法。
【請求項２】
前記第３表示領域を用いて単一の病名が選択された場合、前記選択された単一の病名に対応する対応類似医用画像を、前記対象医用画像との類似度が高い順番に横方向に前記第２表示領域に表示させる、
請求項１記載の制御方法。
【請求項３】
前記第３表示領域を用いて単一の病名が選択された場合、前記選択された単一の病名に対応する対応類似医用画像を、前記対象医用画像との類似度が高い順番に縦方向に前記第２表示領域に表示させる、
請求項１記載の制御方法。
【請求項４】
前記対象医用画像の付属情報には病名情報は設定されておらず、前記受信した複数の類似医用画像の付属情報には病名情報が設定されている、
請求項１から請求項３のいずれか一に記載の制御方法。
【請求項５】
前記区分けされた領域の中のいずれか一の領域において一つの拡大表示の指示を検知した場合、前記一の領域に対応する前記対応類似医用画像について、前記対応類似医用画像を表示する各表示枠の表示サイズを同一サイズに維持しつつ、前記対応類似医用画像の中の前記関心領域に相当する領域を中心として拡大させる、
請求項１から請求項４のいずれか一に記載の制御方法。
【請求項６】
前記受信した複数の類似医用画像の各々は、前記各類似医用画像の中の前記関心領域に相当する領域を示す第２指定情報を含み、
前記対応類似医用画像の中の前記関心領域に相当する領域を中心として拡大させる際、前記第２指定情報が示す前記関心領域に相当する領域の大きさに応じて、前記対応類似医用画像を拡大させる、
請求項５記載の制御方法。
【請求項７】
前記第２指定情報が示す前記関心領域に相当する領域の大きさが第１サイズの場合、前記第２指定情報が示す前記関心領域に相当する領域が前記第１サイズより大きい第２サイズの場合に比べて、前記関心領域に相当する領域を大きく拡大させる、
請求項６記載の制御方法。
【請求項８】
前記受信した複数の類似医用画像の各々は、前記各類似医用画像の中の前記関心領域に相当する領域を示す第２指定情報を含み、
前記各類似医用画像の中の前記関心領域に相当する領域を中心として拡大させる際、前記第２指定情報が示す前記関心領域に相当する領域の大きさが、前記複数の類似医用画像の各表示枠の表示サイズに対して所定の割合となる拡大率にて、前記各類似医用画像を拡大させる、
請求項５記載の制御方法。
【請求項９】
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像とを前記症例検索システムから受信させる、
請求項１から請求項８のいずれか一に記載の制御方法。
【請求項１０】
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す前記第１指定情報を前記症例検索システムに送信させ、
前記医用画像及び前記第１指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像とを前記症例検索システムから受信させる、
請求項１から請求項８のいずれか一に記載の制御方法。
【請求項１１】
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第１の表示画面は、
前記関心領域に相当する領域が肺の広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記関心領域に相当する領域が肺の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記関心領域に相当する領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
前記第１分布情報から前記第３分布情報の中のいずれか一が選択された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第２表示領域に表示させる、
請求項１から請求項１０のいずれか一に記載の制御方法。
【請求項１２】
前記第１分布情報が選択された場合、前記第１分布情報に対応する類似医用画像を、対応する表示枠に初期表示サイズにて表示させ、
前記第２分布情報が選択された場合、前記第２分布情報に対応する類似医用画像の中の前記関心領域に対応する領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する表示枠内に拡大表示させ、
前記第３分布情報が選択された場合、前記第３分布情報に対応する類似医用画像の中の前記関心領域に対応する領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する表示枠内に拡大表示させる、
請求項１１記載の制御方法。
【請求項１３】
前記第１分布情報は、両側、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報である、
請求項１１から請求項１２のいずれか一に記載の制御方法。
【請求項１４】
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
読影対象候補の中から読影対象の医用画像である一の対象医用画像が選択された場合、前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、前記第３表示領域には、第１の病名と第２の病名とを含む複数の病名を表示させ、
前記第３表示領域を用いて前記第１の病名と前記第２の病名とを含む複数の病名が選択された場合、前記第１の病名と前記第２の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記類似医用画像の横方向への配列表示に代えて、前記第１の病名と前記第２の病名の各々の単位で前記対応類似医用画像を区分けして前記選択された一の対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域を含む第２の表示画面を表示させ、
前記第２表示領域に配列表示された前記類似医用画像の中で前記医用画像との類似度が最も高い類似医用画像が、前記第１表示領域に最も近い位置に表示される、
制御方法。
【請求項１５】
前記第３表示領域を用いて単一の病名が選択された場合、前記選択された単一の病名に対応する対応類似医用画像を、前記対象医用画像との類似度が高い順番に横方向に前記第２表示領域に表示させる、
請求項１４記載の制御方法。
【請求項１６】
前記第３表示領域を用いて単一の病名が選択された場合、前記選択された単一の病名に対応する対応類似医用画像を、前記対象医用画像との類似度が高い順番に縦方向に前記第２表示領域に表示させる、
請求項１４記載の制御方法。
【請求項１７】
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、
前記関心領域の特徴量と前記所定の類似度を有する類似医用画像とを前記症例検索システムから受信させる、
請求項１４から請求項１６のいずれか一に記載の制御方法。
【請求項１８】
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す前記第１指定情報を前記症例検索システムに送信させ、
前記対象医用画像及び前記第１指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像とを前記症例検索システムから受信させる、
請求項１４から請求項１６のいずれか一に記載の制御方法。
【請求項１９】
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
読影対象候補の中から読影対象の医用画像である一の対象医用画像が選択された場合、前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に縦方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、前記第３表示領域には、第１の病名と第２の病名とを含む複数の病名を表示させ、
前記第３表示領域を用いて前記第１の病名と前記第２の病名とを含む複数の病名が選択された場合、前記第１の病名と前記第２の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記類似医用画像の横方向への配列表示に代えて、前記第１の病名と前記第２の病名の各々の単位で前記対応類似医用画像を区分けして前記選択された一の対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域を含む第２の表示画面を表示させ、
前記第２表示領域に配列表示された前記類似医用画像の中で前記対象医用画像との類似度が最も高い類似医用画像が、前記第１表示領域に最も近い位置に表示される、
制御方法。
【請求項２０】
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末において実行されるプログラムであって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
読影対象候補の中から読影対象の医用画像である一の対象医用画像が選択された場合、前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、前記第３表示領域には、第１の病名と第２の病名とを含む複数の病名を表示させ、
前記第３表示領域を用いて前記第１の病名と前記第２の病名とを含む複数の病名が選択された場合、前記第１の病名と前記第２の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記類似医用画像の横方向への配列表示に代えて、前記第１の病名と前記第２の病名の各々の単位で前記対応類似医用画像を区分けして前記選択された一の対象医用画像との類似度が高い順番に縦方向に配列表示する第２表示領域を含む第２の表示画面を表示させる、
プログラム。
【請求項２１】
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末において実行されるプログラムであって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
読影対象候補の中から読影対象の医用画像である一の対象医用画像が選択された場合、前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、前記第３表示領域には、第１の病名と第２の病名とを含む複数の病名を表示させ、
前記第３表示領域を用いて前記第１の病名と前記第２の病名とを含む複数の病名が選択された場合、前記第１の病名と前記第２の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記類似医用画像の横方向への配列表示に代えて、前記第１の病名と前記第２の病名の各々の単位で前記対応類似医用画像を区分けして前記選択された一の対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域を含む第２の表示画面を表示させ、
前記第２表示領域に配列表示された前記類似医用画像の中で前記医用画像との類似度が最も高い類似医用画像が、前記第１表示領域に最も近い位置に表示される、
プログラム。
【請求項２２】
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末において実行されるプログラムであって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
読影対象候補の中から読影対象の医用画像である一の対象医用画像が選択された場合、前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に縦方向に配列表示する第２表示領域と、病名選択に用いる第３表示領域とを含む第１の表示画面を表示させ、ここで、前記第３表示領域には、第１の病名と第２の病名とを含む複数の病名を表示させ、
前記第３表示領域を用いて前記第１の病名と前記第２の病名とを含む複数の病名が選択された場合、前記第１の病名と前記第２の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記類似医用画像の横方向への配列表示に代えて、前記第１の病名と前記第２の病名の各々の単位で前記対応類似医用画像を区分けして前記選択された一の対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域を含む第２の表示画面を表示させ、
前記第２表示領域に配列表示された前記類似医用画像の中で前記対象医用画像との類似度が最も高い類似医用画像が、前記第１表示領域に最も近い位置に表示される、
プログラム。
【請求項２３】
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第１の病名と前記第２の病名は、ともに肺に関わる病名である、
請求項１から請求項１９のいずれか一に記載の制御方法。
【請求項２４】
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第１の病名と前記第２の病名は、ともに肺に関わる病名である、
請求項２０から請求項２２のいずれか一に記載のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末の制御方法及びプログラムに関する。
【背景技術】
【０００２】
近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）等の医用画像装置が発達および普及している。これらＣＴ又はＭＲＩなどは、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−２５７２９２号公報
【非特許文献】
【０００４】
【非特許文献１】大沢  哲、外４名、“画像診断を支援する類似症例検索システム「ＳＹＮＡＰＳＥ  Ｃａｓｅ  Ｍａｔｃｈ」の開発”、富士フイルム研究報告、富士フイルム株式会社、平成２５年３月２７日、第５８号、ｐ．  １１−１４
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、更なる改善が必要とされていた。
【０００６】
本開示の非限定的で例示的な一態様は、更なる改善が可能である。
本開示の一態様の付加的な恩恵及び有利な点は本明細書及び図面から明らかとなる。この恩恵及び／又は有利な点は、本明細書及び図面に開示した様々な態様及び特徴により個別に提供され得るものであり、その１以上を得るために全てが必要ではない。
【課題を解決するための手段】
【０００７】
本開示の一態様に係る制御方法は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域とを含む表示画面を表示させ、前記表示画面は病名選択に用いる第３表示領域を含み、
前記第３表示領域を用いて複数の病名が選択された場合、前記選択された複数の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記選択された複数の病名の単位で前記対応類似医用画像を区分けして前記対象医用画像との類似度が高い順番に縦方向に前記第２表示領域に配列表示させる。
【発明の効果】
【０００８】
本開示によれば、更なる改善が実現できる。
【図面の簡単な説明】
【０００９】
【図１】本実施の形態における情報端末が適用された病院情報システムの全体構成図である。
【図２】情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。
【図３】２台のディスプレイの外観図である。
【図４】情報端末の実装形態の構成例を示す図である。
【図５】情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。
【図６】情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。
【図７】症例表示領域に表示されるある１つの類似症例の表示領域を取り出して示した図である。
【図８】病名リスト表示領域の拡大図である。
【図９】「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。
【図１０】「転移性肺癌」で類似症例が絞り込まれたときの基本画面を示す図である。
【図１１】分布リスト表示領域の拡大図である。
【図１２】チェックマークが入力された分布リスト表示領域を示す図である。
【図１３】気道性の病変分布で絞り込みがかけられた基本画面を示した図である。
【図１４】複数のチェックマークが入力された分布リスト表示領域を示す図である。
【図１５】複数の病変分布で絞り込みがかけられた基本画面を示した図である。
【図１６】患者情報のデータ構成を示す図である。
【図１７】図１６に示す患者情報に登録された検査情報のデータ構成を示す図である。
【図１８】医用画像データベースのデータ構成を示す図である。
【図１９】診断レポートのデータ構成を示す図である。
【図２０】類似症例データのデータ構成を示す図である。
【図２１】スライス画像に設定された関心領域を模式的に示した図である。
【図２２】情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムに対して類似症例検索の要求を行い、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
【図２３】検査リストの画面図である。
【図２４】検査が選択された後の検査リストの画面図である。
【図２５】病変に対して関心領域を設定した後の画面の一例である。
【図２６】症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。
【図２７】図２６のＳ６７０に示す初期の基本画面を生成する処理の詳細を示すフローチャートである。
【図２８】図２７に示すＳ１５００の処理を示すフローチャートである。
【図２９】図２７のＳ１３００で生成される病名リストのデータ構成を示す図である。
【図３０】病名リスト表示領域の第１表示例を示した図である。
【図３１】病名リスト表示領域の第２表示例を示した図である。
【図３２】病名リスト表示領域の第３表示例を示した図である。
【図３３】図３１に示す病名リスト表示領域の画面遷移を示す図である。
【図３４】図２７のＳ１４００で生成される分布リストのデータ構成を示す図である。
【図３５】表示ボックス管理情報のデータ構成を示す図である。
【図３６】医用画像ビューワの起動処理を示すフローチャートである。
【図３７】症例検索システムが画像特徴を抽出する態様を採用した場合の情報端末、医用情報管理システム、及び症例検索システムのブロック図である。
【図３８】情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
【図３９】症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末に返すまでの処理を示すシーケンス図である。
【図４０】図２２及び図２６のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。
【図４１】分布リスト表示領域に表示された病変分布が選択されたときの処理を示すフローチャートである。
【図４２】第１分布情報が選択されたときの基本画面を示した図である。
【図４３】第２分布情報が選択されたときの基本画面を示した図である。
【図４４】第３分布情報が選択されたときの基本画面を示した図である。
【図４５】胸膜領域を説明する図である。
【図４６】胸膜領域情報が追加された類似症例データのデータ構成を示す図である。
【図４７】胸部ＣＴ撮影での先頭スライスを示す図であり、肺尖部よりももう少し頭方向の肩位置でのスライス画像である。
【図４８】病名リスト表示領域において病名が選択された場合の表示処理の一例を示すフローチャートである。
【図４９】複数の病名が選択された場合に作成される基本画面の一例を示す図である。
【図５０】選択された病名数が一定数以上の場合の基本画面を示す図である。
【図５１】図６の病名リスト表示領域でアスペルギルス症が選択された後の基本画面を示す図である。
【図５２】拡大表示機能を保持する場合の情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。
【図５３】画像特徴抽出部を情報端末に設けた場合の情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。
【図５４】症例表示領域に形成された分割領域のうち１つの分割領域が選択されたときの基本画面を示す図である。
【図５５】１の分割領域のサムネイル画像が拡大されたときの基本画面を示す図である。
【図５６】症例表示領域に表示されているサムネイル画像の一部が拡大されたときの図５５と異なる基本画面の表示例を示す図である。
【図５７】症例表示領域に表示されているサムネイル画像の拡大処理を示すフローチャートである。
【図５８】図５７のＳ４４００のサブルーチンの処理を示すフローチャートである。
【図５９】拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。
【図６０】図５７のＳ４５００のサブルーチンの処理を示すフローチャートである。
【図６１】拡大率と表示領域との関係を概略的に表す図である。
【図６２】情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。
【図６３】症例表示領域に上下方向に長尺なスクロールバーが設けられた場合の基本画面を示す図である。
【図６４】病名リスト表示領域において病名が選択された場合の表示処理の一例を示すフローチャートである。
【図６５】１つの病名が選択された場合の基本画面の第１例を示す図である。
【図６６】１つの病名が選択された場合の基本画面の第２例を示す図である。
【図６７】複数の病名が選択された場合に作成される基本画面の一例を示す図である。
【図６８】選択された病名数が一定数以上の場合の基本画面を示す図である。
【図６９】図６３の病名リスト表示領域でアスペルギルス症が選択された後の基本画面を示す図である。
【発明を実施するための形態】
【００１０】
（基礎となった知見）
まず、本開示に係る一態様の着眼点について説明する。
【００１１】
特許文献１は、診断対象画像に基づく画像診断時に疾患の判断に有用な症例画像又はその疾患に関する統計情報等を提示する画像診断支援装置を開示する。当該画像診断支援装置による検索結果の画面は、診断対象画像及び疾患別の代表症例の情報を表示する。具体的には、前記検索結果の画面は、ｉ）上位３つの疾患Ａ、Ｄ、Ｇの代表症例の画像、ｉｉ）疾患別に診断対象画像との類似度、登録症例数及び代表症例数、ｉｉｉ）検索件数（検索された疾患の総数）、及び、ｉｖ）一画面に表示できない他の疾患の情報を参照するための「ページ送り」のソフトボタン等を表示する（特許文献１の段落［００６２］から［００６３］及び図６（Ｅ）参照）。
【００１２】
診断対象画像を用いて患者の疾患を判断する際、病名が特定されていない場合がある。この場合、はじめから疾患別の代表症例を表した画像を見て診断するよりも、むしろ、予め検索結果の症例画像を疾患別に区分けるのではなく、前記診断対象画像との類似度が高い症例画像を幅広く見て判断した方がよい場合もある。しかし、特許文献１では、前記検索結果の初期画面において、疾患名毎に代表症例の画像が類似度順に並べて表示される（特許文献１の図６（Ｅ）参照）。そのため、特許文献１では、予め選択された代表症例の疾患名の範囲で患者の疾患名を特定することになる。即ち、初期画面において既に選択肢が制限された範囲において医師は診断することになる。その結果、医師が適切な判断をすることができないおそれもあり得る。一方、最初の段階では幅広く症例画像を観察するとしても、検索結果の症例画像の数は、例えば２００件から３００件等と膨大になることもあるため、必ずしも効率的にまたは適切に患者の疾患名を特定できない場合もある。
【００１３】
非特許文献１は、病変画像を用いて過去の類似症例を検索する機能により、上述のＰＡＣＳなどに蓄積された臨床知識から、瞬時に的確な情報を抽出して提示し、医師の画像診断をサポートする類似症例検索システムを開示する。具体的には、本システムは、検査画像の病変の特徴が類似した症例画像を検索し、類似順に複数表示する。そして、表示された複数の症例画像より１つの参考症例画像を選択し、検査画像と並列に表示する（非特許文献１のｐ．１２「２．２  本システムの特徴」及びＦｉｇ．３）。
【００１４】
しかし、非特許文献１のように、検査画像の病変が類似した症例画像を、類似順に表示したとしても、検索結果の症例画像の数は、例えば２００件から３００件などと膨大となる場合がある。また、現実には、システムで検索した類似順通りに検査画像に表れた疾患に対応する症例画像が現れるとは限らない。そのため、システムで検索した類似順通りに症例画像を表示するだけでは、医師は必ずしも効率的にまたは適切に患者の疾患名を特定できない場合もある。このように、非特許文献１では、検索結果の症例画像の数が膨大である場合であっても、単に類似順に症例画像を表示することを示すにとどまる。そのため、非特許文献１では、検索結果の症例画像の数が膨大である場合に、どういう段階へ経て絞り込めば、効率的にまたは適切に患者の疾患名を特定できるかについて課題がある。
【００１５】
未だ病名が特定されていない読影対象の医用画像に表れている病変を検討するにあたって、既に病名が特定されている他の医用画像の中で前記読影対象の医用画像と類似する類似医用画を参照することは有効であると考えられる。しかし、このようなシステムを構築した場合、前記医用画像データベースに膨大な数の医用画像が登録されることになる。このような場合であっても、前記読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示することが望まれる。
【００１６】
以上の考察により、以下の各態様を想到するに至った。
【００１７】
本開示の第１の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域とを含む表示画面を表示させ、前記表示画面は病名選択に用いる第３表示領域を含み、
前記第３表示領域を用いて複数の病名が選択された場合、前記選択された複数の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記選択された複数の病名の単位で前記対応類似医用画像を区分けして前記対象医用画像との類似度が高い順番に縦方向に前記第２表示領域に配列表示させるものである。
【００１８】
本態様によると、まずは、前記複数の類似医用画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示させる。即ち、前記対象医用画像との関係で参照画像を絞り込む前の段階では、画像の表示数が限られた前記第２表示領域に、可能な限り多くの類似医用画像を、病名に関わらず前記対象医用画像との類似度との関係で表示させる。そして、前記対象医用画像との類似度が高い順番に横方向に前記類似医用画像を配列表示させるので、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００１９】
次に、病名を選択して類似医用画像を絞り込んだ後は、前記選択した病名の単位で区分けする。そのため、前記対象医用画像に表れている病変の病名を特定するにあって、前記類似医用画像を病名単位で比較参照できるので、効率よく比較精度を向上させることができる。そして、前記対象医用画像との類似度が高い順番に縦方向に前記類似医用画像を前記第２表示領域に表示させるので、前記選択された病名にまたがって、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００２０】
従って、前記対象医用画像との関係で参照画像を絞り込む前の段階においても、また、病名を選択して類似医用画像を絞り込んだ後の段階においても、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００２１】
そのため、前記対象医用画像との関係で参照画像を絞り込む前の段階においても、また、病名を選択して類似医用画像を絞り込んだ後の段階においても、前記第２表示領域の中の同様の領域（例えば、上部）を用いて、前記対象医用画像との関係で類似度の高い類似医用画像を、医師に優先的に検討させることができる。
【００２２】
このように効率的に比較精度を向上させるシステムを提供することで、診察精度の向上に寄与できる。
【００２３】
本開示の第２の態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示する第２表示領域とを含む表示画面を表示させ、前記表示画面は病名選択に用いる第３表示領域を含み、
前記第３表示領域を用いて複数の病名が選択された場合、前記選択された複数の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記選択された複数の病名の単位で前記対応類似医用画像を区分けして前記対象医用画像との類似度が高い順番に横方向に前記第２表示領域に配列表示させ、
前記第２表示領域に配列表示された前記類似医用画像の中で前記医用画像との類似度が最も高い類似医用画像が、前記第１表示領域に最も近い位置に表示されるものである。
【００２４】
本態様によると、まずは、前記複数の類似医用画像を、前記対象医用画像との類似度が高い順番に配列表示させる。即ち、前記対象医用画像との関係で参照画像を絞り込む前の段階では、画像の表示数が限られた前記第２表示領域に、可能な限り多くの類似医用画像を、病名に関わらず前記対象医用画像との類似度との関係で表示させる。そして、前記対象医用画像との類似度が高い順番に横方向に前記類似医用画像を配列表示させるので、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００２５】
次に、病名を選択して類似医用画像を絞り込んだ後は、前記選択した病名の単位で区分けする。そのため、前記対象医用画像に表れている病変の病名を特定するにあって、前記類似医用画像を病名単位で比較参照できるので、効率よく比較精度を向上させることができる。そして、前記対象医用画像との類似度が高い順番に横方向に前記類似医用画像を前記第２表示領域に表示させる。さらに、本態様では、前記第２表示領域に配列表示された前記類似医用画像の中で前記対象医用画像との類似度が最も高い類似医用画像を、前記第１表示領域に最も近い位置に表示させる。そのため、横方向に前記類似医用画像を前記第２表示領域に表示させる場合であっても、前記選択された病名にまたがって、前記対象医用画像との類似度が高い類似医用画像が前記第１表示領域に近い側に集まる。
【００２６】
ここで、病名を選択して類似医用画像を絞り込むことは、医師が前記第１表示領域に表示される前記対象医用画像と、前記第２表示領域に表示される前記類似医用画像とを比較する工程に進んだことを意味する。本態様によると、病名を選択して類似医用画像を絞り込んだ後は、前記第１表示領域と前記第２表示領域とは、前記区分けして配列表示された前記対象医用画像との類似度が最も高い前記対応類似医用画像が前記第１表示領域に最も近い位置となるように前記表示画面において表示される。
【００２７】
このように効率的に比較精度を向上させるシステムを提供することで、診察精度の向上に寄与できる。
【００２８】
また、上記第１の態様又は上記第２の態様において、例えば、
前記第３表示領域を用いて単一の病名が選択された場合、前記選択された単一の病名に対応する対応類似医用画像を、前記対象医用画像との類似度が高い順番に横方向に前記第２表示領域に表示させるようにしてもよい。
【００２９】
また、上記第１の態様又は上記第２の態様において、例えば、
前記第３表示領域を用いて単一の病名が選択された場合、前記選択された単一の病名に対応する対応類似医用画像を、前記対象医用画像との類似度が高い順番に縦方向に前記第２表示領域に表示させるようにしてもよい。
【００３０】
また、上記第１の態様又は上記第２の態様において、例えば、
前記対象医用画像の付属情報には病名情報は設定されておらず、前記受信した複数の類似医用画像の付属情報には病名情報が設定されているようにしてもよい。
【００３１】
前記対象医用画像の病変について病名が特定される前の段階において、既に病名が特定されている類似医用画像と、前記対象医用画像とを比較することで、前記対象医用画像に表れている病名の特定を検討することがある。本態様では、病名が特定されていない対象医用画像を前記第１表示領域に表示し、一方、病名が特定されている類似医用画像を前記第２表示領域に表示することで、前記対象医用画像と前記類似医用画像との比較を効率化し、前記対象医用画像に表れている病名の特定を効率化するシステムを提供することで、診察精度の向上に寄与できる。
【００３２】
また、上記第１の態様又は上記第２の態様において、例えば、
前記区分けされた領域の中のいずれか一の領域において一つの拡大表示の指示を検知した場合、前記一の領域に対応する前記対応類似医用画像について、前記対応類似医用画像を表示する各表示枠の表示サイズを同一サイズに維持しつつ、前記対応類似症例画像の中の前記関心領域に相当する領域を中心として拡大させるようにしてもよい。
【００３３】
本態様は、前記区分けされた領域の中のいずれか一の領域において一つの拡大表示の指示を検知した場合、前記一の領域に対応する前記対応類似医用画像について、前記対応類似医用画像を表示する各表示枠の表示サイズを同一サイズに維持しつつ、前記対応類似症例画像の中の前記関心領域に相当する領域を中心として拡大させる。
【００３４】
これにより、前記区分けされた領域の中のいずれか一の領域において一つの拡大表示の指示によって、前記一の領域に対応する範囲において前記対応類似医用画像を拡大する。そのため、前記一の領域に対応する前記対応類似医用画像の各々について個々に拡大指示をする必要がなくなるので、操作効率を向上させることができる。
【００３５】
また、前記一の領域に対応する範囲において前記対応類似医用画像を拡大する際、前記対応類似医用画像を表示する各表示枠の表示サイズは同一サイズに維持される。そのため、前記一の領域に対応する前記対応類似医用画像を拡大させつつも、画像の表示数に制約があるディスプレイを有効活用して、前記一の領域に対応する前記対応類似医用画像の各々を拡大表示させることができる。
【００３６】
また、前記対象類似症例画像の中の前記関心領域に相当する領域を中心として拡大させる。そのため、前記対象類似医用画像の中で医師が関心を持つ領域を中心に、前記対応類似医用画像の各々が拡大されることになる。
【００３７】
また、前記類似医用画像の総数が膨大である場合、その全てと前記対象医用画像とを無造作に対比することは効率が悪い。本態様では、前記類似医用画像を病名の単位で区分けしている。その上で、本態様では、前記区分けされた領域の中のいずれか一の領域において選択的に画像を拡大させる。これにより、前記類似医用画像の総数が膨大である場合であっても、前記病名単位で区分けされた対応類似医用画像の中で、医師が関心を示した病名の画像に医師を集中させることができる。そのため、複数の病名の単位で前記類似医用画像が表示させた上で、医師は前記表示画面上において必要な情報の選択をさらに効率的に行うことができる。
【００３８】
以上により、一つの指示によって、前記ディスプレイの表示面積を有効活用しながら、医師が関心を持つ領域を中心に、前記対応類似医用画像を拡大させることができる。その結果、例えば、前記対象医用画像の類似医用画像の数が膨大であっても、その中から前記対象医用画像を診断する上で参考となる類似医用画像を効果的に選択させるので、医師により診療判断の向上に寄与できる。
【００３９】
また、上記第１の態様又は上記第２の態様において、例えば、
前記受信した複数の類似症例画像の各々は、前記各類似症例画像の中の前記関心領域に相当する領域を示す第２指定情報を含み、
前記対応類似症例画像の中の前記関心領域に相当する領域を中心として拡大させる際、前記第２指定情報が示す前記関心領域に相当する領域の大きさに応じて、前記対応類似症例画像を拡大させるようにしてもよい。
【００４０】
複数の類似医用画像において、前記関心領域に相当する領域の大きさは同じではない場合がある。個々の類似医用画像に含まれる病片の大きさが異なり、また、過去に前記関心領域に相当する領域を付与した医師も異なるなどの理由による。
【００４１】
そのため、前記複数の類似医用画像の各々に含まれる前記関心領域に相当する領域を、前記複数の類似医用画像に共通する一定の割合で拡大した場合、前記関心領域に相当する領域が比較的小さいものは、前記関心領域に相当する領域は比較的小さく拡大され、一方、前記関心領域に相当する領域が比較的大きいものは、前記関心領域に相当する領域は比較的大きく拡大される。即ち、前記複数の類似医用画像を拡大しても、拡大された前記関心領域に相当する領域の大きさが、ばらばらとなって、前記対象医用画像との比較を行うにあたって、効率が低下する場合がある。
【００４２】
本態様によると、前記各類似症例画像の中の前記関心領域に相当する領域を中心として拡大させる際、前記第２指定情報が示す前記関心領域に相当する領域の大きさに応じて、前記各類似症例画像を拡大させる。
【００４３】
これによると、前記複数の類似医用画像を拡大した場合、拡大された前記関心領域に相当する領域の大きさのばらつきを、前記複数の類似医用画像間で、一定範囲に収束できる。
【００４４】
そのため、前記複数の類似医用画像について、前記拡大された関心領域に相当する領域を医師はほぼ同様の大きさにて観察できる。その結果、前記関心領域に相当する領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上を図ることができる。
【００４５】
また、上記第１の態様又は上記第２の態様において、例えば、
前記第２指定情報が示す前記関心領域に相当する領域の大きさが第１サイズの場合、前記第２指定情報が示す前記関心領域に相当する領域が前記第１サイズより大きい第２サイズの場合に比べて、前記関心領域に相当する領域を大きく拡大させてもよい。
【００４６】
本態様によると、前記複数の類似医用画像を拡大した場合、拡大された前記関心領域に相当する領域の大きさのばらつきを、前記複数の類似医用画像間で、一定範囲に収束できる。具体的には、前記関心領域に相当する領域の大きさが比較的小さい類似症例画像の場合、前記関心領域に相当する領域を比較的大きく拡大させ、また、前記関心領域に相当する領域の大きさが比較的大きい類似症例画像の場合、前記関心領域に相当する領域を比較的小さく拡大させる。これにより、前記関心領域に相当する領域の大きさに依存することなく、前記拡大された前記関心領域に相当する領域の大きさを、ある程度同様の大きさに収束できる。
【００４７】
そのため、医師は、前記複数の類似医用画像について、前記拡大された関心領域に相当する領域をほぼ同様の大きさにて観察できる。その結果、前記関心領域に相当する領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上に寄与できる。
【００４８】
また、上記第１の態様又は上記第２の態様において、例えば、
前記受信した複数の類似症例画像の各々は、前記各類似症例画像の中の前記関心領域に相当する領域を示す第２指定情報を含み、
前記各類似症例画像の中の前記関心領域に相当する領域を中心として拡大させる際、前記第２指定情報が示す前記関心領域に相当する領域の大きさが、前記複数の類似医用画像の各表示領域の表示サイズに対して所定の割合となる拡大率にて、前記各類似症例画像を拡大させるようにしてもよい。
【００４９】
複数の類似医用画像において、前記関心領域に相当する領域の大きさは同じではない場合がある。個々の類似医用画像に含まれる病片の大きさが異なり、また、過去に前記関心領域に相当する領域を付与した医師も異なるなどの理由による。
【００５０】
そのため、前記複数の類似医用画像の各々に含まれる前記関心領域に相当する領域を一定の割合で拡大した場合、前記関心領域に相当する領域が比較的小さいものは、前記関心領域に相当する領域は比較的小さく拡大され、一方、前記関心領域に相当する領域が比較的大きいものは、前記関心領域に相当する領域は比較的大きく拡大される。即ち、前記複数の類似医用画像を拡大しても、拡大された前記関心領域に相当する領域の大きさが、ばらばらとなって、前記対象医用画像との比較を行うにあたって、効率が低下する場合がある。
【００５１】
本態様によると、前記各類似症例画像の中の前記関心領域に相当する領域を中心として拡大させる際、前記第２指定情報が示す前記関心領域に相当する領域の大きさが、前記複数の類似医用画像の各表示枠の表示サイズに対して所定の割合となる拡大率にて、前記各類似症例画像を拡大させる。
【００５２】
これによると、前記複数の類似医用画像を拡大した場合、拡大された前記関心領域に相当する領域の大きさを、前記各表示枠の表示サイズとの関係でほぼ同様に揃えることかできる。
【００５３】
そのため、前記複数の類似医用画像について、前記拡大された関心領域に相当する領域を医師はほぼ同様の大きさにて観察できる。その結果、前記関心領域に相当する領域が一部の類似医用画像において小さい状態で拡大されたために見落としなどが発生するのを防止し、診断精度の向上に寄与できる。
【００５４】
また、上記第１の態様又は上記第２の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記関心領域の特徴量を示す情報を前記症例検索システムに送信させ、前記関心領域の特徴量と前記所定の類似度を有する類似医用画像とを前記症例検索システムから受信させるようにしてもよい。
【００５５】
また、上記第１の態様又は上記第２の態様において、例えば、
前記制御方法は、
前記情報端末のコンピュータに対して、
前記対象医用画像及び前記関心領域を示す前記第１指定情報を前記症例検索システムに送信させ、
前記医用画像及び前記第１指定情報から得られる前記関心領域の特徴量と前記所定の類似度を有する類似医用画像とを前記症例検索システムから受信させるようにしてもよい。
【００５６】
また、上記第１の態様又は上記第２の態様において、例えば、
前記対象医用画像は肺の医用画像であり、
前記類似医用画像は肺の医用画像であり、
前記第１表示画像は、
前記関心領域に相当する領域が肺の広範囲であることを示す所定の第１範囲に属する類似医用画像を選択させる第１分布情報、前記関心領域に相当する領域が肺の一部であることを示す前記第１範囲より低い所定の第２範囲に属する類似医用画像を選択させる第２分布情報、及び、前記関心領域に相当する領域が胸膜を含む類似医用画像を選択させる第３分布情報を含み、
前記第１分布情報から前記第３分布情報の中のいずれか一が選択された場合、前記選択された一の分布情報に対応する類似医用画像を選択して前記第２表示領域に表示させるようにしてもよい。
【００５７】
本態様によると、前記第２表示領域に表示された複数の類似医用画像を、さらに、前記関心領域に相当する領域の分布類型に基づいて仕分けできる。これにより、例えば、多数表示された類似医用画像の中から、前記対象医用画像に含まれる前記関心領域に症状が類似した類似医用画像を、効率的に選択できる。
【００５８】
また、上記第１の態様又は上記第２の態様において、例えば、
前記第１分布情報が選択された場合、前記第１分布情報に対応する類似医用画像を、対応する表示枠に初期表示サイズにて表示させ、
前記第２分布情報が選択された場合、前記第２分布情報に対応する類似医用画像の中の前記関心領域に対応する領域を中心として、前記第２分布情報に対応する類似医用画像を、対応する表示枠内に拡大表示させ、
前記第３分布情報が選択された場合、前記第３分布情報に対応する類似医用画像の中の前記関心領域に対応する領域を中心として、前記胸膜を含んだ状態で、前記第３分布情報に対応する類似医用画像を、対応する表示枠内に拡大表示させるようにしてもよい。
【００５９】
本態様によると、前記関心領域に相当する領域の分布類型に基づいて類似医用画像を仕分けした際、仕分けに加え、前記分布類型に応じた表示をする。これにより、操作者は、前記関心領域に相当する領域の分布類型に基づいて類似医用画像を仕分けし、その後、前記分布類型に応じて類似医用画像を拡大し若しくは前記関心領域に相当する領域を中心にする処理などを別途行う必要がない。そのため、前記関心領域に相当する領域の分布類型に基づいて仕分けされたとは言え、その次に、前記仕分けされた多数の類似医用画像の一つ一つに対して同様の操作を繰り返し行う煩雑さを大幅に軽減できる。その結果、診療判断に向けられるべき医師の思考若しくは医師の集中力が操作の煩雑さにより中断されるのを大幅に軽減し、医師の思考若しくは医師の集中力を本来の診療判断に向けることができるので、診療判断の精度の向上を図ることができる。
【００６０】
また、上記第１の態様又は上記第２の態様において、例えば、
前記第１分布情報は、両側、多発性、びまん性又は血行性のカテゴリーに属する分布を示す情報であり、
前記第２分布情報は、区域性又は気道性のカテゴリーに属する分布を示す情報であり、
前記第３分布情報は、胸膜下のカテゴリーに属する分布を示す情報であるとしてもよい。
【００６１】
本態様によると、両側、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は類似医用画像が初期表示サイズで表示され、区域性又は気道性のカテゴリーに属する分布の場合は類似医用画像が拡大表示され、胸膜下のカテゴリーに属する分布の場合は胸膜を含んだ状態で類似医用画像が拡大表示される。
【００６２】
両側、多発性、びまん性又は血行性のカテゴリーに属する分布の場合は、肺全体に病変部が広がっている可能性又は肺の広範囲に病変部が生じている可能性が高いため、類似医用画像を初期表示サイズ、即ち、拡大させることなく表示させたいという医学的見地に基づくニーズが存在する。一方、区域性又は気道性のカテゴリーに属する分布の場合は、上述のような可能性が低い。そのため、区域性又は気道性のカテゴリーに属する分布を選択することにより類似医用を拡大表示させることで、拡大表示させるという１工程を省略させ、医師の集中力が中断されることを防止できる。また、胸膜下のカテゴリーに属する分布の場合は、胸膜と病変部との位置関係が診断においては重要な指標となるため、胸膜を含んだ状態で類似医用画像を拡大表示させたいという医学的見地に基づくニーズが存在する。
【００６３】
本開示の第３態様は、
医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続し、ディスプレイを有する情報端末の制御方法であって、
前記ディスプレイには読影対象候補の中から選択された一の読影対象の医用画像である対象医用画像が表示され、
前記情報端末のコンピュータに対して、
前記前記対象医用画像の中の関心領域を示す第１指定情報を検知させ、
前記第１指定情報によって示された関心領域に応じて、前記関心領域の特徴量と所定の類似度を有する類似医用画像を前記症例検索システムから受信させ、
前記対象医用画像の表示に用いる第１表示領域と、前記複数の類似医用画像の中の所定数の画像を、前記対象医用画像との類似度が高い順番に縦方向に配列表示する第２表示領域とを含む表示画面を表示させ、前記表示画面は病名選択に用いる第３表示領域を含み、
前記第３表示領域を用いて複数の病名が選択された場合、前記選択された複数の病名の各々に対応する対応類似医用画像を、前記複数の類似医用画像の中から選択させ、前記選択された複数の病名の単位で前記対応類似医用画像を区分けして前記対象医用画像との類似度が高い順番に横方向に前記第２表示領域に配列表示させ、
前記第２表示領域に配列表示された前記類似医用画像の中で前記対象医用画像との類似度が最も高い類似医用画像が、前記第１表示領域に最も近い位置に表示されるものである。
【００６４】
本態様によると、まずは、前記複数の類似医用画像を、前記対象医用画像との類似度が高い順番に横方向に配列表示させる。即ち、前記対象医用画像との関係で参照画像を絞り込む前の段階では、画像の表示数が限られた前記第２表示領域に、可能な限り多くの類似医用画像を、病名に関わらず前記対象医用画像との類似度との関係で表示させる。そして、前記対象医用画像との類似度が高い順番に横方向に前記類似医用画像を配列表示させるので、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００６５】
次に、病名を選択して類似医用画像を絞り込んだ後は、前記選択した病名の単位で区分けする。そのため、前記対象医用画像に表れている病変の病名を特定するにあって、前記類似医用画像を病名単位で比較参照できるので、効率よく比較精度を向上させることができる。そして、前記対象医用画像との類似度が高い順番に縦方向に前記類似医用画像を前記第２表示領域に表示させるので、前記選択された病名にまたがって、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００６６】
従って、前記対象医用画像との関係で参照画像を絞り込む前の段階においても、また、病名を選択して類似医用画像を絞り込んだ後の段階においても、前記対象医用画像との類似度が高い類似医用画像が前記第２表示領域の上部に集まることになる。
【００６７】
そのため、前記対象医用画像との関係で参照画像を絞り込む前の段階においても、また、病名を選択して類似医用画像を絞り込んだ後の段階においても、前記第２表示領域の中の同様の領域（例えば、上部）を用いて、前記対象医用画像と関係で類似度の高い類似医用画像を、医師に優先的に検討させることができる。
【００６８】
さらに、本態様では、前記第２表示領域に配列表示された前記類似医用画像の中で前記対象医用画像との類似度が最も高い類似医用画像を、前記第１表示領域に最も近い位置に表示させる。そのため、前記選択された病名にまたがって、前記対象医用画像との類似度が高い類似医用画像が前記第１表示領域に近い側に集まる。
【００６９】
ここで、病名を選択して類似医用画像を絞り込むことは、医師が前記第１表示領域に表示される前記対象医用画像と、前記第２表示領域に表示される前記類似医用画像とを比較する工程に進んだことを意味する。本態様によると、病名を選択して類似医用画像を絞り込んだ後は、前記第１表示領域と前記第２表示領域とは、前記区分けして配列表示された前記対象医用画像との類似度が最も高い前記対応類似医用画像が前記第１表示領域に最も近い位置となるように前記表示画面において表示される。
【００７０】
このように効率的に比較精度を向上させるシステムを提供することで、診察精度の向上に寄与できる。
【００７１】
（実施の形態１）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。また、実施の形態１では、検索結果を表示するディスプレイ形状を横長として説明する。
【００７２】
図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、及び症例検索システム３００を備えている。
【００７３】
情報端末１００、医用情報管理システム２００、及び症例検索システム３００はネットワーク４００を介して相互に通信可能に接続されている。
【００７４】
なお、医用情報管理システム２００及び症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバ等の上で動作するソフトウェアであってもよい。医用情報管理システム２００及び症例検索システム３００が病院内に設置されている場合、ネットワーク４００としては、ローカルエリアネットワークが採用できる。ローカルネットワークとしては、ＩＥＥＥ８０２．３シリーズの有線ＬＡＮ、ＩＥＥＥ８０２．１１シリーズの無線ＬＡＮ、或いは両者が混在するネットワークが採用できる。医用情報管理システム２００及び症例検索システム３００が病院外のサーバを用いて実現される場合、ネットワーク４００としては、インターネットが採用できる。
【００７５】
情報端末１００としては、パーソナルコンピュータやタブレット端末等の情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ  Ａｒｃｈｉｖｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍｓ）や電子カルテシステム等が採用される。
【００７６】
図２は、情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、及び通信制御部１１０を備える。
【００７７】
ディスプレイ１０１は、例えば、液晶モニタにより構成され、診断対象となる医用画像及びカルテ画像を表示すると共に、診断結果を記入するためのレポート入力画像等を表示する。なお、ディスプレイ１０１は最低１台必要だが、通常、画像診断においては２〜３台のディスプレイ１０１が用いられる。本実施の形態では２台のディスプレイ１０１が用いられ、一方のディスプレイ１０１をディスプレイ１０１ａ（第２ディスプレイの一例）とし、他方のディスプレイ１０１をディスプレイ１０１ｂ（第１ディスプレイの一例）とする（図３参照）。
【００７８】
また、ディスプレイ１０１ａの表示画面は第２表示画面の一例であり、ディスプレイ１０１ｂの表示画面は第１表示画面の一例である。図３は、２台のディスプレイ１０１ａ、１０１ｂの外観図である。図３では、ディスプレイ１０１ａには、４つの医用画像ビューワが２行２列の配置で表示されており、ディスプレイ１０１ｂには症例検索システム３００の画面が表示されている。なお、ディスプレイ１０１を１台とした場合、第１表示画面及び第２表示画面は１台のディスプレイ１０１の表示画面上に領域を分けて表示される。
【００７９】
操作部１０２は、例えば、キーボード及びマウスを含み、情報端末１００に対してユーザにより入力される種々の操作を受け付ける。例えば、操作部１０２は、ディスプレイ１０１に表示される医用画像及びカルテ画像に対するユーザからの操作、並びにレポート入力画面に対して診断結果を入力する操作等を受け付ける。
【００８０】
入力制御部１０３は、操作部１０２へのユーザの操作を検知すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２としてのマウスから出力される座標データからディスプレイ１０１上におけるマウスポインタの位置を検知し、ディスプレイ１０１上にマウスポインタを表示させる。そして、入力制御部１０３は、マウスがクリックされたことを検知したときにマウスポインタの表示位置に表示制御部１０４で生成されたＧＵＩ部品（例えば、ＧＵＩボタン）が表示されていれば、そのＧＵＩをユーザが選択したと判定し、他の構成要素にそのＧＵＩ部品がユーザにより選択されたことを通知する。
【００８１】
表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。
【００８２】
ＲＯＩ管理部１０５は、類似症例検索を行う際に、後述する検索クエリ画像に対して設定される関心領域（Ｒｅｇｉｏｎ  Ｏｆ  Ｉｎｔｅｒｅｓｔ）を示す関心領域情報を生成してメモリに格納し、関心領域情報を管理する。
【００８３】
表示ボックス管理部１０６は、後述する表示ボックス管理情報４４１０（図３５）をメモリに格納し、表示ボックス管理情報４４１０を管理する。
【００８４】
病名リスト管理部１０８は、症例表示領域７１０（図６）に表示された類似症例の病名リスト（図２９）を生成してメモリに格納し、病名リストを管理する。
【００８５】
分布リスト管理部１０９は、症例表示領域７１０に表示された類似症例の病変分布を示す分布リスト（図３４）を生成してメモリに格納し、分布リストを管理する。
【００８６】
通信制御部１１０は、例えば、情報端末１００をネットワーク４００に接続するための通信装置を含み、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１１０は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
【００８７】
図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、及び通信制御部２０６を備える。
【００８８】
患者情報蓄積部２０１は、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録された患者情報１０００（図１６）を蓄積する。
【００８９】
患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された患者情報１０００（図１６）に対して、ユーザから入力されたデータを登録して患者情報１０００を更新する処理、及び患者情報１０００を表示制御部１０４に出力する処理等を実行し、患者情報１０００を管理する。医用画像データ蓄積部２０３は、患者の検査画像である医用画像データを蓄積する。
【００９０】
医用画像データ管理部２０４は、医用画像データを医用画像データ蓄積部２０３に蓄積し、医用画像データを管理する。
【００９１】
診断レポート管理部２０５は、患者に対して行われた各検査に対する医師による診断結果を示す診断レポート３０００（図１９）を管理する。
【００９２】
通信制御部２０６は、例えば、医用情報管理システム２００をネットワーク４００に接続するための通信装置を含み、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。
【００９３】
図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、類似症例検索部３０３、及び通信制御部３０４を備える。
【００９４】
類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている類似症例のうち、類似症例検索の対象データとして選定された多数の類似症例から抽出された画像特徴や、生成されたサムネイル画像等が登録された類似症例データ４０００（図２０）を蓄積する。
【００９５】
画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信された検索クエリ画像の関心領域情報の画像特徴を抽出する。なお、関心領域情報は、関心領域を示す第１指定情報の一例である。
【００９６】
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された１以上の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。
【００９７】
通信制御部３０４は、例えば、症例検索システム３００をネットワーク４００に接続させる通信装置で構成され、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。
【００９８】
図４は、情報端末１００の実装形態の構成例を示す図である。図４に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。
【００９９】
アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。
【０１００】
ここで、アプリケーション５０１は、医用情報管理アプリケーション及び類似症例検索アプリケーションを含む。医用情報管理アプリケーションは、情報端末１００を医用情報管理システム２００と連携させるためのアプリケーションであり、類似症例検索アプリケーションは、情報端末１００を症例検索システム３００と連携させるためのアプリケーションである。そして、両アプリケーションは、相互にデータを送受し、情報端末１００において、医用情報管理システム２００及び症例検索システム３００が提供するサービスを統合させる。
【０１０１】
ＯＳ５０２は、情報端末１００の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。
【０１０２】
情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、表示ボックス管理部１０６、病名リスト管理部１０８、分布リスト管理部１０９、及び通信制御部１１０の機能が実現される。
【０１０３】
但し、本実施の形態では、情報端末１００は、アプリケーション５０１で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。
【０１０４】
図５は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ａに表示される基本画面Ｋ１の一例を示す図である。図５に示す基本画面Ｋ１は、４つの医用画像ビューワ６１０〜６４０で構成されている。医用画像は、通常、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  ｉｎ
Ｍｅｄｉｃｉｎｅ）フォーマットで記録されており、医用画像ビューワ６１０〜６４０はＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、ＤＩＣＯＭフォーマットの多数の断層画像（以下、スライス画像と呼ぶ。）で構成される胸部ＣＴ画像とする。但し、これは一例に過ぎず、他の部位（例えば、頭部、腹部、脚、或いは腕）のＣＴ画像が採用されてもよい。
【０１０５】
医用画像ビューワ６１０〜６４０に表示された胸部ＣＴ画像は、マウスやキーボードの操作により、スライス画像が切り替えられる。ここで、胸部ＣＴ画像を構成するスライス画像は、例えば、首側から腹側に向かう順番に配置されている。
【０１０６】
例えば、医用画像ビューワ６１０上にマウスポインタが位置決めされ、マウスホイールの回転が入力制御部１０３で検知されると、表示制御部１０４は、検知された回転量に応じて医用画像ビューワ６１０に表示されているスライス画像を切り替える。ここで、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの後方側に１クリック分回転されると、表示中のスライス画像を次のスライス位置のスライス画像に切り替える。一方、表示制御部１０４は、例えば、医用画像ビューワ６１０において、マウスホイールがマウスの前方側に１クリック分回転されると、表示中のスライス画像をスライス位置が１つ前のスライス画像に切り替える。よって、医師等のユーザはマウスホイールを前方側又は後方側に回転させながら、医用画像ビューワ６１０に表示されるスライス画像を適宜切り替え、所望のスライス画像を探索する。
【０１０７】
なお、医用画像としては、胸部ＣＴ画像に代えて、ＭＲＩ（Ｍａｇｎｅｔｉｃ  Ｒｅｓｏｎａｎｃｅ  Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像が採用されてもよい。また、図５の例では、医用画像ビューワの個数は４個とされているが、これは一例にすぎず、６個や８個等別の個数が採用されてもよい。医用画像ビューワの個数が多くなると同時に比較できる画像が増えるが、１画像当たりの表示面積が狭くなる。そのため、この個数はディスプレイ１０１ａの表示サイズに応じて適宜変更可能な構成を採用すればよい。ここでは、医用画像ビューワの個数は、ユーザ又は管理者が自由に変更できるものとする。
【０１０８】
類似症例検索アプリケーションが起動される前には、ディスプレイ１０１ａの全域には、ある患者の胸部ＣＴ画像のスライス画像が表示されている。そして、この状態で、読影者等のユーザにより類似症例検索アプリケーションが起動されると医用画像ビューワ６１０には、ディスプレイ１０１ａの全域に表示されていたスライス画像が表示される。
【０１０９】
つまり、医用画像ビューワ６１０には、ユーザが類似症例検索アプリケーションを起動させたときに、ディスプレイ１０１ａの全域に表示されていた検索クエリ画像が初期表示される。なお、表示制御部１０４は、検索クエリ画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ  Ｏｆ  Ｉｎｔｅｒｅｓｔ）を重畳表示してもよい。検索クエリ画像は読影対象の一の医用画像である対象医用画像の一例である。
【０１１０】
図５では、他の医用画像ビューワ６２０〜６４０には何の画像も表示されていないが、診断対象となる患者の検査画像が複数あり、類似症例検索アプリケーションが起動される前に、ディスプレイ１０１ａに複数の検査画像が表示されていた場合、表示制御部１０４は、医用画像ビューワ６２０〜６４０にこれら複数の検査画像をそのまま表示すればよい。
【０１１１】
図６は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ｂに表示される基本画面Ｋ２の一例を示す図である。図６に示す基本画面Ｋ２は、症例表示領域７１０、レイアウト領域７２０、病名リスト表示領域７３０、及び分布リスト表示領域７５０を備える。なお、レイアウト領域７２０は第１表示領域の一例であり、症例表示領域７１０は第２表示領域の一例である。また、病名リスト表示領域７３０は、第３表示領域の一例である。
【０１１２】
症例表示領域７１０は、検索クエリ画像に類似した類似症例のサムネイル画像を類似度順に表示する領域である。ここで、類似症例のサムネイル画像は、類似医用画像の一例である。
【０１１３】
症例表示領域７１０には多数の類似症例が表示されるため、解像度や画素値の変換をその場で行うと処理に時間がかかってしまう。よって、サムネイル画像は、オリジナルのスライス画像から予め作成され、症例検索システム３００に保存されている。
【０１１４】
以下、解像度や画素値の変換について少し補足する。オリジナルのスライス画像の解像度は５１２×５１２画素であるが、サムネイル画像はより低解像であるため、解像度変換を行う必要がある。そこで、サムネイル画像は、元となるスライス画像に対して低解像度処理及び階調変換処理が行われて生成される。
【０１１５】
階調変換処理は例えば、下記のように行われる。ＣＴで取得したスライス画像は各画素値（ＣＴ値）が−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ  Ｕｎｉｔ）の２０００階調の値をとり、そのままでは通常の８ビット階調のディスプレイに表示できない。また、表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約−９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜−５０ＨＵ）、水（ＣＴ値：０ＨＵ）、及び骨（ＣＴ値：１０００ＨＵ）を人間が肉眼で区別することは難しい。
【０１１６】
よって、通常、スライス画像は、各画素値に対してウィンドウレベル及びウィンドウ幅が設定され、８ビットの画素値に再構成されて、ディスプレイに表示される。ここで、ウインドウレベルは、ウインドウの中心となるＣＴ値を示し、ウインドウ幅は、ウインドウ中心の上下の幅を示す。
【０１１７】
例えば、肺野条件でＤＩＣＯＭ画像が再構成される場合、ウインドウレベルが−５５０〜−８００に設定され、ウインドウ幅が１０００〜１６００に設定される。したがって、サムネイル画像も、元となるスライス画像から上記の処理によって画素値が８ビットに落とされることで生成される。
【０１１８】
なお、症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が所定の閾値以下の類似症例を示すサムネイル画像である。ここでは距離としては、例えば、ユークリッド距離が用いられる。なお、距離としては、市街地距離等の別の距離尺度が採用されてもよい。比較対象となる２つの画像は、距離が近いほど類似している。また、特徴ベクトルは、サムネイル画像から得られたものではなく、元画像であるスライス画像から得られたものが採用される。
【０１１９】
図７は、症例表示領域７１０に表示されるある１つの類似症例の表示領域を取り出して示した図である。類似症例の表示領域には、サムネイル画像が表示されており、このサムネイル画像の下部には、確定診断病名表示領域７１１及び距離表示領域７１２が配置されている。確定診断病名表示領域７１１には、対象となる類似症例の確定診断病名が表示される。確定診断病名とは、対象となる類似症例に対して診断が確定された病名を指す。距離表示領域７１２には、対象となる類似症例のスライス画像の特徴ベクトルと、検索クエリ画像の特徴ベクトルとの距離が表示される。図７の例では、確定診断病名表示領域７１１には、「非結核性抗酸菌症」と表示されているため、このサムネイル画像は「非結核性抗酸菌症」と確定診断がされた類似症例のサムネイル画像を示す。また、距離表示領域７１２には、「０．０５」と表示されているため、この類似症例のスライス画像と探索クエリ画像との距離が「０．０５」であることが示されている。
【０１２０】
図６に戻り、基本画面Ｋ２の例えば左上には、検索結果件数表示領域７１３が配置されている。検索結果件数表示領域７１３には、検索処理の結果、症例検索システム３００から取得された、診断対象症例に類似する類似症例の数が表示される。
【０１２１】
なお、類似症例の数が膨大である場合、症例表示領域７１０は全ての類似症例を一度に表示することができない。そこで、症例表示領域７１０の例えば右側には、上下方向に長尺のスクロールバー７１５が設けられている。表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を上下方向にスクロール表示させる。これにより、ユーザは、非表示状態にあった類似症例を症例表示領域７１０に表示させ、その類似症例を観察できる。
【０１２２】
なお、スクロールバー７１５は左右方向に長尺であってもよい。この場合、表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を左右方向にスクロール表示させればよい。或いは、症例表示領域７１０にマウスポインタが位置決めされた状態で、キーボードの方向キーが押されると、表示制御部１０４は、キーが押されている間、押されているキーの方向に症例表示領域７１０内に表示されているサムネイル画像をスクロール表示させてもよい。
【０１２３】
なお、情報端末１００は、探索クエリ画像との距離が所定の閾値以下のサムネイル画像を症例検索システム３００から取得するとしたが、これは一例に過ぎない。例えば、情報端末１００は、類似度が高い順に、常に一定数のサムネイル画像を症例検索システム３００から取得してもよい。或いは、情報端末１００は、常にある確定診断病名のサムネイル画像が一定数含まれるようにサムネイル画像を症例検索システム３００から取得してもよい。
【０１２４】
なお、症例表示領域７１０におけるサムネイル画像の表示手法としては、例えば、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法が採用できる。つまり、症例表示領域７１０において、左上から右下に向けて蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法が採用できる。
【０１２５】
もちろん、本実施の形態は別の表示手法が採用されてもよい。例えば、左から１列目の上端に距離が最短のサムネイル画像を表示し、下側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一列の下端に達すると、左から２列目の上端に次に距離が大きいサムネイル画像を表示するという表示手法が採用されてもよい。また、これら複数の表示手法をユーザが切り替え可能な構成が採用されてもよい。
【０１２６】
また、上記の例では、類似度として距離が採用されたが、コサイン類似度のような画像同士の類似性を示す指標であればどのような指標が採用されてもよい。コサイン類似度が採用された場合、値が１に近づくにつれて比較対象となる２つの画像の類似性が高くなる。
【０１２７】
なお、詳細は後述するが、症例表示領域７１０に表示する類似症例は、病名リスト表示領域７３０に表示された病名や、分布リスト表示領域７５０に表示された病変分布で絞り込むことができる。現在設定されている類似症例の絞込条件は、表示条件表示領域７１４に表示される。図６の例では、類似症例検索直後の状態であり、何も絞り込みがなされていないため、表示条件表示領域７１４には「全疾患」と表示されている。
【０１２８】
レイアウト領域７２０は、例えば、図６に示す基本画面Ｋ２の左下に配置されている。そして、レイアウト領域７２０は、症例表示領域７１０に表示された類似症例サムネイル画像のうちユーザが詳細に観察したい画像を、ディスプレイ１０１ａの医用画像ビューワに表示させるために用いられる。図５に示す通り、ディスプレイ１０１ａには４つの医用画像ビューワ６１０〜６４０が２行２列で表示されている。また、レイアウト領域７２０には、２行２列で４つの表示ボックス７２１〜７２４が存在する。このように、ディスプレイ１０１ａに表示される医用画像ビューワ６１０〜６４０の数及び配置と、レイアウト領域７２０における表示ボックス７２１〜７２４の数及び配置とは揃えられている。図５の通り、医用画像ビューワ６１０に、検索クエリ画像が表示されているのに合わせ、表示ボックス７２１には、検索クエリ画像のサムネイル画像が初期表示される。なお、検索クエリ画像のサムネイル画像を表示する表示ボックス７２１は、第１表示ボックスの一例である。
【０１２９】
他の表示ボックス７２２〜７２４には、医用画像ビューワ６２０〜６４０と連動させて類似症例のサムネイル画像が表示される。つまり、入力制御部１０３が表示ボックス７２２〜７２４のいずれか１の表示ボックスに症例表示領域７１０に表示された１のサムネイル画像のドラッグアンドドロップを検知すると、表示制御部１０４はその表示ボックスに１のサムネイル画像を表示させると共に、その表示ボックスに対応する医用画像ビューワにそのサムネイル画像に対応するスライス画像を表示する。このように、医用画像ビューワ６１０〜６４０は、表示ボックス７２１〜７２４と１対１で対応付けられている。
【０１３０】
図６の例では、表示ボックス７２２〜７２４は空白であるため、図５に示す医用画像ビューワ６２０〜６４０も空白になっている。
【０１３１】
ユーザは、マウスをドラッグアンドドロップすることで、詳細に観察したいサムネイル画像を、症例表示領域７１０からレイアウト領域７２０に移動させる。例えば、ユーザが表示ボックス７２２にサムネイル画像を移動させたとすると、表示ボックス７２２に対応する医用画像ビューワ６２０には、このサムネイル画像に対応するスライス画像が表示される。同様に、ユーザが表示ボックス７２３にサムネイル画像を移動させたとすると、表示ボックス７２３に対応する医用画像ビューワ６３０には、このサムネイル画像に対応するスライス画像が表示される。すなわち、表示ボックス７２１〜７２４のうち任意の表示ボックスにサムネイル画像を移動させると、検索クエリ画像のサムネイル画像に隣接して類似症例のサムネイル画像が表示される。そのため、ユーザはサムネイル画像のレベルで診断対象症例と類似症例との対比ができ、両症例の類似性を速やかに判断できる。つまり、サムネイル画像は、スライス画像に比べて情報量が少ないため、ユーザは、レイアウト領域７２０において隣接配置された診断対象症例と類似症例とがどの程度類しているかのおよその検討をつけることができる。そのため、ユーザは、症例表示領域７１０に表示された多数の類似症例の中から、診断対象症例との比較をスライス画像のレベルで詳細に行う必要がある類似症例の最終候補の絞り込みを効率良く行うことができる。
【０１３２】
同様に、ディスプレイ１０１ａにも、レイアウト領域７２０と同じ配置関係で検索クエリ画像及び類似症例のスライス画像が表示される。そのため、レイアウト領域７２０において最終候補となる類似症例を絞り込む作業が終了すると、何らの操作を入力しなくても、ディスプレイ１０１ａには、診断対象症例と最終候補として絞り込んだ類似症例とがスライス画像のレベルで表示されている。そのため、ユーザは対象診断症例と最終候補の類似症例とを詳細に読影するという次の作業ステップに円滑に移行できる。
【０１３３】
図６に示す基本画面Ｋ２の左側の上段には、「病名リスト」との見出しが付けられた病名リスト表示領域７３０が配置されている。病名リスト表示領域７３０には、類似症例の検索結果として取得された全ての類似症例の確定診断病名が表示される。診断対象症例は、診断が終了して確定診断病名が付与された後、類似症例として、症例検索システム３００に蓄積される。したがって、各類似症例には、それぞれ、診断によって付与された確定診断病名が予め付与されている。
【０１３４】
図８は、病名リスト表示領域７３０の拡大図である。図８では、確定診断病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２、７３３、７３５、７３６、７３８、７３９、７４０、７４２、７４３、７４５）とに分けて表示されている。図８の例では、大分類の病名として、真菌症７３１（ｍｙｃｏｓｉｓ）、腫瘍性７３４（ｎｅｏｐｌａｓｔｉｃ）、非腫瘍性７３７（ｎｏｎｎｅｏｐｌａｓｔｉｃ）、ミコバクテリア症７４１（ｍｙｃｏｂａｃｔｅｒｉｏｓｉｓ）、及びその他７４４が表示されている。
【０１３５】
また、図８の例では、真菌症７３１の詳細分類の病名として、アスペルギルス症７３２（ａｓｐｅｒｇｉｌｌｏｓｉｓ）、クリプトコッカス症７３３（ｃｒｙｐｔｏｃｏｃｃｏｓｉｓ）が表示されている。また、腫瘍性７３４の詳細分類の病名として、原発性肺癌７３５（ｌｕｎｇ  ｃａｎｃｅｒ）、転移性肺癌７３６（ｍｅｔａｓｔａｔｉｃ  ｌｕｎｇ  ｃａｎｃｅｒ）が表示されている。また、非腫瘍性７３７の詳細分類の病名として、肺膿瘍７３８（ｌｕｎｇ  ａｂｓｃｅｓｓ）、サルコイドーシス７３９（ｓａｒｃｏｉｄｏｓｉｓ）、敗血性塞栓７４０（ｓｅｐｔｉｃ  ｅｍｂｏｌｉ）が表示されている。また、ミコバクテリア症７４１の詳細分類の病名として、非結核性抗酸菌症７４２（ＮＴＭ：ｎｏｎｔｕｂｅｒｃｕｌｏｕｓ  ｍｙｃｏｂａｃｔｅｒｉａ）、肺結核７４３（ｔｕｂｅｒｃｕｌｏｓｉｓ）が表示されている。また、その他７４４の詳細分類の病名として気管支拡張症７４５（ｂｒｏｎｃｈｉｅｃｔａｓｉｓ）が表示されている。
【０１３６】
また、大分類の病名及び詳細分類の病名の横には、その病名の症例数が表示されている。ユーザは、この病名リスト表示領域７３０における大分類の病名または詳細分類の病名の任意の行を選択することで、症例表示領域７１０に表示される類似症例を絞り込むことができる。図６に示すように類似症例の検索直後の状態では、多様な疾患を含む６２個の類似症例が表示対象になっているが、図８の真菌症７３１の行がマウスでクリックされた場合、表示制御部１０４は、図９に示すように真菌症の類似症例を症例表示領域７１０に表示する。また、図８の転移性肺癌７３６の行がマウスでクリックされた場合は、表示制御部１０４は、図１０に示すように、転移性肺癌の類似症例を症例表示領域７１０に表示する。
【０１３７】
この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例がどのような絞り込み条件であるが分かるように、表示条件表示領域７１４に、絞り込んだ病名を表示する。図９は、「真菌症」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。図１０は、「転移性肺癌」で類似症例が絞り込まれたときの基本画面Ｋ２を示す図である。
【０１３８】
図９の例では、「真菌症」で絞り込みがかけられたため、表示条件表示領域７１４には「真菌症」と表示され、図１０の例では「転移性肺癌」で絞り込みがかけられたため、表示条件表示領域７１４には「転移性肺癌」と表示されている。
【０１３９】
また、この時、表示制御部１０４は、現在、症例表示領域７１０に表示されている類似症例の件数が分かるように、検索結果件数表示領域７１３にその件数を表示する。図９の例では、「真菌症」に該当する類似症例は１４件であったため、検索結果件数表示領域７１３には１４件と表示され、図１０の例では、「転移性肺癌」に該当する類似症例は３件であったため、検索結果件数表示領域７１３には３件と表示されている。
【０１４０】
この機能により、画像診断の対象として医師が想定する病名の類似症例が症例表示領域７１０に表示され、医師は、診断対象症例が想定した病名と矛盾しないかどうかを容易に確認できる。
【０１４１】
図９、図１０の例では、病名リスト表示領域７３０で選択された単一の病名に対応する類似症例のサムネイル画像は、検索クエリ画像に対して類似度が高い順に横方向で配列されている。具体的には、図９の例では、１行目の左端に検索クエリ画像との距離が最短のサムネイル画像が表示され、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像が表示され、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法が採用されている。また、図１０の例では、１行目において、左端から右側に向かうにつれて距離が順次に大きくなるように３つの類似症例のサムネイル画像が表示されている。
【０１４２】
このように、本実施の形態では、病名リスト表示領域７３０において単一の病名が選択された場合、表示制御部１０４は、選択された単一の病名に対応する類似症例のサムネイル画像を、横方向に類似度が高い順で表示する。
【０１４３】
なお、病名リスト表示領域７３０で複数の病名が選択された場合、表示制御部１０４は、選択された病名の数に応じて症例表示領域７１０を分割して、該当する類似症例のサムネイル画像を表示する。
【０１４４】
図４８は、病名リスト表示領域７３０において病名が選択された場合の表示処理の一例を示すフローチャートである。以下、図４８のフローチャートを用いて、病名リスト表示領域７３０に表示された病名が選択された場合の症例表示領域７１０への表示処理について詳しく説明する。
【０１４５】
まず、Ｓ１０００では、表示制御部１０４は、病名リスト表示領域７３０においてユーザが選択した病名を取得する。なお、病名を選択する際のユーザの操作については後述する。
【０１４６】
Ｓ１００１では、表示制御部１０４は、Ｓ１０００で取得した病名の数を算出する。
【０１４７】
Ｓ１００２では、表示制御部１０４は、Ｓ１００１で算出された病名数が複数か否かを判定し、複数でなければ（Ｓ１００２でＮＯ）、Ｓ１００３に処理を進め、複数であれば（Ｓ１００２でＹＥＳ）、処理をＳ１００４に進める。
【０１４８】
Ｓ１００３は、病名リスト表示領域７３０で１つの病名が選択された場合の症例表示領域７１０の表示処理である。この場合、前述の図９や図１０に示すように、Ｓ１０００で選択された病名に該当する類似症例のサムネイル画像が、距離の近い順に横方向で症例表示領域７１０に表示される。具体的には、上から１行目の左端に検索クエリ画像に対する距離が最も小さい（類似度が高い）類似症例が表示され、右に向かうにつれて距離が大きい（類似度が小さい）順に類似症例が表示され、１行目の右端に達すると上から２行目の左端に次に距離が大きい類似症例が表示されるという表示態様で、類似症例のサムネイル画像が表示される。
【０１４９】
一般的にインターネット等でキーワードを用いて画像を検索した場合、その検索結果は、画面の左から右に向かってキーワードとの関連度が高い順に表示されることが多い。即ち、検索結果の画面として複数の画像が縦横に並べて表示されている場合、ユーザは、左上側に表示されている画像ほどキーワードとの関連度が高いという先入観を持って検索結果の画面を見る傾向にある。そこで、本態様は、上記先入観に反しないようにするため、複数の類似症例を、検索クエリ画像に対して類似度が高い順番に横方向に配列させる。
【０１５０】
Ｓ１００４〜Ｓ１００５は、病名リスト表示領域７３０で複数の病名が選択された場合の症例表示領域７１０に対する表示処理である。
【０１５１】
Ｓ１００４では、表示制御部１０４は、症例表示領域７１０を、Ｓ１００１で算出した病名数で縦方向に分割する。この処理により、Ｓ１０００で取得した病名の個数分の分割領域が作成される。ここで作成される分割領域は、該当する病名を持つ類似症例のサムネイル画像を縦一列で表示するために縦方向に長尺である。
【０１５２】
Ｓ１００５では、表示制御部１０４は、Ｓ１００４で作成した各分割領域に対し、該当する病名を持つ類似症例のサムネイル画像を類似度が高い順に縦一列で表示する。
【０１５３】
図４９は、複数の病名が選択された場合に作成される基本画面Ｋ２の一例を示す図である。この基本画面Ｋ２は、図６の病名リスト表示領域７３０でアスペルギルス症、転移性肺癌、及び肺膿瘍の３つの病名が選択された後の状態を示している。そのため、表示条件表示領域７１４には、アスペルギルス症、転移性肺癌、及び肺膿瘍と表示されている。また、３つの病名に該当する類似症例の件数が１５件であったため、検索結果件数表示領域７１３には１５件と表示されている。また、３つの病名が選択されため、症例表示領域７１０は、縦方向に３分割されて、３つの病名に対応する３つの分割領域が形成されている。そして、各分割領域には該当する病名の類似症例のサムネイル画像が類似度の高い順で縦一列で表示されている。
【０１５４】
ここでは、左から順に「アスペルギルス症」、「転移性肺癌」、及び「肺膿瘍」との見出しが付けられた３つの病名に対応する３つの分割領域が表示されている。そして、各分割領域には、各病名に該当する類似症例のサムネイル画像が縦一列で表示されている。
【０１５５】
このような表示を行うことにより、類似症例の中から、検索クエリ画像に対して類似する参照画像を絞り込む前の段階においても、また、病名を選択して類似症例を絞り込んだ後の段階においても、検索クエリ画像に対して類似度が高い類似症例のサムネイル画像が症例表示領域７１０の上部に集まることになる。そのため、検索クエリ画像に対する参照画像を絞り込む前の段階においても、また、病名を選択して類似症例のサムネイル画像を絞り込んだ後の段階においても、検索クエリ画像に対して類似度の高い類似症例のサムネイル画像を、医師に優先的に検討させることができる。このように効率的に比較精度を向上させるシステムを提供することで、本実施の形態は、診察精度の向上に寄与できる。
【０１５６】
なお、１の分割領域において表示対象となるサムネイル画像が一定数以上であり、分割領域が一度に全てのサムネイル画像を表示できない場合、表示制御部１０４は、該当する分割領域にスクロールバー１０００１を配置してもよい。図４９の例では、左から１列目のアスペルギルス症及び左から３列目の肺膿瘍の２つの分割領域は、表示対象となるサムネイル画像が一定数以上であり、一度に全てのサムネイル画像を表示できなかったため、縦方向に長尺のスクロールバー１０００１が配置されている。この場合、表示制御部１０４は、スクロールバー１０００１が上方向にスライドされると、病名の見出しを維持した状態で、或いは見出しと共に、スライド量に応じた距離分、該当する分割領域を、下方向にスクロールさせる。また、表示制御部１０４は、スクロールバー１０００１が下方向にスライドされると、病名の見出しを維持した状態で、或いは見出しと共に、スライド量に応じた距離分、分割領域を上方向にスクロールさせる。これにより、ユーザは、選択した病名に対応する類似症例のサムネイル画像を全て閲覧できる。なお、スクロールバー１０００１が表示される場合の一定数としては、分割領域のサイズとサムネイル画像のサイズとの関係から分割領域が一度に表示可能なサムネイル画像の個数が採用できる。図４９の例では、分割領域は１度に３つのサムネイル画像が表示可能であるため、表示対象のサムネイル画像が４つ以上の場合、表示制御部１０４は、該当する分割領域にスクロールバー１０００１を配置させればよい。
【０１５７】
また、図４９において、選択された病名数が一定数以上の場合は、図５０に示されるように、スクロールバー１００００等を用いて症例表示領域７１０は拡張されてもよい。図５０は、選択された病名数が一定数以上の場合の基本画面Ｋ２を示す図である。症例表示領域７１０に表示するサムネイル画像のサイズを読影可能な所定のサイズ以上に保持する場合、選択された病名数が一定以上になると、症例表示領域７１０は、選択された全ての病名を一度に表示することができなくなる。そこで、選択された病名数が一定以上の場合、表示制御部１０４は、症例表示領域７１０にスクロールバー１００００を設け、症例表示領域７１０を実質的に拡張する。
【０１５８】
図５０の例では、図６の病名リスト表示領域７３０でアスペルギルス症、転移性肺癌、肺膿瘍、及びクリプトコッカス症の４つの病名が選択された後の基本画面Ｋ２が示されている。図５０に示すように、症例表示領域７１０は、縦方向に４分割されて４つの病名に対応する４つの分割領域が形成され、各分割領域に対応する病名の類似症例のサムネイル画像を表示している。ここで、左から４列目に配置されたクリプトコッカス症の分割領域は、一部が非表示状態になっている。そこで、表示制御部１０４は、症例表示領域７１０に横方向に長尺のスクロールバー１００００を配置する。そして、表示制御部１０４は、スクロールバー１００００が右方向にスライドされると、スライド量に応じた距離分、症例表示領域７１０を左方向にスクロールさせ、一部が非表示であったクリプトコッカス症の分割領域の全域を症例表示領域７１０内に露出させる。このように、選択された病名数が一定以上の場合にスクロールバー１００００を用いて症例表示領域７１０をスクロールすることで、ユーザは選択した全ての病名に該当する類似症例を閲覧できる。なお、ここでは、スクロールバー１００００を用いる態様を説明したが、本実施の形態はこれに限定されない。例えば、症例表示領域７１０内にマウスが位置決めされ、左方向にマウスがドラッグされると、症例表示領域７１０が右方向にスクロールされ、右方向にマウスがドラッグされると、症例表示領域７１０が左方向にスクロールされる態様が採用されてもよい。
【０１５９】
また、スクロールバー１００００が表示される場合の病名数としては、例えば、症例表示領域７１０のサイズとサムネイル画像のサイズとの関係から症例表示領域７１０が一度に表示できる予め定められた値が採用できる。図５０の例では、症例表示領域７１０は、一度に全域を表示できる分割領域の個数が３つであるため、ユーザにより４つ以上の病名が選択された場合にスクロールバー１００００が表示される。
【０１６０】
なお、Ｓ１００３では、病名リスト表示領域７３０で１つの病名が選択された場合、症例表示領域７１０は、サムネイル画像を類似度の高い順で横一列に表示する例を示したが、本実施の形態はこれに限定されない。例えば、病名リスト表示領域７３０で１つの病名が選択された場合、表示制御部１０４は、症例表示領域７１０に類似度の高い順にサムネイル画像を縦一列で表示してもよい。
【０１６１】
図５１は、図６の病名リスト表示領域７３０でアスペルギルス症が選択された後の基本画面Ｋ２を示す図である。図５１の例では、病名として選択されたアスペルギルス症のサムネイル画像は、症例表示領域７１０において、類似度が高い順で縦一列で表示されている。このような表示を行うことにより、病名が複数選択された時と同じ視線動作で検索症例を閲覧することができるため、検索時の利便性を向上させることが可能になる。
【０１６２】
図６に戻り、基本画面Ｋ２の左側の中段には、「病変分布」との見出しが付けられた分布リスト表示領域７５０が配置されている。分布リスト表示領域７５０には、類似症例を検索した結果、症例検索システム３００から取得された全ての類似症例の病変分布の種類が表示される。
【０１６３】
図１１は分布リスト表示領域７５０の拡大図である。図１１の例では、７つの病変分布の名称が表示されており、各病変分布の名称の左側にはチェックボックスが配置されている。図１１の例では病変分布として、びまん性７５１（ｄｉｆｆｕｓｅ）、区域性７５２（ｓｅｇｍｅｎｔａｌ）、気道性７５３（ｂｒｏｎｃｈｉａｌ）、両側性７５４（ｂｉｌａｔｅｒａｌ）、多発性７５５（ｍｕｌｔｉｐｌｅ）、胸膜下７５６（ｓｕｂｐｌｅｕｒａｌ）、及び血行性７５７（ｈｅｍａｔｏｇｅｎｏｕｓ）が表示されている。
【０１６４】
これらの病変分布は予め定義されており、各類似症例には、予め、びまん性７５１〜血行性７５７のいずれに該当するか否かを示す分布フラグ値（該当：１、非該当：０）が付与されている。類似症例によっては、全ての分布フラグ値が非該当（：０）に設定されている場合もあれば、複数の分布フラグ値が該当（：１）に設定されている場合もある。
【０１６５】
本実施の形態の症例検索システム３００は、ユーザが診断対象症例のスライス画像に設定した関心領域に対し、類似する関心領域を持つ類似症例を検索する。ユーザが関心領域を設定したスライス画像以外にも、病変は存在することもある。そして、ユーザは関心領域を設定したスライス画像で類似症例を検索した後、そのスライス画像以外のスライス画像と、検索された類似症例とを比較したい場合もある。この場合、ユーザは、医用画像ビューワ６１０において、スライス送りの操作を入力して他のスライス画像を表示させ、検索された類似症例と比較する作業を行う。この場合、検索された全ての類似症例のうち注目する病変に関連する類似症例が症例表示領域７１０に表示されていれば、関心領域が設定されたスライス画像以外のスライス画像の中から所望の病変を持つスライス画像を抽出する作業をスムーズに行うことができる。そこで、本実施の形態では、この作業をよりスムーズに行うために、検索された類似症例を所望の病変分布で絞りこむ機能が設けられている。
【０１６６】
本実施の形態では、肺野領域内での病変分布として、図１１のびまん性７５１〜血行性７５７で示す病変分布が採用されている。また、図１１のように、チェックボックス及び病名分布の名称について、表示制御部１０４は、絞り込みが可能な病変分布をアクティブ状態で表示し、絞り不可能な病変分布を非アクティブ状態で表示する。ここでは、アクティブ状態としては、輝度が非アクティブ状態に比べて高い状態が採用され、非アクティブ状態としては、輝度がアクティブ状態に比べて低い状態が採用されている。
【０１６７】
図１１の例では、びまん性７５１、気道性７５３〜多発性７５５、及び血行性７５７がアクティブ状態で表示され、区域性７５２及び胸膜下７５６は、非アクティブ状態で表示されている。これは、現在、類似症例検索によって取得された全ての類似症例のうち、少なくともいずれか１つの類似症例において、びまん性７５１、気道性７５３〜多発性７５５、及び血行性７５７の分布フラグ値が１（該当）に設定され、取得された全ての類似症例のうち、いずれの類似症例においても、区域性７５２及び胸膜下７５６の分布フラグ値が０（非該当）に設定されていたからである。
【０１６８】
アクティブ状態のチェックボックスのうち、１以上のチェックボックスにチェックマークが入力されたことを入力制御部１０３が検知すると、表示制御部１０４は、チェックマークが入力された病変条件に該当する類似症例のみを症例表示領域７１０に表示させる。
【０１６９】
なお、区域性７５２や胸膜下７５６については、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）に設定されている。そのため、区域性７５２や胸膜下７５６にチェックマークが入力可能な構成を採用すると、これらの病変分布にチェックマークを入力した場合、症例表示領域７１０には類似症例が何も表示されず、チェックマークを入力する意味が無くなってしまう。そこで、本実施の形態では、このような事態を避けるために、検索結果として取得された類似症例のいずれにおいても分布フラグ値が０（非該当）である病変分布は非アクティブ状態で表示する。
【０１７０】
図１２は、チェックマークが入力された分布リスト表示領域７５０を示す図である。図１３は、気道性の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図１２に示すように、気道性７５３のチェックボックスにチェックマークが入力された場合、表示制御部１０４は、図１３に示すように、症例表示領域７１０に、気道性の病変分布を持つ類似症例を表示する。この例では、気道性の病変分布を持つ類似症例は１７件であった。そのため、表示制御部１０４は、検索結果件数表示領域７１３に「１７件」と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名と、病変分布の名称である「気道性」とを表示する。図１３の例では、病名リスト表示領域７３０に挙げられた病名による絞り込みがかけられていないため、表示条件表示領域７１４には「全疾患」と表示されている。
【０１７１】
図１４は、複数のチェックマークが入力された分布リスト表示領域７５０を示す図である。図１５は、複数の病変分布で絞り込みがかけられた基本画面Ｋ２を示した図である。図１４の例では、びまん性７５１と血行性７５７とにチェックマークが入力されている。そのため、表示制御部１０４は、図１５に示すように、びまん性及び血行性の病変分布を持つ類似症例を症例表示領域７１０に表示する。この例では、びまん性及び血行性の病変分布を持つ類似症例は１１件であった。そのため、表示制御部１０４は検索結果件数表示領域７１３に１１件と表示している。また、表示制御部１０４は、表示条件表示領域７１４に、表示対象の病名（ここでは、病名による絞り込みがかけられていないため「全疾患」）と、病変分布の名称である「びまん性＆血行性」とを表示している。
【０１７２】
図１６は、患者情報１０００のデータ構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報管理部２０２により、患者別に患者情報蓄積部２０１に蓄積されて管理される。患者情報１０００には、患者の性別及び年齢等の個人情報、既往歴等の臨床情報、並びに血液検査等の検査情報が登録されている。図１６に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、及び確定診断１９００を備える。
【０１７３】
患者ＩＤ１１００は、患者に固有の識別子である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、及び主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、及び主訴である。検査情報１８００は、図１７に示すように、当該患者が過去に受けた１以上の検査に関する情報を表す。
【０１７４】
図１７は、図１６に示す患者情報１０００に登録された検査情報１８００のデータ構成を示す図である。検査情報１８００は、患者に対して行われた検査に関する情報であり、１つの検査に対応して１つずつ作成される。検査情報１８００は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、及び検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別子である。検査日時１８２０は、検査が行われた日時である。検査種１８３０は、検査の種類である。検査の種類としては、例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影等がある。
【０１７５】
検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ、及びＧＰＴ等各種指標の値が該当する。また、検査結果１８４０は、各種指標を基に医師が下した判断等も該当する。また、単純Ｘ線撮影やＣＴ撮影等の画像検査であれば、撮影された画像へのポインタ情報や画像診断結果のレポートへのポインタ情報が含まれる。なお、検査で撮影された画像は、ＤＩＣＯＭのフォーマットで医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積される。
【０１７６】
また、検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、これらの医用画像データは医用情報管理システム２００の医用画像データ蓄積部２０３が記憶する医用画像データベース２０００に蓄積される。
【０１７７】
図１８は、医用画像データベース２０００のデータ構成を示す図である。医用画像データベース２０００は、検査ＩＤ１８１０及びシリーズＩＤ２１００を持つ。１回の検査で、複数の種類の撮影（例えば、単純ＣＴと造影ＣＴ等）が行われる場合があるので、１つの検査ＩＤ１８１０に対し、複数のシリーズＩＤ２１００が対応付けられている場合もある。つまり、撮影の種類に応じた個数のシリーズが得られるのである。
【０１７８】
また、シリーズは、撮影の種類以外にも、撮影された画像の再構成の条件毎に得られる。例えば、撮影された画像が肺野条件及び縦隔条件で再構成された場合、これらの条件毎に１つのシリーズが得られる。なお、肺野条件で再構成された画像は肺の中の血管、気管支、及び肺胞等が強調表示される。また、縦隔条件で再構成された画像は、血管やリンパ節等の縦隔が強調表示される。肺野条件及び縦隔条件は１度の撮影で得られた画像を再構成することで得られるため、単純ＣＴと造影ＣＴとで２度の撮影が行われ、これら２度の撮影のそれぞれにつき肺野条件及び縦隔条件で画像が再構成された場合、２つの肺野条件のシリーズが得られ、２つの縦隔条件のシリーズが得られる。
【０１７９】
ＣＴ及びＭＲＩの画像検査の場合、１回の撮影で複数のスライス画像が取得されるので、１つのシリーズＩＤ２１００には、複数のスライスＩＤ２２００が対応付けられている。図１８の検査ＩＤ「１３２２７９８９」には２つのシリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」が対応付けられているため、この検査から２つのシリーズのＣＴ画像が得られたことが分かる。また、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のそれぞれに対して、スライスＩＤ２２００が複数対応付けられていることが分かる。
【０１８０】
検査種１８３０が単純Ｘ線、ＣＴ、ＭＲＩ、ＰＥＴ等の画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５には、図１９に示すような診断レポート３０００が蓄積される。診断レポート３０００には、各検査に対する医師による診断結果が登録されている。図１９は、診断レポート３０００のデータ構成を示す図である。
【０１８１】
診断レポート３０００は、検査ＩＤ１８１０、所見３１００、及び診断３２００を備える。検査ＩＤ１８１０は、図１７で示した検査ＩＤ１８１０と同じである。これにより、診断レポート３０００と検査情報１８００とが対応付けられる。所見３１００は、検査に対する医師の所見を示す文言が登録されている。診断３２００は、検査に対する医師の診断を示す文言が登録されている。
【０１８２】
図２０は、類似症例データ４０００のデータ構成を示す図である。類似症例データ４０００は、診断対象症例に対して類似する類似症例を検索する際に参照されるデータであり、１つの類似症例に対応して１つずつ作成されている。なお、類似症例データ４０００は、類似症例データの付属情報の一例であり、病名情報が設定されている。類似症例データ４０００は、症例検索システム３００の類似症例データ蓄積部３０１において、類似症例毎に蓄積されている。図２０に示すように、類似症例データ４０００は、類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、画像特徴データ４４００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、及び確定診断（詳細分類病名）４８００を備える。
【０１８３】
類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。ここでは、類似症例のスライス画像に設定された関心領域毎に１つの類似症例データが生成されるため、類似症例ＩＤ４１００は、関心領域の識別子とも言える。図２０の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。
【０１８４】
スライスＩＤ４２００は、関心領域が設定されたスライス画像の識別子であり、図１８に示すスライスＩＤ２２００と同一である。関心領域情報４３００は、スライス画像に設定された関心領域の位置を示す情報である。図２１は、スライス画像に設定された関心領域を模式的に示した図である。図２１の例では、関心領域は矩形状に設定されている。したがって、関心領域情報４３００は、関心領域の左上の頂点の座標（ｘｌ、ｙｔ）と、右下の頂点の座標（ｘｒ、ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域情報４３００として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域情報４３００として採用される。
【０１８５】
画像特徴データ４４００は、関心領域情報４３００で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４５００は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。ここで、サムネイル画像データ４５００は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。
【０１８６】
病変分布情報４６００は、対象となる類似症例が予め定められたびまん性４６１０〜血行性４６７０で表される病変分布のいずれに該当するか否かを表す分布フラグ値（１：該当、０：非該当）である。
【０１８７】
確定診断（大分類病名）４７００は、対象となる類似症例に対して確定された大分類の病名である。確定診断（大分類名）４７００は、類似症例を大分類の病名で絞り込む際に使用される。
【０１８８】
確定診断（詳細分類病名）４８００は、対象となる類似症例に対して確定された詳細分類の病名である。確定診断（詳細分類病名）４８００は、類似症例を小分類の病名で絞り込む際に使用される。
【０１８９】
予め、確定診断（大分類病名）４７００は、確定診断（詳細分類病名）４８００に対して一意に対応する大分類病名が定義されており、その対応関係を用いて類似症例データ４０００に格納されている。
【０１９０】
確定診断（詳細分類病名）４８００は、医用画像データ蓄積部２０３において、図１８に示すスライスＩＤ２２００からシリーズＩＤ２１００が特定される。そして、特定されたシリーズＩＤから患者情報蓄積部２０１において、検査ＩＤ１８１０が特定され、検査ＩＤ１８１０から対応する患者情報１０００（図１６）が特定され、特定された患者情報１０００から該当する患者の確定診断１９００が特定される。
【０１９１】
次に、情報端末１００が医用情報管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。
【０１９２】
図２２は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００に対して類似症例検索の要求を行い、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。なお、図２２において、シーケンス図の左側に示す２列の矩形は、該当するステップの処理によりディスプレイ１０１ａ、１０１ｂに表示される画面を示す。また、図２２において、情報端末の「Ａ」は、医用情報管理アプリケーションを示し、「Ｂ」は、類似症例検索アプリケーションを示す。このシーケンスが開始される前に医用情報管理アプリケーションは予め起動されているものとする。
【０１９３】
まず、情報端末１００は、操作部１０２を通してユーザ（読影を行う医師）の読影対象となる検査リストの表示要求を受け付け、入力制御部１０３及び通信制御部１１０を通して、医用情報管理システム２００の通信制御部２０６へ検査リストの表示要求を送信する（Ｓ５１０）。
【０１９４】
医用情報管理システム２００の患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成する。そして、患者情報管理部２０２は、通信制御部２０６を通して、生成した検査リストを情報端末１００の通信制御部１１０に送信する（Ｓ５２０）。ここで、検査リストには、該当する患者の患者情報１０００及び検査情報１８００が含まれる。
【０１９５】
情報端末１００の表示制御部１０４は、通信制御部１１０で受信された検査リストをディスプレイ１０１に表示する（Ｓ５３０）。
【０１９６】
この場合、ディスプレイ１０１ａに検査リストが表示され、ディスプレイ１０１ｂには何も表示されない。
【０１９７】
図２３は、検査リストの画面図である。検査リストは、読影が未終了の検査を表示する領域８００と、検査に含まれるシリーズに関する情報を表示する領域８１０とを備える。領域８００には、「患者ＩＤ」、「患者氏名」、「検査日時」、「検査ＩＤ」、及び「検査種」の欄が設けられている。「患者ＩＤ」、「患者氏名」の欄には、患者情報１０００に登録された患者ＩＤ１１００及び氏名１２００が表示され、「検査日時」、「検査ＩＤ」、及び「検査種」の欄には、検査情報１８００に登録された検査日時１８２０、検査ＩＤ１８１０、及び検査種１８３０が表示される。領域８１０は、領域８００でユーザにより選択された検査の詳細を表示するための領域であり、「シリーズＩＤ」、「定義」、及び「画像」の欄が設けられている。ここでは、領域８００においてユーザにより検査（行に対応）が選択されていないために、領域８１０には何も表示されていない。
【０１９８】
ユーザは、領域８００に表示された検査の中から、これから読影を行う検査を選択する。この選択が入力制御部１０３で検知されると、図２２に示すように、通信制御部１１０は、選択された検査の検査ＩＤに含まれる全シリーズの表示要求を、医用情報管理システム２００へ送信する（Ｓ５４０）。
【０１９９】
医用情報管理システム２００の通信制御部２０６がこの表示要求を受信すると、患者情報管理部２０２は、図１８に示す医用画像データベース２０００を参照し、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像を取得し、通信制御部２０６を通して、情報端末１００に送信する（Ｓ５５０）。例えば、図１８の例において、検査ＩＤ「１３２２７９８９」の検査がユーザにより選択されると、シリーズＩＤ「ＣＴ１４９１２３」、「ＣＴ１４９１２４」のシリーズに含まれる全てのスライス画像がＳ５５０で送信される。
【０２００】
情報端末１００の通信制御部１１０が全シリーズの画像を取得すると、表示制御部１０４は、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを領域８１０に表示する（Ｓ５６０）。
【０２０１】
この場合、ディスプレイ１０１ａに表示された検査リストの領域８１０には、領域８００で選択された検査に対応するシリーズのシリーズリストが表示され、ディスプレイ１０１ｂには何も表示されない。
【０２０２】
図２４は、検査が選択された後の検査リストの画面図である。図２４の領域８００では選択された行の背後にハイライトが付されている。図２４の例では、領域８００において、２行目の「パナ太郎」の検査が選択されている。そのため、領域８１０では、選択された検査についての「シリーズＩＤ」、「定義」、及び「画像」が表示されている。ここで、「シリーズＩＤ」の欄には、医用画像データベース２０００において、選択された検査の検査ＩＤに対応付けられたシリーズＩＤが表示され、「画像」の欄には、表示されたシリーズＩＤを代表する１枚のスライス画像のサムネイル画像が表示される。ここで、シリーズＩＤを代表する１枚のスライス画像としては、所定のスライス位置の画像が採用される。所定のスライス位置としては先頭のスライス位置であってもよいし、中央のスライス位置であってもよい。「定義」は、該当するシリーズに対する撮影条件や再構成の条件を示す。この「定義」は、図示は省略されているが、例えば、図１８の医用画像データベース２０００において、シリーズＩＤと対応付けて登録されている。
【０２０３】
領域８１０において、ユーザにより読影対象のシリーズが選択され、その選択を入力制御部１０３が検知すると、表示制御部１０４は、図４７に示すように、選択されたシリーズの先頭のスライス画像をディスプレイ１０１ａに表示する（Ｓ５７０）。図４７は、ユーザによりシリーズが選択された際にディスプレイ１０１ａに表示されるスライス画像を示した図である。図４７は、胸部ＣＴ撮影での先頭スライスを示す図であり、肺尖部よりももう少し頭方向の肩位置でのスライス画像である。ここで、表示制御部１０４は、選択されたシリーズの全てのスライス画像をシリーズ送りできる状態でディスプレイ１０１ａに表示する。なお、ディスプレイ１０１ｂには何も表示されない。例えば、ユーザにより、ディスプレイ１０１ａ上にマウスポインタが位置決めされマウスホイールを回転するスライス送りの操作が入力され、その操作を入力制御部１０３が検知する。すると、表示制御部１０４は、マウスホイールの回転量に応じて、ディスプレイ１０１ａに表示されたスライス画像を別のスライス位置のスライス画像に切り替える。ユーザは、スライス送りの操作を入力しながら画像診断を行う。そして、ユーザは画像診断に迷った場合、類似症例検索アプリケーションを起動する。
【０２０４】
ここで、類似症例検索アプリケーションは、操作部１０２のキーボードにおいて、予め定められたショートカットキーが入力されて起動されてもよいし、マウスの右クリックで医用画像ビューワのメニューを表示させ、そのメニューの中から類似症例検索メニューが指定されて起動されてもよい。類似症例検索アプリケーションの起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、情報端末１００は、関心領域（ＲＯＩ）の受け付け待ち状態になる。
【０２０５】
ユーザは、操作部１０２を通して、ディスプレイ１０１ａに表示されたスライス画像上の病変に関心領域（ＲＯＩ）を設定する（Ｓ５８０）。ここで、ユーザは、図２１に示すように、例えば、マウスを左クリックして、関心領域の左上の頂点の座標を入力する。そして、ユーザは、左クリックした状態でマウスを右斜め下方向にドラッグし、左クリックを解除することで、関心領域の右下の頂点を入力すればよい。図２５は、病変に対して関心領域を設定した後の画面の一例である。
【０２０６】
関心領域を設定する操作を入力制御部１０３が検知すると、ＲＯＩ管理部１０５は、入力制御部１０３から関心領域の左上及び右下の頂点の座標データを受け取り、受け取った座標データを関心領域情報として生成する。そして、ＲＯＩ管理部１０５は、生成した関心領域情報を通信制御部１１０に送信する（Ｓ５９０）。
【０２０７】
同時に、ＲＯＩ管理部１０５は、診断対象症例のスライス画像を通信制御部１１０に送信する（Ｓ６００）。この場合、Ｓ５５０において、情報端末１００が医用情報管理システム２００から受け取った全シリーズのスライス画像のうち、ユーザが選択したシリーズにおいてユーザにより関心領域が設定された１枚のスライス画像（検索クエリ画像）が送信される。
【０２０８】
次に、通信制御部１１０は、ＲＯＩ管理部１０５から送信された関心領域情報を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０１）。
【０２０９】
同時に、通信制御部１１０は、ＲＯＩ管理部１０５から送信されたスライス画像を受け取り、症例検索システム３００の通信制御部３０４に送信する（Ｓ６０２）。
【０２１０】
ここで、Ｓ６００、Ｓ６０１において、スライス画像そのものを送信するとしたが、スライス画像のスライスＩＤが送信されても構わない。この場合は、スライスＩＤを受信した症例検索システム３００は、そのスライスＩＤを指定して、医用情報管理システム２００からスライス画像を取得すればよい。
【０２１１】
次に、症例検索システム３００が類似症例検索を行い、情報端末１００が類似症例検索結果を初期表示するまでの処理を説明する。
【０２１２】
図２６は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。
【０２１３】
症例検索システム３００の画像特徴抽出部３０２は、検索クエリ画像に設定された関心領域から予め定められた複数次元の画像特徴を抽出する（Ｓ６１０）。
【０２１４】
「画像特徴」としては、医用画像における臓器若しくは病変部分の形状に関する画像特徴、又は輝度分布に関する画像特徴等が採用できる。例えば、非特許文献：「根本，清水，萩原，小畑，縄野，“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”，電子情報通信学会論文誌Ｄ−ＩＩ，Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ，Ｎｏ．２，ｐｐ．４１６−４２６，２００５年２月」には、４９０次元の画像特徴を用いることが記載されている。本実施の形態においては、例えば、この非特許文献に記載された画像特徴が採用される。但し、これは一例にすぎず、他の画像特徴が採用されてもよい。
【０２１５】
類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された各類似症例の画像特徴とを比較する（Ｓ６２０）。ここで、類似症例検索部３０３は、検索クエリ画像から抽出された画像特徴データと、類似症例データ蓄積部３０１に類似症例毎に蓄積された類似症例データ４０００（図２０）に登録された画像特徴データ４４００との距離を算出することで、両画像特徴を比較する。
【０２１６】
次に、類似症例検索部３０３は、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の類似症例として決定する（Ｓ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部３０１に蓄積された類似症例データ４０００のうち、送信対象として決定された類似症例の類似症例ＩＤ４１００、スライスＩＤ４２００、関心領域情報４３００、サムネイル画像データ４５００、病変分布情報４６００、確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００、及び類似症例検索部３０３で算出された距離を情報端末１００に送信する（Ｓ６４０）。
【０２１７】
以下、類似症例検索結果が表示された初期の基本画面Ｋ２（図６）を生成する処理が実行される。まず、初期の基本画面Ｋ２において、レイアウト領域７２０を生成する際に使用される管理情報について説明する。
【０２１８】
まず、症例検索システム３００の通信制御部３０４は、レイアウト情報を情報端末１００に送信する（Ｓ６５０）。ここで、レイアウト情報は、レイアウト領域７２０を構成する表示ボックスの行数、列数を指定する情報である。
【０２１９】
次に、情報端末１００の通信制御部１１０がレイアウト情報を受信すると、表示ボックス管理部１０６は、送信されたレイアウト情報が指定する表示ボックスの行数及び列数を表示ボックス管理情報４４１０（図３５）に登録すると共に、検索クエリ画像のスライスＩＤを表示ボックス管理情報４４１０（図３５）に登録する（Ｓ６６０）。
【０２２０】
図３５は、表示ボックス管理情報４４１０のデータ構成を示す図である。表示ボックス管理情報４４１０には、行数及び列数が登録されるテーブル４４１１と、各表示ボックスに表示されるスライス画像のスライスＩＤが登録されるテーブル４４１２とが含まれる。したがって、表示ボックス管理部１０６は、症例検索システム３００から送信されたレイアウト情報が指定する行数及び列数をテーブル４４１１の行数及び列数の欄に登録する。また、本実施の形態では、４つの表示ボックス７２１〜７２４のうち、左上の表示ボックス７２１に検索クエリ画像のサムネイル画像が表示される。そこで、表示ボックス管理部１０６は、医用情報管理システム２００から送信された検索クエリ画像のスライスＩＤをテーブル４４１２の１行１列目の項目に登録する。
【０２２１】
ここで、レイアウト領域７２０を構成する表示ボックスの行数及び列数のデフォルト値は症例検索システム３００により予め設定されている。ここで、行数及び列数のデフォルト値は例えば２行及び２列である。そのため、図３５に示す表示ボックス管理情報４４１０には、「２行２列」が登録されている。
【０２２２】
次に、Ｓ６４０で送信された類似症例データ及びＳ６６０で保存した表示ボックス管理情報４４１０を用いて、表示制御部１０４は、類似症例検索結果が表示された初期の基本画面Ｋ２を生成する（Ｓ６７０）。
【０２２３】
この場合、ディスプレイ１０１ｂには図６に示す基本画面Ｋ２が表示される。また、ディスプレイ１０１ａには、検索クエリ画像が表示されている。
【０２２４】
図２７は、図２６のＳ６７０に示す初期の基本画面Ｋ２を生成する処理の詳細を示すフローチャートである。
【０２２５】
まず、Ｓ１０００にて、表示制御部１０４は、図２６のＳ６４０で受信された類似症例の数をカウントし、カウント値を検索結果件数表示領域７１３に表示する。
【０２２６】
次に、Ｓ１１００にて、表示制御部１０４は、表示条件表示領域７１４に、「全疾患」と表示する。ここで、「全疾患」と表示されるのは、初期の基本画面Ｋ２では、ユーザにより病名や病変分布での絞り込みがかけられていないからである。
【０２２７】
次に、Ｓ１２００にて、表示制御部１０４は、図２６のＳ６４０で受信された類似症例のうち、症例表示領域７１０にサムネイル画像が表示可能な類似症例の件数分だけ、症例表示領域７１０に類似症例のサムネイル画像を表示すると共に、各サムネイル画像に対応付けて確定診断及び類似度を表示する。
【０２２８】
症例表示領域７１０に表示可能な類似症例の件数の最大値は、図６の例では２０である。この最大値は予め定められている。また、この最大値はユーザが自由に変更できる構成にしてもよい。図２６のＳ６４０で受信された類似症例の数が、最大値よりも多い場合、表示制御部１０４は、症例表示領域７１０の右端に縦方向に長尺のスクロールバー７１５を表示する。これにより、ユーザは、スクロールバー７１５を移動させ、初期の基本画面Ｋ２で非表示であった類似症例のサムネイル画像を閲覧できる。
【０２２９】
次に、Ｓ１３００にて、病名リストが生成されて表示される。まず、図２６のＳ６４０で受信された類似症例から、病名リストが生成される。病名リストは、Ｓ６４０で受信された類似症例が、確定診断病名毎に分類されたリストである。
【０２３０】
ここで、Ｓ６４０で受信された類似症例の件数をＮＣ件とする。病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を用いて、病名リストを生成する。生成された病名リストは、図２９に示すようにテーブル形式のデータとして、病名リスト管理部１０８で管理される。
【０２３１】
図２９は、図２７のＳ１３００で生成される病名リストのデータ構成を示す図である。病名リストには、「病名ＩＤ」、「大分類病名」、「詳細分類病名」、「件数」、及び「類似症例ＩＤ」の欄が含まれる。「病名ＩＤ」は、確定診断病名毎に付与される識別子である。ここでは、大分類病名と詳細分類病名との１つの組み合わせに対して１つの病名ＩＤが付与されている。
【０２３２】
「大分類病名」は、類似症例データ４０００に登録された確定診断（大分類病名）４７００が示す確定診断病名である。「詳細分類病名」は、類似症例データ４０００に登録された確定診断（詳細分類病名）４８００が示す確定診断病名である。「件数」は、「病名ＩＤ」が示す確定診断病名に該当する類似症例の件数である。「類似症例ＩＤ」は、「病名ＩＤ」が示す病名に該当する類似症例を示す類似症例ＩＤである。
【０２３３】
病名リスト管理部１０８は、Ｓ６４０で受信した全ての類似症例データ４０００について、確定診断（大分類病名）４７００及び確定診断（詳細分類病名）４８００を抽出し、両者が同じ類似症例データ４０００を同じ確定診断病名の類似症例として分類する。そして、病名リスト管理部１０８は、確定診断病名が同じ類似症例の件数をカウントし、該当する確定診断病名のレコードの「件数」の欄に登録する。また、病名リスト管理部１０８は、同じ確定診断病名に分類した類似症例の類似症例ＩＤを該当する確定診断病名のレコードの「類似症例ＩＤ」の欄に登録する。
【０２３４】
図２９の例では、大分類病名が「腫瘍性」、詳細分類病名が「原発性肺癌」の確定診断病名に対して病名ＩＤ「ＤＩＳ５２８」が付与されている。そして、この確定診断病名に該当する類似症例の件数が１０件であったため、該当するレコードの「件数」の欄に１０が登録され、この確定診断病名に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５８」、「ＳＩＭ５５１」、「ＳＩＭ１２０９」、及び「ＳＩＭ２３４１」等が、該当するレコードの「類似症例ＩＤ」の欄に登録されている。
【０２３５】
そして、表示制御部１０４は、このようにして生成された病名リストを用いて病名リスト表示領域７３０を生成し、ディスプレイ１０１に表示する。
【０２３６】
図３０、図３１、図３２は、それぞれ、病名リスト表示領域７３０の第１表示例、第２表示例、第３表示例を示した図である。図３０に示すように第１表示例では、類似症例検索の結果得られた類似症例が、詳細分類病名の件数の多い順に件数と対応付けて一覧表示されている。
【０２３７】
図３１に示すように第２表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示されている。
【０２３８】
図３２に示すように第３表示例では、類似症例検索の結果得られた類似症例が、大分類病名の件数の多い順に件数と対応付けて一覧表示され、且つ、大分類病名毎にその中に含まれる詳細分類病名が件数の多い順に件数と対応付けて一覧表示されている。この場合、確定診断病名が、大分類病名と詳細分類病名との階層構造で表現される。
【０２３９】
図３３は、図３１に示す病名リスト表示領域７３０の画面遷移を示す図である。図３３の上段に示すように、一覧表示された大分類病名のうち、１の大分類病名がユーザにより選択される操作を入力制御部１０３が検知すると、表示制御部１０４は、図３３の下段に示すように、選択された大分類病名に属する詳細分類病名を件数が多い順に件数と対応付けて表示する。ここで、ユーザは、例えば、病名リスト表示領域７３０において一覧表示された大分類病名のうち、所望する１の大分類病名を例えばダブルクリック或いはシングルクリックすることで１の大分類病名を選択すればよい。図３３の例では非腫瘍性がダブルクリックされているため、非腫瘍性に属する詳細分類病名が一覧表示されている。
【０２４０】
図３３の下段において、詳細分類病名が一覧表示されている領域がユーザによりダブルクリック或いはシングルクリックされると、表示制御部１０４は、該当する領域に表示されていた詳細分類病名を非表示にすればよい。
【０２４１】
なお、表示制御部１０４は、病名リスト（図２９）を参照することで、大分類病名に属する詳細分類病名を判定すればよい。例えば、図２９の例では、真菌症に対して、アスペルギルス症及びクリプトコッカス症が対応付けられているため、表示制御部１０４は、真菌症にはアスペルギルス症及びクリプトコッカス症が属すると判断すればよい。
【０２４２】
図３０〜図３３の例では、病名が１つ選択される例を示したが、同時に複数の病名が選択されてもよい。図３０の例においては、ユーザは、一覧表示された詳細分類病名のうち複数の病名を選択する場合、キーボードの所定のキー（例えば、ｃｔｒキー或いはシフトキー）を押しながら、複数の病名の欄をシングルクリック或いはダブルクリックすればよい。この場合、図４９に示されるように、症例表示領域７１０にはユーザが選択した詳細分類病名毎に分割領域が作成され、各分割領域に縦一列でサムネイル画像が表示される。
【０２４３】
また、図３１の例においては、大分類病名が一覧表示されているため、上述した操作で複数の病名が選択されると、図４９に示されるように、症例表示領域７１０には選択された大分類病名毎に分割領域が作成され、各分割領域にサムネイル画像が縦一列で表示される。
【０２４４】
また、図３２の例では、大分類病名と詳細分類病名とが同時に表示されているため、ユーザは、上述した操作により、大分類病名と詳細分類病名とを同時に選択できる。この場合、ユーザは、ある１の大分類病名（例えば、真菌症）を選択したとすると、その１の大分類病名以外に属する詳細分類病名の中から１以上の詳細分類病名（例えば、原発性肺癌）を選択できる。また、ユーザは、ある１の詳細分類病名（例えば、原発性肺癌）を選択したとすると、その１の詳細分類病名が属する大分類病名以外の１以上の大分類病名（例えば、真菌症）を選択できる。この場合、症例表示領域７１０には、ユーザが選択した大分類病名及び詳細分類病名毎に１つの分割領域が作成され、各分割領域にサムネイル画像が表示される。
【０２４５】
また、図３３の上段の例においては、大分類病名が一覧表示されているため、上述した操作により、ユーザは同時に複数の大分類病名を選択できる。また、図３３の下段の例においては、大分類病名と詳細分類病名とが混在して表示されているため、上述した操作により、ユーザは大分類病名と詳細分類病名とを同時に選択できる。
【０２４６】
図２７に戻り、Ｓ１４００にて、分布リストが生成されて表示される。まず、Ｓ６４０で受信された類似症例から、分布リストが生成される。分布リストは、Ｓ６４０で受信された類似症例が、病変分布毎に分類されたリストである。
【０２４７】
病名リスト管理部１０８は、ＮＣ件の類似症例データ４０００のそれぞれに登録されている病変分布情報４６００を用いて、分布リストを生成する。生成された分布リストは、図３４に示すようにテーブル形式のデータとして、分布リスト管理部１０９で管理される。
【０２４８】
図３４は、図２７のＳ１４００で生成される分布リストのデータ構成を示す図である。分布リストには、「分布名」、「症例数」、及び「類似症例ＩＤ」の欄が含まれる。「分布名」は、びまん性、区域性といった予め定められた複数の病変分布の名称である。「症例数」は、病変分布に該当する類似症例の件数である。「類似症例ＩＤ」は、病変分布に該当する類似症例を示す類似症例ＩＤである。
【０２４９】
分布リスト管理部１０９は、Ｓ６４０で受信した全ての類似症例データ４０００について、病変分布情報４６００を抽出し、抽出した病変分布情報４６００において、分布フラグ値に１（該当）が設定されている病変分布の数をカウントし、カウント値を該当する病変分布のレコードの「症例数」の欄に登録する。また、分布リスト管理部１０９は、分布フラグ値に１が設定されている類似症例の類似症例ＩＤを該当する病変分布のレコードの「類似症例ＩＤ」の欄に登録する。
【０２５０】
図３４の例では、びまん性に該当する類似症例の件数が３件であったため、びまん性のレコードの「症例数」の欄に３が登録されている。また、びまん性に該当する類似症例の類似症例ＩＤ「ＳＩＭ２５２１」、「ＳＩＭ４１２３」、及び「ＳＩＭ５２２５」がびまん性のレコードの「類似症例ＩＤ」の欄に登録されている。
【０２５１】
そして、表示制御部１０４は、このようにして生成された分布リストを用いて分布リスト表示領域７５０を生成し、ディスプレイ１０１に表示する。
【０２５２】
図３４に示す分布リストを用いて生成された分布リスト表示領域７５０は、図１１である。図３４において、区域性及び胸膜下の症例数は０であるため、図１１では、区域性７５２及び胸膜下７５６が非アクティブ状態で表示され、これら以外の病変分布は、症例数が１以上であるため、アクティブ状態で表示されている。
【０２５３】
図２７に戻り、Ｓ１５００にて、レイアウト領域７２０が表示される。この処理は、表示制御部１０４によって行われる。
【０２５４】
図２８は、図２７に示すＳ１５００の処理を示すフローチャートである。Ｓ１５１０にて、表示制御部１０４は、レイアウト領域７２０を構成する表示ボックスの行数及び列数を、Ｓ６６０で設定された表示ボックス管理情報４４１０から取得する。図３５の表示ボックス管理情報４４１０の例では、行数及び列数として２行２列が設定されているため、「２行２列」という情報が取得される。
【０２５５】
次に、Ｓ１５２０にて、表示制御部１０４は、Ｓ１５１０で取得した表示ボックスの行数及び列数に合わせて、表示ボックスを描画する。
【０２５６】
最後に、Ｓ１５３０にて、表示制御部１０４は、表示ボックス管理情報４４１０から各表示ボックスのスライスＩＤを特定し、特定したスライスＩＤに対応するサムネイル画像を、対応する各表示ボックス内に描画する。
【０２５７】
図３５の例では、１行１列目の表示ボックスに診断対象症例のスライスＩＤが格納されている。そのため、表示制御部１０４は、図２２のＳ６００で送信された診断対象症例のスライス画像からサムネイル画像を生成し、生成したサムネイル画像を表示ボックス７２１に描画する。
【０２５８】
この段階では、残りの表示ボックス（１行２列目、２行１列目、２行２列目の表示ボックス７２２、７２３、７２４）にはスライスＩＤが格納されていないため、表示制御部１０４は、これらの表示ボックスに何も表示しない。これらの表示ボックスには、後述する処理により、類似症例のサムネイル画像が表示されることになる。
【０２５９】
図２６に戻り、通信制御部１１０は、表示ボックス管理部１０６に格納された表示ボックス管理情報４４１０を表示制御部１０４に送信する（Ｓ６８０）。
【０２６０】
次に、表示制御部１０４は、レイアウト領域７２０の表示状態及びレイアウトと同じ表示状態及びレイアウトで医用画像ビューワを起動させる（Ｓ６９０）。
【０２６１】
図３６は、医用画像ビューワの起動処理を示すフローチャートである。
【０２６２】
Ｓ２０００にて、表示制御部１０４は、図２２のＳ５７０で起動させた医用画像ビューワを閉じる。
【０２６３】
Ｓ２１００にて、表示制御部１０４は、表示ボックス管理情報４４１０に登録された表示ボックス分の医用画像ビューワを、表示ボックス管理情報４４１０に登録された行数及び列数のレイアウトで起動する。図３５の表示ボックス管理情報４４１０では、２行×２列で４つの表示ボックスが登録されている。よって、表示制御部１０４は、図５に示すように、４個の医用画像ビューワ６１０〜６４０を２行×２列で起動する。
【０２６４】
Ｓ２２００にて、表示制御部１０４は、処理対象となる医用画像ビューワを特定するための変数を初期化する。ここでは、１行１列目の医用画像ビューワが処理対象とされるため、この変数は１行１列にセットされる。
【０２６５】
Ｓ２３００にて、表示制御部１０４は、全て（ここでは４個）の医用画像ビューワに対する処理が終了したか否かをチェックする。処理済であれば（Ｓ２３００でＹＥＳ）、処理が終了され、未処理の医用画像ビューワがあれば（Ｓ２３００でＮＯ）、処理がＳ２４００に進められる。
【０２６６】
Ｓ２４００にて、表示制御部１０４は、変数としてセットされた行数及び列数に対応づけられたスライスＩＤを持つスライス画像を処理対象の医用画像ビューワに表示すると共に、そのスライスＩＤを含むシリーズを医用画像ビューワに対応付ける。
【０２６７】
例えば、図３５に示す表示ボックス管理情報４４１０の例では、１行１列目にはスライスＩＤ「ＣＴ１２３５３５１５」が登録されている。よって、スライスＩＤ「ＣＴ１２３５３５１５」が医用画像ビューワ６１０に表示される。また、表示制御部１０４は、初期表示されるスライス画像に設定された関心領域を表す矩形をこのスライス画像にオーバラップして描画する。なお、１行１列目に登録されたスライスＩＤを含むシリーズは、図２２のＳ５５０で取得済みである。また、関心領域は、図２２のＳ５８０で設定済みである。
【０２６８】
図３６に戻り、Ｓ２５００にて、次の医用画像ビューワを処理対象の医用画像ビューワに設定する。１行１列目の次は、例えば、１行２列目、その次は、２行１列目、その次に２行２列目というように処理対象が設定される。
【０２６９】
２ループ目のＳ２４００では、１行２列目の医用画像ビューワ６２０が処理対象にされるが、図３５の表示ボックス管理情報４４１０では、１行１列目以外にはスライスＩＤが対応づけられていない。そのため、表示制御部１０４は、１行２列目の医用画像ビューワに対して何も処理を実行せず、空の状態にしておく。このことは、２行１列目、２行２列目の医用画像ビューワ６３０、６４０に対しても同じである。
【０２７０】
このフローチャートが終了した状態で、ディスプレイ１０１ａには、図５に示す初期状態の基本画面Ｋ１が表示されている。１行１列目（左上）の医用画像ビューワ６１０には、検索クエリ画像が表示され、その上に関心領域がオーバラップして描画されている。
【０２７１】
ここでは、症例検索システム３００が画像特徴を抽出する例を示したが、情報端末１００が画像特徴を抽出してもよい。図３７は、症例検索システム３００が画像特徴を抽出する態様を採用した場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００のブロック図である。
【０２７２】
図２との違いは、情報端末１００に画像特徴抽出部１１３が追加された点、及び症例検索システム３００から画像特徴抽出部３０２が省かれた点にある。
【０２７３】
図３８は、情報端末１００が、医用情報管理システム２００から診断対象症例を取得した後、症例検索システム３００が類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。
【０２７４】
図２２との違いは、ＲＯＩ管理部１０５が、診断対象症例のスライス画像を通信制御部１１０に送信する処理（Ｓ６００）の後、画像特徴の抽出が情報端末１００で行われ（Ｓ６０３）、抽出された画像特徴が症例検索システム３００に送信（Ｓ６０４）されている点にある。画像特徴の抽出（Ｓ６０４）の処理内容は、画像特徴の抽出が症例検索システム３００で行われる場合と同様である。
【０２７５】
図３９は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を、情報端末１００に返すまでの処理を示すシーケンス図である。図２６との違いは、画像特徴の抽出が情報端末１００側で行われるため、図３９では、図２６にはあった画像特徴の抽出（Ｓ６１０）が省かれている点にある。
【０２７６】
次に、図２２、図２６のシーケンス図をアプリケーションのレベルで着目したときの情報端末１００、医用情報管理システム２００、及び症例検索システム３００の処理について説明する。図４０は、図２２及び図２６のシーケンス図をアプリケーションのレベルで着目したときのシーケンス図である。図４０において、図２２と同じ処理には同じ符号を付している。
【０２７７】
図４０において、「Ａ」は情報端末１００が実行する医用情報管理アプリケーションの処理を示し、「Ｂ」は情報端末１００が実行する類似症例検索アプリケーションの処理を示す。以下、医用情報管理アプリケーションを「アプリＡ」と記述し、類似症例検索アプリケーションを「アプリＢ」と記述する。
【０２７８】
まず、アプリＡは、ユーザから読影対象となる検査リストの表示要求を受け付け、医用情報管理システム２００に送信する（Ｓ５１０）。医用情報管理システム２００は検査リストを受信すると、画像検査が実施後で読影が未終了の検査をリスト化し、読影対象となる検査リストを生成し、アプリＡに送信する。
【０２７９】
検査リストを受信したアプリＡは、図２３に示すように、検査リストをディスプレイ１０１に表示し、検査リストの中から１の検査がユーザにより選択されると（Ｓ５３０）、選択された検査の表示要求を医用情報管理システム２００に送信する（Ｓ５４０）。
【０２８０】
検査要求を受信した医用情報管理システム２００は、表示要求が指定する検査ＩＤに含まれる全シリーズの全スライス画像をアプリＡに送信する（Ｓ５５０）。
【０２８１】
次に、アプリＡは、図２４に示すように、指定された検査ＩＤに含まれる全シリーズに関する情報を一覧表示するシリーズリストを表示する（Ｓ５６０）。
【０２８２】
次に、アプリＡは、シリーズリストの中から読影対象のシリーズがユーザにより選択されると、選択されたシリーズの最初のスライス位置のスライス画像を医用画像ビューワ６１０に表示する（Ｓ５７０）。このとき、ユーザは、スライス送りする操作を入力し、医用画像ビューワ６１０に所望のスライス画像を表示させる。
【０２８３】
次に、アプリＡは、医用画像ビューワ６１０に表示されたスライス画像において、関心領域を設定する操作をユーザから受け付ける（Ｓ５８０）。
【０２８４】
次に、アプリＡは、ユーザにより設定された関心領域を示す関心領域情報を生成し、関心領域が設定されたスライス画像（診断対象症例のスライス画像）と共に、アプリＢに送信する（Ｓ５９０、Ｓ６００）。
【０２８５】
次に、アプリＢは、診断対象症例のスライス画像及び関心領域情報を受信すると、そのスライス画像及び関心領域情報を症例検索システムに送信する（Ｓ６０１、Ｓ６０２）。
【０２８６】
スライス画像及び関心領域情報を受信すると、症例検索システム３００は、図２６と同様、Ｓ６１０〜Ｓ６４０の処理を実行する。
【０２８７】
次に、アプリＢは、Ｓ６４０で送信された類似症例データ及び表示ボックス管理情報４４１０を用いて初期の基本画面を生成する（Ｓ６７０）。そして、アプリＢは、図２７に詳細が示されるＳ６７０の処理を実行する。
【０２８８】
次に、図１１に示す分布リスト表示領域７５０に表示された病変分布が選択されたときの処理について説明する。図４１は、分布リスト表示領域７５０に表示された病変分布が選択されたときの処理を示すフローチャートである。
【０２８９】
Ｓ２０００では、分布リスト表示領域７５０に表示された病変分布（分布チェック項目）のうち、いずれか１の分布チェック項目を選択する操作を入力制御部１０３が検知すると、表示制御部１０４は、検知された分布チェック項目が第１〜第３分布情報のいずれに該当するかを判定する。第１分布情報の場合、処理がＳ１３０１に進められ、第２分布情報の場合、処理がＳ１３０２に進められ、第３分布情報の場合、処理がＳ１３０３に進められる。
【０２９０】
第１分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域の大きさが、肺の領域に対して広範囲であることを示す所定の第１範囲に属するサムネイル画像を選択させるための情報である。ここでは、第１分布情報としては、「両側性」、「多発性」、「びまん性」、及び「血行性」が該当する。よって、第１範囲としては、これらの病変分布を診断する際に設定される関心領域の大きさが属するような値域が採用される。
【０２９１】
第２分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域に相当する領域の大きさが、肺の領域の一部であることを示す所定の第２範囲（第１範囲より低い：第２範囲の上限値が第１範囲の下限値以下）に属するサムネイル画像を選択させるための情報である。ここでは、第２分布情報としては、「気道性」及び「区域性」が該当する。よって、第２範囲としては、これらの病変分布を診断する際に設定される関心領域のサイズが属するような値域が採用される。
【０２９２】
第３分布情報は、症例表示領域７１０に一覧表示された類似症例のサムネイル画像のうち、関心領域が、胸膜を含むサムネイル画像を選択させるための情報である。ここでは、第３分布情報としては、「胸膜下」が該当する。
【０２９３】
Ｓ１３０１では、表示制御部１０４は、類似症例検索により得られた類似症例であって、ユーザが第１分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数（この実施の形態では２０件）以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ１として決定する。そして、表示制御部１０４は、抽出した類似症例ｉ（ｉは抽出された類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、表示制御部１０４は、ｉがＮＺ１に到達するまで、Ｓ２１００、Ｓ１５０１の処理を繰り返す。表示制御部１０４は、Ｓ２１００、Ｓ１５０１の処理を実行する度に、ｉを１ずつインクリメントする。ｉがＮＺ１を超えると（Ｓ１３０１でＮＯ）、処理は終了する。
【０２９４】
Ｓ２１００では、表示制御部１０４は、類似症例ｉについての第１分布情報に対応する第１拡大率を算出する。ここでは、第１拡大率としては、例えば、１．０が採用される。但し、これは一例であり第１分布情報が示す病変分布を診断する際に設定される関心領域の全域が表示領域に収まるような値であれば、１．０以外の拡大率が第１拡大率として採用されてもよい。
【０２９５】
Ｓ１５０１では、表示制御部１０４は、類似症例ｉのサムネイル画像を類似症例ｉの第１拡大率で拡大する。
【０２９６】
図４２は、第１分布情報が選択されたときの基本画面Ｋ２を示した図である。図４２では、両側性が選択されている。この場合、類似症例のうち病変分布が両側性に該当する類似症例のサムネイル画像が症例表示領域７１０に表示される。また、この場合、拡大率は１．０であるため、症例表示領域７１０において、類似検索結果が得られた直後に表示されたサムネイル画像と同じ表示態様でサムネイル画像が表示されている。すなわち、関心領域ＲＯＩの中心が表示領域６８０１（表示枠の一例）の中心に位置するようにサムネイル画像の表示位置が調整されず、且つ、拡大されずに、サムネイル画像が表示される。
【０２９７】
Ｓ１３０２では、表示制御部１０４は、類似症例検索により得られた類似症例であって、ユーザが第２分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ２として決定する。そして、表示制御部１０４は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、表示制御部１０４は、ｉがＮＺ２に到達するまで、Ｓ２２００、Ｓ１５０２の処理を繰り返す。表示制御部１０４は、Ｓ２２００、Ｓ１５０２の処理を実行する度に、ｉを１ずつインクリメントする。ｉがＮＺ２を超えると（Ｓ１３０２でＮＯ）、処理は終了する。
【０２９８】
Ｓ２２００では、表示制御部１０４は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報とを用いて、類似症例ｉについての第２分布情報に対応する第２拡大率を算出する。
【０２９９】
第２分布情報が選択された場合、類似症例ｉは、関心領域のサイズが表示領域のサイズの１／２程度になるように拡大される。そのため、表示制御部１０４は、例えば、下記の数式で類似症例ｉに対する第２拡大率ｋｉ計算する。表示領域の面積をＳｄ、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとすると、第２拡大率ｋｉは以下の式で算出できる。
【０３００】
ｋｉ＝１／２（Ｓｄ／Ｓｉ）
Ｓ１５０２では、表示制御部１０４は、類似症例ｉのサムネイル画像を第２拡大率ｋｉで拡大し、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０にサムネイル画像を表示する。
【０３０１】
図４３は、第２分布情報が選択されたときの基本画面Ｋ２を示した図である。図４３では、気道性が選択されている。この場合、類似症例のうち病変分布が気道性に該当する類似症例のサムネイル画像が症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域６９０１（表示枠の一例）の中心に位置するように第２拡大率で拡大されている。
【０３０２】
Ｓ１３０３では、表示制御部１０４は、類似症例検索により得られた類似症例であって、ユーザが第３分布情報として選択した病変分布の類似症例のうち、症例表示領域７１０のサムネイル画像の最大表示件数以下の類似症例を類似度が高い順に抽出し、抽出した類似症例の数を拡大対象の類似症例数ＮＺ３として決定する。そして、表示制御部１０４は、抽出した類似症例ｉのサムネイル画像を処理対象のサムネイル画像として決定する。そして、表示制御部１０４は、ｉがＮＺ３に到達するまで、Ｓ２３００、Ｓ１５０３の処理を繰り返す。表示制御部１０４は、Ｓ２３００、Ｓ１５０３の処理を実行する度に、ｉを１ずつインクリメントする。ｉがＮＺ３を超えると（Ｓ１３０３でＮＯ）、処理は終了する。
【０３０３】
Ｓ２３００では、表示制御部１０４は、症例表示領域７１０において、１つのサムネイル画像に対して予め定められた表示領域のサイズと、類似症例ｉの関心領域情報と、胸膜領域情報４９００とを用いて、類似症例ｉについての第３分布情報に対応する第３拡大率を算出する。
【０３０４】
図４６は、胸膜領域情報４９００が追加された類似症例データ４０００のデータ構成を示す図である。なお、類似症例データ４０００に胸膜領域情報４９００が登録されていない場合、胸膜領域情報４９００が得られない。この場合、表示制御部１０４は、第３拡大率を、第１拡大率と同じ値である１．０に設定すればよい。ここで、胸膜領域情報４９００は、類似症例において、胸膜領域を示す情報である。
【０３０５】
Ｓ１５０３では、表示制御部１０４は、類似症例ｉのサムネイル画像でを第３拡大率ｋｉで拡大し、サムネイル画像の関心領域の中心が表示領域の中心に位置するように症例表示領域７１０にサムネイル画像を表示する。
【０３０６】
図４５は、胸膜領域７１０１を説明する図である。図４５に示すように、胸膜領域７１０１は、胸膜を含む領域であって、中心が関心領域ＲＯＩの中心に位置し且つ関心領域ＲＯＩよりも少しサイズの大きな矩形状の領域である。ここで、胸膜領域情報４９００には、胸膜領域７１０１の左上の頂点の座標（ｘｐｌ、ｙｐｔ）と右下の頂点の座標（ｘｒｐ、ｙｐｂ）との４値が含まれる。第３分布情報が選択された場合には、胸膜領域を拡大表示するため、表示制御部１０４は、以下の式で第３拡大率ｋｉを計算する。表示領域７１０２の面積をＳｄ、胸膜領域７１０１の面積をＳｐとすると第３拡大率ｋｉは、以下の式で算出できる。
【０３０７】
ｋｉ＝Ｓｄ／Ｓｐ
なお、胸膜領域情報４９００は、類似症例データ４０００の作成時に関心領域情報と共にユーザにより入力されてもよい。或いは、胸膜領域情報４９００は、画像処理装置により、スライス画像から肺の領域を自動的に抽出させ、胸膜位置を判定させることで自動的に作成されてもよい。
【０３０８】
図４４は、第３分布情報が選択されたときの基本画面Ｋ２を示した図である。図４４では、胸膜下が選択されている。この場合、類似症例のうち病変分布が胸膜下に該当する類似症例のサムネイル画像が症例表示領域７１０に表示される。また、症例表示領域７１０において、全てのサムネイル画像は関心領域ＲＯＩの中心が表示領域７００１（表示枠の一例）の中心に位置するように第３拡大率で拡大されている。
【０３０９】
以上の処理により、症例表示領域７１０には、病変分布に関する診断内容が反映された拡大率でサムネイル画像が表示される。そして、症例表示領域７１０において、関心領域のサイズが揃えてサムネイル画像が表示される。そのため、関心領域が一部の類似医用画像において小さい状態で拡大されたために見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、症例表示領域７１０で表示される類似症例に対して、拡大処理が行われるため、システムへの負荷が大幅に軽減される。
【０３１０】
なお、病名リスト表示領域７３０で複数の病名が選択され、症例表示領域７１０が分割表示されている場合、症例表示領域７１０に表示されている類似症例のサムネイル画像は、分割領域ごとにユーザの操作により拡大される。以下、類似症例のサムネイル画像の拡大表示が説明される。
【０３１１】
図５２は、拡大表示機能を保持する場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図５２と図２の異なる点は拡大画像生成部１１２が加わった点である。
【０３１２】
拡大画像生成部１１２は、類似症例のサムネイル画像の拡大画像を生成する。拡大画像生成部１１２は、操作部１０２に対するユーザの操作量を入力制御部１０３から取得する。拡大画像生成部１１２は、症例検索システム３００から送信された、検索クエリ画像に対する類似度が対応付けられた類似症例データ４０００（関心領域情報４３００等を含む）を通信制御部１１０から受け取る。拡大画像生成部１１２は、病名リスト表示領域７３０で複数の病名が選択され、症例表示領域７１０に複数の分割領域が形成されている時に、ユーザにより選択された分割領域に表示されている類似症例のサムネイル画像に対して、各サムネイル画像毎に別々の拡大率を算出し、表示される件数分の拡大画像を生成する。
【０３１３】
図５４は、症例表示領域７１０に形成された分割領域のうち１つの分割領域１８０１が選択されたときの基本画面Ｋ２を示す図である。図５４に示されるように、複数の病名が選択された直後の状態では、各分割領域には、サムネイル画像の画像全体が表示されている。
【０３１４】
情報端末１００の入力制御部１０３は、マウス等の操作部１０２を通しての入力を常時モニタリングしている。そして、入力制御部１０３は、マウスをクリックする操作がユーザにより入力され、その操作により、症例表示領域７１０に表示された分割領域のうち、１つの分割領域１８０１が選択されたことを検知する。すると、表示制御部１０４は、選択された分割領域１８０１の背景の色を変更する。ここで、入力制御部１０３は、複数の分割領域のうちマウスがクリックされたときのマウスポインタが位置する分割領域１８０１をユーザが選択した分割領域であると判定すればよい。
【０３１５】
図５４の例では、症例表示領域７１０において、２列目の分割領域１８０１が選択されている。そのため、分割領域１８０１内のサムネイル画像の背景の色が変更されている。これにより、ユーザに対して分割領域１８０１に表示されたサムネイル画像が選択状態になったことを知らせることができる。
【０３１６】
ここで、背景の色としては、例えば、症例表示領域７１０の背景の色との差が明確に現れる色が採用される。図５４の例では例えば黄色が採用されている。なお、図５４の例では分割領域の背景の色を変更する態様を示したが、分割領域の背景を点滅させる態様や輝度を明るくする態様が採用されてもよい。
【０３１７】
図５４に示すように分割領域１８０１が選択された状態で、ユーザが、例えばマウスホイールを回転させる拡大操作を行うと、入力制御部１０３は、マウスホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。すると、拡大画像生成部１１２は、例えば検知された回転量を用いて拡大率を決定し、決定した拡大率で分割領域１８０１に表示されたサムネイル画像を拡大する。表示制御部１０４は、拡大画像生成部１１２によって拡大されたサムネイル画像を症例表示領域７１０に表示する。ここで、入力制御部１０３は、選択状態の分割領域１８０１内のサムネイル画像の表示領域１８０２（表示枠の一例）内でマウスポインタが位置決めされてマウスホイールが回転されたときに、ユーザによる拡大操作が入力されたと判定してもよい。
【０３１８】
図５５は、１の分割領域のサムネイル画像が拡大されたときの基本画面Ｋ２を示す図である。図５５に示されるように、選択された分割領域１８０１内に表示されている全てのサムネイル画像が一括して拡大されている。これにより、ユーザは、分割領域１８０１に表示されているサムネイル画像の各々について個々に拡大指示を入力する必要がなくなる。そのため、操作効率を向上させることができる。
【０３１９】
なお、表示されているサムネイル画像を拡大する際には、拡大画像生成部１１２は、図５５に示すように、サムネイル画像の関心領域ＲＯＩの中心座標が表示領域１８０２の中心座標に位置するように、拡大画像を生成する。また、表示制御部１０４は、サムネイル画像を拡大する際に、図５５に示すように、表示領域１８０２のサイズを拡大せず、同じサイズに維持する。
【０３２０】
また、拡大画像生成部１１２は、関心領域ＲＯＩのサイズが同じになるように、各サムネイル画像の拡大率をに異なる値に設定してもよい。これによって、図５５に示されるように、関心領域ＲＯＩのサイズが同じ大きさになるように分割領域１８０１に表示されているサムネイル画像が拡大される。そのため、他のサムネイル画像に比べて関心領域ＲＯＩが小さく拡大されたサムネイル画像をユーザが見落とすことを防止できる。
【０３２１】
図５６は、症例表示領域７１０に表示されているサムネイル画像の一部が拡大されたときの図５５と異なる基本画面Ｋ２の表示例を示す図である。図５６では、拡大画像生成部１１２は、関心領域ＲＯＩのサイズが表示領域１８０２のサイズとほぼ同じサイズになるまで、サムネイル画像を拡大している。
【０３２２】
このように、病名リスト表示領域７３０で複数の病名が選択され、症例表示領域７１０が分割表示されている時に、画像診断を行うユーザは注目した病名のサムネイル画像群を、一つの操作で一括して拡大表示することができる。そのため、ユーザは一つの拡大指示で複数の類似症例を詳細に比較することができる。したがって、操作数が大幅に低減され、ユーザの負担が軽減される。
【０３２３】
なお、上記では、ユーザによる拡大操作は、マウスのホイールを回転させる操作としているが、本実施の形態は、これに限られない。例えば、症例表示領域７１０に表示されている一つのサムネイル画像上にマウスポインタを配置して、マウスボタンを押した状態で、キーボードの例えば上方向キーまたは下方向キーを押すことにより、拡大操作を行うようにしてもよい。この場合、入力制御部１０３は、上方向キーまたは下方向キーが押されている時間をカウントし、カウント値を拡大画像生成部１１２に通知する。そして、拡大画像生成部１１２は、通知されたカウント値が大きいほど拡大率が大きくなるように拡大率を決定すればよい。
【０３２４】
次に、サムネイル画像の拡大処理を具体的に説明する。
【０３２５】
図５７は、症例表示領域７１０に表示されているサムネイル画像の拡大処理を示すフローチャートである。なお、このフローチャートが開始される前に分割領域のうち、１の分割領域が選択状態にあるものとする。
【０３２６】
Ｓ４０００では、拡大画像生成部１１２は、選択状態にある分割領域１８０１（図５４の例では２列目の分割領域１８０１）において、拡大操作を入力する際にユーザが選択した１のサムネイル画像の類似症例ＩＤ４１００を図４６に示す類似症例データ４０００から取得する。ここで、ユーザは、分割領域１８０１内に表示されたサムネイル画像のうち、１のサムネイル画像にマウスポインタを位置決めすることで、１のサムネイル画像を選択する。以下では、拡大操作をする際にユーザが選択したサムネイル画像を基準サムネイル画像と呼ぶ。拡大画像生成部１１２は、この基準サムネイル画像に対するユーザの拡大操作と連動させて、症例表示領域７１０に表示されている他のサムネイル画像の拡大率を決定する。
【０３２７】
Ｓ４１００では、拡大画像生成部１１２は、ユーザが操作部１０２に入力した基準サムネイル画像に対する拡大操作の操作量を、入力制御部１０３から取得する。そして、拡大画像生成部１１２は、取得した操作量を用いて、基準サムネイル画像に対する拡大率を決定する。
【０３２８】
具体的には、入力制御部１０３は、１のサムネイル画像にマウスポインタが位置決めされてマウスホイールが回転されたときのマウスホイールの回転量を検知し、検知した回転量を拡大画像生成部１１２に通知する。拡大画像生成部１１２は、回転量に予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出する。
【０３２９】
上述のように、ユーザによる拡大操作は、キーボードの上方向キーまたは下方向キーでもよい。この場合、入力制御部１０３は、１のサムネイル画像にマウスポインタが位置決めされてマウスボタンが押された状態で上方向キーまたは下方向キーが押されたときの、キーの押下時間をカウントし、カウント値を拡大画像生成部１１２に通知する。そして、拡大画像生成部１１２は、カウント値に対して予め定められた係数を掛けることにより、基準サムネイル画像に対する拡大率を算出すればよい。
【０３３０】
Ｓ４２００では、拡大画像生成部１１２は、症例検索システム３００から取得した複数の類似症例のうち、拡大対象の類似症例を決定する。この場合、Ｓ４０００で選択された基準サムネイル画像が属する分割領域１８０１において表示状態にある類似症例が拡大対象の類似症例として選択される。ここで、拡大対象となる類似症例の個数をＮＺと表す。また、表示状態にある類似症例とは、分割領域１８０１において非表示状態にある類似症例は含まないことを意味する。例えば、図５４において、左から１列目のアスペルギルス症の分割領域１８０１が選択されて拡大操作が入力されたとする。そして、この分割領域１８０１では、全域が表示状態にある３つの類似症例と一部が表示状態にある１つの類似症例との合計４つの類似症例が含まれているが、これ以外にも非表示状態の類似症例が含まれていたとする。この場合、表示状態にある４つの類似症例が拡大対象とされ、非表示状態にある残りの類似症例は拡大対象とされない。
【０３３１】
Ｓ４３００では、拡大画像生成部１１２は、類似症例ｉ（ｉは処理対象の類似症例を特定するインデックスであり１以上の整数）のサムネイル画像を処理対象のサムネイル画像として決定する。そして、拡大画像生成部１１２は、ｉがＮＺに到達するまで（Ｓ４３００でＹＥＳ）、Ｓ４４００、Ｓ４５００の処理を繰り返す。拡大画像生成部１１２は、Ｓ４４００、Ｓ４５００の処理を実行する度に、ｉを１ずつインクリメントする。ｉがＮＺを超えると（Ｓ４３００でＮＯ）、図５７の処理は終了する。
【０３３２】
Ｓ４４００では、拡大画像生成部１１２は、拡大対象の類似症例ｉのサムネイル画像の拡大率を算出する。Ｓ４１００で決定した基準サムネイル画像に対する拡大率と、基準サムネイル画像に対応する類似症例の関心領域情報４３００（図４６）と、拡大対象の類似症例ｉの関心領域情報４３００（図４６）とに基づき、拡大画像生成部１１２は、拡大対象の類似症例ｉの拡大率を算出する。
【０３３３】
図５８は、図５７のＳ４４００のサブルーチンの処理を示すフローチャートである。
【０３３４】
Ｓ４４１０では、拡大画像生成部１１２は、基準サムネイル画像に対応する類似症例の関心領域情報４３００を用いて、基準サムネイル画像の関心領域の面積を算出する。ここで、基準サムネイル画像の関心領域の面積をＳｒとし、関心領域の左上の座標を（ｘｌ、ｙｔ）とし、関心領域の右下の座標を（ｘｒ、ｙｂ）とすると、関心領域の面積Ｓｒは以下の式で算出することができる。
Ｓｒ＝｜ｘｌ−ｘｒ｜×｜ｙｔ−ｙｂ｜
【０３３５】
Ｓ４４２０では、拡大画像生成部１１２は、拡大対象の類似症例ｉの関心領域情報４３００を用いて、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積を算出する。ここで、拡大対象の類似症例ｉのサムネイル画像の関心領域の面積をＳｉとし、関心領域の左上の座標を（ｘｌｉ、ｙｔｉ）とし、関心領域の右下の座標を（ｘｒｉ、ｙｂｉ）とすると、関心領域の面積Ｓｉは以下の式で算出することができる。
Ｓｉ＝｜ｘｌｉ−ｘｒｉ｜×｜ｙｔｉ−ｙｂｉ｜
【０３３６】
Ｓ４４３０では、拡大画像生成部１１２は、Ｓ４４１０で算出した基準サムネイル画像の関心領域の面積Ｓｒと、Ｓ４４２０で算出した拡大対象の類似症例ｉのサムネイル画像の関心領域の面積Ｓｉと、Ｓ４１００で決定した基準サムネイル画像に対する拡大率とを用いて、拡大対象の類似症例ｉの拡大率を算出する。ここで、基準サムネイル画像に対する拡大率をｋｒとすると、拡大対象の類似症例ｉの拡大率ｋｉは、以下の式で算出することができる。
ｋｉ＝ｋｒ（Ｓｒ／Ｓｉ）
【０３３７】
図５９は、拡大処理前後の基準サムネイル画像及び拡大対象のサムネイル画像を概略的に示す図である。図５９の左上図は、拡大処理前の基準サムネイル画像を示す。図５９の右上図は、拡大処理後の基準サムネイル画像を示す。図５９の左下図は、拡大処理前の拡大対象のサムネイル画像を示す。図５９の右下図は、拡大処理後の拡大対象のサムネイル画像を示す。
【０３３８】
図５９の左上図に示される基準サムネイル画像を拡大率ｋｒで拡大すると、図５９の右上図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５９の右上図において、関心領域ＲＯＩの中心座標が表示領域７２０ｄの中心座標に位置するように、表示領域７２０ｄを決定する。拡大画像生成部１１２は、表示領域７２０ｄのサイズを拡大処理前の表示領域７２０ｃのサイズと同じサイズに維持している。
【０３３９】
図５９の左下図に示される拡大対象のサムネイル画像を拡大率ｋｉで拡大すると、図５９の右下図に示されるサムネイル画像が得られる。拡大画像生成部１１２は、図５９の右下図において、関心領域ＲＯＩの中心座標が表示領域７２０ｆの中心座標に位置するように、表示領域７２０ｆを設定する。拡大画像生成部１１２は、表示領域７２０ｆのサイズを拡大処理前の表示領域７２０ｅのサイズと同じサイズに維持している。
【０３４０】
図５９では、基準サムネイル画像の関心領域ＲＯＩを拡大率ｋｒで拡大したときの面積と、拡大対象の類似症例ｉのサムネイル画像の関心領域ＲＯＩを拡大率ｋｉで拡大したときの面積とが同一サイズとなるように拡大率ｋｉが決定されている。したがって、図５９に示すように、拡大後の基準サムネイル画像の関心領域ＲＯＩと、拡大後の拡大対象の類似症例ｉのサムネイル画像の関心領域ＲＯＩとのサイズが一致している。
【０３４１】
図５７に戻って、Ｓ４５００では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率ｋｉと、類似症例データ４０００（図４６）に登録された関心領域情報４３００及びサムネイル画像データ４５００とを用いて、拡大対象の類似症例ｉを拡大し、拡大画像を生成する。表示制御部１０４は、拡大画像生成部１１２により生成された拡大画像を表示する。
【０３４２】
図６０は、図５７のＳ４５００のサブルーチンの処理を示すフローチャートである。図６１は、拡大率と表示領域との関係を概略的に表す図である。以下、図６０及び図６１を用いて、拡大画像の関心領域の中心座標が、表示領域の中心座標に位置するように、拡大画像を生成する処理の詳細について説明する。
【０３４３】
Ｓ４５１０では、拡大画像生成部１１２は、Ｓ４４００で算出した拡大率ｋｉと、類似症例データ４０００（図４６）に登録されたサムネイル画像データ４５００とを用いて、拡大画像を生成する。拡大率ｋｉが用いられて、図６１の左図に示されるサムネイル画像から図６１の右図に示される拡大画像が生成される。
【０３４４】
Ｓ４５２０では、拡大画像生成部１１２は、類似症例データ４０００（図４６）に登録された関心領域情報４３００と、Ｓ４４００で算出した拡大率とを用いて、拡大画像の関心領域の中心座標を算出する。ここで、拡大前の関心領域の中心座標を（ｘｃ、ｙｃ）とすると、図６１に示すように、拡大前の関心領域の中心座標に拡大率を掛けて得られる座標（ｋｉ×ｘｃ、ｋｉ×ｙｃ）が拡大後の関心領域の中心座標となる。
【０３４５】
Ｓ４５３０では、拡大画像生成部１１２は、Ｓ４５２０で算出した拡大後の関心領域の中心座標（ｋｉ×ｘｃ、ｋｉ×ｙｃ）と、予め定められた表示領域のサイズとから、類似症例ｉのサムネイル画像の拡大画像の表示領域を決定する。ここで、図６１の左図に示されるように、表示領域７２０ａは、横寸法ｗ、縦寸法ｈに設定されている。この場合、図６１の右図に示される横寸法ｗ、縦寸法ｈを持つ矩形状の領域が表示領域７２０ｂとなる。この表示領域７２０ｂの左上の頂点の座標は（ｋｉ×ｘｃ−ｗ／２、ｋｉ×ｙｃ−ｈ／２）であり、右下の頂点の座標は（ｋｉ×ｘｃ＋ｗ／２、ｋｉ×ｙｃ＋ｈ／２）である。
【０３４６】
Ｓ４５４０では、表示制御部１０４は、拡大画像生成部１１２によりＳ４５１０で生成された拡大画像のうち、Ｓ４５３０で算出された表示領域７２０ｂの画像を、症例表示領域７１０の類似症例ｉの表示領域に表示する。図６０に示される処理により、関心領域の中心座標が表示領域の中心座標に位置するように類似症例ｉの拡大画像が生成される。
【０３４７】
以上の処理により、症例表示領域７１０には、ユーザが基準サムネイル画像に対して任意の拡大率を指定すると、基準サムネイル画像が属する分割領域１８０１において、表示状態にある残りのサムネイル画像が一括して拡大される。そのため、ユーザは、１の拡大操作で、分割領域１８０１内で表示状態にある全てのサムネイル画像の拡大できる。その結果、ユーザの操作負担が減少する。また、分割領域１８０１において、関心領域のサイズが揃えられてサムネイル画像が表示される。そのため、あるサムネイル画像について、関心領域が他のサムネイル画像に対して小さく拡大されたために、そのサムネイル画像が読影候補から見落とされる事態が発生することを防止し、診断精度の向上を図ることができる。さらに、類似症例検索で得られた全ての類似症例ではなく、分割領域１８０１内で表示状態にある類似症例に対して拡大処理が行われる。このため、システムへの処理負荷が大幅に軽減される。
【０３４８】
なお、実施の形態１では、ディスプレイ１０１ｂは横方向に長い形状を持つとして説明したが、縦方向に長い形状を持っていてもよい。
【０３４９】
（実施の形態２）
次に、本開示の実施の形態２について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。
【０３５０】
実施の形態１では、１以上の病名が選択された場合、症例表示領域７１０を病名毎に縦方向に長尺の１以上の分割領域に分け、各分割領域において類似症例を縦一列で表示する態様を採用した。そして、検索クエリ画像に対する類似度が高い類似症例を症例表示領域７１０の上部に集め、左から右に向かって関連度が高い順に検索結果が表示される一般的なインターネット等の検索画面の表示態様を実施の形態１は踏襲した。
【０３５１】
一方、１以上の病名を選択して類似症例を絞り込んだ後は、各病名において最も類似度が高い類似症例を、レイアウト領域７２０に表示された検索クエリ画像に対して最も近くに表示しても、検索クエリ画像と類似症例との比較をユーザは効率的に行うことができると考えられる。そこで、実施の形態２では、上記の表示態様を採用する。
【０３５２】
また、実施の形態１では、形状が横長のディスプレイ１０１ｂを採用したが、実施の形態２では、形状が縦長のディスプレイ１０１ｂを採用して説明する。なお、実施の形態２では、ディスプレイ１０１ａの形状は横長であってもよいし、縦長であってもよい。
【０３５３】
実施の形態１と実施の形態２との相違点は、症例表示領域７１０の表示制御に関わる部分であるため、この部分を重点的に説明し、他の部分は説明を省略する。
【０３５４】
図６２は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ｂに表示される基本画面Ｋ３の一例を示す図である。図６２に示す基本画面Ｋ３は、図６と同様に症例表示領域７１０、レイアウト領域７２０、病名リスト表示領域７３０、及び分布リスト表示領域７５０を備える。
【０３５５】
類似症例の数が膨大である場合、症例表示領域７１０は全ての類似症例を一度に表示することができない。そこで、症例表示領域７１０の例えば下側に横方向に長尺のスクロールバー７１５が設けられている。
【０３５６】
表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を左右方向にスクロール表示させる。これにより、ユーザは、非表示状態にあった類似症例を症例表示領域７１０に表示させ、その類似症例を観察できる。
【０３５７】
なお、図６３に示すように、スクロールバー７１５は上下方向に長尺であってもよい。図６３は、症例表示領域７１０に上下方向に長尺なスクロールバー７１５が設けられた場合の基本画面Ｋ３を示す図である。この場合、表示制御部１０４は、スクロールバー７１５の移動量に応じて、症例表示領域７１０内に表示されているサムネイル画像を上下方向にスクロール表示させればよい。或いは、症例表示領域７１０にマウスポインタが位置決めされた状態で、キーボードの方向キーが押されると、表示制御部１０４は、キーが押されている間、押されているキーの方向に症例表示領域７１０内に表示されているサムネイル画像をスクロール表示させてもよい。
【０３５８】
症例表示領域７１０におけるサムネイル画像の表示手法としては、例えば、図６２に示すように、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、下側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一列の下端に達すると、左から２列目の上端に次に距離が大きいサムネイル画像を表示するという表示手法が採用できる。つまり、症例表示領域７１０において、左上から上下に蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法が採用できる。
【０３５９】
もちろん、本実施の形態は別の表示手法が採用されてもよい。例えば、図６３に示すように、最上段の行の左端に検索クエリ画像との距離が最短のサムネイル画像を表示し、右側に向かうにつれて距離が順次に大きくなるようにサムネイル画像を表示し、同一行の右端に達すると上から２行目の左端に次に距離が大きいサムネイル画像を表示するという表示手法を採用してもよい。つまり、症例表示領域７１０において、左上から右下に向けて蛇行するように距離が小さい順にサムネイル画像を表示するという表示手法である。また、これら複数の表示手法をユーザが切り替え可能な構成が採用されてもよい。
【０３６０】
次に、病名リスト表示領域７３０で複数の病名が選択された場合の画面遷移について説明する。病名リスト表示領域７３０で複数の病名が選択された場合は、実施の形態１と同様、選択された病名の数に応じて症例表示領域７１０を分割して分割領域を形成し、各分割領域に該当する類似症例を表示する。
【０３６１】
図６４は、病名リスト表示領域７３０において病名が選択された場合の表示処理の一例を示すフローチャートである。以下、図６４のフローチャートを用いて、病名リスト表示領域７３０に表示された病名が選択された場合の症例表示領域７１０への表示処理について詳しく説明する。
【０３６２】
図６４のフローチャートは、図４８のフローチャートにおいて、Ｓ１００３、Ｓ１００４、Ｓ１００５に代えて、Ｓ３０００、Ｓ３００１、Ｓ３００２が設けられている。
【０３６３】
Ｓ３０００は、病名リスト表示領域７３０で１つの病名が選択された場合の症例表示領域７１０の表示処理である。この場合、図６５に示すように、Ｓ１０００で選択された１つの病名に該当する類似症例のサムネイル画像が、距離の近い順に縦方向で症例表示領域７１０に表示される。
【０３６４】
図６５は、１つの病名が選択された場合の基本画面Ｋ３の第１例を示す図である。図６５の例では、左から１列目の上端に検索クエリ画像に対する距離が最も小さい（類似度が高い）類似症例が表示され、下に向かうにつれて距離が大きい（類似度が高い）順で類似症例が表示され、１列目の下端に達すると左から２列目の上端に次に距離が大きい類似症例が表示されるという表示態様で、類似症例のサムネイル画像が表示される。
【０３６５】
これにより、類似度が高い類似症例が、症例表示領域７１０の左側に集められ、レイアウト領域７２０の表示された検索クエリ画像に可能な限り近い位置に表示され、検索クエリ画像と類似症例との比較を効率的に行うことができ、診察精度の向上に寄与できる。
【０３６６】
なお、図６５では、Ｓ１０００で選択された病名に該当する類似症例のサムネイル画像が、距離の近い順に縦方向で表示されたが、本実施の形態はこれに限定されない。例えば、図６６に示すようにＳ１０００で選択された病名に該当する類似症例のサムネイル画像が、距離の近い順に横方向に表示されてもよい。図６６は、１つの病名が選択された場合の基本画面Ｋ３の第２例を示す図である。図６６の例では、左から１列目の上端に検索クエリ画像に対する距離が最も小さい（類似度が高い）類似症例が表示され、右に向かうにつれて距離が大きい（類似度が高い）順で類似症例が表示され、１行目の右端に達すると上から２行目の左端に次に距離が大きい類似症例が表示されるという表示態様で、類似症例のサムネイル画像が表示される。
【０３６７】
この場合、類似度の高い類似症例が症例表示領域７１０の上部に集められ、左から右に向かって関連度が高い順に検索結果が表示される一般的なインターネット等の検索画面の表示態様が踏襲される。
【０３６８】
Ｓ３００１〜Ｓ３００２は、病名リスト表示領域７３０で複数の病名が選択された場合の症例表示領域７１０に対する表示処理である。
【０３６９】
Ｓ３００１では、表示制御部１０４は、症例表示領域７１０を、Ｓ１００１で算出した病名数で横方向に分割する。この処理により、Ｓ１０００で取得した病名の個数分の分割領域が作成される。ここで作成される分割領域は、該当する病名を持つ類似症例のサムネイル画像を横一列で表示するために横方向に長尺である。
【０３７０】
Ｓ３００２では、表示制御部１０４は、Ｓ３００１で作成した各分割領域に対し、該当する病名を持つ類似症例のサムネイル画像を類似度が高い順に横一列で表示する。
【０３７１】
図６７は、複数の病名が選択された場合に作成される基本画面Ｋ３の一例を示す図である。この基本画面Ｋ３は、図６３の病名リスト表示領域７３０でアスペルギルス症、転移性肺癌、及び肺膿瘍の３つの病名が選択された後の状態を示している。そのため、表示条件表示領域７１４には、アスペルギルス症、転移性肺癌、及び肺膿瘍と表示されている。また、３つの病名に該当する類似症例の件数が１５件であったため、検索結果件数表示領域７１３には１５件と表示されている。また、３つの病名が選択されため、症例表示領域７１０は、横方向に３分割されて、３つの病名に対応する３つの分割領域が形成されている。そして、各分割領域には該当する病名の類似症例のサムネイル画像が類似度の高い順で横一列で表示されている。
【０３７２】
ここでは、上から順に「アスペルギルス症」、「転移性肺癌」、及び「肺膿瘍」との見出しが付けられた３つの病名に対応する３つの分割領域が表示されている。そして、各分割領域には、各病名に該当する類似症例のサムネイル画像が横一列で表示されている。
【０３７３】
このような表示を行うことにより、病名を選択して類似症例を絞り込んだ後は、各病名において最も類似度が高い類似症例が、レイアウト領域７２０の表示された検索クエリ画像に最も近い位置に表示される。そのため、検索クエリ画像に対して類似度の高い類似症例のサムネイル画像を、医師に優先的に検討させることができる。このように効率的に比較精度を向上させるシステムを提供することで、診察精度の向上に寄与できる。
【０３７４】
なお、１の分割領域において表示対象となるサムネイル画像が一定数以上であり、分割領域が一度に全てのサムネイル画像を表示できない場合、表示制御部１０４は、該当する分割領域にスクロールバー１０００１を配置してもよい。図６７の例では、３つの分割領域は、表示対象となるサムネイル画像が一定数以上であり、一度に全てのサムネイル画像を表示できなかったため、横方向に長尺のスクロールバー１０００１が配置されている。この場合、表示制御部１０４は、スクロールバー１０００１が右方向にスライドされると、病名の見出しを維持した状態で、或いは見出しと共に、スライド量に応じた距離分、該当する分割領域を、左方向にスクロールさせる。また、表示制御部１０４は、スクロールバー１０００１が左方向にスライドされると、病名の見出しを維持した状態で、或いは見出しと共に、スライド量に応じた距離分、分割領域を右方向にスクロールさせる。これにより、ユーザは、選択した病名に対応する類似症例のサムネイル画像を全て閲覧できる。なお、図６７の例では、分割領域は１度に２つのサムネイル画像が表示可能であるため、表示対象のサムネイル画像が３つ以上の場合、表示制御部１０４は、該当する分割領域にスクロールバー１０００１を配置させればよい。
【０３７５】
また、図６７において、選択された病名数が一定数以上の場合は、図６８に示されるように、スクロールバー１００００等を用いて症例表示領域７１０は拡張されてもよい。図６８は、選択された病名数が一定数以上の場合の基本画面Ｋ３を示す図である。症例表示領域７１０に表示するサムネイル画像のサイズを読影可能な所定のサイズ以上に保持する場合、選択された病名数が一定以上になると、症例表示領域７１０は、選択された全ての病名を一度に表示することができなくなる。そこで、選択された病名数が一定以上の場合 、表示制御部１０４は、症例表示領域７１０にスクロールバー１００００を設け、症例表示領域７１０を実質的に拡張する。
【０３７６】
図６８の例では、図６３の病名リスト表示領域７３０でアスペルギルス症、転移性肺癌、肺膿瘍、クリプトコッカス症の４つの病名が選択された後の基本画面Ｋ３が示されている。図６８に示すように、症例表示領域７１０は、横方向に４分割されて４つの病名に対応する４つの分割領域が形成され、各分割領域に対応する病名の類似症例のサムネイル画像を表示している。ここで、上から４行目に配置されたクリプトコッカス症の分割領域は、一部が非表示状態になっている。そこで、表示制御部１０４は、症例表示領域７１０に縦方向に長尺のスクロールバー１００００を配置する。そして、表示制御部１０４は、スクロールバー１００００が上方向にスライドされると、スライド量に応じた距離分、症例表示領域７１０を下方向にスクロールさせ、一部が非表示であったクリプトコッカス症の分割領域の全域を症例表示領域７１０内に露出させる。このように、選択された病名数が一定以上の場合にスクロールバー１００００を用いて症例表示領域７１０をスクロールすることで、ユーザは選択した全ての病名に該当する類似症例を閲覧できる。なお、ここでは、スクロールバー１００００を用いる態様を説明したが、図５０で説明したのと同様、症例表示領域７１０内にマウスが位置決めされ、マウスがドラッグされることで、症例表示領域７１０を上下にスクロールさせる態様が採用されてもよい。
【０３７７】
また、図６８の例では、症例表示領域７１０は、一度に全域を表示できる分割領域の個数が３つであるため、ユーザにより４つ以上の病名が選択された場合にスクロールバー１００００が表示される。
【０３７８】
なお、Ｓ３０００では、病名リスト表示領域７３０で１つの病名が選択された場合、症例表示領域７１０は、サムネイル画像を類似度の高い順で縦方向に表示する例を示したが、本実施の形態はこれに限定されない。例えば、病名リスト表示領域７３０で１つの病名が選択された場合、表示制御部１０４は、症例表示領域７１０に類似度の高い順にサムネイル画像を横一列で表示してもよい。
【０３７９】
図６９は、図６３の病名リスト表示領域７３０でアスペルギルス症が選択された後の基本画面Ｋ３を示す図である。図６９の例では、病名として選択されたアスペルギルス症のサムネイル画像は、類似度が高い順で横一列で表示されている。このような表示を行うことにより、病名が複数選択された場合と同じ視線動作で、ユーザは類似症例を閲覧することができるため、検索時の利便性を向上させることができる。
【０３８０】
なお、実施の形態２では、ディスプレイ１０１ｂは縦方向に長い形状を持つとして説明したが、横方向に長い形状を持っていてもよい。
【０３８１】
また、図５２では、画像特徴抽出部３０２は、症例検索システム３００が備えていたが、図５３に示すように情報端末１００が備えていてもよい。図５３は、画像特徴抽出部を情報端末１００に設けた場合の情報端末１００、医用情報管理システム２００、及び症例検索システム３００の構成を示すブロック図である。図５３に示すように、症例検索システム３００から画像特徴抽出部が省かれ、情報端末１００が画像特徴抽出部１１３を備えている。それ以外は図５２と同じである。
【産業上の利用可能性】
【０３８２】
本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。
【符号の説明】
【０３８３】
１００  情報端末
１０１  ディスプレイ
１０２  操作部
１０３  入力制御部
１０４  表示制御部
２００  医用情報管理システム
３００  症例検索システム
４００  ネットワーク
【図１】
2020155135.tif 000003
【図２】
2020155135.tif 000004
【図３】
2020155135.tif 000005
【図４】
2020155135.tif 000006
【図５】
2020155135.tif 000007
【図６】
2020155135.tif 000008
【図７】
2020155135.tif 000009
【図８】
2020155135.tif 000010
【図９】
2020155135.tif 000011
【図１０】
2020155135.tif 000012
【図１１】
2020155135.tif 000013
【図１２】
2020155135.tif 000014
【図１３】
2020155135.tif 000015
【図１４】
2020155135.tif 000016
【図１５】
2020155135.tif 000017
【図１６】
2020155135.tif 000018
【図１７】
2020155135.tif 000019
【図１８】
2020155135.tif 000020
【図１９】
2020155135.tif 000021
【図２０】
2020155135.tif 000022
【図２１】
2020155135.tif 000023
【図２２】
2020155135.tif 000024
【図２３】
2020155135.tif 000025
【図２４】
2020155135.tif 000026
【図２５】
2020155135.tif 000027
【図２６】
2020155135.tif 000028
【図２７】
2020155135.tif 000029
【図２８】
2020155135.tif 000030
【図２９】
2020155135.tif 000031
【図３０】
2020155135.tif 000032
【図３１】
2020155135.tif 000033
【図３２】
2020155135.tif 000034
【図３３】
2020155135.tif 000035
【図３４】
2020155135.tif 000036
【図３５】
2020155135.tif 000037
【図３６】
2020155135.tif 000038
【図３７】
2020155135.tif 000039
【図３８】
2020155135.tif 000040
【図３９】
2020155135.tif 000041
【図４０】
2020155135.tif 000042
【図４１】
2020155135.tif 000043
【図４２】
2020155135.tif 000044
【図４３】
2020155135.tif 000045
【図４４】
2020155135.tif 000046
【図４５】
2020155135.tif 000047
【図４６】
2020155135.tif 000048
【図４７】
2020155135.tif 000049
【図４８】
2020155135.tif 000050
【図４９】
2020155135.tif 000051
【図５０】
2020155135.tif 000052
【図５１】
2020155135.tif 000053
【図５２】
2020155135.tif 000054
【図５３】
2020155135.tif 000055
【図５４】
2020155135.tif 000056
【図５５】
2020155135.tif 000057
【図５６】
2020155135.tif 000058
【図５７】
2020155135.tif 000059
【図５８】
2020155135.tif 000060
【図５９】
2020155135.tif 000061
【図６０】
2020155135.tif 000062
【図６１】
2020155135.tif 000063
【図６２】
2020155135.tif 000064
【図６３】
2020155135.tif 000065
【図６４】
2020155135.tif 000066
【図６５】
2020155135.tif 000067
【図６６】
2020155135.tif 000068
【図６７】
2020155135.tif 000069
【図６８】
2020155135.tif 000070
【図６９】
2020155135.tif 000071