(57)【特許請求の範囲】
【請求項１】
医用レポート作成時に入力された所見と当該所見の入力開始時刻及び終了時刻の少なくとも一方とを関連付けて入力履歴として記録する入力履歴記録部と、
画像操作履歴として、前記医用レポート作成時に操作した画像に対して行った操作の種類と当該操作を行った時刻とを当該操作した画像と関連付けて記録する操作履歴記録部と、
入力部からの入力指示に基づいて、医用レポート内の所見の少なくとも一部を選択する選択部と、
前記選択部によって選択された位置に対応する所見の入力開始時刻及び終了時刻の少なくとも一方と、それに対応する時刻の前記画像操作履歴の内容に基づいて、前記選択部によって選択された所見を入力したときに操作した画像の中から注目画像を抽出する抽出部と、
前記注目画像を表示部に表示させる表示制御部と、
を有することを特徴とするレポート作成支援システム。
【請求項２】
前記入力履歴記録部は、入力履歴として、前記医用レポート作成時に入力された所見の医用レポート上の位置と当該所見の入力開始時刻及び終了時刻の少なくとも一方とを関連付けて記録することを特徴とする請求項１に記載のレポート作成支援システム。
【請求項３】
前記医用レポート作成時に前記所見を音声で入力する音声入力部を有し、
前記入力履歴記録部は、入力履歴として、前記音声に基づいて作成された医用レポートの所見に対して、当該所見に類似する音声に関連付けられた入力開始時刻及び終了時刻の少なくとも一方を関連付けて記録することを特徴とする請求項１に記載のレポート作成支援システム。
【請求項４】
前記画像に対する操作には、その種類ごとに重みづけがされており、前記抽出部は、画像に行われた操作の重みづけに基づいて前記注目画像の抽出を行うことを特徴とする請求項１に記載のレポート作成支援システム。
【請求項５】
前記抽出部は、画像に行われた操作の頻度、或いは回数に基づいて前記注目画像の抽出を行うことを特徴とする請求項１に記載のレポート作成支援システム。
【請求項６】
前記抽出部は、前記画像操作履歴に基づいて前記選択部により選択された所見と関連する度合いを示す注目度を算出し、当該注目度に基づいて前記注目画像を抽出することを特徴とする請求項１記載のレポート作成支援システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、レポート作成支援システムに関する。
【背景技術】
【０００２】
Ｘ線撮影装置、Ｘ線ＣＴ装置及びＭＲＩ（磁気共鳴イメージング）診断装置等の医用画像撮影装置によって撮影された画像は、医用画像保管装置（サーバ）に保管される。
【０００３】
読影医は、マウス等の入力手段を用いて医用画像保管装置に保管された画像から任意の画像を医用観察装置（ビューア）上に表示させる指示を行う。そして読影医は、医用レポート作成装置に表示された所見入力欄にその画像に対する所見を入力することによって医用レポートを作成する。
【０００４】
ここで、過去に検査（以下、「過去検査」という場合がある）を行った患者に対して新たに検査（以下、「今回検査」という場合がある）を行った場合、読影医は過去検査からの経時変化を今回検査の医用レポートに記載することがある。
【０００５】
そのとき読影医は、過去検査において注目していた画像（以下、「注目画像」という場合がある）を確認したり、注目画像と今回検査の画像を比較する必要がある。
【０００６】
この場合、注目画像の選択や注目画像と比較するための今回検査の画像選択、或いは医用観察装置への注目画像と今回検査の画像との並列表示操作等は読影医自身によって行われている。
【０００７】
例えば、注目画像を選択する場合、読影医は過去検査の医用レポートを読み、その所見に対応すると思われる何枚かの画像を医用画像観察装置上に表示させる。そして読影医はそれらの画像から所見に最も近いと思われる画像を注目画像として選択するという作業を行っている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００９−２３０３０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
しかし、複数枚ある過去検査の画像から注目画像を選択すること等を読影医が行うことは時間がかかり、効率的な読影の妨げとなっていた。
【００１０】
よって本実施形態では、上記課題を解決するために医用レポート内に記載された所見に対応する注目画像を容易に特定することができる構成を説明する。
【課題を解決するための手段】
【００１１】
上記課題を解決するために、実施形態に記載のレポート作成支援システムは、入力履歴記録部と、操作履歴記録部と、選択部と、抽出部と、表示制御部とを有する。入力履歴記録部は、医用レポート作成時に入力された所見と当該所見の入力開始時刻及び終了時刻の少なくとも一方とを関連付けて入力履歴として記録する。操作履歴記録部は、画像操作履歴として、医用レポート作成時に操作した画像に対して行った操作の種類と当該操作を行った時刻とを当該操作した画像と関連付けて記録する。選択部は、入力部からの入力指示に基づいて、医用レポート内の所見の少なくとも一部を選択する。抽出部は、選択部によって選択された位置に対応する所見の入力開始時刻及び終了時刻の少なくとも一方と、それに対応する時刻の画像操作履歴の内容に基づいて、選択部によって選択された所見を入力したときに操作した画像の中から注目画像を抽出する。表示制御部は、注目画像を表示部に表示させる。
【図面の簡単な説明】
【００１２】
【図１】実施形態に共通する医用情報システムを示すブロック図である。
【図２】第１の実施形態におけるレポート作成支援システムを示すブロック図である。
【図３】第１の実施形態における画像操作履歴記録処理におけるビューア部の構成を示す図である。
【図４】第１の実施形態における画像操作履歴記録処理のフローチャートである。
【図５】第１の実施形態における画像操作履歴記録処理の処理結果を示す図である。
【図６】第１の実施形態における入力履歴記録処理におけるレポート部の構成を示す図である。
【図７】第１の実施形態における入力履歴記録処理のフローチャートである。
【図８】第１の実施形態における入力履歴記録処理の処理結果を示す図である。
【図９】第１の実施形態における入力履歴記録処理の説明を補足する図である。
【図１０】第１の実施形態における注目画像抽出処理における選択部を示す図である。
【図１１】第１の実施形態における注目画像抽出処理におけるレポート部の構成を示す図である。
【図１２】第１の実施形態における注目画像抽出処理のフローチャートである。
【図１３】第１の実施形態における注目画像抽出処理のフローチャートである。
【図１４】第２の実施形態における入力履歴記録処理におけるレポート部の構成を示す図である。
【図１５】第２の実施形態における入力履歴記録処理のフローチャートである。
【発明を実施するための形態】
【００１３】
（医用情報システムの全体構成）
まず、図１を用いて本実施形態におけるレポート作成支援システム１０を含む医用情報システム１の全体構成について説明する。
【００１４】
図１に示す通り、医用情報システム１は、医用画像撮影装置２、医用画像保管装置３（以下、「サーバ部３」という場合がある）、医用画像観察装置４（以下、「ビューア部４」という場合がある）、医用レポート作成装置５（以下、「レポート部５」という場合がある）を有している。またこれらの装置間はＬＡＮ６（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）を通じて通信可能に接続されている。本実施形態においては、レポート作成部５単体、或いはサーバ部３、ビューア部４及びレポート部５がレポート作成支援システム１０を構成する。なお、本実施形態においては、サーバ部３、ビューア部４及びレポート部５が別体の構成について説明するが、サーバ部３、ビューア部４及びレポート部５は、それぞれの機能を有する一の装置であってもよい。
【００１５】
医用画像撮影装置２は、Ｘ線撮影装置、Ｘ線ＣＴ装置及びＭＲＩ診断装置等の撮影装置である。これらの撮影装置で患者を撮影することにより、医用画像を取得することができる。取得された医用画像は、ＤＩＣＯＭ（Ｄｉｇｉｔａｌ  Ｉｍａｇｉｎｇ  ａｎｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  ｉｎ  Ｍｅｄｉｃｉｎｅ）に準拠したファイル形式でサーバ部３に送信される。なお、送信される医用画像には、その医用画像を撮影した日付等その医用画像に付随する画像関連情報が含まれている。
【００１６】
サーバ部３は、医用画像撮影装置２で撮影された医用画像及び医用レポート等を保管する装置である。サーバ部３の詳細については後述する。
【００１７】
ビューア部４は、読影医等からの入力指示に基づき、サーバ部３に保管された複数の医用画像から所望の画像を読み出して表示させる装置である。ビューア部４の詳細については後述する。
【００１８】
レポート部５は、読影医等からの入力指示に基づき、ビューア部４に表示された医用画像に対して、所見入力欄に所見を入力し、医用レポートを作成する装置である。レポート部５の詳細については後述する。なお、本実施形態において「所見」とは、少なくとも一文字以上からなる文字（文字列）である。
【００１９】
（第１の実施形態）
図２から図１３を用いて第１の実施形態について説明を行う。
【００２０】
（レポート作成支援システムの構成）
図２を用いて本実施形態におけるレポート作成支援システム１０の構成について詳述する。上述の通り、本実施形態におけるレポート作成支援システム１０は、サーバ部３、ビューア部４及びレポート部５からなる。
【００２１】
（サーバ部の構成）
サーバ部３は、画像送受信部３１、関連情報保管部３２、画像保管部３３、画像配信部３４、レポート送受信部３５、レポート保管部３６、レポート配信部３７を有する。
【００２２】
画像送受信部３１は、医用画像撮影装置２から送信される医用画像（及び付随する画像関連情報）を受信し、関連情報保管部３２及び画像保管部３３に送信する機能を有している。
【００２３】
関連情報保管部３２は、画像送受信部３１から送信された医用画像に関連する情報（画像の撮影日時、撮影条件等）を保管する機能を有している。
【００２４】
画像保管部３３は、画像送受信部３１から送信された医用画像を保管する機能を有している。なお、画像送受信部３１から送信された医用画像に関連する情報と画像送受信部３１から送信された医用画像とは互いに関連付けられて保管されている。
【００２５】
画像配信部３４は、ビューア部４からの指示に基づき、特定の医用画像を関連情報と共にビューア部４に配信する機能を有している。
【００２６】
レポート送受信部３５は、レポート部５から送信された医用レポートを受信し、レポート保管部３６に送信する機能を有している。
【００２７】
レポート保管部３６は、レポート送受信部３５から送信された医用レポートを保管する機能を有している。なお、医用レポートには患者ＩＤ等、その医用レポートを特定するための関連情報が付随されている。
【００２８】
レポート配信部３７は、レポート部５からの指示に基づき、特定の医用レポートをレポート部５に配信する機能を有している。
【００２９】
（ビューア部の構成）
ビューア部４は、入力部４１、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）４２、表示部４３を有する。
【００３０】
入力部４１は、読影医等が、ビューア部４に対する操作入力を行う機能を有している。入力部４１は、キーボードやマウス等の操作入力手段である。
【００３１】
ＣＰＵ４２は、入力部４１からの入力指示に基づいて、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ。図示なし）やＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ。図示なし）から対応するプログラムを読み出し、そのプログラムに従って所定の処理を実行する機能を有している。
【００３２】
例えば、入力部４１によってある患者に関する医用画像を表示させる指示（具体的には、ある患者ＩＤが入力）がされると、ＣＰＵ４２は所定のプログラムに基づいて医用画像表示のための処理を行う。この場合、ＣＰＵ４２は、まず患者ＩＤをサーバ部３（画像配信部３４）に送信する。画像配信部３４は、その患者ＩＤに対応する医用画像（及び付随する画像関連情報）を関連情報保管部３２及び画像保管部３３から読み出し、ＣＰＵ４２に配信する。そしてＣＰＵ４２はその医用画像を表示部４３に表示させる処理を行う。
【００３３】
表示部４３は、モニタ等の表示手段であって、ＣＰＵ４２によって処理された医用画像等を表示する機能を有している。また表示部４３に表示された医用画像に対しては、入力部４１で入力操作を行うことにより、医用画像の拡大、縮小等の処理を行うことが可能である。この処理の制御に関しては、所定のプログラムに基づいてＣＰＵ４２が行う。
【００３４】
（レポート部の構成）
レポート部５は、入力部５１、ＣＰＵ５２、表示部５３を有する。
【００３５】
入力部５１は、読影医等がレポート部５に対する操作入力を行う機能を有している。入力部５１は、キーボードやマウス等の操作入力手段である。なお、入力部４１及び入力部５１は別体で設けられている必要はなく一体的な入力部を設けることも可能である。
【００３６】
ＣＰＵ５２は、入力部５１からの入力指示に基づき、ＲＯＭ（図示なし）やＲＡＭ（図示なし）から対応するプログラムを読み出し、そのプログラムに従って所定の処理を実行する機能を有している。なお、ＣＰＵ４２及びＣＰＵ５２は別体で設けられている必要はなく一体的なＣＰＵを設けることも可能である。
【００３７】
例えば、入力部５１によって医用レポート作成の指示がなされると、ＣＰＵ５２は、レポート作成部として機能する。すなわち、入力部５１からの入力動作に基づいて表示部５３上に所見入力欄を表示させたり、所見入力欄の選択、所見（文字列）の入力等を行う処理を実行する。
【００３８】
或いはＣＰＵ５２は、入力部５１からの入力指示に基づいて、サーバ部３から特定の医用レポートを取得する処理を実行することも可能である。例えば、入力部５１によってある患者ＩＤが入力されると、ＣＰＵ５２はその患者ＩＤをサーバ部３（レポート配信部３７）に送信する。レポート配信部３７は、その患者ＩＤに対応する医用レポートをレポート保管部３６から読み出し、レポート部５に配信する。ＣＰＵ５２はその医用レポートを表示部５３に表示させる処理を行う。
【００３９】
なお、入力部５１によって入力された患者ＩＤに対応する医用レポートが複数ある場合には、レポート配信部３７によって全ての医用レポートがレポート部５に配信される。この場合、ＣＰＵ５２は、複数の医用レポートの一覧表（例えば日付のみ）を表示部５３に表示させる処理を行う。読影医等がその一覧から所望の対象を選択することにより、ＣＰＵ５２は、それに対応する医用レポートを表示部５３に表示させることが可能となっている。
【００４０】
表示部５３は、モニタ等の表示手段であって、医用レポートを表示する機能を有している。なお、表示部４３及び表示部５３は別体で設けられている必要はなく一つの表示部を設けることも可能である。
【００４１】
（画像操作履歴記録処理について）
次に図３から図５を用いて、本実施形態における画像操作履歴記録処理について詳述する。
【００４２】
医用レポート作成においては、読影医が医用画像を参照しながら所見入力欄に所見を入力していく。その際、複数の医用画像を切り換えて表示させたり、ある特定の医用画像について拡大、縮小等の操作を行う場合がある。本実施形態においてはそれらの医用画像に対して行われた操作の履歴（以下、「画像操作履歴」という場合がある）を記録する処理を行っている。
【００４３】
図３に示すように、画像操作履歴記録処理においてＣＰＵ４２は、判別部４２１、取得部４２２として機能する。
【００４４】
判別部４２１は、表示部４３に表示された医用画像に対して画像操作が行われたか否か及び画像操作が行われた場合にはその操作の種類（拡大、縮小、非表示、追加表示、階調変更、計測、アノテーション等）を判別する機能を有している。具体的には、入力部４１によって医用画像の操作指示が入力された場合、判別部４２１はその入力信号（画像操作信号）を受信することにより画像操作の開始及び操作の種類を判別することができる。なお、判別部４２１はその判別結果を取得部４２２に送信する。
【００４５】
取得部４２２は、医用画像に対する操作が行われた時刻を取得する機能を有している。具体的には、判別部４２１からの入力信号が入力された場合に、その入力信号に対応する時刻（画像操作が開始された時刻）を取得する。
【００４６】
また本実施形態においては、サーバ部３内の関連情報保管部３２が、画像操作履歴を操作が行われた医用画像と関連付けて記録する機能を有している。すなわち関連情報保管部３２は、「操作履歴記録部」としての機能も有している。なお、ビューア部４内に記録部を設け、その記録部内に画像操作履歴及び関連する医用画像を記録させることも可能である。
【００４７】
図４は、画像操作履歴記録処理のフローチャートである。
【００４８】
入力部４１からの入力指示に基づいて、表示部４３に医用画像が表示されると（Ｓ１０）、まず判別部４２１は、表示部４３に表示された医用画像に対して画像操作が行われているか否か（操作が行われている場合にはその操作内容）を判別する（Ｓ１１）。
【００４９】
画像操作が行われている場合（Ｓ１１でＹの場合）、取得部４２２は、医用画像に対する操作が行われた時刻を取得する（Ｓ１２）。
【００５０】
そして関連情報保管部３２は、操作された医用画像、その操作の開示時刻及びその操作の種類を関連付けて記録する（Ｓ１３）。
【００５１】
医用レポートの作成が完了するまでＳ１１からＳ１３の処理を繰り返し（Ｓ１４でＮの場合）、医用レポートの作成が完了した場合（Ｓ１４でＹの場合）には、医用レポートの作成における画像操作は完了となるため、画像操作履歴が例えば図５に示すような操作履歴ＩＤ１００として関連情報保管部３２に記録される（Ｓ１５）。
【００５２】
（入力履歴記録処理について）
次に図６から図９を用いて、本実施形態における入力履歴記録処理について詳述する。
【００５３】
読影医は医用レポートを作成するため、ビューア部４に表示された医用画像を参照しながら所見入力欄に所見を入力していく。本実施形態においてはその所見入力の履歴（以下、「入力履歴」という場合がある）を記録する処理を行っている。
【００５４】
図６に示すように、入力履歴記録処理においてＣＰＵ５２は、判別部５２１、取得部５２２、監視部５２３として機能する。
【００５５】
判別部５２１は、医用レポートの所見入力の開始、及び所見入力の終了を判別する機能を有している。具体的には、入力部５１により表示部５３上の所見入力欄が選択されると、その所見入力欄がアクティブ（所見の入力が可能な状態）になる。一方、入力部５１による所見入力が完了した場合には、その所見入力欄は非アクティブ（所見の入力が不可能な状態）になる。判別部５２１はこれらアクティブ、非アクティブな状態を入力部５１からの入力信号（所見入力欄選択信号及び選択解除信号）に基づいて認識し、所見入力の開始、及び所見入力の終了を判別する。
【００５６】
取得部５２２は、所見入力欄がアクティブになった時刻（以下、「入力開始時刻」という場合がある）及び所見入力欄が非アクティブになった時刻（以下、「入力終了時刻」という場合がある）を取得する機能を有している。具体的には、入力部５１からの入力信号（所見入力欄選択信号及び選択解除信号）に基づいて対応する時刻を取得する。
【００５７】
監視部５２３は、入力部５１によって入力される所見の所見入力欄内の位置を監視する機能を有している。例えば、ある所見が所見入力欄内で１文字目から−１００文字目まで記入されている場合（先の所見入力）において、別の機会に新たな所見が５１文字目から８０文字目までに挿入された場合（後の所見入力）、監視部５２３は先の所見入力は１文字目から５０文字目と８１文字目から１３０文字目までであると判断し、その判断結果をレポート保管部３６に記録する処理を行う。また監視部５２３は後の所見入力が５１文字目から８０文字目であると判断し、その判断結果をレポート保管部３６に記録する処理を行う。
【００５８】
また、本実施形態においては、サーバ部３内のレポート保管部３６が、ある所見の入力開始時刻、入力終了時刻及び所見入力欄内における所見の位置を関連付けて記録する機能を有している。すなわちレポート保管部３６は、「入力履歴記録部」としての機能も有している。なお、レポート部５内に記録部を設け、その記録部内に入力履歴を記録させることも可能である。
【００５９】
図７は、入力履歴記録処理のフローチャートである。
【００６０】
入力部５１からの入力指示に基づいて、表示部５３に医用レポート作成画面が表示されると（Ｓ２０）、まず判別部５２１は、医用レポート作成画面上の所見入力欄がアクティブになっているか否かを判別する（Ｓ２１）。
【００６１】
所見入力欄がアクティブの場合（Ｓ２１でＹの場合）、取得部５２２は、入力開始時刻を取得する（Ｓ２２）。
【００６２】
アクティブになった所見入力欄には、入力部５１によってビューア部４に表示された医用画像に対する所見が入力される（Ｓ２３）。
【００６３】
Ｓ２３によって所見入力がなされている状態において、監視部５２３は、その所見が所見入力欄のどの位置に入力されているかを監視する（Ｓ２４）。
【００６４】
所見入力が完了した場合（Ｓ２５でＹの場合）、入力部５１からの指示により、所見入力欄のアクティブ状態が解除（非アクティブ）される。所見入力が完了していない場合（Ｓ２５でＮの場合）にはＳ２３に戻って、引き続き所見入力が継続される。
【００６５】
所見入力欄が非アクティブになった場合、取得部５２２は入力終了時刻を取得する（Ｓ２６）。
【００６６】
所見入力欄に対して必要な所見入力が完了した場合、医用レポートの作成は完了となる（Ｓ２７）。
【００６７】
そして医用レポートに記載された各所見の入力開始時刻及び入力終了時刻及び所見の位置は、レポート保管部３６に記録される（Ｓ２８）。具体的には、例えば図８に示すような入力履歴ＩＤ２００としてレポート保管部３６に記録される。図８に示す入力履歴ＩＤ２００には、ある所見入力欄に異なるタイミングで３回（（ａ）〜（ｃ））所見入力が行われた状態が記録されている。
【００６８】
ここで図８のように、ある所見入力欄に異なるタイミングで複数回所見入力が行われた場合における監視部５２３の処理について、図９を用いて説明を行う。
【００６９】
例えば、所見入力欄にあるタイミングで入力が終了した所見ａ（所見の位置：１文字目−１６０文字目）が記入されている状態において（図９Ａ参照）、別のタイミングに新たな所見ｂを所見ａの途中に割り込んで入力すると（所見の位置：１０１文字目−１５０文字目）、図９Ｂのように所見ａは所見ａ−１（所見の位置：１文字目−１００文字目）とａ−２（所見の位置：１５１文字目−１６０文字目）の２つに分割されることになる。しかし監視部５２３により、分割された所見ａ−１とａ−２は同じ時刻に入力を開始し、同じ時刻に入力が終了された所見（同じタイミングで入力処理が行われた所見）であるとして監視されている。従って、レポート保管部３６には所見ａと所見ｂの入力開始時刻及び入力終了時刻は区別されたままの状態（図８における（ａ）と（ｂ））で記録されることとなる。同様に図９Ｃのように新たな所見ｃ（所見の位置：１６１文字目−２００文字目）が追記されると共に所見ａ−１が削除されたとしても、レポート保管部３６には所見ａ−２、所見ｂ、所見ｃそれぞれの入力開始及び入力終了時刻が区別されたままの状態（図８における（ａ）〜（ｃ））で記録されることとなる。なお、医用レポート上における文字位置に関しては、所見ａ−１が削除された場合、所見ａ−２は５１文字目−６０文字目、所見ｂは１文字目−５０文字目、所見ｃは６１文字目−１００文字目となる。
【００７０】
なお取得部５２２が所見入力開始時刻及び終了時刻を取得するトリガーは、所見入力欄のアクティブ、非アクティブに限られない。例えばある一文の入力開始時を所見入力開始時刻として取得し、その一文の入力完了時刻（句点が入力された時）を入力終了時刻として取得することでもよい。
【００７１】
（注目画像抽出処理について）
次に、上述の画像操作履歴及び入力操作履歴が記録されたある医用レポートに対して、読影医がその医用レポートの所見に対応する注目画像を表示させる場合の処理について詳述する。
【００７２】
図１０に示すように、本実施形態においては、選択部５１１が表示部５３の表示画面５３ａ上に設けられている。選択部５１１は入力部５１によって操作され、表示部５３の表示画面５３ａ上に表示された医用レポート３００に記載された所見の少なくとも一部を選択する機能を有している。
【００７３】
また図１１に示すように、注目画像抽出処理においてＣＰＵ５２は抽出部５２４として機能する。
【００７４】
抽出部５２４は、選択部５１１によって選択された所見の入力履歴と、その所見入力時に参照した画像に対して行った操作履歴とに基づいて選択部５１１によって選択された所見における注目画像を抽出する機能を有している。注目画像抽出の詳細については後述する。
【００７５】
図１２及び図１３は、注目画像抽出処理のフローチャートである。
【００７６】
まず、読影医が入力部５１から患者ＩＤ等を入力すると、表示部５３上にその患者ＩＤに対応する過去検査に関する医用レポートが表示される（Ｓ３０）。
【００７７】
ここで、読影医がその医用レポート内のある所見について、その所見を記載する際に注目していた画像を見たいと考えた場合、読影医は入力部５１を操作し、マーカーとして示される選択部５１１を動かして所望の所見を選択する（Ｓ３１。図１０参照）。
【００７８】
選択部５１１によってある所見が選択された場合、抽出部５２４は、レポート保管部３６からその医用レポートに対応する入力履歴に関する入力履歴ＩＤ２００を読み出し、選択部５１１によって選択された所見の入力開始時刻及び入力終了時刻を特定する処理を行う（Ｓ３２）。例えば、選択部５１１により医用レポートの１００文字目から１５０文字目までの所見が選択された場合、抽出部５２４は入力履歴ＩＤ２００からその所見の入力開始時刻及び入力終了時刻を特定する。
【００７９】
次に抽出部５２４は、関連情報保管部３２から操作履歴ＩＤを読み出し、Ｓ３２で特定された時刻の前後において操作が行われた画像及びその行われた操作内容を特定する処理を行う（Ｓ３３）。
【００８０】
ここで、Ｓ３３において特定された画像が１枚の場合（Ｓ３４でＹの場合）には、その画像が選択部５１１によって選択された所見が入力された際に表示されていた画像であると考えられる。従って抽出部５２４は、その画像を注目画像として表示部４３に表示させるためにＣＰＵ４２に指示を行う。ＣＰＵ４２は、その指示に基づいて画像保管部３３からその画像を読み出し、表示部４３に表示させる制御を行う（Ｓ３５）。すなわち本実施形態において、ＣＰＵ４２は「表示制御部」としての機能を有している。
【００８１】
一方、Ｓ３３で特定された画像が複数枚存在する場合（Ｓ３４でＮの場合）、抽出部５２４は、Ｓ３３で特定された画像のうち、選択部５１１によって選択された所見に関連する画像（注目画像）を特定する処理を行う（Ｓ４０−Ｓ４３）。
【００８２】
ここで、注目画像を特定する処理について詳細な説明を行う。以下の説明においては、選択部５１１によって選択された所見の入力が開始された時刻を開始時刻ｔＳ、選択部５１１によって選択された所見の入力が終了した時刻を終了時刻ｔＥ、開始時刻ｔＳ前に設定される所定の期間を期間Ｔ、終了時刻ｔＥ後に設定される所定の期間を期間Ｔ′とする。また、ある画像ｊに対して行われたある操作ｉにおいて、期間Ｔ内のある操作が行われた時刻をｔｉとし、期間Ｔ′内のある操作が行われた時刻をｔ′ｉとする。なお、実際に行われていない操作についてはｔｉ＝ｔＳ−Ｔ、ｔ′ｉ＝ｔＥ＋Ｔ′とする。
【００８３】
期間Ｔ及び期間Ｔ′はサーバ部３等に予め記録されている値であるが、抽出処理を行う際に入力部５１等で任意の値を入力することで決定してもよい。
【００８４】
また本実施形態においてレポート保管部３６は、例えば表１に示すような医用画像に対する各種操作に任意の重みづけがされたテーブルデータを有している。ここで「重みＷｉ」は操作が行われた画像の重要度を特定するために用いられる値である。本実施形態においてはｉの値が大きいほど重要な操作であると認識される。
【００８５】
【表１】
0005825889.tif 000002
【００８６】
ここで、ある画像ｊが選択部５１１によって選択された所見と関連する度合いを示す値である注目度Ｒｊは以下の式（１）で表される。
【００８７】
【数１】
0005825889.tif 000003
【００８８】
式（１）から明らかなように、抽出部５２４においては、重要な操作（重みづけが大きい操作）が行われた画像ほど、選択部５１１によって選択された所見に関連する可能性がある画像として認識される。
【００８９】
また抽出部５２４おいては、期間Ｔ又は期間Ｔ′の間に操作が行われた画像について、その操作が行われた時刻が開始時刻ｔＳ又は終了時刻ｔＥに近いものほど、選択部５１１によって選択された所見に関連する可能性がある画像として認識される。
【００９０】
注目画像を特定する具体的な処理としては、まず抽出部５２４がある画像ｊに対して行われた各操作ｉにおいて、ｔｉとｔ′ｉを特定する（Ｓ４０）。
【００９１】
次に抽出部５２４は、式（１）を用いて、ある画像ｊに対する注目度Ｒｊを求める処理を行う（Ｓ４１）。更に抽出部５２４は、Ｓ３４で特定された全ての画像に対して注目度Ｒｊを求める処理を行う（Ｓ４２でＮの場合）。
【００９２】
Ｓ３４で特定された全ての画像に対して注目度を求める処理が完了した場合（Ｓ４２でＹの場合）、注目度の値が大きい画像を選択部５１１によって選択された所見に関連性がある画像（注目画像）であるとして特定する（Ｓ４３）。この場合、例えば、注目度の値が最も大きい画像を注目画像として特定することが可能である。或いは、注目度が閾値よりも高い画像全てを注目画像として特定することも可能である。更には、複数求められた注目度のうち上位の値を示す画像（例えば、注目度の高いほうから上位１０％の画像）を注目画像として特定することも可能である。
【００９３】
ここで抽出部５２４はＳ４３で特定された画像を注目画像として表示部４３に表示させるためにＣＰＵ４２に指示を行う。ＣＰＵ４２は、その指示に基づいて画像保管部３３からその画像を読み出し、表示部４３に表示させる制御を行う（Ｓ３５）。
【００９４】
なお、本実施形態においては各操作の重みとそれらの操作が行われた時間を用いて抽出処理を行っているがこれに限られない。例えば、操作が行われた時間のみに着目し、開始時刻ｔＳ又は終了時刻ｔＥに近い時刻に操作が行われた画像を注目画像として特定することも可能である。この場合、開始時刻ｔＳ又は終了時刻ｔＥに最も近い時刻に操作が行われた画像を注目画像として特定することが可能である。或いは、閾値よりも開始時刻ｔＳ又は終了時刻ｔＥに近い時刻に操作が行われた画像全てを注目画像として特定することも可能である。更には、操作が行われた画像のうち開始時刻ｔＳ又は終了時刻ｔＥに近い上位の画像（例えば開始時刻ｔＳ又は終了時刻ｔＥに時刻が近いほうから上位１０％の画像）を注目画像として特定することも可能である。
【００９５】
または、ある期間Ｔの中で重みの高い操作をした画像を注目画像として特定することも可能である。この場合、ある期間Ｔの中で最も重みの高い操作をした画像を注目画像として特定することが可能である。或いは、ある期間Ｔの中で閾値よりも重みの高い操作をした画像全てを注目画像として特定することも可能である。更には、ある期間Ｔの中で操作が行われた画像のうち重み付けが上位の画像（例えば、重み付けの高い上位１０％の画像）を注目画像として特定することも可能である。
【００９６】
また、重みづけの代わりに各操作が行われた頻度を用いて注目画像を抽出することも可能である。或いは、ある画像に対して操作が行われた回数を用いて注目画像を抽出することも可能である。
【００９７】
また、本実施形態において、画像操作履歴記録処理と入力履歴記録処理はリアルタイムで行われている。従って、注目画像の特定は医用レポートの作成途中であっても可能である。
【００９８】
更に、入力履歴において、医用レポート作成時に入力された所見の医用レポート上の位置に対して関連付けられる時刻は、当該所見の入力開始時刻及び終了時刻の少なくとも一方であればよい。
【００９９】
以上の通り、本実施形態においては、入力履歴と操作履歴に基づいて医用レポートのある所見に対する注目画像を容易に表示させることができる構成とした。従って、読影医等が過去検査の医用レポートを参照する場合、その医用レポートに記載された所見に対応する注目画像を容易に取得することが可能となるため、読影効率が向上する。
【０１００】
（第２の実施形態）
図１４及び図１５を用いて第２の実施形態について説明を行う。第１の実施形態と第２の実施形態とは、入力履歴記録処理が異なるだけである。よって、その他の構成・処理については詳細な説明を省略する。なお、「音声」と「音声データ」は一対一に対応するので、本実施形態では、これらを同一視する場合がある。
【０１０１】
（入力履歴記録処理について）
医用レポート作成においては、ディクテータ（人間）を介する場合がある。すなわち、ビューア部４に表示された医用画像を参照しながら、読影医がマイク等の音声入力手段を用いて口述した内容をレポート部５等に記録する。その後、ディクテータは当該記録を聞き、口述された内容に基づいて所見入力欄に所見を入力する。この場合、実際に読影医が口述した内容とディクテータが入力する所見にわずかな違いが生じる可能性がある。たとえば、口述した内容のうち明らかに所見に関係ないと判断できるもの（たとえば間投詞）は、ディクテータにより省かれて入力される場合がある。本実施形態においては、このような場合の入力履歴記録処理について説明する。
【０１０２】
図１４に示すように、本実施形態において、レポート部５には、音声入力部５４が設けられている。音声入力部５４は、読影医等が読影を行う際に口述した内容を音声で入力するための手段である。入力された音声は音声データに変換され、ＣＰＵ５２に送られる。なお、音声入力部５４はレポート部５に設けられている必要はなく、ＬＡＮ６を通じて通信可能に接続されていればよい。また、レポート部５は、音声入力部５４の他に第１の実施形態と同様の入力部５１を有していてもよい。
【０１０３】
また、図１４に示すように、本実施形態における入力履歴記録処理においてＣＰＵ５２は、処理部５２５、特定部５２６及び関連付け部５２７として機能する。
【０１０４】
処理部５２５は、音声入力部５４により入力された音声に基づく音声データを解析し、文章データに変換する機能を有している。更に、処理部５２５は、当該文章データと、その元となった音声データの入力開始時刻及び入力終了時刻とを関連付ける処理を行う機能を有している。具体的には、音声入力に伴って、処理部５２５は当該音声の入力開始時刻ｓ１を取得する。また、処理部５２５は、一つの音声入力が完了すると入力終了時刻ｅ１を取得する。更に、処理部５２５は、当該音声入力に基づく音声データａを解析し、文章データＡに変換する。そして、処理部５２５は、文章データＡと入力開始時刻ｓ１及び入力終了時刻ｅ１とを関連付ける。処理部５２５は、この処理を音声が入力される間、繰り返し行う（たとえば、文章データＢに対して入力開始時刻ｓ２、入力終了時刻ｅ２を関連付ける。文章データＣに対して入力開始時刻ｓ３、入力終了時刻ｅ３を関連付ける。・・・・）。処理部５２５による処理結果は、たとえばレポート部５内の記録部（図示なし）に記録される。
【０１０５】
音声データの入力開始時刻及び入力終了時刻は、たとえば、処理部５２５において、一つの音声データの入力からその音声データの区切り（文章における句点）までを特定することにより行われる。また、音声入力部５４をオン・オフさせるスイッチを設けておき、処理部５２５がスイッチのオンを検出した時点を入力開始時刻とし、オフを検出した時点を入力終了時刻とすることも可能である。
【０１０６】
特定部５２６は、処理部５２５で変換された文章データと音声入力部５４により入力された音声に基づいて作成された医用レポート上の所見とを比較し、類似する文章データ及び所見を特定する機能を有している。具体的には、ディクテータによって作成された医用レポートの所見と文章データとの類似度を比較し、類似度が高いものを同一内容であるとして特定する。たとえば、特定部５２６は、医用レポート上の所見Ａ´について、文章データＡ〜Ｃとの類似度を比較し、最も類似度の高い文章データＡを同一内容であると特定する。なお、文章データの順番と医用レポートの所見の順番が異なる場合（たとえば、ディクテータが音声データの順番を入れ替えて医用レポートを作成した場合）であっても、特定部５２６により医用レポートの所見と文章データとの類似度を比較することにより、同一内容の所見及び文章データを特定することができる。
【０１０７】
関連付け部５２７は、特定部５２６で特定された文章データと関連付けられている入力開始時刻及び終了時刻を、特定部５２６で特定された所見にも関連付けることで入力履歴とし、レポート保管部３６に記録させる機能を有している。具体的には、関連付け部５２７は、特定部５２６で特定された文章データＡに関連付けられた入力時刻ｓ１及び終了時刻ｅ１を、特定部５２６で特定された所見Ａ´に対しても関連付けする。全ての所見に対する関連付けが完了すると、その結果は入力履歴ＩＤとしてレポート保管部３６に記録される。本実施形態において「医用レポート作成時」とは、音声入力部５４による音声入力から、関連付け部５２７により入力履歴がレポート保管部３６に記録されるまでのタイミングをいう。
【０１０８】
図１５は、本実施形態における入力履歴記録処理のフローチャートである。
【０１０９】
音声入力部５４から音声が入力されると（Ｓ５０）、処理部５２５は、当該音声の入力開始時刻を取得する（Ｓ５１）。また、一つの音声入力が完了すると、処理部５２５は、入力終了時刻を取得する（Ｓ５２）。更に、処理部５２５は、Ｓ５０で入力された音声に基づく一つの音声データを解析し、一つの文章データに変換する（Ｓ５３）。
【０１１０】
そして、処理部５２５は、Ｓ５３で変換された一つの文章データとＳ５１で取得した入力開始時刻及びＳ５２で取得した入力終了時刻とを関連付ける（Ｓ５４）。処理部５２５は、この処理を音声データが入力される間、繰り返し行う（Ｓ５５でＮの場合）。
【０１１１】
音声データの入力が完了した場合（Ｓ５５でＹの場合）、特定部５２６は、Ｓ５０で入力された音声データに基づいてディクテータが作成した医用レポートの所見と、Ｓ５３で変換された文章データとの類似度を比較し、類似度が高いものを同一内容であるとして特定する（Ｓ５６）。
【０１１２】
そして、関連付け部５２７は、Ｓ５６で特定された文章データに関連付けられた入力開始時刻及び入力終了時刻をＳ５６で特定された所見にも関連付けて入力履歴ＩＤとし、レポート保管部３６に記録させる（Ｓ５７）。
【０１１３】
なお、処理部５２５において文章データに関連付けられる時刻は、当該文章データの基となる音声データの入力開始時刻及び終了時刻の少なくとも一方であればよい。
【０１１４】
本実施形態のように、所見を音声入力する場合であっても、入力履歴と操作履歴に基づいて医用レポートのある所見に対する注目画像を容易に表示させることができる構成とした。従って、読影医等が過去検査の医用レポートを参照する場合、その医用レポートに記載された所見に対応する注目画像を容易に取得することが可能となるため、読影効率が向上する。
【０１１５】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【０１１６】
２  医用画像撮影装置
３  医用画像保管装置（サーバ部）
４  医用画像観察装置（ビューア部）
５  医用レポート作成装置（レポート部）
１０  レポート作成支援システム
３１  画像送受信部
３２  関連情報保管部
３３  画像保管部
３４  画像配信部
３５  レポート送受信部
３６  レポート保管部
３７  レポート配信部
４１、５１  入力部
４２、５２  ＣＰＵ
４３、５３  表示部
４２１、５２１  判別部
４２２、５２２  取得部
５２３  監視部
５２４  抽出部
【図１】
0005825889.tif 000004
【図２】
0005825889.tif 000005
【図３】
0005825889.tif 000006
【図４】
0005825889.tif 000007
【図５】
0005825889.tif 000008
【図６】
0005825889.tif 000009
【図７】
0005825889.tif 000010
【図８】
0005825889.tif 000011
【図９】
0005825889.tif 000012
【図１０】
0005825889.tif 000013
【図１１】
0005825889.tif 000014
【図１２】
0005825889.tif 000015
【図１３】
0005825889.tif 000016
【図１４】
0005825889.tif 000017
【図１５】
0005825889.tif 000018