(57)【要約】【課題】  読影効率の向上を図り得る医用画像データ処理端末装置を提供すること。【解決手段】  実施形態によれば、医用画像データ処理端末装置は、取得部と、投影部と、撮影部と、抽出部と、データ処理部とを具備する。取得部は、医用画像データを取得する。投影部は、取得された医用画像データに基づく医用画像を投影する。撮影部は、投影された医用画像を撮影し撮影データを生成する。抽出部は、撮影データに基づいて、投影された医用画像を対象としてなされたユーザの操作を抽出する。データ処理部は、抽出された操作の内容を医用画像データに関連付ける。【選択図】  図２
2017023415.tif 000002
【特許請求の範囲】
【請求項１】
医用画像データを取得する取得部と、
前記取得された医用画像データに基づく医用画像を投影する投影部と、
前記投影された医用画像を撮影し撮影データを生成する撮影部と、
前記撮影データに基づいて、前記投影された医用画像を対象としてなされたユーザの操作を抽出する抽出部と、
前記抽出された操作の内容を前記医用画像データに関連付けるデータ処理部と
を具備する医用画像データ処理端末装置。
【請求項２】
プロジェクタを備える載置ユニットと通信する通信部と、
医用画像データを取得する取得部と、
前記取得された医用画像データを前記載置ユニットに伝送して、当該医用画像データに基づく医用画像を前記プロジェクタから投影させる投影部と、
前記投影された医用画像を撮影し撮影データを生成する撮影部と、
前記撮影データに基づいて、前記投影された医用画像を対象としてなされたユーザの操作を抽出する抽出部と、
前記抽出された操作の内容を前記医用画像データに関連付けるデータ処理部と
を具備する医用画像データ処理端末装置。
【請求項３】
プロジェクタおよびカメラを備える載置ユニットと通信する通信部と、
医用画像データを取得する取得部と、
前記取得された医用画像データを前記載置ユニットに伝送して、当該医用画像データに基づく医用画像を前記プロジェクタから投影させる投影部と、
前記投影部が前記プロジェクタから投影させた医用画像を撮影した前記カメラから撮影データを受信する受信部と、
前記撮影データに基づいて、前記投影された医用画像を対象としてなされたユーザの操作を抽出する抽出部と、
前記抽出された操作の内容を前記医用画像データに関連付けるデータ処理部と
を具備する医用画像データ処理端末装置。
【請求項４】
さらに、前記取得された医用画像データと前記生成された前記撮影データとを比較して前記医用画像が投影された面の状態を示す指標値を算出する算出部と、
前記算出された指標値に基づいて前記面の状態を判定する判定部と
を更に具備する請求項１乃至３のいずれか１項に記載の医用画像データ処理端末装置。
【請求項５】
前記指標値は、前記投影された医用画像のゆらぎ、グレースケール、および輝度のいずれか１つまたは複数の組み合わせである、請求項４に記載の医用画像データ処理端末装置。
【請求項６】
前記面の状態が既定の基準を満たさないと判定された場合に、前記投影部は、前記取得された医用画像データに基づくシェーマ画像を前記面に投影する、請求項４に記載の医用画像データ処理端末装置。
【請求項７】
前記投影部は、前記投影された医用画像に対する操作をアシストするための操作エリアを前記面にさらに投影する、請求項１乃至３のいずれか１項に記載の医用画像データ処理端末装置。
【請求項８】
さらに、前記操作の内容を対応付けられた医用画像データを記憶する記憶部を具備する、請求項１乃至３のいずれか１項に記載の医用画像データ処理端末装置。
【請求項９】
コンピュータにより実行される医用画像データ処理プログラムであって、
前記コンピュータを、
医用画像データを取得する取得部、
前記取得された医用画像データに基づく医用画像を投影する投影部、
前記投影された医用画像を撮影し撮影データを生成する撮影部、
前記撮影データに基づいて、前記投影された医用画像を対象としてなされたユーザの操作を抽出する抽出部、および
前記抽出された操作の内容を前記医用画像データに関連付けるデータ処理部、
として機能させる医用画像データ処理プログラム。
【請求項１０】
コンピュータにより実行される医用画像データ処理プログラムであって、
前記コンピュータを、
プロジェクタを備える載置ユニットと通信する通信部、
医用画像データを取得する取得部、
前記取得された医用画像データを前記載置ユニットに伝送して、当該医用画像データに基づく医用画像を前記プロジェクタから投影させる投影部、
前記投影された医用画像を撮影し撮影データを生成する撮影部と、
前記撮影データに基づいて、前記投影された医用画像を対象としてなされたユーザの操作を抽出する抽出部、および
前記抽出された操作の内容を前記医用画像データに関連付けるデータ処理部、
として機能させる医用画像データ処理プログラム。
【請求項１１】
コンピュータにより実行される医用画像データ処理プログラムであって、
前記コンピュータを、
プロジェクタおよびカメラを備える載置ユニットと通信する通信部、
医用画像データを取得する取得部、
前記取得された医用画像データを前記載置ユニットに伝送して、当該医用画像データに基づく医用画像を前記プロジェクタから投影させる投影部、
前記投影された医用画像を前記カメラに撮影させた撮影データを受信する受信部、
前記撮影データに基づいて、前記投影された医用画像を対象としてなされたユーザの操作を抽出する抽出部、および
前記抽出された操作の内容を前記医用画像データに関連付けるデータ処理部、
として機能させる医用画像データ処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、医用画像による診断を支援する技術に関する。
【背景技術】
【０００２】
医用画像を含む各種の医療情報をコンピュータの画面に表示する装置が、病院で用いられている。例えば、読影医の所見やアノテーションを医用画像のＲＯＩ（region of interest）の近くに表示可能な装置がある。アノテーションは、キー画像やシェーマ画像に重ねて表示され、読影レポートとは別に疾患箇所の位置を示したり、コメントを付けたりするための重要な情報である。
【０００３】
近年の医療シーンでは、医用画像に基づく診断を支援する為に、タブレット型端末を代表とする可搬型の医用画像表示端末装置を医用画像観察に用いている。このような可搬型医用画像表示端末（以下、医用画像データ処理端末装置と総称する）は、無線データ通信機能を有しており、通信ネットワークに接続可能な環境下であれば、時間や場所を問わずに、いつでも、どこにいても、医用画像を表示させて観察することができる。
【０００４】
しかしながら、従来の可搬型医用画像表示端末装置は、タブレット型端末のタッチパネルのように、医用画像を表示する画面上の操作により入力を行わなければならない。このため、例えば、表示されている医用画像の注目箇所へマーキング（アノテーション）を付す際に、画像が操作者の指に隠れてしまって注目すべき箇所が見えにくくなってしまう。また、画面の面積が限られているので、画像のサイズはもとより文字なども小さくならざるを得ず、見にくい。さらには、画像以外の情報を表示することが難しい。敢えて表示したとしても画像を小さくせざるを得ない。文字入力操作や、キー画像へのアノテーション貼付け操作の効率も悪い。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００２−３０４４６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
以上のように、従来の可搬型医用画像表示端末装置は、その可搬性を優先させているので、医用画像観察する際の使い勝手が総じて良くない。
【０００７】
目的は、医用画像観察する際の使い勝手が良い医用画像データ処理端末装置および医用画像データ処理プログラムを提供することにある。
【課題を解決するための手段】
【０００８】
実施形態によれば、医用画像データ処理端末装置は、取得部と、投影部と、撮影部と、抽出部と、データ処理部とを具備する。取得部は、医用画像データを取得する。投影部は、取得された医用画像データに基づく医用画像を投影する。撮影部は、投影された医用画像を撮影し撮影データを生成する。抽出部は、撮影データに基づいて、投影された医用画像を対象としてなされたユーザの操作を抽出する。データ処理部は、抽出された操作の内容を医用画像データに関連付ける。
【図面の簡単な説明】
【０００９】
【図１】図１は、実施形態に係わる医用画像管理システムの一例を示す図である。
【図２】図２は、図１に示される実施形態に係わるターミナル装置の一例を示す機能ブロック図である。
【図３】図３は、ＣＰＵ３ａにより実現される機能の一例を示す図である。
【図４】図４は、ターミナル装置３の一例を示す外観図である。
【図５】図５は、医用画像が壁面に投影されている状態の一例を示すターミナル装置３の側面図である。
【図６】図６は、実施形態におけるユーザの操作形態の一例を示す図である。
【図７】図７は、実施形態におけるワークフローの一例を示すシーケンスチャートである。
【図８】図８は、図７に引き続き実施されるワークフローの一例を示すシーケンスチャートである。
【図９】図９は、投影面の状態を判定する際に用いられる指標の一例を示す図である。
【図１０】図１０は、実施形態の変形例に係わるターミナル装置の一例を示す機能ブロック図である。
【図１１】図１１は、ターミナル装置３およびクレードル４の第２の例を示す外観図である。
【図１２】図１２は、医用画像が壁面に投影されている状態の一例を示す、ターミナル装置３およびクレードル４の側面図である。
【図１３】図１３は、ターミナル装置３およびクレードル４の第３の例を示す外観図である。
【発明を実施するための形態】
【００１０】
図１は、実施形態に係わる医用画像データ処理端末装置を適用可能な、医用画像管理システムの一例を示す図である。実施の形態においては、医用画像データ処理端末装置の一例として可搬型のターミナル装置を採りあげる。図１に示される病院内ネットワーク１は、ＣＴスキャナ８、ＭＲ撮像装置１０、ディジタルＸ線（ＤＲ）デバイス１２およびコンピューテッドラジオグラフィ（ＣＲ）デバイス１４と、複数のコンピュータワークステーション１６と、ファイルサーバ１８と、ファイルアーカイブ２０と、ゲートウェイ１５とを備える。これらはローカルエリアネットワーク（ＬＡＮ）２５に接続され、相互に通信可能である。
【００１１】
ＣＴスキャナ８、ＭＲ撮像装置１０、ＤＲデバイス１２およびＣＲデバイス１４により取得された医用画像データは標準的な画像データ形式で符号化され、ファイルサーバ１８に接続されるファイルアーカイブ２０に蓄積するために、ＬＡＮ２５を介してファイルサーバ１８に伝送される。
【００１２】
ゲートウェイ１５は通信ネットワーク４０に接続される。通信ネットワーク４０は、例えばＬＡＮ（local area network）などをベースとする病院内ネットワークなどである。通信ネットワーク４０は病院基幹サーバ２に接続されていても良い。また通信ネットワーク４０はアクセスポイントＡＰを備える。可搬型コンピュータとしてのターミナル装置３は、アクセスポイントＡＰに無線接続されることが可能である。
【００１３】
図２は、実施形態に係わるターミナル装置３の一例を示す機能ブロック図である。ターミナル装置３のユーザは、代表的には、看護師あるいは医師などの医療従事者である。図２において、病院基幹サーバ２は、電子カルテの管理などの病院内の医療情報処理の基幹をなすサーバ装置である。病院基幹サーバ２は、電子カルテデータなどの各種の医療情報を記憶する病院基幹データベース２ａを備える。
【００１４】
ターミナル装置３は、ユーザの支援のためのユーザインタフェースを提供する。ターミナル装置３としては、既存のＰＤＡ端末やスマートフォン、あるいはタブレット端末などを利用できる。
【００１５】
ターミナル装置３は、ＣＰＵ（central processing unit）３ａ、ＲＯＭ（read-only memory）３ｂ、ＲＡＭ（random-access memory）３ｃ、ＥＥＰＲＯＭ（登録商標）（electric erasable programmable read-only memory）３ｄ、ＬＣＤ（liquid crystal display）３ｅ、表示コントローラ３ｇ、カメラ３ｆ、カメラコントローラ３ｐ、タッチセンサ３ｈ，３ｉ、ボタンユニット３ｊ、入力コントローラ３ｋ、無線ＬＡＮ通信部３ｍ、バスライン３ｎおよびプロジェクタ３ｒを含む。このうち、ＣＰＵ３ａ、ＲＯＭ３ｂ、ＲＡＭ３ｃ、ＥＥＰＲＯＭ３ｄ、表示コントローラ３ｇ、カメラコントローラ３ｐ、入力コントローラ３ｋ、無線ＬＡＮ通信部３ｍおよびプロジェクタ３ｒは、バスライン３ｎにそれぞれ接続されている。
【００１６】
ＬＣＤ３ｅは表示コントローラ３ｇに接続されている。カメラ３ｆはカメラコントローラ３ｐに接続されている。タッチセンサ３ｈ，３ｉおよびボタンユニット３ｊは、入力コントローラ３ｋに接続されている。
【００１７】
ＣＰＵ３ａは、コンピュータの中枢部分に相当する。ＣＰＵ３ａは、ＲＯＭ３ｂやＥＥＰＲＯＭ３ｄに記憶されたプログラムに従って、ユーザインタフェースのための各種の処理を実行する。
【００１８】
ＲＯＭ３ｂは、上記コンピュータの主記憶部分に相当する。ＲＯＭ３ｂは、ＣＰＵ３ａの処理手順を記述したプログラムや、ＣＰＵ３ａが各種の処理を実行する上で必要なデータなどを記憶している。
【００１９】
ＲＡＭ３ｃは、上記コンピュータの主記憶部分に相当する。ＲＡＭ３ｃは、ＣＰＵ３ａが各種の処理を実行する上で必要なデータを必要に応じて記憶する。例えばＲＡＭ３ｃには、ＬＣＤ３ｅで表示するユーザインタフェース画像を表す画像データを記憶する。またＲＡＭ３ｃは、ＣＰＵ３ａが各種の処理を行う際のワークエリアとしても利用される。
【００２０】
ＥＥＰＲＯＭ３ｄは、上記コンピュータの補助記憶部分に相当する。ＥＥＰＲＯＭ３ｄは、不揮発性で、かつ書き替え可能な半導体メモリであり、典型的にはフラッシュメモリを利用できる。ＥＥＰＲＯＭ３ｄは、ＣＰＵ３ａの処理手順を記述したプログラムや、ＣＰＵ３ａが各種の処理を実行する上で必要な各種のファイルを記憶する。
【００２１】
カメラ３ｆは、カメラコントローラ３ｐの制御に基づいて視野内の画像を撮影し、時系列の撮影データを生成する。
【００２２】
ＬＣＤ３ｅは、表示コントローラ３ｇにより駆動されて画像を表示する。表示コントローラ３ｇは、ＣＰＵ３ａの制御の下に転送されてくる画像データに応じた画像が表示されるようにＬＣＤ３ｅを駆動する。
【００２３】
タッチセンサ３ｈは、ＬＣＤ３ｅの表示面および複数の機能のそれぞれが対応付けられた機能ボタンや複数の置数ボタンを表した印刷面に積層配置される。タッチセンサ３ｈは、ＬＣＤ３ｅの表示画面や上記の印刷面への店員によるタッチがなされた際に、そのタッチ位置に応じた検出信号を出力する。
【００２４】
タッチセンサ３ｉは、複数の機能のそれぞれが対応付けられた機能ボタンが印刷などにより表されたシートに積層配置される。タッチセンサ３ｉは、上記のシートに表された機能ボタンへの店員によるタッチがなされた際に、そのタッチ位置に応じた検出信号を出力する。
【００２５】
ボタンユニット３ｊは、複数のボタンスイッチを含む。
【００２６】
入力コントローラ３ｋは、タッチセンサ３ｈ，３ｉから出力された検出信号に基づいて上記のタッチ位置を表す座標情報を求め、この座標情報をＣＰＵ３ａへ送る。座標情報は、タッチセンサ３ｈ，３ｉのどちらがタッチされたのかも識別可能である。
【００２７】
無線ＬＡＮ通信部３ｍは、通信ネットワーク４０のアクセスポイントＡＰと周知の無線ＬＡＮ規格に従って無線通信する。これにより無線ＬＡＮ通信部３ｍは、ＣＰＵ３ａが通信ネットワーク４０を介して病院基幹サーバ２やゲートウェイ１５と通信することを可能とする。よってターミナル装置３は、ファイルアーカイブ２０または病院基幹サーバ２に保存されている医用画像データを取得することが可能である。なお無線ＬＡＮ通信部３ｍとしては、ＩＥＥＥ（The institute of electrical and engineers, Inc.）により策定されたIEEE 802.11などに準拠した既存の通信ユニットを利用できる。
【００２８】
図３は、ＣＰＵ３ａにより実現される機能の一例を示す図である。ＣＰＵ３ａはその処理機能として、投影部３１、撮影部３２、処理部３３、表示・操作部３４および保管部３５を備える。
【００２９】
投影部３１は、通信により取得された医用画像データに基づく医用画像を、プロジェクタ３ｒを介して投影面に投影する（プロジェクション表示）。投影面としては建物の壁面が代表的であり、高いコントラストを得られるように、白または白に近い色であることが望ましい。例えばトイレや洗面所などの壁面がこの種の用途に好適であろう。また投影部３１は、医用画像だけでなく、読影に関する入力・操作エリア、つまり、投影された医用画像に対する操作をアシストするための操作エリア（以下、投影エリアとする）も同時に投影する。
【００３０】
撮影部３２は、カメラ３ｆを制御し、医用画像を投影された投影面を撮影させる。つまりカメラ３ｆは、投影された医用画像を撮影してこの医用画像を含む映像を取得する。これにより撮影データが生成される。この撮影データは、例えばユーザの時系列の操作データを含むことができる。
【００３１】
処理部３３は、カメラ３ｆにより取得された映像に含まれる撮影データを解析し、投影された医用画像を対象としてなされたユーザの操作（読影、アノテーション付けなど）を抽出する。
【００３２】
また、処理部３３は、通信により取得された医用画像データ、つまりプロジェクション表示の原画像データと、カメラ３ｆにより生成された撮影データとを比較して、投影面の状態を反映する指標値を算出する。
【００３３】
さらに、処理部３３は算出された指標値に基づいて投影面の状態を判定し、投影面の状態が既定の基準を満たさないと判定された場合に、取得された医用画像データに基づくシェーマ画像を作成し、投影部３１に渡す。投影部３１は、渡されたシェーマ画像を、医用画像データに基づく医用画像として投影する。
【００３４】
表示・操作部３４は、ＬＣＤ３ｅへの表示や、タッチセンサ３ｈ、３ｉへの操作を取得する。
【００３５】
保管部３５は、処理部３３により抽出された所見（読影レポート）を医用画像と関連付ける。この関連付けは、例えばＤＩＣＯＭデータのタグ情報として管理される。関連付け情報を含む医用画像データは、例えば装置内部のＲＡＭ３ｃ、ＲＯＭ３ｂ、あるいは病院基幹データベース２ａやファイルアーカイブ２０に転送され、保存される。
【００３６】
投影部３１、撮影部３２、処理部３３、表示・操作部３４および保管部３５の各機能は、コンピュータにより実行可能なプログラムとして記憶部に記憶される。つまり投影部３１、撮影部３２、処理部３３、表示・操作部３４および保管部３５の各機能はＣＰＵ３ａにより実行可能なプログラムとしてＲＯＭ３ｂ、ＲＡＭ３ｃまたはＥＥＰＲＯＭ３ｄに記憶される。ＣＰＵ３ａはプログラムをこれらのメモリから読み出し、実行することで、プログラムの各ルーチンに対応する機能を実現する。言い換えれば、プログラムを読み出した状態のＣＰＵ３ａは、図３に示される機能を有することになる。
【００３７】
図４は、ターミナル装置３の一例を示す外観図である。例えばフロントパネルの下端にプロジェクタ３ｒが配置され、上端にカメラ３ｆが配置されることができる。図５に示されるように、プロジェクタ３ｒから投影される画像が例えば壁面に映し出され、その状態がカメラ３ｆにより撮影される。
【００３８】
図６は、実施形態におけるユーザの操作形態の一例を示す図である。図６において、壁面に投影された画像は３つのエリアＡ１，Ａ２，Ａ３を有する。このうちエリアＡ１は、例えばキー画像を表示するためのエリア（キー画像エリア）として用いられる。次に述べるエリアＡ２（画像操作エリア）に表示されている医用画像をエリアＡ１にドラッグ＆ドロップすることで、エリアＡ１にキー画像を貼り付ける（ペースト）ことができる。複数のキー画像をサムネイル形式でエリアＡ１に表示するようにしても良い。
【００３９】
エリアＡ２は、医用画像データに基づく医用画像を表示するエリア（画像操作エリア）である。ＬＣＤ３ｅ（図２）に表示されている医用画が、このエリアＡ２に表示される。このエリアＡ２においては、ユーザは、画像に対する操作（めくり、拡大・縮小、移動、アノテーション）などを実施することが可能である。
【００４０】
エリアＡ３は、ユーザによる操作をアシストするための情報が表示されるエリア（所見入力エリア）である。ユーザは、エリアＡ３に表示される操作インタフェース、アイコン、ドロップダウンリストなどを指で指定したり、ドラッグしたりすることで、意図する操作を行うことができる。また、フリー入力スペースを表示し、エリアに入力された文字列を取り込むようにしてもよい。あるいは、選択式（ドロップダウン等）レポートを表示し、操作者が選択した箇所に応じて所見の入力ができるようにしてもよい。医用画像のモダリティや検査目的に応じて入力すべき項目を抽出し、選択式のレポート画面を表示するようにしても良い。
【００４１】
各エリアＡ１，Ａ２，Ａ３に対してなされたユーザの操作（画像のめくり、レポートの作成、アノテーション等）は処理部３３により解析され、抽出されて、操作の結果はもとの医用画像データに反映される。これによりユーザの読影結果が確実に記録される。
【００４２】
ここで、ターミナル装置３は壁面の状態を判定し、その結果に基づいてオリジナルの医用画像、またはシェーマ画像のいずれかをエリアＡ１に表示する。次に、その手順を含む処理の流れを説明する。
【００４３】
図７および図８は、実施形態におけるワークフローの一例を示すシーケンスチャートである。図７において、ユーザ（操作者）は、ターミナル装置３を操作（例えばリスト等から表示したい検査を選択）して医用画像の参照を要求する。そうすると表示・操作部１４０は要求された医用画像を表示する（ステップ（１））。次に投影部３１は、該当する医用画像を投影（プロジェクション表示）する（ステップ（２））。
【００４４】
投影された医用画像を見ながら、操作者は種々の操作を行う。また同時に、投影された医用画像および操作者の操作の様子を含む映像が撮影部３２により撮影され、撮影データが時々刻々と生成される（ステップ（３））。
【００４５】
次に、処理部３３は、ステップ（２）で投影された医用画像のもととなるオリジナルの医用画像データ（原画）と、ステップＳ（３）で撮影された画像（撮影画像）を比較し、投影面の状態を反映する指標値を算出する（ステップ（４））。比較方法としては、原画と撮影画像のそれぞれに対して画像エリアを分割し、分割エリアごとに比較するといった手法が考えられる。
【００４６】
比較の結果、投影面の状態が既定の基準を満たすと判定された場合に、処理部３３は、投影面が医用画像そのものを表示するのに適していると判断して、［医用画像表示モード］に遷移する。一方、比較の結果、投影面の状態が既定の基準を満たさないと判定された場合に、処理部３３は、投影面が医用画像を表示するのに適していないと判断して、［シェーマ表示モード］に遷移する。処理部３３は、医用画像データから既知の手法に基づいてシェーマ画像を作成する（ステップ５ａ）。
【００４７】
次に、投影部３１は、医用画像もしくは、読影に関する入力・操作エリアを投影面に投影する（ステップ（５））。その際、ステップ（４）で決定された表示モードが反映される。すなわち、［医用画像表示モード］においては、原画としての医用画像がエリアＡ２（図６）に投影される。［シェーマ表示モード］においては、原画を反映するシェーマ画像がエリアＡ２に投影される。
【００４８】
引き続き図８において、操作者は、イメージを投影された壁面の入力・操作エリアに対して意図する操作を行う。この操作の模様は撮影部３２により継続的に撮影される（ステップ（６））。処理部３３は、撮影により生成される一連の撮影データに基づいて、操作者の操作を抽出する（ステップ（７））。つまり処理部３３は、（６）において撮影された画像をもとに操作者の操作を入力に変換する。この操作の内容は医用画像データにメタデータとして関連付けられ、保管部３５により所見、キー画像などとともに記憶される。
【００４９】
所見入力エリア（エリアＡ３）に対する操作を抽出するには、例えば特許文献１に開示されるような技術を転用することができる。画像操作エリア（エリアＡ２）に対してなされた操作については、例えば投影された医用画像と撮影された医用画像との差分を取得することで、操作者が指先などで選択している箇所を検出（特定）することが可能である。
【００５０】
投影部３１は、ステップ（７）において認識された入力、つまり検出された操作をＬＣＤ３ｅへの表示、および壁面への投影画像に反映させる（ステップ（８））。
【００５１】
図９は、投影面の状態を判定する際に用いられる指標の一例を示す図である。例えば投影されたことによって生じる画像のゆがみ、グレースケール、輝度などの指標が代表的である。またこれらの指標は、医用画像データを生成したモダリティ（ＣＲ（Computed Radiology）装置、ＣＴ（Computed Tomography）装置、ＭＲ（Magnet Resonance）装置など）と対応付けて定義されても良い。
【００５２】
例えばＣＲ装置に関してはゆがみ、グレースケール、輝度ごとにそれぞれ閾値α、β、γが予め設定される。そして、ＣＲ画像を投影した際に、ゆがみ、グレースケール、輝度のそれぞれに対してα、β、γを用いた閾値判定により、投影面の状態を判断することが可能である。もちろん、指標はこれらの３つの例だけに限られない。また、各指標を単独で用いても良いし、いずれかの指標の組み合わせに基づいて判定を行っても良い。
【００５３】
投影された医用画像のゆがみを評価するには、例えば医用画像内に含まれる境界線を取得し、比較して得られる境界線のずれをゆがみとして換算する。併せて、投影面の凹凸や手振れによる医用画像のゆがみを評価することもできる。ゆがみが閾値以上の場合はシェーマ表示モード、閾値未満の場合は医用画像表示モードとする。
【００５４】
グレースケールを用いる場合には、投影された医用画像を複数の画像エリアに分割し、各画像エリアのグレースケール値のヒストグラムを作成し、比較する。グレースケールの差分が閾値以上の場合はシェーマ表示モード、閾値未満の場合は医用画像表示モードとする。
【００５５】
例えば、全体のグレースケール差分スコア＝０．１×（画像エリア１のグレースケール差分）＋０．２×（画像エリア２のグレースケール差分）として差分スコアを算出できる。式中の０．１、および０．２は重み付け係数である。
【００５６】
輝度を用いる場合には、各画像エリアの輝度のヒストグラムを作成し、比較する。輝度の差分が閾値以上の場合はシェーマ表示モード、閾値未満の場合は医用画像表示モードとする。一つでも閾値を越えた画像エリアがある場合は「閾値を超えた」と判断してもよいし、エリア毎に優先度（重み付け）を設定し、全体として判断してもよい。なお、優先度の指定方法は例えば、「オーダ情報で示された検査部位が含まれる画像エリアの結果を優先する」などの方法が考えられる。
【００５７】
以上説明したようにこの実施形態では、タブレットなどのターミナル装置にプロジェクタを実装し、タッチパネルに表示されるものと同様の医用画像と、読影に関する入力（画像操作エリア、所見入力エリア、キー画像エリア等）のユーザインタフェースとを投影面（壁面など）に投影する。また、ターミナル装置にカメラを実装し、投影データを撮影して得られる撮影データを解析して、ユーザインタフェースに対する操作を抽出する。
【００５８】
つまり、投影された医用画像のオリジナルの画像データ（原画）と、カメラで撮影された操作者の手の画像などを含む投影画像とを例えば時系列で比較することで、操作者が医用画像のどの位置を指定しているかを判断したり、一連のマーキング操作（アノテーション）を抽出するようにした。これにより、ユーザは十分に拡大された画像を参照しつつ操作できるので、指の下に画像が隠れてしまったりする虞が無い。
【００５９】
さらには、撮影データと原画像データとを比較して投影面の状態を判定し、投影面が医用画像の投影に適していないと判断されれば、シェーマ画像を表示するようにしている。これにより、乱れた医用画像を参照することによる誤解や読影ミスを防止することが可能になり、特に、医療用途としての応用に資することができる。これらのことから、読影効率の向上を図り得る医用画像データ処理端末装置および医用画像データ処理プログラムを提供することが可能となる。
【００６０】
［変形例］
以上の説明では、ターミナル装置３にカメラおよびプロジェクタの双方を実装するようにした。これに代えて、例えばターミナル装置３を載置するためのクレードル（載置デバイス）にその機能の一部を実装しても良い。
【００６１】
図１０は、実施形態の変形例に係わるターミナル装置の一例を示す機能ブロック図である。図１０において図２と共通する部分には同じ符号を付して示し、ここでは異なる個所についてのみ説明する。
【００６２】
ターミナル装置３は、クレードル４と組み合わせて使用される。クレードル４は、ターミナル装置３を充電するための電力を生成する電源部４ａに加え、通信部４ｂ、コントローラ４ｃおよびプロジェクタ４ｄを備える。
【００６３】
ターミナル装置３は、インタフェース部３ｑを備え、インタフェース部３ｑおよび通信部４ｂを介してクレードル４と通信する。通信規格としては既存の近接無線通信プロトコルを利用することが可能である。
【００６４】
図１０において、ターミナル装置３は、自ら取得し医用画像データをインタフェース部３ｑおよび通信部４ｂを介してクレードル４に伝送する。ターミナル装置３のＣＰＵ３ａはクレードルのコントローラ４ｃを介してプロジェクタ４ｄを制御して、伝送された医用画像データに基づく医用画像をプロジェクタ４ｄから投影面に投影させる。
【００６５】
図１１の外観図に示されるように、クレードル４にプロジェクタ４ｄが配置され、ターミナル装置３のフロントパネルにはカメラ３ｆだけが配置されることができる。このような形態によれば、図１２に示されるように、クレードル４のプロジェクタ４ｄから投影される画像が例えば壁面に映し出され、その状態がターミナル装置３のカメラ３ｆにより撮影される。
【００６６】
このような構成とすることで、ターミナル装置３を小型化、軽量化することが可能になる。また特に、画像の投影には多量の電力が消費される。そこで、プロジェクタ機能をターミナル装置３とは別にすることで、ターミナル装置３の消費電力を格段に削減することができる。これにより連続稼働時間の長期化を図れるなど数多くのメリットを享受することが可能になる。
【００６７】
なお本発明は上記実施形態に限定されるものではない。例えばカメラおよびプロジェクタの配置は図１１に示されるような縦型配置に限らず、図１３に示されるような横型の配置も可能である。また、プロジェクタだけでなく、カメラもクレードル４に実装することができる。要するにターミナル装置３とクレードル４とに相互の通信機能を持たせておくことで、ターミナル装置３の機能の一部をクレードル４に実装することが可能である。
【００６８】
つまり、ターミナル装置３は取得した医用画像データを通信機能によりクレードル４に伝送し、この医用画像データに基づく医用画像をプロジェクタから投影面に投影させる。また、クレードル４のカメラは、医用画像を投影された投影面を撮影して撮影データを生成し、通信機能により、撮影データをターミナル装置３に伝送する。その後、ターミナル装置３は上記で述べた処理を実行する。このような実施の形態も可能である。
【００６９】
また、図６においては投影画像をエリアＡ１，Ａ２，Ａ３に区分し、例えばキー画像エリア、画像操作エリア、所見入力エリアとして利用可能なことを示したが、もちろん、これら３つの表示エリアに限定されるものではない。
【００７０】
また、図９においてはモダリティ毎に閾値を設定可能なことを示したが、検査部位や想定症例などの条件を加え、閾値をさらに細かく設定してもよい。
【００７１】
本発明の実施形態を説明したが、この実施形態は例として提示するものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００７２】
１…病院内ネットワーク、２…病院基幹サーバ、２ａ…病院基幹データベース、３…ターミナル装置、３ａ…ＣＰＵ、３ｂ…ＲＯＭ、３ｃ…ＲＡＭ、３ｆ…カメラ、３ｇ…表示コントローラ、３ｈ…タッチセンサ、３ｉ…タッチセンサ、３ｊ…ボタンユニット、３ｋ…入力コントローラ、３ｍ…無線ＬＡＮ通信部、３ｎ…バスライン、３ｐ…カメラコントローラ、３ｒ…プロジェクタ、３ｑ…インタフェース部、８…ＣＴスキャナ、１０…ＭＲ撮像装置、１２…ＤＲデバイス、１４…ＣＲデバイス、１５…ゲートウェイ、１６…コンピュータワークステーション、１８…ファイルサーバ、２０…ファイルアーカイブ、２５…ローカルエリアネットワーク、３１…投影部、３２…撮影部、３３…処理部、３４…表示・操作部、３５…保管部、４０…通信ネットワーク、１４０…表示・操作部、Ａ１，Ａ２，Ａ３…エリア、４…クレードル、４ａ…電源部、４ｂ…通信部、４ｃ…コントローラ、４ｄ…プロジェクタ
【図１】
2017023415.tif 000003
【図２】
2017023415.tif 000004
【図３】
2017023415.tif 000005
【図４】
2017023415.tif 000006
【図５】
2017023415.tif 000007
【図６】
2017023415.tif 000008
【図７】
2017023415.tif 000009
【図８】
2017023415.tif 000010
【図９】
2017023415.tif 000011
【図１０】
2017023415.tif 000012
【図１１】
2017023415.tif 000013
【図１２】
2017023415.tif 000014
【図１３】
2017023415.tif 000015