(57)【要約】【課題】ユーザによる顕微鏡での観察対象物の見落としの危険性を回避できるようにするための情報処理装置、情報処理方法、および情報処理プログラムを提供する。【解決手段】病理画像を取得する取得部と、取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部と、前記部分表示領域を移動させる指示をユーザから受け付ける入力部と、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部と、前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部とを具備する。【選択図】図７
2014021583.tif 000002
【特許請求の範囲】
【請求項１】
病理画像を取得する取得部と、
取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部と、
前記部分表示領域を移動させる指示をユーザから受け付ける入力部と、
前記病理画像における前記部分表示領域の少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部と、
前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部と
を具備する情報処理装置。
【請求項２】
請求項１に記載の情報処理装置であって、
前記再現部は、
前記病理画像における前記部分表示領域の前記移動を実時間に対応した時間で再現する
情報処理装置。
【請求項３】
請求項２に記載の情報処理装置であって、
病理画像を観察するユーザの存在を検知する検知部をさらに具備し、
前記記録部は、
前記ユーザの存在が検知されている間、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する
情報処理装置。
【請求項４】
請求項３に記載の情報処理装置であって、
前記検知部は、
前記ユーザの顔を撮影するカメラと、
前記カメラに前記顔が撮影されているか否かを検出する顔検出部と
を有し、
前記記録部は、
前記顔検出部が前記顔を検出している間、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する
情報処理装置。
【請求項５】
請求項４に記載の情報処理装置であって、
前記記録部はさらに、
前記部分表示領域として表示された範囲のうち、同一範囲の表示時間が、予め定められた時間を超えると、当該範囲を画像として記録する
情報処理装置。
【請求項６】
請求項１に記載の情報処理装置であって、
前記表示された部分表示領域の全画素位置についてそれぞれ、当該部分表示領域の表示の時間の長さに対応した値が与えられた被合成画像を一定の時間周期で生成し、前記病理画像に対して累積的に合成して、この合成結果を、前記部分表示領域として表示された範囲の移動の軌跡を示す軌跡画像として生成する生成部
をさらに具備する情報処理装置。
【請求項７】
取得部が、病理画像を取得し、
表示部が、取得した前記病理画像の少なくとも一部を部分表示領域として表示し、
入力部が、前記部分表示領域を移動させる指示をユーザから受け付け、
記録部が、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録し、
再現部が、前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する
情報処理方法。
【請求項８】
病理画像を取得する取得部、
取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部、
前記部分表示領域を移動させる指示をユーザから受け付ける入力部、
前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部、および
前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部
としてコンピュータを機能させるための情報処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、医療、病理、生物、材料等の分野において顕微鏡により得られた画像の表示を制御する情報処理装置、情報処理方法、および情報処理プログラムに関する。
【背景技術】
【０００２】
医療または病理等の分野において、光学顕微鏡により得られた、生体の細胞、組織、臓器等の画像をデジタル化し、そのデジタル画像に基づき、医師や病理学者等がその組織等を検査したり、患者を診断したりするシステムが提案されている。
【０００３】
例えば、特許文献１に記載の方法では、顕微鏡により光学的に得られた画像が、ＣＣＤ（Charge Coupled Device）を搭載したビデオカメラによりデジタル化され、そのデジタル信号が制御コンピュータシステムに入力され、モニタに可視化される。病理学者はモニタに表示された画像を見て検査等を行う（例えば、特許文献１の段落[００２７]、[００２８]、図５参照）。
【０００４】
また、病理医が病理画像内の観察見落としを防ぐ手段として、病理画像を観察した履歴を記録する技術が公開されている（例えば、特許文献２）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００９−３７２５０号公報
【特許文献２】特開２０１１−１１２５２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
一般的に、顕微鏡の観察領域は、観察倍率が高いほど観察対象物の全体に対して狭くなる。例えば病理医は、顕微鏡を用いて観察対象物の全体を走査するように観察し、その全体の中の一部を特に高倍率で観察して対象物を検査することが多い。このような検査において、病理医が観察対象物のうち見ていない領域に疾患があった場合、つまり見落としがあった場合、後に重大な問題となることもある。
【０００７】
以上のような事情に鑑み、本発明の目的は、ユーザによる顕微鏡での観察対象物の見落としの危険性を回避できるようにするための情報処理装置、情報処理方法、および情報処理プログラムを提供することにある。
【０００８】
本発明の別の目的は、その観察対象物が病理画像である場合、個人情報を保護できる情報処理装置、情報処理方法、および情報処理プログラムを提供することにある。
【０００９】
本発明のさらに別の目的は、その観察対象物を扱う業界における教育用に有用な情報処理装置、情報処理方法、および情報処理プログラムを提供することにある。
【課題を解決するための手段】
【００１０】
（１）上記目的を達成するため、本技術の一形態に係る情報処理装置は、病理画像を取得する取得部と、取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部と、前記部分表示領域を移動させる指示をユーザから受け付ける入力部と、前記病理画像における前記部分表示領域の少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部と、前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部とを具備する。
【００１１】
本技術では、まずユーザである病理医が観察する病理画像をサーバから取得し、その病理画像の一部を表示部上の部分表示領域に表示する。そしてユーザは、その部分表示領域を病理画像上で移動させることにより、病理画像の別の個所を表示部に表示し観察する。記録部は、ユーザが観察過程において部分表示領域に表示させた画像の少なくとも位置情報（座標および倍率）を、表示を行った時刻と対応づけて表示履歴として記録する。この表示履歴と観察に使用した病理画像があれば、ユーザは、再現部を用いて、病理画像の観察の過程を再現し、病理画像のどの部分が表示され観察に用いられたかを確認することができる。それ故、ユーザによる顕微鏡での観察対象物の見落としの危険性を回避できる。
【００１２】
（２）上記目的を達成するため、本技術の一形態に係る情報処理装置では、前記再現部は、前記病理画像における前記部分表示領域の前記移動を実時間に対応した時間で再現する構成でもよい。
【００１３】
この構成により、例えば、１時間かけて観察を行ったという表示履歴である場合、その再現にも１時間をかけるので、病理画像を観察する際の時間配分を忠実に再現でき、観察を行う感覚を実体験することができる。
【００１４】
（３）上記目的を達成するため、本技術の一形態に係る情報処理装置は、病理画像を観察するユーザの存在を検知する検知部をさらに具備し、前記記録部は、前記ユーザの存在が検知されている間、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する構成でもよい。
【００１５】
この構成により、記録部は、病理画像を観察するユーザが確かにいる場合だけ、表示履歴を記録する。ユーザが病理画像の表示を行ったまま離席した場合などには記録は行われず、確かに観察している場合のみ記録されるので、表示履歴の正確性を向上させることができる。
【００１６】
（４）上記目的を達成するため、本技術の一形態に係る情報処理装置では、前記検知部は、前記ユーザの顔を撮影するカメラと、前記カメラに前記顔が撮影されているか否かを検出する顔検出部とを有し、前記記録部は、前記顔検出部が前記顔を検出している間、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する構成でもよい。
【００１７】
この構成により、病理画像を観察するユーザを検知するために、カメラと顔検知アルゴリズムを用いるので、確かにユーザが病理画像を見ているときに表示履歴を記録できるので、表示履歴の正確性をさらに向上させることができる。
【００１８】
（５）上記目的を達成するため、本技術の一形態に係る情報処理装置では、前記記録部はさらに、前記部分表示領域として表示された範囲のうち、同一範囲の表示時間が、予め定められた時間を超えると、当該範囲を画像として記録する構成でもよい。
【００１９】
この構成により、予め定められた時間よりも長い時間に亘って、ユーザが病理画像の一部を観察した場合、その部分が重要な部分である可能性が高くなるので、表示履歴とは別にその部分をスナップショットとして撮影しておく。そうすることにより、表示履歴を再現しなくても、重要な個所の画像を観察することができる。
【００２０】
（６）上記目的を達成するため、本技術の一形態に係る情報処理装置は、前記表示された部分表示領域の全画素位置についてそれぞれ、当該部分表示領域の表示の時間の長さに対応した値が与えられた被合成画像を一定の時間周期で生成し、前記病理画像に対して累積的に合成して、この合成結果を、前記部分表示領域として表示された範囲の移動の軌跡を示す軌跡画像として生成する生成部をさらに具備する構成でもよい。
【００２１】
この構成では、部分表示領域を病理画像上で移動させた軌跡を、直接病理画像に記録するのではなく、病理画像に合成される被合成画像の各画素の値を調整することにより行う。この値とは、例えば画素の透明度を表す値である。病理画像の上に重ね合わせる被合成画像として単色の画像を用意しておき、その透明度を部分表示領域への表示時間に応じて変えてゆくことで、あたかも病理画像上に部分表示領域に表示された個所の軌跡を記録しているように表示させることができる。病理画像と被合成画像が合成された軌跡画像上には、部分表示領域が移動した軌跡として位置と時間が記録されることになる。それ故、ユーザは軌跡画像を見ることにより、どの部分をどれくらいの時間をかけて観察したか把握でき、病理画像の見落としの危険を回避することができる。
【００２２】
（７）上記目的を達成するため、本技術の一形態に係る情報処理方法では、取得部が、病理画像を取得し、表示部が、取得した前記病理画像の少なくとも一部を部分表示領域として表示し、入力部が、前記部分表示領域を移動させる指示をユーザから受け付け、記録部が、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録し、再現部が、前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する。
【００２３】
（８）上記目的を達成するため、本技術の一形態に係る情報処理プログラムは、病理画像を取得する取得部、取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部、前記部分表示領域を移動させる指示をユーザから受け付ける入力部、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部、および前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部としてコンピュータを機能させるものである。
【発明の効果】
【００２４】
以上のように、本技術によれば、ユーザによる顕微鏡での観察対象物の見落としの危険性を回避することができる。
【図面の簡単な説明】
【００２５】
【図１】本技術に係るビューワコンピュータ５００の典型的な使用環境を表した図である。
【図２】本技術に係るビューワコンピュータ５００のハードウェアの構成を示すブロック図である。
【図３】イメージ管理サーバ４００の機能ブロックを示す図である。
【図４】ビューワコンピュータ５００の機能ブロックを示す図である。
【図５】ビューワ画面の例を示す図である。
【図６】表示記録再生ＧＵＩの例を示す図である。
【図７】ビューワ操作による画面表示の履歴を記録・再生する流れ、およびユーザの離席に関する処理の流れを説明するシーケンス図である。
【図８】表示履歴のフォーマットの例を示す図である。
【図９】病理全体画像と表示の軌跡が合成された軌跡画像を示す図である。
【図１０】病理全体画像Ａとマスク画像Ｂが別の画像であり、それらを重ね合わせている様子を示す図である。
【図１１】アルファ値の増え方を表したグラフである。
【図１２】一定の場所を長時間観察する場合にアルファ値の増加量を変更する様子を示すグラフである。
【図１３】軌跡画像を生成する処理の流れを説明するフローチャートである。
【図１４】ユーザが撮影された検体ＳＰＬを観察領域６２に表示させながら閲覧する過程を表した図である。
【図１５】ユーザが撮影された検体ＳＰＬを観察領域６２に表示させながら閲覧する過程を表示軌跡として記録した例を示す図である。
【図１６】本技術の各機能の関係を全体的な処理の流れの中で説明するフローチャートである。
【発明を実施するための形態】
【００２６】
以下、本技術に係る実施形態を、図面を参照しながら説明する。
＜第１の実施形態＞
［ビューワコンピュータの使用環境について］
最初に、病理診断において、検体を顕微鏡を用いて撮影したバーチャルスライド画像（病理画像）を用いて病理医が診断を行う環境の全体像を説明する。病理医は、ビューワコンピュータ上のビューワを用いて、病理画像を観察し、画像診断を行う。図１は、本技術に係るビューワコンピュータ５００の典型的な使用環境を表した図である。
【００２７】
顕微鏡１０およびスキャナ用コンピュータ２０からなるスキャナ１００は、病院内の組織学ラボＨＬに設置されている。顕微鏡１０により撮影されたＲＡＷ画像は、スキャナ用コンピュータ２０上において、現像処理、シェーディング処理、カラーバランス補正、ガンマ補正、８ｂｉｔ化処理などの画像処理が行われる。その後、縦横２５６ピクセルのタイル状に分割され、ＪＰＥＧ（Joint Photographic Experts Group）画像に変換され圧縮された後、ハードディスクＨＤ１上に格納される。
【００２８】
スキャナ用コンピュータ２０のハードディスクＨＤ１に格納されたＪＰＥＧ画像は、次に、同じ病院内のデータセンタＤＣにあるイメージ管理サーバ４００上のハードディスクＨＤ２に、ネットワーク３００を経由してアップロードされる。
【００２９】
観察者である病理医は、病院内の病理学室ＰＲまたは病院外の建物ＥＸにいてイメージ管理サーバ４００とネットワーク３００により接続されたビューワコンピュータ５００を用いて、イメージ管理サーバ４００のハードディスクＨＤ２に格納されたＪＰＥＧ画像を観察する。
【００３０】
また、観察者である病理医は、ビューワコンピュータ５００に指示することにより、自分がＪＰＥＧ画像を観察する際に行った操作により、ＪＰＥＧ画像の表示がビューワ画面上においてどう変化したかを表示履歴として記録させることができる。記録された表示履歴は、ネットワーク３００を介してイメージ管理サーバ４００に送られ、格納される。
【００３１】
さらに、病理医は、ビューワコンピュータ５００に指示することにより、イメージ管理サーバ４００に格納された表示履歴を呼び出し、ビューワ上において、以前行われたＪＰＥＧ画像の観察の様子を再現させることができる。
【００３２】
［本技術の概要］
次に、本技術の概要を説明する。これまで、ビューワコンピュータ５００を用いて病理画像を観察した軌跡を病理画像上に画像として重ねて記録することは行われてきた。しかし、より忠実に、病理医が画像診断を行った際の画面表示の状態を再現することが望まれてきた。そこで本技術では、病理医が画像診断を行った際のビューワ画面を表示履歴として「録画」し、後にその「録画」を動画のように再生することにより、忠実な画面表示の状態の再現を行っている。
【００３３】
このような記録を行うことにより、病理画像の見落としが無かったかを後で検証することができる。また、後で、病理画像を見たことを証明することができる。また、観察行為の忠実な再現であるので、病理医の教育上有用な教材とすることができる。
【００３４】
また、本技術では、カメラを用いて病理画像を観察する病理医が確かにビューワを見ていることを検出することにより、「録画」やその他の記録の正確性を向上させている。
【００３５】
［ビューワコンピュータ５００の構成について］
次に、ビューワコンピュータ５００のハードウェア構成について説明する。
図２は、本技術に係るビューワコンピュータ５００のハードウェアの構成を示すブロック図である。
【００３６】
ビューワコンピュータ５００は、演算制御を行うＣＰＵ(Central Processing Unit)２１、ＲＯＭ(Read Only Memory)２２、ＣＰＵ２１のワークメモリとなるＲＡＭ(Random Access Memory)２３、ユーザの操作に応じた命令が入力される操作入力部２４（入力部）を備える。ビューワコンピュータ５００はさらに、インターフェイス部２５、出力部２６（表示部）、記憶部２７、ネットワークインターフェイス部２８、およびこれらを互いに接続するバス２９を備える。
【００３７】
ＲＯＭ２２には、各種の処理を実行するためのプログラムが格納される。インターフェイス部２５には、コントローラ３０およびカメラ３１（検知部）が接続されている。コントローラ３０には、各種ボタンやスティックが備えられておりユーザによる様々な入力を受け付けることができる。またコントローラ３０は、加速度センサや傾きセンサを内蔵しており、ユーザがコントローラ３０を傾けたり振ったりすることによりコントローラ３０に与える指示を受け付けることができる。カメラ３１は、ビューワコンピュータ５００を用いて病理画像を観察するユーザの顔を撮影するためのものである。
【００３８】
ネットワークインターフェイス部２８には、ネットワーク３００が接続される。出力部２６には、画像表示用として、液晶ディスプレイ、ＥＬ（Electro Luminescence）ディスプレイ又はプラズマディスプレイ等が適用され、音声出力用としてスピーカー等が適用される。記憶部２７には、ＨＤＤ（Hard Disk Drive）に代表される磁気ディスクもしくは半導体メモリ又は光ディスク等が適用される。
【００３９】
ＣＰＵ２１は、ＲＯＭ２２および記憶部２７等に格納される複数のプログラムのうち、操作入力部２４から与えられる命令に対応するプログラムをＲＡＭ２３に展開し、該展開したプログラムにしたがって、出力部２６及び記憶部２７を適宜制御する。
【００４０】
ＣＰＵ２１は、後述する各機能ブロックを実現する。ＣＰＵ２１は、ＲＯＭ２２および記憶部２７等に格納されたプログラムを実行して、必要に応じて、上記各部材を制御する。これにより、ビューワコンピュータ５００は、種々の機能ブロックを実現することができ、上記各部材を、ビューワコンピュータ５００として動作させることができる。
【００４１】
［イメージ管理サーバ４００の構成について］
次に、イメージ管理サーバ４００のハードウェア構成について説明する。
イメージ管理サーバのハードウェア構成は、コントローラ３０およびカメラ３１がインターフェイス部２５に接続されていない点を除き、基本的にビューワコンピュータ５００のハードウェア構成と同じである。そのため、詳細な説明は省略する。
【００４２】
［イメージ管理サーバ４００の機能ブロックについて］
次に、イメージ管理サーバ４００の機能ブロックについて説明する。イメージ管理サーバ４００の主な機能は、第１に、病理画像を、ビューワコンピュータ５００からの要求に従い提供することである。第２に、ビューワコンピュータ５００から取得した表示履歴を保存し、ビューワコンピュータ５００からの要求に従い提供することである。
【００４３】
第３に、病理医がビューワ上において病理画像の特定個所に付けたコメント（以下、アノテーションという）を保存することである。図３は、イメージ管理サーバ４００の機能ブロックを示す図である。
【００４４】
イメージ管理サーバ４００は、画像格納部４１、画像提供部４２、表示履歴格納部４３、表示履歴管理部４４の機能ブロックを備えている。
【００４５】
画像格納部４１には、タイル状に分割されＪＰＥＧ圧縮された病理画像が格納されている。格納されている病理画像は、ビューワコンピュータ５００からの要求に従い、画像提供部４２を介してビューワコンピュータ５００に提供される。また、ユーザがビューワコンピュータ５００上のビューワを用いて病理画像に付したアノテーションもここに保存される。
【００４６】
画像提供部４２は、ネットワーク３００を介してビューワコンピュータ５００から送られてくる画像要求に対応した病理画像を画像格納部４１から取得し、ネットワーク３００を介してビューワコンピュータ５００に送信する。
【００４７】
表示履歴格納部４３には、ビューワコンピュータ５００上においてユーザが操作したビューワの表示履歴が格納される。
【００４８】
表示履歴管理部４４は、ビューワコンピュータ５００上において記録され、一旦まとめられた表示履歴をネットワーク３００を介して取得する。そして、表示履歴管理部４４は、取得した表示履歴を表示履歴格納部４３に格納する。また、表示履歴管理部４４は、ビューワコンピュータ５００からの表示履歴要求を受け付け、その表示履歴要求に応じた表示履歴を表示履歴格納部４３から取得し、ネットワーク３００を介してビューワコンピュータ５００に送信する。
【００４９】
なお、イメージ管理サーバ４００とビューワコンピュータ５００とは、クライアント・サーバ型システムを構成しているので、どの機能をクライアント側に持たせ、どの機能をサーバ側に持たせるかは、設計事項である。それ故、上記各機能ブロックの実行場所は上述のイメージ管理サーバ４００上に限定されるものではなく、クライアント側であるビューワコンピュータ５００上において実行される構成でもよい。
【００５０】
［ビューワコンピュータ５００の機能ブロックについて］
次に、ビューワコンピュータ５００の機能ブロックについて説明する。ビューワコンピュータ５００の主な機能は、第１に、病理医であるユーザからの操作指示を受け付け、対応する病理画像をイメージ管理サーバ４００から取得し、ユーザに対し表示することである。第２に、ユーザが画像診断を行う際のビューワ操作に応じた画像の表示を記録し、その表示履歴を保存のためにイメージ管理サーバ４００に送ることである。
【００５１】
第３に、ユーザからの要求に従い、イメージ管理サーバ４００に保存されている表示履歴を取得し、ユーザに対して表示履歴に基づき、ユーザが行った操作に応じた画像の表示を再現することである。
【００５２】
図４は、ビューワコンピュータ５００の機能ブロックを示す図である。
【００５３】
ビューワコンピュータ５００は、画像取得部５１（取得部）、表示履歴制御部５２（記録部、再現部）、顔検出部５３（検知部）、および軌跡画像生成部５４（生成部）の機能ブロックを備えている。
【００５４】
画像取得部５１は、操作入力部２４から入力された、病理医であるユーザの指示に対応した病理画像を、ネットワーク３００を介してイメージ管理サーバ４００から取得し、取得した病理画像を出力部２６を介してユーザに提示する。
【００５５】
表示履歴制御部５２は、ユーザの指示により、ユーザが病理画像を観察する際のビューワ操作に応じた画面表示の変化を記録する。記録は、まずビューワコンピュータ５００のＲＡＭ２３または記憶部２７を用いて保存される。記録の停止指示により、記録はまとめられ、表示履歴としてイメージ管理サーバ４００に送られ、保存される。
【００５６】
表示履歴制御部５２は、また、ユーザの指示により、その指示に対応した表示履歴をイメージ管理サーバ４００から取得し、取得した表示履歴に記録されているビューワの画面表示を、出力部２６を介して、ユーザに提示する。
【００５７】
なお、表示履歴制御部５２が行う、ビューワ画面の表示履歴の記録・再生に関するユーザの指示は、後述する操作記録再生ＧＵＩを用いて行われる。
【００５８】
表示履歴制御部５２は、さらに、病理画像のどの部分がビューワ画面上に表示されているか、またその表示時間はどれだけかの情報を軌跡画像生成部５４に渡す。
【００５９】
顔検出部５３は、顔検出部５３にインターフェイス部２５を経由して接続されたカメラ３１が撮影する画像に、ビューワコンピュータ５００の出力部２６の画面上に表示された病理画像を観察する病理医の顔が写っているか否かを検出する。顔検出部５３は、最低限人の顔の検出ができればよいが、顔を区別して個人を特定する顔認識まで出来る構成でもよい。もちろん、カメラ３１の撮影方向および焦点位置は、ビューワコンピュータ５００の出力部２６の前に病理医が座って、画面上の画像を観察する際に、顔が来る位置に合わせなければならない。
【００６０】
軌跡画像生成部５４は、表示履歴制御部５２から、現在、病理画像のどの部分が表示されているかその位置情報と、どの程度の時間、表示されているかその時間情報とを取得し、マスク画像の画素の透明度を下げる。透明度の下げ方の詳細は後述する。
【００６１】
［ビューワ画面について］
次に、ユーザがビューワコンピュータ５００上において病理画像を観察するために用いるビューワの画面について説明する。図５は、ビューワ画面の例を示す図である。
【００６２】
ビューワウィンドウ６０には、病理画像のどの個所を拡大しているかを示すサムネイルマップ６１と、病理画像を観察するための観察領域６２と、表示記録再生ＧＵＩ６３とが含まれている。サムネイルマップ６１は、バーチャルスライド画像全体の縮小画像と、ビューワウィンドウ６０に表示されている画像の範囲をサムネイルマップ６１上で等価的に示す枠ＦＲとを有する。
【００６３】
枠ＦＲはサムネイルマップ６１上で、ユーザからの指示によって任意の方向へ任意の量だけ移動させることが可能である。なお、サムネイルマップ６１において、枠の移動の操作はマウスなどのドラッグ操作などにより行うことも可能である。
【００６４】
表示記録再生ＧＵＩ６３は、ユーザによる、ビューワ操作に応じた表示画面の変化の記録開始指示や記録停止指示を受け付け、受け付けた指示を表示履歴制御部５２に伝える。表示記録再生ＧＵＩ６３の詳細については後述する。
【００６５】
［表示記録再生ＧＵＩについて］
次に、表示記録再生ＧＵＩ６３について説明する。図６は、表示記録再生ＧＵＩの例を示す図である。
【００６６】
この図に示される表示記録再生ＧＵＩ６３では、左上に表示履歴のファイル名が表示されている。上側中央部には、横方向にシークバーＳＢが示され、その上に、現在の再生位置を示すスライダＳＬと、アノテーションが付加された時間を示す丸印ＡＴ１、ＡＴ２、ＡＴ３が示されている。
【００６７】
上右側には、ビューワ画面上の表示の変化を記録または再生する際の経過時間が示される。なお、再生の場合には、経過時間のほかに再生に要するトータルの時間も表示する構成でもよい。記録中は、表示記録再生ＧＵＩ６３上に、表示履歴の記録中であることが、例えば記録ボタンの点灯などにより表示され、記録の経過時間が表示記録再生ＧＵＩ６３上に表示される。
【００６８】
また、図に示される表示記録再生ＧＵＩ６３の下側には、巻き戻し、停止、再生、早送り、記録のボタンが示されている。下右側には、ボリュームボタンとマイクボタンが示されている。
【００６９】
この例では、シークバーＳＢ上に、アノテーションが付加された時間を示す丸印ＡＴ１、ＡＴ２、ＡＴ３を表示している。このようにすることにより、ユーザがスライダをドラッグして再生位置を変える場合に、容易に見たいアノテーションを探すことができる。
【００７０】
［ビューワ画面表示の記録再生の流れについて］
次に、ビューワ操作による画面表示の履歴を記録・再生する流れ、およびユーザの離席に関する処理の流れを説明する。図７は、ビューワ操作による画面表示の履歴を記録・再生する流れ、およびユーザの離席に関する処理の流れを説明するシーケンス図である。
【００７１】
まず、表示履歴を記録する流れを説明する。
最初に、ユーザが、表示記録再生ＧＵＩ６３の記録ボタンをクリックすることにより、ビューワ表示の記録開始を表示履歴制御部５２に指示する（Ｓ１）。その後、ユーザはビューワ上に表示された病理画像の一覧から、観察を行う病理画像を選択する。
【００７２】
表示履歴制御部５２が記録開始の指示を受け付けた以降、顔検出部５３がビューワ画面を観察するユーザの顔を検出している間、表示履歴制御部５２は、ユーザがビューワに対して行った表示位置の変更や、観察倍率の変更による画面表示の変化を周期的に記録する（Ｓ２）。
【００７３】
ユーザによる表示位置の変更や、観察倍率の変更が行われた場合、画像取得部５１がイメージ管理サーバ４００に対して、対応するタイル化された画像を要求し、取得を行う（Ｓ３）。
【００７４】
イメージ管理サーバ４００から取得された画像は、画像取得部５１を経由して画面に表示される（Ｓ４）。
【００７５】
ユーザが離席すると（Ｓ５）、顔検出部５３はユーザの顔を検出できなくなるので、顔を不検出であることを表示履歴制御部５２に伝える。表示履歴制御部５２は、顔検出部５３から顔の不検出を伝えられると、画面表示の変化の記録を一時的に停止する（Ｓ６）。
【００７６】
ユーザが席に戻り再度着席すると（Ｓ７）、ユーザの顔がカメラ３１に撮影され、顔検出部５３がユーザの顔を再度検出する。顔検出部５３は、顔が検出されていることを表示履歴制御部５２に伝える。表示履歴制御部５２は、顔検出部５３から顔の検出を伝えられると、画面表示の変化の記録を再開する（Ｓ８）。
【００７７】
ユーザは、ビューワ画面の操作を継続し（Ｓ９）、画像取得部５１が病理画像のビューワ画面上への表示を行う（Ｓ１０）。その間、表示履歴制御部５２による、画面表示の状態は表示履歴として記録が継続される。
【００７８】
ユーザが、表示記録再生ＧＵＩ６３の停止ボタンをクリックすることにより、ビューワ表示の記録停止を表示履歴制御部５２に指示する（Ｓ１１）。この際に、記録した表示履歴に名前が付けられる。停止の指示が行われると、表示履歴制御部５２は、ローカルに一時保存していた表示履歴を、イメージ管理サーバ４００に送信する（Ｓ１２）。表示履歴管理部４４は、受信した表示履歴を表示履歴格納部４３に格納する。
【００７９】
以上が表示履歴を記録する流れである。次に、表示履歴を再生する流れを説明する。
【００８０】
最初に、ユーザが、再生したい表示履歴の名前を指定すると共に、表示記録再生ＧＵＩ６３の再生ボタンをクリックすることにより、表示履歴の再生を表示履歴制御部５２に指示する（Ｓ１３）。
【００８１】
表示履歴の再生が指示されると、表示履歴制御部５２は、イメージ管理サーバ４００の表示履歴管理部４４に対して、ユーザにより指定された表示履歴を要求し、イメージ管理サーバ４００から取得する（Ｓ１４）。
【００８２】
また、表示履歴の再生指示がなされると、画像取得部５１が、再生時に表示するための画像を、イメージ管理サーバ４００の画像格納部４１から取得する（Ｓ１５）。
【００８３】
取得された表示履歴および画像を用いて、ビューワ画面上での表示の再生が行われる（Ｓ１６）。
【００８４】
最後に、ユーザが表示記録再生ＧＵＩ６３の停止ボタンをクリックすることにより、表示履歴の再生停止を表示履歴制御部５２に指示すると（Ｓ１７）、表示履歴制御部５２は、表示履歴の再生を停止する。
以上が表示履歴を再生する流れである。
【００８５】
［表示履歴のフォーマット］
次に、表示履歴制御部５２が表示履歴を記録する際の記録フォーマットについて説明する。図８は、表示履歴のフォーマットの例を示す図である。記録する項目は、この例では、「時間」、「中心座標」、「倍率」、「回転角度」、「水平フリップ」、「垂直フリップ」の６項目である。
【００８６】
それぞれの項目の意味を説明する。まず「時間」は、記録を開始してからの経過時間をミリ秒単位で示したものである。この例では、表示履歴の記録を、１／６０秒ごと、すなわち約１６ｍｓｅｃごとに採っているので、このような値になっている。ここで１／６０秒を例としているのは、表示履歴を再生する際に６０ｆｐｓの動画として実時間を用いて再生するために、各フレーム毎に表示履歴の各項目となるデータを記録するためである。
【００８７】
次に、「中心座標」である。これは、ビューワ画面上の観察領域６２に、全体画像である病理画像の一部が部分画像として表示されたとき、その部分画像の中心点が、全体画像上でどの座標であるかを示すものである。
【００８８】
「倍率」は、部分画像を観察領域６２に表示する際の観察倍率のことである。この例では、最初１．２５倍であった観察倍率は、記録開始６６ｍｓｅｃ後には１．２９倍まで上がっていることが分かる。
【００８９】
また、「回転角度」は、部分画像を観察領域６２に表示する際に画像を回転させた角度である。「水平フリップ」および「垂直フリップ」は、それぞれ水平方向と垂直方向に部分画像の反転が行われているか否かを、ＴｒｕｅまたはＦａｌｓｅを値として用いて示すものである。
【００９０】
以上が基本的な項目を記録する例である。これに加えて、例えば「顔検出」や「アノテーション」の項目を加えてもよい。「顔検出」の項目は、表示履歴の記録を行うタイミングにおいて顔検出部５３がユーザの顔を検出できていればＴｒｕｅとし、検出できていなければＦａｌｓｅとする。
【００９１】
上記の記録再生の流れの説明では、顔不検出時には記録を一時停止する、すなわち記録が行われている場合は必ず顔が検出されているという構成であった。しかし、顔が検出されていない時も記録を継続する構成の場合、この「顔検出」の項目を活用することができる。例えば、表示履歴の再生時に、顔が検出されていた場合は、画面上に「目」のマークを表示し、顔が検出されていなかった場合には、画面上の「目」のマークに「×」印をつけて表示することなどができる。
【００９２】
「アノテーション」の項目は、ユーザが病理画像上に、アノテーションを付加したタイミングにおいて値をＴｒｕｅにするものである。
【００９３】
［表示軌跡の濃淡表示による記録］
次に、本技術に係るビューワコンピュータ５００が有する独立した機能である、部分画像を観察領域６２に表示した時間の長さに応じて、表示した部分画像の軌跡を色の濃淡をつけて軌跡画像として記録する機能について、具体例を使って説明する。この機能は軌跡画像生成部５４により実行される。なお、この機能は、上記で説明した表示履歴の記録と同時並行して実行されてもよいし、別の機能として実行されてもよいし、一度記録された表示履歴に基づいて実行されてもよい。
【００９４】
なお、この機能は、全体画像となる病理画像（以下、病理全体画像という）上に、表示の軌跡を記録するマスク画像を係数としてアルファ値を用いてアルファブレンドのより合成して軌跡画像を生成することにより実現できる。表示の軌跡を記録する際には、観察領域６２に表示された部分画像の範囲をどの程度の時間に亘って表示させたかを計時し、表示された時間が長いほど、その範囲を示す軌跡の色に相当するアルファ値の値を増加させる。
【００９５】
［アルファ値とアルファブレンド］
次に、軌跡画像を生成する際の詳細について説明する。最初にサムネイルマップ６１内に表示される病理全体画像上にマスク画像を重ねて表示の軌跡を表現する際に用いるアルファ値とアルファブレンドを説明する。
【００９６】
アルファ値とは、コンピュータが扱うデジタル画像データにおいて、各画素に設定された透明度の情報のことである。また、アルファブレンドとは、２つの画像を係数（アルファ値）により合成することである。２つの画像とは、本技術の場合、サムネイルマップ６１内の病理全体画像と、その手前に設定されるマスク画像である。
【００９７】
図９は、病理全体画像と表示の軌跡が合成された軌跡画像を示す図であり、図１０は、病理全体画像Ａとマスク画像Ｂが別の画像であり、それらを重ね合わせている様子を示す図である。
【００９８】
これらの図から分かるように、病理全体画像とマスク画像は別の画像である。軌跡画像生成部５４は、マスク画像の透明度を表すアルファ値を調整して、表示の軌跡をマスク画像上に記録する。そしてその後、アルファ値が調整されたマスク画像と病理全体画像とをアルファブレンドにより合成して軌跡画像が生成される。
【００９９】
アルファ値は、例えば、０から２５５までの範囲の整数値をとる。ある画素のアルファ値が０のときは、マスク画像の画素は完全に透明となり、背後の病理全体画像の画素が完全に透けて見える。アルファ値が１２８程度のときは、マスク画像の画素は半透明となり、色（例えば緑色）が着色される。その際、背後の病理全体画像の画素の色は半分だけ透けて見える。アルファ値が２５５になると、マスク画像の画素は完全に不透明になり、背後の病理全体画像の色は全く見えなくなる。
【０１００】
本技術では、マスク画像の透明度を最初は完全に透明にしておき、観察領域６２に表示される時間に応じて、アルファ値を増加させ、マスク画像の透明度を減少させてマスク画像の色を出していくことにより表示の軌跡を記録する。また、逆に、最初マスク画像の透明度を７０％程度にしておき、観察領域６２に表示される時間に応じて、アルファ値を減少させ、マスク画像の透明度を増加させてマスク画像の色を消してゆくことにより表示の軌跡を記録する構成でもよい。
【０１０１】
なお、マスク画像は、病理全体画像とは別の画像なので、マスク画像のアルファ値を全て０に戻すことにより、軌跡の記録をリセットすることも可能である。
【０１０２】
［アルファ値の加算方法（基本）］
本技術では、病理画像の少なくとも一部を観察領域６２に表示させる場合、動画のように例えば６０ｆｐｓのフレームレートを用いて再描画を繰り返しながら表示を行っている。サムネイルマップ６１も同じである。そこで、例えば、観察領域６２に病理画像の一定の範囲が表示され続ける場合、毎フレーム、アルファ値を１だけ増加させることが考えられる。こうすると、６０フレーム分の時間（１秒間）が経つと観察領域に表示された位置に対応するマスク画像の画素のアルファ値は６０となり、２３％ほど不透明になる。
【０１０３】
そのまま表示時間が４秒を過ぎると、アルファ値は２５５に達し、マスク画像が完全に不透明になってしまう。その場合、背後の病理全体画像が見えないので、ユーザは、病理全体画像の形状と表示の軌跡の対比により、病理画像のどこを観察したのかを把握するのが困難になる。そこで、アルファ値には上限を設けるのがよい。例えば、加算するアルファ値の上限を１８０とすれば、約７０％の透明度でアルファ値の増加が止まるので、背後の病理全体画像が見えなくなることは無い。
【０１０４】
なお上記の例では、１フレーム毎にアルファ値が１増加する構成をとったが、例えば３０秒ごとにアルファ値が１増加する構成でもよい。こうするとアルファ値が上限である１８０に達するまでに９０分を要するので、長時間の観察を記録する際にも、時間により透明度に差をつけ、適切に表示の軌跡を記録することができる。いずれにしても、典型的な観察時間の長さをもとに、アルファ値の増加率を定めるのがよい。
【０１０５】
［アルファ値の加算方法（観察倍率を考慮）］
上記では、観察領域６２に病理画像の一定の範囲が表示され続ける場合、無条件にアルファ値を増加させる構成としたが、アルファ値の増加率を、病理画像を観察する観察倍率により異なる値とすることも考えられる。軌跡画像における軌跡の色が濃いほど（マスク画像の不透明度が高いほど）、病理画像をよく観察したことを表す場合、一か所の観察時間が長いほど不透明度が高くなるのがよい。同じく観察倍率が高いほど、詳細に観察を行っていることになるので、アルファ値の増加率を上げるのがよい。
【０１０６】
例えば、観察倍率が２倍未満のときは、単位時間当たりのアルファ値の増加量を０とし、軌跡の記録を行わない。観察倍率が２倍以上４倍未満のときは、単位時間当たりのアルファ値の増加量を１とする。観察倍率が４倍以上のときは、単位時間当たりのアルファ値の増加量を２とする。このような構成とする事により、観察倍率も考慮して表示の軌跡を記録することができる。
【０１０７】
図１１は、この例に沿ったアルファ値の増え方を表したグラフである。図の上側のグラフにあるように、観察倍率が２倍未満のときは、時間がたってもアルファ値はゼロのままであり増えない。観察倍率が２倍以上４倍未満のとき、アルファ値は緩やかに増加する。観察倍率が４倍以上のとき、観察倍率は急に増加するが、上述のとおり上限に達すると、そこからは増えない。
【０１０８】
［アルファ値の加算方法（観察時間を考慮）］
上記の構成では、一定の場所の観察を続けた場合、単調にアルファ値が増加する構成であった。しかし、一定の場所を長時間観察するということは、それだけ詳しく観察していることに他ならず、その際には、アルファ値の増加率を高めることが望ましい。
【０１０９】
図１２は、一定の場所を長時間観察する場合にアルファ値の増加量を変更する様子を示すグラフである。例えば、ある個所を観察領域６２に表示して観察を始めてから時間ｔ１が経過するまではアルファ値を単位時間当たりｎだけ増加させる。時間ｔ１を経過すると、アルファ値の増加量を１．１倍に増やして、単位時間当たり１．１ｎとする。
【０１１０】
さらに同じ個所を観察し続けて時間ｔ２を経過すると、アルファ値の増加量を１．２倍に増やして、単位時間当たり１．２ｎとする。ｎの値は、上記のとおり、観察倍率によって変動する。観察領域６２に表示する画像を移動させたときは、アルファ値の増加量はまたｎから始まる。
【０１１１】
このような構成をとることにより、一定の個所を長時間観察した場合に、その軌跡を強調させて記録することができる。
【０１１２】
［軌跡画像生成の流れ］
次に、軌跡画像生成部５４が軌跡画像を生成する処理の流れを説明する。図１３は、軌跡画像を生成する処理の流れを説明するフローチャートである。なお、上記での説明のとおり、軌跡画像の更新は、フレーム毎（例えば６０ｆｐｓであれば、１／６０秒ごと）に行われているので、このフローチャートの処理もフレーム毎のタイミングにおいて行われる。
【０１１３】
まず、軌跡画像生成部５４は、現在の観察倍率によってアルファ値を決定する（ステップＳＴ１１）。
【０１１４】
次に、軌跡画像生成部５４は、観察領域６２に現在の画像を表示し始めてから所定の時間が経過したか否かを判断し、所定の時間が経過している場合は、アルファ値を増やす(ステップＳＴ１２)。
【０１１５】
次に、軌跡画像生成部５４は、観察領域６２に表示されている画像の範囲から、マスク画像上でアルファ値を変更する矩形の範囲を決定する（ステップＳＴ１３）。
【０１１６】
次に、軌跡画像生成部５４は、マスク画像に矩形を軌跡として記録する（ステップＳＴ１４）。ここでは、ステップＳＴ１１またはＳＴ１２において決定されたアルファ値の増分を、マスク画像上の対象となる画素のアルファ値に加算することにより記録が行われる。記録が行われると、サムネイルマップ６１上の病理全体画像上に、観察領域６２の範囲を示す矩形が、マスク画像の色により表示される。
【０１１７】
ここで、軌跡画像生成部５４は、操作入力部２４から表示の軌跡のリセット要求が来ているか否かを判断し、リセット要求が入力された場合は（ステップＳＴ１５のＹ）サムネイルマップ６１上の軌跡を全て消去する（ステップＳＴ１６）。消去は、マスク画像の全画素のアルファ値を初期値に戻すことにより行われる。
以上が軌跡画像生成部５４による軌跡画像を生成する処理の流れである。
【０１１８】
［軌跡画像の実際例］
以下では、まず、ユーザがどのような時間配分を用いて病理画像を観察したか、その例を説明し、その観察に対応した軌跡の表示がどのような色の濃淡により示されるかを説明する。
【０１１９】
図１４は、ユーザが撮影された検体ＳＰＬを観察領域６２に表示させながら閲覧する過程を表した図である。図１５は、その表示過程を表示軌跡として記録した例を示す図である。
【０１２０】
ユーザが病理画像を、観察領域６２にどのように表示させたかを、図１４を用いて説明する。
【０１２１】
まず、ユーザは検体ＳＰＬの上部Ｄ１の範囲を、観察倍率１．２５倍により観察領域６２内に部分画像として表示させ、８秒間観察を行う。なお、表示範囲Ｄ１の中心座標は（ｘ１，ｙ１）である。
【０１２２】
次に、ユーザは、部分画像の表示範囲をＤ１からＤ２に変更し、２０秒間観察を行う。部分画像の表示範囲Ｄ２の中心座標は（ｘ２，ｙ２）である。
【０１２３】
次に、ユーザは、観察倍率を１．２５倍から２０倍に拡大し、部分画像の表示範囲Ｄ３を表示し、３５秒間観察を行う。この時、部分画像の中心座標は変化せず（ｘ２，ｙ２）のままである。
【０１２４】
次に、ユーザは、部分画像の表示範囲Ｄ３を表示範囲Ｄ４まで移動し、４０秒間観察を行う。部分画像の中心座標は（ｘ３，ｙ３）となる。
【０１２５】
次に、ユーザは、観察倍率を２０倍から４０倍に拡大し、部分画像の表示範囲Ｄ５を表示し、２分間観察を行う。この時、部分画像の中心座標は変化せず（ｘ３，ｙ３）のままである。
【０１２６】
以下、同様にして観察を行ったとする。３０秒以上１分未満の時間で表示された範囲は、Ｄ３、Ｄ４、Ｄ６であるとする。また、１分以上２分未満の時間で表示された範囲は、Ｄ８であるとする。また、２分以上の時間で表示された範囲は、Ｄ５であるとする。
【０１２７】
次に、上述した観察過程の表示軌跡の記録例を、図１５を用いて説明する。
【０１２８】
３０秒以下の時間しか観察を行わなかった表示範囲Ｄ１やＤ２に対応する軌跡であるＴ１やＴ２は、最も薄い色により記録されている。それに対し、３０秒以上観察を行った表示範囲Ｄ３、Ｄ４、Ｄ６にそれぞれ対応する軌跡Ｔ３、Ｔ４、Ｔ６は、軌跡Ｔ１よりも濃い色により軌跡が示されている。
【０１２９】
同様にして、さらに濃い色により示されている軌跡がＴ８となり、最も濃い軌跡がＴ５である。
【０１３０】
このようにして、表示履歴制御部５２は、ある部分画像が観察領域６２に表示された時間を計測し、表示範囲の軌跡を色の濃淡を用いて表すことにより、ユーザがどの部分の観察にどの程度の時間をかけたかを簡単に表すことができる。病理医が画像診断を行っている間の軌跡を正確に記録できるので、病理画像の見落としを防ぐことができる。
【０１３１】
［時間の計測とスナップショットの撮影］
次に、表示履歴制御部５２が有する別の機能である、部分画像を観察領域６２に表示した時間の長さに応じて、その部分画像のスナップショットを撮影する機能について説明する。この機能は、上記で説明した表示履歴の記録と同時並行して実行されるものである。
【０１３２】
表示履歴制御部５２は、ある部分画像の観察領域６２での表示時間が、例えば３分を超えた場合、その部分画像のスナップショットを撮影する。撮影は、例えばスクリーンコピーにより行われる。このスナップショットを撮影する意味は、一つの部分画像が長時間表示されている場合、その画像の内容が重要であり、観察者であるユーザが、時間をかけて慎重に観察を行っていると解釈できるからである。
【０１３３】
従来であれば、ある部分画像を表示してからユーザが離席したようなケースにも、同様に表示時間が長くなり、時間をかけて観察しているケースと区別がつかないが、本技術では、カメラ３１を用いてユーザの検出を行っているので、区別することができる。
【０１３４】
［時間の計測とスクリーンセーバーの作動］
次に、表示履歴制御部５２が有する別の機能である、ビューワの使用中にユーザの顔が不検出となった時間の長さに応じて、警告を発したり、スクリーンセーバーによる画面ロックを行ったりする機能について説明する。この機能は、上記で説明した表示履歴の記録と組み合わせて実行されるものである。
【０１３５】
ユーザがビューワを使用していた時に、顔検出部５３がユーザの顔を検出できなくなってから第１の所定時間、例えば５分間が経過すると、表示履歴制御部５２は、ユーザに対して警告を発する。警告は、例えば警告音によって行われる。顔検出部５３がユーザの顔を検出できなくなってから更に第２の所定時間、例えば１０分間が経過すると、表示履歴制御部５２は、ビューワ画面をロックする。ロックする方法は、例えばパスワード付きのスクリーンセーバーを起動させることにより行える。
【０１３６】
顔検出部５３がユーザの顔を検出できなくなってから表示履歴制御部５２が行う動作を二段階としているのは、ユーザの顔が検出できなくても、離席したのではなく横を向いているだけの可能性もあるからである。しかし、ある程度時間が経過すれば離席の可能性が高くなるので、ビューワ画面をロックする。このようにして、ユーザの状態を判断して、自動的に個人情報である病理画像を保護することができる。
【０１３７】
［各機能の動作の流れ］
ここでは、上記において説明した各機能の関係を全体的な処理の流れの中で説明する。図１６は、本技術の各機能の関係を全体的な処理の流れの中で説明するフローチャートである。
【０１３８】
まず、ユーザがビューワコンピュータ５００の前に座り、カメラ３１によりユーザの顔が撮影されると、顔検出部５３がユーザの顔を検出する（ステップＳＴ１のＹ）。
【０１３９】
次に、表示履歴制御部５２が、ユーザのビューワ操作により変化する観察領域６２の表示状態を表示履歴として記録する（ステップＳＴ２）。
【０１４０】
次に、表示履歴制御部５２は、１つの部分画像が観察領域６２に表示されている時間を計測する（ステップＳＴ３）。ここでの計測結果は、上記各機能を動作させるための指標として使われる他に、病理画像を実際に見て診断を行っていた時間として病理画像の属性情報としてイメージ管理サーバ４００に保存される。顔を検出できた場合だけ計測するので、正確な診断時間を計測することができる。
【０１４１】
ユーザが一定時間以上、例えば３分を超えて１つの部分画像を観察領域６２に表示し観察を行った場合（ステップＳＴ４のＹ）、表示履歴制御部５２は、観察領域６２に表示されている部分画像のスナップショットを撮影する（ステップＳＴ５）。以上のステップＳＴ２からＳＴ５までの処理が、ユーザによる表示履歴の記録の指示がありユーザの顔が検出されている間、繰り返される。
【０１４２】
一方、カメラ３１にユーザの顔が撮影されず、顔検出部５３がユーザの顔を検出できない場合（ステップＳＴ１のＮ）、表示履歴制御部５２は、第１の時間（例えば５分間）が経過すると（ステップＳＴ７のＹ）、ユーザに対して警告を発する（ステップＳＴ７）。
【０１４３】
次に、顔が検出されないまま、第２の時間（例えば１０分間）が経過すると（ステップＳＴ８のＹ）、表示履歴制御部５２は、ビューワ画面をロックする（ステップＳＴ９）。
以上が、上記各機能を含む全体的な処理の流れである。
【０１４４】
［カメラ３１および顔検出部５３に代わる構成］
上記の構成では、ビューワコンピュータ５００を使って病理画像の観察を行うユーザを検知するために、カメラ３１および顔検出部５３を用いたが、ユーザの存在を検知できるものであればよく、構成はこれらに限らない。
【０１４５】
例えば、机上に物理的なスイッチを設置してもよい。ユーザがこのスイッチを押している間、表示履歴の記録が行われる。また、物理的なスイッチはトグルスイッチでもよい。その場合、スイッチをオンにすればユーザがスイッチを押していなくても表示履歴の記録を行うことができる。また、このトグルスイッチは、ソフトウェアスイッチとして実現されてもよい。その場合、物理的なスイッチを設けるコストを削減することができる。
【０１４６】
［本技術の別の構成］
なお、本技術は以下のような構成も採ることができる。
（１）病理画像を取得する取得部と、取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部と、前記部分表示領域を移動させる指示をユーザから受け付ける入力部と、前記病理画像における前記部分表示領域の少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部と、前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部とを具備する情報処理装置。
（２）前記（１）に記載の情報処理装置であって、前記再現部は、前記病理画像における前記部分表示領域の前記移動を実時間に対応した時間で再現する情報処理装置。
（３）前記（１）または（２）に記載の情報処理装置であって、病理画像を観察するユーザの存在を検知する検知部をさらに具備し、前記記録部は、前記ユーザの存在が検知されている間、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する情報処理装置。
（４）前記（３）に記載の情報処理装置であって、前記検知部は、前記ユーザの顔を撮影するカメラと、前記カメラに前記顔が撮影されているか否かを検出する顔検出部とを有し、前記記録部は、前記顔検出部が前記顔を検出している間、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する情報処理装置。
（５）前記（１）から（４）のうちいずれか１つに記載の情報処理装置であって、前記記録部はさらに、前記部分表示領域として表示された範囲のうち、同一範囲の表示時間が、予め定められた時間を超えると、当該範囲を画像として記録する情報処理装置。
（６）前記（１）から（５）のうちいずれか１つに記載の情報処理装置であって、前記表示された部分表示領域の全画素位置についてそれぞれ、当該部分表示領域の表示の時間の長さに対応した値が与えられた被合成画像を一定の時間周期で生成し、前記病理画像に対して累積的に合成して、この合成結果を、前記部分表示領域として表示された範囲の移動の軌跡を示す軌跡画像として生成する生成部をさらに具備する情報処理装置。
（７）取得部が、病理画像を取得し、表示部が、取得した前記病理画像の少なくとも一部を部分表示領域として表示し、入力部が、前記部分表示領域を移動させる指示をユーザから受け付け、記録部が、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録し、再現部が、前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する情報処理方法。
（８）病理画像を取得する取得部、取得した前記病理画像の少なくとも一部を部分表示領域として表示する表示部、前記部分表示領域を移動させる指示をユーザから受け付ける入力部、前記病理画像における前記部分表示領域の、少なくとも位置情報を、表示時刻と対応付けて表示履歴として周期的に記録する記録部、および前記病理画像および前記表示履歴をもとに、前記病理画像における前記部分表示領域の移動を再現する再現部としてコンピュータを機能させるための情報処理プログラム。
【０１４７】
［補足事項］
その他、本技術は、上述の実施形態にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【符号の説明】
【０１４８】
１０…顕微鏡
２０…スキャナ用コンピュータ
２１…ＣＰＵ
２２…ＲＯＭ
２３…ＲＡＭ
２４…操作入力部
２５…インターフェイス部
２６…出力部
２７…記憶部
２８…ネットワークインターフェイス部
２９…バス
３０…コントローラ
３１…カメラ
４１…画像格納部
４２…画像提供部
４３…表示履歴格納部
４４…表示履歴管理部
５１…画像取得部
５２…表示履歴制御部
５３…顔検出部
６０…ビューワウィンドウ
６１…サムネイルマップ
６２…観察領域
６３…表示記録再生ＧＵＩ
１００…スキャナ
３００…ネットワーク
４００…イメージ管理サーバ
５００…ビューワコンピュータ
【図１】
2014021583.tif 000003
【図２】
2014021583.tif 000004
【図３】
2014021583.tif 000005
【図４】
2014021583.tif 000006
【図５】
2014021583.tif 000007
【図６】
2014021583.tif 000008
【図７】
2014021583.tif 000009
【図８】
2014021583.tif 000010
【図９】
2014021583.tif 000011
【図１０】
2014021583.tif 000012
【図１１】
2014021583.tif 000013
【図１２】
2014021583.tif 000014
【図１３】
2014021583.tif 000015
【図１４】
2014021583.tif 000016
【図１５】
2014021583.tif 000017
【図１６】
2014021583.tif 000018