(57)【要約】      （修正有）【課題】  顕微鏡観察を再現する動画の表示や、その動画上の特定部位に関する噴出説明も任意に自動表示させる顕微鏡観察再現方法、その装置、プログラムならびに記録媒体を提供する。【解決手段】  顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合う複数の区分け領域について、最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータと、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータを作成する。これらの静止画像のデータに所定の処理を施して得たスクリーニング・ズーミング用合成静止画像のデータと編集済みフォーカシング用静止画像のデータから、スクリーニング用の動画およびズーミング用の動画と、フォーカシング用の動画を作成し、コンピュータ画面に表示させる。また、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位の噴出説明を表示させる。【選択図】なし【特許請求の範囲】
【請求項１】
処理部が、顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付け、
前記処理部が、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付け、
前記処理部が、入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させ、
前記処理部が、実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させることを特徴とする顕微鏡観察再現方法。
【請求項２】
顕微鏡観察を再現する動画をコンピュータ画面に表示させ、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位に関する噴出し説明を表示させることを特徴とする請求項１に記載の顕微鏡観察再現方法。
【請求項３】
顕微鏡観察を再現する動画をコンピュータ画面に表示させ、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位に関する噴出し説明を表示させることを特徴とする顕微鏡観察再現方法。
【請求項４】
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータを入力する手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および
実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
を備えることを特徴とする顕微鏡観察再現装置。
【請求項５】
さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段
を備えることを特徴とする請求項４に記載の顕微鏡観察再現装置。
【請求項６】
顕微鏡観察を再現する動画を作成する手段、
作成された前記動画を表示する手段、
前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および
表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段
を備えたことを特徴とする顕微鏡観察再現装置。
【請求項７】
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付ける手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および
実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
としてコンピュータを機能させることを特徴とする顕微鏡観察再現プログラム。
【請求項８】
さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段を備え、コンピュータを機能させることを特徴とする請求項５に記載の顕微鏡観察再現プログラム。
【請求項９】
顕微鏡観察を再現する動画を作成する手段、
作成された前記動画を表示する手段、
前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および
表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段
としてコンピュータを機能させることを特徴とする顕微鏡観察再現プログラム。
【請求項１０】
請求項７から９のいずれかに記載の顕微鏡観察再現プログラムを記録したコンピュータ読取可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本願発明は、病理組織検査や細胞診などで行われる顕微鏡観察のコンピュータ上での再現およびその際の噴出し説明表示に関するものである。
【背景技術】
【０００２】
従来、学会や研修会などで病理組織標本や細胞診標本の顕微鏡画像を提示する場合、スライドや写真を使ってその静止画を表示することが行われてきた。しかし、顕微鏡から得られる標本の情報は詳細で多岐にわたるので、静止画では標本の限られた情報しか伝えられないことになる。また、細胞診では撮られた静止画は検査技師や医師の判断によるところが大きく、当然その客観的判断には限界があると考えられる。
【０００３】
そこで、本願発明の発明者は、病理組織検査や細胞診などで行われる顕微鏡観察をコンピュータ上で動画により正確に再現したものを既に提案している（非特許文献１参照）。
【０００４】
ここで提案している動画は、顕微鏡で観察する場合の種々の操作をコンピュータ上で再現しようとするものである。すなわち、顕微鏡観察では、たとえば細胞診標本のスクリーニング（移動観察）や要注意細胞のズーミング（拡大観察）およびフォーカシング（立体的観察）、組織標本の弱拡大（全体）から強拡大（部分）の確認など、いろいろな操作をしながら観察をしている。上記提案では、実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画（Animated Microscopic Imageと呼ぶ）をコンピュータ画面上に表示し、ユーザがスクリーニングやズーミング、フォーカシングを指示する操作をコンピュータに入力すると、その入力に従って実際の顕微鏡像と同じ動きをした動画が再生されるようにしたものである。操作入力については、マウス等を用いてコンピュータ画面上に表示されているスクリーニング用ボタン、ズーミング用ボタン、フォーカシング用ボタンを操作したり画像をドラッグしたりして行われる。
【０００５】
たとえば、スクリーニング用の操作を入力すると、コンピュータ画面上に表示されている顕微鏡像がスクリーニング方向に移動する。つまり実際にスクリーニング方向に現れる顕微鏡像が次々と滑らかに映し出される。このときさらにズーミング用の操作を入力すると、コンピュータ画面上の顕微鏡像が拡大または縮小する。つまり実際に拡大または縮小して現れる顕微鏡像が瞬時に映し出される。これにより、広範囲に渡る弱拡大像を見ながら目に止まった組織や細胞を強拡大してチェックでき、スクリーニングおよびズーミングが忠実に再現されることとなる。もちろんフォーカシングについても同様に再現される。
【非特許文献１】鷲谷  清忠、"顕微鏡観察を再現するMicroscope Imaging Technolo    gy"、[online]、２００３年２月３日、細胞検査士会、http://www.intercyto.    com/research/MIT1/index.htm
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、上記非特許文献１では、再現動画の表示およびその操作についての開示にとどまっており、その動画の具体的な作成手法についての具体的な開示はない。また、上記のような動画の特定部位に関する噴出し説明をも表示することができれば、さらに一層効果的な発表や学習を実現できると考えられる。たとえば、学習指導上重要と思われる異型細胞等の要注意細胞や組織について噴出し説明を自動表示させることで、詳細なヴァーチャル顕微鏡学習が可能になる。
【０００７】
そこで、以上のとおりの事情に鑑み、本願発明は、顕微鏡で観察する場合の種々の操作をコンピュータ上で再現させることができる顕微鏡観察再現方法、顕微鏡観察再現装置、顕微鏡観察再現プログラムおよびその記録媒体を提供することを課題としている。
【０００８】
また、本願発明は、上記動画の特定部位に関する噴出し説明を表示させることができる顕微鏡観察再現方法、顕微鏡観察再現装置、顕微鏡観察再現プログラムおよびその記録媒体を提供することを別の課題としている。
【課題を解決するための手段】
【０００９】
本願発明は、上記の課題を解決するものとして、第１には、
処理部が、顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付け、
前記処理部が、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付け、
前記処理部が、入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させ、
前記処理部が、実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させることを特徴とする顕微鏡観察再現方法を提供する。
【００１０】
第２に、上記第１の発明において、顕微鏡観察を再現する動画をコンピュータ画面に表示させ、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位に関する噴出し説明を表示させることを特徴とする顕微鏡観察再現方法を提供する。
【００１１】
第３に、顕微鏡観察を再現する動画をコンピュータ画面に表示させ、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位に関する噴出し説明を表示させることを特徴とする顕微鏡観察再現方法を提供する。
【００１２】
また、本願発明は、第４に、
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータを入力する手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
を備えることを特徴とする顕微鏡観察再現装置を提供する。
【００１３】
第５に、上記第４の発明において、さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段を備えることを特徴とする顕微鏡観察再現装置を提供する。
【００１４】
第６に、顕微鏡観察を再現する動画を作成する手段、
作成された前記動画を表示する手段、
前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および
表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段
を備えたことを特徴とする顕微鏡観察再現装置を提供する。
【００１５】
また、本願発明は、第７に、
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付ける手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および
実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
としてコンピュータを機能させることを特徴とする顕微鏡観察再現プログラムを提供する。
【００１６】
第８に、上記第７の発明において、さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段を備え、コンピュータを機能させることを特徴とする顕微鏡観察再現プログラムを提供する。
【００１７】
第９に、顕微鏡観察を再現する動画を作成する手段、
作成された前記動画を表示する手段、
前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および
表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段
としてコンピュータを機能させることを特徴とする顕微鏡観察再現プログラムを提供する。
【００１８】
さらに、本願発明は、第１０に、上記第７から９のいずれかの顕微鏡観察再現プログラムを記録したコンピュータ読取可能な記録媒体を提供する。
【発明の効果】
【００１９】
上記の顕微鏡観察方法および顕微鏡観察装置によれば、顕微鏡観察を再現する動画（以下「ＡＭＩ」と呼ぶこととする）をコンピュータ上で正確に再現することが可能となる。また、表示させている際に、たとえば学習指導上重要と思われる異型細胞等の要注意細胞や組織などの特定部位についての噴出し説明を任意に自動表示させることができ、これにより詳細なヴァーチャル顕微鏡学習が可能になる。
【００２０】
上記の顕微鏡観察プログラムおよび記録媒体によれば、上記の顕微鏡観察方法および顕微鏡観察装置の発明と同様な効果が得られるコンピュータプログラムおよびそれを記録したフレキシブルディスクやＣＤ、ＤＶＤなどの記録媒体が実現される。
【発明を実施するための最良の形態】
【００２１】
以下、本願発明の一実施形態について説明する。
【００２２】
まず、本願発明による顕微鏡観察用動画として再現したＡＭＩの作成方法の実施形態について述べる。なお、ここでは、細胞診顕微鏡標本の画像を扱う例により説明を行うが、本願発明を限定するものではない。
【００２３】
（１）ＡＭＩ用画像は、たとえば顕微鏡専用のデジタルカメラもしくはハイビジョンカメラを用い、デジタル画像として撮影する。また、ＡＭＩ作成のために、画像編集・合成（Tiling）用ソフトと、動画作成用ソフトを使用する。このようなソフトは市販のものを使用することができ、たとえば画像編集・合成用ソフトとしては、Photoshop elements 2.0 (登録商標：Adobe社製)等、動画作成用ソフトとしては：ホームページ・ビルダーＶ９（登録商標：ＩＢＭ社製）に付属しているHotmedia Creator等を使用することができる。以下では、ここに例示のソフトを用いて説明を行う。
【００２４】
（２）デジタル画像の撮影
（ｉ）スクリーニング・ズーミング用画像
撮影したい範囲を決め、拡大観察する最高倍率で目的の視野を全部撮影しておく。なお、画像は合成するので、たとえば１０％以上の範囲が重なり合うように撮影する。
【００２５】
（ｉｉ）フォーカシング用画像
細胞診標本で見られる細胞集塊は細胞が重なっているので、焦点ごとに画像は変化する。その焦点が合った画像をすべて撮影しておく。
【００２６】
（３）画像の編集
（ｉ）スクリーニング・ズーミング用画像
撮影した画像を画像編集・合成用ソフトPhotoshop elements 2.0 (登録商標：Adobe社製)で合成（タイリング）する。ファイルメニューの「Photomerge」 を選択し、ソースファイルの「参照ボタン」で合成する画像をすべて選択する（図１（ａ））と、自動で合成が行われる（図１（ｂ））。合成はピクセル単位で行うので、画像のずれは認められない。合成した画像を切り抜き（図１（ｃ））、編集後ファイル名を付けて保存する（図１（ｄ））。
【００２７】
（ｉｉ）フォーカシング用画像
得られた画像は同じ精度で編集しておく。ここで編集とは、ある区分け領域で焦点を変えて撮像された複数の画像をフォーカシング方向（像の存在する面に垂直な方向）に積み重ねることである。フォーカシング用画像は合成を行わない。なお、デジタル画像の編集や精度を保つ方法に関しては、たとえば鷲谷  清忠「インターネットサーベイの運用」、Medical Technology, 2001, 1:p.75-81、鷲谷  清忠「第４３回細胞診セミナー（仙台）」、ハンドアウト、p.67-76,2001を参照することができる。
【００２８】
（４）動画作成
動画作成用ソフトHotMedia creatorで動画（ＡＭＩ）にする処理について説明する。
【００２９】
（ｉ）スクリーニング・ズーミング用画像
HotMedia creator画面のスクロール・イメージをチェックし、「追加ボタン」で合成した画像を読み込む（図２（ａ））。「プロパティボタン」で画像の設定（最大拡大率：３  初期移動：０  初期表示：１）を行い（図２（ｂ））、ファイルメニューからＷｅｂページとして保存する（図２（ｃ））。ここで、ｍｖｒ（動画）とｈｔｍｌの２つのファイルができるので、ｈｔｍｌソースファイルを開き、「APPELET」で囲まれた画像サイズ「（WIDTH, HEIGHT）」の箇所を、パソコンで表示したいサイズに変更（図２（ｄ））する。ＡＭＩの実行は、ｈｔｍｌファイルを起動して行う。
【００３０】
（ｉｉ）フォーカシング用画像
HotMedia creator起動画面のアニメーションをチェックし、「追加ボタン」でフォーカシング用に撮影した画像を読み込む（図３（ａ））。「プロパティボタン」で画像の設定（アニメーションの自動再生：ループ  デフォルト・トランジション時間［表示間隔時間］：３０００）を行い（図３（ｂ））、Ｗｅｂページとして、ｍｖｒとｈｔｍｌの２つのファイル名を付けて保存する。ｈｔｍｌファイルを起動すると、ＡＭＩが起動する。
【００３１】
次に、解説付噴出し表示可能なＡＭＩの作成方法について述べる。
【００３２】
HotMedia creator で作成したｍｖｒファイルを指定（ダブルクリック）して開き（図４（ａ））、解説付噴出しを作成するために開いた画像をダブルクリックしてポップアップさせておく。次に、マウスをドラッグして噴出し解説をつけたい細胞（部位）を四角で囲むと、「ホットリンクトリガー設定画面」が開く（図４（ｂ））。そこで「マウスオーバーアクション編集ボタン」をクリックして、「ツールヒント欄」に説明を記入する（図４（ｃ））。図４（ｂ）と図４（ｃ）の操作を繰り返すと、複数の噴出し解説を設定できる（図４（ｄ））。ｈｔｍｌファイルにもＡｌｔタグという噴出し解説機能があるが、数秒で消えてしまう。その点、ここで述べた方法による解説噴出しはポイントしている間は消えないので、学習用教材として用いた場合にはじっくり勉強できるメリットがある。
【００３３】
次に、噴出し説明を表示させることができる本願発明の実施形態を図５を参照して詳細に説明する。図５は本願発明の顕微鏡観察装置のシステム構成図であるである。
【００３４】
まず、処理部３は、主記憶部４に記憶されているプログラムの指令を受けて、顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデジタルデータを入力部２より取り込む。また、処理部３は、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデジタルデータを入力部２より取り込む。そして、処理部３は、入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを静止画データベース５に記憶させる。
【００３５】
続いて、処理部３は、静止画データベース５から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成する。そして、処理部３は、該スクリーニング・ズーミング用合成静止画像のデータを静止画データベース５に記憶させる。
【００３６】
また、処理部３は、静止画データベース５から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成する。そして、処理部３は、作成した該編集済みフォーカシング用静止画像のデータを静止画データベース５に記憶させる。
【００３７】
次に、処理部３は、静止画データベース５からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを動画データベース６に記憶させる。
【００３８】
また、処理部３は、静止画データベース５から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを動画データベース６に記憶させる。
【００３９】
以上のようにしてＡＭＩが作成される。
【００４０】
ＡＭＩを表示させる場合、まず、処理部３は、主記憶部４に記憶されているプログラムの指令を受けて、動画データベース６に格納されているＡＭＩを読み出して、表示部１に表示させる。
【００４１】
続いて、処理部３は、表示されているＡＭＩ上にマウスカーソルを表示させる。このマウスカーソルは、ユーザによるマウス操作に連動してＡＭＩ上を移動するものである。
【００４２】
ユーザがスクリーニング、ズーミング、フォーカシングを指示する操作をコンピュータに入力すると、その入力に従って実際の顕微鏡像と同じ動きをした動画が再生される。操作入力については、マウス等を用いてコンピュータ画面上に表示されているスクリーニング用ボタン、ズーミング用ボタン、フォーカシング用ボタンの操作あるいは画像のドラッグ等により行う。
【００４３】
スクリーニング用の操作を入力すると、コンピュータ画面上に表示されている顕微鏡像がスクリーニング方向に移動し、実際にスクリーニング方向に現れる顕微鏡像が次々と滑らかに映し出される。このときさらにズーミング用の操作を入力すると、コンピュータ画面上の顕微鏡像が拡大または縮小する。これにより、広範囲に渡る弱拡大像を見ながら目に止まった組織や細胞を強拡大してチェックでき、スクリーニングおよびズーミングが忠実に再現されることとなる。もちろんフォーカシングについても同様に再現される。
【００４４】
ＡＭＩ上の特定部位に関する噴出し説明も行う場合について述べると、この場合、処理部３は、このマウスカーソルがＡＭＩ上の特定部位に位置したときに、その特定部位に関する噴出し説明を表示させる。噴出し説明については、予め、ＡＭＩ上の特定部位を一つまたは複数設定し、特定部位毎に噴出し説明データを作成して説明データベース７に格納しておく。処理部３は、ＡＭＩ上のマウスカーソルの動きをトラッキングし、設定した特定部位の位置にマウスカーソルが位置したときに、該当する特定部位の噴出し説明データを説明データベース７から読み出して瞬時に表示させる。
【００４５】
これにより、ユーザは、ＡＭＩを見ながら気になった部位にマウスカーソルを動かすだけで、その部位の具体的な説明を見ることができ、顕微鏡操作をシミュレーションしながら重要部位の学習も可能になる。
【００４６】
図６（ａ）〜（ｄ）は、各々、噴出し説明が表示される具体例を示したものである。
【００４７】
まず図６（ａ）に示したように、コンピュータ画面上に映し出されている細胞診標本のＡＭＩ上にマウスカーソルが表示されており、このマウスカーソルがユーザによるマウス操作と連動してＡＭＩ上を移動している間に学習上重要と思われる部位に差し掛かると、図６（ｂ）に示したようにその部位を含む領域の枠が表示される。次に、その枠内をクリックすると、図６（ｃ）に示したように枠内のＡＭＩが拡大表示される。そしてさらに、この拡大ＡＭＩ内にてマウスカーソルが学習上重要と思われる部位の一つに差し掛かると、図６（ｄ）に示したようにその部位に関する噴出し説明が表示される。このとき、ユーザはＡＭＩ上のマウスカーソルをマウス操作により移動させるだけでよく、マウスポイントが特定部位に位置したときに自動的に噴出し説明が表示される。
【００４８】
このように、この例では、全体として次のような動作が可能となる。
【００４９】
まず、スクリーニング用の操作を入力することにより、コンピュータ画面上に表示されている顕微鏡像がスクリーニング方向に移動する。つまり実際にスクリーニング方向に現れる顕微鏡像が次々と滑らかに映し出される。
【００５０】
このときさらにズーミング用の操作を入力すると、コンピュータ画面上の顕微鏡像が拡大または縮小する。つまり実際に拡大または縮小して現れる顕微鏡像が瞬時に映し出される。これにより、広範囲に渡る弱拡大像を見ながら目に止まった組織や細胞を強拡大してチェックでき、スクリーニングおよびズーミングが忠実に再現されることとなる。
【００５１】
また、フォーカシング用の操作をすると、たとえばある細胞集塊を立体的に観察した場合は、そのフォーカシングが同様に忠実に再現される。
【００５２】
さらに、ユーザがマウスカーソルをＡＭＩ上で移動している間に学習上重要と思われる部位に差し掛かると、その部位を含む領域の枠が表示され、その部位に関する噴出し説明が表示される。
【００５３】
したがって、以上のとおりに対象標本の顕微鏡観察をコンピュータ上で正確に再現できるので、学会等での発表のみならず、顕微鏡学習にも極めて有用である。
【００５４】
もちろん、本願発明は以上の実施形態に限定されるものではなく、細部については様々な態様が可能である。たとえば、本願発明は、顕微鏡観察だけではなく、内視鏡観察や肉眼観察にも応用できると考えられ、実際の観察時に見られる動きと同じ動きをする動画を作成し、ユーザの操作入力に従ってその動画を再生させながら任意に説明噴出しを表示できるようにすればよい。
【図面の簡単な説明】
【００５５】
【図１】（ａ）〜（ｄ）は、スクリーニング・ズーミング用静止画像の編集の説明図。
【図２】（ａ）〜（ｄ）は、スクリーニング・ズーミング用画像の動画作成の説明図。
【図３】（ａ）、（ｂ）は、フォーカシング用画像の動画作成の説明図。
【図４】（ａ）〜（ｄ）は、解説付噴出し表示可能なＡＭＩの作成方法の説明図。
【図５】本願発明の一実施形態を示したシステム構成図。
【図６】（ａ）〜（ｄ）は、各々、噴出し説明を表示する場合のコンピュータ画面の    ハードコピー図。
【符号の説明】
【００５６】
１  表示部
２  入力部
３  処理部
４  主記憶部
５  静止画データベース
６  動画データベース
７  説明データベース
８  バス
【図１】
2006228185.tif 000002
【図２】
2006228185.tif 000003
【図３】
2006228185.tif 000004
【図４】
2006228185.tif 000005
【図５】
2006228185.tif 000006
【図６】
2006228185.tif 000007
【手続補正書】
【提出日】平成18年3月31日(2006.3.31)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
処理部が、顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付け、
前記処理部が、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付け、
前記処理部が、入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させ、
前記処理部が、実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させることを特徴とする顕微鏡観察再現方法。
【請求項２】
前記動画をコンピュータ画面に表示させるとき、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位に関する噴出し説明を表示させることを特徴とする請求項１に記載の顕微鏡観察再現方法。
【請求項３】
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータを入力する手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および
実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
を備えることを特徴とする顕微鏡観察再現装置。
【請求項４】
さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段
を備えることを特徴とする請求項３に記載の顕微鏡観察再現装置。
【請求項５】
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付ける手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および
実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
としてコンピュータを機能させることを特徴とする顕微鏡観察再現プログラム。
【請求項６】
さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段を備え、コンピュータを機能させることを特徴とする請求項５に記載の顕微鏡観察再現プログラム。
【請求項７】
請求項５または６に記載の顕微鏡観察再現プログラムを記録したコンピュータ読取可能な記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本願発明は、病理組織検査や細胞診などで行われる顕微鏡観察のコンピュータ上での再現およびその際の噴出し説明表示に関するものである。
【背景技術】
【０００２】
従来、学会や研修会などで病理組織標本や細胞診標本の顕微鏡画像を提示する場合、スライドや写真を使ってその静止画を表示することが行われてきた。しかし、顕微鏡から得られる標本の情報は詳細で多岐にわたるので、静止画では標本の限られた情報しか伝えられないことになる。また、細胞診では撮られた静止画は検査技師や医師の判断によるところが大きく、当然その客観的判断には限界があると考えられる。
【０００３】
そこで、本願発明の発明者は、病理組織検査や細胞診などで行われる顕微鏡観察をコンピュータ上で動画により正確に再現したものを既に提案している（非特許文献１参照）。
【０００４】
ここで提案している動画は、顕微鏡で観察する場合の種々の操作をコンピュータ上で再現しようとするものである。すなわち、顕微鏡観察では、たとえば細胞診標本のスクリーニング（移動観察）や要注意細胞のズーミング（拡大観察）およびフォーカシング（立体的観察）、組織標本の弱拡大（全体）から強拡大（部分）の確認など、いろいろな操作をしながら観察をしている。上記提案では、実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画（Animated Microscopic Imageと呼ぶ）をコンピュータ画面上に表示し、ユーザがスクリーニングやズーミング、フォーカシングを指示する操作をコンピュータに入力すると、その入力に従って実際の顕微鏡像と同じ動きをした動画が再生されるようにしたものである。操作入力については、マウス等を用いてコンピュータ画面上に表示されているスクリーニング用ボタン、ズーミング用ボタン、フォーカシング用ボタンを操作したり画像をドラッグしたりして行われる。
【０００５】
たとえば、スクリーニング用の操作を入力すると、コンピュータ画面上に表示されている顕微鏡像がスクリーニング方向に移動する。つまり実際にスクリーニング方向に現れる顕微鏡像が次々と滑らかに映し出される。このときさらにズーミング用の操作を入力すると、コンピュータ画面上の顕微鏡像が拡大または縮小する。つまり実際に拡大または縮小して現れる顕微鏡像が瞬時に映し出される。これにより、広範囲に渡る弱拡大像を見ながら目に止まった組織や細胞を強拡大してチェックでき、スクリーニングおよびズーミングが忠実に再現されることとなる。もちろんフォーカシングについても同様に再現される。
【非特許文献１】鷲谷  清忠、"顕微鏡観察を再現するMicroscope Imaging Technolo      gy"、[online]、２００３年２月３日、細胞検査士会、http://www.intercyto.        com/research/MIT1/index.htm
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、上記非特許文献１では、再現動画の表示およびその操作についての開示にとどまっており、その動画の具体的な作成手法についての具体的な開示はない。また、上記のような動画の特定部位に関する噴出し説明をも表示することができれば、さらに一層効果的な発表や学習を実現できると考えられる。たとえば、学習指導上重要と思われる異型細胞等の要注意細胞や組織について噴出し説明を自動表示させることで、詳細なヴァーチャル顕微鏡学習が可能になる。
【０００７】
そこで、以上のとおりの事情に鑑み、本願発明は、顕微鏡で観察する場合の種々の操作をコンピュータ上で再現させることができる顕微鏡観察再現方法、顕微鏡観察再現装置、顕微鏡観察再現プログラムおよびその記録媒体を提供することを課題としている。
【０００８】
また、本願発明は、上記動画の特定部位に関する噴出し説明を表示させることができる顕微鏡観察再現方法、顕微鏡観察再現装置、顕微鏡観察再現プログラムおよびその記録媒体を提供することを別の課題としている。
【課題を解決するための手段】
【０００９】
本願発明は、上記の課題を解決するものとして、第１には、
処理部が、顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付け、
前記処理部が、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付け、
前記処理部が、入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させ、
前記処理部が、前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させ、
前記処理部が、実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させることを特徴とする顕微鏡観察再現方法を提供する。
【００１０】
第２に、上記第１の発明において、前記動画をコンピュータ画面に表示させるとき、この動画上の特定部位にマウスカーソルが位置したときに当該特定部位に関する噴出し説明を表示させることを特徴とする顕微鏡観察再現方法を提供する。
【００１１】
また、本願発明は、第３に、
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータを入力する手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
を備えることを特徴とする顕微鏡観察再現装置を提供する。
【００１２】
第４に、上記第３の発明において、さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段を備えることを特徴とする顕微鏡観察再現装置を提供する。
【００１３】
また、本願発明は、第５に、
顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデータの入力を受け付ける手段、
前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデータの入力を受け付ける手段、
入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを記憶手段に記憶させる手段、
前記記憶手段から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成し、該スクリーニング・ズーミング用合成静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成し、該編集済みフォーカシング用静止画像のデータを前記記憶手段に記憶させる手段、
前記記憶手段からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを前記記憶手段に記憶させる手段、
前記記憶手段から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを前記記憶手段に記憶させる手段、および
実際の顕微鏡観察におけるスクリーニング時、ズーミング時、フォーカシング時に見られる顕微鏡像の動きを再現する動画をコンピュータ画面に表示させる手段
としてコンピュータを機能させることを特徴とする顕微鏡観察再現プログラムを提供する。
【００１４】
第６に、上記第５の発明において、さらに、前記動画上の特定部位に関する噴出し説明を予め記憶しておく手段、および表示された前記動画上の前記特定部位にマウスカーソルが位置したときに当該特定部位に関する前記噴出し説明を読み出して表示する手段を備え、コンピュータを機能させることを特徴とする顕微鏡観察再現プログラムを提供する。
【００１５】
さらに、本願発明は、第７に、上記第５または第６の顕微鏡観察再現プログラムを記録したコンピュータ読取可能な記録媒体を提供する。
【発明の効果】
【００１６】
上記の顕微鏡観察方法および顕微鏡観察装置によれば、顕微鏡観察を再現する動画（以下「ＡＭＩ」と呼ぶこととする）をコンピュータ上で正確に再現することが可能となる。また、表示させている際に、たとえば学習指導上重要と思われる異型細胞等の要注意細胞や組織などの特定部位についての噴出し説明を任意に自動表示させることができ、これにより詳細なヴァーチャル顕微鏡学習が可能になる。
【００１７】
上記の顕微鏡観察プログラムおよび記録媒体によれば、上記の顕微鏡観察方法および顕微鏡観察装置の発明と同様な効果が得られるコンピュータプログラムおよびそれを記録したフレキシブルディスクやＣＤ、ＤＶＤなどの記録媒体が実現される。
【発明を実施するための最良の形態】
【００１８】
以下、本願発明の一実施形態について説明する。
【００１９】
まず、本願発明による顕微鏡観察用動画として再現したＡＭＩの作成方法の実施形態について述べる。なお、ここでは、細胞診顕微鏡標本の画像を扱う例により説明を行うが、本願発明を限定するものではない。
【００２０】
（１）ＡＭＩ用画像は、たとえば顕微鏡専用のデジタルカメラもしくはハイビジョンカメラを用い、デジタル画像として撮影する。また、ＡＭＩ作成のために、画像編集・合成（Tiling）用ソフトと、動画作成用ソフトを使用する。このようなソフトは市販のものを使用することができ、たとえば画像編集・合成用ソフトとしては、Photoshop elements 2.0 (登録商標：Adobe社製)等、動画作成用ソフトとしては：ホームページ・ビルダーＶ９（登録商標：ＩＢＭ社製）に付属しているHotmedia Creator等を使用することができる。以下では、ここに例示のソフトを用いて説明を行う。
【００２１】
（２）デジタル画像の撮影
（ｉ）スクリーニング・ズーミング用画像
撮影したい範囲を決め、拡大観察する最高倍率で目的の視野を全部撮影しておく。なお、画像は合成するので、たとえば１０％以上の範囲が重なり合うように撮影する。
【００２２】
（ｉｉ）フォーカシング用画像
細胞診標本で見られる細胞集塊は細胞が重なっているので、焦点ごとに画像は変化する。その焦点が合った画像をすべて撮影しておく。
【００２３】
（３）画像の編集
（ｉ）スクリーニング・ズーミング用画像
撮影した画像を画像編集・合成用ソフトPhotoshop elements 2.0 (登録商標：Adobe社製)で合成（タイリング）する。ファイルメニューの「Photomerge」 を選択し、ソースファイルの「参照ボタン」で合成する画像をすべて選択する（図１（ａ））と、自動で合成が行われる（図１（ｂ））。合成はピクセル単位で行うので、画像のずれは認められない。合成した画像を切り抜き（図１（ｃ））、編集後ファイル名を付けて保存する（図１（ｄ））。
【００２４】
（ｉｉ）フォーカシング用画像
得られた画像は同じ精度で編集しておく。ここで編集とは、ある区分け領域で焦点を変えて撮像された複数の画像をフォーカシング方向（像の存在する面に垂直な方向）に積み重ねることである。フォーカシング用画像は合成を行わない。なお、デジタル画像の編集や精度を保つ方法に関しては、たとえば鷲谷  清忠「インターネットサーベイの運用」、Medical Technology, 2001, 1:p.75-81、鷲谷  清忠「第４３回細胞診セミナー（仙台）」、ハンドアウト、p.67-76,2001を参照することができる。
【００２５】
（４）動画作成
動画作成用ソフトHotMedia creatorで動画（ＡＭＩ）にする処理について説明する。
【００２６】
（ｉ）スクリーニング・ズーミング用画像
HotMedia creator画面のスクロール・イメージをチェックし、「追加ボタン」で合成した画像を読み込む（図２（ａ））。「プロパティボタン」で画像の設定（最大拡大率：３  初期移動：０  初期表示：１）を行い（図２（ｂ））、ファイルメニューからＷｅｂページとして保存する（図２（ｃ））。ここで、ｍｖｒ（動画）とｈｔｍｌの２つのファイルができるので、ｈｔｍｌソースファイルを開き、「APPELET」で囲まれた画像サイズ「（WIDTH, HEIGHT）」の箇所を、パソコンで表示したいサイズに変更（図２（ｄ））する。ＡＭＩの実行は、ｈｔｍｌファイルを起動して行う。
【００２７】
（ｉｉ）フォーカシング用画像
HotMedia creator起動画面のアニメーションをチェックし、「追加ボタン」でフォーカシング用に撮影した画像を読み込む（図３（ａ））。「プロパティボタン」で画像の設定（アニメーションの自動再生：ループ  デフォルト・トランジション時間［表示間隔時間］：３０００）を行い（図３（ｂ））、Ｗｅｂページとして、ｍｖｒとｈｔｍｌの２つのファイル名を付けて保存する。ｈｔｍｌファイルを起動すると、ＡＭＩが起動する。
【００２８】
次に、解説付噴出し表示可能なＡＭＩの作成方法について述べる。
【００２９】
HotMedia creator で作成したｍｖｒファイルを指定（ダブルクリック）して開き（図４（ａ））、解説付噴出しを作成するために開いた画像をダブルクリックしてポップアップさせておく。次に、マウスをドラッグして噴出し解説をつけたい細胞（部位）を四角で囲むと、「ホットリンクトリガー設定画面」が開く（図４（ｂ））。そこで「マウスオーバーアクション編集ボタン」をクリックして、「ツールヒント欄」に説明を記入する（図４（ｃ））。図４（ｂ）と図４（ｃ）の操作を繰り返すと、複数の噴出し解説を設定できる（図４（ｄ））。ｈｔｍｌファイルにもＡｌｔタグという噴出し解説機能があるが、数秒で消えてしまう。その点、ここで述べた方法による解説噴出しはポイントしている間は消えないので、学習用教材として用いた場合にはじっくり勉強できるメリットがある。
【００３０】
次に、噴出し説明を表示させることができる本願発明の実施形態を図５を参照して詳細に説明する。図５は本願発明の顕微鏡観察装置のシステム構成図であるである。
【００３１】
まず、処理部３は、主記憶部４に記憶されているプログラムの指令を受けて、顕微鏡像のうちの撮影対象領域を、互いに周辺部の一部が重なり合うように区分けした複数の区分け領域について、拡大観察する最高倍率で撮影された複数のスクリーニング・ズーミング用静止画像のデジタルデータを入力部２より取り込む。また、処理部３は、前記各区分け領域においてそれぞれ焦点を変えて撮影された複数のフォーカシング用静止画像のデジタルデータを入力部２より取り込む。そして、処理部３は、入力された複数のスクリーニング・ズーミング用静止画像のデータおよび入力された複数のフォーカシング用静止画像のデータを静止画データベース５に記憶させる。
【００３２】
続いて、処理部３は、静止画データベース５から前記複数のスクリーニング・ズーミング用静止画像のデータを取り出して、これらのデータを繋ぎ合わせた後、所要の範囲を切り抜いて、スクリーニング・ズーミング用合成静止画像のデータを作成する。そして、処理部３は、該スクリーニング・ズーミング用合成静止画像のデータを静止画データベース５に記憶させる。
【００３３】
また、処理部３は、静止画データベース５から前記複数のフォーカシング用静止画像のデータを取り出して、各フォーカシング用静止画像のデータを同じ精度で編集して、編集済みフォーカシング用静止画像のデータを作成する。そして、処理部３は、作成した該編集済みフォーカシング用静止画像のデータを静止画データベース５に記憶させる。
【００３４】
次に、処理部３は、静止画データベース５からスクリーニング・ズーミング用合成静止画像のデータを取り出してスクリーニング用の動画およびズーミング用の動画を作成し、それらの動画データを動画データベース６に記憶させる。
【００３５】
また、処理部３は、静止画データベース５から編集済みフォーカシング用静止画像のデータを取り出してフォーカシング用の動画を作成し、その動画データを動画データベース６に記憶させる。
【００３６】
以上のようにしてＡＭＩが作成される。
【００３７】
ＡＭＩを表示させる場合、まず、処理部３は、主記憶部４に記憶されているプログラムの指令を受けて、動画データベース６に格納されているＡＭＩを読み出して、表示部１に表示させる。
【００３８】
続いて、処理部３は、表示されているＡＭＩ上にマウスカーソルを表示させる。このマウスカーソルは、ユーザによるマウス操作に連動してＡＭＩ上を移動するものである。
【００３９】
ユーザがスクリーニング、ズーミング、フォーカシングを指示する操作をコンピュータに入力すると、その入力に従って実際の顕微鏡像と同じ動きをした動画が再生される。操作入力については、マウス等を用いてコンピュータ画面上に表示されているスクリーニング用ボタン、ズーミング用ボタン、フォーカシング用ボタンの操作あるいは画像のドラッグ等により行う。
【００４０】
スクリーニング用の操作を入力すると、コンピュータ画面上に表示されている顕微鏡像がスクリーニング方向に移動し、実際にスクリーニング方向に現れる顕微鏡像が次々と滑らかに映し出される。このときさらにズーミング用の操作を入力すると、コンピュータ画面上の顕微鏡像が拡大または縮小する。これにより、広範囲に渡る弱拡大像を見ながら目に止まった組織や細胞を強拡大してチェックでき、スクリーニングおよびズーミングが忠実に再現されることとなる。もちろんフォーカシングについても同様に再現される。
【００４１】
ＡＭＩ上の特定部位に関する噴出し説明も行う場合について述べると、この場合、処理部３は、このマウスカーソルがＡＭＩ上の特定部位に位置したときに、その特定部位に関する噴出し説明を表示させる。噴出し説明については、予め、ＡＭＩ上の特定部位を一つまたは複数設定し、特定部位毎に噴出し説明データを作成して説明データベース７に格納しておく。処理部３は、ＡＭＩ上のマウスカーソルの動きをトラッキングし、設定した特定部位の位置にマウスカーソルが位置したときに、該当する特定部位の噴出し説明データを説明データベース７から読み出して瞬時に表示させる。
【００４２】
これにより、ユーザは、ＡＭＩを見ながら気になった部位にマウスカーソルを動かすだけで、その部位の具体的な説明を見ることができ、顕微鏡操作をシミュレーションしながら重要部位の学習も可能になる。
【００４３】
図６（ａ）〜（ｄ）は、各々、噴出し説明が表示される具体例を示したものである。
【００４４】
まず図６（ａ）に示したように、コンピュータ画面上に映し出されている細胞診標本のＡＭＩ上にマウスカーソルが表示されており、このマウスカーソルがユーザによるマウス操作と連動してＡＭＩ上を移動している間に学習上重要と思われる部位に差し掛かると、図６（ｂ）に示したようにその部位を含む領域の枠が表示される。次に、その枠内をクリックすると、図６（ｃ）に示したように枠内のＡＭＩが拡大表示される。そしてさらに、この拡大ＡＭＩ内にてマウスカーソルが学習上重要と思われる部位の一つに差し掛かると、図６（ｄ）に示したようにその部位に関する噴出し説明が表示される。このとき、ユーザはＡＭＩ上のマウスカーソルをマウス操作により移動させるだけでよく、マウスポイントが特定部位に位置したときに自動的に噴出し説明が表示される。
【００４５】
このように、この例では、全体として次のような動作が可能となる。
【００４６】
まず、スクリーニング用の操作を入力することにより、コンピュータ画面上に表示されている顕微鏡像がスクリーニング方向に移動する。つまり実際にスクリーニング方向に現れる顕微鏡像が次々と滑らかに映し出される。
【００４７】
このときさらにズーミング用の操作を入力すると、コンピュータ画面上の顕微鏡像が拡大または縮小する。つまり実際に拡大または縮小して現れる顕微鏡像が瞬時に映し出される。これにより、広範囲に渡る弱拡大像を見ながら目に止まった組織や細胞を強拡大してチェックでき、スクリーニングおよびズーミングが忠実に再現されることとなる。
【００４８】
また、フォーカシング用の操作をすると、たとえばある細胞集塊を立体的に観察した場合は、そのフォーカシングが同様に忠実に再現される。
【００４９】
さらに、ユーザがマウスカーソルをＡＭＩ上で移動している間に学習上重要と思われる部位に差し掛かると、その部位を含む領域の枠が表示され、その部位に関する噴出し説明が表示される。
【００５０】
したがって、以上のとおりに対象標本の顕微鏡観察をコンピュータ上で正確に再現できるので、学会等での発表のみならず、顕微鏡学習にも極めて有用である。
【００５１】
もちろん、本願発明は以上の実施形態に限定されるものではなく、細部については様々な態様が可能である。たとえば、本願発明は、顕微鏡観察だけではなく、内視鏡観察や肉眼観察にも応用できると考えられ、実際の観察時に見られる動きと同じ動きをする動画を作成し、ユーザの操作入力に従ってその動画を再生させながら任意に説明噴出しを表示できるようにすればよい。
【図面の簡単な説明】
【００５２】
【図１】（ａ）〜（ｄ）は、スクリーニング・ズーミング用静止画像の編集の説明図    。
【図２】（ａ）〜（ｄ）は、スクリーニング・ズーミング用画像の動画作成の説明図    。
【図３】（ａ）、（ｂ）は、フォーカシング用画像の動画作成の説明図。
【図４】（ａ）〜（ｄ）は、解説付噴出し表示可能なＡＭＩの作成方法の説明図。
【図５】本願発明の一実施形態を示したシステム構成図。
【図６】（ａ）〜（ｄ）は、各々、噴出し説明を表示する場合のコンピュータ画面の        ハードコピー図。
【符号の説明】
【００５３】
１  表示部
２  入力部
３  処理部
４  主記憶部
５  静止画データベース
６  動画データベース
７  説明データベース
８  バス