(57)【要約】【課題】貼り合わせ画像作成中に光学部材を切り替えても、適正な貼り合わせ画像の作成を継続する。【解決手段】標本Ｘを搭載し観察光軸に直交する方向に移動可能なステージ５と、ステージ位置を検出する位置検出部１０と、ステージ５上の標本Ｘを撮影する撮像部７と、取得された画像を検出された位置に基づいて貼り合わせる画像生成部１１と、生成された貼り合わせ画像上における画像の位置をステージ位置として探索する位置探索部１３と、観察光軸上に切替可能に配置された光学部材９の切替を検出する切替検出部１４と、切替を検出した場合に、位置検出部１０で検出されたステージ位置と位置探索部１３で探索されたステージ位置との差分に基づいて位置検出部１０が検出するステージ位置が位置探索部１３で探索されたステージ位置に一致するようにステージ位置を補正する制御部１５とを備える顕微鏡システム１を提供する。【選択図】図１
2018066845.tif 000002
【特許請求の範囲】
【請求項１】
標本を搭載し観察光軸に直交する方向に移動可能なステージと、
該ステージの位置を検出する位置検出部と、
前記ステージ上の前記標本を撮影する撮像部と、
該撮像部により取得された画像を前記位置検出部で検出された位置に基づいて貼り合わせて貼り合わせ画像を生成する画像生成部と、
該画像生成部により生成された前記貼り合わせ画像上における前記撮像部により取得された前記画像の位置をステージ位置として探索する位置探索部と、
前記観察光軸上に切替可能に配置された光学部材の切替を検出する切替検出部と、
前記切替検出部が前記光学部材の切替を検出した場合に、前記位置検出部で検出されたステージ位置と前記位置探索部で探索されたステージ位置との差分を算出し、算出された該差分に基づいて前記位置検出部が検出するステージ位置が前記位置探索部で探索されたステージ位置に一致するように前記位置検出部が検出するステージ位置を補正する制御部とを備える顕微鏡システム。
【請求項２】
前記位置探索部が、前記光学部材の切替直前の位置を中心とした所定の範囲に探索範囲を限定する請求項１に記載の顕微鏡システム。
【請求項３】
前記制御部は、前記切替検出部が前記光学部材の切替開始を検出すると、前記画像生成部による貼り合わせ処理を停止し、前記切替検出部が前記光学部材の切替完了を検出すると、前記画像生成部による前記貼り合わせ処理を再開する請求項１または請求項２に記載の顕微鏡システム。
【請求項４】
前記観察光軸上の光学倍率を検出する倍率検出部と、
前記撮像部により取得された前記画像を所定の拡縮倍率で拡縮する画像スケール部とをさらに備え、
前記画像生成部が、前記画像スケール部により拡縮された画像を貼り合わせ、
前記位置探索部が、前記画像スケール部により拡縮された前記画像を前記貼り合わせ画像上から探索し、
前記制御部が、前記倍率検出部から得られる前記光学部材の切替前後の倍率比から前記画像スケール部の拡縮倍率を算出する請求項１から請求項３のいずれかに記載の顕微鏡システム。
【請求項５】
前記撮像部が所定のフレームレートで複数の画像を取得し、
前記位置検出部が、前記撮像部により連続して取得された前記画像間の移動量を算出し、該移動量を累積加算することでステージ位置を検出する請求項１から請求項４のいずれかに記載の顕微鏡システム。
【請求項６】
前記撮像部が所定のフレームレートで複数の画像を取得し、
前記切替検出部が、前記撮像部により連続して取得された前記画像間の明るさの変化から前記光学部材の切替を検出する請求項１から請求項５のいずれかに記載の顕微鏡システム。
【請求項７】
各フレームにおける前記位置検出部のステージ位置と前記切替検出部の検出結果とを記録する軌跡記録部を備え、
前記制御部が、前記軌跡記録部に記録された情報から前記光学部材の切替直前のステージ位置を探索し、探索されたステージ位置を中心とした所定のサイズの範囲に前記位置探索部で探索を行う際の探索範囲を限定する請求項１から請求項６のいずれかに記載の顕微鏡システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、顕微鏡システムに関するものである。
【背景技術】
【０００２】
顕微鏡を用いて標本を観察する場合に、一度に観察できる視野は、主として対物レンズの倍率によって決定される。対物レンズが高倍率になるに従って、標本のより微細な構造を観察できるようになる反面、観察範囲が狭くなってしまう。
【０００３】
一方、標本の全体構造を把握したいという要請もある。そこで、電動ステージやエンコーダ付きステージを装備し、ステージの移動と撮影とを繰り返し、取得した複数の画像を貼り合わせて広画角の貼り合わせ画像を生成する顕微鏡システム、いわゆるバーチャルスライドシステムが知られている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−１３４３７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の顕微鏡システムにおいて、貼り合わせ画像生成中に対物レンズ等の光学部材を切り替えると、光学部材の芯ズレによって、それまでの貼り合わせ画像に対して位置ズレが発生し、光学部材の切替後に正確な貼り合わせができなくなってしまうという不都合がある。
さらに、ステージの位置と光学部材の切替検出をカメラ等の撮像装置から得られる画像情報から検出する場合には、光学部材を切り替える際に観察像が動いて、正しいステージ位置が分からなくなり、光学部材の切替後に貼り合わせができなくなってしまうという問題もある。
【０００６】
本発明は、上述した事情に鑑みてなされたものであって、貼り合わせ画像作成中に光学部材を切り替えても、適正な貼り合わせ画像の作成を継続することができる顕微鏡システムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明は以下の手段を提供する。
本発明の一態様は、標本を搭載し観察光軸に直交する方向に移動可能なステージと、該ステージの位置を検出する位置検出部と、前記ステージ上の前記標本を撮影する撮像部と、該撮像部により取得された画像を前記位置検出部で検出された位置に基づいて貼り合わせて貼り合わせ画像を生成する画像生成部と、該画像生成部により生成された前記貼り合わせ画像上における前記撮像部により取得された前記画像の位置をステージ位置として探索する位置探索部と、前記観察光軸上に切替可能に配置された光学部材の切替を検出する切替検出部と、前記切替検出部が前記光学部材の切替を検出した場合に、前記位置検出部で検出されたステージ位置と前記位置探索部で探索されたステージ位置との差分を算出し、算出された該差分に基づいて前記位置検出部が検出するステージ位置が前記位置探索部で探索されたステージ位置に一致するように前記位置検出部が検出するステージ位置を補正する制御部とを備える顕微鏡システムを提供する。
【０００８】
本態様によれば、ステージ上に標本を搭載し、ステージによって標本を観察光軸に直交する方向に移動させながら、撮像部により標本を撮影することによって、標本の画像が取得される。そして、標本の画像が取得される毎に、画像生成部によって、位置検出部により検出されたステージの位置に基づいて、取得された画像が貼り合わせられて貼り合わせ画像が生成される。
【０００９】
この場合において、観察光軸上に配置された光学部材を切り替えると、切替検出部によって光学部材の切替が検出される。切替検出部により光学部材の切替が検出されたときには、位置探索部により、貼り合わせ画像上における撮像部により取得された画像の位置がステージ位置として探索され、制御部において、位置検出部で検出されたステージ位置と位置探索部で探索されたステージ位置との差分が算出される。そして、制御部により、位置検出部が検出するステージ位置が位置探索部で探索されたステージ位置に一致するように補正される。
【００１０】
これにより、貼り合わせ画像作成中に光学部材を切り替えることにより、切替前後の光学部材間の芯ズレが存在していても、適正な貼り合わせ画像の作成を継続することができる。
【００１１】
上記態様においては、前記位置探索部が、前記光学部材の切替直前の位置を中心とした所定の範囲に探索範囲を限定してもよい。
このようにすることで、限定された探索範囲で探索を行うことにより、短時間でステージ位置を探索することができる。
【００１２】
また、上記態様においては、前記制御部は、前記切替検出部が前記光学部材の切替開始を検出すると、前記画像生成部による貼り合わせ処理を停止し、前記切替検出部が前記光学部材の切替完了を検出すると、前記画像生成部による前記貼り合わせ処理を再開してもよい。
このようにすることで、光学部材の切替中には、撮像部により取得される画像が変動するので、貼り合わせ処理を停止することで、変動した画像が貼り合わせられた貼り合わせ画像が生成されることを防止することができる。そして、光学部材の切替完了が検出された後には、貼り合わせ処理を再開させることにより、適正な貼り合わせ画像を生成することができる。
【００１３】
また、上記態様においては、前記観察光軸上の光学倍率を検出する倍率検出部と、前記撮像部により取得された前記画像を所定の拡縮倍率で拡縮する画像スケール部とをさらに備え、前記画像生成部が、前記画像スケール部により拡縮された画像を貼り合わせ、前記位置探索部が、前記画像スケール部により拡縮された前記画像を前記貼り合わせ画像上から探索し、前記制御部が、前記倍率検出部から得られる前記光学部材の切替前後の倍率比から前記画像スケール部の拡縮倍率を算出してもよい。
【００１４】
このようにすることで、観察光軸上に配置されている光学部材が切り替えられると、倍率検出部により観察光軸上の光学倍率が検出され、切替前後の倍率比から算出された拡縮倍率によって、スケール部において撮像部により取得された画像が拡縮される。画像生成部は、拡縮された画像を貼り合わせて貼り合わせ画像を生成するとともに、位置探索部は拡縮された画像を貼り合わせ画像上から探索する。これにより、観察光軸上の光学部材が切り替えられることによって倍率が変動しても、適正な貼り合わせ画像を生成することができる。
【００１５】
また、上記態様においては、前記撮像部が所定のフレームレートで複数の画像を取得し、前記位置検出部が、前記撮像部により連続して取得された前記画像間の移動量を算出し、該移動量を累積加算することでステージ位置を検出してもよい。
このようにすることで、電動ステージやエンコーダ付きステージを用いることなく、撮像部により取得された画像に基づいて、ステージの現在位置を算出することができる。
【００１６】
また、上記態様においては、前記撮像部が所定のフレームレートで複数の画像を取得し、前記切替検出部が、前記撮像部により連続して取得された前記画像間の明るさの変化から前記光学部材の切替を検出してもよい。
このようにすることで、撮像部により連続して取得された画像間の明るさ変化に基づいて光学部材の切替を簡易に検出することができる。すなわち、光学部材を切り替える場合には、光学部材を支持する部材が光軸を横切る結果、画像の明るさが一旦暗くなった後に再度明るくなる。この明るさ変化のパターンにより、特別なセンサを用いることなく簡易に光学部材の切替を検出することができる。
【００１７】
また、上記態様においては、各フレームにおける前記位置検出部のステージ位置と前記切替検出部の検出結果とを記録する軌跡記録部を備え、前記制御部が、前記軌跡記録部に記録された情報から前記光学部材の切替直前のステージ位置を探索し、探索されたステージ位置を中心とした所定のサイズの範囲に前記位置探索部で探索を行う際の探索範囲を限定してもよい。
このようにすることで、光学部材の切替後においても切替直前のステージ位置を軌跡記録部に記録されている情報から迅速に探索することができ、限定された探索範囲で探索を行うことにより、切替後のステージ位置を迅速に探索することができる。
【発明の効果】
【００１８】
本発明によれば、貼り合わせ画像作成中に光学部材を切り替えても、適正な貼り合わせ画像の作成を継続することができるという効果を奏する。
【図面の簡単な説明】
【００１９】
【図１】本発明の第１の実施形態に係る顕微鏡システムを示すブロック図である。
【図２】図１の顕微鏡システムによる処理を説明するフローチャートである。
【図３】図１の顕微鏡システムの変形例により生成された貼り合わせ画像とステージ位置との関係を示す図であり（ａ）検出されたステージ位置、（ｂ）検出されたステージ位置と探索されたステージ位置との関係をそれぞれ示す図である。
【図４】図１の顕微鏡システムの他の変形例により生成された貼り合わせ画像とステージ位置との関係を示す図である。
【図５】本発明の第２の実施形態に係る顕微鏡システムを示すブロック図である。
【図６】図３の顕微鏡システムにより生成された貼り合わせ画像とステージ位置との関係を示した図であり（ａ）検出されたステージ位置、（ｂ）倍率切替後に検出されたステージ位置と探索されたステージ位置との関係をそれぞれ示す図である。
【図７】本発明の第３の実施形態の係る顕微鏡システムを示すブロック図である。
【図８】図７の顕微鏡システムにおいて、軌跡情報を参照し対物レンズ切替直前のステージ位置を探索する処理を説明する図である。
【発明を実施するための形態】
【００２０】
本発明の第１の実施形態に係る顕微鏡システム１について、図面を参照して以下に説明する。
本実施形態に係る顕微鏡システム１は、図１に示されるように、顕微鏡２と、該顕微鏡２により取得された画像を処理する画像処理部３と、該画像処理部３により生成された貼り合わせ画像および顕微鏡２により取得されたライブ画像を表示する表示部（例えば、液晶ディスプレイ）４とを備えている。
【００２１】
顕微鏡２は、搭載した標本Ｘを３次元方向に移動可能なステージ５と、鉛直方向の観察光軸上に配置した対物レンズ６および三眼鏡筒（光学部材）９と、標本Ｘの観察像を撮像するカメラ（撮像部）７とを備えている。また、顕微鏡２にはユーザがステージ５を手動で観察光軸に対して直交する２方向（水平方向）に移動させるために操作する操作部８と、ステージ５の位置をエンコーダで検出する位置検出部１０と、三眼鏡筒９の光路切替をエンコーダで検出する切替検出部１４とを備えている。
【００２２】
カメラ７は、所定のフレームレートで標本Ｘを撮影することによりライブ画像を取得し、ライブ画像を構成する各フレームの画像を画像処理部３に送るようになっている。ここで、ライブ画像とは、連続する複数の表示用フレーム画像によって構成される動画像のことである。
画像処理部３は、例えば、汎用のパーソナルコンピュータやワークステーション、組み込みプロセッサやＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）、ＧＰＧＰＵ（Ｇｅｎｅｒａｌ  Ｐｕｒｐｏｓｅ  Ｃｏｍｐｕｔｉｎｇ  ｏｎ  Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等を用いた計算機である。
【００２３】
画像処理部３は、カメラ７から送られてきた画像を順次貼り合わせて貼り合わせ画像を生成する画像生成部１１と、画像生成部１１により生成された貼り合わせ画像を記憶する記憶部１２と、カメラ７から送られてくる画像の位置を、記憶部１２に記憶されている貼り合わせ画像上から探索する位置探索部１３と、表示部４、位置検出部１０、画像生成部１１および位置探索部１３を制御する制御部１５とを備えている。
【００２４】
また、画像処理部３は、カメラ７から送られてきたライブ画像と、記憶部１２に記録されている貼り合わせ画像と、ステージ位置情報とを表示部４へ送るようになっている。表示部４ではライブ画像と貼り合わせ画像を表示するとともに、貼り合わせ画像上にステージ位置を表す矩形枠を表示するようになっている。
【００２５】
画像生成部１１は、制御部１５からの指令により、カメラ７より取得された画像と、記憶部１２に記憶されている貼り合わせ画像とを、位置検出部１０で検出されたステージ位置に基づいて貼り合わせ、新たな貼り合わせ画像を生成するようになっている。
記憶部１２は、メモリ、ＨＤＤ、ＳＤＤ等の任意の記憶装置であって、画像生成部１１から新たな貼り合わせ画像が送られてくると、記憶している貼り合わせ画像を更新するようになっている。
【００２６】
位置検出部１０は、顕微鏡２のステージ５に搭載されたエンコーダから得られるステージ位置（ｘ，ｙ）を制御部１５に出力するようになっている。位置検出部１０は、任意の補正値（δｘ，δｙ）を制御部１５から与えることができ、位置検出部１０が出力するステージ位置は補正値を加えた（ｘ＋δｘ，ｙ＋δｙ）となる。
【００２７】
位置探索部１３は、制御部１５からの指令により位置探索を実行するようになっている。画像の位置探索には、カメラ７から得られる画像をテンプレートとして、記憶部１２に記憶されている貼り合わせ画像上から探索する、ＳＡＤ（Ｓｕｍ  ｏｆ  Ａｂｕｓｏｌｕｔｅ  Ｄｉｆｆｅｒｅｎｃｅ）やＮＣＣ（Ｎｏｒｍａｌｉｚｅｄ  Ｃｒｏｓｓ−Ｃｏｒｒｅｌａｔｉｏｎ）を評価関数としたテンプレートマッチング／ブロックマッチング、ＰＯＣ（Ｐｈａｓｅ  Ｏｎｌｙ  Ｃｏｒｒｅｌａｔｉｏｎ）などの公知の技術を用いることができる。
【００２８】
切替検出部１４は、三眼鏡筒９の切替開始と切替完了を検出することができ、検出結果を制御部１５に送るようになっている。本実施形態では、顕微鏡２に搭載された物理的なセンサによって三眼鏡筒９の光路切替を検出する場合を例示するが、例えば、ユーザが切替前および切替後にボタン操作等によって切替検出するような構成をとってもよい。
【００２９】
このように構成された本実施形態に係る顕微鏡システム１の作用について以下に説明する。
本実施形態に係る顕微鏡システム１を用いて貼り合わせ画像を生成するには、図２に示されるように、貼り合わせ処理を開始させた後に、カメラ７から最初に送られてきた標本Ｘの観察像が画像生成部１１に送られ、最初の貼り合わせ画像Ｍが生成される（ステップＳ１）。生成された貼り合わせ画像Ｍは、記憶部１２に記録されるとともに、表示部４に表示される（ステップＳ２）。
【００３０】
次に、切替検出部１４により、三眼鏡筒９の切替開始の有無が確認され（ステップＳ３）、切替開始を検出されない場合には、処理を終了するか否かの判定を行い（ステップＳ６）、処理を継続する場合には、ステップＳ１からの処理が繰り返される。
ステップＳ３において、三眼鏡筒９の切替開始が検出された場合には、切替完了まで待機する（ステップＳ４）。
【００３１】
ステップＳ４において、三眼鏡筒９の切替完了が検出された場合には、位置探索部１３によりステージ位置の探索を実施する（ステップＳ５）。
ステップＳ５の位置探索について、図３（ａ）および図３（ｂ）を参照して説明する。
図３（ａ）および図３（ｂ）は、貼り合わせ画像Ｍとステージ位置との関係を示す図である。符号Ｆ１，Ｆ２はカメラ７が観察している観察範囲を示し、Ｆ１の座標（ｘ１，ｙ１）は、位置検出部１０が出力するステージ位置である。
【００３２】
図３（ａ）は、三眼鏡筒９を切り替える前の状態を示している。
この状態から、ユーザが三眼鏡筒９の光路を切り替え、カメラ７と接眼に入射する光量比を変更した場合の貼り合わせ画像Ｍとステージ位置との関係を図３（ｂ）に示す。
【００３３】
三眼鏡筒９の光路を切替えることで、カメラ７から得られる像の位置がＦ２（ｘ２，ｙ２）へずれる。光路切替後、位置検出部１０の位置情報Ｆ１（ｘ１，ｙ１）を使って貼り合わせを行うと、貼り合わせ画像Ｍがずれてしまい正確な貼り合わせ画像が生成できなくなる。
【００３４】
そこで、位置探索部１３で探索したステージ位置Ｆ２（ｘ２，ｙ２）と位置検出部１０で検出したステージ位置Ｆ１（ｘ１，ｙ１）とから、差分（δｘ，δｙ）＝（ｘ２−ｘ１，ｙ２−ｙ１）を補正値として位置検出部１０に指定することで、位置検出部１０が三眼鏡筒９を切り替えた後も、三眼鏡筒９に起因する像ずれの影響を受けずに、正確な貼り合わせを継続することができるという利点がある。
【００３５】
貼り合わせ処理の終了判定（ステップＳ６）は、ステップＳ３またはステップＳ５の後に行うこととしているが、ユーザが貼り合わせ処理を終了したい任意のタイミングで終了できるようにしてもよい。
【００３６】
なお、本実施形態においては、切替検出部１４により検出する光学部材として三眼鏡筒９のみを想定しているが、三眼鏡筒９以外の光学部材（例えば、中間変倍装置など）の切替を検出するようにしてもよい。
また、本実施形態では、カメラ７がライブ画像を画像処理部３に送る構成を例示しているが、静止画を連続して撮影し、取得された複数の静止画像を画像処理部３に送ることにしてもよい。
【００３７】
また、位置探索部１３で位置を探索する際に、図４に示すように位置検出部１０のステージ位置（ｘ１，ｙ１）を中心に、所定のサイズの範囲ＳＡ１に探索範囲を限定して探索を行うようにしてもよい。
これにより、位置探索部１３の位置探索にかかる処理時間が、貼り合わせ画像Ｍのサイズに依存することなく、貼り合わせ画像Ｍのサイズが大きくなっても短時間で位置探索することができて、貼り合わせ画像作成の効率を向上させることができるという利点がある。
【００３８】
次に、本発明の第２の実施形態に係る顕微鏡システム２１について、図面を参照して以下に説明する。
本実施形態の説明において、上述した第１の実施形態に係る顕微鏡システム１と構成を共通とする箇所には同一符号を付して説明を省略する。
【００３９】
本実施形態に係る顕微鏡システム２１においては、三眼鏡筒９に代えて、例えば、対物レンズ（光学部材）６を切り替える場合を例に挙げて説明する。対物レンズ６を切り替えると、観察像の倍率が変わるので、倍率が変わっても貼り合わせが継続できるようなシステムを構成する必要がある。
【００４０】
そこで、図５に示すように、本実施形態に係る顕微鏡システム２１は、光学倍率を検出する倍率検出部１７と、カメラ７により取得された画像を所定の倍率で拡縮する画像スケール部１６とをさらに備えている。
倍率検出部１７は、観察光路に挿入される対物レンズ６のレボルバの穴位置をエンコーダで検出し、あらかじめ設定された穴位置と対物レンズ６の倍率との対応関係から、観察光路に挿入されている対物レンズ６の倍率を検出するようになっている。
【００４１】
画像スケール部１６は、制御部１５から指定された倍率ｍを受け取り、画像をｍ倍に拡縮するようになっている。画像の拡縮処理にはバイリニアやバイキュービックなどの公知の補間方法を用いることができる。
【００４２】
制御部１５は、貼り合わせ画像作成開始時に倍率検出部１７から得られた対物レンズ６の倍率Ｍ１を記憶しており、倍率検出部１７から得られる現在の対物レンズ６の倍率Ｍ２を用いて、ｍ＝Ｍ１／Ｍ２により倍率（拡縮倍率）ｍを算出し、画像スケール部１６に倍率を設定するようになっている。
【００４３】
図６（ａ）および図６（ｂ）に本実施形態に係る顕微鏡システム２１による貼り合わせ画像Ｍとステージ位置との関係を示す。
貼り合わせ画像Ｍの作成開始時に、対物レンズ６の倍率Ｍ１＝１０（１０倍）が設定されていた場合に、ステージ５を動かして貼り合わせ画像Ｍを生成し、貼り合わせ画像Ｍとステージ位置Ｆ１とが図６（ａ）に示す関係にある状態から、ユーザが対物レンズ６の倍率Ｍ２＝２０（２０倍）に変更した場合（図６（ｂ））について説明する。
【００４４】
ユーザが対物レンズ６を切り替え終えたことが切替検出部１４により検出されると、制御部１５は、ｍ＝Ｍ１／Ｍ２＝０．５を画像スケール部１６に設定する。画像スケール部１６はカメラ７から得られる画像を０．５倍、すなわち半分のサイズに縮小した画像を画像生成部１１および位置検出部１０に送る。
【００４５】
位置探索部１３は、貼り合わせ画像Ｍ上において、画像スケール部１６で縮小された画像を用いて位置探索を行い、ステージ位置Ｆ２（ｘ２，ｙ２）を算出する。
その後は上述の第１の実施形態と同様に補正値（δｘ，δｙ）を算出し、補正値を位置検出部１０に設定することで、対物レンズ６の切替後も正しい位置に画像を貼り合わせることができる。
【００４６】
貼り合わせる画像においても、画像スケール部１６において光学倍率を考慮して拡縮されるので、貼り合わせ処理中に光学倍率が変更されても、継続して正確な貼り合わせ画像を作成することができるという利点がある。
【００４７】
次に、本発明の第３の実施形態に係る顕微鏡システム３１について、図面を参照して以下に説明する。
本実施形態の説明において、上述した第１の実施形態に係る顕微鏡システム１と構成を共通とする箇所には同一符号を付して説明を省略する。
【００４８】
上述の実施形態では、顕微鏡２に備えられたエンコーダによってステージ位置の検出と三眼鏡筒９の切替の検出とを行う例を例示した。本実施形態においては、これらに代えて、図７に示されるように、カメラ７から得られる画像情報からステージ位置および対物レンズ（光学部材）６の切替を検出することとしている。
本実施形態の説明において、上述した第１の実施形態に係る顕微鏡システム１と構成を共通とする箇所には同一符号を付して説明を省略する。
【００４９】
本実施形態において、位置検出部１０は、カメラ７から連続して取得された画像間の移動量を算出し、該移動量を累積加算することでステージ位置を検出するようになっている。画像間の移動量の算出には、上述したＳＡＤやＮＣＣを評価関数としたテンプレートマッチング／ブロックマッチング、ＰＯＣなどの公知の技術を用いることができる。
本実施形態の説明において、上述した第１の実施形態に係る顕微鏡システム１と構成を共通とする箇所には同一符号を付して説明を省略する。
【００５０】
切替検出部１４は、例えば、特開２００９−８６３１４号公報に記載の公知の方法を用いて、カメラ７から連続して取得された画像間の明るさの変化から対物レンズ６の切替を検出するようになっている。対物レンズ６が観察光軸に挿脱される際には、対物レンズ６を支持する部材が観察光軸を横切ることになるため明るさが変動する。
【００５１】
これを利用して、画像間の明るさの変化が所定の第１の閾値を越えた場合に、対物レンズ６の切替開始を検出し、その後、画像間の明るさの変化が所定の第２の閾値以内に収まった場合に、対物レンズ６の切替完了を検出することができる。
【００５２】
本実施形態において、画像処理部３は、各フレームにおける位置検出部１０が検出したステージ位置と切替検出部１４の検出結果とを記憶する軌跡記録部１８をさらに備えていてもよい。
制御部１５は、切替検出部１４によって対物レンズ６の切替完了が検出されると、軌跡記録部１８に記録されている情報を参照して、対物レンズ６が切り替わる直前のステージ位置を探索するようになっている。切替直前のステージ位置が発見された場合には、発見されたステージ位置を中心として、所定のサイズの範囲に探索範囲を限定して探索を行うように位置探索部１３を制御するようになっている。
【００５３】
図８を参照して、軌跡記録部１８に記録された情報を参照し、対物レンズ６が切り替わる直前のステージ位置を探索する処理について説明する。
対物レンズ６を切り替える直前にはステージ５が静止しているとすると、カメラ７で取得される画像は静止している（Ａ）。対物レンズ６を切り替える際には、レボルバを回すことで観察像が動き（Ｂ）、その後、観察光路が遮られ画像が暗転し（Ｃ）、次の対物レンズ６が観察光軸に挿入されると、カメラ７の自動露出制御により画像の明るさが調整され、明るさが変動しながら安定し（Ｄ）、その後、静止した画像が取得される（Ｅ）。
【００５４】
切替検出部１４は、暗転したタイミングで対物レンズ６の切替（以下、対物切替という。）開始を検出し（Ｄｅｔ１）、画像の明るさが安定したタイミングで対物切替完了を検出する（Ｄｅｔ２）。
制御部１５は、対物切替が完了したタイミング（Ｄｅｔ２）から、軌跡記録部１８に記録された情報を参照し、図８に示すように過去に遡って、対物切替開始のタイミング（Ｄｅｔ１）を探索する。そして、さらに過去に遡り、対物切替直前のタイミング（Ｐｒｅ）を探索する。
【００５５】
切替直前のタイミングは、軌跡記録部１８に記録されたフレーム間のステージ５の移動量が所定の閾値以下になったタイミングで検出することができる。また、そのタイミングでのステージ位置を、対物レンズ６の切替直前のステージ位置として探索することができる。
【００５６】
本実施形態に係る顕微鏡システム３１によれば、画像情報を用いてステージ位置および対物レンズ６の切替を検出する場合において、貼り合わせ画像Ｍのサイズが大きくなっても短時間で位置探索することができ、貼り合わせ画像作成の効率を向上させることができるという利点がある。
【符号の説明】
【００５７】
１，２１，３１  顕微鏡システム
５  ステージ
６  対物レンズ（光学部材）
７  カメラ（撮像部）
９  三眼鏡筒（光学部材）
１０  位置検出部
１１  画像生成部
１３  位置探索部
１４  切替検出部
１５  制御部
１６  画像スケール部
１７  倍率検出部
１８  軌跡記録部
Ｍ  貼り合わせ画像
Ｘ  標本
【図１】
2018066845.tif 000003
【図２】
2018066845.tif 000004
【図３】
2018066845.tif 000005
【図４】
2018066845.tif 000006
【図５】
2018066845.tif 000007
【図６】
2018066845.tif 000008
【図７】
2018066845.tif 000009
【図８】
2018066845.tif 000010