(57)【要約】【課題】顕微鏡画像の表示位置を変えるためになされた入力に応じて、顕微鏡の標本台を水平方向に適切に移動させることが可能なコンピュータ装置を提供する。【解決手段】コンピュータ装置は、顕微鏡によって形成された画像に対応する顕微鏡画像を表示させる表示制御手段と、顕微鏡画像の表示位置を変えるために当該顕微鏡画像に対してなされた指示入力に基づいて、顕微鏡の標本台を水平方向に移動させる制御を行う駆動制御手段と、を備える。このように標本台を水平方向に移動させることで、顕微鏡画像を所望の位置に適切に表示させることができる。【選択図】図１
2014026208.tif 000002
【特許請求の範囲】
【請求項１】
顕微鏡によって形成された画像に対応する顕微鏡画像を表示させる表示制御手段と、
前記顕微鏡画像の表示位置を変えるために当該顕微鏡画像に対してなされた指示入力に基づいて、前記顕微鏡の標本台を水平方向に移動させる制御を行う駆動制御手段と、を備えることを特徴とするコンピュータ装置。
【請求項２】
前記指示入力は、前記顕微鏡画像に対して記入されたストロークを含む入力であり、
前記駆動制御手段は、前記顕微鏡画像の表示位置が前記ストロークに応じて移動するように、前記標本台を水平方向に移動させることを特徴とする請求項１に記載のコンピュータ装置。
【請求項３】
前記指示入力は、前記顕微鏡画像上で指示された起点位置及び終点位置を含む入力であり、
前記駆動制御手段は、前記顕微鏡画像の表示位置が前記起点位置から前記終点位置に向かって移動するように、前記標本台を水平方向に移動させることを特徴とする請求項１に記載のコンピュータ装置。
【請求項４】
前記表示制御手段は、前記顕微鏡画像に対して記入されたストローク又は文字に対応する記入画像を当該顕微鏡画像上に表示させると共に、前記駆動制御手段による前記標本台の移動に応じて、前記記入画像の表示位置を移動させることを特徴とする請求項１乃至３のいずれか一項に記載のコンピュータ装置。
【請求項５】
前記表示制御手段は、前記顕微鏡画像に対して記入されたストローク又は文字に対応する記入画像を当該顕微鏡画像上に表示させると共に、前記顕微鏡画像に対してなされた前記指示入力に応じて、前記記入画像の表示位置を移動させることを特徴とする請求項１乃至３のいずれか一項に記載のコンピュータ装置。
【請求項６】
顕微鏡によって形成された画像に対応する顕微鏡画像を表示させると共に、前記顕微鏡画像に対して記入されたストローク又は文字に対応する記入画像を当該顕微鏡画像上に表示させる表示制御手段と、
前記顕微鏡画像の表示態様を変更するために当該顕微鏡画像に対してなされた指示入力に基づいて、前記顕微鏡を制御する駆動制御手段と、を備え、
前記表示制御手段は、前記駆動制御手段による制御に応じて、前記記入画像の表示態様を変更することを特徴とするコンピュータ装置。
【請求項７】
前記駆動制御手段は、前記顕微鏡の対物レンズを切り替える制御、及び／又は前記顕微鏡のカメラのズームを調整する制御を行い、
前記表示制御手段は、前記駆動制御手段による前記対物レンズを切り替える制御及び／又は前記カメラのズームを調整する制御に応じて、前記記入画像を拡大又は縮小して表示させることを特徴とする請求項６に記載のコンピュータ装置。
【請求項８】
請求項１乃至７のいずれか一項に記載のコンピュータ装置として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータ装置によって顕微鏡を制御する技術分野に関する。
【背景技術】
【０００２】
従来から、記入した情報を電子化する電子ペンが開発されており、その代表的なものとしてスウェーデンのＡｎｏｔｏ社が開発した「アノトペン（Ａｎｏｔｏ  ｐｅｎ）」が知られている。例えば、特許文献１には、アノトペンが、用紙に印刷された所定のドットパターンを読み取って記入情報を生成し、当該記入情報を端末装置に送信することが記載されている。また、特許文献２には、ドットパターンに対向する電子ペンの角度に起因するドットの画像上の配列を補正する回転補正処理機能が記載されている。
【０００３】
その他にも、本発明に関連する技術が特許文献３乃至５に開示されている。特許文献３には、顕微鏡画像をパソコン画面に表示するシステムが開示されている。特許文献４には、回転可能なレボルバに複数の対物レンズを設け、レボルバの回転を検知して、対物レンズの位置を検知する顕微鏡が開示されている。特許文献５には、ディスプレイ上での指示により、標本台（ステージ）を水平方向・上下方向に移動させたり、レボルバを駆動させて対物レンズを切り替えたりすることが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第３８７２４９８号公報
【特許文献２】特表２００３−５２９８５３号公報
【特許文献３】特表２００２−５０７７８０号公報
【特許文献４】特公平８−１６７３６号公報
【特許文献５】特開２０１１−２４２６００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、画面上に表示された顕微鏡画像への入力に応じて、顕微鏡に対して所望の制御を行うことができれば便宜である。例えば、顕微鏡画像の表示位置を変えるためになされた入力に応じて、顕微鏡の標本台を水平方向に移動させることができれば便宜である。そこで、本発明は、顕微鏡画像の表示位置を変えるためになされた入力に応じて、顕微鏡の標本台を水平方向に適切に移動させることが可能なコンピュータ装置及びプログラムを提供することを主な目的とする。
【課題を解決するための手段】
【０００６】
本発明の１つの観点では、コンピュータ装置は、顕微鏡によって形成された画像に対応する顕微鏡画像を表示させる表示制御手段と、前記顕微鏡画像の表示位置を変えるために当該顕微鏡画像に対してなされた指示入力に基づいて、前記顕微鏡の標本台を水平方向に移動させる制御を行う駆動制御手段と、を備える。
【０００７】
上記のコンピュータ装置では、表示制御手段は、顕微鏡によって形成された画像をカメラにて撮影することで生成された画像データが入力され、当該画像データにより顕微鏡画像を表示させる。駆動制御手段は、顕微鏡画像の表示位置を変えるために当該顕微鏡画像に対してなされた指示入力に基づいて、顕微鏡の標本台を水平方向に移動させる制御を行う。これにより、顕微鏡画像を所望の位置に適切に表示させることができる。
【０００８】
上記のコンピュータ装置の一態様では、前記指示入力は、前記顕微鏡画像に対して記入されたストロークを含む入力であり、前記駆動制御手段は、前記顕微鏡画像の表示位置が前記ストロークに応じて移動するように、前記標本台を水平方向に移動させる。
【０００９】
この態様では、駆動制御手段は、顕微鏡画像に対して記入されたストロークに応じて、標本台を水平方向に移動させる。これにより、記入されたストロークに合わせて顕微鏡画像の表示位置を適切に移動させることができる。例えば、ストロークに追従するように顕微鏡画像の表示位置を移動させることができる。
【００１０】
上記のコンピュータ装置の他の一態様では、前記指示入力は、前記顕微鏡画像上で指示された起点位置及び終点位置を含む入力であり、前記駆動制御手段は、前記顕微鏡画像の表示位置が前記起点位置から前記終点位置に向かって移動するように、前記標本台を水平方向に移動させる。
【００１１】
この態様では、駆動制御手段は、顕微鏡画像上で指示された起点位置及び終点位置に応じて、標本台を水平方向に移動させる。これにより、顕微鏡画像の表示位置を起点位置から終点位置に向かって適切に移動させることができる。
【００１２】
上記のコンピュータ装置の他の一態様では、前記表示制御手段は、前記顕微鏡画像に対して記入されたストローク又は文字に対応する記入画像を当該顕微鏡画像上に表示させると共に、前記駆動制御手段による前記標本台の移動に応じて、前記記入画像の表示位置を移動させる。
【００１３】
この態様では、表示制御手段は、駆動制御手段による標本台の移動に応じて、記入画像の表示位置を移動させる。これにより、標本台の移動による顕微鏡画像の表示位置の移動に合わせて、記入画像の表示位置を適切に移動させることが可能となる。よって、標本台の移動中に、顕微鏡画像と記入画像との相対的な表示位置の関係がずれてしまうことを適切に抑制することが可能となる。
【００１４】
上記のコンピュータ装置において好適には、前記表示制御手段は、前記顕微鏡画像に対して記入されたストローク又は文字に対応する記入画像を当該顕微鏡画像上に表示させると共に、前記顕微鏡画像に対してなされた前記指示入力に応じて、前記記入画像の表示位置を移動させることができる。顕微鏡画像の表示位置を変えるための指示入力に対してほとんど遅れることなく標本台を移動させることができるような構成であれば、指示入力に応じて記入画像の表示位置を移動させても、顕微鏡画像と記入画像との相対的な表示位置関係のずれはほとんど生じないため、指示入力に応じて記入画像の表示位置を移動させると良い。
【００１５】
本発明の他の観点では、顕微鏡によって形成された画像に対応する顕微鏡画像を表示させると共に、前記顕微鏡画像に対して記入されたストローク又は文字に対応する記入画像を当該顕微鏡画像上に表示させる表示制御手段と、前記顕微鏡画像の表示態様を変更するために当該顕微鏡画像に対してなされた指示入力に基づいて、前記顕微鏡を制御する駆動制御手段と、を備え、前記表示制御手段は、前記駆動制御手段による制御に応じて、前記記入画像の表示態様を変更する。
【００１６】
上記のコンピュータ装置では、駆動制御手段は、顕微鏡画像の表示態様を変更するために当該顕微鏡画像に対してなされた指示入力に基づいて顕微鏡を制御し、表示制御手段は、駆動制御手段による制御に応じて記入画像の表示態様を変更する。これにより、駆動制御手段による制御に応じた態様で記入画像を適切に表示させることができる。
【００１７】
上記のコンピュータ装置の一態様では、前記駆動制御手段は、前記顕微鏡の対物レンズを切り替える制御、及び／又は前記顕微鏡のカメラのズームを調整する制御を行い、前記表示制御手段は、前記駆動制御手段による前記対物レンズを切り替える制御及び／又は前記カメラのズームを調整する制御に応じて、前記記入画像を拡大又は縮小して表示させる。これにより、駆動制御手段の制御による変更後の倍率に応じて、記入画像の表示サイズを適切に拡大又は縮小させることができる。
【００１８】
本発明の他の観点では、プログラムは、上記コンピュータ装置として機能させる。当該プログラムを実行することにより、上記のコンピュータ装置を実現することができる。
【発明の効果】
【００１９】
本発明によれば、顕微鏡の標本台を水平方向に移動させることで、顕微鏡画像を所望の位置に適切に表示させることができる。
【図面の簡単な説明】
【００２０】
【図１】本実施形態に係る情報処理システムのシステム構成図である。
【図２】顕微鏡の構造を示す概略図である
【図３】ドットパターンにおけるドットの配置と変換される値との関係を示す説明図である。
【図４】（ａ）はドットパターンを模式的に示し、（ｂ）はそれに対応する情報の例を示す図である。
【図５】電子ペンの構造を示す概略図である。
【図６】コンピュータ装置の機能ブロック図である。
【図７】ストローク描画ボタンが選択された場合の表示画面例を示す。
【図８】自由移動ボタンが選択された場合の表示画面例を示す。
【図９】本実施形態に係る処理フローを示す。
【図１０】変形例３において自由移動ボタンが選択された場合の表示画面例を示す。
【発明を実施するための形態】
【００２１】
以下、図面を参照しながら、本発明の実施の形態について説明する。
［情報処理システムの構成］
図１は、本実施形態に係る情報処理システム１０のシステム構成図である。図１に示すように、情報処理システム１０は、先生などのユーザが使用する電子ペン１と、電子ペン１から記入情報などを受信して種々の処理を行うコンピュータ装置２と、コンピュータ装置２と接続され、レンズによって微小な物体を視覚的に拡大すると共に、レンズによって拡大することで形成された画像のデータをコンピュータ装置２に出力する顕微鏡３と、コンピュータ装置２と接続され、そのディスプレイの表示画面と同じ画像をドットスクリーン５に投影するプロジェクタ４と、ドットパターンが印刷されたドットスクリーン５とを備える。
【００２２】
電子ペン１は、アノトペンなどを利用することができ、ドットパターン（コード化パターン）を読み取って記入情報を生成する。電子ペン１は、生成した記入情報を、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線通信方式でコンピュータ装置２に送信する。ドットスクリーン５の表面には、電子ペン１により読み取り可能な、ドットパターン（コード化パターン）が形成されている。
【００２３】
顕微鏡３は、レンズによって拡大した画像に対応する画像データをコンピュータ装置２に出力する。また、顕微鏡３は、顕微鏡３内の構成要素を制御するための制御信号がコンピュータ装置２から入力される。つまり、顕微鏡３は、コンピュータ装置２によって種々の制御が行われる。
【００２４】
コンピュータ装置２は、顕微鏡３から入力された画像データに対応する画像（顕微鏡画像）を、プロジェクタ４によりドットスクリーン５に投影表示させる。また、コンピュータ装置２は、顕微鏡画像が表示されたドットスクリーン５上でユーザが電子ペン１によって記入することで入力した指示を含む記入情報に基づいて、顕微鏡３に対する制御を行う。具体的には、ユーザは、顕微鏡画像上に電子ペン１を用いて記入を行うことで、顕微鏡画像の表示態様を変更させるための指示を入力し、コンピュータ装置２は、電子ペン１によって生成された記入情報に含まれる指示に応じた顕微鏡画像の表示態様を実現すべく、顕微鏡３に対して制御信号を出力する。
【００２５】
［顕微鏡］
次に、図２を参照して、顕微鏡３について説明する。図２は、顕微鏡３の構造を示す概略図である。顕微鏡３は、主に、接眼レンズ３ａと、それぞれで倍率が異なる複数の対物レンズ３ｂと、接眼レンズ３ａ及び対物レンズ３ｂによって拡大された画像を撮影するカメラ３ｃと、複数の対物レンズ３ｂを保持すると共に本体に対して回転可能なレボルバ３ｄと、プレパラート３ｆが載置される標本台（ステージ）３ｅと、標本（試料）がスライドグラス上に載置されたプレパラート３ｆ（標本がスライドグラスとカバーグラスとの間に挟みこまれたものをプレパラート３ｆとしても良い）と、標本台３ｅを移動可能に構成されたアクチュエータ３ｇと、レボルバ３ｄを回転駆動可能に構成されたアクチュエータ３ｈとを備える。
【００２６】
カメラ３ｃは、接眼レンズ３ａ及び対物レンズ３ｂによって形成された画像を撮影し、撮影によって生成された画像データを画像信号Ｓ１としてコンピュータ装置２に出力する。また、カメラ３ｃは、ズーム機能を有しており、コンピュータ装置２から入力される制御信号Ｓ２によってズームの調整が行われる。コンピュータ装置２は、顕微鏡画像に対して適用される倍率を変化させるべく、カメラ３ｃに対して制御信号Ｓ２を出力してズームの調整を行う。なお、コンピュータ装置２には、カメラ３ｃのズーム機能により倍率が調整された画像信号Ｓ１が入力される。
【００２７】
アクチュエータ３ｇは、電動モータなどを有し、標本台３ｅをＸ方向及びＹ方向（つまり水平方向）並びにＺ方向（つまり上下方向）に移動可能に構成され、コンピュータ装置２から入力される制御信号Ｓ３によって制御が行われる。標本台３ｅがＸ方向及び／又はＹ方向に移動された場合には、画面上での顕微鏡画像の表示位置が変化する。コンピュータ装置２は、顕微鏡画像を所望の位置に表示させるべく、アクチュエータ３ｇに対して制御信号Ｓ３を出力することで、アクチュエータ３ｇによって標本台３ｅをＸ方向及び／又はＹ方向に移動させる。他方で、標本台３ｅがＺ方向に移動された場合には、フォーカス（ピント）が変化する。コンピュータ装置２は、ピントを合わせるべく、アクチュエータ３ｇに対して制御信号Ｓ３を出力することで、アクチュエータ３ｇによって標本台３ｅをＺ方向に移動させる。
【００２８】
アクチュエータ３ｈは、電動モータなどを有し、レボルバ３ｄを回転させることで対物レンズ３ｂを切り替えることが可能に構成され、コンピュータ装置２から入力される制御信号Ｓ４によって制御が行われる。コンピュータ装置２は、顕微鏡３の倍率を所望の倍率に設定すべく、アクチュエータ３ｈに対して制御信号Ｓ４を出力することで、アクチュエータ３ｈによって対物レンズ３ｂを切り替える。
【００２９】
［ドットパターン］
次に、図３及び図４を参照しながら、ドットスクリーン５に印刷されたアノト方式のドットパターン（コード化パターン）について説明する。図３は、ドットスクリーン５に印刷されたドットパターンのドットと、そのドットが変換される値との関係を説明する図である。図３に示すように、ドットパターンの各ドットは、その位置によって所定の値に対応付けられている。すなわち、ドットの位置を格子の基準位置（縦線及び横線の交差点）から上下左右のどの方向にシフトするかによって、各ドットは、０〜３の値に対応付けられている。また、各ドットの値は、さらに、Ｘ座標用の第１ビット値及びＹ座標用の第２ビット値に変換できる。このようにして対応付けられた情報の組み合わせにより、ドットスクリーン５上の位置座標が決定されるように構成されている。
【００３０】
図４（ａ）は、あるドットパターンの配列を示している。図４（ａ）に示すように、縦横約２ｍｍの範囲内に６×６個のドットが、ドットスクリーン５上のどの部分から６×６ドットを取っても、ユニークなパターンとなるように配置されている。これら３６個のドットにより形成されるドットパターンは位置座標（例えば、そのドットパターンがドットスクリーン５上のどの位置にあるのか）を保持している。図４（ｂ）は、図４（ａ）に示す各ドットを、格子の基準位置からのシフト方向によって、図３に示す規則性に基づいて、対応づけられた値に変換したものである。この変換は、ドットパターンの画像を撮影する電子ペン１によって行われる。
【００３１】
［電子ペン］
次に、電子ペン１について図５を用いて説明する。図５は、電子ペン１の構造を示す概略図である。図５に示すように、電子ペン１は、その筐体１０１の内部に、ペン部１０４、ＬＥＤ１０５、ＣＭＯＳカメラ１０６、圧力センサ１０７、ＣＰＵ等により構成されるプロセッサ１０８、ＲＯＭやＲＡＭといったメモリ１０９、リアルタイムクロック１１０、アンテナ等により構成される通信ユニット１１１、及びバッテリー１１２を備える。
【００３２】
ペン部１０４の先端はペン先部１０３となっており、ユーザ（先生など）は、電子ペン１のペン先部１０３をドットスクリーン５に当接させて、ドットスクリーン５にストローク（手書きストローク）を記入したり、電子ペン１のペン先部１０３をドットスクリーン５に当接させてタップ（ペン先部１０３による軽叩）したりする。ここで、電子ペン１のペン先部１０３がドットスクリーン５に接触することをペンダウンと呼び、接触している（当接している）状態からペン先部１０３が離れることをペンアップと呼ぶ。電子ペン１のペンダウンからペンアップまでの間に記入される軌跡が１つのストロークとなり、文字や図形等は、１つ又は複数個のストロークからなる。
【００３３】
バッテリー１１２は電子ペン１内の各部品に電力を供給するためのものであり、例えば電子ペン１のキャップ（図示せず）の脱着により電子ペン１自体の電源のオン／オフを行うよう構成させてもよい。リアルタイムクロック１１０は、現在時刻（タイムスタンプ）を示す時刻情報を発信し、プロセッサ１０８に供給する。圧力センサ１０７は、ユーザが電子ペン１によりドットスクリーン５にストロークを記入したりタップしたりする際にペン先部１０３からペン部１０４を通じて与えられる圧力、即ち筆圧を検出し、その値をプロセッサ１０８へ伝送する。なお、ペン先部１０３は、インクを有さず、ペン部１０４を介して圧力センサ１０７に筆圧を伝達する。
【００３４】
プロセッサ１０８は、圧力センサ１０７から与えられる筆圧データに基づいて、ＬＥＤ１０５及びＣＭＯＳカメラ１０６のスイッチのオン／オフを切替える。即ち、ユーザが電子ペン１によりドットスクリーン５にストロークを記入したりタップしたりすると、ペン先部１０３に筆圧がかかり、圧力センサ１０７によって所定値以上の筆圧が検出されたときに、プロセッサ１０８は、ユーザが記入を開始したと判定して、ＬＥＤ１０５及びＣＭＯＳカメラ１０６を作動させる。そして、通信ユニット１１１が、圧力センサ１０７により検出されたペンダウン情報ＰＤと、後述するペンＩＤとを関連付けて、記入情報としてコンピュータ装置２へ送信する。また、ユーザが１つのストロークを記入し終えて電子ペン１をドットスクリーン５から離すと、圧力センサ１０７は、所定値以上の筆圧が検出されなくなることでペンアップを検出する。すると、通信ユニット１１１が、圧力センサ１０７により検出されたペンアップ情報とペンＩＤとを関連付けて、記入情報としてコンピュータ装置２へ送信する。
【００３５】
ＬＥＤ１０５とＣＭＯＳカメラ１０６は、電子ペン１のペン先部１０３付近に取り付けられており、筐体１０１におけるＬＥＤ１０５及びＣＭＯＳカメラ１０６と対向する部分には、開口部１０２が形成されている。ＬＥＤ１０５は、ドットスクリーン５上のペン先部１０３近傍に向けて赤外線を照明する。その領域は、ペン先部１０３がドットスクリーン５に接触する位置とはわずかにずれている。ＣＭＯＳカメラ１０６は、赤外線を透過し赤外線以外を遮断する赤外線透過フィルタが設けられており、ＬＥＤ１０５によって照明された領域内におけるドットパターンを撮影し、そのドットパターンの画像データをプロセッサ１０８に供給する。ここで、カーボンは赤外線を吸収するため、ＬＥＤ１０５によって照射された赤外線は、ドットに含まれるカーボンによって吸収される。そのため、ドットの部分は、赤外線の反射量が少なく、ドット以外の部分は赤外線の反射量が多い。ＣＭＯＳカメラ１０６の撮影により、赤外線の反射量の違いから閾値を設けることによって、カーボンを含むドットの領域とそれ以外の領域を区別することができる。したがって、ドットスクリーン５に文字や枠線などが印刷されていた場合でも、印刷したインクは赤外域に吸収性を持たないため、プロセッサ１０８は、ドットパターンを認識することができる。なお、ＣＭＯＳカメラ１０６による撮影領域は、図４（ａ）に示すような約２ｍｍ×約２ｍｍの大きさを含む範囲であり、ＣＭＯＳカメラ１０６の撮影は毎秒５０〜１００回程度の定間隔で行われる。また、ＣＭＯＳカメラ１０６は、ドットを鮮明に撮影するため、十分な被写界深度を有している。
【００３６】
プロセッサ１０８は、ユーザの記入が行われる間、ＣＭＯＳカメラ１０６によって供給される画像データのドットパターンから、ユーザが記入するストローク（筆跡）のドットスクリーン５上におけるＸ、Ｙ座標（以後、単に「位置座標」または「座標情報」とも呼ぶ。）を連続的に演算していく。すなわち、プロセッサ１０８は、ＣＭＯＳカメラ１０６によって供給される、図４（ａ）に示されるようなドットパターンの画像データを図４（ｂ）に示すデータ配列に変換し、さらに、Ｘ座標ビット値・Ｙ座標ビット値に変換して、そのデータ配列から所定の演算方法によりＸ、Ｙ座標データを演算する。なお、プロセッサ１０８は、ドットパターンに対向する電子ペン１の角度に起因するドットの画像上の配列を補正する回転補正処理機能を備えており、座標演算の際、その機能を発揮させる。そして、プロセッサ１０８は、リアルタイムクロック１１０から発信される現在時刻（タイムスタンプ：記入された時刻情報）、筆圧データ及びＸ、Ｙ座標データを関連付ける。以後、これらの関連付けたデータを、まとめて「座標属性情報」と呼ぶ。なお、ドットスクリーン５における６×６のドットパターンは、ドットスクリーン５内で重複することはないため、ユーザが電子ペン１で文字等を記入すると、記入された位置がドットスクリーン５のどの位置に当たるかを、プロセッサ１０８による座標演算により特定することができる。
【００３７】
メモリ１０９には、電子ペン１を識別するための「ｐｅｎ０１」といったペンＩＤ、ペン製造者番号、ペンソフトウェアのバージョン等のプロパティ情報が記憶されている。そして、通信ユニット１１１は、ペンＩＤと、時刻情報（タイムスタンプ）と、筆圧データと、Ｘ、Ｙ座標データとを関連付けて、記入情報としてコンピュータ装置２へ送信する。通信ユニット１１１によるコンピュータ装置２への送信は、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの無線送信によって、即時的かつ逐次的に行われる。ここで、電子ペン１のペンダウンからペンアップまでの間に生成されてコンピュータ装置２に送信された１個又は複数個の座標属性情報は、コンピュータ装置２によりストローク情報として記憶される。換言すると、１つのストロークは、１個又は複数個のＸ、Ｙ座標（座標点）からなり、コンピュータ装置２は、ペンダウン情報及びペンアップ情報によって、１つのストロークを構成する１個又は複数個の座標属性情報を認識する。
【００３８】
［コンピュータ装置］
次に、コンピュータ装置２について説明する。コンピュータ装置２は、ハードウェアとして、電子ペン１とのデータ通信が可能なアンテナ装置、ＣＰＵ等のプロセッサ、ＲＯＭやＲＡＭといったメモリ、ディスプレイ、マウスやキーボード等で構成される。例えば、コンピュータ装置２は、タブレットＰＣや、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄａｔａ  Ａｓｓｉｓｔａｎｃｅ）、またはディスプレイを備えるＰＣ（パーソナルコンピュータ）などで構成される。
【００３９】
図６は、コンピュータ装置２の機能ブロック図である。コンピュータ装置２は、機能的には、マウスやキーボードといった入力手段２１、受信手段２２、処理手段２４、記憶手段２５、表示手段２６、インターフェース２７ａ、２７ｂ、インターフェース２８を備える。受信手段２２は、アンテナ受信回路等により構成され、電子ペン１から記入情報を受信し、受信した記入情報を処理手段２４に伝送する。表示手段２６は、ディスプレイ等によって構成され、処理手段２４によって指示された内容を表示する。
【００４０】
インターフェース２７ａ、２７ｂは、顕微鏡３と接続するためのインターフェースである。具体的には、インターフェース２７ａは、顕微鏡３のカメラ３ｃによって撮影された画像についての画像信号Ｓ１が入力され、当該画像信号Ｓ１に対応する画像データを処理手段２４に伝送する。また、インターフェース２７ａは、処理手段２４によって生成された、カメラ３ｃのズームの調整を行うための制御信号Ｓ２を、カメラ３ｃに出力する。
【００４１】
インターフェース２７ｂは、処理手段２４によって生成された制御信号Ｓ３、Ｓ４のそれぞれを、アクチュエータ３ｇ、３ｈに出力する。具体的には、インターフェース２７ｂは、標本台３ｅをＸ方向、Ｙ方向及びＺ方向に移動させるための制御信号Ｓ３を、アクチュエータ３ｇに出力する。また、インターフェース２７ｂは、対物レンズ３ｂを切り替えるべく、レボルバ３ｄを回転させるための制御信号Ｓ４を、アクチュエータ３ｈに出力する。
【００４２】
なお、２つのインターフェース２７ａ、２７ｂを用いて顕微鏡３と接続することに限定はされず、１つのインターフェースのみを用いて顕微鏡３と接続しても良い。１つのインターフェースのみを用いる場合には、当該インターフェースは、顕微鏡３から画像信号Ｓ１が入力されると共に、顕微鏡３に制御信号Ｓ２、Ｓ３、Ｓ４を出力する。
【００４３】
インターフェース２８は、プロジェクタ４と接続するためのインターフェースである。インターフェース２８は、処理手段２４の処理命令に基づき、表示手段２６に画像を表示するための画像信号をプロジェクタ４に送信し、表示手段２６の画像と同じ画像を同期して投影させる。
【００４４】
記憶手段２５は、ハードディスクやＲＯＭ、ＲＡＭといったメモリによって構成される。記憶手段２５は、ドットスクリーン５に割り当てられ印刷されたドットパターンの座標範囲に関する座標定義情報を記憶している。ドットパターンの座標範囲は、矩形の角の位置座標（Ｘｎ，Ｙｎ）、高さ（Ｈ）、幅（Ｗ）によって規定される。また、記憶手段２５は、処理手段２４の処理命令により、電子ペン１から受信した記入情報をペンＩＤ毎に記憶し、さらに、処理手段２４の指示により、記憶領域を確保して、ペンダウンからペンアップまでの記入情報に含まれる座標属性情報をストローク情報として記憶する。上記以外にも、記憶手段２５は、処理手段２４の指示により、プログラムの実行により生成される各種情報を記憶する。
【００４５】
処理手段２４は、ＣＰＵ等のプロセッサによって構成され、コンピュータ装置２の全体の制御を行う。具体的には、処理手段２４は、表示制御手段２４１及び駆動制御手段２４２を有する。
【００４６】
表示制御手段２４１は、インターフェース２７ａに入力された画像信号Ｓ１に対応する画像データ（つまり顕微鏡３のカメラ３ｃによる撮影によって生成された画像データ）に基づいて、当該画像データに対応する顕微鏡画像を表示手段２６のディスプレイに表示させる。加えて、表示制御手段２４１は、顕微鏡画像をプロジェクタ４によりドットスクリーン５に投影表示させるべく、顕微鏡画像についてのデータを、インターフェース２８を介してプロジェクタ４に送信する。
【００４７】
また、表示制御手段２４１は、上記したような顕微鏡画像が表示された表示エリアの外のエリアに、（１）顕微鏡画像上に電子ペン１などによってストロークを描画するためのストローク描画ボタンＢｕ１と、（２）顕微鏡画像上に描画されたストロークを消去するための消去ボタンＢｕ２と、（３）顕微鏡画像上にキーボードなどによって文字を入力するための文字入力ボタンＢｕ３と、（４）顕微鏡画像上に電子ペン１などによって描かれたストロークに応じて、顕微鏡画像の表示位置を移動するための自由移動ボタンＢｕ４と、を表示させる（図７参照）。このようなボタンＢｕ１〜Ｂｕ４（Ｂｕ）は、顕微鏡画像と共にドットスクリーン５に投影表示され、ユーザは、ドットスクリーン５上においてボタンＢｕ１〜Ｂｕ４のうちのいずれかが表示された箇所を電子ペン１でタップすることで、ボタンＢｕ１〜Ｂｕ４のうちのいずれかを選択する。なお、ユーザは、入力手段２１のマウスでクリックすることで、ボタンＢｕ１〜Ｂｕ４のうちのいずれかを選択することもできる。
【００４８】
ユーザによってボタンＢｕ１〜Ｂｕ４のうちのいずれかが電子ペン１でタップされた場合、表示制御手段２４１は、受信手段２２によって受信された記入情報（つまり電子ペン１によって生成された記入情報）に基づいて、ユーザによって電子ペン１を用いて選択されたボタンＢｕを検知する。表示制御手段２４１は、ストローク描画ボタンＢｕ１が選択されたことを検知した場合、受信手段２２によって受信された記入情報に基づいて、電子ペン１によってドットスクリーン５に記入されたストロークを描画したストローク画像を、表示手段２６のディスプレイに表示させる。加えて、表示制御手段２４１は、ストローク画像をプロジェクタ４によりドットスクリーン５に投影表示させるべく、ストローク画像についてのデータを、インターフェース２８を介してプロジェクタ４に送信する。このようなストローク画像は、本発明における「記入画像」の一例に相当する。なお、ドットスクリーン５上におけるボタンＢｕのタップ検知やスクリーン５上にストローク画像を投影表示させる場合、キャリブレーションによって、ドットスクリーン５の領域内の座標値と、プロジェクタ４によりドットスクリーン５に画像が投影表示される表示手段２６のディスプレイ領域内における座標値との間で座標変換するための座標変換関数を事前に求めておく必要がある。
【００４９】
他方で、表示制御手段２４１は、消去ボタンＢｕ２が選択されたことを検知した場合、顕微鏡画像上に描画されたストローク画像を画面から消去する（つまり非表示とする）。また、表示制御手段２４１は、文字入力ボタンＢｕ３が選択されたことを検知した場合、文字を入力するための文字入力枠を顕微鏡画像上に表示させる。この場合、表示制御手段２４１は、電子ペン１によってドットスクリーン５上でタップされた位置に対応する顕微鏡画像上の位置に、文字入力枠を表示させる。そして、表示制御手段２４１は、ユーザによって入力手段２１のキーボードを用いて入力された文字を示す画像を、顕微鏡画像上で文字入力枠が表示された位置に表示させる。このような文字を表示させた画像も、本発明における「記入画像」の一例に相当する。なお、表示制御手段２４１は、文字入力ボタンＢｕ３が選択されたことを検知した場合、キーボード画像を顕微鏡画像上に表示させて、そのようなキーボード画像を利用してマウスや電子ペン１によって文字を入力できるようにしても良い。
【００５０】
以下では、ストローク描画ボタンＢｕ１が選択された後に電子ペン１で記入されたストロークを描画したストローク画像と、文字入力ボタンＢｕ３が選択された後にキーボードなどで入力された文字を表示させた画像とを、まとめて「記入画像」と呼ぶことがある。
【００５１】
次に、駆動制御手段２４２が行う制御について説明する。駆動制御手段２４２は、表示制御手段２４１によって自由移動ボタンＢｕ４が選択されたことが検知された場合（自由移動ボタンＢｕ４が選択されたことを駆動制御手段２４２が検知しても良い）、受信手段２２によって受信された記入情報に基づいて、詳しくは顕微鏡画像の表示位置を変えるために顕微鏡画像が表示されたドットスクリーン５上でユーザにより電子ペン１で記入されたストロークについての記入情報に基づいて、顕微鏡３に対する制御を行う。具体的には、駆動制御手段２４２は、顕微鏡画像の表示位置を変えるために電子ペン１で記入されたストロークに追従して顕微鏡画像の表示位置が移動するように、アクチュエータ３ｇによって標本台３ｅをＸ方向及び／又はＹ方向（つまり水平方向）に移動させる制御を行う。この場合、駆動制御手段２４２は、電子ペン１で記入されたストロークについての画面上での位置（座標値）に基づいて、現在設定されている倍率なども加味して、標本台３ｅをＸ方向及び／又はＹ方向に移動させるべき移動距離を求め、当該移動距離に応じた制御信号Ｓ３を、インターフェース２７ｂを介してアクチュエータ３ｇに出力する。
【００５２】
他方で、表示制御手段２４１は、上記のようにユーザによって顕微鏡画像の表示位置を変えるために電子ペン１でストロークが記入された場合、受信手段２２によって受信された記入情報に基づいて、電子ペン１によってドットスクリーン５に記入されたストロークを描画したストローク画像（以下では「移動用ストローク画像」と呼ぶ。）を、表示手段２６のディスプレイに表示させる。加えて、表示制御手段２４１は、移動用ストローク画像をプロジェクタ４によりドットスクリーン５に投影表示させるべく、移動用ストローク画像についてのデータを、インターフェース２８を介してプロジェクタ４に送信する。１つの例では、表示制御手段２４１は、移動用ストローク画像を、ストローク描画ボタンＢｕ１が選択された後に電子ペン１で記入されたストロークを描画したストローク画像（記入画像）とは異なる態様で表示させる。なお、表示制御手段２４１は、駆動制御手段２４２による標本台３ｅの移動が完了した際に、移動用ストローク画像を画面から消去する。
【００５３】
このような移動用ストローク画像を表示させるのは、顕微鏡画像の表示位置を変えるための電子ペン１によるストロークの記入に対して標本台３ｅが遅れて移動する傾向にあるため（つまり、標本台３ｅの移動による顕微鏡画像の表示位置の移動は、移動用ストローク画像の表示よりも遅れる傾向にあるため）、移動用ストローク画像を表示させておくほうが、標本台３ｅの移動によって顕微鏡画像の表示位置が移動していく様子が把握し易いからである。
【００５４】
また、表示制御手段２４１は、上記のような駆動制御手段２４２の制御による標本台３ｅの水平方向への移動に応じて、記入画像の表示位置を移動させる。つまり、表示制御手段２４１は、標本台３ｅの移動による顕微鏡画像の表示位置の移動に連動するように、記入画像の表示位置を移動させる。この場合、顕微鏡３のアクチュエータ３ｇは、駆動制御手段２４２によって標本台３ｅを水平方向に移動させる制御が行われている際に当該標本台３ｅについての移動データを、インターフェース２７ｂを介して表示制御手段２４１に送信し、表示制御手段２４１は、当該移動データに基づいて、記入画像の表示位置を移動させる。
【００５５】
このように標本台３ｅの移動に応じて記入画像の表示位置を移動させる理由は以下の通りである。顕微鏡画像の表示位置を変えるための電子ペン１によるストロークの記入に対して標本台３ｅが遅れて移動する傾向にあるため、当該ストロークの記入に合わせて記入画像の表示位置を移動させると、記入画像の表示位置の移動に対して顕微鏡画像の表示位置の移動が遅れてしまうことがある。つまり、顕微鏡画像と記入画像との相対的な表示位置の関係がずれてしまうことがある。したがって、標本台３ｅの移動中に顕微鏡画像と記入画像との相対的な表示位置の関係がずれてしまうことを抑制すべく、標本台３ｅの移動に応じて記入画像の表示位置を移動させることとした。
【００５６】
［表示画面例］
以下では、図７及び図８を参照して、本実施形態における表示画面の具体例を説明する。
【００５７】
図７は、ストローク描画ボタンＢｕ１が選択された場合の表示画面例を示している。この画面は、表示制御手段２４１による制御に基づき、表示手段２６のディスプレイに表示され、プロジェクタ４によりドットスクリーン５に投影表示される画面の一例を示している。即ち、表示手段２６のディスプレイとドットスクリーン５とには、同じ画面が同期して表示される。図７に示すように、表示制御手段２４１は、インターフェース２７ａに入力された画像データに基づいて、当該画像データに対応する顕微鏡画像Ｇ１を表示させる。この場合、表示制御手段２４１は、顕微鏡画像やストローク画像を表示するための表示エリアＲ１内に、顕微鏡画像Ｇ１を表示させる。また、表示制御手段２４１は、そのような表示エリアＲ１の下方に、ストローク描画ボタンＢｕ１と、消去ボタンＢｕ２と、文字入力ボタンＢｕ３と、自由移動ボタンＢｕ４とを表示させる。
【００５８】
図７に示すように、ユーザは、顕微鏡画像Ｇ１上にストロークを描く場合、まず、ドットスクリーン５上においてストローク描画ボタンＢｕ１が表示された箇所を電子ペン１でタップする。この際に、表示制御手段２４１は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換し、ディスプレイ上のストローク描画ボタンＢｕ１に対応するドットスクリーン５上のストローク描画ボタンＢｕ１が表示された箇所が電子ペン１でタップされたことを検知する。この後、ユーザは、顕微鏡画像Ｇ１が表示されたドットスクリーン５上において電子ペン１でストロークを描く。ここでは、ユーザが、引き出し線と「べん毛」といった文字とからなるストロークを電子ペン１で描いた場合を例示している。この際に、表示制御手段２４１は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換することで、電子ペン１によってドットスクリーン５に記入されたストロークを描画したストローク画像（記入画像）Ｇ２を、表示手段２６の顕微鏡画像Ｇ１上に表示させる。
【００５９】
なお、本明細書では、「顕微鏡画像」の文言は、顕微鏡３のカメラ３ｃによる撮影によって生成された画像データに対応する画像そのものだけでなく、そのような画像が表示される表示エリアＲ１を含めて用いることがある。例えば、「顕微鏡画像上にストロークを記入する（描く）」とは、顕微鏡３のカメラ３ｃによる撮影によって生成された画像データに対応する画像のエリア内にストロークを記入する場合だけでなく、表示エリアＲ１内において、そのような画像のエリアの外にストロークを記入する場合も含むものとする。
【００６０】
図８は、自由移動ボタンＢｕ４が選択された場合の表示画面例を示している。図８（ａ）〜（ｃ）に示す画面は、表示制御手段２４１による制御に基づき、表示手段２６のディスプレイに表示され、プロジェクタ４によりドットスクリーン５に投影表示される画面の一例を示している。即ち、表示手段２６のディスプレイとドットスクリーン５とには、同じ画面が同期して表示される。図８（ａ）に示すように、表示制御手段２４１は、インターフェース２７ａに入力された画像データに基づいて、当該画像データに対応する顕微鏡画像Ｇ１１ａを表示エリアＲ１内に表示させる。また、表示制御手段２４１は、表示エリアＲ１の下方に、ストローク描画ボタンＢｕ１と、消去ボタンＢｕ２と、文字入力ボタンＢｕ３と、自由移動ボタンＢｕ４とを表示させる。更に、表示制御手段２４１は、ストローク描画ボタンＢｕ１が選択された後に電子ペン１で記入されたストロークを描画したストローク画像（記入画像）Ｇ２１ａを表示させる。ここまでは、図７で示した表示画面と同様である（よって、図７と同様の内容については説明を省略している）。
【００６１】
次に、図８（ａ）に示すように、ユーザは、顕微鏡画像Ｇ１１ａの表示位置を変える場合に、まず、ドットスクリーン５上において自由移動ボタンＢｕ４が表示された箇所を電子ペン１でタップする。この際に、表示制御手段２４１は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換し、ディスプレイ上の自由移動ボタンＢｕ４に対応するドットスクリーン５上の自由移動ボタンＢｕ４が表示された箇所が電子ペン１でタップされたことを検知する。この後、ユーザは、顕微鏡画像Ｇ１１ａの表示位置を変えるために、顕微鏡画像Ｇ１１ａが表示されたドットスクリーン５上において電子ペン１でストロークを描く。具体的には、ユーザは、顕微鏡画像Ｇ１１ａの表示位置を追従して移動させたいストロークを描く。この際に、表示制御手段２４１は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換することで、電子ペン１によってドットスクリーン５に記入されたストロークを描画したストローク画像（移動用ストローク画像）Ｇ３を、表示手段２６の顕微鏡画像Ｇ１１ａ上に表示させる。図８では、移動用ストローク画像Ｇ３が二点鎖線にて表示された例を示している。
【００６２】
次に、駆動制御手段２４２は、上記のように顕微鏡画像Ｇ１１ａの表示位置を変えるために電子ペン１で記入されたストロークに合わせて、アクチュエータ３ｇによって顕微鏡３の標本台３ｅをＸ方向及びＹ方向（水平方向）に移動させる制御を行う。具体的には、駆動制御手段２４２は、まず、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換することで、電子ペン１で記入されたストロークの画面上での位置（座標値）を求め、求めたストロークの画面上での位置（座標値）に基づき、現在設定されている倍率なども加味して、標本台３ｅをＸ方向に移動させる移動距離及び標本台３ｅをＹ方向に移動させる移動距離を求める。
【００６３】
より詳しくは、駆動制御手段２４２は、顕微鏡画像Ｇ１１ａの表示位置を変えるために電子ペン１で記入されたストロークに追従して顕微鏡画像Ｇ１１ａの表示位置が移動するように、当該ストロークを構成する複数個の点において隣接し合う二点の組み合わせ全てについて、当該二点間の画面上でのＸ方向の距離及びＹ方向の距離に応じた、標本台３ｅをＸ方向及びＹ方向に移動させる移動距離を求める。なお、ストロークを構成する複数個の点において隣接し合う二点を用いることに限定はされず、ストロークを構成する複数個の点をある程度間引いた点において隣接し合う二点を用いても良い。この後、駆動制御手段２４２は、求めたＸ方向の移動距離及びＹ方向の移動距離に対応する制御信号Ｓ３を生成し、当該制御信号Ｓ３を、インターフェース２７ｂを介してアクチュエータ３ｇに出力する。そして、顕微鏡３側では、アクチュエータ３ｇが、駆動制御手段２４２からインターフェース２７ｂを介して入力された制御信号Ｓ３に基づいて、当該制御信号Ｓ３に対応するＸ方向の移動距離及びＹ方向の移動距離だけ標本台３ｅを移動させる。
【００６４】
他方で、表示制御手段２４１は、上記のような駆動制御手段２４２の制御による標本台３ｅの水平方向への移動に応じて、ストローク画像Ｇ２１ａの表示位置を移動させる。つまり、表示制御手段２４１は、標本台３ｅの移動による顕微鏡画像Ｇ１１ａの表示位置の移動に連動するように、ストローク画像Ｇ２１ａの表示位置を移動させる。この場合、顕微鏡３側では、アクチュエータ３ｇが、駆動制御手段２４２によって標本台３ｅを水平方向に移動させる制御が行われている際に当該標本台３ｅについての移動データを、インターフェース２７ｂを介して表示制御手段２４１に送信し、表示制御手段２４１は、当該移動データに基づいて、ストローク画像Ｇ２１ａの表示位置を移動させる。具体的には、表示制御手段２４１は、受信した移動データに対応する画面上での移動量だけ、ストローク画像Ｇ２１ａの表示位置を移動させる。
【００６５】
図８（ｂ）は、駆動制御手段２４２の制御により標本台３ｅが移動している最中に表示される画面例を示している。この画面では、駆動制御手段２４２の制御により、図８（ａ）に示した顕微鏡画像Ｇ１１ａが右側に移動した顕微鏡画像Ｇ１１ｂが表示されると共に、表示制御手段２４１の制御により、図８（ａ）に示したストローク画像Ｇ２１ａが右側に移動したストローク画像Ｇ２１ｂが表示される。具体的には、顕微鏡画像Ｇ１１ｂは、顕微鏡画像Ｇ１１ａの表示位置を変えるために電子ペン１で記入されたストロークに追従して移動した位置に表示されており、ストローク画像Ｇ２１ｂは、そのような顕微鏡画像Ｇ１１ｂの表示位置に応じた位置に表示されている。また、標本台３ｅが移動している最中には、移動用ストローク画像Ｇ３は表示されたままとなっている。
【００６６】
図８（ｃ）は、駆動制御手段２４２による制御が完了した際、つまり標本台３ｅの移動が完了した際に表示される画面例を示している。この画面では、駆動制御手段２４２の制御により、図８（ｂ）に示した顕微鏡画像Ｇ１１ｂが更に右側に移動した顕微鏡画像Ｇ１１ｃが表示されると共に、表示制御手段２４１の制御により、図８（ｂ）に示したストローク画像Ｇ２１ｂが更に右側に移動したストローク画像Ｇ２１ｃが表示される。具体的には、顕微鏡画像Ｇ１１ｃは、顕微鏡画像Ｇ１１ａの表示位置を変えるために電子ペン１で記入されたストロークの端点（終点）に対応する位置に表示されており、ストローク画像Ｇ２１ｃは、そのような顕微鏡画像Ｇ１１ｃの表示位置に応じた位置に表示されている。また、標本台３ｅの移動が完了した際には、移動用ストローク画像Ｇ３が画面から消去されている。
【００６７】
［処理フロー］
以下では、図９を参照して、本実施形態に係る処理フローについて説明する。この処理フローは、自由移動ボタンＢｕ４が選択された場合に行われるものである。図９の左側に示す処理フローはコンピュータ装置２によって実行され、図９の右側に示す処理フローは顕微鏡３によって実行される。
【００６８】
まず、コンピュータ装置２側では、表示制御手段２４１が、自由移動についての指示を検知する（ステップＳ１０１）。具体的には、表示制御手段２４１は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換し、ディスプレイ上の自由移動ボタンＢｕ４に対応するドットスクリーン５上の自由移動ボタンＢｕ４が表示された箇所が電子ペン１でタップされたことを検知する。
【００６９】
次に、駆動制御手段２４２は、受信手段２２によって受信された記入情報に基づいて、顕微鏡画像の表示位置を変えるために顕微鏡画像が表示されたドットスクリーン５上でユーザにより電子ペン１で記入されたストロークについての画面上での位置（座標値）を求める（ステップＳ１０２）。具体的には、駆動制御手段２４２は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換することで、電子ペン１で記入されたストロークの画面上での位置（座標値）を求める。より詳しくは、駆動制御手段２４２は、電子ペン１で記入されたストロークを構成する複数個の点について画面上での位置（座標値）を求める。
【００７０】
次に、駆動制御手段２４２は、ステップＳ１０２で求めたストロークの画面上での位置（座標値）に基づき、現在設定されている倍率（詳しくは接眼レンズ３ａ、対物レンズ３ｂ及びカメラ３ｃのズームによる倍率）なども加味して、顕微鏡３の標本台３ｅをＸ方向に移動させる移動距離及び標本台３ｅをＹ方向に移動させる移動距離を求める（ステップＳ１０３）。具体的には、駆動制御手段２４２は、電子ペン１で記入されたストロークを構成する複数個の点において隣接し合う二点（ストロークを構成する複数個の点をある程度間引いた点において隣接し合う二点でも良い）の組み合わせ全てについて、当該二点間の画面上でのＸ方向の距離及びＹ方向の距離に応じた、標本台３ｅをＸ方向及びＹ方向に移動させる移動距離を求める。
【００７１】
次に、駆動制御手段２４２は、ステップＳ１０３で求めたＸ方向の移動距離及びＹ方向の移動距離に基づいて、アクチュエータ３ｇに対して駆動指示を出力する（ステップＳ１０４）。具体的には、駆動制御手段２４２は、Ｘ方向の移動距離及びＹ方向の移動距離に応じた制御信号Ｓ３を生成し、当該制御信号Ｓ３を、インターフェース２７ｂを介してアクチュエータ３ｇに出力する。
【００７２】
この後、顕微鏡３側では、アクチュエータ３ｇが、駆動制御手段２４２からインターフェース２７ｂを介して入力された制御信号Ｓ３に基づいて、当該制御信号Ｓ３に対応するＸ方向の移動距離及びＹ方向の移動距離だけ、標本台３ｅを移動させる（ステップＳ２０１）。これと同時に、アクチュエータ３ｇは、標本台３ｅを移動させた量を示す移動データを、インターフェース２７ｂを介して表示制御手段２４１に送信する（ステップＳ２０１）。
【００７３】
この後、コンピュータ装置２側では、表示制御手段２４１が、顕微鏡３のアクチュエータ３ｇからインターフェース２７ｂを介して受信した移動データに基づいて、ストロークや文字を示す記入画像の表示位置を移動させる（ステップＳ１０５）。具体的には、表示制御手段２４１は、受信した移動データに対応する画面上での移動量だけ、記入画像の表示位置を移動させる。
【００７４】
なお、上記では、電子ペン１を用いて、ボタンＢｕを選択したり、顕微鏡画像上にストローク（ストローク描画ボタンＢｕ１の選択後に記入するストロークと、自由移動ボタンＢｕ４の選択後に記入するストロークの両方を含む。以下同様とする。）を記入したりする例を示したが、これに限定はされない。他の例では、コンピュータ装置２のマウス（入力手段２１）を用いて、ボタンＢｕを選択したり、顕微鏡画像上にストロークを記入したりすることができる。具体的には、マウスによるクリックによってボタンＢｕを選択したり、マウスによるドラッグ操作によってストロークを記入したりすることができる。マウスによるドラッグ操作によってストロークを記入した場合には、当該ストロークの位置はそのまま画面上での位置（座標値）となるため、上記したような座標変換関数を用いる必要はない。なお、このようなマウス（入力手段２１）を用いる構成は、後述する変形例にも適宜適用されるものとする。
【００７５】
［本実施形態による作用・効果］
以上説明した本実施形態によれば、顕微鏡画像の表示位置を変えるために電子ペン１などで記入されたストロークに応じて、顕微鏡３の標本台３ｅを水平方向に適切に移動させることができる。これにより、記入されたストロークに合わせて、顕微鏡画像の表示位置を適切に移動させることが可能となる。
【００７６】
また、本実施形態によれば、駆動制御手段２４２の制御による標本台３ｅの水平方向への移動に応じて、記入画像の表示位置を適切に移動させることができる。これにより、標本台３ｅの移動による顕微鏡画像の表示位置の移動に合わせて、記入画像の表示位置を適切に移動させることが可能となる。よって、標本台３ｅの移動中に、顕微鏡画像と記入画像との相対的な表示位置の関係がずれてしまうことを抑制することが可能となる。
【００７７】
［変形例］
以下では、上記した実施形態の変形例について説明する。なお、下記の変形例は、任意に組み合わせて実施形態に適用することができる。
【００７８】
（変形例１）
上記した実施形態では、顕微鏡画像の表示位置を変えるために電子ペン１で記入されたストロークを描画した移動用ストローク画像を表示させていたが、変形例１では、このような移動用ストローク画像を表示させない。上記したように、顕微鏡画像の表示位置を変えるための電子ペン１によるストロークの記入に対して標本台３ｅが遅れて移動する傾向にあることを考慮して、移動用ストローク画像を表示させておくほうが標本台３ｅの移動によって顕微鏡画像の表示位置が移動していく様子が把握し易いといった観点で、移動用ストローク画像を表示させていた。しかしながら、顕微鏡画像の表示位置を変えるための電子ペン１によるストロークの記入に対してほとんど遅れることなく標本台３ｅを移動させることができるような構成（駆動処理が早い場合や、移動距離が極短く移動に殆ど時間がかからない場合）であれば、移動用ストローク画像を表示させなくても標本台３ｅの移動によって顕微鏡画像の表示位置が移動していく様子を十分に把握することができるので、移動用ストローク画像を表示させなくても良い。
【００７９】
（変形例２）
上記した実施形態では、駆動制御手段２４２の制御による標本台３ｅの水平方向への移動に応じて記入画像の表示位置を移動させていたが、標本台３ｅの移動に応じて記入画像の表示位置を移動させることに限定はされない。変形例２では、顕微鏡画像の表示位置を変えるために電子ペン１で記入されたストロークに応じて、記入画像の表示位置を移動させることができる。つまり、変形例２では、標本台３ｅを水平方向に移動させる制御とは独立して、顕微鏡画像の表示位置を変えるために電子ペン１で記入されたストロークについての記入情報に基づいて、記入画像の表示位置を移動させることができる。
【００８０】
上記したように、顕微鏡画像の表示位置を変えるための電子ペン１によるストロークの記入に対して標本台３ｅが遅れて移動する傾向にあることを考慮して、標本台３ｅの移動中に顕微鏡画像と記入画像との相対的な表示位置の関係がずれてしまうことを抑制する観点から、標本台３ｅの移動に応じて記入画像の表示位置を移動させていた。しかしながら、顕微鏡画像の表示位置を変えるための電子ペン１によるストロークの記入に対してほとんど遅れることなく標本台３ｅを移動させることができるような構成（駆動処理が早い場合や、移動距離が極短く移動に殆ど時間がかからない場合）であれば、記入されたストロークに応じて記入画像の表示位置を移動させても上記のような相対的な表示位置関係のずれはほとんど生じないため、記入されたストロークに応じて記入画像の表示位置を移動させても良い。
【００８１】
このように記入されたストロークに応じて記入画像の表示位置を移動させる場合には、標本台３ｅの移動に応じて記入画像の表示位置を移動させる場合と比較して、簡便な処理にて記入画像の表示位置を移動させることができる。
【００８２】
（変形例３）
上記した実施形態では、顕微鏡画像上で電子ペン１により記入されたストロークに応じて標本台３ｅを水平方向に移動させていたが、変形例３では、顕微鏡画像上で電子ペン１によりタップされた位置に応じて標本台３ｅを水平方向に移動させることができる。具体的には、変形例３では、ユーザは、顕微鏡画像の表示位置を変える場合に、顕微鏡画像上で電子ペン１によって二箇所タップすることとし、コンピュータ装置は、ユーザによって１回目に電子ペン１でタップされた箇所を移動の起点位置とし、ユーザによって２回目に電子ペン１でタップされた箇所を移動の終点位置とし、顕微鏡画像の表示位置が当該起点位置から当該終点位置に向かって移動するように標本台３ｅを水平方向に移動させる。
【００８３】
図１０は、変形例３において自由移動ボタンＢｕ４が選択された場合の表示画面例を示している。図１０（ａ）及び（ｂ）に示す画面は、表示制御手段２４１による制御に基づき、表示手段２６のディスプレイに表示され、プロジェクタ４によりドットスクリーン５に投影表示される画面の一例を示している。即ち、表示手段２６のディスプレイとドットスクリーン５とには、同じ画面が同期して表示される。図１０（ａ）に示すように、表示制御手段２４１は、インターフェース２７ａに入力された画像データに基づいて、当該画像データに対応する顕微鏡画像Ｇ１２ａを表示エリアＲ１内に表示させる。また、表示制御手段２４１は、表示エリアＲ１の下方に、ストローク描画ボタンＢｕ１と、消去ボタンＢｕ２と、文字入力ボタンＢｕ３と、自由移動ボタンＢｕ４とを表示させる。更に、表示制御手段２４１は、ストローク描画ボタンＢｕ１が選択された後に電子ペン１で記入されたストロークを描画したストローク画像（記入画像）Ｇ２２ａを表示させる。ここまでは、図７で示した表示画面と同様である（よって、図７と同様の内容については説明を省略している）。
【００８４】
次に、図１０（ａ）に示すように、ユーザは、顕微鏡画像Ｇ１２ａの表示位置を変える場合に、まず、ドットスクリーン５上において自由移動ボタンＢｕ４が表示された箇所を電子ペン１でタップする。この際に、表示制御手段２４１は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換し、ディスプレイ上の自由移動ボタンＢｕ４に対応するドットスクリーン５上の自由移動ボタンＢｕ４が表示された箇所が電子ペン１でタップされたことを検知する。
【００８５】
この後、ユーザは、顕微鏡画像Ｇ１２ａの表示位置を変えるために、顕微鏡画像Ｇ１２ａが表示されたドットスクリーン５上において電子ペン１によって二箇所タップする。具体的には、ユーザは、まず、顕微鏡画像Ｇ１２ａの表示位置を移動させる場合に当該移動の起点にしたい位置を電子ペン１でタップし、その後に、顕微鏡画像Ｇ１２ａの表示位置を移動させる場合に当該移動の終点とした位置を電子ペン１でタップする。この際に、駆動制御手段２４２は、受信手段２２によって受信された記入情報に基づいて、顕微鏡画像Ｇ１２ａが表示されたドットスクリーン５上において電子ペン１によって二箇所タップされたことを検知する。そして、駆動制御手段２４２は、電子ペン１によって１回目にタップされた位置を起点位置として検出し、電子ペン１によって２回目にタップされた位置を終点位置として検出する。この場合、駆動制御手段２４２は、受信手段２２によって受信された記入情報に含まれる座標値を、キャリブレーションで得られた座標変換関数によって表示手段２６のディスプレイにおける座標値に変換することで、起点位置及び終点位置の画面上での位置（座標）を求める。表示制御手段２４１は、このように求められた画面上での位置（座標）に基づいて、起点位置を示す画像Ｇ４ａと終点位置を示す画像Ｇ４ｂとを顕微鏡画像Ｇ１２ａ上に表示させる。図１０（ａ）では、画像Ｇ４ａ、Ｇ４ｂが黒丸にて表示された例を示している。なお、画像Ｇ４ａ、Ｇ４ｂを表示させなくても良い。
【００８６】
次に、駆動制御手段２４２は、起点位置の画面上での位置（座標）と終点位置の画面上での位置（座標）とのＸ方向の距離及びＹ方向の距離を求め、求めたＸ方向の距離及びＹ方向の距離から、現在設定されている倍率などを考慮して、標本台３ｅをＸ方向に移動させる移動距離及び標本台３ｅをＹ方向に移動させる移動距離を求める。そして、駆動制御手段２４２は、求めたＸ方向の移動距離及びＹ方向の移動距離に対応する制御信号Ｓ３を生成し、当該制御信号Ｓ３を、インターフェース２７ｂを介してアクチュエータ３ｇに出力する。そして、顕微鏡３側では、アクチュエータ３ｇが、駆動制御手段２４２からインターフェース２７ｂを介して入力された制御信号Ｓ３に基づいて、当該制御信号Ｓ３に対応するＸ方向の移動距離及びＹ方向の移動距離だけ標本台３ｅを移動させる。
【００８７】
他方で、表示制御手段２４１は、上記のような駆動制御手段２４２の制御による標本台３ｅの水平方向への移動に応じて、ストローク画像Ｇ２２ａの表示位置を移動させる。つまり、表示制御手段２４１は、標本台３ｅの移動による顕微鏡画像Ｇ１２ａの表示位置の移動に連動するように、ストローク画像Ｇ２２ａの表示位置を移動させる。この場合、顕微鏡３側では、アクチュエータ３ｇが、駆動制御手段２４２によって標本台３ｅを水平方向に移動させる制御が行われている際に当該標本台３ｅについての移動データを、インターフェース２７ｂを介して表示制御手段２４１に送信し、表示制御手段２４１は、当該移動データに基づいて、ストローク画像Ｇ２２ａの表示位置を移動させる。具体的には、表示制御手段２４１は、受信した移動データに対応する画面上での移動量だけ、ストローク画像Ｇ２２ａの表示位置を移動させる。
【００８８】
図１０（ｂ）は、駆動制御手段２４２による制御が完了した際、つまり標本台３ｅの移動が完了した際に表示される画面例を示している。この画面では、駆動制御手段２４２の制御により、図１０（ａ）に示した顕微鏡画像Ｇ１２ａが右側に移動した顕微鏡画像Ｇ１２ｂが表示されると共に、表示制御手段２４１の制御により、図１０（ａ）に示したストローク画像Ｇ２２ａが右側に移動したストローク画像Ｇ２２ｂが表示される。具体的には、顕微鏡画像Ｇ１２ｂは、上記のように電子ペン１でタップされた終点位置に対応する位置に表示されており、ストローク画像Ｇ２２ｂは、そのような顕微鏡画像Ｇ１２ｂの表示位置に応じた位置に表示されている。また、標本台３ｅの移動が完了した際には、起点位置を示す画像Ｇ４ａ及び終点位置を示す画像Ｇ４ｂが画面から消去されている。
【００８９】
以上説明した変形例３によれば、顕微鏡画像の表示位置を変えるためになされた電子ペン１によるタップに応じて（つまり電子ペン１によるタップによって指示された起点位置及び終点位置に応じて）、顕微鏡３の標本台３ｅを水平方向に適切に移動させることができる。よって、顕微鏡画像の表示位置を適切に移動させることが可能となる。
【００９０】
なお、上記した変形例３は、顕微鏡画像上で電子ペン１によりストローク（顕微鏡画像の表示位置を変えるためストローク）が記入された場合にも適用可能である。具体的には、記入されたストロークの一方の端点（ストロークの記入が開始された位置）を起点位置とし、記入されたストロークの他方の端点（ストロークの記入が終了された位置）を終点位置として、上記した手法と同様にして、顕微鏡画像の表示位置が起点位置から終点位置に向かって移動するように標本台３ｅを水平方向に移動させることができる。
【００９１】
なお、上記した変形例３では、電子ペン１を用いて起点位置及び終点位置を指示していたが、コンピュータ装置２のマウス（入力手段２１）を用いて、起点位置及び終点位置を指示しても良い。
【００９２】
（変形例４）
上記した実施形態では、標本台３ｅが水平方向に移動された場合に、標本台３ｅの水平方向の移動に応じて記入画像の表示位置を移動させていたが、変形例４では、顕微鏡３の倍率が変更された場合に、変更された倍率に応じて記入画像の表示サイズを変更することができる。具体的には、変形例４では、駆動制御手段２４２によって対物レンズ３ｂを切り替える制御及び／又はカメラ３ｃのズームを調整する制御が行われた場合に、表示制御手段２４１は、そのような駆動制御手段２４２の制御による変更後の倍率に応じて、記入画像の表示サイズを拡大又は縮小させることができる。この場合、駆動制御手段２４２は、所望の対物レンズ３ｂに設定されるようにレボルバ３ｄを回転させるための制御信号Ｓ４を、インターフェース２７ｂを介してアクチュエータ３ｈに出力したり、所望のズームに調整するための制御信号Ｓ２を、インターフェース２７ａを介してカメラ３ｃに出力したりすることで、顕微鏡３を所望の倍率に変更する。そして、表示制御手段２４１は、例えば駆動制御手段２４２の制御による変更後の倍率と現在設定されている倍率との比などに応じて、記入画像の表示サイズを拡大又は縮小させる。
【００９３】
なお、このような倍率を変更するための制御に加えて、標本台３ｅを水平方向に移動させる制御が行われた場合には、表示制御手段２４１は、記入画像の表示サイズを拡大又は縮小させる制御に加えて、上記した実施形態で示した手法により、記入画像の表示位置を移動させる制御を行う。
【００９４】
（変形例５）
上記した実施形態では、電子ペン１によってドットスクリーン５に種々の指示（ボタンＢｕの選択、顕微鏡画像上に描画させるためのストロークの記入、及び顕微鏡画像の表示位置を変えるためのストロークの記入などを意味する。以下同様とする。）を入力していた。変形例５では、ドットスクリーン５を用いると共に、若しくはドットスクリーン５を用いる代わりに、コンピュータ装置２の表示手段２６上に配置されたドットパターンオーバーレイヤ（以下「ＤＯＬ」と表記する。）を用いて、電子ペン１によって種々の指示を入力することができる。つまり、変形例５は、表示手段２６上に配置されたＤＯＬを用いて、コンピュータ装置２の表示手段２６に表示された顕微鏡画像に対して電子ペン１によって指示を入力するものである。
【００９５】
ＤＯＬは、ポリエチレンテレフタラートなどの透明樹脂基板である基材フィルムに、電子ペン１により読み取ることができるよう赤外線を反射する素材（酸化チタン、コレステリック液晶、赤外線反射性顔料など）を含んだインキによりドットパターンのドットが印刷され、さらに透明なＥＢ硬化樹脂などの保護層で保護された層構成を有している。なお、赤外線を反射する素材でドットパターンを印刷しているのは、ＤＯＬの下層にある表示手段２６から様々な色の可視光が放射されても、電子ペン１によってコントラストよくドットパターンを認識させるのに、望ましいからである。
【００９６】
なお、上記のようなＤＯＬを用いる場合、キャリブレーションによって、ＤＯＬの領域内の座標値と、コンピュータ装置２の表示手段２６のディスプレイ領域内における座標値との間で座標変換するための座標変換関数を事前に求めておく必要がある。
【００９７】
（変形例６）
上記した実施形態では、電子ペン１とドットスクリーン５とを用いて種々の指示を入力する構成を示した。変形例６では、電子ペン１とドットスクリーン５とを用いる代わりに、接触された位置を検知可能な電子黒板を用いて種々の指示を入力することができる。電子黒板としては、感圧式ボードや電磁式ボードを用いることができる。このような電子黒板には、ドットスクリーン５と同様に、プロジェクタ４により顕微鏡画像やストローク画像が投影表示される。
【００９８】
感圧式ボードは、所定のペン（スタイラス）により圧力が加わると、ボード中に設けられた電気伝導性の２枚のシートが接触することで電気信号を発生させる。電磁式ボードは、ボード表面の直下にワイヤが埋め込まれており、コイルを埋め込んだスタイラスが接触されると、スタイラスとの電磁誘導に基づき接触位置に相当する電気信号を発生させる。コンピュータ装置２は、このように電子黒板によって生成された電気信号を受信し、当該電気信号に基づいて、顕微鏡画像に対して入力された指示に応じた制御を行う。
【００９９】
（変形例７）
上記では、電子ペン、ドットパターン（コード化パターン）、記入情報に、アノト方式を用いていたが、アノト方式を用いることに限定はされない。
【符号の説明】
【０１００】
１…電子ペン
２…コンピュータ装置
３…顕微鏡
３ａ…接眼レンズ
３ｂ…対物レンズ
３ｃ…カメラ
３ｄ…レボルバ
３ｅ…標本台
３ｆ…プレパラート
３ｇ、３ｈ…アクチュエータ
４…プロジェクタ
５…ドットスクリーン
２１…入力手段
２２…受信手段
２４…処理手段
２５…記憶手段
２６…表示手段
２７ａ、２７ｂ、２８…インターフェース
【図３】
2014026208.tif 000003
【図４】
2014026208.tif 000004
【図５】
2014026208.tif 000005
【図６】
2014026208.tif 000006
【図９】
2014026208.tif 000007
【図１】
2014026208.tif 000008
【図２】
2014026208.tif 000009
【図７】
2014026208.tif 000010
【図８】
2014026208.tif 000011
【図１０】
2014026208.tif 000012