(57)【要約】【課題】顕微鏡画像を閲覧する際に、少ない記憶容量でも、所望の再生方向に滞りなく再生する。【解決手段】多次元の顕微鏡画像を記憶するサーバ２と、サーバ２にネットワーク３を介して接続された１以上のクライアント端末４とを備え、クライアント端末４が、配信を要求する顕微鏡画像とその再生方向を入力する入力部と、入力された顕微鏡画像および再生方向の情報を送信する情報送信部と、サーバ２から配信された顕微鏡画像を受信する画像受信部と、受信した顕微鏡画像を記憶する記憶部と、記憶されている顕微鏡画像を再生する画像再生部とを備え、サーバ２が、情報送信部から送信されてきた情報を受信する情報受信部と、受信した顕微鏡画像および再生方向の情報に基づいて、再生方向に配列された顕微鏡画像を優先的に配信する画像配信部とを備える顕微鏡画像閲覧システム１を提供する。【選択図】図１
2017168003.tif 000002
【特許請求の範囲】
【請求項１】
多次元の顕微鏡画像を記憶するサーバと、
該サーバにネットワークを介して接続された１以上のクライアント端末とを備え、
該クライアント端末が、配信を要求する前記顕微鏡画像とその再生方向を入力する入力部と、入力された前記顕微鏡画像および前記再生方向の情報を送信する情報送信部と、前記サーバから配信された前記顕微鏡画像を受信する画像受信部と、該画像受信部により受信された前記顕微鏡画像を記憶する記憶部と、該記憶部に記憶されている前記顕微鏡画像を再生する画像再生部とを備え、
前記サーバが、前記情報送信部から送信されてきた情報を受信する情報受信部と、該情報受信部により受信された前記顕微鏡画像および前記再生方向の情報に基づいて、当該情報に対応する前記顕微鏡画像のうち再生方向に配列された前記顕微鏡画像を優先的に配信する画像配信部とを備える顕微鏡画像閲覧システム。
【請求項２】
前記画像配信部は、前記情報送信部により前記再生方向の情報が送られてきていないときには、複数次元の再生方向に対応して配列されている前記顕微鏡画像を均等に配信する請求項１に記載の顕微鏡画像閲覧システム。
【請求項３】
前記サーバまたは前記クライアント端末が、通信速度を測定する通信速度測定部を備え、前記画像再生部が、前記通信速度測定部により測定された通信速度より低い再生速度で前記顕微鏡画像を再生する請求項１または請求項２に記載の顕微鏡画像閲覧システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、顕微鏡画像閲覧システムに関するものである。
【背景技術】
【０００２】
従来、１つのページに、複数の画像を割り当てて表示するよう制御する表示制御装置が、ユーザの操作に応じて表示されているページを他のページに切り替える際に、ページが表示されている際に表示中のページ以外で表示される画像を読み出して一時記憶手段に記憶する先読みを行うシステムが知られている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１２９０６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の技術は、帯状に配列された複数枚の画像の一部を表示し、当該表示されている画像に対し、配列の一方向または他方向に隣接して表示されていない画像を先読みするものであり、次に閲覧者によって指定される画像の表示方向が不明であるために、両方向に均等に先読みしておかなければならない。
再生する画像が顕微鏡画像のように、多次元の再生方向を有する場合には、全ての方向について均等に先読みしておくのでは、記憶容量が膨大となり、バッファメモリが少ない場合には再生に時間がかかるという不都合がある。
【０００５】
本発明は上述した事情に鑑みてなされたものであって、顕微鏡画像を閲覧する際に、少ない記憶容量でも、所望の再生方向に滞りなく再生することができる顕微鏡画像閲覧システムを提供することを目的としている。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明は以下の手段を提供する。
本発明の一態様は、多次元の顕微鏡画像を記憶するサーバと、該サーバにネットワークを介して接続された１以上のクライアント端末とを備え、該クライアント端末が、配信を要求する前記顕微鏡画像とその再生方向を入力する入力部と、入力された前記顕微鏡画像および前記再生方向の情報を送信する情報送信部と、前記サーバから配信された前記顕微鏡画像を受信する画像受信部と、該画像受信部により受信された前記顕微鏡画像を記憶する記憶部と、該記憶部に記憶されている前記顕微鏡画像を再生する画像再生部とを備え、前記サーバが、前記情報送信部から送信されてきた情報を受信する情報受信部と、該情報受信部により受信された前記顕微鏡画像および前記再生方向の情報に基づいて、当該情報に対応する前記顕微鏡画像のうち再生方向に配列された前記顕微鏡画像を優先的に配信する画像配信部とを備える顕微鏡画像閲覧システムを提供する。
【０００７】
本態様によれば、クライアント端末の入力部において配信を要求する顕微鏡画像とその再生方向が入力されると、入力された顕微鏡画像および再生方向の情報が情報送信部によりネットワークを介してサーバに送信される。サーバにおいては、情報送信部により送信されてきた情報が情報受信部により受信され、受信された情報に基づいて配信する顕微鏡画像が決定される。すなわち、画像配信部が、要求された顕微鏡画像のうち、再生方向に配列された顕微鏡画像を優先的に配信する。
【０００８】
サーバから配信されてきた顕微鏡画像が画像受信部により受信されると、受信された顕微鏡画像が記憶部に記憶された後、画像再生部により再生される。この場合に、再生方向に配列していない顕微鏡画像については後から配信されるので、記憶部に一度に記憶する顕微鏡画像の容量は少なくて済む。そして、再生に必要な再生方向に配列された顕微鏡画像が優先的に配信されて記憶部に記憶されるので、画像再生部により、滞りなく再生することができる。
【０００９】
上記態様においては、前記画像配信部は、前記情報送信部により前記再生方向の情報が送られてきていないときには、複数次元の再生方向に対応して配列されている前記顕微鏡画像を均等に配信してもよい。
このようにすることで、再生方向が決まっていない状態において、いずれの次元の再生方向にも再生を開始することができる。そして、再生方向が一旦決定されると、その再生方向の顕微鏡画像が優先して配信されるので、少ない記憶容量でも滞りなく再生することができる。
【００１０】
また、上記態様においては、前記サーバまたは前記クライアント端末が、通信速度を測定する通信速度測定部を備え、前記画像再生部が、前記通信速度測定部により測定された通信速度より低い再生速度で前記顕微鏡画像を再生してもよい。
このようにすることで、少ない記憶容量でも、より確実に一定の再生速度で顕微鏡画像を所望の再生方向に再生することができる。
【発明の効果】
【００１１】
本発明によれば、顕微鏡画像を閲覧する際に、少ない記憶容量でも、所望の再生方向に滞りなく再生することができるという効果を奏する。
【図面の簡単な説明】
【００１２】
【図１】本発明の一実施形態に係る顕微鏡画像閲覧システムを示すブロック図である。
【図２】図１の顕微鏡画像閲覧システムのクライアント端末を示すブロック図である。
【図３】図１の顕微鏡画像閲覧システムにより閲覧される顕微鏡画像の配列の一例を示す図である。
【図４】図１の顕微鏡画像閲覧システムのサーバを示すブロック図である。
【図５】図１の顕微鏡画像閲覧システムにおいて再生方向が指定されていない場合に配信される画像例を示す図である。
【図６】図１の顕微鏡画像閲覧システムにおいて再生方向が指定された場合に配信される画像例を示す図である。
【図７】図１の顕微鏡画像閲覧システムにおいて再生方向が指定されていない場合に配信される他の画像例を示す図である。
【図８】図１の顕微鏡画像閲覧システムにおいて再生方向が指定された場合に配信される他の画像例を示す図である。
【図９】図１の顕微鏡画像閲覧システムの他のクライアント端末を示すブロック図である。
【発明を実施するための形態】
【００１３】
以下、本発明の一実施形態に係る顕微鏡画像閲覧システム１について、図面を参照して以下に説明する。
本実施形態に係る顕微鏡画像閲覧システム１は、図１に示されるように、顕微鏡画像を記憶し配信するサーバ２と、該サーバ２にネットワーク３を介して接続された１以上のクライアント端末４とを備えている。
【００１４】
クライアント端末４は、例えばＰＣ（パーソナルコンピュータ）であり、図２に示されるように、情報を入力する入力部５と、該入力部５により入力された情報をネットワーク３を介して送信する情報送信部６と、サーバ２から配信された顕微鏡画像を受信する画像受信部７と、該画像受信部７により受信された顕微鏡画像を記憶するバッファメモリ（記憶部）８と、該バッファメモリ８に記憶された顕微鏡画像を再生する画像再生部９と、画像再生部９により再生された顕微鏡画像を表示する表示部２０とを備えている。
入力部５は、マウス、キーボードあるいはタッチパネル等の入力装置であり、配信を要求する顕微鏡画像を特定する顕微鏡画像情報と、その再生開始位置を指定する再生開始位置情報と、顕微鏡画像の再生方向を示す次元を指定する再生方向情報とを入力するようになっている。
【００１５】
顕微鏡画像は、例えば、図３に示されるように、顕微鏡の対物レンズの焦点面に沿うＸＹ方向２次元の画像を、対物レンズの光軸方向であるＺ方向に配列された束を時間軸（Ｔ）方向および周波数（λ）方向に複数配列して取得されたＺ，Ｔ，λの３次元を有している。
【００１６】
表示部２０は、例えばモニタであり、画面の中央に、顕微鏡画像を一枚表示するようになっている。この表示部２０に表示されている顕微鏡画像は、例えば入力部５であるキーボードの左右方向の矢印キーを押下すると、時間軸Ｔ方向に画像が切り替わり、上下方向の矢印キーを押下するとＺ方向に画像が切り替わるようになっている。
そして、入力部５で顕微鏡画像を切り替える度に、表示部２０に表示される顕微鏡画像の顕微鏡画像情報と再生開始位置情報を情報送信部６から送信するようになっている。
【００１７】
また、表示部２０は、画面の端に、例えば入力部５であるマウスを用いて、再生方向を一方向に限定するための再生方向Ｚ，Ｔに対応する一方向再生専用の矢印ボタンを表示するようになっている。
そして、入力部５であるマウスを用いて、表示部２０上の再生方向Ｚ，Ｔに対応する矢印ボタンのいずれかを押下することにより、その再生方向Ｚ，Ｔのいずれかを示す再生方向情報を情報送信部６から送信するようになっている。
【００１８】
サーバ２は、図４に示されるように、顕微鏡画像を記憶する画像記憶部１０と、情報送信部６からネットワーク３を介して送信されてきた情報を受信する情報受信部１１と、受信した情報に対応する顕微鏡画像を選択してネットワーク３を介して配信する画像配信部１２とを備えている。
画像配信部１２は、情報受信部１１により受信した顕微鏡画像情報により特定された顕微鏡画像を画像記憶部１０に記憶されている顕微鏡画像の中から選択して配信するようになっている。
【００１９】
さらに、本実施形態においては、画像配信部１２は、情報受信部１１により再生開始位置情報および再生方向情報が受信されたときには、特定された顕微鏡画像の内、再生開始位置情報に示される再生開始位置に配置される顕微鏡画像から再生方向情報に示される再生方向に配列された顕微鏡画像のみを選択して配信するようになっている。
【００２０】
また、画像配信部１２は、情報受信部１１により再生方向情報が受信されないときには、特定された顕微鏡画像の内、再生開始位置情報に示される再生開始位置に配置される顕微鏡画像から、全ての再生方向Ｚ，Ｔに配列された顕微鏡画像を均等に選択して配信するようになっている。
さらに、画像配信部１２は、情報受信部１１により顕微鏡画像を特定する顕微鏡画像情報のみが受信されたときには、特定された顕微鏡画像の基準となる顕微鏡画像から全ての再生方向Ｚ，Ｔに配列された顕微鏡画像を均等に選択して配信するようになっている。
【００２１】
このように構成された本実施形態に係る顕微鏡画像閲覧システム１の作用について以下に説明する。
本実施形態に係る顕微鏡画像閲覧システム１を用いて、まず、情報送信部６がネットワーク３を介して最初に表示部２０に表示させる予め決まっている顕微鏡画像の顕微鏡画像情報をサーバ２に送信し、サーバ２が情報受信部１１によって送信されてきた顕微鏡画像情報を受信する。
【００２２】
サーバ２の画像配信部１２は、受信された顕微鏡画像情報に示される顕微鏡画像を画像記憶部１０に記憶されている複数の顕微鏡画像の束の中から選択するとともに、その顕微鏡画像の束の基準となる顕微鏡画像（基準画像）Ａから全ての再生方向Ｚ，Ｔに配列する複数枚の顕微鏡画像を均等に（例えば、図５に斜線で示すように基準画像ＡからＺ方向に４枚、Ｔ方向に４枚）選択して配信する。
【００２３】
サーバ２からネットワーク３を介して配信されてきた顕微鏡画像は、クライアント端末４の画像受信部７により受信され、バッファメモリ８に一時記憶された後に、画像再生部９により再生される。画像再生部９による再生は、まず、配信されてきた顕微鏡画像の内の基準画像Ａから行われる。そして、その後に閲覧者が入力部５であるキーボードによって再生方向（上下左右方向）を入力することにより、入力された再生方向に配列された顕微鏡画像が順次再生されていく。
【００２４】
ここで、情報送信部６は、閲覧者が入力部５であるキーボードを用いて、表示部２０に表示されている顕微鏡画像を切り替える度に、表示部２０に表示される新たな顕微鏡画像の顕微鏡画像情報と再生開始位置情報を情報受信部１１に送信する。
【００２５】
サーバ２の画像配信部１２は、情報受信部１１が受信した新たな顕微鏡画像情報に対応する顕微鏡画像を基準画像とし、この基準画像から全ての再生方向Ｚ，Ｔに配列する複数枚の顕微鏡画像を均等に選択し、その選択された顕微鏡画像の中で未配信の顕微鏡画像をクライアント端末４に配信する。
【００２６】
この場合において、サーバ２からは基準画像Ａのみならず、基準画像Ａを基準とした全ての再生方向Ｚ，Ｔの顕微鏡画像が均等に配信されてきているので、閲覧者が、いずれの再生方向を入力したとしてもその再生方向への再生開始を速やかに行うことができるという利点がある。
【００２７】
一方、顕微鏡画像（基準画像）Ａが表示された状態で、入力部５であるマウスを用いて、表示部２０上の再生方向Ｚ，Ｔに対応する一方向再生専用の矢印ボタンのいずれかを押下すると、入力された再生方向情報が、情報送信部６からネットワーク３を介してサーバ２に送られ、サーバ２の情報受信部１１により受信されて、画像配信部１２により次に配信される顕微鏡画像の選択に使用される。すなわち、画像配信部１２により、再生方向に配列された顕微鏡画像が優先的に選択されて配信される。
図６に示す例では、再生方向として時間軸Ｔが入力された場合に、基準画像Ａから時間軸Ｔ方向に並ぶ画像のみが（例えば、図６に斜線で示すように基準画像ＡからＴ方向に８枚）選択されている。
【００２８】
これにより、優先的に選択された再生方向に配列された顕微鏡画像がクライアント端末４によって受信されてバッファメモリ８に記憶されるので、画像再生部９による指定された再生方向の顕微鏡画像の再生を滞りなく行うことができるという利点がある。
すなわち、再生方向が一旦入力された後には、それ以外の再生方向への顕微鏡画像の再生は行われない可能性が高いので、再生に必要のない顕微鏡画像の配信を極力なくすことにより、バッファメモリ８の記憶容量が少なくても、再生を滞りなく行うことができる。
【００２９】
また、閲覧者が、入力部５により顕微鏡画像の再生開始位置を示す再生開始位置情報を入力すると、サーバ２の画像配信部１２が、再生開始位置情報に示される再生開始位置の顕微鏡画像を基準画像Ａとして、そこから再生方向に配列された顕微鏡画像を配信する。これにより、閲覧者は所望の顕微鏡画像を所望の再生位置から所望の再生方向に滞りなく再生して閲覧することができる。
【００３０】
なお、本実施形態においては、再生方向が入力されたときには、再生方向に配列された画像のみを配信することとしたが、これに限定されるものではない。すなわち、入力された再生方向が優先されればよいので、再生方向に配列された画像の数をそれ以外の方向に配列された画像の数より多く選択して配信することにしてもよい。
また、本実施形態においては、再生方向が入力されないときには、Ｚ方向とＴ方向以外であるＺ方向とＴ方向との間の方向すなわち斜め方向の画像をさらに配信するようにしてもよい。
【００３１】
本実施形態においては、入力部５としてキーボードおよびマウスを用いたが、入力部５としてタッチパネルを用い、スワイプ操作を上下左右方向を含む全方向再生とし、フリック操作を一方向再生とするようにしてもよい。
このようにすることで、全方向再生と一方向再生の切り替えを容易とすることができる。
【００３２】
また、本実施形態においては、表示部２０の画面上に全方向再生モードと一方向再生モードとを選択するボタンを表示させ、閲覧者がそのボタンを押すことによって、全方向再生モードと一方向再生モードとを切り替えるようにしてもよい。
さらに、本実施形態においては、再生方向としてＺ，Ｔの２次元としたが、これに限らず、図７および図８に示されるように、Ｚ，Ｔ，λの３次元としてもよい。
【００３３】
また、本実施形態においては、図９に示されるように、クライアント端末４に通信速度を測定する通信速度測定部３０が備えられ、クライアント端末４の画像再生部９が、通信速度測定部により測定された通信速度より低い再生速度で顕微鏡画像を再生することにしてもよい。
【００３４】
通信速度測定部３０は、最初に顕微鏡画像を画像配信部１２から画像受信部７に配信したときの画像配信部１２から画像受信部７までの配信時間と顕微鏡画像の容量とに基づいて、通信時間を推定してもよいし、信号をクライアント端末４からサーバ２へ送信し、その信号がサーバ２からクライアント端末４に戻ってくるまでの往復遅延時間に基づいて、通信速度を推定してもよい。
なお、本実施形態においては、通信速度測定部３０をクライアント端末４に設けたが、サーバ２に設けてもよい。
このようにすることで、画像再生部９により、再生途中で再生速度が変化することなく、一定の再生速度で顕微鏡画像を再生することができる。
【００３５】
また、通信速度測定部３０により測定される通信速度が低下してきた場合には、クライアント端末４において自動または手動で速度調整してもよいし、再生を一旦停止して、所定量の顕微鏡画像が蓄積されるまで待機してから再生を再開させることにしてもよい。また、通信速度が大きく低下した場合には、サーバ２の画像配信部１２が、配信する顕微鏡画像を圧縮あるいは一定量スキップして配信することにしてもよい。
【符号の説明】
【００３６】
１  顕微鏡画像閲覧システム
２  サーバ
３  ネットワーク
４  クライアント端末
５  入力部
６  情報送信部
７  画像受信部
８  バッファメモリ（記憶部）
９  画像再生部
１１  情報受信部
１２  画像配信部
Ｚ，Ｔ，λ  再生方向
【図１】
2017168003.tif 000003
【図２】
2017168003.tif 000004
【図３】
2017168003.tif 000005
【図４】
2017168003.tif 000006
【図５】
2017168003.tif 000007
【図６】
2017168003.tif 000008
【図７】
2017168003.tif 000009
【図８】
2017168003.tif 000010
【図９】
2017168003.tif 000011