(57)【特許請求の範囲】
【請求項１】
発光するように調製された複数の細胞を含む３次元的な形状を有する３次元試料について、互いに異なる合焦面を有する複数の２次元画像を取得する際の、前記複数の２次元画像の互いの間隔を前記３次元試料における発光の局在に応じて設定することと、
非照明条件下で前記３次元試料を撮影することで設定された前記間隔に応じた前記複数の２次元画像を含む２次元画像群を取得することと、
前記２次元画像群に含まれる前記複数の２次元画像を合成して３次元発光画像を生成することと
を含む３次元発光画像の生成方法。
【請求項２】
前記２次元画像群に含まれる前記複数の２次元画像のうち、所定の条件を満たす前記発光が検出される２次元画像を第１の２次元画像とし、前記第１の２次元画像以外の画像を第２の２次元画像としたときに、
前記２次元画像の前記間隔は、前記第１の２次元画像と当該第１の２次元画像に隣接する２次元画像との間の第１の間隔が、前記第２の２次元画像と当該第２の２次元画像に隣接する第２の２次元画像との間の第２の間隔よりも狭くなるように設定される、
請求項１に記載の３次元発光画像の生成方法。
【請求項３】
前記所定の条件は、前記２次元画像における前記発光を示す輝度値が所定の値以上であることである、請求項２に記載の３次元発光画像の生成方法。
【請求項４】
前記所定の条件は、前記２次元画像における前記発光を示す領域の面積値が所定の値以上であることである、請求項２に記載の３次元発光画像の生成方法。
【請求項５】
前記所定の条件は、前記２次元画像の予め決められた領域において前記発光を示す輝度値の変化が所定の値以上であることである、請求項２に記載の３次元発光画像の生成方法。
【請求項６】
前記第１の間隔よりも広い間隔で前記複数の２次元画像である評価用画像群を取得することと、
前記評価用画像群に基づいて、前記所定の条件を満たすか否かの判断を行うことと
をさらに含む請求項２に記載の３次元発光画像の生成方法。
【請求項７】
前記第１の間隔は、前記２次元画像の取得の際に用いられる対物光学系に応じて決定される焦点深度以下である、請求項２に記載の３次元発光画像の生成方法。
【請求項８】
前記２次元画像群の取得は繰り返し複数回行われ、
前記間隔の設定は、各々の前記２次元画像群の取得の都度に行われる、
請求項１に記載の３次元発光画像の生成方法。
【請求項９】
各々の前記２次元画像の間の前記間隔が変化しても、前記２次元画像群に含まれる前記２次元画像を取得するための露出時間の合計は変化しない、請求項８に記載の３次元発光画像の生成方法。
【請求項１０】
前記間隔の設定は、直前に取得された前記２次元画像群に基づいて行われる、請求項８に記載の３次元発光画像の生成方法。
【請求項１１】
前記２次元画像群は、一定時間ごとに同じ処理が繰り返されることで取得される、請求項８に記載の３次元発光画像の生成方法。
【請求項１２】
対物光学系と、
前記対物光学系の合焦位置を光軸方向に移動させる駆動部と、
発光するように調製された複数の細胞を含む３次元的な形状を有する３次元試料についての発光画像を前記対物光学系を介して撮像する撮像部と、
互いに異なる合焦面を有する複数の２次元画像を取得する際の、前記複数の２次元画像の互いの間隔を前記３次元試料における発光の局在に応じて設定する間隔設定部と、
非照明条件下で前記駆動部の動作を制御しながら前記撮像部に前記３次元試料を撮影させることで、設定された前記間隔に応じた前記複数の２次元画像を含む２次元画像群を取得させる撮像制御部と、
前記２次元画像群に含まれる前記複数の２次元画像を合成して３次元発光画像を生成する画像合成部と
を備える撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、３次元発光画像の生成方法及び３次元発光画像生成のための撮像システムに関する。
【背景技術】
【０００２】
ｉＰＳ細胞又はＥＳ細胞といった幹細胞由来の胚様体又はスフェロイドといった組織体が近年新しい研究材料として注目されており、これらを用いた研究が行われている。幹細胞由来の胚様体又はスフェロイドは、一般に、非接着状態で培養された幹細胞が集まって凝集し、球状の立体的な構造が構築された細胞群である。胚様体又はスフェロイドに含まれる細胞は、培養条件に応じて様々な細胞に変化する分化能を有する。例えば、臓器などの再生を目的とした再生医療、又は人体に対する新薬の薬効・毒性を評価する創薬の研究においては、これまで用いられてきた平面状に培養された細胞よりも、より体内の環境に近い立体的な構造を有する細胞が用いられることが望ましい。このため、特に近年の再生医療又は創薬分野の研究において、幹細胞由来の胚様体又はスフェロイドが研究材料として注目されている。【０００３】
従来の２次元培養細胞の評価においては、細胞で起こっている変化の検出方法として、細胞を発光タンパク質又は蛍光タンパク質で標識し、発光や蛍光を検出する手法が知られている（例えば、日本国特開２０１４−８９１９３号公報、日本国特開２００６−３２０３３５号公報）。立体的な構造を有する胚様体等を用いた研究を行う上では、分化の程度といった胚様体等の状態を精度よく把握することができる観察方法が望まれている。ここで、胚様体等の内部の変化は立体的に観察されることが望ましい。【０００４】
例えば日本国特許第５４２４５２８号公報には、次のような解析方法及び解析システムについて開示されている。すなわち、この方法及びシステムは、微弱光を発生し、かつ複数の測定すべき部位を有する厚みのある生きたサンプルとしての胚又は組織を対象としている。この方法及びシステムでは、測定部位ごとに異なる位置から微弱光シグナルが取得され、このシグナルに基づいて解析が行われる。また、例えば日本国特開２０１４−１１９７６２号公報には、フォーカス位置を変化させながら、明視野画像と発光画像又は蛍光画像とを撮影する顕微鏡システムについて開示されている。【０００５】
また、立体的な３次元試料の内部の解析では、例えば一定間隔で焦点位置をずらしながら撮影が行われることで焦点面の異なる複数の２次元画像が取得され、それらに基づく再構成処理によって３次元画像が構築され得る。このような３次元画像の構築により立体的なサンプルの内部の構造やその変化が解析され得ることが知られている（例えば、日本国特開２０１２−１２２８２９号公報、日本国特表２０１０−５３２４８７号公報）。この場合、例えば発光タンパク質又は蛍光タンパク質で標識された細胞が用いられ、生きた状態の細胞について種々の情報が取得され得る。【０００６】
例えば胚様体内部の遺伝子発現の解析を、従来用いられている蛍光観察法で行う場合、励起光の光毒性又は自家蛍光があること、また胚様体がある程度大きくなると内部まで励起光が届かないことといった望ましくない事象が生じ得る。これに対して、発光タンパク質を使用する発光観察法を用いれば、励起光の光毒性又は自家蛍光の影響を受けることなく、胚様体のような厚みのあるサンプルの内部まで観察することが可能である。【０００７】
しかしながら、一般的に発光タンパク質の発光強度は蛍光タンパク質の蛍光強度に比べると弱く、一回の撮影に長時間の露光が必要になる。このため、一定間隔で焦点位置をずらしながら撮影した発光画像を再構成することで発光３次元画像を構築する方法では、画像構築に時間を要する。また、複数の２次元画像を得る際に、焦点位置に係る撮影間隔を短くすれば、３次元画像の情報量は多くなり高精細なものとなる。一方で、撮影に要する時間が長くなり、データサイズも大きくなる。逆に焦点位置に係る撮影間隔を長くすれば、データサイズは小さくなるが、３次元画像に含まれる情報量は少なくなり、解像度は低下する。【０００８】
例えば胚様体を用いて新薬の薬効・毒性を調べる場合において、評価したい化合物によっては胚様体に反応が起こるまでに時間がかかる場合があり、また起こった反応が長時間に渡って変化する場合がある。これらのことから、長時間の観察が必要になることがある。また、胚様体が心筋や肝細胞などの様々な細胞に分化していく分化の過程をモニタリングする場合にも、長時間の観察が必要になることがある。
【発明の概要】
【０００９】
例えば胚様体といった３次元試料を用いた解析において、上述のような３次元再構築画像を、所定の時間間隔ごとに取得する３次元タイムラプス観察を行うことで、時間経過による３次元試料の変化を解析することが可能になる。このような解析においては、得られるデータのデータ量が膨大な量になることがあり得る。また、膨大なデータを得るためには多くの時間を必要とする。一方で、解析に必要なデータは部分的である。また、生きた試料において、解析に必要なデータは時間経過とともに変化し得る。さらに、幹細胞由来の胚様体又はスフェロイドでさえ、これら組織体を構成する個々の細胞が異なる遺伝子発現量を示す場合がある。
【００１０】
本発明は、発光するように調製された複数の細胞を含む３次元的な形状を有する３次元試料の観察において、必要十分なデータを取得することができる３次元発光画像の生成方法及び撮像システムを提供することを目的とする。
【００１１】
本発明の一態様によれば、３次元発光画像の生成方法は、発光するように調製された複数の細胞を含む３次元的な形状を有する３次元試料について、互いに異なる合焦面を有する複数の２次元画像を取得する際の、前記複数の２次元画像の互いの間隔を前記３次元試料における発光の局在に応じて設定することと、非照明条件下で前記３次元試料を撮影することで設定された前記間隔に応じた前記複数の２次元画像を含む２次元画像群を取得することと、前記２次元画像群に含まれる前記複数の２次元画像を合成して３次元発光画像を生成することとを含む。
【００１２】
本発明の一態様によれば、撮像システムは、対物光学系と、前記対物光学系の合焦位置を光軸方向に移動させる駆動部と、発光するように調製された複数の細胞を含む３次元的な形状を有する３次元試料についての発光画像を前記対物光学系を介して撮像する撮像部と、互いに異なる合焦面を有する複数の２次元画像を取得する際の、前記複数の２次元画像の互いの間隔を前記３次元試料における発光の局在に応じて設定する間隔設定部と、非照明条件下で前記駆動部の動作を制御しながら前記撮像部に前記３次元試料を撮影させることで、設定された前記間隔に応じた前記複数の２次元画像を含む２次元画像群を取得させる撮像制御部と、前記２次元画像群に含まれる前記複数の２次元画像を合成して３次元発光画像を生成する画像合成部とを備える。
【００１３】
本発明によれば、発光するように調製された複数の細胞を含む３次元的な形状を有する３次元試料の観察において、必要十分なデータを取得することができる３次元発光画像の生成方法及び撮像システムを提供できる。
【図面の簡単な説明】
【００１４】
【図１】図１は、本発明の一実施形態に係る撮像システムの構成例の概略を示すブロック図である。
【図２】図２は、本発明の第１の実施形態に係る３次元発光画像の生成方法の一例を示すフローチャートである。
【図３】図３は、本発明の第１の実施形態に係る画像取得処理の一例を示すフローチャートである。
【図４】図４は、本発明の第１の実施形態に係る条件調整処理の一例を示すフローチャートである。
【図５】図５は、本発明の第１の実施形態に係る自動組み合わせ処理の一例を示すフローチャートである。
【図６】図６は、本発明の一実施例により取得された３次元発光画像の一例を示す図である。
【図７】図７は、本発明の一実施例により取得された３次元発光画像の一例を示す図である。
【図８】図８は、本発明の一実施例により取得された３次元発光画像の一例を示す図である。
【図９】図９は、第２の実施形態において３次元試料の画像取得について説明するための模式図であり、撮影面の間隔が対物光学系の焦点深度よりも広い場合を示す図である。
【図１０】図１０は、第２の実施形態において得られる３次元画像について説明するための模式図である。
【図１１】図１１は、第２の実施形態において３次元試料の画像取得について説明するための模式図であり、撮影面の間隔が対物光学系の焦点深度よりも狭い場合を示す図である。
【図１２】図１２は、第２の実施形態において得られる３次元画像について説明するための模式図である。
【図１３】図１３は、第２の実施形態において得られる３次元画像について説明するための模式図である。
【図１４】図１４は、第２の実施形態に係る撮像システムの動作の概略を説明するための模式図である。
【図１５】図１５は、第２の実施形態に係る画像取得処理の一例を示すフローチャートである。
【図１６】図１６は、第２の実施形態に係る撮影面設定処理の一例を示すフローチャートである。
【図１７】図１７は、第２の実施形態において撮影面の間隔が狭く設定される条件について説明するための模式図である。
【図１８】図１８は、第２の実施形態において撮影面の間隔が狭く設定される条件について説明するための模式図である。
【図１９】図１９は、第２の実施形態における撮影面の間隔の設定について説明するための模式図である。
【図２０】図２０は、第２の実施形態における撮影面の間隔の設定について説明するための模式図である。
【図２１】図２１は、第２の実施形態に係る２次元画像取得処理の一例を示すフローチャートである。
【図２２】図２２は、第２の実施形態の第１の変形例に係る撮影面設定処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００１５】
［第１の実施形態］
本発明の第１の実施形態について図面を参照して説明する。本実施形態に係る３次元発光画像を取得するための撮像システムの構成例の概略を図１に示す。図１に示すように、撮像システム１０は、３次元試料１２を保持する試料保持部１１と、インキュベータ１３と、対物光学系１４と、撮像部１５と、対物光学系駆動部１６と、試料保持部駆動部１７と、撮像システム１０の各部の動作を制御する制御部１８と、表示部１９と、入力部２０とを備える。
【００１６】
３次元試料１２は、例えばｉＰＳ細胞やＥＳ細胞といった幹細胞由来の胚様体又はスフェロイドといった、複数の細胞を含み厚さを有する試料である。３次元試料１２は、非照明条件下で自己発光するよう調製されている。３次元試料１２は、例えばルシフェラーゼの遺伝子が導入された細胞を含み、ルシフェリンが添加されることで、ルシフェラーゼが発現している細胞は発光する。
【００１７】
インキュベータ１３は、３次元試料１２について温度やＣＯ２の濃度などの細胞を維持する環境の条件を調節する。対物光学系１４は、例えば対物レンズといった一般的な顕微鏡と同様な光学系を含む。撮像部１５は、例えば冷却ＣＣＤカメラといった撮像装置を含む。撮像部１５に含まれる撮像素子は、ＣＣＤイメージセンサに限らず、ＣＭＯＳイメージセンサ等でもよい。対物光学系１４によって拡大された３次元試料１２の像を撮像部１５は撮像する。非照明条件下で撮像が行われることによって、撮像部１５は、３次元試料１２が発光している様子の画像を取得することができる。このような、発光に係る画像を発光画像と称することにする。
【００１８】
対物光学系１４と撮像部１５との間には、第１のフィルタ３１が設けられてもよい。第１のフィルタ３１は、例えば、分光フィルムとして構成され得る。細胞内の発光のために用いられる発光タンパク質（例えばルシフェラーゼ）として異なる波長の発光を示すような１又は２種以上の発光タンパク質が使用された場合には、波長毎に撮像が行われることがある。この場合、波長毎に光を分離するために、第１のフィルタ３１が用いられて第１のフィルタ３１が交換されながら撮像が行われたり、波長ごとに別々の撮像部又は撮像素子上の部分領域で同時に撮像されたりする。これにより、マルチカラーな３次元発光画像が取得され得る。
【００１９】
試料保持部１１は、３次元試料１２を保持するように構成されている。試料保持部１１は、平面方向（Ｘ−Ｙ方向）に移動可能なように構成されている。試料保持部１１は、例えば、ステージにより構成される。試料保持部駆動部１７は、試料保持部１１を平面方向（Ｘ−Ｙ方向）に移動させる。試料保持部１１の平面方向（Ｘ−Ｙ方向）の移動により、撮像システム１０は、撮像視野を平面内で変更できる。
【００２０】
対物光学系駆動部１６は、対物光学系１４の前記平面方向（Ｘ−Ｙ方向）に対して垂直な光軸方向（Ｚ方向）の合焦位置を変化させる。対物光学系駆動部１６は、例えば対物レンズを光軸方向に移動させる。なお、対物光学系駆動部１６に代えて、試料保持部駆動部１７が試料保持部１１を光軸方向に移動させてもよい。対物光学系駆動部１６によって合焦位置が変更されることで、３次元試料１２の厚さ方向の異なる位置について合焦した画像が取得され得る。
【００２１】
また、撮像システム１０は、試料保持部１１及びインキュベータ１３を含む本体２１と、本体２１の外周部に設けられた暗箱２２と、暗箱２２を覆う蓋２３と、蓋２３に設けられた第２のフィルタ３０と、第２のフィルタ３０を介して３次元試料１２に照射する照明光の光源である光源２４とを備える。暗箱２２及び蓋２３により、本体２１の内部は外来光から遮光される。したがって、光源２４をオフにした場合には、本体２１の内部は、非照明条件となる。これにより、本体２１の内部に設置される３次元試料１２が極微弱な光を発しているときでも、撮像システム１０は、当該光を良好な条件で撮像できる。一方で、光源２４をオンにすることで、３次元試料１２の照明が行われる。照明条件下における３次元試料の観察は、例えば発光の観察及び撮像に先立って試料の位置を確認したり、試料表面に焦点を合わせたりするため等に行われる。
【００２２】
また、分光フィルムとして構成され得る第２のフィルタ３０を利用したり、光源２４にレーザ光源を用いたりすることで、蛍光を発生させるための励起光を３次元試料１２に照射することもできる。３次元試料１２が蛍光を発生するように調製されていれば、発光のみならず３次元試料１２の蛍光の画像も取得され得る。
【００２３】
制御部１８は、例えばパーソナルコンピュータにより構成される。制御部１８は、撮像動作を制御する撮像制御部１８１と、撮像された画像について画像処理を行って３次元発光画像を生成する画像合成部１８２と、撮影条件を決定する撮影条件決定部１８３と、各種データを記録する記録部１８４とを備える。
【００２４】
撮像制御部１８１は、１枚の画像を取得する際の露出時間を制御する。また、撮像制御部１８１は、対物光学系駆動部１６によって調整されるＺ軸方向の合焦位置の変化、すなわち撮影ピッチの制御を行う。撮像制御部１８１は、互いに異なる複数の合焦面についての複数の２次元発光画像からなる一組の２次元発光画像を、撮像部１５に取得させる。また、撮像制御部１８１は、一組の２次元発光画像の取得と他の組の２次元発光画像の取得との間隔である撮影間隔を制御する。
【００２５】
画像合成部１８２は、一組の２次元発光画像を合成して３次元発光画像を生成する。３次元発光画像の生成では、３次元合成である３次元再構成処理が行われる。すなわち、画像合成部１８２は、一組の２次元発光画像について、それぞれの位置情報を用いて、各画像を３次元的に配列して合成することで、３次元発光画像を生成する。
【００２６】
撮影条件決定部１８３は、撮像制御部１８１によって制御される撮像の条件を決定する。すなわち、撮影条件決定部１８３は、例えば撮影間隔、撮影ピッチ及び露出時間を決定する。
【００２７】
記録部１８４は、制御部１８の動作に必要な情報を記録している。この情報には、制御部１８の各部が動作するためのプログラムが含まれる。また、記録部１８４は、撮像により得られた２次元画像や、合成により生成した３次元発光画像を記録する。
【００２８】
このようにして、本実施形態に係る撮像システム１０によれば、決められた撮影間隔をあけて複数の３次元発光画像が取得される。すなわち、撮像システム１０によれば、３次元発光画像のタイムラプス撮影が行われ得る。
【００２９】
制御部１８は、Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ（ＣＰＵ）、Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ（ＡＳＩＣ）、又はＦｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ（ＦＰＧＡ）等の集積回路等を含み、各種演算を行う。撮像制御部１８１、画像合成部１８２、及び撮影条件決定部１８３は、それぞれ１つの集積回路等で構成されてもよいし、複数の集積回路等が組み合わされて構成されてもよい。また、撮像制御部１８１、画像合成部１８２、及び撮影条件決定部１８３のうち２つ以上が１つの集積回路等で構成されてもよい。制御部１８の動作は、記録部１８４又は集積回路内の記憶領域に記録されたプログラムに従って行われる。また、制御部１８は、記録部１８４に記録された２次元画像及び／又は３次元画像に基づき、画素ごとの発光の輝度値を算出することで、画像全体又は部分的な発光量に相当する輝度値の情報を撮影条件決定部１８３に送出する。
【００３０】
表示部１９は、例えば液晶ディスプレイといった一般的な表示装置を含む。表示部１９は、例えば画像合成部１８２で作成された３次元発光画像を表示する。表示部１９は、発光２次元画像その他の画像や、制御部１８による撮像システム１０の制御情報を表示部する。
【００３１】
入力部２０は、例えばキーボード、タッチパネル、スイッチ、スライダ等といった一般的な入力装置の何れかを含む。入力部２０は、ユーザの指示を受け取り、この指示を制御部１８に伝達する。
【００３２】
次に、本実施形態に係る３次元発光画像の生成方法について図２に示すフローチャートを参照して説明する。
【００３３】
ステップＳ１０１において、３次元試料が調整される。ここで、３次元試料は、複数の細胞を含み、３次元的な形状を有する。３次元試料には、例えば、ｉＰＳ細胞やＥＳ細胞といった幹細胞由来の胚様体やスフェロイド、胚様体やスフェロイドから分化させた心筋細胞や神経細胞などの各種細胞の集合体やコロニー、又は多層化された細胞シートなどが含まれ得る。また、３次元試料は、外部からの励起光を必要とせずに自己発光するように調整されている。例えば３次元試料の細胞は、ルシフェラーゼを発現し、ルシフェリンが添加されることで生物発光を生じるように調整され得る。なお、３次元試料はこれらに限らない。例えば、３次元試料は、担体上に細胞が離間して配置された試料でもよい。
【００３４】
ステップＳ１０２において、撮影条件が決定される。撮影条件には、一組の２次元発光画像を取得する時間間隔である撮影間隔と、１枚の２次元発光画像を取得する際の露出時間と、対物光学系の合焦位置を光軸方向に移動させる量であり、合焦面の距離間隔である撮影ピッチとが含まれ得る。第１の実施形態では、撮影条件は、これらの条件の最適な組み合わせとして決定され得る。例えば、撮影ピッチは、３次元試料のサイズ及び形状に応じて決定され得る。露出時間は、撮影ピッチと撮影間隔とに応じて決定されてもよい。また、露出時間は、３次元試料の発光強度に応じて決定され得る。撮影ピッチは、露出時間と撮影間隔とに応じて決定されてもよい。
【００３５】
ステップＳ１０３において、非照明条件下で複数の２次元発光画像が取得される。この２次元発光画像は、３次元試料の発光を撮像したものである。ここで、互いに異なる複数の合焦面を有する２次元画像が一組の２次元画像として取得される。一組の２次元画像には、３次元試料の高さ方向について端から端まであらゆる位置における２次元画像が含まれてもよいし、３次元試料の高さ方向の特定の一部の領域についての２次元画像が含まれてもよい。
【００３６】
ステップＳ１０４において、照明光又は励起光を用いた照明条件下で透過画像である２次元画像が取得されてもよい。この透過画像は、例えば撮影条件の決定に用いられてもよい。また、この透過画像は、後述する３次元発光画像の生成に用いられてもよい。３次元発光画像の生成に透過画像が用いられることで、発光の情報のみならず、発光の情報と透過画像の情報との組み合わせに係る情報が認識されやすくなる。
【００３７】
ステップＳ１０５において、ステップＳ１０３で取得された一組の２次元発光画像に基づいて、３次元発光画像が生成される。３次元発光画像の生成は、２次元発光画像を、その位置情報に基づいて合成することで生成され得る。この３次元発光画像の生成には、ステップＳ１０４で取得された照明条件下で得られた透過画像も併せて用いられてもよい。
【００３８】
ステップＳ１０６において、撮影間隔をおいて次の２次元発光画像とそれを用いた３次元発光画像の生成が行われると判断されたとき、ステップＳ１０３乃至ステップＳ１０５が繰り返される。すなわち、３次元発光画像のタイムラプス撮影が行われることになる。
【００３９】
次に、第１の実施形態に係る撮像システム１０を用いて行われるタイムラプスによるサンプルの３次元発光画像を取得する画像取得処理について説明する。画像取得処理は、ユーザが試料を試料保持部１１に設置した後に入力部２０からデータ取得の開始の指示を入力したときに開始される。画像取得処理について、図３に示すフローチャートを参照して説明する。この画像取得処理は、制御部１８の制御下で行われる。
【００４０】
ステップＳ２０１において、制御部１８は、ユーザによる入力部２０への入力に基づいて、撮影間隔（インターバル）を設定する。ここで、撮影間隔は、例えば実験内容に応じて決定される。細胞内カルシウム測定など、数秒から数分間隔で変化する現象を対象とする測定では、撮影間隔は短く設定されることが求められる。一方、幹細胞の分化、発生研究、時計遺伝子発現の解析など、数時間から数日レベルで緩やかに変化する現象を対象とする測定では、撮影間隔は比較的長くてもよい。
【００４１】
ステップＳ２０２において、制御部１８は、サンプルの明るさとして取得される発光量を取得する。例えば、サンプルの２次元画像を取得し、得られた画像の輝度を解析することで、発光量を取得する。
【００４２】
ステップＳ２０３において、制御部１８は、ステップＳ２０２で得られた情報に基づいて、露出時間の候補を算出する。候補として挙げられる露出時間は、画像化が可能な露出時間とする。例えば１６ビットの画像データの場合は、画素値として０から６５５３５の値が用いられる。例えば画素値が飽和しない露出時間が選択されてもよい。また、画像化が図れる数値の目安として、全画素の画素値の平均値が５０００程度となるような露出時間が設定されてもよい。なお、露出時間について閾値が任意に設定されてもよい。制御部１８は、例えばこれら露出時間の条件を検討して、露出時間として適当な範囲を特定する。
【００４３】
ステップＳ２０４において、制御部１８は、サンプルの厚さ（深度）を取得する。サンプルの厚さを取得するために、例えばＺ方向のフォーカス位置を変更しながら、サンプルの画像を取得する。得られた画像からサンプルの下限と上限とを特定して、下限と上限との距離を算出する。このとき、取得する画像は、短時間に確実に画像が取得できることから、照明条件下で取得される明視野画像であることが好ましい。ただし、明視野画像に代えて、発光画像が用いられてもよい。
【００４４】
ステップＳ２０５において、制御部１８は、ステップＳ２０４で取得したサンプルの厚さに基づいて、撮影ピッチの候補を算出する。
【００４５】
ステップＳ２０６において、制御部１８は、撮影条件を決定するためのモード選択を行う。本実施形態では、深度優先モードと、解像度優先モードと、自動組み合わせモードとが用意されている。ユーザは、これらのモードのうちから希望するモードを選択する。制御部１８は、入力部２０への入力を取得して、選択されたモードを特定する。
【００４６】
ステップＳ２０６において深度優先モードが選択されたとき、処理はステップＳ２０７に進む。ステップＳ２０７において、制御部１８は、深度を優先して画像取得の仮条件を決定する。すなわち、深度優先モードでは、撮影ピッチを狭くして、深さ方向に分解能が高いデータを取得する。例えば、１００μｍ厚の実験サンプルについて、撮影間隔として３０分間が選択されており、露出時間として最低１分間を必要としている場合を考える。この場合、露出時間を１分間とすることで、撮影間隔である３０分間に、３．３μｍ間隔で３０枚の画像を取得することができる。この場合には、仮条件として、露出時間が１分であり、撮影ピッチが３．３μｍである旨が決定される。画像取得の仮条件が決定されたら、処理はステップＳ２０８に進む。ここで、深度優先モードで選ばれる撮影ピッチは、単一の細胞を少なくとも２回以上撮像できる寸法である。このように、単一の細胞をｎ回撮像したい場合には、対象となる細胞の平均直径ｍ（μｍ）をｎで割った値（ｍ／ｎ）から、０．１以上（ｍ−０．１）以下の値（μｍ）を減じた撮像ピッチにすることができる。平均直径が６μｍであるような単一の細胞を深度優先モードで撮影するために、撮影ピッチを１．４から２．９μｍに設定することで２から４回の撮影を実行することができる。同様に、平均直径が１０μｍの細胞における撮像ピッチは、２．４から４．９μｍから選択される。
【００４７】
ステップＳ２０８において、制御部１８は条件調整処理を行う。条件調整処理について、図４に示すフローチャートを参照して説明する。
【００４８】
ステップＳ３０１において、制御部１８は、決定された画像取得の仮条件、すなわち露出時間及び撮影ピッチに従って、３次元発光画像を構築するための複数の２次元画像を取得する。例えば、所定の焦点位置において決められた露出時間で２次元画像を取得し、続いて決められた撮影ピッチだけ焦点位置を変更して再び決められた露出時間で２次元画像を取得することを繰り返す。
【００４９】
ステップＳ３０２において、制御部１８は、ステップＳ３０１で取得された画像に基づいて、３次元発光画像を生成する。この際、ステップＳ３０１で取得された画像に対してデコンボリューション処理を施して、画像ボケをキャンセルする処理が行われる。３次元発光画像の生成は、デコンボリューション処理が行われた画像を用いて行われる。
【００５０】
ステップＳ３０３において、制御部１８は、生成した３次元発光画像を表示部１９に表示させる。
【００５１】
ステップＳ３０４において、制御部１８は、撮影条件が適当であるか否かについての使用者の判断を取得する。例えば、表示部１９に露出時間、撮影ピッチ、及び撮影間隔の現在の設定値と、それを変更するためのアイコンとが表示される。使用者は、アイコンを選択することで自身の判断結果を入力することができる。撮影条件が適当である旨の情報が取得されたとき、処理はステップＳ３０５に進む。
【００５２】
ステップＳ３０５において、制御部１８は、現在設定されている画像取得のための仮条件を最終的な画像取得のための条件として決定する。その後、条件調整処理は終了し、処理は図３を参照して説明している画像取得処理に戻る。
【００５３】
ステップＳ３０４において、撮影条件が適当でない旨の情報が取得されたとき、処理はステップＳ３０６に進む。ステップＳ３０６において、制御部１８は、条件を変更するために、使用者から露出時間、撮影ピッチ、及び撮影間隔の変更値を取得する。ここで、例えば撮影間隔との関係で、露出時間を増加させると撮影ピッチを広くしなければならないときには、露出時間を増加させるための入力がなされたときに、その変更に対応した撮影ピッチを算出して提示したり、撮影間隔の変更を提示したりする。画像取得の条件が再設定されたら、処理はステップＳ３０１に戻る。その後、再設定された条件で２次元画像の取得及び３次元発光画像の生成等が行われる。
【００５４】
図３に戻って説明を続ける。ステップＳ２０８において条件調整処理が行われた後、処理はステップＳ２１３に進む。
【００５５】
ステップＳ２０６において解像度優先モードが選択されたとき、処理はステップＳ２０９に進む。ステップＳ２０９において、制御部１８は、解像度を優先して画像取得の仮条件を決定する。すなわち、解像度優先モードでは、露出時間を長くしてＳ／Ｎ比が高い発光画像を取得する。例えば、１００μｍ厚の実験サンプルについて、撮影間隔として３０分間が選択されており、露出時間を４分間とすると解像度が高い画像が取得され得る場合を考える。この場合、露出時間を４分間とすることで、撮影間隔である３０分間に、１４．３μｍ間隔で７枚の画像を取得することができる。この場合には、仮条件として、露出時間が４分であり、撮影ピッチが１４．３μｍである旨が決定される。画像取得の仮条件が決定されたら、処理はステップＳ２１０に進む。ここで、解像度優先モードで選ばれる撮影ピッチは、たとえば２以上の細胞が深さ方向に隣接している場合に、いずれか１個を撮影できる寸法とすることができる。このように、ｎ個（２以上）細胞について１回の撮像を行う場合には、対象となる細胞の平均直径ｍ（μｍ）をｎで乗じた値（ｍｎ）から、０．１以上で且つｍｎの半分の値（ｍｎ／２）未満の値（μｍ）を減じた撮像ピッチにすることができる。平均直径が６μｍであるような単一の細胞を解像度優先モードで撮影するために、撮影ピッチを６．１から２３．９μｍに設定することで２から４個の細胞ごとに１回の撮影を実行することができる。同様に、平均直径が１０μｍの細胞における撮像ピッチは、１０．１から３９．９μｍから選択される。
【００５６】
ステップＳ２１０において、制御部１８は、条件調整処理を行う。条件調整処理は、図４を参照して説明したステップＳ２０８の条件調整処理と同じである。条件調整処理の後、処理はステップＳ２１３に進む。
【００５７】
ステップＳ２０６において自動組み合わせモードが選択されたとき、処理はステップＳ２１１に進む。ステップＳ２１１において、制御部１８は、自動組み合わせ処理を行う。自動組み合わせ処理について、図５に示すフローチャートを参照して説明する。
【００５８】
ステップＳ４０１において、制御部１８は、ステップＳ２０１で取得された撮影間隔、ステップＳ２０３で取得された露出時間の候補、及びステップＳ２０５で取得された撮影ピッチの候補に基づいて、複数の撮影条件を設定する。
【００５９】
ステップＳ４０２において、制御部１８は、ステップＳ４０１で設定された条件に従って、必要な複数の２次元画像を取得する。
【００６０】
ステップＳ４０３において、制御部１８は、ステップＳ４０２において、取得された２次元画像に基づいて、複数の３次元発光画像を生成する。
【００６１】
ステップＳ４０４において、制御部１８は、ステップＳ４０３において生成した複数の３次元発光画像及びそれらの画像を生成するための撮影条件等を表示部１９に表示させる。使用者は、表示部１９に表示された３次元発光画像及び撮影条件等を確認しながら、好ましい撮影条件を選択する。
【００６２】
ステップＳ４０５において、制御部１８は、使用者による撮影条件の選択を取得する。ステップＳ４０６において、制御部１８は、ステップＳ４０５で取得された条件を仮条件として決定する。その後、自動組み合わせ処理を終了し、処理は図３を参照して説明している画像取得処理に戻る。
【００６３】
図３に戻って説明を続ける。ステップＳ２１２において、制御部１８は、条件調整処理を行う。その後、処理はステップＳ２１３に進む。ステップＳ２１３において、制御部１８は、条件調整処理で決定された画像取得の条件を記録部１８４に保存する。ステップＳ２１４において、制御部１８は、データ取得開始の指示が入力されたか否かを判定する。データ取得開始の指示が入力されていないとき、処理はステップＳ２１４に戻り、データ取得開始の指示の入力を待つ。データ取得開始の指示が入力されたとき、処理はステップＳ２１５に進む。
【００６４】
ステップＳ２１５において、制御部１８は、データ取得処理を行う。データ取得処理では、決定された画像取得の条件に従ってデータ取得処理を行う。すなわち、決定された露出時間に従って、発光画像が取得される。この画像は、決定された撮影ピッチに従って、焦点位置を変化させながら、焦点位置が異なる複数の発光画像が取得される。これら複数の発光画像に基づいて、３次元発光画像が作成される。このようにして得られる３次元発光画像の取得が決定された撮影間隔毎に行われる。以上によって、本処理は終了する。
【００６５】
なお、撮影間隔、露出時間、及び撮影ピッチといった撮影条件は、全計測を通じて一定である必要はない。例えば観察の前期においては深度を優先し、後期においては解像度を優先してもよいし、観察の前期と後期とで撮影間隔が異なるように設定されてもよい。
【００６６】
また、透過画像から被写体内部の細胞の分布情報を得て、細胞の高さ方向の分布を確認した上で、撮像すべき中間部位の高さ方向の位置を決定してもよい。このようにすると、例えば露出時間が長い生物発光の画像取得について、１枚の３次元発光画像を取得するための時間を最小限にすることができ、効率のよい解析が実現され得る。
【００６７】
本実施形態で取得される３次元発光画像は、３次元試料の発光を撮像したものである。したがって、本実施形態に係る発光現象を用いた観察方法を用いれば、蛍光観察の場合に発生するような自家蛍光に由来する問題がない。また、蛍光観察では、励起光が３次元試料に与えるダメージを無視できない場合がある。本実施形態に係る発光現象を用いた観察方法を用いれば、蛍光観察の場合に発生するような励起光に由来する問題がない。このため、本実施形態に係る観察は、長期間の観察にも適用され得る。
【００６８】
また、本実施形態によれば、実験の目的や観察対象とするサンプルに応じて、撮影間隔、露出時間、及び撮影ピッチが最適に選択される。
【００６９】
例えば、再生医療研究で幅広く用いられている胚様体又はスフェロイドを対象として、高さ方向の端部に加え中間部位における３次元発光画像が取得されることで、構造物全体における遺伝子発現の様子を立体的に把握することが可能になる。ここで中間部位は、生体の状態に近い部位であり、この部分のデータを取得できることの意義は大きい。３次元発光画像によれば、３次元試料の内部構造と比較（又は照合）可能な画像が取得され得る。
【００７０】
また、胚様体又はスフェロイドのサイズ及び形状に基づいて撮影ピッチが設定されることで、撮像範囲に含まれる細胞の数量や密度を考慮した３次元発光画像が得られる。一般に、幹細胞由来の胚様体又はスフェロイドの全長の平均直径は５０μｍから１０００μｍの範囲に及ぶので、全長が長い（例えば５００μｍ以上）場合には解像度優先モードを採用することで撮像ピッチを広くすることで適度な回数の撮影を実行したり、断面が最も大きくなる中間部位を含む狭い領域（たとえば全長の３分の１から５分の１に相当する深さ）のみを深度優先モードにより限定的に精密に撮影したりすることが好ましい。また、撮影条件は適宜に変更され得るので、例えば分化の進行度に応じた必要な精度の立体観察が行われるように、撮影条件が決定され得る。また、光軸方向に合焦位置を変化させ、複数の発光画像を撮影するので、被写体である３次元試料を移動又は回転させる必要がない。
【００７１】
また、本実施形態に係る観察方法は、幹細胞の分化の誘導機構を理解するための研究において、特に有益な情報を得ることができる。当該方法は、例えば、分化効率の評価や、分化誘導薬剤の評価等の解析ツールとして用いられ得る。また、再生医療研究で幅広く用いられている胚様体を対象として、立体的発光観察が行われることで、平面では検出され得ない高さや厚さの情報を踏まえた高精度の解析が行われ得る。
【００７２】
〈実施例〉
〈実施例１〉
ｉＰＳ細胞の心筋誘導過程における心筋特異的マーカーの発現について発光を利用した３次元観察を行った結果について以下に示す。
【００７３】
心筋特異的トロポニンＴ（ｃａｒｄｉａｃ  ｔｒｏｐｏｎｉｎＴ；ｃＴｎＴ）は心筋に特異的に発現するタンパク質であり、心筋分化のマーカー遺伝子として利用されている。マウスｉＰＳ細胞の胚様体形成法による心筋分化過程におけるｃＴｎＴの発現の変化を発光強度として解析できる実験系を構築し、当該マウスｉＰＳ細胞の胚様体の３次元観察を行った。
【００７４】
［実験方法］
（１）ｃＴｎＴ遺伝子のプロモーター領域とルシフェラーゼ遺伝子とを含む核酸が導入されたマウスｉＰＳ細胞の作製
ｃＴｎＴ遺伝子のためのプロモーター領域をネオマイシン耐性のｐＧＬ４．１７ルシフェラーゼレポーターベクター（Ｐｒｏｍｅｇａ）に組み込み、「ｃＴｎＴ遺伝子発現特異的発光ベクターｐｃＴｎＴ−ＧＬ４」を作製した。
【００７５】
ベクターを導入するマウスｉＰＳ細胞（ｉＰＳ-ＭＥＦ−Ｎｇ−２０Ｄ−１７、京都大学）の培養には、ＫＯ  ＤＭＥＭ培地を用いた。このｉＰＳ細胞は、マイトマイシンＣ処理で分裂を停止させたＭＥＦ細胞上で培養した。
【００７６】
Ｎｕｃｌｅｏｆｅｃｔｉｏｎ法を用いて、マウスｉＰＳ細胞にｐｃＴｎＴ−ＧＬ４遺伝子発現ベクターをトランスフェクションした。トランスフェクションした細胞を一晩ＫＯ  ＤＭＥＭ培地でネオマイシン耐性フィーダー細胞とともに培養した。その後、培地を抗生物質Ｇ４１８（Ｉｎｖｉｔｒｏｇｅｎ）を終濃度２５０μｇ／ｍｌとなるよう加えたＫＯ  ＤＭＥＭ培地に交換して、選択的な培養を行った。このようにして、安定発現細胞株を取得した。以下、この細胞をｃＴｎＴ−ＧＬ４発現マウスｉＰＳ細胞と呼ぶ。
【００７７】
（２）ｃＴｎＴ−ＧＬ４発現マウスｉＰＳ細胞の胚様体の形成
培養したｃＴｎＴ−ＧＬ４発現マウスｉＰＳ細胞をＰＢＳで洗浄し、０．２５％トリプシンＥＤＴＡで剥がした後、ＫＯ  ＤＭＥＭ培地を加え、３７℃インキュベータで４時間インキュベートした。フィーダー細胞（ＭＥＦ）を固着させることで、マウスｉＰＳ細胞のみが浮遊する状態にした。マウスｉＰＳ細胞が含まれた培地を遠心して細胞を回収し、１ｍｌのＫＯ  ＤＭＥＭ培地又はＩＭＤＭ培地に細胞を再混濁した。溶液中の細胞数をセルカウンターで計測し、ＩＭＤＭ培地を加えたＬｉｐｉｄｕｒｅ−Ｃｏａｔ培養培地（９６ウェル丸底；日油株式会社）の各ウェルに細胞数が２５００個又は５０００個になるように細胞混濁液を加え、３乃至７日間３７℃で培養し、胚様体を形成させた。
【００７８】
（３）ｃＴｎＴ−ＧＬ４発現マウスｉＰＳ細胞の心筋への分化誘導
形成させた胚様体をゼラチンコート処理した３５ｍｍディッシュに移し、３７℃で一晩インキュベートしてディッシュ表面に胚様体を接着させた。その後、３７℃で５乃至１４日間ほど培養し、拍動する心筋細胞への分化誘導を行った。
【００７９】
（４）ｃＴｎＴ―ＧＬ４発現マウスｉＰＳ細胞の観察及び解析
３７℃で培養を続け、一部に拍動する心筋細胞が見られるようになったｃＴｎＴ―ＧＬ４発現マウスＥＳ細胞の胚様体について、Ｄ−Ｌｕｃｉｆｅｒｉｎ（和光純薬製）を終濃度１ｍＭとなるよう加え、拍動する細胞を解析ソフトウェアであるｃｅｌｌＳｅｎｓ（オリンパス株式会社）を搭載した発光顕微鏡ＬＶ２００（オリンパス株式会社）を用いて、発光３次元観察を行った。その際の撮影条件として、対物レンズは２０倍、ＣＣＤカメラはＩｍａｇＥＭ（登録商標）（浜松ホトニクス社製）、ビニングは１×１とした。
【００８０】
各焦点位置における露出時間は、３分、５分又は１０分とした。撮影ピッチは、１０μｍ、５０μｍ、又は１００μｍとした。
【００８１】
［実験結果及び考察］
図６は、撮影ピッチを１０μｍとして、焦点位置を変化させながら２０枚の画像（計１０００μｍ）を取得した場合の撮影結果を示す。図６において、左側の図は、各々の２次元画像の露出時間が５分である場合の３次元再構築画像であり、右側の図は、各々の２次元画像の露出時間が１０分である場合の３次元再構築画像である。
【００８２】
図６に示すように、この実験系では、露出時間は１０分のときには露出過多であり、露出時間が５分である場合の方が解像度がよいことが分かる。
【００８３】
図７は、露出時間を３分又は５分とし、撮影ピッチを１０μｍ、５０μｍ、又は１００μｍとして、厚さ４００μｍの領域を撮影した結果を示す。図７において、上段は、各々の２次元画像の露出時間が３分の場合であり、下段は、各々の２次元画像の露出時間が５分の場合である。また、図７において、左列の画像は、撮影ピッチが１０μｍであり、４０枚の画像に基づいて３次元発光画像の再構築を行った結果である。中列の画像は、撮影ピッチが５０μｍであり、８枚の画像に基づいて３次元発光画像の再構築を行った結果である。右列の画像は、撮影ピッチが１００μｍであり、４枚の画像に基づいて３次元発光画像の再構築を行った結果である。
【００８４】
図７に示すように、この実験系では、露出時間は、３分の場合よりも５分の場合の方が解像度がよいことが分かる。また、この実験系では、撮影ピッチが狭い程、空間分解能が高いことが分かる。このように、上述した深度優先モードと解像度優先モードを使い分けることにより、多様な３次元画像を取得できる。これら複数の撮影モードにより撮影された３次元発光画像によれば、例えば３次元試料の内部において遺伝子発現の変化が大きい部分については深度優先モードを適用することで短時間で多くの情報を得ることができる。その結果、部分的に発現量の変化が大きい場合であっても発現量の変化が正確に把握され得る。
【００８５】
図８は、露出時間を３分又は５分とし、撮影ピッチを１０μｍ又は１００μｍとして、厚さ４００μｍの領域を撮影した結果を示す。図８において、上段は、各々の２次元画像の露出時間が３分の場合であり、下段は、各々の２次元画像の露出時間が５分の場合である。また、図８において、左列の画像は、撮影ピッチが１０μｍであり、４０枚の画像に基づいて３次元発光画像の再構築を行った結果である。右列の画像は、撮影ピッチが１００μｍであり、４枚の画像に基づいて３次元発光画像の再構築を行った結果である。
【００８６】
図８に示すように、この実験系では、露出時間は、３分の場合よりも５分の場合の方が解像度がよいことが分かる。また、この実験系では、撮影ピッチが狭い程、空間分解能が高いことが分かる。
【００８７】
以上のように、撮影条件に応じて生成される３次元発光画像が異なるものになることが明らかになった。このことからも撮影条件が適切に選択されることが重要であることが明らかになった。
【００８８】
また、サンプルを光源から射出された所定の波長の光で照明し、明視野又は蛍光による透過画像を取得した。予め３次元試料の内部構造を確認することで、試料の高さ方向の撮像範囲が適切に指定できた。３次元試料の高さの頂点付近や容器底面の接着部付近からの３次元情報は、重力や吸着力等の物理的影響により、発現量の解析のノイズとなる場合がある。そこで、できるだけこれら力学的影響の少ない中間部位を撮像範囲として選ぶことが重要であった。さらに、撮影ピッチは、胚様体やスフェロイドのように試料内部の分化度に応じて細胞の数量や密度等が変化する場合に、培養時期によらず試料内の細胞を逃すことなく解析するために重要であった。
【００８９】
適当な条件で２次元画像の撮影を行い、その２次元画像に基づいて３次元発光画像の構築を行えば、実験の目的等に応じた適当な発光３次元発光画像が作成され得ることが明らかになった。
【００９０】
［実施例２］
３次元発光観察法を用いたタイムラプス観察を行うことで、実施例１で用いたｃＴｎＴ−ＧＬ４マウスｉＰＳ細胞の心筋分化過程におけるｃＴｎＴの発現を、立体的かつ経時的に観察することができる。
【００９１】
［第２の実施形態］
本発明の第２の実施形態について説明する。ここでは、第１の実施形態との相違点について説明し、同一の部分については、同一の符号を付してその説明を省略する。第２の実施形態でも、複数の２次元画像に基づいて３次元画像が生成される３次元画像の取得が繰り返し行われるタイムラプス観察が行われる。ここで、３次元画像の取得は、例えば一定時間ごとに同じ処理が繰り返されることで行われ得る。第２の実施形態では、３次元画像を取得するために行われる一組の２次元画像の取得において、２次元画像と２次元画像との間のＺ軸方向の間隔である撮影ピッチが、３次元画像の取得毎に適宜に変更される。
【００９２】
２次元画像のＺ軸方向の間隔（撮影ピッチ）について図面を参照して説明する。図９に３次元試料３００の画像を取得する場合の模式図を示す。図９において、３次元試料３００の内部には発光を示す領域である第１の注目領域３０１と第２の注目領域３０２とが含まれている。例えば、３次元試料３００を対物レンズ１４２を移動させて合焦位置を変化させながら観察する場合を考える。この場合において、画像を取得する際の合焦面を破線で示す。すなわち、第１の合焦面４０１、第２の合焦面４０２、第３の合焦面４０３、第４の合焦面４０４、第５の合焦面４０５、及び第６の合焦面４０６のそれぞれにおいて２次元画像が取得されるものとする。このときの対物光学系１４の焦点深度に応じて画像が得られる範囲を図右に「Ｉ」型の記号で示す。ここで、Ｉ字の高さが焦点深度、すなわち、合焦する範囲を示すものとする。すなわち、第１の合焦面４０１における撮像では、第１の範囲４１１の画像が取得される。同様に、第２の合焦面４０２、第３の合焦面４０３、第４の合焦面４０４、第５の合焦面４０５及び第６の合焦面４０６のそれぞれにおける撮像では、第２の範囲４１２、第３の範囲４１３、第４の範囲４１４、第５の範囲４１５、及び第６の範囲４１６の画像がそれぞれ取得される。
【００９３】
その結果、図１０に模式図を示すような画像が得られる。すなわち、第１の範囲４１１、第２の範囲４１２、第３の範囲４１３、第４の範囲４１４、第５の範囲４１５、及び第６の範囲４１６の画像が得られる。一方で、図１０中に網掛けで示した、第１の範囲４１１と第２の範囲４１２との間の第１の欠損領域４２１、第２の範囲４１２と第３の範囲４１３との間の第２の欠損領域４２２、第３の範囲４１３と第４の範囲４１４との間の第３の欠損領域４２３、第４の範囲４１４と第５の範囲４１５との間の第４の欠損領域４２４、及び第５の範囲４１５と第６の範囲４１６との間の第５の欠損領域４２５の画像は得られない。すなわち、３次元試料３００並びにその注目領域である第１の注目領域３０１及び第２の注目領域３０２について、完全な画像が得られない。
【００９４】
これに対して、図９に示す場合と比較して撮像の回数を増やし、撮像を行う合焦面の間隔を狭めた場合の模式図を図１１に示す。図１１に示すように、第１の合焦面４３１、第２の合焦面４３２、第３の合焦面４３３、第４の合焦面４３４、第５の合焦面４３５、第６の合焦面４３６、第７の合焦面４３７、第８の合焦面４３８、第９の合焦面４３９、第１０の合焦面４４０、及び第１１の合焦面４４１のそれぞれにおいて、２次元画像が取得されるものとする。ここで、図１１に示す例えば第１の合焦面４３１と第２の合焦面４３２との間隔は、図９に示す場合の第１の合焦面４０１と第２の合焦面４０２との間隔よりも狭い。その結果、第１の合焦面４３１、第２の合焦面４３２、第３の合焦面４３３、第４の合焦面４３４、第５の合焦面４３５、第６の合焦面４３６、第７の合焦面４３７、第８の合焦面４３８、第９の合焦面４３９、第１０の合焦面４４０、及び第１１の合焦面４４１のそれぞれに合焦させた際に画像が得られる範囲である第１の範囲４５１、第２の範囲４５２、第３の範囲４５３、第４の範囲４５４、第５の範囲４５５、第６の範囲４５６、第７の範囲４５７、第８の範囲４５８、第９の範囲４５９、第１０の範囲４６０及び第１１の範囲４６１の間には間隙がない。例えば第１の範囲４５１と第２の範囲４５２とは重なり合う。
【００９５】
その結果、図１２に示すような画像が得られる。すなわち、３次元試料３００並びにその注目領域である第１の注目領域３０１及び第２の注目領域３０２について、完全な画像が得られる。なお、ここでは、各撮影範囲が互いに重なり合っている場合の例を示したが、撮影範囲の間に間隔が無く隣接していれば、各撮影範囲は重なり合っていなくてもよい。
【００９６】
図１０に示すような焦点面の間隔が広い条件で得られた３次元画像では、情報は不完全で不明瞭な画像となるが、取得される２次元画像の数は少なく、データサイズは小さくなる。一方で、図１２に示すような焦点面の間隔が狭い条件で得られた３次元画像では、観察対象の全ての情報が含まれ、高精細な画像となるが、取得される２次元画像の数は多く、データサイズは大きくなる。
【００９７】
ここで、図１２に破線の矩形で示すように、第１の注目領域３０１も第２の注目領域３０２もない領域４７０では、高い解像度が不要である。そこで本実施形態では、図１２に示す第５の範囲４５５及び第７の範囲４５７における２次元画像の取得を行わないことを考える。すなわち、本実施形態では、図１３に示すように、第１の欠損領域４７１及び第２の欠損領域４７２が生じても、データサイズを小さくするために、第１の範囲４５１、第２の範囲４５２、第３の範囲４５３、第４の範囲４５４、第６の範囲４５６、第８の範囲４５８、第９の範囲４５９、第１０の範囲４６０及び第１１の範囲４６１についての画像が取得される。
【００９８】
本実施形態に係る撮像システム１０の動作の概略を図１４を参照して説明する。図１４は、時間経過とともに、どのような合焦面で撮像が行われるかを示している。すなわち、図１４は、左図（ａ）、中図（ｂ）、右図（ｃ）の順に時間が経過した場合を示している。各図における水平の直線４８０の各々は、各撮影が行われる際の合焦面を示している。この撮影が行われる際の合焦面を撮影面４８０と称することにする。
【００９９】
初めに、図１４の左図（ａ）のように、３次元試料３００に発光を示す注目すべき領域が無い場合、３次元試料３００の全体にわたって、撮影面４８０の間隔は広く設定される。ここで。撮影面４８０の間隔は、対物光学系１４の焦点深度よりも広い。
【０１００】
このような状態から、図１４の中図（ｂ）のように、第１の注目領域３０１及び第２の注目領域３０２が生じたとき、第１の注目領域３０１及び第２の注目領域３０２が生じた領域が検出される。第１の注目領域３０１及び第２の注目領域３０２を含む領域については、撮影面４８０の間隔は狭く設定され、それ以外の領域については、撮影面４８０の間隔は広く設定される。ここで狭く設定される撮影面４８０の間隔は、対物光学系１４の焦点深度と等しい又は対物光学系１４の焦点深度よりも狭い。以降、この焦点深度以下の間隔を第１の間隔と称し、焦点深度よりも広い間隔を第２の間隔と称する。
【０１０１】
さらに、図１４の右図（Ｃ）のように、第１の注目領域３０１及び第２の注目領域３０２に加えて、第３の注目領域が生じたとき、第１の注目領域３０１、第２の注目領域３０２、及び第３の注目領域３０３を含む領域が検出される。第１の注目領域３０１、第２の注目領域３０２及び第３の注目領域３０３を含む領域については、撮影面４８０の間隔は狭い第１の間隔に設定され、それ以外の領域については、撮影面４８０の間隔は広い第２の間隔に設定される。また、注目領域が消滅したときは、当該注目領域について、撮影面４８０の間隔を第１の間隔から第２の間隔に変更する。このように、本実施形態では、発光が認められる注目領域の有無に応じて、撮影面の間隔が適宜に変更される。
【０１０２】
第２の実施形態に係る撮像システム１０の動作について、フローチャートを参照して説明する。図１５は、本実施形態に係る画像取得処理の一例の概略を示す。
【０１０３】
ステップＳ５０１において、制御部１８は、画像取得に係る初期設定を行う。この初期設定には、例えば、画像が取得されるＺ軸方向の範囲である画像取得領域の設定、タイムラプス撮影における画像取得の時間間隔（撮影間隔）を含む撮影のタイミングに関する設定等が含まれる。
【０１０４】
ステップＳ５０２において、制御部１８の撮影条件決定部１８３は、撮影面設定処理を行う。撮影面設定処理は、２次元画像を取得する際の合焦面である撮影面を３次元試料における発光の局在に応じて設定するための処理である。すなわち、撮影条件決定部１８３は、撮影面の間隔を設定する。このように、例えば撮影条件決定部１８３は、互いに異なる合焦面を有する複数の２次元画像を取得する際の、複数の２次元画像の互いの間隔を３次元試料における発光の局在に応じて設定する間隔設定部として機能する。撮影面設定処理について、図１６に示すフローチャートを参照して説明する。
【０１０５】
ステップＳ６０１において、撮影条件決定部１８３は、当該撮影の１回前の撮影で取得された２次元画像について、輝度分布を解析する。
【０１０６】
ステップＳ６０２において、撮影条件決定部１８３は、ステップＳ６０１で得られた輝度分布に基づいて、３次元的な注目領域の分布を特定する。
【０１０７】
ステップＳ６０３において、撮影条件決定部１８３は、ステップＳ６０２で特定された注目領域の分布に応じて、画像取得領域内における撮影面を設定する。
【０１０８】
なお、初回の撮影面設定処理においては、前回の撮影結果である２次元画像が存在しないので、例えば、撮影面は画像取得領域全体にわたって均等に広い第２の間隔で設定される。
【０１０９】
ここで、撮影面の間隔が、対物光学系１４の焦点深度以下である第１の間隔に設定される条件の例を挙げる。
【０１１０】
例えば図１７に示すように、ある撮影面について１つの大きな領域３０５が発光している場合を考える。ここで、当該発光に係る輝度値が所定の閾値より高くなっている領域を発光を示す領域とし、この領域を高輝度領域とする。高輝度領域の面積が所定の閾値よりも大きいとき、当該撮影面について注目領域があり、当該撮影面の近傍において撮影面の間隔を対物光学系１４の焦点深度以下の第１の間隔にするように、撮像システム１０は構成され得る。
【０１１１】
また、上述の場合と異なり、次のように構成されてもよい。すなわち、例えば図１８に示すように、ある撮影面について複数の小さな領域３０６が発光している場合を考える。当該発光に係る輝度値のうち、最も高い輝度値を発光を示す輝度値とし、当該発光を示す輝度値が所定の閾値より高くなっているとき、当該撮影面について注目領域があるものとする。すなわち、当該撮影面の近傍において撮影面の間隔を対物光学系１４の焦点深度以下の第１の間隔にするように、撮像システム１０は構成され得る。
【０１１２】
また、次のようにしてもよい。すなわち、ある撮影面において、所定の領域が関心領域として定められており、この関心領域内の輝度値の変化が所定の閾値よりも大きいとき、当該撮影面について注目領域があり、当該撮影面の近傍において撮影面の間隔を対物光学系１４の焦点深度以下の第１の間隔にするように、撮像システム１０は構成され得る。同様に、ある撮影面の全体の輝度値の変化が、所定の閾値よりも大きいときに第１の間隔にするようにしてもよい。
【０１１３】
撮影面の設定について、さらに図１９及び図２０を参照して説明する。図１９及び図２０において、左図は、３次元試料３００における撮影面５１０の位置関係を示す。図１９及び図２０の左図における水平方向の複数の複数の破線は、撮影面５１０を示す。また、これらの図において、３次元試料３００内に注目領域３０８がある状態が示されている。図１９及び図２０において、右図は、各撮影面４８０に関して得られる２次元画像５４０を模式的に示す。
【０１１４】
図１９は、例えば最初の画像取得において設定される撮影面５１０が均等に第２の間隔で配置された場合を示す。すなわち、図１９において、第１の撮影面５１１と、第２の撮影面５１２と、第３の撮影面５１３と、第４の撮影面５１４と、第５の撮影面５１５とが等間隔に設定されている。第１の撮影面５１１、第２の撮影面５１２、第３の撮影面５１３、第４の撮影面５１４、及び第５の撮影面５１５で得られる画像を、それぞれ第１の画像５４１、第２の画像５４２、第３の画像５４３、第４の画像５４４、第５の画像５４５とする。第３の撮影面は注目領域３０８を含んでいるので、第３の画像５４３は、発光が画像化された明領域５４９を含む。
【０１１５】
図１９に示す例では、撮影条件決定部１８３は、ステップＳ６０１の画像の輝度解析で第３の画像５４３が明領域５４９を含むことを特定し、ステップＳ６０２で撮影面５１０のうち第３の撮影面５１３の付近に注目領域が存在することが特定され、ステップＳ６０３において、第３の撮影面５１３の近傍に狭い間隔で多くの撮影面が設定される。図２０は、このようにして設定された撮影面５１０と、これら撮影面５１０で得られた２次元画像５４０を示す。
【０１１６】
すなわち、図２０に示す例においては、第１の撮影面５１１、第２の撮影面５１２、第３の撮影面５１３、第４の撮影面５１４、及び第５の撮影面５１５に加えて、第３の撮影面５１３の近傍に、第６の撮影面５１６、第７の撮影面５１７、第８の撮影面５１８、第９の撮影面５１９、第１０の撮影面５２０、及び第１１の撮影面５２１が設定されている。ここで、第６の撮影面５１６、第７の撮影面５１７、第８の撮影面５１８、第３の撮影面５１３、第９の撮影面５１９、第１０の撮影面５２０、及び第１１の撮影面５２１のそれぞれ隣接する撮影面の間隔は、例えば第１の撮影面５１１と第２の撮影面５１２との間隔である第２の間隔よりも狭く、焦点深度よりも狭い第１の間隔である。
【０１１７】
その結果、第１の撮影面５１１、第２の撮影面５１２、第６の撮影面５１６、第７の撮影面５１７、第８の撮影面５１８、第３の撮影面５１３、第９の撮影面５１９、第１０の撮影面５２０、第１１の撮影面５２１、第４の撮影面５１４、及び第５の撮影面５１５において、それぞれ、第１の画像５５１、第２の画像５５２、第３の画像５５３、第４の画像５５４、第５の画像５５５、第６の画像５５６、第７の画像５５７、第８の画像５５８、第９の画像５５９、第１０の画像５６０、及び第１１の画像５６１が得られる。このように注目領域３０８に関する詳細な画像データが得られる。
【０１１８】
なお、図２０の例では、第３の画像５５３及び第９の画像５５９には、注目領域３０８に係る発光が撮影されていない。そこで、次の撮影においては、第３の画像５５３及び第９の画像５５９に係る第６の撮影面５１６及び第１１の撮影面５２１については、画像取得が行われないように撮影面の設定が行われてもよい。
【０１１９】
図１５に戻って画像取得処理の説明を続ける。ステップＳ５０２の撮影面設定処理の後、処理はステップＳ５０３に進む。ステップＳ５０３において、制御部１８は、ステップＳ５０１で設定されたタイムラプス撮影のタイミングを考慮し、撮影開始まで待機する。
【０１２０】
ステップＳ５０４において、制御部１８の撮像制御部１８１は、２次元画像取得処理を行う。２次元画像取得処理では、ステップＳ５０２で設定された撮影面において、一組の２次元画像が２次元画像群として取得される。２次元画像取得処理について図２１に示すフローチャートを参照して説明する。
【０１２１】
ステップ７０１において、撮像制御部１８１は、変数ｎを１に設定する。
【０１２２】
ステップ７０２において、撮像制御部１８１は、ステップＳ５０２の撮影面設定処理で設定された第ｎの撮影面に合焦位置を設定する。すなわち、撮像制御部１８１は、対物光学系駆動部１６の動作を制御して、対物光学系１４の位置、例えば対物レンズ１４２の位置を調整し、第ｎの撮影面に係る画像が取得される状態に調整する。
【０１２３】
ステップ７０３において、撮像制御部１８１は、撮像部１５に撮像動作を行わせ、２次元画像を取得する。
【０１２４】
ステップ７０４において、撮像制御部１８１は、変数ｎをｎ＋１に設定する。
【０１２５】
ステップ７０５において、撮像制御部１８１は、ステップＳ５０２の撮影面設定処理で設定された全ての撮影面における画像取得が完了したか否かを判定する。全画像取得が完了していないとき、処理はステップＳ７０２に戻る。すなわち、撮影面が変更されて２次元画像の取得が行われる。一方、全画像取得が完了したとき、２次元画像処理は終了し、処理は図１５を参照して説明している画像取得処理に戻る。
【０１２６】
ステップＳ５０５において、制御部１８の画像合成部１８２は、ステップＳ５０４の２次元画像取得処理で取得された２次元画像に基づいて、３次元画像の生成を行う。
【０１２７】
ステップＳ５０６において、制御部１８は、ステップＳ５０１で設定された初期設定に基づいて、タイムラプス撮影に係る次の画像取得が必要であるか否かを判定する。次の画像取得が必要であるとき、処理はステップＳ５０２に戻る。すなわち、タイムラプス撮影に係る次の画像取得のタイミングで、改めて設定された撮影面に係る２次元画像の取得が行われ、得られた２次元画像に基づいて３次元画像が取得される。一方、ステップＳ５０６において次の画像取得が必要でないと判定されたとき、画像取得処理は終了する。
【０１２８】
このように、発光が検出される注目領域に係る２次元画像を第１の２次元画像とし、他の２次元画像を第２の２次元画像とし、第１の２次元画像と当該第１の２次元画像に隣接する２次元画像との間の間隔を第１の間隔とし、第２の２次元画像と当該第２の２次元画像に隣接する第２の２次元画像との間の間隔を第２の間隔としたときに、第１の間隔は第２の間隔よりも狭い。特に、第１の間隔は、対物光学系１４の被写界深度以下である。
【０１２９】
なお、本実施形態では、３次元試料３００の発光の状況に応じて取得される２次元画像の数が変化する。したがって、設定された数の２次元画像の取得に必要な時間は、タイムラプス撮影が行われる画像取得処理中に変化する。したがって、一組の２次元画像の取得に必要な時間が、当該一組の２次元画像の取得の開始から次の一組の２次元画像の取得の開始までの時間よりも長くなることが生じ得る。したがって、一組の２次元画像の取得の開始から次の一組の２次元画像の取得の開始までの時間は、画像取得領域の全領域にわたって撮影面と撮影面の間隔が対物光学系１４の焦点深度よりも狭い第１の間隔に設定されたときに一組の２次元画像の取得に必要となる時間よりも長くすることが好ましい。
【０１３０】
本実施形態によれば、発光が検出されない状態、すなわち、３次元試料３００の内部において注目すべき事象が起こっていない状態においては、撮影面の間隔が対物光学系１４の焦点深度よりも大きい第２の間隔に設定され、１つの３次元画像の再構築に用いられる２次元画像の数が少なくされる。その結果、データサイズが削減される。
【０１３１】
発光が検出される状態、すなわち、３次元試料３００の内部において注目すべき事象が起こっている状態においては、撮影面の間隔が対物光学系１４の焦点深度以下の第１の間隔に設定され、高精細な３次元画像が得られる。この際、発光が検出されない領域、すなわち、３次元試料３００の内部において注目すべき事象が起こっていない領域については、撮影面の間隔が対物光学系１４の焦点深度よりも大きい第２の間隔に設定され、１つの３次元画像の再構築に用いられる２次元画像の数が少なくされる。その結果、データサイズが削減される。
【０１３２】
以上によって、データサイズの削減と、必要十分な高精細データとの両立が実現される。その結果、早く正確な３次元試料の解析が実現され得る。
【０１３３】
不要なデータを削減し、必要なデータのみを取得することで、データの取得やその後のデータ解析の時間が削減され得る。これにより、例えば幹細胞由来胚様体又はスフェロイドを用いた創薬における薬効・毒性の評価や幹細胞由来胚様体の各種細胞への分化過程の評価・モニタリングにおいて、データ取得やデータの解析がスムーズに行われ、迅速な評価の実行が可能になる。特に、ある撮影面に指定された注目領域（ＲＯＩ）や、撮影面全体の発光輝度の変化が所定の閾値より大きい場合に撮影面の間隔を狭くすることにより、遺伝子発現に関する情報を選択的に増やすことが可能となる。
【０１３４】
［第２の実施形態の第１の変形例］
第２の実施形態の第１の変形例について説明する。ここでは、第２の実施形態との相違点について説明し、同一の部分については、同一の符号を付してその説明を省略する。上述の実施形態では、注目領域の分布の特定が、直前の画像取得において得られた２次元画像に基づいて行われる例を示した。しかしながらこれに限らない。例えば、図２２に示すフローチャートのように、注目領域以外の領域について適用される撮影面の間隔よりも広い間隔で、２次元画像の取得が行われ、ここで得られた２次元画像に基づいて、注目領域の分布が特定されてもよい。
【０１３５】
すなわち、ステップＳ８０１において、撮影条件決定部１８３は、撮影面の設定が次の２次元画像取得処理の開始までに終わるように待機して次の処理を行うタイミングを調整する。ステップＳ８０２において、撮影条件決定部１８３は、撮像制御部１８１と協働して、撮影面の間隔が広い条件で２次元画像を取得する。この間隔は、例えば第２の間隔よりも広い第３の間隔でもよい。ここで得られる一組の２次元画像を評価用画像群と称することにする。撮影条件決定部１８３は、ステップＳ８０３において得られた評価用画像群の２次元画像の輝度を解析し、ステップＳ８０４で注目領域の分布を特定する。ステップＳ８０５において、撮影条件決定部１８３は、注目領域の分布に応じて撮影面を設定する。
【０１３６】
本変形例によれば、例えばタイムラプス撮影の間隔が長い場合でも、現在の３次元試料３００の状態に応じた撮影面の設定がされ得る。
【０１３７】
［第２の実施形態の第２の変形例］
第２の実施形態の第２の変形例について説明する。ここでは、第２の実施形態との相違点について説明し、同一の部分については、その説明を省略する。上述の実施形態では、注目領域の変化に応じて設定される撮影面の数が変化する。しかしながら、撮影面の数が変化すると一組の２次元画像に含まれる２次元画像の数が変化する。これに対して本変形例では、撮影面の数が予め決められている。すなわち、撮影面設定処理において、注目領域に応じて、撮影面の総数が予め決められた数となるように撮影面が設定される。
【０１３８】
本変形例によれば、一組の２次元画像の取得に必要な露出時間の合計が変化しない。その結果、タイムラプス撮影の間隔が一組の２次元画像の取得に係る時間よりも短くなることが防がれる。
【０１３９】
［第２の実施形態の第３の変形例］
第２の実施形態の第２の変形例について説明する。ここでは、第２の実施形態との相違点について説明し、同一の部分については、同一の符号を付してその説明を省略する。上述の実施形態では、撮影面の間隔は、注目領域とそれ以外の領域とで、それぞれ対物光学系１４の焦点深度以下の第１の間隔と焦点深度よりも広い第２の間隔とに設定される例を示した。しかしながらこれに限らない。撮影面の間隔は、複数種類であってもよく、適宜に変更され得る。ただし、観察される輝度が高い領域や、輝度の変化が大きい領域など、注目度が高い領域については撮影面の間隔は狭く、注目度が低い領域については撮影面の間隔は広く、設定される。いずれの場合も撮影面の間隔が対物光学系１４の焦点深度よりも狭くてもよい。本変形例においても、必要な精細さを有しつつデータサイズを抑制した３次元画像の取得が行われ得る。
【０１４０】
以上の説明において、第１の実施形態で述べた撮影ピッチと第２の実施形態で述べた撮影間隔の調節を組み合わせてもよい。また、本発明は、再生医療向けの試料に限らず、細胞ごとの遺伝子発現の変化をタイムラプスで観察することが要求される種々の試料、例えばｉｎ  ｖｉｖｏの試料に適用してもよい。さらに、上述した撮影システムにより実行される撮影ピッチ及び／又は撮影間隔の調節は、使用者が、上記撮影システムの表示画面を見ながら、手動で撮影条件を変更するように設計されてもよい。
【図１】
0006461204.tif 000002
【図２】
0006461204.tif 000003
【図３】
0006461204.tif 000004
【図４】
0006461204.tif 000005
【図５】
0006461204.tif 000006
【図６】
0006461204.tif 000007
【図７】
0006461204.tif 000008
【図８】
0006461204.tif 000009
【図９】
0006461204.tif 000010
【図１０】
0006461204.tif 000011
【図１１】
0006461204.tif 000012
【図１２】
0006461204.tif 000013
【図１３】
0006461204.tif 000014
【図１４】
0006461204.tif 000015
【図１５】
0006461204.tif 000016
【図１６】
0006461204.tif 000017
【図１７】
0006461204.tif 000018
【図１８】
0006461204.tif 000019
【図１９】
0006461204.tif 000020
【図２０】
0006461204.tif 000021
【図２１】
0006461204.tif 000022
【図２２】
0006461204.tif 000023