(57)【要約】  本発明に係る細胞観察装置において、細胞状態判定部は、ホログラムデータに基づく位相算出処理及び画像再構成処理により作成した位相画像上で観察される細胞毎に未分化状態又は未分化逸脱状態のいずれかを判定する。表示処理部は、位相画像上に各細胞の状態判定結果を示すマークを重畳した細胞判定結果画像（５２）と、観察対象領域全体の画像の上に細胞判定結果画像（５２）の位置及び大きさを示す枠マーク（５６ａ）を重畳した縮小画像（５６）と、細胞毎の判定結果などの情報を掲載した細胞リスト（５８）と、を細胞判定結果表示画面（５０）上の異なる領域に配置して表示する。細胞リスト（５８）に表示される細胞は、ウェルの識別番号、細胞状態判定結果、判定結果に対する評価結果などの条件に従った絞り込みが可能である。これにより、作業者は細胞状態の判定結果を画像及びリストで確認しながら、細胞除去等の作業を効率良く行うことができる。
2019180811.tif 000002
【特許請求の範囲】
【請求項１】
１又は複数の容器中の細胞を観察するための細胞観察装置であって、
a)１又は複数の容器の全体又はその一部の観察範囲について得られた撮影画像若しくは該撮影画像を構成するデータに基づく所定の処理によって得られた観察画像のいずれかである判定用画像の全体又はその一部について、その画像上で検出された細胞毎又は細胞コロニー毎に２以上の細胞状態のいずれであるかを判定する細胞状態判定部と、
b)前記判定用画像の全体又はその一部である画像上に、細胞又は細胞コロニーが検出された位置に対応付けてその細胞又は細胞コロニーについての前記細胞状態判定部による細胞状態の判定結果に対応するマークを重畳させた判定結果画像と、前記撮影画像又は前記観察画像の上に前記判定結果画像の画像範囲を示す情報を重畳させた全体画像とを、同一画面上に配置して表示部の画面上に表示させる表示処理部と、
を備えることを特徴とする細胞観察装置。
【請求項２】
請求項１に記載の細胞観察装置であって、
前記全体画像は前記撮影画像を縮小した画像であることを特徴とする細胞観察装置。
【請求項３】
請求項１に記載の細胞観察装置であって、
観察対象の細胞はヒトｉＰＳ細胞を含む多能性幹細胞であり、前記２以上の細胞状態は未分化状態と未分化逸脱状態とを少なくとも含むことを特徴とする細胞観察装置。
【請求項４】
請求項１に記載の細胞観察装置であって、
前記撮影画像はホログラフィック顕微鏡により得られたホログラム画像であり、前記観察画像は、ホログラムデータに基づく所定の演算処理により算出された位相情報、強度情報又はそれら両方の要素を含む情報のいずれかの空間分布を示す画像であることを特徴とする細胞観察装置。
【請求項５】
請求項１に記載の細胞観察装置であって、
前記表示処理部は、前記細胞状態判定部による判定結果に基づいて、各細胞又は各細胞コロニーに対応付けて細胞状態判定結果を示すリストを作成し、該リストを前記判定結果画像と同一画面上に表示することを特徴とする細胞観察装置。
【請求項６】
請求項５に記載の細胞観察装置であって、
前記リストに掲載される細胞又は細胞コロニーの細胞状態判定結果を絞り込み条件の一つとしてユーザが指定するための条件入力部を、さらに備え、
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定された細胞状態判定結果を有するものに絞り込んで該リストを作成することを特徴とする細胞観察装置。
【請求項７】
請求項６に記載の細胞観察装置であって、
それぞれ独立に細胞を培養することが可能な複数の容器について前記撮影画像を取得することが可能な装置であり、前記リストは、各細胞又は各細胞コロニーが属する容器を特定する容器識別情報を項目として含み、
前記条件入力部は、前記リストに掲載される細胞又は細胞コロニーが属する容器を絞り込み条件の一つとしてユーザが指定するものであり、
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定された容器に属するものに絞り込んで該リストを作成することを特徴とする細胞観察装置。
【請求項８】
請求項６に記載の細胞観察装置であって、
前記リストは、掲載されている細胞毎又は細胞コロニー毎にユーザの入力操作によりチェックマークを入力することが可能なチェックボックスを含み、
前記条件入力部は、前記チェックマークの有無を絞り込み条件の一つとしてユーザが指定するものであり
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定されたチェックマーク状態のものに絞り込んで該リストを作成することを特徴とする細胞観察装置。
【請求項９】
請求項６に記載の細胞観察装置であって、
入力部から判定の正誤の情報の入力が可能であり、
前記リストは、細胞又は細胞コロニー毎に細胞状態判定結果をユーザが確認した確認結果の情報を項目として含み、
前記条件入力部は、前記確認結果の情報を絞り込み条件の一つとしてユーザが指定するものであり
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定された確認結果情報のものに絞り込んで該リストを作成することを特徴とする細胞観察装置。
【請求項１０】
請求項５に記載の細胞観察装置であって、
前記表示処理部は、前記リスト上の細胞又は細胞コロニーに対応する欄と前記判定結果画像上のマークのいずれか一方が入力部を介して指示されたときに、それに対応する前記リスト上の欄又は前記判定結果画像上のマークの他方を他の欄又は他のマークと識別が可能であるように強調して表示させることを特徴とする細胞観察装置。
【請求項１１】
１又は複数の容器中の細胞を観察するために用いられるコンピュータプログラムであって、コンピュータに、
a)１又は複数の容器の全体又はその一部の観察範囲について得られた撮影画像若しくは該撮影画像を構成するデータに基づく所定の処理によって得られた観察画像のいずれかである判定用画像の全体又はその一部について、その画像上で検出された細胞毎又は細胞コロニー毎に２以上の細胞状態のいずれであるかを判定した判定結果データを取得する判定結果データ取得ステップと、
b)前記判定用画像の全体又はその一部である画像上に、細胞又は細胞コロニーが検出された位置に対応付けてその細胞又は細胞コロニーについて前記判定結果データ取得ステップで取得された細胞状態の判定結果データに対応するマークを重畳させた判定結果画像と、前記撮影画像又は前記観察画像の上に前記判定結果画像の画像範囲を示す情報を重畳させた全体画像とを、同一画面上に配置して表示部の画面上に表示させる表示処理ステップと、
を実行させることを特徴とする細胞観察用プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、細胞の状態を観察する細胞観察装置及び細胞観察用のコンピュータプログラムに関し、さらに詳しくは、多能性幹細胞（ＥＳ細胞やｉＰＳ細胞）を培養する過程等において細胞の状態を非侵襲で判定したり培養に不具合がないか等を確認したりするのに好適な細胞観察装置及び細胞観察用プログラムに関する。
【背景技術】
【０００２】
再生医療分野では、近年、ｉＰＳ細胞やＥＳ細胞等の多能性幹細胞を用いた研究が盛んに行われている。こうした多能性幹細胞を利用した再生医療の研究・開発においては、多能性を維持した状態の未分化の細胞を大量に培養する必要がある。そのため、適切な培養環境の選択と環境の安定的な制御が必要であるとともに、培養中の細胞の状態を高い頻度で確認する必要がある。例えば、細胞コロニー内の細胞が未分化状態から逸脱すると、この場合、細胞コロニー内にある全ての細胞は分化する能力を有しているために、最終的にはコロニー内の細胞全てが未分化逸脱状態に遷移してしまう。そのため、作業者（オペレータ）は培養している細胞中に未分化状態を逸脱した細胞（すでに分化した細胞や分化しそうな細胞、以下「未分化逸脱細胞」という）が発生していないかを日々確認し、未分化逸脱細胞を見つけた場合にはこれを迅速に除去する必要がある。【０００３】
多能性幹細胞が未分化状態を維持しているか否かの判定は、未分化マーカーによる染色を行うことで確実に行うことができる。しかしながら、染色を行った細胞は死滅するため、再生医療用の多能性幹細胞の判定には未分化マーカー染色を実施することができない。そこで、現在の再生医療用細胞培養の現場では、位相差顕微鏡を用いた細胞の形態的観察に基づいて、作業者が未分化細胞であるか否かを判定するようにしている。位相差顕微鏡を用いるのは、一般に細胞は透明であって通常の光学顕微鏡では観察しにくいためである。【０００４】
また、非特許文献１に開示されているように、最近では、ホログラフィ技術を用いて細胞の観察画像を取得する装置も実用化されている。この装置は、特許文献１〜４等に開示されているように、デジタルホログラフィック顕微鏡で得られたホログラムデータに対し位相回復や画像再構成等のデータ処理を行うことで、細胞が鮮明に観察し易い位相像（インライン型ホログラフィック顕微鏡（In-line Holographic Microscopy：ＩＨＭ）を用いていることから、以下「ＩＨＭ位相像」という）を作成するものである。位相差顕微鏡で得られる位相差顕微画像と同様に、このＩＨＭ位相像でも透明である細胞を比較的明瞭に観察することができる。したがって、作業者がＩＨＭ位相像を見ながら、細胞が未分化細胞であるか否かを判定することも可能である。【０００５】
しかしながら、位相差顕微画像やＩＨＭ位相像を用いて細胞を或る程度鮮明に観察することはできるものの、作業者が目視で未分化等の細胞状態を正確に判定するにはかなり熟練や技量が必要である。そのため、そうした判定を担当できる作業者はかなり限られる。また、人間の判断に基づくために判定にばらつきが生じることは避けられない。また、熟練した作業者であっても目視での正確な判定には時間が掛かるため、大量の画像を処理することは難しい。そのため、こうした従来の手法は大学や研究機関での研究レベルであれば許容可能であるものの、多能性幹細胞を工業的に大量に培養するのには適さない。こうしたことから、画像上の細胞や細胞コロニーの状態を自動的に判定する技術が強く要望されている。【０００６】
また、上述したように培養中の細胞の中から未分化逸脱細胞を除去したり未分化逸脱細胞が存在する細胞コロニーを除去したりするためには、細胞又は細胞コロニーの一つ一つについて未分化逸脱細胞又はそれを含む細胞コロニーであるか、或いは未分化細胞又はそれのみを含む細胞コロニーであるかを判定する必要がある。通常、一つの培養容器内には大量の細胞が存在し、さらに培養条件等がそれぞれ異なる複数の培養容器で細胞を培養することも多い。そのため、上述したような細胞毎の又は細胞コロニー毎の判定結果データは膨大な量になる。こうしたことから、不所望の細胞や細胞コロニーを除去したり、或いは細胞状態の判定結果が適切であるか否かを確認したりする作業を作業者が効率良く進めるためには、個々の細胞や細胞コロニーの状態判定結果を分かり易く整理して、さらには本当に作業に必要な情報をのみを的確に選択して作業者に提示する必要がある。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】国際特許公開第２０１７／２０３７１８号パンフレット
【特許文献２】国際特許公開第２０１７／２０４０１３号パンフレット
【特許文献３】国際特許公開第２０１６／０８４４２０号パンフレット
【特許文献４】特開平１０−２６８７４０号公報
【非特許文献】
【０００８】
【非特許文献１】「細胞培養解析装置 CultureScanner CS-1」、［online］、株式会社島津製作所、［平成３０年２月１４日検索］、インターネット＜URL: https://www.an.shimadzu.co.jp/bio/cell/cs1/index.htm＞
【発明の概要】
【発明が解決しようとする課題】
【０００９】
本発明は上記課題を解決するためになされたものであり、その主たる目的は、細胞について得られた画像に基づいて経験や技量に乏しい作業者であっても細胞の状態や品質などを一目で把握することができる細胞観察装置、及び細胞観察用のコンピュータプログラムを提供することである。
【課題を解決するための手段】
【００１０】
上記課題を解決するために成された本発明に係る細胞観察装置は、１又は複数の容器中の細胞を観察するための細胞観察装置であって、
a)１又は複数の容器の全体又はその一部の観察範囲について得られた撮影画像若しくは該撮影画像を構成するデータに基づく所定の処理によって得られた観察画像のいずれかである判定用画像の全体又はその一部について、その画像上で検出された細胞毎又は細胞コロニー毎に２以上の細胞状態のいずれであるかを判定する細胞状態判定部と、
b)前記判定用画像の全体又はその一部である画像上に、細胞又は細胞コロニーが検出された位置に対応付けてその細胞又は細胞コロニーについての前記細胞状態判定部による細胞状態の判定結果に対応するマークを重畳させた判定結果画像と、前記撮影画像又は前記観察画像の上に前記判定結果画像の画像範囲を示す情報を重畳させた全体画像とを、同一画面上に配置して表示部の画面上に表示させる表示処理部と、
を備えることを特徴としている。【００１１】
また上記課題を解決するために成された本発明に係る細胞観察用プログラムは、１又は複数の容器中の細胞を観察するために用いられるコンピュータプログラムであって、コンピュータに、
a)１又は複数の容器の全体又はその一部の観察範囲について得られた撮影画像若しくは該撮影画像を構成するデータに基づく所定の処理によって得られた観察画像のいずれかである判定用画像の全体又はその一部について、その画像上で検出された細胞毎又は細胞コロニー毎に２以上の細胞状態のいずれであるかを判定した判定結果データを取得する判定結果データ取得ステップと、
b)前記判定用画像の全体又はその一部である画像上に、細胞又は細胞コロニーが検出された位置に対応付けてその細胞又は細胞コロニーについて前記判定結果データ取得ステップで取得された細胞状態の判定結果データに対応するマークを重畳させた判定結果画像と、前記撮影画像又は前記観察画像の上に前記判定結果画像の画像範囲を示す情報を重畳させた全体画像とを、同一画面上に配置して表示部の画面上に表示させる表示処理ステップと、
を実行させることを特徴としている。【００１２】
本発明における観察対象の細胞の種類は特に限定されないが、典型的にはヒトｉＰＳ細胞を含む多能性幹細胞である。この場合、前記２以上の細胞状態は未分化状態と未分化逸脱状態とを少なくとも含むものとするとよい。【００１３】
本発明における判定用画像は一般に透明である細胞が比較的明瞭に観察可能な画像である。例えば撮影画像はホログラフィック顕微鏡により得られたホログラム画像であり、観察画像は、ホログラムデータに基づく所定の演算処理により算出された位相情報、強度情報又はそれら両方の要素を含む情報のいずれかの空間分布を示す画像、即ち、位相画像、強度画像、又はそれらのマージ画像である。【００１４】
この場合、観察画像、即ち位相画像などを判定用画像とすればよい。また、撮影画像として位相差顕微鏡で得られる位相差顕微画像を用いることもでき、その場合、該撮影画像をそのまま判定用画像とすればよい。なお、上記ホログラフィック顕微鏡はその方式を問わず、インライン型、オフアクシス型、位相シフト型などのいずれでもよい。【００１５】
本発明に係る細胞観察装置において、細胞状態判定部は例えば、上述のようにホログラムデータに基づいて求められた位相画像の全体について、その画像上で観測される細胞又は細胞コロニーが占める領域をその培地等の背景領域と識別するとともに、その細胞又は細胞コロニー毎に未分化状態又は未分化逸脱状態の２以上の細胞状態のいずれであるか、つまりは細胞の良否を判定する。細胞コロニーは複数の細胞を含むから、その中の一つでも未分化逸脱状態であると判定されれば該細胞コロニーは未分化逸脱状態であると判定すればよい。こうした細胞状態を判定するためのアルゴリズムは特に問わないが、例えば未分化細胞、未分化逸脱細胞のそれぞれの領域の特徴を学習させた機械学習などが有用である。【００１６】
細胞状態判定部による判定によって、位相画像上の各細胞又は各細胞コロニーの位置情報つまりは画素位置情報に対応して細胞状態の判定結果が得られる。表示処理部は、この判定結果を受け、位相画像の全体又はその一部の画像の上に細胞又は細胞コロニーの位置に対応付けて細胞状態の判定結果に対応するマークを重畳させた判定結果画像を得る。即ち、未分化細胞、未分化逸脱細胞にそれぞれ対応するマークを決めておき、そのマークを位相画像上で各細胞又は各細胞コロニーが存在する位置に重ねて表示すればよい。また、表示処理部は、元のホログラム画像又は位相画像の上に上記判定結果画像の画像範囲を示す情報を重畳させる。そして、この全体画像と上記判定結果画像とを同一画面上に配置した表示画面を形成して表示部の画面上に表示させる。この全体画像はあくまでも参考用であるので、ホログラム画像等の撮影画像を縮小した画像とするとよい。【００１７】
これにより、作業者は自らが画像上で目視により各細胞又は各細胞コロニーの状態を判定することなく、表示部に表示されている判定結果画像を見ることで、例えば未分化細胞と未分化逸脱細胞とがそれぞれどの位置にあるのかを一目で知ることができる。また、同じ画面内に表示されている全体画像を見ることで、判定結果画像に現れている観察範囲が一つの容器内のいずれの位置及び範囲であるか、或いは複数の容器のうちのいずれの容器のいずれの位置及び範囲であるのかを容易に知ることができる。なお、未分化状態、未分化逸脱状態等の異なる細胞状態の判定結果に対応するマークは、それぞれそのマークの形状を異なるものとしてもよいが、形状は同一で表示色やグレイスケール上の濃淡を異なるものとすると分かり易い。【００１８】
また本発明に係る細胞観察装置において、好ましくは、前記表示処理部は、前記細胞状態判定部による判定結果に基づいて、各細胞又は各細胞コロニーに対応付けて細胞状態判定結果を示すリストを作成し、該リストを前記判定結果画像と同一画面上に表示する構成とするとよい。【００１９】
この構成によれば、判定結果画像として例えば位相画像の一部分しか表示していない場合であっても、その時点で表示されていない位相画像上の細胞や細胞コロニーに未分化逸脱状態のものが存在するかどうかなどをリストから知ることができる。また、判定結果画像上に表示することが難しい、細胞や細胞コロニー毎の他の情報についてもリストに掲載することで、作業者は個々の細胞や細胞コロニーについてより多くの情報をリストから知ることができる。【００２０】
また上記好ましい構成の一態様においては、前記リストに掲載される細胞又は細胞コロニーの細胞状態判定結果を絞り込み条件の一つとしてユーザが指定するための条件入力部を、さらに備え、
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定された細胞状態判定結果を有するものに絞り込んで該リストを作成するものとするとよい。【００２１】
この構成では、作業者が条件入力部から所定の入力指定を行うことで、例えば未分化逸脱細胞であると判定された細胞又は細胞コロニーのみが掲載されたリストを表示させることができる。【００２２】
また本発明の別の態様においては、それぞれ独立に細胞を培養することが可能な複数の容器について前記撮影画像を取得することが可能な装置であり、前記リストは、各細胞又は各細胞コロニーが属する容器を特定する容器識別情報を表示項目として含み、
前記条件入力部は、前記リストに掲載される細胞又は細胞コロニーが属する容器を絞り込み条件の一つとしてユーザが指定するものであり、
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定された容器に属するものに絞り込んで該リストを作成する構成とすることができる。【００２３】
これにより、例えば複数の培養容器を用い、その容器毎に互いに異なる培養条件で以て細胞を培養している場合に、特定の培養条件の下で培養している細胞又は細胞コロニーの細胞状態の判定結果のみをリストで確認することができる。【００２４】
また本発明のさらに別の態様では、前記リストは、掲載されている細胞毎又は細胞コロニー毎にユーザの入力操作によりチェックマークを入力することが可能なチェックボックスを含み、
前記条件入力部は、前記チェックボックスへのチェックマークの有無を絞り込み条件の一つとしてユーザが指定するものであり、
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定されたチェックマーク状態のものに絞り込んで該リストを作成する構成とするよい。【００２５】
この構成では、作業者は例えば、リストに掲載されている細胞毎又は細胞コロニー毎に着目するものやあとで詳細に確認したいものなどにチェックマークを付す。それにより、チェックマークを付した細胞や細胞コロニーのみが掲載されているリストをあとで表示させ、作業者がそれを確認することができる。【００２６】
また本発明のさらに別の態様では、前記リストは、細胞毎又は細胞コロニー毎に細胞状態判定結果をユーザが確認した確認結果の情報を表示項目として含み、
前記条件入力部は、前記確認結果の情報を絞り込み条件の一つとしてユーザが指定するものであり、
前記表示処理部は、前記リストに掲載する細胞又は細胞コロニーを、前記条件入力部で指定された確認結果の情報のものに絞り込んで該リストを作成する構成としてもよい。【００２７】
ここで「確認結果の情報」とは、例えば作業者が、自動的になされた細胞状態の判定結果が正しい又は誤りであると確認した結果の情報、或いは、正しいか誤りであるかを未だ決定できないことを示す情報などである。これによれば、例えば、作業者は自分自身又は他の担当者が、自動的に行われた細胞状態の判定結果が誤りであると判断した細胞や細胞コロニーのみが掲載されているリストを表示させそれを確認したり、或いはそのリストに基づいて細胞の除去作業を実施したりすることができる。【００２８】
また本発明に係る細胞観察装置において、前記表示処理部は、前記リスト上の細胞又は細胞コロニーに対応する欄と前記判定結果画像上のマークのいずれか一方が入力部を介して指示されたときに、それに対応する前記リスト上の欄又は前記判定結果画像上のマークの他方をそれぞれ他の欄又はマークと識別が可能であるように強調して表示させる構成としてもよい。【００２９】
これによれば、作業者は判定結果画像上で着目する位置にある細胞や細胞コロニーの詳細な情報をリスト上で確認したり、逆に、リスト上で着目する細胞や細胞コロニーがどの位置にあるのかを画像上で確認したりすることが容易に行える。
【発明の効果】
【００３０】
本発明によれば、例えばｉＰＳ細胞やＥＳ細胞などの多能性幹細胞を培養する現場において、作業者自身が細胞状態を判定することなく、容器中の細胞や細胞コロニーのいずれが未分化逸脱状態である可能性が高いのかを表示された画像上で一目で確認することができる。それにより、経験や技量に乏しい作業者であっても、細胞の状態や品質などを的確に把握することができる。特に、細胞を大量に培養するような現場においても、作業者は所望の細胞の判定結果のみを効率良く確認することができるので、作業効率の向上のみならず、作業ミスや見逃しを減らして作業の精度を向上させることができ、ひいては細胞培養における生産性の向上を図ることができる。
【図面の簡単な説明】
【００３１】
【図１】本発明の一実施例である細胞観察装置の概略構成図。
【図２】本実施例の細胞観察装置を利用した細胞状態の観察作業における作業手順及び処理の流れを示すフローチャート。
【図３】本実施例の細胞観察装置における撮影動作及び画像再構成処理を説明するための概念図。
【図４】本実施例の細胞観察装置における細胞判定結果表示画面の一例を示す図。
【図５】図４中の細胞リストを示す図。
【図６】細胞状態判定結果を確認する際に用いる条件指定画面を示す図。
【発明を実施するための形態】
【００３２】
以下、本発明に係る細胞観察装置の一実施例について、添付図面を参照して説明する。
図１は本実施例の細胞観察装置の概略構成図である。
【００３３】
本実施例の細胞観察装置は、顕微観察部１０と、制御・処理部２０と、ユーザインターフェイスである入力部３０及び表示部４０と、を備える。
本実施例において、顕微観察部１０はインライン型ホログラフィック顕微鏡であり、レーザダイオードなどを含む光源部１１とイメージセンサ１２とを備え、光源部１１とイメージセンサ１２との間に、細胞（又は細胞コロニー）１４を含む培養プレート１３が配置される。
【００３４】
制御・処理部２０は、顕微観察部１０の動作を制御するとともに顕微観察部１０で取得されたデータを処理するものであって、撮影制御部２１と、ホログラムデータ記憶部２２と、位相情報算出部２３と、画像再構成部２４と、再構成画像データ記憶部２５と、細胞状態判定部２６と、判定結果データ記憶部２７と、表示条件設定部２８と、表示処理部２９と、を機能ブロックとして備える。表示処理部２９は下位の機能ブロックとして、詳細画像形成部２９１、全体画像形成部２９２、細胞リスト作成部２９３などを含む。
【００３５】
通常、制御・処理部２０の実体は、所定のソフトウェア（コンピュータプログラム）がインストールされたパーソナルコンピュータやより性能の高いワークステーション、或いは、そうしたコンピュータと通信回線を介して接続された高性能なコンピュータを含むコンピュータシステムである。即ち、制御・処理部２０に含まれる各ブロックの機能は、コンピュータ単体又は複数のコンピュータを含むコンピュータシステムに搭載されているソフトウェアを実行することで実施される、該コンピュータ又はコンピュータシステムに記憶されている各種データを用いた処理によって具現化されるものとすることができる。
【００３６】
本実施例の細胞観察装置では様々な細胞についての観察を行うことができるが、ここでは、観察対象がヒトｉＰＳ細胞であるものとする。ヒトｉＰＳ細胞を培養する際に必要な細胞観察を目的として細胞の観察画像を取得し、該観察画像から各細胞の状態（未分化状態、未分化逸脱状態等）を判定してその判定結果を表示する際の処理について説明する。
【００３７】
図２は本実施例の細胞観察装置を用いた細胞状態の観察作業における作業手順及び処理の流れを示すフローチャート、図３は撮影動作及び画像再構成処理を説明するための概念図である。
【００３８】
図３（ａ）は本実施例の細胞観察装置において使用される培養プレート１３の略上面図である。この培養プレート１３には上面視円形状である６個のウェル１３ａが形成されており、その各ウェル１３ａ内で細胞が培養される。ここでは、１枚の培養プレート１３全体、つまりは６個のウェル１３ａを含む矩形状の範囲全体が観察対象領域である。顕微観察部１０は光源部１１及びイメージセンサ１２の組を４組備えており、各組の光源部１１及びイメージセンサ１２はそれぞれ、図３（ａ）に示すように培養プレート１３全体を４等分した四つの４分割範囲８１のホログラムデータの収集を担う。つまり、４組の光源部１１及びイメージセンサ１２が培養プレート１３全体に亘るホログラムデータの収集を分担する。
【００３９】
一組の光源部１１及びイメージセンサ１２が１回に撮影可能である範囲は、図３（ｂ）及び（ｃ）に示すように、４分割範囲８１の中の１個のウェル１３ａを含む略正方形状の範囲８２をＸ軸方向に１０等分、Ｙ軸方向に１２等分して得られる一つの撮像単位８３に相当する範囲である。一つの４分割範囲８１は１５×１２＝１８０個の撮像単位８３を含む。四つの光源部１１と四つのイメージセンサ１２はそれぞれ光源部１１及びイメージセンサ１２を含むＸ−Ｙ面内で、４分割範囲８１と同じ大きさである矩形の四つの頂点付近にそれぞれ配置されおり、培養プレート１３上の異なる四つの撮像単位８３についてのホログラムの取得を同時に行う。
【００４０】
培養プレート１３についてのホログラムデータの収集に際し、作業者はまず、観察対象である細胞１４が培養されている培養プレート１３を顕微観察部１０の所定位置にセットし、該培養プレート１３を特定する識別番号や測定日時などの情報を入力部３０から入力したうえで測定実行を指示する。この測定指示を受けて撮影制御部２１は、顕微観察部１０の各部を制御して撮影を実行する（ステップＳ１）。
【００４１】
即ち、一つの光源部１１は、１０°程度の微小角度の広がりを持つコヒーレント光を培養プレート１３の所定の領域（一つの撮像単位８３）に照射する。培養プレート１３及び細胞１４を透過したコヒーレント光（物体光１６）は、培養プレート１３上で細胞１４に近接する領域を透過した光（参照光１５）と干渉しつつイメージセンサ１２に到達する。物体光１６は細胞１４を透過する際に位相が変化した光であり、他方、参照光１５は細胞１４を透過しないので該細胞１４に起因する位相変化を受けない光である。したがって、イメージセンサ１２の検出面（像面）上には、細胞１４により位相が変化した物体光１６と位相が変化していない参照光１５との干渉像、つまりホログラムがそれぞれ形成され、このホログラムに対応する２次元的な光強度分布データ（ホログラムデータ）がイメージセンサ１２から出力される。
【００４２】
上述したように、四つの光源部１１からは略同時に培養プレート１３に向けてコヒーレント光が出射され、四つのイメージセンサ１２では培養プレート１３上の異なる撮像単位８３に対応する領域のホログラムデータが取得される。一つの測定位置での測定が終了する毎に、光源部１１及びイメージセンサ１２は図示しない移動部により、Ｘ−Ｙ面内で一つの撮像単位８３に相当する距離だけＸ軸方向及びＹ軸方向にステップ状に順次移動される。これによって、４分割範囲８１に含まれる１８０個の撮像単位８３での測定が実施され、四組の光源部１１及びイメージセンサ１２全体で培養プレート１３全体の測定が実行されることになる。このようにして顕微観察部１０の四つのイメージセンサ１２で得られたホログラムデータは、測定日時等の属性情報とともに、ホログラムデータ記憶部２２に格納される。
【００４３】
上述したような一連の測定（撮影）が終了すると、位相情報算出部２３はホログラムデータ記憶部２２からホログラムデータを順次読み出し、光波の伝播計算処理を行うことで２次元的な各位置における位相情報及び振幅情報を復元する。これら情報の空間分布は撮像単位８３毎に求まるから、全ての撮像単位８３の位相情報及び振幅情報が得られたならば、画像再構成部２４は、その位相情報や振幅情報に基づいて、観察対象領域全体の位相画像つまりはＩＨＭ位相像を形成する（ステップＳ２）。
【００４４】
即ち、画像再構成部２４は撮像単位８３毎に算出された位相情報の空間分布に基づき各撮像単位８３のＩＨＭ位相像を再構成する。そして、その狭い範囲のＩＨＭ位相像を繋ぎ合わせるタイリング処理（図３（ｄ）参照）を行うことで、観察対象領域つまりは培養プレート１３全体についてのＩＨＭ位相像を形成する。そのＩＨＭ位相像を構成するデータは再構成画像データ記憶部２５に保存される。なお、タイリング処理の際には撮像単位８３の境界でのＩＨＭ位相像が滑らか繋がるように適宜の補正処理を行うとよい。
【００４５】
上記のような位相情報の算出や画像再構成の際には、特許文献３、４等に開示されている周知のアルゴリズムを用いればよい。一般にＩＨＭ位相像では、透明であって光学顕微鏡では見えにくい細胞の輪郭（境界）やその内部の模様が見え易くなる。
【００４６】
なお、通常の処理で得られる再構成画像は取得されたホログラムデータにより原理的に求まる最高解像度のＩＨＭ位相像であるが、それだけでなく、その最高解像度のＩＨＭ位相像を元に、ビニング処理等により解像度を落とした複数の解像度のＩＨＭ位相像を作成する。そして、こうした様々な解像度のＩＨＭ位相像を構成するデータを再構成画像データ記憶部２５に保存する。これにより、様々な解像度のＩＨＭ位相像をあとで選択的に表示する際に、表示処理部２９は必要な解像度の再構成画像データを再構成画像データ記憶部２５から読み出してきて、表示すべき画像を迅速に形成することができる。
【００４７】
また、ホログラムデータに基づいて、位相情報のほかに、強度情報や、位相情報と強度情報とをマージした擬似位相情報なども併せて算出し、画像再構成部２４はこれらに基づく再生像（ＩＨＭ強度像、ＩＨＭ擬似位相像）を作成することもできる。これら画像はＩＨＭ位相像に代えて使用されることもある。また、ホログラムデータに基づいてＩＨＭ位相像等を作成する際には、複数の焦点位置におけるＩＨＭ位相像等をそれぞれ作成することができる。
【００４８】
細胞状態判定部２６は上述のように作成されたＩＨＭ位相像（又はＩＨＭ強度像など）において、細胞又は細胞コロニーと背景との境界を識別することで細胞又は細胞コロニーを検出する。さらに細胞又は細胞コロニーそれぞれについて未分化状態と未分化逸脱状態という二つの細胞状態のいずれに分類されるのかを判定することで、細胞又は細胞コロニーの良否の判定を行う（ステップＳ３）。
【００４９】
具体的には、細胞状態判定部２６は、予め多数の教師データを用いた学習によって構築された識別器を有し、この識別器を用いて、入力された画像に対し画素単位で未分化細胞領域、未分化逸脱細胞領域、又はそれ以外であるかを識別する。未分化細胞領域、未分化逸脱細胞領域のいずれであるとも識別されなかった領域は培地などの背景領域であるとみなせる。したがって、未分化細胞領域又は未分化逸脱細胞領域であると識別された画素から一つの細胞又は細胞コロニーの境界（輪郭）が判明し、その細胞毎又は細胞コロニー毎に未分化状態（良品）又は未分化逸脱状態（不良品）のいずれかへの分類を行うことができる。
【００５０】
細胞状態判定部２６における細胞状態の判定結果は、細胞毎又は細胞コロニー毎に一つずつ得られ、その判定結果とは未分化状態又は未分化逸脱状態のいずれかである。なお、細胞状態判定部２６で使用される識別器における識別処理のアルゴリズムとしては様々なものが考えられ、ここではそのアルゴリズムは特に問わないが、例えばサポートベクターマシン等の教師あり機械学習の手法が特に有効である。
【００５１】
上述したように細胞状態判定部２６ではＩＨＭ位相像（又はＩＨＭ強度像など）上で観察される細胞毎又は細胞コロニー毎に細胞状態の判定結果（分類結果）が得られる。また、個々の細胞や細胞コロニーは図３（ａ）に示した観察対象領域全体に対応するＩＨＭ位相像上の２次元的な位置情報（画素のアドレス）により特定することができる。そこで細胞状態判定部２６は、検出された細胞毎又は細胞コロニー毎に例えば連続番号である識別番号（ＩＤ）を割り当て、各識別番号に対応付けて細胞の位置情報と細胞状態判定結果とを判定結果データ記憶部２７に保存する（ステップＳ４）。
【００５２】
表示処理部２９は、判定結果データ記憶部２７、再構成画像データ記憶部２５及びホログラムデータ記憶部２２に格納されているデータに基づいて、細胞状態判定結果を示す細胞判定結果表示画面５０を作成して表示部４０の画面上に表示する（ステップＳ５）。
【００５３】
以下、この表示処理について詳しく説明する。図４は細胞判定結果表示画面の一例を示す図、図５は図４中の細胞リストの一例を示す図、図６は所定の操作に応じて表示される条件指定画面の一例を示す図である。
【００５４】
作業者が入力部３０で所定の操作を行うと、表示処理部２９は図４に示したような細胞判定結果表示画面５０を表示部４０の画面上に表示する。この細胞判定結果表示画面５０には、該画面５０内で大きな面積を占める詳細画像表示領域５１と、過去画像表示領域５４と、リスト表示領域５７と、全体画像表示領域５５と、が設けられている。詳細画像表示領域５１の上部には表示画像選択指示部５３が設けられ、この表示画像選択指示部５３に配置されている複数のチェックボックスに択一的にチェックマークを入れることで、そのチェックマークに対応した画像が詳細画像表示領域５１に表示されるようになっている。
【００５５】
細胞状態の判定結果を確認したい場合には、図４に示すように、「細胞範囲」のチェックボックスにチェックマークが付される。この場合、詳細画像形成部２９１は判定結果データ記憶部２７や再構成画像データ記憶部２５から所定のデータを取得し、細胞状態の判定処理に使用された画像、この例ではＩＨＭ位相像において各細胞が検出された座標位置にその細胞の状態判定結果に対応するマークを重畳し、該マークが重畳された細胞判定結果画像５２を詳細画像表示領域５１中に表示する。重畳して表示されるマークは同形状であり、細胞状態判定結果が未分化状態であることを示すマークと未分化逸脱状態であることを示すマークとは異なる表示色である。図４では、未分化状態を示すマークに符号５２ａ、未分化逸脱状態を示すマークに符号５２ｂを付してある。符号５２ｃが付されているマークについては後述する。即ち、この細胞判定結果画像５２上でマーク５２ａ、５２ｂ、５２ｃが描かれている位置がそれぞれマークで示される細胞状態であると判定された細胞が検出された位置である。
【００５６】
全体画像形成部２９２は、ホログラムデータ記憶部２２からデータを取得し、観察対象領域全体の干渉像を縮小した画像を形成する。この縮小画像では培養プレート１３上の各ウェル１３ａの位置が明瞭に観察可能である。さらに、この縮小画像に、その時点で詳細画像表示領域５１中に表示している細胞判定結果画像５２の範囲を示す矩形状の枠マーク５６ａを重畳した縮小画像５６を全体画像表示領域５５中に表示する。
【００５７】
詳細画像形成部２９１及び全体画像形成部２９２は、全体画像表示領域５５中に表示される縮小画像５６上の枠マーク５６ａの位置や大きさと、詳細画像表示領域５１中に表示している細胞判定結果画像５２の範囲とを連動させる。したがって、例えば作業者が入力部３０の操作により、全体画像表示領域５５中に表示されている縮小画像５６上で枠マーク５６ａの位置や大きさを変化させると、詳細画像形成部２９１はその枠マーク５６ａの位置及び大きさに対応するように細胞判定結果画像５２を更新する。また逆に、作業者が入力部３０の操作により、詳細画像表示領域５１中に表示されている細胞判定結果画像５２を拡大若しくは縮小、又は移動させる操作を行うと、詳細画像形成部２９１はその操作に応じて細胞判定結果画像５２を更新し、全体画像形成部２９２はその操作に応じて枠マーク５６ａの位置及び大きさを変化させる。そのため、作業者はそのときに詳細画像表示領域５１中に表示されている細胞判定結果画像５２が観察対象領域全体の中のどの位置のどの範囲であるのかを一目で確認することができる。また、細胞判定結果画像５２の拡大又は縮小されたとき、つまり細胞判定結果画像５２の倍率が変化されたときに、その倍率に応じて、該画像５２に重畳して表示されているマーク５２ａ、５２ｂ、５２ｃの態様を変化させてもよい。
【００５８】
また細胞リスト作成部２９３は、判定結果データ記憶部２７から取得したデータに基づいて、図５に示すような細胞リスト５８を作成し、これをリスト表示領域５７中に表示する。この細胞リスト５８には、観察対象領域中の全ての細胞について個別に割り当てられた識別番号（ＩＤ）に対応付けて、その細胞が培養されているウェルの識別番号を示す項目の欄５８ｂ、細胞状態の判定結果を示す項目の欄５８ｃ、判定結果に対する正誤の評価結果を示す項目の欄５８ｄなどが設けられ、細胞毎にそれら各項目についての情報が掲載されている。また、細胞毎にチェックマークを設定可能なチェックボックス欄５８ａが用意されている。なお、図５の例では、細胞状態の判定結果は「分類」という項目名であり、「未分化」は未分化状態を、「分化」は未分化逸脱状態を示している。また、細胞状態の判定結果を示す項目の欄５８ｃには、細胞判定結果画像５２上のマーク５２ａ、５２ｂの表示色とそれぞれ同じ色の矩形状のマークが記載されている。
【００５９】
上記ステップＳ３においてＩＨＭ位相像を用いて細胞状態の判定処理が実施されたあと、初めて細胞判定結果表示画面５０が表示される際には、細胞リスト５８におけるチェックボックス欄５８ａは全てチェックマークなしであり、判定結果に対する正誤の評価結果を示す項目の欄５８ｄは全て空欄である。作業者が細胞リスト５８を見て、そのリスト５８中の一つの行をクリック操作等により選択したうえで、正誤判定指示ボタン領域６０中の「ＯＫ」ボタンをクリック操作すると、選択されている行の「正誤」の欄５８ｄに「ＯＫ」が入力される。また、作業者が「ＮＧ」ボタンをクリック操作すると、選択されている行の欄５８ｄに「ＮＧ」が入力される。さらに、作業者が「未決」ボタンをクリック操作すると、選択されている行の欄５８ｄに「未決」が入力される。通常、判定結果に対する正誤の評価結果を示す項目の欄５８ｄにおける「ＯＫ」はその細胞の細胞状態判定結果が適切であることを意味し、「ＮＧ」はその細胞の細胞状態判定結果が不適切、つまり誤りであることを意味する。また「未決」は評価を試みたものの、ＯＫ又はＮＧのいずれであるのかの判断が下せなかったことを意味する。
【００６０】
また、作業者は例えば、注意を要する細胞や着目に値すると思われる細胞に対応するチェックボックス欄５８ａにチェックマークを適宜入力することができる。こうして作業者が判定結果に対する正誤の評価結果を示す項目の欄５８ｄへの入力操作やチェックボックス欄５８ａへのチェックマークの入力を行ったうえで、「保存」ボタン６１をクリック操作すると、入力された情報が確定して判定結果データ記憶部２７に保存される。
【００６１】
なお、細胞リスト５８上で作業者が一つの行、つまりは一つの細胞又は細胞コロニーをクリック操作により選択指示すると、その行の背景色が他の行とは異なる色に変わり強調表示される。そして同時に、細胞判定結果画像５２上に重畳して表示されているマーク５２ａ、５２ｂの中で、上記リスト５８中で強調表示された行に対応するマーク、つまりはその行中の細胞に対応するマークが他のマークとは異なる色に変わり強調表示される。図４では、符号５２ｃが強調表示されているマークである。図４、図５の例では、このマークは識別番号が「２１」である細胞に対応するマークである。
【００６２】
これにより、作業者は細胞リスト５８上で選択した細胞が、細胞判定結果画像５２上でどこに位置しているのかを一目で把握することができる。また逆に、細胞判定結果画像５２上で一つのマークを作業者がクリック操作等により選択指示すると、そのマークに対応する細胞が記載されているリスト５８中の行が強調表示される。それにより、作業者は細胞判定結果画像５２上で特定の位置にある細胞についての詳細な情報を細胞リスト５８で迅速に確認することができる。
【００６３】
細胞状態の判定処理が実施されたあとに初めて細胞判定結果表示画面５０が表示されるときの細胞リスト５８には、検出された全ての細胞又は細胞コロニーが掲載されている。しかしながら、通常、その数はかなり膨大であり、実際には、作業者はその中で特定のもののみを確認したい場合が多い。そこで、次のようにして細胞リスト５８に掲載する細胞を絞り込むことが可能である。
【００６４】
作業者がリスト表示領域５７中の右上部に配置されている条件設定ボタン５９をクリック操作すると、表示条件設定部２８は、図６に示す条件指定画面７０をポップアップして細胞判定結果表示画面５０の上に表示させる。この条件指定画面７０は細胞リスト５８に表示される細胞を絞り込む条件を指定するための画面であり、チェックマーク有無指定領域７０ａ、ウェル指定領域７０ｂ、細胞状態判定結果指定領域７０ｃ、及び、正誤入力結果指定領域７０ｄ、が設けられている。指定領域７０ａ〜７０ｄにはそれぞれ複数のチェックボックスが配置されており、該チェックボックスに適宜にチェックマークを入れることで、そのチェックマークが付された条件に適合する細胞のみが細胞リスト５８に表示される。
【００６５】
図６の例では、チェックマーク有無指定領域７０ａにおいてチェック有りとチェック無しの両方にチェックマークが付されているので、細胞リスト５８のチェックボックス欄５８ａにおけるチェックマークの有無での絞り込みはなされない。また、ウェル指定領域７０ｂにおいては識別番号が「０２」及び「０５」である二つのウェルにのみチェックマークが付されているので、この二つのウェルに属する細胞のみへの絞り込みが行われる。そのため、例えば識別番号が「２」及び「５」であるウェル中の細胞の情報は細胞リスト５８に掲載されるが、識別番号が「１」、「３」、「４」及び「６」であるウェル中の細胞の情報は細胞リスト５８には掲載されない。また、細胞状態判定結果指定領域７０ｃにおいては「未分化」と「分化」の両方にチェックマークが付されているので、細胞状態判定結果での絞り込みはなされない。さらにまた、正誤入力結果指定領域７０ｄにおいては「ＯＫ」、「ＮＧ」、「未決」の全てにチェックマークが付されているので、正誤入力結果での絞り込みもなされない。
【００６６】
即ち、図６の例では、各細胞が存在しているウェルについての絞り込みのみが実施され、それ以外の条件での絞り込みはなされない。もちろん、各指定領域７０ａ〜７０ｄに設けられているチェックボックスに適宜にチェックマークを入れることで、様々な条件の組み合わせに適合した細胞のみに絞り込んで細胞リスト５８を表示させることができる。それにより、作業者は真に確認したい細胞のみに絞り込んで、各細胞の詳細な情報を効率良く確認することができる。
【００６７】
また、細胞培養では一般に、毎日定期的に、或いはより短い時間間隔で、同じ培養プレートについての観察が繰り返される。そして、細胞の状態の時間的な変化を確認することも重要である。そこで、同じ識別番号を有する培養プレートについて過去に取得された縮小画像をその測定日時等と共に過去画像表示領域５４に一括して表示しておく。そして、作業者が過去画像表示領域５４において任意の縮小画像を選択指示したうえで「変更」ボタン６２をクリック操作すると、選択された縮小画像に対応するホログラムデータに基づいて作成されたＩＨＭ位相像や判定結果などに表示が切り替わる。これにより、同じ培養プレートに関する過去のデータに基づく画像やリストを確認することもできる。
【００６８】
なお、図１に示した細胞観察装置では、制御・処理部２０において全ての処理を実施しているが、一般に、ホログラムデータに基づく位相情報の計算や画像の再構成処理には膨大な量の計算が必要である。また、細胞状態の判定処理の負荷も大きい。そこで、顕微観察部１０に接続されたパーソナルコンピュータを端末装置とし、この端末装置と高性能なコンピュータであるサーバとがインターネットやイントラネット等の通信ネットワークを介して接続されたコンピュータシステムを利用し、上記のような煩雑な計算や処理は高性能なコンピュータで行い、顕微観察部１０の制御や処理後のデータを用いた表示処理などを比較的低性能のパーソナルコンピュータで実行するように役割を分けるとよい。
【００６９】
また上記実施例の細胞観察装置では、顕微観察部１０としてインライン型ホログラフィック顕微鏡を用いていたが、ホログラムが得られる顕微鏡であれば、オフアクシス（軸外し）型、位相シフト型などの他の方式のホログラフィック顕微鏡に置換え可能であることは当然である。
【００７０】
また顕微観察部１０にホログラフィック顕微鏡を用いるのではなく位相差顕微鏡を用いた細胞観察装置にも本発明を適用することができる。この場合には、細胞状態の判定処理の対象である判定用画像として位相差顕微画像を用いればよい。
【００７１】
また、上記実施例はあくまでも本発明の一例であり、本発明の趣旨の範囲でさらに適宜変形、修正、追加を行っても本願特許請求の範囲に包含されることは明らかである。
【符号の説明】
【００７２】
１０…顕微観察部
１１…光源部
１２…イメージセンサ
１３…培養プレート
１３ａ…ウェル
１４…細胞
１５…参照光
１６…物体光
２０…制御・処理部
２１…撮影制御部
２２…ホログラムデータ記憶部
２３…位相情報算出部
２４…画像再構成部
２５…再構成画像データ記憶部
２６…細胞状態判定部
２７…判定結果データ記憶部
２８…表示条件設定部
２９…表示処理部
２９１…詳細画像形成部
２９２…全体画像形成部
２９３…細胞リスト作成部
３０…入力部
４０…表示部
５０…細胞判定結果表示画面
５１…詳細画像表示領域
５２…細胞判定結果画像
５２ａ、５２ｂ、５２ｃ…マーク
５３…表示画像選択指示部
５４…過去画像表示領域
５５…全体画像表示領域
５６…縮小画像
５６ａ…枠マーク
５７…リスト表示領域
５８…細胞リスト
５８ａ…チェックボックス欄
５８ｂ…ウェルの識別番号を示す項目の欄
５８ｃ…細胞状態の判定結果を示す項目の欄
５８ｄ…判定結果に対する正誤の評価結果を示す項目の欄
５９…条件設定ボタン
６０…正誤判定指示ボタン領域
６１…「保存」ボタン
６２…「変更」ボタン
７０…条件指定画面
７０ａ…チェックマーク有無指定領域
７０ｂ…ウェル指定領域
７０ｃ…細胞状態判定結果指定領域
７０ｄ…正誤入力結果指定領域
【図１】
2019180811.tif 000003
【図２】
2019180811.tif 000004
【図３】
2019180811.tif 000005
【図４】
2019180811.tif 000006
【図５】
2019180811.tif 000007
【図６】
2019180811.tif 000008
【国際調査報告】
2019180811.tif 000009
2019180811.tif 000010
2019180811.tif 000011
2019180811.tif 000012