(57)【要約】      （修正有）【課題】光学顕微鏡および電子顕微鏡で、同じ状態の試料を容易に観察することができる観察方法を提供する。【解決手段】光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として含む試料を作製する工程Ｓ１００と、試料を光学顕微鏡で撮影し光学顕微鏡像を取得する工程Ｓ１０２と、試料を電子顕微鏡（ＴＥＭ）で撮影しＴＥＭ像を取得する工程Ｓ１０６と、光学顕微鏡像において、複数の金属粒子の位置および色の情報を取得する工程Ｓ１０４と、ＴＥＭ像において、複数の金属粒子の位置および粒径の情報を取得する工程Ｓ１０８と、光学顕微鏡像で取得された複数の金属粒子の位置および色の情報、およびＴＥＭ像で取得された複数の金属粒子の位置および粒径の情報に基づいて、光学顕微鏡像とＴＥＭ像を対応づける情報を求める工程Ｓ１１２とにより、光学顕微鏡像とＴＥＭ像の位置合わせＳ１１４を行い、２つの像を重ねて１つの画像とする。【選択図】図１
2020136053.tif 000002
【特許請求の範囲】
【請求項１】
光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として含む試料を作製する工程と、
前記試料を光学顕微鏡で撮影することによって、光学顕微鏡像を取得する工程と、
前記試料を電子顕微鏡で撮影することによって、電子顕微鏡像を取得する工程と、
前記光学顕微鏡像において、複数の前記金属粒子の位置および色の情報を取得する工程と、
前記電子顕微鏡像において、複数の前記金属粒子の位置および粒径の情報を取得する工程と、
前記光学顕微鏡像で取得された、複数の前記金属粒子の位置および色の情報、および前記電子顕微鏡像で取得された、複数の前記金属粒子の位置および粒径の情報に基づいて、前記光学顕微鏡像と前記電子顕微鏡像を対応づける情報を求める工程と、
を含む、観察方法。
【請求項２】
請求項１において、
前記金属粒子は、金粒子である、観察方法。
【請求項３】
請求項１または２において、
前記光学顕微鏡像は、暗視野像である、観察方法。
【請求項４】
請求項１ないし３のいずれか１項において、
前記光学顕微鏡像と前記電子顕微鏡像を対応づける情報に基づいて、前記光学顕微鏡像と前記電子顕微鏡像の位置合わせを行い、前記光学顕微鏡像と前記電子顕微鏡像を重ねた１つの画像を生成する工程を含む、観察方法。
【請求項５】
請求項１ないし４のいずれか１項において、
前記試料は、前記金属粒子で標識された観察対象物を含む、観察方法。
【請求項６】
請求項１ないし５のいずれか１項において、
前記試料を作製する工程は、
観察対象物を、前記金属粒子で標識する工程と、
前記金属粒子を増感法により大きくする工程と、
を含む、観察方法。
【請求項７】
光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として含む試料の光学顕微鏡像および前記試料の電子顕微鏡像を取得する画像取得部と、
前記光学顕微鏡像において、複数の前記金属粒子の位置および色の情報を取得する第１像情報取得部と、
前記電子顕微鏡像において、複数の前記金属粒子の位置および粒径の情報を取得する第２像情報取得部と、
前記光学顕微鏡像で取得された、複数の前記金属粒子の位置および色の情報、および前記電子顕微鏡像で取得された、複数の前記金属粒子の位置および粒径の情報に基づいて、前記光学顕微鏡像と前記電子顕微鏡像を対応づける情報を求める演算部と、
を含む、画像処理装置。
【請求項８】
請求項７において、
前記光学顕微鏡像と前記電子顕微鏡像を対応づける情報に基づいて、前記光学顕微鏡像と前記電子顕微鏡像の位置合わせを行い、前記光学顕微鏡像と前記電子顕微鏡像を重ねた１つの画像を生成する画像生成部を含む、画像処理装置。
【請求項９】
請求項７または８に記載の画像処理装置を含む電子顕微鏡。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、観察方法、画像処理装置、および電子顕微鏡に関する。
【背景技術】
【０００２】
光学顕微鏡と電子顕微鏡との間で同一箇所を観察可能とする手法が知られている（例えば、特許文献１参照）。
【０００３】
光学顕微鏡観察において、蛍光タンパク質や蛍光色素で特定の細胞や特定のタンパク質などを標識することによって、目的の細胞や目的のタンパク質の局在を観察することができる。このような蛍光タンパク質としては、ＧＦＰ（green fluorescent protein）が挙げられる。また、このような蛍光色素としては、ＦＩＴＣ（Fluorescein isothiocyanate）、ＤＡＰＩ（4',6-diamidino-2-phenylindole）などが挙げられる。
【０００４】
しかしながら、これらの蛍光タンパク質や、蛍光色素は、電子顕微鏡用の試料作製との相性が悪い。例えば、試料の固定には、グルタールアルデヒドや、四酸化オスミウムが用いられる。蛍光タンパク質や蛍光色素は、グルタールアルデヒドによる架橋や、四酸化オスミウムによる酸化によって、蛍光が失われる。そのため、試料を固定した後に、蛍光タンパク質や蛍光色素で標識された試料の光学顕微鏡観察を行うことは困難である。
【０００５】
また、例えば、ＤＡＢ（3,3'-diaminobenzidine）反応をする蛍光タンパク質で標識された試料を光学顕微鏡観察し、その後、試料を固定して電子顕微鏡観察を行う手法が知られている。このような蛍光タンパク質としては、アスコルビン酸オキシダーゼ（ＡＰＥＸ）や、ｍｉｎｉＳＯＧ（mini Singlet Oxygen Generator）などが挙げられる。
【０００６】
しかしながら、この手法では、試料を固定した後の試料を光学顕微鏡観察することができない。また、電子顕微鏡の試料作製では、試料の固定後、細胞内の水分の有機溶媒への置換（脱水）、有機溶媒の樹脂への置換（樹脂包埋）、および樹脂の重合が行われる。脱水を行うと試料の収縮が起こり、樹脂の重合を行うと樹脂の収縮による試料の収縮が起こる。そのため、光学顕微鏡像と電子顕微鏡像の位置合わせが困難になる。
【０００７】
また、架橋や酸化の影響を受けない蛍光色素として、半導体材料からなる量子ドットが存在する。しかしながら、透過電子顕微鏡観察を行う場合、試料を薄片化しなければならない。試料を薄片化すると、蛍光色素の量が少なくなってしまうため、光学顕微鏡観察において十分な蛍光信号を得ることができない。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開平８−１６２０５９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
上記のように、光学顕微鏡および電子顕微鏡で、同じ状態の試料を観察することは困難であった。
【課題を解決するための手段】
【００１０】
（１）本発明に係る観察方法の一態様は、
光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として含む試
料を作製する工程と、
前記試料を光学顕微鏡で撮影することによって、光学顕微鏡像を取得する工程と、
前記試料を電子顕微鏡で撮影することによって、電子顕微鏡像を取得する工程と、
前記光学顕微鏡像において、複数の前記金属粒子の位置および色の情報を取得する工程と、
前記電子顕微鏡像において、複数の前記金属粒子の位置および粒径の情報を取得する工程と、
前記光学顕微鏡像で取得された、複数の前記金属粒子の位置および色の情報、および前記電子顕微鏡像で取得された、複数の前記金属粒子の位置および粒径の情報に基づいて、前記光学顕微鏡像と前記電子顕微鏡像を対応づける情報を求める工程と、
を含む。
【００１１】
このような観察方法では、光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として用いている。複数の金属粒子は、電子顕微鏡用試料作製の影響を受けずに、光学顕微鏡像および電子顕微鏡像の両方で目印として機能する。したがって、このような観察方法では、光学顕微鏡および電子顕微鏡において、同じ状態の試料を観察することができる。さらに、このような観察方法では、光学顕微鏡像における輝点の色から金属粒子の粒径を推測することができる。したがって、光学顕微鏡像の金属粒子と電子顕微鏡像の金属粒子とを、容易に対応づけることができる。よって、正確に光学顕微鏡像と電子顕微鏡像の位置合わせができる。
【００１２】
（２）本発明に係る画像処理装置の一態様は、
光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として含む試料の光学顕微鏡像および前記試料の電子顕微鏡像を取得する画像取得部と、
前記光学顕微鏡像において、複数の前記金属粒子の位置および色の情報を取得する第１像情報取得部と、
前記電子顕微鏡像において、複数の前記金属粒子の位置および粒径の情報を取得する第２像情報取得部と、
前記光学顕微鏡像で取得された、複数の前記金属粒子の位置および色の情報、および前記電子顕微鏡像で取得された、複数の前記金属粒子の位置および粒径の情報に基づいて、前記光学顕微鏡像と前記電子顕微鏡像を対応づける情報を求める演算部と、
を含む。
【００１３】
このような画像処理装置では、光学顕微鏡像における輝点の色から金属粒子の粒径を推測することができる。したがって、光学顕微鏡像の金属粒子と電子顕微鏡像の金属粒子とを、容易に対応づけることができる。よって、正確に光学顕微鏡像と電子顕微鏡像の位置合わせができる。
【００１４】
（３）本発明に係る電子顕微鏡は、上記の画像処理装置を含む。
【００１５】
このような電子顕微鏡では、光学顕微鏡像における輝点の色から金属粒子の粒径を推測することができる。したがって、光学顕微鏡像の金属粒子と電子顕微鏡像の金属粒子とを、容易に対応づけることができる。よって、正確に光学顕微鏡像と電子顕微鏡像の位置合わせができる。
【図面の簡単な説明】
【００１６】
【図１】第１実施形態に係る観察方法の一例を示すフローチャート。
【図２】第１実施形態に係る観察方法における試料を作製する手法を説明するための図。
【図３】試料の光学顕微鏡像を模式的に示す図。
【図４】輝点の座標を求める手法を説明するための図。
【図５】輝点の座標を求める手法を説明するための図。
【図６】試料の透過電子顕微鏡像を模式的に示す図。
【図７】金属粒子の粒径の測定を説明するための図。
【図８】光学顕微鏡像と透過電子顕微鏡像を対応づける情報を求める手法を説明するための図。
【図９】光学顕微鏡像と透過電子顕微鏡像を対応づける情報を求める手法を説明するための図。
【図１０】光学顕微鏡像と透過電子顕微鏡像を重ねて生成された画像を模式的に示す図。
【図１１】電子顕微鏡の構成を示す図。
【図１２】ゾウリムシの光学顕微鏡像およびゾウリムシの電子顕微鏡像。
【発明を実施するための形態】
【００１７】
以下、本発明の好適な実施形態について図面を用いて詳細に説明する。なお、以下に説明する実施形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではない。また、以下で説明される構成の全てが本発明の必須構成要件であるとは限らない。
【００１８】
１．  第１実施形態
まず、第１実施形態に係る観察方法について説明する。図１は、第１実施形態に係る観察方法の一例を示すフローチャートである。
【００１９】
（１）試料作製（Ｓ１００）
図２は、第１実施形態に係る観察方法における試料を作製する手法を説明するための図である。
【００２０】
まず、観察対象物２を準備する。観察対象物２は、例えば、生体試料である。次に、観察対象物２を固定した後、樹脂包埋する。次に、樹脂包埋された観察対象物２を、ミクロトームなどで薄片化する。これにより、観察対象物２の切片が得られる。なお、観察対象物２に対する、固定、染色、樹脂包埋などの前処理の手法や順序は特に限定されない。
【００２１】
次に、観察対象物２の切片を支持膜４上に配置する。支持膜４は、高分子またはカーボンなどの極めて薄い膜である。次に、粒径の異なる複数の金属粒子６を含む水溶液を作製する。作製した金属粒子６を含む水溶液を、支持膜４上に滴下し、乾燥させる。これにより、支持膜４上に複数の金属粒子６を配置することができる。
【００２２】
以上の処理により、試料を作製することができる。
【００２３】
第１実施形態では、観察位置を特定するための目印として、光の照射により局在表面プラズモン共鳴を励起する金属粒子６を用いる。金属粒子６の粒径は、例えば、２０ｎｍ以上１μｍ以下である。金属粒子６の形状は、例えば、球状である。
【００２４】
以下、目印として、金属粒子６を用いる理由について説明する。
【００２５】
局在表面プラズモン共鳴による電子の振動は、粒子の粒径や表面構造に依存する。この局在表面プラズモン共鳴による電子の振動により、特定波長の光が強く吸収または散乱される。局在表面プラズモン共鳴による特定波長の光の吸収または散乱により、光学顕微鏡観察において、ナノサイズの金属粒子６を観察することができる。さらに、局在表面プラズモン共鳴は、金属粒子の種類や、粒径、表面構造などに依存して吸収される光の波長を変化させる。そのため、光学顕微鏡観察において、金属粒子６からの散乱光の色から、金
属粒子６の粒径を推測することができる。
【００２６】
また、目印として金属粒子６を用いることにより、電子顕微鏡観察において吸収散乱コントラストが得られるため、電子顕微鏡像における目印として十分なコントラストが得られる。
【００２７】
金属粒子６としては、金粒子が好ましい。金粒子は、王水以外の酸やアルカリでは腐食しない。また、細胞毒性が低く、細胞内に入れても悪影響を及ぼす可能性が低い。なお、金粒子として、金ナノアーチンを用いてもよい。また、金属粒子６として、金と銀の合金を用いてもよい。
【００２８】
（２）光学顕微鏡観察（Ｓ１０２）
次に、作製された試料を光学顕微鏡で観察する。光学顕微鏡観察では、暗視野像を観察する。すなわち、光学顕微鏡観察において、試料からの散乱光を観察する。光学顕微鏡において、暗視野像は、金属粒子６からの散乱光の色を確認できるように、カラー撮影可能なカメラで撮影される。なお、試料からの散乱光を確認できれば、光学顕微鏡観察において、明視野像を観察してもよい。
【００２９】
図３は、試料の光学顕微鏡像Ｉ２（暗視野像）を模式的に示す図である。なお、図３では、便宜上、金属粒子６からの散乱光の色を、ハッチングで表している。すなわち、同じハッチングの金属粒子６は、散乱光が同じ色であることを表している。
【００３０】
図３に示すように、光学顕微鏡像Ｉ２では、金属粒子６からの散乱光が観察される。光学顕微鏡の暗視野像では、局在表面プラズモン共鳴の効果により、約２０ｎｍ程度の小さな金属粒子６からの散乱光であっても観察可能である。光学顕微鏡像Ｉ２では、金属粒子６からの散乱光は、輝点として観察される。
【００３１】
（３）輝点の抽出（Ｓ１０４）
次に、光学顕微鏡像Ｉ２から輝点を抽出する。すなわち、光学顕微鏡像Ｉ２から、金属粒子６を抽出する。具体的には、光学顕微鏡像Ｉ２から、各輝点の座標（Ｘ，Ｙ）と、各輝点の色の情報と、を取得する。輝点の座標（Ｘ，Ｙ）と輝点の色の情報は、光学顕微鏡像における、金属粒子の座標と金属粒子の色（金属粒子からの散乱光の色）の情報といえる。
【００３２】
図４および図５は、輝点の座標を求める手法を説明するための図である。なお、図５には、図４の領域Ｖの拡大図、および輝点の強度プロファイルを図示している。図５に示すグラフの横軸は光学顕微鏡像の位置であり、縦軸は明るさを表している。
【００３３】
図５に示すように、輝点の明るさが正規分布するものとし、光学顕微鏡像Ｉ２における輝点の中心を輝点の座標（Ｘ，Ｙ）とする。輝点の座標（Ｘ，Ｙ）の情報を金属粒子の座標（Ｘ，Ｙ）として、輝点の色の情報を金属粒子の色の情報として記録する。このとき、金属粒子の座標（Ｘ，Ｙ）と金属粒子の色の情報を関連付けて記録する。
【００３４】
（４）電子顕微鏡観察（Ｓ１０６）
次に、作製された試料を透過電子顕微鏡で観察する。透過電子顕微鏡による観察は、暗視野であってもよいし、明視野であってもよい。
【００３５】
図６は、試料のＴＥＭ像Ｉ４（明視野像）を模式的に示す図である。図６に示すように、電子線は、金属粒子６によって吸収散乱されるため、ＴＥＭ像Ｉ４では、金属粒子６は黒いドットとして観察される。
【００３６】
（５）金属粒子の抽出（Ｓ１０８）
次に、ＴＥＭ像Ｉ４において、金属粒子６を抽出する。金属粒子６は、ＴＥＭ像Ｉ４において黒いドットとして観察されるため、黒いドットの中心の座標を金属粒子６の座標（ｘ，ｙ）とする。
【００３７】
（６）金属粒子の粒径の測定（Ｓ１１０）
次に、ＴＥＭ像Ｉ４において、金属粒子６の粒径（直径）を測定する。
【００３８】
図７は、金属粒子６の粒径の測定を説明するための図である。
【００３９】
図７に示すように、ＴＥＭ像Ｉ４において、各金属粒子６の粒径を測定する。金属粒子６の粒径の情報は、金属粒子６の座標（ｘ，ｙ）の情報と関連づけて記録する。
【００４０】
（７）光学顕微鏡像と電子顕微鏡像を対応づける情報の算出（Ｓ１１２）
次に、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報を求める。光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報は、光学顕微鏡像から取得された、複数の金属粒子６の位置および色の情報と、ＴＥＭ像から取得された、複数の金属粒子６の位置および粒径の情報と、に基づいて求めることができる。
【００４１】
光学顕微鏡像Ｉ２における金属粒子６の色、すなわち、金属粒子６からの散乱光の色は、金属粒子６の粒径に依存する。具体的には、金属粒子６の粒径が大きくなるほど、局在表面プラズモン共鳴により長波長の光が金属粒子６に吸収される。そのため、光学顕微鏡像から取得された金属粒子６の色（光の波長）の情報から、金属粒子６の粒径を推測することができる。これを利用して、金属粒子６の粒径および金属粒子６の位置を、２つの画像間で照らし合わせることによって、光学顕微鏡像Ｉ２に見られる金属粒子６と、ＴＥＭ像Ｉ４に見られる金属粒子６と、を対応付けることができる。
【００４２】
このようにして、２つの画像間で対応する金属粒子６を見つけることによって、光学顕微鏡像Ｉ２における金属粒子６の座標（Ｘ，Ｙ）とＴＥＭ像Ｉ４における金属粒子６の座標（ｘ，ｙ）とが、試料上の同じ位置を示すことがわかる。この結果、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報を得ることができる。
【００４３】
図８および図９は、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報を求める手法を説明するための図である。
【００４４】
例えば、図８に示すように、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間で、対応する金属粒子６が２組見つかれば、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間における、倍率の差、および、向きの違いを求めることができる。例えば、図８に示すように、光学顕微鏡像Ｉ２において２つの金属粒子６を結ぶベクトルＶ２を引き、同様に、ＴＥＭ像Ｉ４において２つの金属粒子６を結ぶベクトルＶ４を引く。ベクトルＶ２の長さとベクトルＶ４の長さの差から、２つの画像間の倍率の差を求めることができる。また、ベクトルＶ２の向き、およびベクトルＶ４の向きから、２つの画像間の向きの違いを求めることができる。２つの画像間の向きの違いは、例えば、ベクトルＶ２とベクトルＶ４とがなす角度で表すことができる。
【００４５】
また、例えば、図９に示すように、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間で対応する金属粒子６が３組以上見つかれば、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間における、倍率の差、向きの違い、に加えて、像のゆがみを求めることができる。図９に示す例では、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間で対応する金属粒子６が４組あるため、倍率の差
、向きの違い、および像のゆがみを求めることができる。
【００４６】
光学顕微鏡における光学系の収差と電子顕微鏡における光学系の収差とは異なる。そのため、例えば、光学顕微鏡像Ｉ２を基準とした場合、光学顕微鏡像Ｉ２に対して、ＴＥＭ像Ｉ４はゆがんでいる。上記のように、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間で対応する金属粒子６が３組以上見つかれば、光学顕微鏡像Ｉ２に対して、ＴＥＭ像Ｉ４がどのようにゆがんでいるのかを求めることができる。なお、例えば、ＴＥＭ像Ｉ４を基準として、ＴＥＭ像Ｉ４に対して、光学顕微鏡像Ｉ２がどのようにゆがんでいるかを求めてもよい。
【００４７】
（８）光学顕微鏡像とＴＥＭ像の位置合わせ（Ｓ１１４）
次に、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の位置合わせを行い、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を重ねて１つの画像とする。
【００４８】
例えば、まず、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の倍率の差の情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の倍率を調整する。これにより、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の倍率を等しくする。また、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の向きの違いの情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の向きを調整する。例えば、光学顕微鏡像Ｉ２に対してＴＥＭ像Ｉ４を回転させることで、向きを調整することができる。これにより、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を同じ向きにする。また、２つの画像間のゆがみの情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間のゆがみを補正してもよい。
【００４９】
次に、倍率や向き等が調整された光学顕微鏡像Ｉ２と、倍率や向き等が調整されたＴＥＭ像Ｉ４の位置合わせを行い、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を重ねて１つの画像とする。
【００５０】
図１０は、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を重ねて生成された画像Ｉ６を模式的に示す図である。
【００５１】
図１０に示す画像Ｉ６は、光学顕微鏡像Ｉ２およびＴＥＭ像Ｉ４の両方の特性を生かした画像となる。
【００５２】
以上の工程により、光学顕微鏡と透過電子顕微鏡を組み合わせて試料の観察ができる。
【００５３】
なお、上記では、光学顕微鏡像とＴＥＭ像を取得する場合について説明したが、光学顕微鏡像と組み合わせる像は、電子顕微鏡像であればよい。ここで、電子顕微鏡像は、ＴＥＭ像、走査電子顕微鏡像（ＳＥＭ像）、および走査透過電子顕微鏡像（ＳＴＥＭ像）を含む。ＳＥＭ像およびＳＴＥＭ像においても、ＴＥＭ像と同様に、金属粒子６の粒径を測定できる。そのため、光学顕微鏡像とＳＥＭ像を取得する場合および光学顕微鏡像とＳＴＥＭ像を取得する場合であっても、光学顕微鏡像とＴＥＭ像を取得する場合と同様の処理で、試料の観察が可能である。
【００５４】
また、上記では、観察対象物が生体試料である場合について説明したが、その他の試料についても、上記の生体試料の場合と同様に、光学顕微鏡と電子顕微鏡を組み合わせた観察が可能である。
【００５５】
第１実施形態に係る観察方法は、例えば、以下の特徴を有する。
【００５６】
第１実施形態に係る観察方法は、光の照射により局在表面プラズモン共鳴を励起する複
数の金属粒子を目印として含む試料を作製する工程と、光学顕微鏡像において複数の金属粒子の位置および色の情報を取得する工程と、電子顕微鏡像において複数の金属粒子の位置および粒径の情報を取得する工程と、光学顕微鏡像で取得された複数の金属粒子の位置および色の情報、および電子顕微鏡像で取得された複数の金属粒子の位置および粒径の情報に基づいて、光学顕微鏡像と電子顕微鏡像を対応づける情報を求める工程と、を含む。
【００５７】
第１実施形態に係る観察方法では、光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子６を目印として用いている。複数の金属粒子６は、電子顕微鏡用試料作製の影響を受けずに、光学顕微鏡像および電子顕微鏡像の両方で目印として機能する。したがって、第１実施形態に係る観察方法では、光学顕微鏡および電子顕微鏡において、同じ状態の試料を観察することができる。
【００５８】
さらに、第１実施形態に係る観察方法では、光学顕微鏡像における輝点の色から金属粒子の粒径を推測することができる。したがって、光学顕微鏡像の金属粒子と電子顕微鏡像の金属粒子とを、容易に対応づけることができる。よって、正確に光学顕微鏡像と電子顕微鏡像の位置合わせができる。
【００５９】
第１実施形態に係る観察方法では、光学顕微鏡像は、例えば、暗視野像である。暗視野像では、金属粒子６からの散乱光の色が見やすい。そのため、光学顕微鏡像から金属粒子６の粒径を正確に推測することができる。
【００６０】
２．  第２実施形態
次に、第２実施形態に係る画像処理装置について、図面を参照しながら説明する。図１１は、電子顕微鏡１００の構成を示す図である。電子顕微鏡１００は、第２実施形態に係る画像処理装置１０を含む。
【００６１】
電子顕微鏡１００は、画像処理装置１０と、電子顕微鏡本体２０と、を含む。
【００６２】
電子顕微鏡本体２０は、例えば、透過電子顕微鏡としての機能を有している。すなわち、電子顕微鏡本体２０は、電子銃と、試料に電子線を照射する照射系、試料を保持する試料ステージ、試料を透過した電子で像を結像する結像系、および像を撮影する撮像装置を含む。電子顕微鏡本体２０では、電子銃から放出された電子線は、照射系によって集束されて試料に照射される。試料に照射された電子線は試料を透過する。結像系によって、試料を透過した電子でＴＥＭ像が結像され、ＴＥＭ像は、撮像装置で撮影される。撮像装置で撮影されたＴＥＭ像の画像データは、画像処理装置１０に送られ、記憶部１２４に記憶される。
【００６３】
画像処理装置１０は、操作部１２０と、表示部１２２と、記憶部１２４と、処理部１１０と、を含む。
【００６４】
操作部１２０は、ユーザーによる操作に応じた操作信号を取得し、処理部１１０に送る処理を行う。操作部１２０の機能は、例えば、ボタン、キー、タッチパネル型ディスプレイ、マイクなどにより実現できる。
【００６５】
表示部１２２は、処理部１１０によって生成された画像を表示するものである。表示部１２２の機能は、例えば、ＬＣＤ（Liquid Crystal Display）などのディスプレイにより実現できる。
【００６６】
記憶部１２４は、処理部１１０が各種の計算処理や制御処理を行うためのプログラムやデータ等を記憶している。また、記憶部１２４は、処理部１１０の作業領域として用いら
れ、処理部１１０が各種プログラムに従って実行した算出結果等を一時的に記憶するためにも使用される。記憶部１２４の機能は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、およびハードディスクなどにより実現できる。
【００６７】
処理部１１０は、記憶部１２４に記憶されているプログラムに従って、各種の制御処理や計算処理を行う。処理部１１０の機能は、各種プロセッサ（ＣＰＵ（Central Processing Unit）等）でプログラムを実行することにより実現することができる。処理部１１０は、画像取得部１１２と、第１像情報取得部１１４と、第２像情報取得部１１６と、演算部１１８と、画像生成部１１９と、を含む。
【００６８】
画像取得部１１２は、光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として含む試料の光学顕微鏡像および当該試料の電子顕微鏡像を取得する。例えば、ユーザーが光学顕微鏡を用いて試料の撮影を行い、得られた光学顕微鏡像Ｉ２（図３参照）を記憶部１２４に記憶させる。画像取得部１１２は、記憶部１２４に記憶された光学顕微鏡像Ｉ２を読み出して、光学顕微鏡像Ｉ２を取得する。また、画像取得部１１２は、例えば、電子顕微鏡本体２０で撮影され、記憶部１２４に記憶されたＴＥＭ像Ｉ４（図６参照）を読み出して、ＴＥＭ像Ｉ４を取得する。
【００６９】
第１像情報取得部１１４は、光学顕微鏡像Ｉ２において、複数の金属粒子の位置および色の情報を取得する。第１像情報取得部１１４は、光学顕微鏡像Ｉ２において、輝点を抽出し、輝点の座標および輝点の色の情報を取得する。これにより、各金属粒子の位置および色の情報を取得できる。各金属粒子の位置および色の情報は、記憶部１２４に記録される。
【００７０】
第２像情報取得部１１６は、ＴＥＭ像Ｉ４において、複数の金属粒子の位置および粒径の情報を取得する。第２像情報取得部１１６は、ＴＥＭ像Ｉ４から金属粒子６に対応するコントラストの部分を抽出する。例えば、ＴＥＭ像Ｉ４が明視野像である場合、金属粒子６は黒いドットとして観察される。そのため、第２像情報取得部１１６は、黒いドットの座標および黒いドットの粒径の情報を取得する。これにより、各金属粒子の位置および粒径の情報を取得できる。各金属粒子の位置および粒径の情報は、記憶部１２４に記録される。
【００７１】
演算部１１８は、光学顕微鏡像Ｉ２で取得された、複数の金属粒子６の位置および色の情報、およびＴＥＭ像Ｉ４で取得された、複数の金属粒子の位置および粒径の情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報を求める。光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報は、２つの画像間で対応する金属粒子６の位置の情報、２つの画像間の倍率の差の情報、および２つの画像間の向きの違いの情報を含む。さらに、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報は、２つの画像間のひずみの情報を含んでいてもよい。
【００７２】
演算部１１８は、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４において、対応する金属粒子６の位置の情報を求める。具体的には、演算部１１８は、光学顕微鏡像Ｉ２における金属粒子６の色の情報から金属粒子６の粒径を推測する。演算部１１８は、金属粒子６の粒径と金属粒子からの散乱光の色との関係を示すテーブルを用いて、金属粒子６の色から金属粒子６の粒径を推測する。演算部１１８は、推測された金属粒子６の粒径と位置の情報と、ＴＥＭ像Ｉ４における金属粒子６の粒径と位置の情報と、を照らし合わせて、２つの画像間で対応する金属粒子６を見つける。
【００７３】
演算部１１８は、例えば、図８に示すように、光学顕微鏡像Ｉ２において２つの金属粒子６を結ぶベクトルＶ２と、ＴＥＭ像Ｉ４において２つの金属粒子６を結ぶベクトルＶ４
の長さの差から、２つの画像間の倍率の差を求める。また、演算部１１８は、ベクトルＶ２の向き、およびベクトルＶ４の向きから、２つの画像間の向きの違いを求める。
【００７４】
また、演算部１１８は、２つの画像間で対応する金属粒子６が３組以上あれば、光学顕微鏡像Ｉ２に対するＴＥＭ像Ｉ４のゆがみを求める。なお、ＴＥＭ像Ｉ４に対する光学顕微鏡像Ｉ２のゆがみを求めてもよい。
【００７５】
画像生成部１１９は、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を対応づける情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の位置合わせを行い、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を重ねた１つの画像を生成する。
【００７６】
画像生成部１１９は光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の倍率の差の情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の倍率を等しくする。また、画像生成部１１９は、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の向きの違いの情報に基づいて、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の向きを同じにする。また、光学顕微鏡像Ｉ２に対するＴＥＭ像Ｉ４のゆがみの情報が得られている場合には、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４との間のゆがみを補正する。画像生成部１１９は、このようにして等しい倍率、同じ向きとなった光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４の位置合わせを行い、光学顕微鏡像Ｉ２とＴＥＭ像Ｉ４を重ねて１つの画像Ｉ６（図１０参照）とする。画像生成部１１９は、生成した画像Ｉ６を表示部１２２に表示させる。
【００７７】
画像処理装置１０は、例えば、以下の特徴を有する。
【００７８】
画像処理装置１０では、演算部１１８は、光学顕微鏡像で取得された複数の金属粒子の位置および色の情報、および電子顕微鏡像で取得された複数の金属粒子の位置および粒径の情報に基づいて、光学顕微鏡像と電子顕微鏡像を対応づける情報を求める。このように、画像処理装置１０では、光の照射により局在表面プラズモン共鳴を励起する複数の金属粒子を目印として用いているため、光学顕微鏡観察において、輝点の色で金属粒子の粒径を推測することができる。したがって、画像処理装置１０では、光学顕微鏡像の金属粒子と電子顕微鏡像の金属粒子とを、容易に対応づけることができる。よって、正確に光学顕微鏡像と電子顕微鏡像の位置合わせができる。
【００７９】
画像処理装置１０では、画像生成部１１９は、光学顕微鏡像と電子顕微鏡像を対応づける情報に基づいて、光学顕微鏡像と電子顕微鏡像の位置合わせを行い、光学顕微鏡像と電子顕微鏡像を重ねた１つの画像を生成する。そのため、画像処理装置１０では、光学顕微鏡像Ｉ２およびＴＥＭ像Ｉ４の両方の特性を生かした画像を得ることができる。
【００８０】
３．  変形例
以下では、上述した第１実施形態に係る観察方法と異なる点について説明し、同様の点については説明を省略する。
【００８１】
上述した第１実施形態では、金属粒子６を含む水溶液を、支持膜４上の観察対象物２の切片に滴下し、乾燥させることで、金属粒子６を支持膜４上に配置した。複数の金属粒子６を含む試料の作製方法は、これに限定されない。
【００８２】
例えば、観察したい細胞や、細胞内小器官、タンパク質などの標識として、金ナノ粒子を用いることができる。金ナノ粒子は、粒径がナノオーダーの金粒子である。金ナノ粒子の表面は様々な装飾が可能であり、金ナノ粒子にタンパク質や基質を結合することもできる。細胞に金ナノ粒子を標識する場合、培地に金ナノ粒子を加え、エンドサイトーシスで細胞内に金ナノ粒子を取り込ませる。また、微小電極を用いて、細胞内に金ナノ粒子をイ
ンジェクションすることもできる。
【００８３】
また、タンパク質に金ナノ粒子を標識する場合、観察対象のタンパク質に対する抗体を作製し、免疫染色を行う。その際に、二次抗体に金ナノ粒子を結合させる。また、タンパク質が酵素の場合、酵素に対する基質に金ナノ粒子を結合させることによっても、標識できる。
【００８４】
また、例えば、ゾウリムシなどの生物に対して、金属粒子を食べさせてもよい。以下、観察対象物がゾウリムシである場合の試料作製方法について説明する。
【００８５】
まず、ゾウリムシを培養している培地に金ナノ粒子を加える。これにより、ゾウリムシに金ナノ粒子を食べさせることができる。食べられた金ナノ粒子は、ゾウリムシの食胞に蓄えられる。
【００８６】
次に、金ナノ粒子を食べたゾウリムシの透過電子顕微鏡用の試料を作製する。例えば、ゾウリムシを、グルタールアルデヒドと四酸化オスミウムで固定し、エタノールシリーズで脱水した後、エポキシ樹脂に包埋する。樹脂包埋されたゾウリムシは、ミクロトームで１００ｎｍ以下の厚さに切り、その切片を支持膜上に置く。次に、試料切片を、酢酸ウランとクエン酸鉛で２重染色する。以上の工程により、透過電子顕微鏡用の試料を作製することができる。
【００８７】
図１２は、ゾウリムシの光学顕微鏡像（暗視野像）およびＴＥＭ像である。なお、図１２に示す像（ａ）は光学顕微鏡像（暗視野像）であり、像（ｂ）は（ａ）と同じ視野のＴＥＭ像である。また、像（ｃ）は像（ａ）の拡大像であり、像（ｄ）は像（ｂ）の拡大像である。像（ｅ）は、像（ｃ）と像（ｄ）を重ね合わせた画像である。
【００８８】
上記のように、目印としての金ナノ粒子は、試料作製時に、グルタールアルデヒド、四酸化オスミウム、酸化ウラン、クエン酸鉛に曝されている。しかしながら、図１２に示す光学顕微鏡像では、ゾウリムシからの散乱光に混じって、金ナノ粒子からのオレンジ色の散乱光が見られる。像（ｃ）においてオレンジ色に光る領域はゾウリムシの食胞であるため、像（ｄ）においてゾウリムシの食胞を特定することができる。
【００８９】
また、像（ｅ）に示すように、金ナノ粒子を目印として用いることによって、光学顕微鏡像とＴＥＭ像を正確に位置合わせすることができる。
【００９０】
ここで、金粒子を使った標識は、免疫電子顕微鏡法で用いられている。免疫電子顕微鏡法は、細胞や組織を構成する成分の局在を、免疫反応を利用して、電子顕微鏡レベルで可視化する手法である。免疫電子顕微鏡法で用いられる金粒子の粒径は、細胞や組織に浸透させるために、５ｎｍ以下のものが用いられる。しかしながら、１０ｎｍより小さい金粒子では、散乱光が弱く、光学顕微鏡観察において散乱光を観察できない。
【００９１】
そのため、観察対象物である細胞や組織に金ナノ粒子標識抗体を浸透させた後に、金ナノ粒子の粒径を大きくしてもよい。
【００９２】
まず、培養細胞を固定した後、一次抗体として抗ミトコンドリア抗体を反応させる。次に、培養細胞に、二次抗体として、金コロイド標識抗ウサギＩｇＧ抗体を反応させる。金コロイド標識抗ウサギＩｇＧ抗体は、金ナノ粒子が抗ウサギＩｇＧ抗体に結合したものである。金ナノ粒子の粒径は、５ｎｍ以下である。
【００９３】
上記のように培養細胞に対して一次抗体および二次抗体を反応させた後、金ナノ粒子の
粒径を、金増感法によって、大きくする。次に、培養細胞を、脱水、樹脂包埋し、樹脂包埋された細胞を、ウルトラミクロトームなどで薄片化する。このようにして作製された試料切片を、支持膜上に配置する。
【００９４】
以上の工程により、透過電子顕微鏡用の試料を作製することができる。
【００９５】
上記のように、金増感法により金ナノ粒子の粒径を大きくした場合、金ナノ粒子の粒径にばらつきが生じる。そのため、光学顕微鏡像には、色の異なる複数の輝点が観察され、電子顕微鏡像には、粒径が異なる複数の金属粒子が観察される。したがって、光学顕微鏡像の金属粒子と電子顕微鏡像の金属粒子とを、容易に対応づけることができる。よって、正確に光学顕微鏡像と電子顕微鏡像の位置合わせができる。
【００９６】
上記のように、試料に粒径の小さい金属粒子を導入した後に、金属粒子の粒径を大きくすることにより、細胞や組織への浸透性を維持しつつ、光学顕微鏡観察における視認性を高めることができる。
【００９７】
本発明は、実施の形態で説明した構成と実質的に同一の構成（例えば、機能、方法および結果が同一の構成、あるいは目的及び効果が同一の構成）を含む。また、本発明は、実施の形態で説明した構成の本質的でない部分を置き換えた構成を含む。また、本発明は、実施の形態で説明した構成と同一の作用効果を奏する構成又は同一の目的を達成することができる構成を含む。また、本発明は、実施の形態で説明した構成に公知技術を付加した構成を含む。
【符号の説明】
【００９８】
２…観察対象物、４…支持膜、６…金属粒子、１０…画像処理装置、２０…電子顕微鏡本体、１００…電子顕微鏡、１１０…処理部、１１２…画像取得部、１１４…第１像情報取得部、１１６…第２像情報取得部、１１８…演算部、１１９…画像生成部、１２０…操作部、１２２…表示部、１２４…記憶部
【図１】
2020136053.tif 000003
【図２】
2020136053.tif 000004
【図３】
2020136053.tif 000005
【図４】
2020136053.tif 000006
【図５】
2020136053.tif 000007
【図６】
2020136053.tif 000008
【図７】
2020136053.tif 000009
【図８】
2020136053.tif 000010
【図９】
2020136053.tif 000011
【図１０】
2020136053.tif 000012
【図１１】
2020136053.tif 000013
【図１２】
2020136053.tif 000014