(57)【特許請求の範囲】
【請求項１】
眼部の共焦点画像と非共焦点画像との一方を用いて得た情報に基づいて、他方の生成と解析との少なくとも一方を実行するか否かを決定する決定手段と、
前記他方の生成と解析との少なくとも一方を実行すると決定された場合には、前記他方と前記他方の解析結果との少なくとも一方を表示手段に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項２】
前記共焦点画像及び前記非共焦点画像の一方を用いて得た情報として前記共焦点画像及び前記非共焦点画像の一方の画像特徴に基づいて、前記他方の生成と解析との少なくとも一方を実行するか否かを決定することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記共焦点画像及び前記非共焦点画像の一方の画像特徴として前記共焦点画像及び前記非共焦点画像の一方の観察対象の状態に基づいて、前記他方の生成と解析との少なくとも一方を実行するか否かを決定することを特徴とする請求項２に記載の情報処理装置。
【請求項４】
前記共焦点画像を解析することにより、前記共焦点画像における観察対象の状態を判定する判定手段を更に有し、
前記決定手段は、前記観察対象の状態に基づいて、前記非共焦点画像の生成と解析との少なくとも一方を実行するか否かを決定することを特徴とする請求項３に記載の情報処理装置。
【請求項５】
前記観察対象の状態は、前記共焦点画像における病変領域の有無であり、
前記決定手段は、前記病変領域が有る場合には、前記非共焦点画像の生成と解析との少なくとも一方を実行すると決定することを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記病変領域の有無は、前記共焦点画像における視細胞欠損領域の有無であり、前記決定手段は、前記視細胞欠損領域が有る場合には、前記非共焦点画像の生成と解析との少なくとも一方を実行すると決定することを特徴とする請求項５に記載の情報処理装置。
【請求項７】
前記共焦点画像及び前記非共焦点画像の一方を用いて得た情報として前記共焦点画像及び前記非共焦点画像の一方の解析結果に基づいて、前記他方の生成と解析との少なくとも一方を実行するか否かを決定することを特徴とする請求項１乃至６のいずれか１項に記載の情報処理装置。
【請求項８】
眼部の共焦点画像と非共焦点画像との一方を用いて得た情報に基づいて、他方の生成と解析との少なくとも一方を実行するか否かを決定し、更に、前記共焦点画像及び前記非共焦点画像を含む前記眼部の複数種類の画像を解析する解析方法を独立に決定する決定手段と、
前記決定された解析方法に基づいて前記複数種類の画像の少なくとも一つを解析することにより得られた解析結果を、表示手段に表示させる表示制御手段と、
を有することを特徴とする情報処理装置。
【請求項９】
前記決定手段は、前記複数種類の画像の属性、解剖学的特徴、病変候補、画質、輝度特性、指示された撮像条件に対する適合度、過去検査の画像属性に対する適合度の少なくとも一つに基づいて、前記解析方法を決定することを特徴とする請求項８に記載の情報処理装置。
【請求項１０】
前記決定手段は、画像の読み込み、画像間の演算、画像特徴の抽出、画像の計測、画像の表示、に関する方法の少なくとも一つを、前記解析方法として決定することを特徴とする請求項８または９に記載の情報処理装置。
【請求項１１】
前記決定手段は、前記複数種類の画像を解析するか否かを、前記解析方法として決定することを特徴とする請求項８乃至１０のいずれか１項に記載の情報処理装置。
【請求項１２】
前記眼部の複数種類の画像を撮る眼科撮像装置と通信可能に接続され、
前記眼部を略同時に撮像して得た複数種類の画像を取得する画像取得手段を更に有することを特徴とする請求項１乃至１１のいずれか１項に記載の情報処理装置。
【請求項１３】
前記眼科撮像装置は、前記眼部の共焦点画像と非共焦点画像とを取得するための兼用の光源と、前記光源からの光が照射された前記眼部からの戻り光を、共焦点領域を通る戻り光と非共焦点領域を通る戻り光とに分割する光学部材とを有し、
前記画像取得手段は、前記共焦点領域を通る戻り光に基づいて前記共焦点画像を取得し、前記非共焦点領域を通る戻り光に基づいて前記非共焦点画像を取得することを特徴とする請求項１２に記載の情報処理装置。
【請求項１４】
前記画像取得手段は、前記共焦点領域を通る戻り光と前記非共焦点領域を通る戻り光とのうち少なくとも一つを受光する受光部の前段に設けられた開口部の位置と形状とのうち少なくとも一つが調整されて得た前記眼部の共焦点画像と非共焦点画像とを取得することを特徴とする請求項１３に記載の情報処理装置。
【請求項１５】
前記眼部における前記共焦点画像の取得位置と前記非共焦点画像の取得位置とが同じであることを特徴とする請求項１乃至１４のいずれか１項に記載の情報処理装置。
【請求項１６】
眼部の共焦点画像と非共焦点画像との一方を用いて得た情報に基づいて、他方の生成と解析との少なくとも一方を実行するか否かを決定する工程と、
前記他方の生成と解析との少なくとも一方を実行すると決定された場合には、前記他方と前記他方の解析結果との少なくとも一方を表示手段に表示させる工程と、
を有することを特徴とする情報処理装置の作動方法。
【請求項１７】
眼部の共焦点画像と非共焦点画像との一方を用いて得た情報に基づいて、他方の生成と解析との少なくとも一方を実行するか否かを決定する工程と、
前記共焦点画像及び前記非共焦点画像を含む前記眼部の複数種類の画像を解析する解析方法を独立に決定する工程と、
前記決定された解析方法に基づいて前記複数種類の画像の少なくとも一つを解析することにより得られた解析結果を、表示手段に表示させる工程と、
を有することを特徴とする情報処理装置の作動方法。
【請求項１８】
請求項１６または１７に記載の情報処理装置の作動方法をコンピュータで実行するためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、眼科診療に用いられる情報処理装置、その作動方法、及びコンピュータプログラムに関する。
【背景技術】
【０００２】
生活習慣病や失明原因の上位を占める疾病の早期診療を目的として、眼部の検査が広く行われている。共焦点レーザー顕微鏡の原理を利用した眼科装置である走査型レーザー検眼鏡（ＳＬＯ；Ｓｃａｎｎｉｎｇ  Ｌａｓｅｒ  Ｏｐｈｔｈａｌｍｏｓｃｏｐｅ）は、測定光であるレーザーを眼底に対してラスター走査し、その戻り光の強度から平面画像を高分解能かつ高速に得る装置である。
【０００３】
開口部（ピンホール）内を通過した光のみを検出することで、特定の深度位置の戻り光のみを画像化でき、眼底カメラ等に比べてコントラストの高い画像を取得できる。以下、このような平面画像を撮像する装置をＳＬＯ装置、該平面画像をＳＬＯ画像と記す。
【０００４】
近年、ＳＬＯ装置において測定光のビーム径を大きくすることにより、横分解能を向上させた網膜のＳＬＯ画像を取得することが可能になってきた。しかし、測定光のビーム径の大径化に伴い、網膜のＳＬＯ画像の取得において、被検眼の収差によるＳＬＯ画像のＳ／Ｎ比及び分解能の低下が問題になってきた。それを解決するために、被検眼の収差を波面センサでリアルタイムに測定し、被検眼にて発生する測定光やその戻り光の収差を波面補正デバイスで補正する補償光学系を有する補償光学ＳＬＯ装置が開発され、高横分解能なＳＬＯ画像の取得を可能にしている。
【０００５】
このような高横分解能なＳＬＯ画像は動画像として取得することができ、たとえば血流動態を非侵襲に観察するために、各フレームから網膜血管を抽出した上で毛細血管における血球の移動速度などが計測される。また、ＳＬＯ画像を用いて視機能との関連を評価するために視細胞Ｐを検出した上で視細胞Ｐの密度分布や配列の計測が行われている。図６（ｂ）に高横分解能なＳＬＯ画像の例を示す。視細胞Ｐや毛細血管の位置に対応した低輝度領域Ｑ、白血球の位置に対応した高輝度領域Ｗが観察できる。前記ＳＬＯ画像において、視細胞Ｐを観察する場合にはフォーカス位置を網膜外層（図６（ａ）のＢ５）付近に設定して図６（ｂ）のようなＳＬＯ画像を撮影する。一方、網膜内層（図６（ａ）のＢ２からＢ４）には網膜血管や分岐した毛細血管が走行している。フォーカス位置を網膜内層に設定して補償光学ＳＬＯ画像を取得すると、例えば網膜血管壁を直接観察できる。
【０００６】
しかし、網膜内層を撮影した共焦点画像では神経線維層から反射する光の影響でノイズ信号が強く、血管壁の観察や壁境界の検出が難しい場合があった。そこで、近年は受光部手前にあるピンホールの径や形状、位置を変えることにより散乱光を取得して得られた非共焦点画像を観察する方法が用いられるようになってきている（非特許文献１）。非共焦点画像ではフォーカス深度が大きいために血管のように深度方向に凹凸のある物体の観察がしやすく、また、神経線維層からの反射光を直接受光しにくくなるためノイズが低減される。また、網膜外層の視細胞を観察する場合でも、これまで共焦点画像では主に視細胞外節が画像化されていたのに対し、非共焦点画像では視細胞内節の凹凸が画像化されることがわかってきている（非特許文献２）。初期障害で外節は欠損しているものの内節は生存している視細胞が存在する領域については、共焦点画像では黒く欠損する（図６（ｋ）のＤｃ５）のに対し非共焦点画像では高輝度な粒状の物体が存在する領域として観察できる（図６（ｌ）のＤｎ５）。これまで、補償光学ＳＬＯ装置を用いて網膜血管の非共焦点画像を取得する技術が非特許文献１に、また補償光学ＳＬＯ装置を用いて共焦点画像と非共焦点画像を同時に取得する技術が非特許文献２に開示されている。
【先行技術文献】
【非特許文献】
【０００７】
【非特許文献１】Ｓｕｌａｉ，Ｄｕｂｕｒａ  ｅｔ  ａｌ．；“Ｖｉｓｕａｌｉｚａｔｉｏｎ  ｏｆ  ｒｅｔｉｎａｌ  ｖａｓｃｕｌａｒ  ｓｔｒｕｃｔｕｒｅ  ａｎｄ  ｐｅｒｆｕｓｉｏｎ  ｗｉｔｈ  ａ  ｎｏｎｃｏｎｆｏｃａｌ  ａｄａｐｔｉｖｅ  ｏｐｔｉｃｓ  ｓｃａｎｎｉｎｇ  ｌｉｇｈｔ  ｏｐｈｔｈａｌｍｏｓｃｏｐｅ”，Ｊ．Ｏｐｔ．Ｓｏｃ．Ａｍ．Ａ，Ｖｏｌ．３１，Ｎｏ．３，ｐｐ．５６９−５７９，２０１４．
【非特許文献２】Ｓｃｏｌｅｓ，Ｄｕｂｕｒａ  ｅｔ  ａｌ．；“Ｉｎ  ｖｉｖｏ  Ｉｍａｇｉｎｇ  ｏｆ  Ｈｕｍａｎ  Ｃｏｎｅ  Ｐｈｏｔｏｒｅｃｅｐｔｏｒ  Ｉｎｎｅｒ  Ｓｅｇｍｅｎｔ”，ＩＯＶＳ，Ｖｏｌ．５５，Ｎｏ．７，ｐｐ．４２４４−４２５１，２０１４．
【発明の概要】
【発明が解決しようとする課題】
【０００８】
共焦点画像及び非共焦点画像を取得するＳＬＯ装置においては、全ての画像に対してメモリへの読み込み、画像間演算処理もしくは画像計測処理を行うのが一般的である。これは、異種の画像を解析することで解析の信頼性を上げることができるためである。
本発明の目的の一つは、上記の課題に鑑みてなされたものであり、眼部の非共焦点画像を含む眼部の複数種類の画像を効率的に解析しつつ、解析の信頼性を向上することである。
【課題を解決するための手段】
【０００９】
本発明の目的を達成するために、例えば本発明の情報処理装置及びその作動方法は以下の構成を備える。
【００１０】
本発明の一態様による情報処理装置は、
眼部の共焦点画像と非共焦点画像との一方を用いて得た情報に基づいて、他方の生成と解析との少なくとも一方を実行するか否かを決定する決定手段と、
前記他方の生成と解析との少なくとも一方を実行すると決定された場合には、前記他方と前記他方の解析結果との少なくとも一方を表示手段に表示させる表示制御手段と、を有する。
【００１１】
また、本発明の一態様による情報処理装置の作動方法は、
眼部の共焦点画像と非共焦点画像との一方を用いて得た情報に基づいて、他方の生成と解析との少なくとも一方を実行するか否かを決定する工程と、
前記他方の生成と解析との少なくとも一方を実行すると決定された場合には、前記他方と前記他方の解析結果との少なくとも一方を表示手段に表示させる工程と、を有する。
【発明の効果】
【００１２】
本発明の一つによれば、眼部の非共焦点画像を含む眼部の複数種類の画像を効率的に解析しつつ、解析の信頼性を向上することができる。
【図面の簡単な説明】
【００１３】
【図１】第一の実施形態に係る情報処理装置１０の機能構成例を示すブロック図である。
【図２】第一の実施形態に係る情報処理装置１０を含むシステムの構成例を示すブロック図である。
【図３】第一の実施形態に係るＳＬＯ像撮像装置２０の全体の構成について説明する図である。
【図４】記憶部１２０、画像処理部１３０に相当するハードウェアを有し、且つその他の各部をソフトウェアとして保持し、実行するコンピュータのハードウェア構成例を示すブロック図である。
【図５】第一の実施形態に係る情報処理装置１０が実行する処理のフローチャートである。
【図６】第一の実施形態での画像処理内容を説明する図である。
【図７】第一の実施形態でのＳ５２０、Ｓ５３０、Ｓ５４０で実行される処理の詳細を示すフローチャートである。
【図８】第二の実施形態に係る情報処理装置１０の機能構成例を示すブロック図である。
【図９】第二の実施形態でのＳ５２０、Ｓ５３０、Ｓ５４０で実行される処理の詳細を示すフローチャートである。
【図１０】第三の実施形態に係る情報処理装置１０の機能構成例を示すブロック図である。
【図１１】第三及び第四の実施形態でのＳ５２０、Ｓ５３０で実行される処理の詳細を示すフローチャートである。
【図１２】第四の実施形態に係る情報処理装置１０の機能構成例を示すブロック図である。
【発明を実施するための形態】
【００１４】
本実施形態の一態様は、眼部の少なくとも１種類の非共焦点画像を含む前記眼部の複数種類の画像を取得する画像取得手段（一例として、図１のデータ取得部１１０）を有する。また、本実施形態の一態様は、取得された複数種類の画像を解析する解析方法を決定する決定手段（一例として、図１の決定部１３１）を有する。そして、本実施形態の一態様は、該決定された解析方法に基づいて該複数種類の画像の少なくとも一つを解析する解析手段（一例として、図１の画像処理部１３０）を有する。これにより、眼部の少なくとも１種類の非共焦点画像を含む眼部の複数種類の画像を効率的に解析しつつ、解析の信頼性を向上することができる。
【００１５】
また、別の本実施形態の一態様は、眼部の共焦点画像と少なくとも１種類の非共焦点画像とを含む眼部の複数種類の画像を取得する画像取得手段（一例として、図１のデータ取得部１１０）を有する。また、別の本実施形態の一態様は、共焦点画像及び少なくとも１種類の非共焦点画像を解析する解析手段（一例として、図１の画像処理部１３０）を有する。また、別の本実施形態の一態様は、共焦点画像の解析結果に基づいて、少なくとも１種類の非共焦点画像を解析するか否かを決定する決定手段（一例として、図１の決定部１３１）を有する。そして、別の本実施形態の一態様は、少なくとも１種類の非共焦点画像が解析されると決定された場合には、共焦点画像及び少なくとも１種類の非共焦点画像の解析結果を表示手段に表示させる表示制御手段（一例として、図１の表示制御部１３３）を有する。これにより、眼部の共焦点画像と少なくとも１種類の非共焦点画像とを含む眼部の複数種類の画像を効率的に解析しつつ、解析の信頼性を向上することができる。なお、決定手段は、非共焦点画像の解析結果に基づいて、共焦点画像を解析するか否かを決定しても良い。
【００１６】
なお、別の本実施形態の一態様としては、撮影された画像の属性や、画像が解剖学的特徴や病変部位を含むか否か、または画像の良し悪し（画質や撮像対象領域をどの程度含むか）により画像処理の対象や方法を決定した上で効率的に画像処理することが望ましい。すなわち、受光方法の異なる多種類の画像を取得する装置で、観察・計測上重要性の高い画像を優先して画像処理することで、多数の画像をより効率的に生成もしくは計測する技術が必要となる。ここで、上述した非特許文献１に記載の技術では、多チャンネルの非共焦点画像を取得する補償光学ＳＬＯ装置に関する技術が開示されているものの、多種類の非共焦点画像を効率的に生成もしくは計測する方法については開示されていない。また、上述した非特許文献２に記載の技術は、共焦点画像及び非共焦点画像を同時に取得しているものの、共焦点画像及び非共焦点画像を効率的に生成もしくは計測する方法については開示されていない。
【００１７】
以下、添付図面に従って本発明に係る情報処理装置、その作動方法、及びコンピュータプログラムの好ましい実施形態について詳説する。ただし、本発明はこれに限定されるものではない。
【００１８】
［第１の実施形態：画像の種類毎に画像処理方法を予め決定］
本実施形態に係る情報処理装置は、共焦点画像と非共焦点画像を略同時に取得する眼科撮像装置の一例であるＳＬＯ装置を用いて、観察対象の一例である視細胞を撮影した画像に対し、観察・計測上の必要性に応じて画像の属性（撮影位置や画像種）ごと指定された方法で一律に画像演算や計測を行うよう構成したものである。具体的には、黄斑部で撮影された視細胞の共焦点画像Ｄｃおよび非共焦点画像Ｄｎ（Ｄｎｒ及びＤｎｌ）のうち、観察・計測上重要な中心窩から半径１．５ｍｍ以内で撮影された共焦点画像Ｄｃｊ及びＳｐｌｉｔＤｅｔｅｃｔｏｒ画像Ｄｎｓｋの重ね合わせ画像を生成し、計測する。つまり、撮影位置が中心窩から半径１．５ｍｍ以遠の画像や、中心窩から半径１．５ｍｍ以内のＲチャンネル画像Ｄｎｒｋ及びＬチャンネル画像Ｄｎｌｋは生成・計測対象外とする場合について説明する。
【００１９】
（全体構成）
図２は、本実施形態に係る情報処理装置１０を含むシステムの構成図である。図２に示すように情報処理装置１０は、眼科撮像装置の一例であるＳＬＯ像撮像装置２０やデータサーバ４０、時相データ取得装置５０と、光ファイバ、ＵＳＢやＩＥＥＥ１３９４等で構成されるローカル・エリア・ネットワーク（ＬＡＮ）３０を介して通信可能に接続されている。なお、これらの機器との接続は、インターネット等の外部ネットワークを介して通信可能に接続される構成であってもよいし、あるいは情報処理装置１０と直接接続されている構成であってもよい。また、情報処理装置が眼科撮像装置に内蔵されて一体として構成されても良い。
【００２０】
また、ＳＬＯ像撮像装置２０は、眼部の広画角画像Ｄｌや高倍率画像である共焦点画像Ｄｃと非共焦点画像Ｄｎを撮像する装置である。ＳＬＯ像撮像装置２０は、広画角画像Ｄｌや共焦点画像Ｄｃ、非共焦点画像Ｄｎ、及びその撮影時に用いた固視標位置Ｆｌ、Ｆｃｎの情報を情報処理装置１０及びデータサーバ４０へ送信する。なお、各画像を異なる撮影位置で取得する場合にはＤｌｉ，Ｄｃｊ，Ｄｎｋのように表す。すなわちｉ，ｊは各々撮影位置番号を示す変数であり、ｉ＝１，２，．．．，ｉｍａｘ、ｊ＝１，２，．．．，ｊｍａｘ、ｋ＝１，２，．．．，ｋｍａｘとする。また、共焦点画像Ｄｃや非共焦点画像Ｄｎを異なる倍率で取得する場合には、最も倍率の高い画像から順にＤｃ１ｍ，Ｄｃ２ｏ，．．．（Ｄｎ１ｍ，Ｄｎ２ｏ，．．．）のように表記する。Ｄｃ１ｍ（Ｄｎ１ｍ）のことを高倍率共焦点（非共焦点）画像、Ｄｃ２ｏ，．．．（Ｄｎ２ｏ，．．．）を中間倍率共焦点（非共焦点）画像と表記する。
【００２１】
また、データサーバ４０は、被検眼の広画角画像Ｄｌや共焦点画像Ｄｃ、非共焦点画像Ｄｎ、及びその撮影時に用いた固視標位置Ｆｌ、Ｆｃｎのような撮像条件データ、眼部の画像特徴などを保持する。眼部の画像特徴として、本発明では視細胞Ｐや毛細血管Ｑ、血球Ｗ、網膜血管壁に関する画像特徴を扱う。ＳＬＯ像撮像装置２０が出力する広画角画像Ｄｌ、共焦点画像Ｄｃ、非共焦点画像Ｄｎ、撮影時に用いた固視標位置Ｆｌ、Ｆｃｎ、情報処理装置１０が出力する眼部の画像特徴を該サーバに保存する。また情報処理装置１０からの要求に応じ、広画角画像Ｄｌ、共焦点画像Ｄｃ、非共焦点画像Ｄｎ、眼部の画像特徴を情報処理装置１０に送信する。
【００２２】
次に、図１を用いて本実施形態に係る情報処理装置１０の機能構成を説明する。図１は情報処理装置１０の機能構成を示すブロック図であり、情報処理装置１０はデータ取得部１１０、記憶部１２０、画像処理部１３０、指示取得部１４０を有する。また、データ取得部１１０は共焦点データ取得部１１１、非共焦点データ取得部１１２、属性データ取得部１１３を備える。画像処理部１３０は決定部１３１、位置合わせ部１３２、表示制御部１３３を備える。さらに、決定部１３１は判定部１３１１及び画像処理法決定部１３１２を有する。
【００２３】
ここで、図３（ａ）（ｂ）を用いて補償光学を適用したＳＬＯ撮像装置２０を説明する。ＳＬＯ撮像装置２０はＳＬＤ２０１、シャックハルトマン波面センサ２０６、補償光学系２０４、ビームスプリッタ（２０２、２０３）、Ｘ−Ｙ走査ミラー２０５、フォーカスレンズ２０９、絞り２１０、光センサ２１１、画像形成部２１２、出力部２１３を有する。
【００２４】
光源であるＳＬＤ（Ｓｕｐｅｒ  Ｌｕｍｉｎｅｓｃｅｎｔ  Ｄｉｏｄｅ）２０１から照射された光は眼底で反射され、一部が第二のビームスプリッタ２０３経由でシャックハルトマン波面センサ２０６へ、それ以外は第一のビームスプリッタ２０２経由で光センサ２１１へ入力される。ここで、光源は、共焦点画像を取得するための光源と、非共焦点画像とを取得するための光源とが兼用であるが、異なる波長によって構成された複数の光源等を用いても良い。シャックハルトマン波面センサ２０６は眼の収差を測定するためのデバイスであり、レンズアレイ２０７にＣＣＤ２０８が接続されている。入射光がレンズアレイ２０７を透過するとＣＣＤ２０８に輝点群が現れ、該投影された輝点の位置ずれに基づき波面収差が測定される。補償光学系２０４はシャックハルトマン波面センサ２０６で測定された波面収差に基づき、収差補正デバイス（可変形状ミラーもしくは空間光位相変調器）を駆動して収差を補正する。該収差補正された光はフォーカスレンズ２０９、絞り２１０を経由し光センサ２１１にて受光される。ここで、絞り２１０、光センサ２１１は、各々本発明に係る開口部、受光部の一例である。なお、開口部は、受光部の前段で且つ受光部付近に設けられていることが好ましい。Ｘ―Ｙ走査ミラー２０５を動かすことで眼底上の走査位置を制御でき、操作者が予め指定した撮影対象領域、時間（フレームレート×フレーム数）のデータを取得する。該データを画像形成部２１２へ伝送し、走査速度のばらつきに起因する画像歪みの補正や、輝度値の補正を行って画像データ（動画像もしくは静止画像）を形成する。出力部２１３は画像形成部２１２が形成した画像データを出力する。
【００２５】
ＳＬＯ撮像装置２０において、共焦点画像Ｄｃと非共焦点画像Ｄｎを取得可能な構成であれば、図３（ａ）における絞り２１０及び光センサ２１１の部分は任意の構成にしてよい。本実施形態では、遮光部２１０−１（図３（ｂ）・図３（ｅ））及び光センサ２１１−１、２１１−２、２１１−３（図３（ｂ））で構成する。図３（ｂ）において戻り光は、結像面に配置された遮光部２１０−１に入射した一部光は反射して光センサ２１１−１へ入射する。ここで、図３（ｅ）を用いて遮光部２１０−１の説明を行う。遮光部２１０−１は透過領域２１０−１−２及び２１０−１−３、遮光領域（不図示）、反射領域２１０−１−１で構成され、中心は戻り光の光軸中心に位置するように配置される。遮光部２１０−１は戻り光の光軸に対して斜めに配置されたときに、光軸方向から見て円形になるような楕円形状のパターンを持っている。遮光部２１０−１で分割された戻り光は光センサ２１１−１に入射する。遮光部２１０−１の透過領域２１０−１−２及び２１０−１−３を通過した光は、結像面に配置されプリズム２１０−２によって分割され、図３（ｂ）に示すように、光センサ２１１−２、２１１−３へそれぞれ入射する。各光センサで得られた電圧信号は、画像形成部２１２内のＡＤボードにてデジタル値に変換され、２次元画像として形成される。光センサ２１１−１に入射された光に基づく画像は、特定の狭い範囲に焦点を合わせた共焦点画像となる。また、光センサ２１１−２及び２１１−３に入力される光に基づく画像は、広い範囲に焦点を合わせた非共焦点画像となる。ここで、遮光部２１０−１は、光源からの光が照射された眼部からの戻り光を、共焦点領域を通る戻り光と非共焦点領域を通る戻り光とに分割する光学部材の一例である。また、透過領域２１０−１−２及び２１０−１−３は、非共焦点領域の一例であり、非共焦点領域を通る戻り光に基づいて非共焦点画像が取得される。また、反射領域２１０−１−１は、共焦点領域の一例であり、共焦点領域を通る戻り光に基づいて共焦点画像が取得される。
【００２６】
なお、非共焦点信号の分割法はこれに限られるものではなく、例えば図３（ｆ）のように４つに分割して受信するよう構成してもよい。また、共焦点信号及び非共焦点信号の受信方法はこれに限定されるものではなく、例えば、絞り２１０（開口部）の径や位置が可変となる機構を有することが好ましい。このとき、図３（ｃ）のように共焦点信号として受信したり、図３（ｄ）のように非共焦点信号を受信するように、開口部の径と光軸方向における位置とのうち少なくとも一つを調整可能に構成されることが好ましい。なお、開口部の径や移動量は任意に調節して良く、例えば、図３（ｃ）では開口部の径を１ＡＤＤ（Ａｉｒｙ  Ｄｉｓｃ  Ｄｉａｍｅｔｅｒ）、図３（ｄ）では開口部の径を１０ＡＤＤ程度、移動量を６ＡＤＤ程度に調節できる。あるいは、図３（ｇ）や（ｈ）のように、複数の非共焦点信号を略同時に受信するよう構成してもよい。本実施形態では非共焦点信号が２種類あることから、片側をＲチャンネル画像の意味でＤｎｒ、もう一方をＬチャンネル画像の意味でＤｎｌと表記する。非共焦点画像Ｄｎと標記する場合は、Ｒチャンネル画像Ｄｎｒ及びＬチャンネル画像Ｄｎｌの両方を指している。
【００２７】
なお、図３（ａ）の構成で走査光学系の振り角を大きくし、補償光学系２０４が収差補正を行わないよう指示することによってＳＬＯ像撮像装置２０は通常のＳＬＯ装置としても動作し、広画角な共焦点画像および非共焦点画像を撮像できる。なお、以下では高倍率画像Ｄｃ、Ｄｎよりも低倍率で、データ取得手段１１０が取得した画像の中で最も低倍率な画像のことを広画角画像Ｄｌ（Ｄｌｃ、Ｄｌｒ、Ｄｌｌ）と呼ぶ。従って、広画角画像Ｄｌは補償光学が適用されたＳＬＯ画像の場合もあるし、単なるＳＬＯ画像の場合も含まれる。なお、共焦点の広画角画像と非共焦点の広画角画像を区別する場合は、各々Ｄｌｃ、Ｄｌｒ、Ｄｌｌと表記する。
【００２８】
次に、図４を用いて情報処理装置１０のハードウェア構成について説明する。図４において、３０１は中央演算処理装置（ＣＰＵ）、３０２はメモリ（ＲＡＭ）、３０３は制御メモリ（ＲＯＭ）、３０４は外部記憶装置、３０５はモニタ、３０６はキーボード、３０７はマウス、３０８はインターフェースである。本実施形態に係る画像処理機能を実現するための制御プログラムや、当該制御プログラムが実行される際に用いられるデータは、外部記憶装置３０４に記憶されている。これらの制御プログラムやデータは、ＣＰＵ３０１による制御のもと、バス３０９を通じて適宜ＲＡＭ３０２に取り込まれ、ＣＰＵ３０１によって実行され、以下に説明する各部として機能する。情報処理装置１０を構成する各ブロックの機能については、図５のフローチャートに示す情報処理装置１０の具体的な実行手順と関連付けて説明する。
【００２９】
＜ステップ５１０：画像取得＞
データ取得部１１０はＳＬＯ像撮像装置２０に対して図６（ｉ）に示すような広画角画像Ｄｌ（Ｄｌｃ、Ｄｌｒ、Ｄｌｌ）、図６（ｉ）のＰｒ１に示すような黄斑部の矩形領域で高倍率画像（共焦点画像Ｄｃｊ、非共焦点画像ＤｎｒｋおよびＤｎｌｋ）の取得を要求する。また、これらの画像に対応する属性データや固視標位置Ｆｌ、Ｆｃｎの取得を要求する。属性データとして、本実施形態では画像の取得日時、取得位置、フォーカス位置、画像種（共焦点／Ｒチャンネル／Ｌチャンネル／任意の画像種間演算）、階調数、画角、解像度、フレーム数を取得する。ＳＬＯ像撮像装置２０は該取得要求に応じて広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊや非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、対応する属性データ及び固視標位置Ｆｌ、Ｆｃｎを取得し送信する。データ取得部１１０はＳＬＯ像撮像装置２０からＬＡＮ３０を介して当該広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊ、非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、及び属性データ、固視標位置Ｆｌ、Ｆｃｎを受信し、記憶部１２０に格納する。なお、高倍率画像の取得位置は黄斑部の矩形領域に限定されるものではなく任意の取得位置の画像を用いてよい。例えば図６（ｉ）のＰｒ２に示すように視神経乳頭周囲において円環状に取得された画像を用いる場合も本発明に含まれる。
【００３０】
＜ステップ５２０：画像生成＞
判定部１３１１が撮影済画像の属性データに基づいてどの撮影済み画像を用いて画像生成するか（生成用画像（取得位置・画像種））を判定する。次に、画像処理法決定部１３１２が生成用画像を用いた画像生成法（画像間もしくは画像内演算の種類や生成される画像の階調数・解像度・フレーム数）を決定する。画像処理部１３０は、判定部１３１１及び画像処理法決定部１３１２が決定した生成用画像及び画像生成法で非共焦点画像（ＤｌｎもしくはＤｎ）内もしくは該画像間の演算を行い、画像を生成する。さらに、位置合わせ部１３２が画像位置合わせを行い、表示制御部１３３が共焦点画像及び非共焦点画像を表示する。具体的な画像生成処理についてはＳ７１０、Ｓ７２０、Ｓ７３０、Ｓ７４０で詳述する。
【００３１】
＜ステップ５３０：計測法決定＞
撮影済画像の属性データに基づいて、判定部１３１１が撮影・生成された画像の中から計測対象画像（撮影位置・画像種）を判定し、画像処理法決定部１３１２が計測対象の画像に対する計測法（画像処理の種類・画像処理範囲・画像処理間隔）を決定する。具体的な計測法決定処理についてはＳ７１１及びＳ７２１で詳述する。
【００３２】
＜ステップ５４０：計測＞
画像処理部１３０が、Ｓ５３０で決定された画像計測法に基づいて計測処理を行い、表示制御部１３３が計測結果を表示する。本実施形態では画像処理部１３０が視細胞の検出及び分布計測処理を行い、表示制御部１３３が検出された視細胞位置やボロノイ図を表示するとともに、視細胞密度などの統計量を表示する。具体的な計測処理についてはＳ７１２、Ｓ７２２、Ｓ７３２、Ｓ７４２、Ｓ７５２で詳述する。
【００３３】
＜ステップ５５０：結果を保存するか否かを決定＞
指示取得部１４０は、Ｓ５２０で生成した画像やＳ５４０で計測した結果のデータ、すなわち共焦点画像Ｄｃｊと非共焦点画像Ｄｎｓｋにおける視細胞位置やボロノイ図、視細胞密度等の統計値をデータサーバ４０へ保存するか否かの指示を外部から取得する。この指示は例えばキーボード３０６やマウス３０７を介して操作者により入力される。保存が指示された場合はＳ５６０へ、保存が指示されなかった場合はＳ５７０へと処理を進める。
【００３４】
＜ステップ５６０：結果の保存＞
画像処理部１３０は検査日時、披検眼を同定する情報と、Ｓ５５０で決定した保存対象の画像や計測結果に関するデータとを関連付けてデータサーバ４０へ送信する。
【００３５】
＜ステップ５７０：終了するか否かを決定＞
指示取得部１４０は情報処理装置１０による広画角画像Ｄｌと高倍率共焦点画像Ｄｃｊ、高倍率非共焦点画像Ｄｎｋに関する処理を終了するか否かの指示を外部から取得する。この指示はキーボード３０６やマウス３０７を介して操作者により入力される。処理終了の指示を取得した場合は処理を終了する。一方、処理継続の指示を取得した場合にはＳ５１０に処理を戻し、次の披検眼に対する処理（または同一披検眼に対する再処理を）行う。さらに、図７（ａ）に示すフローチャートを参照しながら、Ｓ５２０で実行される処理の詳細について説明する。
【００３６】
＜ステップ７１０：撮影済画像の属性情報を取得＞
画像処理部１３０は、撮影済画像の属性データを取得する。本実施形態では、属性データとして各画像の取得日時・取得位置・フォーカス位置、画像種（共焦点画像／Ｒチャンネル画像／Ｌチャンネル画像／任意の画像内もしくは画像間演算、例えばＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像）、解像度、階調数、フレーム数を取得する。
【００３７】
＜ステップ７２０：画像生成方法を決定＞
判定部１３１１が撮影済画像の属性データに基づき、どの撮影済画像を用いて画像生成を行うか（生成用画像（撮影位置・画像種））を判定する。次に画像処理法決定部１３１２が、判定部１３１１によって判定された生成用画像を用いた画像生成法（画像間演算や画像内演算（重ね合わせ等）の種類・生成される画像の階調数・解像度・フレーム数）を決定する。画像処理部１３０は、判定部１３１１が決定した生成用画像に対して画像処理法決定部１３１２が決定した画像生成法で非共焦点画像（ＤｌｎもしくはＤｎ）内もしくは該画像間の演算を行い、画像を生成する。さらに、位置合わせ部１３２が画像位置合わせを行い、表示制御部１３３が共焦点画像及び非共焦点画像を表示する。
【００３８】
本実施形態では、判定部１３１１が視細胞撮像時の既定の生成用画像として撮影位置が中心窩から半径１．５ｍｍ以内にある共焦点画像Ｄｃｊ及び非共焦点画像Ｄｎｋ（Ｒチャンネル画像Ｄｎｒｋ及びＬチャンネル画像Ｄｎｌｋ）を判定する。また、画像処理法決定部１３１２が該生成用画像を用いて共焦点画像Ｄｃｊの重ね合わせ画像と、Ｓｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像の重ね合わせ画像を、原画像と同じ階調数、解像度で生成するよう決定する。従って、撮影位置が中心窩から半径１．５ｍｍ以遠の画像や、中心窩から半径１．５ｍｍ以内のＲチャンネル画像Ｄｎｒｋ及びＬチャンネル画像Ｄｎｌｋは生成されない。なお、ＳｐｌｉｔＤｅｔｅｃｔｏｒ画像は、（（Ｌチャンネル画像の画素値−Ｒチャンネル画像の画素値）／（Ｒチャンネル画像の画素値＋Ｌチャンネル画像の画素値））の演算によって生成される非共焦点画像を用いた差分画像の１種である。画像処理部１３０における生成用画像判定、及び画像生成法決定はこれに限定されず、観察・計測上重要な画像に対してより多種の画像で、詳細に観察・計測できるような画像生成法であれば、任意の生成用画像及び画像生成法を決定してよい。
【００３９】
また、指示取得部１４０を経由して取得した画像属性に基づいて生成用画像や画像生成法を決定する場合も本発明に含まれる。視細胞を撮影した場合の共焦点画像Ｄｃ、Ｓｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓの例を図６（ｇ）及び（ｈ）に示す。
【００４０】
＜ステップ７３０：画像生成＞
Ｓ７２０で判定された生成用画像及び決定された画像生成法に基づいて、画像処理部１３０が画像を生成する。なお、画像生成に先立ち、位置合わせ部１３２は、広画角画像Ｄｌｃ及び共焦点画像Ｄｃにおけるフレーム間位置合わせを行い、該フレーム間位置合わせパラメータ値を各々広画角画像Ｄｌｒ、Ｄｌｌ、非共焦点画像Ｄｎｒ、Ｄｎｌに対しても適用するものとする。ＳｐｌｉｔＤｅｔｅｃｔｏｒ画像Ｄｌｎｓ、Ｄｎｓについては、フレーム間位置合わせ済みのＤｌｒ、ＤｎｒとＤｌｌ、Ｄｎｌを演算処理して生成するため改めてフレーム間位置合わせを行う必要はない。具体的なフレーム間位置合わせ法として、
ｉ）位置合わせ部１３２は、位置合わせの基準となる基準フレームを設定する。本実施形態では、最もフレーム番号の小さいフレームを基準フレームとする。なお、基準フレームの設定法はこれに限るものではなく、任意の設定法を用いて良い。
ｉｉ）位置合わせ部１３２は、フレーム間の大まかな位置の対応付け（粗位置合わせ）を行う。任意の位置合わせ手法を利用できるが、本実施形態では、画像間類似度評価関数として相関係数、座標変換手法としてＡｆｆｉｎｅ変換を用いて粗位置合わせを行う。
ｉｉｉ）位置合わせ部１３２は、フレーム間の大まかな位置の対応関係のデータに基づいて精密位置合わせを行う。
【００４１】
本実施形態ではｉｉ）で得られた粗位置合わせ済動画像に対し、非剛体位置合わせ手法の一種であるＦＦＤ（Ｆｒｅｅ  Ｆｏｒｍ  Ｄｅｆｏｒｍａｔｉｏｎ）法を用いてフレーム間の精密位置合わせを行う。なお、精密位置合わせの手法はこれに限らず、任意の位置合わせ手法を用いて良い。画像生成後に、位置合わせ部１３２は広画角画像Ｄｌｃと高倍率画像Ｄｃｊとの位置合わせを行い、Ｄｌｃ上のＤｃｊの相対位置を求める。位置合わせ部１３２は、記憶部１２０から高倍率共焦点画像Ｄｃｊの撮影時に用いた固視標位置Ｆｃｎを取得し、広画角画像Ｄｌｃと共焦点画像Ｄｃｊとの位置合わせにおける位置合わせパラメータの探索初期点とする。該パラメータ値の組み合わせを変化させながら広画角画像Ｄｌｃと高倍率共焦点画像Ｄｃｊとの位置合わせを行う。広画角画像Ｄｌｃと高倍率共焦点画像Ｄｃｊとの類似度が最も高い位置合わせパラメータ値の組み合わせを広画角画像Ｄｌｃに対する共焦点画像Ｄｃｊの相対位置として決定する。位置合わせ手法はこれに限らず、任意の位置合わせ手法を用いて良い。
【００４２】
また、Ｓ５１０において中間倍率の画像が取得されている場合には、より低倍率な画像から順に位置合わせを行う。例えば高倍率共焦点画像Ｄｃ１ｍと中間倍率共焦点画像Ｄｃ２ｏが取得されている場合にはまず広画角画像Ｄｌｃと中間倍率画像Ｄｃ２ｏとの間で位置合わせを行い、次いで中間倍率画像Ｄｃ２ｏと高倍率画像Ｄｃ１ｍとの間で位置合わせを行う。
【００４３】
さらに、広画角共焦点画像Ｄｌｃと共焦点画像Ｄｃｊに対して決定された画像貼り合わせパラメータ値を非共焦点画像（ＤｌｒとＤｎｒｋ、ＤｌｌとＤｎｌｋ、ＤｌｎｓとＤｎｓｋ）の貼り合わせに対しても適用する。広画角非共焦点画像Ｄｌｒ、Ｄｌｌ、Ｄｌｎｓ上の高倍率非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、Ｄｎｓｋの相対位置が各々決定される。
【００４４】
＜ステップ７４０：表示＞
表示制御部１３３は、生成された画像群をモニタ３０５上に表示する。
【００４５】
ここでは、Ｓ７２０で生成用画像として判定された（撮影位置が中心窩から半径１．５ｍｍの範囲内の）共焦点画像Ｄｃｊ及びＳｐｌｉｔＤｅｔｅｃｔｏｒ画像Ｄｎｓｋの各重ね合わせ画像を、Ｓ７３０で決定された位置合わせパラメータ値を用いて貼り合わせ表示する。ここで、表示する画像の種類はＧＵＩを用意して切り替える。本実施形態ではラジオボタンを用いて表示を切り替えるが、任意のＧＵＩを用いて切り替えてよい。切り替える画像種としては、共焦点画像Ｄｃ及びＳｐｌｉｔＤｅｔｅｃｔｏｒ画像Ｄｎｓの２種類を切替え表示する。
【００４６】
さらに、図７（ｂ）に示すフローチャートを参照しながら、Ｓ５３０で実行される処理の詳細について説明する。
【００４７】
＜ステップ７１１：撮影済画像の属性情報を取得＞
画像処理部１３０は、Ｓ７１０で取得された撮影済画像の属性データを参照する。
【００４８】
＜ステップ７２１：計測方法を決定＞
判定部１３１１がＳ７１１で取得した撮影済画像の属性データに基づいて計測対象の画像（撮影位置・画像種）を判定する。次に、画像処理法決定部１３１２が計測対象の画像に対する計測方法（画像処理の種類、画像処理範囲、画像処理間隔）を決定する。
【００４９】
本実施形態では、判定部１３１１が視細胞撮像時の既定の計測対象として撮影位置が中心窩から半径１．５ｍｍの範囲内の共焦点画像Ｄｃｊ及びＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓｋを判定する。すなわち、撮影位置が中心窩から半径１．５ｍｍ以遠の画像や、中心窩から半径１．５ｍｍ以内のＲチャンネル画像Ｄｎｒｋ及びＬチャンネル画像Ｄｎｌｋは計測対象外と判定する。また、画像処理法決定部１３１２は、撮影位置が中心窩から半径１．５ｍｍの範囲内の共焦点画像Ｄｃｊ及びＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓｋの重ね合わせ画像に対する画像処理内容として、
・視細胞位置の検出
・ボロノイ図作成
・視細胞密度の計測
を行うよう決定する。本実施形態では２種類の画像に対して同じ条件で計測して計測結果を比較する必要があるため、画像処理範囲及び画像処理間隔（計測位置の間隔）は両画像とも原画像と同じ範囲、画素サイズと同じ距離とする。これに限らず、計測上重要な画像に対してより詳細に計測できる処理であれば、各画像に対して任意の画像処理範囲、画像処理間隔の値を設定してよい。
【００５０】
さらに、図７（ｃ）に示すフローチャートを参照しながら、Ｓ５４０で実行される処理の詳細について説明する。
【００５１】
＜ステップ７１２：周波数領域でのフィルタリング＞
画像処理部１３０は、共焦点画像Ｄｃｊ及び非共焦点画像Ｄｎｓｋにおける視細胞以外のピーク成分（ノイズや視細胞以外の眼底組織から反射光）を除去するために、高周波成分の除去を行う。本実施形態では、高速フーリエ変換（ＦＦＴ）を用いて周波数変換を行い、低域通過フィルタを適用して高周波成分の信号値をカットする。該フィルタ済画像を逆フーリエ変換することで空間領域に戻し、高周波成分が除去された補正済共焦点画像及び補正済非共焦点画像を生成する。
【００５２】
＜ステップ７２２：二値化＞
補正済共焦点画像及び補正済非共焦点画像に対して各々閾値Ｔｃ、Ｔｓで二値化することにより、視細胞Ｐを検出する。
【００５３】
＜ステップ７３２：ボロノイ図生成＞
視細胞Ｐの二値画像に対し、以下の手順でボロノイ図を生成する。すなわち、視細胞Ｐの二値画像に対し、個々の視細胞領域の中心点（図６（ｍ）のＭＰ）を算出し、隣り合う中心点ＭＰを結ぶ線分に対して垂直二等分線を描画する。描画された垂直二等分線のうち、中心点ＭＰ同士を結ぶ線分の中点から垂直二等分線同士の交点ＶＰまでを残し、残りを消去することでボロノイ境界ＶＢが得られる。ボロノイ図において、個々の視細胞Ｐが占める面積や形状はボロノイ境界ＶＢで囲まれた領域ＶＲで表される。
【００５４】
＜ステップ７４２：視細胞分布の統計量を算出＞
Ｓ７３２で生成したボロノイ図に基づき、視細胞Ｐの分布に関する統計量を算出する。具体的には、検出された視細胞Ｐの密度、隣接する視細胞間の距離の平均、１視細胞が占める面積の平均値、ボロノイ図において視細胞Ｐが六角形で表される領域の割合を算出する。なお、上記統計量は画像全体に対してだけでなく、小領域ごとに求めておく。
【００５５】
＜ステップ７５２：表示＞
表示制御部１３３は、
ｉ）補正済共焦点画像及び補正済非共焦点画像
ｉｉ）視細胞Ｐの検出結果（視細胞位置のマップ）
ｉｉｉ）ボロノイ図
ｉｖ）小領域ごとの視細胞分布の統計値に関するマップ
をモニタ３０５に表示する。なお、ボロノイ図については個々のボロノイ領域ごとの面積に応じて色づけして表示する。なお、本実施形態では決定部１３１が観察・計測上の必要性に応じて撮影位置や画像種ごとに指定された方法で一律に画像間演算及び画像特徴抽出（視細胞検出や血管壁境界検出等）、画像計測に関する方法を決定する場合について説明したが、本発明はこれに限定されない。例えば、決定部１３１内の判定部１３１１が観察・計測上の必要性に応じて撮影位置や画像種ごとに指定された方法で一律にどの画像を記憶部１２０に読み込むかを判定したり、どの画像をモニタ３０５に表示するかを判定する場合も本発明に含まれる。あるいは、画像処理法決定部１３１２が観察・計測上の必要性に応じて撮影位置や画像種ごとに指定された方法で一律に画像の表示法（解像度や階調数、フレーム数（動画像か静止画像かの決定も含む）等）を決定しても良い。
【００５６】
以上述べた構成によれば、情報処理装置１０は共焦点画像と非共焦点画像を略同時に取得するＳＬＯ装置を用いて視細胞を撮影した画像に対し、観察・計測上の必要性に応じて画像の属性（撮影位置や画像種）ごと指定された方法で一律に画像演算や計測を行う。これにより、観察・計測上重要な眼部画像を効率的に生成もしくは計測できる。
【００５７】
なお、本実施形態では、複数種類の画像の種類毎に解析方法（画像処理方法の一例）が予め決定されているが、ユーザの指定（例えば、画像処理方法の選択）に応じて複数の種類の画像の種類毎に解析方法を変更可能に構成されても良い。また、複数の種類の画像の種類毎に異なる解析方法が決定されていることが好ましい。例えば、共焦点画像を非共焦点画像に対して優先的に解析しても良く、このとき、非共焦点画像を解析しない、として解析方法が決定されても良い。また、逆に、非共焦点画像を共焦点画像に対して優先的に解析しても良く、このとき、共焦点画像を解析しない、として解析方法が決定されても良い。また、決定される解析方法としては、画像を解析しない、という方法も含むことが好ましい。すなわち、解析方法の決定は、画像を解析するか否かの決定も含むことが好ましい。なお、これらについては、下記の実施形態においても適用可能である。
【００５８】
［第２の実施形態：画像における特徴領域により画像処理方法を決定］
本実施形態に係る情報処理装置は、共焦点画像と非共焦点画像を略同時に取得するＳＬＯ装置で撮影した画像に対して、以下の処理を行う。すなわち、画像上で取得された画像特徴または病変候補領域に基づき、観察または画像解析上重要な部位を含む画像ほど、多種もしくは詳細な画像を生成したり、多種の画像に対して詳細に計測するよう構成したものである。具体的には、図３（ａ）（ｂ）に示すような共焦点画像Ｄｃｊと非共焦点画像Ｄｎｋを略同時に取得するＳＬＯ装置で図６（ｊ）に示すような取得位置で網膜血管の共焦点動画像Ｄｃｊと非共焦点動画像Ｄｎｋを取得する。網膜静脈閉塞の好発部位である動静脈交差部を含む画像ほど、多種もしくは詳細な画像を生成したり、多種の画像を用いて詳細に計測する場合について説明する。
【００５９】
本実施形態に係る情報処理装置１０と接続される機器の構成を図２（ｂ）に示す。本実施形態ではＳＬＯ像撮像装置２０に加えて、時相データ取得装置５０と接続される点が第１実施形態と異なっている。時相データ取得装置５０は、自律的かつ周期的に変化する生体信号データ（時相データ）を取得する装置であり、例えば脈波計もしくは心電計からなる。時相データ取得装置５０は不図示の操作者による操作に応じ、高倍率画像Ｄｎｋの取得と同時に時相データＳｊを取得する。得られた時相データＳｊは、情報処理装置１０、データサーバ４０へ送信される。なお、時相データ取得装置５０は、ＳＬＯ像撮像装置２０に直接接続されている構成であってもよい。
【００６０】
また、データサーバ４０は被検眼の広画角画像Ｄｌｒ、Ｄｌｌ、高倍率画像Ｄｎｒｋ、Ｄｎｌｋ、及びその取得時に用いた固視標位置Ｆｌ、Ｆｃｎのような取得条件データ以外に、眼部の画像特徴も保持する。眼部の画像特徴としては任意のものを保持できるが、本実施形態では網膜血管及び毛細血管Ｑ、視細胞欠損領域を扱う。時相データ取得装置５０が出力する時相データＳｊや情報処理装置１０が出力する眼部の画像特徴は該サーバに保存される。また情報処理装置１０からの要求に応じて時相データＳｊ、眼部の画像特徴が情報処理装置１０に送信される。
【００６１】
次に、本実施形態に係る情報処理装置１０の機能ブロックを図８に示す。データ取得部１１０に時相データ取得部１１４を、決定部１３１に画像特徴取得部１３１３を備える点が実施形態１と異なっている。また、本実施形態での画像処理フローは図５に示す通りであり、Ｓ５１０、Ｓ５２０、Ｓ５３０、Ｓ５４０以外は実施形態１の場合と同様である。そこで、本実施形態ではＳ５１０、Ｓ５２０、Ｓ５３０、Ｓ５４０の処理のみ説明する。
【００６２】
＜ステップ５１０：画像取得＞
データ取得部１１０は、広画角画像Ｄｌｃ、Ｄｌｎ、共焦点画像Ｄｃｊ、非共焦点画像Ｄｎｋ及び時相データを取得する。本実施形態では、図６（ｊ）に示すように、網膜動脈アーケードＡに沿って共焦点画像Ｄｃｊ、非共焦点画像Ｄｎｋを取得するものとする。時相データ取得部１１４は時相データ取得装置５０に対し生体信号に関する時相データＳｊの取得を要求する。本実施形態では時相データ取得装置として脈波計を用い、被験者の耳垂（耳たぶ）から脈波データＳｊを取得する。ここで脈波データＳｊは一方の軸に取得時刻、他方の軸に脈波計が計測した脈波信号値を持つ周期的な点列として表現される。時相データ取得装置５０は該取得要求に応じて対応する時相データＳｊを取得し送信するので、時相データ取得部１１４は時相データ取得装置５０からＬＡＮ３０を介して当該脈波データＳｊを受信する。時相データ取得部１１４は受信した時相データＳｊを記憶部１２０に格納する。
【００６３】
ここで、時相データ取得装置５０が取得する時相データＳｊのある位相に合わせて共焦点データ取得部１１１もしくは非共焦点データ取得部１１２が画像を取得開始する場合と、画像の取得要求後直ちに脈波データＰｉと画像取得を同時に開始する場合が考えられる。本実施形態では画像取得要求後直ちに時相データＰｉと画像取得を開始する。時相データ取得部１１４より各画像の時相データＰｉを取得し、各々の時相データＰｉの極値を検出して心拍動の周期及び心時相の相対値（ｒｅｌａｔｉｖｅ  ｃａｒｄｉａｃ  ｃｙｃｌｅ）を算出する。心時相の相対値は、心拍動の周期を１とした場合に０から１までの浮動小数点数で表わされる相対値である。データ取得部１１０は、ＳＬＯ像撮像装置２０に対して広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊ、非共焦点画像ＤｎｒｋおよびＤｎｌｋ、対応する固視標位置Ｆｌ、Ｆｃｎデータの取得を要求する。
【００６４】
ＳＬＯ像撮像装置２０は、該取得要求に応じて広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊや非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、対応する固視標位置Ｆｌ、Ｆｃｎを取得し送信する。データ取得部１１０はＳＬＯ像撮像装置２０からＬＡＮ３０を介して当該広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊ、非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、及び固視標位置Ｆｌ、Ｆｃｎを受信し、記憶部１２０に格納する。なお、網膜血管を撮影した場合の共焦点画像Ｄｃ、非共焦点画像Ｄｎｒの例を図６（ｃ）及び（ｄ）に示す。共焦点画像Ｄｃでは背景の神経線維層からの反射が強く、背景部分のノイズにより位置合わせが難しくなりやすい。また、Ｒチャンネル（Ｌチャンネル）の非共焦点画像Ｄｎｒ（Ｄｎｌ）では、右側（左側）の血管壁のコントラストが高くなる。
【００６５】
一方、非共焦点画像の例はこれに留まらない。例えば非共焦点画像ＤｎｒとＤｎｌとの加算処理画像Ｄｎｒ＋ｌ、差分処理の１種（（Ｌ−Ｒ）／（Ｒ＋Ｌ））を適用したＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓを生成してもよい。Ｄｎｒ＋ｌとＤｎｓの例を各々図６（ｅ）と（ｆ）に示す。以下では、非共焦点画像Ｄｎｋと表記した場合にはいずれの非共焦点画像Ｄｎｋも用いることができる。
【００６６】
＜ステップ５２０：画像生成＞
画像特徴取得部１３１３が広画角画像Ｄｌｎから画像特徴として網膜血管領域及び動静脈交差部を取得する。なお、本実施形態ではＳ５２０において画像特徴を取得するが、画像特徴を取得するのは本ステップに限定されるものではない。例えば、Ｓ５１０において画像取得後直ちに画像特徴を取得する場合や、Ｓ５３０において画像特徴を取得する場合も本発明に含まれる。次に、判定部１３１１が該画像特徴に基づいてどの撮影済み画像を用いて画像生成するか（生成用画像）を判定する。さらに、画像処理法決定部１３１２が該画像特徴に基づいて画像生成法（画像間もしくは画像内演算の種類や生成される画像の階調数・解像度・フレーム数）を決定する。さらに、画像処理部１３０が画像処理法決定部１３１２によって決定された演算内容で、非共焦点データ（ＤｌｎもしくはＤｎ）間の演算を行い、画像を生成して位置合わせ部１３２が画像位置合わせを実行する。表示制御部１３３は生成された共焦点画像及び非共焦点画像を表示する。具体的な画像生成処理についてはＳ９１０、Ｓ９２０、Ｓ９３０、Ｓ９４０で詳述する。
【００６７】
＜ステップ５３０：計測法決定＞
Ｓ５２０で画像特徴取得部１３１３が取得した画像特徴（網膜血管領域及び動静脈交差部）に基づいて、撮影・生成された画像の中から判定部１３１１が計測対象画像（撮影位置・画像種）を判定する。さらに該画像特徴に基づいて画像処理法決定部１３１２が計測対象の画像に対する計測法（画像処理の種類・画像処理範囲・画像処理間隔）を決定する。具体的な計測法決定処理についてはＳ９１１及びＳ９２１で詳述する。
【００６８】
＜ステップ５４０：計測＞
画像処理部１３０がＳ５３０で決定された画像計測法に基づいて計測処理を行い、表示制御部１３３が計測結果を表示する。本実施形態では画像処理部１３０が網膜血管壁の検出及び壁厚計測処理を行い、表示制御部１３３が検出された壁境界や壁厚グラフ、壁厚マップを表示する。具体的な計測処理についてはＳ９１２、Ｓ９２２、Ｓ９３２、Ｓ９４２で詳述する。
【００６９】
次に、図９（ａ）に示すフローチャートを参照しながら、Ｓ５２０で実行される処理の詳細について説明する。
【００７０】
＜ステップ９１０：画像特徴取得＞
画像特徴取得部１３１３は、広画角画像Ｄｌｎから画像特徴として網膜血管領域及び動静脈交差部を検出する。なお、画像特徴を取得する画像は広画角画像に限定されるものではなく、例えば高倍率画像Ｄｎｋから画像特徴を直接取得する場合も本発明に含まれる。網膜血管は線状構造を有しているため、網膜血管領域の検出法として本実施形態では線状構造を強調するフィルタを用いて網膜血管を抽出する。具体的には、広画角画像Ｄｌｎをアーケード血管の半径に相当するサイズσのガウス関数により平滑化した上でヘッセ行列に基づく線強調フィルタを適用し、閾値Ｔａにより二値化することでアーケード血管を抽出する。ただし、網膜血管領域の検出法はこれに限らず、任意の公知の網膜血管抽出手法を用いてよい。
【００７１】
また、動静脈交差部の検出法としては、本実施形態では特開２００１−０７０２４７号公報に示す交差検出フィルタを用いる。具体的には、フィルタ外周部における血管領域数が４以上で、かつフィルタ中心部に血管領域が存在する場合に交差部と判定する。網膜動脈の方がヘモグロビンを多く含む関係で網膜静脈よりも高輝度であるため、検出された交差部のうち、交差している各々の血管領域内の最低輝度値を算出して該最低輝値間の差の絶対値が閾値Ｔ１以上である場合に動静脈交差と判定する。ただし、交差検出法はこれに限らず、任意の公知の交差検出法を用いてよい。なお、血管内腔領域（血液が流れる領域）の輝度分布に関して網膜静脈の方が低い傾向があるため、本発明では共焦点画像及び非共焦点画像における血管内腔領域の最低輝度値がＴｖ未満であれば網膜静脈、Ｔｖ以上であれば網膜動脈と識別するものとする。
【００７２】
なお、本実施形態では画像特徴取得部１３１３が動静脈交差部のような解剖学的特徴を取得する場合について説明したが、本発明はこれに限定されない。例えば、画像特徴として図６（ｋ）の視細胞欠損部Ｄｃ５のような病変候補領域を取得してもよい。視細胞欠損領域の検出法は任意の公知の検出法を用いることができるが、本実施形態では以下の手順で検出する。すなわち、共焦点画像Ｄｃｊをフーリエ変換し、低域通過フィルタを適用して高周波成分の信号値をカットした後に逆フーリエ変換を行って各々閾値Ｔ２未満である領域を視細胞欠損領域として検出する。
【００７３】
＜ステップ９２０：画像生成法決定＞
判定部１３１１は、画像特徴取得部１３１３がＳ９１０で取得した画像特徴に基づき、どの撮影済み画像を用いて画像生成するか（生成用画像）を判定する。さらに、画像処理法決定部１３１２は、該画像特徴に基づき、画像生成法（画像間もしくは画像内演算の種類や生成される画像の階調数・解像度・フレーム数）を決定する。主要な眼疾患の一つである網膜静脈閉塞症において動静脈交差部は病変（網膜静脈の閉塞）の好発部位であることから、本実施形態では動静脈交差部を含む画像を用いて総データ量の大きい画像（多くの種類の画像もしくはデータ量の多い画像）を生成する。具体的には、判定部１３１１が網膜血管領域を含む画像を生成用画像と判定する。画像処理法決定部１３１２は、生成する画像種を（Ｒ＋Ｌ）画像Ｄｎｒ＋ｌと決定する。さらに、動静脈交差部を含む画像に対し１６ｂｉｔで原画像と同じ解像度、フレーム数の動画像及び１６ｂｉｔで原画像と同じ解像度の重ね合わせ画像、動静脈交差部を含まない画像に対して１６ｂｉｔで原画像と同じ解像度の重ね合わせ画像を生成するよう決定する。ただし、これに限らず観察・計測上重要な画像に対してより多種の画像で詳細に観察・計測可能な画像生成法であれば、生成する画像種や画像生成法は任意の生成法を指定してよい。例えば、画像処理法決定部１３１２が生成する画像種を動静脈交差部に対しては（Ｒ＋Ｌ）画像Ｄｎｒ＋ｌ及びＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓ、動静脈交差部を含まない画像に対しては（Ｒ＋Ｌ）画像Ｄｎｒ＋ｌのみ生成するよう決定してもよい。
【００７４】
なお、ステップ９１０において、共焦点画像Ｄｃから、眼部の視細胞等の観察対象の状態の一例である病変領域（病変候補）を画像特徴として取得する場合には、以下の手順で生成用画像を決定する。ここでは、病変領域の一例である視細胞欠損領域の説明を行う。一般に、観察対象の一例である眼部の視細胞は、外節から欠損し始め、次に内節も欠損して最終的に死滅するとされており、非特許文献２によると共焦点画像Ｄｃｊは、視細胞外節の欠損の有無、非共焦点画像Ｄｎｋは視細胞内節の欠損の有無を観察できるとされている。従って共焦点画像における視細胞欠損領域（少なくとも視細胞外節の欠損を含む画像）と、同じ撮影位置を持つＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像は、視細胞障害の程度を観察・解析する上で重要な画像と考えられる。従って、判定部１３１１が撮影された画像の中から生成用画像（撮影位置・画像種）として全ての撮影位置における共焦点画像と、共焦点画像上で視細胞欠損領域を含む共焦点画像と同じ撮影位置の非共焦点画像Ｄｎと判定する。さらに、画像処理法決定部１３１２は、（視細胞欠損領域の有無に関わらず全ての）共焦点画像Ｄｃｊに対して１６ｂｉｔ、原画像と同じ解像度の重ね合わせ画像を生成するよう決定する。また、生成用Ｒチャンネル画像ＤｎｒｋおよびＬチャンネル画像Ｄｎｌｋを用いてＳｐｌｉｔＤｅｔｅｃｔｏｒ画像Ｄｎｓｋを１６ｂｉｔ、原画像と同じ解像度で重ね合わせ画像として生成するよう決定する。ただし、観察・計測上重要な画像に対してより多種の画像で詳細に観察・計測可能となる画像生成法であれば、生成する画像種や画像生成法は任意の方法を指定してよい。
【００７５】
＜ステップ９３０：画像生成＞
画像処理部１３０が画像処理法決定部１３１２によって決定された演算内容で、非共焦点画像（ＤｌｎもしくはＤｎ）間の演算を行い、画像を生成して位置合わせ部１３２が画像位置合わせを実行する。本実施形態では、画像処理部１３０は（Ｒ＋Ｌ）画像（Ｄｌｎｒ＋ｌ及びＤｎｒ＋ｌ）を生成する。画像処理部１３０による演算はこれに限定されず、任意の演算処理を行ってよい。位置合わせ部１３２は、生成された広画角画像Ｄｌｒ＋ｌ及び非共焦点画像Ｄｎｒ＋ｌにおけるフレーム間位置合わせ、重ね合わせ、さらに広画角画像Ｄｌｒ＋ｌの重ね合わせ画像と高倍率画像Ｄｎ（ｒ＋ｌ）ｋの重ね合わせ画像との貼り合わせ処理を行う。さらに、表示制御部１３３は、生成された画像群をモニタ３０５上に表示する。具体的なフレーム間位置合わせ処理や貼り合わせ処理の手順は第１実施形態の場合と同様であるので省略する。またここで決定したフレーム間位置合わせパラメータを同じ撮影位置を持つ広画角画像Ｄｌｒ、Ｄｌｌ、Ｄｌｃ、高倍率画像Ｄｎｒ、Ｄｎｌ、Ｄｃに対しても適用する。同様に、広画角非共焦点画像Ｄｌｒ＋ｌと非共焦点画像Ｄｎｒ＋ｌに対して決定された画像貼り合わせパラメータ値を同じ撮影位置を持つ共焦点画像（ＤｌｃとＤｃｊ）の貼り合わせや非共焦点画像（ＤｌｒとＤｎｒｋ、ＤｌｌとＤｎｌｋ）の貼り合わせに対しても適用する。
【００７６】
一方、血管壁厚計測では心拍動の影響により血管形状がフレーム間で変化するのを避けるため、以下の手順で重ね合わせ画像を生成する。すなわち、全フレームで加算平均するのではなく、特定の位相区間内に属する脈波信号と対応付けられたフレームのみを選択して重ね合わせする。本実施形態では、脈波の位相区間を５区間に分けて該脈波信号値が極小となる位相を含む区間に属するフレームを選択して重ね合わせる。フレーム選択法はこれに限らず、心拍動の影響を排除する効果を持つ方法であれば、任意の選択法を用いてよい。
【００７７】
＜ステップ９４０：表示＞
表示制御部１３３は生成された画像を表示する。ここでは、Ｓ９３０で生成された画像を、前述した位置合わせパラメータ値を用いて貼り合わせ表示する。
【００７８】
次に、図９（ｂ）に示すフローチャートを参照しながら、Ｓ５３０で実行される処理の詳細について説明する。
【００７９】
＜ステップ９１１：画像特徴取得＞
画像処理法決定部１３１２がＳ９１０で画像特徴取得部１３１３によって取得された画像特徴（網膜血管領域及び動静脈交差部、もしくは視細胞欠損部Ｄｃ５）を参照する。
【００８０】
＜ステップ９２１：計測法決定＞
判定部１３１１がＳ９１１で取得した画像特徴に基づいて計測対象の画像（撮影位置・画像種）を判定する。次に、画像処理法決定部１３１２が計測対象の画像に対する計測方法（画像処理の種類、画像処理範囲、画像処理間隔）を決定する。主要な眼疾患の一つである網膜静脈閉塞症において動静脈交差部は病変（網膜静脈の閉塞）の好発部位であることから、本実施形態では動静脈交差部を含む画像では詳細に計測処理を行う。具体的には、判定部１３１１が計測対象の画像を血管領域を含む画像と判定する。次に、画像処理法決定部１３１２が計測対象の画像に対する計測方法のうち動静脈交差部を含む撮影位置の（Ｒ＋Ｌ）画像Ｄｒ＋ｌに対する画像処理の種類として
・エッジ保存平滑化処理
・血管壁境界検出
・血管壁厚計測
を決定する。画像処理範囲としてエッジ保存平滑化は画像全体、血管壁境界検出及び血管壁厚計測は静脈と交差する動脈枝のみと決定する。また画像処理間隔はいずれの画像処理も１画素と決定する。本実施形態では動静脈交差部を含まない画像では画像処理の種類としてエッジ保存平滑化処理のみを画像全体に対して２画素ごとに適用するものとし、計測処理は行わない。ただし、これに限らず、計測上重要な画像特徴を有する画像に対して多種の画像で、もしくは詳細に計測できる画像処理方法であれば、計測対象画像の判定処理や画像処理方法の決定処理は任意の処理を指定してよい。なお、ステップ９１１で画像特徴として共焦点画像Ｄｃｊ及び非共焦点画像Ｄｎｋから視細胞欠損領域のような病変候補を取得する場合には、以下の手順で各画像の計測法を決定する。
【００８１】
Ｓ９２０の場合と同様に、共焦点画像における視細胞欠損領域と同じ撮影位置を持つＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像は視細胞障害の程度を観察・解析する上で重要な画像と考えられる。そこで判定部１３１１が撮影・生成された画像の中から計測対象画像（撮影位置・画像種）として視細胞欠損領域を含む共焦点画像、及び該共焦点画像と同じ撮影位置のＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像と判定する。すなわち、視細胞欠損領域が含まれない場合の共焦点画像Ｄｃは計測対象外と判定される。さらに該画像特徴に基づいて画像処理法決定部１３１２が計測対象の画像に対する計測法（画像処理の種類・画像処理範囲・画像処理間隔）として
・視細胞位置の検出
・ボロノイ図作成
・視細胞密度の計測
を、いずれの画像とも原画像と同じ範囲、１画素間隔で処理するよう決定する。ただし、本発明は上記処理に限定されるものではなく、計測上重要な画像特徴を有する画像に対して多種の画像で、もしくは詳細に計測できる処理であれば、各画像に対して任意の種類の画像処理を、任意の画像処理範囲、画像処理間隔で行うよう決定してよい。
【００８２】
次に、図９（ｃ）に示すフローチャートを参照しながら、Ｓ５４０で実行される処理の詳細について説明する。
【００８３】
＜ステップ９１２：平滑化＞
画像処理部１３０が、計測対象画像の平滑化処理を行う。任意の公知のエッジ保存平滑化処理を適用可能であるが、本実施形態では動静脈交差部を含む（Ｒ＋Ｌ）画像の重ね合わせ画像の画像全体に対して中央値フィルタを１画素間隔で適用する。一方、それ以外の血管領域を含む画像では中央値フィルタを画像全体に２画素間隔で適用する。該エッジ保存平滑化処理により、血管壁境界のエッジをぼかすことなく画像内のノイズを低減できる。
【００８４】
＜ステップ９２２：壁境界検出＞
画像処理部１３０が、網膜動脈壁の境界位置を検出する。本実施形態では、まずＳ９１２で生成した平滑化画像に対してモルフォロジーフィルタの一種であるＴｏｐ−Ｈａｔフィルタを適用する。Ｔｏｐ−Ｈａｔフィルタを適用することで血管中心部に存在する細長の高輝度領域（血柱反射）を抽出後、該抽出された領域を細線化することにより動脈の中心線を検出する。なお、Ｔｏｐ−Ｈａｔフィルタ処理は、原画像の輝度値からオープニング画像（原画像を収縮処理した後に膨張処理した画像）の輝度値を減算する処理を指している。Ｔｏｐ−Ｈａｔフィルタは原画像を２値化した画像に対して適用してもよいし、多値画像用のＴｏｐ−Ｈａｔフィルタを適用後に２値化してもよい。また、血管中心線の検出法はこれに限らず、任意の公知の手法を用いてよい。
【００８５】
次に、該中心線上に等間隔に設定した制御点を通り、該中心線に垂直な線分上での輝度プロファイルを生成し、該線分の中心から左側及び右側に向かって極大値を２点ずつ検出して血管壁境界とする。なお、血管壁境界位置の検出法はこれに限らず任意の公知の手法を用いてよい。例えば、血管中心線に平行な４本の曲線を生成して２本の曲線を血管内腔領域に、残りの２本の曲線を血管外に可変形状モデルとして配置する。モデルを構成する制御点間の形状や制御点上の輝度値に関して規定された評価関数を最小化することで４本の可変形状モデルが血管壁境界に一致するように変形して血管壁境界位置を検出してもよい。
【００８６】
＜ステップ９３２：壁厚計測＞
画像処理部１３０は、Ｓ９２２で検出した血管壁境界位置に基づいて、血管外径、血管内径、壁厚値と壁厚に基づく指標値としてＷＬＲ（Ｗａｌｌ−ｔｏ−Ｌｕｍｅｎ  Ｒａｔｉｏ）及びＷＣＳＡ（Ｗａｌｌ  Ｃｒｏｓｓ−Ｓｅｃｔｉｏｎａｌ  Ａｒｅａ）を計測対象の動脈枝の走行に沿って算出する。ただし、
ＷＬＲ＝（血管外径−血管内径）／（血管内径）
ＷＣＳＡ＝π（（血管外径）２−（血管内径）２）
とする。
【００８７】
＜ステップ９４２：表示＞
表示制御部１３３が、血管走行に沿って計測した血管外径、血管内径、壁厚及び壁厚指標値をモニタ３０５にグラフ表示する。すなわち、横軸に血管走行方向における位置、縦軸に血管外径、血管内径、左右の壁厚値、壁厚指標値（ＷＬＲ及びＷＣＳＡ）を表示する。本実施形態では各計測値及び指標値は単一のグラフ内に並置表示する。ただし計測値や指標値の表示法はこれに限らず、例えば計測値や指標値の種類を選択して切り替え表示させてもよい。このような壁厚グラフを表示することで、ユーザが血管走行に沿った壁厚の分布を把握しやすくなる。また、表示制御部１３３は、共焦点画像もしくは非共焦点画像、もしくはこれらの貼り合わせ画像上にＳ９２２で血管走行に沿って検出した壁境界、Ｓ９３２で計測した各計測値や壁厚指標値を重畳表示する。各計測値や壁厚指標値はグレースケールでもよいし、任意のカラーバーと対応付けてカラーマップとして表示してもよい。このような血管壁厚の分布をマップとして表示することで、ユーザが眼底内での壁厚値の分布を把握しやすくなる。
【００８８】
なお、本実施形態では決定部１３１が画像上の画像特徴や病変候補領域に基づいて画像間演算及び画像特徴抽出（視細胞検出や血管壁境界検出等）、画像計測に関する方法を決定する場合について説明したが、本発明はこれに限定されない。例えば、決定部１３１内の判定部１３１１が画像上の画像特徴や病変候補領域に基づいてどの画像を記憶部１２０に読み込むかを判定したり、どの画像をモニタ３０５に表示するかを判定する場合も本発明に含まれる。あるいは、画像処理法決定部１３１２が画像上の画像特徴や病変候補領域に基づいて画像の表示法（解像度や階調数、フレーム数（動画像か静止画像かの決定も含む）等）を決定しても良い。
【００８９】
以上述べた構成によれば、情報処理装置１０は共焦点画像と非共焦点画像を略同時に取得するＳＬＯ装置で撮影した画像に対して、以下の処理を行う。すなわち画像上で取得された画像特徴または病変候補領域に基づき、観察または画像解析上重要な部位を含む画像ほど多種または詳細な画像を生成したり、多種の画像に対してまたは詳細に計測する。これにより、観察・解析上重要な眼部画像を効率的に生成もしくは計測できる。
【００９０】
［第３の実施形態：画像の解析結果により画像処理方法を決定］
本実施形態に係る情報処理装置は、画像の属性もしくは画像から取得される画像特徴（病変候補）だけでなく、画像の解析した解析結果、すなわち画質や撮像対象領域を画像中に含む割合も用いて画像の生成法もしくは計測法を決定するよう構成したものである。具体的には同一の網膜血管に対して撮影した共焦点画像Ｄｃｊと２種類の非共焦点画像Ｄｎｋ（開口部を大径化し網膜血管の走行に対して右側及び左側に移動させて撮影した非共焦点画像）を撮影した場合の画像生成法もしくは計測法について説明する。本実施形態に係る情報処理装置１０と接続される機器の構成は第２実施形態の場合と同様である。ただし、本実施形態のＳＬＯ像撮像装置２０における共焦点信号及び非共焦点信号の受信方法は、開口部（ピンホール）の径や位置を可変とし、図３（ｃ）のように共焦点信号として受信したり、図３（ｄ）のように開口部の径を拡大し移動させて非共焦点信号を受信するように構成されている。
【００９１】
次に、本実施形態に係る情報処理装置１０の機能ブロックを図１０に示す。決定部１３１に適合度算出部１３１４を備える点が第２実施形態の場合と異なっている。また、本実施形態での画像処理フローは図５と同様であり、Ｓ５１０、Ｓ５２０、Ｓ５３０以外は実施形態２の場合と同様である。そこで、本実施形態ではＳ５１０、Ｓ５２０、Ｓ５３０のみ説明する。
【００９２】
＜ステップ５１０：画像取得＞
データ取得部１１０は、ＳＬＯ像撮像装置２０及び時相データ取得装置５０に対して実施形態２と同じ撮影位置で広画角画像Ｄｃｌ、Ｄｎｌ、共焦点画像Ｄｃｊ及び２種類の非共焦点画像（Ｄｎｒ、Ｄｎｌ）、対応する属性データ及び固視標位置Ｆｌ、Ｆｃｎ、時相データの取得を要求する。属性データとして本実施形態では画像の取得日時、取得位置、フォーカス位置、画像種（共焦点／Ｒチャンネル／Ｌチャンネル／任意の画像種間演算）、階調数、画角、解像度、フレーム数を取得する。ＳＬＯ像撮像装置２０や時相データ取得装置５０は該取得要求に応じて広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊや非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、対応する属性データ及び固視標位置Ｆｌ、Ｆｃｎ、時相データＳｊを取得し送信する。データ取得部１１０はＳＬＯ像撮像装置２０及び時相データ取得装置５０からＬＡＮ３０を介して当該広画角画像Ｄｌｃ、Ｄｌｒ、Ｄｌｌ、共焦点画像Ｄｃｊ、非共焦点画像Ｄｎｒｋ、Ｄｎｌｋ、及び属性データ、固視標位置Ｆｌ、Ｆｃｎ、時相データＳｊを受信し、記憶部１２０に格納する。以下では、２種類の非共焦点画像のうち大きな開口部（ピンホール）径で開口部の位置を網膜血管の走行に対して右側に移動して取得された画像をＤｎｒ、網膜血管の走行に対して左側に移動して取得された画像をＤｎｌと表記する。
【００９３】
＜ステップ５２０：画像生成＞
画像特徴取得部１３１３が広画角画像Ｄｌｎから画像特徴として網膜血管領域及び動静脈交差部を取得する。さらに適合度算出部１３１４が、取得された画像の画質や、撮影対象領域に占める実際撮影された領域の割合に基づいて適合度を算出した上で、判定部１３１１及び画像処理法決定部１３１２が該画像特徴及び適合度に基づいて画像の生成法を決定する。画像処理部１３０が画像処理法決定部１３１２の決定に基づいて画像を生成する。さらに、位置合わせ部１３２が画像位置合わせを行い、表示制御部１３３が共焦点画像及び非共焦点画像を表示する。具体的な画像生成処理についてはＳ１１１０〜Ｓ１１５０で詳述する。なお、本ステップにおいて画像特徴取得部１３１３が画像特徴を取得するのではなく属性データ取得部１１３が画像の属性データを取得してもよい。
【００９４】
＜ステップ５３０：計測法決定＞
Ｓ５２０で取得された画像の画像特徴（もしくは属性データ）と適合度に基づいて画像処理法決定部１３１２が計測法を決定する。具体的な計測法決定処理についてはＳ１１１１、Ｓ１１２１、Ｓ１１３１で詳述する。
【００９５】
次に、図１１（ａ）に示すフローチャートを参照しながら、Ｓ５２０で実行される処理の詳細について説明する。
【００９６】
＜ステップ１１１０：属性情報、画像特徴を取得＞
画像特徴取得部１３１３が広画角画像Ｄｌｎから画像特徴として網膜血管領域及び動静脈交差部を取得する。網膜血管領域及び動静脈交差部の取得法については第２実施形態の場合と同様であるので説明は省略する。なお、画像特徴取得部１３１３が第２実施形態のステップ９１０のように、画像特徴として共焦点画像Ｄｃｊから視細胞欠損領域のような病変候補を取得する場合も本発明に含まれる。具体的な病変候補の取得方法は第２実施形態の場合と同様であるので説明は省略する。また、本ステップにおいて画像特徴取得部１３１３が画像特徴を取得するのではなく属性データ取得部１１３が属性データを取得してもよい。本実施形態では、属性データとして画像の取得日時、取得位置、フォーカス位置、画像種（共焦点／Ｒチャンネル／Ｌチャンネル／任意の画像種間演算）、階調数、画角、解像度、フレーム数を取得する。
【００９７】
＜ステップ１１２０：画像の適合度を算出＞
適合度算出部１３１４が各画像の画質や撮影対象領域に対して実際撮影された領域の割合に基づいて適合度を算出する。画質として、本実施形態ではＳ／Ｎ比を算出する。画質に関する指標はこれに限らず、任意の公知の指標を用いてよい。例えばＣＮＲ（Ｃｏｎｔｒａｓｔ−Ｎｏｉｓｅ  Ｒａｔｉｏ）を算出してもよい。また、本実施形態では撮影対象領域が十分撮影されたかどうかを示す値として（全フレームで撮影された領域の面積）／（撮影対象領域の面積）を算出する。本実施形態では、適合度としてω１・Ｉｑ＋ω２・Ｉｃとし、ＩｑはＳ／Ｎ比が閾値Ｔ３以上であれば１、Ｓ／Ｎ比が閾値Ｔ３未満であれば０とする。Ｉｃは（全フレームで撮影された領域の面積）／（撮影対象領域の面積）とする。ω１とω２は重みづけパラメータで０〜１までの任意の値を指定でき、本実施形態では両方とも０．５とする。
【００９８】
＜ステップ１１３０：画像生成法を決定＞
判定部１３１１は、画像特徴取得部１３１３がＳ１１１０で取得した画像特徴と適合度算出部１３１４がＳ１１２０で算出した適合度に基づいてどの撮影済み画像を用いて画像生成するか（生成用画像）を判定する。さらに、画像処理法決定部１３１２は、該画像特徴及び適合度に基づき、画像生成法（画像間演算の種類や生成される画像の階調数・解像度・フレーム数）を決定する。本実施形態では、判定部１３１１が閾値Ｔ４以上の適合度を持つ網膜血管領域を含むＲチャンネル画像Ｄｎｒ及びＬチャンネル画像Ｄｎｌを生成用対象と判定する。画像処理法決定部１３１２が生成用画像のうち動静脈交差部を含む画像Ｄｎｒ、Ｄｎｌに対し（Ｒ＋Ｌ）画像Ｄｎｒ＋ｌ画像の１６ｂｉｔの動画像を原画像と同じ解像度・フレーム数で、重ね合わせ画像を１６ｂｉｔかつ原画像と同じ解像度で生成するよう決定する。一方、動静脈交差部を含まない画像Ｄｎｒ、Ｄｎｌに対し（Ｒ＋Ｌ）画像Ｄｎｒ＋ｌの８ｂｉｔの重ね合わせ画像を原画像と同じ解像度として生成するよう決定する。
【００９９】
なお、画像特徴取得部１３１３が第２実施形態のステップ９１０のように、画像特徴として視細胞欠損領域を取得する場合には以下のような処理を行う。すなわち、判定部１３１１が、全ての共焦点画像と、該視細胞欠損領域を含む共焦点画像Ｄｃｊと同じ撮影位置の非共焦点画像Ｄｎｋを生成用画像と判定する。さらに、画像処理法決定部１３１２は、生成用画像に含まれる共焦点画像を用いて１６ｂｉｔ、原画像と同じ解像度の重ね合わせ画像として生成するよう決定する。また生成用画像に含まれるＲチャンネル画像およびＬチャンネル画像を用いてＳｐｌｉｔＤｅｔｅｃｔｏｒ画像を１６ｂｉｔ、原画像と同じ解像度で重ね合わせ画像として生成するよう決定する。なおこれに限らず、観察・計測上重要な画像特徴を有する画像に対してより多種の画像で、もしくは詳細に観察・計測可能にする処理であれば、生成する画像種や画像生成法は任意に指定できる。
【０１００】
＜ステップ１１４０：画像生成＞
画像処理部１３０は、Ｓ１１３０で判定部１３１１が判定した生成用画像を用いて、画像処理法決定部１３１２が決定した演算内容で非共焦点画像（ＤｌｎもしくはＤｎ）間の演算を行うことにより画像を生成する。さらに、位置合わせ部１３２が画像位置合わせを実行する。本ステップで画像処理部１３０が行う具体的な画像生成の手順は、適合度に基づいて判定される生成用画像（もしくは決定される画像生成法）が異なる点を除いては実施形態２の場合と同様であるので、詳細な説明は省略する。
【０１０１】
次に、図１１（ｂ）に示すフローチャートを参照しながら、Ｓ５３０で実行される処理の詳細について説明する。
【０１０２】
＜ステップ１１１１：属性情報、画像特徴を取得＞
画像処理部１３０は、Ｓ１１１０で属性データ取得部１１３によって取得された属性データもしくは画像特徴取得部１３１３によって取得された画像特徴を参照する。
【０１０３】
＜ステップ１１２１：画像の適合度を算出＞
画像処理部１３０は、Ｓ１１２０で適合度算出部１３１４によって算出された適合度を参照する。
【０１０４】
＜ステップ１１３１：計測法を決定＞
判定部１３１１がＳ１１１１で参照された画像特徴に基づいて計測対象の画像（撮影位置・画像種）を判定する。次に、画像処理法決定部１３１２が計測対象の画像に対する計測方法（画像処理の種類、画像処理範囲、画像処理間隔）を決定する。本実施形態では、画像生成法決定処理（Ｓ１１３０）で適合度に基づき生成用画像の数が絞り込まれている（閾値Ｔ４以上の適合度を持つＤｎｒ及びＤｎｌが生成用画像と判定されている）ため、本ステップでは適合度に基づいて計測対象をさらに絞り込むことはしない。従って、閾値Ｔ４以上の適合度を持つ動静脈交差部を含む（Ｒ＋Ｌ）画像Ｄｎｒ＋ｌに対して実行する画像処理として
・平滑化処理
・血管壁境界検出
・血管壁厚計測
を決定する。また画像処理範囲として平滑化は画像全体、血管壁境界検出及び血管壁厚計測は静脈と交差する動脈枝のみと決定する。また画像処理間隔はいずれの画像処理も１画素単位と決定する。なお、Ｓ１１３０の画像生成法決定の際に適合度に基づく生成用画像の絞り込みを行わず、本ステップにて適合度に基づいて（閾値Ｔ４以上の適合度を持つ画像であるという条件もつけて）計測対象画像を絞り込んでもよい。また、Ｓ１１３０の画像生成法決定処理と本ステップとで異なる適合度の条件を設定して、両者を満たす画像に対して計測するよう構成してもよい。
【０１０５】
なお、本実施形態では適合度算出部１３１４が画質や撮像対象領域を含む割合に基づいて適合度を算出したが、適合度の算出法はこれに限定されず、撮影された画像の座標や画素値に基づく算出法であれば任意の算出法を用いて良い。例えば、撮像された画像の輝度特性、すなわち輝度値や該輝度値に関する統計値に基づいて決定してもよい。具体的には、撮像された画像の平均輝度値を算出して該平均輝度値に重みづけした値を適合度として算出してもよい。あるいは、撮像された画像のコントラスト（（最大輝度値−最小輝度値）／（最大輝度値＋最小輝度値））を適合度として算出してもよい。
【０１０６】
なお、上述の実施形態では決定部１３１が画像属性もしくは画像特徴と画像の取得結果（画質等）に基づいて画像間演算及び画像特徴抽出（視細胞検出や血管壁境界検出等）、画像計測に関する方法を決定する場合について説明したが、本発明はこれに限定されない。例えば、決定部１３１内の判定部１３１１が画像属性もしくは画像特徴と画像の取得結果（画質等）に基づいてどの画像を記憶部１２０に読み込むかを判定したり、どの画像をモニタ３０５に表示するかを判定する場合も本発明に含まれる。あるいは、画像処理法決定部１３１２が画像属性もしくは画像特徴と画像の取得結果（画質等）に基づいて画像の表示法（解像度や階調数、フレーム数（動画像か静止画像かの決定も含む）等）を決定しても良い。
【０１０７】
以上述べた構成によれば、情報処理装置１０は、画像の属性もしくは画像から取得される画像特徴（病変候補）だけでなく、画像の取得結果、すなわち画質や撮像対象領域を含む割合も用いて画像の生成法及び計測法を決定する。これにより、観察・解析上重要な眼部画像を効率的に生成または計測できる。
【０１０８】
［第４の実施形態：検査日時毎の処理結果に基づいて画像処理方法を決定］
本実施形態に係る情報処理装置は、異なる検査日時に取得された画像に基づき、基準検査日を含む多くの検査日時で生成・計測されている属性を持つ画像ほど生成用画像と判定したり計測対象画像と決定しやすくするよう構成したものである。具体的には、視細胞外節欠損領域を含む共焦点画像及び対応する非共焦点画像が異なる検査日時で取得されている場合に、該異なる検査日時で取得された画像群の属性を取得し、以下の処理を行う。すなわち、異なる検査日時に取得された画像に基づき、基準検査日を含む多くの検査日時で生成・計測されている属性を持つ画像ほど生成用画像と判定したり計測対象画像と決定しやすくする場合について説明する。本実施形態に係る情報処理装置１０と接続される機器の構成は図２（ａ）に示す通りであり、時相データ取得装置が接続されていない点が第３実施形態の場合と異なる。本実施形態に係る情報処理装置１０の機能ブロックの構成についてはデータ取得部１１０に時相データ取得部１１４が含まれておらず、データ取得部１１０が異なる検査日時のデータを取得すること、決定部１３１に画像特徴取得部１３１３が含まれておらず、適合度算出部１３１４が異なる検査日時の画像の属性に基づき過去検査画像との適合度を算出する点が第３実施形態の場合と異なる。
【０１０９】
また、本実施形態での画像処理フローを図５に示す。Ｓ５１０、Ｓ５２０、Ｓ５３０以外は実施形態３の場合と同様である。そこで、本実施形態ではＳ５１０、Ｓ５２０、Ｓ５３０の処理のみ説明する。
【０１１０】
＜ステップ５１０：画像取得＞
データ取得部１１０は、データサーバ４０に対し過去の共焦点画像Ｄｃｊｆ（ｆ＝１，２，．．．，ｅ−１であり、ｆは何回目の検査かを示す自然数）、過去の非共焦点画像Ｄｎｋｆ、固視標位置Ｆｃｎｆの転送を要求する。データサーバ４０は、該要求に対応するデータを情報処理装置１０に転送し、記憶部１２０に保存する。本実施形態では、ｅ＝５とする。また、過去検査の非共焦点画像ＤｎｋｆとしてはＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓｆを取得するものとする。
【０１１１】
次に、データ取得部１１０はＳＬＯ像撮像装置２０に対して最新の検査に対応する広画角画像Ｄｌｃｅ、Ｄｌｎｅ、共焦点画像Ｄｃｊｅおよび非共焦点画像Ｄｎｋｅ、固視標位置Ｆｌｅ、Ｆｃｎｅの取得を要求する。本実施形態では、中心窩に固視標位置Ｆｌｅ、中心窩及び傍中心窩領域に固視標位置Ｆｃｎｅを設定して広画角画像Ｄｌｃｅ、Ｄｌｎｅ、共焦点画像Ｄｃｊｅ，非共焦点画像Ｄｎｋｅを取得する。なお、撮影位置の設定方法はこれに限定されず、任意の位置に設定してよい。ＳＬＯ像撮像装置２０は該取得要求に応じて広画角画像Ｄｌｃｅ、Ｄｌｎｅ、共焦点画像Ｄｃｊｅ、非共焦点画像Ｄｎｋｅ、固視標位置Ｆｌｅ、固視標位置Ｆｃｎｅを取得して送信する。データ取得部１１０はＳＬＯ像撮像装置２０からＬＡＮ３０を介して当該広画角画像Ｄｌｃｅ、Ｄｌｎｅ、共焦点画像Ｄｃｊｅ、非共焦点画像Ｄｎｋｅ及び固視標位置Ｆｌｅ、固視標位置Ｆｃｎｅを受信する。データ取得部１１０は受信した広画角画像Ｄｌｃｅ、Ｄｌｎｅ、共焦点画像Ｄｃｊｅ、非共焦点画像Ｄｎｋｅ及び固視標位置Ｆｌｅ、Ｆｃｎｅを記憶部１２０に格納する。
【０１１２】
＜ステップ５２０：画像生成＞
属性データ取得部１１３が全検査画像の属性データを取得し、適合度算出部１３１４が過去検査画像との適合度を算出した上で、判定部１３１１及び画像処理法決定部１３１２が該適合度に基づいて生成用画像及び画像の生成法を決定する。画像処理部１３０が判定部１３１１及び画像処理法決定部１３１２の決定に基づいて画像を生成する。さらに、位置合わせ部１３２が画像位置合わせを行い、表示制御部１３３が共焦点画像及び非共焦点画像を表示する。具体的な画像生成処理についてはＳ１１１２、Ｓ１１２２、Ｓ１１３２、Ｓ１１４２、Ｓ１１５２で詳述する。
【０１１３】
＜ステップ５３０：計測法決定＞
適合度算出部１３１４が過去検査画像の属性データに基づいて現検査の各画像と過去検査画像との適合度を算出した上で、判定部１３１１及び画像処理法決定部１３１２が該過去検査画像との適合度に基づいて計測対象画像及び計測法を決定する。具体的な計測法決定処理についてはＳ１１１３、Ｓ１１２３、Ｓ１１３３で詳述する。
【０１１４】
次に、図１１（ｃ）に示すフローチャートを参照しながら、Ｓ５２０で実行される処理の詳細について説明する。
【０１１５】
＜ステップ１１１２：全検査画像の属性情報を取得＞
属性データ取得部１１３が過去検査画像及び現検査画像に関する属性データを取得する。本実施形態では、属性データとして各画像の取得日時、取得位置、フォーカス位置、画像種（共焦点／Ｒチャンネル／Ｌチャンネル／任意の画像種間演算）、階調数、画角、解像度、フレーム数を取得する。
【０１１６】
＜ステップ１１２２：検査間の適合度を算出＞
適合度算出部１３１４が過去検査画像の属性データに基づいて各画像の過去検査画像との適合度を算出する。本実施形態では、現検査の各画像の過去検査画像に対する適合度として現検査の各画像に対してω３・Ｉｂ＋ω４・ΣＩｅｎを算出する。ここで、Ｉｂは基準検査（ｂａｓｅｌｉｎｅ）における（取得日時以外の属性に関して）同じ属性を持つ画像の有無を示す値（０または１）、Ｉｅｎは（各検査における（取得日時以外の属性に関して）同じ画像属性で生成された画像の有無を示す値（０または１））／（過去の全検査数）である。ここで、Σは過去の全ての検査にわたる和を表す。またω３とω４は重み付けパラメータで０〜１までの任意の値を指定でき、本実施形態では両方とも０．５とする。
【０１１７】
＜ステップ１１３２：画像生成法を決定＞
Ｓ１１２２で算出した過去検査画像との適合度に基づいて判定部１３１１が生成用画像を判定し、画像処理法決定部１３１２が画像生成法を決定する。本実施形態では、判定部１３１１がＳ１１２２で算出された適合度が閾値Ｔ５以上の画像は共焦点画像Ｄｃｊ及びＳｐｌｉｔ  Ｄｅｔｅｃｔｏｒ画像Ｄｎｓｋを、該閾値Ｔ５未満の画像は共焦点画像Ｄｃｊのみを生成用画像と判定する。また、画像処理法決定部１３１２が前者を１６ｂｉｔの動画像及び重ね合わせ画像として、後者を１６ｂｉｔで原画像の半分の解像度を持つ重ね合わせ画像として生成するよう決定する。なお、算出された適合度に基づく生成用画像判定もしくは画像生成法決定は、ここで説明した手順に限られるものではない。基準検査日を含む多くの検査日時で生成・計測されている属性を持つ画像ほど生成用画像と判定したり計測対象画像と決定しやすくするものであれば、任意の生成用画像判定もしくは画像生成法決定を行ってよい。
【０１１８】
＜ステップ１１４２：画像生成＞
画像処理部１３０は、Ｓ１１３２で画像処理法決定部１３１２が行った決定に基づいて画像を生成する。次に、位置合わせ部１３２は各検査日時の広画角画像Ｄｌｃｆ（ｆ＝１，２，．．．，ｅ）、共焦点画像Ｄｃｊｆに対してフレーム間位置合わせを行う。具体的なフレーム間位置合わせの手順は第１実施形態のＳ５２０と同様であるので、説明を省略する。次に位置合わせ部１３２は広画角画像Ｄｌｃｆ，共焦点画像Ｄｃｊｆを用いて決定した位置合わせパラメータ値を用いて各々広画角画像Ｄｌｎｆ、非共焦点画像Ｄｎｋｆのフレーム間位置合わせを行う。位置合わせ部１３２は、各検査日時の広画角画像Ｄｌｃｆ（ｆ＝１，２，．．．，ｅ）と対応する共焦点画像Ｄｃｊｆとの位置合わせを行い、広画角画像Ｄｌｃｆ上の共焦点画像Ｄｃｊｆの相対位置を求める。ここで、共焦点画像Ｄｌｃｆ間で重なり領域がある場合には、まず該重なり領域に関して画像間類似度を算出し、最も画像間類似度が最大となる位置に共焦点画像Ｄｃｊｆ同士の位置を合わせる。なお、Ｓ５１０において３種類以上の異なる倍率の画像が取得されている場合には、より低倍率な画像から順に位置合わせを行う。画像間類似度や座標変換手法としては任意の公知の手法を用いることができ、本実施形態では画像間類似度として相関係数、座標変換手法としてＡｆｆｉｎｅ変換を用いて位置合わせを行う。本位置合わせ処理により得られた広画角画像Ｄｌｃｆ上の共焦点画像Ｄｃｊｆの相対位置の情報を用いて、共焦点画像Ｄｃｊｆの貼り合わせ画像が生成される。次に位置合わせ部１３２は広画角画像Ｄｌｃｆ上の共焦点画像Ｄｃｊｆの相対位置の情報を用いて、広画角画像Ｄｌｎｆ上の非共焦点画像Ｄｎｋｆの貼り合わせ画像を生成する。
【０１１９】
さらに、基準となる広画角画像と該基準となる広画角画像以外の広画角画像Ｄｌｃｆ、Ｄｌｎｆとの位置合わせを行う。基準となる広画角画像及び共焦点画像、非共焦点画像はＳ５１０で取得した任意の検査日時の画像の中から選べる。本実施形態では最も検査日時の古い画像群（広画角画像Ｄｌｃ１、Ｄｌｎ１、共焦点画像Ｄｃｊ１、非共焦点画像Ｄｎｋ１）を各々基準画像とする。
【０１２０】
また、基準画像Ｄｃｊ１に対する基準画像Ｄｌｃ１の相対位置と、基準画像Ｄｌｃ１に対する他検査画像Ｄｌｃｆの相対位置と、画像Ｄｌｃｆに対する共焦点画像Ｄｃｊｆの相対位置を用いて、基準画像Ｄｃｊ１に対する共焦点画像Ｄｃｊｆの相対位置を求める。なお、共焦点画像Ｄｃｊ１とＤｃｊｆとの位置合わせを直接行ってもよい。位置合わせ手法としては任意の公知の手法を用いることができ、本実施形態ではまず概略の位置合わせとして、Ａｆｆｉｎｅ変換を用いて位置合わせを行う。次に、詳細な位置合わせとして非剛体位置合わせ手法の一つであるＦＦＤ（Ｆｒｅｅ  Ｆｏｒｍ  Ｄｅｆｏｒｍａｔｉｏｎ）法を行いて位置合わせを行う。いずれの位置合わせにおいても、画像間類似度としては相関係数を用いる。もちろんこれに限らず、任意の公知の画像間類似度を用いてよい。次に位置合わせ部１３２は基準画像Ｄｃｊ１に対する共焦点画像Ｄｃｊｆの相対位置の情報を用いて、基準画像Ｄｎｋ１に対する非共焦点画像Ｄｎｋｆの相対位置を求める。
【０１２１】
以上より、基準画像（Ｄｌｃ１、Ｄｌｎ１、Ｄｃｊ１、及びＤｎｋ１）の画素と、基準画像以外の画像（Ｄｌｃｆ、Ｄｌｎｆ、Ｄｃｊｆ及びＤｎｋｆ）との画素が対応づけられる。なお、本発明は画素値の類似度に基づく位置合わせに限定されるものではなく、血管領域を特定した上で、該特定された血管領域を用いて特徴ベースの位置合わせを行ってよい。
【０１２２】
＜ステップ１１５２：表示＞
表示制御部１３３は、これまでに生成された画像群をモニタ３０５上に表示する。ここでは、各重ね合わせ画像を、前述した位置合わせパラメータ値を用いて貼り合わせ表示する。また、指示取得部１４０を経由して指示された撮影位置について、前述したフレーム間位置合わせパラメータ値を用いて重ね合わせ画像と、動画像が生成されている場合にはフレーム間位置合わせ済み動画像を表示する。
【０１２３】
次に、図１１（ｄ）に示すフローチャートを参照しながら、Ｓ５３０で実行される処理の詳細について説明する。
【０１２４】
＜ステップ１１１３：全検査画像の属性情報を取得＞
画像処理部１３０は、Ｓ１１１２で属性データ取得部１１３によって取得された全検査画像の属性データを参照する。
【０１２５】
＜ステップ１１２３：検査間の適合度を算出＞
画像処理部１３０は、Ｓ１１２２で適合度算出部１３１４によって算出された適合度を参照する。
【０１２６】
＜ステップ１１３３：計測法を決定＞
Ｓ１１２３で参照した検査間の適合度に基づいて判定部１３１１が計測対象画像（撮影位置・画像種）を判定し、画像処理法決定部１３１２が計測法（画像処理の種類、画像処理範囲、画像処理間隔）を決定する。本実施形態では、判定部１３１１が閾値Ｔ６以上の適合度を持つ画像（共焦点画像Ｄｃｊ及びＳｐｌｉｔＤｅｔｅｃｔｏｒ画像Ｄｎｓｋの双方の重ね合わせ画像が生成されている撮影位置の画像）を計測対象画像と判定する。さらに、画像処理法決定部１３１２が
・視細胞位置の検出
・ボロノイ図作成
・視細胞密度の計測
を、２種類の画像に対して同じ条件で計測して計測結果を比較する必要があるため、両画像とも原画像と同じ計測範囲、１画素単位で処理するよう決定する。ただし、これに限らず計測上重要な画像に対してより詳細に計測できる処理であれば、各画像に対して任意の画像処理の種類、画像処理範囲、画像処理間隔で計測するよう決定してよい。
【０１２７】
なお、上述の実施形態では決定部１３１が多くの検査日時で生成・計測されている属性を持つ度合いに基づいて画像間演算及び画像特徴抽出（視細胞検出や血管壁境界検出等）、画像計測に関する方法を決定する場合について説明したが、本発明はこれに限定されない。例えば、決定部１３１内の判定部１３１１が多くの検査日時で生成・計測されている属性を持つ度合いに基づいてどの画像を記憶部１２０に読み込むかを判定したり、どの画像をモニタ３０５に表示するかを判定する場合も本発明に含まれる。あるいは、画像処理法決定部１３１２が多くの検査日時で生成・計測されている属性を持つ度合いに基づいて画像の表示法（解像度や階調数、フレーム数（動画像か静止画像かの決定も含む）等）を決定しても良い。
【０１２８】
以上述べた構成によれば、情報処理装置１０は、異なる検査日時に取得された画像に基づき、基準検査日を含む多くの検査日時で生成・計測されている属性を持つ画像ほど生成用画像と判定したり計測対象画像と決定しやすくする。これにより、異なる検査日時の画像を比較観察する場合に、観察・解析上重要な眼部画像を効率的に生成もしくは計測できる。
【０１２９】
［その他の実施形態］
上述の実施形態ではデータ取得部１１０に共焦点データ取得部１１１と非共焦点データ取得部１１２を両方とも含む場合について説明したが、非共焦点データを２種以上取得する構成であれば、データ取得部１１０に共焦点データ取得部１１２を含まなくてもよい。
【０１３０】
また、上述の実施形態では本発明を情報処理装置として実現したが、本発明の実施形態は情報処理装置のみに限定されない。例えばコンピュータのＣＰＵにより実行されるソフトウェアとして実現しても良い。本ソフトウェアを記憶した記憶媒体も本発明を構成することは言うまでもない。
【図１】
0006602043.tif 000002
【図２】
0006602043.tif 000003
【図３】
0006602043.tif 000004
【図４】
0006602043.tif 000005
【図５】
0006602043.tif 000006
【図６】
0006602043.tif 000007
【図７】
0006602043.tif 000008
【図８】
0006602043.tif 000009
【図９】
0006602043.tif 000010
【図１０】
0006602043.tif 000011
【図１１】
0006602043.tif 000012
【図１２】
0006602043.tif 000013