(57)【要約】【課題】高品質の眼底情報を取得できるようにする。【解決手段】固視標提示部が、連続的に移動する固視標を提示し、眼底画像取得部が、連続的に移動する固視標を被験者が固視する状態で、被験者の被検眼の眼底の画像を取得し、眼底情報取得部が、取得された眼底の画像から、眼底情報を取得する。眼底情報は、例えば、広視野眼底画像、超解像眼底画像、３次元形状、または３次元眼底画像とすることができる。本技術は、眼底画像を提示する眼底情報取得装置に適用することができる。【選択図】図４
2014161439.tif 000002
【特許請求の範囲】
【請求項１】
連続的に移動する固視標を提示する固視標提示部と、
連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得部と、
取得された前記眼底の画像から、眼底情報を取得する眼底情報取得部と
を備える眼底情報取得装置。
【請求項２】
前記眼底画像取得部は、前記眼底の動画像を取得する
請求項１に記載の眼底情報取得装置。
【請求項３】
前記固視標提示部は、前記固視標として点滅する内部固視標を提示する
請求項２に記載の眼底情報取得装置。
【請求項４】
前記眼底情報取得部は、前記固視標が消灯している期間の前記動画像のフレームの画像を対象画像として選別し、選別した前記対象画像から前記眼底情報を取得する
請求項３に記載の眼底情報取得装置。
【請求項５】
連続的に移動する前記固視標を前記被験者が固視する状態で取得される前記被検眼の眼底の画像を提示する眼底画像提示部をさらに備える
請求項４に記載の眼底情報取得装置。
【請求項６】
眼底画像提示部は、前記固視標が消灯している期間においては、前記動画像のフレームの前記眼底画像を提示し、前記固視標が点灯している期間においては、前記固視標が消灯している期間の前記動画像のフレームの前記眼底画像を提示する
請求項５に記載の眼底情報取得装置。
【請求項７】
前記眼底情報取得部は、広視野の前記眼底画像を取得する
請求項６に記載の眼底情報取得装置。
【請求項８】
前記眼底情報取得部は、超解像の前記眼底画像を取得する
請求項６に記載の眼底情報取得装置。
【請求項９】
前記眼底情報取得部は、前記眼底の３次元形状を取得する
請求項６に記載の眼底情報取得装置。
【請求項１０】
前記眼底情報取得部は、３次元の前記眼底画像を取得する
請求項６に記載の眼底情報取得装置。
【請求項１１】
前記眼底画像取得部は、赤外光の前記眼底の動画像と可視光の静止画像を取得し、
前記眼底情報取得部は、前記赤外光の眼底の動画像から前記眼底の３次元形状を取得し、前記可視光の静止画像を位置合わせして前記３次元形状にマッピングし、可視光の３次元の前記眼底画像を取得する
請求項１０に記載の眼底情報取得装置。
【請求項１２】
連続的に移動する固視標を提示する固視標提示ステップと、
連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得ステップと、
取得された前記眼底の画像から、眼底情報を取得する眼底情報取得ステップと
を含む眼底情報取得方法。
【請求項１３】
連続的に移動する固視標を提示する固視標提示ステップと、
連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得ステップと、
取得された前記眼底の画像から、眼底情報を取得する眼底情報取得ステップと
を含む処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は眼底情報取得装置および方法、並びにプログラムに関し、高品質の眼底の情報を取得できるようにした眼底情報取得装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
眼底の診断には、疾病に応じて眼底に関する情報で必須のものがある。また、より詳細な情報があった方が、より診断の精度が向上し、診断の時間短縮に繋がる。
【０００３】
例えば一般的な眼底撮影を行う際に、一度の撮影で得られる画像の視野は広範囲の眼底の観察が必要な診断の際には十分ではない。これを解決するために複数回の撮影により得られた静止画像を繋ぎ合わせ、広視野の眼底画像を取得することが広く行われている。
【０００４】
例えば特許文献１には、このような広視野の画像を得るために、固視標の位置を記憶した順に撮影毎に変更することが提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開2004-254907号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の方法では、撮影範囲に重なりの少ない数枚の画像を繋ぎ合わせることで広視野の画像が取得される。その結果、画像の繋ぎ目が目立ち、得られる画質は必ずしも高いとは言えない。
【０００７】
図１は、従来の広視野眼底画像の例を示す図である。図１の眼底の画像には、視神経乳頭部１、黄斑部２、および血管３が現れている。この画像は、１０回の静止画撮影により得られた１０個の静止画像を繋ぎ合わせたものである。繋ぎ合わされた部分は、境界４として現れている。境界４で囲まれている範囲の画像が１フレームの画像である。１枚のフレームの所定の範囲の画像５−ｉ（ｉ＝１乃至１０）が隣接する他の１枚のフレームの所定の範囲の画像５−ｊ（j＝１乃至１０≠ｉ）と繋ぎ合わされている。つまり、各フレームの画像は、基本的に重ならないように繋ぎ合わされている。
【０００８】
図２は、画像の繋ぎ合わせを模式的に説明する図である。この図２を参照して画像の繋ぎ合わせについて説明する。図２に示されるように、１枚のフレームの所定の範囲の画像５−１は、他の１枚のフレームの所定の範囲の画像５−２と、図中の点線で示す境界の部分までが用いられるように繋ぎ合わされる。同様に、１枚のフレームの所定の範囲の画像５−２は、他の１枚のフレームの所定の範囲の画像５−１および他の１枚のフレームの所定の範囲の画像５−３と、図中の点線で示す境界の部分までが用いられるように繋ぎ合わされる。１枚のフレームの所定の範囲の画像５−３についても同様に繋ぎ合わされる。この境界部分での画素値の変化のために繋ぎ目が図１の境界４として目立つことになる。
【０００９】
図３は、固視標１１の配置を説明する図である。図３の例においては、離散的に配置されている３個のLED（Light Emitting Diode）のそれぞれにより構成される固視標１１−１乃至１１−３が異なるタイミングで個別に点灯される。例えば被験者が固視標１１−１を固視しているとき撮像された静止画像から画像５−１が取得される。同様に、被験者が固視標１１−２を固視しているとき撮像された静止画像から画像５−２が取得され、被験者が固視標１１−３を固視しているとき撮像された静止画像から画像５−３が取得される。
【００１０】
このように、離散的に配置された固視標１１−１乃至１１−３を被験者に固視させることで取得された画像５−１乃至５−３の端部を相互に繋ぎ合わせても、図１に示されるように、繋ぎ合わせて得られた画像はその境界４の近傍で画素値が変化するため、画像が見難くなっている。
【００１１】
本技術はこのような状況に鑑みてなされたものであり、高品質の眼底の情報を取得できるようにするものである。
【課題を解決するための手段】
【００１２】
本技術の側面は、連続的に移動する固視標を提示する固視標提示部と、連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得部と、取得された前記眼底の画像から、眼底情報を取得する眼底情報取得部とを備える眼底情報取得装置である。
【００１３】
前記眼底画像取得部は、前記眼底の動画像を取得することができる。
【００１４】
前記固視標提示部は、前記固視標として点滅する内部固視標を提示することができる。
【００１５】
前記眼底情報取得部は、前記固視標が消灯している期間の前記動画像のフレームの画像を対象画像として選別し、選別した前記対象画像から前記眼底情報を取得することができる。
【００１６】
連続的に移動する前記固視標を前記被験者が固視する状態で取得される前記被検眼の眼底の画像を提示する眼底画像提示部をさらに備えることができる。
【００１７】
眼底画像提示部は、前記固視標が消灯している期間においては、前記動画像のフレームの前記眼底画像を提示し、前記固視標が点灯している期間においては、前記固視標が消灯している期間の前記動画像のフレームの前記眼底画像を提示することができる。
【００１８】
前記眼底情報取得部は、広視野の前記眼底画像を取得することができる。
【００１９】
前記眼底情報取得部は、超解像の前記眼底画像を取得することができる。
【００２０】
前記眼底情報取得部は、前記眼底の３次元形状を取得することができる。
【００２１】
前記眼底情報取得部は、３次元の前記眼底画像を取得することができる。
【００２２】
前記眼底画像取得部は、赤外光の前記眼底の動画像と可視光の静止画像を取得し、前記眼底情報取得部は、前記赤外光の眼底の動画像から前記眼底の３次元形状を取得し、前記可視光の静止画像を位置合わせして前記３次元形状にマッピングし、可視光の３次元の前記眼底画像を取得することができる。
【００２３】
本技術の側面においては、固視標提示部が、連続的に移動する固視標を提示し、眼底画像取得部が、連続的に移動する固視標を被験者が固視する状態で、被験者の被検眼の眼底の画像を取得し、眼底情報取得部が、取得された眼底の画像から、眼底情報を取得する。
【００２４】
本技術の側面の方法およびプログラムは、上述した本技術の側面の眼底情報取得装置に対応する方法およびプログラムである。
【発明の効果】
【００２５】
以上のように、本技術の側面によれば、特に高品質の眼底の情報を取得することができる。
【図面の簡単な説明】
【００２６】
【図１】従来の広視野眼底画像の例を示す図である。
【図２】画像の合成を模式的に説明する図である。
【図３】固視標の配置を説明する図である。
【図４】本技術の眼底情報取得装置の構成例を示すブロック図である。
【図５】画像情報取得部の機能的構成例を示すブロック図である。
【図６】固視標提示部の構成例を示す図である。
【図７】フレーム選別を説明するタイミングチャートである。
【図８】眼底情報取得装置の外観の構成例を示す図である。
【図９】固視標の動きを説明する図である。
【図１０】眼底画像の変化を説明する図である。
【図１１】広視野眼底画像取得処理を説明するフローチャートである。
【図１２】広視野眼底画像の例を示す図である。
【図１３】画像の合成を説明する図である。
【図１４】画像の合成を模式的に説明する図である。
【図１５】固視標の動きを説明する図である。
【図１６】超解像眼底画像取得処理を説明するフローチャートである。
【図１７】眼底情報取得部の機能的構成例を示すブロック図である。
【図１８】超解像眼底画像生成処理を説明するフローチャートである。
【図１９】固視標の動きを説明する図である。
【図２０】眼底の３次元形状取得処理を説明するフローチャートである。
【図２１】眼底の３次元形状の断面の例を示す図である。
【図２２】３次元眼底画像取得処理を説明するフローチャートである。
【図２３】３次元眼底画像の例を示す図である。
【図２４】眼底情報取得装置の構成例を示すブロック図である。
【図２５】撮影画像提示処理を説明するフローチャートである。
【図２６】赤外光による動画像と可視光による静止画像を撮像する撮像素子を説明する図である。
【図２７】赤外光による動画像と可視光による静止画像の撮像を説明する図である。
【図２８】３次元眼底画像取得処理を説明するフローチャートである。
【発明を実施するための形態】
【００２７】
以下、本技術を実施するための形態（以下、実施の形態と称する）について説明する。なお、説明は以下の順序で行う。
＜第１の実施の形態：広視野眼底画像の取得＞
１．眼底情報取得装置の構成
２．固視標提示部
３．広視野眼底画像取得処理
＜第２の実施の形態：超解像眼底画像の取得＞
４. 超解像の眼底画像
５．眼底情報取得部の他の構成
６．超解像処理部の構成
７．眼底画像生成処理
＜第３の実施の形態：３次元形状の取得＞
８．３次元形状の取得
＜第４の実施の形態：３次元眼底画像の取得＞
９．３次元眼底画像
＜第５の実施の形態：眼底画像提示部を有する構成＞
１０．眼底情報取得装置の他の構成
＜第６の実施の形態：赤外光による動画像の取得＞
１１．赤外光による動画像と可視光による静止画像の取得
１２．本技術のプログラムへの適用
１３．その他の構成
【００２８】
＜第１の実施の形態：広視野眼底画像の取得＞
［眼底情報取得装置の構成］
【００２９】
図４は、本技術の眼底情報取得装置２１の構成例を示すブロック図である。この眼底情報取得装置２１は、眼底画像取得部３１、制御部３２、眼底情報取得部３３、固視標制御部３４、固視標提示部３５、および記憶部３６を有している。
【００３０】
眼底画像取得部３１は、例えばCCD(Charge Coupled Device)イメージセンサ、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等を有し、人の被検眼４１の眼底を撮像する。制御部３２は、例えばCPU(Central Processing Unit)などにより構成され、眼底画像取得部３１、眼底情報取得部３３、固視標制御部３４等の動作を制御する。眼底情報取得部３３は、例えばDSP(Digital Signal Processor)等により構成され、眼底情報を取得し、図示せぬ記録部等に出力する。
【００３１】
固視標制御部３４は制御部３２による制御の下、固視標提示部３５の動作を制御する。固視標提示部３５は、被験者に固視標を提示する。固視標は、被験眼２１の視点を導き、それにより眼底における所望の位置の画像取得を実現するためのものである。記憶部３６は、制御部３２、眼底情報取得部３３のプログラム、データ等を記憶する。
【００３２】
図５は、眼底情報取得部３３の機能的構成例を示すブロック図である。この眼底情報取得部３３は、選別部８１、取得部８２、生成部８３、および出力部８４を有している。
【００３３】
選別部８１は、眼底画像取得部３１から供給された画像から、処理対象フレームの画像を取得する。取得部８２は、処理対象フレームの画像における眼底の位置関係から、眼底の３次元形状等を取得する。生成部８３は、広視野眼底画像、３次元形状、超解像眼底画像、３次元眼底画像等の眼底情報を生成する。出力部８４は、生成された眼底情報を出力する。
【００３４】
［固視標提示部］
【００３５】
本技術では、固視標提示部３５として、固視標を一定範囲内の任意の位置に、連続的にその位置を変化させつつ提示可能なものが用いられる。例えば液晶ディスプレイ、有機EL (Electro Luminescence)ディスプレイ等のディスプレイ上の輝点を固視標として提示することができる。
【００３６】
本技術においては、固視標として、内部固視標と外部固視標のいずれをも用いることができる。図６は、内部固視標を提示する固視標提示部３５Ａの構成例を示す図である。なお、正確には、図６の構成要素の一部は、眼底画像取得部３１を構成する。
【００３７】
図６の例では光学系全体が、照明光学系、撮影光学系、および固視標光学系により構成されている。
【００３８】
照明光学系は、光源６２、リング絞り６３、レンズ６４、孔あきミラー５２、対物レンズ５１から構成される。光源６２は、可視光を発生する可視光光源６２−１と、赤外光を発生する赤外光光源６２−２により構成されており、必要に応じて、その一方が使用される。撮影光学系は、対物レンズ５１、孔あきミラー５２、フォーカスレンズ５３、撮影レンズ５４、ハーフミラー５５、フィールドレンズ５６、視野絞り５７、結像レンズ５８、および撮像素子５９により構成される。固視標光学系は、固視標提示素子６１、結像レンズ６０、ハーフミラー５５、撮影レンズ５４、フォーカスレンズ５３、孔あきミラー５２、対物レンズ５１から構成される。
【００３９】
固視標提示素子６１は、例えば液晶ディスプレイ、有機ELディスプレイ等の、輝点を連続的に移動表示することができるディスプレイにより構成される。固視標提示素子６１の所定の位置に表示された固視標としての輝点の画像は、結像レンズ６０、ハーフミラー５５、撮影レンズ５４、フォーカスレンズ５３、孔あきミラー５２、および対物レンズ５１を介して被検眼４１に供給され、被検眼４１により観察される。
【００４０】
可視光光源６２−１から出射された可視光または赤外光光源６２−２から出射された赤外光は、リング絞り６３、レンズ６４を介して孔あきミラー５２に入射し、そこで反射された光は対物レンズ５１を介して被検眼４１を照明する。
【００４１】
被検眼４１からの反射光は、対物レンズ５１、穴あきミラー５２の孔、フォーカスレンズ５３、撮影レンズ５４、ハーフミラー５５、フィールドレンズ５６、視野絞り５７、結像レンズ５８を介して撮像素子５９に入射する。
【００４２】
固視標提示素子６１上の固視標（後述する図９の固視標１５１）の表示位置を適宜変化させると、被験者は固視標を固視するので、被験者の被検眼４１の位置を所望の位置に変化させることができる。これにより、撮像素子５９により被検眼４１の任意の位置の眼底画像を得ることができる。
【００４３】
図７は、フレーム選別を説明するタイミングチャートである。固視標が被検眼４１に映った状態の眼底が撮影されると、撮影された眼底画像が固視標の光の反射により劣化することになる。そこで、図７に示されるように、固視標を点滅させることができる。図７の例では、固視標は、動画像の連続するフレームの画像のうち、番号０乃至５の６フレーム、および番号１２乃至１７の６フレームのタイミングでは点灯され、被検眼４１を所定の位置に案内する。しかし、固視標は、番号６乃至１１の６フレームのタイミングでは消灯される。つまり固視標は、６フレーム単位で繰り返し点滅される。
【００４４】
固視標が消灯しているタイミングのフレーム（図７の例では、番号６乃至１１の６フレーム）の画像のみが眼底画像として取得される。つまり、固視標が点灯しているタイミングのフレーム（図７の例では、番号０乃至５の６フレーム、および番号１２乃至１７の６フレーム）の画像は眼底画像として利用されない。
【００４５】
例えばNTSC（National Television System Committee）方式の画像の場合、１秒間のフレーム数は３０枚である。固視標をフレームに同期して点滅させたとすると、固視標は、１秒間のうち、６×３／３０秒間だけ点灯され、６×２／３０秒間だけ消灯される。または固視標は、１秒間のうち、６×２／３０秒間だけ点灯され、６×３／３０秒間だけ消灯される。
【００４６】
前者の場合、固視標は、１秒間のうち、３回点灯され、２回消灯される。１秒間に撮影して得られる画像のフレーム数は１２枚である。後者の場合、固視標は、１秒間のうち、２回点灯され、３回消灯される。１秒間に撮影して得られる画像のフレーム数は１８枚である。
【００４７】
さらに点滅周期を５フレームとすれば、固視標は、１秒間のうち、５×３／３０秒間だけ点灯され、５×３／３０秒間だけ消灯される。すなわち、固視標は、１秒間のうち、３回点灯され、３回消灯される。１秒間に撮影して得られる画像のフレーム数は１５枚である。
【００４８】
このように１秒間における消灯時間が短いので、被験者には、固視標は連続して移動しているものと認識され、消灯期間中に被検眼４１の案内が中断され、被検眼４１が案内前の元の位置に戻ってしまうようなことが防止される。その結果、消灯期間中に、前後の点灯期間における位置を補間するような連続した位置の被検眼４１の眼底を撮影することができる。
【００４９】
また、図３に示されるように、被験者に離散的に配置された固視標１１−１乃至１１−３を固視させる場合、撮影も離散的に行われることになる。すなわち、例えば固視標１１−１を点灯させ、被験者に固視標１１−１を固視させ、固視位置が安定した状態になったとき、眼底の静止画像の撮影が行なわれる。固視標１１−１に基づく撮影が完了すると、次に、固視標１１−１に代えて固視標１１−２が点灯され、被験者に新たな固視標１１−２を固視させ、固視位置が安定した状態になったとき、眼底の静止画像の撮影が行われる。このように、固視標１１を１つ点灯させる毎に撮影を行うといった操作が断続的に繰り返される。その結果、被験者が固視標１１を固視する動作もその都度中断され、被験者は新たな固視標１１が点灯される毎に、一旦中断した固視を再開しなければならず、被験者に与える負荷が大きかった。
【００５０】
これに対して本技術では、固視標１５１が連続的に提示２７１されるので、被験者は撮影のタイミングを意識することなく、固視標１５１を連続的に追跡していればよい。その結果、図３に示されるように、固視標１１を離散的に配置する場合（すなわち、断続的に提示する場合）に比べて、被験者に与える負荷が小さくなる。
【００５１】
なお、後述する図１１のステップＳ１等における処理対象フレームの選別処理においては、この消灯期間中のフレームの画像を選別することができる。選別するフレーム数は、各消灯期間中の全てのフレームとしてもよいし、それ以下の任意の枚数としてもよい。
【００５２】
図８は、外部固視標を提示する固視標提示部３５Ｂを有する眼底情報取得装置２１の外観の構成例を示す図である。この眼底情報取得装置２１においては、ベース１０１の上に架台１０２が配置され、さらに架台１０２の上に本体１０３が配置されている。本体１０３の前面に対向するように、支柱１０６が配置されている。支柱１０６には、額当て１０５と顎受け１０４が設けられ、被験者がその額と顎を乗せたとき、本体１０３の鏡筒１０７に収容されている撮影用のレンズを介して被験者の被検眼を撮影できるようになっている。本体１０３には、図６の内部固視標を提示する固視標提示部３５Ａと同様に、照明光学系と撮影光学系が内蔵されている。
【００５３】
支柱１０６にはまた、固視標提示部３５Ｂが取り付けられている。固視標提示部３５Ｂは、鏡筒１０７の左側と右側のいずれにも配置できるようになされている。被験者は固視標提示部３５Ｂが有する固視標提示素子としてのディスプレイ（図示せず）に表示された固視標を撮影対象となっていない方の目で固視する。人の左右の目は、同期して動くので、固視標を固視する目が固視標の動きに伴って移動すると、他方の撮影対象の目（すなわち被検眼４１）も同じ方向に移動する。これにより、被検眼４１を所定の位置に移動、配置させることができる。
【００５４】
図８に示されるように外部固視標が使用される場合、被検眼４１に固視標が映ることはないので、図７に示されるようなフレームを選択する処理は不要となる。
【００５５】
なお、固視標提示部３５Ｂが有する固視標提示素子も、図６の固視標提示素子６１と同様に、液晶ディスプレイ、有機ELディスプレイ等により構成される。もちろん固視標提示部３５Ｂが有する固視標提示素子や図６の固視標提示素子６１は、固視標の位置を連続的に変化させることができる提示素子であればよい。そこで、ディスプレイを用いるのではなく、固視標として機能するLED(Light- Emitting Diode)のような発光体を機械的に連続的に移動する機構を設けるようにしてもよい。
【００５６】
図４に示す眼底情報取得装置２１の全体の動作につき説明すると次のようになる。固視標制御部３４は固視標提示部３５を制御し、固視標を例えば図９に示されるように、所定の軌跡に沿って連続的に移動させる。眼底画像取得部３１は固視標により誘導される被検眼４１の眼底を動画像で撮影する。
【００５７】
図９は、広視野眼底画像を取得する場合の固視標の動きを説明する図であり、図１０は、眼底画像の変化を説明する図である。図９Ａは、固視標１５１を螺旋状の奇跡１５２に沿って内側から外側に向かって連続的に移動させる例を示している。図９Ｂは、固視標１５１を、正弦波状の奇跡１５３に沿って連続的に移動させる例を示している。
【００５８】
例えば図９Ａに示されるように、固視標１５１を内側から外側に螺旋状の軌跡１５２に沿って連続的に移動させた場合、撮影される眼底画像２００は図１０に示されるように変化する。図１０には、動画像の連続するフレームF１，Ｆ２，Ｆ３，・・・の眼底画像２００が示されている。各フレームF１，Ｆ２，Ｆ３，・・・の眼底画像２００においては、黄斑部２０１と視神経乳頭部２０２の位置が上方向または下方向に順次変化し、徐々に外側に移動している。このような動画像が眼底画像取得部３１により取得され、眼底情報取得部３３に供給される。なお、図１０は原理を表しており、実際には、連続する各フレームにおける黄斑部２０１と視神経乳頭部２０２の位置の変化はもっと少ない。
【００５９】
眼底情報取得部３３は、眼底画像取得部３１で撮影された動画像をもとに、所望の眼底情報を取得し、これを出力する。出力された眼底情報は、記憶部３６に記憶されたり、図示せぬモニタに提示される。制御部３２はこれら一連の動作が連携して行われるように装置全体を制御する。
【００６０】
次に、眼底情報取得部３３が眼底情報として、広視野眼底画像、超解像眼底画像、３次元形状、および３次元眼底画像を取得する処理について以下に順次説明する。
【００６１】
［広視野眼底画像取得処理］
【００６２】
図１１は、眼底情報取得部３３が実行する広視野眼底画像取得処理を説明するフローチャートである。ステップＳ１において選別部８１は、眼底画像取得部３１から入力される動画像から、処理対象フレームを選別する。この処理対象フレームの選別は、必要に応じて実行される。例えば光源として可視光光源６２−１を用いて、内部固視標が提示される場合、上述した図７のタイミングチャートに示されるようにフレームの選別を行うことができる。つまり、連続するフレームの画像の中から、固視標１５１が消灯している期間のフレームの画像が選別される。
【００６３】
図８を参照して説明した外部固視標が用いられる場合には、全てのタイミングのフレームを利用することができるので、選別処理は不要となる。また、図６に示されるように、内部固視標を用いる場合においても、光源６２として赤外光光源６２−２を用い、撮像素子５９として赤外光を受光する素子を使用し、赤外光透過フィルタ（すなわち可視光遮断フィルタ）を撮像素子５９の前に配置すれば、選別処理は不要となる。
【００６４】
次にステップＳ２において、生成部８３は、広視野眼底画像を生成する。すなわち、ステップＳ１の処理で選別された処理対象のフレームの画像を相互に位置合わせし、眼底の同じ部分が複数の画像に含まれる場合にはそれらの画像の各画素を加重加算（例えば平均）することで広視野の眼底画像が生成される。ステップＳ３において出力部８４は、ステップＳ２の処理で生成された広視野の眼底画像を出力する。このパノラマ画像が例えば、医師がモニタするディスプレイに供給され、表示されたり、記録部に記録される。
【００６５】
視野の広い眼底画像を生成するには、眼底の広い範囲の撮影が必要になる。従って視点を誘導するための固視標も、例えば図９に示されるように、広い範囲で動かすことが必要となる。これにより、図１２に示されるように、繋ぎ目の境界が目立たない高画質な画像を生成し、提示することができる。図１２は、広視野眼底画像の例を示す図である。
【００６６】
図１に示されるように、従来技術では少数の画像をもとに合成を行うために、繋ぎ目の目立つ画像となることが多かった。これに対して、本技術を用いた場合には、多数の画像をもとに画素単位で画像が合成されるため、図１２に示されるように繋ぎ目の境界が目立たない高画質な広視野眼底画像を取得することができる。
【００６７】
図１３は、画像の合成を説明する図である。図１３に示されるように、本技術においては、連続する多数のフレームの画像が対応する画素ごとに加重加算されるので、繋ぎ目の境界が目立たない高画質な画像を得ることができる。なお、図１３において、点線２８１で示す円形の範囲が、１枚のフレームから抽出される画像である。その中に、多数のブロック画像が含まれていることが分かる。
【００６８】
さらに図１４は、画像の合成を模式的に説明する図である。図１４Ａは、各フレームの画像の合成を説明する斜視図であり、図１４Ｂは、側面図である。図１４Ａに示されるように、本技術においては、連続する各フレームの画像から、それぞれ所定の範囲（図１４の例の場合、所定の半径の円形の範囲）の画像２７１−１乃至２７１−４が抽出される。画像２７１−１乃至２７１−４のそれぞれは、図１３に円形の点線２８１で示される範囲の画像である。ここでは４枚の画像２７１−１乃至２７１−４のみが示されているが、実際にはもっと多くの数のフレームの画像が抽出される。これらは例えば図９Ａまたは図９Ｂに示される軌跡１５２，１５３に沿って固視標１５１が連続的に移動された場合に取得される連続するフレームの画像から抽出された画像である。
【００６９】
第１のフレームの所定の範囲の画像２７１−１と次のフレームの所定の範囲の画像２７１−２の撮像範囲は若干ずれている。しかし、画像２７１−ｉ（ｉ＝１，２，３，・・・）は動画像の連続するフレームの画像であるので、撮像範囲の中心から所定の長さの半径の円内の領域の大半は重複している。図１４Ｂに示されるように、ブロックマッチング等により各フレームの画像の対応する部分が検出され、それらが重なるように加重加算される。その結果、最終的に１枚として提示される画像の大半の部分は加重加算された画素からなる画像となり、境界はほとんど目立たなくなる。
【００７０】
＜第２の実施の形態：超解像眼底画像の取得＞
［超解像の眼底画像］
【００７１】
次に、取得する情報が超解像の眼底画像である場合について説明する。複数枚超解像の技術を用いると鮮鋭感の向上した画像を取得できることが知られている。この場合、眼底画像上の一点とこれを撮像する眼底画像取得部３１における撮像素子の画素との位置関係が、画素間隔以下の部分で複数画像において多様な位置関係となっている必要がある。眼底上の同じ点がこのように画素に対して多くの位置関係を持っていることが望ましいこと、また必ずしも眼底の広視野の情報が必要ではないことから、例えば固視標の動きとしては図１５に示されるように、広視野の眼底画像取得の場合（すなわち図９に示される場合）と比較して、狭い範囲のものを用いる。
【００７２】
図１５は、超解像の眼底画像を取得する場合の固視標の動きを説明する図である。図１５Ａは、固視標１５１を螺旋状の奇跡３０１に沿って内側から外側に移動させる例を示している。図１５Ｂは、固視標１５１を、正弦波状の奇跡３０２に沿って移動させる例を示している。図１５を図９と比較して明らかなように、図１５の場合の方が、奇跡の範囲が狭くなっている。
【００７３】
図１６は、超解像眼底画像取得処理を説明するフローチャートである。この図１６を参照して超解像眼底画像取得処理を説明する。
【００７４】
ステップＳ５１において選別部８１は、眼底画像取得部３１から入力される動画像の中から処理対象フレームを選別する。この選別は、図１１のステップＳ１における場合と同様に、必要に応じて実行される。次にステップＳ５２において生成部８３は、ステップＳ５１の処理で選別された処理対象のフレームの画像を相互に位置合わせした上で重ね合わせることにより、超解像眼底画像を生成する。ステップＳ５３において出力部８４は、ステップＳ５２の処理で生成された超解像眼底画像を出力する。
【００７５】
［眼底情報取得部の他の構成］
【００７６】
超解像眼底画像を取得する場合の処理について、さらに詳細に説明する。眼底情報取得部３３は、具体的には例えば図１７に示されるように構成することができる。図１７は、超解像眼底画像を取得する場合の眼底情報取得部３３の機能的構成例を示すブロック図である。
【００７７】
眼底情報取得部３３は、眼底画像取得部３１から供給される複数のフレームからなる眼底の動画像を用いて、１枚の、より高画質な眼底画像を生成し、それを出力する。
【００７８】
図１７に示されるように、眼底情報取得部３３は、入力画像バッファ３１１、超解像処理部３１２、SR（Super Resolution：超解像）画像バッファ３１３、および演算部３１４を有する。
【００７９】
入力画像バッファ３１１は、例えばハードディスク、フラッシュメモリ、若しくは、RAM（Random Access Memory）等の任意の記憶媒体を有する。入力画像バッファ３１１は、眼底画像取得部３１から供給される、動画像を入力画像として保持し、その各フレームを、所定のタイミングでLR（Low Resolution）画像として超解像処理部３１２に供給する。
【００８０】
［超解像処理部の構成］
【００８１】
超解像処理部３１２は、例えば、特開２００９−０９３６７６号公報に記載の超解像処理器と同様の超解像処理を行う。すなわち、超解像処理部３１２は、入力画像バッファ３１１から供給されるLR画像と、SR画像バッファ３１３から供給される、過去に生成したSR画像とを用いて、新たなSR画像を生成するためのフィードバック値を算出して出力する超解像処理を再帰的に繰り返す。超解像処理部３１２は、超解像処理結果として、算出したフィードバック値を演算部３１４に供給する。
【００８２】
SR画像バッファ３１３は、例えばハードディスク、フラッシュメモリ、若しくは、RAM等の任意の記憶媒体を有し、生成されたSR画像を保持し、そのSR画像を所定のタイミングで超解像処理部３１２や演算部３１４に供給する。
【００８３】
演算部３１４は、超解像処理部３１２から供給されるフィードバック値を、SR画像バッファ３１３から供給される、過去に生成したSR画像に加算することにより、新たなSR画像を生成する。演算部３１４は、生成した、新たなSR画像をSR画像バッファ３１３に供給して保持させ、そのSR画像を次の超解像処理（すなわち新たなSR画像の生成）に利用させる。また、演算部３１４は、生成したSR画像を外部の装置等に出力する。
【００８４】
図１７に示されるように、超解像処理部３１２は、動きベクトル検出部３２１、動き補償部３２２、ダウンサンプリングフィルタ３２３、演算部３２４、アップサンプリングフィルタ３２５、および逆方向動き補償部３２６を有する。
【００８５】
SR画像バッファ３１３から読み出されたSR画像は、動きベクトル検出部３２１と動き補償部３２２に供給され、入力画像バッファ３１１から読み出されたLR画像は、動きベクトル検出部３２１と演算部３２４に供給される。
【００８６】
動きベクトル検出部３２１は、入力されたSR画像とLR画像に基づいて、SR画像を基準とした動きベクトルを検出し、検出した動きベクトルを動き補償部３２２と逆方向動き補償部３２６に供給する。
【００８７】
動き補償部３２２は、動きベクトル検出部３２１から供給された動きベクトルに基づいてSR画像に動き補償を施し、動き補償を施して得られた画像をダウンサンプリングフィルタ３２３に供給する。動き補償を施して得られた画像に写る対象の位置は、LR画像に写る対象の位置に近い位置になる。
【００８８】
ダウンサンプリングフィルタ３２３は、動き補償部３２２から供給された画像をダウンサンプリングすることによってLR画像と同じ解像度の画像を生成し、生成した画像を演算部３２４に供給する。
【００８９】
このように、SR画像とLR画像から動きベクトルが求められ、求められた動きベクトルによって動き補償して得られた画像がLR画像と同じ解像度の画像とされる。このことは、撮像して得られる眼底画像（すなわちLR画像）を、SR画像バッファ３１３に記憶されているSR画像に基づいてシミュレートすることに相当する。
【００９０】
演算部３２４は、LR画像と、そのようにしてシミュレートされた画像の差分を表す差分画像を生成し、生成した差分画像をアップサンプリングフィルタ３２５に供給する。
【００９１】
アップサンプリングフィルタ３２５は、演算部３２４から供給された差分画像をアップサンプリングすることによってSR画像と同じ解像度の画像を生成し、生成した画像を逆方向動き補償部３２６に出力する。
【００９２】
逆方向動き補償部３２６は、動きベクトル検出部３２１から供給された動きベクトルに基づいて、アップサンプリングフィルタ３２５から供給された画像に逆方向の動き補償を施す。逆方向の動き補償を施して得られた画像を表すフィードバック値は演算部３１４に供給される。逆方向の動き補償を施して得られた画像に写る対象の位置は、SR画像バッファ３１３に記憶されているSR画像に写る対象の位置に近い位置になる。
【００９３】
眼底情報取得部３３は、超解像処理部３１２を用いてこのような超解像処理を入力画像バッファ３１１に保持させた複数のフレーム（すなわちLR画像）のそれぞれについて行い、最終的に１枚の、より高画質なSR画像を生成する。
【００９４】
［眼底画像生成処理］
図１８は、超解像眼底画像生成処理を説明するフローチャートである。次にこの図１８のフローチャートを参照して、眼底情報取得部３３により実行される超解像眼底画像生成処理の例を説明する。なお、この例ではフレームの選別を行わない場合について説明を行う。
【００９５】
ステップＳ１０１において、眼底情報取得部３３は、撮影により得られた動画像を撮像画像として入力画像バッファ３１１に記憶させる。ステップＳ１０２において、眼底情報取得部３３は、任意の方法で最初のSR画像である初期画像を生成し、それをSR画像バッファ３１３に記憶させる。例えば、眼底情報取得部３３は、最初に得られた撮像画像のフレーム（すなわちLR画像）をSR画像と同じ解像度の画像にアップサンプリングすることによって初期画像を生成する。
【００９６】
ステップＳ１０３において、入力画像バッファ３１１は、保持している未処理の撮像画像（すなわちLR画像）を１枚（すなわち１フレーム）選択し、それを超解像処理部３１２に供給する。動きベクトル検出部３２１は、ステップＳ１０４において、SR画像とLR画像とから動きベクトルを検出する。その動きベクトルを用いて、動き補償部３２２は、ステップＳ１０５において、SR画像に動き補償を施す。
【００９７】
ステップＳ１０６において、ダウンサンプリングフィルタ３２３は、動き補償を施したSR画像をLR画像と同じ解像度にダウンサンプリングする。ステップＳ１０７において、演算部３２４は、SR画像のダウンサンプリング結果と入力LR画像との差分画像を求める。
【００９８】
ステップＳ１０８において、アップサンプリングフィルタ３２５は、その差分画像をアップサンプリングする。ステップＳ１０９において、逆方向動き補償部３２６は、ステップＳ１０４の処理により検出された動きベクトルを用いて、差分画像のアップサンプリング結果に逆方向の動き補償を施す。
【００９９】
ステップＳ１１０において、演算部３１４は、ステップＳ１０９の処理により算出された差分画像のアップリング結果であるフィードバック値を、SR画像バッファ３１３により保持される過去に生成されたSR画像に加算する。眼底情報取得部３３は、ステップＳ１１１において、新たに生成されたSR画像を出力するとともに、SR画像バッファ３１３に記憶させる。
【０１００】
ステップＳ１１２において、入力画像バッファ３１１は、全ての撮像画像（すなわちLR画像）を処理したか否かを判定し、未処理の撮像画像（すなわちLR画像）が存在すると判定された場合、処理をステップＳ１０３に戻し、新たな撮像画像を処理対象として選択し、その撮像画像について、それ以降の処理を繰り返させる。
【０１０１】
ステップＳ１１２において、眼底画像取得部３１より供給された動画像（撮像画像）の全てが処理され、１枚の、より高画質な眼底画像が得られたと判定された場合、入力画像バッファ３１１は、超解像眼底画像生成処理を終了する。
【０１０２】
このようにすることにより、眼底情報取得部３３は、より高画質な眼底画像を得ることが出来る。
【０１０３】
以上の超解像処理は、任意の単位で行うことができる。例えば、撮像画像全体で行うようにしてもよいし、マクロブロックと称される所定の大きさの部分画像毎に行うようにしてもよい。
【０１０４】
＜第３の実施の形態：３次元形状の取得＞
［３次元形状の取得］
【０１０５】
次に、取得する情報が眼底の３次元形状である場合について説明する。３次元形状の取得には、眼底から見た時にある程度異なる角度からの眼底の撮影が必要となる。そこで、例えば固視標の動きとしては、図１９に示すような、広視野の眼底画像取得の場合と超解像の眼底画像取得の場合の中間的な範囲の動きが用いられる。図１９は、固視標の動きを説明する図である。図１９を、図９および図１５と比較して、次のことが明らかである。すなわち、図１９の螺旋状の軌跡６５１と正弦波状の軌跡６５２は、図９の広視野の眼底画像取得の場合の軌跡１５２，１５３より狭く、図１５の超解像の眼底画像取得の場合の軌跡３０１，３０２より広くなっている。
【０１０６】
図２０は、眼底の３次元形状取得処理を説明するフローチャートである。図２０を参照して、眼底の３次元形状を取得する際の眼底情報取得部３３の処理を説明する。
【０１０７】
ステップＳ２０１において選別部８１は、入力される動画像から処理対象フレームを選別する。この選別も図１１のステップＳ１における場合と同様に必要に応じて行なわれる。次にステップＳ２０２において取得部８２は、ステップＳ２０１の処理で選別された処理対象のフレームの画像における眼底の相互の位置関係から、眼底の３次元形状を取得する。
【０１０８】
３次元形状の取得には、例えばStructure from Motion(SFM)の手法を用いることができる。SFMは特定対象をカメラを移動しながら撮影し、撮影結果の動画像をもとにその特定対象の形状を推定する手法である。SFMの実現方法としてTomasi-Kanadeの因子分解法が知られている。この方法では、撮影されたＦ枚の時系列画像に対してＰ組の対応点が取得され、対応点群から２Ｆ×Ｐの行列が作成される。この行列は、その階数が３以下であることを利用して、特徴点の３次元位置を表す行列とカメラ位置を表す行列に分解される。
【０１０９】
本技術で撮影する眼底の動画像はカメラを動かして撮影するものではないが、ほぼ剛体と見なせる被検眼４１を種々の方向に向けさせながら眼底が撮影される。結果として被検眼４１を固定してカメラを動かした場合と同様の眼底画像が得られるので、SFMを適用することが可能になる。SFMの具体的な手法としては種々のものが提案されているが、例えば以下に示すような論文のものがある。
【０１１０】
C. Tomasi and T. Kanade, Shape and Motion from Image Streams under Orthography: a Factorization Method, International Journal of Computer Vision, 9:2, 137-154, 1992.
C. J. Poelman and T. Kanade, A Paraperspective FactorizationMethod for Shape and Motion Recovery, IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 19, No. 3, 1997.
【０１１１】
ステップＳ２０３において出力部８４は、ステップＳ２０２の処理で取得された眼底の３次元形状を出力する。
【０１１２】
以上の処理により、例えば図２１に示されるような眼底の３次元形状が得られる。図２１は、眼底の３次元形状の断面の例を示す図である。図２１の例においては、視神経乳頭部２０２の近傍の断面が示されている。視神経乳頭部２０２の形状は例えば緑内障の診断に有用である。
【０１１３】
＜第４の実施の形態：３次元眼底画像の取得＞
［３次元眼底画像］
【０１１４】
次に、取得する情報が３次元の眼底画像である場合について説明する。この場合の固視標の動きは眼底の３次元形状取得の場合（すなわち図１９）と同様である。
【０１１５】
図２２は、３次元眼底画像取得処理を説明するフローチャートである。以下、図２２を参照して、３次元の眼底画像を取得する際の眼底情報取得部３３における処理を説明する。
【０１１６】
ステップＳ３０１において選別部８１は、入力される動画像から処理対象フレームを選別する。この選別も図１１のステップＳ１における選別処理と同様に、必要に応じて実行される。ステップＳ３０２において取得部８２は、ステップＳ３０１の処理で選別された処理対象のフレームの画像における眼底の相互の位置関係から、眼底の３次元形状を取得する。
【０１１７】
ステップＳ３０３において生成部８３は、ステップＳ３０２の処理で取得された３次元形状に対して、既に求めた、対応する眼底の位置の情報に従って眼底画像のマッピングを行い、３次元眼底画像を生成する。この際、マッピング対象の眼底画像は選別したフレームのうちの１つでもよいし、同じ眼底位置の画像が複数のフレームで撮れている場合には、加重加算により生成した眼底画像を用いてもよい。ステップＳ３０４において出力部８４は、ステップＳ３０３の処理で生成された３次元の眼底画像を出力する。
【０１１８】
図２３は、３次元眼底画像の例を示す図である。この図２３は、ステップＳ３０４の処理で出力される画像の例を表している。曲面６７１に眼底画像が表示されている。
【０１１９】
以上説明したように、取得される情報によらず、眼底情報取得部３３における処理の最初のステップにおいてフレーム画像が選別される。外部固視標が用いられる場合には、入力される動画像の全てのフレームを用いることが可能である。また、内部固視標が用いられる場合でも、前記のように眼底画像取得部３１で取得する動画像が赤外光の動画像であり、固視標の影響を受けないように撮影光に赤外透過フィルタをかけて動画像が取得される場合には、入力される動画像の全てのフレームを用いることが可能である。
【０１２０】
これに対し、内部固視標が用いられ、取得される動画像が可視光の動画像である場合には、撮影光に赤外透過フィルタ（つまり、可視光遮断フィルタ）をかけることはできない。何故ならば撮影対象である可視光が撮像素子に到達しなくなるからである。そこで、内部固視標を用い、かつ取得される動画像が可視光の動画像である場合には、例えば上述した図７に示されるように、内部固視標を点滅させ、固視標の消灯時に撮像されるフレームのみを選別することで、固視標点灯の影響を受けない動画像を取得することができる。消灯時に撮像されたフレームであるか否かは、固視標制御の情報から判定することができる。また、判定を撮影結果の画像の参照により画像処理で行うようにしてもよい。すなわち固視標が映っていないフレームの画像を検出し、抽出するようにしてもよい。
【０１２１】
＜第５の実施の形態：眼底画像提示部を有する構成＞
［眼底情報取得装置の他の構成］
【０１２２】
図２４は、眼底情報取得装置７０１の構成例を示すブロック図である。この図２４には、眼底画像提示部７２１が追加された眼底画像取得装置７０１が示されている。すなわち、この構成では、撮影中の眼底画像の提示を行うための眼底画像提示部７１１が要素として加えられている。その他の構成は、図４における場合と同様である。
【０１２３】
図２４の眼底情報取得装置７０１においては、眼底画像取得部３１により撮影された動画像が眼底画像提示部７１１の画像モニタ７２１に表示される。撮影者はこの画像モニタ７２１を見て、撮影画像を確認しながら撮影作業を進めることができる。
【０１２４】
内部固視標を用いた可視光の動画撮影を行う場合には、例えば眼底画像提示部７１１における画像モニタ７２１に眼底画像取得部３１から入力される画像をそのまま全て表示することもできる。しかし、例えば固視標を点滅させながら撮影を行う場合には、固視標点灯時の画像を画像モニタ７２１に表示すると、撮影者に負担がかかる。そこで、この負担を低減するために、図２５に示されるようにフレーム選別を行い、選別対象のフレームの画像のみ画像モニタ７２１に提示し、更新するようにしてもよい。
【０１２５】
図２５は、撮影画像提示処理を説明するフローチャートである。ステップＳ３５１において選別部８１は、全てのフレームの入力が完了したかを判定する。全てのフレームの入力が完了した場合、処理は終了する。まだ全てのフレームの入力が完了していない場合、ステップＳ３５２において選別部８１は、新たなフレームの入力を待機する。
【０１２６】
新たなフレームが入力されると、ステップＳ３５３において選別部８１は、新たに入力されたフレームは選別対象フレームであるかを判定する。例えば図７を参照して説明したように、固視標消灯時のフレームが、選別対象フレームとされる。新たに入力されたフレームが選別対象フレームでない場合、処理はステップＳ３５１に戻り、それ以降の処理が繰り返される。
【０１２７】
新たに入力されたフレームが選別対象フレームである場合、ステップＳ３５４において選別部８１は、提示画像を更新する。つまり、画像モニタ７２１に提示される画像が新たなフレームの画像に更新される。換言すれば、新たに選別対象フレームの画像が入力されるまで、それより前に入力された選別対象フレームの画像（すなわち、固視標が消灯されている期間の最後のフレームの画像）が更新されることなく、そのまま提示された状態となる。固視標が点灯される直前のフレームの画像が提示され続けるので、画像モニタ７２１を視認している撮影者が、不要な画像を視認するおそれがなくなる。その結果、撮影者に対してよけいな負担がかかることが防止される。その後、処理はステップＳ３５１に戻り、それ以降の処理が繰り返される。
【０１２８】
＜第６の実施の形態：赤外光による動画像の取得＞
［赤外光による動画像と可視光による静止画像の取得］
【０１２９】
３次元の可視光眼底画像を取得する場合、眼底画像取得部３１において赤外光により動画像を先に取得し、その後、可視光により静止画像を取得することができる。赤外光の動画像をもとに取得した眼底の３次元形状に対して、可視光の静止画像を位置合わせの上でマッピングすることにより３次元の可視光眼底画像を取得することができる。
【０１３０】
可視光による静止画像の撮影を先に行う場合、次の赤外光撮影の際の縮瞳を防ぐために、撮影に先立って散瞳剤の点眼が必要となる。これに対して、赤外光により動画像を先に撮影し、その後に、可視光による静止画像を撮影するようにすれば、被検眼４１に対する可視光の照射を静止画像取得時のみにすることができる。その結果、無散瞳の眼底カメラと同様に、散瞳剤の点眼が不要となり、被験者の負担を軽減することができる。
【０１３１】
赤外光の動画像と可視光の静止画像を取得する撮影は、図６と同じ構成の固視標提示部３５Ａにより実現することができるが、その際の撮像部分としては、図２６に示す構成が考えられる。図２６は、赤外光による動画像と可視光による静止画像を撮像する撮像素子を説明する図である。図２６の撮像素子７５１は、図２６Ａに示されるように、赤外光と可視光の両方を受光する。そこで、図２６Ｂに示されるように、受光素子７５１は、図中、R,G,Bの文字を付して示される可視光を受光する受光部と、IRの文字を付して示される赤外光を受光する受光部が配置されている。すなわち、撮像素子７５１の各画素に対するカラーフィルタとして、赤、緑、および青の可視光を透過するフィルタと、赤外光を透過するフィルタの４種類が用いられる。
【０１３２】
IRフィルタの付された画素群をもとに赤外光の動画像が取得され、R,G,Bフィルタの付された画素群をもとに可視光の静止画像が取得される。この実施の形態では撮影光路に対する変更は不必要である。
【０１３３】
さらに赤外光の動画像と可視光の静止画像を取得するための別の実施の形態として、図２７に示されるものが考えられる。図２７は、赤外光による動画像と可視光による静止画像の撮像を説明する図である。この実施の形態においては、可視光を受光する撮像素子７６１と赤外光を受光する撮像素子７６２の２つが用意される。そして撮影光路中に、回動ミラー７６３が配置される。
【０１３４】
被検眼４１からの可視光を受光する場合、回動ミラー７６３は、図中、波線で示される位置に回動される。その結果、可視光は撮像素子７６１にのみ入射する。これに対して、被検眼４１からの赤外光を受光する場合、回動ミラー７６３は、図中、実線で示される位置に回動される。その結果、赤外光は回動ミラー７６３により反射され、撮像素子７６２にのみ入射する。
【０１３５】
赤外光の動画像をもとに取得した眼底の３次元形状に対して、可視光の静止画像を位置合わせの上でマッピングすることにより３次元の可視光眼底画像を取得する場合の処理について図２８を参照して説明する。図２８は、３次元眼底画像取得処理を説明するフローチャートである。
【０１３６】
ステップＳ４０１において取得部８２は、眼底画像取得部３１から入力される赤外光の動画像の各フレームにおける眼底の位置関係から、眼底の３次元形状を取得する。ステップＳ４０２において生成部８３は、ステップＳ４０１の処理で取得された３次元形状に、可視光による静止画像を位置あわせの上マッピングし、３次元画像を生成する。ステップＳ４０３において出力部８４は、ステップＳ４０２の処理で生成された３次元眼底画像を出力する。
【０１３７】
以上のように、本技術によれば、簡便かつ撮影者にとって快適に、高画質な広視野眼底画像、超解像眼底画像、眼底の３次元形状、３次元眼底画像を取得することができる。また、３次元の可視光眼底画像を取得する際の被験者の負担を軽減することができる。
[本技術のプログラムへの適用]
【０１３８】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることができる。
【０１３９】
一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【０１４０】
このようなプログラムを含む記録媒体は、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フロッピディスクを含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVDを含む）、光磁気ディスク（MD（Mini-Disk）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディアにより構成される。あるいは、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているフラッシュROMや、ハードディスクなどの記憶部３６で構成することができる。
【０１４１】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１４２】
また、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【０１４３】
例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
【０１４４】
また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０１４５】
さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０１４６】
［その他の構成］
【０１４７】
本技術は、以下のような構成もとることができる。
（１）連続的に移動する固視標を提示する固視標提示部と、
連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得部と、
取得された前記眼底の画像から、眼底情報を取得する眼底情報取得部と
を備える眼底情報取得装置。
（２）前記眼底画像取得部は、前記眼底の動画像を取得する
前記（１）に記載の眼底情報取得装置。
（３）前記固視標提示部は、前記固視標として点滅する内部固視標を提示する
前記（１）または（２）に記載の眼底情報取得装置。
（４）前記眼底情報取得部は、前記固視標が消灯している期間の前記動画像のフレームの画像を対象画像として選別し、選別した前記対象画像から前記眼底情報を取得する
前記（３）に記載の眼底情報取得装置。
（５）連続的に移動する前記固視標を前記被験者が固視する状態で取得される前記被検眼の眼底の画像を提示する眼底画像提示部をさらに備える
前記（１）乃至（４）のいずれかに記載の眼底情報取得装置。
（６）眼底画像提示部は、前記固視標が消灯している期間においては、前記動画像のフレームの前記眼底画像を提示し、前記固視標が点灯している期間においては、前記固視標が消灯している期間の前記動画像のフレームの前記眼底画像を提示する
前記（５）に記載の眼底情報取得装置。
（７）前記眼底情報取得部は、広視野の前記眼底画像を取得する
前記（１）乃至（６）のいずれかに記載の眼底情報取得装置。
（８）前記眼底情報取得部は、超解像の前記眼底画像を取得する
前記（１）乃至（６）のいずれかに記載の眼底情報取得装置。
（９）前記眼底情報取得部は、前記眼底の３次元形状を取得する
前記（１）乃至（６）のいずれかに記載の眼底情報取得装置。
（１０）前記眼底情報取得部は、３次元の前記眼底画像を取得する
前記（１）乃至（６）のいずれかに記載の眼底情報取得装置。
（１１）前記眼底画像取得部は、赤外光の前記眼底の動画像と可視光の静止画像を取得し、
前記眼底情報取得部は、前記赤外光の眼底の動画像から前記眼底の３次元形状を取得し、前記可視光の静止画像を位置合わせして前記３次元形状にマッピングし、可視光の３次元の前記眼底画像を取得する
前記（１）乃至（６）のいずれかに記載の眼底情報取得装置。
（１２）連続的に移動する固視標を提示する固視標提示ステップと、
連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得ステップと、
取得された前記眼底の画像から、眼底情報を取得する眼底情報取得ステップと
を含む眼底情報取得方法。
（１３）連続的に移動する固視標を提示する固視標提示ステップと、
連続的に移動する前記固視標を被験者が固視する状態で、前記被験者の被検眼の眼底の画像を取得する眼底画像取得ステップと、
取得された前記眼底の画像から、眼底情報を取得する眼底情報取得ステップと
を含む処理をコンピュータに実行させるプログラム。
【符号の説明】
【０１４８】
２１  眼底情報取得装置，  ３１  眼底画像取得部，  ３２  制御部，  ３３  眼底情報取得部，  ３４  固視標制御部，  ３５  固視標提示部，  ３６  記憶部
【図１】
2014161439.tif 000003
【図２】
2014161439.tif 000004
【図３】
2014161439.tif 000005
【図４】
2014161439.tif 000006
【図５】
2014161439.tif 000007
【図６】
2014161439.tif 000008
【図７】
2014161439.tif 000009
【図８】
2014161439.tif 000010
【図９】
2014161439.tif 000011
【図１０】
2014161439.tif 000012
【図１１】
2014161439.tif 000013
【図１２】
2014161439.tif 000014
【図１３】
2014161439.tif 000015
【図１４】
2014161439.tif 000016
【図１５】
2014161439.tif 000017
【図１６】
2014161439.tif 000018
【図１７】
2014161439.tif 000019
【図１８】
2014161439.tif 000020
【図１９】
2014161439.tif 000021
【図２０】
2014161439.tif 000022
【図２１】
2014161439.tif 000023
【図２２】
2014161439.tif 000024
【図２３】
2014161439.tif 000025
【図２４】
2014161439.tif 000026
【図２５】
2014161439.tif 000027
【図２６】
2014161439.tif 000028
【図２７】
2014161439.tif 000029
【図２８】
2014161439.tif 000030