【手続補正書】
【提出日】令和2年12月16日(2020.12.16)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
被検眼の第１の画像を取得する取得部と、
被検眼の第１の画像よりも低いノイズと高いコントラストとのうちの少なくとも一つを有する第２の画像を含む学習データを用いて学習して得た学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも低いノイズと高いコントラストとのうちの少なくとも一つを有する第２の画像を生成する、画質向上部と、
前記取得された第１の画像と前記生成された第２の画像とを切り替えて、並べて、又は重ねて表示部に表示させる表示制御部と、
を備える、画像処理装置。
【請求項２】
前記取得された第１の画像の撮影条件に基づいて、前記画質向上部によって用いられる学習済モデルを、複数の学習済モデルから選択する選択部を更に備える、請求項１に記載の画像処理装置。
【請求項３】
前記第１の画像は、被検眼の深さ方向の範囲における情報に基づいて生成された正面画像であり、
前記取得された第１の画像を生成するための深さ方向の範囲に対応する学習済モデルを、前記画質向上部によって用いられる学習済モデルとして、複数の学習済モデルから選択する選択部を更に備える、請求項１に記載の画像処理装置。
【請求項４】
被検眼の深さ方向の範囲における情報に基づいて生成された正面画像である第１の画像を取得する取得部と、
被検眼の第１の画像よりも高い画質を有する第２の画像を含む学習データを用いて学習して得た学習済モデルであって、前記取得された第１の画像を生成するための深さ方向の範囲に対応する学習済モデルを、複数の学習済モデルから選択する選択部と、
前記選択された学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する、画質向上部と、
前記生成された第２の画像を表示部に表示させる表示制御部と、
を備える、画像処理装置。
【請求項５】
前記表示制御部は、前記取得された第１の画像を生成するための深さ方向の範囲が操作者からの指示に応じて変更されると、前記表示部に並べて表示されている前記取得された第１の画像と前記生成された第２の画像を、前記変更された深さ方向の範囲に基づく第１の画像と該第１の画像から生成された第２の画像に変更して前記表示部に表示させる、請求項３又は４に記載の画像処理装置。
【請求項６】
前記表示制御部は、操作者からの指示に応じて、前記表示部に並べて表示されている前記取得された第１の画像及び前記生成された第２の画像を連動して拡大表示させる、請求項１乃至５のいずれか一項に記載の画像処理装置。
【請求項７】
前記表示制御部は、操作者からの指示に応じて、前記取得された第１の画像と前記生成された第２の画像とを切り替えて、前記表示部に表示させる、請求項１乃至４のいずれか一項に記載の画像処理装置。
【請求項８】
被検眼の第１の画像を取得する取得部と、
被検眼の第１の画像よりも高い画質を有する第２の画像を含む学習データを用いて学習して得た学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する、画質向上部と、
操作者からの指示に応じて、前記取得された第１の画像と前記生成された第２の画像とを切り替えて表示部に表示させる表示制御部と、
を備える、画像処理装置。
【請求項９】
前記画質向上部は、複数の前記取得された第１の画像から、複数の第２の画像を生成し、
前記表示制御部は、操作者からの指示に応じて、前記取得された複数の第１の画像と前記生成された複数の第２の画像とを連動して切り替えて前記表示部に表示させる、請求項７又は８に記載の画像処理装置。
【請求項１０】
前記表示制御部は、前記取得された第１の画像及び前記生成された第２の画像の少なくとも一方に透明度を設定し、前記表示部に前記取得された第１の画像及び前記生成された第２の画像を重ねて表示させる、請求項１乃至４のいずれか一項に記載の画像処理装置。
【請求項１１】
前記取得された第１の画像と前記生成された第２の画像を比較し、比較結果に基づいて色付けされたカラーマップ画像を生成する比較部を更に備え、
前記表示制御部は、前記取得された第１の画像又は前記生成された第２の画像に前記カラーマップ画像を重畳して前記表示部に表示させる、請求項１乃至１０のいずれか一項に記載の画像処理装置。
【請求項１２】
被検体の第１の画像を取得する取得部と、
学習済モデルを用いて、前記取得された第１の画像から、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する、画質向上部と、
前記取得された第１の画像と前記生成された第２の画像とを比較する比較部と、
前記比較部による比較結果を表示部に表示させる表示制御部と、
を備える、画像処理装置。
【請求項１３】
前記比較部は、前記取得された第１の画像と前記生成された第２の画像の差分を算出し、該差分に基づいて色分けされたカラーマップ画像を生成し、
前記表示制御部は、前記カラーマップ画像を前記比較結果として前記表示部に表示させる、請求項１２に記載の画像処理装置。
【請求項１４】
前記表示制御部は、前記取得された第１の画像又は前記生成された第２の画像に前記カラーマップ画像を重畳して前記表示部に表示させる、請求項１３に記載の画像処理装置。
【請求項１５】
前記比較部は、前記取得された第１の画像と前記生成された第２の画像の差分を算出し、
前記表示制御部は、前記差分が所定の値よりも大きい場合に、警告を前記比較結果として前記表示部に表示させる、請求項１２に記載の画像処理装置。
【請求項１６】
前記学習済モデルの学習データに含まれる第２の画像は、重ね合わせ処理、最大事後確率推定処理、平滑化フィルタ処理及び階調変換処理のうちの一つの処理により得られた画像と、被検眼の第１の画像の撮影に用いられる撮影装置よりも高性能な撮影装置によって撮影された画像と、被検眼の第１の画像の撮影工程よりも工数の多い撮影工程で取得された画像とのいずれかを含む、請求項１乃至１５のいずれか一項に記載の画像処理装置。
【請求項１７】
前記学習済モデルは、前記学習済モデルの学習データを用いて教師あり学習して得た学習済モデルであり、
前記画質向上部は、前記学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも高い画質を有する第２の画像として、前記取得された第１の画像よりも低いノイズと高いコントラストとのうちの少なくとも一つを有する第２の画像を生成する、請求項１乃至１６のいずれか一項に記載の画像処理装置。
【請求項１８】
被検眼の第１の画像を取得する工程と、
被検眼の第１の画像よりも低いノイズと高いコントラストとのうちの少なくとも一つを有する第２の画像を含む学習データを用いて学習して得た学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも低いノイズと高いコントラストとのうちの少なくとも一つを有する第２の画像を生成する工程と、
前記取得された第１の画像と前記生成された第２の画像とを切り替えて、並べて、又は重ねて表示部に表示させる工程と、
を含む、画像処理方法。
【請求項１９】
被検眼の深さ方向の範囲における情報に基づいて生成された正面画像である第１の画像を取得する工程と、
被検眼の第１の画像よりも高い画質を有する第２の画像を含む学習データを用いて学習して得た学習済モデルであって、前記取得された第１の画像を生成するための深さ方向の範囲に対応する学習済モデルを、複数の学習済モデルから選択する工程と、
前記選択された学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する工程と、
前記生成された第２の画像を表示部に表示させる工程と、
を含む、画像処理方法。
【請求項２０】
被検眼の第１の画像を取得する工程と、
被検眼の第１の画像よりも高い画質を有する第２の画像を含む学習データを用いて学習して得た学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する工程と、
操作者からの指示に応じて、前記取得された第１の画像と前記生成された第２の画像とを切り替えて表示部に表示させる工程と、
を含む、画像処理方法。
【請求項２１】
被検体の第１の画像を取得する工程と、
学習済モデルを用いて、前記取得された第１の画像から、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する工程と、
前記取得された第１の画像と前記生成された第２の画像とを比較する工程と、
前記取得された第１の画像と前記生成された第２の画像の比較結果を表示部に表示させる工程と、
を含む、画像処理方法。
【請求項２２】
プロセッサーによって実行されると、該プロセッサーに請求項１８乃至２１のいずれか一項に記載の画像処理方法の各工程を実行させる、プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明の一実施態様に係る画像処理装置は、被検眼の第１の画像を取得する取得部と、被検眼の第１の画像よりも低いノイズと高いコントラストとのうちの少なくとも一つを有する第２の画像を含む学習データを用いて学習して得た学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも低いノイズ低減と高いコントラスト強調とのうちの少なくとも一つを有する第２の画像を生成する、画質向上部と、前記取得された第１の画像と前記生成された第２の画像とを切り替えて、並べて、又は重ねて表示部に表示させる表示制御部とを備える。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明の他の実施態様に係る画像処理装置は、被検眼の深さ方向の範囲における情報に基づいて生成された正面画像である第１の画像を取得する取得部と、被検眼の第１の画像よりも高い画質を有する第２の画像を含む学習データを用いて学習して得た学習済モデルであって、前記取得された第１の画像を生成するための深さ方向の範囲に対応する学習済モデルを、複数の学習済モデルから選択する選択部と、前記選択された学習済モデルの入力データとして前記取得された第１の画像を用いることにより、前記取得された第１の画像よりも高い画質を有する第２の画像を生成する、画質向上部と、前記生成された第２の画像を表示部に表示させる表示制御部とを備える。