【手続補正書】
【提出日】令和3年5月27日(2021.5.27)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】変更
【補正の内容】
【００５７】
態様８
前記スケーリングカーネルを部分変更するステップは、パラメータ最適化操作を前記スケーリングカーネル及び前記スケーリングカーネルの符号化版の少なくとも１つを用いて実行することを含む、態様１〜７のいずれかに記載のコンピュータ実行方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００５９
【補正方法】変更
【補正の内容】
【００５９】
態様１０
前記スケーリングカーネル及び前記スケールされた画像の原版に基づいて前記スケールされた画像を生成するステップを更に含む態様１〜９のいずれかに記載のコンピュータ実行方法。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００６７
【補正方法】変更
【補正の内容】
【００６７】
態様１８
前記スケーリングカーネル及び前記スケールされた画像の原版に基づいて前記スケールされた画像を生成するステップと、前記スケールされた画像、前記スケーリングカーネル、及び前記第１復元画像の原版を含む訓練データを使用して１つ以上の神経網を前記第１復元画像及び前記画像差を生成するように訓練するステップとを更に含む態様１１〜１７のいずれかに記載の持続性コンピュータ読取可能媒体。
【手続補正４】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像内容をスケールするためのコンピュータ実行方法であって、
スケールされた画像及びスケーリングカーネルに基づいて第１復元画像を生成するステップであって、前記第１復元画像は第１解像度を有し、前記スケールされた画像は第２解像度を有する、ステップと、
前記スケールされた画像及び前記スケーリングカーネルに基づいて画像差を生成するステップであって、前記画像差は少なくとも１つの視覚アーティファクトが前記第１復元画像内に存在することを示す、ステップと、
前記スケーリングカーネルを部分変更して変更されたスケーリングカーネルを生成するステップと、
前記スケールされた画像及び前記変更されたスケーリングカーネルに基づいて第２復元画像を生成するステップであって、前記少なくとも１つの視覚アーティファクトは前記第２復元画像内で低減されているか又は除去されている、ステップと
を含むコンピュータ実行方法。
【請求項２】
前記第１復元画像を生成するステップは、
前記スケーリングカーネルを潜在空間内に符号化して前記スケーリングカーネルの潜在表現を生成するステップと、
前記スケーリングカーネルの前記潜在表現に基づいて低下マップを生成するステップと、前記スケールされた画像及び前記低下マップを組み合わせて前記第１復元画像を生成するステップと
を含む、請求項１記載のコンピュータ実行方法。
【請求項３】
前記スケーリングカーネルを前記潜在空間内に符号化するステップは、前記スケーリングカーネルに関連する次元数値を低減することを含む、請求項２記載のコンピュータ実行方法。
【請求項４】
前記低下マップを生成するステップは、前記スケーリングカーネルの前記潜在表現を前記第１解像度を有するターゲット画像に関連する１つ以上の領域に亘って複写することを含む、請求項２記載のコンピュータ実行方法。
【請求項５】
前記スケールされた画像及び前記低下マップを組み合わせるステップは、前記スケールされた画像の少なくとも一部及び前記低下マップを畳み込み神経網を使用して分類して前記第１復元画像を生成することを含む、請求項２記載のコンピュータ実行方法。
【請求項６】
前記画像差を生成するステップは、
前記第１復元画像を生成するのに使用される第１畳み込み神経網の畳み込み層から引き出された一組の出力を得るステップと、
前記スケールされた画像及び前記低下マップを前記一組の出力と組み合わせて前記画像差を生成するステップであって、前記画像差は前記第１復元画像と前記スケールされた画像の原版の差を表す、ステップと
を含む、請求項１記載のコンピュータ実行方法。
【請求項７】
前記スケールされた画像及び前記低下マップを前記一組の出力と組み合わせるステップは、前記スケールされた画像の少なくとも一部及び前記低下マップを第２畳み込み神経網を使用して分類して前記画像差を生成することを含む、請求項６記載のコンピュータ実行方法。
【請求項８】
前記スケーリングカーネルを部分変更するステップは、パラメータ最適化操作を前記スケーリングカーネル及び前記スケーリングカーネルの符号化版の少なくとも１つを用いて実行することを含む、請求項１記載のコンピュータ実行方法。
【請求項９】
複数の異なるカーネルを含むカーネル空間から抽出して前記スケーリングカーネルを生成するステップを更に含む請求項１記載のコンピュータ実行方法。
【請求項１０】
前記スケーリングカーネル及び前記スケールされた画像の原版に基づいて前記スケールされた画像を生成するステップを更に含む請求項１記載のコンピュータ実行方法。
【請求項１１】
プログラム命令群を記憶する持続性コンピュータ読取可能媒体であって、前記プログラム命令群は、プロセッサにより実行される時、前記プロセッサに、
スケールされた画像及びスケーリングカーネルに基づいて第１復元画像を生成するステップであって、前記第１復元画像は第１解像度を有し、前記スケールされた画像は第２解像度を有する、ステップと、
前記スケールされた画像及び前記スケーリングカーネルに基づいて画像差を生成するステップであって、前記画像差は少なくとも１つの視覚アーティファクトが前記第１復元画像内に存在することを示す、ステップと、
前記スケールされた画像と最適化処理により生成される部分変更されたスケーリングカーネルとに基づいて第２復元画像を生成するステップであって、前記少なくとも１つの視覚アーティファクトは前記第２復元画像内で低減されているか又は除去されている、ステップと
を実行させることで画像内容をスケールさせる、持続性コンピュータ読取可能媒体。
【請求項１２】
前記第１復元画像を生成するステップは、
前記スケーリングカーネルを潜在空間内に符号化して前記スケーリングカーネルの潜在表現を生成するステップと、
前記スケーリングカーネルの前記潜在表現に基づいて低下マップを生成するステップと、
前記スケールされた画像及び前記低下マップを組み合わせて前記第１復元画像を生成するステップと
を含む、請求項１１記載の持続性コンピュータ読取可能媒体。
【請求項１３】
前記スケーリングカーネルを前記潜在空間内に符号化するステップは、前記スケーリングカーネルを圧縮して前記スケーリングカーネルより少ない次元数を持つ前記スケーリングカーネルの圧縮版を生成することを含む、請求項１２記載の持続性コンピュータ読取可能媒体。
【請求項１４】
前記低下マップを生成するステップは、前記スケーリングカーネルの前記潜在表現を前記第１解像度を有するターゲット画像に関連する１つ以上の領域に亘って複写することを含む、請求項１２記載の持続性コンピュータ読取可能媒体。
【請求項１５】
前記スケールされた画像及び前記低下マップを組み合わせるステップは、前記スケールされた画像の少なくとも一部及び前記低下マップを畳み込み神経網を使用して分類して前記第１復元画像を生成することを含む、請求項１２記載の持続性コンピュータ読取可能媒体。
【請求項１６】
前記画像差を生成するステップは、
前記第１復元画像を生成するのに使用される第１畳み込み神経網の畳み込み層から引き出された一組の出力を得るステップと、
前記スケールされた画像及び前記低下マップを前記一組の出力と組み合わせて前記画像差を生成するステップであって、前記画像差は前記第１復元画像と前記スケールされた画像の原版の差を表す、ステップと
を含む、請求項１１記載の持続性コンピュータ読取可能媒体。
【請求項１７】
前記スケールされた画像及び前記低下マップを前記一組の出力と組み合わせるステップは、前記スケールされた画像の少なくとも一部及び前記低下マップを第２畳み込み神経網を使用して分類して前記画像差を生成することを含む、請求項１６記載の持続性コンピュータ読取可能媒体。
【請求項１８】
前記スケーリングカーネル及び前記スケールされた画像の原版に基づいて前記スケールされた画像を生成するステップと、
前記スケールされた画像、前記スケーリングカーネル、及び前記第１復元画像の原版を含む訓練データを使用して１つ以上の神経網を前記第１復元画像及び前記画像差を生成するように訓練するステップと
を更に含む請求項１１記載の持続性コンピュータ読取可能媒体。
【請求項１９】
前記第１解像度は前記第２解像度より大きく、前記スケーリングカーネルはダウンスケーリングカーネルから成る、請求項１１記載の持続性コンピュータ読取可能媒体。
【請求項２０】
ソフトウェアアプリケーションを記憶するメモリ及びプロセッサを備えるシステムであって、前記プロセッサは前記ソフトウェアアプリケーションを実行する時、
スケールされた画像及びスケーリングカーネルに基づいて第１復元画像を生成するステップであって、前記第１復元画像は第１解像度を有し、前記スケールされた画像は第２解像度を有する、ステップと、
前記スケールされた画像及び前記スケーリングカーネルに基づいて画像差を生成するステップであって、前記画像差は少なくとも１つの視覚アーティファクトが前記第１復元画像内に存在することを示す、ステップと、
前記スケーリングカーネルを部分変更して変更されたスケーリングカーネルを生成するステップと、
前記スケールされた画像及び前記変更されたスケーリングカーネルに基づいて第２復元画像を生成するステップであって、前記少なくとも１つの視覚アーティファクトは前記第２復元画像内で低減されているか又は除去されている、ステップと
を実行するように構成される、システム。