Kullback–Leibler divergence
SGVB推定量を計算するにはカルバック・ライブラー情報量formula_71を計算できる必要がある。原論文ではこの値が計算できないときの為の推定量も提案しているが#原論文、本項では割愛する。