カルバック・ライブラー情報量
ここで、formula_8 は formula_1 のエントロピー、formula_10 は formula_1 から formula_2 のカルバック・ライブラー情報量（相対エントロピー）である。