Bakkehuset ble fredet i 1918, fredningen utvidet i 1977. Fredningen omfatter hovedbygningen og minnestøtten for Kamma og Knud Lyne Rahbek.