I middelalderen var Esrum hjemsted for Esrum kloster og en del av klosteret er bevart. Det ble fredet i 1918. Like ved klosteret ligger Esrum Møllegård ved Esrum Å, anlegget består av fem bygninger og ble fredet i 1986.