Herlufsholms kirke ble første gang oppført omkring 1200. Etter en rekke ombygginger finnes det fortsatt rester av den eldste kirken. Munkecellene fra 1300-tallet finnes også fortsatt. De nåværende bygningene stammer fra omkring 1870. På skolens område ligger det flere andre bygninger, som er flere hundre år gamle.