Opprinnelig lå det en borg der dagens slott ligger. Frem til kong Ludwigs levetid var borgen bevart som ruin. Kongen ville omskape ruinen til et slikt slott som ble bebodd av de gamle tyske riddere, bortsett fra at han fikk innlagt sentralvarme, vannklosetter og elektriske ringeklokker til å tilkalle tjenerne. Grunnstensnedleggelsen for det nye slottet fant sted 5. september 1869, men slottet kunne først tas i bruk i 1884.