На 15.01.1777 г. дворецът изгаря. Пожарът е избухнал рано сутринта в западното крило, обхванал е покривните греди и е довел до експлозия в хранилището за барут. Спасителните операции продължават през целия ден, а градът също го грози опасност да бъде опожарен. Множество души са загинали. След пожара реконструкцията не е започнала веднага. Само дворцовото градинско крило било възстановено в опростен вид. Дворцовата църква, която също е била разрушена, е заменена от по-малка двойна църква в източното крило, където се намира и до днес. Когато френските революционни войски навлизат през 1794 г., използването на двореца като курфюрстка резиденция приключва.