Slottet ble påbegynt under Ludwig I hertugen av Bayern (1173-1231), men ble utvidet under kurfyrstene Ruprecht III (1398–1410), Otto Heinrich (1556–1559), Friedrich IV (1583–1610) og Friedrich V (1610–1621) til et ekte renessanseslott. Under niårskrigen i Pfalz ble slottet ødelagt i 1689 og 1693 av franskmennene. Den ble delvis restaurert igjen, men ble herjet av en brann i 1764.