Во время Крестьянской войны, замок служил тюрьмой. Во время феодальной войны новыми хозяевами крепости стали Веттины, они укрепляли крепость во время Шмалькальденской и Тридцатилетней войн. В 1785 году два главных здания крепости были соединены конструкцией «Röhrwasserhaus» над воротами. В таком виде Остербург и сохранился до наших дней. С 1813 по 1815 годы в крепости размещался госпиталь, с 1818 года, в крепости размещался районный суд. В конце Второй мировой войны сторожевая башня была повреждена при бомбардировке американскими войсками.