Під час Тринадцятирічної війни у 1455 році місто було захоплене і спалене польським військом. Після закінчення війни Алленбург був переданий у володіння графу Конітцу як плата за військову підтримку Тевтонського ордену. У 1491 році син графа Ганс, за згодою великого магістра Йоганна фон Тіфена, обміняв Алленбург, що тоді пустував, на володіння Веднікен у Земланді. Після цього замок був розібраний і більше не відновлювався. Місце, де він знаходився, пізніше називалося Юнкергоф.