I en annen fortelling ble borgen revet av Margrethe fordi Jens Grim ikke ville stille opp i kampen mot mecklenborgerne. Historiske sett stemmer det at det under Margrethe og hennes far Valdemar Atterdags tid ble revet mange adelsborger ned, samt innført forbud mot å bygge nye.