Slottet Dossenbergh låg omkring två mil från staden.