Det gamla slottet hade länge stått öde.