Tales fueron los daños que ya en 1534 y siguiendo en señorío del marqués, impasible a las reclamaciones de la ciudad, que en largo pleito solicitaba la devolución de la fortaleza que el magnate «tenía perdida e destruida e fecha corral de vacas».