Posteriormente la fortaleza fue entregada a la Casa de Osuna.