Sin embargo el actual edificio data de finales del siglo XVI, cuando al ser usado como lugar de retiro por Leonor de Sotomayor y Zúñiga, Condesa de Niebla y su nieta Leonor de Guzmán, el convento se vio favorecido por las iniciativas de la Casa de Medina Sidonia a través de una amplia reforma.