La importancia del monasterio fue creciendo con el tiempo y en el siglo XVI el mismo Carlos I barajó la idea de retirarse a este monasterio, aunque prefirió Yuste por la climatología más benigna.