A su regreso a España rechazó el Obispado de Cuenca y la presidencia del Consejo de Indias, y se retiró al monasterio de Nuestra Señora del Risco en Ávila, donde murió en 1684.