Por este tiempo llegó a Madrid el Capitán general de la Mar y virrey de Nápoles, García de Toledo, al que su majestad lo vio ya con poca salud, lo que le llevó a decidir relevarlo de sus funciones para tratar de que se recuperase.