En enero de 1568, Barros sufrió un accidente cerebro vascular y fue exonerado de sus funciones en la Casa de Indias, recibiendo un título de hidalgo y una pensión regia del rey Don Sebastián.