Gonzalo Silvestre era uno de los españoles que regularmente acudían en el Cuzco a las tertulias amigables en la casa de Sebastián Garcilaso de la Vega, padre del inca Garcilaso cuando éste tenía pocos años.