Fue hijo del cronista de Carlos V, Tristán de Silva, que participó en la guerra de Granada y fue regidor de Ciudad Rodrigo y, entre 1491 y 1492, alcalde de Madrid.