El maestro Diego de Torres fue el encargado de levantar el primer edificio del Cabildo de Lima y en 1549 comenzó aceleradamente la obra, junto a dos esclavos negros adquiridos especialmente para reforzar su trabajo, porque debía terminarse antes de la llegada de Antonio de Mendoza y Pacheco, segundo virrey del Perú, que estaba prevista para el 23 de septiembre de 1551.