Junto a este, a cada lado, se encuentran otros dos escudos, dispuestos simétricamente y de dimensiones menores, pertenecientes a Juan Alonso Pimentel de Herrera y Pedro Fernández de Castro, que recuerdan que eran los virreyes que gobernaban la ciudad cuando se construyó el palacio.