Durante la Edad Moderna, Perilla de Castro estuvo integrado en el partido de Carbajales de Alba de la provincia de Zamora, tal y como reflejaba en 1773 Tomás López en "Mapa de la Provincia de Zamora".