Tras depender de diversos señores, la villa de Herrera, por real concesión de Juan I de Castilla pasa a ser señorío de la familia Fernández de Velasco desde 1379; a partir de entonces y hasta el siglo XIX los sucesivos duques de Frías serán los señores de Herrera de Pisuerga.