Sin embargo, los continuos pleitos con los frailes franciscanos de Astorga y el auge comercial de la vecina localidad de La Bañeza (liberada de la jurisdicción de Palacios de la Valduerna en 1523) hicieron que a lo largo del siglo XVI la villa perdiera poder.