Más adelante entre los siglos XVI al XIX los duques del Infantado fueron señores de Fresno, suprimiéndose los señoríos jurisdiccionales en 1837.