En el siglo XVI la villa pasó a manos de los poderosos duques de Villahermosa.