Esta prosperidad atrajo la codicia de piratas, ingleses sobre todo, que atacaron la villa muchas veces y de modo preferencial las estancias y fincas ubicadas a la orilla del mar, desde la bahía de Barbacoa hasta Acandí y la actual frontera con la República de Panamá.