Durante los siglos XVII y XVIII ataques de pirata especialmente de Sir Francis Drake, quien según relata Benjamín Vicuña Mackenna, en 1578, arrasa en el Puerto y se lleva de la capilla, como único botín, las vinajeras y un cáliz de plata .