Crónicas orales sostienen que la Danza de los Palos se celebraba con espadas a fin de recibir tanto a la Virgen como a las autoridades civiles y militares del marquesado de Ayamonte, cambiándose las espadas por varas, por orden de uno de los marqueses, temeroso de sufrir algún tipo de atentado.