Esta Hermandad fue fundada por los monjes Agustinos provenientes de Chipiona a finales del año 1573 o principios de 1574 en el Convento San Agustín sito en calle Santiago y a los pocos meses de perder un litigio con los Hermanos del "Dulce Nombre de Jesús" los cuales tenían Ermita propia donada por D.