En 1865 Guzmán se convirtió en jefe político de San Pedro de Macorís, a la cual le construyó la primera ermita en 1851 y en 1855 el comandante de armas, general Antonio Guzmán, dona una capilla de tablas de capada, la cual estaba techada de yaguas y fue bendecida por Pedro Carrasco y Capeller.