Escribió, además, los Carmina (poemas) que siguen siendo una de las más altas testimonianzas de la poesía cristiana de los primeros siglos.