Le portail principal ogival en calcaire de style roman fut récupéré de l'ancienne église Saint-Pierre dans les faubourgs de Milly. Il est orné par de multiples tores. Le clocher culmine à cinquante-sept mètres, sa base est la seule partie subsistante de la chapelle du château du , et les étages supérieurs sont contemporains de la collégiale du .