Benché sussistano dei dubbi sull'effettiva costruzione della chiesa, dovuti a probabili errori di trascrizione, è certa l'esistenza della chiesa agli inizi del Cinquecento. Qui, infatti, fu trasportato il corpo senza vita di Louis d'Armagnac, duca di Nemours comandante dell'esercito francese sconfitto da Consalvo da Cordova durante la Battaglia di Cerignola. Ancora oggi all'interno della chiesa, alla destra dell'arco trionfale, si può leggere un'iscrizione dell'epoca (eseguita quasi certamente con un pugnale) che ricorda lo scontro.