Fue el duodécimo de catorce hijos de un hombre que debió exilarse en Suiza luego de haber combatido en las tropas de la Convención, por este motivo la familia vivió en la ruina y Pétrus Borel, al concluir el colegio, obedeciendo a sus parientes, debió dedicarse a la arquitectura (más bien como un maestro mayor de obras).