Nació en 1514 en Lyon (su horóscopo aparece en las bandas de la primera edición de su tratado en 1567) en una familia de maestros albañiles; su padre, Jehan Delorme habría participado en la reconstrucción de la iglesia de los Carmelitas.