Han var sønn av fiskeskipper Jean Le Pen og dameskredder Anne-Marie Hervé. Hele familien har sitt opphav i det sørlige Bretagne (departementet Morbihan). I 1942 døde faren idet båten hans, , gikk på en mine. Jean-Marie fikk derpå sin skolegang på statens bekostning - som en . Han gikk på en jesuittskole i Vannes og på lycéer i Lorient og Saint-Germain-en-Laye.