Gabriel Axel vokste opp i Paris, hvor familien flyttet da han var barn. Farens møbelfabrikk gikk konkurs og familiens fire barn ble sendt hjem til Danmark i 1935. Her ble Axel først utdannet som møbelsnekker før han i 1943 ble tatt opp på Det kongelige Teaters elevskole.