Alfred de Vigny tilhørte en gammel aristokratisk familie. Faren hadde deltatt i syvårskrigen. Moren, som var påvirket av Rousseau, tok selv hånd om hans første utdannelse. Han vokste opp i Paris.