ラファイエットの父ミシェルも1759年8月1日、ミンデンの戦いでイギリス率いる同盟軍との戦闘中に砲弾に当たり戦死した。ラファイエットは侯爵とシャヴァニアック卿の位を継いだが、財産は母親が相続。ラファイエットは収入が少ないため、国王から780リーブルの年金を与えられた。ラファイエットの母は、恐らくは夫を失ったショックから、父や祖父と住むためパリへ引っ越し、残されたラファイエットは、持参金と共に城を贈られていた父方の祖母シャヴァニアック夫人（Mme de Chavaniac）によりシャヴァニアックで育てられた。