Er wuchs nach dem Tod seiner Mutter in London auf. Als kurz nach seiner Rückkehr 1815 nach Braunschweig sein Vater in Quatre-Bras fiel, gerieten er und sein Bruder Karl unter die Vormundschaft ihres Onkels Georg, König von Hannover und Prinzregent von Großbritannien. De facto übten Braunschweiger Staatsmänner ihre Vormundschaft aus oder sie befanden sich in der Obhut von Erziehern.