Ernst sin oldefar, Ernst August, hertug av Cumberland, femte sønn av Georg III av Storbritannia, blei konge av Hannover i 1837. Dette fordi Hannover fulgte de saliske lover som forbød kvinner å arve tronen. Dronning Viktoria fikk dermed ikke overta den hannoverske tronen etter sin onkel Vilhelm IVs død.