Randolph Churchill hevdet at Georg var en streng far, i den grad at hans barn var skremt av ham, og at Georg hadde sagt til Edward Stanley, 17. Jarl av Derby: «Min far var redd for sin mor, jeg var redd for min far og jeg skal pokker meg se til at mine barn er redde for meg.» I virkeligheten er det ingen direkte kilder for dette sitatet, og det er sannsynlig at Georgs forelderstil var litt forskjellig fra normen på den tiden. Georg og May hadde fem sønner og én datter.