Wrottesley era hijo de John Wrottesley, Primer Barón de Wrottesley, y su primera esposa Caroline Bennet.