Era hijo de James Alexander, IV conde de Caledon y de Lady Elizabeth Graham-Toler, condesa de Caledon.