Earl of Elgin
1766年7月20日に第5代エルギン伯爵・第9代キンカーディン伯爵チャールズ・ブルースとその妻マーサ(旧姓ホワイト(Whyte))の間の次男として生まれた。