初代コーンウォリス伯爵チャールズ・コーンウォリスとエリザベス・タウンゼンド(、1785年12月1日没、第2代タウンゼンド子爵チャールズ・タウンゼンドの娘)の次男として、1740年9月10日に生まれた。