サウスカロライナ植民地
ラトリッジはサウスカロライナ植民地チャールストンで大家族に生まれた。父はスコットランド系アイルランド人の移民ジョン・ラトリッジ・シニアで、母はイングランド人の子孫でサウスカロライナ生まれのサラ・ヘクストであった。