1768年5月20日にイギリス領北米植民地のノースカロライナ植民地ギルフォード郡にてクエーカー教徒のジョン・ペイン(1736-1792)とメアリー・コールズ・ペイン(1745-1807)の長女(3人の兄・1人の弟・3人の妹)として生まれた。