纸证明他与Jean Armour的婚姻关系，于是她的父母把伊丽莎白·伯恩斯送到住在佩斯利的叔叔家。虽然Armour的父亲反对，他们最终还是在1788年结婚。Jean Armour为他生了九个孩子，只有其中三名倖存下来。为了养家活口，罗伯特·伯恩斯在牙买加工作，薪水每年30英镑。伯恩斯担任奴隶种植园簿记员。在1786年，很少获得公众注意的废奴运动大约在那个时候开始。大约在同一时间，罗伯特·伯恩斯与玛丽·坎贝尔（1763年至1786年）陷入热恋，他曾在教堂里遇见她。1786年5月14日，他们交换了“圣经