Hans kone var på mange måter en formidable kvinne, Marjorie var datter av Neil, 2. jarl av Carrick, og hans jarldømme, Carrick, var et gælisk jarldømme i Sør-Skottland. Dets landområder tilsvarer dagens Ayrshire og Dumfriesshire. Ekteparet bosatte seg i Turnberry Castle og Lochmaben. Som vanlig på denne tiden gjorde ekteskapet med Marjorie Robert til jarl.