Fue hijo de Jacobo de Lorges, conde de Montgomery, originario de Escocia, capitán distinguido de la guardia escocesa de Francisco I, y de Claudia de Francia.