Er war der einzige Sohn des Thomas Hay und der Margaret Logie. Sein Vater war der jüngere Sohn des William Hay, 3. Earl of Erroll und fiel 1513 in der Schlacht von Flodden Field.