Era hijo de William Adam (1689-1748), el arquitecto más importante de la época de Escocia, y aprendió el oficio con él.