Carlyle nació en Glasgow, hijo de Elisabeth, empleada de una empresa de autobuses, y Joseph Carlyle, un pintor y decorador.