日生于英国，少时先后就读于曼彻斯特文法学校（Manchester Grammar School）及曼彻斯特市立技术学院（Manchester Municipal College of Technology）。在第二次世界大战期间，韦辉隶属于皇家工兵团，于远东地区服役。1941年12月，韦辉有份参与香港保卫战，同月因为香港沦陷而成为战俘，被日军拘禁于深水埗的拘留营。
港府生涯.二战完结后，韦辉从拘留营获释，并在1946年2月返回英国休养，未几即于1947年以二级官学生身份加入香港政府