Moore nació en Castleford (Yorkshire del Oeste), hijo de Mary Baker y Raymond Spencer Moore.