Nacido en Richmond Hill, Nueva York, Gould fue reconocido pronto como un niño prodigio con habilidades para la improvisación y la composición.