Hubert Prior Vallée nació en Island Pond, en el estado de Vermont, siendo sus padres Charles Alphonse y Catherine Lynch Vallée, ambos hijos de inmigrantes de origen canadiense e irlandés.