グールドは1863年にヘレン・デイ・ミラー(1838年-1889年)と結婚し、次の6人の子供が生まれた。