Con la muerte del padre de Lovecraft, la educación del niño recayó sobre su madre, sus dos tías (Lillian Delora Phillips y Annie Emeline Phillips) y en especial sobre su abuelo materno, un importante empresario llamado Whipple Van Buren Phillips.