En tanto que su esposa permanecía en el hogar, encargándose de la carrera literaria del autor y educando a sus hijos, Grey pasaba a menudo largas temporadas fuera de casa, pescando, escribiendo y pasando el tiempo con numerosas amantes.