La madre de Hovey formaba parte de la alta sociedad de San Francisco (California), y su padre era un prominente banquero.