1850 ના દાયકાના અંત ભાગમાં, ગ્રાન્ટ તેમના પરિવાર સાથે વ્હાઇટ હેવન, મિઝોરીના ફાર્મમાં રહેતો હતો, જે તેમની પત્નીના પરિવાર સાથે સંકળાયેલા હતા.