Aunque el cuerpo principal de los Santos de los Últimos Días eventualmente se trasladó a Nauvoo, Whitmer continuó viviendo en Richmond, donde operó un establo y se estableció como un miembro respetado y prominente de su comunidad.