La familia en expansión se mudó con Brown a lo largo de sus viajes, residiendo en Ohio, Massachusetts, Pensilvania y Nueva York.