En 1849, Brown se mudó a la comunidad agrícola negra libre de North Elba, Nueva York.