જુલાઈ 185 9 માં, બ્રાઉન, તેમના પુત્રો અને અન્ય અનુયાયીઓ મેરીલેન્ડમાં પોટોમેક નદીના ખેતરોમાં એક ફાર્મ ભાડે આપતા હતા.