તેણીના પિતા, લોરેન્સ જ્હોનસન લી, એક રેલવે પોસ્ટકલ કારકુન હતા, અને બ્રાઉન બે વર્ષની હતી ત્યારે તેમની માતા મૃત્યુ પામ્યા હતા.