Fylket ble grunnlagt 1. mars 1818 med fulle rettigheter etter utskillelse av områder fra Adams County og Clermont County. Brown County er oppkalt etter Jacob Brown som var offiser under den britisk-amerikanske krigen.