Rowsburg ble opprettet i 1835 av Michael D. Row og ble navngitt etter ham. Et tidligere navn benyttet for Rowsburg var Rows. Et postkontor kalt Rows ble etablert i 1840 og var i drift til 1905.