En 1864, Hagerstown fue invadida pro las tropas confederadas y la ciudad debió pagar un rescate para evitar ser destruida.