han jämte sin familj gripen och förd till fort Monroe , där han förblef i fängelse till maj1867