Le colonel mène un recul vers les lignes de défenses préparées près du pénitencier, sous la protection des navires de guerre de l'Union. Les troupes confédérées arrivent sous le feu des canonnières. La canonnière bélier confédérée Arkansas arrive peu de temps après mais ses moteurs cassent juste () en amont de la ville. Son commandant donne l'ordre de le saborder en le brûlant pour éviter la capture. Sans espoir de soutien naval, Breckenridge est incapable d'attaquer les positions de l'Union et se retire. Les troupes de l'Union évacuent la ville une semaine plus tard, inquiets de la sécurité de la Nouvelle Orléans, mais y retournent à l'automne. Les confédérés occupent Port Hudson, qu'ils tiennent pendant près d'une année.