I 1868 trakk Zwijsen seg som erkebiskop av Utrecht, men forble biskop av bispedømmet 's-Hertogenbosch inntil sin død i 1877.