Da de religiøse ordener ble utvist fra Frankrike, dro Gagarin til Sveits, men kom snart tilbake til Paris, der han døde.