Da han mislyktes i sine forehavender og dessuten var kommet i konflikt med den innflytelserike innenriksminister Aleksandr Protopopov ble han tvunget til å avgå i januar 1917, tre måneder innen februarrevolusjonens utbrudd. Etter bolsjevikenes oktoberrevolusjon i 1917 flyktet han via Finland til Frankrike. Der inntok han en fremtredende rolle blant de russiske emigrantene og fortsatte derfra sin kamp mot bolsjevikregimet ved å støtte den hvite armé og ivre for militær intervensjon av vestmaktene.