I november 1916 ble han valgt til visepresident i Dumaen. Samtidig inngikk han i en sammensvergelse sammen med dumaens president Aleksander Gutjkov og forretningsmannen Mikhail Teresjsjenko; deres plan var å tvinge tsaren til å gå av, og overlate tronen til sin bror storhertug Mikael Aleksandrovitsj. Planene var fremdeles under arbeid da de ble avbrutt av februarrevolusjonen.