1911’de Trablusgarp’ın işgali üzerine İbrahim Hakkı Paşa, Mahmud Şevket Paşa ve tüm İttihat ve Terakki destekli kabinelerin itham edilmesi teklifinde bulundu. 7 Haziran 1912’deki Hürriyet ve İtilaf Kongresi’nde kongre başkanlığına seçildi. İttihat ve Terakki destekli Mehmed Said Paşa’nın sadrazam olduğu hükûmetin düşmesi ile sonuçlanan Halâskâr Zâbitân müdahalesini destekleyen siyasetçiler arasında yer aldı. Bâb-ı Âli Baskını akabinde tutuklandı; ancak siyasetten uzak duracağına dair verdiği teminat üzerine serbest bırakıldı. Mahmud Şevket Paşa Hükûmeti kurulunca bu hükûmeti ortadan kaldırmak için Taklîb-i Hükûmet teşebbüsü içerisinde de yer aldı. Mahmut Şevket Paşa’nın öldürülmesi sonrasında gıyaben idamla cezalandırıldı. I. Dünya Savaşı sırasında Mısır’da el-Ahram, Selanik’te ise Beyanü’l Hak ve Mücahede gibi gazeteler çıkararak muhalefetini sürdürdü. Mondros Mütarekesi’nin imzası akabinde 24 Şubat 1919’da İstanbul’a döndü.