914年，他毅然辞职离开交通部，但继续留在北京，自己创办一份英文报纸——《京报》（Peking Gazette）担任总编辑，鼓吹革命，言论激进，一度被袁世凯通缉。经常发表与政府不同的意见。1917年5月19日，英文《京报》在1917年5月18日刊载段祺瑞与日本接洽一亿元借款（二千万由日人代行整理兵工厂，八千万请日本军官练兵），指日本参谋次长田中义一来华，与此事有关云，主笔陈友仁因发表批评段祺瑞文章「出卖中国」，以妨碍公务罪被捕入狱四个月，报纸也被查封。此案最后导致总统黎元洪罢免段祺瑞的国务总理职务。