后来.在甲午更张以后回到加平乡第隐居。虽然被高宗任命了多种职务，但都推拒之。期间曾经上疏《时务十九条》，但并未被采纳。在1905年韩国与日本签订《乙巳条约》出卖国权以后，在家中痛曰“国亡矣，吾以世臣，殉之固当！”并乘马疾驰至首尔，至宫哭请韩皇将五名推动条约签署的大臣（后称乙巳五贼）处以极刑，并收回成命；而高宗以喉症不见。赵秉世便联结百官，在宫外共同向皇帝上疏，而他们哪怕被高宗罢免并待罪也不动摇。赵秉世后又被日本宪兵带至贞洞派出所扣押。他在被释放后至表勋院，并对各位大臣表明遗