。九月廿二，他和其他的宰相李游道、王璇、袁智弘、崔神基还有春官侍郎孔思元、益州长史任令辉，被酷吏王弘义诬陷。一起流放到了岭南。694年十月壬申，以文昌右丞李元素为凤阁侍郎（中书侍郎），右肃政中丞周允元检校凤阁侍郎，并同凤阁鸾台平章事。明堂县尉吉顼、合宫县尉来俊臣密告箕州刺史刘思礼、洛州录事参军綦连耀、凤阁舍人（中书舍人）王勮谋反。河内王武懿宗（武则天伯父武士逸的孙子）命刘思礼牵连朝廷官员，说这样可以免死。刘思礼诬告凤阁侍郎（中书侍郎）同平章事孙元亨、李元素、知天官侍郎事石抱忠、刘奇、给事中周譒及