攸绪至，更换官服。仪仗接入宫中，通事舍人赞礼让他就位，武攸绪趋步到官员的常班再拜，中宗愕然，问道礼没有举行，朝廷剩下都很感叹。赐予的财物不受，亲贵来见，除了嘘寒问暖外，不再说其他话。回去后，中书、门下、学士、朝官五品以上，都在城东为他送别。武三思、武延秀诸武与韦后、韦温等诸韦被诛，这些政变因为武攸绪隐居不参预，被时论称道。唐睿宗即位，恐其不自安，下诏安慰他。征召他为太子宾客，没有就任。谯王李重福之乱，武攸绪被诬陷而下狱，张说上表请把他安置在庐山，中书令姚元崇上奏：「武攸绪在则天时没有出来违规，现在州县逼