奎璧、自治区副主席吉雅泰等人受株连。1966年7月2日，正值文化大革命开始，国家主席刘少奇、中央书记处负责人邓小平代表中共中央找乌兰夫谈话，指责乌兰夫不搞阶级斗争，犯了地方民族主义和修正主义的严重错误。1966年8月初，改组中共唿和浩特市委，第一书记李贵被批判。成立内蒙古党委文革领导小组、四清领导小组和生产领导小组，取代原有的党政领导机构。1966年8月16日，中共中央批准撤销乌兰夫内蒙古党委第一书记、华北局第二书记职务。此后乌兰夫被软禁在北京，不得返回内蒙古。乌兰夫是在文革期间最早被罢黜的地方高级官员