1953年7月，蔡塞尔被开除出政治局和中央委员会，被迫辞去部长职务。国家安全部也被降格为内务部下属的。1954年1月24日，蔡塞尔被开除党籍，划为托派、“全民公敌”，并失去了在人民议会的代表席位。他的妻子也失去了教育部长的职务。下台后，蔡塞尔在东柏林的马列学院从事翻译工作，以此度过晚年。1958年，蔡塞尔死于东柏林。1993年德国民主社会主义党为其平反。