Perdió el favor del Elector Juan Federico I de Sajonia, comenzó a tener mala salud, y fue depuesto en 1555 de sus cargos y rechazaron reinstituirlo, tras el coloquio de Eisenach (1556).