25年又令里士满公爵亨利·菲茨罗伊从霍华德手中抢去了海军大臣的职位。连遭挫败的诺福克公爵因此1525-1528年都很少在王廷露面。1520年代中叶，诺福克公爵的外甥女安妮·博林获得了亨利八世的垂青，他的政治生命因此焕发了第二春，为了让国王和王后阿拉贡的凯瑟琳的婚姻无效而努力奔走。到1529年，国家大权逐步落入诺福克公爵，萨福克公爵和博林家族手中，他们携手促使国王免去沃尔西的职务。同年10月，诺福克和萨福克受国王之命收回了沃尔西掌管的玉玺；11月沃尔西就因叛国罪的名义被逮捕，但未及审判就在狱中去世。沃尔西