需要清退更多土地。时任内阁首辅的李春芳也致书海瑞，却想不到，海瑞坚持要徐阶继续清退土地，他在回复的书信内例举了徐阶以前在当地针对水灾等事的功劳，说为了徐阶“百年后得安静”，最好清退一半的土地，以免“群小”的骚扰。徐府此时也因大量诉讼者而被烦扰不堪。后来给事中戴凤祥等人也上疏弹劾海瑞，戴凤翔在疏内认为海瑞“鱼肉缙绅”，尽管有为国为民之心，但是做事太过急躁。最后海瑞被罢免。
争议.徐家在海瑞就任时所拥有的土地数目有多种记载，少则二、三万亩，多则四、五十万亩。
高