土贼犹可，土兵杀我。」陈金虽然知百姓之患，但却仰赖土兵，于是不禁止。他又不能持廉，军资颇私入。所以虽然功劳很多，百姓仍然深怨他。后因攻打姚源贼时，作战失策，被给事中黎奭及两京言官弹劾，于是被召回，改以俞谏继任，陈金遂请终丧去。正德十年，再次起用担任两广总督。当时府江贼王公珣叛乱，陈金集诸道兵偕总兵官郭勋等分六路讨伐平定。后加少保、太子太保。正德十二年，许可佛朗机人进入广州，不久命令驱逐该批人物。正德十四年，掌都察院事。明世宗即位后，请老归乡。