宜置之散地，于是恢复为吏科都给事中。随后请减轻福建银场额重。景泰五年，以灾异偕同官条上八事，限制武清侯石亨、指挥郑伦等分田等。林聪最初弹劾吏部尚书何文渊下狱后致仕。之后弹劾山西布政使王瑛老等，均罢免。御史白仲贤擢广东按察使。林聪言其奔竞不当超擢，乃迁镇江知府。兵部主事吴诚夤缘得入吏部，因林聪弹劾，遂改工部。各司均忌惮林聪风裁，其所言未有不敢遵从的。内阁及诸御史亦并以林聪好论建，并非善臣。同年冬，林聪甥陈和为教官，欲得近地便养，林聪对吏部官吏陈说此事。御史黄溥等遂劾林聪挟制吏部，加之此前得罪的众多官运均弹劾，