泰三年，上疏请纠察刑狱治理妖僧赵才、湖广副使邢端等，后均得准。当时建造东宫，林聪因反对，迁春坊司直郎。景泰四年（1453年），大学士商辂称其敢言，不宜置之散地，于是恢复为吏科都给事中。随后请减轻福建银场额重。景泰五年，以灾异偕同官条上八事，限制武清侯石亨、指挥郑伦等分田等。林聪最初弹劾吏部尚书何文渊下狱后致仕。之后弹劾山西布政使王瑛老等，均罢免。御史白仲贤擢广东按察使。林聪言其奔竞不当超擢，乃迁镇江知府。兵部主事吴诚夤缘得入吏部，因林聪弹劾，遂改工部。各司均忌惮林聪风裁，其所言未有不敢遵从的。内阁及诸御