是出知鼎州。升迁为给事中。医官、团练使王继先以皇帝推恩转任防御使，依法当回授，得旨特换武功大夫。富直柔议论道：“王继先以计换授，换授之后，转行官资，授任差遣，更没有阻碍。而且武功大夫只有战功、历边任、有材能勇武之人可以升任，不可以轻授。”皇帝对宰相范宗尹说：“这次任命出自朕意。现在富直柔抗论，朕愿屈意听从，以伸直言之气。”建炎四年（1130年），转任御史中丞。富直柔请罢右司侯延庆，以苏迟代替他，皇帝说：“台谏以拾遗补过为职，不应当推荐某人为某官。”于是侯延庆改任礼部员外郎，而苏迟为太常少卿。十月