字辈以下有贤德的人视为亲王，使他们为官治民，也作为皇储备选，以待皇嗣出生，退回藩服。疏上，宋高宗大叹感悟，富直柔同意推荐，召赴行在，担任监察御史。于是赵伯琮封为普安郡王，后来得以被立为皇子、皇太子并继位为宋孝宗，是因为娄寅亮之言。担任同知枢密院事。侍御史沈与求弹劾富直柔附会辛道宗、辛永宗兄弟得以进位，又弹劾他所推荐右司谏韩璜。之前，富直柔曾经在皇帝面前揭发吕颐浩的短处，吕颐浩与秦桧都忌恨他，于是二人一起罢免，韩璜贬为监浔州酒税，富直柔以本官提举洞霄宫。绍兴六年（1136年），为生母丁忧。起复为资政殿