却执意议和，七月，十朋遂辞官归乡。次年夏天，以集英殿修撰起知饶州，干道元年（1165年）七月，移知夔州，八月起知泉州，任内重视农田水利，爱民如子，干道六年闰五月，泉州任满之日，“父老儿童攀辕者不计其数，公亦为之垂涕，至今最人犹怀之如父母。”，泉人为立生祠。一生清廉，三餐常不饱。夫人贾氏出身乐清望族，死于泉州，竟无力归葬，灵柩停放二年。干道七年（1171年）三月陈太子詹事，病重，以龙图阁学士致仕，七月卒于左原。赐谥号忠文。泉州人在东街建“王忠文祠”(又名梅溪祠)以纪念。戏曲《荆钗记》借用了他的名字