皇太后谢道清、太后全氏和其孙宋恭帝被元朝政府北迁至元大都，赵与芮、黄定喜夫妇同行。赵与芮为宋室中辈份最高，主动将其财产献给元政府，因此被掳至大都的宋宗室皆被善待。至元十五年（1278年），元世祖忽必烈授宋福王赵与芮金紫光禄大夫、检校大司农、平原郡公。元朝至元二十五年（1287年），赵与芮薨逝，享寿八十。