夫妇二人亦同被关进牢狱达四年。1982年，杨宪益发起并主持了旨在弥补西方对中国文学了解的空白“熊猫丛书”系列，重新打开了中国文学对外沟通窗口。这套丛书里，既有《诗经》、《聊斋志异》、《西游记》、《三国演义》、《镜花缘》等中国古典文学经典，也收录了《芙蓉镇》、《沉重的翅膀》以及巴金、沈从文、孙犁、新凤霞、王蒙等人的中国现当代文学作品。1986年冬，杨宪益加入中国共产党。1989年，六四事件发生后，杨宪益接受英国广播公司采访，谴责当局血腥镇压，随后宣布退出中国共产党。1993年，杨宪益获香港大学