谕下令曹秀清带着婆婆与子女去台湾。最后曹秀清在台北菸酒公卖局制品厂找到管内部收发的差事，以微薄工资养一家七口，其间历经在美国半工半读的长子杜致仁因向蒋介石申请学费补助，却申请到金额相距甚远愤而吃安眠药自杀。在台湾生活惨澹的曹秀清因1957年女婿杨振宁获诺贝尔奖而改变，1958年曹秀清因在与蒋介石谈话中表示愿意影响杨振宁回台，「帮助蒋校长反攻大陆」而获准离台赴美，1963年，曹秀清回到中国大陆。1959年12月4日，杜聿明成为首批被特赦战俘，在北京中朝友好公社劳动。1961年3月，在周恩来授意下，杜聿明出