In 1957, under anti-høyre-bevegelsen, forsvarte han Ding Ling, ble anklaget for , og ble i 1958 beordret i indre eksil av det kinesiske kommunistparti til gårdsbruk i det nordøstre Kina, fra 1959 videre til Xinjiang. Under kulturrevolusjonen ble han satt til den daglige rengjøring av felleslatrinene i en landsby med 200 innbyggere. Det var et anstrengende arbeide han måtte utfør i fem år, i 60 års alder. Underernæring gikk ut over hans helse, og han mistet langt på vei synet.