Ye tornò in Asia solo dopo il 1931, anno dell'Incidente di Mukden e dell'immediatamente successiva invasione della Manciuria da parte dell'Impero giapponese. Nell'autunno del 1932 andò a nascondersi a Macao.