Desde 1607 hasta 1610, Xu se vio obligado a retirarse del trabajo público, y regresó a su casa en Shanghai.