Også jesuittenes store bibliotek, Bibliotheca Zi-Ka-Wei, ligger i Xuhui. Man finner også vel bevart tidligere bosteder til personligheter som Song Qingling og Sun Yat-sen.