在1980年前已抵港的上海人以及吴人在数只佔现今吴人的较少部份。
色情行业、上海街以及小上海.满清灭亡前，香港很少上海人。香港在二战前已经有一定数量上海人，主要从事色情以及娱乐行业，经营夜总会等，主要聚集于上海街一带，此街贯通佐敦站到太子站横跨四个港铁站的一条长街道，亦因为大量上海人聚集而成名，此地带的色情街道亦有「小上海」之称，连街道亦以上海命名(在香港的「上海」一词不但代表上海的事物，更多时代表了色情)，在1970年前这儿不少上海人亦以上海话沟通，亦是上海人的主要聚居地，而现今