港便成了南洋华侨以及大陆贸易商人和英国以及中国贸易之地。太平天国战乱期间，不少来自中国大陆的人来港定居，使香港多了一班常住居民。那时的香港，英国人发展重点只于在政治营商中心地区，如中环，英语作为各族裔的沟通语言，但这些来自各省籍和各族裔，2％左右的外国人、英国人和印度人在同族沟通时，均会用自己的方言沟通。而其他区域，由于政府从没积极作社会规划，所谓地区发展，只是纯粹一些硬件建设，之后就让人口自动聚落，因此引起日后不同省籍/地区的纷争。由于开埠时劳动人口需求大，吸引了大量由粤、闽、潮汕等附近省籍来港谋