东晋末年，地方民变首领卢循在刘裕率兵征讨之下，率其部下逃亡至大屿山定居。有文字记载之内地移民活动始于东晋。其后香港地区历南朝及隋朝政权的管治。唐代，随着广州对外贸易的发展，香港地区开始有较明显的发展。中国文献中最先出现之香港地名要算《新唐书》记载之「屯门」，由于地理位置优越，成为广州对外交通重要港口，西方来华商船多数先集中屯门，然后北上。文献表明，唐代设置屯门镇。唐玄宗开元二十四年（736年），香港境内设立屯门军镇，派员2,000驻守来保护海上贸易。唐肃宗至德二年（757年）起，香港地区改属东莞县管辖。