以陈、吴、李三姓为主，村民自南宋后迁入围村现址一带居住，元朝（1352年）时立村，定名为「衙前村」，多个世纪以来以捕鱼为业。清朝海禁令实施时，村庄被弃，吴姓族谱中四代祖先无从稽考，直至1724年才定居下来。今日村庄面向的新蒲岗，昔日仍未填海，村民常受海盗滋扰，在村庄加建围墙在原址重建家园，故有「衙前围村」之称。村中央正是天后庙，约18世纪或更早时兴建；围村正门有「庆有余」牌扁，村民声称是由皇帝所赐，惟不可考。全盛时期，衙前围村与沙浦村、衙前塱村、隔坑村、石鼓垄村、打鼓岭村、大磡村，联成一线，合称「衙