当时五条港的各港，均有各姓氏之族人分据工作地盘，并各自建立庙宇。泉州沙美的卢姓在南河港建立此庙；泉州石湖的郭姓在南河港建立西罗殿；泉州晋江的许姓在南势港建立金华府；泉州晋江前埔及泉州石狮大崙的蔡姓在佛头港建立聚福宫；泉州石狮塘后的黄姓在新港墘港建立集福宫。后因黄府千岁神威显赫、泽及万民，因此香火日渐鼎盛，其庙体已不敷使用，于是众信徒在得到黄府千岁同意后买下隔壁的民宅作为庙地，并开始进行重建之工程；新庙即为现况，庙体则遵从黄府千岁指示面向和平街(原南河港堤道，即南河街)及仁爱街（看西街）之交叉路口，于