工程于1985年初完成，并于4月起入伙。房署原本计划是将第5、6及10座进行全面修葺工程，但因为维修第6座的费用严重超支，于是于1985年1月13日宣佈决定将第5座改为清拆重建（现今葵仁楼），结果第5座便成为首幢被拆卸的政府廉租屋，大部分居民获调迁至青衣长康邨康安楼及康盛楼。至同月23日，房署又宣佈将第8座，和相连的第9、10及11座清拆重建，惟当局推迟至葵仁楼（原第5座）及葵智楼于1987年9月入伙后，才宣告重新发展。葵芳邨第5和第6座之问题经验证后，发觉由于在建屋施工时偷工减料，令混凝土强度大幅