年代起迁往内地后空置，并在1997年电影《十万火急》于该厂拍摄戏中最后的大型爆炸及火烧场面后，清拆及重建成现时的翠丰台；四至六厂亦于2008年停止纺纱事务，将厂房转为货仓。
活化.2014年，南丰集团宣佈将活化南丰纱厂，耗资7亿港元将总楼面面积26.4万平方呎的四厂、五厂及六厂改建成单一建筑群，并在翻新活化工程后在2018年12月6日开幕。活化工程中，纱厂过去的部分特色及设计（如保留旧有绿色油蹟的墙身、选用旧式铁框窗户等）获得保留，而当中也有就旧有结构进行加固工程，并加入了玻璃