英国接管新九龙及新界之后禁止当地私开石矿才消失。据宋王台公园《九龙宋皇台遗址碑记》记载，宋端宗朝廷在逃难到九龙城期间，曾在白鹤山行朝并以一块大石为御座，后人称此为「交椅石」，但该石现已不知所终。1950年代，当局移平白鹤山开发东头平房区，并兴建联合道。平房区已于2000年拆卸。