这里作为宅第并赐给异母兄永平君，任命他来主祀全溪大院君；永平君的后代子孙此后住在这里，直到朝鲜日治时期。永平君的曾孙李海昇在日韩合併时被日本封为朝鲜贵族的侯爵，后因债务搬到西大门区居住。1930年，李海昇把楼洞宫卖给建筑师，所得给儿子、媳妇拿去建造首尔希尔顿酒店和；郑世权则把楼洞宫以二十坪为单位分割，规划成平民住宅区，之后演变成现在的益善洞韩屋村。