指永安堂大厦在解放军进驻广州后，就被部队佔用四层，水电开支均要永安堂自己承担，更令永安堂损失租金收入，还影响到药业生意下滑。同年4月17日，胡文虎派员到广州缴付了四亿五千万人民票，还缴付了「欠税」总额百分之二十作「罚金」。后来胡文虎被中国共产党指为「汉奸」，永安堂顺势就被列为「敌产」而被充公，成为广东省总工会所在地，钟楼上的「虎标永安堂」五字被毁。1960年代，永安堂前的程璧光像被毁，换成今日见到的工人雕像（陈本宗、凌镇威合作的《创业者》）。1994年，广东省人民政府决定将永安堂产权归还胡文虎之女胡