930年代，由于远东形势的恶化，为了防止再次遭受一战时的挫折，永年人寿逐渐向海外转移资金。期间永年人寿向中国贸易公司出售公司大楼，随后该楼改称中贸大楼。二战结束后，宁绍轮船与三北轮船公司租用该楼，该建筑于是又改称宁绍公司大楼。1953年，上海各行业开展公私合营改造，三北轮船公司由此并入长江航运公司。1955年，永年大楼的产权移交至上海市房地局，并由房地局出租给培高钟厂作为作业车间使用，因此该楼这段时间也被称为培高大楼。后来，该楼划给上海市轻工业局使用，作为该局的老干部活动室。1992年，由中国工商银行和法国