加升积极协助被日本政府征召的台籍军伕及护士自中国大陆返回台湾；1945年11月29日，他乘昌明轮前往澳门交涉船只安排事务，后于回程时在珠江口因船只触及日军水雷引爆沉没，于海面漂流多时，终被来自龙穴岛的渔民救起。此后，梁加升因此际遇开始信仰佛教，并担任中国佛教会台湾省分会常务理事；此前，他曾受多位虔信基督教的同志影响而一度打算成为牧师，但也曾为开元寺的檀越。
战后生活.国民政府接收台湾后，梁加升随即加入中国国民党，并当选该党首届执行委员。1950年，梁加升参选台南市第一届市议员并落选