往澳门交涉船只安排事务，后于回程时在珠江口因船只触及日军水雷引爆沉没，于海面漂流多时，终被来自龙穴岛的渔民救起。此后，梁加升因此际遇开始信仰佛教，并担任中国佛教会台湾省分会常务理事；此前，他曾受多位虔信基督教的同志影响而一度打算成为牧师，但也曾为开元寺的檀越。
战后生活.国民政府接收台湾后，梁加升随即加入中国国民党，并当选该党首届执行委员。1950年，梁加升参选台南市第一届市议员并落选。1952年6月2日，中华民国红十字会台湾省分会台南市支会正式成立，梁加升随即被指任为该会常务理事