通喜欢一位已撤退到台湾的护士，于是拿了十元银元加入中国青年军207师，从上海渡海到了台湾。1954年，韦政通因受劳思光的影响，辞去新闻工作，开始他卖稿维生的山居生活。韦政通得到《人生杂志》负责人王贯之的精神支持及发表机会，并在此时期积极听讲，从当代名家方东美、陈康、牟宗三等人修习哲学。当时因生活艰难，曾手抄罗近溪的《盱坛直诠》、王龙溪的《语录》，及牟宗三、唐君毅的早期文章；因购买陆九渊《象山先生全集》，而典当唯一的冬季西服。1957年，韦政通从台北市大屯山南下至南投县碧山岩的寺院安身，教授寺院比丘尼的文史课