。父谢斌，母吴上忍。兄长谢经、弟谢纶。小学就读南投公学校（今南投国民小学）。1928年，与兄长谢经考入台中州立台中第一中学校。毕业后，兄长进入台北高等学校，而后进入台北帝大医学专门部；谢纬连续二年高等学校入学考试落榜，1934年念台南神学院，受史怀哲、贺川丰彦等人的影响，以及该院院长巴克礼等人的薰陶。四年后进入东京医学专科学校，1942年从医专毕业后，曾在仙台市工作，受到美军空袭。战后1945年11月17日，与同在日本学医的表妹杨琼英在日本松崎町结婚，由中江英树牧师主持证婚。次年夫妻一起返台。谢纬接下父