随后，他又被转送内湖，再被以中海级战车登陆舰送往绿岛。在抵达后，由于新生训导处的屋舍仍在兴建，他被迫参与兴建工程，并在与工程承包商互动中学会闽南话，又由其供应食物。在设施逐渐完备后，他开始被要求在早餐后参与小组讨论，熟悉三民主义、国父遗教、实业计画及《毛泽东批判》等内容，并得注意其谈话内容，以免遭到关在碉堡里惩罚。因为不想参与人事争斗，他在生产班成立后即加入其中，开始学习种植蔬菜，以供应日常生活所需。此外，他还在岛上结识多位台湾籍狱友，并向他们学习闽南话与日语。1954年，他终于获知可以保释出狱，并在陈绍平