Trong những năm sau đó, ông bị đày qua nhà đày Buôn Ma Thuột, rồi ngục Trà Khê. Mãi đến ngày 9 tháng 3 năm 1945, Nhật đảo chính Pháp, ông cùng các đồng chí của mình vượt ngục Trà Khê, trở về quê nhà tại làng Quỳnh Đôi, Nghệ An. Bấy giờ, Chính phủ Trần Trọng Kim có mời ông ra làm cố vấn, nhưng ông dứt khoát từ chối.