หลังเหตุการณ์รัฐประหารในปี พ.ศ. 2490 นายแช่ม ต้องลี้ภัยการเมืองไปพร้อมกับ นายปรีดี พนมยงค์ ยังสิงคโปร์และสหรัฐอเมริกา และท้ายสุดไปอยู่ที่รัฐกลันตัน มาเลเซียซึ่งขณะนั้นเป็นดินแดนในอารักขาของอังกฤษและซาอุดิอาระเบียตามลำดับ จนกระทั่งเดือนมิถุนายน พ.ศ. 2497 ได้เดินทางกลับสู่ประเทศไทย เมื่อทางรัฐบาลขณะนั้นอภัยโทษให้ และมาใช้ชีวิตอย่างเรียบง่าย จนกระทั่งถึงแก่อสัญกรรมเมื่อวันที่ 24 กรกฎาคม พ.ศ. 2532 ด้วยวัย 88 ปี