渐渐康复，并开始学习绘画，在初中毕业考上了浙江美院附中。
前往内蒙古.吕嘉民早于学生时期首次引起当局负面的注意，在1964年因写下一篇评论而被受到谴责并被打成「反革命者」， 其父吕炳奎亦被红卫兵认为他走资本主义路线并被红卫兵打成右派，不过他之后仍决定加入红卫兵。虽然他加入了红卫兵，但当红卫兵开始没收「封资修」书籍并将其焚烧时，他经常将一些书收起，并加入其私人收藏。1967年他高中毕业，并于11月16日 应毛泽东「知识青年到农村去」的号召，自愿与其他知青（包括刘小佈及吕嘉民第一任妻子