在公事上勤奋又恪守职责，甚得朝野称誉，但贾充和他的朋党指任恺和立进令刘友勾结，尚书杜友和廷尉刘良以理为任恺申诉，最后二人和任恺竟然都被免官。任恺再次丢官，十分不快，纵情于酒乐，一顿饭用了万钱。此时任恺得到皇帝朝请，司马炎慰问他，任恺只得哭泣。后任太仆，转太常。
失志忧死.太康四年（283年），尚书左仆射、右光禄大夫、开府魏舒加领司徒，接替逝世的山涛，命任恺为魏舒授官。魏舒昔日得任恺举荐提拔，今天魏舒贵为三公之一，任恺只任散卿，尚未曾登三公之位，众人都为任恺感到不值；任恺感到很不得志