往任职。朝廷征召乐恢任议郎。当时车骑将军窦宪出征匈奴，乐恢数次上书谏争，朝廷表彰他的忠心，入朝担任尚书仆射。河南尹王调、洛阳令李阜与窦宪交情深厚，放纵不受拘束。乐恢劾奏王调、李阜，牵连到司隶校尉。乐恢检举都毫无忌讳，权贵们相当讨厌他。窦宪的弟弟夏阳侯窦瓌想与乐恢结交，乐恢谢绝不和他来往。窦宪兄弟行为放纵，又忿恨乐恢不依附窦氏。
乐恢谏言.乐恢的妻子每次都劝乐恢，认为古人都能容身避害，没必要以言取怨？乐恢感叹说他在朝为官不能空占着职位而不做事！乐恢上疏谏言：「臣听闻百位君王的过失，