马越推荐光逸，司马越认为他是寒门而不召。司马越后来在闲宴上责怪胡毋辅之无所举荐。胡毋辅之说：“之前举荐光逸，公以非世家不召，不是我不举荐。”于是光熙元年（306年）八月司马越就征辟光逸。文书到郡县，郡县都以为发错了，知道是征辟光逸，就备礼遣之。与雍州刺史王澄亲善。不久因天下大乱，避乱渡江，又依附胡毋辅之。初到时，正逢胡毋辅之与谢鲲、阮放、毕卓、羊曼、桓彝、阮孚散发裸袒，闭门酣饮已多日。光逸将要推门而入，守门者不让，光逸就从户外脱衣露头从狗洞中窥探而大叫。胡毋辅之惊道：“他人决不能如此，必是孟祖。”急忙唿入，