备前军记》记载，直家称自己为了报仇，故意装笨，等候时机到来，凭籍其母是浦上宗景的侍女的关系，一定能够出仕于浦上，那时候岛村也杀不了我。最终，在天文12年（1543年），直家开始出仕于宗景。同年，赤松晴政攻佔了宗景在播磨的城砦，宗景亦派兵还击，这亦是直家的初阵。翌年，直家元服，获赐邑久郡乙子村（现冈山县冈山市东区乙子）300贯宛行地，及后兴建了，并且获宗景下赐足轻300人，在16岁、17岁时就任了乙子城主。当时，能家时代的家臣、和再次效力于宇喜多氏，成为直家的家臣。天文14年（1545年），有谣传浮田国定与备