5年（1536年）出生，家中长男。幼名初千代。受室町幕府第12代将军足利义晴下赐偏讳，改名为晴久（在义晴死后，改名为阳久）。父亲实久为了争夺萨摩守护职，而与的岛津忠良、贵久父子对立，不过义虎反而作出顺从姿态。实久败于忠良父子后，在出水隐居。此后，迎岛津义久的长女于平为正室，以求和解，并在以后臣从（一说指，在实久与忠良父子战斗，一直至实久死去，在义虎一代才开始臣从）。另一方面，虽然向继承岛津宗家的伊作家臣从，不过经常独自作出行动。永禄6年（1563年），上洛并拜谒第13代将军足利义辉（义晴的儿子），得