永禄9年(1566年)に父から寵愛される弟・長忠(泰親)と家督を争うが、宿老・豊嶋美濃守らの味方により長忠が身を引いたため実権を得る事に成功した。