天文13年(1544年)には細川内膳と膳因幡守を打ち破り勢力を拡大。