Sin embargo, cuando Alfonso X de Castilla subió al trono Diego López III fue desplazado del poder, a pesar de que continuó siendo alférez del rey hasta 1254, en beneficio de Nuño González de Lara ""el Bueno"", señor de la Casa de Lara y enemigo tradicional del señor de Vizcaya.