Entre Álvar Gómez y el monarca surgieron importantes desavenencias políticas, que finalmente se resolvieron a favor de Pedro Arias Dávila (¿1460?–1531), señor de Puñonrostro, quien, siguiendo órdenes del rey, puso sitio al castillo y tomó posesión de su área de influencia.