Al morir Isabel I y ser regente de Castilla, fue expulsado de Castilla y visto como un intruso.