Det påfølgende året møtte Afonso V og sønnen Johan kong Ferdinand II av Aragón, ektefelle av Isabella I av Castilla, i slaget ved Toro. Slaget fikk ikke avgjørende militært resultat da begge sider krevde seieren. Høyreflanken til kongedømmet Castilla ble beseiret av styrkene til prins Johan som besatte slagmarken, men soldatene til Afonso V ble beseiret av venstre og midtflankene til Castilla av hertugen av Alba og kardinal Mendoza. Den politiske effekten ble imidlertid stor for de katolske monarkene ved at det sikret Isabella tronen til kongedømmet Castilla. Afonso V dro til Frankrike for å søke støtte hos Ludvig XI av Frankrike, men ble holdt for narr av den franske kongen. Han kom deprimert tilbake til Portugal i 1477. I hjemlandet ble han ytterligere deprimert, såpass at han abdiserte til fordel for sin sønn Johan II av Portugal fra sitt første ekteskap. Han trakk seg tilbake til et kloster i Sintra hvor han døde i 1481.