Kiedy Habsburgowie zaczęli okupować Azory i kiedy Antonio dopłynął na nie z grupką francuskich poszukiwaczy przygód na czele z Filippo di Piero Strozzim (był to florencki emigrant w służbie Francji), 25 i 26 lipca 1582 r. doszło do bitwy morskiej koło wyspy Terceira, w której Antonio został kompletnie zniszczony przez Álvaro de Bazána, pierwszego markiza Santa Cruz. W bitwie uczestniczyli m.in. portugalscy emigranci, jak też angielscy i francuscy poszukiwacze przygód. Po tej klęsce wrócił do Francji i zamieszkał na jakiś czas w miejscowości koło Paryża. Ze strachu przed zamachowcem wynajętym przez Filipa II do zabicia go, Antonio podróżował z jednego miejsca do drugiego, aż do momentu przybycia do Anglii.