Toe Agoeng die stryd laat vaar, het Joesoef nog byna ‘n jaar lank in moeilike omstandighede volgehou voordat hy deur sy dogter wat deur die Kompanjie gevange geneem is, oorgehaal kon word om sy keris aan die Hollandse goewerneur te oorhandig. Nadag die owerheid hom etlike jare in die Kasteel in Batavia aangehou het, is besluit dat dit veiliger sou wees om hom na Ceylon te stuur.
Ook daar is gevrees dat hy deur sy mense ontvoer sou word. In 1693 is hy met sy gesin, veertien vriende en ‘n paar bediendes in die Voetboog na die Kaap gestuur waar Simon van der Stel hom met die nodige eerbewys ontvang het.