Jabarkan Tahun-tahun terakhir (1163-1165) dari István IV dari Hungaria

Seletah diusir, István mengunjungi Kaisar Friedrich sebelum berangkat ke Kekaisaran Bizantium, atau bergegas ke Sardica (sekarang Sofia di Bulgaria) untuk bertemu Kaisar Manouel. Di Sardica, ia mengusulkan untuk menerima suzerenitas Manouel I jika Kaisar membantunya mengembalikan mahkotanya. Kaisar Manouel "memberinya uang," dan memobilisasi pasukannya untuk menyerang Hungaria. Namun Kaisar segera "menyadari bahwa tidak mungkin bagi István untuk memerintah tanah bangsa Hungaria", dan menegosiasikan sebuah perjanjian damai dengan keponakan István di Beograd. Menurut perjanjian tersebut, sang Raja muda tersebut setuju untuk mengizinkan orang-orang Bizantium mengambil alih Sirmium dan bagian-bagian lain dari kerajaannya sebagai ganti Manouel yang menolak dukungan lebih lanjut untuk pamandanya. Ditinggalkan oleh pelindungnya, István IV mengirim utusan-utusannya ke Kaisar Friedrich I pada pergantian tahun 1163 dan 1164, di mana bantuan juga ditolak.

Keponakan István segera membatalkan perjanjiannya dengan Manouel I. István, yang tinggal di Anchialus di Laut Hitam (sekarang Pomorie di Bulgaria), menyerbu ke Syrmium pada musim panas tahun 1164, memenangkan banyak penduduk saat berbaris melintasi wilayah tersebut. Kaisar Manouel bergabung dengan István dalam serangannya ke Hungaria. István III muda menerima bantuan militer dari luar negeri, memaksa Kaisar Manouel untuk mengakhiri sebauh perjanjian damai dengannya, dan berjanji untuk tidak mendukung István IV di masa mendatang. Lagi-lagi melanggar perjanjian damai, István III dari Hungaria menyerang Sirmium pada musim semi tahun 1165, menyebabkan István menarik mundur ke benteng Zemun. István III mengepung benteng tersebut, dan menurut beberapa sumber, para penyerang menyogok "beberapa orang Hungaria yang melayani István" untuk meracuninya dengan racun lambat, yang mengakibatkan kematian Raja yang diturunkan takhtanya pada tanggal 11 April. Benteng itu segera jatuh, dan jenazah István "dibuang di depan gerbang kota" tanpa upacara pemakaman. Jenazah itu tergeletak di atas tanah sebelum dimakamkan di gereja yang didedikasikan untuk Santo Stefanus Protomartir di Zemun. Pada tanggal yang tidak ditentukan, jasad István dipindahkan ke Basilika Székesfehérvár.