塞特又担心艾哈迈德可能会杀害自己而夺位，所以他禁止艾哈迈德进入君士坦丁堡。这时，塞利姆由克里米亚回来，他得到禁卫军的支持，打败及杀死了艾哈迈德。巴耶塞特在1512年4月24日退位。巴耶塞特离开首都，前往出生地方隐居，却于途中去世，死后葬于今伊斯坦堡的巴耶塞特二世清真寺旁。