После смерти султана Селима Пири Мехмед-паша оставался в должности великого визиря ещё три года. В 1523 году Сулейман Кануни отправил Пири-пашу на пенсию. Незадолго до этого Пири Мехмед участвовал в двух важных событиях: завоевание Белграда и завоевание Родоса. Кроме того, Пири-паша настоял на развитии морского флота. Поводом для отставки послужил возраст Пири Мехмеда. На своё место он рекомендовал второго визиря Ахмеда-пашу. Но Сулейман решил иначе, и пост великого визиря занял Паргалы Ибрагим-паша.