Dulkadiroğlu Beyliği'nin ilhakından sonra İstanbul'a dönen Sultan Selim, gerek Çaldıran öncesi, gerekse Amasya'da asker tarafından yapılan yağma, serkeşlik ve isyan hareketleri üzerine bazı tedbirler alıp derhal uygulamaya koyma zaruretini duymuştur. Askeri tam bir disiplin altına alıp Yeniçeri Ocağı'nı ıslâh etmek amacıyla, Ocak üzerinde an'ane gereğince büyük bir nüfuzu bulunan Ocak ihtiyarlarını huzuruna çağırarak Amasya'daki itaatsizliğin müsebbiblerinin kimler olduğunu sormuştur. Bunlar, yine Ocak anlayış ve yardımlaşması gereği olarak "Cümlemüz mücrimüz, devletlû Hüdâvendigâr'dan afvumuzu reca eylerüz" diye cevap vermişlerdir. Padişahın devlet ricalini bu yolla sorguya çekmesi sonucu ortaya bir takım isimler çıkarmış; bunlardan Kadıasker Tacizade Cafer Çelebi, ikinci vezir İskender Paşa ve Sekbanbaşı Balyemez Osman Ağa'nın da dahil olduğu devlet adamları isyan teşvikçileri olduklarından idam edilmiştir. Bunu müteakip Sultan Selim, Yeniçeri Ocağı'nın ıslahı için, ihtiyarlarla anlaşıp bazı tedbirler almıştır. Buna göre, bundan böyle Yeniçeri Ağası saray tarafından, Ocak Erkân-ı Harbiyesi de saltanat makamınca tayin edilecekti. Bu suretle, yüksek kumanda heyetini, daha sıkı bağlarla saltanat makamına bağlamıştır.