I 2003, da administraturet Astana ble elevert til erkebispedømme, ble Peta den første erkebiskop der. Samme år ble han dessuten president for bispekonferansen i Kasakstan. I 2008 ble han av pave Benedikt XVI dessuten tilknyttet Kleruskongregasjonen.