Σε νεαρή ακόμα ηλικία καταδικάστηκε σε θάνατο, αλλά ένας ισχυρός Οθωμανός της περιοχής, ο Δελή Αχμέτ, αφού τον λυπήθηκε και μεσολάβησε ώστε να του χαρίσουν τη ζωή, τον πήρε στην υπηρεσία του. Όταν ο Δελή Αχμέτ έγινε κλέφτης τον πήρε μαζί του ως πρωτοπαλίκαρο. Πεθαίνοντας ο Τούρκος κλέφτης, ο Πανουργιάς πήρε τη θέση του και συνεργαζόμενος με τον Ανδρέα Ανδρούτσο έλαβε μέρος στις επιχειρήσεις του Λάμπρου Κατσώνη την περίοδο 1770-1792 του Ρωσσοτουρκικού Πολέμου και των Ορλωφικών. Το 1813 ο Αλή πασάς, για να απαλλαγεί από τον επικίνδυνο αυτό κλέφτη, τον διόρισε αρματολό της Αμφίσσης, αλλά γρήγορα τον αντικατέστησε με τον Σουλιώτη Λάμπρο Κοσμά. Από το 1817 έως το 1820 ο Πανουργιάς έζησε στα Ιωάννινα, επιτηρούμενος από τον Αλή Πασά, ο οποίος στη διαμάχη του με τον σουλτάνο, του δίνει την άδεια να επιστρέψει και να αναλάβει ξανά το αρματολίκι των Σαλώνων.