Ο Χρυσόστομος ανέπτυξε συνεργασία με την Δημογεροντία της Δράμας και οργάνωσε σώματα Μακεδονομάχων, ντόπιων αλλά και προερχόμενων από την ελεύθερη Ελλάδα. Επίσης, η αλληλογραφία του Χρυσοστόμου με τον Οικουμενικό Πατριάρχη, τους Προξένους αλλά και τις Ελληνικές Αρχές, ήταν συνεχής με σκοπό να γίνουν γνωστά τα μαρτύρια των Ελλήνων της Μακεδονίας, από τους κομιτατζήδες, και να συγκεντρωθεί η απαραίτητη βοήθεια.