With hadde i årenes løp verv blant annet i bispedømmeråd, Bispedømmerådenes fellesråd, Norges kristelige ungdomsforbund, Det norske misjonsselskap, Den norske Israelsmisjon, Avholdsfolkets Landsnemnd, Menighetsfakultetet, avisen og Nord-Norgeslaget i Oslo.