Tornato dopo due anni ad Annapolis Maryland qui insegnerà la pittura a suo fratello James il quale anche lui diverrà un noto pittore. Preso dal suo interesse per il nascente orgoglio americano per l'indipendenza, nel 1776 si trasferisce definitivamente a Filadelfia che dagli indipendentisti era considerata la capitale. Partecipa alla Guerra d'indipendenza americana e partecipa a molte battaglie raggiungendo il grado di Capitano nel 1777. Diventa membro della Convenzione di Filadelfia e della Legislatura di Pennsylvania.