King werd geboren in een welvarende koopmansfamilie. Het gezin had te maken met veel jaloezie van buren. Bij rellen rond de aanname van de Stamp Act in 1765 werd hun huis aangevallen en een groot deel van het interieur vernield. Een jaar later werd een schuur afgebrand. Na het uitroepen van de Amerikaanse onafhankelijkheid koos vader King de zijde van Groot-Brittannië, terwijl al zijn zonen sympathiseerden met de patriotten.