James Colletts giftermål med Karen Leuch var innledningen til en tett forbindelse mellom slektene Collett og Leuch gjennom hele 1700-tallet. Hans sønn Peter Collett gikk i kompaniskap med Peder Leuch og dannet firmaet Collett & Leuch, som ble fortsatt av begge disses sønner. Hans sønnesønn var kjøpmann i Christiania James Collett (1728–1794), som ble gift med Karen Leuch (1733–1794) og oppførte Collettgårdens fløy mot Kirkegata. Deres sønn John Collett (1758–1810) overtok Collettgården og gården Ullevål i Aker. Professor Jonas Collett (1815–1851), gift med forfatteren Camilla Collett, var også etterkommer av den første James Collett.