Young pertenecía a una familia cuáquera de Milverton, Somerset, donde nació en 1773 siendo el más joven de diez hermanos.