Han var sønn av Johann Siegmund Mann Jr. (1797–1863) og Elisabeth Marty (1811–1890), og hadde fire søsken. I 1862 overtok han firmaet som bestefaren hadde grunnlagt i 1790, . En måned senere døde faren, og 22 år gammel fikk han ansvaret for familien.