Christian Fredrik var sønn av Peter Wølner Arbo (født 1758–1929) og Louise Irgens (1767–1843). Sammen med ektefellen Marie Christiane Collett, f. Rosen (1796–1886) fikk han barna: Peter Nicolai Arbo, Carl Oscar Eugen Arbo, Christiane Louise som ble gift med Svend Adolf Solberg og Jenny Arbo (1830–1907). Jenny Arbo kjøpte ut de andre arvingene etter foreldrene i 1887 og var så eier av gården frem til sin død i 1907.