Han var far til Carl Konow (1806–76) og Wollert Konow (1809–1881), og farfar til Harald Georg Christian Konow (1841–83), Wollert Konow (S.B.) (1845–1924) og Wollert Konow (H) (1847–1932).