Han var farfar til Oluf og Carl Abraham Pihl. Sønnen Jacob var også astronom. Datteren Magdalene Cathrine (1787-1843) var gift med Claus Bendeke, eidsvollsmann og embetsmann.