Han var sønn av sekondløytnant Hans Edward von Hoff (1730–1779) og Cathrine Koppe og nedstammet fra en slekt som på 1600-tallet var innvandret til Danmark fra Bøhmen. Hans farfar var Christian von Hoff (1690-1746) (mor: Cathrine von Horn) og hans farmor var Maria Margrethe Londemann af Rosencrone (1711-62), en halvsøster av den barnløse utenriks- og statsminister Marcus Gerhard Londemann de Rosencrone til Rosendal og en datter av sogneprest og godseier Edvard Londemann af Rosencrone (1680-1749) og 1. hustru Marie Christine Pedersdatter Wielandt (+ 18. mai 1721), som han hadde blitt gift med i 1706. Sognepresten ble andre gang gift i 1737 med Anna Christine Nyegaard (1711-43), enke etter biskop Marcus Müller (1684-1731), og med henne ble han far til ovennevnte Marcus Gerhard Londemann de Rosencrone (1738-1811), som ble gift i 1773 med Agnete Marie Hielmstierne (1752-1838).