Han var sønn av departementssekretær i Admiralitetet, etatsråd Johan Christian Grove (1713-1784) og Mette, født Æreboe (1733-1789), datter av notarius publicus Rasmus Æreboe.