Jens var sønn av distriktslege Frants Christian Raabe (1820–1885) og Augusta Donata Mathilde Friis (1827). Han var bror til skolemannen Halfdan Raabe (1852–1945) og ble gift med Anna Amalie Louise von Hanno (1865–1935; se von Hanno for hennes slekt) som var sangpedagog. Sønnen Anton Frantz Christian Raabe (1889–1959) ble lege og en tid gift med skuespilleren Tore Segelcke, mens sønnen Gunnar Raabe (1896–1969) ble forfatter og inspektør i Turistforeningen.