Frederik Vilhelm giftet seg 27. november 1694 med Sophie Amalie Ahlefeldt, datter av storkansler Frederik Ahlefeldt i hans ekteskap med grevinne Maria Elisabeth av Leiningen-Dagsburg-Hardenburg (1648-1724). De fikk sammen 5 barn, hvorav sønnen Christian August etterfulgte faren som hertug.