Frederik var gift to ganger, hans første ektefelle var Louise av England (1724–1751) og etter hennes død giftet han seg med Juliane Marie (1729–1796). Begge ektefellene ligger i kapellet.