Ulrich Fredrich ble den 26.2.1793 gift i Porsgrunn med Benedicte Henrikke Aall (født 1772 og død 1812). Hun var datter av Nicolai Benjamin Aall (1739–98), som var kjøpmann i Porsgrunn og eier av Ulefos Hovedgaard. Hun var søster av Jacob, Niels og Jørgen Aall. Stattholder Severin Løvenskiold var deres fetter gjennom hans mor, Benedicte Henriette Løvenskiold født Aall.