En los primeros años del siglo XX, el duque mantenía una relación con Katherine Elkins, hija del acaudalado senador estadounidense Davis Elkins, pero el primo hermano del duque, el rey Víctor Manuel III, se negó a concederle el permiso para casarse con una plebeya.