Tatăl ei a participat la Bătălia de la Trafalgar sub comanda amiralului Nelson în funcția de căpitan al navei "HMS Africa". Bunicul matern al lui Jane Digby a fost Thomas Coke, Conte de Leicester. Pamela Churchill Harriman (nora lui Winston Churchill) a fost stră-strănepoata lui Jane Digby.