Hans nevøer, sønner av broren Jakob, Johan Sverdrup og Harald Ulrik Sverdrup (1813–1891) var også politikere. Georgs søster, Elisabeth Sverdrup (1173-1865) var huslærer for sine nevøer Johan og Harald Ulrik. Elisabeth Sverdrup var selvlært innenfor flere akademiske fag og lærte seg dessuten tysk i København, og hun var sterkt påvirket av opplysningstidens ideer. Hilde Diesen mener det særlig var fra "tante Lise" at Johan Sverdrup fikk sine radikale ideer.