På 16- og 1700-tallet var slekten Paus Kviteseids fremste slekt og inntok de fleste statlige embetene der i lange perioder; slekten kom til Kviteseid med Peder Povelsson Paus fra Oslo som ble sogneprest i Kviteseid og prost i Øvre Telemark i 1633. Sønnesønnen Hans Povelsson Paus som også var sogneprest i Kviteseid var den første som brukte telemarksdialekt i skrift i visen , skrevet på kviteseiddialekt. Peder Hansson Paus flyttet setet for Øvre Telemark sorenskriveri, i dag Vest-Telemark tingrett, til hjembygda Kviteseid i 1723, og Kviteseid ble det viktigste administrasjonssenteret for Øvre Telemark. På 1800-tallet var den kjente folkeminnesamleren Magnus Brostrup Landstad i noen år sogneprest i Kviteseid.