Han var sønn av skipsfører og proprietær Søren Paus (1745–1797) og Kristine Bøyeson (1758–1828), datter av Realf Bøyesen og Mette Grubbe. Faren døde på sjøen i 1797, da han var 13 år gammel.