Francis Kjeldsberg var sønn av kjøpmann, bankdirektør og britisk visekonsul Rasmus Flor Kjeldsberg og hans engelskfødte hustru Harriet Southern. Familien fikk dermed en stor venne- og bekjentskapskrets i Storbritannia, noe som også fikk betydning for forretningsvirksomheten. Hjemmet tok også gjestfritt imot engelske laksefiskere og jegere som kom til Trøndelag.