Han var sønn av amtmann Carl Sibbern og Agnes Louise født Kierulf, og yngst i søskenflokken.