Han var sønn forretningsmannen Gabriel Schanche Kielland, og tok over handelshuset Jacob Kielland & søn etter sin fars død. Kielland ble i 1820 dansk visekonsul, og i 1821 ble han også britisk og russisk visekonsul. Han var også stortingsrepresentant i 1839.