Kleppe var sønn av advokat Knut Sigurd Kleppe (1897–1980) og husmor Nathalie Mathilde Andersen (1896–1973). Han var fra 1951 gift med den svenskfødte redaktøren og ingeniørdatteren Margaretha Ström (1917–1997).