Buchardt ble født i Drammen, men hadde store deler av sin oppvekst på Nesodden og i Brumunddal. Han er utdannet diplomøkonom ved Handelshøyskolen BI. Han har vært gjennom to ekteskap, med blant andre Wenche Myhre som han var gift med i fire år.