Ulfstein er utdannet diplomøkonom og allerede før han la fotballskoene på hyllen hadde han begynt å jobbe i Terra Invest. Han har senere også blitt lokalpolitiker for Høyre.