文会的伯父宇文什肥为邵景公。因宇文什肥独子宇文胄被北齐扣押，宇文会被出继为宇文什肥的嗣子，袭为邵国公，拜骠骑大将军、开府仪同三司。裴镜民曾任他的记室参军。二年（562年）六月，除授蒲州潼关六防诸军事、蒲州总管。宇文护诸子的衣服、珍玩都奢靡得逾越制度。天和五年（570年）二月，周、齐通好，宇文胄从北齐回国，袭邵国公，宇文会改封谭国公。六年（571年）正月，宇文会被进为柱国。五月，皇弟大司马宇文宪攻打被北齐所占的姚襄城，齐军固守，宇文宪命宇文会筑石殿城，以援救被围的汾州。最后周、齐各自退军。建德元年