居于洛阳，终世宗之世，未尝再到过京师。朝廷以「国舅」的礼节待他，柴守礼也非常恣横，曾经杀人于市，有司奏闻，而世宗不问。当时，王溥、汪晏、王彦超、韩令坤等同时作为将相，都有父亲在洛阳，与柴守礼朝夕往来，为所欲为，洛阳人大多畏避他们，人称“十阿父”。北宋干德五年（967年），柴守礼七十二岁去世，官至太傅。