殷崇义，池州青阳（今属安徽省）人。一说陈州西华（今河南西华）人。杨吴翰林学士殷文圭之子。南唐保大十三年（955年）进士，历官枢密使、右仆射。皇室的书檄教诏，皆出自其手，封为“范阳郡公”。中主李璟为避后周之兵锋，迁都南昌，命殷崇义以枢密使之职留守金陵与严续辅佐太子李煜。后主李煜即位，令民间行铁钱，导致物价上涨，殷崇义上疏请罢物价，李煜不听。开宝元年（968年），为左仆射、同平章事。次年五月，罢为润州节度使，仍同平章事。开宝五年（972年），南唐改官名，中书省、门下省为左右内史府，殷崇义以司空知左右内史事。