高明之子。年轻时丧父，与兄长一起侍奉老母。好读书，擅长吏事。在南朝梁的第一个官职是尚书中兵郎。后来，湘东王萧绎承制，不佞为戎昭将军、武陵王谘议参军。承圣元年（552年），出任武康县县令。由于饥荒、人民失业，招募了一千名士兵。承圣3年（554年），西魏军攻陷江陵，其母亲死去，兄长殷不害被西魏军带走。永定元年（557年），南朝陈国建国后，殷不佞被任命为戎昭将军、娄县县令，居处之节，如始闻问，若此者又三年。后来，四兄殷不齐从江陵迎母丧柩归葬。殷不佞亲自搬土，手植松柏，每年的伏腊时节，必有三日断食不吃东