帝符节玉玺，但遭拒绝：“此天子之物，自有主者。宰相何故索之”，遂大怒，想斩了颜之仪，但顾虑到颜之仪在民间声望很高，便把他贬到西边当郡守。隋朝开皇中，拜集州刺史。开皇十一年卒。子颜昶，历任某地（墓志铭阙字）及德阳县二县令、轻车都尉。颜昶子颜万石，为唐朝桂州始安县丞、云骑尉。