进爵为冠军县开国公，增加食邑六百户。此后累迁至车骑将军、通直散骑常侍、骁卫将军、左光禄大夫。大统四年（538年），出为鄜城郡守（今陕西富县）。杨绍为人恕直，对百姓有威德和恩惠，人民生活较为安定。稽胡依仗人多势众，兼有天险，经常侵入鄜城郡抄掠抢窃。西魏派侯莫陈崇领兵征讨，杨绍率郡兵跟从围剿，以先登之功，破稽胡于默泉之上。加帅都督、散骑常侍、朔州大中正。大统十三年，录前后之功，食邑增加到二千二百户，被任为燕州刺史。前后官职升迁到大都督、车骑大将军、仪同三司。大统十七年（551年），杨绍奉命随大将军达奚武进攻