字君明，北齐武成帝高湛庶长子，母李夫人。高绰与高纬同日出生，但因为庶出故被贬为第二子，一开始被过继给十五叔汉阳王高洽袭封汉阳王。河清三年（564年），改封南阳王，另外给高洽设嗣子。高绰由十余岁起，留守晋阳。他为人残虐，爱波斯狗。后高绰被封为司徒、冀州刺史，爱好纵犬噬而食祼人。他曾经碰到一妇人抱儿经过，他取小儿以餵饲狗只。妇人号哭，高绰大怒，又再纵狗去咬妇人，狗不食，高绰以儿血涂妇人，再纵狗食。后主高纬听闻此事后，将高绰曾赴行在所。至而宥之。问：“在州何事最乐？”对曰：“聚蝎于盆，使狙其中。”高纬立即命令