君绰祖父杜谧，是北齐时期的秀才，后被任命为中山郡功曹、县令。父亲在唐朝时因杜君绰的战功被追赠为汝州刺史。杜君绰在义宁初时，投身义军。后归附唐朝，跟随秦王李世民征讨各地军阀，参加过讨伐刘武周、宋金刚等各种战争。武德九年六月初四，李世民率尉迟敬德、侯君集、张公谨、刘师立、公孙武达、独孤彦云、杜君绰、郑仁泰、李孟尝等九将伏兵于玄武门(长安太极宫北面正门)内，杀死太子李建成、齐王李元吉，夺得帝位。以功被封为开国县侯，实食绵州食邑四百户。李世民即位后杜君绰晋升为怀宁县开国公，食邑一千户。任忠武将军，行左监