Art. 9, 26 und 29 BV (Baueinsprache), hat sich ergeben: A.- Edith und Ewald Probst sind Eigentümer der mit einem Einfamilienhaus überbauten Parzelle Nr. 3909 am Höhenweg im Gebiet Lürlibad in Chur. Am 4. Februar 2000 reichte die Baugesellschaft Culpina dem Stadtrat von Chur zwei Baugesuche für die Überbauung der nördlich anstossenden, 3'387 m2 grossen Parzelle Nr. 388 ein. Das Projekt sieht vor, das in der Zone W1 gelegene Grundstück mit insgesamt acht Reiheneinfamilienhäusern zu überbauen, wobei auf dem westlichen, talseitigen Teil der Parzelle eine Reihe mit fünf, auf dem östlichen, bergseitigen Teil der Parzelle eine Reihe mit 3 Häusern entstehen sollen. Edith und Ewald Probst erhoben Einsprache gegen das Bauprojekt. Die Baugesellschaft Culpina änderte dieses in der Folge in verschiedenen Punkten ab; sie verzichtete namentlich auf die Errichtung von vier Besucherparkplätzen in der Süd-West-Ecke des Grundstücks und den Einbau von Galerien in den Dachgeschossen. Am 3. Juli 2000 wies der Stadtrat die Einsprache von Edith und Ewald Probst ab, soweit sie nicht durch die Projektänderung gegenstandslos geworden war, und erteilte der Baugesellschaft Culpina die Baubewilligungen Nrn. 129/2000 (östliche Häuserzeile) und 130/2000 (westliche Häuserzeile) unter verschiedenen Auflagen und Bedingungen. Edith und Ewald Probst rekurrierten ans Verwaltungsgericht des Kantons Graubünden mit den Anträgen, den Einspracheentscheid und die Baubewilligungen Nrn. 129 und 130/2000 der Stadt Chur aufzuheben. B.- Mit Urteil vom 13. Oktober 2000 wies das Verwaltungsgericht des Kantons Graubünden den Rekurs ab. Mit staatsrechtlicher Beschwerde vom 15. November 2000 wegen Verletzung von Art. 9, 26 und 29 BV beantragen Edith und Ewald Probst, den Entscheid des Verwaltungsgerichts aufzuheben. Ausserdem ersuchen sie um aufschiebende Wirkung für ihre Beschwerde. C.- Am 19. Dezember 2000 wies der Präsident der I. öffentlichrechtlichen Abteilung des Bundesgerichts das Gesuch um Gewährung der aufschiebenden Wirkung ab. D.- Das Verwaltungsgericht beantragt in der Vernehmlassung unter Hinweis auf seinen Entscheid, die Beschwerde abzuweisen. Die Baugesellschaft Culpina beantragt, die Beschwerde abzuweisen, soweit darauf einzutreten sei. Denselben Antrag stellt die Stadt Chur.