A.- Mit Verfügungen vom 19. November 1998 verpflichtete die Ausgleichskasse des Kantons Appenzell A.Rh. nebst anderen Personen T._ als ehemaliges Mitglied des Verwaltungsrats und E._ als ehemalige Prokuristin der konkursiten Firma X._ AG zur Bezahlung von Schadenersatz für entgangene Sozialversicherungsbeiträge (einschliesslich Verwaltungskostenbeiträge, Verzugszinsen, Mahngebühren und Betreibungskosten) im Betrag von Fr. 74'606. 15 und Fr. 76'024. 45. B.- Nachdem T._ und E._ Einspruch erhoben hatten, machte die Ausgleichskasse am 29. Dezember 1998 ihre Forderung klageweise beim Verwaltungsgericht des Kantons Graubünden geltend, welches die Schadenersatzklage mit Entscheid vom 7. September 1999 guthiess. C.- Mit gemeinsamer Verwaltungsgerichtsbeschwerde lassen T._ und E._ beantragen, der vorinstanzliche Entscheid sei aufzuheben und die Klage sei abzuweisen; eventuell sei die Sache an das Verwaltungsgericht zurückzuweisen; subeventuell sei die Klage im den Betrag von Fr. 35'376. 80 übersteigenden Umfang abzuweisen. Die Ausgleichskasse schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde. Die Mitbeteiligten Z._ und B._ verzichten auf eine Stellungnahme. Der Mitbeteiligte M._ schliesst auf deren Gutheissung und das Bundesamt für Sozialversicherung lässt sich nicht vernehmen.