A.- Der 1933 geborene H.S._ ist der Ausgleichskasse des Basler Volkswirtschaftsbundes seit 1995 als nichterwerbstätiges Mitglied angeschlossen. Seit dem 1. Januar 1997 ist seine Ehegattin B._, geb. 1937, bei der gleichen Ausgleichskasse ebenfalls als Nichterwerbstätige erfasst. Am 2. September 1998 erliess die Ausgleichskasse die Beitragsverfügungen für Nichterwerbstätige für 1995 bis 1998. Dabei stützte sie sich auf die Meldung der kantonalen Steuerbehörde Basel-Stadt vom 2. Juni 1998, welche für die vier im Eigentum eines der Ehegatten befindlichen Liegenschaften nicht deren Steuerwerte, sondern die interkantonalen Repartitionswerte einsetzte. B.- Die gegen die Beitragsverfügungen erhobene Beschwerde, mit der die Ehegatten die Anwendung der interkantonalen Umrechnungskoeffizienten bemängelten, wies die Kantonale Rekurskommission für die Ausgleichskassen und die IV-Stellen Basel-Stadt mit Entscheid vom 28. Oktober 1999 ab. C.- H. (Beschwerdeführer 1) und B. S._ (Beschwerdeführerin 2) führen Verwaltungsgerichtsbeschwerde mit dem Antrag, der vorinstanzliche Entscheid sowie die Verfügungen vom 2. September 1998 seien aufzuheben. Während die Ausgleichskasse auf Abweisung der Verwaltungsgerichtsbeschwerde schliesst, hat sich das Bundesamt für Sozialversicherung nicht vernehmen lassen.