A.- S._, gelernter Elektromonteur, ist als Arbeitnehmer ganztägig bei der A._ in Z._ tätig. Zusammen mit drei Brüdern ist er im Rahmen einer einfachen Gesellschaft Eigentümer am Mehrfamilienhaus W._ und zusammen mit zwei Brüdern Eigentümer am Mehrfamilienhaus samt Tiefgarage in N._. Diese beiden Häuser wurden in den Jahren 1994 und 1995 auf einem Grundstück erstellt, welches die Gebrüder S._ im Rahmen einer Erbteilung von der F._S. _, an welcher S._ rund 10 % des Aktienkapitals besitzt, unter Anrechnung an den Erbanteil erhielten. Gestützt auf eine Steuermeldung vom 3. September 1997, wonach S._ im Jahre 1994 einen Gewinn aus Liegenschaftsverkäufen von Fr. 87'722.- bei einem im Betrieb investierten Eigenkapital von Fr. 114'000.- (per 1. Januar 1995) erzielt habe, erfasste ihn die Ausgleichskasse des Kantons St. Gallen mit Verfügungen vom 8. Mai 1998 als Selbstständigerwerbenden und erhob für die Jahre 1994 bis und mit 1999 die persönlichen Sozialversicherungsbeiträge nebst Verzugszinsen. Sie setzte das jährliche Durchschnittseinkommen für das Beitragsjahr 1994 auf Fr. 87'722.-, für 1995 auf Fr. 65'000.-, für 1996 auf Fr. 16'000.- und für das Jahr 1997 sowie für die Beitragsperiode 1998/99 auf je Fr. 40'500.- (Durchschnitt der Jahre 1995/1996) fest. B.- Die hiegegen erhobene Beschwerde wies das Versicherungsgericht des Kantons St. Gallen mit Entscheid vom 17. Dezember 1999 ab. C.- S._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Antrag, in Aufhebung der Beitragsverfügungen und der Verzugszinsverfügung sei festzustellen, dass er die Voraussetzungen für die Beitragspflicht als Selbstständigerwerbender zu keinem Zeitpunkt erfüllt habe. Eventuell sei festzustellen, dass die Mieterträge spätestens seit Fertigstellung der Liegenschaften im Jahr 1995 Kapitalerträge aus Privatvermögen darstellten und somit die Beitragsverfügungen ab 1996 aufzuheben seien. Die Ausgleichskasse des Kantons St. Gallen schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde. Das Bundesamt für Sozialversicherung verzichtet auf eine Vernehmlassung.