A.- K._ war einziger Verwaltungsrat und Direktor der X._ AG. Die Gesellschaft produzierte zunächst das Musical Y._. Mangels Nachfrage fand am 21. Mai 1995 die letzte Aufführung statt. Die nachfolgenden Sanierungsbemühungen blieben ohne Erfolg, zumal die Hausbank am 29. Juni 1995 den Betriebskredit kündigte. Am 22. März 1996 eröffnete der Konkursrichter des Bezirksgerichts über die Gesellschaft den Konkurs. Das Konkursamt teilte mit Publikation im Schweizerischen Handelsamtsblatt (SHAB) vom ... mit, der Konkurs werde im summarischen Verfahren durchgeführt und die Konkursverwaltung beabsichtige, die beweglichen Sachen sowie Verlagsrechte zum Teil durch Freihandverkauf zu verwerten, wofür Angebote von insgesamt Fr. 16'000.- vorlägen. Am 10. Mai 1996 gab die Ausgleichskasse des Kantons Zürich verfügungsweise eine Forderung von Fr. 69'976. 40 für entgangene Sozialversicherungsbeiträge (inkl. FAK) ein. Ab 18. April 1997 lag der Kollokationsplan für die Dauer von 20 Tagen auf. Mit Verfügung vom 4. Juni 1997 verpflichtete die Sozialversicherungsanstalt des Kantons Zürich, Ausgleichskasse, K._ zur Leistung von Schadenersatz in Höhe von Fr. 66'629. 10. In der Folge erhielt die Ausgleichskasse eine Dividende von Fr. 5185. 25 (Verlustausweis des Konkursamtes vom 12. Juni 1997). B.- Die auf Einspruch hin von der Sozialversicherungsanstalt des Kantons Zürich, Ausgleichskasse, über den Betrag von Fr. 61'443. 85 eingereichte Klage hiess das Sozialversicherungsgericht des Kantons Zürich mit Entscheid vom 31. August 2000 vollumfänglich gut. C.- K._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Antrag, in Aufhebung des vorinstanzlichen Entscheides sei die Schadenersatzklage abzuweisen. Eventuell sei die Sache an die Vorinstanz zurückzuweisen, damit diese ein Beweisverfahren durchführe. Ausgleichskasse und Bundesamt für Sozialversicherung verzichten auf eine Vernehmlassung.