Sachverhalt: Sachverhalt: A. Der 1949 geborene, in D._ wohnhafte Z._ ist Eigentümer mehrerer im Kanton X._ gelegener Liegenschaften. Die im Jahr 2001 erzielten Bruttomietzinse in der Höhe von insgesamt Fr. 294'495.- wurden als «Ertrag aus Eigennutzung, Miet- und Pachtzinsen» der Einkommenssteuer unterworfen. In der Veranlagungsberechnung der Staats- und Gemeindesteuern 2001 vom 14. Oktober 2003 wurde dazu vermerkt, sämtliche Liegenschaften mit Ausnahme der selbst bewohnten begründeten Geschäftsvermögen (Quasi-Liegenschaftenhandel) und alle diesbezüglichen Verkaufsgewinne unterlägen demzufolge der Einkommenssteuer. Am 23. September 2003 meldete das Kantonale Steueramt der Ausgleichskasse des Kantons St. Gallen, Z._ habe im Bemessungsjahr 2001 Einkommen aus selbstständiger Berufsausübung («Quasi-Liegenschaftenhandel») in der Höhe von Fr. 37'938.- erzielt. Am 10. Dezember 2003 erfasste die Ausgleichskasse Z._ ab 1. Januar 2001 als Selbstständigerwerbender im Bereich Liegenschaftenhandel. Mit Verfügungen vom 16. Dezember 2003 setzte die Kasse die persönlichen Beiträge für die Jahre 2001 bis 2003 fest. Am 18. Dezember 2003 sodann erhob sie Verzugszinsen auf den für 2001 und 2002 geschuldeten Beiträgen (einschliesslich Verwaltungskostenbeitrag). Mit Einspracheentscheid vom 17. Februar 2004 bestätigte die Ausgleichskasse Beiträge und Verzugszinsen in der verfügten Höhe. Am 23. September 2003 meldete das Kantonale Steueramt der Ausgleichskasse des Kantons St. Gallen, Z._ habe im Bemessungsjahr 2001 Einkommen aus selbstständiger Berufsausübung («Quasi-Liegenschaftenhandel») in der Höhe von Fr. 37'938.- erzielt. Am 10. Dezember 2003 erfasste die Ausgleichskasse Z._ ab 1. Januar 2001 als Selbstständigerwerbender im Bereich Liegenschaftenhandel. Mit Verfügungen vom 16. Dezember 2003 setzte die Kasse die persönlichen Beiträge für die Jahre 2001 bis 2003 fest. Am 18. Dezember 2003 sodann erhob sie Verzugszinsen auf den für 2001 und 2002 geschuldeten Beiträgen (einschliesslich Verwaltungskostenbeitrag). Mit Einspracheentscheid vom 17. Februar 2004 bestätigte die Ausgleichskasse Beiträge und Verzugszinsen in der verfügten Höhe. B. Die Beschwerde des Z._ wies das Versicherungsgericht des Kantons St. Gallen mit Entscheid vom 26. August 2004 ab. B. Die Beschwerde des Z._ wies das Versicherungsgericht des Kantons St. Gallen mit Entscheid vom 26. August 2004 ab. C. Z._ lässt Verwaltungsgerichtsbeschwerde führen und zur Hauptsache die Aufhebung von Gerichtsentscheid und Einspracheentscheid beantragen. Die Ausgleichskasse beantragt die Abweisung der Verwaltungsgerichtsbeschwerde. Das Bundesamt für Sozialversicherung verzichtet auf eine Vernehmlassung.