Sachverhalt: Sachverhalt: A. Die Firma P._ AG wurde im Dezember 1999 ins Handelsregister des Kantons St. Gallen eingetragen. M._ amtete vom 1. Dezember 1999 bis 2. November 2000 (Datum des Rücktrittsschreibens) als Verwaltungsrat mit Kollektivunterschrift zu zweien. Am 26. März 2003 wurde über die Gesellschaft der Konkurs eröffnet. Der Ausgleichskasse des Kantons St. Gallen, welcher die Gesellschaft als abrechnungspflichtige Arbeitgeberin angeschlossen war, wurden am 17. Juli und am 30. September 2002 diverse Pfändungsverlustscheine von insgesamt Fr. 13'754.70 ausgestellt. Mit Verfügung vom 28. April 2003 machte die Kasse gegenüber M._ eine Schadenersatzforderung in der Höhe von Fr. 8'957.60 (Fr. 7'744.25 für entgangene bundesrechtliche Beiträge, Fr. 1'213.35 für entgangene kantonalrechtliche Beiträge) geltend. Die von M._ hiegegen erhobene Einsprache wies die Kasse mit Entscheid vom 7. August 2003 ab. Der Ausgleichskasse des Kantons St. Gallen, welcher die Gesellschaft als abrechnungspflichtige Arbeitgeberin angeschlossen war, wurden am 17. Juli und am 30. September 2002 diverse Pfändungsverlustscheine von insgesamt Fr. 13'754.70 ausgestellt. Mit Verfügung vom 28. April 2003 machte die Kasse gegenüber M._ eine Schadenersatzforderung in der Höhe von Fr. 8'957.60 (Fr. 7'744.25 für entgangene bundesrechtliche Beiträge, Fr. 1'213.35 für entgangene kantonalrechtliche Beiträge) geltend. Die von M._ hiegegen erhobene Einsprache wies die Kasse mit Entscheid vom 7. August 2003 ab. B. Beschwerdeweise liess M._ die Aufhebung des Einspracheentscheides und der Verfügung beantragen, unter Kosten- und Entschädigungsfolgen. Mit Entscheid vom 14. Juni 2004 wies das Versicherungsgericht des Kantons St. Gallen die Beschwerde ab. B. Beschwerdeweise liess M._ die Aufhebung des Einspracheentscheides und der Verfügung beantragen, unter Kosten- und Entschädigungsfolgen. Mit Entscheid vom 14. Juni 2004 wies das Versicherungsgericht des Kantons St. Gallen die Beschwerde ab. C. M._ lässt Verwaltungsgerichtsbeschwerde führen und das Rechtsbegehren stellen, es sei - unter Kosten- und Entschädigungsfolgen - der kantonale Entscheid aufzuheben und festzustellen, dass eine Schadenersatzpflicht nicht gegeben ist. Eventualiter sei das Urteil aufzuheben und die Sache an die Vorinstanz zur Gutheissung der Beschwerde und damit Aufhebung der Verfügung vom 28. April 2003 zurückzuweisen. Die Ausgleichskasse schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde. Das Bundesamt für Sozialversicherung verzichtet auf eine Vernehmlassung.