Sachverhalt: Sachverhalt: A. Mit Verfügung vom 20. August 1997 forderte die Kantonale Arbeitslosenkasse St. Gallen H._, geb. 1964, auf, Taggelder der Arbeitslosenversicherung in Höhe von Fr. 25'311.90 zurückzuerstatten, da beim Leistungsbezug vom 1. September 1995 bis 31. Mai 1997 irrtümlich - und entgegen dem Antrag auf Arbeitslosenentschädigung (vom 7. September 1995) - Taggelder auf der Grundlage einer Vollzeitbeschäftigung und nicht eines 50%-Pensums ausgerichtet worden seien. Dieser Verwaltungsakt blieb unangefochten. Das am 28. August 1997 gestellte Gesuch um Erlass der Rückerstattungsschuld lehnte das Regionale Arbeitsvermittlungszentrum (RAV) St. Gallen mangels Gutgläubigkeit beim Leistungsbezug ab (Verfügung vom 27. September 2002). Das Versicherungsgericht des Kantons St. Gallen hiess die hiegegen erhobene Beschwerde gut und schrieb das Gesuch um Erlass als gegenstandslos ab, weil die Rückerstattungsforderung zufolge Vollstreckungsverwirkung untergegangen sei (Entscheid vom 23. Januar 2004). In Gutheissung der Verwaltungsgerichtsbeschwerde des Amtes für Arbeit des Kantons St. Gallen hob das Eidgenössische Versicherungsgericht den kantonalen Gerichtsentscheid auf und wies die Sache an die Vorinstanz zurück, damit diese über die Beschwerde vom 31. Oktober 2002 gegen die Verfügung des RAV vom 27. September 2002 betreffend Erlass der Rückerstattungsschuld neu entscheide (Urteil vom 17. September 2004, C 37/04, Dispositiv-Ziff. 1). In Gutheissung der Verwaltungsgerichtsbeschwerde des Amtes für Arbeit des Kantons St. Gallen hob das Eidgenössische Versicherungsgericht den kantonalen Gerichtsentscheid auf und wies die Sache an die Vorinstanz zurück, damit diese über die Beschwerde vom 31. Oktober 2002 gegen die Verfügung des RAV vom 27. September 2002 betreffend Erlass der Rückerstattungsschuld neu entscheide (Urteil vom 17. September 2004, C 37/04, Dispositiv-Ziff. 1). B. Das Versicherungsgericht des Kantons St. Gallen zog die Akten der Verwaltung, worunter die Taggeldabrechnungen, bei und gab den Parteien Gelegenheit sich zu äussern, worauf es die Beschwerde des H._ gegen die durch die Verwaltung verfügte Verweigerung des Erlasses der Rückerstattungsschuld abwies (Entscheid vom 10. März 2005). B. Das Versicherungsgericht des Kantons St. Gallen zog die Akten der Verwaltung, worunter die Taggeldabrechnungen, bei und gab den Parteien Gelegenheit sich zu äussern, worauf es die Beschwerde des H._ gegen die durch die Verwaltung verfügte Verweigerung des Erlasses der Rückerstattungsschuld abwies (Entscheid vom 10. März 2005). C. H._ lässt Verwaltungsgerichtsbeschwerde führen und beantragen, in Aufhebung des kantonalen Gerichtsentscheides und der Verwaltungsverfügung vom 27. September 2002 sei die Erlassvoraussetzung des guten Glaubens zu bejahen und die Sache sei zur Beurteilung der grossen Härte an die Verwaltung zurückzuweisen. Das kantonale Amt für Arbeit und das Staatssekretariat für Wirtschaft verzichten auf eine Vernehmlassung.