Sachverhalt: Sachverhalt: A. In Bestätigung ihrer Verfügung vom 7. Februar 2003 forderte die Arbeitslosenkasse GBI, R._, geboren 1962, mit Einspracheentscheid vom 8. April 2003 auf, Taggelder der Arbeitslosenversicherung in Höhe von Fr. 6030.15 zurückzuerstatten. Als Begründung wurde angegeben, dass auf Grund der durch Dr. med. S._, Allgemeine Medizin FMH, mit Bericht vom 8. November 2002 bescheinigten vollständigen Arbeitsunfähigkeit für sämtliche Tätigkeiten während des Zeitraums vom 9. April bis 20. Juni 2002 zwar zu Recht vom 9. April bis 8. Mai 2002 Krankentaggelder der Arbeitslosenversicherung entrichtet, unberechtigterweise aber für die Zeit vom 9. Mai bis 20. Juni 2002 Arbeitslosentaggelder ausbezahlt worden seien. Dieser Verwaltungsakt blieb unangefochten. Das am 1. Mai 2003 gestellte Gesuch um Erlass der Rückerstattungsschuld lehnte das Amt für Wirtschaft und Arbeit des Kantons Solothurn (nachfolgend: AWA) mangels Gutgläubigkeit beim Leistungsbezug ab (Verfügung vom 18. Juli 2003, Einspracheentscheid vom 16. Februar 2004). A. In Bestätigung ihrer Verfügung vom 7. Februar 2003 forderte die Arbeitslosenkasse GBI, R._, geboren 1962, mit Einspracheentscheid vom 8. April 2003 auf, Taggelder der Arbeitslosenversicherung in Höhe von Fr. 6030.15 zurückzuerstatten. Als Begründung wurde angegeben, dass auf Grund der durch Dr. med. S._, Allgemeine Medizin FMH, mit Bericht vom 8. November 2002 bescheinigten vollständigen Arbeitsunfähigkeit für sämtliche Tätigkeiten während des Zeitraums vom 9. April bis 20. Juni 2002 zwar zu Recht vom 9. April bis 8. Mai 2002 Krankentaggelder der Arbeitslosenversicherung entrichtet, unberechtigterweise aber für die Zeit vom 9. Mai bis 20. Juni 2002 Arbeitslosentaggelder ausbezahlt worden seien. Dieser Verwaltungsakt blieb unangefochten. Das am 1. Mai 2003 gestellte Gesuch um Erlass der Rückerstattungsschuld lehnte das Amt für Wirtschaft und Arbeit des Kantons Solothurn (nachfolgend: AWA) mangels Gutgläubigkeit beim Leistungsbezug ab (Verfügung vom 18. Juli 2003, Einspracheentscheid vom 16. Februar 2004). B. Die hiegegen erhobene Beschwerde wies das Versicherungsgericht des Kantons Solothurn mit Entscheid vom 28. Juli 2004 ab. B. Die hiegegen erhobene Beschwerde wies das Versicherungsgericht des Kantons Solothurn mit Entscheid vom 28. Juli 2004 ab. C. Mit Verwaltungsgerichtsbeschwerde beantragt R._, seinem Erlassgesuch sei stattzugeben. Während das kantonale Gericht und das AWA auf Abweisung der Verwaltungsgerichtsbeschwerde schliessen, verzichtet das Staatssekretariat für Wirtschaft auf eine Vernehmlassung.