Sachverhalt: Sachverhalt: A. S._, geboren 1955 und seit Mai 2001 arbeitslos, wurde am 7. Mai 2002 vom Regionalen Arbeitsvermittlungszentrum (RAV) Oberuzwil angewiesen, vom 13. Mai bis 8. November 2002 am Beschäftigungsprogramm Y._ in X._ teilzunehmen. Am Nachmittag des 13. Mai 2002 trat S._ das Programm an; am Abend des 14. Mai 2002 teilte er zuerst dem RAV und anschliessend dem Einsatzleiter mit, er könne aus gesundheitlichen Gründen nicht am zugewiesenen Arbeitsplatz arbeiten, da dieser staubig sei. Nachdem er am 15. Mai 2002 seine Arbeit nicht mehr angetreten hatte, wurde S._ gleichentags vom RAV aufgefordert, unverzüglich wieder am Beschäftigungsprogramm teilzunehmen, worauf er ein Zeugnis des Dr. med. C._ vom 15. Mai 2002 einreichte, wonach er aus "medizinischen Gründen (Atemnot bei durchgemachter schwerer Lungenerkrankung) keine Arbeiten in staubigen Räumen oder in Räumen mit Rauch von chemischen Verbrennungen verrichten" dürfe. Nach Gewährung des rechtlichen Gehörs stellte das RAV S._ mit Verfügung vom 18. Juni 2002 mit Wirkung ab dem 16. Mai 2002 für 15 Tage in der Anspruchsberechtigung ein. A. S._, geboren 1955 und seit Mai 2001 arbeitslos, wurde am 7. Mai 2002 vom Regionalen Arbeitsvermittlungszentrum (RAV) Oberuzwil angewiesen, vom 13. Mai bis 8. November 2002 am Beschäftigungsprogramm Y._ in X._ teilzunehmen. Am Nachmittag des 13. Mai 2002 trat S._ das Programm an; am Abend des 14. Mai 2002 teilte er zuerst dem RAV und anschliessend dem Einsatzleiter mit, er könne aus gesundheitlichen Gründen nicht am zugewiesenen Arbeitsplatz arbeiten, da dieser staubig sei. Nachdem er am 15. Mai 2002 seine Arbeit nicht mehr angetreten hatte, wurde S._ gleichentags vom RAV aufgefordert, unverzüglich wieder am Beschäftigungsprogramm teilzunehmen, worauf er ein Zeugnis des Dr. med. C._ vom 15. Mai 2002 einreichte, wonach er aus "medizinischen Gründen (Atemnot bei durchgemachter schwerer Lungenerkrankung) keine Arbeiten in staubigen Räumen oder in Räumen mit Rauch von chemischen Verbrennungen verrichten" dürfe. Nach Gewährung des rechtlichen Gehörs stellte das RAV S._ mit Verfügung vom 18. Juni 2002 mit Wirkung ab dem 16. Mai 2002 für 15 Tage in der Anspruchsberechtigung ein. B. Die dagegen erhobene Beschwerde wies das Versicherungsgericht des Kantons St. Gallen mit Entscheid vom 4. Juni 2003 ab, nachdem es eine Stellungnahme des Leiters des Beschäftigungsprogrammes Y._ vom 31. März 2003 eingeholt hatte. B. Die dagegen erhobene Beschwerde wies das Versicherungsgericht des Kantons St. Gallen mit Entscheid vom 4. Juni 2003 ab, nachdem es eine Stellungnahme des Leiters des Beschäftigungsprogrammes Y._ vom 31. März 2003 eingeholt hatte. C. S._ lässt Verwaltungsgerichtsbeschwerde führen mit den Anträgen, der vorinstanzliche Entscheid und die Verwaltungsverfügung seien aufzuheben, eventualiter sei die Sache zu neuem Entscheid an die Vorinstanz zurückzuweisen. Das Amt für Arbeit des Kantons St. Gallen schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde, während das Staatssekretariat für Wirtschaft auf eine Vernehmlassung verzichtet.