Sachverhalt: A. A._, geboren 1966, war seit Oktober 2016 bei der seinem Bruder gehörenden B._ GmbH angestellt. Nachdem die Arbeitgeberin die Stelle am 29. März 2019 gekündigt hatte, beantragte er am 29. April 2019 Insolvenzentschädigung für die Monate Januar bis April 2019 und machte ausstehende Löhne von je Fr. 7258.- geltend. Er habe davon lediglich eine Anzahlung von insgesamt Fr. 4000.- erhalten. Mit Verfügung vom 13. Juni 2018 wurde über die Gesellschaft Konkurs eröffnet. Das Amt für Wirtschaft und Arbeit des Kantons Glarus, Arbeitslosenkasse, lehnte die Anspruchsberechtigung mit Verfügung vom 5. Juni 2019 und Einspracheentscheid vom 29. Januar 2020 ab. B. Die dagegen erhobene Beschwerde wies das Verwaltungsgericht des Kantons Glarus mit Entscheid vom 23. April 2020 ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen mit dem Antrag, unter Aufhebung des angefochtenen Entscheides sei ihm eine Insolvenzentschädigung zuzusprechen, eventualiter sei die Sache zu weiteren Abklärungen an die Vorinstanz zurückzuweisen. Zudem ersucht er um Gewährung der unentgeltlichen Rechtspflege. Ein Schriftenwechsel wurde nicht durchgeführt.