Sachverhalt: A. Am frühen Morgen des 27. Dezember 2012 brannte auf dem Areal der Carosserie B._ in der Industriezone von C._/BL ein Auto. Die ausgerückte Kantonspolizei fand auf dem Areal weitere beschädigte Fahrzeuge vor. Während die Polizei versuchte, das brennende Fahrzeug zu löschen, erschien A._ auf dem Brandplatz, um beim Löschen des Fahrzeugs zu helfen. A._ wurde am Abend des 27. Dezember 2012 von Korporal D._ zunächst zweimal als Auskunftsperson polizeilich einvernommen. Dabei verwickelte er sich in Widersprüche und gab schliesslich zu, mit seinem Personenwagen in eines der beschädigten Fahrzeuge hineingefahren zu sein. A._ wurde anschliessend als Beschuldigter vernommen und bestätigte, den Unfall verursacht zu haben. Er habe das Feuer gesehen und sei aus Angst vor einer Explosion rückwärts weg gefahren; dabei habe er das parkierte Auto getroffen. Tags darauf gab A._ als Beschuldigter zu Protokoll, er habe am frühen Morgen des 27. Dezember 2012 sein Auto waschen wollen, aber die Waschanlage habe zunächst nicht funktioniert. Als er erneut zwei Franken eingeworfen habe, habe sich im Schlauch der Waschlanze Druck aufgebaut; sie sei ausser Kontrolle geraten und habe sein Fahrzeug beschädigt. Darüber sei er in Wut geraten und habe herumstehende Autos beschädigt; eines von ihnen habe er angezündet, indem er eine brennende Zigarette auf den Vordersitz geworfen habe. Am 22. Februar 2013 setzte die Staatsanwaltschaft Basel-Land Rechtsanwalt Alain Joset rückwirkend auf den 7. Januar 2013 als amtlichen Verteidiger von A._ ein. Am 26. September 2013 kündigte die Staatsanwaltschaft A._ den Abschluss der Untersuchung an und setzte ihm Frist bis zum 14. Oktober 2013 für die Stellung von Beweisanträgen. Am 14. Oktober 2013 beantragte A._, die Protokolle der Einvernahmen vom 27. und vom 28. Dezember 2012 aus den Akten zu entfernen. Am 29. Oktober 2013 wurde Korporal D._ von Staatsanwalt Müller als Zeuge einvernommen. Am 31. Oktober 2013 teilte A._ der Staatsanwaltschaft innert verlängerter Frist mit, er verzichte auf die Stellung von Beweisanträgen. Ausserdem vertrat er die Ansicht, die Ankündigung des Untersuchungsabschlusses müsse nach der Einvernahme vom 29. Oktober 2013 wiederholt werden. Zudem erneuerte er sein Forderung, die Einvernahmeprotokolle vom 27. und vom 28. Dezember 2012 aus den Akten zu entfernen. Am 4. November 2013 wies die Staatsanwaltschaft den Antrag A._s ab, die Protokolle der vier Einvernahmen vom 27. und vom 28. Dezember 2012 aus den Verfahrensakten zu entfernen. Mit Verfügung vom gleichen Tag wies die Staatsanwaltschaft den Antrag von A._ auf eine Wiederholung der Ankündigung des Untersuchungsabschlusses vom 26. September 2013 ab und trat auf das erneute Gesuch um Entfernung der Einvernahmeprotokolle vom 27. und vom 28. Dezember 2012 aus den Akten nicht ein. B. Am 11. November 2013 forderte A._ Staatsanwalt Friedrich Müller auf, in den Ausstand zu treten und die Untersuchung einem "nicht vorbefassten, unabhängigen und nicht derart feindseligen Staatsanwalt" zu übergeben. Staatsanwalt Müller leitete das Ausstandsbegehren ans Kantonsgericht Basel-Landschaft weiter mit dem Antrag, es abzuweisen, soweit darauf einzutreten sei. Am 17. Dezember 2013 wies das Kantonsgericht das Ausstandsbegehren ab. C. Mit Beschwerde in Strafsachen beantragt A._, diesen Entscheid des Kantonsgerichts aufzuheben und anzuordnen, das Verfahren gegen ihn durch einen unabhängigen Staatsanwalt führen zu lassen. Ausserdem ersucht er um unentgeltliche Rechtspflege und Verbeiständung. D. Das Kantonsgericht beantragt unter Verweis auf seinen Entscheid, die Beschwerde abzuweisen, soweit darauf einzutreten sei. Staatsanwalt Müller beantragt, die Beschwerde abzuweisen und legt den Beschluss des Kantonsgerichts vom 21. Januar 2014 zu den Akten, womit dieses die Beschwerde von A._ gegen die Weigerung der Staatsanwaltschaft abgewiesen hatte, die Einvernahmeprotokolle vom 27. und vom 28. Dezember 2012 aus den Akten zu entfernen. In seiner Replik teilt A._ mit, er habe gegen den Beschluss des Kantonsgerichts vom 21. Januar 2014, der der bundesgerichtlichen Rechtsprechung widerspreche, Beschwerde erhoben (Verfahren 1B_124/2014).