Citation: 1B_108/2019 E. C

A.________ forme un recours en matière pénale au Tribunal fédéral contre l'arrêt du 31 janvier 2019. Il conclut, avec suite de frais et dépens, principalement à sa réforme en ce sens que la demande de récusation est admise. Subsidiairement, il conclut à l'annulation de l'arrêt attaqué et au renvoi de la cause à la cour cantonale pour nouvelle décision dans le sens des considérants. Invitée à se déterminer, la Chambre pénale a indiqué qu'elle n'avait pas d'observations à formuler. Quant au Préfet, il a conclu au rejet du recours. Le 3 mai 2019, le recourant a persisté dans ses conclusions.