Faits: A. Le 24 février 2011, A._ et son associé-gérant B._ ont déposé plainte pénale contre le journaliste C._, pour diffamation. Dans un article de presse paru le 9 décembre 2010, relatif à une agression ayant eu lieu au café A._, le journaliste avait affirmé que la victime s'était fait traiter de menteur en raison d'un communiqué rectificatif que A._ avait fait paraître dans la presse. Par ordonnance du 18 mars 2011, le Ministère public du canton de Fribourg a refusé d'entrer en matière. Le journaliste n'avait fait que rapporter les propos tenus par la victime (et par son avocat), dont l'agression avait été constatée par un tribunal. A supposer qu'il y ait diffamation, l'art. 173 ch. 2 CP s'appliquerait. B. Par arrêt du 6 mai 2011, la Chambre pénale du Tribunal cantonal fribourgeois a rejeté le recours formé par les plaignants et confirmé l'ordonnance de non-entrée en matière. Bien qu'ayant participé au procès des agresseurs de la victime, le Procureur n'avait pas à se récuser: les questions à traiter et les parties en cause étaient clairement distinctes, et le magistrat n'avait pas à déposer comme témoin dans la procédure pour diffamation. Les propos rapportés par le journaliste correspondaient aux déclarations de l'avocat de la victime. Le communiqué rectificatif mettait effectivement en doute la réalité de l'agression; la preuve de la vérité ou de la bonne foi pouvait dès lors être apportée. C. Par acte du 10 juin 2011, A._ et B._ forment un recours en matière pénale par lequel ils demandent la réforme de l'arrêt cantonal, l'annulation de la décision de non-entrée en matière et le renvoi de la cause au Ministère public pour ouverture d'une instruction. Subsidiairement, ils demandent l'annulation de l'arrêt cantonal et le renvoi de la cause à l'instance inférieure pour nouvelle décision dans le sens des considérants. Il n'a pas été demandé de réponse.