Faits : Faits : A. Le 7 août 2003, A._, âgée de 10 ans, a participé, en compagnie de sa mère et de ses deux soeurs, à un repas de mariage organisé à Courroux. Selon A._, dans l'après-midi, elle avait décidé de jouer à la pétanque avec ses soeurs lorsqu'un invité de la noce s'est présenté en disant qu'il s'appelait Jean-Jacques et qu'il souhaitait se joindre à elles. Avant et après le repas du soir, il a ainsi joué avec les fillettes à la pétanque et à l'avion, c'est-à-dire qu'il tenait les enfants et les faisait tourner autour de lui. A un moment donné, après le repas du soir, X._ a demandé à A._ de l'accompagner car il voulait lui montrer quelque chose. Quand la fillette lui a dit qu'elle n'en avait pas envie, il a insisté en disant qu'il s'agissait de quelque chose d' « hyper hyper beau ». A._ a alors proposé que sa soeur Lisa âgée de 12 ans les accompagne. L'homme a refusé et a demandé à Lisa de s'en aller. Il a pris la main de A._ et il a voulu emprunter un chemin qui mène à la forêt. Comme la fillette refusait d'aller dans cette direction, il l'a emmenée à l'endroit où étaient parquées les voitures des convives. Là, il a d'abord refait l'avion à la fillette, puis l'a prise dans ses bras et il l'a soulevée en lui disant qu'elle pouvait dormir sur lui. A._ a répondu qu'elle n'en avait pas envie et qu'elle voulait descendre parce qu'il lui faisait mal. Il l'a reposée puis il lui a demandé de prendre appui avec ses mains sur le coffre d'une voiture et de se pencher en avant. L'enfant a demandé pourquoi et a dit qu'elle n'en avait pas envie, mais l'homme a insisté et il a lui-même appuyé l'enfant contre la voiture en disant que, de cette façon, il pourrait lui faire des chatouilles. Il s'est placé derrière la fillette et a glissé ses mains sous le pull de celle-ci. A._ a dit qu'elle ne voulait pas qu'il la chatouille, parce qu'il n'était ni son papa, ni sa maman, ni ses soeurs, mais X._ a continué ses agissements jusqu'à ce qu'elle le repousse et s'enfuie. A._ a précisé que l'homme était appuyé contre elle, qu'il avait les genoux fléchis et qu'elle sentait ses bras et ses jambes. Elle sentait aussi le « devant » de l'homme, soit son sexe, dans le bas de son dos. Lors de sa première audition, la fillette a précisé que l'homme bougeait derrière elle puis, réentendue, elle a dit qu'elle ne se souvenait plus s'il bougeait, mais qu'elle sentait son ventre quand il respirait. A._ a aussi expliqué qu'à un moment donné, elle avait eu un flash, c'est-à-dire qu'il lui était revenu en mémoire une histoire que sa soeur lui avait racontée au sujet d'un grand-père qui avait pratiqué des attouchements sur sa petite-fille. C'est alors qu'elle avait repoussé l'individu pour s'enfuir. B._ a vu sa fille arriver vers elle en courant vers 23h30. Une fois seule avec elle, A._lui a raconté ce qui s'était passé et lui a dit que X._ l'avait touchée sous son pull au niveau de la poitrine. B._ et son ami sont allés trouver X._ et l'ont accusé d'avoir commis des attouchements sur A._. Lorsque cette dernière a répété devant X._ ce qu'elle venait de dire à sa mère, celui-ci s'est excusé. Il a déclaré qu'il voulait uniquement lui faire des chatouilles. Comme A._ lui demandait pourquoi il avait mis ses mains sous son pull, il a répondu que si elle avait pensé que c'était pour autre chose, il s'en excusait. Invité à donner des précisions sur ses contacts avec A._, X._ a dit qu'il se souvenait avoir vu cinq enfants, savoir trois filles et deux garçons, qui s'amusaient à la noce. Vers 18 h les filles l'ont invité à jouer à la pétanque. Pendant le repas, A._ était assise à côté de lui. Après le souper, il a joué à « faire l'avion » avec les trois filles. Par la suite, il s'est assis seul sur la terrasse. Les trois filles sont venues le rejoindre et, à la demande de A._, il s'est éloigné avec elle pour rejouer à l'avion. A ce moment-là, il n'était plus en vue de la noce. Après le jeu de l'avion, il a fait des chatouilles à A._ qui se trouvait dos contre lui, les mains posées sur le coffre d'une voiture. X._ se tenait derrière elle et il l'a chatouillée aux hanches, puis sur le ventre « à même la peau ». La fillette a soudainement dit qu'elle devait y aller. X._ n'a compris sa réaction que lorsqu'on lui a parlé d'attouchements. X._ a dit ultérieurement à la police qu'il n'avait pas bandé mais qu'il était possible que la fillette l'ait effleuré pendant qu'il la chatouillait. Il ressort du dossier que X._ a déjà été condamné le 2 juillet 2001 à une peine de dix mois d'emprisonnement ferme et à l'expulsion du territoire suisse pour une durée de cinq ans avec sursis pendant cinq ans pour actes d'ordre sexuel avec des enfants commis durant l'été 1999. X._ suit une psychothérapie ambulatoire depuis le 2 novembre 2001 à la clinique psychiatrique de Bellelay. Son thérapeute n'a observé aucun élément établissant que son patient serait un pédophile et il n'a pas constaté de tendances pédophiles chez lui. Il ajoute que X._ a tendance à établir avec les enfants des liens de nature infantile non sexualisés c'est-à-dire de type enfant à enfant et non adulte à enfant. Sur le plan professionnel, X._ a dit qu'il travaillait comme indépendant et rénovait une maison. Son divorce a été prononcé le 17 avril 2006 et il a un droit de visite tous les 15 jours sur son fils. Il ressort du dossier que X._ a déjà été condamné le 2 juillet 2001 à une peine de dix mois d'emprisonnement ferme et à l'expulsion du territoire suisse pour une durée de cinq ans avec sursis pendant cinq ans pour actes d'ordre sexuel avec des enfants commis durant l'été 1999. X._ suit une psychothérapie ambulatoire depuis le 2 novembre 2001 à la clinique psychiatrique de Bellelay. Son thérapeute n'a observé aucun élément établissant que son patient serait un pédophile et il n'a pas constaté de tendances pédophiles chez lui. Il ajoute que X._ a tendance à établir avec les enfants des liens de nature infantile non sexualisés c'est-à-dire de type enfant à enfant et non adulte à enfant. Sur le plan professionnel, X._ a dit qu'il travaillait comme indépendant et rénovait une maison. Son divorce a été prononcé le 17 avril 2006 et il a un droit de visite tous les 15 jours sur son fils. B. Par jugement du 8 novembre 2005, le juge pénal du Tribunal de première instance jurassien a reconnu X._ coupable d'actes d'ordre sexuel avec des enfants et l'a condamné à une peine de trois mois d'emprisonnement et à l'expulsion du territoire suisse pour une durée de cinq ans. Il l'a par ailleurs condamné à payer à la partie civile une indemnité de 3000 fr. pour tort moral. B. Par jugement du 8 novembre 2005, le juge pénal du Tribunal de première instance jurassien a reconnu X._ coupable d'actes d'ordre sexuel avec des enfants et l'a condamné à une peine de trois mois d'emprisonnement et à l'expulsion du territoire suisse pour une durée de cinq ans. Il l'a par ailleurs condamné à payer à la partie civile une indemnité de 3000 fr. pour tort moral. C. Statuant le 2 mai 2006 sur appel de X._, la Cour pénale du Tribunal cantonal jurassien a confirmé ce jugement. C. Statuant le 2 mai 2006 sur appel de X._, la Cour pénale du Tribunal cantonal jurassien a confirmé ce jugement. D. X._ forme un recours de droit public contre cet arrêt. Invoquant une violation de la présomption d'innocence ainsi que de l'interdiction de l'arbitraire, il conclut, sous suite de frais et dépens, à l'annulation de l'arrêt attaqué et au renvoi de la cause à l'autorité cantonale pour qu'elle statue à nouveau. Il se pourvoit également en nullité contre cet arrêt, qui viole selon lui les articles 187 et 55 CP. Partant, il conclut, sous suite de frais et dépens, à ce que le Tribunal fédéral annule l'arrêt attaqué, renvoie la cause à l'autorité cantonale et, sur le plan civil, réforme l'arrêt attaqué en ce sens que la partie plaignante et civile est déboutée de toutes ses conclusions. Le recourant sollicite également l'assistance judiciaire et l'effet suspensif pour les deux procédures. Le recourant sollicite également l'assistance judiciaire et l'effet suspensif pour les deux procédures. E. La cour cantonale n'a pas formulé d'observations et s'est référée aux considérants de l'arrêt attaqué.