Add evaluation results on the plain_text config and train split of piaf

#6
by autoevaluator HF staff - opened
Files changed (1) hide show
  1. README.md +46 -4
README.md CHANGED
@@ -5,10 +5,52 @@ datasets:
5
  - FQuAD
6
  - SQuAD-FR
7
  widget:
8
- - text: "Comment s'appelle le portail open data du gouvernement ?"
9
- context: "Etalab est une administration publique française qui fait notamment office de Chief Data Officer de l'État et coordonne la conception et la mise en œuvre de sa stratégie dans le domaine de la donnée (ouverture et partage des données publiques ou open data, exploitation des données et intelligence artificielle...). Ainsi, Etalab développe et maintient le portail des données ouvertes du gouvernement français data.gouv.fr.
10
- Etalab promeut également une plus grande ouverture l'administration sur la société (gouvernement ouvert) : transparence de l'action publique, innovation ouverte, participation citoyenne... elle promeut l’innovation, l’expérimentation, les méthodes de travail ouvertes, agiles et itératives, ainsi que les synergies avec la société civile pour décloisonner l’administration et favoriser l’adoption des meilleures pratiques professionnelles dans le domaine du numérique. À ce titre elle étudie notamment l’opportunité de recourir à des technologies en voie de maturation issues du monde de la recherche.
11
- Cette entité chargée de l'innovation au sein de l'administration doit contribuer à l'amélioration du service public grâce au numérique. Elle est rattachée à la Direction interministérielle du numérique, dont les missions et l’organisation ont été fixées par le décret du 30 octobre 2019.  Dirigé par Laure Lucchesi depuis 2016, elle rassemble une équipe pluridisciplinaire d'une trentaine de personnes."
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
12
  ---
13
 
14
  # camembert-base-squadFR-fquad-piaf
 
5
  - FQuAD
6
  - SQuAD-FR
7
  widget:
8
+ - text: Comment s'appelle le portail open data du gouvernement ?
9
+ context: 'Etalab est une administration publique française qui fait notamment office
10
+ de Chief Data Officer de l''État et coordonne la conception et la mise en œuvre
11
+ de sa stratégie dans le domaine de la donnée (ouverture et partage des données
12
+ publiques ou open data, exploitation des données et intelligence artificielle...).
13
+ Ainsi, Etalab développe et maintient le portail des données ouvertes du gouvernement
14
+ français data.gouv.fr. Etalab promeut également une plus grande ouverture l''administration
15
+ sur la société (gouvernement ouvert) : transparence de l''action publique, innovation
16
+ ouverte, participation citoyenne... elle promeut l’innovation, l’expérimentation,
17
+ les méthodes de travail ouvertes, agiles et itératives, ainsi que les synergies
18
+ avec la société civile pour décloisonner l’administration et favoriser l’adoption
19
+ des meilleures pratiques professionnelles dans le domaine du numérique. À ce titre
20
+ elle étudie notamment l’opportunité de recourir à des technologies en voie de
21
+ maturation issues du monde de la recherche. Cette entité chargée de l''innovation
22
+ au sein de l''administration doit contribuer à l''amélioration du service public
23
+ grâce au numérique. Elle est rattachée à la Direction interministérielle du numérique,
24
+ dont les missions et l’organisation ont été fixées par le décret du 30 octobre
25
+ 2019.  Dirigé par Laure Lucchesi depuis 2016, elle rassemble une équipe pluridisciplinaire
26
+ d''une trentaine de personnes.'
27
+ model-index:
28
+ - name: etalab-ia/camembert-base-squadFR-fquad-piaf
29
+ results:
30
+ - task:
31
+ type: question-answering
32
+ name: Question Answering
33
+ dataset:
34
+ name: piaf
35
+ type: piaf
36
+ config: plain_text
37
+ split: train
38
+ metrics:
39
+ - type: f1
40
+ value: 83.2419
41
+ name: F1
42
+ verified: true
43
+ verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiOGM4YTdmZDQ2NjlmYWYyYzFhYjBjNjgxMDE1Y2E5ZGE0Zjg1YTg3NzAwNDQ1YzM4NDFkOTMzZjRlMzYzZTIxMCIsInZlcnNpb24iOjF9.V3wz0Gem8ZOkFHudDnLgy-OSmNX8L2PrbKKhkQ-h-uVHKvkIjUXwueOm2xLRVzhmsKWOfyETkfz-uU9Te0ufAQ
44
+ - type: exact_match
45
+ value: 60.5505
46
+ name: Exact Match
47
+ verified: true
48
+ verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiNThiMmM2NGRkYjFhYTBlOWI0ZTMyN2ZlNGM3ODI1NzYxMzk2YmQ1YmNiY2ZlZmJkMTA2MWNkZmFmOWNmYzlmYiIsInZlcnNpb24iOjF9.tTLX58YhmODF-Ckn1U6qtWGsvRNTqhJB777KY8g_2wyyTBp1rubQ0-7g038_mb-OAJQcCVRju-ecLXC8CN2eAg
49
+ - type: loss
50
+ value: 1.3265432119369507
51
+ name: loss
52
+ verified: true
53
+ verifyToken: eyJhbGciOiJFZERTQSIsInR5cCI6IkpXVCJ9.eyJoYXNoIjoiMzViZWQ4YjA4NTE4NzJjMjZmMzIzMDUzYmNjZjM1YzkzMGVkNTYxOGQ4NWRhNzI5ZmUyODBmYzJmZmVjYjJkOSIsInZlcnNpb24iOjF9.QlxqxHYGLIT9CJ4XWuPzqPP4ypFi29yv6Z5cJz_o0xSz26RxKrFcTs9WSO_Tz7tiDZNiqfW3JOgZIISmU5I5DA
54
  ---
55
 
56
  # camembert-base-squadFR-fquad-piaf