lewtun HF staff commited on
Commit
988bacc
1 Parent(s): c6e6446

Add evaluation results on the mnli config of glue

Browse files

Beep boop, I am a bot from Hugging Face's automatic model evaluator 👋!\
Your model has been evaluated on the mnli config of the [glue](https://huggingface.co/datasets/glue) dataset by

@lewtun

, using the predictions stored [here](https://huggingface.co/datasets/autoevaluate/autoeval-staging-eval-glue-mnli-026a6e-14686017).\
Accept this pull request to see the results displayed on the [Hub leaderboard](https://huggingface.co/spaces/autoevaluate/leaderboards?dataset=glue).\
Evaluate your model on more datasets [here](https://huggingface.co/spaces/autoevaluate/model-evaluator?dataset=glue).

Files changed (1) hide show
  1. README.md +64 -2
README.md CHANGED
@@ -10,9 +10,71 @@ datasets:
10
  license: mit
11
  pipeline_tag: zero-shot-classification
12
  widget:
13
- - text: "La seconda guerra mondiale vide contrapporsi, tra il 1939 e il 1945, le cosiddette potenze dell'Asse e gli Alleati che, come già accaduto ai belligeranti della prima guerra mondiale, si combatterono su gran parte del pianeta; il conflitto ebbe inizio il 1º settembre 1939 con l'attacco della Germania nazista alla Polonia e terminò, nel teatro europeo, l'8 maggio 1945 con la resa tedesca e, in quello asiatico, il successivo 2 settembre con la resa dell'Impero giapponese dopo i bombardamenti atomici di Hiroshima e Nagasaki."
14
- candidate_labels: "guerra, storia, moda, cibo"
 
 
 
 
 
 
15
  multi_class: true
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
16
  ---
17
 
18
  # XLM-roBERTa-large-it-mnli
 
10
  license: mit
11
  pipeline_tag: zero-shot-classification
12
  widget:
13
+ - text: "La seconda guerra mondiale vide contrapporsi, tra il 1939 e il 1945, le cosiddette\
14
+ \ potenze dell'Asse e gli Alleati che, come gi\xE0 accaduto ai belligeranti della\
15
+ \ prima guerra mondiale, si combatterono su gran parte del pianeta; il conflitto\
16
+ \ ebbe inizio il 1\xBA settembre 1939 con l'attacco della Germania nazista alla\
17
+ \ Polonia e termin\xF2, nel teatro europeo, l'8 maggio 1945 con la resa tedesca\
18
+ \ e, in quello asiatico, il successivo 2 settembre con la resa dell'Impero giapponese\
19
+ \ dopo i bombardamenti atomici di Hiroshima e Nagasaki."
20
+ candidate_labels: guerra, storia, moda, cibo
21
  multi_class: true
22
+ model-index:
23
+ - name: Jiva/xlm-roberta-large-it-mnli
24
+ results:
25
+ - task:
26
+ type: natural-language-inference
27
+ name: Natural Language Inference
28
+ dataset:
29
+ name: glue
30
+ type: glue
31
+ config: mnli
32
+ split: validation_matched
33
+ metrics:
34
+ - name: Accuracy
35
+ type: accuracy
36
+ value: 0.8819154355578197
37
+ verified: true
38
+ - name: Precision Macro
39
+ type: precision
40
+ value: 0.8814638070461666
41
+ verified: true
42
+ - name: Precision Micro
43
+ type: precision
44
+ value: 0.8819154355578197
45
+ verified: true
46
+ - name: Precision Weighted
47
+ type: precision
48
+ value: 0.881571663280083
49
+ verified: true
50
+ - name: Recall Macro
51
+ type: recall
52
+ value: 0.8802419956104793
53
+ verified: true
54
+ - name: Recall Micro
55
+ type: recall
56
+ value: 0.8819154355578197
57
+ verified: true
58
+ - name: Recall Weighted
59
+ type: recall
60
+ value: 0.8819154355578197
61
+ verified: true
62
+ - name: F1 Macro
63
+ type: f1
64
+ value: 0.8802937937959167
65
+ verified: true
66
+ - name: F1 Micro
67
+ type: f1
68
+ value: 0.8819154355578197
69
+ verified: true
70
+ - name: F1 Weighted
71
+ type: f1
72
+ value: 0.8811955957302677
73
+ verified: true
74
+ - name: loss
75
+ type: loss
76
+ value: 0.3171548545360565
77
+ verified: true
78
  ---
79
 
80
  # XLM-roBERTa-large-it-mnli