lewtun HF staff commited on
Commit
cd343d8
1 Parent(s): 44418a4

Add evaluation results on catalonia_independence dataset

Browse files

Beep boop, I am a bot from Hugging Face's automatic model evaluator 👋!\
Your model has been evaluated on the [catalonia_independence](https://huggingface.co/datasets/catalonia_independence) dataset by

@lewtun

, using the predictions stored [here](https://huggingface.co/datasets/autoevaluate/autoeval-staging-eval-project-2e072638-8015093).\
Accept this pull request to see the results displayed on the [Hub leaderboard](https://huggingface.co/spaces/autoevaluate/leaderboards?dataset=catalonia_independence).\
Evaluate your model on more datasets [here](https://huggingface.co/spaces/autoevaluate/model-evaluator?dataset=catalonia_independence).

Files changed (1) hide show
  1. README.md +62 -4
README.md CHANGED
@@ -2,7 +2,7 @@
2
  license: apache-2.0
3
  language: ca
4
  tags:
5
- - "catalan"
6
  datasets:
7
  - catalonia_independence
8
  metrics:
@@ -21,10 +21,68 @@ model-index:
21
  - name: Accuracy
22
  type: accuracy
23
  value: 0.7611940298507462
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
24
  widget:
25
- - text: "Puigdemont, a l'estat espanyol: Quatre anys després, ens hem guanyat el dret a dir prou"
26
- - text: "Llarena demana la detenció de Comín i Ponsatí aprofitant que són a Itàlia amb Puigdemont"
27
- - text: "Assegura l'expert que en un 46% els catalans s'inclouen dins del que es denomina com el doble sentiment identitari. És a dir, se senten tant catalans com espanyols. 1 de cada cinc, en canvi, té un sentiment excloent, només se senten catalans, i un 4% sol espanyol."
 
 
 
 
 
28
  ---
29
 
30
  # roberta-base-ca-finetuned-catalonia-independence-detector
 
2
  license: apache-2.0
3
  language: ca
4
  tags:
5
+ - catalan
6
  datasets:
7
  - catalonia_independence
8
  metrics:
 
21
  - name: Accuracy
22
  type: accuracy
23
  value: 0.7611940298507462
24
+ - task:
25
+ type: text-classification
26
+ name: Text Classification
27
+ dataset:
28
+ name: catalonia_independence
29
+ type: catalonia_independence
30
+ config: catalan
31
+ split: test
32
+ metrics:
33
+ - name: Accuracy
34
+ type: accuracy
35
+ value: 0.7208955223880597
36
+ verified: true
37
+ - name: Precision Macro
38
+ type: precision
39
+ value: 0.7532458247651523
40
+ verified: true
41
+ - name: Precision Micro
42
+ type: precision
43
+ value: 0.7208955223880597
44
+ verified: true
45
+ - name: Precision Weighted
46
+ type: precision
47
+ value: 0.7367396361532118
48
+ verified: true
49
+ - name: Recall Macro
50
+ type: recall
51
+ value: 0.6880645531209203
52
+ verified: true
53
+ - name: Recall Micro
54
+ type: recall
55
+ value: 0.7208955223880597
56
+ verified: true
57
+ - name: Recall Weighted
58
+ type: recall
59
+ value: 0.7208955223880597
60
+ verified: true
61
+ - name: F1 Macro
62
+ type: f1
63
+ value: 0.7013044744309381
64
+ verified: true
65
+ - name: F1 Micro
66
+ type: f1
67
+ value: 0.7208955223880597
68
+ verified: true
69
+ - name: F1 Weighted
70
+ type: f1
71
+ value: 0.713640086434487
72
+ verified: true
73
+ - name: loss
74
+ type: loss
75
+ value: 0.6895929574966431
76
+ verified: true
77
  widget:
78
+ - text: "Puigdemont, a l'estat espanyol: Quatre anys despr\xE9s, ens hem guanyat el\
79
+ \ dret a dir prou"
80
+ - text: "Llarena demana la detenci\xF3 de Com\xEDn i Ponsat\xED aprofitant que s\xF3\
81
+ n a It\xE0lia amb Puigdemont"
82
+ - text: "Assegura l'expert que en un 46% els catalans s'inclouen dins del que es denomina\
83
+ \ com el doble sentiment identitari. \xC9s a dir, se senten tant catalans com\
84
+ \ espanyols. 1 de cada cinc, en canvi, t\xE9 un sentiment excloent, nom\xE9s se\
85
+ \ senten catalans, i un 4% sol espanyol."
86
  ---
87
 
88
  # roberta-base-ca-finetuned-catalonia-independence-detector