izaitova commited on
Commit
f14df56
1 Parent(s): cacd602

End of training

Browse files
Files changed (1) hide show
  1. README.md +54 -54
README.md CHANGED
@@ -17,67 +17,67 @@ should probably proofread and complete it, then remove this comment. -->
17
 
18
  This model is a fine-tuned version of [allegro/herbert-large-cased](https://huggingface.co/allegro/herbert-large-cased) on the universal_dependencies dataset.
19
  It achieves the following results on the evaluation set:
20
- - Loss: 0.4494
21
- - : {'precision': 0.9848484848484849, 'recall': 0.9154929577464789, 'f1': 0.948905109489051, 'number': 71}
22
- - Arataxis:insert: {'precision': 0.6216216216216216, 'recall': 0.34328358208955223, 'f1': 0.4423076923076923, 'number': 67}
23
- - Arataxis:obj: {'precision': 0.6428571428571429, 'recall': 0.46551724137931033, 'f1': 0.5399999999999999, 'number': 58}
24
- - Ark: {'precision': 0.8614457831325302, 'recall': 0.7944444444444444, 'f1': 0.8265895953757226, 'number': 180}
25
- - Ase: {'precision': 0.9363103953147877, 'recall': 0.900070372976777, 'f1': 0.9178327951202009, 'number': 1421}
26
- - Bj: {'precision': 0.8612244897959184, 'recall': 0.8115384615384615, 'f1': 0.8356435643564357, 'number': 520}
27
- - Bl: {'precision': 0.8, 'recall': 0.8054054054054054, 'f1': 0.8026936026936028, 'number': 740}
28
- - Bl:agent: {'precision': 0.6875, 'recall': 0.6875, 'f1': 0.6875, 'number': 16}
29
- - Bl:arg: {'precision': 0.7847222222222222, 'recall': 0.710691823899371, 'f1': 0.7458745874587458, 'number': 318}
30
- - Bl:cmpr: {'precision': 0.8461538461538461, 'recall': 0.6470588235294118, 'f1': 0.7333333333333334, 'number': 17}
31
- - C: {'precision': 0.8974358974358975, 'recall': 0.8115942028985508, 'f1': 0.8523592085235921, 'number': 345}
32
- - C:preconj: {'precision': 1.0, 'recall': 0.3333333333333333, 'f1': 0.5, 'number': 6}
33
- - Cl: {'precision': 0.8581081081081081, 'recall': 0.8141025641025641, 'f1': 0.8355263157894737, 'number': 156}
34
- - Cl:relcl: {'precision': 0.7368421052631579, 'recall': 0.5526315789473685, 'f1': 0.631578947368421, 'number': 76}
35
- - Comp: {'precision': 0.7606382978723404, 'recall': 0.7079207920792079, 'f1': 0.7333333333333332, 'number': 202}
36
  - Comp:cleft: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
37
- - Comp:obj: {'precision': 0.5, 'recall': 0.2916666666666667, 'f1': 0.3684210526315789, 'number': 24}
38
- - Comp:pred: {'precision': 0.4375, 'recall': 0.7, 'f1': 0.5384615384615384, 'number': 10}
39
  - Comp:subj: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
40
- - Dvcl: {'precision': 0.7983193277310925, 'recall': 0.7480314960629921, 'f1': 0.7723577235772359, 'number': 127}
41
- - Dvcl:cmpr: {'precision': 0.3333333333333333, 'recall': 0.25, 'f1': 0.28571428571428575, 'number': 4}
42
- - Dvmod: {'precision': 0.8131868131868132, 'recall': 0.7789473684210526, 'f1': 0.7956989247311829, 'number': 380}
43
- - Dvmod:arg: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
44
- - Dvmod:emph: {'precision': 0.7755102040816326, 'recall': 0.7354838709677419, 'f1': 0.7549668874172186, 'number': 155}
45
- - Dvmod:neg: {'precision': 0.9067796610169492, 'recall': 0.8492063492063492, 'f1': 0.8770491803278689, 'number': 126}
46
- - Et: {'precision': 0.9072164948453608, 'recall': 0.7927927927927928, 'f1': 0.8461538461538461, 'number': 111}
47
- - Et:numgov: {'precision': 0.8421052631578947, 'recall': 0.8, 'f1': 0.8205128205128205, 'number': 20}
48
- - Et:nummod: {'precision': 0.5, 'recall': 1.0, 'f1': 0.6666666666666666, 'number': 1}
49
- - Et:poss: {'precision': 0.8928571428571429, 'recall': 0.8620689655172413, 'f1': 0.8771929824561403, 'number': 58}
50
  - Iscourse:intj: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}
51
  - Ist: {'precision': 1.0, 'recall': 0.6666666666666666, 'f1': 0.8, 'number': 9}
52
- - Ixed: {'precision': 0.6833333333333333, 'recall': 0.47674418604651164, 'f1': 0.5616438356164384, 'number': 86}
53
- - Lat: {'precision': 0.6724137931034483, 'recall': 0.5416666666666666, 'f1': 0.6, 'number': 72}
54
- - Mod: {'precision': 0.7808471454880295, 'recall': 0.7138047138047138, 'f1': 0.7458223394898855, 'number': 1188}
55
- - Mod:arg: {'precision': 0.5681818181818182, 'recall': 0.4878048780487805, 'f1': 0.5249343832020996, 'number': 205}
56
- - Mod:flat: {'precision': 0.5609756097560976, 'recall': 0.3898305084745763, 'f1': 0.46, 'number': 59}
57
- - Mod:poss: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
58
  - Mod:pred: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
59
- - Obj: {'precision': 0.7905759162303665, 'recall': 0.6832579185520362, 'f1': 0.733009708737864, 'number': 221}
60
- - Ocative: {'precision': 0.75, 'recall': 0.9, 'f1': 0.8181818181818182, 'number': 10}
61
- - Onj: {'precision': 0.7920792079207921, 'recall': 0.6517311608961304, 'f1': 0.7150837988826816, 'number': 491}
62
- - Oot: {'precision': 0.955, 'recall': 0.955, 'f1': 0.955, 'number': 1000}
63
- - Op: {'precision': 0.7974683544303798, 'recall': 0.7682926829268293, 'f1': 0.782608695652174, 'number': 82}
64
- - Ppos: {'precision': 0.7272727272727273, 'recall': 0.5423728813559322, 'f1': 0.6213592233009708, 'number': 59}
65
  - Rphan: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
66
- - Subj: {'precision': 0.9121287128712872, 'recall': 0.8826347305389222, 'f1': 0.8971393791844188, 'number': 835}
67
- - Subj:pass: {'precision': 0.7727272727272727, 'recall': 0.5862068965517241, 'f1': 0.6666666666666667, 'number': 29}
68
- - Ummod: {'precision': 0.8769230769230769, 'recall': 0.890625, 'f1': 0.883720930232558, 'number': 64}
69
- - Ummod:gov: {'precision': 0.7346938775510204, 'recall': 0.72, 'f1': 0.7272727272727272, 'number': 50}
70
- - Unct: {'precision': 0.9216317767042405, 'recall': 0.8516865079365079, 'f1': 0.8852797112657901, 'number': 2016}
71
- - Ux: {'precision': 0.9166666666666666, 'recall': 0.6111111111111112, 'f1': 0.7333333333333334, 'number': 36}
72
- - Ux:clitic: {'precision': 0.9473684210526315, 'recall': 0.9, 'f1': 0.9230769230769231, 'number': 60}
73
- - Ux:cnd: {'precision': 0.8, 'recall': 0.7272727272727273, 'f1': 0.761904761904762, 'number': 22}
74
  - Ux:imp: {'precision': 1.0, 'recall': 0.75, 'f1': 0.8571428571428571, 'number': 4}
75
- - Ux:pass: {'precision': 0.7297297297297297, 'recall': 0.6923076923076923, 'f1': 0.7105263157894737, 'number': 39}
76
- - Xpl:pv: {'precision': 0.8973214285714286, 'recall': 0.8410041841004184, 'f1': 0.8682505399568035, 'number': 239}
77
- - Overall Precision: 0.8599
78
- - Overall Recall: 0.7975
79
- - Overall F1: 0.8275
80
- - Overall Accuracy: 0.8468
81
 
82
  ## Model description
83
 
 
17
 
18
  This model is a fine-tuned version of [allegro/herbert-large-cased](https://huggingface.co/allegro/herbert-large-cased) on the universal_dependencies dataset.
19
  It achieves the following results on the evaluation set:
20
+ - Loss: 0.3266
21
+ - : {'precision': 0.9565217391304348, 'recall': 0.9295774647887324, 'f1': 0.9428571428571428, 'number': 71}
22
+ - Arataxis:insert: {'precision': 0.7380952380952381, 'recall': 0.4626865671641791, 'f1': 0.5688073394495413, 'number': 67}
23
+ - Arataxis:obj: {'precision': 0.8181818181818182, 'recall': 0.7758620689655172, 'f1': 0.7964601769911505, 'number': 58}
24
+ - Ark: {'precision': 0.9248554913294798, 'recall': 0.8888888888888888, 'f1': 0.9065155807365439, 'number': 180}
25
+ - Ase: {'precision': 0.9654178674351584, 'recall': 0.9429978888106967, 'f1': 0.9540761836952653, 'number': 1421}
26
+ - Bj: {'precision': 0.9072978303747534, 'recall': 0.8846153846153846, 'f1': 0.8958130477117819, 'number': 520}
27
+ - Bl: {'precision': 0.8146718146718147, 'recall': 0.8554054054054054, 'f1': 0.834541858932103, 'number': 740}
28
+ - Bl:agent: {'precision': 0.875, 'recall': 0.875, 'f1': 0.875, 'number': 16}
29
+ - Bl:arg: {'precision': 0.8407407407407408, 'recall': 0.7138364779874213, 'f1': 0.772108843537415, 'number': 318}
30
+ - Bl:cmpr: {'precision': 0.75, 'recall': 0.7058823529411765, 'f1': 0.7272727272727272, 'number': 17}
31
+ - C: {'precision': 0.9197530864197531, 'recall': 0.863768115942029, 'f1': 0.890881913303438, 'number': 345}
32
+ - C:preconj: {'precision': 0.8, 'recall': 0.6666666666666666, 'f1': 0.7272727272727272, 'number': 6}
33
+ - Cl: {'precision': 0.8733333333333333, 'recall': 0.8397435897435898, 'f1': 0.8562091503267975, 'number': 156}
34
+ - Cl:relcl: {'precision': 0.9056603773584906, 'recall': 0.631578947368421, 'f1': 0.7441860465116278, 'number': 76}
35
+ - Comp: {'precision': 0.8118279569892473, 'recall': 0.7475247524752475, 'f1': 0.7783505154639175, 'number': 202}
36
  - Comp:cleft: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
37
+ - Comp:obj: {'precision': 0.55, 'recall': 0.4583333333333333, 'f1': 0.5, 'number': 24}
38
+ - Comp:pred: {'precision': 0.7272727272727273, 'recall': 0.8, 'f1': 0.761904761904762, 'number': 10}
39
  - Comp:subj: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
40
+ - Dvcl: {'precision': 0.8270676691729323, 'recall': 0.8661417322834646, 'f1': 0.8461538461538461, 'number': 127}
41
+ - Dvcl:cmpr: {'precision': 0.6666666666666666, 'recall': 0.5, 'f1': 0.5714285714285715, 'number': 4}
42
+ - Dvmod: {'precision': 0.8817204301075269, 'recall': 0.8631578947368421, 'f1': 0.8723404255319148, 'number': 380}
43
+ - Dvmod:arg: {'precision': 0.4, 'recall': 0.5, 'f1': 0.4444444444444445, 'number': 4}
44
+ - Dvmod:emph: {'precision': 0.8571428571428571, 'recall': 0.8516129032258064, 'f1': 0.8543689320388348, 'number': 155}
45
+ - Dvmod:neg: {'precision': 0.9411764705882353, 'recall': 0.8888888888888888, 'f1': 0.9142857142857143, 'number': 126}
46
+ - Et: {'precision': 0.9320388349514563, 'recall': 0.8648648648648649, 'f1': 0.8971962616822431, 'number': 111}
47
+ - Et:numgov: {'precision': 0.9473684210526315, 'recall': 0.9, 'f1': 0.9230769230769231, 'number': 20}
48
+ - Et:nummod: {'precision': 1.0, 'recall': 1.0, 'f1': 1.0, 'number': 1}
49
+ - Et:poss: {'precision': 0.9482758620689655, 'recall': 0.9482758620689655, 'f1': 0.9482758620689655, 'number': 58}
50
  - Iscourse:intj: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}
51
  - Ist: {'precision': 1.0, 'recall': 0.6666666666666666, 'f1': 0.8, 'number': 9}
52
+ - Ixed: {'precision': 0.875, 'recall': 0.5697674418604651, 'f1': 0.6901408450704225, 'number': 86}
53
+ - Lat: {'precision': 0.819672131147541, 'recall': 0.6944444444444444, 'f1': 0.7518796992481204, 'number': 72}
54
+ - Mod: {'precision': 0.8294849023090586, 'recall': 0.7861952861952862, 'f1': 0.8072601555747624, 'number': 1188}
55
+ - Mod:arg: {'precision': 0.6832298136645962, 'recall': 0.5365853658536586, 'f1': 0.6010928961748634, 'number': 205}
56
+ - Mod:flat: {'precision': 0.6326530612244898, 'recall': 0.5254237288135594, 'f1': 0.5740740740740742, 'number': 59}
57
+ - Mod:poss: {'precision': 1.0, 'recall': 0.25, 'f1': 0.4, 'number': 4}
58
  - Mod:pred: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
59
+ - Obj: {'precision': 0.8617021276595744, 'recall': 0.7330316742081447, 'f1': 0.7921760391198045, 'number': 221}
60
+ - Ocative: {'precision': 0.9090909090909091, 'recall': 1.0, 'f1': 0.9523809523809523, 'number': 10}
61
+ - Onj: {'precision': 0.830316742081448, 'recall': 0.7474541751527495, 'f1': 0.7867095391211147, 'number': 491}
62
+ - Oot: {'precision': 0.9740777666999003, 'recall': 0.977, 'f1': 0.9755366949575637, 'number': 1000}
63
+ - Op: {'precision': 0.8470588235294118, 'recall': 0.8780487804878049, 'f1': 0.8622754491017964, 'number': 82}
64
+ - Ppos: {'precision': 0.6612903225806451, 'recall': 0.6949152542372882, 'f1': 0.6776859504132231, 'number': 59}
65
  - Rphan: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
66
+ - Subj: {'precision': 0.9516129032258065, 'recall': 0.918562874251497, 'f1': 0.9347958561852528, 'number': 835}
67
+ - Subj:pass: {'precision': 0.8275862068965517, 'recall': 0.8275862068965517, 'f1': 0.8275862068965517, 'number': 29}
68
+ - Ummod: {'precision': 0.9393939393939394, 'recall': 0.96875, 'f1': 0.9538461538461539, 'number': 64}
69
+ - Ummod:gov: {'precision': 0.9555555555555556, 'recall': 0.86, 'f1': 0.9052631578947369, 'number': 50}
70
+ - Unct: {'precision': 0.9564315352697096, 'recall': 0.9146825396825397, 'f1': 0.9350912778904665, 'number': 2016}
71
+ - Ux: {'precision': 0.9285714285714286, 'recall': 0.7222222222222222, 'f1': 0.8125000000000001, 'number': 36}
72
+ - Ux:clitic: {'precision': 0.9661016949152542, 'recall': 0.95, 'f1': 0.957983193277311, 'number': 60}
73
+ - Ux:cnd: {'precision': 0.9090909090909091, 'recall': 0.9090909090909091, 'f1': 0.9090909090909091, 'number': 22}
74
  - Ux:imp: {'precision': 1.0, 'recall': 0.75, 'f1': 0.8571428571428571, 'number': 4}
75
+ - Ux:pass: {'precision': 0.8461538461538461, 'recall': 0.8461538461538461, 'f1': 0.8461538461538461, 'number': 39}
76
+ - Xpl:pv: {'precision': 0.940677966101695, 'recall': 0.9288702928870293, 'f1': 0.9347368421052632, 'number': 239}
77
+ - Overall Precision: 0.9013
78
+ - Overall Recall: 0.8597
79
+ - Overall F1: 0.88
80
+ - Overall Accuracy: 0.8941
81
 
82
  ## Model description
83