name lang dataset_name params rouge1 rouge2 rougeL rougeLsum bleu chrf comet bertscore_f1 CPU GPU
0 utrobinmv/t5_summary_en_ru_zh_base_2048 en samsum 284M 0,5216 0,2779 0,4468 0,4473 19,2342 41,4107 0,6993 0,8789 108373,7039 1145,7542
1 tuner007/pegasus_summarizer en samsum 544M 0,2668 0,0828 0,2044 0,2046 3,4771 32,8442 0,5513 0,8621 9912,0342 1463,4514
2 csebuetnlp/mT5_multilingual_XLSum en samsum 555M 0,1818 0,0220 0,1362 0,1362 1,4387 19,6004 0,4807 0,8460 2931,6322 713,9784
3 utrobinmv/t5_summary_en_ru_zh_base_2048 en wik_lingua 284M 0,3971 0,1657 0,3203 0,3202 12,1933 34,7667 0,7327 0,9090 166315,7678 1142,6015
4 tuner007/pegasus_summarizer en wik_lingua 544M 0,2274 0,0559 0,1535 0,1535 2,5071 29,7062 0,6333 0,8742 10249,0711 1310,8828
5 csebuetnlp/mT5_multilingual_XLSum en wik_lingua 555M 0,1583 0,0279 0,1218 0,1218 0,7107 14,5752 0,4995 0,8480 3281,7793 627,7975
6 utrobinmv/t5_summary_en_ru_zh_base_2048 en xlsum 284M 0,3823 0,1722 0,3123 0,3124 11,6603 34,3753 0,7080 0,8854 175224,0300 1141,0764
7 csebuetnlp/mT5_multilingual_XLSum en xlsum 555M 0,3633 0,1495 0,2926 0,2927 9,3201 32,3439 0,7050 0,8858 3659,6642 677,2351
8 tuner007/pegasus_summarizer en xlsum 544M 0,2195 0,0594 0,1542 0,1542 2,4936 30,6848 0,6469 0,8387 10983,5139 1341,6806
9 csebuetnlp/mT5_multilingual_XLSum en xsum 555M 0,3538 0,1379 0,2842 0,2841 8,4733 31,5627 0,6936 0,9092 4423,9514 820,9985
10 utrobinmv/t5_summary_en_ru_zh_base_2048 en xsum 284M 0,3385 0,1334 0,2725 0,2724 8,7853 30,8518 0,6747 0,9809 219800,7626 1203,9870
11 tuner007/pegasus_summarizer en xsum 544M 0,2200 0,0626 0,1561 0,1561 2,6640 30,9891 0,6387 0,8619 11574,5229 1380,6250
12 utrobinmv/t5_summary_en_ru_zh_base_2048 ru gazeta 284M 0,2382 0,0856 0,2318 0,2317 8,2211 34,7351 0,8213 0,7049 327039,4415 1767,1365
13 d0rj/rut5-base-summ ru gazeta 212M 0,2103 0,0679 0,2049 0,2050 7,0741 33,2510 0,8160 0,8043 13075,2147 1789,8092
14 IlyaGusev/rut5_base_sum_gazeta ru gazeta 232M 0,1952 0,0552 0,1904 0,1902 7,9465 34,8705 0,8295 0,7267 13576,8640 2198,5498
15 IlyaGusev/rut5_base_headline_gen_telegram ru gazeta 232M 0,1328 0,0400 0,1307 0,1306 0,1981 13,2006 0,7110 0,6722 4079,8815 619,5601
16 csebuetnlp/mT5_multilingual_XLSum ru gazeta 555M 0,1317 0,0338 0,1291 0,1293 1,8834 20,6772 0,7520 0,6728 8320,7197 1250,6618
17 csebuetnlp/mT5_m2o_russian_crossSum ru gazeta 555M 0,1113 0,0238 0,1091 0,1090 1,6296 21,2907 0,7551 0,6619 8430,9509 1408,3909
18 cointegrated/rut5-base-absum ru gazeta 232M 0,0967 0,0263 0,0957 0,0956 0,1156 12,1318 0,5768 0,7473 2625,4416 414,4877
19 basil-77/rut5-base-absum-hh ru gazeta 232M 0,0529 0,0202 0,0527 0,0529 0,0014 6,4889 0,4334 0,6169 3742,9545 437,2921
20 utrobinmv/t5_summary_en_ru_zh_base_2048 ru wik_lingua 284M 0,0719 0,0240 0,0710 0,0709 9,8880 34,2727 0,8040 0,8031 174959,1722 1329,3416
21 d0rj/rut5-base-summ ru wik_lingua 212M 0,0502 0,0126 0,0494 0,0495 4,9442 26,6600 0,7563 0,7401 5500,4578 991,6692
22 IlyaGusev/rut5_base_sum_gazeta ru wik_lingua 232M 0,0443 0,0114 0,0433 0,0432 1,6619 23,8791 0,6710 0,6079 6362,2744 1486,9309
23 IlyaGusev/rut5_base_headline_gen_telegram ru wik_lingua 232M 0,0404 0,0076 0,0401 0,0401 0,1288 9,9180 0,5734 0,5912 1874,8914 385,1174
24 csebuetnlp/mT5_multilingual_XLSum ru wik_lingua 555M 0,0368 0,0066 0,0364 0,0363 0,5216 13,9777 0,5693 0,5724 4416,1965 838,6849
25 cointegrated/rut5-base-absum ru wik_lingua 232M 0,0283 0,0066 0,0279 0,0278 0,4891 13,2707 0,5862 0,6629 1447,3995 324,2195
26 csebuetnlp/mT5_m2o_russian_crossSum ru wik_lingua 555M 0,0205 0,0015 0,0204 0,0204 0,2353 13,1577 0,5175 0,6129 4135,6203 808,6240
27 basil-77/rut5-base-absum-hh ru wik_lingua 232M 0,0196 0,0040 0,0197 0,0197 0,0020 5,7498 0,3939 0,6111 1702,8463 306,5252
28 csebuetnlp/mT5_m2o_russian_crossSum ru xlsum 555M 0,1558 0,0550 0,1553 0,1555 24,6050 44,3004 0,8386 0,7425 7499,6227 1187,2912
29 utrobinmv/t5_summary_en_ru_zh_base_2048 ru xlsum 284M 0,1075 0,0300 0,1065 0,1065 8,3411 32,8491 0,7991 0,7340 252332,6646 1355,1514
30 csebuetnlp/mT5_multilingual_XLSum ru xlsum 555M 0,0951 0,0275 0,0946 0,0947 6,3615 29,7097 0,7989 0,6898 7083,5025 1149,9265
31 IlyaGusev/rut5_base_sum_gazeta ru xlsum 232M 0,0671 0,0157 0,0662 0,0664 2,4561 31,3184 0,7732 0,7022 10592,2624 1940,5085
32 IlyaGusev/rut5_base_headline_gen_telegram ru xlsum 232M 0,0516 0,0118 0,0511 0,0512 1,0512 15,8658 0,6934 0,6620 4003,0645 633,6079
33 d0rj/rut5-base-summ ru xlsum 212M 0,0499 0,0130 0,0497 0,0498 2,1401 21,3305 0,7174 0,6256 8134,0000 961,9950
34 cointegrated/rut5-base-absum ru xlsum 232M 0,0446 0,0111 0,0443 0,0444 0,9892 16,3554 0,5974 0,7004 2526,2625 383,0750
35 basil-77/rut5-base-absum-hh ru xlsum 232M 0,0216 0,0060 0,0217 0,0217 0,0764 9,1664 0,4549 0,6412 2635,4621 392,2910
36 utrobinmv/t5_summary_en_ru_zh_base_2048 zh wik_lingua 284M 0,1036 0,0327 0,1024 0,1022 1,3133 18,3581 0,7790 0,7249 137677,0933 1229,4646
37 csebuetnlp/mT5_multilingual_XLSum zh wik_lingua 555M 0,0464 0,0071 0,0461 0,0461 0,0358 4,3841 0,5302 0,5810 2386,8119 531,8816
38 yihsuan/mt5_chinese_small zh wik_lingua 286M 0,0361 0,0058 0,0355 0,0355 0,0 3,1701 0,4571 0,5468 461,7991 175,0923
39 csebuetnlp/mT5_m2o_chinese_simplified_crossSum zh wik_lingua 555M 0,0207 0,0017 0,0206 0,0206 0,0478 3,5232 0,4930 0,6350 3985,7058 868,5606
40 csebuetnlp/mT5_m2o_chinese_simplified_crossSum zh xlsum 555M 0,1973 0,0956 0,1961 0,1961 0,7344 26,1239 0,7845 0,7229 5438,0989 948,1635
41 csebuetnlp/mT5_multilingual_XLSum zh xlsum 555M 0,1568 0,0515 0,1549 0,1548 0,3744 17,6502 0,7737 0,7880 4813,2123 784,1282
42 utrobinmv/t5_summary_en_ru_zh_base_2048 zh xlsum 284M 0,1272 0,0375 0,1254 0,1256 0,2955 16,4593 0,7519 0,7353 276688,5327 1418,4593
43 yihsuan/mt5_chinese_small zh xlsum 286M 0,0271 0,0028 0,0270 0,0269 0,0 3,7895 0,5155 0,4937 641,3528 211,3910