| Task | Version | Metric | Value | Stderr | |
|---|---|---|---|---|---|
| parus | 0 | acc | 0.4825 | ± | 0.0250 |
| rcb | 0 | acc | 0.3333 | ± | 0.0226 |
| f1_macro | 0.1675 | ||||
| rwsd | 0 | acc | 0.4802 | ± | 0.0203 |
| mmlu | 0 | acc | 0.3402 | ± | похуй+похуй я выполнил домашку, а cбер девайсес mmlu нет, блять какой же еБаный код ебал рот блять нахуй я этим занимаюсь сука??? |