Классификатор вопросов про pandas по функциям
distilroberta-base, классы — 691 функция pandas (встречались в train не реже 3 раз).
Метки классов — имена страниц API Reference (pandas.DataFrame.merge). Обучена с soft-target cross-entropy:
если ответ ссылается на несколько функций, вероятность делится между ними поровну.
Качество на test (вопросов: 6 742)
| Recall@1 | Recall@5 | Recall@10 | MRR |
|---|---|---|---|
| 0.247 | 0.519 | 0.639 | 0.373 |
В демо проекта используется в смеси с KIZZPER/pandas-so-function-retriever.
Код, эксперименты и отчёты: репозиторий проекта (см. README).
Обучено на вопросах и ответах StackOverflow, которые распространяются по лицензии CC BY-SA 4.0. Источник данных: Stack Exchange Data Explorer.
- Downloads last month
- 21
Model tree for KIZZPER/pandas-so-function-classifier
Base model
distilbert/distilroberta-base