Configuration Parsing Warning:In UNKNOWN_FILENAME: "auto_map.AutoTokenizer" must be a string

YAML Metadata Warning:empty or missing yaml metadata in repo card

Check out the documentation for more information.

Russian Snowball Stemmer

🗃️ Корпус

447 статей из Vedomosti (2020–2025) с предварительной очисткой и нормализацией текста

⚙️ Параметры

  • Алгоритм: SnowballStemmer (Porter Stemmer для русского языка)
  • Язык: Русский
  • Тип: Стемминг (агрессивная нормализация)
  • Основан на: Алгоритме Портера

📊 Метрики

  • Объём словаря: 11,759 уникальных токенов
  • OOV rate: 4.79%
  • Семантическая согласованность: 98.09%
  • Время обработки: 2.011 сек
  • Среднее токенов на статью: 248.7

📝 Лицензия

MIT License

Downloads last month
6
Inference Providers NEW
This model isn't deployed by any Inference Provider. 🙋 Ask for provider support