S3D models for Russian Sign Language (easy_sign)

ONNX-веса S3D из проекта ai-forever/easy_sign.

В репозитории две линейки моделей — они обучены на разных данных и с разным числом классов.

Демо-модель easy_sign (1598 жестов РЖЯ)

Это та же S3D.onnx, что лежит в GitHub-репозитории easy_sign. Окно 32 кадра, инференс через OpenVINO / ONNX Runtime на CPU.

• S3D.onnx (~37 MB)
• RSL_class_list.txt

https://huggingface.co/maximazzik/easy_sign/resolve/main/S3D.onnx

Slovo (1001 класс)

Отдельные модели, обученные на датасете Slovo — не путать с демо выше. На вход идёт RGB-клип 1×3×T×224×224.

Кадры (T)	Файл	Mean accuracy, %	Размер
32	slovo/S3Dx32x1x1001.onnx	44.22	34.6 MB
48	slovo/S3Dx48x1x1001.onnx	52.28	34.6 MB
64	slovo/S3Dx64x1x1001.onnx	55.86	34.6 MB

https://huggingface.co/maximazzik/easy_sign/resolve/main/slovo/S3Dx32x1x1001.onnx
https://huggingface.co/maximazzik/easy_sign/resolve/main/slovo/S3Dx48x1x1001.onnx
https://huggingface.co/maximazzik/easy_sign/resolve/main/slovo/S3Dx64x1x1001.onnx

Источник

• Код и демо: https://github.com/ai-forever/easy_sign
• Статья: https://habr.com/ru/companies/sberbank/articles/775688/

Лицензия

CC BY-SA 4.0, как у easy_sign.