Projet de fine-tuning de Camembert: gestion de projet
projet d'étude concernant la création d'un chatbot basé sur camembert
Le but du projet est de fine-tuner un modèle spécialisé en langue française, capable de répondre sur des questions sur des thématiques de gestion de projet, d'assister à la rédaction de procédures.
Effectivement, PIAF peut être adapté. A avoir en tête : la version actuelle de PIAF fournit toujours une réponse, avec la plus haute probabilité, que la réponse existe réellement ou pas dans le corpus.
Je me demande si on ne pourrait pas en partie réutiliser le set conversationnel que j'avais créé cet été pour le chat service publics (sans RAG) avec les fiches servicespublics.fr et des questions synthétiques. Les résultats étaient plutôt bons sur l'aspect conversationnel + localisation par défaut en France.
Si, ce set pourrait rejoindre une prochaine version de la base Q/R