Enseignement de l’intonation du français par une synthèse vocale contrôlée par le geste : étude de faisabilité (2024)

Abstract: Peut-on enseigner l’intonation française en classe avec une synthèse vocale contrôlée gestuellement sur une tablette ? La fréquence fondamentale et la durée de quatre phrases déclaratives, quatre questions polaires, quatre énoncés exprimant l’incrédulité (1 à 4 syllabes) de deux apprenantes ukrainiennes débutantes en français ont été comparées avant et après quatre entraînements hebdomadaires. Les apprenantes devaient écouter un enregistrement de référence, puis visualiser le modèle sur la tablette, tracer l’intonation manuellement, écouter le résultat synthétisé, et tracer et écouter leur tracé sans guide. Elles produisaient initialement des phrases déclaratives avec une intonation ascendante, et ont différencié les déclarations et les questions polaires après l’entraînement. L’expression de l’incrédulité s’est améliorée pour l’une. L’autre a montré quelques difficultés à maîtriser cette technologie. Cette première étude de cas utilisant la synthèse vocale contrôlée gestuellement est une approche prometteuse permettant plus de pratique de l’intonation en classe.

## introduction l'acquisition de l'intonation peut s'avérer difficile pour les apprenants non natifs @xcite . plusieurs stratégies d'enseignement ont été proposées et testées, visant à attirer l'attention sur les changements de hauteur pour la perception et la production. l'association entre un son et une représentation visuelle ou gestuelle de son contour de fréquence fondamentale (fo) peut aider un apprenant à percevoir un mouvement fo non familier et à ancrer l'établissement de nouvelles catégories de mouvements de hauteur @xcite . les représentations visuelles des contours fo peuvent également transmettre les différences entre un modèle et les productions des apprenants, pour les aider à comprendre et à corriger leurs propres erreurs @xcite . pour la production, les gestes ont été utilisés pour renforcer kinesthésiquement les caractéristiques de l'intonation (entre autres @xcite . notre recherche explore comment la synthèse vocale contrôlée en temps réel par des gestes de la main, appelée synthèse vocale performative (pvs, @xcite , peut être utilisée par des locuteurs non-natifs pour la pratique de l'intonation d'une langue étrangère. des études pilotes de pvs avec des apprenants de l2 ont été menées sur des corpus français et anglais, à l'aide de l'interface gepeto sur tablette mobile. ces premières études ont permis de valider le potentiel de l'utilisation de pvs pour l'apprentissage de l'intonation @xcite . auparavant, le déploiement de gepeto était limité à des études à session unique dans des conditions de laboratoire contrôlées. le présent travail explore la manière dont gepeto peut être incorporé de manière longitudinale pour compléter l'enseignement des langues étrangères en classe. dans cet article, nous présenterons une étude de cas sur l'acquisition du français par des apprenants ukrainiens dont l'une des difficultés de communication réside dans la compréhension et la production de la distinction prosodique entre les énoncés et les questions polaires (questions oui/non) en français. certaines de ces difficultés pourraient être dues aux différences entre les systèmes prosodiques du français et de l'ukrainien : l'ukrainien est une langue slave avec une accentuation lexicale libre. les phrases déclaratives et les questions "wh" sont caractérisées par un contour d'intonation descendant, tandis que les questions polaires sont produites avec un contour d'intonation ascendant. cependant, l'ukrainien possède également des accents de hauteur qui signalent une focalisation large : dans ce cas, ils sont produits avec un accent prénucléaire ascendant (bas-haut) suivi d'un accent nucléaire descendant (haut-bas). pour ces raisons, certaines phrases déclaratives peuvent présenter des schémas intonatifs ascendants @xcite . le français est une langue romane avec un accent sur la dernière syllabe d'un groupe de mots @xcite . en français, sans expression d'une attitude particulière, les phrases déclaratives se terminent par un contour descendant, tandis que les questions polaires se terminent avec un contour ascendant @xcite . cette étude de cas cherche à savoir si l'entraînement à l'utilisation de la pvs permet aux apprenants ukrainiens débutants de français d'améliorer leur production différenciée de phrases déclaratives, de questions polaires et d'un modèle d'intonation attitudinal (incrédulité) dans des énoncés courts. ## matériel et méthodes l'interface gepeto a été utilisée pour les conditions gestuelles de l'étude. elle consiste en une interface mobile personnalisée qui contrôle un synthétiseur vocal, voks, qui permet le contrôle mélodique et rythmique en temps réel d'échantillons préalablement enregistrés ou de synthèse vocale par l'utilisation de gestes de la main @xcite . l'interface mobile fonctionne dans le navigateur d'une tablette ou d'un téléphone portable. cette étude a utilisé les téléphones mobiles personnels de chaque sujet, contrôlés par des mouvements du bout des doigts. le tracé d'une courbe dans la zone de contrôle de l'interface du téléphone portable produit une resynthèse en temps réel de la phrase actuelle à partir de voks. l'axe horizontal détermine la position temporelle de l'échantillon original à resynthétiser, et le moment de la resynthèse est déterminé par le moment du geste de l'utilisateur. l'axe vertical de la région de contrôle module la hauteur de la sortie. il est régulièrement espacé sur une échelle de demi-tons (st) avec une gamme de 24st (2 octaves) calibrée autour du corpus de l'étude. un panneau de boutons apparaît à gauche de la région de contrôle. le bouton du haut permet de basculer entre le mode fondu et le mode maintenu pour la trace de l'utilisateur, où la trace disparaît après 1,5 seconde ou reste jusqu'à ce qu'elle soit effacée. en mode maintenu, trois autres boutons sont activés, permettant à l'utilisateur de lire, d'effacer ou d'enregistrer le tracé du geste en cours. le bouton situé dans le coin inférieur gauche déclenche la lecture de l'enregistrement de référence pour la phrase en cours. l'enseignant dispose d'une interface de commande distincte qui lui permet de sélectionner la phrase en cours et d'activer ou de désactiver le guide visuel montrant la courbe d'intonation de la phrase de référence. le profil linguistique des apprenants a été documenté via un questionnaire initial : langue maternelle et autres langues apprises, durée du séjour en france et pratique du français, niveau de français, formation dans leur pays et en france, et utilisation actuelle du français et de la langue maternelle. ## discussion et conclusion malgré une notable réduction de la population due à des circonstances imprévues et indépendantes de notre volonté, l'étude a été utile et bénéfique pour tester la configuration expérimentale globale et la faisabilité de l'utilisation d'un système de synthèse vocale contrôlé par le geste. elle a dévoilé plusieurs points inattendus liés à la production de l'intonation du français et à la prise en main de l'outil. la montée finale observée pour certains des énoncés déclaratifs plurisyllabiques produits par uf2 pourrait s'expliquer par la présence éventuelle d'un accent de hauteur en ukrainien @xcite . l'intonation moyenne du pré-test pour les 10 sujets a montré un fo ascendant pour les trois types d'intonation en français, la question et l'incrédulité présentant une pente plus raide que pour la déclaration. cependant, un schéma différent a été trouvé pour les énoncés déclaratifs de 4 syllabes, qui avaient un contour d'intonation plat dans le prétest, se terminant par une légère montée finale. il existe donc des variations dans les modèles de production intonative en fonction de la longueur de l'énoncé. par la suite, il serait souhaitable de tester l'outil sur des énoncés plus longs afin d'évaluer son utilité pour améliorer l'intonation de ces énoncés. dans le post-test, la principale amélioration s'est produite dans la production d'énoncés déclaratifs, qui ont montré un contour descendant plus fort par rapport au pré-test pour les deux apprenants. dans l'ensemble, uf1 a réalisé des contours déclaratifs finaux plus proches de ceux du locuteur natif que uf2. uf1 semble également généraliser l'incrédulité mieux que uf2, et ses productions ont augmenté à la fin de la formation. les différences entre les deux apprenants peuvent être en partie liées à la plus grande satisfaction d'uf1 vis-à-vis de l'expérience. de plus, uf1, plus jeune et ayant un meilleur niveau de français, a vécu plus longtemps en france que le sujet uf2. uf2 a indiqué qu'elle « parle parfois français » : on peut donc supposer que son exposition au français en dehors de la classe est limitée. le sujet uf2 a également exprimé à plusieurs reprises sa gêne à utiliser la technologie liée à l'interface gepeto au début des sessions de formation. elle a été plus hésitante que uf1. cette étude est la première à tester une interface de contrôle gestuel dans un cadre autre que les conditions contrôlées d'un laboratoire. parmi les difficultés rencontrées, citons les problèmes de stabilité de la connexion internet dans la salle de classe ; la surface du téléphone en silicone, qui a entraîné une gêne pour l'un des participants qui avait les mains humides ; la latence dans l'ouverture du logiciel ; les problèmes de compatibilité entre les différents téléphones et navigateurs ; la qualité de la synthèse vocale, qui s'est parfois révélée peu familière aux participants ; et le fait que les participants n'étaient pas familiarisés avec les paramètres techniques de leur téléphone au début de l'entraînement. dans les études futures, nous visons donc à fournir les appareils mobiles. malgré les différences de performance entre les deux apprenantes, toujours rencontrées en contexte de classe, et malgré le peu de sujets, cette étude exploratoire a montré qu'il est important d'enseigner l'intonation en français langue étrangère dès le début de l'apprentissage. dans cette expérience, même s'il manque un groupe contrôle bénéficiant d'un enseignement intonatif plus « traditionnel » en comparaison avec notre pédagogie (prévu mais non réalisé en raison du blocage de l'université), l'interface gepeto a aidé les apprenants à utiliser plus d'un modèle d'intonation en français et, surtout, à différencier les phrases déclaratives des questions polaires, une distinction qui, bien qu'essentielle à des fins de communication en français, n'est pas évidente au début pour les apprenants ukrainiens.