Étude de la lisibilité des documents de santé avec des méthodes d’oculométrie (Study of readability of health documents with eye-tracking methods) (2018)

Abstract: Le domaine médical fait partie de la vie quotidienne pour des raisons de santé, mais la disponibilité des informations médicales ne garantit pas leur compréhension correcte par les patients. Plusieurs études ont démontré qu’il existe une difficulté réelle dans la compréhension de contenus médicaux par les patients. Nous proposons d’exploiter les méthodes d’oculométrie pour étudier ces questions et pour détecter quelles unités linguistiques posent des difficultés de compréhension. Pour cela, des textes médicaux en version originale et simplifiée sont exploités. L’oculométrie permet de suivre le regard des participants de l’étude et de révéler les indicateurs de lecture, comme la durée des fixations, les régressions et les saccades. Les résultats indiquent qu’il existe une différence statistiquement significative lors de la lecture des versions originales et simplifiées des documents de santé testés.

## introduction le domaine médical est de plus en plus présent dans la vie quotidienne des citoyens, essentiellement pour des raisons de santé et de soins médicaux mais également parce que ce type d'information peut être rencontré dans les médias ou la littérature. avec l'évolution de l'internet, les informations médicales deviennent aussi accessibles et disponibles en ligne. il a été par exemple noté que l'internet est devenu la deuxième source d'information pour les patients, en se plaçant après les consultations chez les médecins @xcite . ainsi, jusqu'à 24 % de la population utilise l'internet au moins une fois par jour pour trouver des informations relatives à leur santé et, de manière plus générale, jusqu'à 80 % de la population recourt à l'internet pour trouver ce type d'informations. néanmoins, la disponibilité des informations de santé ne présume pas qu'elles soient compréhensibles et correctement utilisées par les patients. comme tous les domaines de spécialité, le domaine médical utilise des termes qui véhiculent des notions complexes, comme par exemple tensosynovite, arthralgies ou métatarsophalangien. cette situation a été observée dans plusieurs études qui démontrent une faible compréhension des informations médicales par les citoyens @xcite @xcite et une communication compliquée entre les patients et les médecins @xcite . en relation avec ces questions, la complexité et la compréhension des textes et des termes sont étudiées par les chercheurs de différentes disciplines. par exemple, la linguistique étudie la complexité morphologique des lexèmes @xcite , la psychologie étudie différents facteurs internes et externes aux mots qui influencent leur reconnaissance par les locuteurs @xcite @xcite @xcite , la terminologie étudie comment différencier les bons candidats-termes, qui véhiculent le sens bien spécialisé, au sein d'une extraction effectuée automatiquement @xcite @xcite , et le tal propose des méthodes automatiques pour faire la différenciation entre les textes ou termes difficiles et ceux de la langue générale @xcite @xcite . l'objectif de notre travail consiste à étudier la compréhension des informations de santé par les non-experts. plus particulièrement, nous proposons de voir quel est l'impact de la simplification des termes. nous travaillons avec des données en français. nous exploitons pour ceci les méthodes et les outils fournis par la psychologie, et plus particulièrement l'oculométrie (eye-tracking). en effet, l'étude des mouvements oculaires pendant la lecture fournit des indications objectives et précieuses sur les processus cognitifs impliqués. plus particulièrement, la difficulté et la lisibilité d'un texte peuvent être mesurées avec différents indicateurs @xcite @xcite . il s'agit principalement des indicateurs suivants : les indicateurs d'oculométrie sont exploités dans différents domaines. en psychologie et en neurosciences, ils permettent de collecter les informations sur le fonctionnement du cerveau, les modalités de la lecture et de l'attention, etc. @xcite @xcite @xcite . en marketing et en publicité, ils fournissent les indicateurs qui permettent d'améliorer la présentation des informations, de mettre les bonnes informations aux bons endroits ou de comprendre à quels types d'informations les utilisateurs et acheteurs sont les plus sensibles @xcite . dans des contextes liés à l'acquisition et au traitement de la langue, les indicateurs d'oculométrie sont typiquement exploités pour détecter les endroits dans les textes qui attirent ou bloquent le regard ou la lecture, comme par exemple : la lecture de textes en langues maternelle et secondaire @xcite ; la lecture de textes par les personnes dyslexiques @xcite @xcite ou autistes @xcite ; le traitement de structures syntaxiques @xcite @xcite ; la relation entre le traitement de la parole et les mouvements oculaires, où les participants montrent la tendance de fixer l'image correspondant à la phrase qu'ils entendent à l'oral @xcite @xcite ; la détection et le traitement des erreurs @xcite ; l'évaluation de la complexité des textes lors de la traduction @xcite ou de l'acquisition de langues @xcite . le plus souvent, c'est l'information sur les fixations qui est exploitée. par exemple, en relation avec le marketing et la publicité, la figure 1 montre une page de résultats d'un moteur de recherche en ligne. les couleurs chaudes indiquent les endroits qui attirent le plus le regard des utilisateurs : les premiers résultats de la recherche et, en moindre mesure, la publicité sur le coté. la zone la plus fixée forme ce qu'on appelle le golden triangle. ce modèle indique aussi que l'attention des utilisateurs décroit assez rapidement. ## approche proposée notre approche est basée sur l'exploitation de méthodes d'oculométrie pour étudier les modalités de lecture de textes médicaux. nous décrivons d'abord les documents utilisés et les critères d'inclusion des participants. nous présentons ensuite le déroulement des tests et l'analyse des données obtenues. ## résultats et discussion si l'oculométrie offre plusieurs indicateurs objectifs sur le processus de lecture (typiquement le nombre et la durée des fixations, l'amplitude des saccades, le nombre de régressions) et la possibilité de les corréler avec d'autres informations comme la compréhension des textes, cette méthode présente aussi quelques limitations connues et prises en compte pendant les expériences @xcite : les couleurs chaudes représentent les endroits qui attirent plus le regard. il nous semble que cette simulation est plutôt construite selon le modèle de fixations de la figure 1, où le début du texte et les débuts des lignes attirent le plus le regard de l'utilisateur. comme nous pouvons le voir, ce modèle de lecture est très différent de celui que nous avons obtenu avec la lecture de textes techniques (figures 6 et 7). il s'agit d'un résultat intéressant car il montre que différents types de textes peuvent solliciter différents types d'attention et de lecture. nous avons proposé une expérience pour étudier l'effet de la simplification de textes techniques, sur l'exemple de textes médicaux, grâce aux méthodes d'oculométrie. de cette manière, nous obtenons plusieurs indicateurs de lecture objectifs, comme la durée des fixations, la durée de la première fixation, l'amplitude des saccades et les régressions. ces mêmes indicateurs sont obtenus suite à la lecture d'un texte d'entraînement et d'un texte de contrôle. les indicateurs collectés sont comparés entre les versions originales et simplifiées d'un texte médical donné avec des mesures statistiques (test t) pour analyser s'il existe une différence statistiquement significative lors de la lecture des versions originales et simplifiées de ces textes. ensuite, nous analysons les réponses aux questionnaires qcm fournies par les participants après la lecture de chaque texte et les annotations manuelles des difficultés de compréhension. les résultats obtenus indiquent que la lecture des deux versions des textes, originales et simplifiées, fournit des indicateurs cohérents et stables. par exemple, lors de la lecture des textes simplifiés, les fixations sont plus courtes, les saccades plus longues et les régressions absentes ou pas fréquentes. de plus, l'analyse des réponses aux questions indique que la compréhension des textes simplifiés est meilleure : ainsi, sur le texte 1 , le nombre de réponses correctes est de 54 % pour la version originale et 81 % pour la version simplifiée. cela indique aussi que les textes techniques, et en particulier les textes médicaux, peuvent être simplifiés de manière efficace pour atteindre une meilleure compréhension de la part des non-experts. notons aussi que la comparaison avec l'annotation manuelle, effectuée par le même type de participants, montre que les lecteurs et les annotateurs se focalisent sur les mêmes types de termes : des composés néoclassiques, des termes anatomiques, des dérivés avec un sens spécialisé, et des valeurs numériques. nous montrons en revanche que l'annotation manuelle présente plus de subjectivité, car elle repose sur une décision consciente de la part de l'annotateur par rapport aux résultats d'oculométrie, qui eux dépendent des processus et habitudes de lecture appris lors de l'apprentissage scolaire et familial. les méthodes et le matériel d'oculométrie ont également des limitations actuellement, que nous indiquons dans le travail. dans les travaux futurs, il serait intéressant d'étudier le lien entre la longueur d'un texte et sa lisibilité et compréhension. l'hypothèse serait que les textes longs, même s'ils sont simplifiés, peuvent présenter des difficultés de lecture et de compréhension. l'impact d'autres facteurs (comme les définitions, les contextes favorables, les images et illustrations) peut également être étudié. à cause des contraintes expérimentales, des extraits courts de textes sont utilisés et étudiés. pour cette raison, il serait intéressant d'effectuer des tests supplémentaires pour augmenter la variété des types de textes et de contenus traités. de plus, comme avec la simplification manuelle, l'efficacité de la simplification automatique peut aussi être testée et évaluée en utilisant des protocoles d'oculométrie.