Jeu de données : Transparence-santé
Titre : Validation de format des données pour les adresses
Date : 2017-04-02 16:13

Les données entrées par les entreprises ne semblent pas être validé selon un format, ce qui laisse l'utilisateur entrer des données aberrantes. Ainsi on peut retrouver :
- un code postal à la place d'une ville
- une ville à la place d'un code postal
- des adresses n'ayant pas de sens (par exemple 4 fois la même valeur dans les 4 colonnes composant l'adresse)
- les noms de ville/code postux dans un des champs adresse
- des codes postaux inexistant (généralement faute de typo)
- présence de "CEDEX" dans le nom de ville
- etc.

La liste est longue (sans parler des casses complètement libre). La plupart de ces soucis pourraient être quasi totalement résolu avec une validation du format des données lors de la saisie utilisateur (clairement "Vierzon" semble être un code postal invalide), assez simple à mettre en place (au moins pour les adresses en France).

Le top, qui faciliterait grandement la réutilisation, serait tout de même de géocoder les adresses lors de la saisie utilisateur. Ça demande un poil plus de boulot, mais de nombreuses API permettent de retourner un format standard d'une adresse (au hasard OpenStreetMap ou Google Maps) entrée à la main. Ça permettrait d'avoir une base de donnée plus propre, et de ne pas avoir à faire un travail de nettoyage des données lors de la réutilisation.
Nous vous remercions pour toutes ces remarques. Nous constatons effectivement un problème dans le programme d'extraction des données géo-localisées et vous demandons de nous en excuser. Il est décidé de retirer la diffusion de ces données en attendant que ces problèmes soient tous résolus.

Bonjour,

Vos remarques ayant été diffusées par le biais du jeu de données "Transparence santé", j'ai fait le point avec le chef de projet lié à cette diffusion et nous nous posons la question de la pertinence de mes réponses. En effet je pensais que vous parliez du jeu de données lié à la diffusion des établissements FINESS géo-localisés car en tant que responsable de la diffusion des données FINESS, je croyais que vous parliez des difficultés que je rencontre actuellement. Pour répondre parfaitement à vos attentes, je vous remercie de vos précisions à ce sujet.   
Bonjour,

je parle du jeu de donnée "Transparence santé" qui est extrait du site http://www.transparence-sante.gouv.fr/. Les fichiers CSV contiennent des informations sur les adresses, qui ne sont manifestement pas validées lors de la saisie. Un format plus standard pour les données saisies faciliterait la réutilisation. 
Bonjour et merci pour votre retour. Je vous prie donc de ne pas tenir compte de mon commentaire sur FINESS. Il s'agit bien d'une coïncidence liée à votre précision concernant le géocodage car les problèmes que je rencontre sont indirectement liés à cette information. C'est peut être ce mot clé qui m'a désigné comme destinataire ? Ayant eu le responsable de "Transparence santé" hier, je vous confirme qu'il répondra à votre questionnement car nous attendions ce retour pour préciser les choses.   Bien à vous  

Annotation : Erreur dans les données fournies  (Fiabilité )