Les limites du moissonnage

Le moissonnage n’a aucune connaissance de l’usage que vous faites du modèle de données. Il s’appuie uniquement sur les spécifications de chaque protocole ou plateforme pour récupérer les informations. Il y a donc certaines limitations techniques liées aux spécificités de chaque plateforme. Certaines limitations sont communes et détaillées ci-dessous.

Correspondances des métadonnées

Certains champs du modèle de data.gouv.fr possèdent un équivalent qui peut être spécifié sur spécifié différemment sur DataSud, sur plusieurs champs par exemple. Dans ce cas, la valeur du champ est récupérée en “best effort’ sur Data.gouv.fr; c’est-à-dire qu’elle va être devinée en fonction des éléments à disposition. Se référer à la page Correspondance des champs entre les catalogues pour voir lesquels sont dans ce cas pour chaque implémentation.

Suppression à la source et archivage

Lors d'une suppression à la source d'une ressource ou d'un jeu de données dans DataSud.fr, ceux-ci sont conservés sur la plateforme nationale afin d'éviter les suppressions en masse par erreur, ce qui entraînerait une perte des statistiques et des discussions. Au bout d'une période de 7 jours, ces ressources sont marqués comme archivés. L'archivage des jeux de données implique qu'ils ne soient plus indexés ou visibles dans les statistiques des producteurs, mais encore accessibles par lien direct pour les utilisateurs qui souhaiteraient continuer à y accéder.

Dans le cas d’une suppression ponctuelle d'une ressource ou d'un jeu de données dans DataSud.fr, nous vous invitons à supprimer manuellement cette ressource ou ce jeu de données moissonné sur Data.gouv.fr qui a perdu sa source.

Dans le cas d’une suppression massive de jeux de données, veuillez contacter l'équipe en charge de Data.gouv.fr afin de trouver une solution satisfaisante.

Changement d’identifiant

Les moissonneurs utilisent les identifiants de jeu de données distants pour retrouver leurs données entre deux moissonnages. Il est donc important de veiller à ce qu’un jeu de données conserve son identifiant au fil du temps et des modification successives. Dans le cas contraire, cela donnera lieu à la création d’un doublon.

Il faut donc aussi veiller à ne pas supprimer puis recréer un jeu de données ou une ressource pour faire sa mise à jour.