Les pipelines spécifient la séquence des transformations à appliquer aux données tabulaires lorsqu'une chaîne exécute la commande Run pipeline. Un pipeline peut inclure différents types de transformations, en fonction de l'impact que vous souhaitez avoir sur les données.
À partir d'un pipeline, vous pouvez ajouter et gérer ses transformations sous la forme d'une liste verticale ou d'un organigramme horizontal :
- Pour une liste verticale, cliquez sur List .
- Pour un flux horizontal, cliquez sur Visual .
Conseil : Pour avoir un aperçu de l'impact des transformations, épinglez un fichier échantillon contenant les colonnes et les données des fichiers du pipeline.
Exigences
Data Prep est entièrement contrôlé au niveau de l'organisation et ne reconnaît pas les espaces de travail individuels ni leurs autorisations.
Cela signifie que :
- Les données Prep sont partagées entre tous les utilisateurs autorisés de votre organisation.
- Tout utilisateur ayant accès à Chain Builder a également accès à Data Prep.
- Tous les utilisateurs qui peuvent créer ou modifier des chaînes auront la possibilité de gérer des pipelines dans Data Prep.
- Un seul pipeline de Data Prep peut être utilisé sur plusieurs chaînes et espaces de travail au sein d'une organisation.
Ajouter des transformations à un pipeline
Pour ajouter une transformation à un pipeline :
- À partir de Wdata Chains, cliquez sur Data Prep.
- À partir de Pipelines , ouvrez le pipeline.
- Ajouter la transformation :
- Pour la première transformation, cliquez sur Créer une transformation.
- Pour une transformation supplémentaire dans un flux horizontal, cliquez sur Ajouter une transformation avant ou après la transformation précédente ou suivante.
- Pour une transformation supplémentaire dans une liste verticale, cliquez sur Ajouter une transformation après la transformation précédente.
- Pour la première transformation, cliquez sur Créer une transformation.
- Sélectionnez la transformation à ajouter, cliquez sur Next, et définissez ses valeurs et ses règles.
Conseil : Pour plus de souplesse, certaines valeurs de la transformation peuvent prendre en charge des variables . Pour demander ces valeurs lors de l'exécution du pipeline, vous pouvez créer des variables d'exécution.
- Cliquez sur Enregistrer.
Copier une transformation
Pour ajouter une autre instance d'une transformation à un pipeline, par exemple pour appliquer plusieurs groupes de mappage :
- Dans le pipeline, sélectionnez la transformation existante et cliquez sur Copy .
- Mettre à jour les paramètres du duplicata si nécessaire.
- Cliquez sur Enregistrer.
Réorganiser les transformations
Pour repositionner une transformation, sélectionnez-la dans le pipeline, puis cliquez sur Move forward ou Move back pour la déplacer vers l'avant ou vers l'arrière d'une transformation, respectivement.
Note : Lorsque vous repositionnez une transformation, ajustez l'ordre des transformations qui dépendent de son résultat si nécessaire.
Supprimer une transformation
Pour supprimer une transformation d'un pipeline :
- Dans le pipeline, sélectionnez la transformation et cliquez sur Delete .
- Dans Confirmer, entrer
supprimer. - Cliquez sur Supprimer.