Os pipelines especificam a sequência de transformações a serem aplicadas aos dados tabulares quando uma cadeia executa um comando Run pipeline. Um pipeline pode incluir diferentes tipos de transformações, com base em como você deseja afetar os dados.
A partir de um pipeline, você pode adicionar e gerenciar suas transformações como uma lista vertical ou um fluxograma horizontal:
- Para uma lista vertical, clique em List .
- Para obter um fluxo horizontal, clique em Visual .
Dica: Para visualizar o impacto das transformações, fixe um arquivo de amostra indicativo das colunas e dos dados dos Files do pipeline.
Requisitos
O Data Prep é controlado inteiramente em nível de organização e não reconhece espaços de trabalho individuais ou suas permissões.
Isso significa que você pode usar o Data Prep:
- O Data Prep é compartilhado entre todos os usuários autorizados em sua organização.
- Qualquer usuário com acesso ao Chain Builder também tem acesso ao Data Prep.
- Todos os usuários que podem criar ou editar cadeias terão a capacidade de gerenciar pipelines no Data Prep.
- Um único pipeline do Data Prep pode ser usado em várias cadeias e espaços de trabalho em uma organização.
Adicionar transformações a um pipeline
Para adicionar uma transformação a um pipeline:
- Em Wdata Chains, clique em Data Prep.
- Em Pipelines , abra o pipeline.
- Adicione a transformação:
- Para a primeira transformação, clique em Criar transformação.
- Para uma transformação adicional em um fluxo horizontal, clique em Adicionar transformação antes ou depois da transformação anterior ou posterior.
- Para uma transformação adicional em uma lista vertical, clique em Adicionar transformação após para a transformação anterior.
- Para a primeira transformação, clique em Criar transformação.
- Selecione a transformação a ser adicionada, clique em Next e configure seus valores e regras.
Dica: Para permitir flexibilidade, alguns dos valores da transformação podem suportar variáveis . Para solicitar esses valores quando o pipeline for executado, você pode criar variáveis de tempo de execução.
- Clique em Salvar.
Copiar uma transformação
Para adicionar outra instância de uma transformação a um pipeline, como, por exemplo, para aplicar vários grupos de mapeamento:
- No pipeline, selecione a transformação existente e clique em Copy .
- Atualize as configurações da duplicata conforme necessário.
- Clique em Salvar.
Reordenar transformações
Para reposicionar uma transformação, selecione-a no pipeline e clique em Mover para frente ou Mover para trás para deslocá-la para frente ou para trás em uma transformação, respectivamente.
Observação: Quando você reposicionar uma transformação, ajuste a ordem de quaisquer transformações que dependam de seu resultado, conforme necessário.
Excluir uma transformação
Para remover uma transformação de um pipeline:
- No pipeline, selecione a transformação e clique em Excluir .
- Em Confirmar, digite
delete. - Clique em Excluir.