Visão geral da transformação de fluxo de dados de mapeamento
APLICA-SE A: Azure Data Factory Azure Synapse Analytics
Dica
Experimente o Data Factory no Microsoft Fabric, uma solução de análise tudo-em-um para empresas. O Microsoft Fabric abrange desde movimentação de dados até ciência de dados, análise em tempo real, business intelligence e relatórios. Saiba como iniciar uma avaliação gratuita!
Os fluxos de dados estão disponíveis nos pipelines do Azure Data Factory e do Azure Synapse. Este artigo se aplica ao fluxo de dados de mapeamento. Se você for iniciante nas transformações, veja o artigo introdutório Transformar dados usando um fluxo de dados de mapeamento.
Abaixo está uma lista das transformações atualmente com suporte no fluxo de dados de mapeamento. Clique em cada transformação para saber seus detalhes de configuração.
Nome | Categoria | Descrição |
---|---|---|
Aggregate | Modificador de esquema | Defina diferentes tipos de agregações como SUM, MIN, MAX e COUNT agrupados por colunas computadas ou existentes. |
Alterar linha | Modificador de linha | Defina as políticas de inserção, exclusão, atualização e upsert em linhas. |
Assert | Modificador de linha | Definir regras de asserção para cada linha. |
Converter | Modificador de esquema | Alterar tipos de dados da coluna com verificação de tipo. |
Divisão condicional | Várias entradas/saídas | Encaminhe linhas de dados para fluxos diferentes com base em condições correspondentes. |
Coluna derivada | Modificador de esquema | Gere colunas ou modifique campos existentes usando a linguagem de expressão de fluxo de dados. |
Chamada externa | Modificador de esquema | Chame pontos de extremidade externos embutidos linha por linha. |
Exists | Várias entradas/saídas | Verifique se os dados existem em outra fonte ou fluxo. |
Filter | Modificador de linha | Filtre uma linha com base em uma condição. |
Mesclar | Formatadores | Pegue valores de matriz dentro de estruturas hierárquicas, como JSON, e os registre em linhas individuais. |
Flowlet | Flowlets | Crie e inclua a lógica de transformação reutilizável personalizada. |
Join | Várias entradas/saídas | Combine dados de duas origens ou fluxos. |
Pesquisar | Várias entradas/saídas | Dados de referência de outra fonte. |
Novo branch | Várias entradas/saídas | Aplique vários conjuntos de operações e transformações ao mesmo fluxo de dados. |
Analisar | Formatadores | Analise colunas de texto no fluxo de dados que são cadeias de caracteres de JSON, texto delimitado ou texto formatado em XML. |
Pivô | Modificador de esquema | Uma agregação em que uma ou mais colunas de agrupamento têm seus valores de linha distintos transformados em colunas individuais. |
Rank | Modificador de esquema | Gerar uma classificação ordenada com base nas condições de classificação |
Selecionar | Modificador de esquema | Colunas de alias e nomes de fluxo, e remover ou reordenar colunas. |
Coletor | - | Um destino final para seus dados |
Sort | Modificador de linha | Classificar as linhas de entrada no fluxo de dados atual |
Origem | - | Uma fonte de dados para o fluxo de dados |
Converter em cadeia de caracteres | Formatadores | Transformar tipos complexos em cadeias de caracteres sem formatação |
Chave alternativa | Modificador de esquema | Adicionar um valor de chave arbitrária não empresarial incremental |
Union | Várias entradas/saídas | Combinar vários fluxos de dados verticalmente |
Não Dinâmico | Modificador de esquema | Dinamizar colunas em valores de linha |
Window | Modificador de esquema | Define agregações baseadas em janela de colunas em seus fluxos de dados. |