Partilhar via


Tutoriais em vídeo sobre mapeamento de fluxo de dados

APLICA-SE A: Azure Data Factory Azure Synapse Analytics

Gorjeta

Data Factory em Microsoft Fabric é a próxima geração de Azure Data Factory, com uma arquitetura mais simples, IA incorporada e novas funcionalidades. Se és novo na integração de dados, começa pelo Fabric Data Factory. As cargas de trabalho existentes do ADF podem atualizar para o Fabric para aceder a novas capacidades em ciência de dados, análise em tempo real e relatórios.

Abaixo está uma lista de vídeos tutoriais sobre o mapeamento do fluxo de dados criados pela equipa do Azure Data Factory.

À medida que o produto é constantemente atualizado, algumas funcionalidades passaram a ter comportamentos novos ou diferentes na atual experiência de utilizador do Azure Data Factory.

Introdução

A começar a mapear fluxos de dados em Azure Data Factory

Depuração e desenvolvimento de fluxos de dados de mapeamento

Depuração e teste de fluxos de dados de mapeamento.

Exploração de dados

Ações rápidas de visualização de dados

Monitorar e gerenciar o desempenho do fluxo de dados de mapeamento

Horários de referência

Depuração de fluxos de trabalho para fluxos de dados

Vista de monitorização atualizada

Visão geral da transformação

Transformação de agregados

Alterar transformação de linha

Transformação de coluna derivada

Junte-se à transformação

Padrão de autojunção

Transformação de consulta

Atualizações e Dicas de Lookup Transformation

Transformação de pivô

Transformação de Pivot: mapeamento de colunas desviadas

Selecionar transformação

Selecionar transformação: mapeamento baseado em regras

Selecionar transformação: Grandes conjuntos de dados

Transformação de chave substituta

Transformação da União

Transformação de pivô

Transformação de janela

Transformação do filtro

Transformação de Separação Condicional

Existe transformação

Associações dinâmicas e buscas dinâmicas

Achatar a transformação

Vazões

Transformação Stringify

Transformação de chamadas externas

Transformar dados hierárquicos

Transformação de classificação

Pesquisa em cache

Contexto de linha através da transformação de janela

Analisar transformação

Transformar tipos de dados complexos

Saída para a próxima atividade

Transformação Stringify

Transformação de chamadas externas

Afirmar a transformação

Registar linhas de erro de asserção

Junção difusa

Fonte e lavatório

Leitura e escrita de JSONs

Parquet e arquivos de texto delimitados

Conector CosmosDB

Inferir tipos de dados em arquivos de texto delimitados

Leitura e gravação de arquivos particionados

Transforme e crie várias tabelas SQL

Particione seus arquivos no data lake

Padrão de carregamento do armazém de dados

Opções de saída de arquivo Data Lake

Otimizando fluxos de dados de mapeamento

Linhagem de dados

Iterar ficheiros utilizando parâmetros

Diminua os tempos de arranque

Desempenho do banco de dados SQL

Registo e auditoria

Otimize dinamicamente o tamanho do cluster de fluxo de dados em tempo de execução

Otimize os tempos de inicialização do fluxo de dados

Azure Runtimes de Integração para Fluxos de Dados

Tempo rápido de arranque do cluster com Azure IR

Mapeando cenários de fluxo de dados

Pesquisas aproximadas

Padrão de dados de preparo

Padrão de endereços limpos

Desduplicação

Mesclar arquivos

Dimensões que mudam lentamente tipo 1: substituir

Dimensões que mudam lentamente tipo 2: história

Carregamento da tabela de factos

Transformar o SQL Server on-premises com o padrão de carregamento de dados delta

Parametrização

Contagens distintas de linhas e linhas

Tratamento de erros de truncamento

Roteamento inteligente de dados

Mascaramento de dados para dados confidenciais

Modelos Lógicos vs. Modelos Físicos

Detetar alterações nos dados de origem

Dimensão genérica de tipo 2 que muda lentamente

Excluir linhas no destino quando não estiverem presentes na origem

Carregamento incremental de dados com Azure Data Factory e SQL do Azure DB

Transforme dados Avro de Event Hubs usando Parse e Flatten

Expressões de fluxo de dados

Expressões de data/hora

Dividindo matrizes e instrução de caso

Exploração com interpolação de strings e parâmetros

Fluxo de Dados Script Intro: Introdução ao Script: Copiar, Colar, Fragmentos

Expressões de qualidade de dados

Função Coletar agregado

Expressões dinâmicas como parâmetros

Funções definidas pelo utilizador

Metadados

Regras de validação de metadados