Indo do Azure Data Factory para o Data Factory no Microsoft Fabric
O Data Factory no Microsoft Fabric é a próxima geração do Azure Data Factory que fornece serviços de movimentação e transformação de dados em escala de nuvem que permitem resolver os cenários de ETL mais complexos. Destina-se a tornar a sua experiência fácil de utilizar, poderosa e verdadeiramente de nível empresarial. Este artigo compara as diferenças entre o Azure Data Factory e o Data Factory no Microsoft Fabric.
Mapeamento de recursos
Na experiência moderna do Data Factory in Fabric, existem alguns conceitos de recursos diferentes em comparação com o Azure Data Factory. O mapeamento detalhado de recursos é apresentado na tabela abaixo.
Azure Data Factory | Data Factory na malha | Description |
---|---|---|
Pipeline | Pipeline de dados | O pipeline de dados no Fabric é melhor integrado com a plataforma de dados unificada, incluindo Lakehouse, Datawarehouse e muito mais. |
Mapeando o fluxo de dados | Fluxo de dados Gen2 | O Dataflow Gen2 fornece uma experiência mais fácil para criar transformações. Estamos em progresso para permitir que mais funções de mapeamento de fluxo de dados suportadas no Dataflow Gen2 |
Atividades | Atividades | Estamos em progresso para fazer mais atividades do ADF suportadas no Data Factory in Fabric. O Data Factory no Fabric também tem algumas atividades recém-atraídas, como a atividade do Office 365 Outlook. Os detalhes estão em Visão geral da atividade. |
Conjunto de dados | Não Aplicável | O Data Factory no Fabric não tem conceitos de conjunto de dados. A conexão será usada para conectar cada fonte de dados e pull data. |
Serviço Vinculado | Ligações | As conexões têm funcionalidade semelhante ao serviço vinculado, mas as conexões na malha têm uma maneira mais intuitiva de criar. |
Acionadores | Agendar gatilhos e acionadores de eventos de arquivo | O Fabric pode usar o agendador e os eventos Reflex para executar pipelines automaticamente. Os gatilhos de eventos de arquivo são suportados nativamente em pipelines no Microsoft Fabric Data Factory. |
Publicar | Guardar, Executar | Para pipeline no Fabric, não é necessário publicar para salvar o conteúdo. Em vez disso, você pode usar o botão Salvar para salvar o conteúdo diretamente. Quando você clica no botão Executar, ele salvará o conteúdo antes de executar o pipeline. |
Autoresolve e tempo de execução da Integração do Azure | Não Aplicável | No Fabric, não temos o conceito de tempo de execução da integração. |
Tempos de execução de integração auto-hospedados | Gateway de dados local | O Gateway de Dados Local permite o acesso a dados locais por meio do Fabric Data Factory. Os detalhes estão em Como acessar fontes de dados locais no Data Factory for Microsoft Fabric. |
Tempos de execução de integração Azure-SSIS | A determinar | A capacidade no Fabric não confirmou o roteiro e o design. |
MVNet e Ponto Final Privado | A determinar | A capacidade no Fabric não confirmou o roteiro e o design. |
Expressão de idioma | Expressão de idioma | A linguagem de expressão é semelhante no ADF e no Fabric. |
Tipo de autenticação no serviço vinculado | Tipo de autenticação em conexão | O tipo de autenticação no pipeline de malha já suportava tipos de autenticação populares no ADF e mais tipos de autenticação serão adicionados. |
CI/CD | CI/CD | A capacidade de CI/CD no Fabric Data Factory estará disponível em breve. |
Exportação e Importação ARM | Save as | Salve como está disponível no pipeline de malha para duplicar um pipeline. |
Monitorização | Monitoramento, Histórico de execução | O hub de monitoramento no Fabric tem funções mais avançadas e experiência moderna, como monitoramento em diferentes espaços de trabalho para obter melhores informações. |
Pipeline de dados do data factory no Microsoft Fabric
Há muitos recursos interessantes do pipeline de dados no Data Factory do Microsoft Fabric. Aproveitando esses recursos, você pode sentir o poder do pipeline no Fabric.
Integração Lakehouse/Datawarehouse
Lakehouse e Data Warehouse estão disponíveis como origem e destino no Pipeline of Fabric, por isso é extremamente conveniente para você construir seus próprios projetos integrados com Lakehouse e Datawarehouse.
Atividade do Outlook do Office 365
A atividade do Outlook do Office 365 fornece uma maneira intuitiva e simples de enviar notificações por email personalizadas sobre informações de pipeline e atividade, e saída de pipeline por configuração fácil.
Obtenha experiência de dados
Uma experiência de obtenção de dados moderna e fácil é fornecida no Data Factory in Fabric, portanto, é super rápido para você configurar seu pipeline de cópia e criar uma nova conexão.
Experiência de monitorização moderna
Com os recursos combinados do hub de monitoramento e os itens do Data Factory, como fluxos de dados e pipelines de dados, podemos obter uma visão completa de todas as cargas de trabalho e analisar detalhadamente qualquer atividade dentro de uma experiência de fábrica de dados. Também é conveniente para você fazer a análise entre espaços de trabalho por meio do hub de monitoramento.
Os resultados do monitoramento de cópia de pipeline fornecem detalhes detalhados da atividade de cópia. Selecionando o botão de detalhes da execução (com o ícone de óculos realçado) para visualizar os detalhes da execução. Expanda o detalhamento Duração, você pode saber a duração do tempo de cada estágio na atividade de cópia.
Save as
O pipeline Salvar como na malha fornece uma maneira conveniente de duplicar um pipeline existente para outros fins de desenvolvimento.