Treinamento Hands-on na plataforma Databricks com foco nas funcionalidades da solução DLT - Delta Live Tables, direcionado as equipes de Engenharia de Dados.
Delta Live Tables (DLT) facilita a criação e o gerenciamento de pipelines confiáveis de dados em lote e streaming que fornecem dados de alta qualidade na plataforma Databricks Lakehouse. O DLT ajuda as equipes de engenharia de dados a simplificar o desenvolvimento e o gerenciamento do ETL com desenvolvimento de pipeline declarativo, teste automático de dados e visibilidade profunda para monitoramento e recuperação de dados.
Com Delta Live Tables, defina facilmente pipelines de dados de ponta a ponta em SQL ou Python. Basta especificar a fonte de dados, a lógica de transformação e o estado de destino dos dados — em vez de unir manualmente trabalhos de processamento de dados isolados. Mantenha automaticamente todas as dependências de dados no pipeline e reutilize pipelines ETL com gerenciamento de dados independente do ambiente. Execute no modo de lote ou streaming e especifique a computação incremental ou completa para cada tabela.
| # | Tópicos | Duração |
|---|---|---|
| 1 | Conceito de Lakehouse e do Delta Live Tables | 30 min |
| 2 | Laboratório 01 - Criando o pipeline de Delta Live Tables | 30 min |
| 3 | Laboratório 02 - Criando consultas SQL em nossos dados | 30 min |
| 4 | Laboratório 03 - Consolidando tudo em um único job | 30 min |
| 5 | Considerações finais e Referências Adicionais | 30 min |
| 6 | Perguntas e Respostas | 15 min |
| 7 | Pesquisa de Satisfação | 5 min |
- Página principal do Databrick Delta Live Tables
- Getting Started with Delta Live Tables
- Simplifying Change Data Capture With Databricks Delta Live Tables
- Delta Live Tables SQL language reference
Vídeos sobre Delta Live Tables em Português dos INFLUENCERS (sem vínculo com a Databricks):
- Canal: Dados nas Alturas - Influencer: Clécio Silva
- Canal: Bytes de Dados - Influencer: Luan Moreno
- Canal: Aprender Dados - Influencer: Bernardo Cambruzzi
- Delta Live Tables Example Notebooks
- Insurance Claims Workflow
- Point-of-Sale Streaming with Delta Live Tables
Trilhas disponíveis (Learning Plan):
- What is the Databricks Lakehouse Platform? (ID: E-Q079O1)
- Data Engineering with Databricks V3 (ID: E-VR2871)
- Advanced Data Engineering with Databricks (ID: E-19WXD1)
- Grupo no LinkedIn Databricks Brasil - Lakehouse 🏠 🇧🇷
