Curso
Engenharia de Dados & IA: primeiros passos
Curso gratuito para dar os primeiros passos em Engenharia de Dados & IA com as duas plataformas mais usadas no mercado: Microsoft Fabric e Databricks. Você cria a sua conta, carrega dados, transforma, monta o primeiro pipeline e publica um dashboard.
Iniciante12 aulasAulas em gravação: os vídeos são liberados aos poucos
Conteúdo do curso
Módulo 1Microsoft Fabric
Ementa em breveAs aulas deste módulo serão publicadas em breve.
Módulo 2Databricks
12 aulas- O que é a Databricks e a arquitetura LakehouseOnde a Databricks entra numa plataforma de dados e por que o Lakehouse une data lake e data warehouse.Em breve
- Criando a conta na Free Edition e conhecendo o workspaceCadastro gratuito, tour pelo workspace e onde ficam notebooks, dados, jobs e SQL.Em breve
- Notebooks: primeiros comandos em SQL e PythonCélulas, linguagens, execução e visualização de resultados num notebook.Em breve
- Compute serverless e SQL warehousesQuem executa o seu código: compute serverless para notebooks e SQL warehouse para consultas.Em breve
- Unity Catalog: catálogos, schemas, tabelas e volumesComo os dados são organizados e governados no Unity Catalog, na prática.Em breve
- Subindo um arquivo e criando a primeira tabela DeltaDo CSV a uma tabela Delta consultável, usando upload e volumes.Em breve
- Transformações com Spark SQL e PySparkFiltros, colunas calculadas, agregações e joins nas duas linguagens.Em breve
- Delta Lake na prática: MERGE e time travelAtualizar dados com MERGE e consultar versões anteriores de uma tabela.Em breve
- Seu primeiro pipeline medalhão: bronze, prata e ouroOrganizar o dado em camadas, do cru ao pronto para o negócio.Em breve
- Agendando o pipeline com Lakeflow JobsTransformar notebooks em um job agendado, com tarefas encadeadas.Em breve
- Dashboard AI/BI com os dados da camada ouroPublicar um dashboard a partir das tabelas finais do pipeline.Em breve
- Próximos passos na carreira e no DatabricksO que estudar depois, certificações e como montar um portfólio.Em breve