PokeAPI: Data Lakehouse dos Pokemons
Projeto Real que envolve Docker, Delta Lakes, MinIo, DuckDB e Superset
Arthur Pitta
Engenheiro de Dados
2 horas
2 capítulos
Avançado
Adquirir acesso
Descrição do Curso
Conteúdo do Curso
1
Introdução e Apresentação
Apresentação do Encontro e Instrutores
2
Repositório de Dados
Principais arquiteturas de dados
3
Delta Lakehouse
A junção de lake e warehouse
4
Apresentação do Projeto
Mostrando escopo e arquitetura da solução
1
Docker e Dev Container
Estruturando projeto localmente
2
Fluxo de Ingestão e Delta Tables
Explorando os processamentos
3
Superset e Iteração
Fazendo consultas e gerando visualizações
4
Encerramento
Conclusão do Encontro
5
Emissão de Certificado
Instruções para Emissão de Certificado
O que Você Vai Aprender
- Construção de Ambiente Local com Docker e Dev Container
- Estruturação de Lakehouse
- Iteração com MinIo e Delta Lake
- Processamento de Dados com DuckDB
- Visualização de Dados com Superset
- Orquestração com Dadster