Sobre o curso
Arquitetura de dados em 2027 não é mais sobre escolher Hadoop ou Spark. É sobre construir plataformas que confiabilidade, governança e velocidade ao mesmo tempo. Este curso é o programa mais profundo da Luminary e leva você do desenho de stack até a operação real de uma plataforma de dados completa.
Híbrido: sábados presenciais em São Paulo + 6h semanais de labs assíncronos. Inclui acesso a uma sandbox AWS/GCP custeada pela escola.
O que você vai aprender
- Escolha de stack: BigQuery, Snowflake, Databricks, Redshift
- ELT moderno com dbt + Airflow + Fivetran
- Data mesh vs data warehouse central
- Governança e contratos de dados
- Observabilidade de pipelines de dados
- Quando Spark é necessário (raramente)
Para quem é este curso
- Data engineers sêniores virando arquitetos
- BI engineers querendo modernizar o stack
- Software engineers transitando para dados
Pré-requisitos
- 5+ anos com engenharia de software ou dados
- SQL avançado
- Familiaridade com pelo menos um cloud provider
Conteúdo programático
- 01 Mapa do ecossistema: warehouse, lake, lakehouse
- 02 ELT moderno com dbt
- 03 Orquestração: Airflow, Dagster, Prefect
- 04 Data contracts e governança
- 05 Observabilidade de pipelines
- 06 Real-time streaming: quando vale
- 07 Qualidade e testes de dados
- 08 Projeto final: plataforma de dados ponta a ponta
Professores
MC
Maya Chen
Líder de Engenharia, Luminary
PA
Priya Anand
Líder de Produto, Luminary