ConcluídoEngenharia de Dados
Data Warehouse na AWS
Construção de um Data Warehouse na nuvem AWS com pipelines orquestrados via Apache Airflow 3.x e modelagem de dados via DBeaver conectado diretamente ao ambiente cloud.
Sobre o Projeto
Projeto pessoal demonstrando a capacidade de provisionar e operar uma arquitetura moderna de dados na nuvem AWS, desde a ingestão até a camada analítica. O Data Warehouse é hospedado no Amazon RDS, acessado via DBeaver e orquestrado por DAGs personalizadas no Apache Airflow 3.x rodando em produção. O ambiente inclui controle de execução, logs completos e reprocessamento via DAGs. O Airflow está disponível em aws.henrique.vip para demonstração pública.
Tecnologias
AWSAmazon RDSApache Airflow 3.xDBeaverSQLCloud Data Warehousedbt
Links
Resultados
- Data Warehouse provisionado e operacional na AWS em produção
- Airflow 3.x rodando em cloud com DAGs personalizadas
- Acesso e modelagem via DBeaver conectado ao Amazon RDS
Destaques Técnicos
- ▸Amazon RDS como camada de armazenamento relacional
- ▸Apache Airflow 3.x em produção na nuvem
- ▸Modelagem de dados via DBeaver com conexão direta à AWS
- ▸DAGs personalizadas com controle de execução e logs