Engenheiro de dados
O Engenheiro de Dados é responsável por projetar, desenvolver e manter a infraestrutura e os pipelines de dados da empresa. Ele garante que os dados sejam coletados, armazenados, tratados e disponibilizados de forma segura, eficiente e escalável, permitindo que analistas e cientistas de dados utilizem informações confiáveis para gerar insights estratégicos.
Requisitos
Experiência em engenharia de dados.
Conhecimento em cloud (preferencialmente AWS).
Domínio de Python, Spark e ferramentas de orquestração.
Diferenciais: Experiência com Data Lakehouse e governança de dados.
Responsabilidades
Projetar e implementar pipelines de dados (ETL/ELT) para integrar informações de diferentes fontes;
Construir, manter e otimizar Data Lakes e Data Warehouses;
Garantir a qualidade, integridade e segurança dos dados;
Trabalhar com grandes volumes de dados em ambientes de nuvem (AWS, Azure, GCP) ou on-premises;
Implementar processos de governança e padronização de dados;
Monitorar a performance e escalabilidade das soluções de dados;
Colaborar com analistas e cientistas de dados para disponibilizar dados prontos para análise;
Automatizar processos de ingestão e transformação de dados;
Documentar pipelines, processos e arquitetura de dados