Estamos em busca de um Engenheiro de Dados AWS com experiência com arquitetura e processamento de dados, criação de pipelines ETL e DataOps com foco em tecnologias modernas em ambientes escaláveis na nuvem. Descrição da Posição: O profissional atuará no desenvolvimento, manutenção e otimização de pipelines de dados, garantindo que as informações sejam processadas e disponibilizadas de forma eficiente. Também será responsável por modelagem, ingestão e governança de dados, utilizando AWS e ferramentas modernas de engenharia de dados. Responsabilidades:
Criar e otimizar pipelines de dados (ETL/ELT) utilizando AWS Glue, Redshift, Lambda e Athena; Desenvolver arquiteturas Data Lake e Data Warehouse baseadas em AWS; Implementar processos de DataOps, CI/CD e automação de pipelines com Terraform, GitHub Actions e CircleCI; Trabalhar com ingestão, transformação e disponibilização de dados para análise e relatórios financeiros; Colaborar com equipes de analytics, BI e negócio para entender requisitos e propor soluções eficientes; Criar documenta çã o t é cnica e definir melhores pr á ticas para a governança de dados; Monitorar e otimizar custos e performance de infraestrutura AWS.
Qualificações
Experiência sólida em AWS (S3, Glue, Lambda, Athena, Redshift, CloudWatch, IAM, Secrets Manager); Domínio de SQL e modelagem de dados para otimização de consultas em bancos relacionais (PostgreSQL, MySQL, SQL Server, Oracle); Experiência com Pyspark e Databricks para processamento de grandes volumes de dados; Conhecimento em arquitetura Lakehouse, processamento incremental e Unity Catalog; Experiência com DataOps, CI/CD, Terraform e automação de infraestrutura; Familiaridade com ferramentas de governança e segurança de dados; Experiência com documentação técnica e uso do Confluence para gestão de conhecimento; Habilidade de comunicação e colaboração para interagir com stakeholders técnicos e não técnicos; Inglês intermediário são diferenciais.
