Analista de Dados II - 135491

Escopo do projeto a ser definido pelo cliente.
Estamos em busca de um(a) Engenheiro(a) de Dados para atuar na construção e evolução de soluções de dados escaláveis, modernas e de alta performance. Você fará parte de um time multidisciplinar, colaborando com engenheiros de software, analistas e cientistas de dados para transformar grandes volumes de informações em ativos estratégicos para o negócio.

Responsabilidades
Projetar, desenvolver e manter pipelines de dados escaláveis, resilientes e de alta performance;
Trabalhar com grandes volumes de dados estruturados e não estruturados;
Implementar processos de ETL/ELT assegurando qualidade, consistência e governança dos dados;
Desenvolver soluções para processamento de dados em batch e streaming;
Colaborar com equipes de engenharia, analytics e ciência de dados para atender às necessidades do negócio;
Participar de definições técnicas relacionadas à arquitetura de dados, padrões e ferramentas da plataforma;
Monitorar e otimizar processos de ingestão, transformação e disponibilização de dados.

Requisitos
Experiência sólida em Engenharia de Dados em ambientes distribuídos;
Conhecimento e experiência com Apache Spark e Scala;
Vivência com serviços da AWS, incluindo Glue, S3, EMR, Athena, Redshift e serviços relacionados;
Experiência com modelagem de dados, ETL/ELT e construção de pipelines de dados;
Conhecimento de bancos de dados relacionais e NoSQL;
Experiência com processamento de dados em batch e streaming;
Boa capacidade analítica e de resolução de problemas;
Facilidade para atuar em equipe e em ambientes ágeis.

Diferenciais
Experiência com Apache Kafka ou Amazon MSK;
Vivência em projetos de modernização e migração de sistemas legados;
Conhecimento em Delta Lake, Apache Hudi ou Apache Iceberg;
Experiência com ferramentas de CI/CD para dados, como dbt, Airflow e Terraform;
Experiência em arquiteturas Data Lake e Data Lakehouse.
- Services : Apache
- Database : SQL Server
- Data Science : Scala (AI-DataScience)