Data Engineer - Indaiatuba/SP

Principais Responsabilidades

• Contribuir com o time de Data Analytics Engineering na construção e manutenção de Data Products utilizando Python, Apache Spark, Databricks e boas práticas de engenharia de software;
• Colaborar com o Product Manager na coleta e definição de requisitos para construção de Data Products;
• Contribuir para a evolução da cultura de DataOps;
• Contribuir para a criação e manutenção de testes unitários e de integração;
• Contribuir na implementação e gerenciamento de pipelines de CI/CD utilizando Jenkins e GitHub Actions;
• Utilizar Infrastructure as Code (IaC) com Terraform para gerenciar e provisionar infraestrutura de maneira eficiente;
• Participar da implementação de práticas de observabilidade, utilizando NewRelic e Open Telemetry, para monitoramento e análise de desempenho;
• Trabalhar em conjunto com a equipe para promover boas práticas de desenvolvimento, inovação e a evolução contínua da equipe.

Habilidades Que Você Precisa

• Amplo conhecimento em linguagem Python e em Apache Spark utilizando PySpark;
• Proficiência no uso de SQL para análises e consultas de dados;
• Conhecimento em bancos de dados relacionais e não-relacionais;
• Conhecimento em modelagem de dados dimensional;
• Exepriência na construção e orquestração de pipelines de dados utilizando ferramentas como Airflow ou semelhantes;
• Conhecimento em serviços de nuvem AWS;
• Experiência no uso da plataforma Databricks.
• Conhecimento em práticas de teste de software, incluindo testes unitários e de integração;
• Experiência com ferramentas de CI/CD, como Jenkins e GitHub Actions;
• Familiaridade com Infrastructure as Code (IaC) utilizando Terraform;
• Conhecimento em observabilidade e monitoramento com NewRelic e Open Telemetry;
• Excelentes habilidades de comunicação e trabalho em equipe.

O Que Faz Destacar

• Certificações AWS (nível Associate ou superior) e Databricks;
• Experiência anterior como engenheiro de software;
• Habilidade para inovar e implementar soluções técnicas eficazes;
• Capacidade de colaborar com outros membros da equipe e contribuir para seu desenvolvimento profissional;
• Experiência em ambientes ágeis e colaboração com equipes multifuncionais;
• Capacidade analítica e habilidade em resolução de problemas complexos.