ambi.
Inetum
Engenheiro de Dados
PythonSQLAWSGCP
Tradução automática. Consulte o original.
Descrição da empresa
A Inetum é uma líder europeia em serviços digitais. A equipe da Inetum de 28,000 consultores e especialistas se esforça todos os dias para causar um impacto digital para empresas, entidades do setor público e a sociedade. As soluções da Inetum visam contribuir para o desempenho e a inovação de seus clientes, bem como para o bem comum.
Descrição do emprego
Estamos buscando um Engenheiro de Dados de nível pleno para projetar, otimizar e manter pipelines de dados complexos, garantindo a escalabilidade, confiabilidade e desempenho de soluções de dados. Nesta função, você também colaborará com equipes de Ciência de Dados para integrar e operacionalizar modelos de machine learning em ambientes de produção.
Principais responsabilidades
- Projetar, desenvolver e manter pipelines de dados escaláveis.
- Otimizar fluxos de trabalho de processamento de dados para conjuntos de dados em larga escala.
- Construir e gerenciar soluções de ingestão de dados a partir de múltiplas fontes.
- Garantir a qualidade, confiabilidade e desempenho dos dados em todas as plataformas.
- Colaborar com equipes de Ciência de Dados e Engenharia para implantar e operacionalizar soluções de ML.
- Contribuir com as melhores práticas de engenharia de software e iniciativas de melhoria contínua.
Habilitações
- Experiência comprovada de 3+ anos em Engenharia de Dados.
- Proficiência avançada em Python e SQL.
- Capacidade demonstrada de projetar soluções robustas, sustentáveis e altamente escaláveis para processamento de dados em larga escala e otimização de desempenho.
- Experiência prática com bibliotecas de processamento de dados em memória, como Polars (ou equivalente).
- Experiência sólida com frameworks de processamento de dados distribuídos, particularmente PySpark.
- Experiência no desenvolvimento de pipelines de ingestão de dados aproveitando REST APIs.
- Conhecimento sólido das melhores práticas de desenvolvimento de software.
- Experiência com Git, pipelines de CI/CD e metodologias de teste de software.
- Experiência na implantação, monitoramento e manutenção de pipelines de Machine Learning em ambientes de produção.
Diferenciais
- Experiência com plataformas de dados modernas, como Databricks.
- Experiência na orquestração de fluxos de trabalho usando ferramentas como Apache Airflow.
- Conhecimento de plataformas em nuvem (AWS, Azure ou GCP).
