Alemanha
Terra Quantum
Sanitätshaus Aktuell AG
Engenheiro(a) de Dados (m/f/d)
Alemanha
Cologne, North Rhine-Westphalia, Germany
PythonSQLAWSDockerTerraform
Tradução automática. Consulte o original.
Sobre a oportunidade
Esta vaga é para você se... Dados para você não são apenas zeros e uns, mas a base para boas decisões? Você sente prazer em criar estruturas de dados limpas a partir de sistemas legados caóticos? Você pensa em pipelines, não em scripts? Tratamento de erros e lógica de retentativa são óbvios para você, não opcionais? Você quer aprender com engenheiros experientes e, ao mesmo tempo, implementar suas próprias ideias? Então você está no lugar certo!
As Tarefas
Como Engenheiro(a) de Dados, você construirá os pipelines de dados que possibilitam nossa transformação digital. Você será responsável pelo fluxo de dados limpo, confiável e escalável entre centenas de sistemas ERP e nossa arquitetura de dados moderna.
- Engenharia de Pipeline de Dados: Você projetará e implementará pipelines robustos de ETL/ELT que extraem, transformam e carregam dados de várias centenas de sistemas ERP de forma confiável. Você usará ferramentas modernas de orquestração e garantirá que tudo funcione sem problemas, mesmo com fluxos de dados complexos. Você construirá pipelines que não apenas funcionam, mas também são fáceis de manter e expandir.
- Arquitetura de Data Lake & Data Warehouse: Você construirá nossa infraestrutura de Data Lake com AWS do zero. Você estruturará os dados de forma significativa, implementará conceitos de governança de dados e garantirá que os dados sejam preparados de forma ideal para análise e Business Intelligence. Você entenderá a diferença entre dados brutos (Raw), de estágio (Staging) e curados (Curated) e implementará arquiteturas correspondentes.
- Projeto Greenfield – Integração de Sistema Legado: Você estará no meio de um projeto Greenfield empolgante: a integração de várias centenas de sistemas ERP legados. Esta não é uma integração padrão – trata-se de estruturas de dados complexas, formatos diferentes e o desafio de criar um modelo de dados consistente a partir de fontes heterogêneas.
- Orquestração de Fluxo de Trabalho e Confiabilidade: Você implementará fluxos de trabalho resilientes para processamento de dados crítico em termos de tempo. Você usará padrões modernos de orquestração e garantirá que os pipelines continuem funcionando de forma controlada ou reiniciem mesmo em caso de erros. Você construirá monitoramento e alertas para que os problemas sejam detectados antes que se tornem falhas reais.
- Colaboração e Desenvolvimento Contínuo: Você trabalhará em estreita colaboração com nosso Staff Engineer, os Product Owners e a equipe de desenvolvimento de ~10 pessoas. Você aprenderá com colegas experientes e, ao mesmo tempo, trará suas próprias ideias. Você crescerá com os desafios e se desenvolverá continuamente.
- Qualidade e Documentação de Dados: Você implementará verificações de qualidade de dados e garantirá que dados ruins não cheguem aos nossos sistemas. Você documentará fluxos de dados e lógica de transformação para que outras pessoas também entendam o que acontece com os dados.
O Perfil
Essenciais (Must-haves)
- Pelo menos 3 anos de experiência como Engenheiro(a) de Dados ou em funções comparáveis
- Experiência prática com pipelines ETL/ELT e Data Lakes
- Bons conhecimentos de Python para processamento de dados e desenvolvimento de pipelines
- Experiência com plataformas de nuvem, idealmente AWS (S3, Glue, Athena, RDS, etc.)
- Conhecimentos básicos de Infrastructure as Code (Terraform ou CDK)
- Compreensão de modelagem de dados e sólidos conhecimentos de SQL
- Experiência com Git e CI/CD
Diferenciais (Nice-to-haves)
- Experiência com Temporal ou frameworks de orquestração de fluxo de trabalho semelhantes (Airflow, Prefect, Dagster)
- Conhecimento na integração de sistemas ERP legados
- Experiência com tecnologias de streaming (Kafka, Kinesis)
- Conhecimento de contêineres (Docker, ECS)
- Monitoramento com Grafana
- Interesse em Healthcare ou E-commerce
- Certificações AWS
Por que nós?
O que oferecemos
- Modelo Híbrido: 2 dias por semana no escritório em Colônia, 3 dias de trabalho flexível de onde você quiser
- Projeto Greenfield: Você construirá nossa arquitetura de dados moderna do zero – sem código legado que você precise entender primeiro
- Desafio Real: Integração de várias centenas de sistemas ERP – complexo, mas também extremamente instrutivo
- Stack Tecnológico Moderno: AWS, Python, Terraform, ferramentas modernas de Data Engineering
- Mentoria e Crescimento: Você trabalhará com engenheiros experientes e se desenvolverá continuamente
- Liberdade para Moldar: Você trará suas ideias e ajudará a moldar nossa infraestrutura de dados
- Equipe em Crescimento: Você fará parte de uma equipe de desenvolvimento motivada de ~10 pessoas
- Impacto: Seus pipelines garantirão que as pessoas tenham acesso mais fácil a ajudas importantes
Sobre nós
Há mais de 35 anos, apoiamos nossos membros como um parceiro confiável e forte em todo o espectro de serviços de auxílios médicos. Assim, organizamos compras, vendas, desenvolvimento de pessoal e marketing para nossos mais de 480 membros em mais de 700 locais nacionais.
Para melhorar continuamente para nossos membros e otimizar nosso portfólio de serviços em tempos de transformação digital, procuramos você em regime de tempo integral para o início mais próximo possível em nossa unidade de Vettelschoß.
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil