Brasil
Clara
GFT Technologies SE
Engenharia de Dados Sênior (Azure) | Híbrido/SP - 136209
Brasil
Barueri, São Paulo, Brazil
PythonSQL
O que buscamos
Buscamos um(a) Engenheiro(a) de Dados com sólida experiência em arquitetura e engenharia de dados em ambientes cloud, capaz de desenvolver e sustentar pipelines escaláveis, confiáveis e observáveis. O profissional atuará na construção e evolução de plataformas de dados utilizando arquitetura Lakehouse, além de contribuir para governança, qualidade, integração e disponibilização de dados para iniciativas analíticas e de negócio.
Big enough to deliver – small enough to care.
Responsabilidades
- Projetar, desenvolver e manter pipelines de dados batch e streaming com foco em escalabilidade, performance e Observabilidade;
- Implementar processos de ingestão, transformação e disponibilização de dados utilizando Python, PySpark, Spark e SQL;
- Construir e evoluir camadas de dados em arquitetura Lakehouse (Bronze, Silver e Gold);
- Desenvolver e sustentar fluxos de ETL/ELT em ambientes cloud;
- Implementar e manter processos de orquestração de pipelines de dados;
- Atuar na análise, diagnóstico e resolução de problemas em pipelines e aplicações de dados;
- Realizar otimização de performance e correção de incidentes em soluções de dados;
- Implementar políticas, processos e ferramentas de governança de dados, promovendo padronização e responsabilização sobre os dados;
- Utilizar e evoluir soluções baseadas em Azure Data Factory, Airflow, Databricks e Data Lake;
- Desenvolver integrações entre sistemas por meio de APIs REST e outras fontes de dados;
- Aplicar boas práticas de modelagem de dados para Data Lakes e ambientes analíticos;
- Colaborar com áreas de produto, engenharia, dados e negócio na definição e implementação de soluções técnicas;
- Garantir qualidade, consistência, rastreabilidade e reutilização dos ativos de dados;
- Atuar de forma proativa na sustentação e evolução da plataforma de dados.
Requisitos Obrigatórios
- Experiência prévia como Engenheiro(a) de Dados;
- Experiência sólida com Python, PySpark e SQL;
- Conhecimento avançado em Azure Data Factory, Airflow, Databricks e Data Lake;
- Experiência em arquitetura de dados e construção de soluções analíticas;
- Vivência com Git Flow e controle de versionamento;
- Conhecimento em testes unitários e funcionais (Unittest, Pytest ou similares);
- Experiência com bancos de dados relacionais como SQL Server, Oracle ou equivalentes;
- Experiência na implementação e sustentação de processos ETL/ELT;
- Conhecimento em modelagem de dados para Data Lakes e arquitetura Lakehouse;
- Experiência com camadas Bronze, Silver e Gold ou estruturas equivalentes;
- Vivência na integração e consumo de APIs REST;
- Experiência prática em ambientes Cloud, com foco em Azure;
- Experiência com processamento de dados em batch e streaming;
- Conhecimento em ferramentas de streaming de dados, como Kafka;
- Capacidade de atuar em ambientes dinâmicos, com múltiplas demandas e gestão de prioridades simultâneas.
Requisitos Diferenciais
- Certificações Databricks e/ou Microsoft Azure;
- Experiência com arquitetura orientada a eventos e soluções baseadas em streaming;
- Conhecimento em segurança e privacidade de dados;
- Experiência em ambientes de alta criticidade e grande volume de processamento;
- Conhecimento em práticas DevOps e implementação de pipelines CI/CD para projetos de dados;
- Vivência com ferramentas de Observabilidade, monitoramento, qualidade e lineage de dados.
Descrição comportamental
Procuramos uma pessoa que:
- Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
- Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
- Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
- Tenha habilidades de resolução de problemas;
- Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
- Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.
#VempraGFT #VamosVoarJuntos #ProudToBeGFT
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil