Orange Business
Bluelight Consulting
Engenheiro de Dados (Sênior) - ETL (Python+Snowflake) - Remoto, América Latina
Sobre a oportunidade
A Bluelight é uma consultoria de software líder, dedicada a projetar e desenvolver tecnologia inovadora que aprimora a vida dos usuários. Com um compromisso inabalável em oferecer um serviço excepcional aos nossos clientes, a Bluelight se destaca em seu foco em qualidade e satisfação do cliente. Nossa missão não é apenas criar aplicativos de ponta, mas também promover um ambiente de trabalho colaborativo e enriquecedor, onde cada membro da equipe possa crescer e prosperar. Com presença nos Estados Unidos e na América Central/Sul, a Bluelight está em uma fase empolgante de expansão, buscando continuamente talentos excepcionais para se juntar à sua comunidade dinâmica e diversificada.
Estamos procurando um profissional qualificado para se juntar à nossa equipe em rápido crescimento na Bluelight. Esta posição é ideal para alguém que prospera em um ambiente dinâmico e acelerado, onde as opiniões e esforços de todos são valorizados e apreciados. Você terá a oportunidade de contribuir para projetos desafiadores e significativos, desenvolvendo aplicações de alta qualidade que se destacam no mercado. Valorizamos o aprendizado contínuo, o crescimento pessoal e o trabalho árduo, oferecendo um ambiente colaborativo que promove o desenvolvimento profissional. Se você é apaixonado por desenvolvimento de software e está ansioso para fazer parte de uma consultoria de software em crescimento, convidamos você a se candidatar e se juntar a nós nesta jornada empolgante.
Ser um consultor em nossa equipe é uma escolha de carreira divertida, desafiadora e gratificante. Suas contribuições são altamente valorizadas pelos clientes, e o trabalho que você realiza muitas vezes tem um impacto direto e significativo em seus negócios. Você terá a oportunidade de trabalhar em uma variedade de projetos para nossos incríveis clientes, o que acelerará o crescimento de sua carreira. Você colaborará com tecnologias modernas e trabalhará ao lado de alguns dos melhores profissionais do setor! Se você está ansioso para fazer parte de uma consultoria empolgante, desafiadora e em rápido crescimento, nós o encorajamos a se candidatar. #LI-Remote
O que procuramos
Formação e Experiência
- Formação: Bacharelado em Ciência da Computação, Tecnologia da Informação, Engenharia de Dados ou área relacionada (ou experiência profissional equivalente).
- Experiência Principal: Experiência comprovada no desenvolvimento de pipelines de dados de ponta a ponta, extraindo/transformando/carregando dados de REST APIs, bancos de dados relacionais, armazenamento em nuvem e arquivos planos.
- Proficiência em Snowflake: Experiência prática demonstrada com data warehouses virtuais, streams, tasks, stages, Snowpipe, compartilhamento seguro de dados e otimização de desempenho.
- SQL: Habilidades avançadas de desenvolvimento em SQL com capacidade de escrever consultas complexas, otimizar desempenho e cargas de trabalho em larga escala.
- Modelagem de Dados: Experiência com técnicas de modelagem dimensional (esquemas estrela, tabelas fato, tabelas dimensão).
Nuvem e DevOps
- Familiaridade com ecossistemas de dados baseados em nuvem, especialmente Microsoft Azure.
- Gerenciamento de código-fonte e pipelines de CI/CD usando Git e Azure DevOps (ou similar).
Soft Skills e Práticas
- Forte mentalidade analítica, de resolução de problemas e orientada a detalhes.
- Excelentes habilidades de comunicação verbal e escrita; capacidade de colaborar em um ambiente dinâmico com prioridades em evolução.
- Conhecimento de melhores práticas de integração de dados, governança de dados e gerenciamento de dados corporativos.
Diferenciais / Desejável
- Certificações: SnowPro, Azure Data Engineer Associate ou certificações equivalentes de plataforma de dados em nuvem.
- Tecnologias Avançadas: Tecnologias de big data, machine learning, plataformas de ciência de dados ou análise avançada.
- Ferramentas de BI: Power BI, Tableau ou plataformas de visualização similares.
- Metodologias: Frameworks de entrega ágil e práticas de DevOps.
Resumo da Stack de Tecnologia Preferencial
- Núcleo: Snowflake, Python/PySpark, SQL
- Nuvem e Orquestração: Azure Data Lake Storage (ADLS), Azure Data Factory, Azure Key Vault
- DevOps e Infraestrutura: Git, Azure DevOps, CI/CD, Infraestrutura como Código (Terraform preferencial)
- Integração e Análise: REST APIs, Power BI
Responsabilidades
Engenharia de Dados e Desenvolvimento ETL
- Projetar, desenvolver e manter pipelines ETL/ELT escaláveis usando Python (PySpark), Snowflake e tecnologias nativas da nuvem.
- Construir processos de ingestão, transformação e carregamento de dados confiáveis, eficientes e reutilizáveis.
Plataforma de Dados Snowflake e Data Warehousing
- Utilizar a arquitetura do Snowflake para projetar, construir e otimizar soluções modernas de dados em nuvem.
- Implementar e gerenciar objetos do Snowflake (bancos de dados, esquemas, tabelas, views, streams, tasks, stages, stored procedures).
- Aproveitar warehouses virtuais, compartilhamento de dados, time travel e escalonamento automatizado para equilibrar desempenho e eficiência de custos.
- Aplicar modelagem dimensional (esquemas estrela, fatos, dimensões) para construir data warehouses corporativos escaláveis.
Integração e Modelagem de Dados
- Extrair e ingerir dados estruturados e semiestruturados de REST APIs, bancos de dados relacionais, aplicativos SaaS, arquivos planos e armazenamento em nuvem.
- Desenvolver frameworks de ingestão robustos.
- Colaborar com arquitetos de dados e stakeholders para criar modelos de dados lógicos e físicos alinhados aos objetivos de negócios.
Arquitetura e Padrões de Nuvem
- Contribuir para conceitos modernos de plataforma de dados (data lakes, lakehouses, arquiteturas data mesh, catálogos de dados corporativos).
- Apoiar a integração entre o Snowflake e serviços nativos da nuvem (principalmente Azure).
- Estabelecer e aplicar padrões e melhores práticas de engenharia de dados.
Qualidade, Governança e Segurança
- Implementar controles automatizados de qualidade de dados, frameworks de validação e processos de monitoramento.
- Apoiar iniciativas de governança de dados e manter a conformidade com os padrões organizacionais.
- Garantir a segurança, privacidade e conformidade regulatória dos dados (controles de acesso, políticas de mascaramento, melhores práticas do setor).
Otimização, Operações e Manutenção
- Monitorar e otimizar cargas de trabalho do Snowflake, processos ETL/ELT e consultas SQL para atender aos SLAs.
- Analisar a utilização do data warehouse e recomendar melhorias de desempenho e eficiência de custos.
- Monitorar pipelines, diagnosticar problemas de desempenho e implementar soluções de longo prazo; apoiar ambientes de produção e resolução de incidentes.
- Manter documentação abrangente para pipelines, fluxos, transformações, modelos de dados e processos operacionais.
Colaboração
- Colaborar com equipes multifuncionais (arquitetos de dados, cientistas de dados, analistas, stakeholders de negócios) para entender os requisitos e fornecer expertise técnica.
Benefícios da Empresa
- Salário competitivo e bônus, incluindo aumentos salariais baseados em desempenho.
- Política generosa de tempo livre remunerado (PTO).
- Horário de trabalho flexível.
- Trabalho remoto.
- Educação continuada, treinamento, conferências.
- Cursos, exames e certificações patrocinados pela empresa.
