Estados Unidos
B&A
Paramount
Engenheiro de Dados - Pipelines de Dados e ETL
Estados Unidos
Burbank, California, United States
PythonSQLGCPGo
Tradução automática. Consulte o original.
Sobre a oportunidade
Contar histórias é, e sempre será, o coração do que fazemos na Skydance.
Nossa visão é construir um ecossistema de entretenimento próspero onde histórias e mundos sejam imaginados, trazidos à vida e vivenciados. Criamos para todas as idades e públicos, ancorados pela força do nosso conteúdo e experiências e pela profundidade da nossa conexão com os fãs. Somos focados nos criadores, voltados para o público, orientados pela tecnologia e com escala global.
Aqui, você trabalhará com equipes talentosas que agem rápido, pensam de forma ousada e colaboram com propósito para entregar resultados. Miramos alto, defendemos as melhores ideias e vencemos juntos, conquistando a confiança de nossos funcionários, criadores, parceiros e públicos todos os dias.
Se você se sente motivado pela oportunidade de ajudar a construir a próxima geração de empresas globais de mídia e entretenimento, impulsionada pela criatividade e tecnologia, ficaríamos entusiasmados em recebê-lo a bordo. VAMOS NESSA!
Engenheiro de Dados – Pipeline de Dados & ETL
A equipe de Engenharia de Dados está contratando um Engenheiro de Dados – Pipeline de Dados & ETL. Você ajudará a construir e manter plataformas de dados escaláveis e pipelines de ETL/ELT em um ambiente dinâmico. Nesta função, você construirá e dará suporte a sistemas de dados em lote e em tempo real que impulsionam aplicações de análise, ML e IA. Você também ampliará sua experiência em arquitetura de dados moderna e melhores práticas nativas em nuvem.
Visão Geral e Responsabilidades
46034
Resumo da Vaga
#LI-RJ1
INFORMAÇÕES ADICIONAIS
Faixa Salarial de Contratação: $98,400.00 - 147,600.00.
A faixa salarial de contratação para esta posição aplica-se a Nova York, Califórnia, Colorado, estado de Washington e à maioria das outras geografias. O pagamento inicial para o candidato selecionado depende de uma variedade de fatores relacionados ao trabalho, incluindo, mas não se limitando a, localização geográfica, demandas de mercado, experiência, treinamento e educação. Os benefícios disponíveis para esta posição incluem plano médico, odontológico, oftalmológico, plano 401(k), cobertura de seguro de vida, benefícios por invalidez, programa de assistência educacional e PTO ou, se aplicável, conforme ditado pelo Acordo Coletivo de Trabalho apropriado. Esta posição é elegível para bônus.
A Skydance é um empregador que oferece oportunidades iguais (EOE)
Acolhemos a oportunidade de construir uma força de trabalho que reflita uma ampla gama de perspectivas, origens e experiências. Ser um empregador que oferece oportunidades iguais significa que levamos a sério nossa responsabilidade de considerar candidatos qualificados com base no mérito. De acordo com as leis do país ou região em que a função está baseada, isso inclui a consideração sem distinção de raça, cor, etnia, origem nacional, status de cidadania, religião ou crença, sexo, gênero, identidade ou expressão de gênero, orientação sexual, idade, estado civil, gravidez, paternidade/maternidade, deficiência física ou mental, informações genéticas, status militar ou de veterano protegido, status sindical ou qualquer outra categoria protegida pela lei aplicável.
Se você é um indivíduo qualificado com deficiência, pode solicitar uma acomodação razoável durante o processo de candidatura e/ou recrutamento. Você pode solicitar acomodações razoáveis ligando para 212.846.5500 ou enviando um e-mail para [email protected]. Apenas mensagens deixadas para este fim serão respondidas.
Principais Responsabilidades
Construir e Manter Pipelines de Dados Escaláveis
- Projetar, desenvolver e manter pipelines de dados em lote e streaming escaláveis para conjuntos de dados estruturados e não estruturados de grande escala.
- Construir frameworks de ETL/ELT robustos que suportem casos de uso de análise, BI, experimentação e machine learning.
- Otimizar pipelines para desempenho, confiabilidade, escalabilidade e eficiência de custos.
- Implementar padrões avançados de ingestão, incluindo CDC, cargas incrementais e processamento orientado a eventos.
Modelagem de Dados & Arquitetura de Data Warehouse
- Projetar modelos de dados escaláveis, dimensionais e híbridos, otimizados para casos de uso de análise e ML.
- Desenvolver camadas de transformação reutilizáveis (camadas semânticas) que atendam a aplicações de BI, ML e IA.
- Escrever SQL otimizado e de nível de produção para cargas de trabalho de análise de grande escala.
- Contribuir para a otimização de consultas, indexação, particionamento e ajuste de desempenho em sistemas distribuídos e warehouses em nuvem.
Desenvolvimento de Pipeline de Dados Moderno
- Construir e manter componentes de dados modulares seguindo padrões de framework estabelecidos.
- Contribuir para decisões arquiteturais em sistemas de streaming, data lakes e warehouses.
Qualidade de Dados, Governança & Observabilidade
- Implementar frameworks automatizados de validação de dados, detecção de anomalias e monitoramento.
- Estabelecer linhagem de dados e padrões de metadados para apoiar a reprodutibilidade em fluxos de trabalho de ML.
- Aplicar melhores práticas de governança, privacidade e segurança, particularmente para conjuntos de dados sensíveis de IA.
- Garantir o uso responsável de dados de IA e padrões de conformidade.
Habilidades Técnicas Necessárias
Experiência Avançada em Pipeline de Dados & ETL/ELT
- 2–4+ anos de experiência na construção e escalonamento de pipelines de ETL/ELT em ambientes de produção.
- Experiência com ferramentas de orquestração de fluxo de trabalho, como Airflow, Composer ou plataformas similares.
- Forte compreensão de conceitos de processamento de dados distribuídos.
SQL & Modelagem de Dados para Análise & ML
- Habilidades de SQL em nível especialista para transformação e análise de grande escala.
- Experiência no projeto de esquemas de warehouse escaláveis e camadas de dados prontas para ML.
- Forte experiência na otimização de consultas complexas em conjuntos de dados de múltiplos terabytes.
Programação & Integração de Dados de ML
- Proficiência em Python (ou linguagem similar) para processamento de dados e integração de pipeline de ML.
- Experiência com frameworks de processamento distribuído, como Spark.
- Familiaridade com a integração de pipelines de dados com plataformas de ML, como Vertex AI (preferencial), Databricks ML ou equivalente.
Streaming & Sistemas Orientados a Eventos
- Experiência na construção de pipelines de dados em tempo real usando Kafka, Pub/Sub ou tecnologias similares.
- Compreensão de streaming de recursos, processamento de dados de baixa latência e arquiteturas orientadas a eventos.
- Capacidade de arquitetar e construir dashboards em tempo real usando Superset.
Nuvem & Plataformas de Dados de IA Modernas
- Experiência no projeto de arquiteturas de dados nativas em nuvem (GCP preferencial).
- Experiência com arquiteturas Lakehouse e data warehouses em nuvem.
- Familiaridade com bancos de dados vetoriais, pipelines de embeddings e infraestrutura de serviço de IA é um diferencial.
Qualificações Básicas
- Bacharelado ou Mestrado em Ciência da Computação, Engenharia ou área relacionada (ou experiência equivalente).
- 2–4+ anos de experiência em engenharia de dados, desenvolvimento de pipeline de dados ou áreas relacionadas.
- Forte base em princípios modernos de engenharia de dados, design de sistemas distribuídos e arquiteturas nativas em nuvem.
- Capacidade comprovada de projetar e operar sistemas de dados de produção em grande escala.
- Histórico comprovado de liderança técnica e colaboração multifuncional.
- Fortes habilidades de resolução de problemas e capacidade de prosperar em ambientes complexos e de ritmo acelerado.
- Orientado a detalhes e comprometido com a excelência em engenharia e melhoria contínua.
- Compreensão de streaming de recursos, processamento de dados de baixa latência e arquiteturas orientadas a eventos. Trabalhar em estreita colaboração com a equipe de streaming e arquitetar/construir dashboards em tempo real usando Superset. Plataformas de Dados de IA Modernas.
- Experiência no projeto de arquiteturas de dados nativas em nuvem (GCP preferencial). Experiência com arquiteturas Lakehouse e data warehouses em nuvem. Conhecimento com bancos de dados vetoriais, pipelines de embeddings e infraestrutura de serviço de IA é um diferencial.
Paramount Streaming, uma divisão dentro da Paramount Global, é o lar dos serviços diretos ao consumidor da empresa, abrangendo opções gratuitas e pagas na forma de Pluto TV e Paramount+. A Pluto TV é líder global em TV gratuita suportada por anúncios, oferecendo mais de 1,400 canais globais e uma extensa biblioteca de conteúdo de streaming, incluindo canais ao vivo e originais. O Paramount+, serviço de vídeo sob demanda por assinatura digital e streaming ao vivo, combina esportes ao vivo, notícias de última hora e A Mountain of Entertainment™. O Paramount+ apresenta uma vasta biblioteca de séries originais, programas de sucesso e filmes populares de todos os gêneros de marcas e estúdios de produção de renome mundial, incluindo SHOWTIME®.
O que Oferecemos
- Remuneração atrativa e pacotes de benefícios abrangentes. Confira nossa lista completa de benefícios aqui skydance.com/careers/benefits.
- Folga remunerada generosa.
- Assinaturas gratuitas do HBO Max, Paramount+ e outros serviços de streaming e produtos de notícias digitais da Skydance.
- Oportunidades robustas de engajamento dos funcionários, incluindo acesso a exibições e eventos exclusivos, séries de palestrantes, atividades voluntárias e muito mais.
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil