Lantern

Engenheiro(a) de Plataforma de Dados

PythonSQLPostgreSQLGoTerraform
Tradução automática. Consulte o original.

Sobre a Lantern

A Lantern é a plataforma de cuidados especializados que conecta pessoas aos melhores cuidados quando elas mais precisam. Ao curar uma Rede de Excelência composta pelos principais especialistas do país para cirurgia, tratamento de câncer, infusões e muito mais, a Lantern oferece cuidados excelentes com economia significativa de custos para empregadores e suas forças de trabalho. A Lantern também designa aos membros uma equipe de cuidados dedicada, incluindo Defensores de Cuidados e enfermeiros, durante toda a jornada de tratamento, ajudando-os a voltar à boa saúde, de volta às suas famílias e de volta ao trabalho. Com acesso conveniente a especialistas em todo o país, a Lantern significa que cuidados de qualidade estão a uma distância de carro para a maioria. A Lantern é confiada pelos maiores empregadores do país para fornecer cuidados a mais de 6 milhão de membros em todo o país. Saiba mais sobre nós em lanterncare.com.

A organização de dados da Lantern está se movendo de um modelo centralizado — onde a equipe de plataforma é dona da maior parte da entrega de pipelines — para um onde as equipes de domínio (Engenharia de Dados, Operações de Dados, Engenharia de Análise) constroem e possuem seus próprios produtos de dados, e o trabalho da equipe de plataforma é tornar isso possível. Esta função é central para essa mudança: construir e administrar a infraestrutura de autoatendimento, automação de governança e controles de acesso sobre os quais as equipes de domínio constroem, em vez de construir pipelines de domínio diretamente.

Esta é uma função prática de administração e capacitação. As equipes de domínio são donas de seus produtos de dados; o comitê de arquitetura de dados é dono dos padrões. Esta função administra a plataforma Databricks e o parque de Lakebase (gerenciado Postgres), detém os privilégios elevados que vêm com isso, e aplica nossos padrões por meio de controles de plataforma, automação e revisão — em toda a infraestrutura Azure e IAM, CI/CD, observabilidade e a camada de governança de controle de acesso, auditoria e linhagem. É também a porta de entrada da plataforma para as equipes de domínio, desde o início dos projetos até o desbloqueio do dia a dia, e trabalha em estreita parceria com a Plataforma de Nuvem, o DBA Azure SQL e as equipes de Segurança nas fundações compartilhadas abaixo.

Sobre Você

Você usa LÓGICA em sua tomada de decisão e entende que o progresso é fundamental para fazer a mudança. Você se concentra na execução do seu conteúdo, equilibrando um ambiente de ritmo acelerado, e dedica tempo para celebrar as pequenas e grandes vitórias.

INCLUSÃO é um pilar central de suas crenças pessoais. Um ambiente diverso e inclusivo é incrivelmente importante para você. Você entende e deseja fazer parte de uma equipe diversificada com diferentes experiências e perspectivas, e você valoriza as diferenças em cada indivíduo com quem interage.

Você tem GARRA, impulso e ambição para resolver grandes problemas. Grandes problemas exigem grandes ideias e uma equipe que apoia novas ideias.

Você se importa profundamente com seus clientes e é motivado a manter a HUMANIDADE em todas as decisões. Seus clientes não são apenas os indivíduos que usam seu produto. Eles são o fator de motivação para você fazer a diferença.

A integridade o guia na vida. Focando na VERDADE em vez de dar às pessoas as respostas que elas querem ouvir.

Você prospera em um Ambiente de Equipe. A colaboração é fundamental na inovação e na criação de mudanças.

Esses pilares de LUZ são um lembrete para nossa equipe de que estamos fazendo a diferença ao fornecer orientação e suporte na navegação pelo cenário muitas vezes complexo e confuso da saúde. Esperamos que, através desta LUZ, os indivíduos possam encontrar o caminho para os melhores cuidados, recursos e suporte de que precisam para voltar à vida.

Localização: Híbrido - pelo menos 3 dias/semana em nossos escritórios de Dallas, TX

Se isso soa como você, adoraríamos nos conectar para conversar mais sobre oportunidades de carreira na Lantern.

Por favor, candidate-se à nossa vaga e alguém de nossa Equipe de Aquisição de Talentos entrará em contato para ajudá-lo a navegar em nosso processo de entrevista.

A Lantern não discrimina com base em raça, sexo, cor, religião, idade, origem nacional, estado civil, deficiência, status de veterano, informações genéticas, orientação sexual, identidade de gênero ou qualquer outro motivo proibido por lei na oferta de oportunidades e benefícios de emprego.

Responsabilidades

  1. Administração de Plataforma: Administrar a plataforma Azure Databricks e Unity Catalog de acordo com os padrões de arquitetura definidos pelo comitê de arquitetura de dados — configuração de workspace e metastore, estrutura de catálogo e esquema, políticas de cluster e gerenciamento de custos de computação, incluindo visibilidade de gastos por equipe e relatórios de rateio. Fornecer feedback aos proprietários dos padrões onde um padrão está bloqueando equipes ou não se encaixa mais em como a plataforma está sendo usada.
  1. Capacitação de Autoatendimento: Construir a camada de infraestrutura de autoatendimento — fluxos de provisionamento, templates e padrões de acesso que permitem às equipes de domínio configurar e gerenciar seus próprios produtos de dados sem depender da equipe de plataforma para cada alteração.
  1. Administração de Banco de Dados Postgres (Lakebase): Atuar como DBA para o parque Postgres da plataforma — provisionamento e desativação de instâncias Lakebase, gerenciamento de usuários e funções, configuração de conexões, otimização de desempenho de consultas e índices, atualizações de versão, backup e recuperação point-in-time, e resposta a incidentes de banco de dados. Manter os padrões de sincronização entre Lakebase e o lakehouse.
  1. Infraestrutura como Código: Construir e manter Infraestrutura como Código para a plataforma usando Terraform contra Azure — grupos de recursos, rede e endpoints privados, registros de aplicativos do Entra ID, service principals e Key Vault — para que as alterações de plataforma sejam revisáveis, repetíveis e auditáveis.
  1. Modelo de Acesso e Governança: Implementar e aplicar o modelo de acesso aprovado da plataforma em todo o lakehouse e na camada Postgres — concessões do Unity Catalog, padrões de autenticação OBO (on-behalf-of), ABAC, segurança em nível de linha, mascaramento de dados e acesso baseado em função entre personas de engenharia, operações e análise.
  1. Auditoria e Linhagem: Construir a camada de auditoria e linhagem que torna a propriedade descentralizada auditável — logs de auditoria, captura de linhagem, marcação de classificação de sensibilidade e a camada de auditoria customizada baseada em eventos necessária onde o Databricks não consegue capturar nativamente eventos da camada de aplicativo, incluindo resposta a incidentes quando essa camada falha.
  1. Observabilidade: Operar a observabilidade da plataforma em Databricks, Lakebase e serviços de suporte Azure (integração Datadog, exportação de métricas e logs, alertas, SLOs) para que as equipes de domínio obtenham garantias de confiabilidade sem construir seu próprio monitoramento.
  1. Confiabilidade e Recuperação de Desastres: Executar o ciclo de vida da infraestrutura — provisionamento, desativação, validação de backup e restauração, e testes de recuperação de desastres para cargas de trabalho de plataforma e banco de dados.
  1. Cobertura de Suporte: Não há rotação de plantão noturno para esta função. Disponibilidade ocasional fora do horário comercial é esperada para suportar implantações agendadas e incidentes importantes.
  1. CI/CD: Suportar CI/CD para cargas de trabalho de dados entre as equipes de domínio — pipelines de implantação para notebooks, jobs, pipelines DLT, projetos dbt, Databricks Asset Bundles (DABs) e migrações de esquema Lakebase.
  1. Integração GitHub: Manter a integração entre a plataforma e GitHub / GitHub Actions — estrutura de repositório, políticas de branch e fluxos de trabalho de CI/CD sobre os quais as equipes de domínio constroem seus pipelines.
  1. Colaboração com a Plataforma de Nuvem: Trabalhar com a equipe de Plataforma de Nuvem na fundação compartilhada Azure — rede, Entra ID, Key Vault, políticas e custos de nuvem — com um limite claro para onde a responsabilidade da plataforma termina, e triar e encaminhar problemas de infraestrutura Azure de acordo.
  1. Colaboração com DBA Azure SQL: Coordenar com a equipe de DBA Azure SQL, que gerencia o parque Azure SQL de forma independente — pontos de integração entre os dois parques, práticas compartilhadas em backup, HA/DR e tratamento de PHI, e contribuição para o posicionamento de cargas de trabalho.
  1. Interlocução Inter-equipes: Manter um relacionamento de interlocução recorrente com as equipes de Segurança, InfoSec e Aplicativos Principais sobre dependências de plataforma inter-equipes à medida que surgem, e garantir que as capacidades da plataforma atendam aos requisitos HIPAA, SOC 2 e outros requisitos regulatórios.
  1. Engajamento em Projetos: Engajar no início dos kickoffs de novos projetos de equipes de domínio para aconselhar sobre capacidades da plataforma, padrões de acesso e os padrões que um design deve atender, antes que as equipes construam em torno de restrições que não sabiam que existiam.
  1. Desbloqueio: Servir como ponto de escalonamento para engenheiros de domínio presos em políticas de cluster, limites de permissão, desempenho de banco de dados ou etapas de CI quebradas.
  1. Relatórios e Roadmap: Produzir relatórios de KPIs da plataforma (uso, tempo de atividade, velocidade de implantação, gastos) e contribuir para o roadmap e backlog da plataforma como produto.
  1. Documentação: Capturar padrões reutilizáveis de kickoffs, incidentes e trabalho de interlocução em uma base de conhecimento compartilhada para que as equipes de domínio não precisem redescobrir soluções.

Requisitos

  1. Um mínimo de 4 anos em uma função de engenharia de plataforma ou infraestrutura apoiando uma organização de dados ou análise.
  1. Profunda experiência prática com Databricks (administração de workspace, Unity Catalog, Delta Lake) e Azure (Entra ID, rede, Key Vault, Infraestrutura como Código via Terraform ou Bicep).
  1. Experiência prática em administração de PostgreSQL, pois esta função é o DBA de registro para o parque Postgres da plataforma — gerenciamento de usuários e funções, configuração de conexões, otimização de desempenho de consultas e índices, backup e restauração, recuperação point-in-time e HA/DR.
  1. Experiência real com arquitetura de identidade e acesso — service principals vs. padrões de autorização de usuário (OBO), e os trade-offs entre eles.
  1. Experiência prática na construção e manutenção de pipelines de CI/CD com GitHub Actions e/ou Azure DevOps.
  1. Proficiência em Python ou outra linguagem de script para automação e ferramentas de plataforma.
  1. Experiência no uso de ferramentas de IA (por exemplo, GitHub Copilot, ChatGPT, Claude) para acelerar o trabalho de engenharia.
  1. Conforto em gerenciar o ciclo de vida da infraestrutura: provisionamento, desativação e recuperação de desastres.
  1. Experiência de trabalho em um ambiente regulamentado, idealmente saúde, com requisitos HIPAA e/ou SOC 2.
  1. Conforto em operar com privilégios elevados em um ambiente regulamentado, que contém PHI, e o discernimento para escalar em vez de conceder exceções unilateralmente.
  1. Capacidade de aderir a um padrão sem ser o dono dele — aplicar padrões de arquitetura e segurança definidos em outro lugar na organização por meio de influência e automação, em vez de autoridade.
  1. Forte capacidade de resolução de problemas e troubleshooting, inclusive em condições de incidente.
  1. Excelentes habilidades de comunicação e colaboração, e a capacidade de trabalhar efetivamente com equipes de engenharia multifuncionais.

Fortes Candidatos Terão

  1. Exposição a data mesh ou arquitetura de dados orientada a domínio, e o instinto de que equipes de plataforma existem para tornar outras equipes autossuficientes, em vez de serem o gargalo.
  1. Experiência prática com Databricks Lakebase ou outro serviço Postgres nativo da nuvem (Azure Database for PostgreSQL, Neon, Aurora), e com ferramentas de Postgres como psql, pgAdmin e frameworks de migração.
  1. Familiaridade suficiente com Azure SQL Database para coordenar efetivamente com a equipe de DBA em pontos de integração e posicionamento de cargas de trabalho, e experiência na integração de sistemas OLTP com um lakehouse.
  1. Experiência em ambiente de dados de saúde (controles de acesso baseados em HIPAA, segregação de PHI), e demonstração da capacidade de aprender novos modelos de negócios e tecnologias.
  1. Experiência com ferramentas de observabilidade como Datadog ou pipelines baseados em OpenTelemetry.
  1. Experiência com Databricks Asset Bundles, DLT ou dbt em um modelo de implantação multi-equipe.
  1. Possuir certificações relevantes (por exemplo, Databricks Data Engineer Professional, Azure Administrator, etc.).

Benefícios

  • Seguro Médico
  • Seguro Odontológico
  • Seguro de Visão
  • Invalidez de Curto e Longo Prazo
  • Seguro de Vida
  • Plano 401k com contrapartida da empresa
  • Férias Flexíveis
  • Licença Parental Remunerada

Mais oportunidades com um só perfil

Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.

Criar meu perfil

Seu próximo empregojá está te procurando.

Nort

Plataforma de recrutamento reverso para programadores