Temple Health
Vanguard
Especialista Sênior em Validação de IA
Sobre a oportunidade
A equipe de Gestão de Risco de Modelos (MRM), parte da segunda linha de defesa da Vanguard, está em busca de um profissional experiente em risco de modelos para apoiar a supervisão independente de modelos de IA/ML e IA generativa criados e/ou utilizados em toda a empresa.
A Vanguard é uma empresa global de gestão de investimentos com a missão de oferecer aos investidores as melhores chances de sucesso em seus investimentos. Em todas as suas unidades de negócio e funções de suporte, a Vanguard utiliza IA para impulsionar a eficácia, a eficiência e uma série de resultados de negócios fundamentais.
Nesta função, você liderará a validação independente e o desafio de modelos de IA, garantindo que sejam conceitualmente sólidos, bem governados e adequados ao propósito. Você trabalhará em estreita colaboração com cientistas de dados, desenvolvedores quantitativos, usuários de modelos e parceiros de tecnologia, fornecendo um desafio crível enquanto mantém relacionamentos fortes e colaborativos com o negócio.
Além das revisões individuais de modelos, você ajudará a impulsionar a evolução da estrutura de gestão de risco de modelos da Vanguard, moldando metodologias, padrões e práticas que apoiem a aplicação consistente dos princípios de risco de modelos em toda a empresa.
Principais Responsabilidades
- Avaliar modelos e sistemas que utilizam IA generativa ao longo de todo o seu ciclo de vida, incluindo a liderança de validações independentes e a avaliação do monitoramento contínuo, gestão de mudanças e remediações de descobertas de risco de modelos.
- Fornecer um desafio eficaz às premissas, metodologias, dados, testes, implementação, monitoramento e limitações dos modelos, com foco nos principais direcionadores de risco.
- Avaliar a conformidade com os padrões internos de IA, requisitos regulatórios emergentes e expectativas de governança relacionadas a sistemas de IA/ML e IA generativa, incluindo justiça, explicabilidade, transparência e supervisão humana.
- Garantir a execução pontual da validação de modelos e relatórios de validação de alta qualidade que atendam aos padrões internos, e comunicar as descobertas da validação de forma clara para stakeholders técnicos e não técnicos.
- Desenvolver, manter e aprimorar procedimentos de validação para apoiar uma abordagem consistente e baseada em risco para a validação independente e o desafio eficaz de sistemas de IA/ML e IA generativa, incluindo manter-se informado sobre a evolução da tecnologia em IA generativa e agentic AI.
- Contribuir para o design e aprimoramento de políticas, padrões e procedimentos de gestão de risco de modelos em todo o ciclo de vida do modelo (inventário, desenvolvimento, validação, aprovação e monitoramento contínuo).
- Apoiar a equipe de MRM no aconselhamento aos stakeholders sobre a política de Risco de Modelos e outros padrões relevantes, conforme necessário.
- Identificar riscos emergentes e principais riscos em todo o portfólio de modelos de IA/ML e IA generativa e reportá-los à liderança de MRM.
- Fornecer coaching e mentoria para membros juniores da equipe.
- Participar de projetos especiais e realizar outras tarefas conforme designado.
Qualificações
- Doutorado em uma disciplina quantitativa, como Ciência da Computação, Matemática, Estatística, Física, Engenharia ou uma combinação equivalente de treinamento e experiência.
- Mínimo de 7 anos de experiência relevante em desenvolvimento ou validação de modelos.
- É necessária experiência no desenvolvimento, teste ou validação de modelos ou sistemas de IA/ML utilizando IA generativa.
- Conhecimento de linguagens de programação, incluindo Python, é um requisito.
- Conhecimento de plataformas tecnológicas utilizadas para desenvolvimento e implantação de modelos, CI/CD, é um requisito.
- Conhecimento de arquiteturas de IA generativa, incluindo modelos de fundação, sistemas RAG, fluxos de trabalho agentic, abordagens de engenharia de prompt e riscos associados, como alucinações, viés algorítmico e resultados prejudiciais.
- Conhecimento de modelagem de IA/ML, incluindo algoritmos de ML, NLP, deep learning e metodologias de avaliação.
- São necessárias habilidades excepcionais de comunicação escrita, incluindo a capacidade de comunicar riscos complexos de modelos para públicos que variam de profissionais técnicos a executivos seniores.
- Capacidade de lidar de forma eficaz com uma variedade de equipes de stakeholders.
- Capacidade de gerenciar efetivamente múltiplas prioridades concorrentes.
- Demonstra flexibilidade e excelente discernimento.
- Experiência no setor de serviços financeiros é um diferencial.
- Conhecimento amplo de gestão de risco em instituições financeiras é preferencial.
Fatores Especiais
Patrocínio
A Vanguard oferece patrocínio de visto para esta posição.
Como Trabalhamos
A Vanguard implementou um modelo de trabalho híbrido para a maioria de nossos colaboradores, projetado para capturar os benefícios de uma maior flexibilidade, ao mesmo tempo em que possibilita o aprendizado, a colaboração e a conexão presencial. Acreditamos que nossa cultura orientada pela missão e altamente colaborativa é um facilitador crítico para apoiar os resultados de longo prazo dos clientes e enriquecer a experiência do colaborador.
Sobre a Vanguard
Na Vanguard, nós não apenas temos uma missão — nós estamos em uma missão.
Trabalhar pelo bem-estar financeiro de longo prazo de nossos clientes. Liderar por meio de produtos e serviços que transformam a vida de nossos clientes. Aprender e desenvolver nossas habilidades como indivíduos e como equipe. De Malvern a Melbourne, nossa missão nos impulsiona e nos inspira a sermos o nosso melhor.
