Estados Unidos
Be Structured Technology Group
Anaplan
Engenheiro de Automação de QA - IA
Estados Unidos
North Carolina, United States
Python
Tradução automática. Consulte o original.
Sobre a oportunidade
Na Anaplan, somos uma equipe de inovadores focados em otimizar a tomada de decisão de negócios por meio de nossa plataforma líder de planejamento e análise de cenários com IA, para que nossos clientes possam superar seus concorrentes e o mercado.
O que une os Anaplanners em todas as equipes e geografias é nosso compromisso coletivo com o sucesso de nossos clientes e com nossa Cultura de Vitória.
Nossos clientes estão entre os nomes mais importantes da Fortune 50. Coca-Cola, LinkedIn, Adobe, LVMH e Bayer são apenas algumas das mais de 2,400 empresas globais que confiam em nossa plataforma de ponta.
Nossa Cultura de Vitória é o motor que impulsiona nossas equipes de inovadores. Nós defendemos a diversidade de pensamento e ideias, nos comportamos como líderes, independentemente do cargo, estamos comprometidos em atingir metas ambiciosas e adoramos celebrar nossas vitórias – grandes e pequenas.
Apoiado por princípios operacionais de ser guiado pela estratégia, baseado em valores anaplan.com/careers/ e disciplinado na execução, você será inspirado, conectado, desenvolvido e recompensado aqui. Tudo o que o torna único é bem-vindo; junte-se a nós e vamos construir o que há de próximo – juntos!
Estamos pioneiros em uma nova função focada exclusivamente em garantia de qualidade para sistemas GenAI/Agentic. Como nosso Engenheiro de Automação de QA em IA, você desenvolverá estratégias de teste, frameworks de avaliação e métricas de qualidade projetadas especificamente para aplicações com tecnologia LLM. Esta função exige uma combinação única de expertise em QA, compreensão do comportamento GenAI e habilidades de automação para garantir que nossos recursos de IA sejam confiáveis, precisos e dignos de confiança.
Nosso Compromisso com Diversidade, Equidade, Inclusão e Pertencimento (DEIB)
Acreditamos que atrair e reter os melhores talentos e promover uma cultura inclusiva fortalece nosso negócio. DEIB melhora nossa força de trabalho, aprimora a confiança com nossos parceiros e clientes e impulsiona o sucesso dos negócios. Construa sua carreira em um lugar onde diversidade, equidade, inclusão e pertencimento não são apenas palavras no papel – é isso que impulsiona nossa inovação, é como nos conectamos e contribui para o que nos torna líderes de mercado. Acreditamos em um ambiente de contratação e trabalho onde todas as pessoas são respeitadas e valorizadas, independentemente de identidade ou expressão de gênero, orientação sexual, religião, etnia, idade, neurodiversidade, status de deficiência, cidadania ou qualquer outro aspecto que torne as pessoas únicas. Contratamos você pelo que você é, e queremos que você traga seu eu autêntico para o trabalho todos os dias!
Garantiremos que pessoas com deficiência recebam acomodações razoáveis para participar do processo de candidatura ou entrevista, realizar funções essenciais do trabalho e receber benefícios equitativos e todos os privilégios de emprego. Entre em contato conosco para solicitar acomodação.
Seu Impacto
- Desenvolver e executar cobertura de teste automatizada de ponta a ponta em avaliações, APIs, UIs e testes de desempenho usando Python.
- Implementar estratégias de teste para recursos GenAI, incluindo IA conversacional, sistemas agentic e fluxos de trabalho com tecnologia LLM dentro do seu fluxo de trabalho.
- Executar e manter suítes de testes automatizados para testes de prompt, incluindo testes de regressão projetados para detectar alterações não intencionais no comportamento do modelo.
- Apoiar e manter frameworks de avaliação para medir o desempenho GenAI em precisão, relevância, segurança, consistência e latência.
- Contribuir para a curadoria de conjuntos de dados de teste de alta qualidade e "exemplos de ouro" que representam diversos cenários de usuário e casos extremos.
- Auxiliar em testes adversariais para identificar potenciais alucinações ou vieses do modelo e apoiar a integração de sistemas de alerta de produção.
- Utilizar ferramentas internas e frameworks de teste para ajudar os desenvolvedores a validar facilmente seu código GenAI e auxiliar nos testes de aceitação do usuário.
- Assumir a responsabilidade pela cobertura automatizada do seu fluxo de trabalho, documentando procedimentos de teste e problemas conhecidos em formatos claros e acessíveis.
Requisitos mínimos
Suas Habilidades
- Mais de 8 anos de sólida experiência em QA ou engenharia de testes, com exposição ou grande interesse em sistemas de IA/ML.
- Experiência prática de codificação em Python.
- Bom entendimento de tecnologias GenAI, incluindo LLMs, engenharia de prompt e padrões de aplicação de IA.
- Sólida experiência com frameworks e scripts de automação de testes (Python, Pytest, API e Testes de UI).
- Conhecimento prático de metodologias de teste de software (testes funcionais, de integração, de regressão, de desempenho, de segurança).
- Capacidade de executar casos de teste e avaliar critérios para sistemas não determinísticos.
- Experiência com ferramentas de teste API (Postman, REST Assured) e testes de backend.
- Familiaridade com pipelines de CI/CD e integração de testes automatizados.
#LI-SP1
Aviso de Fraude em Recrutamento
Chegou ao nosso conhecimento que oportunidades de emprego fraudulentas e fictícias estão sendo divulgadas na Internet. Candidatos potenciais estão sendo contatados por certos indivíduos, principalmente por meio de chamadas telefônicas, e-mails e correspondências, alegando serem representantes da Anaplan. O principal objetivo dessas correspondências e anúncios é obter informações privilegiadas dos indivíduos.
Anaplan não:
- Estende ofertas a candidatos sem um processo de entrevista extenso com um membro de nossa equipe de recrutamento e um gerente de contratação por vídeo ou pessoalmente.
- Envia ofertas de emprego por e-mail. Todas as ofertas são primeiro estendidas verbalmente por um membro de nossa equipe interna de recrutamento, sempre que possível, e depois seguidas por comunicação escrita.
Todos os e-mails da Anaplan virão de um endereço de e-mail @anaplan.com. Caso tenha alguma dúvida sobre a autenticidade de um e-mail, carta ou comunicação telefônica supostamente de, para ou em nome da Anaplan, envie um e-mail para [email protected] antes de tomar qualquer outra providência em relação à correspondência.
Privacidade e Aviso de IA
Os dados do candidato processados durante nossas atividades de recrutamento são tratados de acordo com nosso Aviso de Privacidade do Candidato anaplan.com/legal/candidate-privacy-notice/. Isso pode incluir o uso de inteligência artificial ou ferramentas automatizadas para auxiliar nossa equipe na avaliação de qualificações.
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil