États-Unis
The MITRE Corporation
True Talent Solutions Partners
Ingénieur Full-Stack, Évaluation et Fiabilité des Agents
États-Unis
San Francisco, California, United States
TypeScriptNode.jsPostgreSQL
Traduction automatique. Consultez l’original.
À propos du poste
Rejoignez une petite équipe technique qui construit l'infrastructure d'évaluation et de fiabilité des agents IA pour les clients de l'entreprise. Ce rôle, axé sur le backend et le full-stack, vise à rendre la performance des agents mesurable et à améliorer les systèmes qui supportent les produits IA fiables.
Vos missions
- Construire des systèmes backend et des modèles de données pour les ensembles de données d'évaluation, les exécutions d'expériences, les traces d'agents, les versions de connaissances et les critères de qualité.
- Développer et opérer des intégrations d'entreprise, y compris l'authentification, la synchronisation des données, les tentatives, la surveillance et le support de production.
- Livrer des fonctionnalités sur l'ensemble de la pile technique, de la conception technique et de l'implémentation au déploiement, à la surveillance et à l'itération.
- Travailler avec les clients pour diagnostiquer les défaillances système et transformer leurs besoins en capacités produit réutilisables.
- Construire des pipelines de données et des interfaces pour la collecte, l'analyse et la visualisation des résultats d'évaluation.
Ce que nous recherchons
- Au moins 3 ans d'expérience dans la conception et le déploiement de systèmes en production en tant qu'ingénieur full-stack, idéalement au sein d'une startup en forte croissance.
- Expérience pratique du développement de modèles de machine learning, ainsi que des connaissances en évaluation et test d'agents IA ou d'autres systèmes non déterministes.
- Solides compétences backend avec TypeScript et Node.js ou Bun, et expérience dans la création de fonctionnalités frontend en production.
- Solides compétences PostgreSQL, incluant l'optimisation de requêtes, et expérience pratique avec Redis, les files d'attente de tâches, les workers en arrière-plan ou les systèmes de workflow.
- Expérience dans la conception d'APIs et de services backend, la construction de pipelines de données d'évaluation et le développement de tableaux de bord ou d'interfaces de visualisation.
- Connaissance de l'observabilité, de la surveillance, de la journalisation et du dépannage en production.
Rémunération et avantages
- Salaire de base : 120 000 $ à 180 000 $ par an.
- Le parrainage de visa est disponible.
Lieu
Sur site à San Francisco, Californie, États-Unis.
Plus d’opportunités avec un seul profil
Vous souhaitez accéder à plus de postes sans répéter tout le processus ? Créez votre profil pour être trouvé par les entreprises utilisant Nort.
Créer mon profil