Be Structured Technology Group
Symphony Solutions
Observability and Evaluation Engineer
Python
Automatische Übersetzung. Prüfe das Original.
Über die Stelle
Rolle: Observability and Evaluation Engineer
Rollenbeschreibung
Stellenbeschreibung
Standort: Charlotte, North Carolina (Vor Ort)
Mindestanforderungen
Berufserfahrung: 12+ Jahre
Implementierung von Telemetrie, Traces, Dashboards, Evaluierungssuiten, Service-Level-Objectives, Runbooks und Nachweisen der Einsatzbereitschaft für priorisierte Agenten-Releases.
- LLM und Agenten-Evaluierung.
- Tracing und Telemetrie
- Metriken und Dashboards
- SLOs, Monitoring
- Testautomatisierung
- Analyse der Prompt- und Modell-Performance
- Python • Produktionsbetrieb.
