Kanada
Solution SFT
DRW
Data Developer
Kanada
Montreal, Quebec, Canada
PythonDocker
Automatische Übersetzung. Prüfe das Original.
Über die Stelle
DRW ist ein diversifiziertes Handelsunternehmen mit über 3 Jahrzehnten Erfahrung, das hochentwickelte Technologie und außergewöhnliche Mitarbeiter zusammenbringt, um auf Märkten weltweit tätig zu sein. Wir schätzen Autonomie und die Fähigkeit, schnell umzuschwenken, um Chancen zu nutzen, daher operieren wir mit unserem eigenen Kapital und handeln auf eigenes Risiko.
Mit Hauptsitz in Chicago und Niederlassungen in den USA, Kanada, Europa und Asien handeln wir mit einer Vielzahl von Anlageklassen, darunter festverzinsliche Wertpapiere, ETFs, Aktien, Devisen, Rohstoffe und Energie an allen wichtigen globalen Märkten. Wir haben auch unser Fachwissen und unsere Technologie genutzt, um in drei nicht-traditionelle Strategien zu expandieren: Immobilien, Risikokapital und Kryptoassets.
Wir arbeiten mit Respekt, Neugier und Offenheit. Die Menschen, die hier erfolgreich sind, teilen unseren Glauben, dass nicht nur das, was wir tun, wichtig ist – sondern auch, wie wir es tun. DRW ist ein Ort hoher Erwartungen, Integrität, Innovation und der Bereitschaft, den Konsens in Frage zu stellen.
Wir suchen einen Data Developer für unser Team für KI und Multi-Asset-Systemstrategien. Dieses Team entwickelt KI- und ML-gestützte Tools und Lösungen, die Teams im gesamten Unternehmen unterstützen und KI-Forscher unterstützen. Sie werden Datenpipelines für RAG-Systeme erstellen, Embedding-Workflows optimieren und skalierbare Lösungen für die Verwaltung analytischer, relationaler, strukturierter und unstrukturierter Daten entwerfen.
Aufgaben
- Entwurf und Erstellung von Datenpipelines für RAG-Systeme, einschließlich Dokumentenaufnahme, Chunking, Generierung von Embeddings und Vektorspeicherung.
- Erstellung von Aufnahme-Pipelines für strukturierte und unstrukturierte Datenquellen in einem zentralisierten Data Lake, um sicherzustellen, dass die Daten sauber, normalisiert und für Analyse-, Forschungs- und KI-Workloads zugänglich sind.
- Entwicklung von Datenverarbeitungs-Workflows zur Vorbereitung und Optimierung von Datensätzen für Fine-Tuning- und Inferenz-Workloads.
- Erstellung von Überwachungs- und Bewertungs-Frameworks zur Messung der Abrufqualität, Latenz und Systemleistung.
- Zusammenarbeit mit ML-Ingenieuren zur Optimierung von Datenformaten und Speicherstrukturen für GPU-beschleunigte Inferenz.
- Implementierung von Caching-Strategien und Datenversionssystemen zur Unterstützung einer effizienten Modellbereitstellung.
- Bereitstellung und Verwaltung von Vektordatenbanken, Embedding-Diensten und Datenverarbeitungs-Pipelines.
- Treiber von Initiativen zur Verbesserung der Datenqualität, Reduzierung der Latenz und Steigerung der Genauigkeit von Abrufsystemen.
- Kontinuierliches Lernen und auf dem neuesten Stand bleiben bei neuen Technologien und Best Practices in den Bereichen Data Engineering und KI.
- Proaktiver Beitrag von Ideen für neue Tools, Prozessverbesserungen und Technologieeinführungen, die das Team voranbringen.
Anforderungen
- Bachelor- oder Master-Abschluss in Informatik, Data Engineering oder einem verwandten Bereich.
- 2-5 Jahre Erfahrung im Aufbau von Datensystemen und Pipelines in Produktionsumgebungen.
- Umfangreiche Erfahrung mit RAG-Architekturen, einschließlich Vektordatenbanken (Milvus, ChromaDB, Pinecone, Weaviate oder Qdrant).
- Fundierte Kenntnisse in Python mit Erfahrung in der Verwendung von DAG-basierten Orchestrierungsplattformen (Airflow, Dagster, Prefect oder ähnliches).
- Praktische Erfahrung mit Embedding-Modellen und semantischen Suchsystemen.
- Erfahrung mit verteilten Datenverarbeitungs-Frameworks (Apache Spark, Ray oder Dask).
- Verständnis von LLM Inferenzoptimierungstechniken und Prompt Engineering.
- Vertrautheit mit Docker, Containerisierung und Orchestrierungsplattformen.
- Starkes Verständnis von Best Practices im Data Engineering, einschließlich Datenmodellierung, ETL/ELT-Mustern und Datenqualität.
Weitere Informationen zu den Verarbeitungstätigkeiten von DRW und unserer Nutzung von Bewerberdaten finden Sie in unserer Datenschutzerklärung unter drw.com/privacy-notice.
Einwohner Kaliforniens, bitte lesen Sie die California Privacy Notice für Informationen zu bestimmten gesetzlichen Rechten unter drw.com/california-privacy-notice.
[#LI-KS1]
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen