Redwood Materials
Anthropic
Policy Design Manager, Integrity and Authenticity
Über Anthropic
Anthropic’s Mission ist es, zuverlässige, interpretierbare und steuerbare KI-Systeme zu entwickeln. Wir wollen, dass KI sicher und vorteilhaft für unsere Nutzer und die Gesellschaft als Ganzes ist. Unser Team ist eine schnell wachsende Gruppe engagierter Forscher, Ingenieure, Politikexperten und Wirtschaftsführer, die gemeinsam daran arbeiten, vorteilhafte KI-Systeme aufzubauen.
Über die Rolle
Als Policy Manager für Integrität und Authentizität sind Sie für die Entwicklung, Verfeinerung und Pflege von Richtlinien verantwortlich, die den Missbrauch von KI-Systemen für Täuschung, Manipulation und unbefugte Überwachung in großem Maßstab verhindern. Sie werden als Policy-Owner für Risiken im Zusammenhang mit inauthentischem Verhalten, Einflussnahme, Überwachung und der Profilerstellung von Einzelpersonen und Gruppen fungieren und dazu beitragen, Politikrahmenwerke in mehreren Bereichen zu gestalten, darunter Authentizität, Informationsintegrität sowie Datenschutz und Überwachung.
Ihr anfänglicher Schwerpunkt liegt auf der Übersetzung des Integritäts- und Authentizitäts-Risikorahmens in klare, durchsetzbare Richtlinien, der Sicherstellung, dass die Richtliniensprache aufkommende Bedrohungen anspricht, die von Partnerteams identifiziert werden, und der Festlegung von Leitlinien, die konsistente Durchsetzungsentscheidungen ermöglichen. Viele der schwerwiegendsten Schäden in diesem Bereich beginnen mit vorgelagerten Schritten, die für sich genommen routinemäßig erscheinen, wie z. B. das Sammeln von Aufzeichnungen über eine Person, die Automatisierung der Kontoerstellung oder die Sortierung von Nutzern nach abgeleiteter Identität. Ein Teil Ihrer Arbeit wird darin bestehen, zu definieren, wo diese Schritte verboten werden. Die Rolle wird sich mit fortschreitenden KI-Fähigkeiten erweitern. Sicherheit ist der Kern unserer Mission. Sie werden dazu beitragen, dass unsere Produkte nicht dazu verwendet werden können, Menschen in großem Maßstab zu täuschen, sie ohne ihr Wissen oder ihre Zustimmung zu überwachen und zu profilieren oder Bevölkerungsgruppen nach sensiblen Merkmalen zu sortieren und anzusprechen.
Wichtiger Kontext für diese Rolle: In dieser Position können Sie expliziten Inhalten ausgesetzt sein und sich damit befassen, die eine Reihe von Themen umfassen, darunter sexuelle, gewalttätige oder psychologisch verstörende Inhalte sowie detaillierte Beschreibungen von Datenschutzverletzungen, Überwachungsmissbrauch und täuschenden Kampagnen, die sich an gefährdete Personen richten.
Wie wir anders sind
Wir glauben, dass die wirkungsvollste KI-Forschung „Big Science“ sein wird. Bei Anthropic arbeiten wir als ein einziges, zusammenhängendes Team an nur wenigen groß angelegten Forschungsinitiativen. Und wir legen Wert auf Wirkung – die Förderung unserer langfristigen Ziele einer steuerbaren, vertrauenswürdigen KI – anstatt an kleineren und spezifischeren Rätseln zu arbeiten. Wir betrachten KI-Forschung als empirische Wissenschaft, die ebenso viel mit Physik und Biologie gemeinsam hat wie mit traditionellen Ansätzen der Informatik. Wir sind eine äußerst kollaborative Gruppe und veranstalten häufig Forschungsdiskussionen, um sicherzustellen, dass wir jederzeit die wirkungsvollste Arbeit verfolgen. Daher schätzen wir Kommunikationsfähigkeiten sehr.
Der einfachste Weg, unsere Forschungsrichtungen zu verstehen, ist die Lektüre unserer aktuellen Forschung. Diese Forschung setzt viele der Richtungen fort, an denen unser Team vor Anthropic gearbeitet hat, darunter: GPT-3, Circuit-Based Interpretability, Multimodal Neurons, Scaling Laws, AI & Compute, Concrete Problems in AI Safety und Learning from Human Preferences.
Kommen Sie zu uns!
Anthropic ist eine Public Benefit Corporation mit Hauptsitz in San Francisco. Wir bieten wettbewerbsfähige Vergütung und Sozialleistungen, optionale Spendenübereinstimmung für Aktien, großzügigen Urlaub und Elternurlaub, flexible Arbeitszeiten und einen schönen Büroraum, um mit Kollegen zusammenzuarbeiten. Leitfaden zur KI-Nutzung durch Bewerber: Erfahren Sie mehr über unsere Richtlinien zur Nutzung von KI in unserem Bewerbungsprozess.
Hauptverantwortlichkeiten
- Entwickeln und Definieren von Richtliniengrenzen für verdeckte Überwachung, Tracking und Spionage in verschiedenen Kontexten, wobei die Unterscheidung zwischen bösartigen Verhaltensweisen und konformen Dual-Use-Szenarien getroffen wird
- Verfassen von Richtlinien für Gesichtserkennung, Stimmklonen und Geolokationsinferenzen, wobei spezifiziert wird, welche Nutzungen eine Zustimmung erfordern und welche gänzlich verboten sind
- Abbildung des Überwachungslebenszyklus, von der Zielauswahl und Datenerfassung über die Analyse bis hin zum verdeckten Einsatz, und Festlegung der Richtlinie in jeder Phase, damit Interventionen frühzeitig in der Kette erfolgen können
- Entwerfen und Überwachen von Evaluierungen, die die Fähigkeit des Modells zur Unterstützung von Social-Media-Überwachung, Personensuche, prädiktiver Profilerstellung und der Identifizierung oder Verfolgung bestimmter Personen messen, um mit funktionsübergreifenden Partnern Schutzmaßnahmen zu entwickeln, aufzubauen und zu verbessern, um bösartige Verhaltensweisen zu verhindern
- Verfassen und Verfeinern von externen Nutzungsrichtlinien und Entwickeln von Schulungsleitlinien, Bewertungsrastern und Evaluationsprotokollen für Durchsetzungsteams, mit Schwerpunkt auf Indikatoren für verdeckte Überwachung und zielgruppenweite Ansprache
- Validieren von Durchsetzungsentscheidungen und automatisierten Bewertungen, Bereitstellen von Richtlinien für komplexe Grenzfälle wie investigative Forschung zu Überwachungstools, Koordinieren mit Zivilgesellschaft, Datenschutzexperten, Threat-Intelligence-Forschern und Akademikern sowie Eskalationspunkt für komplexe Integritäts- und Überwachungsfälle sein
Mindestanforderungen
- Praktische Kenntnisse darüber, wie täuschende Kampagnen und verdeckte Überwachung in der Praxis funktionieren, einschließlich Konto-Netzwerken, Bot-Operationen, Datenaggregationspipelines und Attributionsmethoden
- Vertrautheit mit Überwachungstechnologien und deren Missbrauch, einschließlich Social-Media-Überwachungstools, Personensuchdiensten, Standortverfolgung, Spyware, Gesichtserkennung und Open-Source-Intelligence-Techniken, die gegen Einzelpersonen eingesetzt werden
- Allgemeine Kenntnisse der globalen regulatorischen Landschaft in Bezug auf Datenschutz, Privatsphäre, Plattformregulierung und Rechenschaftspflicht für digitale Dienste
- Starke Fähigkeiten im Verfassen von Richtlinien, mit der Fähigkeit, komplexe Bedrohungsrahmen in klare, durchsetzbare Leitlinien zu übersetzen
- Erfahrung in der Gestaltung von Richtlinien und Arbeitsabläufen, die sowohl klare menschliche Entscheidungsfindung als auch technische Implementierung in ML-Klassifikatoren und Erkennungspipelines ermöglichen
- Starke Kollaborationsfähigkeiten und umfangreiche Erfahrung in der Zusammenarbeit mit Engineering-, Data Science-, Legal-, Threat Intelligence- und Policy-Teams bei funktionsübergreifenden Initiativen
- Ausgezeichnete schriftliche und mündliche Kommunikationsfähigkeiten, mit der Fähigkeit, täuschende Taktiken, Überwachungsmethoden und Richtlinienbegründungen für verschiedene Zielgruppen zu erklären, einschließlich Nicht-Spezialisten und politischen Entscheidungsträgern
Logistik
- Mindestbildung: Bachelor-Abschluss oder eine gleichwertige Kombination aus Ausbildung, Training und/oder Erfahrung
- Erforderlicher Studienbereich: Ein Bereich, der für die Rolle relevant ist, wie durch Kursarbeit, Training oder Berufserfahrung nachgewiesen
- Mindestjahre an Erfahrung: Die erforderliche Berufserfahrung korreliert mit den internen Joblevel-Anforderungen für die Position
Bevorzugte Qualifikationen
- 5+ Jahre Erfahrung in der Politikentwicklung, im Bereich Trust & Safety, Threat Intelligence oder Platform Integrity, mit praktischer Arbeit an inauthentischem Verhalten, Überwachung im Zusammenhang mit Missbrauch oder Datenmissbrauch
- Erfahrung in der Datenschutzpolitik, im Datenschutz-Engineering oder in der Datenverarbeitung, einschließlich Vertrautheit mit Datenschutz-Folgenabschätzungen und Prinzipien der Datenminimierung
- Erfahrung in Geheimdienstrollen, staatlich ausgerichteten Überwachungsoperationen oder verdeckten Datenerfassungskampagnen
- Erfahrung in der Untersuchung von inauthentischen Netzwerken, verdeckter Überwachung oder Überwachungsmissbrauch bei einer Plattform, einer Forschungsorganisation oder einer Regierungsbehörde
- Hintergrund in digitaler Forensik, Open-Source-Intelligence oder Threat Attribution
- Kenntnisse der Überzeugungstheorie, kognitiver Verzerrungen und täuschender Kommunikationstechniken, einschließlich Social Engineering und Pretexting-Methoden
- Vertrautheit mit Menschenrechts- und Datenschutzrahmen, wie sie für die Überwachung gelten, einschließlich Schutzmaßnahmen für Journalisten, Aktivisten und marginalisierte Gemeinschaften
- Erfahrung mit Trust-and-Safety-Operationen, die sich mit der Umgehung von Inhaltsmoderation, Bot-Erkennung oder der Durchsetzung von Plattform-Scraping befassen
- Erfahrung in der Zusammenarbeit mit EU-Institutionen, Regulierungsbehörden oder politischen Organisationen in den Bereichen KI-Governance oder Regulierung digitaler Plattformen
- Erfahrung in der Durchführung von Adversarial Testing, Red Teaming oder Schwachstellenbewertungen für KI-Systeme oder Plattformen, insbesondere im Hinblick auf Missbrauch im Zusammenhang mit Überwachung oder Profilerstellung
- Vertrautheit mit generativen KI-Fähigkeiten und Verständnis dafür, wie LLMs für synthetische Personas, Social Engineering, prädiktive Profilerstellung oder Überwachung in großem Maßstab verwendet werden kann
Die jährliche Vergütungsspanne für diese Rolle ist unten aufgeführt.
Für Vertriebsrollen ist die angegebene Spanne die Zielverdienstspanne („OTE“) der Rolle, was bedeutet, dass die Spanne sowohl die Zielprovisionen/Boni als auch das jährliche Grundgehalt für die Rolle umfasst.
Jahresgehalt: $245,000—$285,000 USD
- Standortbasierte Hybridrichtlinie: Derzeit erwarten wir, dass alle Mitarbeiter mindestens 25% der Zeit in einem unserer Büros anwesend sind. Einige Rollen erfordern jedoch möglicherweise mehr Zeit in unseren Büros.
- Visumsponsorship: Wir sponsern Visa! Wir können jedoch nicht für jede Rolle und jeden Kandidaten erfolgreich Visa sponsern. Aber wenn wir Ihnen ein Angebot machen, werden wir alle zumutbaren Anstrengungen unternehmen, um Ihnen ein Visum zu besorgen, und wir beauftragen einen Einwanderungsanwalt, um dabei zu helfen.
Wir ermutigen Sie, sich auch dann zu bewerben, wenn Sie nicht glauben, jede einzelne Qualifikation zu erfüllen. Nicht alle starken Kandidaten erfüllen jede einzelne aufgeführte Qualifikation. Studien zeigen, dass Menschen, die sich als Angehörige unterrepräsentierter Gruppen identifizieren, eher unter dem Impostor-Syndrom leiden und an ihrer Kandidatur zweifeln. Daher bitten wir Sie dringend, sich nicht vorzeitig auszuschließen und eine Bewerbung einzureichen, wenn Sie an dieser Arbeit interessiert sind. Wir glauben, dass KI-Systeme wie die, die wir entwickeln, enorme soziale und ethische Auswirkungen haben. Wir glauben, dass dies die Repräsentation noch wichtiger macht, und wir bemühen uns, eine Reihe von vielfältigen Perspektiven in unserem Team zu vereinen.
Ihre Sicherheit ist uns wichtig. Um sich vor potenziellen Betrügereien zu schützen, denken Sie daran, dass Anthropic-Recruiter Sie nur von E-Mail-Adressen @anthropic.com kontaktieren. In einigen Fällen arbeiten wir möglicherweise mit geprüften Personalvermittlungsagenturen zusammen, die sich als im Auftrag von Anthropic arbeitend ausgeben. Seien Sie vorsichtig bei E-Mails von anderen Domains. Legitimen Anthropic-Recruitern werden Sie niemals vor Ihrem ersten Tag nach Geld, Gebühren oder Bankinformationen fragen. Wenn Sie sich jemals über eine Kommunikation unsicher sind, klicken Sie nicht auf Links – besuchen Sie anthropic.com/careers direkt für bestätigte Stellenangebote.
