Vereinigte Staaten
Wonderschool
PlayStation Global
Sr. Software Development Engineer in Test, AI/ML
Vereinigte Staaten
San Mateo, California, Vereinigte Staaten
PythonJavaReactNode.jsAWSGCPDockerKubernetes
Automatische Übersetzung. Prüfe das Original.
Warum Sony Interactive Entertainment?
Sony Interactive Entertainment ist nicht nur der beste Ort zum Spielen – es ist auch der beste Ort zum Arbeiten. Sony Interactive Entertainment (SIE) ist das Unternehmen hinter der Marke PlayStation. Als Tochtergesellschaft der Sony Group Corporation sind wir Teil eines stolzen Erbes an Innovation und Exzellenz. SIE ist ein dynamisches Technologieunternehmen, das über 100 Millionen Menschen modernste Hardware und Netzwerkdienste liefert und ein führender Unterhaltungskonzern ist, Heimat einiger der beliebtesten und bekanntesten geistigen Eigentumsrechte (IP) der Welt. Unsere Aufgabe bei SIE ist es, die Erlebnisse unter der Marke PlayStation zu schaffen und zu pflegen, einem Namen, der für exzellente Unterhaltung und Kreativität steht.
SENIOR SOFTWARE DEVELOPMENT ENGINEER IN TEST, ML/AI
Bei SIE glauben wir daran, das Spielen für alle sicherer zu machen. Innerhalb unseres Information Security Teams schützen wir unsere Mitarbeiter, Plattformen und Produkte mit intelligenten, skalierbaren und durchdachten Lösungen. Unsere Mission ist es, klare, umsetzbare Risiko- und Sicherheitsinformationen bereitzustellen, die das Geschäft leiten und erstaunliche Spielerlebnisse ermöglichen.
Wir bauen ein Team auf, das von Zusammenarbeit, Neugier und der Lieferung von echtem Mehrwert lebt. Helfen Sie uns, etwas zu bewirken!
ÜBERBLICK
Wir stellen einen erfahrenen Softwareentwickler für Qualitätssicherung (SDET) mit Spezialisierung auf ML/AI-Qualität ein, einschließlich Automatisierung für die Modellbewertung, LLM-gestützter Testfallgenerierung und Validierung von KI-gesteuerten Workflows. Die Rolle umfasst die Steuerung der Qualitätsstrategie und die Entwicklung von Automatisierungs-Frameworks. Sie werden auch die Implementierung für komplexe, funktionsübergreifende, machine learning-gestützte Produkte und Dienste verwalten. Diese Rolle geht über die reine Testentwicklung hinaus. Sie werden Qualitätsinitiativen von Anfang bis Ende leiten, um sicherzustellen, dass Teams synchronisiert bleiben, Abhängigkeiten verwaltet werden und Releases vertrauensvoll geliefert werden. Sie werden eng mit ML-, Engineering-, Produkt- und Infrastrukturteams zusammenarbeiten. Sie werden gestalten, wie Qualität aufgebaut, überwacht und erweitert wird, während Sie eingebettete QE-Aufgaben innerhalb von Projekten leiten.
WAS SIE TUN WERDEN
- Qualitätsstrategien, Testpläne und Automatisierungsabdeckung für ML-gestützte Dienste und Plattformkomponenten definieren und umsetzen.
- LLMs und andere KI-gestützte Techniken nutzen, um hochwertige Testfälle für ML-gestützte Workflows zu generieren, zu erweitern und zu pflegen.
- Szenariobasierte Testsuiten für KI-Funktionen entwerfen, einschließlich adversarieller Prompts, Randfälle, mehrdeutiger Eingaben und unterrepräsentierter Benutzerszenarien.
- QE-Aufgaben für multifunktionale Projekte leiten, Risikobewertung, Abhängigkeitsmanagement und Release-Bereitschaft vorantreiben.
- Skalierbare Automatisierungs-Frameworks für backend-Dienste, APIs und ML-Inferenzsysteme unter Verwendung von Python und/oder Java entwerfen, entwickeln und pflegen.
- Automatisierte Validierung für ML- und LLM-Ausgaben erstellen, einschließlich Ranking-Verhalten, Score-Verteilungen, Prompt-/Antwortqualität, Halluzinationsindikatoren und probabilistischer Modellbewertung.
- Testfehler, Anomalien von Diensten, Modellinkonsistenzen und Regressionen im KI-Verhalten debuggen, um Ursachen zu identifizieren und die Behebung voranzutreiben.
- Funktionstests, Integrationstests, Regressionstests, API-Tests, End-to-End-Tests, Leistungstests und Zuverlässigkeitstests für verteilte Systeme durchführen.
- Automatisierungszuverlässigkeit verbessern, Flakiness reduzieren und die Ausführungseffizienz optimieren.
- Mit Engineering- und ML-Teams zusammenarbeiten, um automatisierte Tests in CI/CD-Pipelines und Release-Workflows zu integrieren.
- Teamsübergreifend zusammenarbeiten, um skalierbare Qualitätsstandards, Tools und Richtlinien zu etablieren.
ERFORDERLICHE QUALIFIKATIONEN
- Bachelor-Abschluss in Informatik oder gleichwertig
- 5+ Jahre Erfahrung als SDET oder QE-Ingenieur mit Schwerpunkt auf backend und verteilten Systemen.
- Erfahrung mit LLMs zur Generierung, Transformation und Priorisierung von Testfällen für KI-gestützte Erlebnisse.
- Erfahrung mit KI-Evaluierungstools, Prompt-Evaluierungs-Frameworks, Modellüberwachung oder Human-in-the-Loop-Review-Workflows.
- Umfangreiche Erfahrung im Testen von RESTful APIs, Microservices und verteilten Architekturen.
- Beherrschung von Python, Java, JS oder ähnlichen Sprachen für die Automatisierungsentwicklung.
- Praktische Erfahrung mit Automatisierungs-Frameworks wie pytest, JUnit, Selenium, Playwright, Cypress oder Appium.
- Erfahrung mit CI/CD-Systemen und Test-Pipelines (Jenkins, GitHub Actions etc.).
- Erfahrung mit Cloud- und Container-Technologien (AWS, GCP, Kubernetes, Docker).
- Vertrautheit mit Datenbanken, Überwachungs- und Observability-Tools.
- Gutes Verständnis von SDLC, agilen Methoden und Release-Prozessen.
- Ausgeprägte Problemlösungs-, Debugging- und Kommunikationsfähigkeiten.
BEVORZUGTE QUALIFIKATIONEN
- Erfahrung in der Validierung von ML-Ausgaben mithilfe statistischer Analysen oder szenariobasierter Testansätze.
- Vertrautheit mit ML-Infrastruktur, Daten-Pipelines oder Modell-Serving-Plattformen (Seldon, KServe, Ray Serve etc.).
- Vorherige Arbeit im Bereich ML für Inhaltsmoderation, Sicherheit, Betrugserkennung oder adversarielles ML.
- Erfahrung im Testen von hochskalierten Online-Diensten mit geringer Latenz.
- Erfahrung mit Databricks oder ähnlichen ML-Plattform-Tools.
- Vertrautheit mit Node.js, React oder modernen frontend-Technologien.
- Erfahrung im Testen von mobilen, Konsolen- oder anderen Nicht-PC-Plattformen.
WAS SIE AUSZEICHNET
- Starke Kombination aus Automatisierungs-Engineering und Lieferverantwortung.
- Fähigkeit, Qualität über komplexe funktionsübergreifende Initiativen hinweg voranzutreiben.
- Praktisches Verständnis, wie nicht-deterministische KI-Systeme getestet und Modellvarianzen von Qualitätsregressionen getrennt werden.
- Nachgewiesene Fähigkeiten im Risikomanagement und in der Koordination von Abhängigkeiten.
- Fähigkeit, Engineering-Teams zu beeinflussen und Qualitätsrichtlinien zu fördern.
- Leidenschaft für skalierbare, zuverlässige und wartbare Automatisierungssysteme.
Die geschätzte Gehaltsspanne für diese Rolle ist unten aufgeführt.
$183,000—$274,600 USD
Bitte beachten Sie, dass Sony Interactive Entertainment im Angebotsprozess für alle neuen Mitarbeiter Hintergrundüberprüfungen durchführt (die für einige Rollen auch strafrechtliche Hintergrundüberprüfungen umfassen können) und personenbezogene Daten zur Unterstützung dieser Überprüfungen verarbeiten muss.
Bitte beachten Sie unsere Kandidaten-Datenschutzhinweise playstation.com/legal/careers-privacy-notice/ für weitere Informationen darüber, welche personenbezogenen Daten wir sammeln, wie wir sie verwenden, mit wem wir sie teilen und welche Datenschutzrechte Sie haben.
Chancengleichheitserklärung:
Sony ist ein Arbeitgeber, der Chancengleichheit fördert. Alle Personen erhalten eine Anstellung ohne Diskriminierung aufgrund von Geschlecht (einschließlich Geschlechtsidentität, Geschlechtsausdruck und Geschlechtsumwandlung), Rasse (einschließlich Farbe, Nationalität, ethnischer oder nationaler Herkunft), Religion oder Glauben, Familienstand oder Lebenspartnerschaft, Behinderung, Alter, sexueller Orientierung, Schwangerschaft, Mutterschaft oder Elternschaft, Gewerkschaftszugehörigkeit oder Mitgliedschaft in einer anderen gesetzlich geschützten Kategorie.
Wir bemühen uns, ein integratives Umfeld zu schaffen, Mitarbeiter zu befähigen und Vielfalt zu fördern. Wir ermutigen jeden, sich zu bewerben.
Sony Interactive Entertainment ist ein Fair-Chance-Arbeitgeber und qualifizierte Bewerber mit Arrest- und Verurteilungsnachweisen werden für eine Anstellung berücksichtigt.
Bei SIE berücksichtigen wir verschiedene Faktoren bei der Festlegung der Gehaltsspanne für jede Position, einschließlich wettbewerbsfähiger Benchmarking-Daten für den Markt und den geografischen Standort.
Bitte beachten Sie, dass die Gehaltsspanne in Übereinstimmung mit unserer Hybrid-Arbeitsrichtlinie variieren kann und das individuelle Grundgehalt auf arbeitsbezogenen Faktoren basiert, die Kenntnisse, Fähigkeiten, Erfahrungen und den Standort umfassen können.
Darüber hinaus hat diese Rolle Anspruch auf das erstklassige Leistungspaket von SIE, das medizinische, zahnärztliche und augenärztliche Leistungen, eine 401(k)-Zuzahlung, bezahlte Freizeit, ein Wellnessprogramm und begehrte Mitarbeiterrabatte für Sony-Produkte umfasst. Diese Rolle kann auch Anspruch auf ein Bonuspaket haben. Klicken Sie hier careers.playstation.com/benefits, um mehr zu erfahren.
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen