Portugal
Eurofins
UMO
Senior Software Quality Engineer
Portugal
Lisbon, Portugal
TypeScriptAWSGCP
Automatische Übersetzung. Prüfe das Original.
Über uns
UMO ist ein Stealth-Mode FinTech-Venture, das darauf abzielt, die Art und Weise, wie Menschen Geld erleben, durch den Aufbau einer einheitlichen, KI-gesteuerten und doch zutiefst menschlichen modernen Geldplattform über Fiat, Krypto und Investitionen zu entwickeln – vorbehaltlich behördlicher Genehmigungen. Die Plattform soll traditionelle Barrieren für Geld in Bezug auf Zugang, Vermögenswerte und Erfahrung abbauen und einfachere, anpassungsfähigere Wege für Menschen ermöglichen, mit Finanzdienstleistungen zu interagieren. Wir entwickeln derzeit unseren MVP und navigieren durch Lizenzanforderungen mit einem multidisziplinären Team von 100+ Personen aus 20+ Nationalitäten. Mit unserem Hauptsitz in den VAE und Büros in Portugal und der Ukraine sind wir durch ein gemeinsames Ziel und einen unermüdlichen Fokus auf die Bedienung unserer Kunden vereint.
Über diese Rolle
Als Teil unseres Teams helfen Sie uns, eine Plattform zu gestalten, die für jeden funktioniert – einen Geschäftsinhaber, einen Künstler, einen Freiberufler. In dieser Rolle werden Sie die End-to-End-Verantwortung für unsere Testautomatisierungsarchitektur über backend Microservices und native mobile Anwendungen übernehmen und gleichzeitig die Qualitätsstandards für unsere LLM-gestützten Funktionen verantworten – Modellverhalten bewerten, Halluzinationen und Regressionen erkennen und unsere KI-Systeme auf Herz und Nieren prüfen, bevor sie jemals einen Kunden erreichen. Wir bieten Ihnen den Raum, mit tiefgreifender technischer Autonomie zu agieren und direkt mit Engineering-, Produkt- und KI/ML-Teams zusammenzuarbeiten, um Qualität in die Build-Pipeline zu integrieren, ohne Unternehmensbürokratie oder Mikromanagement.
Sie übernehmen die Verantwortung für:
- Backend & Mobile Automatisierungsarchitektur: Aufbau, Erweiterung und Wartung skalierbarer automatisierter Testsuiten für backend Systeme und native mobile Apps mit TypeScript, Playwright, Appium oder Cucumber.
- API Qualitätsingenieurwesen: Validierung komplexer API-Schichten, Übernahme der direkten Verantwortung für tiefgreifende funktionale Tests, Tests der Datenintegrität und Vertragstests über REST und Low-Latency-Transport-Schnittstellen.
- LLM Evaluierung & Tests: Entwurf und Durchführung von Evaluierungssuiten für unsere LLM-gestützten Funktionen mit Frameworks wie RAGAS und DeepEval, Messung von Groundedness, Antwortrelevanz, Treue und Halluzinationsrate im Vergleich zu realen Produktszenarien.
- KI Red Teaming & Sicherheitstests: Proaktives Testen unserer LLM und Agentensysteme auf Prompt Injection, Jailbreaks, Datenlecks und unsichere oder voreingenommene Ausgaben mit Red-Teaming-Frameworks wie DeepTeam und PyRIT.
- Pipeline-Integration & Continuous Delivery: Integration und Wartung der Testausführung – einschließlich Automatisierungs- und LLM Eval/Red-Team-Suiten – in unsere GitHub Actions oder GitLab CI-Pipelines, um Continuous Delivery voranzutreiben, damit Release-Züge reibungslos und zuverlässig bleiben.
- Cross-Funktionale Produktzusammenarbeit: Enge Zusammenarbeit mit Engineering-, Produkt-, KI/ML- und DevOps-Teams während der Sprintplanung, Code-Reviews und Testdesign-Reviews, um eine optimale Systemtestbarkeit sowohl für traditionelle als auch für KI-gesteuerte Funktionen zu gewährleisten.
- Leichtgewichtige MLOps/MLOPs: Unterstützung bei der Versionierung von Prompts/Modellen, der Verwaltung von Evaluierungsdatensätzen und der Überwachung von LLM-Ausgaben in der Produktion, um dem Team zu helfen, die Modell- und Prompt-Leistung im Laufe der Zeit zu verfolgen.
- KI-gestützte Testausführung: Modellierung des QA-Handwerks mit modernen KI-Tools zur Beschleunigung der Testfallgenerierung, Skriptwartung und Analyse automatisierter Läufe.
Über Sie
- Ingenieurerfahrung: Sie bringen starke kommerzielle Erfahrung in Softwaretests und Qualitätsingenieurwesen (5+ Jahre) mit, mit einem starken Fokus auf den Aufbau und die Skalierung von Automatisierungs-Frameworks.
- TypeScript & Framework-Beherrschung: Sie fühlen sich wohl beim Schreiben automatisierter Tests in TypeScript und nutzen Tools wie Playwright, Cucumber oder ähnliche moderne Test-Engines.
- Native Mobile Testing-Fähigkeiten: Sie haben praktische Erfahrung mit nativem iOS und Android Testautomatisierung mit Appium oder nativen Framework-Äquivalenten.
- API & Datenpräzision: Sie haben nachgewiesene Erfahrung im Testen von APIs (REST ist unerlässlich) in datensensiblen Umgebungen und sind stolz darauf, Edge Cases zu erkennen, bevor Code in die Produktion gelangt.
- LLM Evaluierung & Red Teaming: Sie haben praktische Erfahrung – oder starkes praktisches Interesse – bei der Evaluierung von LLM/RAG-Systemen mit Tools wie RAGAS oder DeepEval und deren adversarialem Testen mit Frameworks wie DeepTeam, PyRIT oder ähnlichen Red-Teaming-Tools.
- CI/CD Integrationskenntnisse: Sie verstehen moderne DevOps-Workflows und fühlen sich wohl dabei, automatisierte Regressionstests, Evaluierungs- und Red-Team-Suiten direkt in GitHub Actions oder GitLab CI-Pipelines zu integrieren.
- KI-Tools: Praktische Erfahrung mit KI-Tools (z. B. Claude, Cursor) in täglichen Engineering-Aktivitäten, einschließlich Testdesign, Automatisierungsentwicklung, Debugging, Ursachenanalyse, Dokumentation und Testwartung.
- MLOps/LLMOps-Vertrautheit: Grundlegendes Verständnis des ML/LLM-Lebenszyklus – Prompt- und Modellversionierung, Verwaltung von Evaluierungsdatensätzen und Überwachung von KI-Systemen in der Produktion.
- Handwerkskunst & klare Kommunikation: Sie legen Wert auf vollständige Aufgabenverantwortung, kümmern sich um die Geschäftslogik hinter dem Produkt und kommunizieren transparent auf Englisch ohne Toleranz für Unhöflichkeit.
Kann Ihnen ein paar Bonuspunkte einbringen:
- Fintech & Zahlungssysteme-Kenntnisse: Vorerfahrung mit Finanz- APIs, Zahlungsabwicklungsflüssen oder Datensicherheits- und Compliance-Standards.
- Protokollbreite: Praktische Erfahrung im Testen von GraphQL oder gRPC Transportschichten neben traditionellen REST Endpunkten.
- LLMOps & Observability: Vertrautheit mit LLM Observability/Tracing-Tools (z. B. LangSmith, Langfuse, Arize) oder Experiment-Tracking-Tools.
- Performance & Cloud-Erfahrung: Vertrautheit mit Performance- oder Lasttestkonzepten und grundlegende Arbeitserfahrung mit Cloud-Infrastruktur (AWS, GCP oder Azure).
Der UMO Standard
- Dynamisches Arbeitsumfeld: Lebendige Büros und starke lokale Teams in Lissabon, Dubai, Kiew und Lwiw – mit Offenheit für Remote-Arbeit für die richtige Besetzung.
- Ruhe & Erholung: 24 Tage Jahresurlaub, bezahlter Krankenstand und die Einhaltung von Feiertagen, damit Sie stets Ihr Bestes geben können.
- Recharge Week: Nach Ihrem ersten Jahr bei uns genießen Sie jährlich zwei aufeinanderfolgende 4-tägige Arbeitswochen – ein eingebauter Reset, der Ihnen hilft, Spitzenleistungen langfristig aufrechtzuerhalten.
- Vollständige Ausstattung: Erstklassige Hardware und ein Budget für das Homeoffice, damit Sie überall Ihre beste Arbeit leisten können.
- Wachstumsökosystem: Ein dediziertes Lernbudget und ein klarer, beschleunigter Weg zur Führungsebene innerhalb des UMO-Ökosystems.
- Wirkung & Verantwortung: Ihre Arbeit gestaltet direkt das Produkt und die Unternehmensrichtung – sie führt sie nicht nur aus.
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen