Idaho Health Insurance Exchange
Clera
Membre du personnel technique, Agents
TypeScriptPythonReact
Traduction automatique. Consultez l’original.
À propos du poste
Rejoignez une petite équipe expérimentée qui développe des agents IA autonomes pour la productivité des cadres. Vous développerez de nouvelles capacités d'agents et créerez des moyens fiables pour les évaluer, afin de garantir que les tâches importantes du monde réel sont effectuées avec précision avant que les nouvelles capacités n'atteignent les utilisateurs.
Ce que vous ferez
- Construire des agents qui accomplissent le travail délégué de bout en bout sans nécessiter que l'utilisateur vérifie chaque étape.
- Développer des évaluations fiables qui mesurent la précision avec laquelle les agents effectuent différentes tâches.
- Expédier de nouvelles capacités d'agents dans les outils que les gens utilisent déjà, étayées par des preuves qu'ils sont prêts.
- Enquêter sur les défaillances de production et fournir des correctifs durables et validés.
- Construire une détection de défaillance à grande échelle pour identifier les modèles connus et les problèmes inattendus.
- Améliorer la récupération des agents lorsqu'un outil ou un site Web échoue.
- Créer des flux de travail répétables afin que les ingénieurs puissent mesurer si les changements d'agents améliorent les performances.
Ce que nous recherchons
- Environ 2 à 11 ans d'expérience pertinente, y compris quelques années dans un rôle avec une progression démontrée.
- Expérience dans la construction ou l'évaluation de systèmes d'IA ou de machine learning en production, en particulier des agents ou des produits basés sur des LLM.
- Solides compétences en Python et familiarité avec Django, React, et TypeScript.
- L'expérience avec des outils d'évaluation et de surveillance tels que Braintrust ou Raindrop est pertinente.
- Confort à travailler sur l'implémentation, l'évaluation et l'itération dans un environnement en évolution rapide.
Le parrainage de visa n'est pas disponible.
Rémunération et avantages
Fourchette de salaire : $200,000 à $300,000 USD par an.
Emplacement
Hybride, avec quatre jours par semaine au bureau à Palo Alto, Californie, États-Unis.
