Formateur IA senior

Intitulé du poste : Senior AI Trainer

Type de poste : Prestataire, Télétravail

Localisation : Amérique du Nord et Allemagne.

micro1 recrute des Senior AI Trainers pour collaborer à un projet piloté par les clients visant à améliorer la qualité des systèmes d'IA grâce à une formation et une évaluation de modèles de niveau expert. Dans ce rôle, vous appliquerez votre expertise généraliste et votre expérience pratique des produits d'IA pour contribuer à former les systèmes d'IA de nouvelle génération. Votre travail façonnera la manière dont les modèles apprennent, raisonnent et performent grâce à des données d'entrée réelles de haute qualité.

Responsabilités Clés :

• Évaluer les performances des outils de chat et de recherche basés sur l'IA dans des conditions standardisées et reproductibles.
• Appliquer des directives de notation détaillées pour évaluer, classer et annoter avec précision les réponses des modèles, en fournissant des retours structurés qui améliorent les performances des modèles.
• Rédiger, affiner et soumettre à rude épreuve des prompts qui sondent les capacités des modèles, garantissant la couverture de divers scénarios, cas limites et intentions des utilisateurs.
• Vérifier la cohérence et l'exactitude des évaluations, en corrigeant les divergences entre les notations et la grille d'évaluation ou les directives sous-jacentes.
• Utiliser les outils et plateformes de formation en IA pour enregistrer les observations et soumettre des ensembles de données d'évaluation conformément aux normes et jalons du projet.
• Collaborer avec les formateurs et contributeurs du projet pour résoudre les ambiguïtés, affiner les directives et garantir la cohérence des évaluations au sein de l'équipe.
• Participer aux revues de qualité continues, en intégrant les retours pour maintenir des normes rigoureuses de formation et d'annotation.

Compétences et Qualifications Requises :

• Attention exceptionnelle aux détails et précision dans l'examen et l'évaluation de contenus générés par l'IA.
• Solides compétences en communication écrite et orale pour une collaboration efficace, un reporting précis et des mises à jour régulières sur l'avancement et les difficultés.
• Capacités démontrées de gestion du temps et d'auto-organisation pour une participation autonome et à distance au projet.
• Esprit analytique et résolution de problèmes, avec une approche proactive pour surmonter les difficultés d'évaluation.

Qualifications Souhaitées :

• Expérience avérée dans la formation de modèles d'IA, le RLHF, l'étiquetage de données ou des projets d'évaluation similaires axés sur les données.
• Familiarité avec les produits et outils d'IA, y compris l'ingénierie de prompt et la compréhension des comportements et limites des modèles.
• Expérience dans la rédaction de grilles d'évaluation, la notation de sorties de modèles ou la revue de réponses d'IA pour en vérifier l'exactitude, l'utilité et la sécurité.
• Expérience en formation en IA, préparation de données pour le machine learning ou projets axés sur les LLM (fortement souhaitée).