Responsable de l'assurance qualité en philosophie (QAL)

Dans ce rôle de contractant indépendant à distance et rémunéré à l'heure, vous travaillerez en tant que responsable de l'assurance qualité en philosophie (Philosophy Quality Assurance Lead - QAL) pour superviser la qualité, la cohérence et les performances des formateurs sur les projets de formation en IA axés sur la philosophie. Vous réexaminerez le contenu philosophique généré par l'IA ainsi que le travail des formateurs et des responsables AQ, évaluerez la qualité des résultats par rapport aux directives du projet, fournirez des commentaires écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sous l'angle de la rigueur conceptuelle, de la structure des arguments, de la valadité logique, du contexte philosophique, de la qualité de l'interprétation, de la clarté, de la nuance, de la mise en forme, du respect des consignes et de l'adhésion aux grilles d'évaluation spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux formateurs et aux responsables AQ, soutiendrez l'intégration (onboarding), tiendrez à jour la documentation et contribuerez à réactiver les contributeurs qui ne travaillent pas régulièrement. Ce rôle exige une solide expertise en philosophie, de fortes compétences en communication écrite, une excellente attention aux détails, une communication structurée et la capacité à gérer des flux de travail axés sur la qualité au sein d'équipes d'experts à distance.

Ce rôle est proposé par SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement pour nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en matière de qualité philosophique contribuera directement à améliorer les principaux modèles d'IA de la planète en veillant à ce que les données d'entraînement en philosophie soient conceptuellement précises, logiquement saines, bien contextualisées, nuancées et alignées sur les attentes des clients.

Le processus de sélection comprend un entretien par IA, une tâche spécifique au domaine et un entretien avec un recruteur.

Important :
Il n'y a pas de projet immédiat pour ce poste ; toutefois, si vous êtes qualifié, vous ferez partie des premiers experts contactés lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles au sein de notre réseau d'experts.

Responsabilités

• Suivi de la qualité : effectuer des contrôles aléatoires sur les éléments de philosophie, identifier les problèmes de qualité, fournir un retour d'information continu par messages privés et faire remonter les problèmes récurrents ou critiques.
• Révision philosophique : évaluer les explications philosophiques générées par l'IA, les analyses d'arguments, le raisonnement éthique, les résumés de philosophes, les problèmes de logique et les comparaisons conceptuelles pour en vérifier l'exactitude et la rigueur.
• Communication avec les formateurs et les responsables AQ : informer les formateurs et les responsables AQ sur Discord des nouvelles directives concernant les articles, des changements de projet, des mises à jour des flux de travail, des attentes en matière de qualité et des normes de révision spécifiques à la philosophie.
• Gestion des questions : répondre aux questions des formateurs et des responsables AQ de manière claire et rapide, en particulier en ce qui concerne la validité des arguments, les distinctions conceptuelles, les traditions philosophiques, l'interprétation, l'éthique, la logique et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des formateurs et des responsables AQ : envoyer des messages aux contributeurs inactifs ou qui ne travaillent pas, encourager leur réactivation, assurer le suivi et signaler les problèmes de disponibilité si nécessaire.
• Documentation : créer et maintenir la documentation des projets de philosophie, y compris les guides de style, les outils de suivi, les FAQ, les notes de qualité, les exemples, les pièges (honeypots), les tâches de calibrage et le matériel d'intégration.
• Intégration et formation : planifier et animer des appels d'intégration et de formation avec les formateurs et les responsables AQ afin d'expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision spécifiques à la philosophie.
• Alignement de la qualité : veiller à ce que tous les formateurs et les responsables AQ appliquent les directives de révision de la philosophie de manière cohérente et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
• Révision du raisonnement et de l'éthique : signaler tout contenu philosophique non valide, trompeur, biaisé, excessivement sûr de lui, mal argumenté ou superficiel sur le plan éthique.
• Amélioration des processus : identifier les lacunes récurrentes en matière de qualité, proposer des améliorations des flux de travail et contribuer à l'élaboration de processus d'AQ évolutifs pour les projets de formation en IA en philosophie.

Prérequis

• Licence, Master ou doctorat en philosophie, éthique, logique, théorie politique, sciences humaines, études religieuses, lettres classiques, sciences cognitives ou dans un domaine étroitement apparenté.
• Solide maîtrise de la langue anglaise pour suivre les directives des projets, communiquer avec les équipes et fournir des commentaires écrits clairs.
• Plus de 3 ans d'expérience dans la recherche en philosophie, l'enseignement, la rédaction, l'édition, la révision académique, la révision éthique, l'enseignement de la logique ou dans des flux de travail connexes en sciences humaines.
• Solide compréhension des méthodes philosophiques, de la logique, de l'analyse des arguments, de l'éthique, de l'épistémologie, de la métaphysique, de la philosophie de l'esprit, de la philosophie politique, de l'histoire de la philosophie et de la clarification conceptuelle.
• Capacité à évaluer le contenu philosophique par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que les hommes de paille, les inférences non valides, la confusion conceptuelle, la sursimplification, les affirmations non fondées, la fausse équivalence ou la fausse représentation des points de vue des philosophes.
• Une familiarité avec des domaines tels que la logique formelle, la philosophie morale, l'éthique appliquée, la philosophie analytique, la philosophie continentale, la philosophie ancienne, la philosophie politique, la philosophie des sciences ou l'éthique de l'IA est un plus.
• Une expérience dans la direction ou le soutien d'équipes distantes de chercheurs, rédacteurs, réviseurs, éducateurs, annotateurs ou responsables AQ est vivement souhaitée.
• Aisance pour travailler dans des environnements distants en évolution rapide, en utilisant des outils tels que Discord, Google Sheets, Google Docs, des outils de suivi, des tableaux de bord et des systèmes de gestion de projets.
• Grand sens du détail et de l'organisation, avec la capacité de tenir à jour des guides de style, des FAQ, des outils de suivi, du matériel d'intégration, des tâches de calibrage et de la documentation.
• Une expérience dans la formation en IA, l'annotation de données, l'évaluation de modèles de langage (LLM), l'assurance qualité académique, la révision éthique ou la révision par grille d'évaluation constitue un atout majeur.