Responsable de l'assurance qualité en science politique (QAL)

Dans ce rôle de contractant à distance et rémunéré à l'heure, vous travaillerez en tant que responsable de l'assurance qualité en science politique (QAL) pour superviser la qualité, la cohérence et la performance des formateurs sur les projets de formation en IA en science politique. Vous examinerez le contenu en science politique généré par l'IA ainsi que le travail des formateurs et des responsables de l'assurance qualité, évaluerez la qualité des résultats par rapport aux directives du projet, fournirez des commentaires écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sous l'angle de la rigueur conceptuelle, de la connaissance institutionnelle, du contexte comparatif, de l'exactitude de la théorie politique, du raisonnement politique, de la sensibilisation aux sources, de la sensibilité aux biais, de la clarté, du formatage, du respect des instructions et de l'adhésion aux grilles d'évaluation spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux formateurs et aux responsables de l'assurance qualité, soutiendrez l'intégration, maintiendrez la documentation et contribuerez à activer les contributeurs qui ne travaillent pas de manière cohérente. Ce rôle exige une solide expertise en science politique, de fortes compétences en communication en anglais, une excellente attention aux détails, une communication structurée et la capacité à gérer des flux de travail axés sur la qualité au sein d'équipes d'experts à distance.

Ce rôle est proposé par SME Careers, une entreprise de services de données d'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement pour nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en matière de qualité en science politique contribuera directement à améliorer les principaux modèles d'IA mondiaux en garantissant que les données d'entraînement en science politique sont exactes, équilibrées, bien contextualisées, solides sur le plan analytique et conformes aux attentes des clients.

Le processus de sélection comprend un entretien par IA, une tâche spécifique au domaine et un entretien avec un recruteur.

Important :
Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si vous êtes qualifié, vous ferez partie des premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles au sein de notre réseau d'experts.

Responsabilités

• Suivi de la qualité : Effectuer des contrôles ponctuels des éléments en science politique, identifier les problèmes de qualité, fournir des commentaires continus par message direct et signaler les problèmes récurrents ou critiques.
• Évaluation en science politique : Évaluer les explications en science politique générées par l'IA, les analyses comparatives, les résumés de politiques, les discussions de théorie politique, les descriptions institutionnelles et le raisonnement quant à leur exactitude et leur équilibre.
• Communication avec les formateurs et l'assurance qualité : Informer les formateurs et l'équipe d'assurance qualité sur Discord concernant les nouvelles directives, les changements de projet, les mises à jour des flux de travail, les attentes en matière de qualité et les normes d'examen spécifiques à la science politique.
• Gestion des questions : Répondre aux questions des formateurs et de l'assurance qualité de manière claire et rapide, en particulier concernant les institutions, la politique comparée, les politiques publiques, la théorie politique, les relations internationales, les biais et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des formateurs et de l'assurance qualité : Envoyer des messages directs aux contributeurs inactifs ou qui ne travaillent pas, encourager leur réactivation, suivre les relances et signaler les problèmes de disponibilité si nécessaire.
• Documentation : Créer et maintenir la documentation des projets de science politique, y compris les guides de style, les outils de suivi, les FAQ, les notes de qualité, les exemples, les pots de miel (honeypots), les tâches de calibrage et le matériel d'intégration.
• Intégration et formation : Planifier et animer des sessions d'intégration et de formation avec les formateurs et l'assurance qualité pour expliquer les attente du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences d'examen spécifiques à la science politique.
• Alignement de la qualité : Veiller à ce que tous les formateurs et responsables de l'assurance qualité appliquent les directives d'examen en science politique de manière cohérente et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
• Évaluation des biais et des risques : Signaler les affirmations trompeuses, idéologiquement unilatérales, non étayées, obsolètes, politiquement inflammatoires ou mal contextualisées.
• Amélioration des processus : Identifier les lacunes récurrentes en matière de qualité, proposer des améliorations des flux de travail et contribuer à l'élaboration de processus d'assurance qualité évolutifs pour les projets de formation en IA en science politique.

Exigences

• Licence, Master ou doctorat en science politique, relations internationales, politiques publiques, gouvernement, théorie politique, études de sécurité, droit, sociologie, économie ou dans un domaine des sciences sociales étroitement apparenté.
• Solide maîtrise de la langue anglaise pour suivre les directives du projet, communiquer avec les équipes et fournir des commentaires écrits clairs.
• Plus de 3 ans d'expérience dans la recherche en science politique, l'enseignement, l'analyse politique, les affaires publiques, les relations internationales, la rédaction politique, l'examen académique ou des flux de travail analytiques similaires.
• Solide compréhension des institutions politiques, de la politique comparée, des relations internationales, des politiques publiques, de la théorie politique, des systèmes électoraux, de la gouvernance, de la capacité étatique, de la société civile et du comportement politique.
• Capacité à évaluer le contenu en science politique par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que la sursimplification, le biais idéologique, les affirmations non étayées, les descriptions institutionnelles incorrectes, le raisonnement causal trompeur ou une faible analyse comparative.
• Une familiarité avec des domaines tels que la démocratie et l'autoritarisme, l'économie politique, l'administration publique, les systèmes constitutionnels, la politique électorale, les études sur les conflits, les organisations internationales, l'évaluation des politiques ou la recherche par sondage est un atout.
• Une expérience dans la direction ou le soutien d'équipes distantes d'analystes, de chercheurs, de réviseurs, d'éducateurs, d'annotateurs ou de responsables de l'assurance qualité est fortement appréciée.
• Aisance pour travailler dans des environnements distants en évolution rapide en utilisant des outils tels que Discord, Google Sheets, Google Docs, des outils de suivi, des tableaux de bord et des systèmes de gestion de projets.
• Grand souci du détail et sens de l'organisation, avec la capacité de tenir à jour des guides de style, des FAQ, des outils de suivi, du matériel d'intégration, des tâches de calibrage et de la documentation.
• Une expérience en matière de formation à l'IA, d'annotation de données, d'évaluation de grands modèles de langage (LLM), d'assurance qualité des politiques, d'examen académique, de vérification des faits ou d'évaluation basée sur des grilles constitue un atout majeur.