Responsable de l'assurance qualité en études culturelles

Dans ce rôle de prestataire distant et rémunéré à l'heure, vous travaillerez en tant que responsable de l'assurance qualité (QAL) en histoire de l'art et études culturelles pour superviser la qualité, la cohérence et les performances des formateurs sur les projets d'entraînement en IA portant sur l'histoire de l'art, la culture visuelle, les études culturelles et les humanités. Vous examinerez le contenu généré par l'IA en histoire de l'art et en études culturelles ainsi que le travail des formateurs et des équipes d'AQ, évaluerez la qualité des résultats par rapport aux directives du projet, fournirez des commentaires écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sous l'angle de la précision historique, de la qualité de l'analyse visuelle, du contexte culturel, de la précision de la terminologie, de la nuance interprétative, de la connaissance des sources, de la sensibilité à la représentation, de la clarté, du formatage, du respect des consignes et de l'adhésion aux grilles d'évaluation spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux formateurs et aux AQ, soutiendrez l'intégration, tiendrez la documentation à jour et contribuerez à réactiver les contributeurs qui ne travaillent pas de manière régulière. Ce rôle requiert une solide expertise en histoire de l'art et en études culturelles, d'excellentes compétences en communication en anglais, un grand souci du détail, une communication structurée et la capacité à gérer des flux de travail axés sur la qualité au sein d'équipes d'experts distantes.

Ce rôle est proposé par SME Careers, une entreprise de services de données d'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement pour nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en matière de qualité dans le domaine de l'histoire de l'art et des études culturelles contribuera directement à améliorer les principaux modèles d'IA mondiaux en garantissant que les données d'entraînement en sciences humaines sont précises, culturellement sensibles, visuellement lettrées, ancrées dans l'histoire, bien expliquées et alignées sur les attentes des clients.

Le processus de sélection comprend un entretien par IA, une tâche spécifique au domaine et un entretien avec un recruteur.

Important :
Il n'y a pas de projet immédiat pour ce rôle ; toutefois, si vous êtes qualifié, vous figurerez parmi les premiers experts que nous contacterons lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles au sein de notre réseau d'experts.

Responsabilités

• Suivi de la qualité : effectuer des contrôles ponctuels sur les éléments d'histoire de l'art et d'études culturelles, identifier les problèmes de qualité, fournir un retour d'information continu via messagerie directe et signaler les problèmes récurrents ou critiques.
• Revue des sciences humaines : évaluer les explications historico-artistiques générées par l'IA, les analyses visuelles, les comparaisons culturelles, les descriptions de style muséal, les interprétations critiques et les résumés contextuels pour en vérifier l'exactitude et la nuance.
• Communication avec les formateurs et l'AQ : informer les formateurs et les équipes d'AQ sur Discord concernant les nouvelles directives relatives aux articles, les modifications de projets, les mises à jour des flux de travail, les attentes en matière de qualité et les normes de révision spécifiques à l'histoire de l'art et aux études culturelles.
• Gestion des questions : répondre aux questions des formateurs et des AQ de manière claire et rapide, en particulier en ce qui concerne l'analyse visuelle, l'attribution, la période, le contexte culturel, les affirmations interprétatives, la représentation, l'éthique et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des formateurs et de l'AQ : contacter par message direct les contributeurs inactifs ou qui ne travaillent pas, encourager leur réactivation, assurer le suivi et signaler les problèmes de disponibilité si nécessaire.
• Documentation : créer et tenir à jour la documentation du projet en histoire de l'art et études culturelles, notamment les guides de style, les outils de suivi, les FAQ, les notes de qualité, les exemples, les pièges (honeypots), les tâches d'étalonnage et le matériel d'intégration.
• Intégration et formation : planifier et animer des sessions d'intégration et de formation avec les formateurs et les AQ pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision spécifiques à l'histoire de l'art et aux études culturelles.
• Alignement de la qualité : s'assurer que tous les formateurs et AQ appliquent les directives de révision en histoire de l'art et études culturelles de manière cohérente et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
• Revue des biais et de l'éthique : signaler les affirmations culturellement insensibles, eurocentriques, décontextualisées, stéréotypées, mal attribuées ou non fondées concernant l'art, la culture, les artistes ou les communautés.
• Amélioration des processus : identifier les lacunes qualitatives récurrentes, proposer des améliorations des flux de travail et contribuer à la mise en place de processus d'AQ évolutifs pour les projets d'entraînement en IA en histoire de l'art et études culturelles.

Exigences

• Diplôme de licence, de master ou de doctorat en histoire de l'art, études culturelles, culture visuelle, muséologie, sciences humaines, beaux-arts, littérature comparée, études des médias, anthropologie, histoire ou dans un domaine étroitement apparenté.
• Solide maîtrise de la langue anglaise pour suivre les directives du projet, communiquer avec les équipes et fournir des commentaires écrits clairs.
• Plus de 3 ans d'expérience en recherche en histoire de l'art, analyse culturelle, travail de musée ou de conservation, enseignement, rédaction académique, analyse visuelle, édition, critique culturelle ou flux de travail connexes dans les sciences humaines.
• Solide compréhension des méthodes historico-artistiques, de l'analyse visuelle, de l'iconographie, du style, de la périodisation, du mécénat, des médiums/matériaux, de l'éthique muséale, de la théorie culturelle, de la représentation et du contexte historique.
• Capacité à évaluer le contenu en histoire de l'art et études culturelles par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels qu'une mauvaise attribution, une périodisation incorrecte, une analyse visuelle fragile, des stéréotypes culturels, une interprétation non fondée, une terminologie obsolète ou des affirmations décontextualisées.
• Une familiarité avec des domaines tels que l'art ancien, l'art médiéval, l'art de la Renaissance, l'art moderne/contemporain, l'histoire de l'art non occidental, la photographie, le cinéma/les médias, la culture visuelle, la théorie postcoloniale, les études de genre, la muséologie ou les études patrimoniales est appréciée.
• Une expérience dans la direction ou le soutien d'équipes distantes de chercheurs, rédacteurs, réviseurs, éducateurs, conservateurs, annotateurs ou professionnels de l'AQ est vivement souhaitée.
• Aisance pour travailler dans des environnements distants en évolution rapide en utilisant des outils tels que Discord, Google Sheets, Google Docs, des outils de suivi, des tableaux de bord et des systèmes de gestion de projet.
• Grand sens du détail et de l'organisation, avec la capacité de tenir à jour des guides de style, des FAQ, des outils de suivi, du matériel d'intégration, des tâches d'étalonnage et de la documentation.
• Une expérience dans l'entraînement d'IA, l'annotation de données, l'évaluation de modèles de langage (LLM), l'assurance qualité en sciences humaines, l'examen de la sensibilité culturelle, la révision d'images/de contenus ou l'évaluation basée sur des grilles constitue un atout majeur.