Responsable de l'assurance qualité en neurosciences (QAL)

Dans ce rôle de contractant à distance et facturé à l'heure, vous travaillerez en tant que Responsable de l'Assurance Qualité (QAL) en neurosciences et sciences cognitives pour superviser la qualité, la cohérence et la performance des formateurs sur les projets d'entraînement en IA dans ces domaines. Vous évaluerez du contenu en neurosciences/sciences cognitives généré par IA ainsi que le travail des formateurs et des équipes d'AQ, contrôlerez la qualité des résultats par rapport aux directives du projet, fournirez des retours écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sous l'angle de la rigueur scientifique, de la précision conceptuelle, de la culture de la recherche, de la compréhension des méthodes expérimentales, du raisonnement cerveau-comportement, de la prudence statistique, de la conscience éthique, de la clarté, du formatage, du respect des instructions et de l'adhésion aux grilles d'évaluation spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux formateurs et aux AQ, soutiendrez l'intégration, tiendrez la documentation à jour et contribuerez à réactiver les contributeurs qui ne travaillent pas de manière régulière. Ce rôle exige une solide expertise en neurosciences/sciences cognitives, de fortes compétences en communication en anglais, une excellente attention aux détails, une communication structurée et la capacité à gérer des flux de travail axés sur la qualité au sein d'équipes d'experts à distance.

Ce poste est proposé par SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement pour nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en matière de qualité en neurosciences/sciences cognitives contribuera directement à améliorer les principaux modèles d'IA mondiaux en garantissant que les données d'entraînement scientifiques sont exactes, fondées sur des données probantes, éthiquement appropriées, clairement expliquées et alignées sur les attentes des clients.

Le processus de sélection comprend un entretien par IA, une tâche spécifique au domaine et un entretien avec un recruteur.

Important :
Il n'y a pas de projet immédiat pour ce rôle ; cependant, si vous êtes qualifié, vous figurerez parmi les premiers experts contactés lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles au sein de notre réseau d'experts.

Responsabilités

• Suivi de la qualité : Effectuer des contrôles ponctuels d'éléments en neurosciences/sciences cognitives, identifier les problèmes de qualité, fournir un retour d'information continu via des messages privés et faire remonter les problèmes récurrents ou critiques.
• Évaluation scientifique : Évaluer les explications, résumés de recherche, interprétations expérimentales, affirmations cerveau-comportement, applications de la théorie cognitive et raisonnements étape par étape en neurosciences/sciences cognitives générés par IA, pour en vérifier l'exactitude et la clarté.
• Communication avec les formateurs et les AQ : Informer les formateurs et les AQ sur Discord concernant les nouvelles directives relatives aux articles, les modifications de projet, les mises à jour des flux de travail, les attentes en matière de qualité et les normes de révision spécifiques aux neurosciences et aux sciences cognitives.
• Gestion des questions : Répondre aux questions des formateurs et des AQ de manière claire et rapide, en particulier concernant les mécanismes neuronaux, la cognition, la conception expérimentale, l'interprétation statistique, les limites éthiques, la prudence clinique et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des formateurs et des AQ : Envoyer des messages privés aux contributeurs inactifs ou qui ne travaillent pas, encourager leur activation, suivre les relances et signaler les problèmes de disponibilité si nécessaire.
• Documentation : Créer et tenir à jour la documentation du projet en neurosciences/sciences cognitives, y compris les guides de style, les outils de suivi, les FAQ, les notes de qualité, les exemples, les pièges (honeypots), les tâches de calibrage et le matériel d'intégration.
• Intégration et formation : Planifier et animer des appels d'intégration et de formation avec les formateurs et les AQ pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision spécifiques aux neurosciences et aux sciences cognitives.
• Alignement sur la qualité : Veiller à ce que tous les formateurs et AQ appliquent les directives de révision en neurosciences/sciences cognitives de manière cohérente et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
• Évaluation de la sécurité et de l'éthique : Signaler les affirmations pseudoscientifiques, trop sûres d'elles, cliniquement trompeuses, problématiques sur le plan éthique ou non fondées concernant le cerveau, la cognition, le comportement ou la santé mentale.
• Amélioration des processus : Identifier les lacunes récurrentes en matière de qualité, proposer des améliorations des flux de travail et contribuer à la mise en place de processus d'AQ évolutifs pour les projets d'entraînement en IA en neurosciences et sciences cognitives.

Exigences

• Licence, Master, doctorat (PhD), MD/PhD, ou parcours professionnel équivalent en neurosciences, sciences cognitives, psychologie, neurobiologie, psychologie cognitive, neurosciences computationnelles, recherche connexe à la neurologie, biologie, sciences biomédicales ou domaine étroitement lié.
• Maîtrise solide de la langue anglaise pour suivre les directives du projet, communiquer avec les équipes et fournir des commentaires écrits clairs.
• Plus de 3 ans d'expérience dans la recherche en neurosciences/sciences cognitives, l'enseignement, le travail en laboratoire, la révision académique, la communication scientifique, la conception expérimentale, l'analyse de données ou des flux de travail scientifiques connexes.
• Solide compréhension des systèmes neuronaux, de la cognition, de la perception, de l'attention, de la mémoire, de l'apprentissage, du langage, de la prise de décision, de la neuroanatomie, de la signalisation neuronale, des méthodes de recherche et des relations entre le cerveau et le comportement.
• Capacité à évaluer du contenu en neurosciences/sciences cognitives par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que les neuromythes, les affirmations excessives, les conclusions causales non fondées, l'interprétation erronée d'études, la terminologie incorrecte, la pseudoscience ou les implications cliniques trompeuses.
• Une familiarité avec des outils ou des méthodes tels que l'EEG, l'imagerie par résonance magnétique fonctionnelle (IRMf), les expériences comportementales, la modélisation computationnelle, l'évaluation neuropsychologique, les statistiques, Python/R/MATLAB, les tâches cognitives ou la revue de littérature est appréciée.
• Une expérience dans la direction ou le soutien d'équipes distantes de chercheurs, réviseurs, éducateurs, annotateurs, rédacteurs scientifiques ou AQ est fortement privilégiée.
• Aptitude à travailler dans des environnements distants en évolution rapide en utilisant des outils tels que Discord, Google Sheets, Google Docs, des outils de suivi, des tableaux de bord et des systèmes de gestion de projet.
• Grand sens du détail et de l'organisation, avec la capacité de tenir à jour des guides de style, des FAQ, des outils de suivi, du matériel d'intégration, des tâches de calibrage et de la documentation.
• Une expérience en entraînement d'IA, annotation de données, évaluation de LLM, AQ scientifique, révision académique, révision de contenu en psychologie/neurosciences, ou révision basée sur des grilles d'évaluation constitue un atout majeur.