Responsable d'assurance qualité en Astronomie (QAL)

Dans ce rôle de contractant à distance et rémunéré à l'heure, vous travaillerez en tant que Responsable de l'Assurance Qualité (QAL) en Astronomie / Astrophysique pour superviser la qualité, la cohérence et les performances des formateurs sur les projets de formation en IA en astronomie et astrophysique. Vous examinerez le contenu en astronomie/astrophysique généré par l'IA ainsi que le travail des formateurs et des équipes d'assurance qualité (QA), évaluerez la qualité des livrables par rapport aux directives du projet, fournirez des commentaires écrits précis et veillerez à ce que tous les contributeurs respectent les normes de qualité attendues.

Vous évaluerez le travail sous l'angle de la précision scientifique, du raisonnement physique, de l'exactitude mathématique, de la qualité de la terminologie, de la gestion des unités, du contexte d'observation, de la clarté, de la mise en forme, du suivi des instructions et du respect des grilles d'évaluation spécifiques au projet. Vous repérerez les problèmes de qualité récurrents, communiquerez les mises à jour aux formateurs et aux QA, soutiendrez l'intégration (onboarding), maintiendrez la documentation et contribuerez à réactiver les contributeurs qui ne travaillent pas de manière régulière. Ce rôle exige une solide expertise en astronomie/astrophysique, de solides compétences en communication en anglais, un excellent souci du détail, une communication structurée et la capacité à gérer des flux de travail axés sur la qualité au sein d'équipes d'experts distantes.

Ce rôle est proposé par SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement pour nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre leadership en matière de qualité en astronomie/astrophysique contribuera directement à améliorer les principaux modèles d'IA mondiaux en garantissant que les données d'entraînement en astronomie et astrophysique sont exactes, scientifiquement fondées, clairement expliquées, bien documentées et alignées sur les attentes des clients.

Le processus de sélection comprend un entretien par IA, un test spécifique au domaine et un entretien avec un recruteur.

Important :
Il n'y a pas de projet immédiat pour ce rôle ; cependant, si vous êtes qualifié, vous ferez partie des premiers experts contactés lorsque des opportunités pertinentes se présenteront. Cela vous donnera également accès à de futurs projets disponibles via notre réseau d'experts.

Responsabilités

• Suivi de la qualité : effectuer des contrôles ponctuels d'éléments d'astronomie/astrophysique, identifier les problèmes de qualité, fournir des retours continus par message direct et signaler les problèmes récurrents ou critiques.
• Revue scientifique : évaluer les explications, calculs, diagrammes, interprétations d'observation, comparaisons et raisonnements étape par étape en astronomie/astrophysique générés par l'IA pour en vérifier l'exactitude et la clarté.
• Communication avec les formateurs et les QA : informer les formateurs et les QA sur Discord concernant les nouvelles directives d'articles, les modifications de projets, les mises à jour des flux de travail, les attentes en matière de qualité et les normes de révision spécifiques à l'astronomie/astrophysique.
• Gestion des questions : répondre aux questions des formateurs et des QA de manière claire et rapide, en particulier concernant les hypothèses physiques, les unités, la terminologie astronomique, les méthodes d'observation, les formules et l'interprétation des grilles d'évaluation.
• Gestion de l'activation des formateurs/QA : contacter par message direct les contributeurs inactifs ou ne travaillant pas, encourager leur réactivation, suivre les relances et signaler les problèmes de disponibilité si nécessaire.
• Documentation : créer et tenir à jour la documentation des projets d'astronomie/astrophysique, y compris les guides de style, les outils de suivi, les FAQ, les notes de qualité, les exemples, les pièges (honeypots), les tâches de calibration et le matériel d'intégration.
• Intégration et formation : planifier et animer des réunions d'intégration et de formation avec les formateurs et les QA pour expliquer les attentes du projet, les flux de travail, les grilles d'évaluation, les normes de qualité et les exigences de révision spécifiques à l'astronomie/astrophysique.
• Alignement sur la qualité : veiller à ce que tous les formateurs et QA appliquent systématiquement les directives de révision en astronomie/astrophysique et comprennent les mises à jour au fur et à mesure de l'évolution des projets.
• Évaluation des risques : signaler les affirmations trompeuses, trop sûres d'elles, physiquement impossibles, numériquement incorrectes ou mal sourcées en astronomie/astrophysique.
• Amélioration des processus : identifier les lacunes récurrentes en matière de qualité, proposer des améliorations des flux de travail et contribuer à la mise en place de processus d'assurance qualité évolutifs pour les projets de formation en IA en astronomie/astrophysique.

Exigences

• Licence, Master ou Doctorat en astronomie, astrophysique, physique, sciences spatiales, sciences planétaires, cosmologie ou dans un domaine étroitement apparenté.
• Solide maîtrise de la langue anglaise pour suivre les directives du projet, communiquer avec les équipes et fournir des commentaires écrits clairs.
• Plus de 3 ans d'expérience dans la recherche en astronomie/astrophysique, l'enseignement, la vulgarisation scientifique, la révision académique, l'analyse de données, le travail en observatoire ou des flux de travail scientifiques connexes.
• Solide compréhension de la mécanique céleste, de l'évolution stellaire, des galaxies, de la cosmologie, du rayonnement électromagnétique, des méthodes d'observation, de la spectroscopie, des systèmes planétaires, des trous noirs et de l'incertitude scientifique.
• Capacité à évaluer le contenu en astronomie/astrophysique par rapport à des grilles d'évaluation détaillées et à identifier des problèmes tels que des hypothèses physiques erronées, de mauvaises unités, des calculs défectueux, des faits hallucinés, des explications trompeuses ou des conclusions trop simplifiées.
• La familiarité avec des outils ou des méthodes tels que Python, les jeux de données astronomiques, les données de télescopes/observatoires, la spectroscopie, la photométrie, les simulations, LaTeX, les notebooks Jupyter ou la visualisation scientifique est un plus.
• Une expérience dans la direction ou le soutien d'équipes distantes de chercheurs, d'éducateurs, de réviseurs, d'annotateurs, de rédacteurs scientifiques ou d'équipes d'assurance qualité est fortement appréciée.
• Aisance pour travailler dans des environnements distants en évolution rapide en utilisant des outils tels que Discord, Google Sheets, Google Docs, des outils de suivi, des tableaux de bord et des systèmes de gestion de projets.
• Grand sens du détail et de l'organisation, avec la capacité de tenir à jour des guides de style, des FAQ, des outils de suivi, du matériel d'intégration, des tâches de calibration et de la documentation.
• Une expérience dans la formation en IA, l'annotation de données, l'évaluation de modèles de langage (LLM), l'assurance qualité scientifique, la révision académique ou l'évaluation basée sur des grilles est un atout majeur.