Spécialiste en finance et comptabilité, conception de grilles d'évaluation

Dans ce rôle de contractant indépendant à l'heure et à distance, vous travaillerez en tant qu'expert en la matière (SME) en finance et comptabilité pour créer des tâches professionnelles réalistes, évaluer des travaux financiers générés par l'IA et concevoir des grilles d'évaluation détaillées définissant ce qu'une réponse professionnelle de haute qualité doit contenir.

Vous développerez des questions stimulantes et des livrables portant sur des domaines tels que l'analyse financière, la comptabilité, la finance d'entreprise, l'analyse des investissements, l'évaluation, la modélisation financière, le reporting, l'audit, les risques ou des disciplines connexes. Vous évaluerez si les résultats de l'IA utilisent des hypothèses, des méthodologies, des calculs, un jugement professionnel et un raisonnement justificatif appropriés.

L'un des axes principaux de ce rôle est la conception de grilles d'évaluation et la rédaction d'évaluations. Vous traduirez le jugement professionnel en finance et comptabilité en critères structurés couvrant l'exactitude, la méthodologie, l'exhaustivité, la matérialité, les hypothèses, les calculs, les considérations de risque et la qualité du raisonnement. Vous pourrez également critiquer et améliorer les grilles développées par d'autres experts.

Ce poste est proposé par SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement pour nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre expertise contribue directement à améliorer les principaux modèles d'IA mondiaux en rendant les résultats financiers plus précis, rigoureux et professionnellement utiles.

Responsabilités

• Créer des tâches financières professionnelles : développer des problèmes complexes en matière de finance, comptabilité, évaluation, investissement, audit ou analyse.
• Concevoir des grilles de notation : définir les calculs, hypothèses, raisonnements et considérations professionnelles attendus dans des réponses solides.
• Évaluer les résultats financiers : examiner les analyses générées par l'IA sous l'angle de l'exactitude, de la méthodologie, de la logique et de l'exhaustivité.
• Évaluer le jugement professionnel : déterminer si les hypothèses et les conclusions sont raisonnables et suffisamment étayées.
• Identifier les erreurs matérielles : détecter les calculs erronés, le traitement comptable, la logique d'évaluation, l'interprétation financière ou l'analyse des risques incorrects.
• Critiquer les grilles de vos pairs : examiner les critères pour détecter toute ambiguïté, composante manquante, duplication, subjectivité excessive ou erreur technique.
• Développer du contenu de référence : produire des analyses, solutions, critiques et explications de haute qualité.
• Soutenir l'entraînement de l'IA : générer des tâches, des grilles d'évaluation, des évaluations, des préférences et des paires de réponses de référence adaptées au RL et au SFT.
• Maintenir les normes professionnelles : veiller à ce que les résultats reflètent les conventions et la terminologie appropriées en finance et comptabilité.

Exigences

• Licence ou diplôme supérieur en finance, comptabilité, économie, gestion, mathématiques appliquées ou dans une discipline connexe.
• Des certifications professionnelles pertinentes telles que CPA, CFA, ACCA, ACA, CMA, FRM ou équivalentes sont fortement préférées le cas échéant.
• Solide maîtrise professionnelle de l'anglais, minimum C1.
• Plus de 3 ans d'expérience professionnelle en finance, comptabilité, analyse des investissements, finance d'entreprise, reporting financier, audit, conseil, gestion des risques ou dans un domaine connexe.
• Solide connaissance des méthodologies professionnelles, des calculs, des hypothèses et des normes analytiques propres à votre spécialité.
• Capacité à créer des tâches réalistes de finance ou de comptabilité nécessitant du jugement plutôt qu'une simple mémorisation de faits.
• Forte capacité à concevoir des grilles d'évaluation détaillées couvrant l'exactitude, la méthodologie, les hypothèses, l'exhaustivité, la matérialité, la qualité du raisonnement et la présentation professionnelle.
• Capacité à faire la distinction entre erreurs de calcul, erreurs méthodologiques, hypothèses non étayées et divergences professionnelles raisonnables.
• Aisance pour critiquer les grilles créées par d'autres experts en finance ou en comptabilité.
• Grand souci du détail lors de l'examen de l'exactitude numérique, de la logique financière, de la terminologie, des hypothèses, des rapprochements et des conclusions.
• Une expérience en matière de formation, de rédaction d'examens, de révision d'audit, d'examen par un comité d'investissement, de contrôle qualité financier, de révision de recherche ou d'évaluation professionnelle est fortement appréciée.
• Une expérience préalable en évaluation de l'IA, étiquetage de modèles, annotation, RLHF ou notation par grille est un plus.