Responsable expérimentations et données – Département Évaluation

Sous la responsabilité de la responsable du département évaluation, la personne recrutée aura pour missions :
1. Définir et déployer des indicateurs pour mesurer la qualité des évaluations Pix
Recueillir et analyser les besoins en indicateurs quantitatifs auprès des équipes.
Concevoir des indicateurs fiables et pertinents permettant d'évaluer la qualité des contenus à différentes échelles : référentiel, domaine, compétence, thématique, sujet, acquis et épreuve.
Exploiter les données disponibles en réalisant des requêtes sur les bases de données.
Consolider et analyser les données afin de produire des indicateurs utiles au pilotage de l'activité.
Documenter les indicateurs, assurer leur suivi et les faire évoluer en fonction des besoins.
Accompagner les équipes dans la prise en main et l'utilisation de Metabase pour favoriser leur autonomie dans l'exploitation des données.
2. Concevoir et piloter des expérimentations pour améliorer les contenus d'évaluation
Identifier les problématiques à investiguer et formuler des hypothèses de travail.
Recueillir et analyser les données existantes pour éclairer les choix méthodologiques.
Concevoir et mettre en œuvre des protocoles expérimentaux et des plans de test adaptés aux objectifs poursuivis.
Analyser les résultats des expérimentations et en tirer des enseignements exploitables.
Produire des synthèses et formuler des recommandations concrètes pour améliorer la pertinence pédagogique et la fiabilité des contenus.
Présenter les résultats aux équipes concernées en tenant compte des contraintes techniques, pédagogiques et opérationnelles de Pix.
3. Contribuer à une approche pilotée par les données à l'échelle de Pix
Participer aux travaux de calibration de la difficulté des contenus utilisés dans la Certification Pix.
Contribuer ponctuellement aux études menées par l'Observatoire Pix des compétences numériques.
Être l'interlocuteur ou l'interlocutrice privilégié·e des équipes Data pour les sujets liés à l'évaluation.
Favoriser l'utilisation des données dans les réflexions et les prises de décision du département.
Participer à l'amélioration continue de l'offre et du produit Pix en apportant une expertise analytique et méthodologique.
4. Assurer une veille scientifique et méthodologique sur l'évaluation
Mettre en place et structurer une veille scientifique sur les méthodes d'évaluation automatique et les évolutions du domaine.
Identifier les publications, travaux de recherche et conférences pertinents pour les activités du département.
Analyser des articles scientifiques en français et en anglais.
Synthétiser et vulgariser les principaux enseignements pour les rendre accessibles aux équipes.
Sensibiliser les collaborateurs aux outils et aux méthodes de veille.
Proposer des évolutions méthodologiques permettant de maintenir et de développer l'expertise de Pix en matière d'évaluation.
5. Participer à l'amélioration continue des contenus et des méthodes d'évaluation

Profil recherché :
Chez Pix, nous veillons à l’équilibre de l’équipe et le bien-être des personnes qui la composent. Cette conviction nous pousse à chercher un profil avec les qualités humaines et opérationnelles suivantes :
Diplôme et expérience
Vous disposez d'une expérience significative dans la conception de formations ou de contenus numériques, idéalement dans un environnement éducatif ou pédagogique.
Vous avez une expérience confirmée dans l'utilisation de méthodes scientifiques et la conception de protocoles expérimentaux.
Vous maîtrisez les méthodes d'analyse de données et savez mobiliser les données quantitatives pour répondre à des problématiques concrètes.
Vous possédez une bonne culture numérique et un intérêt marqué pour les enjeux pédagogiques et éducatifs.
Une expérience en gestion de projets serait appréciée.

Compétences et connaissances
Vous maîtrisez les méthodes de requêtage et d'exploitation de bases de données.
Vous disposez de solides connaissances en conception pédagogique et en ingénierie de formation.
Vous connaissez au moins un langage de programmation.
Vous avez une bonne connaissance des mécanismes d'apprentissage et de ludification.
Vous maîtrisez les outils numériques de production de contenus.
Vous êtes à l'aise avec les outils collaboratifs de gestion de projet et de documentation (Jira, Confluence, suites collaboratives…).
Vous disposez d'un bon niveau de maîtrise des compétences numériques transversales (équivalent aux niveaux 5-6 Pix).
Vous possédez d'excellentes capacités rédactionnelles et savez restituer des résultats complexes de manière claire et accessible.
Savoir-faire et savoir-être
Vous faites preuve d'une grande rigueur intellectuelle et scientifique dans votre travail.
Vous disposez d'un excellent esprit d'analyse et de synthèse.
Vous êtes organisé·e, autonome et savez prioriser vos activités.
Vous êtes force de proposition et appréciez la recherche de solutions.
Vous aimez travailler en équipe et partager vos connaissances.
Vous faites preuve de curiosité et de créativité pour explorer de nouvelles approches.
Vous savez adapter votre communication à des interlocuteurs aux expertises variées.
Candidater chez Pix, c'est vouloir intégrer une structure innovante, comportant une diversité de profils issus des domaines de la tech, du secteur public et privé. C'est aussi vouloir évoluer auprès de collègues engagés, qui souhaitent avoir un impact sur la société en mettant leurs compétences au service d'un projet d'utilité sociale d'envergure nationale et internationale.
Si un bon CV est toujours agréable à lire, nous pensons qu'une bonne histoire bien racontée (avec son lot de projets et d'expériences, réussites ou échecs) est encore plus intéressante à découvrir.
Pour rejoindre un service public en pleine expansion, envoyez-nous votre candidature !

L'employeur :
Chez Pix, nous travaillons pour permettre à chaque citoyen de mesurer, d'améliorer et de valoriser tout au long de sa vie son niveau de maîtrise des usages numériques.
Comment ?
En développant une plateforme en ligne gratuite adaptée à tous les niveaux pour s'auto-évaluer et progresser dans 5 grands domaines du numérique,
En proposant une expérience ludique via des questions-défis apprenants et des activités interactives axées sur la pratique,
En valorisant les acquis via le passage de la Certification Pix, reconnue par l'Etat et le monde professionnel,
En outillant les acteurs de l'enseignement, de la formation professionnelle, de l'insertion et de la médiation numérique, en France et à l’international.

Aujourd’hui, Pix c’est :
🤝 7 millions d’utilisateurs par an
🏆 + de 7 millions de Certification Pix passées
🌍 Utilisé dans 40pays
Candidater chez Pix, c’est vouloir intégrer une structure innovante, comportant des effectifs issus des domaines de la tech (privé / public), avec des outils collaboratifs, un environnement dynamique au sein d’un projet d’utilité sociale d’envergure nationale et internationale
Descriptif du service
La Direction des contenus pédagogiques et de l’enseignement scolaire, qui réunit une trentaine de collaborateurs, conçoit les contenus pédagogiques Pix et accompagne leur déploiement dans les établissements scolaires.