Responsable expérimentations et données Département Évaluation

Qui sommes-nous

Chez Pix, nous travaillons pour permettre à chaque citoyen de mesurer, d'améliorer et de valoriser tout au long de sa vie son niveau de maîtrise des usages numériques.

Comment ?

• En développant une plateforme en ligne gratuite adaptée à tous les niveaux pour s'auto-évaluer et progresser dans 5 grands domaines du numérique ;

• En proposant une expérience ludique via des questions-défis apprenants et des activités interactives axées sur la pratique ;

• En valorisant les acquis via le passage de la Certification Pix, reconnue par l'État et le monde professionnel ;

• En outillant les acteurs de l'enseignement, de la formation professionnelle, de l'insertion et de la médiation numérique, en France et à l'international.

Aujourd'hui, Pix c'est :

7 millions d'utilisateurs par an

Plus de 7 millions de Certifications Pix passées

Utilisé dans plus de 40 pays

Candidater chez Pix, c'est vouloir intégrer une structure innovante, comportant des effectifs issus des domaines de la tech (privé / public), avec des outils collaboratifs, un environnement dynamique au sein d'un projet d'utilité sociale d'envergure nationale… et même plus ;-)

La Direction des Contenus pédagogiques et de l'Enseignement scolaire et ses missions

La Direction des Contenus pédagogiques et de l'Enseignement scolaire contribue à la conception, à la qualité et à l'amélioration continue des contenus et des dispositifs d'évaluation proposés par Pix.

Au sein de cette direction, le Département Évaluation veille à la pertinence pédagogique, à la fiabilité et à la qualité des épreuves permettant de mesurer les compétences numériques des utilisateurs.

Dans ce cadre, nous recherchons un·e Responsable expérimentations et données pour renforcer notre capacité à analyser les contenus d'évaluation, à mesurer leur qualité et à orienter leur évolution sur la base d'indicateurs objectifs et robustes.

À la croisée de l'analyse de données, de la méthodologie scientifique et de l'ingénierie pédagogique, vous contribuerez à garantir la crédibilité des évaluations Pix et à éclairer les décisions relatives à l'amélioration de nos contenus.

Vous travaillerez en étroite collaboration avec les équipes du Département Évaluation, les équipes Contenus pédagogiques, Produit, Engineering, Data ainsi qu'avec l'Observatoire Pix des compétences numériques.

Sous la responsabilité de la responsable du département évaluation, la personne recrutée aura pour missions :

1. Définir et déployer des indicateurs pour mesurer la qualité des évaluations Pix

• Recueillir et analyser les besoins en indicateurs quantitatifs auprès des équipes.

• Concevoir des indicateurs fiables et pertinents permettant d'évaluer la qualité des contenus à différentes échelles : référentiel, domaine, compétence, thématique, sujet, acquis et épreuve.

• Exploiter les données disponibles en réalisant des requêtes sur les bases de données.

• Consolider et analyser les données afin de produire des indicateurs utiles au pilotage de l'activité.

• Documenter les indicateurs, assurer leur suivi et les faire évoluer en fonction des besoins.

• Accompagner les équipes dans la prise en main et l'utilisation de Metabase pour favoriser leur autonomie dans l'exploitation des données.

2. Concevoir et piloter des expérimentations pour améliorer les contenus d'évaluation

• Identifier les problématiques à investiguer et formuler des hypothèses de travail.

• Recueillir et analyser les données existantes pour éclairer les choix méthodologiques.

• Concevoir et mettre en œuvre des protocoles expérimentaux et des plans de test adaptés aux objectifs poursuivis.

• Analyser les résultats des expérimentations et en tirer des enseignements exploitables.

• Produire des synthèses et formuler des recommandations concrètes pour améliorer la pertinence pédagogique et la fiabilité des contenus.

• Présenter les résultats aux équipes concernées en tenant compte des contraintes techniques, pédagogiques et opérationnelles de Pix.

3. Contribuer à une approche pilotée par les données à l'échelle de Pix

• Participer aux travaux de calibration de la difficulté des contenus utilisés dans la Certification Pix.

• Contribuer ponctuellement aux études menées par l'Observatoire Pix des compétences numériques.

• Être l'interlocuteur ou l'interlocutrice privilégié·e des équipes Data pour les sujets liés à l'évaluation.

• Favoriser l'utilisation des données dans les réflexions et les prises de décision du département.

• Participer à l'amélioration continue de l'offre et du produit Pix en apportant une expertise analytique et méthodologique.

4. Assurer une veille scientifique et méthodologique sur l'évaluation

• Mettre en place et structurer une veille scientifique sur les méthodes d'évaluation automatique et les évolutions du domaine.

• Identifier les publications, travaux de recherche et conférences pertinents pour les activités du département.

• Analyser des articles scientifiques en français et en anglais.

• Synthétiser et vulgariser les principaux enseignements pour les rendre accessibles aux équipes.

• Sensibiliser les collaborateurs aux outils et aux méthodes de veille.

• Proposer des évolutions méthodologiques permettant de maintenir et de développer l'expertise de Pix en matière d'évaluation.

5. Participer à l'amélioration continue des contenus et des méthodes d'évaluation

• Identifier, à partir des données et des expérimentations, les axes d'amélioration des contenus d'évaluation.

• Formuler des recommandations permettant d'orienter les priorités du département.

• Contribuer aux réflexions collectives sur l'évolution des méthodes de conception et d'évaluation.

• Collaborer avec les équipes Produit, Engineering et Contenus pédagogiques pour favoriser la mise en œuvre des améliorations identifiées.

Type d'emploi

Remplacement, CDD d'1 an renouvelable 3 ans ou mise à disposition pour les agents de la fonction publique.

Date souhaitée de prise de fonction : Dès que possible

Avantages

Un onboarding aux petits oignons à la découverte de l’intégralité des équipes

Invitations aux panels, démos, et ateliers de conception ouverts à tous pour co-construire Pix ensemble

️ Titres restaurant 12,10 €/jour travaillé avec une prise en charge à 60 %

Prise en charge à 75 % de votre abonnement de transports en commun

️ 25 jours de congés payés + 20 jours de RTT par an

Une prime de fin d’année pouvant atteindre jusqu’à 10% du brut annuel

‍ Télétravail partiel possible pour tous les agents, partout en France + une enveloppe de 450 € sur 3 ans dédiée à son aménagement en télétravail & une indemnisation du télétravail de 253,44 € par an (soit 63,36€ par trimestre)

Un accès à Moka Care, plateforme dédiée à la santé mentale et au bien-être

L’accès à plus de 1500 enseignes de salles sport à un tarif (très très) réduit avec Wellpass !

Un accès illimité à Go1, notre plateforme de e-learning

Chèque cadeau en fin d’année

Un coffre-fort chez Docaposte

Panier de fruits et légumes livré chaque semaine

Une vie d’équipe qui compte aussi : deux séminaires par an dans des endroits chouettes, afterworks, Winterfest et autres moments collectifs

☕ Last but not least : une grande cafétéria et des expressos illimités !

Le profil recherché

Chez Pix, nous veillons à l'équilibre de l'équipe et au bien-être des personnes qui la composent. Cette conviction nous pousse à chercher un profil avec les qualités humaines et opérationnelles suivantes :

Diplôme et expérience

• Vous disposez d'une expérience significative dans la conception de formations ou de contenus numériques, idéalement dans un environnement éducatif ou pédagogique.

• Vous avez une expérience confirmée dans l'utilisation de méthodes scientifiques et la conception de protocoles expérimentaux.

• Vous maîtrisez les méthodes d'analyse de données et savez mobiliser les données quantitatives pour répondre à des problématiques concrètes.

• Vous possédez une bonne culture numérique et un intérêt marqué pour les enjeux pédagogiques et éducatifs.

• Une expérience en gestion de projets serait appréciée.

Compétences et connaissances

• Vous maîtrisez les méthodes de requêtage et d'exploitation de bases de données.

• Vous disposez de solides connaissances en conception pédagogique et en ingénierie de formation.

• Vous connaissez au moins un langage de programmation.

• Vous avez une bonne connaissance des mécanismes d'apprentissage et de ludification.

• Vous maîtrisez les outils numériques de production de contenus.

• Vous êtes à l'aise avec les outils collaboratifs de gestion de projet et de documentation (Jira, Confluence, suites collaboratives…).

• Vous disposez d'un bon niveau de maîtrise des compétences numériques transversales (équivalent aux niveaux 5-6 Pix).

• Vous possédez d'excellentes capacités rédactionnelles et savez restituer des résultats complexes de manière claire et accessible.

Savoir-faire et savoir-être

• Vous faites preuve d'une grande rigueur intellectuelle et scientifique dans votre travail.

• Vous disposez d'un excellent esprit d'analyse et de synthèse.

• Vous êtes organisé·e, autonome et savez prioriser vos activités.

• Vous êtes force de proposition et appréciez la recherche de solutions.

• Vous aimez travailler en équipe et partager vos connaissances.

• Vous faites preuve de curiosité et de créativité pour explorer de nouvelles approches.

• Vous savez adapter votre communication à des interlocuteurs aux expertises variées.

Candidater chez Pix, c'est vouloir intégrer une structure innovante, comportant une diversité de profils issus des domaines de la tech, du secteur public et privé. C'est aussi vouloir évoluer auprès de collègues engagés, qui souhaitent avoir un impact sur la société en mettant leurs compétences au service d'un projet d'utilité sociale d'envergure nationale et internationale.

Si un bon CV est toujours agréable à lire, nous pensons qu'une bonne histoire bien racontée (avec son lot de projets et d'expériences, réussites ou échecs) est encore plus intéressante à découvrir.

Pour rejoindre un service public en pleine expansion, envoyez-nous votre candidature !