Génération des preuves
Utilisation des preuves
Europe
Génération des preuves
Utilisation des preuves
Europe
Par Erik Andersen, Simon Graffy, Jason T. Kerwin et Monica Lambon-Quayefio
IPA Partenariat pour la technologie dans l'éducation (P4T-Ed) Cette initiative encourage l'utilisation des données et des preuves pour stimuler l'apprentissage et l'amélioration dans le secteur des technologies éducatives. Dans le cadre de l'initiative P4T-Ed, l'IPA soutient trois essais contrôlés randomisés (ECR) afin de contribuer à la production de données probantes rigoureuses sur l'impact potentiel des interventions en matière de technologies éducatives sur les résultats d'apprentissage.
Voici le premier article d'une série consacrée aux principaux résultats, enseignements et leçons tirées des essais contrôlés randomisés. Cette série illustre comment les données probantes contribuent à combler le fossé entre innovation, mise en œuvre et impact dans le domaine des technologies éducatives.
Dans cet article, l'équipe de recherche qui travaille avec Enseignants inspirants partage les premiers résultats d'un travail visant à permettre aux chefs d'établissement d'agir comme coachs pédagogiques.
Ce blog résume les résultats d'un test A/B évaluant l'efficacité du recours aux chefs d'établissement comme coachs au sein d'un programme de pédagogie structurée au Ghana. Nos résultats montrent que la formation des chefs d'établissement et la mise à leur disposition d'outils de coaching via une application peuvent améliorer la qualité de l'enseignement dans un tel programme.
Dans les classes de primaire en Afrique, les résultats scolaires des enfants sont inférieurs aux normes internationales d'une éducation de qualité. Un consensus se dégage quant à l'efficacité des programmes de pédagogie structurée, qui fournissent aux enseignants des guides de leçons détaillés et des ressources pédagogiques adaptées, comme solution adaptable à grande échelle. En 2025, le Groupe consultatif mondial sur les données probantes en éducation (GEEAP) a identifié la pédagogie structurée comme une solution pertinente. Meilleur achat pour les gouvernements qui cherchent à améliorer l'apprentissage fondamental.
Le coaching est largement considéré comme une composante essentielle d'une pédagogie structurée. Il est conseillé aux coachs de se rendre dans les classes, d'observer les cours, de fournir un retour d'information et de modéliser les bonnes pratiques. Souvent qualifiée de « supervision de soutien », cette approche repose sur le principe que les visites en classe offrent un cadre d'accompagnement et de responsabilisation souple, permettant aux enseignants de se sentir outillés et tenus de dispenser leurs cours quotidiens avec fidélité. Le problème est que le maintien d'un réseau étendu de coachs itinérants est coûteux, comme le souligne l'IPA. Rapport des meilleurs paris de 2023 ce qui met en lumière le coaching des enseignants comme une intervention prometteuse, pour laquelle des recherches supplémentaires sont nécessaires afin de déterminer comment obtenir un impact durable et à grande échelle.
De nombreux programmes d'alphabétisation de base à grande échelle de la dernière génération en Afrique, tels que ceux financés par l'USAID dans le cadre du Tous les enfants lisent Cette initiative s'appuyait sur des coachs externes. Dans les meilleurs cas, le personnel de district était formé, équipé de tablettes avec applications de coaching préchargées et chargé de visiter les écoles. L'approche a fonctionné, mais des questions subsistaient quant à la possibilité de généraliser un coaching de haute qualité au sein des administrations publiques.
Des recherches sur la mise en œuvre ont ensuite été menées. Un essai contrôlé randomisé Les résultats ont montré que les outils d'observation sur tablette pouvaient être utilisés pour garantir la qualité du coaching à grande échelle. Les programmes de coaching se sont avérés efficaces, mais… une analyse des coûts des programmes de lecture de l'USAID L'étude a révélé que le coaching représentait souvent le poste de dépense le plus important, voire le deuxième plus important, pour la mise en œuvre des programmes.
Les optimistes ont commencé à explorer le coaching à distance facilité par la technologie. En Afrique du Sud, Les premières études suggéraient que contacter les enseignants pourrait être une alternative viable, mais des données ultérieures ont montré que le coaching en présentiel était plus efficace.Ailleurs, au Sénégal, Le « télécoaching » s'est avéré rentableCe projet n'a finalement pas été retenu par le gouvernement, qui a préféré maintenir le statu quo en conservant un modèle d'interventions itinérantes ne permettant que des visites scolaires sporadiques. Cet exemple nous rappelle que l'économie politique, les incitations institutionnelles, et même la manière dont les preuves sont évaluées, influencent la mise en œuvre des réformes.
Aujourd'hui, face au recul de l'aide étrangère, la recherche de solutions rentables pour soutenir les enseignants dans le cadre de programmes de pédagogie structurée est devenue primordiale. La question que se pose désormais toute personne développant un tel programme est la suivante : Quelle version de ce programme les systèmes gouvernementaux pourraient-ils réellement fournir avec une qualité satisfaisante ?
L'organisation à but non lucratif Inspiring Teachers, active au Ghana, en Ouganda et au Malawi, utilise une approche itérative de conception et des programmes pilotes pour répondre à cette question dans le cadre de ses outils du programme d'amélioration des apprentissages fondamentaux (TFLI). Notre groupe de recherche, soutenu par IPA dans le cadre de l'initiative P4T-Ed et par le Laboratoire d'action contre la pauvreté Abdul Latif Jameel (J-PAL) via l'initiative « Apprendre pour tous », les accompagne dans cette démarche. Nous menons pour cela une série de tests A/B au sein d'un cadre d'essais contrôlés randomisés.
L'une des innovations du programme TFLI réside dans son approche de la pédagogie structurée qui intègre une dimension numérique : les enseignants, les chefs d'établissement et le personnel de terrain sont équipés d'une application appelée SmartCoachIl s'agit d'une application mobile fonctionnant hors ligne qui les aide à gérer et à suivre les évaluations des apprentissages des enfants, les visites scolaires et l'accompagnement des enseignants, tout en proposant des vidéos illustrant des pratiques pédagogiques clés. Parallèlement, les responsables du programme « Enseignants inspirants » et les agents gouvernementaux disposent d'un tableau de bord. La richesse et la mise à jour en temps réel des données relatives à la mise en œuvre du programme ouvrent de nouvelles perspectives de recherche. Notre étude actuelle s'est appuyée sur… SmartCoach données pour réaliser notre premier test A/B comparant deux modèles de livraison différents.
Une solution pour rendre le coaching plus rentable serait de le confier aux chefs d'établissement. Ces derniers (également appelés directeurs d'école aux États-Unis ou chefs d'établissement dans la plupart des pays anglophones) sont déjà responsables de la gestion des enseignants et de l'évaluation de leurs performances. Les amener à soutenir et à superviser leurs enseignants dans la mise en œuvre d'une pédagogie structurée constituerait donc un prolongement naturel de leurs responsabilités. Cependant, les chefs d'établissement ont de nombreuses autres responsabilités ; il est donc possible qu'ils ne fournissent pas actuellement de retour d'information aux enseignants sur leurs pratiques pédagogiques, et même s'ils le font, les inciter à le faire pour un nouveau programme pourrait s'avérer difficile.
Afin d'étudier le potentiel de cette approche, nous avons mis en œuvre un test A/B dans nos 40 écoles participantes, dans le cadre d'un essai contrôlé randomisé évaluant le programme TFLI « Inspiring Teachers » à Cape Coast, au Ghana. Les résultats de la première année de l'essai sont très prometteurs et seront publiés prochainement dans un document de travail.
L'idée derrière les tests A/B est de tester rapidement différentes variantes d'un programme afin d'optimiser ses performances.Ces tests sont largement utilisés dans le secteur technologique pour fournir rapidement des informations pertinentes plutôt que des résultats académiques rigoureux. Nous avons donc adopté un seuil de signification statistique initial plus bas pour ce test (70 % au lieu de 95 %), un résultat « significatif » orientant la décision quant aux options à privilégier. Nous avons prédéfini en interne les résultats à analyser (scores aux tests et qualité de l'enseignement), plutôt que de publier un plan d'analyse dans un registre public. comme nous l'avons fait pour l'essai contrôlé randomisé principalNous avons analysé les données de la même manière que nous le ferons pour notre étude principale, afin d'éviter de rechercher à tout prix des résultats significatifs.
Dans notre test A/B, nous avons réparti aléatoirement 20 écoles dans chacun des deux groupes :
Nous avons mené le test A/B pendant environ deux mois, du début mai 2025 à la fin de l'année scolaire en juin. À cette période, nous avons recueilli des données sur la fidélité du programme, la qualité de l'enseignement et les niveaux de lecture des enfants dans les deux groupes. Les données de ce test A/B provenaient de la même collecte de données finales que celle utilisée dans l'essai contrôlé randomisé principal : un ensemble d'évaluations de la lecture et d'observations en classe réalisées en juin 2025. Lors de ces observations, les enquêteurs ont noté si les enseignants mettaient en œuvre diverses activités et comportements pédagogiques pendant l'enseignement de la lecture.
La formation des chefs d'établissement a permis d'améliorer la qualité de l'enseignement de 10.6 points sur notre échelle de 0 à 100, mesurée par les observations des enquêteurs lors de l'étude randomisée contrôlée (ERC) à grande échelle (voir figure 1). Bien que la formation n'ait duré que deux mois, cet effet confirme notre seuil de signification interne (70 %) pour un changement de programme initialement prometteur. Que signifie cet effet ? Le groupe témoin a obtenu un score de 43.5 points sur notre échelle de qualité de l'enseignement, et le groupe expérimental a vu ce score augmenter de 24 %. Nous constatons que les gains de qualité sont principalement dus à la gestion du comportement et aux discussions en classe, ainsi qu'à d'autres effets importants, mais difficilement quantifiables, liés à la participation active des élèves aux discussions et à la vérification proactive de la compréhension des notions par les enseignants (voir figure 2).
Une analyse des données de l'essai contrôlé randomisé principal suggère qu'une amélioration de 0.54 écart-type de la qualité de l'enseignement pourrait entraîner une amélioration de 0.14 écart-type des résultats aux tests d'évaluation de la lecture en début de scolarité (EGRA), sur une année de mise en œuvre. Il s'agit d'une augmentation significative. aussi important que l'effet de l'intervention éducative médianemais provient d'un supplément relativement mineur à un programme existant.
Ce test A/B a démontré que former les chefs d'établissement en tant que coachs au sein de l'école peut améliorer la qualité de l'enseignement et aider les enseignants à mettre en œuvre une pédagogie structurée avec une plus grande fidélité.
Suite à ce constat, Inspiring Teachers a décidé d'intégrer une formation aux chefs d'établissement à un programme de soutien destiné à 80 écoles publiques du district métropolitain de Cape Coast en août 2025. Il s'agissait du premier de nos tests comparatifs, et nous préparons actuellement le prochain, qui portera sur l'implication des parents. Nos conclusions indiquent que les chefs d'établissement ont un rôle essentiel à jouer dans la réussite des programmes de pédagogie structurée.
Cette recherche s'inscrit dans le cadre d'une étude soutenue par la Fondation Jacobs et Innovations for Poverty Action via l'initiative Partnership for Tech in Education (P4T-Ed), ainsi que par le Laboratoire d'action contre la pauvreté Abdul Latif Jameel (JPAL) via l'initiative Learning For All. Le programme Inspiring Teachers TFLI a été créé grâce au soutien initial de la Fondation IDP et est actuellement déployé dans les écoles publiques en partenariat avec le Service de l'éducation du Ghana, avec le soutien du programme Impact at Scale Labs du Forum mondial des écoles et du Fonds Prevail.
