Laboratoire de preuves intégrées du Ghana dans l'éducation

Après une décennie de partenariat et plus d'une demi-douzaine d'évaluations rigoureuses co-créées, à l'été 2019, le ministre de l'Éducation du Ghana de l'époque a décrit ce qu'il considérait comme la prochaine étape de la collaboration entre l'IPA et le ministère : "Vous devez intégrez-vous.

S'appuyant sur un modèle que l'IPA et ses partenaires ont piloté et construit au sein du ministère de l'Éducation du Pérou (MineduLAB, un laboratoire d'innovation qui fonctionne désormais de manière autonome au sein du bureau de suivi et d'évaluation du Minedu), l'IPA a relevé le défi du ministre de l'Éducation et a commencé à adapter le modèle de laboratoire intégré pour répondre aux opportunités du système d'éducation publique du Ghana. Ce dossier partage ce processus, les leçons apprises et jette un coup d'œil sur ce qui va suivre pour le laboratoire de preuves intégrées du Ghana.

Qu'est-ce qu'un laboratoire de preuves intégrées ? Les laboratoires intégrés sont des équipes de collègues de l'IPA et du secteur public travaillant côte à côte pour renforcer l'utilisation des données et des preuves dans les politiques publiques. Chaque laboratoire travaille sur une variété d'activités pour équiper les partenaires de l'IPA afin qu'ils utilisent régulièrement des preuves pour améliorer leur prise de décision, leurs politiques et leurs programmes. Considérez les laboratoires comme une API pour le gouvernement.

 

 

Les origines d'un partenariat d'apprentissage

L'IPA a établi une relation de longue date avec le ministère de l'Éducation du Ghana (MoE) qui remonte à 2008. L'IPA s'est d'abord associée au MoE du Ghana pour mesurer les impacts à court et à long terme de l'octroi de bourses d'études complètes et fondées sur les besoins aux élèves du secondaire par le biais de le programme d'enseignement secondaire du Ghana. Depuis 2008, l'IPA Ghana et le MoE ont collaboré à sept études, touchant près de 70,000 XNUMX apprenants.

La relation entre l'IPA et le ministère de l'Éducation du Ghana a progressé vers la signature d'un protocole d'accord avec le GES en 2017 et le ministère de l'Éducation en 2019. Les protocoles d'accord ont officialisé notre partenariat existant dans le développement d'évaluations rigoureuses des programmes d'éducation proposés, fournir des preuves empiriques crédibles à partir de programmes de recherche pour éclairer les décisions politiques et collaborer au renforcement des capacités du personnel dans les processus de recherche et d'évaluation.

Intégration et adaptation du modèle de laboratoire au Ghana

Dans le cadre de notre partenariat, l'IPA a un membre du personnel intégré au ministère de l'Éducation pour soutenir la capacité politique fondée sur des données probantes au sein du ministère. Ce membre du personnel intégré est soutenu par divers membres du personnel de la recherche, des politiques et de Right-Fit Evidence au sein de l'IPA pour fournir au ministère de l'Éducation toute la gamme des capacités et de l'expertise de l'IPA et commencer le transfert de cette expertise au ministère. Bien que l'approche initiale (inspirée de l'expérience de l'IPA au Pérou) consistait à fournir un appui technique à partir d'un point central au sein du ministère, il est devenu important de structurer notre soutien pour qu'il corresponde à la façon dont le travail du ministère est structuré : selon les lignes des programmes prioritaires de ses divers organismes et sous-groupes.
 

Comment la capacité des preuves intégrées peut-elle améliorer les résultats d'apprentissage ? (c'est-à-dire quelle est la théorie du changement pour atteindre un impact significatif ? L'objectif du laboratoire intégré est de permettre au ministère de l'Éducation de prendre des décisions fondées sur des données probantes qui améliorent les résultats d'apprentissage. Notre approche consiste à 1) améliorer les données et les capacités de recherche des agences du ministère et 2) institutionnaliser l'utilisation des données et des preuves pour éclairer la prise de décision. Le but ultime est d'améliorer les résultats scolaires. Notre travail avec les décideurs est basé sur des preuves : s'il a été démontré qu'un programme améliore les résultats d'apprentissage dans le contexte ghanéen, nous nous attendons à ce qu'il le fasse à mesure que nous le développons (ce qui « réduit » l'écart entre les décisions politiques éclairées et l'amélioration basés sur les résultats) – tant que le programme est mis en œuvre efficacement. Pour soutenir une mise en œuvre efficace, le laboratoire soutient le ministère dans la mise en œuvre axée sur les données via des pratiques de surveillance améliorées.

Partenaires et réalisations

1. Ghana Education Service : Apprentissage différencié fondé sur des données probantes pour de meilleurs résultats et un impact à grande échelle

En 2013, l'IPA s'est associée au ministère de l'Éducation du Ghana pour mettre en œuvre la première évaluation en Afrique de l'apprentissage différencié (AD). Cette évaluation a révélé des améliorations significatives en calcul et en littératie en moyenne, avec des variations régionales soulignant l'importance de la qualité de la mise en œuvre.

Fort de cette recherche, une deuxième étude, Strengthening Teacher Accountability to Reach All Students (STARS), mis en œuvre par le MoE et le Ghana Education Service (GES) avec l'assistance technique de l'IPA et l'assistance technique et financière de l'UNICEF, directement axé sur la question de la fidélité de la mise en œuvre et évalué une version améliorée de DL avec un accent particulier sur la gestion et la conformité du programme. Cette version a amélioré l'apprentissage des mathématiques et de l'anglais pour les élèves du Ghana, tout en améliorant la mise en œuvre du programme. Les gains de rendement des élèves dans le programme STARS d'un an étaient plus importants que ceux estimés pour les élèves du programme précédent qui ont fait l'expérience d'un apprentissage différencié dirigé par l'enseignant pendant deux ans.

En réponse à cette recherche, le ministère de l'Éducation du Ghana a intégré l'AD basé sur le modèle STARS dans le Ghana Accountability for Learning Outcomes Project (GALOP), un fonds de 219 millions de dollars de la Banque mondiale et du Partenariat mondial pour l'éducation. Le fonds financera la mise en œuvre et la mise à l'échelle de solutions éducatives efficaces dans 10,000 XNUMX des écoles les moins performantes du Ghana, atteignant plus de deux millions d'apprenants, une victoire pour l'élaboration de politiques fondées sur des données probantes au Ghana et dans le secteur de l'éducation.

L'IPA, via le laboratoire intégré et en partenariat avec l'UNICEF et d'autres, soutiendra GES dans la formation des enseignants des nouvelles écoles sur l'instruction DL et portera ce programme fondé sur des données probantes à l'échelle.

2. Conseil national des programmes et de l'évaluation : déploiement d'un nouveau programme avec prise de décision basée sur les données

En 2019, le Conseil national des programmes et de l'évaluation (NaCCA) au sein du MoE a déployé un nouveau programme de base pour les élèves de la maternelle à la 6e primaire à travers le Ghana. L'IPA a aidé NaCCA à développer des outils d'évaluation et à collecter des données, à les analyser et à générer des rapports pour la formation en vue du déploiement national du programme de base. Ces outils permettent à NaCCA de s'assurer que les enseignants sont bien préparés à utiliser le nouveau programme en identifiant et en comblant les lacunes dans les connaissances, les attitudes et les pratiques des enseignants. En fin de compte, cela conduira à l'amélioration des normes d'enseignement et des résultats d'apprentissage pour les étudiants au Ghana.

IPA a guidé NaCCA pour identifier des indicateurs mesurables et développer des outils de suivi qui guident l'amélioration de la formation au niveau national et des maîtres formateurs. Grâce à ce processus, NaCCA a compris la valeur du processus de suivi - comment cela leur a permis d'identifier et de combler les lacunes dans la formation qu'ils suivaient sur leur nouveau programme, et de déployer le nouveau programme dans un processus davantage axé sur les données. Cela les a amenés à investir leurs propres ressources dans la création de leur propre équipe de S&E. L'équipe de S&E de la NaCCA a ensuite formé les responsables du GES pour adapter le processus de S&E aux niveaux régional et du district.

L'équipe de S&E de la NaCCA a exprimé son intérêt à recevoir le soutien de l'IPA pour appliquer les leçons apprises afin d'éclairer la planification du S&E pour les programmes d'études des collèges et lycées. En 2020 et 2021, l'IPA a soutenu NaCCA dans la conception d'outils d'évaluation de la formation pour le déploiement du programme d'études du premier cycle du secondaire. Cette fois-ci, IPA a pu être beaucoup plus autonome, car NaCCA a dirigé une plus grande partie du processus, dirigeant davantage leur apprentissage.

3. Politique nationale sur les jardins d'enfants : doter le secteur de données probantes

Résultats de plusieurs évaluations de l'IPA sur l'éducation de la petite enfance (EPE), y compris le programme Fast Track Transformational Teacher Training (FTTT), École maternelle de qualité pour le Ghana (QP4G)et une Esprits vivants ont joué un rôle clé dans l'élaboration de la politique nationale d'EPE du ministère ghanéen de l'éducation, grâce à la participation de l'IPA à l'élaboration de la dernière politique. Les résultats des recherches de l'IPA ont éclairé les parties de la politique visant à renforcer la formation initiale et continue des enseignants, l'apprentissage par le jeu et l'engagement des parents.

Grâce à une coalition avec l'UNICEF, Saber Education, Lively Minds, GES et bien d'autres, construite pour garantir que la politique nationale d'EPE est éclairée par des preuves, la programmation fondée sur des preuves atteindra plus de 61,000 1.8 enseignants de maternelle et 25,000 million d'enfants dans plus de XNUMX XNUMX écoles .

4. Conseil national d'inspection : numérisation de la collecte de données pour identifier les écoles dans le besoin

Des inspections scolaires de haute qualité aident les ministères de l'éducation à identifier systématiquement les écoles nécessitant une plus grande attention. Avant l'implication de l'IPA, le NIB effectuait toutes les inspections scolaires à l'aide d'outils papier et ne disposait pas d'un système rigoureux d'échantillonnage des écoles à inspecter (potentiellement un suréchantillonnage des écoles faciles à atteindre ou à inspecter pour d'autres raisons). Pour atténuer ces défis, IPA a travaillé avec NIB pour soutenir la conception et le pilotage de l'outil d'inspection de classe KoBoCollect (numérique) et donner des conseils sur la gestion, la validation, l'analyse et la visualisation des données de l'outil. L'IPA a également soutenu la rédaction d'un plan de gestion et d'analyse des données qui décrivait les besoins en personnel pour assurer le bon fonctionnement du système de gestion des données.

Sur la base de cette expérience, le NIB a compris la valeur d'un système d'échantillonnage rigoureux ainsi que d'un processus de collecte et d'analyse de données plus robuste. Ils ont embauché un analyste de données pour gérer les données d'inspection et ont formé leur technicien informatique pour programmer les outils d'inspection sur KoBoToolbox. Le NIB a pu mettre en œuvre avec succès le premier cycle de son exercice d'inspection et proposer une analyse des résultats. En 2021, NIB a pu rédiger un outil d'inspection KG avec un soutien minimal de l'IPA.

5. Groupe de recherche sur le secteur de l'éducation

Le Groupe de recherche sur le secteur de l'éducation (ESRG) fournit une plate-forme pour hiérarchiser et mener des recherches sur les défis urgents en matière d'éducation et facilite les efforts du ministère de l'Éducation pour s'assurer que ses politiques et programmes sont fondés sur des données probantes. L'ESRG devrait approfondir et élargir l'apprentissage mutuel entre les décideurs et les chercheurs du secteur de l'éducation, et vise à accroître l'engagement avec les chercheurs locaux qui souhaitent s'assurer que leur recherche en éducation est pertinente pour les politiques.

L'IPA travaille avec le MoE pour mettre en place et faciliter l'ESRG, renforçant la capacité du MoE à connecter les décideurs et les chercheurs et à assurer l'utilisation des preuves générées par les activités de l'ESRG. L'IPA a aidé le ministère de l'Éducation à convoquer plusieurs réunions de l'ESRG au cours de l'année écoulée qui se sont concentrées sur le partage des résultats d'enquêtes sur l'impact du COVID-19 sur le secteur de l'éducation et sur l'élaboration d'objectifs pour les questions de recherche prioritaires. Le ministère de l'Éducation a maintenant invité les membres de l'ESRG, y compris l'IPA, à soumettre des propositions pour entreprendre des recherches sur certains des sujets de recherche prioritaires.

Il s'agit d'une activité stratégique pour le laboratoire, car elle sert à la fois à améliorer la capacité de recherche et de preuves au ministère, tout en augmentant l'appropriation de ces activités par le ministère. Alors que l'ESRG réunit le secteur de l'éducation du Ghana pour créer un consensus autour d'un programme de recherche, le laboratoire débloque des données sur l'éducation qui peuvent être largement utilisées pour poursuivre des projets sur ce programme de recherche co-créé. Nous espérons que cela se traduira par des décisions politiques fondées sur des données probantes et une amélioration de la prestation de services dans le secteur de l'éducation au Ghana.

Regard vers l'avenir

Les flux de travail du laboratoire intégré sont en cours, et l'IPA et le ministère de l'Éducation continuent de s'associer à d'autres acteurs de l'écosystème de l'éducation pour mettre à l'échelle des interventions fondées sur des données probantes, telles que l'enseignement différencié et l'apprentissage basé sur le jeu, afin d'atteindre des millions d'apprenants au Ghana. Grâce à ces expériences et à d'autres, le laboratoire continuera d'institutionnaliser le processus de génération et d'utilisation des données et des preuves, en continuant de transférer la propriété et la responsabilité de ces activités au ministère.

Transfert de propriété et stratégie de sortie

Le modèle d'assistance de l'IPA est axé sur la durabilité : construire des systèmes qui dureront plus longtemps que notre assistance directe. Pour les axes de travail individuels, cela a ressemblé à une élimination progressive de notre implication directe, dans approximativement le processus suivant : (a) mener des activités de S&E côte à côte avec l'agence ; (b) l'agence voyant la valeur des activités et embauchant/désignant son propre personnel pour ces activités ; (c) ce personnel de l'agence qui fait les activités avec notre soutien (cette fois l'agence est dans le "siège du conducteur", tandis que l'IPA observe et guide); (d) l'agence devenant confiante pour mener à bien ces activités, leurs systèmes ayant été développés pour le bon déroulement des activités. Ce travail nous a permis de voir comment notre partenariat à long terme et notre collaboration continue ont encouragé le ministère de l'Éducation à commencer à investir dans des politiques rigoureuses fondées sur des données et des preuves.

Cette stratégie de sortie a été couronnée de succès avec NIB et NaCCA, comme indiqué ci-dessus, et nous visons à faciliter un processus similaire avec d'autres agences, le MoE et le GES, en particulier lorsque les travaux de DL et ECE dirigés par GALOP sont déployés et mis à l'échelle. Comme nous le faisons avec MineduLAB, à long terme, nous resterons disponibles en tant que partenaire pour l'assistance technique, la conception et la mise en œuvre d'évaluations rigoureuses et complexes, et d'autres rôles que le secteur de l'éducation publique ne prendra pas en charge.

Qu'est-ce qui a été appris ? Adapter le modèle de laboratoire intégré au Ghana depuis le Pérou était possible et bénéfique, mais le contexte compte. Nous devions nous adapter à ce que nous savions du fonctionnement du MoE au Ghana, principalement par le biais de ses agences quelque peu décentralisées. Bien que l'idée d'une « unité de preuve » centralisée soit toujours un objectif, étant donné que la mise en œuvre des programmes et des processus d'éducation passe par ces nombreuses agences, il était important de commencer par des projets qui impliquaient ces agences et de démontrer des « gains » basés sur les données.   La co-création de la recherche est essentielle pour aligner les objectifs de recherche sur les besoins politiques et garder à l'esprit la mise à l'échelle dès le départ. Le billet de blog "Quand les gouvernements stimulent l'apprentissage" présente le projet STARS comme une étude de cas d'un projet de recherche appartenant au gouvernement et discute de l'importance de la conception et de la mise en œuvre d'un programme collaboratif, d'un contact continu avec les partenaires, ainsi que d'un suivi et d'une itération continus. Notre compréhension approfondie des priorités gouvernementales grâce à notre solide engagement par le biais du laboratoire de preuves intégrées nous permet de rendre notre recherche plus pertinente pour les politiques et de créer des opportunités continues de co-création de recherche avec le gouvernement - et d'augmenter la faisabilité de l'application de cette recherche à grande échelle .   Financement pour un soutien continu pendant la mise en œuvre de programmes fondés sur des données probantes est la clé de l'impact sur l'apprentissage. Les domaines prometteurs dans lesquels les laboratoires intégrés doivent se spécialiser incluent : Le Monitoring pour la mise en œuvre axée sur les données d'une programmation fondée sur des données probantes (y compris des ECR petits/agiles pour intégrer l'expérimentation afin de répondre aux questions de mise en œuvre) Assistance technique à la mise en œuvre que nous pouvons fournir aux partenaires en ayant soutenu la co-création de preuves (par exemple, soutenir l'intensification de l'apprentissage différencié au Ghana, après avoir travaillé sur deux ECR à grande échelle d'enseignement différencié dans les écoles publiques, pour s'assurer que les leçons de que la recherche est mise en œuvre à grande échelle).   Working : un espace de travail commun side-by-side avec des collègues du gouvernement positionne le ministère de l'Éducation pour intégrer durablement les processus dans l'élaboration des politiques d'éducation et la prestation de services de manière à durer plus longtemps que le projet lui-même. Cette approche contraste avec un modèle de conseil, dans lequel les consultants effectuent des travaux pour des partenaires de manière indépendante sans transfert de connaissances ni changement durable dans les données, les preuves et les pratiques décisionnelles du partenaire. L'approche de l'IPA est axée sur la création de structures et le renforcement des capacités internes, vers notre objectif à long terme d'institutionnaliser l'utilisation des données et des preuves pour la prise de décision. Nous avons vu cela réussir au Ghana, car les agences du ministère de l'Éducation ont commencé à voir la valeur du travail de S&E que le laboratoire a entrepris - et ont commencé à embaucher leur propre nouveau personnel pour prendre en charge ces projets, permettant à l'IPA d'effacer notre accompagner progressivement.