Je suis récemment tombé sur des croquis que j'avais faits il y a quelques années. Il s'agissait de dessins rudimentaires représentant un pêcheur dans un bateau avec de nombreuses lignes dans l'eau. Mais contrairement à un pêcheur normal, celui-ci n'a jamais ramené le poisson qu'il a accroché. Son travail, selon lui, consistait à expérimenter différents appâts, agrès et techniques pour voir ce qui ferait mordre les poissons. Mais il ne les a jamais enchaînés.

Lorsque j'ai réalisé les croquis, je travaillais depuis une décennie avec IPA sur des dizaines d'évaluations d'impact randomisées en Amérique latine et en Afrique, d'abord en tant que coordinateur de recherche et directeur de pays, puis en tant que chercheur principal. Mon rôle était une petite partie du mouvement mondial visant à utiliser des méthodes expérimentales pour tester l'efficacité des interventions conçues pour réduire la pauvreté, mais je craignais que nous n'en fassions pas assez pour transformer les leçons de ces tests en programmes et politiques qui amélioraient réellement la vie des gens. vies. Nous étions bons pour attraper du poisson, mais nous n'en avions pas assez dans le bateau et dans des assiettes pour les personnes affamées.

... Je craignais que nous n'en fassions pas assez pour transformer les leçons de ces tests en programmes et politiques qui amélioraient réellement la vie des gens. Nous étions bons pour attraper du poisson, mais nous n'en avions pas assez dans le bateau et dans des assiettes pour les personnes affamées.

Je reconnais que dans cette comparaison des pêcheurs aux évaluateurs d'impact, il n'est pas juste de s'attendre à ce que les évaluateurs s'assurent que les preuves qu'ils génèrent sont appliquées pour créer des programmes et des politiques efficaces. Mais si ce n'est pas leur travail, à qui appartient-il ? Et que faut-il pour ramener le poisson ?

De l'innovation à la construction d'approches prometteuses

Au cours des dernières années, l'IPA a redoublé d'efforts pour faire passer des interventions prometteuses fondées sur des données probantes des projets pilotes initiaux à des programmes et politiques évolutifs et adaptables. Comme le savent tous ceux qui travaillent dans le domaine du développement international, il s'agit d'un processus complexe. Les résultats prometteurs de la première évaluation d'impact d'une intervention suscitent non seulement de l'enthousiasme, mais peuvent également susciter plus de questions que de réponses. Dans quelle mesure les résultats sont-ils fiables et robustes ? L'étude originale était-elle valable en interne et suffisamment alimentée ? Pourquoi l'approche a-t-elle fonctionné ? Quel était le mécanisme ? Dans quelle mesure le résultat était-il dépendant du contexte ? L'intervention fonctionnerait-elle à plus grande échelle, avec d'autres exécutants ? Comment le rapport coût-efficacité de l'intervention pourrait-il être amélioré ? Et il y en a beaucoup d'autres.

Pour répondre systématiquement à ces questions, nous avons commencé à faire la distinction entre recherche sur l'innovation— des études de preuve de concept pour déterminer si une approche fonctionne — et ce que nous appelons recherche à grande échelle— le large éventail de recherches supplémentaires nécessaires pour adopter des approches prometteuses allant de la preuve de concept aux programmes et politiques évolutifs. La recherche à grande échelle commence par des approches fondées sur des preuves qui se sont déjà révélées prometteuses dans des évaluations d'impact rigoureuses et s'appuie sur ces approches prometteuses en recherchant des preuves supplémentaires sur la solidité des résultats originaux, quand, où et pourquoi une approche devrait travail et les moyens d'optimiser la conception et la mise en œuvre du programme à grande échelle. Les chercheurs en innovation accrochent le poisson et nous utilisons la recherche à l'échelle pour le ramener.

Bâtir sur l'innovation : le cas des courbes de croissance en Zambie

Pour illustrer ce concept, considérons un cas réel d'un poisson sur la ligne : des courbes de croissance pour réduire les retards de croissance des enfants en Zambie.

 

Günther Fink, Rachel Levenson, Pierre Rockeret Sarah Tembo testé des courbes de croissance à domicile dans les zones rurales de la Zambie pour améliorer la nutrition des enfants et réduire le retard de croissance. L'intervention consistait en une affiche de tableau de croissance grandeur nature installée dans les maisons des gens, avec un code couleur pour indiquer quand la croissance d'un enfant était défaillante. Les parents pouvaient mesurer périodiquement la taille de leur enfant et voir immédiatement si la stature de l'enfant était saine, mesurant dans la zone verte, ou en retard, indiquée en rouge par rapport à la population de référence en bonne santé de l'OMS.

Les chercheurs ont travaillé avec l'IPA pour mener un ECR sur les courbes de croissance dans l'est de la Zambie, où près de la moitié de tous les enfants avaient un retard de croissance. Parmi les enfants qui présentaient un retard de croissance avant l'installation des courbes de croissance, les chercheurs ont constaté une réduction de 22 points de pourcentage du nombre d'enfants encore atteints de retard de croissance dix mois plus tard par rapport au groupe témoin. Ceci a été réalisé sans fournir de compléments alimentaires ou de ressources supplémentaires autres que les courbes de croissance. Il y avait aussi un deuxième bras de traitement, utilisant un suivi communautaire, qui avait des résultats nuls. Vous pouvez lire sur les deux bras dans le document académique et IPA note de politique.

C'est une découverte passionnante. Les courbes de croissance semblent avoir conduit à une réallocation des ressources au sein du ménage au profit des nourrissons et des tout-petits à un moment crucial de leur développement. Une alimentation inadéquate au cours des 1,000 XNUMX premiers jours de la vie peut causer des dommages permanents au cerveau en développement d'un enfant et contribuer à réduire la productivité et le bien-être à l'âge adulte, de sorte que la réduction du retard de croissance constatée dans cette étude a le potentiel d'avoir un impact durable sur ces la vie des enfants. Mais que faire de ce résultat ? Devrions-nous le crier sur tous les toits et commencer à tapisser les murs des gens avec des affiches sur les courbes de croissance dans les zones où les taux de retard de croissance sont élevés ? Si nous avons réussi à attraper un poisson, que faut-il pour le ramener ?

Fiabilité, robustesse et potentiel d'évolutivité

Pour passer de cette seule étude dans l'est de la Zambie à un programme évolutif fondé sur des données probantes, nous devons répondre à plusieurs questions. Premièrement, quelle est la fiabilité de ces résultats ? L'étude était un essai contrôlé randomisé en grappes avec un total de 336 enfants dans 85 villages répartis entre le traitement et le contrôle. Ce n'est pas minuscule, mais ce n'est pas énorme non plus. Lorsque vous réduisez l'échantillon aux seuls ménages avec un enfant en retard de croissance au départ, il est encore plus petit. Donc, la méthode d'étude est solide, mais la taille de l'étude rend le résultat un peu moins convaincant.

Nous voulons également savoir si quelqu'un a vérifié de manière indépendante le travail des chercheurs. L'étude a été publiée dans une revue à comité de lecture, c'est donc un bon début, mais en plus de cela, l'IPA transparence de la recherche L'équipe, qui n'a pas participé à l'analyse des résultats de l'étude, a vérifié de manière indépendante le code d'analyse de l'équipe de recherche pour confirmer qu'elle produit les résultats publiés, ce qu'elle fait. Ils ont ensuite fait le données et code accessible au public sur le Datahub pour les expériences de terrain en économie et politique publique, le référentiel de données sécurisé utilisé par IPA pour publier des ensembles de données.

Une fois que nous sommes convaincus de la fiabilité d'une étude, il existe un autre ensemble de questions de recherche pour comprendre la robustesse des résultats, quels sont les mécanismes spécifiques qui conduisent au résultat, si et comment l'intervention pourrait être étendue, et les conditions de portée. pour une adaptation réussie à de nouveaux contextes. Ceux-ci constituent ce que nous appelons un programme de recherche à grande échelle.

Pour passer de cette seule étude dans l'est de la Zambie à un programme évolutif fondé sur des données probantes, nous devons répondre à plusieurs questions. Tout d'abord, quelle est la fiabilité de ces résultats ? ... [Ensuite] il y a un autre ensemble de questions de recherche pour comprendre la solidité des résultats, quels sont les mécanismes spécifiques qui conduisent au résultat, si et comment l'intervention pourrait être étendue , et conditions de portée pour une adaptation réussie à de nouveaux contextes. Ceux-ci constituent ce que nous appelons un programme de recherche à grande échelle.

Notre programme actuel : Construire les données probantes sur les courbes de croissance

Dans le cas des courbes de croissance, nous avons travaillé avec Günther Fink et Peter Rockers à partir de l'étude originale pour créer un programme de recherche à l'échelle. Une série de questions était liée à la compréhension du mécanisme derrière le succès de l'intervention. Comment les participants à l'étude ont-ils interagi avec les graphiques ? Les parents savaient-ils comment mesurer leurs enfants à l'aide des tableaux, en les alignant sur la ligne d'âge appropriée ? Savaient-ils comment interpréter la mesure ? Il y avait d'autres éléments sur les courbes de croissance qui n'étaient pas liés aux mesures telles que des images d'aspiration et des descriptions d'options alimentaires nutritives disponibles localement. Quel rôle ces autres éléments ont-ils joué dans le succès apparent de l'intervention ?

Pour tenter de répondre à ces questions, nous avons mené une étude de suivi qualitatif avec des participants du groupe de traitement initial. Nous avons mené quatorze groupes de discussion et 25 entretiens approfondis. Presque toutes les maisons que nous avons visitées avaient encore des courbes de croissance sur leurs murs trois ans après la fin de l'étude. Nous avons constaté que les femmes étaient capables de démontrer correctement comment mesurer un enfant et interpréter la mesure, mais que les hommes étaient beaucoup moins familiers avec la façon dont les graphiques étaient censés être utilisés.

D'autres questions dans notre programme de recherche sur la voie à l'échelle incluent : Quels sont les impacts à plus long terme des courbes de croissance à mesure que les enfants grandissent et pour les frères et sœurs plus jeunes nés après la phase de mise en œuvre ? Les courbes de croissance auraient-elles un effet similaire si elles étaient mises en œuvre dans d'autres régions de la Zambie à plus grande échelle et si elles étaient dirigées par le gouvernement ? Une version adaptée des courbes de croissance pourrait-elle être efficace en dehors de la Zambie dans des pays présentant des taux de dénutrition infantile tout aussi élevés ?

Au cours de la dernière année et demie, nous avons recherché des opportunités pour poursuivre le programme de recherche de la voie à l'échelle. La réplication de code par bouton-poussoir par l'équipe de recherche sur la transparence de l'IPA et l'étude de suivi qualitative mentionnée ci-dessus n'étaient que le point de départ. Nous avons également obtenu un financement pour deux nouveaux essais de courbes de croissance. L'un est en Zambie, travaillant avec le ministère de la Santé pour étendre et évaluer l'approche dans trois régions. Pour le second, nous nous sommes associés J-PAL Asie du Sud-Est adapter et tester une intervention sur la courbe de croissance en Indonésie.

Il s'agit d'un exemple de la manière dont l'IPA suit des données prometteuses et essaie de répondre systématiquement aux questions qui conduisent à des programmes et des politiques évolutifs et adaptables. Si les résultats de l'essai en Zambie sont positifs, notre partenaire gouvernemental sera en mesure d'étendre le programme à l'ensemble du pays, et si l'essai en Indonésie démontre que l'approche peut être adaptée à de nouveaux contextes, nous ne chercherons pas seulement à étendre l'approche en Indonésie mais aussi pour l'introduire dans d'autres pays aux prises avec une dénutrition persistante et un retard de développement.

Initiatives de recherche à grande échelle

Nous organisons ces initiatives de recherche à grande échelle pour des résultats ou des sujets spécifiques, tels que la croissance et le développement de l'enfant et les petites et moyennes entreprises. Chacune de ces initiatives comporte trois volets principaux.

1. Identifier des approches prometteuses fondées sur des données probantes à prioriser pour la recherche à grande échelle
2. Créer des programmes de recherche à grande échelle pour chaque approche prioritaire
3. Poursuivre les programmes de recherche en développant des partenariats et en collectant des fonds pour des projets de recherche à grande échelle afin de répondre aux questions du programme et de faire évoluer les approches fondées sur des preuves vers des solutions évolutives

Dans un prochain article, je soulignerai notre initiative de recherche à grande échelle sur la croissance et le développement de l'enfant et j'expliquerai ce que nous avons fait dans chacun de ces trois volets. Si vous êtes un chercheur ou un bailleur de fonds intéressé par la recherche à grande échelle, n'hésitez pas à contacter l'équipe de recherche Path-to-Scale à shenderson@poverty-action.org.