By Twisha Mehta ainsi que Brennan Shearer

[Note de l'éditeur : il s'agit d'une publication croisée avec Samasource.] 

Lorsque nous parlons d'essais contrôlés randomisés (ECR) en cours de développement, nous parlons souvent des conclusions d'un article universitaire. Mais un autre élément clé est la façon dont les partenaires réfléchissent au rôle que des évaluations d'impact rigoureuses peuvent jouer dans la réalisation de leurs objectifs d'apprentissage. Une partie sous-estimée d'un ECR réussi est l'adhésion organisationnelle interne que nos partenaires de mise en œuvre font pour fournir leurs services d'une manière conforme à la conception d'une évaluation rigoureuse. J'ai pu rattraper Twisha Mehta de Samasource, actuellement au milieu d'une évaluation de leur programme au Kenya, pour entendre le point de vue d'un partenaire sur les objectifs et les défis qu'ils ont rencontrés en cours de route. Samasouce fournit des données de formation sécurisées et de haute qualité et une validation pour l'IA. Ils comptent parmi leurs clients les entreprises technologiques les plus prestigieuses et servent des équipes technologiques qui font avancer l'humanité. En tant qu'adopteur précoce d'Impact Sourcing, le cœur du modèle commercial de Samasource est ancré dans l'impact social. Leur personnel a pour mission d'élargir les opportunités pour les personnes à faible revenu grâce à l'économie numérique.
 

Qu'est-ce que Samasource et quel est le programme évalué ?

Samasource est une entreprise sociale qui fournit des services de stratégie, d'annotation et de validation des données de formation aux entreprises technologiques. Nous avons des centres de distribution mondiaux en Ouganda, au Kenya et en Inde qui fournissent des services de données linguistiques et de vision par ordinateur à utiliser dans les algorithmes d'apprentissage automatique, tels que ceux utilisés dans les voitures autonomes et les applications de réalité virtuelle. Notre modèle d'entreprise repose sur l'idée que, lorsqu'il est combiné avec la plate-forme technologique appropriée, nous pouvons former efficacement une main-d'œuvre composée exclusivement de travailleurs issus de milieux à faible revenu et peu instruits pour fournir des services numériques de haute qualité à une qualité et à des prix compétitifs sur le marché. C'est l'idée directrice de notre programme de formation Apprentissage et Développement (L&D). Nous recrutons des étudiants pour rejoindre des camps d'entraînement de 10 jours dans les communautés à faible revenu de Nairobi, Kampala et Gulu. À la fin de la formation, ils sont éligibles pour postuler à des emplois dans nos centres de distribution mondiaux. Pour la plupart des stagiaires, il s'agit du premier emploi officiel qu'ils occupent. Le programme couvre les compétences numériques de base, les compétences professionnelles pertinentes pour le travail de l'IA.

Cet ECR vise à comprendre la valeur de la formation en tant que service autonome ainsi que la valeur de la formation en combinaison avec la possibilité de postuler à un emploi dans nos centres de prestation mondiaux.

(Voir IPA Résumé du projet pour une explication facile à digérer de l'évaluation d'impact.)
 

Pourquoi était-ce le bon moment pour une évaluation randomisée ? Qu'espérez-vous apprendre ?

En tant qu'entreprise sociale, nous sommes souvent confrontés au double défi de générer un impact social, tout en équilibrant les besoins commerciaux de croissance et d'échelle. Nous avons beaucoup appris en cours de route sur la façon de le faire efficacement. Investir dans notre impact est important pour nous pour plusieurs raisons. Premièrement, nous voulons créer plus de transparence sur ce que nous avons appris. Nous voulons changer la mentalité des entreprises du secteur privé qui croient qu'il faut choisir entre impact social et profit. Vous pouvez avoir les deux ! Nous avons pu constater à quel point le pouvoir d'un chèque de paie a transformé la vie des personnes que nous embauchons. De ce point de vue, nous voulons utiliser cette évaluation d'impact comme un point de preuve.

Deuxièmement, nous avons atteint un stade de maturité organisationnelle où nous avons une vision sans précédent de l'ensemble de notre chaîne d'approvisionnement. Les données font partie intégrante de notre ADN à mesure que nous grandissons et évoluons, et nous nous engageons à les utiliser pour un apprentissage continu. Sur le plan opérationnel, cela nous permet non seulement de poser des questions sur notre impact, mais également d'apporter des modifications à notre modèle de ciblage et de livraison en fonction de ce que nous apprenons.
 

Pouvez-vous décrire le processus de gestion d'un ECR au sein d'une entreprise rentable ?

En interne, nous avons eu le soutien de l'équipe de direction qui a reconnu l'analyse de rentabilisation du RCT - nous devions entreprendre cette étude afin de prouver l'efficacité de notre modèle d'entreprise et de prouver que les entreprises sociales peuvent prospérer dans le monde (et le soutenir avec des données d'impact rigoureuses !). Sur le plan opérationnel, le défi consistait à respecter les contraintes de notre activité axée sur la demande sans compromettre la qualité du service. Cela impliquait d'obtenir l'adhésion des équipes au niveau local et de travailler en étroite collaboration avec les équipes locales.

Quels étaient les défis ?

Notre principale préoccupation était notre réputation et le maintien de la confiance que nous avons bâtie dans les communautés dans lesquelles nous opérons. Il était très important pour nous d'être francs et transparents sur le processus d'étude avec les personnes que nous avons invitées pour nos camps d'entraînement d'apprentissage et de développement. . Pourtant, ce fut un changement difficile pour nos formateurs, qui travaillent en étroite collaboration avec les communautés dans lesquelles nous recrutons, pour informer les personnes qu'elles ont été placées dans le groupe de contrôle et qu'elles ne recevront aucune formation ni opportunité de postuler à des emplois chez Samasource. Pour atténuer toute perception d'injustice, l'équipe a décidé d'exécuter le processus de randomisation avec une loterie physique pendant les périodes d'inscription ouvertes. Cela a aidé les étudiants intéressés qui ont été placés dans le groupe témoin à comprendre que c'était simplement la chance du tirage au sort.

Pour atténuer toute perception d'injustice, l'équipe a décidé d'exécuter le processus de randomisation avec une loterie physique pendant les périodes d'inscription ouvertes.

Le deuxième défi majeur consistait à opérationnaliser la conception de la recherche. Après tout, nos services dépendent de la demande des clients et nous ne pouvons pas embaucher pour de nouveaux postes sans d'abord obtenir du travail. Nous avons travaillé en étroite collaboration avec nos différentes unités commerciales pour prévoir l'embauche en fonction de la demande des clients, puis avons travaillé avec les chercheurs pour planifier la recherche dans le cadre de ces contraintes.

Bons, mauvais ou laids, nous allons partager ces résultats et en tirer des leçons.

Quelle est la suite de cette évaluation ?

Chez Samasource, nous avons une forte culture axée sur les données dans toutes nos unités commerciales. Les données nous fournissent des preuves concrètes pour piloter des initiatives, comprendre leur efficacité et investir dans des idées qui fonctionnent. Le RCT est un investissement important pour notre entreprise. Bons, mauvais ou laids, nous allons partager ces résultats et en tirer des leçons. Nous savons que nous pouvons utiliser les résultats de cet ECR pour améliorer notre programme de formation afin d'approfondir notre impact positif en créant plus d'emplois numériques.

Lorsque nous avons commencé, Samasource était une idée apparemment farfelue : former et embaucher des jeunes marginalisés d'Afrique de l'Est pour faire du travail numérique pour certaines des plus grandes entreprises technologiques. Cependant, plusieurs bailleurs de fonds philanthropiques, dont la Fondation Rockefeller et la Fondation Mastercard, ont tenté leur chance et nous ont aidés à tester et à faire évoluer notre idée jusqu'à ce que nous atteignions la viabilité financière. Sept ans après nos débuts, nous avons atteint la viabilité financière - une étoile polaire insaisissable pour de nombreuses startups !

Maintenant que nous terminons notre dixième année en tant qu'entreprise, nous attendons avec impatience les résultats de l'ECR pour valider notre impact, créer une nouvelle littérature académique sur notre modèle et, plus important encore, fournir des preuves à nos premiers partisans que bien pensé hors de -les idées de la boîte valent la peine d'être investies ! (Avec les données d'impact bien sûr !)
 

Twisha Mehta est le responsable principal de l'impact chez Samasource. 

Brennan Shearer est responsable des politiques et des communications à l'IPA.