Passer le contenu
Project

« Educate Girls : améliorer les résultats d’apprentissage pour des millions d’enfants en Inde »

Notre collaboration avec Educate Girls a évolué au fil des années et offre un exemple de la manière dont des partenariats intégrés flexibles peuvent aider nos partenaires à amplifier leur impact grâce aux données et aux preuves.

 

 

Students in Jahazpur, Rajasthan, settle in for lunch during the Educate Girls development impact bond evaluation. (Photo by Ryan Fauber)

Le défi des décideurs

Notre collaboration avec Educate Girls a évolué au fil des années et offre un exemple de la manière dont des partenariats d’apprentissage approfondis et flexibles peuvent aider nos partenaires à amplifier leur impact grâce aux données et aux preuves.

Educate Girls (EG) est une organisation à but non lucratif basée à Mumbai, fondée pour améliorer l’inscription des filles dans les écoles primaires et secondaires publiques. L’organisation fournit également des services de tutorat et de soutien au programme scolaire grâce à des bénévoles communautaires.

Initialement, Educate Girls avait besoin d’un évaluateur pour concevoir et mener une évaluation d’impact sur trois ans afin de déterminer les retours financiers d’une obligation à impact social (DIB). Cependant, au fur et à mesure de notre collaboration, IDinsight et Educate Girls ont identifié d’autres domaines où les données pourraient les aider à maximiser leur impact à grande échelle.

Opportunité d’impact

Au-delà de l’opportunité d’impact direct liée à la mise en œuvre du programme, l’évaluation du DIB a permis à Educate Girls et aux financeurs potentiels de comprendre l’impact de leur travail et d’affiner leur modèle sur trois ans afin d’en maximiser l’efficacité.

L’évaluation de l’Obligation à Impact Social (2015 – 2018)

Jusqu’à quatre millions de filles âgées de 6 à 14 ans ne sont pas scolarisées en Inde. Même lorsqu’elles sont inscrites, de nombreux élèves n’acquièrent pas les compétences fondamentales, telles que la lecture et l’arithmétique de base. Dans le cadre d’une obligation à impact social, Educate Girls devait :

Atteindre 7 300 enfants dans 166 écoles réparties dans 140 villages à Bhilwara, Rajasthan.
Augmenter les acquis en apprentissage et accroître l’inscription des filles non scolarisées.
L’évaluation de l’obligation à impact social menée par IDinsight a permis à Educate Girls et aux financeurs potentiels de comprendre l’impact de leur travail. Les données ont également aidé Educate Girls à ajuster leur modèle pour en maximiser l’efficacité.

Le Partenariat d’Apprentissage (2018 – Présent)

À la suite de l’évaluation du DIB, Educate Girls a été sélectionnée comme récipiendaire du Projet Audacious 2019, ce qui permettra au programme de s’étendre à 35 000 villages dans le nord de l’Inde avec les objectifs suivants :

Inscrire 1,6 million de filles non scolarisées, soit environ 40 % de toutes les filles non scolarisées en Inde, dans les classes de 1 à 10.
Assurer la rétention de 1,4 million de filles nouvellement inscrites.
Améliorer les résultats d’apprentissage pour 1 million de filles et de garçons dans les classes de 3 à 10.

Former 100 000 adolescentes aux compétences de vie.

Améliorer la gouvernance scolaire et les infrastructures dans 40 000 écoles, desservant 15,1 millions de garçons et de filles.

IDinsight aide Educate Girls à atteindre ces objectifs dans le cadre d’un partenariat intégré. Alors qu’Educate Girls se développe, renforcer leur capacité à identifier, suivre et fournir des programmes aux filles améliorera les résultats éducatifs pour des millions d’enfants.

Notre approche

L’Obligation à Impact Social (The Development Impact Bond)

Dans le cadre de l’évaluation de l’obligation à impact social (DIB), nous avons mesuré deux résultats : les gains d’apprentissage des garçons et des filles en classes de 3 à 5, ainsi que l’inscription des filles non scolarisées.

Les gains d’apprentissage, qui représentaient environ 80 % des paiements finaux du DIB, ont été évalués à travers un essai contrôlé randomisé par village. L’inscription des filles non scolarisées, représentant les 20 % restants des paiements, a été mesurée par une évaluation avant-après dans les 141 villages où se trouvent les écoles traitées.

Le Partenariat d’Apprentissage

Alors qu’Educate Girls cherchait à renforcer la mise en œuvre de leur programme, ils ont vu une opportunité d’améliorer leur capacité à identifier et suivre les participants et à fournir des services éducatifs. Nous avons collaboré avec l’équipe d’EG sur une série d’améliorations pour aider à atteindre plus de filles non scolarisées pour le même coût.

Une partie importante de notre collaboration consiste à aider EG à décider où étendre ses opérations. EG voulait maximiser l’efficacité de leurs ressources en exécutant leur programme dans les régions avec la plus forte concentration de filles non scolarisées. Nous avons utilisé des algorithmes d’apprentissage automatique pour prédire les villages ayant une forte concentration de filles non scolarisées. Nos analyses ont révélé qu’environ 40 % des filles non scolarisées vivent dans seulement 5 % des villages. Nous avons travaillé avec EG pour intégrer cette information dans leurs plans d’expansion. En se concentrant sur ces villages, nous avons estimé qu’EG pourrait identifier et atteindre 600 000 filles supplémentaires tout en maintenant des niveaux de ressources similaires.

Nous appuyons également EG dans la construction de systèmes de suivi et d’évaluation légers, robustes et orientés vers la prise de décision, afin que leur équipe dispose d’informations de haute qualité et en temps opportun pour optimiser leurs opérations et prendre des décisions concernant l’inscription, la rétention et l’enseignement de plus de filles. Nous menons également une évaluation rigoureuse pour fournir des informations sur la capacité d’EG à améliorer les résultats.

Les résultats

L’Obligation à Impact Social

Nous avons constaté qu’Educate Girls a dépassé les objectifs du DIB en termes de gains d’apprentissage et d’inscription. Les effets du programme d’Educate Girls sur les gains d’apprentissage ont été importants et statistiquement significatifs sur les trois ans du programme :

  • Les élèves des écoles EG ont en moyenne gagné un niveau d’apprentissage supplémentaire de 1,08, soit 28 % et 0,31 écarts-types, par rapport aux élèves des écoles de contrôle.
  • À la fin du projet de trois ans, Educate Girls avait inscrit 768 filles non scolarisées, représentant 92 % de toutes les filles non scolarisées identifiées et éligibles à l’inscription.
  • Educate Girls a ainsi dépassé l’objectif d’inscription de 79 % de 16 %.

En plus de déterminer les paiements finaux, les résultats intermédiaires de l’évaluation d’IDinsight ont permis à Educate Girls de pleinement exploiter la flexibilité offerte par le dispositif DIB et d’effectuer des ajustements efficaces basés sur les données en cours de route. Le succès du premier DIB au monde a permis à Educate Girls d’obtenir davantage de financements pour étendre son programme éprouvé.

Le Partenariat intégré

Dans le cadre du Partenariat intégré qui a suivi, nous avons soutenu l’expansion d’Educate Girls de plusieurs manières :

  • Utilisation de l’apprentissage automatique : Nous avons utilisé le machine learning pour prédire le nombre de filles non scolarisées dans les régions d’expansion, orientant ainsi le ciblage du programme. Les prédictions d’IDinsight ont aidé EG à identifier et à s’étendre vers des villages avec 2,5 fois plus de filles non scolarisées par rapport aux villages précédemment desservis.
  • Renforcement des systèmes de suivi et d’évaluation (S&E) : Nous avons renforcé les systèmes de suivi et d’évaluation d’Educate Girls pour suivre la mise en œuvre du programme et mesurer les résultats ciblés. Nous avons formé leur personnel à l’utilisation du nouveau système et, en collaboration avec l’équipe Impact d’EG, recommandé des modifications des indicateurs suivis ainsi que des processus de collecte et de qualité des données. Nous avons également animé un atelier de Théorie du Changement pour un nouveau programme.
  • Création de tableaux de bord : Nous avons développé des tableaux de bord permettant le suivi en temps réel de l’expansion du programme et facilitant les ajustements en cours de route. Ces tableaux de bord, reliés aux systèmes de données backend d’Educate Girls, permettent de suivre :
    • leur enquête exhaustive de porte-à-porte dans les régions d’expansion (couvrant 8 millions de ménages),
    • l’inscription des enfants non scolarisés,
    • les problèmes de qualité dans les composantes du programme.
  • Transformation du système de vérification des inscriptions : IDinsight a aidé Educate Girls à passer d’un système papier à un système numérique pour la vérification des inscriptions des filles non scolarisées. Nous estimons que ces améliorations réduiront de 90 % le temps consacré par le personnel d’Educate Girls à la vérification des inscriptions, permettant une identification plus rapide des filles inscrites et une réallocation du temps du personnel vers la mise en œuvre des programmes.
  • Évaluation d’impact et vérification externe des données : Nous avons mis en place une évaluation d’impact et une vérification externe des données pour évaluer les progrès d’Educate Girls par rapport aux objectifs Audacious de 2020 à 2024. Ces activités fourniront des preuves causales de haute qualité sur l’impact du programme, orientant ainsi les ajustements nécessaires. IDinsight collabore avec Sambodhi pour concevoir et mettre en œuvre cette évaluation.