Ressources pédagogiques sur les évaluations aléatoires
Summary
Ces 15 dernières années, J-PAL a proposé sa formation Evaluating Social Programs dans un certain nombre de lieux à travers le monde. Ce programme de cinq jours sur l’évaluation des programmes sociaux permet d’acquérir une compréhension approfondie des évaluations aléatoires et offre une formation pragmatique étape par étape pour mettre en place sa propre évaluation. En plus de la formation en présentiel, J-PAL met également à disposition une version gratuite en ligne du programme sur edX. La présente ressource référence les supports pédagogiques utilisés dans le cadre de cette formation et d’autres formations de J-PAL.
Pourquoi Évaluer
Cette conférence propose une introduction à l’évaluation d’impact, abordant notamment le type de questions auxquelles ce type d’évaluation peut répondre et expliquant comment s’assurer qu’elle s’appuie bien sur la théorie du changement.
Supports pédagogiques :
- Why Evaluate slides (2024)
Théorie du changement et mesure
Cette conférence aborde la définition et la mesure des principales variables de résultat, les différents types de données et leur source, ainsi que les biais que ces données peuvent comporter
Supports pédagogiques :
- Présentation « Measurement » (2019)
Études de cas sur l’élaboration d’une théorie du changement et l’identification de variables de résultats et d’indicateurs pertinents :
- Thérapie cognitivo-comportementale aux États-Unis (Étude de cas)
- Services financiers dans les villages en Inde (Étude de cas)
Pourquoi et quand randomiser
Cette conférence présente différentes méthodologies d’évaluation de l’impact et explique les avantages de l’évaluation aléatoire, ainsi que les facteurs qui influencent le choix d’une méthode d’évaluation plutôt qu’une autre.
Supports pédagogiques :
Études de cas illustrant les avantages de l’assignation aléatoire par rapport à d’autres stratégies d’identification :
- Campagne « Get Out the Vote » aux Etats-Unis (Étude de cas)
- Formation professionnelle en Colombie (Étude de cas)
Comment randomiser
Cette conférence montre en quoi la question de recherche détermine la stratégie de randomisation et explique comment une même étude peut répondre à plusieurs questions de recherche. Elle montre également qu’il est possible d’anticiper un certain nombre de problèmes et d’écueils potentiels au stade de la conception.
Supports pédagogiques :
Études de cas illustrant les façons dont le protocole de randomisation d’une évaluation peut être adapté en fonction de la (ou des) question(s) de recherche :
- Recrutement d’enseignants supplémentaires au Kenya (Étude de cas)
- Effets de déplacement des interventions d’accompagnement à la recherche d’emploi en France (Étude de cas)
Taille de l'échantillon et puissance statistique
La conférence sur la puissance et la taille de l’échantillon présente le concept de puissance statistique et passe en revue les facteurs qui l’influencent. Elle montre comment les différents types de protocoles de recherche présentés dans la conférence How to Randomize, ainsi que les variables de résultat décrites dans la conférence Measurement: Outcomes, Impacts, and Indicators, influencent la puissance de l’étude.
Supports pédagogiques :
Exercice de calcul de puissance :
- Exercice expliquant les arbitrages que nécessite la conception d’un essai randomisé doté d’une bonne puissance statistique, au moyen de l’application en ligne d’EGAP.
Considérations éthiques
Cette intervention propose des conseils pratiques aux chercheurs et professionnels pour intégrer une réflexion éthique dans la conception et la mise en œuvre de leurs études, tout en les aidant à appliquer ce cadre dans des situations concrètes.
Lecture materials:
Menaces et analyses
Cette conférence illustre certaines des difficultés qui peuvent survenir lors de la mise en œuvre d’une évaluation aléatoire, ainsi que les solutions mises en place par les chercheurs pour y faire face.
Supports pédagogiques :
Études de cas expliquant comment analyser et interpréter les résultats d’une évaluation aléatoire lorsque différentes menaces pèsent sur l’analyse, comme l’attrition ou la non-conformité :
- Traitement vermifuge au Kenya (Étude de cas)
- Formation et subventions salariales en Jordanie (Étude de cas)
Généralisabilité
Comment les résultats obtenus dans un contexte spécifique peuvent-ils servir de base à l’élaboration de politiques dans un autre contexte ? Cette conférence propose un cadre pour l’application de données probantes dans différents contextes
Supports pédagogiques :
Veuillez noter que les ressources pédagogiques référencées ici ont été conçues pour répondre à des besoins spécifiques en matière de recherche et de formation et ne sont mises à disposition qu’à titre informatif. Pour plus d’informations, veuillez nous envoyer un email.
Dernière modification : juillet 2020.
Ces ressources sont le fruit d’un travail collaboratif. Si vous constatez un dysfonctionnement, ou si vous souhaitez suggérer l'ajout de nouveaux contenus, veuillez remplir ce formulaire.
Ce document a été traduit de l’anglais par Marion Beaujard.
Nous remercions l’ensemble des équipes chargées de la formation, passées et présentes, de tous les bureaux de J-PAL pour leur aide dans l’élaboration de ces supports. Cette ressource a été traduite de l’anglais par Marion Beaujard. Toute erreur est de notre fait.