Défis de la mise en oeuvre des évaluations d’impact

1. Défis de la mise en oeuvre des évaluationsd’impact Accra, 10 au 14 Mai

2. Introduction • Discussions sur des casréels, rencontrés en Gambie, au Niger et au Sénégal; • Présentation des situations et essai de classification entre attrition, conformitépartielle, biais de sélection, etc; • Propositions de solutions (si possible).

3. Gambie • Ecoles du grouped’interventionn’ont pas reçu le financement pour certaines raisons; • Enseignants de quelquesécoles du grouped’interventionontétéaffectésdans le groupecontrôle et vice versa;

4. Niger • Quelquesécoles du groupecontrôleontreçu des livres; • Difficuléd’accès de certainesécoles en raison des pluiesdiluviennes ; Quelquesécolesontferméplutôtqueprévu; Les caractéristiques des deuxgroupessonttoujoursidentiquesmalgré les problèmes.

5. Sénégal • Quelquesécolestoujoursferméeslors des enquêtes. Paramètressécuritaires et géographiquesontconstitués des obstacles aux enquêtesdanscertainesrégions; Niveauxciblés absents danscertainesécoles. • 2 écoles du groupecontrôlesur 211 ontreçul’intervention; • Aucuneécole (parmi les 11 bénéficiaires) de touteunerégionn’areçul’intervention.

6. Autres menaces à la validité interne (1) • D’autres menaces à la validité interne concernent : • la qualité des donnéescollectées; • retards dans la mise en place de l’intervention; • temps écoulé entre l’enquête de base et l’enquête de suivi; • variables de résultats qui ne changent pas en réaction à l’intervention; • etc.

7. Autres menaces à la validité interne (2) • Mêmesi le design de l’évaluationestbienréalisé et quetoutes les précautionssontprises pour éviter les problèmesinitialementprésentés, on pourraittoujours se retrouver avec des donnéesdont la qualitépeutêtremise en cause; • Toujours se rappelerque des données sans qualitéinduiront de conclusions inappropriées et des et recommandations mal avisées.

8. Other threats to internal validity (3) • Problèmes de données au Sénégal: 3 questionnaires sur 5 étaient mal saisis; • Reprise de la saisie des données avec contrôle au fur et à mesure de la saisie.

9. Conclusion (1) • Etantdonné les coûts de l’évaluationd’impact, on devrait faire en sorte de se conformer au design initial; • Suivre de prèsl’implémentation, toutedéviation du plan initial pouvantconsidérablementinfluersur la qualité des résultats; • Faire les ajustementsaussitôtque possible.

10. MERCI!!!