Défis de la mise en oeuvre des évaluations dimpact Accra, 10 au 14 Mai

Introduction Discussions sur des cas réels, rencontrés en Gambie, au Niger et au Sénégal; Présentation des situations et essai de classification entre attrition, conformité partielle, biais de sélection, etc; Propositions de solutions (si possible). 2

Gambie Ecoles du groupe dintervention nont pas reçu le financement pour certaines raisons; Enseignants de quelques écoles du groupe dintervention ont été affectés dans le groupe contrôle et vice versa; 3

Niger Quelques écoles du groupe contrôle ont reçu des livres; Difficulé daccès de certaines écoles en raison des pluies diluviennes ; Quelques écoles ont fermé plutôt que prévu; Les caractéristiques des deux groupes sont toujours identiques malgré les problèmes. 4

Sénégal Quelques écoles toujours fermées lors des enquêtes. Paramètres sécuritaires et géographiques ont constitués des obstacles aux enquêtes dans certaines régions; Niveaux ciblés absents dans certaines écoles. 2 écoles du groupe contrôle sur 211 ont reçu lintervention; Aucune école (parmi les 11 bénéficiaires) de toute une région na reçu lintervention. 5

Autres menaces à la validité interne (1) Dautres menaces à la validité interne concernent : –la qualité des données collectées; –retards dans la mise en place de lintervention; –temps écoulé entre lenquête de base et lenquête de suivi; –variables de résultats qui ne changent pas en réaction à lintervention; –etc. 6

Autres menaces à la validité interne (2) Même si le design de lévaluation est bien réalisé et que toutes les précautions sont prises pour éviter les problèmes initialement présentés, on pourrait toujours se retrouver avec des données dont la qualité peut être mise en cause; Toujours se rappeler que des données sans qualité induiront de conclusions inappropriées et des et recommandations mal avisées. 7

Other threats to internal validity (3) Problèmes de données au Sénégal: 3 questionnaires sur 5 étaient mal saisis; Reprise de la saisie des données avec contrôle au fur et à mesure de la saisie. 8

Conclusion (1) Etant donné les coûts de lévaluation dimpact, on devrait faire en sorte de se conformer au design initial; Suivre de près limplémentation, toute déviation du plan initial pouvant considérablement influer sur la qualité des résultats; Faire les ajustements aussitôt que possible. 9

MERCI!!! 10