Lévaluation de limpact et les systèmes de données administratives N. Krishnan, C. Rockmore Initiative dévaluation de limpact en Afrique Dakar, 18 décembre 2008
Possibilités et défis La plus part des évaluations de limpact utilisent des données denquête Une occasion unique dans léducation pour lutilisation des données administratives et dexamens Un besoin daméliorer la qualité des données administratives Lintégration avec les données dexamens Etudes de cas
Sources de données Administratives Couvrent les bénéficiaires seulement Données de réalisations physiques et processus Données au niveau des établissements Systèmes en place, faibles couts supplémentaires Données dexamens Niveau individuel Information principale Enquêtes dans les écoles Validation indépendante Données complémentaires Données sur les réalisations physiques et le résultats Couteuses
Qualité des données administratives Pertinence: renvoi dinformations entre lEI et les autres Exactitude: identifier les problèmes systématiques Actualité: septembre ou janvier? Accessibilité: intégrable et utilisable? Intelligibilité: méthodes et documentation Cohérence: ca colle avec dautres sources?
Construire sur ce qui existe déjà Systèmes intégrés et modulaires Utilisations des identifiants communs pour les mêmes concepts (écoles, enfants, enseignants) Les identifiants (codes) doivent avoir un sens Harmonisation des efforts de collecte de données Considérer les plans dactions sectoriels et travailler dans ce cadre
Dévaluations en systèmes de données Erythrée: données complémentaires pour le palud Lévaluation de 2004 a commencé une base de données Le programme palud au Ministère de la santé a continué de le travail avec des données mensuelles sur les établissements Données sur les interventions (moustiquaires distribués, médicaments, insecticides par établissement et date) Données sur les fievreux pour les cas qui restent à lhôpital ou repartent
Utilisation des données administratives pour la distribution de fonds Niger: atténuation des fausses déclarations Fonds scolaires en fonctions de lutilisation des salles de classes pour éviter des problèmes liés au nombre délèves Ouganda Statistiques au niveau des districts pour distribuer les primes
Tableaux de bord Liens entre les intrants, les extrants et les résultats Comparaisons entre les niveaux administratifs Flux possibles dinformations vers les sources originelles Possibilité didentifier des cas faible moyens-grands résultats et grand moyens- faibles résultats
Utilisation des données dans les évaluations de limpact
Afrique du Sud Question EI: est-ce que les écoles « Dinaledi » ont amélioré les taux de scolarisation et les résultats en maths et sciences physiques par rapport à des écoles similaires? Résultat dintérêt: nombre détudiants inscrits, passants et réussissant les examens de fin de cycle en maths et sciences physiques Données: Informations caractéristiques écoles à partir des données administratives Données sur les résultats des centres dexamens Problèmes: Les codes pour les écoles et les centres dexamens ne sont pas les mêmes et nont pas de liens évidents Une école peut être associée avec plus dun centre dexamen et vice versa
Résultats de « Dinaledi » (Province de Gauteng) Taux de réussite par rapport aux inscriptions Ecoles « Dinaledi » (moyenne) Ecoles appariées (moyenne) Différence: Traitement - contrôle Niveau supérieur maths *** Niveau normal maths ** Niveau supérieur sciences physiques *** Niveau normal sciences physiques *** ***significatif au niveau 1%, **significatif au niveau 5%