Analyse critique des méthodes d'évaluation

Présentation au sujet: "Analyse critique des méthodes d'évaluation"— Transcription de la présentation:

1 Analyse critique des méthodes d'évaluation
de l'impact de la microfinance François Cajot – 14 Octobre 2005

2 II - Les études d’impact social de la microfinance
Table des matières I - Présentation de PlaNet Finance Belgique/België II - Les études d’impact social de la microfinance III – Le suivi-évaluation du client (client monitoring) IV – La mesure de la performance sociale V- Conclusion

3 I. Présentation de PlaNet Finance Belgique/België
PlaNet Finance Belgique/België constitue une association internationale sans but lucratif (AISBL), membre du réseau PlaNet Finance dont la mission est de réduire la pauvreté de manière durable en développant la microfinance dans le monde. Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion

4 Introduction PlaNet Finance Etude d’impact Suivi du client
Les activités de PlaNet Finance visant à développer le secteur de la microfinance : Soutien aux réseaux de microfinance. Portails de la microfinance afin d’augmenter la visibilité du secteur. Création de centrales des risques afin de minimiser le surendettement des clients. Mesures d’impact et de marché régional de la microfinance dans la lutte contre la pauvreté. Création de centres de formation et de ressources. Conseil aux banques commerciales: création d’activités de microfinance (fonds/ développement de produits). Conseil aux gouvernements afin de développer un secteur performant. Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion

5 Introduction PlaNet Finance Etude d’impact Suivi du client
Les activités de PlaNet Finance pour aider les IMF : Service de soutien en nouvelles technologies : don d’équipement informatique, formation à l’utilisation de l’outil informatique, création et hébergement de sites Internet. Service de formation et de renforcement des capacités: e- learning, ateliers de formation dans les centres de formation et de ressources. Service de rating et d’évaluation : par l’agence de rating autonome de PlaNet Finance: “Planet Rating”. Service de financement : le fonds de crédit rotatif (FCR) de PlaNet Finance fournit des prêts aux jeunes IMF à haut potentiel. Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion

6 II. Les études d’impact (EI) social de la microfinance
L’EI se focalise sur des liens de causalité pour déterminer les transformations (planifiées et non planifiées) résultant de la participation à un programme de microfinance. Elle réalise une comparaison entre des clients et des non-clients, ce qui lui fournit des informations sur des changements possibles, au sein de variables sélectionnées préalablement. Introduction PlaNet Finance Étude d’impact Suivi du client Performance sociale Conclusion The conception of an IA is divided is 5 steps: 1. Understanding the context and the conceptual framework 2. Choosing objectives: 3. Deciding the global approach 4. Developing indicators The Fifth and last step of the process Selection of tools to collect data is discuss in the second chapter

7 Quantitative Qualitative Participative Méthode quasi-expérimentale
Interviews qualitatives Observations directes Etudes de cas Participative Techniques visuelles Méthodes de dynamiques de groupe Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion Quantitative Qualitative Qualitative interviews Direct observation Case studies Participative Visual techniques Group and team dynamics methods

8

9 Continuum Prouver l’impact Vs Améliorer l’impact
Force: Etude de grande ampleur Rigueur scientifique (modèle économétrique complexe, etc.) Faiblesse : Coûts très élevés Pas d’implication de l’IMF Étude quantitative Subjectivité dans l’interprétation des résultats Force : Utile pour les IMF Offre de services compatibles avec la demande des clients Implication des IMF dans le processus de l’EI Méthodes adaptable aux besoins des IMF Faiblesse : Coûts élevés Complexité des méthodologies pour les IMF (besoin d’aide extérieure) Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion During the last decate, the IA has been drifing from op form using meanly quantitave methods. The point of those study was to prove the impact of microfinance rather than improve it. Nowaday, the IA methodologies use a mixte of the different techniques depending of their needs. The finality of those impact assessment is to improve the impact rather than prove it.

10 Impact de la microfinance Problèmes de remboursement
IKM - Etudes d’impact et de marché 1- Etude de marché 2- Connaissance des clients 3- Evaluation d’impact Modules d’étude : Accès au crédit Impact de la microfinance Capital social Satisfaction Demande financière Ménages et activités économiques Clients sortants Problèmes de remboursement Concurrence

11 On ne fait pas ici de comparaison entre clients et non-clients.
II. Le suivi-évaluation des clients Le suivi du client rassemble des informations fournies seulement par les clients de l’IMF sur des variables standardisées, et cela sur une base régulière. On ne fait pas ici de comparaison entre clients et non-clients. Le suivi du client se base sur un petit nombre d’indicateurs qualitatifs. Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion The methods used to do the client monitoring is to collect information's provide by the clients of the MFI on standardised variables and on a regular basis. No comparison between client and non client is done. Can be use to determine people reach by the program. Can be use to follow the change in the life of clients each time they come to the institution.

12 Exemple FCAMC Maroc Identification - nom et prénom ; niveau d’instruction, situation de famille ; nombre d’enfants ; enfants scolarisés ; logement : propriété, location ou autre ; si location : durée de location et valeur locative ; description du logement. Activité principale et activité secondaire - nature : production, commerce ou service ; description de l’activité ; lieu d’exercice de l’activité ; nombre d’années d’expériences ; autres sources de revenus ; revenu familial mensuel. Endettement montant de crédit : objet financé ; montant de l’échéance ; date de la dernière échéance. Indicateur de suivi : Investissements ou stocks additionnels réalisés après le premier prêt (évolution du patrimoine) ; chiffre d’affaire et nombre d’employés (amélioration des indicateurs d’activités) ; charge familiale (amélioration des conditions de vie) ; importance des demandes et des montants des prêts accordés (évolution de la taille de la TPE) ; Taux de recouvrements des prêts accordés pour l’activité (bonne santé de l’activité).

13 IV. La mesure de la performance sociale
La performance sociale est la mise en pratique effective des objectifs sociaux d'une institution visant à améliorer les conditions de vie des clients pauvres et de leur famille, et à étendre la gamme d'opportunités de leur communauté. Performance ≠ Impact Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion Différences entre mesure de la performance sociale et étude d’impact Structure Evaluation au niveau de l’organisation THe Third part of the thesis focus on the SPI. The SPI deal with relations of the organisation with its clients and otherstakeholders. Following the Structure-Conduct-Performance (SCP) paradigm of industrial organization, the impact of an organization on socio-economic and environmental dimensions follows from its structure, conduct and performance and is influenced and/or conditioned by the external environment of the organization. Impact assessment is very difficult because of the problem of methodology. Indeed, IA have to face problem such attribution (isolate the impact of microfinance), fongibility (hard to verify the affection of the credit in the budget of a household) , selection bias, ect. Gestion Performance Impact Evaluation au niveau du client

14 Bailleurs de fonds (prouver) Praticien (améliorer)
Comparatif de l’étude d’impact, le suivi du client et la mesure de la performance sociale Etudes d’impact Suivi du client Initiative SPI Pour qui ? Bailleurs de fonds (prouver) Praticien (améliorer) Personnel, bailleurs de fonds, investisseurs Pourquoi ? Pour comptabiliser et aider à la répartition des fonds publics/améliorer la connaissance de la clientèle Pour permettre une planification stratégique Monitoring de la mission Quand ? Selon les cycles de financement En permanence Régulièrement Quoi ? Estimation rigoureuse de l’impact sur des clients types Profil des divers types de clients et façon dont ils sont touchés par les services Mesure de la performance sociale de l'IMF Par qui ? Chercheurs universitaires, spécialistes (prouver)/ implication des praticiens (améliorer) Personnel et consultant locaux Ensemble des parties prenantes This last part of work is divided in two section First we determine by whom, why, when and for whom these methods are realised We then study the way these methods are applied, according to which criteria, with which funding, indicators and level of evaluation.

15 Importance de la rigueur plutôt que de la rentabilité
Critères Importance de la rigueur plutôt que de la rentabilité Importance de la confiance, mais rentabilité cruciale Rentabilité Financement Bailleurs de fonds, différents contrats Interne, au sein de l’organisme Méthodes employées Méthodes quasi-expérimentales, enquêtes avec échantillon, interviews qualitatives, observations directes, études de cas, méthodes participatives visuelles et de dynamique de groupe Fiches de suivis, enquêtes sur des échantillons représentatifs, groupes de discussion Enquêtes remplies au sein de l'IMF par un groupe de discussion Nombre d’indicateurs Analyse statistique ou interprétation par des experts des données qualitatives Confirmation ou questionnement constant des principes de base de l’organisme Confirmation ou questionnement des principes de base de l’organisme Niveaux d’évaluation De un à plusieurs niveaux en fonction du niveau de rigueur recherché Au niveau de la clientèle Au niveau de l’institution

16 I. Conclusion Le bailleur de fonds financerait une étude d’impact basée sur l’amélioration de l’impact, en aidant l’institution à développer une meilleure connaissance du marché et de ses clients. Elle permettrait de générer une réflexion au sein de l’organisation en suscitant le débat et la participation. Riche de cette expérience, l’organisme pourrait ensuite mettre au point ou améliorer son Management Information System par un suivi du client basé sur les indicateurs pertinents développés par l’étude. Un audit de la performance économique et sociale serait réalisé régulièrement afin d’assurer un suivi des résultats financiers de l’organisation et de maintenir les objectifs de la mission sociale. Introduction PlaNet Finance Etude d’impact Suivi du client Performance sociale Conclusion Following the literature as interviews of professionals working into the Belgian development sector have strengthened our analysis perspectives. It has helped us define, compare and critic the different evaluation methods of the impact of microfinance. Eventually, We conclude by saying that the optimal efficiency of the impact evaluation is reached when combining different methods. Financed by donors, an IA who aim to improve impact, could help to better know the market and its clients. It could to start discussion in the MFI to arouse debate and participation. Rich of this experience, the MFI could integrated into his MIS (Management information system) a client monitoring based on relevant indicators developed during the Impact assessment. Finally, coupling the social performance to an economic audit could prevent mission drift.

17 MERCI POUR VOTRE ATTENTION PlaNet Finance Belgique/België
Avenue Louise Bruxelles Belgique Tel.: + 32 (0) Fax: + 32 (0) Site Web: