Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh Case study Titre: Mesurer la qualité de vie et la participation sociale Thématique spécifique: Mesurer les effets sur la qualité de vie et la participation sociale des bénéficiaires de HI et de ses partenaires Présentée par: Stéphanie Legoff, Responsable Pôle Impact, Suivi & Evaluation, Direction des Ressources Techniques Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Qualité de vie: Définition et enjeux La qualité de vie devenue l’un des enjeux majeurs du développement et de la solidarité internationale Cependant: Diversité des approches et des modèles Termes qualité de vie/ bien-être/ participation sociale souvent confondus Pas de consensus scientifique sur la définition qualité de vie… … mais deux constats communs: → La qualité de vie est un concept subjectif → La qualité de vie est un concept multidimensionnel Une définition large proposée: « La perception qu’à un individu de sa place dans l’existence, dans le contexte de la culture et du système de valeurs dans lequel il vit, en relation avec ses objectifs, ses attentes, ses normes et ses inquiétudes » Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Description du contexte Au sein d’Handicap International: Références à la qualité de vie et participation sociale de plus en plus fréquentes dans les objectifs des projets de HI et mentionnées comme un indicateur positif; Conduite d’études (ex: Etude d’impact Togo) et développement d’outils par les projets (ex: Projet Tiga, Cambodge) Besoin croissant d’un cadre et d’une méthodologie de référence Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh Description du projet Le Pôle Impact, Suivi & Evaluation, en collaboration avec le Pôle Management des Connaissances (Recherche) a mis en place un projet afin de construire un outil : Permettant la mesure de la qualité de vie des bénéficiaires adultes Adapté à la majeure partie des projets Adapté aux divers contextes d’intervention Validé scientifiquement Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Etapes principales de l’étude Revue littéraire et analyse des principaux modèles et approches sur la qualité de vie (développés en externe) Collecte et analyse des études et outils développés par les projets (15 outils et études, 2 projets de recherche en cours) Entretiens avec des acteurs HI et questionnaires partenaires sur les perceptions de la qualité de vie et les attentes autour de l’outil Pré-test au Sénégal de la version 0 auprès de personnes avec incapacités intellectuelles Test terrain au Sénégal de la version 1 (60 bénéficiaires interviewés) Présentation au Comité de Suivi Ajustement du questionnaire : version 1 Finalisation du questionnaire: Version finale Rédaction du protocole d’étude et du kit méthodologique Questionnaire initial : version 0 Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Description du questionnaire 5 dimensions consensuelles de la qualité de vie Nombre questions Modalités de réponse Santé physique et mentale (SPM) 3 5 Relations sociales et personnelles (RSP) 4 Bien-être subjectif (état pyscholog.) (BES) 7 Besoins de base (environnement) (BB) Bien-être matériel (BEM) 2 2 dimensions supplémentaires   Perception de la sécurité (PS) Participation sociale et familiale (PSF) 6 SCORE TOTAL EFFETS PROJETS 28  - Questionnaire complété par un module sur les informations socio-démographiques Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Description du questionnaire Des points de discussion sur la composition du questionnaire : Une dimension Estime de Soi: plusieurs échelles ont été proposées et une testée (échelle de Rosenberg) mais des problèmes de terminologie et de structure des questions ont amenés la suppression de cette dimension du questionnaire Dans la dimension Participation Sociale et Familiale: une question sur la citoyenneté a été testée et sera révisée Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Déroulement du terrain-test de la version 1 Etude encadrée par laboratoire de recherche Lieu d’étude: zone urbaine, Dakar (Sénégal) Echantillon d’étude: 60 individus adultes (41.7 % incapacités physiques, 35% incapacités sensorielles, 23,3% VIH) 2 phases de terrain: 1ère phase- 2 enquêteurs formés (30 interviews), 2nde phase- 2 enquêteurs HI et partenaires accompagné par 1er binôme (30 interviews) Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Résultats du terrain-test de la version 1 Score de santé physique et mentale légèrement plus élevée que la moyenne théorique. Il apparaît donc que les individus de notre échantillon sont en bonne santé. Score de relations sociales et personnelles plus élevé que la moyenne théorique. Score de bien-être subjectif obtenu est plus élevé que la moyenne théorique. Accès aux besoins de base présente un score très légèrement plus élevé que la moyenne théorique. Cependant, cet accès demande clairement à être amélioré. Score de bien-être matériel bien moins élevé que la moyenne théorique. Score de perception de la sécurité est un peu plus élevé que la moyenne. Score de participation sociale et familiale de l’échantillon est bien supérieur à la moyenne. Score sur la qualité de vie (5 dimensions) = 51,8/100 Score total outil (7 dimensions) = 55,3/100 Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Challenges de l’utilisation de l’outil Outil pour les adultes, Outil testé en zone urbaine La formation des enquêteurs : formation solide et recrutement externe (non HI et partenaires) La traduction du questionnaire: 1) en langue locale, (2) interprétation langage des signes L’accessibilité du questionnaire et de sa passation (pré-test) La caractérisation des individus interviewés dans le module Informations socio-démographiques L’interprétation des changements: analyse des facteurs externes, inclusion d’une population contrôle? Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh Prochaines étapes Finalisation du kit méthodologique (utilisation du questionnaire, organisation de l’enquête, formation des enquêteurs et analyse des résultats) Test dans des pays anglophones, hispanophones et autres régions (baseline de projet) 2014 : Guide méthodologique : « Comment évaluer les effets des projets de HI et de ses partenaires sur la qualité de vie et la participation sociale des bénéficiaires? » Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh

Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh Discussion Pour quels types de projet (contexte d’intervention, populations cibles, etc.) cet outil peut-il être utilisé? Quels sont les facteurs de succès et points de vigilance pour l’utilisation d’un tel outil? Séminaire Evaluation d'impact du 2 au 6 décembre, Phnom Penh