La présentation est en train de télécharger. S'il vous plaît, attendez

La présentation est en train de télécharger. S'il vous plaît, attendez

1 MASTER ECONOMIE ET GESTION Mention « Études du Développement » Expertise économique en politiques et projets de développement 02 novembre 2010 Evaluation.

Présentations similaires


Présentation au sujet: "1 MASTER ECONOMIE ET GESTION Mention « Études du Développement » Expertise économique en politiques et projets de développement 02 novembre 2010 Evaluation."— Transcription de la présentation:

1 1 MASTER ECONOMIE ET GESTION Mention « Études du Développement » Expertise économique en politiques et projets de développement 02 novembre 2010 Evaluation des politiques environnementales Séance 4 : Stratégie et outils dévaluation dune politique publique Institut dÉtude du Développement Économique et Social

2 2 La stratégie dévaluation dune politique publique La démarche méthodologique en évaluation Le choix dune stratégie dévaluation Approche quantitative et approche qualitative Le référentiel dévaluation Les outils dévaluation Lévaluation participative

3 3 Lessence de la démarche méthodologique « porter un jugement de valeur argumenté par des données ad hoc et des critères explicites » des critères explicites des données ad hoc une argumentation un jugement de valeur structurerobserveranalyserjuger

4 4 Exemple de démarche méthodologique des critères explicites des données ad hoc une argumentation un jugement de valeur structurerobserveranalyserjuger fréquentation exposition questionnaire échantillon élèves bénéficiaires extrapolation et analyse de données comparaison bénéficiaires/ non bénéficiaires

5 5 Contenu de la démarche méthodologique des critères explicites des données ad hoc une argumentation un jugement de valeur Structurer Questions Critères Indicateurs Observer Données Instruments Collecte Analyser Croisements Estimation Interprétation Juger / Critères / Normes Pondération

6 6 Des outils pour chaque étape de la démarche méthodologique des critères explicites des données ad hoc une argumentation un jugement de valeur outils de structuration outils d observation outils d analyse outils de jugement Boîte à outils des sciences humaines, sociales, économiques …

7 7 La stratégie dévaluation dune politique publique La démarche méthodologique en évaluation Le choix dune stratégie dévaluation Approche quantitative et approche qualitative Le référentiel dévaluation Les outils dévaluation Lévaluation participative

8 8 La stratégie dévaluation Démarche par laquelle : des « éléments de preuve » vont être produits pour porter le jugement de valeur sur la politique Stratégie ciblée Faisceau dindices

9 9 Les points de contrôle dune bonne stratégie dévaluation Rigueur Robustesse Faisabilité Coût Stratégie

10 10 La stratégie dévaluation dune politique publique La démarche méthodologique en évaluation Le choix dune stratégie dévaluation Approche quantitative et approche qualitative Le référentiel dévaluation Les outils dévaluation Lévaluation participative

11 11 Articuler le quantitatif et le qualitatif Quantifier Mesurer Largeur Valider Qualifier Comprendre Profondeur Explorer

12 12 La stratégie dévaluation dune politique publique La démarche méthodologique en évaluation Le choix dune stratégie dévaluation Approche quantitative et approche qualitative Le référentiel dévaluation Les outils dévaluation Lévaluation participative

13 13 Référentiel dévaluation QuestionsCritèresIndicateurs Descripteurs Indices Sources Outils Les résultats obtenus suite à la formation Evaluation sont-ils satisfaisants ? -Fréquentation- nombre formations - nombre participants -caractéristiques participants - fichier participants - Satisfaction- niveau de réponse aux attentes - niveau de satisfaction des participants - qualité de perception par le service Evaluation - fiches évaluation à chaud - debriefing service Evaluation - Partage- création dun vocabulaire commun - constitution dun réseau - enquête participants dispositifs - Utilisation-traces des concepts dans les documents du Conseil régional -fréquence de mention des concepts en réunion -optimisation du dispositif de tableaux de bord - entretiens évaluation à froid - analyse documentaire

14 14 La stratégie dévaluation dune politique publique La démarche méthodologique en évaluation Le choix dune stratégie dévaluation Approche quantitative et approche qualitative Le référentiel dévaluation Les outils dévaluation Lévaluation participative

15 15 Des outils pour chaque étape de la démarche méthodologique des critères explicites des données ad hoc une argumentation un jugement de valeur outils de structuration outils d observation outils d analyse outils de jugement Boîte à outils des sciences humaines, sociales, économiques …

16 16 Des outils à choisir outils de structuration outils d observation outils d analyse outils de jugement Boîte à outils des sciences humaines, sociales, économiques … Complexité: un public/plusieurs publics Compétences: technicité/savoir faire Acceptabilité: classique/innovant Coût: limité/élevé

17 17 Outils de structuration des critères explicites Structurer Questions Critères Indicateurs Analyse de texte SWOT Cadre logique Matrice dimpacts Diagramme logique dimpacts Typologies ….

18 18 Réalisation 4 Réalisation 5 Réalisation 2 Réalisation 1 Réalisation 3 Réalisation 6 Impact global 1 Impact global 2 Résultat immédiat 3 Résultat immédiat 4 Résultat immédiat 2 Résultat immédiat 1 Impact intermédiaire 1 Impact intermédiaire 3 Impact intermédiaire 2 Zoom sur un outil : le diagramme logique des impacts escomptés

19 19 Zoom sur un outil : la typologie x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x x famille A famille B famille C famille D famille E étude de cas A1 étude de cas E1 étude de cas D2 étude de cas B1 étude de cas B2 étude de cas A2 étude de cas C2 étude de cas C1 étude de cas D1 étude de cas C3

20 20 Outils dobservation des données ad hoc Observer Données Instruments Collecte Entretiens individuels Focus groupes Questionnaires Outils statistiques Outils de notation Etudes de cas ….

21 21 Zoom sur un outil : le focus groupe Toucher la diversité des individus Descendre en profondeur Comprendre les interactions collectives Valider par croisement Sélection Focus groupe 1 Restitution

22 22 Zoom sur un outil : le questionnaire par internet Décliner les critères en un ensemble de questions Rendre lensemble ergonomique Toucher lensemble de la population Relancer Exploiter automatiquement PréparationTestAdministrationExploitation

23 23 Outils danalyse une argumentation Analyser Croisements Estimation Interprétation Analyses statistiques Groupes de comparaison non expérimentaux Etudes de cas ….

24 24 Zoom sur un outil : létude de cas Observer sous divers angles Descendre en profondeur Comprendre la théorie daction Illustrer un type de comportement Préparation Documents Entretiens Observations Réunions Rédaction

25 25 Zoom sur un outil : les groupes de comparaison non expérimentaux Groupe de bénéficiaires Groupe non éligibles Groupe Éligibles non demandeurs Groupe Eligibles non acceptés Groupe Bénéficiaires avant

26 26 Outils de jugement un jugement de valeur Juger / Critères / Normes Pondération Analyse multi-critères Analyse coût-avantages Analyse coût-efficacité Groupes de comparaison expérimentaux Panel dexperts Benchmarking ….

27 27 Zoom sur un outil : le panel dexperts Discussion autour de différents points de vue Discussion autour de différents angles de vue Recherche dun consensus sur les analyses effectuées IdentificationConstitutionAlimentationRéunion(s)

28 28 Zoom sur un outil : le benchmarking Recherche de situations comparables, mais pas forcément homogènes Identification de la meilleure pratique Comparaison RechercheMise à platComparaison

29 29 La stratégie dévaluation dune politique publique La démarche méthodologique en évaluation Le choix dune stratégie dévaluation Approche quantitative et approche qualitative Le référentiel dévaluation Les outils dévaluation Lévaluation participative

30 30 De quoi parle-t-on ? Évaluation participative ? Évaluation pluraliste ? Évaluation citoyenne ?

31 31 Lévaluation participative Participer = prendre part … Qui prend part ? Agents publics ? Acteurs socio-éco ? Société civile ? Citoyens ? Un concept qui soppose à évaluation experte

32 32 Lévaluation pluraliste Introduit par P.Viveret en 1989 Commande de M.Rocard Porté par la Charte de la Société Française dEvaluation (2006) Permet la confrontation de points de vue entre les responsables de la politique évaluée les parties prenantes : experts, partenaires, groupes dintérêt, bénéficiaires Permet un jugement dévaluation co-produit par une pluralité dacteurs sur la base de critères pré-établis

33 33 Lévaluation citoyenne Avec participation de citoyens « ordinaires » Va au-delà de la simple collecte dinformations auprès de citoyens Acte élémentaire dévaluation Suppose une implication des citoyens dans le processus dévaluation : Décision Pilotage Jugement

34 34 Les participants potentiels à lévaluation Contribuables Habitants Décideurs Opérateurs Acteurs Décideurs Opérateurs Bénéficiaires Citoyens

35 35 Participer et contribuer Contribuables Habitants Bénéficiaires Citoyens Lévaluation suppose toujours la collecte dinformations auprès des bénéficiaires Lévaluation envisage parfois limplication des bénéficiaires dans le processus


Télécharger ppt "1 MASTER ECONOMIE ET GESTION Mention « Études du Développement » Expertise économique en politiques et projets de développement 02 novembre 2010 Evaluation."

Présentations similaires


Annonces Google