Séminaire à Marrakech Évaluation de l’Université Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspectives: Historique Analytique Critique Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Historique CNAVES (1993) ENQA (2006) AGENCE D’ÉVALUATION ET D’ACCRÉDITATION DE L’ENSEIGNEMENT SUPÉRIEUR (Décret-Loi n.º 369/2007) [Prochain ECDU – Statut de l’Enseignant Universitaire] Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (I) Typologie: Individuelle et spontanée: à l’initiative du professeur Collectivement organisée (département, faculté) Institutionnelle (projet-pilote du rectorat – 2005) Organique: SGQP (2008) Objectifs: Évaluer la qualité (filières, facultés) Modes et conditions de fonctionnement Modèle d’enseignement / résultats de l’apprentissage Performance des enseignants (1er cycle) Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (II) (Évaluation collectivement organisée: FM / FCT) Méthodologie Traitement des résultats Aboutissements Typologie des questionnaires Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (IV) (Évaluation collectivement organisée: FM / FCT) Mathématique Méthodologie Questionnaires (anonymes) réalisés dans toutes les unités curriculaires en fin de semestre (enveloppe cachetée par un étudiant et remise à la Commission Scientifique) Traitement des résultats Lecture et analyse des résultats faites par le Président de la Commission Scientifique Résultats envoyés aux professeurs Résultats non publics Le président de la CS envoie aux professeurs de chaque année les moyennes des différents points sur lesquels ont été évalués les professeurs de la même année Requête des étudiants: résultats publics Le comité des étudiants de maths réalise, pour son compte, des questionnaires globaux et rend publics les résultats (sur internet et sur les murs de la fac) Médecine Méthodologie Questionnaires (anonymes) réalisés dans toutes les unités curriculaires en début d’année scolaire, dans le cadre des cours pratiques (70% / 90%), remis directement au professeur Traitement des résultats Lecture optique des résultats Résultats envoyés aux professeurs Résultats non publics Résultats discutés par les représentants des étudiants et les professeurs de la même unité curriculaire, après la réalisation d’un rapport par les étudiants commenté par les professeurs – en présence d’un “médiateur” Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (V) (Évaluation collectivement organisée: FM / FCT) Mathématique Aboutissements Questionnaires comme instruments de gestion et de détection de situations à corriger Intervention (de la part du président auprès des profs évalués négativement) Questionnaires E. quantitative: Cours théorique/pratique/discipline E. qualitative Médecine Aboutissements Questionnaires comme instruments de gestion et de détection de situations à corriger Titre attribué par les étudiants: « Le meilleur prof de l’année » Questionnaires Commentés et modifiés par les étudiants, avant leur diffusion Aspects généraux de la discipline/prof. des cours théoriques/prof. des cours pratiques/conditions physiques et d’encadrement curriculaire /auto-évaluation Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (VI) (Évaluation Institutionnelle) Projet-pilote mené au niveau central, en 2005, d’évaluation pédagogique de 4 filières: Mathématique, Histoire, Économie, Ingénierie Informatique Objectifs: création d’un instrument régulier d’évaluation de la qualité pédagogique / normes de correction du système Méthodologie: Constitution d’un groupe de travail avec des représentants de 4 filières évaluées (membres des conseils pédagogiques, professeurs et étudiants) Choix des indicateurs pour l’auto-évaluation de l’ensemble de la filière (par catégories) Sources d’information: documents officiels, statistiques des services, questionnaires. Traitements des résultats (équipe d’experts) Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (VII) (Évaluation Institutionnelle) Catégories d’indicateurs: Corps enseignant Étudiants École Performance de l’École Activité pédagogique Société Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (VIII) (Évaluation Institutionnelle) Corps enseignant: Effort - heures de contact, régime de travail (exclusivité…)… Formation – Doctorat, formation pédagogique, années d’expérience pédagogique, expérience externe, contact entreprise… Activité scientifique – publications, comités scientifiques, patentes, prix… Aspects pédagogiques – publications, stages, actions… Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (IX) (Évaluation Institutionnelle) Étudiants: Recrutement - attractivité, concurrence… Conditions économiques - étudiants travailleurs, boursiers, en résidence… Internationalisation… Effort - nombre d’heures de travail par unité curriculaire… Motivation/préparation – taux d’abandon, importance des classifications (oraux, répétitions…)… Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (X) (Évaluation Institutionnelle) École: Organisation – calendrier scolaire, horaires, heures de réception, inscription dans les cours pratiques, stages, publication d’un Guide, objectifs du cycle d’études, débouchés professionnels … Conditions matérielles et logistiques – appui technique, équipement, laboratoires, bibliothèques… Performance de l’École: Réussite/Échec scolaire… Satisfaction des étudiants… Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (XI) (Évaluation Institutionnelle) Activité pédagogique: Organisation – objectifs d’apprentissage de l’uc, adéquation de la bibliographie, méthodes d’évaluation… Conditions matérielles – nombres d’étudiants par classe, équipement par étudiant… Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (XII) (Évaluation Institutionnelle) Société Contact pendant la formation – activités culturelles, stages… Insertion professionnelle Acceptation – opinion des employeurs, adéquation de la formation… Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (XIV) SGQP- UC Niveaux d’analyse: enseignants, étudiants / unité curriculaire / filière (1er ou de 2ème cycle) /unité organique / Organes de gouvernement de l’UC Exigences: activités à développer / Indicateurs d’accompagnement (pour chacun des niveaux d’analyse) (45 act. /43 ind. ) Mécanismes de régulation et de stimulation (renforcement et reconnaissance / sanctions / corrections/ actions de perfectionnement) Responsabilité(s) de la mise en œuvre Contrôle du système (Création d’un Observatoire de la Qualité) Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (XV) (SGQP) Activités (contrôlées par): Prof responsable de l’unité curriculaire (élaboration de FUC/ mise à jour de l’information sur le WOC/réflexion sur l’unité curriculaire et son perfectionnement…) Directeur de la filière (réflexion sur le projet éducatif de la filière/ liste de filières de référence/coordination des activités pédagogiques / structure d’orientation pédagogique pour les étudiants…) Coordinateur de la mobilité (appui aux échanges au niveau international) Président du Conseil Pédagogique (normes générales sur le processus d’évaluation, calendrier d’examens…) Observatoire de l’employabilité (études sur l’emploi…) Observatoire de la Qualité (enquêtes auprès des anciens étudiants, rapport annuel, accompagnement et vérification des activités…) Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (XVI) (SGQP) Indicateurs: Profs: taux d’assiduité/interaction avec les étudiants/appréciation globale de la qualité du prof…. Unité curriculaire: taux d’étudiants évalués / taux de réussite/ moyenne des classifications obtenues / pourcentages d’étudiants qui s’inscrivent plus d’une fois… Filière: Taux de places remplies en 1ère année / note d’entrée / pourcentages de unités curriculaires assurées par des « profs » / moyenne d’années d’obtention du diplôme / taux d’abandon… Unité Organique: classement (national et international) / opinion des anciens étudiants / pourcentage d’étudiants qui, après le 1er cycle, restent dans l’UC / pourcentage de profs en interaction avec la société…. Organes de Gouvernement de la UC Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Analytique – UC (XVII) (SGQP) Indicateurs: Sources d’information: Base de données de l’UC – 36 Base de données du Ministère - 32 WOC – 16 Questionnaires: . étudiants – 40 . anciens étudiants - 12 . enseignants – 17 Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Critique (I) Questions: Quel crédit accorder aux évaluations par les étudiants (légitimité et portée)? Sont-ils à même d’évaluer pour le long terme ce qui leur est proposé? Quelle compétence détiennent-ils pour évaluer la qualité scientifique Quel pourcentage dans l’évaluation générale de l’université doit revenir aux étudiants? Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Critique (II) “Supposant, devant un jury d’enfants ou d’hommes aussi déraisonnables que le sont les enfants, une compétition qui mettrait aux prises un cuisinier et un médecin, sur le point de savoir qui des deux, du médecin ou du cuisinier, a compétence quant aux aliments utiles ou nuisibles, le médecin n’aurait qu’à se laisser mourir de faim!” Socrate, Gorgias de Platon Cristina Robalo Cordeiro

Séminaire à Marrakech Évaluation de l’Université Perspective Critique (III) Étudiant: juge ou témoin? Professeur: complaisant ou sévère? Plaire/instruire Séduire/former Cristina Robalo Cordeiro