Testing standardisé certificatif : l'apport d'une structure professionnelle dans la mise en oeuvre d'évaluations standardisées des acquis des étudiants.

Présentation au sujet: "Testing standardisé certificatif : l'apport d'une structure professionnelle dans la mise en oeuvre d'évaluations standardisées des acquis des étudiants."— Transcription de la présentation:

1 Testing standardisé certificatif : l'apport d'une structure professionnelle dans la mise en oeuvre d'évaluations standardisées des acquis des étudiants Assess Group ©

2 Christine Grégoire, professeur à l'ISELL Sainte Croix
Salvatore Tinnirello, Administrateur Délégué d’Assess Group Assess Group ©

3 Rencontre avec le SMART et Assess Group
Comment ai-je rencontré le SMART et Assess Group ? Pourquoi ai-je décidé de travailler avec eux ?  Massification des étudiants  Formation personnelle « lacunaire » en méthode d'évaluation  Souci d'accroître la qualité de mes évaluations Assess Group ©

4 Accompagnement Les aides que j'ai trouvées chez Assess Group
Le(s) type(s) de modalité(s) de questionnement que j'utilise Assess Group ©

5 Processus (1) Je commande mes formuLOMs via le site d' Assess Group : (Ex. de formuLOM). 2. Assess Group m'envoie, dans les 2 jours ouvrables suivant la réception de ma commande, mes formuLOMs vierges ainsi qu'une feuille pour paramétrer mon test. 3. J'envoie ensuite un fichier .xls reprenant les données relatives à mes étudiants (matricules, noms, prénoms...). Assess Group ©

6 Processus (2) 4. J'évalue mes étudiants.
5. Je dépose mes formuLOMs chez Assess Group et précise les particularités de mon test : le barème de cotation, le nombre de décimales pour les scores, les intitulés des rubriques matières ou processus mentaux éventuels, ... 6. Assess Group effectue une lecture optique de mes formuLOMs, traite mes résultats et crée mon fichier de résultats. Ce fichier comporte les scores des étudiants avec statistiques descriptives et courbes, ainsi que l'analyse de la qualité des questions. Processus (2) Assess Group ©

7 Processus (3) 7. Assess Group m'envoie la 1ère version de mes résultats. Il s'agit d'un fichier .pdf comprenant les scores des étudiants, l'analyse de la qualité des questions, les résultats et données statistiques du groupe (Exemple de résultats) 8. En fonction des informations reçues, j'améliore (ou non) mon test : suppression de questions, valorisation de distracteurs, ajustement de la sévérité, ... et envoie mes desiderata chez Assess Group. 9. Assess Group effectue alors les rectifications que j'ai demandées et me transmet la nouvelle version de mes résultats. Assess Group ©

8 Processus (4) 10. Si je considère la dernière version des résultats comme définitive, je le signale à Assess Group. Je reçois alors la version finale des résultats en format .xls. Sinon, la procédure reprend son cours à l'étape 8. 11. Si je le souhaite, des feedbacks individualisés pour mes étudiants peuvent être mis à disposition via le site Internet d'Assess Group. Assess Group ©

9 Avantages et inconvénients
Quels bénéfices retirer de ce processus ? Quelle perception de la qualité ? Quels inconvénients ? Conséquence du caractère payant du service proposé ? Quel impact au niveau institutionnel ? Quelle attractivité par rapport aux collègues ? Une traçabilité, gage d’un suivi de qualité Assess Group ©

10 Perspectives Comment aller plus loin dans le processus de suivi de la qualité de mes tests ? Autres types de services offerts par Assess Group Formation au cycle CGQTS (voir communications suivantes) Audit de table de spécification (Fiche pad-tds) Relecture formelle des questions (Fiche pad-qcm) Mise à disposition de Feed-back (exemple) Aide à la gestion d’un projet institutionnel lié à l’évaluation Assess Group ©

11 Merci pour votre attention
Assess Group ©

12 Assess Group ©