L’effet de testing sur les résultats scolaires :

Slides:



Advertisements
Présentations similaires
© 2012, Richard P PHELPSAssociation Mondiale des Sciences d'Education, 17th Congres, Reims, June, Leffet de testing sur les résultats scolaires.
Advertisements

L'effet de tests standardisés sur les résultats scolaires des élèves : Méta-analyses et résumé de la recherche Richard P. PHELPS Association Mondiale.
Chapitre 5 Interprétation des données d’enquête 1.
Chapitre 5 Interprétation des données d’enquête 1.
bidon/ Évaluateur d'articles.
Bilan de Compétences des Enfants a l’entrée en Primaire UNICEF WCARO.
ANALYSE D’ARTICLE - Questions à se poser Le test étudié est-il comparé à un test de référence (gold standard) ? Le test de référence est il correctement.
COMMENT INTÉGRER LE MULTIMODE TOUT EN CONSERVANT LA COMPARABILITÉ DANS UNE ENQUÊTE TRANSVERSALE RÉPÉTÉE SUR LA SANTÉ Jimmy Baulne et Robert Courtemanche.
RENTREE 2016 LA CLASSE DE 3ème
du plaisir dans l’apprentissage ?
Résultats de l’enquête annuelle
Colloque francophone sur les sondages 2016
Chapitre 4: Variation dans le temps
AG managers.
Valeurs de toutes les différences observables sous H0
Inégalités culturelles Réalités et perceptions
Quelles sont les origines du changement climatique ?
PRISE EN CHARGE DU DIABÈTE ET GROSSESSE A PROPOS DE 76 CAS
Principes, intérêts et lecture critique des méta-analyses ?
Accès aux soins Accès aux soins en temps utile
Optimisation de séquences: besoins et pratiques
Réflexion sur la signification de l’approche par compétences
Reprise du cours ( ) Aujourd’hui :
Qu’avez –vous pensez de l’Accompagnement Personnalisé que vous avez suivi durant cette année scolaire avec votre professeur de SDG ? 76,6% ont.
Chapitre 4: Variation dans le temps
Analyse temporelle des systèmes asservis
Congrès National de Chirurgie
Analyse Performance Chaine Energie + Problématique
La Conclusion.
Pour aller directement à la reprise du cours
Analyse du bulletin officiel Structuration des sujets,
Reprise du cours ( ) Au menu du jour :
Plans d’expériences: Plans factoriels.
Programme canadien de certification des matériaux d'emballage en bois
Mesure de température par radiométrie photothermique
Plan la séance 10 L’analyse des données qualitatives
E.DUVELSON, Y. BOUNOUARA, D. LEGROS
Evaluation de la formation
Introduction aux statistiques Intervalles de confiance
POL1803: Analyse des techniques quantitatives
d’une classe de Seconde
Réflexion sur la signification de l’approche par compétences
Notion de risque et mesures d’association
Congrès National de Chirurgie
Thèmes de convergence 10/11/2018.
Résultats PISA 2006 Quelques éléments
Véret Caroline Wacheux Emilie Wagmans Marie-Christine 2ième doctorat
A l’aide du triangle pédagogique de Jean Houssaye
Comment lire et écrire un article scientifique
Organisation et évaluation
FILIERE ÉLECTRONIQUE (ACADÉMIQUE ) Responsable : Pr. BOUCHEMAT Mohamed
Les facteurs de recours à la chirurgie chez les patients atteints de maladie de Crohn étude a propos de 55 cas s.Mesli** F.Benamara -A.Bedjaoui – M.
Ampleur de l’effet = 0,40 (Leithwood, 2011)
Améliorer la gestion de la douleur liée à l’IVG par aspiration en milieu extrahospitalier - Dr Evelyne Loxhay ULG
Présentation 4 : Sondage stratifié
Présentation 9 : Calcul de précision des estimateurs complexes
L’écriture d’un article scientifique
Article 51 - Loi de Financement de la Sécurité Sociale pour 2018
Présentation ÉSPÉ Journée chercheurs
L’architecture du nouveau lycée
Méthodes de collecte des données : Les données administratives
"#T'as joui ?..." Enquête sur le « Gap orgasm » entre hommes et femmes
Analyse des données et complémentarité des sources
LE NOUVEAU BACCALAURéAT
Humanités, littérature et philosophie
Dr. Atul PATHAK CHU et Faculté de Médecine de Toulouse
Sélectionner l’apprenti(e) Module 5
Humanités, Littérature et philosophie
Pelade Deux essais de phase 2 contrôlés, versus placebo, avec des inhibiteurs de JAK : Étude 1 : CTP-543 (anti-JAK 1 et 2) aux doses de 4 et 8 mg, 2x/jour.
Économie-Gestion LE bac 2021
Transcription de la présentation:

L’effet de testing sur les résultats scolaires : 1910-2010 Richard P. PHELPS © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Meta-analysés Une méthode pour résumer une littérature de recherche importante, avec une mesure unique et comparable. © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

L'effet de tests standardisés sur les résultats scolaires des élèves étude de 12 ans analysé a peu pré de 700 études unique, et plus de 1500 effets unique 2000 autres études étaient passé en revue mais pas inclus (jugées inappropriés d’inclure) centaines autres ne passeront pas en revue – il n’y a pas assez de temps ou d’argent © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Chercher les études d’inclure dans la méta-analyse On a inclus les études qu’ont trouvé en effet d’un test sur les résultats scolaires des élèves ou sur les enseignements des enseigneurs… © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études inclus dans la méta-analyse …quand: Un test est introduit de nouveau ou est enlevé La quantité de testing est augmenté ou est diminué Conséquences d’un test sont introduit ou sont enlevé © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études inclus dans la méta-analyse 3 Études inclus dans la méta-analyse 3. …plus les méta-analyse d’autres chercheurs (e.g.) Kulik, Kulik, Bangert-Drowns, & Schwalb (1983-1991) à propos de: testing pour obtenir le dessus sur le sujet, << mastery testing >> fréquence de testing, et programmes des étudiants universitaire redoublé Basol & Johanson (2009) à propos du fréquence de testing Jaekyung Lee (2007) à propos des administrations très grandes W.J. Haynie (2007) à propos de la formation © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Nombre d’études et d’effets, par type de méthodologie Nombre d’effets Quantitatives 177 640 Enquêtes et sondages d’opinion (EUA et Canada) 247 813 Qualitatives 245 TOTAL 669 1698 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Taille d’effet: d de Cohen d = (YE - YC) / Spool YE = moyenne du groupe expérimental YC = moyenne du groupe contrôlé Spool = déviation standardisé © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Taille d’effet: Autres formules d = t*((n1+n2/n1*n2)^0,5 d = 2r/(1-r²)^0,5 d = (YE avant-YE après-YC avant+ YC après)/Spool après © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Taille d’effet: Interprétation d entre 0,25 et 0,50  un effet faible d entre 0,50 et 0,75  un effet moyen d plus de 0,75  un effet fort © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études quantitatives (population couverture ≈ 7 million personnes ) © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études quantitatives : Taille d’effet Taille d’effet calcul << squelettique >> : d ≈ +0,55 …un effet moyen Taille d’effet squelettique réglé pour la fiabilité (a cause de l’erreur qui résulte du procès quand on mesure) d ≈ +0,70 …un effet assez fort Taille d’effet par chercheur d ≈ +0,88 …un effet fort © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Modérateurs important Group de Traitement (par contre le group de contrôle)… Taille d’effet moyen …connaissant de performance +0,98 …a enseignement spécialisé (e.g., tuteurs) +0,96 … conséquences de test plus fortes +0,87 …testing est plus fréquent +0,85 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Modérateurs – Origine de testing Nombre d’études Taille d’effet moyen Chercheur ou Professeur 87 0,93 National 24 0,87 Commercial 38 0,82 Régional 11 0,72 Total 160 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Modérateurs – Patronage de test Nombre d’études Taille d’Effet moyen International 5 1,02 Local 99 0,93 National 45 0,81 Régional 11 0,64 Total 160 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Modérateurs – Désigne d’étude Nombre d’études Taille d’effet moyen Pré-post 12 0,97 Expérience, Quasi-expérience 107 0,94 Multi variance 26 0,80 Expérience, post test 7 0,60 Pré-post (avec test parallèle) 8 0,58 Total 160 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Modérateurs – Taille d’étude Nombre d’études Taille d’effet moyen Agrégeât 9 1,60 Taille petite 118 0,91 Taille grande 33 0,57 Total 160 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Modérateurs – Taille d’administration Nombre d’études Taille d’effet moyen Salle de classe 115 0,95 Taille moyenne 6 0,72 Taille grande 39 0,71 Total 160 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Enquêtes et sondages d’opinion © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Pourcentage d’items d’enquête, par groupe de répondeur et type d’enquête © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Nombre et pourcentage d’articles d’enquête, par conséquence de test et le groupe affecté % Groupe affecté forte 507 62 Elèves 393 46 moyenne 184 23 Écoles 281 33 faible 4 Enseigneurs 116 14 pas connu 89 11 pas de conséquence 64 7 TOTAL 813 854 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Sondages d’opinion, par an 244 entre 1958 et 2008, aux États-Unis et en Canada 813 combinaisons uniques de question-réponse. a peut pré 700.000 réponses uniques d’individuels © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Enquêtes et sondages d’opinion : Tests standardisés simples et tests de performance Tests simples (N ≈125) Tests de performance (N ≈ 50) L’opinion des répondants d Connaissance des élèves est amélioré 1,2 1,0 …pondérée par la population de l’étude 1,9 0,5 Enseignement est amélioré 1,4 0,9 Tests aligne le programme scolaire © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études qualitatives : Résumé (On ne peut pas calculer un taille d’effet) © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études qualitatives, par méthodologie Méthode de recherche Nombre d’études % Dossiers 120 43 Expérimentes ou comparaisons avant-après 21 7 Entrevues (individu ou groupe) 75 27 Journaux 2 1 Revues des rapports officiels, enregistrements 33 12 Revues des recherches 8 3 Enquêtes 22 ÉTUDES TOTAL 281 100 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études qualitatives: L'effet sur les résultats scolaires des élèves 244 études menées depuis 100 ans aux plus de 30 pays Direction d’effet Nombre d’ études Pourcentage d’études Pourcentage pas inféré Positive 204 84 93 Positive inféré 24 10 Mélangé 5 2 Pas de change 8 3 4 Négative 1 ÉTUDES TOTAL 244 100 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études qualitatives : Le testing améliore les résultats scolaires et l’enseignement Connaissance est amélioré Nombre d’études % Oui 200 95 Résultats mélangés 1 <1 Non 10 5 ÉTUDES TOTAL 211 100 Enseignement est amélioré Nombre d’études % Oui 158 96 Non 7 4 ÉTUDES TOTAL 165 100 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Études qualitatives: Variation par rigueur et conséquence de test Direction d’effet Niveau de rigueur Études Total fort moyen faible Positive 95 67 42 204 Positive inféré 10 8 6 24 Mélangé 3 1 5 Pas de change 4 Négative ÉTUDES TOTAL 113 80 51 244 Direction d’effet Conséquence Études Total fort moyenne faible pas connu Positive 133 27 38 6 204 Positive inféré 12 5 7 24 Mélangé 4 1 Pas de change 2 8 Négative 3 ÉTUDES TOTAL 154 33 51 244 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Tests de performance (N = 69) Études qualitatives : Tests standardisés simples et tests de performance Tests simples (N =176) Tests de performance (N = 69) Résultats d’étude % En générale, positifs 93 95 Conséquences de test fortes 71 42 Rigueur d’étude fort 46 48 Attitudes des élèves positives 60 Attitudes des enseigneurs positives 55 80 Connaissances des élèves amélioré Enseignement amélioré 92 100 Nombre des élèves important 86 68 © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Une littérature de recherche énorme Mais, prétentions que la littérature n’existe pas de toute sont communes Quelques prétentions sont fait par ceux qui opposent le testing standardisé qui prennent leurs désirs pour la réalité Autres sont << prétentions de premierité >> © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Revues des recherches dépréciant Avec une revue de la littérature de recherche dépréciant un chercheur assure tout le monde que n’importe qu’autre chercheur a fait une étude sur le même sujet © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Prétentions de premierité Avec une prétention de premierité, un chercheur insiste qu’on est le premier à étudier un sujet © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

Les coûts sociaux Les recherches des faibles sont perdu; les résultats qui restes sont favorables aux puissants Décisions politiques sont basés sur leurs résultats On paie encore et encore pour recherches déjà fait © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012

L’effet de testing sur les résultats scolaires : 1910-2010 Richard P. PHELPS © 2012, Richard P PHELPS Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 2012