La présentation est en train de télécharger. S'il vous plaît, attendez

La présentation est en train de télécharger. S'il vous plaît, attendez

QCM - QROC Serge Normand, M.A. Docimologue Faculté de médecine Bureau dévaluation Docimologie appliquée aux sciences de la santé Atelier.

Présentations similaires


Présentation au sujet: "QCM - QROC Serge Normand, M.A. Docimologue Faculté de médecine Bureau dévaluation Docimologie appliquée aux sciences de la santé Atelier."— Transcription de la présentation:

1 QCM - QROC Serge Normand, M.A. Docimologue Faculté de médecine Bureau dévaluation Docimologie appliquée aux sciences de la santé Atelier

2 Docimologie Faculté de médecine – Bureau dévaluation Atelier de formation pédagogique Normes recommandées pour la rédaction de questions de type QCM et QROC 1

3 Docimologie Faculté de médecine – Bureau dévaluation Atelier de formation pédagogique Lanalyse ditems une technique docimologique pour valider des questions dexamen 2

4 Faculté de médecine Bureau dévaluation Docimologie appliquée aux sciences de la santé Normes recommandées pour la rédaction de questions Serge Normand, M.A. Docimologue avec la collaboration de Michel Girard, MD, MHPE, FRCP(C) QCM QROC

5 Édition Références WOOD, Tim et Gary COLE, Lélaboration de questions à choix multiple pour les examens menant au certificat du Collège royal des médecins et chirurgiens du Canada, Septembre Directives pour lélaboration de questions à réponses courtes, Janvier CASE, Susan M. and David B. SWANSON, Constructing Written Test Questions For the Basic and Clinical Sciences, NBME, Philadelphia, La plupart des exemples citées proviennent de ces sources N B M E

6 Édition

7 Édition QROC Question à réponse ouverte courte

8 Édition QCM – Questions à choix multiples MCQ – Multiple-Choice Questions QCR – Questions à choix de réponses VRAI ou FAUX LA MEILLEURE RÉPONSE

9 Édition Classification des QCM Utilisation au NBME depuis 1953 … type A type B type K type R Rappel de connaissances Interprétation Raisonnement Contexte clinique Une réponse Association Regroupement Appariement

10 Édition Types de questions prônées par les organismes de certification ( QCM-A et QCM-R ) VRAI ou FAUX LA MEILLEURE RÉPONSE

11 Édition Difficultés observées avec le modèle VRAI ou FAUX QCM de type K Un enfant qui souffre dune crise aiguë de fièvre rhumatismale présente habituellement (1) un temps de sédimentation allongé (2) un intervalle PR allongé (3) un titre dantistreptolysine O élevé (4) des nodules sous-cutanés 1 F + 2 V C 1 V + 2 F B 4 V + 3 F D 4 F + 2 F B Difficile décrire des compléments absolument vrai ou faux sans tomber dans la futilité Principales critiques Difficile dévaluer le jugement clinique en terme de Vrai ou Faux

12 Édition Format dune QCM bien conçue Vignette ( Stem ) Question ( Lead-in ) Compléments ( Options ) Un patient de 32 ans se plaint de faiblesse des extrémités depuis 4 jours. Sa température est 37,8 C, son pouls est 94/min, sa PA 130/80 mmHg. La respiration est superficielle à 42/min. Il a une faiblesse symétrique des muscles du visage et des muscles proximaux et distaux des extrémités. La sensibilité est normale. Les réflexes ostéo-tendineux sont absents. Les réflexes plantaires sont en flexion. Parmi les diagnostics suivants, quel est le plus probable? A-Encéphalomyélite aiguë disséminée B-Syndrome de Guillain-Barré C-Myasténie grave D-Polyomyélite E-Polymyosite 1 2 3

13 Édition Gabarit dune QCM bien conçue Vignette Question Compléments Vignette (corps de la question) LONGUE Complément COURT Les compléments ne doivent pas transmettre de nouvelles informations Il ne devrait pas y avoir de verbes

14 Édition Caractéristique dune QCM bien conçue Vignette Question Un patient de 32 ans se plaint de faiblesse des extrémités depuis 4 jours. Sa température est 37,8 C, son pouls est 94/min, sa PA 130/80 mmHg. La respiration est superficielle à 42/min. Il a une faiblesse symétrique des muscles du visage et des muscles proximaux et distaux des extrémités. La sensibilité est normale. Les réflexes ostéo-tendineux sont absents. Les réflexes plantaires sont en flexion. Parmi les diagnostics suivants, quel est le plus probable? Compléments A-Encéphalomyélite aiguë disséminée B-Syndrome de Guillain-Barré C-Myasténie grave D-Polyomyélite E-Polymyosite On peut répondre à la question avant de lire les compléments

15 Édition Caractéristique dune QCM bien conçue Vignette Question Un patient de 32 ans se plaint de faiblesse des extrémités depuis 4 jours. Sa température est 37,8 C, son pouls est 94/min, sa PA 130/80 mmHg. La respiration est superficielle à 42/min. Il a une faiblesse symétrique des muscles du visage et des muscles proximaux et distaux des extrémités. La sensibilité est normale. Les réflexes ostéo-tendineux sont absents. Les réflexes plantaires sont en flexion. Parmi les diagnostics suivants, quel est le plus probable? Compléments A-Encéphalomyélite aiguë disséminée B-Syndrome de Guillain-Barré C-Myasténie grave D-Polyomyélite E-Polymyosite Continuum pour la meilleure réponse D C A E B La moins correcteLa plus correcte

16 Édition Choisir un contexte Une femme de 18 ans présente une aménorrhée primaire. Lequel des signes suivants oriente le mieux vers un diagnostic du syndrome de Turner ? A-Hypertension B-Hirsutisme C-Petite taille D-Épicanthus E-Organes génitaux externes normaux Sujet: Syndrome de TurnerContexte: Examen physique Une femme de 18 ans présente une aménorrhée primaire. À lexamen, vous observez quelle mesure 148 cm de hauteur. De plus, vous remarquez limmaturité de ses organes génitaux externes et labsence de développement des seins. Quel est votre diagnostic le plus probable ? A-Syndrome de Turner B-Dysgénésie gonadique mixte C-Dysgénésie gonadique pure D-Syndrome de Noonan E-Hermaphrodisme Sujet: Syndrome de TurnerContexte: Diagnostic

17 Édition Gabarits de questions QCM Le gabarit définit la structure globale dune question. Il est possible de créer plusieurs questions à laide du même gabarit. Par exemple, le gabarit suivant pourrait servir à rédiger une série de questions portant sur lanatomie macroscopique. Un (description du patient) est incapable de (incapacité fonctionnelle). Où se situe le plus probablement sa blessure? Voici une question qui pourrait être rédigée à laide de ce gabarit. Un homme de 65 ans a de la difficulté à se relever dune position assise et à redresser le torse, mais il na aucun problème à fléchir les jambes. La blessure se situe le plus probablement sur lequel des muscles suivants : A. Grand fessier B. Petit fessier C. Ischio-jambier D. Psoas-iliaque E. Obturateur interne

18 Édition Gabarits de questions QCM ( sciences fondamentales ) Plusieurs questions en sciences fondamentales peuvent être présentées dans le contexte dun scénario donnant le profil du patient, qui peut comporter certaines ou lensemble des composantes suivantes : Âge, sexe (par ex. un homme de 45 ans) Contexte des soins (par ex. se présente à lurgence) Plainte invoquée (par ex. à cause dun mal de tête) Durée (par ex. qui persiste depuis deux jours). Antécédents du patient (et de sa famille?) Observations physiques +/- Résultats des épreuves diagnostiques +/- Traitement initial, observations subséquentes, etc.

19 Exercice pratique Faculté de médecine – Bureau dévaluation Atelier de formation pédagogique Rédigez une question QCM de type A

20 Édition QROC – Questions à réponse ouverte courte QROC Il s'agit d'une question à laquelle on peut répondre en quelques mots ou phrases. Dans le cas dune question comportant des sous-questions, la réponse à chacune de celles-ci doit pouvoir être exprimée en quelques mots ou phrases. La QROC se distingue surtout de la question à développement court par le fait qu'elle n'exige qu'un seul élément d'information comme réponse. Nommez trois causes possibles de lindigestion : A)_________________________ B)_________________________ C)_________________________

21 Édition QROC – Questions à réponse ouverte courte Développement COURT La réponse à une question à développement court prévoit plusieurs éléments d'information alors que la QROC nexige qu'un seul élément d'information comme réponse Il faut différencier la question à réponse courte de la question à développement court qui prévoit une réponse plus longue et moins structurée (une ou deux phrases à un ou deux paragraphes). Voici un exemple,d'une question à développement court : « Discutez des avantages du traitement XYZ pour le problème ABC ».

22 Édition QROC – Questions à réponse ouverte courte Un malade âgé de 45 ans, atteint d'un cancer épidermoïde du nasopharynx, présente des métastases ganglionnaires qui compriment tous les nerfs qui traversent le trou déchiré postérieur d'un même côté de la base du crâne. Décrivez brièvement les TROIS signes neurologiques les plus probables chez ce sujet. a) ____________________________________3 b) ____________________________________3 c) ____________________________________3

23 Édition QROC – Questions à réponse ouverte courte Un malade âgé de 45 ans, atteint d'un cancer épidermoïde du nasopharynx, présente des métastases ganglionnaires qui compriment tous les nerfs qui traversent le trou déchiré postérieur d'un même côté de la base du crâne. Décrivez brièvement les TROIS signes neurologiques les plus probables chez ce sujet. a) ____________________________________3 b) ____________________________________3 c) ____________________________________3 POINTS a) Paralysie de la partie droite du voile du palais3 b) Paralysie de la corde vocale droite3 c) Paralysie du sterno-cleido-mastoïdien droit3 (perte du réflexe nauséeux ou pharyngé à droite)3 (difficulté à avaler à droite)2 Modèles de réponse

24 Exercice pratique Faculté de médecine – Bureau dévaluation Atelier de formation pédagogique Rédigez une question QROC avec modèles de réponses

25 Édition QCM QCM – Questions à choix multiples MCQ – Multiple-Choice Questions QCR – Questions à choix de réponses

26 Édition Question QCM de type A Quelle est la cause de mort la plus fréquente dans la pancréatite aiguë? A-Le choc. B-La fibrillation ventriculaire. C-Lhémorragie. D-Linfection. E-Lobstruction intestinale.

27 Édition Question QCM de type A (avec vignette) Un patient de 32 ans se plaint de faiblesse des extrémités depuis 4 jours. Sa température est 37,8 C, son pouls est 94/min, sa PA 130/80 mmHg. La respiration est superficielle à 42/min. Il a une faiblesse symétrique des muscles du visage et des muscles proximaux et distaux des extrémités. La sensibilité est normale. Les réflexes ostéo-tendineux sont absents. Les réflexes plantaires sont en flexion. Quel est le diagnostic le plus probable? A-Encéphalomyélite aiguë disséminée B-Syndrome de Guillain-Barré C-Myasténie grave D-Polyomyélite E-Polymyosite

28 Édition Question QCM de type B A-Coactation de laorte B-Persistance du canal artériel C-Tétrallogie de Fallot D-Anneau vasculaire aortique E-Atrésie tricuspidienne 1-Amélioré par une anastomose artérielle systémique-pulmonaire 2-Pathologie congénitale cardiaque cyanogène la plus fréquente 3-Corrigé par résection chirurgicale et anastomose bout-à-bout. 4-Cause possible de dysphagie chez lenfant 5-Hypertension dans les membres supérieurs et hypotension dans les membres inférieurs Directives Pour chacun des énoncés identifiés par un chiffre, associez une option identifiée par une lettre. Chaque option peut être choisie une seule fois, plus dune fois ou pas du tout.

29 Édition Question QCM de type K Un enfant qui souffre dune crise aiguë de fièvre rhumatismale présente habituellement (1) un temps de sédimentation allongé. (2) un intervalle PR allongé. (3) un titre dantistreptolysine O élevé. (4) des nodules sous-cutanés.

30 Édition Question QCM de type R Thème: A:Leucémie aiguë B:Anémie des mal. chroniques C:Insuffisance cardiaque D:Dépression E:Infection virus Epstein-Barr F:Déficit en folate G:Déficit en G-6-PD H:Sphérocytose congénitale I:Hypothyroïdie J:Déficit en fer K:Maladie de Lyme L:Anémie hémol. microangiopathique M:Tuberculose miliaire N: Déficit en vitamine B12 Compléments: Question: Pour chacun des patients, présentant de la fatigue, choisir le diagnostic le plus probable. 1.Une femme de 19 ans décrit de la fatigue, de la fièvre et un mal de gorge depuis une semaine. Sa température est 38,3C. Elle présente les adénopathies cervicales et une splénomégalie. Le décompte des leucocytes est 5000/mm3 (80% lympho. dont plusieurs présentent des atypies) … Autres labo... 2.Un garçon de 15 ans décrit de la fatigue et de la douleur au dos depuis 2 semaines. Il est couvert decchymoses, est pâle et ses vertèbres et fémurs sont sensibles à la palpation. Lhémoglobine est à 70 g/l, les leucocytes à 2000/mm 3 et les plaquettes à 15,000 mm 3. Fatigue Vignettes:

31 Édition Évaluer la compétence professionnelle Pyramide de Miller Fait Does Démontre Shows How Sait comment Knows How Sait Knows Source : Miller GE. The assessment of clinical kills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S7. Savoir Cognition Comportement Behaviour

32 Édition Évaluer la compétence professionnelle Types dinstruments Fait Démontre Sait comment Sait Source : Miller GE. The assessment of clinical kills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S7. Épreuves factuelles : QCM, Ex. écrit, oral … Épreuves à contenus cliniques : QCM, Q. dév., Ex. oral … Performance in vitro : ECOS, Ex. PS. … Performance in vivo : PS. incognito, Vidéo, Dossiers Portfolio …

33 Édition Instruments dévaluation Curriculum de Dundee Fait Démontre Sait comment Sait Source : DAVIS, M.H. OSCE: the Dundee experience, Medical Teacher; 2003; 25(3): Portfolio ECOS QCM-R QROC QCM Q. dév.

34 Édition Caractéristiques dune QCM bien conçue Vignette ( Stem ) Question ( Lead-in ) Compléments ( Options ) Un patient de 32 ans se plaint de faiblesse des extrémités depuis 4 jours. Sa température est 37,8 C, son pouls est 94/min, sa PA 130/80 mmHg. La respiration est superficielle à 42/min. Il a une faiblesse symétrique des muscles du visage et des muscles proximaux et distaux des extrémités. La sensibilité est normale. Les réflexes ostéo-tendineux sont absents. Les réflexes plantaires sont en flexion. Parmi les diagnostics suivants, quel est le plus probable? A-Encéphalomyélite aiguë disséminée B-Syndrome de Guillain-Barré C-Myasténie grave D-Polyomyélite E-Polymyosite D C A E B La moins correcteLa plus correcte

35 Documentation COLLÈGE ROYAL DES MÉDECINS ET CHIRURGIENS DU CANADA, Lélaboration dun plan directeur d'un examen ProMEDS, Janvier (Source : PDF)(Source : PDF) COLLÈGE ROYAL DES MÉDECINS ET CHIRURGIENS DU CANADA, Directives pour lélaboration de questions à réponses courtes, Janvier (Source : PDF)(Source : PDF) COLLÈGE ROYAL DES MÉDECINS ET CHIRURGIENS DU CANADA, Lélaboration de questions à choix multiples pour les examens menant au certificat du Collège royal des médecins et chirurgiens du Canada, Septembre 2001.(Source : PDF)(Source : PDF) CONSEIL MÉDICAL DU CANADA, Rédaction de problèmes à éléments-clé pour lexamen daptitude au raisonnement clinique (Q4), Septembre (Source : PDF)(Source : PDF) CASE, Susan M. and David B. SWANSON, Constructing Written Test Questions For the Basic and Clinical Sciences, NBME, Philadelphia, (Source : PDF)(Source : PDF) GIRARD, Michel et Serge NORMAND, Guide de lecture dun rapport danalyse ditems, Bureau dévaluation, Faculté de médecine, Université de Montréal, (Source : PDF)(Source : PDF) NORMAND, Serge, AnItem, Logiciel pour effectuer une analyse ditems via le chiffrier Excel, versions PC et Mac, Bureau dévaluation, Faculté de médecine, Université de Montréal, (AnItem.xls)(MacAnItem.xls) (Exemple de fichier de saisie.xls) (AnItem.xls)(MacAnItem.xls)(Exemple de fichier de saisie.xls) NORMAND, Serge, Lanalyse ditems, une technique docimologique pour valider des questions dexamen, Diaporama du mode demploi du logiciel AnItem, Bureau dévaluation, Faculté de médecine, Université de Montréal, (Source : PDF)(Source : PDF)

36 Diaporama Documentation Merci de votre attention !


Télécharger ppt "QCM - QROC Serge Normand, M.A. Docimologue Faculté de médecine Bureau dévaluation Docimologie appliquée aux sciences de la santé Atelier."

Présentations similaires


Annonces Google