240 likes | 386 Views
Faculté de médecine Bureau d’évaluation. Consolider nos pratiques en évaluation des apprentissages Est-ce que la docimologie peut nous aider ?. Serge Normand, M.A. 20-24 mars 2006. Certifier Aider Motiver. Question préalable. Qu’attendez-vous de l’évaluation ?.
E N D
Faculté de médecine Bureau d’évaluation Consolider nos pratiques en évaluation des apprentissages Est-ce que la docimologie peut nous aider ? Serge Normand, M.A. 20-24 mars 2006
Certifier Aider Motiver Question préalable Qu’attendez-vous de l’évaluation ? Rien, sinon une corvée dont je souhaiterais bien être dispensée !
Première séance Évaluer les apprentissage: repères Regards sur nos pratiques actuelles Normes de rédaction des épreuves écrites Deuxième séance Grilles d’observation Analyse d’items Nos activités
Pertinence Pertinence Pertinence Pertinence par rapport à la matière enseignée du type de compétences mesurées de la formulation des questions de la notation Quels sont les défauts de nos examens ? Réponses des étudiants :
Objet Mesures Résultats Protocole Quels sont les critères pour apprécier nos examens ? Réponses des docimologues : Validité Fidélité Commodité
Mieux planifier l’évaluation Varier les instruments de mesure Respecter certaines règles docimologiques Fixer des critères de performance Améliorer nos pratique en évaluation ? Quelques pistes de solution:
Cognitif Savoir Connaissances Domaines de comportements observables(pour mesurer des objectifs d’apprentissage) Affectif Savoir être Attitudes Psychomoteur Savoir faire Habiletés
Connaissance Mémoriser Taxonomie simplifiée(pour mesurer des objectifs d’apprentissage) Compréhension Interpréter Application Solutionner
Tableau de spécification Source : jean-louis.brazier@umontreal.ca
Knowledge Base Référence : SMITH, Stephen R. and R. Dollase, Planning, implementing and evaluating a competency-based curriculum, AMEE Education Guide 14, Outcome-based Education, Center for Medical Education University of Dundee, 1999
Knowledge Base Référence : SMITH, Stephen R. and R. Dollase, Planning, implementing and evaluating a competency-based curriculum, AMEE Education Guide 14, Outcome-based Education, Center for Medical Education University of Dundee, 1999
Évaluer la compétence professionnellePyramide de Miller Comportement Behaviour Savoir Cognition Source :Miller GE. The assessment of clinical kills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S7.
Évaluer la compétence professionnelleTypes d’instruments Performance in vivo : PS. incognito, Vidéo, Dossiers Portfolio … Performance in vitro : ECOS, Ex. PS. … Épreuves à contenus cliniques : QCM, Q. dév., Ex. oral … Épreuves factuelles : QCM, Ex. écrit, oral … Source :Miller GE. The assessment of clinical kills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S7.
Portfolio ECOS QCM-R QROC QCM Q. dév. Instruments d’évaluationCurriculum de Dundee Source : DAVIS, M.H. OSCE: the Dundee experience, Medical Teacher; 2003; 25(3): 255-261
Validité Repères pour apprécier les instruments d’évaluation Fidélité Faisabilité Efficacité Acceptabilité van der Vleuten, CPM, The assessment of professional competence: developments, research and practical implications.Adv health Sci Educ 1996;1:41-67.
Validité Fait Repères pour apprécier les instruments d’évaluation Fidélité Faisabilité Démontre Sait comment Sait Efficacité Acceptabilité • Analysons nos épreuves : • écrites • orales • pratiques
Faculté de médecine – Bureau d’évaluation Atelier de formation pédagogique Docimologie 1 Normes recommandées pour la rédaction de questions de type QCM et QROC
Faculté de médecine – Bureau d’évaluation Atelier de formation pédagogique Docimologie 2 Normes recommandées pour l’élaboration de grilles d’observation
Faculté de médecine – Bureau d’évaluation Atelier de formation pédagogique Docimologie 3 L’analyse d’itemsune technique docimologiquepour valider des questions d’examen
Mes références « Coup de cœur » 2005 The place of the oral examination in today’s assessment systems Margery H. Davis & Indika Karunathilake Medical Teacher, Vol. 27, No. 4, 2005, pp.294-297
Diaporama Documentation Merci de votre attention ! http://www.medbev.umontreal.ca/docimo/medulb.htm serge.normand@umontreal.ca