Recherche et perspectives Développement, validation et implantation d'un outil novateur critérié d'évaluation de la progression des compétences des résidents en médecine familiale Development, validation and implementation of an innovative criterion-based tool to assess family medicine residents' progress
-Contexte : L'implantation de l'approche par compétences prescrit aux programmes de formation médicale postdoctorale un ajustement de leurs stratégies d'évaluation. Un outil critérié d'évaluation des compétences (OCÉC) a été élaboré à partir de jalons ayant fait l'objet d'une validation de contenu, mais le processus de réponse restait à valider avant son implantation. Objectifs : Évaluer le processus de réponse à l'OCÉC et identifier les difficultés rencontrées par ses usagers pouvant introduire des biais dans l'évaluation. Méthodes : Étude qualitative auprès de dix cliniciens-enseignants volontaires. La collecte de données s'est effectuée au cours d'entrevues individuelles utilisant la méthode de la pensée à voix haute. Une analyse de contenu des verbatims a été réalisée par trois chercheurs, ce qui a permis la triangulation des données. La structure de codification se compose de quatre thèmes : compréhension, récupération de l'information, jugement et sélection de la réponse. Résultats : La compréhension et la récupération de l'information posaient généralement peu problème. Des difficultés aux étapes du jugement (indicateurs hétérogènes et évaluation normative) et de sélection de la réponse (échelle de réponse inadéquate) ont été relevées. Discussion et conclusion : Cette étude a permis de vérifier le processus de réponse à l'OCÉC, qui s'est avéré adéquat pour la compréhension et la récupération de l'information, mais à améliorer en regard du jugement et de la sélection de la réponse. L'OCÉC a été révisé en fonction des résultats obtenus avant son implantation. L'évaluation en cours de la structure interne, des relations avec d'autres variables et des conséquences du test complétera le processus de validation de l'OCÉC. Mots clés : éducation médicale par compétences, évaluation, résidence en médecine familiale, protocole de pensée à voix haute Abstract-Background: The implementation of competency-based medical education requires postgraduate medical training programs to adjust their assessment strategies. A criterion-referenced competency assessment tool (C-CAT) was developed based on content-validated milestones, but the response process had to be validated before implementation. Objectives: To evaluate the C-CAT response process and to identify difficulties encountered by users that could bias the assessment. Methods: Qualitative study involving 10 volunteer clinical teachers. Data was collected during individual interviews using the think-aloud protocol. Three researchers independently carried out a content analysis of the verbatim responses, hence data were triangulated. The coding structure consists of four themes: comprehension, information recall, judgment and response selection. Results: Comprehension and information retrieval generally did not cause any problem. Difficulties at the judgment (heterogeneous indicators and normative evaluation) and response selection
scite is a Brooklyn-based organization that helps researchers better discover and understand research articles through Smart Citations–citations that display the context of the citation and describe whether the article provides supporting or contrasting evidence. scite is used by students and researchers from around the world and is funded in part by the National Science Foundation and the National Institute on Drug Abuse of the National Institutes of Health.
hi@scite.ai
10624 S. Eastern Ave., Ste. A-614
Henderson, NV 89052, USA
Copyright © 2024 scite LLC. All rights reserved.
Made with 💙 for researchers
Part of the Research Solutions Family.