Background Student performance is a mirror of teaching quality. The pre‐/post‐test design allows a pragmatic approach to comparing the effects of interventions. However, the calculation of current knowledge gain scores introduces varying degrees of distortion. Here we present a new metric employing a linear weighting coefficient to reduce skewness on outcome interpretation. Methods We compared and contrasted a number of common scores (raw and relative gain scores) with our new method on two datasets, one simulated and the other empirical from a previous intervention study (n = 180) employing a pre‐/post‐test design. Results The outcomes of the common scores were clearly different, demonstrating a significant dependency on pre‐test scores. Only the new metric revealed a linear relationship to the knowledge baseline, was less skewed on the upper or lower extremes, and proved well suited to allow the calculation of negative learning gains. Employing the empirical dataset, the new method also confirmed the interaction effect of teaching formats with specific subgroups of learner characteristics. Conclusion This work introduces a new weighted metric enabling meaningful comparisons between interventions based on a linear transformation. This method will form the basis to intertwine the calculation of test performance closely with the outcome of learning as an important factor reflecting teaching quality and efficacy. Its regular use can improve the transparency of teaching activities and outcomes, contribute to forming rounded judgements of students' acquisition of knowledge and skills and enable valuable feedforward to develop and enhance curricular concepts.
Zusammenfassung Hintergrund Eine effektive Schockraumversorgung polytraumatisierter Patienten erfordert professionelle interdisziplinäre Teamarbeit. Simulationsgestützte Teamtrainings können es ermöglichen, die Grundprinzipien des Crisis Resource Management (CRM) auch in der Akut- und Notfallmedizin zu etablieren. Diese Arbeit präsentiert die erfolgreiche Implementierung eines interdisziplinären, interprofessionellen In-situ-Schockraumsimulationstrainings (iSRST) in einem überregionalen Traumazentrum. Methodik Das iSRST wurde durch Vertretende aller an der Schockraumversorgung beteiligten Fachdisziplinen Advanced-Trauma-Life-Support®(ATLS®)-basiert entwickelt. Pro Trainingswoche wurde an fünf aufeinanderfolgenden Tagen mit jeweils zwei Gruppen zu je acht Teilnehmenden für vier Stunden im traumatologischen Schockraum trainiert. Das Training bestand aus zwei interaktiven Diskussionen zu CRM und ATLS®, einer Einführung in die Simulationstechnik und zwei Szenarien (ca. 20 min) mit darauffolgenden Debriefings. Alle Teilnehmenden wurden nach dem Training anhand anonymisierter Fragebögen zur Evaluation des Trainings inklusive Selbsteinschätzung in Bezug auf die Leitsätze des CRM befragt. Ergebnisse Insgesamt beantworteten 167 Ärzt*innen, Pflegekräfte und technisches Assistenzpersonal aus Anästhesiologie, Unfallchirurgie, Allgemeinchirurgie und Radiologie die Fragebögen. Die größte Berufsgruppe stellten mit 47,6 % Assistenzärzt*innen dar. Das Trainingskonzept wurde durchweg sehr gut bewertet. Der Lernzuwachs hinsichtlich der befragten CRM-Prinzipien war bei allen Aspekten signifikant. Über 95 % der Teilnehmenden wünschten eine mindestens jährliche Wiederholung des Trainings. Diskussion Das iSRST führt aus Teilnehmendensicht zu einem relevanten subjektiven Wissenszuwachs hinsichtlich CRM, steigert das Verständnis für die Bedeutung dieser Prinzipien und hat somit das Potenzial, die Kommunikation und Handlungsabläufe im chirurgischen Schockraum zu verbessern.
scite is a Brooklyn-based organization that helps researchers better discover and understand research articles through Smart Citations–citations that display the context of the citation and describe whether the article provides supporting or contrasting evidence. scite is used by students and researchers from around the world and is funded in part by the National Science Foundation and the National Institute on Drug Abuse of the National Institutes of Health.
hi@scite.ai
10624 S. Eastern Ave., Ste. A-614
Henderson, NV 89052, USA
Copyright © 2024 scite LLC. All rights reserved.
Made with 💙 for researchers
Part of the Research Solutions Family.