Teste de Progresso para estudantes de Medicina: experiência de um consórcio na Região Nordeste do Brasil

Abstract

Resumo: Introdução: A colaboração entre escolas médicas para a realização do Teste de Progresso (TP) vem sendo ampliada com o propósito de tornar-se um modelo de prática educacional. Relato de experiência: O núcleo de escolas médicas CIN1 foi instituído no ano de 2013, tendo na sua organização um coordenador-geral e coordenadores de cada escola participante. Realiza dois testes ao ano, variando o número de escolas participantes. O teste possui 120 questões distribuídas nas seis áreas (ciências básicas aplicada, saúde coletiva, pediatria, clínica médica, cirurgia/urgência e emergência, e ginecologia e obstetrícia) e tem seu blueprint baseado em matriz previamente validada. O teste é aplicado a todos os estudantes das escolas participantes, no mesmo dia e com duração de quatro horas. Aconteceu on-line em 2020 e 2021, por causa da pandemia da Covid-19. A pontuação total do estudante é calculada pelo número de questões corretas, sem a opção “não sei”, nem penalidades para incorretas. A análise é realizada por meio da teoria clássica do item. Os estudantes recebem a análise do desempenho comparativamente com a média obtida pelos discentes no mesmo ano e a progressão em relação ao teste anterior. As escolas recebem o desempenho dos respectivos estudantes, a análise da dificuldade e discriminação geral dos itens, e uma avaliação global do teste. Discussão: A implantação do CIN1 representou um grande avanço para as escolas envolvidas. A colaboração não se deu apenas sobre o teste, mas também para o desenvolvimento docente de forma conjunta. Impedimentos de regimento interno e custos podem justificar a variação na participação das escolas. Conclusão: A organização de um núcleo de escolas para o TP traz benefícios e muitos desafios. O aperfeiçoamento dos critérios de análises e feedback e a inclusão de estudantes na avaliação de questões são etapas a serem discutidas e implantadas. A utilização do ambiente virtual, de mais baixo custo, pode ser um facilitador para ampliar a participação das escolas.

Implementation of the São Paulo Nursing Courses Consortium for the Progress Test: experience report

“…To this end, promoting professor qualification strategies and the use of good practices in preparing objective questions leads to the availability of questions capable of assessing more complex problems, increasing test validity and reliability ( 16 ) . Holding workshops to prepare objective questions, presented in this report, is a strategy also successfully adopted in medical schools ( 17 ) . Additionally, for professors who author questions, training, peer review, monitoring, and communication of expectations by more experienced professors, and feedback on the structure of questions and their psychometric performance are considered good practices (18,19) .…”

“…It is worth highlighting that institutional support, including commitment and involvement of directors, coordinators, and professors, is essential both in test preparation and student participation and in analysis and discussion of results ( 17 ) . For the potential use of PT as an academic management tool, it is necessary for institutions to take an active role in the analysis and contextualization of results, allowing managers to make inferences and decisions about content and relevant pedagogical strategies ( 22 ) .…”