Análise de itens de uma prova de raciocínio estatístico<A NAME="n1"></A>

Abstract

RESUMO.Este estudo objetivou analisar as 18 questões (do tipo múltipla escolha) de uma prova sobre conceitos básicos de Estatística pelas teorias clássica e moderna. Participaram 325 universitários, selecionados aleatoriamente das áreas de humanas, exatas e saúde. A análise indicou que a prova é predominantemente unidimensional e que os itens podem ser mais bem ajustados ao modelo de três parâmetros. Os índices de dificuldade, discriminação e correlação bisserial apresentam valores aceitáveis. Sugere-se a inclusão de novos itens na prova, que busquem confiabilidade e validade para o contexto educacional e revelem o raciocínio estatístico de universitários ao ler representações de dados estatísticos.Palavras-chave: teoria de resposta ao item, psicometria clássica, educação estatística. ANALYSIS OF ITEMS OF A STATISTICAL REASONING TEST ABSTRACT.This study aimed at to analyze the 18 questions (of multiple choice type) of a test on basic concepts of Statistics for the classic and modern theories. The test was taken by 325 undergraduate students, randomly selected from the areas of Human, Exact and Health Sciences. The analysis indicated that the test has predominantly one dimension and that the items can be better fitting to the model of three parameters. The indexes of difficulty, discrimination and biserial correlation present acceptable values. It is suggested to include new items to the test in order to obtain reliability and validity to use it in the education context and to reveal the statistical reasoning of undergraduate students when dealing with statistical data representation.

Avanços na psicometria: da Teoria Clássica dos Testes à Teoria de Resposta ao Item

“…Ainda que a TCT tenha sido muito útil para o desenvolvimento dos testes psicológicos e continue sendo largamente utilizada, suas limitações têm sido discutidas há muitas décadas (Gulliksen, 1950;Hambleton & Slater, 1997;Lord & Novick, 1968;Rasch, 1961). Atualmente, diversos trabalhos têm apresentado e discutido essas limitações, propondo novas formas de avaliação de medidas psicométricas (Andrade, Tavares, & Valle, 2000;De Champlain, 2010;Embretson & Reise, 2000;Hambleton & Slater, 1997;Pasquali & Primi, 2003;Vendramini et al, 2004). A principal limitação da TCT refere-se ao fato de que todas as medidas são dependentes da amostra dos indivíduos que responderam ao instrumento.…”

“…Em vários países, assim como no Brasil, a TRI tem sido amplamente utilizada na avaliação de testes educacionais padronizados aplicados em grande escala, visando avaliar habilidades e conhecimentos em testes de múltipla escolha. No Brasil, desde o fi nal da década de 90, tem surgido literatura sobre o tema (Pasquali, 1997(Pasquali, , 2009Pasquali & Primi, 2003), além de estudos que utilizaram a TRI para avaliação de testes relacionados à gestão pela qualidade, marketing, nutrição, qualidade de vida, psiquiatria, psicologia, raciocínio verbal e compreensão de leitura (Andrade, 2001;Andrade & Valle, 1998;Andriola, 1998Andriola, , 2001Bueno et al, 2009;Chachamovich, Fleck, Trentini, Laidlaw, & Power, 2008;Cúri, Singer, & Andrade, 2011;Fernandes, Prieto, & Delgado, 2010;Gabriel, Vasconcelos, Andrade, & Schmitz, 2009;Nunes, Muniz, Nunes, Primi, & Miguel, 2010;Polanczyk et al, 2010;Santos, Primi, Taxa, & Vendramini, 2002;Sisto, Santos, & Noronha, 2007;Soares, 2005;Vendramini, Silva, & Canale, 2004).…”

Compreensão da terapia anti-retroviral: uma aplicação de modelo de traço latente

“…Uma boa escala de compreensão será conseqüência da aplicação de um número razoável de itens de boa qualidade (com altos níveis de discriminação e diferentes níveis de dificuldade), e um número suficiente de indivíduos com os mais variados níveis de compreensão. Os problemas que poderiam ocorrer com os parâ-metros dos itens correspondem a um valor do índice de discriminação a abaixo do valor crítico 0,30; um índice de dificuldade b acima do valor crítico 2,95 ou abaixo de -2,95 ou, ainda, valor negativo da correlação bisserial 18 . No presente trabalho, os itens selecionados apresentaram essas propriedades dentro de padrões aceitáveis 28 .…”

“…Este coeficiente mede a correlação do resultado de um item em particular do teste com o total de acertos e fornece um diagnóstico preliminar, sendo útil para a escolha daqueles itens que de fato apresentam consistência interna e se associam bem ao escore que será produzido 12,18 .…”

“…O índice de discriminação (a i ) indica o quanto um item é capaz de diferenciar indivíduos com base no conhecimento de determinado assunto, neste caso a compreensão sobre a terapia ARV. Em geral, assume-se que os itens cujos parâ-metros a apresentaram valores inferiores a 0,30 representam uma baixa discriminação 12,18,21 . O índice de dificuldade (b i ) está relacionado com a probabilidade de acerto ao item e é medido na mesma escala da compreensão (θ), o que permite estabelecer quais itens o indivíduo terá mais chance de acertar 12,15 .…”