Validade e confiabilidade de instrumento de avaliação da docência sob a ótica dos modelos de equação estrutural

Abstract

Resumo: Este artigo relata um estudo sobre as propriedades de confiabilidade e validade de instrumento de avaliação da docência, utilizando técnicas de análise fatorial exploratória e confirmatória. A hipótese inicial é que o modelo de avaliação da docência da Universidade do Sul de Santa Catarina é formado por oito dimensões correlacionadas: exigência, avaliação, conteúdo, método, relacionamento professor aluno, produtividade, ética e relacionamento professor curso. Estudos confirmatórios revelaram, no entanto, que o modelo apresentava alguns indicadores estatísticos não adequados. Reavaliando a estrutura do instrumento por meio da técnica de análise fatorial exploratória, evidenciou-se uma estrutura com apenas quatro fatores correlacionados, quais sejam: competência, relacionamento e ética, motivação e avaliação. Submetida a testes através de técnicas de análise confirmatória, essa estrutura revelou índices de ajuste global, incremental e de parcimônia adequados sob o ponto de vista estatístico.Palavras-chave: Instrumento Avaliação. Confiabilidade. Validade. VALIDITY AND RELIABILITY OF THE FACULTY EVALUATION TOOLS FROM THE STRUTURAL EQUATION MODEL PERSPECTIVEAbstract: This article describes a study on the features concerned with the validity and reliability of the faculty evaluation tool by using corroboratory and exploratory factorial analyses tecniques. The first hypothesis put forward is that the faculty evaluation model of the Universidade do Sul de Santa Catarina consists of eight correlated dimensions: requirement, evaluation, content, method, professor-student rapport, productivity, ethics and professor-course rapport. Corroboratory studies, however, have shown that the model displayed some inadequate statistical indexes. By re-evaluating the structure of the tool through an exploratory factorial analysis technique, a structure with only four correlated factors; competence, rapport and ethics, motivation and evaluation, became evident. This structure, put to the test through corroboratory analysis techniques, showed indexes of global, incremental and parsimony adjustments as being ideal from the statistical standpoint.

Knowledge of the care of wounded patients: evidence of validity of an instrument

“…The Cronbach'sα coefficient was verified, with α> 0.70 being adopted as the ideal. The α coefficient, proposed by Cronbach (1951), is the most used method to measure reliability (20) .…”

Revisão Sistemática dos Instrumentos de Avaliação Cognitiva de Autores de Agressão Sexual Contra Criança e Adolescente (AASCA)

“…Nota-se que as pesquisas realizadas nos últimos anos (Rossegger et al, 2013;Tully et al, 2015) muitas vezes não descreveram de maneira clara as medidas psicométricas consideradas nesse tipo de análise, tais como a confiabilidade e a validade, que são duas propriedades de medida estreitamente relacionadas e que desempenham papéis complementares. É importante lembrar que a confiabilidade que versa sobre a consistência interna está relacionada à homogeneidade das respostas dos distintos avaliadores, enquanto a validade está associada ao grau de certeza que se tem sobre o conceito medido (Bem, Lanzer, Filho, Sanchez, & Junior, 2011;Pasquali, 2009).…”

“…Confiabilidade e validade são duas propriedades de medida estreitamente relacionadas, desempenhando papéis complementares. A confiabilidade de consistência interna está relacionada à homogeneidade das respostas dos distintos avaliadores, enquanto a validade está associada ao grau de certeza que se tem sobre o conceito medido (Bem et al, 2011;Pasquali, 2009). Nesse sentido, foram adotados os seguintes valores: acima de 0,70 (consistência interna boa, com confiabilidade aceitável), acima de 0,80 (consistência interna satisfatória), e, finalmente, acima de 0,95, (consistência interna alta, com nível elevado de confiabilidade).…”

A Prática da Avaliação como Instrumento de Colaboração e Autoria dos Discentes

“…Isto foi recomendado por De Bem et al (2011), ao sugerirem que outros fatores sejam considerados, além dos utilizados no artigo, para avaliar o instrumento que foi objeto de estudo. Também foi sugerida uma meta-avaliação da influência da avaliação dos docentes em relação à qualidade do ensino e da utilidade da avaliação dos docentes no cotidiano acadêmico.…”