Sobre o uso do Little Jiffy na validação dos testes: comentários a Ávila e colaboradores

Abstract

A avaliação psicológica da depressão é um processo importante, pois assim se poderia obter uma aproximação do grau da diminuição do bem-estar e, consequentemente, da qualidade de vida. Nesse sentido, Ávila et al.1 fizeram uma versão validada da Escala de Avaliação de Depressão de Hamilton (HAM-D). No entanto, eles utilizaram um procedimento com sérias limitações metodológicas, conhecido como Little Jiffy.O "pacote" conhecido como Little Jiffy 2 é composto por três procedimentos: a Análise dos Componentes Principais (PCA), a regra do Kaiser (RK; autovalores > 1) e a rotação varimax (RV). Porém, essa combinação é a menos recomendada quando o objetivo é examinar de forma exploratória a estrutura interna de um teste de medição. Tendo em vista as limitações de cada procedimento no estudo psicométrico de um teste de avaliação 3 , os autores deveriam apresentar forte argumentação para justificar o seu uso. A seguir, mostra-se cada um deles.Em princípio, a PCA é um método de redução de variáveis observadas (itens), não de análi-se fatorial 3 , mas leva em conta a variância total (comum e única, incluindo a variância do erro), o que conduz a superestimar as cargas fatoriais 4 e a distorcer a interpretação adequada do construto avaliado. Existem outras opções mais apropriadas que poderiam ser usadas dependendo da situação, como o método dos mínimos quadrados ordinários ou o método de máxima verossimilhança. A RK tende a superestimar o número de fatores/componentes, que devem ser conservados 4 , por isso não é considerado um método analítico confiável 3 . No entanto, existem outros métodos mais precisos e com mais respaldo empírico em comparação com a RK, como a Análise Paralela e o Minimum Average Partial, dos quais os resultados são mais confiáveis. Finalmente, o uso de RV foi baseado no pressuposto de que produz soluções fatoriais simples e de fácil interpretação, mas estudos recentes indicam que as rotações oblíquas oferecem estruturas mais simples 5 . Por outro lado, a aplicação de RV pressupõe que os itens não estão correlacionados, mas é difícil defender a independência fatorial e não estimar a correlação entre os fatores; é mais razoável assumir uma relação entre os fatores analisados, a qual pode ser conferida por meio de uma rotação oblíqua.Segundo os argumentos apresentados sobre as limitações da metodologia aplicada, a versão validada do HAM-D pode ser questionável e provavelmente afeta os processos subsequentes. Portanto, os autores devem reavaliar os seus dados para se alinharem com a atual posição sobre o uso apropriado da análise fatorial exploratória, e assim contrastar seus resultados.

Propiedades psicométricas de la Escala de Actitudes sobre el Amor (LAS) en universitarios peruanos

“…Si bien es cierto que en dicha investigación se realiza una primera exploración de las propiedades psicométricas del LAS, a nivel metodológico pueden observarse algunas limitaciones, tales como el uso del Little Jiffy (ACP, criterio de autovalores mayores a 1 y rotación varimax) como parte del análisis, estrategia poco recomendada cuando se pretende examinar de forma exploratoria la estructura interna de un instrumento (Dominguez-Lara & Merino-Soto, 2016;Lloret-Segura, Ferreres-Traver, Hernández-Baeza, & Tomás-Marco, 2014); o que en el reporte del coeficiente alfa no se aprecia el cálculo de sus intervalos de confianza, lo cual representa una práctica importante y recomendada actualmente debido a que este coeficiente puede estar influenciado por diversas características, como el número de ítems o el error muestral, y porque la confiabilidad de los puntajes no puede asumirse como estable en cada muestra evaluada (Dominguez-Lara & Merino-Soto, 2015;Sánchez-Meca & López-Pina, 2008).…”

Psychometric network analysis of the Patient Health Questionnaire-4 (PHQ-4) in Paraguayan general population

“…However, the same study also suggested the presence of two factors (anxiety and depression) from an exploratory approach, using principal component analysis with varimax rotation. These two procedures are part of the package known as Little Jiffy (Dominguez-Lara & Merino-Soto, 2016 ), which has been reported in psychometric literature because of its large intrinsic limitations (Ferrando & Anguiano-Carrasco, 2010 ; Lloret-Segura et al, 2014 ).…”

Validación transcultural y funcionamiento diferencial del MBI-GS en docentes de tres países latinoamericanos

“…Además, se asumió indebidamente la inexistencia de diferencias semánticas y de funcionamiento diferencial de los ítems entre países y tampoco se realizó un análisis factorial confirmatorio. Asimismo, este estudio, como muchos otros en la región, usó solamente el coeficiente α (Cronbach, 1951) como estimador de consistencia interna sin analizar el supuesto de tau-equivalencia que difícilmente puede cumplirse (Dunn, Baguley, & Brunsden, 2014) y llevó a cabo un análisis factorial exploratorio bajo el procedimiento que incluyó la regla Kaiser, componentes principales y rotación Varimax, que han sido fuertemente criticados por sus déficits (Dominguez & Merino, 2016;Lloret-Segura et al, 2014). Finalmente, el estudio dominicano de Tomás, de los Santos, Alonso-Andrés y Fernández (2016) tuvo resultados a favor de la validez de la escala con base en una muestra homogénea (solo docentes) y con una metodología estadística más robusta (e.g.…”