A new approach to evaluation of university teaching considering heterogeneity of students’ preferences

Abstract

Students' evaluations of teaching are increasingly used by universities to evaluate teaching performance. However, these evaluations are controversial mainly due to fact that students value various aspects of excellent teaching differently. Therefore, in this paper we propose a new approach to student evaluation of university teaching based on data from conjoint analysis. Conjoint analysis is a multivariate technique used to analyze the structure of individuals' preference. In particular, our approach accounts for different importance students attach to various aspects of teaching. Moreover, it accounts explicitly for heterogeneity arising from student preferences, and incorporates it to form comprehensive teaching evaluation score. We have conducted survey and confirmed applicability and efficiency of the proposed approach.

Understanding the Heterogeneity of Generation Y's Preferences for Travelling: a Conjoint Analysis Approach

“…Therefore, a cluster analysis was performed to classify Heterogeneity of Generation Y's Preferences for Travelling 487 respondents into more homogeneous preference groups. This approach was conducted by various researchers across industries, in order to determine customer segments based on distinct preference profiles (Kuzmanovic, Savic, Popovic, & Martic, 2013b). The k-means cluster procedure in SPSS 16.0 was used to perform the segmentation.…”

La Técnica Grilla de Repertorio (Repertory Grid): Un Método para el Estudio de la Cognición en la Evaluación de Habilidades Docentes

“…La evaluación a los docentes por parte de los estudiantes como un instrumento para medir la efectividad de los académicos es una práctica que se ha generalizado en las universidades de todo el mundo (Kuzmanovic, Savic, Popovic, y Martic, 2013;Onwuegbuzie et al, 2009). Estas evaluaciones comenzaron a utilizarse alrededor de los años 20 (Morley, 2013), siendo su propósito original la recolección de información que sirviera para retroalimentar la práctica docente (Sproule, 2000).…”

Escala de Opinión de los Estudiantes sobre la Efectividad de la Docencia (EOEED) en Educación Superior

“…También, han detectado algunos perfiles de docentes, por ejemplo, que puntean alto en la dimensión organización/claridad pero bajo en entusiasmo del instructor (Marsh y Roche, 1997). Para Kuzmanovic et al (2012) esto es algo deseable pues refleja la multidimensionalidad de la docencia.…”

“…Por lo que estas diferencias se pueden deber a sesgos propios de la formación universitaria de los que suelen impartir cada tipo de curso; algunas más cercanas al ejercicio profesional de la docencia en educación superior que otras. Sin embargo, para Kuzmanovic et al (2012) éstas pueden ser atribuibles a la heterogeneidad en las preferencias sobre los aspectos que caracterizan a la buena docencia.…”

“…Para Kuzmanovic (2012) entre estas dimensiones se encuentran: la claridad de la clase, la interacción profesor-alumno, la organización del curso, el entusiasmo del profesor por la docencia, la retroalimentación que ofrece a los alumnos. Según los resultado de la investigación de Gabalán y Vásquez (2008), las dimensiones de evaluación que, desde la perspectiva de los alumnos, mejor discriminan un desempeño docente de calidad son: las competencias didáctico-pedagógicas del docente -que éste facilite el aprendizaje-; evaluación del aprendizaje -que las calificaciones asignadas sean justas-; y, la atención clara y precisa a las dudas y preguntas de los alumnos.…”