How effective are self- and peer assessment of oral presentation skills compared with teachers’ assessments?

Abstract

Assessment of oral presentation skills is an underexplored area. The study described here focuses on the agreement between professional assessment and self- and peer assessment of oral presentation skills and explores student perceptions about peer assessment. The study has the merit of paying attention to the inter-rater reliability of the teachers. Comparison of the teacher and peer assessment rubric scores points at a positive relationship, but also at critical differences. The lower intra-class correlation suggests that peers and teachers still interpret the criteria and indicators of the rubric in a different way. With regard to the comparison of self-assessment scores and teacher scores, we have to conclude that there are significant differences between these scores. Self-assessment scores are, for the most part, higher than the marks given by teachers. The results also reflect a very positive attitude of students towards peer assessment as a relevant source of external feedback.

Student perceptions of peer assessment: an interdisciplinary study

“…Regarding students' perception of summative peer-assessment in oral presentation skills, De Grez, Valcke and Roozen (2012) recorded the perceptions of 57 university students enrolled on a Business Administration introductory course to psychology. The results show a very positive attitude towards the value of peer-assessment and a high degree of learning from feedback.…”

Self-assessment: A critical competence for Industrial Engineering

“…En primer lugar se recomienda combinar la autoevaluación, con otro tipo de indicadores, como las calificaciones de los profesores, preferentemente más de uno, por su carácter integrador [21]. Asimismo es conveniente tener en cuenta a los pares pues su evaluación es más precisa que la autoevaluación [12,13,16].…”

“…Específicamente, con respecto a la capacidad de presentación oral, se indica que la autoevaluación mejora su aprendizaje y desarrollo [12]. Para proporcionar criterios de evaluación homogéneos y así mejorar la precisión de la autoevaluación y generar buenas prácticas en el desarrollo de esta competencia se facilitó con antelación a los evaluadores (estudiantes y profesores) la rúbrica que figura en el anexo.…”

“…La falta de hábito de autoevaluación y la no implicación de los estudiantes en la identificación de los criterios son otras posibles explicaciones. Por último, cabría pensar que las diferencias entre profesores y autoevaluaciones pueden deberse a la mayor experiencia de los profesores al juzgar las presentaciones orales [12]. No obstante, hay que considerar que los propios estudiantes sí fueron capaces de valorar con precisión a sus compañeros, cuando actuaban como pares, lo que parece dar más peso a la motivación de los estudiantes para mejorar su calificación a la hora de autoevaluarse.…”

“…El enfoque sobre la precisión de la autoevaluación ya ha sido tratado en estudios previos [e.g., [12][13][14], sin embargo son pocos los que se han centrado en el campo de la Ingeniería Industrial o los que han realizado el estudio segmentando su muestra atendiendo al género del estudiante o a las diferencias de rendimiento en la competencia objeto de evaluación. Así pues, el objetivo principal de este trabajo es determinar si el estudiante de Ingeniería Industrial es preciso a la hora de autoevaluarse en un contexto de evaluación sumativa y si aspectos como el género o su rendimiento valorado por otros evaluadores influyen en su propia evaluación.…”