Efecto de una capacitación sobre los puntajes de la prueba de admisión de la Universidad de Costa Rica: una aproximación bayesiana

Abstract

Efecto de una capacitación sobre los puntajes de la prueba de admisión de la Universidad de Costa Rica: una aproximación bayesiana * Resumen. Se usó un diseño cuasi-experimental con pre y post-test para estimar el efecto de una capacitación para la prueba de admisión de la Universidad Costa Rica, un test estandarizado que mide habilidades de razonamiento en contextos verbales y matemáticos. Cuatro colegios públicos del área metropolitana central del país participaron en el estudio, asignándose dos de ellos aleatoriamente al grupo de intervención y los otros dos al grupo de control, con 61 estudiantes en el primer grupo y 80 en el segundo. La intervención consistió de 5 sesiones de capacitación de 3 horas, utilizando como guía un manual desarrollado por una experta pedagoga, con enfoque constructivista. Las medidas antes y después fueron formas reducidas de la prueba de admisión 2014. La variable dependiente fue la diferencia entre ambas mediciones. El efecto de la capacitación fue de 3.5 puntos porcentuales y significativo, y se estimó utilizando un modelo bayesiano de regresión multinivel.Palabras clave. Evaluación de impacto, modelos jerárquicos bayesianos, efectos de capacitación, prueba de admisión a la Universidad, modelos multinivel. Abstract.A quasi-experimental design with pre and post-test was used to estimate training effects for the University of Costa Rica's admission test, a standardized exam that measures reasoning abilities in mathematical and verbal contexts. Four secondary public schools from the metropolitan central area of the country participated in the study; two of them were randomly assigned to the intervention group and the other two to the control group, with 61 students in the first group and 80 in the second. The intervention consisted of five three-hour training sessions, using a written guide developed by a pedagogy expert with a constructivist approach. Before and after measures were reduced test forms of the real admission test from the year 2014. The dependent variable was the difference between the two measures. The effect of the training was estimated using a multilevel Bayesian regression model with a significant magnitude of 3.5 percentage points.

Género, autoeficacia y desempeño en una prueba de matemática: El papel moderador del centro educativo

“…In the case of multilevel models, one of the main advantages of Bayesian estimation over frequentist estimation is that it allows direct estimation of the random effects for each of the clusters, in this case, educational centers, while in the frequentist models it would be done through the matrix of variances and covariances of the random effects. This characteristic of the Bayesian estimation strengthens the results, since it is generally of interest to not only weigh whether there are important moderating effects due to the clusters, but also, as in the present case, to estimate those effects in each of the conglomerates to support substantive interpretations and decision making (Montero, Rojas, Negrín, & Francis, 2015).…”

Validación de un modelo de cuatro estrategias de resolución de ítems de razonamiento en una prueba estandarizada de selección/Validation of a Four-Strategies Model for Solving Reasoning Items in a Standardized Selection Test

“…Los resultados mostrados también abren la posibilidad de implementar estudios cuasiex-perimentales (Montero, Rojas, Negrín, & Francis, 2015) y de predicción de las puntuaciones de la PAA en el rendimiento académico en la UCR (Jiménez & Morales, 2009-2010Rojas, 2013). En el estudio experimental de Montero et al (2015) podría modificarse la capacitación con una intervención que propicie a las personas con diferentes perfiles de desempeño en resolución de ítems apropiarse del manejo guiado de los cuatro procesos de manera que se podría analizar si la intervención tiene un efecto positivo sobre el incremento de las puntuaciones en la PAA. En los trabajos de Jiménez y Morales (2009-2010) y Rojas (2013) se podrían incluir las categorías como variables independientes en diferentes modelos de regresión lineal múltiple.…”

El diseño y juzgamiento de ítems en pruebas estandarizadas de acceso a Estudios Superiores para personas con discapacidad visual: Dimensiones analíticas de un modelo teórico de ajustes razonables.

“…La metodología seguida tiene tres fases: la revisión de expertos en el constructo, la contrastación de criterios por especialistas en las adecuaciones y la valoración de la idoneidad del ítem. Sin embargo, algunos estudios advierten de un contexto de inequidad creciente en el acceso a la Educación Superior (Montero, Rojas-Rojas, Francis-Salazar y Negrín-Hernández, 2015). Por tanto, el propósito de esta investigación fue generar las dimensiones de un modelo teórico de ajustes razonables en el diseño y juzgamiento de ítems en pruebas estandarizadas para personas con discapacidad visual 1 ; entendiéndose que los ajustes razonables se fundamentan en los derechos humanos y que consisten en modificaciones concretas, cuando una política, normativa, procedimiento o acción en una situación específica sin ser en su origen discriminatoria, deviene injusta y contraria al principio de igualdad material que responden con medidas cualificadas basadas en criterios, a requerimientos particulares (ONU, 2006).…”