La Categoría precisión en la meta-evaluación: aspectos prácticos y teóricos en un nuevo enfoque

Abstract

Este artículo trata de la categoría precisión de una verdadera evaluación en el ámbito de la evaluación y de la meta evaluación (evaluación de la evaluación). Presenta, inicialmente, la conceptuación moderna de la evaluación y de la meta evaluación para, entonces, discutir el papel de la meta evaluación de asegurar la calidad de un proceso evaluativo, en sus diferentes enfoques, a partir de las cuatro categorías de una verdadera evaluación (utilidad, viabilidad, ética y precisión). La énfasis del artículo está en la categoría precisión: (i) su importancia en una meta evaluación, en todas las fases o etapas de una evaluación, con sus avances y sus limitaciones y; (ii) su aplicación en la propia meta evaluación que, como proceso evaluativo, también debe respetar los cuatro patrones de una verdadera evaluación. En este contexto se presentan aspectos teóricos y prácticos que merecen atención en la negociación, en el diseño, en la implantación y en la dirección de una meta evaluación cuando se discute, incluso, el paradigma del tratamiento de los datos de una meta evaluación a través de la lógica clásica y no de la lógica fuzzy. También se presenta una propuesta de metodología para realizar meta evaluación con base en la lógica fuzzy.

A fuzzy decision support system for meta-evaluation a new approach and a case study performed in Brazil

“…When choosing the most adequate technique for modelling and data analysis, it is important to be clear about which evaluative question or questions one intends to answer, since an adequate technique to search for the answer to a given question may not be adequate for another one (LETICHEVSKY, 2004). For example, if an evaluation of student performance is carried out with the aim of determining in which schools the best students are, it is possible to work directly with the students' scores (results).…”

“…Similarly to what happens with schools, the same care must be taken in the evaluation of the performance of sections or boards of directors within a business company or the impact achieved by the beneficiaries of social programs with similar objectives (LETICHEVSKY, 2004).…”

Ethical issues of evaluation practice within the brazilian political context

“…Before choosing the most appropriate technique for planning and analyzing the data a clear statement of which questions are to be answered is important, since a technique adequate to seek the answer to one certain question may not be adequate to answer another question (LETICHEVSKY, 2004). For example, if an evaluation of the performance of students is conducted with the purpose of determining which schools have the students with the best results it is possible to work directly with the scores of the students.…”

“…When one analyzes multilevel questions by means of one-level models, mistakes may happen; therefore, it is necessary to use multilevel models (RABASH, 1999), the recommended analysis 2 for data with hierarchical structure and complex patterns of variability. Similarly to what occurs in schools, the same care must be taken in evaluating the performance of sectors or divisions within an enterprise, or the impact obtained on the beneficiaries of social programs with similar objectives (LETICHEVSKY, 2004).…”