Evaluación de los sistemas educativos, Instituciones y programas

Segundo cuatrimestre 2022

Una guía para recorrer la clase 5

Retrospectiva para seguir

Durante esta clase avanzaremos sobre los
temas de la unidad 2 y a su vez seguiremos
acercándonos al proceso de elaboración de
nuestro primer trabajo práctico. Pero antes de
eso, les proponemos hacer un breve ejercicio
de retrospectiva que nos permitirá volver
sobre algunos puntos nodales del trabajo
que llevamos realizado hasta ahora. Durante
las clases hemos reflexionado sobre los
sentidos y las finalidades de la evaluación educativa y hemos construido algunos puntos de
partida para trabajar sobre ella:

● La evaluación no es neutral. Evaluar aspectos de la realidad educativa implica

asumir una posición (política, ideológica, pedagógica, etc.) tanto frente al presente
como frente al futuro, porque al tiempo que se hace un recorte para evaluar la
realidad actual, se proyectan expectativas sobre el provenir tanto de los sujetos,
como de los sistemas educativos y de las sociedades en general.
● Evaluar implica realizar un proceso investigativo que se desarrolla en etapas.
Cada una de esas etapas es central para que la Evaluación pueda favorecer la
orientación de las acciones de intervención frente a problemas específicos y/o
generales del sistema educativo, de las instituciones que lo componen, de los
proyectos y programas que lo atraviesan, etc.
● La toma de decisiones a lo largo de ese proceso metodológico y, particularmente
en la fase de diseño, refleja las posiciones preexistentes de quienes evalúan y
se traduce en modelos evaluativos que tienden a mostrar coherencia entre sus
coordenadas básicas: finalidades, objetos, metodologías, actores y actrices
involucradxs en el proceso evaluativo, etc. Cada uno de esos aspectos nos permite
a su vez clasificar los dispositivos en los que se traducen aquellas posiciones
previas.
● Para la finalidad de evaluar desde y para la justicia social, que se propone en la
materia, es vital que la construcción y los modos de implementación de esos
dispositivos sean capaces de dar lugar a la producción de información en
torno a la redistribución, la participación y el reconocimiento de las personas y
comunidades involucradas. Relevar información sobre esos aspectos, formular
juicios y recomendaciones sobre ellos, potenciará el desarrollo de intervenciones
futuras orientadas a superar injusticias y desigualdades actuales de nuestro sistema
educativo (y de nuestra sociedad).

1
 Evaluación de los sistemas educativos, Instituciones y programas
Segundo cuatrimestre 2022

Del diseño a los resultados

En el punteo anterior, solo se consignan algunas de las afirmaciones que estamos en
condiciones de realizar a esta altura del recorrido. Así mismo, se prefiguran también
algunas preguntas relativas a las diferentes etapas del proceso de evaluación (diseño,
implementación, y elaboración de resultados y recomendaciones) y sus especificidades. Y
en ese camino nos acompañarán los capítulos 4 y 6 del libro de “Evaluar para la
transformación”.

En la clase 4 (presencial del 3/09) trabajamos sobre las formas de clasificar las
evaluaciones según diferentes criterios y también pusimos atención en el rol que asumen o
que se les asigna a los diferentes actores durante el proceso. Por otra parte, trabajamos
sobre las estrategias metodológicas posibles y los beneficios de cada una y de su
combinación. Durante esta clase sumaremos el trabajo sobre las técnicas con las que
aquellas estrategias se implementan en el segundo momento del proceso evaluativo.

Al momento de avanzar sobre los procesos de recolección de información, no basta haber

definido la estrategia metodológica (cuali, cuanti o mixta), también es preciso definir con qué
técnicas se procederá para implementar esa estrategia. Esto implica que existe más de un
modo de obtener información cualitativa y/o cuantitativa, y que en la instancia de diseño
también deberemos decidir al respecto. Si bien, como veremos en la bibliografía, la
triangulación de técnicas es la mejor alternativa, siempre será preciso definir, por ejemplo, si
para la evaluación que se pretende realizar, es más pertinente una entrevista o un grupo
focal para obtener información cualitativa; o si servirá más proceder con una encuesta, con
el análisis de documentos preexistentes, o con ambas técnicas, para obtener información
cuantitativa. La selección depende de múltiples factores e implica un proceso de definición y
operacionalización conceptual.

También avanzaremos en esta clase sobre los procesos de elaboración de resultados y

recomendaciones que, en términos metodológicos, tiene sus especificidades. Su modo
particular de construirse antecede al uso que luego harán de ellos quienes han solicitado la
evaluación, los medios de comunicación y otros sujetos. Es decir, que una cosa son los
informes de resultados elaborados por los equipos evaluadores, y otra cosa -muy diferente-
son los usos que se hacen de ellos. Los datos no hablan por sí mismos, siempre están
sometidos a interpretación y esa interpretación puede ser muy variada y no necesariamente
ajustarse al análisis de variables que el equipo evaluador propone en su proceso de
elaboración de resultados y recomendaciones.

Actividades
Los resultados de los procesos evaluativos tienen más de una audiencia y tienen también
múltiples usos. Con la actividad de esta clase, les proponemos sumar una mirada sobre
algunos de ellos. Les proponemos buscar información circulante en la red sobre los
dispositivos de evaluación que les resulten de interés. En el marco de nuestra materia,

2
 Evaluación de los sistemas educativos, Instituciones y programas
Segundo cuatrimestre 2022

llamaremos dispositivos y experiencias de evaluación al conjunto de elementos y procesos

que se elaboran, organizan y ejecutan para llevar adelante una investigación evaluativa.
Algunos ejemplos de dispositivos de evaluación pueden ser:

● Pruebas regionales o internacionales: las PISA de la OCDE, o las ERCE de

UNESCO
● Pruebas nacionales: Operativo Nacional de Evaluación (ONE), APRENDER,
ENSEÑAR, etc.
● Evaluaciones de programas: Nuevas voces, nuevos escenarios (evaluación del
programa Conectar Igualdad)

La información que busquen puede ser gráfica o audiovisual y su búsqueda no

necesariamente debe restringirse a los medios de difusión masiva, también pueden
sumarse otros ámbitos de difusión como los gremiales o académicos.

Con esta actividad, generamos en conjunto un repositorio digital que nos servirá para la
realización del primer TP. Para ello clasificaremos esa información según:

● El tipo: editorial, artículo de opinión, entrevista, columna.

● Las voces: ¿quienes toman la palabra? ¿especialistas reconocidos, periodistas

especializados, actores relacionados con el proceso evaluativo, otras personas?

● El contenido: según se refieran a la presentación del dispositivo, la implementación o

aplicación de los mismos, o a los resultados obtenidos luego de la aplicación.

Este repositorio, será insumo para trabajar en breve, sobre los usos de los
resultados de las evaluaciones, por eso es importante que la selección sea realizada a
conciencia y poniendo en juego lo que ya sabemos sobre la Evaluación. El espacio para
REALIZAR LA ACTIVIDAD es este formulario de Google. Para compartir las noticias
seleccionadas deberán completar el formulario. Les dejamos aquí una copia de los campos
que deberán llenar.

Por otra parte les damos acceso de visualización a este documento de Drive, en el
que podrán VER el repositorio actualizado a medida que se vayan sumando noticias. Les
proponemos que lo revisen antes de compartir la información elegida, para evitar las
repeticiones y para ir relevando diferentes voces sobre los dispositivos. En ese archivo no
podrán subir información directamente, no tienen permiso de edición.

Guía de lectura
NO ES PARA ENTREGAR, su propósito es organizar y relacionar las lecturas indicadas
para esta clase, Evaluar para la transformación innovaciones en la evaluación de
programas y proyectos sociales. NIRENBERG, Olga; BRAWERMAN, Josette; RUIZ,
Violeta. Buenos Aires Paidós, 2005. (Tramas sociales)

3
 Evaluación de los sistemas educativos, Instituciones y programas
Segundo cuatrimestre 2022

Capítulo 4

1. ¿Qué es la triangulación de técnicas? ¿Cuáles son sus beneficios según el texto?

2. ¿Qué aspectos diferencian a las técnicas cuantitativas de las técnicas cualitativas?
3. ¿Qué aspectos se deben tener en cuenta al momento de seleccionar una o varias
técnicas de recolección y análisis de información?

Capítulo 6

1. ¿Qué entienden las autoras por método de análisis horizontal y vertical? ¿Qué
diferencias y complementariedades pueden establecerse?
2. ¿Qué rol se atribuye a los actores destinatarios o mandatarios de la evaluación
durante el momento de “devolución de los resultados”? ¿Cuáles son las posibles
"audiencias” de los resultados de la evaluación?
3. ¿Qué modelo de Informe Final propone el texto?¿Cuáles son sus partes principales
y qué información comprende cada una de ellas?
4. ¿Qué aspectos deben tenerse en cuenta al momento de realizar las
“recomendaciones”?
5. ¿Qué diferencia un informe final de un resumen ejecutivo?