Documentos de Académico
Documentos de Profesional
Documentos de Cultura
MAESTRÍA EN EDUCACIÓN
con orientación en gestión educativa
Tesis de Maestría
El Sistema Nacional de Evaluación de la Calidad (SINEC):
sus usos y funciones en el sistema educativo argentino
(1994-2001)1
Verónica Oelsner
Directora: Dra. Silvina Gvirtz
Octubre 2002
1
La presente versión fue ligeramente retocada para su publicación en el sitio web de la Fundación
Luminis. Difiere, por lo tanto, parcialmente de la versión original.
ÍNDICE
AGRADECIMIENTOS pág. 4
INTRODUCCIÓN pág. 5
CAPÍTULO 1 pág. 10
La expansión de los sistemas de evaluación y sus funciones:
Una reseña de la literatura y de algunas experiencias
1. La expansión de los sistemas de evaluación
2. Las funciones de la evaluación en la literatura especializada
3. La implementación de los sistemas de evaluación: algunas experiencias
4. Síntesis
CAPÍTULO 2 pág. 33
El surgimiento y el desarrollo del Sistema Nacional de Evaluación de la Calidad de
la Educación en Argentina
1. El contexto del surgimiento del sistema de evaluación en Argentina
2. El Sistema Nacional de Evaluación de la Calidad de la Educación
3. Las acciones elaboradas a partir de la implementación de los Operativos Nacionales
de Evaluación: principales tendencias
CAPÍTULO 3 pág. 50
Las acciones vinculadas con la diseminación de la información
Las tres etapas de la diseminación de la información
1. Primera etapa (1994 - 1997)
2. Segunda etapa (1998 - 1999)
3. La información no diseminada durante las dos primeras etapas
2
4. Tercera etapa (2000 - 2001)
5. Tendencias en las acciones vinculadas con la diseminación de los resultados
CAPÍTULO 4 pág. 85
La elaboración de políticas de mejora:
Instrumentos para docentes, directores y supervisores
1. Primera línea de acción: la elaboración de recomendaciones metodológicas para la
enseñanza dirigidas a los docentes
2. Segunda línea de acción: la distribución de instrumentos de evaluación entre
docentes
3. Tercera línea de acción: la capacitación de supervisores y directivos en el uso de la
información
4. Tendencias en el desarrollo de acciones para "mejorar" la práctica de docentes,
supervisores y directores
3
AGRADECIMIENTOS
4
INTRODUCCIÓN
2
En agosto de 2001, por ejemplo, los resultados del Operativo Nacional de Evaluación (ONE) de
Finalización de Nivel Medio fueron tapa de los principales diarios del país.
5
el saber hacer técnico acerca de las diversas aproximaciones no está tan diseminado
como otros conocimientos del campo educativo.
En Argentina, siguiendo una tendencia global, la evaluación del sistema
educativo ha alcanzado un lugar central en la agenda político-educativa de la última
década. Sin embargo, son pocos los estudios de investigación que indagan cómo se ha
implementado y cómo se está llevando a cabo. Excepto 1) los trabajos de Benveniste
(2000a; 2002a; 2002b), quien realiza un estudio comparado de los sistemas de
evaluación de Argentina, Chile y Uruguay desde una perspectiva política, 2) una
reciente publicación (Tenti Fanfani, 2002), en la que funcionarios y ex funcionarios del
Ministerio de Educación ofrecen análisis e interpretaciones de la información recabada
por el Sistema Nacional de Evaluación, y 3) un libro de Andrada, Narodowski y Nores
(2002), en el que se describe la creación y la implementación del programa de
evaluación nacional como política de Estado, casi no se encuentra producción que
describa y reflexione sobre el diseño y funcionamiento de este sistema durante los años
que lleva en marcha3.
Con preocupación por las limitaciones señaladas, desde un encuadre teórico que
concibe a la evaluación como una actividad política y no meramente como herramienta
técnica (Benveniste, 2000; House, 1994; MacDonald, 1989), en esta investigación se
indaga la utilización que el Ministerio de Educación de la República Argentina hace de
las evaluaciones nacionales que aplica cada año y, por lo tanto, las funciones que el
Sistema Nacional de Evaluación cumple. Centrando la mirada en las acciones
desarrolladas a partir de los resultados, se espera contribuir a la ampliación del
conocimiento acerca de la marcha del sistema de evaluación, entendiendo que son
dichas acciones las que determinan las funciones efectivamente cumplidas, más allá de
las que se proclaman y de las que permiten técnicamente los instrumentos diseñados.
Concretamente, el objetivo general de la investigación consiste en indagar el uso
que el Ministerio nacional hace de las evaluaciones nacionales de la calidad de la
educación entre 1994 –el año siguiente a la instalación del sistema- y 2001 –el año
posterior a la implementación de último Operativo Nacional de Evaluación al momento
3
Algunos aportes, fundamentalmente sobre los primeros años del sistema, ofrecen también los análisis de
Cols y Basabe (1998) acerca de la comparabilidad de los instrumentos y de Diker y Feeney (1998) acerca
del discurso oficial de la evaluación. Asimismo se indagan algunos aspectos en los trabajos de Experton
(1999) y Chumbita (1997). Por otra parte, Larripa (2003) finalizó recientemente una indagación similar a
la de Cols y Basabe, pero extendida hasta la actualidad.
6
de realizar este estudio-4. Para ello, el primer objetivo específico se propone identificar
las líneas de acción desarrolladas por el Ministerio nacional a partir de la
implementación de cada Operativo de Evaluación. El segundo, consiste en describir
cada una de las líneas de acción identificadas. El tercero, procura describir las funciones
del Sistema Nacional de Evaluación a lo largo del período (1994-2001), a partir de la
articulación de las diferentes líneas de acción y de su relación con el contexto político.
El tipo de diseño para abordar el presente estudio es fundamentalmente el de uso
de fuentes documentales. Para la totalidad de los objetivos, la técnica de recolección de
datos consiste centralmente en la revisión de fuentes secundarias. Se recurre a los
materiales producidos por el Ministerio de Educación de la Nación y a la legislación
producida durante el período (leyes, decretos y resoluciones). La revisión de los
periódicos de difusión masiva y las entrevistas con actores clave cumplen una función
indispensable para completar la indagación, pero se consideran como material de apoyo.
En cuanto al tipo de análisis, como se decía, este trabajo se centra en el uso que
el Ministerio nacional hace de las evaluaciones que aplica cada año. Para ello, se
indagan las principales líneas de acción elaboradas y se analiza cada una de ellas en su
singularidad para ver después el todo que configuran, identificando tendencias,
continuidades y rupturas en los usos que se hacen de la evaluaciones nacionales.
Asimismo, se decía que se concibe a la evaluación como instrumento técnico
pero también político. Por eso, para dar prioridad a la comprensión específica de la
evaluación, se adopta un tipo de análisis en el que se suspende en un comienzo el
esquema contexto-texto. Esta línea es sugerida por Foucault (1997). Desde esta
perspectiva, los documentos o las acciones deben ser tratados como trata el arqueólogo
a sus objetos: deben buscarse las bases, las regularidades, las emergencias, las rupturas;
deben tomarse como series de acontecimientos para ser abordados en su singularidad;
debe desplegarse "una masa de elementos que hay que aislar, agrupar, hacer pertinentes,
disponer en relaciones, constituir en conjuntos" (Foucault, 1997, p. 11). Esto es lo que el
autor denomina "descripción arqueológica": "la descripción sistemática de un discurso-
objeto" (p. 235).
4
Utilizando la distinción de Certeau (1996) entre la "fabricación" (relacionada con el crear, inventar,
generar) y el "consumo" (vinculado con las maneras de emplear los productos), se recalca aquí que el
estudio se centra en el uso de la evaluación desde la perspectiva de la producción. Es decir, se estudian las
líneas de acción desarrolladas ("fabricadas") a partir de la evaluación. No se indaga cómo son utilizadas
("consumidas") por sus destinatarios ("consumidores" o "practicantes"). Esto último contribuiría a
profundizar el conocimiento sobre usos de la evaluación por otros actores, más allá del Ministerio. Sin
embargo, sobrepasa los límites de esta indagación.
7
Considerando las pautas más generales que marca este enfoque, la mirada se
centra en cada una de las líneas de acción identificadas; en las características que
adoptan, en las continuidades y en las rupturas que señalan a lo largo del tiempo en sí
mismas y luego también en el todo que configuran. Esto no supone negar que los usos y
sus transformaciones puedan estar vinculados con transformaciones políticas más
generales. Antes bien, el enfoque adoptado significa realizar, en una primera instancia,
una lectura que posibilita identificar las tendencias en los usos de la evaluación al
margen de posibles cambios en los objetivos y en las conducciones políticas. La
contextualización del sistema de evaluación en un marco político más amplio y la
formulación de hipótesis sobre las determinaciones políticas en la configuración de tal
sistema forman parte de una segunda lectura, en una instancia posterior.
La exposición que sigue comienza con un primer capítulo en el que se sintetiza
el desarrollo y la expansión de la evaluación de los sistemas educativos en el mundo en
general y en América Latina en particular. También se incluye allí una reseña de los
principales desarrollos conceptuales en torno a las funciones de la evaluación y a los
usos de sus resultados y de las experiencias en algunos países. El propósito de este
primer capítulo es describir las diversas funciones y características que un sistema de
evaluación puede adoptar desde el plano teórico, a la vez que ilustrar los diferentes
modos en que efectivamente los sistemas de evaluación se configuran.
En el segundo capítulo se presenta el Sistema Nacional de Evaluación de la
Calidad de la Educación (SINEC) en la Argentina, describiendo su surgimiento, su
estructura, sus objetivos, la concepción de calidad sobre la que se basa y los Operativos
Nacionales de Evaluación que implementa cada año. Se introducen allí también las seis
líneas principales en que se han agrupado las acciones desarrolladas por el Ministerio
nacional de Educación entre 1994 y 2001, a partir de la implementación de las
evaluaciones.
En los dos capítulos siguientes, se analizan con mayor detalle las líneas de
acción identificadas. Puntualmente, en el capítulo tercero se abordan las acciones
vinculadas con la diseminación de resultados de la evaluación y en el cuarto, las que se
proponen como instrumentos de mejora de las prácticas pedagógicas. Por un lado, se las
describe atendiendo, entre otras cosas, a los propósitos bajo los que se presentan, los
años en que se desarrollan, el tipo de información sobre el que se basan o que manejan y
la audiencia a la que se dirigen. Por otro lado, se las enmarca en el contexto político-
8
educativo más amplio, intentando comprender las distintas funciones que el Ministerio
nacional hace cumplir al Sistema de Evaluación.
Finalmente, en las conclusiones, se sintetizan las principales tendencias
observadas en los usos de las evaluaciones por parte del Ministerio nacional a lo largo
del período estudiado, considerando las continuidades y las rupturas que las acciones
desarrolladas manifiestan, así como su relación con el contexto político más general en
el que el Sistema de Evaluación se inscribe.
9
CAPÍTULO 1
La expansión de los sistemas de evaluación y sus funciones:
Una reseña de la literatura y de algunas experiencias
10
gobiernos comienzan a someter a evaluación el volumen y la inversión misma en los
sistemas educativos (Tiana Ferrer, 1996).
Asimismo, en las últimas décadas, la percepción acerca de que los sistemas
educativos están en crisis comienza a generalizarse. Se señala que los procesos de
escolarización no derivaron en el crecimiento económico que en algún momento se
esperó y que la escuela no contribuye al desarrollo de las habilidades para desempeñarse
eficientemente en el medio social, cultural y económico (Namo De Mello y Da Silva,
2000). De Landsheere (1996) resume el cuestionamiento del siguiente modo:
La reciente evolución de la ciencia, la tecnología y la economía, así como
las conquistas sociales, tales como la reivindicación de la igualdad de
oportunidades, el derecho al éxito escolar, acoplado todo ello al derecho de
la diferencia, han suscitado cada vez más preguntas sobre la calidad de la
educación. (p. 17)
11
1.1. El surgimiento de los sistemas de evaluación en América Latina
12
adelante otros como Uruguay, México, Costa Rica, Bolivia, Paraguay, Nicaragua o
Venezuela (Tiana Ferrer, 2000). Cuba y Chile los implantan con anterioridad. En
general, todos estos sistemas se insertan dentro de las burocracias ministeriales5: en
Chile, el Ministerio de Educación establece el Sistema de Medición de la Calidad de la
Educación (SIMCE); en México se crea el Sistema Nacional de Evaluación Educacional
(SNEE); en Brasil, el Sistema Nacional de Evaluación de la Educación Básica
(Braslavsky, 1999).
Tabla 1.1.
Año de implementación de los sistemas de
evaluación por país
País Año
Argentina 1993
Bolivia 1996
Brasil 1993
Chile 1988
Colombia 1991
Costa Rica 1995
Cuba 1975
El Salvador 1993
Honduras 1990
México 1994
Nicaragua 1998
Paraguay 1996
República Dominicana 1992
Uruguay 1996
Venezuela 1995
Fuente: Arancibia, V. (1996) Unesco/Orealc,
Laboratorio Latinoamericano de Medicación de
Calidad de la Educación.
5
Aunque bajo regímenes de gobierno diferentes.
13
2. Las funciones de la evaluación en la literatura especializada
Tabla 1.2.
Usos y consecuencias de los resultados de la evaluación según su función
6
El término usado en la literatura referida es managerial. Como ocurre con otros términos del idioma
inglés, no se cuenta en el español con un término que sea su traducción exacta. El término managerial se
encuentra traducido como "directivo, de dirección, gerencial". A su vez, el término management, del cual
aquél proviene, se traduce como "dirección, administración, gestión".
7
Los términos utilizados en la literatura anglosajona son low-stakes y high-stakes.
14
cierto programa o sistema educativo (Cano García, 1998). Es el tipo de uso de los
resultados que se denomina "conceptual" o "iluminativo" (Rossi, Freeman, Lipsey,
1999; Weiss, 1998; Tiana Ferrer, 1998; Shadish, Cook, Leviton, 1991) o "diagnóstico"
(Lawton, 1996). En estos casos, se supone que la información recabada contribuye a
mejorar el conocimiento y a profundizar la comprensión de los procesos educativos y a
iluminar la concepción que una determinada comunidad tiene de la realidad educativa
(Tiana Ferrer, 1998; Chelimsky y Shadish, 1997).
La evaluación formativa puede tener, a la vez, un uso "instrumental": proveer
información y elementos de juicio a quienes deben tomar decisiones (Rossi, Freeman,
Lipsey, 1999; Weiss, 1998; Tiana Ferrer, 1998; Shadish, Cook, Leviton, 1991). En el
ámbito del gobierno del sistema los resultados de la evaluación pueden emplearse para
orientar la política o conducir los procesos de cambio. En el ámbito institucional y del
aula, pueden utilizarse para mejorar el funcionamiento de las escuelas y realimentar los
procesos de enseñanza y de aprendizaje (Cano García, 1998; Darling-Hammond y Falk,
1997). Específicamente para el mejoramiento de las unidades escolares, Scheerens
(2001) afirma que el proceso de devolución de la información de la evaluación a las
instituciones involucradas puede ser una importante base para la elaboración de
acciones correctivas. En términos del autor, la secuencia "evaluación - devolución de la
información - acción" es un mecanismo fundamental para cualquier proceso de
aprendizaje.
Este tipo de evaluaciones suele ser de bajo impacto. Las evaluaciones se
consideran de bajo impacto cuando sus resultados tienen una función únicamente
informativa y formativa, pero no entrañan consecuencias directas para individuos o
instituciones (Ravela, 2001). Una evaluación de bajo impacto no trae consecuencias
significativas o tangibles aparejadas a los resultados.
8
El término en la literatura anglosajona es accountability. Suele traducirse al español como "rendición de
cuentas" o "responsabilización".
15
comparar el desempeño de docentes, escuelas o distritos enteros (Gipps and Murphy,
1994; Lawton, 1996). A partir de este tipo de evaluación no se intenta comprender ni
realimentar ningún proceso; se responsabiliza a cada actor o institución por sus
resultados.
Este tipo de evaluaciones suele ser de alto impacto. Las evaluaciones de alto
impacto suponen consecuencias directas sobre individuos o instituciones. Implican
cierto nivel de riesgo, dado que suelen conllevar la aplicación de algún tipo de medida
positiva o negativa (Ravela, 2001).
En los últimos años, se ha expandido la evaluación sumativa con consecuencias
de alto impacto9. El uso de los resultados de los exámenes en esta dirección es muy
debatido en la actualidad. Scheerens (2001) sostiene que la rendición de cuentas
(accountability) en educación significa que las escuelas o los sistemas deben proveer
información acerca de su desempeño a otros sectores; tienen que estar abiertos a la
revisión pública; tienen que hacerse responsables por su actuación. A su vez, explica
que el hecho de que las escuelas deban rendir cuentas a todos los actores involucrados,
más allá de los administradores o unidades gubernamentales, es un requisito básico para
la democracia. La circulación de la información es vista como una base para un sistema
educativo más democrático. Asimismo, se concibe que una mayor influencia por parte
de los interesados es un estímulo para el logro de una mayor eficiencia y eficacia.
Con frecuencia, la rendición de cuentas basada en exámenes estandarizados es
vista también como la principal herramienta para mejorar la práctica de la enseñanza.
Chapman y Mählck (1997) sostienen que los diseñadores de reformas educativas
argumentan desde hace tiempo que uno de los medios más directos para cambiar el
contenido y el modo en que los docentes enseñan es enfatizar, en los exámenes
nacionales tomados anualmente a los alumnos, el conocimiento y las habilidades
deseadas. También señalan que, entre quienes apoyan el uso de la evaluación para
modificar la práctica en el aula, hay dos grupos. Por un lado, el que sostiene que este
cambio se logra utilizando la información de la evaluación para motivar a los docentes a
mejorar su labor. Por otro lado, se encuentra el grupo que enfatiza las modificaciones en
los instrumentos de evaluación como forma de comunicar nuevas demandas acerca de
qué y cómo debe ser enseñado (Chapman y Mählck, 1997; Haertel, 1997).
9
Cabe destacar, sin embargo, que algunos países, como Francia o Alemania por ejemplo, aplican hace
décadas, incluso siglos, evaluaciones de tipo sumativo. En tales países son ya clásicos los exámenes de
egreso del secundario: en Francia, el Baccalaureat; en Alemania, el Abitur.
16
Respecto de este establecimiento de pautas, también están quienes opinan que
los diseñadores de políticas fijan estándares de contenidos y de desempeño para
codificar los resultados de aprendizaje esperados y luego dejar que maestros y
administradores de escuelas determinen la mejor manera de lograr esos resultados. Esto
resultaría más sencillo que atender los aspectos más ligados al funcionamiento cotidiano
de las escuelas (Haertel, 2002), tales como el tiempo de instrucción, el tamaño de la
clase y/o la introducción de cambios sustanciales en la formación docente (Linn, 2000;
McDonnell, 1994).
Estos sistemas pueden tener objetos múltiples: los resultados de los exámenes
pueden ser utilizados para hacer rendir cuentas a diferentes actores o niveles de gestión
(Darling-Hammond y Ascher, 1991). Dorn (1998) se refiere a estas posibilidades y
detalla:
- En algunos casos, los resultados se utilizan para juzgar a las escuelas en tanto
conjunto de instituciones.
- Los resultados también pueden ser utilizados para juzgar a los docentes y a los
directivos de las escuelas. En este caso, el sistema de rendición de cuentas actúa
como un modo de incrementar o clarificar a los docentes y a los directivos las
expectativas y las metas a alcanzar.
- En ocasiones, se juzga a los alumnos. Es el caso en que los resultados que obtienen
en las evaluaciones son utilizados como criterio para promocionarlos o para
permitirles la entrada a un nivel educativo superior.
- También las políticas públicas pueden ser objeto de juzgamiento. Lo que se indaga
generalmente es el grado de cumplimiento de los objetivos propuestos.
Darling-Hammond y Ascher (1991) sostienen, para el caso de Estados Unidos,
que la urgente necesidad de mejorar las escuelas ha sido un gran incentivo para la
adopción de nuevos sistemas de rendición de cuentas. Los sistemas tradicionales se
centraban en un nivel más macro: el de los distritos. Los nuevos sistemas toman a las
escuelas como unidad, por lo que la información comienza a ser analizada y devuelta
escuela por escuela (Fuhrman, 1999). En muchos de estos casos, sobre la base de los
resultados obtenidos, funciona un sistema de premios y/o castigos. Los premios pueden
consistir en dinero u otros tipos de reconocimiento tangibles para las escuelas; también
en bonos para los docentes (Fuhrman, 1999). Asimismo, en algunos casos se construyen
y publican rankings que implican una sanción positiva o negativa para las escuelas, en
17
función del lugar en que quedan listadas10 (Clotfelter and Ladd, 1996; Bolon, 2000). A
la vez, puede haber sanciones de naturaleza administrativa, cuando provienen de
agentes gubernamentales, como por ejemplo el despido de directivos o docentes de
escuelas con bajos resultados (Bolon, 2000). Las sanciones también pueden tomar la
forma de cierta reacción de los "consumidores" de la educación:
Los padres, por ejemplo, pueden intentar persuadir a las escuelas para que
cambien sus prácticas o, en situaciones en las que existe libre elección de
escuelas, pueden llevar a sus hijos a otra institución. (Scheerens, 2001, p. 7;
traducción propia)
Como se ve, distintos autores postulan diferentes usos y funciones para las
evaluaciones. Pero, además de defender determinados usos y funciones, cuestionan la
factibilidad, los supuestos y los posibles efectos de los postulados ajenos.
10
Debe aclararse aquí que los rankings pueden ser construidos sobre la base de criterios y medidas
diferentes en función de lo que se desee comparar. Por ejemplo, los rankings de excelencia académica de
las escuelas de negocios, de leyes, de medicina, etcétera, que publica la revista norteamericana U.S. News
& World Report, se basan sobre una combinación de distintas medidas. Algunas de ellas se refieren a la
reputación académica, a las tasas de retención y graduación, a los recursos de las instituciones y al
rendimiento de los alumnos.
18
Tabla 1.3.
Reservas en cuanto algunos de los usos de la información propuestos
También Chelimsky (1995) manifiesta que, dado un sistema de evaluación, debería ser
una rutina comunicar a los diseñadores de políticas información objetiva de importancia
para sus decisiones. Pero argumenta que eso no es lo que ocurre con frecuencia:
…eso no es lo que he observado en la práctica durante más de veinticinco
años. En cambio, lo que suele suceder es que el ámbito de la toma de
decisiones y el proceso evaluativo se encuentran tan separados que nada
puede juntarlos. (p. 3; traducción propia)
11
El autor se basa para esta afirmación en el trabajo de Weiss, C. H. (1988) "Evaluation for decisions: Is
anybody there? Does anybody care?", in: Evaluation Practice, 9 (1), 5-19.
19
Lo mismo afirma Scheerens (2001) cuando dice que la evidencia empírica desafía la
creencia acerca de que la información de la evaluación es utilizada honesta y
linealmente por los políticos. Las investigaciones muestran que la mayoría de las veces
el uso es lento y parcial.
Frente a este panorama, Carnoy y de Moura Castro (1997) sostienen que los
sistemas de evaluación podrían tener un importante efecto sobre el mejoramiento del
desempeño en ciertas condiciones; esto es, en sus palabras:
…si quienes realizan las evaluaciones (los ministerios nacionales de
educación, los estados y los municipios) supieran cómo utilizar los datos
producidos por esas pruebas, y a la vez estuvieran dispuestos a utilizarlos a
fin de adoptar las decisiones de asignación de recursos y políticas
correspondientes. Esto ocurre muy rara vez, incluso en sociedades que
atribuyen gran importancia a los tests, como los Estados Unidos. (p. 19)
Por otra parte, Ravela (2001) alerta que reportar resultados ignorando las
diferencias socioculturales entre las unidades evaluadas puede dar lugar a conclusiones
groseramente inapropiadas:
En general, según lo demuestra abundante investigación empírica, las
diferencias de resultados obedecen principalmente a las diferencias
socioculturales entre las poblaciones con las que trabajan diferentes
sectores o instituciones del sistema educativo, antes que a diferencias en su
eficacia pedagógica. Lo anterior no implica afirmar que todas las
diferencias de resultados se puedan explicar por diferencias en el contexto
social, sino que para hacer afirmaciones válidas respecto a la "eficacia"
pedagógica es imprescindible haber controlado el efecto del contexto
sociocultural. (Ravela, p. 33)
Por este motivo, a decir del autor, cualquier análisis de resultados que no considere las
características contextuales del alumnado resulta de poco valor para la toma de
decisiones o para la extracción de conclusiones que pretendan algo más que la mera
descripción de algunas diferencias. Las comparaciones de resultados que ignoran estos
factores tienen muy poca probabilidad de dirigir la atención de los diseñadores de
políticas hacia los problemas más fundamentales. Es sabido que las diferencias en el
acceso a recursos clave que permiten el aprendizaje, tales como docentes calificados,
instalaciones adecuadas y materiales de calidad, afectan en gran medida el rendimiento
(Darling-Hammond and Falk, 1997).
Dado el énfasis que diversos estudios han puesto sobre la incidencia de aquellos
recursos, cuando se trata de evaluar el desempeño de las escuelas, algunos especialistas
(Ladd, 1996; Mortimore, 1998; Thomas y Mortimore, 1995) comienzan a alentar el
20
desplazamiento de la atención sobre los resultados absolutos de los alumnos hacia el
"valor agregado" por las escuelas. Como se decía, las diferencias de rendimiento entre
las escuelas pueden explicarse por distintas variables, como ser la extracción social de
los alumnos, la actitud de las familias hacia la educación, el clima escolar, la
organización escolar, el estilo pedagógico del docente, el tipo de liderazgo del director.
La escuela puede influir sobre algunas de estas variables, pero no sobre otras que vienen
determinadas previamente, como es el caso de la extracción socioeconómica y cultural
de sus alumnos (Tiana Ferrer, 1998). Por lo tanto, desde esta postura, al evaluar el
desempeño de una escuela o al comparar escuelas, deberían neutralizarse aquellas
variables sobre las que la escuela no puede incidir. Es decir, debería medirse lo que la
institución "agrega" al rendimiento esperable del alumno, controlando las condiciones
de éste previas a la experiencia de enseñanza-aprendizaje.
Por todo lo anterior, a pesar de que en términos ideales, la evaluación debería ser
una institución para la democratización de la toma de decisiones públicas, para informar
decisiones, para diseñar programas y políticas más abiertas al escrutinio y a la
deliberación, algunos autores advierten que los sistemas de evaluación suelen ser
utilizados por los gobiernos para legitimar, informar y, a veces, controlar, las
actividades gubernamentales (House, 1993).
Weiss (1998), por ejemplo, se refiere a los propósitos "encubiertos" de la
evaluación. Para la autora la evaluación es una empresa racional muchas veces
emprendida por razones no racionales o, al menos, no informativas. Entre aquellos
propósitos menciona los siguientes:
1. proveer evidencia "objetiva" para apoyar un curso de acción propuesto12
2. proveer legitimidad a una decisión ya tomada13
3. hacer públicos los resultados de un programa que se supone exitoso como modo de
autoglorificación14.
12
La autora denomina a este propósito Ducking Responsibility.
13
La autora denomina a este propósito Window Dressing.
14
La autora denomina a este propósito Public Relations.
21
En la misma línea, House (1994) sostiene que de los resultados se hace en realidad un
uso de tipo "persuasivo", en cuyo caso la evaluación desempeña una función
eminentemente argumentativa al servicio del discurso político. El autor escribe:
…las evaluaciones no son sino actos de persuasión. (…) La evaluación
aspira a persuadir a un público concreto del valor de algo o de que ese algo
es lo que interesa, apelando a la razón y la comprensión del público. (pp.
70-71)
Para este autor, la evaluación en tanto discurso persuasivo constituye un medio para
guiar y lograr la conformidad con las políticas de gobierno. La evaluación, revestida de
la autoridad de la ciencia, ofrece definiciones de la realidad y juicios de valor que
prevalecen como válidos en la sociedad. En este contexto, la práctica organizada de la
evaluación emerge como la herramienta para informar, legitimar y controlar
científicamente.
Específicamente, la evaluación puede ser utilizada para dar forma a la definición
de los problemas públicos15, de la educación en este caso, para persuadir sobre la
conveniencia de la implementación de acciones futuras. Desde la ciencia política, se
explica que la definición del problema marca absolutamente el posterior desarrollo de la
política pública, al reducir el ámbito de posibles alternativas a considerar (Tamayo Sáez,
1997)16.
15
En ciencia política se habla del proceso o ciclo de construcción de las políticas públicas. La
identificación y definición del problema constituye la primera fase. Las siguientes son: formulación de las
alternativas de solución; adopción de una alternativa; implantación de la alternativa seleccionada;
evaluación de los resultados obtenidos (Tamayo Sáez, 1997).
16
La manera en que se ha definido un asunto público condiciona la configuración de los instrumentos, los
modos y los objetivos de la decisión pública, las opciones de acción. Como ejemplo, Aguilar Villanueva
(1993) sostiene: "No es lo mismo definir la pobreza como explotación que como ausencia de igualdad de
oportunidades o rezago cultural" (p. 52). Desde esta perspectiva se destaca que los problemas no existen
objetivamente, sino que son construcciones sociales, políticas, de la realidad. Por otra parte, señala
también que:
Hay una interdependencia conceptual entre el problema y la solución. Los problemas se
plantean, se estructuran, de manera que tengan una respuesta, sean solubles. (...) La
solución forma parte de la misma definición del problema. (Aguilar Villanueva, 1993, pp.
59-60)
22
2.3.2. Reservas en cuanto al uso de la información para la rendición de cuentas
Fuhrman (1999) sostiene que, aparte de la asistencia técnica que se provee a las
escuelas en algunos casos, los sistemas de rendición de cuentas no suelen estar
diseñados para intervenir directamente sobre aspectos escolares. Esto puede explicarse
por los supuestos sobre los que se edifican. Según la autora se asume que:
…o las escuelas ya poseen la capacidad, pero no el deseo de alcanzar las
metas, o, una vez que las metas están claras y se han establecido
consecuencias importantes, las escuelas intentarán o encontrarán las
capacidad que necesitan para alcanzar las metas. (Fuhrman, 1999, p. 9;
traducción propia)
23
docentes tienden a estrechar la instrucción, al dedicar una parte desproporcionada de
su tiempo a enseñar el contenido superficial y específico de manera exacta a como
es evaluado. Dejan a un lado los conceptos y objetivos subyacentes sobre los cuales
la prueba es construida, los principios más amplios y las áreas no evaluadas, todo lo
cual también forma parte del currículo (Linn, 2000; Clotfelter y Ladd, 1996; Glaser
and Silver, 1994; Noble and Smith, 1994; Shepard, 1991). Además del contenido,
los docentes tienden también a modificar las actividades del aula en función de las
evaluaciones, de forma tal que los alumnos estén mejor entrenados en el tipo de
ejercicios propuesto. En estos casos, los resultados dejan de ser un indicador de un
conjunto amplio de competencias para convertirse en una medida de la capacidad de
los alumnos para responder a las preguntas de las pruebas (Ravela, 2001).
Stake (1998) agrega a esta lista que cuanto más altas son las implicancias de la
evaluación, más posibilidades hay de falsificación de los resultados e intimidación a los
docentes. Muy similar es la postura de Amrein y Berliner (2002), quienes argumentan
que cuanto más relevante se vuelve un indicador social en la toma de decisiones
sociales, más probabilidades hay de que se distorsione o se corrompa el mismo proceso
que pretende monitorear. Para el caso de las evaluaciones con altas implicancias, este
principio estaría alertando que el establecimiento de consecuencias para escuelas,
directores, docentes y alumnos en función de los resultados, podría tener efectos de
distorsión y corrupción17.
17
Haertel (2002) realiza una reseña crítica respecto de estos problemas para el caso de los Estados
Unidos:
Se dice que todo hubiera salido bien si las pruebas de selección de respuestas hubiesen
servido realmente sólo como indicadores del desempeño educacional. Pero cuando se
añadieron premios y sanciones a esas pruebas, obtener puntajes altos se convirtió en un fin
en sí mismo, a lo que inevitablemente siguieron distorsiones en la enseñanza en clase.
Cuando los periódicos clasificaron a las escuelas según sus puntajes promedio en las
pruebas, los administradores de las escuelas instaron a los maestros a dedicar más tiempo
y esfuerzos a la preparación para las pruebas. La mejor manera de obtener puntajes altos
en las pruebas de opción múltiple era tocar cuanto trozo aislado de información que fuese
posible, con la esperanza de cubrir las que aparecerían en el examen. De este modo, las
pruebas externas con altas implicancias o costos condujeron la enseñanza en aula hacia el
uso de hojas de trabajo consistentes en hojas y más hojas de ejercicios para rellenar
espacios en blanco y elegir la respuesta correcta. Inevitablemente, la evaluación en aula
vino a parecerse a las pruebas externas, en detrimento de los objetivos educacionales más
importantes tales como el razonamiento de mayor nivel de complejidad, la solución de
problemas del mundo real y otros. (pp. 4-5)
24
2.3.2.1. La evaluación como sistema de dirección
25
La autoridad sobre la disposición e interpretación de la información recabada por
la evaluación otorgaría autoridad para incidir en la creación de políticas, la distribución
de recursos y la percepción pública (Benveniste, 2002b). Este movimiento es
interpretado por Stake (1998) como ‘un paso hacia la dirección equivocada’: una
imposición de valores externos y una anulación de los esfuerzos de la descentralización.
Una perspectiva similar adopta Weiler (1996) para quien la relación entre
descentralización y evaluación es conflictiva; idea que resume en:
1. La falta de consenso cada vez mayor sobre los objetivos de la educación y, por
lo tanto, sobre los criterios de la evaluación del rendimiento de los sistemas
educativos.
2. La existencia de una relación estrecha entre evaluación y control, que es difícil
de reconciliar con las premisas básicas de la descentralización.
3. La consideración y la utilización de la evaluación como un medio de
"legitimación compensatoria" por derecho propio; esto es, se explota más su
capacidad de legitimación que de información.
Y concluye que:
…tanto la descentralización como la evaluación están relacionadas con el
ejercicio del poder, y siempre existe la posibilidad de que el poder, al que
por una parte renuncia la descentralización, lo pueda recuperar la
evaluación por otra. (p. 230)
Las experiencias que siguen ilustran las distintas configuraciones que los
sistemas de evaluación adoptan: sus diferencias en cuanto a objetivos y,
consecuentemente, en cuanto a opciones técnicas. Ilustran también que no se trata de
modelos puros. Así, si bien los sistemas están más orientados hacia un modelo u otro,
con frecuencia, se proponen objetivos múltiples, correspondientes a paradigmas
contrapuestos.
En primer lugar, se resumen los casos de Estados Unidos, Inglaterra y Francia,
dado que se trata de países con importantes desarrollos en este campo. En segundo
lugar, se reseñan las experiencias de Chile y Uruguay, ya que representan en América
Latina ejemplos de sistemas de evaluación tendientes hacia paradigmas diferentes.
26
3.1. Los casos de Estados Unidos, Inglaterra y Francia
27
también de carácter nacional, junto con una multiplicidad de exámenes elaborados y
administrados por agencias privadas18. A la vez, casi todos los estados poseen sus
propias pruebas de conocimientos (De Landsheere, 1996). En efecto, Bauer (2000)
señala que el número de Estados con programas de evaluación de alumnos se
incrementa de 29 en 1980 a 46 en 1992. Entre la variedad están los orientados a:
- medir el desempeño institucional
- establecer niveles de competencia mínimos para el egreso de la escuela
- establecer puntos de referencia para medir el rendimiento educacional en
comparación con los estándares internacionales (Wolff, 1998).
A modo de ejemplo, el Condado de Montgomery, Maryland, aplica cuatro
programas de evaluación diferentes. El primero de ellos entrega a los padres
información acerca de la medida en que sus hijos dominan los principales elementos del
curriculum. El segundo programa evalúa el grado en que cada escuela cumple con los
estándares de rendimiento establecidos por el Estado. El tercero es un examen de
competencia mínima que debe ser aprobado por los alumnos para recibir un certificado
válido de educación secundaria. El cuarto programa de evaluación se aplica a una
pequeña muestra de alumnos y se utiliza como indicador de los niveles de logro de las
habilidades básicas en relación con las normas nacionales e internacionales (Wolff,
1998).
18
Una de tales agencias es el Educational Testing Service (ETS), que se presenta como la organización
privada de evaluación y medición educacional más grande del mundo. Además del programa NAEP,
administra, entre otros, el GRE, el SAT, el TOEFL, el SLS, el GMAT. Para mayor información, puede
consultarse: http://www.ets.org/.
28
En 1988 se adopta un curriculum nacional. El mismo año, la ley de reforma
educativa (Education Reform Act) prescribe una evaluación nacional basada sobre aquel
curriculum recientemente implementado. Esta evaluación reemplaza a la APU. Los
instrumentos que se aplican en cada aula no son idénticos. Esto se debe a que es cada
uno de los docentes quien confecciona la prueba sobre la base de un banco de ítems que
provee la administración central.
En cuanto a la difusión de los resultados, es obligación de las escuelas enviar a
los padres un informe anual sobre los resultados de sus hijos. Al respecto, Torrance
(1997) especifica que ya desde 1980 las escuelas secundarias deben publicar sus
resultados de las evaluaciones en reportes y prospectos para los padres. En un principio,
esta información es recogida sólo por diarios locales. Sin embargo, a partir de la
Education Reform Act en 1988, los resultados se compilan y publican nacionalmente. Se
genera y se reporta información comparativa por escuela y por autoridad local.
Respecto de Francia, De Landsheere (1996) señala que dicho país se sitúa entre
los líderes en materia de pilotaje de los sistemas educativos con una fuerte "cultura de la
evaluación". En 1987 se crea la Direction de l'Evaluation et de la Prospective (DEP).
En la actualidad no interviene en la elaboración de los curricula, pero aporta
información capital para la adaptación de los programas existentes o para la concepción
de otros nuevos. Los estándares de logro esperados se establecen de manera centralizada
y se toman pruebas anuales a todos los alumnos de grados determinados tanto en
primaria como en secundaria.
De la elaboración de tests y cuestionarios participan distintos miembros de la
comunidad educativa: inspectores, profesores, investigadores, sindicatos docentes y
asociaciones de padres. La DEP reporta los resultados a la opinión pública, los padres,
los alumnos, los profesores, los administradores y el Ministro de Educación. Entre el
conjunto de publicaciones periódicas, se destaca L'etat de l'ecole, que presenta ante el
gran público el estado y la evolución del sistema, y la comparación de algunos aspectos
con los de sistemas de otros países (Wolff, 1998; De Landsheere, 1996). A la vez,
produce una amplia variedad de materiales de enseñanza opcionales orientados a
29
mejorar el rendimiento de los alumnos y a trabajar sobre las fortalezas y las debilidades
de los docentes.
Paralelamente, en Francia ya es tradicional otro tipo de evaluación cuya función
es fundamentalmente sumativa. Se trata del examen de egreso del bachillerato, que debe
ser aprobado por el alumno para obtener su certificación.
30
900 escuelas que han obtenido los peores resultados. Dichas escuelas reciben materiales
didácticos, libros, mejora en la infraestructura y capacitación docente en servicio19.
La implementación del sistema de evaluación chileno se enmarca en una
transformación profunda del sistema educativo, desde principios de los años 80,
liderada por el régimen militar, en ese entonces a cargo del gobierno nacional. Como
explica Benveniste (2002b), dicha transformación altera radicalmente la forma de
administrar y financiar las escuelas. Por un lado, la gerencia de la oferta educativa es
transferida desde el nivel central a los municipios. Por otro lado, el sector privado se
convierte en proveedor de servicios educativos, subsidiado por el Estado. Estos cambios
estarían orientados a promover la competencia y la capacidad del consumidor a elegir,
así como a reducir la intervención del gobierno nacional, de acuerdo con las filosofías
del libre mercado. En este contexto, el sistema de evaluación chileno habría sido
establecido con el objeto de galvanizar la visión promovida por la reforma educativa del
gobierno militar y preservar su continuidad (Benveniste, 2002b).
19
Las escuelas a incluir en el programa deben ser las que el SIMCE coloca en el 10 % más bajo de
rendimiento del país. Deben, además, manifestar abiertamente su voluntad de participar. Pasados tres
años, las escuelas participantes se "gradúan" del programa, dejando de recibir el apoyo adicional
(Constance, 2002).
31
subsistemas de acuerdo con variables geográficas y socioculturales. También las
escuelas fueron clasificadas en cuatro categorías según la composición sociocultural del
grupo escolar que atienden (Benveniste, 2000b; Ravela, 2001).
A diferencia del caso chileno, el sistema de evaluación uruguayo se inserta
dentro de un modelo de Estado basado en la intervención estatal en los procesos de
producción y distribución de bienestar social. En consecuencia, se apoya en la
concepción de que la provisión de servicios educativos es responsabilidad del gobierno
central. Por ello, aunque el gobierno nacional sostiene que las desigualdades educativas
responden a múltiples factores, proclama a la vez su responsabilidad en la mejora
permanente de la calidad de los aprendizajes (Benveniste, 2002b).
4. Síntesis
32
CAPÍTULO 2
El surgimiento y el desarrollo del Sistema Nacional de Evaluación de la Calidad de
la Educación en Argentina
O como afirman Tedesco y Tenti (2002), se trata de una situación en la que no sólo se
expresan las demandas insatisfechas de los sectores que no han podido tener acceso a un
servicio estable, sino también las demandas que provienen de los sectores que ya han
logrado el acceso y ahora exigen su transformación.
33
La década del '90 se inicia entonces con importantes cambios para la educación,
en un contexto en el que también en otros sectores se introducen reformas sustanciales:
fundamentalmente en la economía, en el campo de las políticas monetaria y fiscal, las
privatizaciones, la apertura económica, y los acuerdos internacionales (FIEL-CEP,
1998).
La Ley Federal de Educación (N° 24.195) sancionada en abril de 1993, junto con
la Ley de Transferencia de 1991 (N° 24.049) por la cual se termina de descentralizar la
responsabilidad financiera sobre los establecimientos desde Nación hacia las
jurisdicciones20, inaugura un proceso de reforma del sistema.
La ley 24.049 faculta al Poder Ejecutivo a transferir a las provincias y a la
Municipalidad de la Ciudad de Buenos Aires todos los servicios educativos
administrados por el Ministerio de Cultura y Educación y por el Consejo Nacional de
Educación Técnica (CONET), así como las responsabilidades y funciones respecto de
los establecimientos privados reconocidos. La transferencia incluye los servicios, los
bienes y el personal docente, técnico, administrativo y de servicios generales. El Estado
nacional garantiza el financiamiento y sostén de los servicios transferidos en caso de
que las jurisdicciones no alcancen a solventar por sí mismas la totalidad de los gastos
(FIEL - CEP, 1998).
La Ley Federal de Educación (N° 24.195), en tanto primer ordenamiento que
comprende a todo el sistema educativo, introduce medidas relativas a diferentes puntos
nodales del sistema:
1) En primer lugar, determina una nueva estructura: el Nivel Inicial, la Educación
General Básica (EGB) y el Nivel Polimodal reemplazan al antiguo Jardín de
Infantes, la Primaria y la Secundaria, extendiendo la obligatoriedad escolar de 7 a 10
años.
2) En segundo lugar, atribuye al Ministerio nacional la responsabilidad de:
20
A partir de la Ley de Transferencia de 1991, la responsabilidad financiera de las 3.578 escuelas
secundarias nacionales es transferida a las provincias. Ya en 1978, bajo el régimen militar, había sido
traspasada la responsabilidad por las 6.700 escuelas primarias (Hanson, 1997).
34
- diseñar los Contenidos Básicos Comunes (C.B.C.), que deberán luego ser
concertados y aprobados en el seno del Consejo Federal de Cultura y Educación21,
sobre la base de los cuales más tarde las jurisdicciones deberán elaborar sus propios
diseños curriculares;
- promover y organizar concertadamente, en el ámbito del Consejo Federal de Cultura
y Educación, una red de formación, perfeccionamiento y actualización del personal
docente y no docente del sistema educativo nacional;
- administrar los servicios educativos propios y los de apoyo y asistencia técnica al
sistema, entre ellos, los de planeamiento y control: evaluación de calidad;
estadística, investigación, información y documentación; educación a distancia,
informática, tecnología, educación satelital, radio y televisión educativas en
coordinación con las jurisdicciones.
3) En tercer lugar, dispone que el Ministerio de Cultura y Educación y las
jurisdicciones deberán garantizar la calidad de la formación impartida en los
distintos ciclos, niveles y regímenes mediante la evaluación permanente del sistema
educativo. A tal fin, la ley menciona que deberá convocarse a especialistas de
reconocida idoneidad e independencia de criterio para desarrollar las investigaciones
pertinentes por medio de técnicas objetivas aceptadas y actualizadas (art. 48). En su
artículo 49 se señala que:
…la evaluación de la calidad en el sistema educativo verificará la
adecuación de los contenidos curriculares de los distintos ciclos, niveles y
regímenes especiales a las necesidades sociales y a los requerimientos
educativos de la comunidad, así como el nivel de aprendizaje de los
alumnos/as y la calidad de la formación docente.
Así, a partir de ambas leyes, al Ministerio nacional le compete un nuevo rol: deja
de tener intervención directa sobre las escuelas para convertirse en garante y articulador
de las políticas educativas nacionales, reservándose la conducción estratégica del
sistema. Sus tareas básicas son: la orientación técnico-pedagógica, la producción de
información y la compensación de las desigualdades (Tedesco y Tenti, 2002).
En un trabajo reciente, Tedesco y Tenti (2002) reseñan que la estrategia de
transformación definida se plantea como un avance en todos los campos paralelamente,
21
El Consejo Federal de Cultura y Educación se crea por la Ley N° 22.047 en el año 1980. Está integrado
por el Ministro de Educación de la Nación y los Ministros de Educación de las jurisdicciones. Su misión
es la de planificar, coordinar, asesorar y acordar los aspectos de la política cultural educativa que requiera
el país y que comprometan la acción conjunta de la Nación y las jurisdicciones.
35
de manera estructural y sistemática. Sin embargo, señalan también que algunos de los
componentes de esta transformación son definidos según criterios externos al propio
campo educativo. Es el caso de la transferencia de escuelas en 1991, que perseguiría
principalmente objetivos económico-financieros de equilibrio fiscal (Braslavsky y
Cosse, 1996; Tedesco y Tenti, 2002). Asimismo, también los organismos
internacionales de financiamiento marcarían las políticas educativas de la última
década. En algunos casos, las pautas establecidas para el acceso al crédito externo se
convierten en elementos clave de fijación de políticas, objetivos y metas. La evaluación
del sistema educativo sería uno de los ejemplos, al formar parte de un "paquete de
política educativa" estandarizado y patrocinado por organizaciones multilaterales y
agencias internacionales de ayuda (Benveniste 2002a; Andrada, Narodowski y Nores,
2002).
Por otra parte, Tedesco y Tenti (2002) señalan que este proceso de
transformación estructural, sistémico y acelerado se promueve en un escenario político
carente de confianza social y de previsibilidad sobre el curso futuro de las políticas22.
En este contexto, el proceso impulsado por las leyes mencionadas no se desarrolla sin
generar conflicto entre los distintos niveles de gestión política. En el caso de los
ministerios jurisdiccionales, no todos cuentan con las mismas capacidades y con
recursos semejantes para asumir exitosamente las nuevas funciones y el acuerdo
parlamentario nacional no funciona como condición suficiente para comprometerlos en
su implementación23. En cuanto a la evaluación del sistema, por ejemplo, mientras que
algunas jurisdicciones realizan acciones complementarias al Sistema Nacional de
Evaluación o se limitan a participar de él, otras desarrollan sus propios sistemas, en
general, en oposición o en competencia con el Sistema Nacional de Evaluación
(Andrada, Narodowski, Nores, 2002)24.
22
Un estudio reciente de IIPE-UNESCO (2001) destaca que un dato importante para analizar los procesos
de transformación educativa es el que se refiere a los niveles de confianza en las instituciones. En tal
sentido, el informe destaca los bajos niveles de confianza que despiertan en los docentes argentinos las
instituciones rectoras de la educación, tanto nacionales como provinciales. Según los resultados de la
encuesta aplicada a una muestra representativa de docentes, poco más de un cuarto de ellos confía en los
ministerios de educación, mientras que la mitad expresa su desconfianza.
23
La Ciudad de Buenos Aires, por ejemplo, no aplica hasta el momento la nueva estructura, algunas
provincias no participan en los Operativos Nacionales de Evaluación algunos años y Neuquen,
recientemente, decide suspender la implementación de la Ley 24.195.
24
Andrada, Narodowski y Nores (2002) leen esta situación como una falta de coordinación y de
integración entre los esfuerzos de las distintas jurisdicciones, resultado del escaso espacio de
participación formal de los ministerios jurisdiccionales, previsto en el modelo de evaluación nacional.
36
El proceso de transformación también genera conflicto entre los docentes,
quienes manifiestan importantes niveles de resistencia y fuertes críticas. En el caso del
Sistema Nacional de Evaluación, nuevamente, dos de los principales sindicatos
(CTERA y SUTEBA) denuncian la falta de participación de los docentes en las distintas
instancias del sistema. Asimismo, califican el uso de la información por parte del
Ministerio de Educación nacional como ‘una búsqueda de culpables’ antes que la de un
instrumento de mejoramiento de la calidad de la educación (Nores, 2001).
Pasados algunos años, parece posible afirmar que no se ha logrado todavía
institucionalizar un modo de trabajo estable que garantice al mismo tiempo el mínimo
de unidad y coherencia del sistema con su necesaria diversificación en función de las
situaciones y necesidades particulares de los territorios que conforman la Nación
(Tedesco y Tenti, 2002).
2.1. Estructura
25
Los ministros a cargo durante este período son el Ing. Jorge Alberto Rodríguez (1992 - 1996), la Lic.
Susana Beatriz Decibe (1996 - 1999) y el Dr. Manuel García Solá (mayo - diciembre 1999), bajo la
presidencia nacional del Dr. Carlos Saúl Menem (1989 - 1999).
26
En diciembre de 1999, la Presidencia de la Nación pasa a manos del partido opositor. Junto con el
Presidente electo Dr. Fernando de la Rúa, asume una nueva gestión ministerial, inicialmente a cargo del
Lic. Juan José Llach.
37
programa conserva todos los lineamientos y funciones de la Secretaría (Andrada,
Narodowski y Nores, 2002).
En febrero de 2001, se crea el Instituto para el Desarrollo de la Calidad
Educativa (IDECE)27. El IDECE es creado como un organismo desconcentrado, aunque
dependiente del Ministerio de Educación de la Nación, a través de la Secretaría de
Educación Básica, con el objetivo de otorgar cierto marco de independencia a la
evaluación, al mismo tiempo que una mayor institucionalización al sistema. Tiene a su
cargo las responsabilidades tanto de la Dirección Nacional de Evaluación como de la
Dirección General Red Federal de Información (Andrada, Narodowski y Nores, 2002).
Se compone de un director ejecutivo, un comité científico y un directorio, de los que
dependen tres áreas: Coordinación de Calidad, Coordinación Logística y de Producción
de Información, Coordinación de Investigación y Difusión. A su vez, entre los órganos
de asistencia directa al director ejecutivo, se encuentra el Área de atención al público.
A lo largo de los años, el presupuesto asignado al Sistema Nacional de
Evaluación de la Calidad se va incrementando. Según estimaciones de Andrada,
Narodowski y Nores (2002), en 1997 prácticamente se duplica el presupuesto total
($4.285.000) respecto de los años anteriores ($2.280.823 en 1995 y $2.540.600 en
1996), lo cual coincide con la primera aplicación censal del Operativo en el último año
del Nivel Medio. La cifra se mantiene sin variaciones importantes hasta el año 2000, en
que se triplica ($12.000.000), al extender el universo y las áreas evaluadas, agregar 6°
año de EGB a la evaluación censal y participar de evaluaciones internacionales28.
2.2. Objetivos
38
El Sistema Nacional de Evaluación de la Calidad (…) busca a través de la
evaluación de logros académicos de los estudiantes suministrar
información válida y confiable sobre cuánto es lo que aprende y qué es lo
que aprende el alumno en su recorrido por el Sistema Educativo y acerca
de cuáles son los factores asociados a ese aprendizaje.
Este sistema proporcionará los insumos fundamentales para la toma de
decisiones relacionada con la formulación de políticas educativas de
mejoramiento de la calidad. (op. cit., p. 2)
39
2.3. Concepción de calidad sobre la que se fundamenta el sistema
La tercera dimensión se refiere a la calidad de los procesos y de los medios que brinda
el sistema educativo. Desde esta perspectiva:
…una educación de calidad es aquella que ofrece a los niños y adolescentes
un adecuado contexto físico para el aprendizaje, un cuerpo docente
adecuadamente preparado para la tarea de enseñar, buenos materiales de
estudio y de trabajo, estrategias didácticas adecuadas, etc.. (Ministerio de
Educación, Evaluación de los resultados del SINEC 1993/1999, s/f, p. 4)
29
Sólo en 1993 también se aplica un cuestionario complementario a una muestra de padres.
40
y el último año del nivel medio. En el año 2000 la aplicación se ha expandido,
incluyendo a tercero, sexto y noveno de la Educación General Básica (EGB) y el último
año del nivel medio.
También las áreas evaluadas van ampliándose. En un comienzo, los Operativos
evalúan sólo Matemática y Lengua. En el último Operativo implementado (año 2000),
se toma también Ciencias Sociales y Ciencias Naturales en EGB, y Física, Química,
Geografía e Historia en Media (IDECE, 27/07/01).
A su vez, aumenta la población evaluada. En el primer Operativo, las
evaluaciones se aplican en los dos niveles señalados con carácter muestral. A partir del
año 1997, los instrumentos de evaluación del último año del nivel secundario
comienzan a aplicarse censalmente. Estas aplicaciones censales reciben un nombre
diferente a los Operativos Nacionales de Evaluación que se implementan cada año. Se
denominan Operativos Nacionales de Evaluación de Finalización del Nivel Secundario.
En el año 2000 también 6° EGB es censado.
En cuanto a las pruebas de conocimiento, algunas consisten únicamente en
ejercicios de respuesta cerrada; esto es, de opción múltiple. Sin embargo, otras incluyen
también uno o dos ítem de respuesta abierta30.
30
En el Anexo 1 se incluye una descripción detallada de cada Operativo Nacional de Evaluación
implementado durante el período estudiado.
41
A continuación se presenta una tabla en la que se destacan los años en que
aparecen y se desarrollan estas líneas de acción. De este modo, puede apreciarse
panorámicamente el grado de continuidad de las acciones a lo largo del tiempo –mirada
longitudinal-, así como la cantidad de acciones emprendidas cada año –mirada
transversal-. Ambos aspectos serán retomados en el análisis de los capítulos siguientes.
Tabla 2.1.
Líneas de acción desarrolladas por el Ministerio nacional a partir de los Operativos
Nacionales de Evaluación de la Calidad de la Educación por año
Tabla 2.2.
Audiencia de las líneas de acción desarrolladas por el Ministerio nacional por año.
42
Las líneas de acción que aquí se indagan se elaboran, en principio, a partir de la
información recabada en los Operativos Nacionales de Evaluación. Como ya se dijo, en
los Operativos se recaban dos tipos de informaciones con dos instrumentos diferentes:
1. Las pruebas de conocimiento recaban información acerca de los logros académicos
de los estudiantes.
2. Los cuestionarios complementarios aplicados a directivos, docentes y alumnos,
recaban información para contextualizar los resultados de las pruebas y poder
indagar cuáles son los factores asociados al rendimiento académico de los alumnos.
En la tabla que sigue, puede observarse a lo largo del tiempo qué tipo de información es
utilizado como insumo o como base para la construcción de las líneas de acción.
Tabla 2.3.
Tipo de información sobre la que se basan las líneas de acción desarrolladas por el
Ministerio nacional por año.
43
3.1. La diseminación de los resultados de los Operativos Nacionales de Evaluación
31
Se utiliza aquí el término "diseminación" siguiendo el trabajo de Rossi, Freeman y Lipsey (1999). Este
término se refiere a la serie de actividades mediante la cual el conocimiento de los hallazgos de la
evaluación es puesto a disposición de las audiencias relevantes. Los autores distinguen entre diseminación
primaria y diseminación secundaria. La primera hace referencia a la diseminación de hallazgos detallados
de una evaluación a sus patrocinadores y a las audiencias técnicas. La segunda hace referencia a la
diseminación de hallazgos sintetizados y frecuentemente simplificados a otras audiencias interesadas.
32
La entrega al Congreso se realiza en cumplimiento del artículo 48 de la Ley Federal de Educación.
Dicho artículo establece que "El Ministerio de Cultura y Educación de la Nación, las Provincias y la
Municipalidad de la Ciudad de Buenos Aires, deberán garantizar la calidad de la formación impartida en
los distintos ciclos, niveles y regímenes especiales mediante la evaluación permanente del sistema
educativo (…) El Ministerio de Cultura y Educación deberá enviar un informe anual a la Comisión de
Educación de ambas Cámaras del Congreso de la Nación donde se detallen los análisis realizados y las
conclusiones referidas a los objetivos que se establecen en la presente ley".
44
complementarios. De este modo, la diseminación de los resultados de logro
académico se realiza también en relación con los factores asociados al rendimiento.
2. La diseminación de resultados nacionales –luego también jurisdiccionales y
escolares- a la prensa. En paralelo a los informes, a partir de 1995 también todos los
años, el Ministerio provee a la prensa informaciones sobre los resultados generales
de las evaluaciones.
3. La diseminación del rendimiento de cada establecimiento a la sociedad vía Internet
y teléfono. Esta diseminación se realiza desde 1998 y sólo sobre la base de los
Operativos Censales de Evaluación.
4. La diseminación del rendimiento del establecimiento y de cada uno de sus alumnos
a cada establecimiento vía informes confidenciales. Esta entrega se lleva a cabo en
1998 y 1999, también exclusivamente sobre la base del Censo de Finalización del
Nivel Secundario.
5. La diseminación de información sobre los factores asociados al rendimiento
académico a través de una serie de cinco documentos. Esta serie se publica en 1999
y habría sido distribuida entre funcionarios técnicos y entre académicos.
6. La diseminación de resultados desagregados por jurisdicción, por establecimiento y
por alumno, a las autoridades de los ministerios jurisdiccionales a través de un CD-
ROM. Este CD se reparte en 2000 y 2001.
7. La diseminación de información sobre el rendimiento del propio establecimiento a
cada directivo que lo solicite, vía Internet. Dichos datos pueden solicitarse en el año
2001, sólo para los casos de los niveles censados –ese año, 6° EGB y 5°/6°
Polimodal.
8. La diseminación de las bases de datos de los cuestionarios complementarios de
alumnos, docentes y directores de los Operativos de 1997, 1998, 1999 y 2000 -y de
los cuestionarios mismos- vía Internet. Esto sucede en 2001.
Como se ve, estos distintos tipos de diseminación de los resultados de los
Operativos Nacionales de Evaluación se diferencian entre sí fundamentalmente por la
información que reportan, la audiencia a la que se dirigen y los medios que utilizan.
Estas diferencias no son sólo formales sino que asignan a las evaluaciones nacionales
distintas funciones e implicancias.
45
3.2. La elaboración de recomendaciones metodológicas para la enseñanza dirigidas a
los docentes
46
resultados a supervisores y directivos, a la vez que capacitarlos en el uso de esa
información.
Entre 1997 y 1998 se publican los materiales referidos. Ellos se proponen, en
rasgos generales, orientar el trabajo de gestión desde este nivel, estimulando que se
tome como insumo la información recabada en los Operativos, así como capacitar en la
generación de información relevante para la institución.
Para la misma época, se organizan desde el Ministerio nacional jornadas y
seminarios en distintas jurisdicciones. El propósito es trabajar con los supervisores y
directivos la información recabada, reflexionando sobre la potencialidad de la
evaluación en tanto instrumento de diagnóstico y de mejoramiento de la calidad de la
educación.
47
3.5. La distribución de los instrumentos de evaluación
48
información. Otras se vinculan con la promoción de acciones de mejora a través de la
elaboración de instrumentos para la práctica de docentes, directores y supervisores.
En torno a la diseminación se agrupan:
1. La diseminación de los resultados de los Operativos Nacionales de Evaluación.
2. La realización de estudios sobre factores asociados al rendimiento académico33.
3. El reconocimiento a los establecimientos con mejores resultados.
En torno a las acciones que brindan instrumentos para el mejoramiento de las
prácticas de diversos actores del sistema se agrupan:
4. La elaboración de recomendaciones metodológicas para la enseñanza.
5. La distribución de instrumentos de evaluación.
6. La capacitación de supervisores y directivos en el uso de la información.
33
Se vincula aquí la realización de estos estudios con la diseminación de la información, ya que en el
análisis que sigue se pone el acento en la escasa publicidad de sus hallazgos.
49
CAPÍTULO 3
Las acciones vinculadas con la diseminación de la información
34
"Tipo de información" se refiere aquí tanto a la distinción entre información recabada por las pruebas
de conocimiento o por los cuestionarios complementarios –es decir, información sobre rendimiento
académico o sobre factores asociados a él-, como a la distinción de los niveles a los que corresponde la
información –nacional, jurisdiccional, escolar, de los alumnos.
50
Tabla 3.1.
Modalidades de diseminación de la información por año
Modalidades Año
94 95 96 97 98 99 00 01
1. Diseminación de resultados nacionales a las
escuelas, los ministerios jurisdiccionales y el Congreso
de la Nación a través de informes generales.
51
Tabla 3.2.*
Información difundida por año según audiencia, medio y nivel de la información
52
diseminados por primera vez, aunque con un alcance muy limitado. En el año 2001 se
diseminan por segunda vez, en este caso de manera integrada al resto de los resultados.
3. La tercera línea de acción identificada se trata de un sistema de premios
materiales u honoríficos para las escuelas con más altos puntajes, que se lleva a cabo
entre los años 1997 y 1999. Este sistema forma parte de una modalidad particular de
diseminación de los resultados –incluida en la primera línea- que consiste en destacar
públicamente a las escuelas mencionadas.
53
resultados de los cuestionarios complementarios a los de las pruebas de rendimiento.
Asimismo, mantiene diversos medios de diseminación.
A continuación, se presentarán las distintas formas que va asumiendo la
diseminación de los resultados a lo largo de las etapas señaladas. Se considerará tanto la
información que se disemina como la que no. Se intentará en un primer momento
describir las características que adopta la diseminación de resultados en sí misma. La
lectura en relación con el contexto –que corresponde a un momento posterior en la
indagación realizada- se irá intercalando, una vez presentadas las regularidades, las
transformaciones, las apariciones y las supresiones.
Tabla 3.3.
Principales características de la diseminación de resultados de los Operativos Nacionales
de Evaluación durante la primera etapa (1994-1997)
35
En el Anexo 2 se presenta el listado de informes publicados por año.
36
Es necesario aclarar que por razones metodológicas la indagación se centra fundamentalmente en los
informes de resultados y sólo complementariamente en las publicaciones de la prensa. En términos
generales, en este estudio se indaga el uso que hace de la evaluación el Ministerio de Educación nacional.
En el caso de las notas periodísticas, la información provista por el Ministerio está mediada por los
reporteros gráficos. Por eso el análisis de la información diseminada vía la prensa debe ser restringido.
54
1.1. La función conceptual de la evaluación
37
En el Anexo 3 puede verse un ejemplo correspondiente al Informe de Resultados del Operativo
Nacional de Evaluación de 1996.
38
En el Anexo 4 puede verse un ejemplo de tal comparación, correspondiente al Informe de Resultados
del Operativo Nacional de Evaluación de 1995.
55
sentido pedagógico de los promedios tomados del número de respuestas correctas
obtenidas por los alumnos. Esquivel (2000), por ejemplo, cuestiona:
¿Qué información de utilidad le comunican los promedios a un maestro de
aula que le permita mejorar su trabajo con los niños? ¿Qué utilidad tiene
para un curriculista en el Ministerio de Educación conocer el promedio en
resolución de problemas de la prueba de matemáticas de quinto grado? (p.
32).
Por otro lado, otros autores realizan observaciones similares, pero respecto de la no
consideración de las características contextuales del alumnado. Ravela (2001) destaca
que los resultados que ignoran las diferencias socioculturales resultan de poco valor
para la toma de decisiones o para la extracción de conclusiones que pretendan algo más
que la mera descripción de algunas diferencias. En opinión del autor, tales resultados
tienen poca probabilidad de dirigir la atención de los diseñadores de políticas hacia los
problemas más fundamentales.
39
Desde la perspectiva de la administración de empresas se ha destacado que para introducir un cambio
importante en cualquier organización resulta fundamental instalar entre sus actores el "sentido de crisis",
de modo tal de generar un mayor grado aceptabilidad de tal cambio (Kotter, 1996).
56
un problema es definirlo y hacerlo dócil al gobierno" (p. 221; traducción propia). A la
vez, abundante literatura de la ciencia política40 sostiene que la manera en que se define
un asunto público condiciona las opciones de acción posibles. Aguilar Villanueva
(1993) afirma que:
Hay una interdependencia conceptual entre el problema y la solución. Los
problemas se plantean, se estructuran, de manera que tengan una
respuesta, sean solubles. (...) La solución forma parte de la misma
definición del problema. (pp. 59-60)
Y la definición del estado de situación, revestida con la autoridad de los números y del
estilo científico, contribuye a legitimar las acciones gubernamentales (House, 1994;
Rose, 1999), las soluciones ya elaboradas. Es decir, podría pensarse que con el poder de
los números se define "objetivamente" el estado de crisis del sistema educativo,
legitimando a la vez la reforma sancionada que, en tal estado de crisis, aparece como
necesaria. En este sentido, en términos de Rossi, Freeman y Lipsey (1999) esta primera
etapa estaría signada por la necesidad de proveer un contexto a una decisión que ya ha
sido tomada. O, como postula Weiss (1998), el propósito de la evaluación sería el de
armar la escena41 para amparar los nuevos lineamientos políticos en la "parafernalia"
que provee el estilo científico de la evaluación.
40
Por ejemplo, Aguilar Villanueva (1993), Tamayo Sáez (1997), Theodoulou, S. Z., Cahn, M. A. (eds.)
(1995).
41
El término en inglés utilizado por la autora es window dressing.
57
En términos de los autores, esta maximización y este incremento serían independientes
de la eficacia inmediata de las prácticas y de los procedimientos adquiridos. En efecto,
durante esta primera etapa, el Sistema de Evaluación disemina información de carácter
general, pero no los insumos suficientes para la toma fundamentada de decisiones por
parte de otros actores. Tampoco se encuentra asociado a un sistema de rendición de
cuentas. Sin embargo, desde la perspectiva de Meyer y Rowan (1997) el acto de evaluar
en sí mismo serviría al Ministerio nacional para autolegitimarse. El Ministerio puede
mostrar que aplica prácticas de política educativa -la evaluación del sistema en este
caso- prevalecientes e institucionalizadas en los países avanzados.
Desde este plano, puede interpretarse, por ejemplo, el recurso constante a la
comparación de los resultados de un Operativo con el de años anteriores. Es sabido que
los cambios en educación son lentos (Rama, 1991); que mejorar la calidad de los
resultados educativos implica ritmos y plazos prolongados (Tedesco y Tenti, 2002).
Difícilmente puedan observarse diferencias significativas en los resultados de un año a
otro que obedezcan al progreso en el rendimiento de los alumnos42. Sin embargo, puede
servir a esta función simbólica legitimadora del accionar del Ministerio (Benveniste,
2000) al recalcar que evalúa -es decir, que actúa racionalmente y de acuerdo con
parámetros internacionales- todos los años.
42
Vale destacar que particularmente sobre las comparaciones de los resultados de un año a otro se han
realizado serias advertencias técnicas. Por un lado, año tras año variaría el nivel de dificultad de las
pruebas (Perusia, 2001). Por otro lado, la estructura de la prueba y el contenido evaluado tampoco sería
constante a lo largo de los años (Cols y Basabe, 1998). Los instrumentos a lo largo de los años no
medirían los mismos atributos (Larripa, 2002).
43
La aplicación censal del instrumento de evaluación en el último año del Nivel Medio no se justifica
únicamente por el propósito de poder hacer a cada escuela una devolución acerca de su desempeño, de
modo tal que les permita retroalimentar su desempeño e implementar acciones de mejora. La aplicación
58
En primer lugar, en los informes de resultados comienza a exponerse el
promedio de los porcentajes de aciertos de cada jurisdicción. Se construye una tabla en
la que las jurisdicciones se ordenan de mayor a menor según sus valores de
rendimiento44. Es decir, se expone el resultado de cada jurisdicción y se compara a las
jurisdicciones entre sí. A la vez, se compara tal tabla con la del año anterior. Ello
permite ver la diferencia del puntaje obtenido por cada jurisdicción de un año a otro (es
decir, la evolución del rendimiento promedio de cada jurisdicción), así como el ascenso
o el descenso de posición de cada jurisdicción en la tabla.
En segundo lugar, durante esta misma etapa, se reportan en la prensa, además de
los puntajes nacionales, los de las jurisdicciones que han obtenido los resultados más
bajos –información que sería provista por los funcionarios ministeriales en las
conferencias de prensa.
En tercer lugar, ya desde 1997, vía la prensa se publican las escuelas primarias y
secundarias que han obtenido los mejores logros –muchas de las cuales, además, reciben
premios materiales por parte de las autoridades del Ministerio y, en alguna ocasión,
también por parte del Presidente de la Nación. Para tal reconocimiento, se consideran
los resultados de séptimo grado del primario y de quinto año del secundario en Lengua
y Matemática en los Operativos implementados en 1996, 1997, 1998 y 1999.
En cuarto lugar, en función de la información recabada de manera censal para el
último año de Nivel Medio a partir de 1997, se pone a disposición del público a través
del sitio de Internet del Ministerio nacional el rendimiento promedio de cada
establecimiento. Los establecimientos aparecen en listados –denominados
45
coloquialmente rankings - agrupados por jurisdicción y ordenados de mayor a menor
59
según el puntaje alcanzado. Este medio de diseminación es acompañado por un servicio
de información telefónico gratuito para quienes prefieran esta vía antes que la
electrónica46. Como en el caso de las jurisdicciones, se expone el resultado alcanzado
por cada escuela, a la vez que se compara a las escuelas entre sí.
En quinto lugar, parte de la información de cada establecimiento censado es
comunicada a su directivo de manera confidencial tanto en 1998 como en 1999.
Tabla 3.4.
Principales características de la diseminación de resultados de los Operativos Nacionales
de Evaluación durante la segunda etapa (1998-1999)
combinación de distintas medidas. Algunas de ellas se refieren a la reputación académica, a las tasas de
retención y graduación, a los recursos de las instituciones y al rendimiento de los alumnos.
60
conllevar consecuencias o la aplicación de algún tipo de medida positiva o negativa
sobre las instituciones o actores que se suponen responsables (Ravela, 2001).
Desde la perspectiva de la evaluación en tanto discurso (House, 1994; House,
1993), este tipo de diseminación persuade acerca de quién es responsable por los
resultados. Ya no se evalúa –y responsabiliza- solamente al sistema educativo en
general; la evaluación –y la responsabilidad- recae ahora sobre las jurisdicciones y sobre
las escuelas.
Cuando se hacen públicas vía la prensa las jurisdicciones con peores resultados o
las escuelas con mejores resultados, la responsabilización anterior se refuerza con un
sistema de sanciones.
En el caso de las jurisdicciones, la diseminación pública de las que han obtenido
en promedio los porcentajes de acierto más bajos puede actuar como una sanción
negativa. En el caso de las escuelas, el reconocimiento público por parte de las
autoridades nacionales, con cobertura mediática, de las instituciones que han obtenido
más altos resultados, es una forma de sanción positiva. En efecto, sobre este
reconocimiento se monta un sistema de premios materiales, lo cual constituye una de las
líneas de acción identificadas en este trabajo.
Puntualmente, sobre la base de una revisión de notas periodísticas del momento
(1998 – 1999) y de los testimonios de altos funcionarios del Ministerio, puede
reconstruirse que:
A partir de los resultados del Operativo de 1996 -de implementación muestral en
todos los niveles evaluados-, se elaboran dos rankings: uno para las escuelas
primarias y otro para las escuelas secundarias que alcanzaron los mejores puntajes
en cada una de las provincias. En ambos casos, sólo se consideran las escuelas
públicas.
A partir de los resultados del Operativo de 1997 -de implementación muestral para
7mo grado y censal para 5to año- en mayo de 1998 se elaboran tres rankings: uno
para las escuelas primarias públicas, otro para las escuelas secundarias públicas y un
46
Se comunica la disponibilidad de este servicio en la última página del Informe de Resultados del
Operativo de 1997.
61
tercero para las escuelas secundarias privadas con los mejores rendimientos de cada
provincia47. El 1 de junio del mismo año, se realiza un acto en el Ministerio de
Educación, en el que se premia a cada una de las escuelas mejor posicionadas en
cada provincia. A dicho acto asisten la Ministro de Educación, el Presidente de la
Nación, la mayoría de los gobernadores, el Jefe de Gabinete, el Secretario General
de la Presidencia y algunos senadores48.
A partir de los resultados del Operativo de 1998 -de implementación muestral para
7mo grado y censal para 5to año- en mayo de 1999 se elaboran cuatro rankings: uno
para las escuelas primarias públicas y otro para las privadas, uno para las escuelas
secundarias públicas y otro para las secundarias privadas, nuevamente con los
mejores rendimientos de cada provincia.
A partir de los resultados del Operativo censal de 1999 –es decir, sólo de los
resultados correspondientes al Operativo de Finalización del Nivel Secundario-, en
noviembre de 1999 se identifica al secundario público y al secundario privado con
los mejores rendimientos del país. El Presidente de la Nación, en presencia del Jefe
de Gabinete y del Ministro de Educación, entrega en Buenos Aires el premio a las
autoridades y a los alumnos de las escuelas. El mismo consiste en una plaqueta para
la escuela, mil pesos49 para gastos educativos y diplomas. En el mismo acto se
premia también a las cinco escuelas secundarias (dos estatales y tres privadas) con
mejores resultados en el Operativo anterior.
En la tabla que sigue se sintetiza la información precedente.
Tabla 3.5.
Sectores y niveles educativos premiados por año
Año
Sectores y niveles premiados 94 95 96 97 98 99* 00 01
Público Primaria
Secundaria
Privado Primaria
Secundaria
* La columna para el año 1999 es doble, dado que se premia a las escuelas en dos ocasiones: la primera,
en función de los resultados de las evaluaciones de 1998 y la segunda, de los de 1999.
47
No se han encontrado referencias acerca de escuelas primarias privadas.
48
Es necesario aclarar que este acto, que cuenta con una amplia participación de los máximos
funcionarios del gobierno, se enmarca en un agitado contexto político de pelea al interior del partido
oficial por la candidatura presidencial para el año 1999.
49
Equivalente a mil dólares estadounidenses en ese momento.
62
Como medida, sigue la línea de los nuevos sistemas de rendición de cuentas, que
toman a la escuela como unidad y erigen sobre los rendimientos un régimen de premios
y/o castigos (Fuhrman, 1999). Se trata de una política de incentivos, apoyada en una
lógica distinta a la que sustenta el uso formativo de la evaluación, orientado a
comprender e intervenir sobre las dificultades detectadas. La concepción de mejora
sobre la que se apoya el reconocimiento a las escuelas con mejores resultados supone
que tanto la promesa de recompensas como la amenaza de castigos alimentan los
esfuerzos para progresar. Es decir, supone que la información por sí sola no es
suficiente para motivar a los docentes a enseñar bien y a los alumnos a aspirar hacia
metas más altas50 (Heubert y Hauser, 1999).
Respecto de esta última medida, debe señalarse el uso inapropiado que se ha
hecho de la información. Gran parte de los listados confeccionados con las escuelas con
mejores resultados se basan sobre muestras representativas. Es decir, las escuelas que se
mencionan han formado parte de la muestra construida para la implementación de la
evaluación. Seleccionar escuelas de tal muestra y honrarlas por haber obtenido el
rendimiento más alto es una falta técnica. La aplicación muestral del instrumento es
suficiente cuando el propósito de la evaluación es formativo. En cambio, cualquier
sistema de incentivos o rendición de cuentas por escuela debe, por definición, tener
carácter censal (Ravela, 2001). Por lo tanto, es incorrecto hablar, como se ve en los
medios gráficos, de "las mejores escuelas", "la escuela que ganó", "la lista de las top",
50
En la literatura especializada diversos autores alertan sobre las posibles distorsiones que se derivan de
los usos de los resultados de alto impacto, como en este caso. Una de las consecuencias señaladas es que
la preocupación por tener éxito en las pruebas determine los contenidos enseñados (De Landsheere, 1996;
Heubert and Hauser, 1999; McDonnell, 1994). También señala Stake (1998) que cuanto más altas son las
implicancias, más probabilidad hay de que se incurra en prácticas corruptas, como la falsificación de
resultados o la intimidación a los docentes. En el caso que aquí se indaga, los medios gráficos han
registrado algunas de estas distorsiones. En cuanto al enseñar para las evaluaciones, un director de una
escuela "ganadora" dice al diario Clarín (26/11/1999):
…nosotros nos preparamos con los chicos y las profesoras de matemática y lengua con
toda la intención de hacer un buen papel en este examen. Nos pusimos la camiseta.
Queríamos destacarnos.
Por otro lado, la misma intención de destacarse parece conducir a algunas autoridades de escuelas a
incurrir en ciertas infracciones. El 19 de noviembre de 1998 se publica en el diario Clarín que los alumnos
de un instituto privado de Olivos denuncian a las autoridades por haber repartido machetes con los
resultados de las pruebas de evaluación. Días más tarde, en la provincia de San Luis se realizan denuncias
sobre irregularidades en dos colegios privados:
Algunos padres denunciaron que en el Colegio Santa Catalina 'los alumnos recibieron
apuntes y machetes relacionados con la evaluación' y que en el San Luis Rey fueron
excluidos del examen 'todos los estudiantes con bajas calificaciones o desparejo
rendimiento escolar'. (Diario Clarín, 22/11/1998)
63
"el mejor secundario del país", cuando no todas las escuelas del país están incluidas en
la evaluación51.
51
Uno de los funcionarios entrevistados lo explica del siguiente modo:
El premio era honorífico o material didáctico. Salió en la tapa de los diarios, pero era
macanas totales. No porque los datos no fueran ciertos, sino porque vos no podés decir
que la escuela primaria de Las Pirquitas de Catamarca es la mejor escuela del país.
Porque fue muestral, porque a lo mejor tenía cuatro séptimos grados y se evaluó a uno.
Pero la directora de las escuela de Las Pirquitas estaba ahí y Menem le daba un premio.
(E2)
52
Las autoridades ministeriales son conscientes del poder de presión que ejerce este tipo de diseminación
de la información. Una de ellas relata:
Nunca los ministros terminaron de aceptar del todo que se publicaran sus rendimientos.
Siempre les daba un poquito de escozor. (…) lo que pasa es que siendo ministro de una
provincia, tenés el 29% del presupuesto de la provincia y sacás 45.20 de rendimiento... y el
gobernador te quiere matar. Entonces para ellos era un problema. (E1)
53
Los tres modelos identificados por el autor son: (a) control público o estatal, que implica a
representantes electos y funcionarios designados políticamente que conducen instituciones tales como
escuelas; (b) control profesional, que implica el control por parte de maestros, profesores y
administradores u otros profesionales que trabajan al interior de una institución; y (c) control del
consumidor, que opera a través de la participación directa del público o de mecanismos de mercado
derivados del sector privado.
64
aquellos niveles de gestión, le otorga, junto con la información, cierto poder de
regulación. En este sentido, este sistema podría interpretarse como un modo de reforzar
la dirección central: como si el Ministerio "asociara" a la opinión pública para ejercer
presión, para regular el sistema educativo, para conseguir la alineación de los distintos
niveles a sus criterios.
De hecho, estos mecanismos de accountability o rendición de cuentas suelen
basarse sobre una serie de supuestos en aquella dirección. En primer lugar, suponen que
el hecho de que los logros de determinado nivel de gestión sean públicos actuará como
incentivo para que los actores de dicho se esfuercen por mejorar su desempeño
(Fuhrman, 1999). En segundo lugar, entienden que la competencia y las sanciones
positivas y negativas que surgen de la comparación son esenciales para motivar a los
actores institucionales a mejorar sus tareas (Heubert y Hauser, 1999). En tercer lugar,
conciben que la circulación de esta información puede generar una mayor atención por
parte de los actores involucrados, quienes exigirán a los responsables que se
desempeñen con mayor eficiencia y eficacia (Scheerens, 2001) –también reflejadas en
las evaluaciones siguientes.
En el caso de las sanciones positivas a las escuelas con mejores resultados,
además de la posible búsqueda de alineamiento por medio del sistema de incentivos,
parece tratarse fundamentalmente de un acto de legitimación de la acción del gobierno
de turno. Con su gran repercusión mediática y la participación de las figuras políticas de
más ato nivel, los principales propósitos parecen ser enfatizar las acciones realizadas54.
54
En efecto, estas medidas son de corte político y no técnico. Es decir, no son diseñadas por los equipos
técnicos de la unidad de evaluación. Estos equipos identifican las escuelas con más altos rendimientos.
Pero la decisión de premiarlas públicamente es de la cúpula del gobierno. Uno de los funcionarios
entrevistados sostiene esta afirmación con respecto a los actos y a las entregas de premios:
Nosotros con eso no teníamos nada que ver. No era parte de la tarea de evaluación para
nada. El acto no lo armábamos nosotros. Era ceremonial, el área ministro. Nosotros lo que
poníamos era la información de base. (…) Yo jamás estuve de acuerdo. Me llevó
discusiones, peleas. (…) Eso fue una decisión política, no técnica. (E1)
65
información respecto de los contenidos evaluados y a evaluar55. En los informes
publicados durante la etapa anterior (1994 – 1997) es posible encontrar:
Contenidos incluidos y el porcentaje de la prueba que representa cada uno.
Contenidos que presentaron mayor dificultad. En estos casos, se señala la
competencia y el contenido evaluado, el número de ítem en el que se evalúa tal
competencia y tal contenido, y el porcentaje de respuestas correctas.
Ejemplos de ejercicios incluidos en las pruebas con su respectivo porcentaje de
respuestas correctas.
En esta etapa, 1998 –1999, los informes suman nuevos elementos:
Estructura de las pruebas o tabla de especificaciones56.
Contenidos que presentaron mejor rendimiento.
Ejercicios experimentales a ser aplicados en el Operativo siguiente. En el informe
correspondiente a las evaluaciones de 1997 se incluyen una grilla para Matemática y
otra para Lengua que presentan los ejercicios experimentales para ser aplicados en el
Operativo de 1998: detallan el número de ítem, la competencia, el contenido, el
requerimiento al alumno y el promedio de rendimiento logrado (para tercer año de
EGB).
Ejercicios relativos a la implementación de la transformación curricular. También en
el informe de 1997 se incluye otra grilla que detalla para tercer año de EGB el
número de ítem, la competencia, el contenido, el requerimiento al alumno y el
promedio de rendimiento logrado en los ejercicios relativos a la implementación de
la transformación curricular.
Ejemplos de ítem de las pruebas aplicadas. En los informes de esta etapa a los
ejemplos y porcentajes de respuestas correctas, se suma la especificación del
contenido y la competencia evaluada y las operaciones que se requieren para
resolver satisfactoriamente el ejercicio.
55
Esta comunicación de contenidos es similar a la que se realiza también por medio de las
recomendaciones metodológicas para la enseñanza. En el capítulo que sigue, referido a la elaboración de
estas recomendaciones, se vuelve a analizar este aspecto más profundamente.
56
Las tablas de especificaciones se definen como cuadros de doble entrada en los que se ingresan dos
tipos de informaciones: en las filas, los contenidos a evaluar; en las columnas, las operaciones que se
espera que realice cada alumno con el contenido señalado. El cruce de fila y columna identifica una
competencia determinada en relación con un recorte del saber. Cada cruce considerado importante a los
efectos de ser evaluado tiene un peso relativo, comparativo respecto de los demás, y condiciona la
cantidad de ítems que se considerarán para la evaluación.
66
En un contexto político en el cual se pretende, aparentemente, que las
jurisdicciones y las escuelas se alineen a las directrices definidas nacionalmente, la
comunicación de los contenidos y del tipo de actividades que componen las pruebas
puede ser un intento más en esa dirección. Algunos especialistas en reformas educativas
argumentan que enfatizar en los exámenes anuales los conocimientos y las habilidades
deseadas es uno de los medios más directos para incidir en el contenido y el modo en
que los docentes enseñan (Chapman y Mählck, 1997; Haertel, 1997). Ligado este
mecanismo a los esquemas de control estatal y de la opinión pública vistos en el
apartado anterior, la probabilidad de que los actores jurisdiccionales y escolares
atiendan a los lineamientos nacionales se incrementa. Como explica Benveniste
(2002b):
A menor consecuencia, menor será la influencia de las prácticas
evaluativas en el ámbito escolar. Cuando lo que está en juego es de mayor
valor, más probable será que la evaluación influya en el comportamiento de
los actores educativos. (p. 18)
A partir de las pruebas censales del último año del Nivel Medio y sobre la base
de principios distintos a los anteriormente descritos, durante esta etapa se implementa
una nueva modalidad de diseminación de los resultados. Se envía a cada director un
informe confidencial con los resultados obtenidos por su establecimiento, y en
ocasiones por cada alumno, comparados con los resultados del nivel local, jurisdiccional
y nacional. No hay en este caso exposición pública de las instituciones. La función
primordial de esta modalidad parece ser la de realizar un aporte al conocimiento de la
situación institucional y facilitar así el diseño de acciones de mejora fundamentadas en
la información provista (Cano García, 1998; Tiana Ferrer, 1998; Lawton, 1996;
Chelimsky y Shadish, 1997). Como consta en el Informe de Resultados del 1° Operativo
Nacional de Evaluación de Finalización del Nivel Secundario, el propósito es que los
equipos docentes puedan:
…ver qué aprenden, qué no, y a partir de allí, construir líneas de acción
para lograr aprendizajes más efectivos. (…) la escuela podrá difundir entre
los docentes, alumnos y padres, cuáles son los problemas y la necesidad de
revertirlos. (p. 4)
67
Sin embargo, en la línea de análisis que se ha venido desarrollando, la definición
de que a partir de los resultados en los exámenes nacionales es posible identificar "qué
aprenden y qué no", así como "cuáles son los problemas y la necesidad de revertirlos",
puede cumplir otra función además de la formativa –que a su vez la refuerza. Puede
verse aquí una identificación entre los resultados de las pruebas y la efectividad de los
aprendizajes. Los logros en los Operativos Nacionales de Evaluación reflejarían los
logros de la tarea escolar. De esta forma, esta medida estaría persuadiendo a actores
concretos –los directores- acerca de la conveniencia de ajustarse a los lineamientos
definidos centralmente –a la conveniencia de dar a la información el uso que se
propone. Desde el nivel nacional, se persuade a un público concreto acerca de qué es lo
que tiene valor, acerca de qué es lo que interesa (House, 1994).
En el marco de la aplicación censal de Operativo de Finalización del Nivel
Medio y del proyecto de convertirlo en pocos años en un examen de acreditación
obligatorio, la elaboración de un informe para cada escuela podría estar cumpliendo
también una importante función simbólica, sin finalidad práctica inmediata (Meyer y
Rowan, 1977; Benveniste, 2002a). Al devolver a cada escuela su resultado y el de cada
alumno, el Ministerio puede demostrar la capacidad que posee para evaluar a cada
escuela y a cada alumno, para procesar la información y para comunicar los resultados.
68
escolares y extra-escolares57, y el rendimiento de los alumnos. La realización de estos
estudios constituye otra de las líneas de acción desarrolladas por el Ministerio a partir de
los Operativos Nacionales de Evaluación. En el marco de la información que sí se
disemina durante estas etapas, el análisis de esta línea puede contribuir a completar la
comprensión del panorama que se intenta presentar. Entendida como conjunto de
acciones pero también de omisiones, toda política estatal manifiesta una determinada
modalidad de intervención del Estado en relación con una cuestión (Oszlak y
O’Donnell, 1984). En este sentido, habría que indagar el tipo de intervención que
implica esta omisión de información.
Como ilustra la primera tabla a continuación, estos estudios se realizan con
bastante continuidad a lo largo del período. Sin embargo, únicamente toman cierto
carácter público: 1) en 1999 a través de la publicación de una serie de cinco cuadernillos
dirigidos al sector técnico-político y al académico, 2) en 2001 a través de documentos
disponibles en el sitio de Internet del Ministerio58 que reportan los resultados de las
pruebas de conocimiento en relación con los datos contextuales recabados por los
cuestionarios complementarios.
Tabla 3.6.
Años en que se realizan y en que se publican estudios sobre factores asociados
94 95 96 97 98 99 00 01
Realización de estudios
Publicación de estudios
57
Los denominados factores de rendimiento son las variables que ayudan a explicar las variaciones en el
rendimiento escolar. Tradicionalmente, se distinguen dos clases de factores: los escolares y los extra-
escolares. Los factores escolares se refieren a las características que son comunes a todos los alumnos de
una misma escuela; permiten distinguir las desigualdades entre escuelas. Los factores extra-escolares se
refieren a las características personales de los alumnos y permiten explicar las distancias entre los
rendimientos de distintos alumnos (MCyE (1999), Factores asociados al logro escolar/5).
58
Hasta fines de 2001 son dos los documentos de este tipo. Sin embargo, se anuncia que otros serán
brindados más adelante.
69
mejorar la comprensión del rendimiento de los alumnos, identificando los factores que a
él se asocian. Al respecto, se afirma que:
Conocer esos factores es de máxima relevancia para el sistema educativo
ya que, sobre esa base, se podrán formular y evaluar políticas y programas
educativos y al mismo tiempo, promover el compromiso y la participación
de los diversos actores del sistema educativo. (MCyE, 1999, Factores
asociados al logro escolar/2, s/p.)
70
factores escolares con la finalidad de mejorar el aprendizaje de los
alumnos. Dimensionar la importancia relativa de los factores escolares y
los extra-escolares en la determinación del aprendizaje es de gran interés y
utilidad porque permite saber cuánto se puede llegar a mejorar la calidad
de la educación a través de esas políticas. (MCyE, 1999, Factores
asociados al logro escolar/5; el destacado es original)
59
Al respecto, un funcionario comenta:
…los trabajos de investigación que se hicieron sobre los factores de efectividad, que son
como los datos explicativos y de contexto de factores asociados, nunca se publicaron al
público. Ni al público, ni a las universidades. (E1)
60
Interrogado sobre este tema, otro funcionario de la unidad de evaluación responde:
No tengo información sobre el tema de los cuestionarios complementarios. Esto, en tal
caso, es un síntoma de lo que ocurría. Que alguien como yo, que estoy desde el 95, no
pueda dar cuenta de qué se hacía con los cuestionarios complementarios, me parece que es
un indicador de algo. No sé la lógica. (E2)
61
La posibilidad de su publicación estaría relacionada con el cambio de Ministro.
71
Tabla 3.7.
Documentos sobre factores asociados al rendimiento académico publicados en 1999
"Factores asociados al logro escolar/1. El alumno del último año del Nivel Medio:
Características, contexto y rendimiento"
"Factores asociados al logro escolar/2. Características del alumno y rendimiento escolar en
Matemática"
"Factores asociados al logro escolar/3. Características institucionales y rendimiento escolar en
Matemática"
"Factores asociados al logro escolar/4. La institución Educativa de Nivel Medio y el
Rendimiento en Matemática"
"Factores asociados al logro escolar/5. Calidad y equidad en la Educación Básica de Argentina"
62
Según House (1994) la estructura estética de los informes no debe ser considerada mera cosmética.
Explica que antes de la evaluación lo que hay es un conjunto de hechos, "la realidad tal como es". El
evaluador, mediante diversas lentes, representa esos hechos en un informe, que es en sí mismo un
producto artificial. La clase de estructura estética que el informe asume, aunque no sea del todo
consciente o intencional, conduce al lector a realizar una determinada valoración de los hechos.
72
1994). En el segundo caso, los cuadros son acompañados por ciertas descripciones que
algunas veces adoptan un cariz prescriptivo; conclusiones y generalizaciones que en
ocasiones suponen significados para la acción (House, 1994). Por ejemplo, en el
informe Factores asociados al logro escolar/2 (MCyE, 1999), se consigna:
¿Por qué se reserva tanto esta información? ¿Cómo puede entenderse la "no
utilización" de la información producida? Este aspecto puede indagarse desde el plano
de las políticas públicas. Por un lado, desde los elementos que determinan su diseño y,
por el otro, desde las implicancias que acarrea tal determinación.
73
en el diseño de las políticas educativas. Los entrevistados se refieren a este tipo de
consideraciones y determinaciones:
Mucho tiempo la información de los cuestionarios complementarios no fue
para nada considerada. No se hicieron publicaciones, no se dieron los
informes, y yo creo que había ahí información valiosa. ¿Por qué no se dio?
Algunos tenían la hipótesis de que estos cuestionarios complementarios
daban algunos indicadores sobre las características de la docencia
argentina que no convenía mucho por razones políticas mostrar. (E2)
63
Consecuentemente, prácticamente no se desarrollan acciones de intervención sobre tales factores,
fundamentadas sobre la información recabada, a pesar de que los hallazgos realizados serían
considerables. Al respecto, un funcionario entrevistado relata:
Pudimos identificar factores de efectividad: cuáles son los elementos más ligados al éxito y
al fracaso escolar. (…) Se procesaron siempre. Sobre eso, yo siento que podría haber
74
Tal como se señalaba en el capítulo conceptual, el uso instrumental de la
información presenta serias dificultades (House, 1993; Chelimsky, 1995; Scheerens,
2001; Carnoy y de Moura Castro, 1997). En este caso, los hallazgos, lejos de ser
considerados para la definición y resolución de los problemas, son ocultados.
Presentar el desempeño académico según los factores a él asociados tendría
fundamentalmente dos implicancias. Por un lado, podría llamar la atención sobre los
factores institucionales, a partir de lo cual podrían diseñarse medidas de mejora desde el
terreno educativo. Pero, por otro lado, destacaría la incidencia de los factores extra
escolares –sobre lo que no puede intervenirse de manera directa con medidas
educativas. Esto último podría amortiguar la responsabilidad de las autoridades
jurisdiccionales y de las escuelas (Benveniste, 2002), amortiguando en consecuencia
también la persuasión a la acción; restando legitimidad a la implementación de la
reforma, dada su menor adecuación en tanto "solución". Como parte de la "puesta en
escena" (Weiss, 1998) –que se hipotetizaba en cuanto a la información que sí se
disemina- durante la mayor parte del período, la información contextual parece ser un
elemento que –dadas las decisiones ya tomadas- la escena no requiere. La inclusión de
esta información, configuraría otra escena, la cual exigiría opciones de acción distintas a
las ya puestas en marcha. Es decir, si los problemas se plantean de forma tal que sean
solubles (Aguilar Villanueva, 1993), pero las soluciones diseñadas no apuntan a tal
problema, plantearlo no resulta conveniente.
trabajado más. Se hubiera podido trabajar más en capacitación, porque creo que tiene un
potencial estratégico esa información. (E1)
75
escuelas64. También genera tensión la diseminación pública de los promedios
alcanzados por cada jurisdicción. Las primeras respuestas a este conflicto se ven,
primero, en la diseminación de la información a la prensa, cuando en mayo de 1999 se
omite información acerca del rendimiento de algunas provincias65. Segundo, cuando en
el Informe de Resultados del Operativo de 1999, aún se incluyen tablas con los
promedios alcanzados por cada jurisdicción, pero el criterio de orden en la tabla deja de
ser el valor de tal promedio y las jurisdicciones se ordenan alfabéticamente.
Estas pujas, más el cambio de la Presidencia de la Nación y en consecuencia
también de las autoridades del Ministerio de Educación66, parecen determinar cambios
significativos en las modalidades de diseminación de la información; cambios que
señalarían el comienzo de la tercera etapa de esta línea de acción.
Durante la última etapa, el Ministerio de Educación nacional continúa
diseminando información correspondiente a los niveles nacional, jurisdiccional y
escolar. Sin embargo, además del cambio en la forma de distribución de los materiales
elaborados que deja de ser directa a las escuelas, se producen cambios significativos en
la información que se disemina –y que se deja de diseminar- a cada audiencia. También
hay innovaciones en los medios empleados. Como en las etapas anteriores, las
diferencias en la diseminación de la información implican también diferencias en el uso
que el Ministerio nacional hace de la evaluación.
64
Como resultado de esta tensión, en el año 2000, tras un acuerdo del Consejo Federal, el envío dejaría de
ser directo. El material de Nación debe remitirse a las coordinaciones jurisdiccionales, quienes se ocupan
de su distribución (E4; E5).
65
En artículo del Diario La Nación del 28 de mayo de 1999 se reporta que:
Con omisiones de información que sembraron suspicacias, el Ministerio de Educación
difundió ayer los resultados del último operativo nacional de evaluación. (...) En los
cuadernillos con los resultados del operativo de evaluación, que tradicionalmente se
entregan para su difusión, había sido eliminada media hora antes de la rueda de prensa la
información correspondiente al rendimiento escolar de varias provincias. (...) Fuentes de
primer nivel, que pidieron mantener el anonimato, habían confirmado a este diario que los
datos faltantes estaban "procesados y listos para ser difundidos", pero que a último
momento alguien por fuera del Ministerio de Educación le había ordenado a García Solá
que sacara los datos de las provincias que tuvieron un rendimiento negativo en las
pruebas. Al admitir la información faltante, García Solá dijo, cerca de las 22, que "algunos
ministros pidieron a último momento que no se informaran los resultados de sus provincias
porque su rendimiento no había crecido (...)".
66
En diciembre de 1999 asume la Presidencia de la Nación el radical Dr. Fernando de la Rúa. Durante su
gestión, que termina abruptamente en diciembre de 2001, sus Ministros de Educación: Juan José Llach
(diciembre 1999 - septiembre 2000); Hugo Oscar Juri (octubre 2000 - marzo 2001); Andrés Guillermo
Delich (marzo 2001 - diciembre 2001).
76
En primer lugar, tanto en el 2000 como en el 2001 desde el gobierno nacional se
elabora un CD-ROM con datos desagregados por jurisdicción, por escuela, por área
evaluada y por alumno. Este CD es entregado de manera exclusiva a cada autoridad
educativa jurisdiccional para que ella defina el uso que hace de la información provista.
En segundo lugar, en el año 2001 desaparece la diseminación de resultados por
jurisdicción. El rendimiento académico de los alumnos se reporta tanto en los informes
de resultados –disponibles únicamente en Internet- como en la prensa para el total del
país y para cada una de las regiones67. Por primera vez, durante todo el período, se
diseminan los resultados académicos con una fuerte consideración de los factores
escolares y extra escolares asociados al rendimiento68. A la vez, en esta diseminación la
referencia a los contenidos y a las capacidades evaluadas es mucho menor. No se
incluyen tablas de especificaciones ni ejemplos de ítem.
En tercer lugar, también en el año 2001 los promedios alcanzados por cada
escuela censada en el 200069 se diseminan vía la página web del Ministerio. Sin
embargo, se diferencian de los rankings de 1998 y 1999. Las escuelas no están
agrupadas por jurisdicción y ordenadas según su rendimiento. Todas las escuelas del
país se exponen por orden alfabético en una única tabla para cada nivel censado.
En cuarto lugar, ya no se envían informes institucionales a las escuelas, sino que
se implementa vía Internet un sistema de solicitud de información adicional sobre los
resultados del Operativo de 2000 para los niveles en los cuales la evaluación fue censal.
De manera similar a los informes precedentes, estos presentan los resultados del
establecimiento en las diversas áreas en comparación con los porcentajes promedio del
67
Las regiones son Centro, Cuyo, Noreste, Noroeste y Sur.
68
Esto puede verse en los siguientes documentos disponibles hacia fines de 2001 en Internet: "Operativo
Nacional de Evaluación. Informe de Resultados. Total País. 2000. 9° EGB - 2° Nivel Medio. 3°
Polimodal – 5° - 6° Nivel Medio" y "Operativo Nacional de Evaluación de la Calidad Educativa. Boletín
de Informe de Resultados. Total País. Año 2000. Curso 6° Año EGB. Número 2".
69
En el 2000 la aplicación del Operativo es censal tanto para el último año del Nivel Medio como para 6°
EGB. El hecho de que también un nivel de EGB sea censado no puede explicarse por la intención de
instalar un examen de acreditación, como era el caso con el censo de finalización del Nivel Medio. En
cambio, podría ser interpretado como un intento del gobierno de turno de trabajar más sobre las variables
intra-institucionales de cada escuela. La presentación de los resultados en los informes generales, así
como las declaraciones públicas de altos funcionarios, darían elementos en esta dirección. Por ejemplo,
pueden verse las declaraciones del entonces subsecretario en el Diario Clarín del 28 de agosto de 2001:
"…quisimos salir de los rankings que clasifican las escuelas como mejores o peores. Lo
importante es que las escuelas sepan cuáles son los factores que más inciden en la
obtención de buenos resultados para que los pongan en marcha", señaló Gustavo Iaies,
subsecretario de Educación Básica.
"…conocer qué es lo que están haciendo estos establecimientos es clave para saber qué
políticas debemos instrumentar", afirmó Iaies.
77
departamento, de la jurisdicción y del país. A esto se suma una grilla que detalla en qué
decil de desempeño jurisdiccional para cada área evaluada se ubica el establecimiento.
En quinto lugar, se ponen a disposición vía Internet las bases de datos de los
cuestionarios complementarios –y sus respectivos instrumentos- aplicados a alumnos,
docentes y directores, correspondientes a todos los niveles evaluados durante 1997,
1998, 1999 y 2000.
Tabla 3.8.
Principales características de la diseminación de resultados de los Operativos Nacionales
de Evaluación durante la tercera etapa (2000-2001)
70
En el Anexo 5 se incluye este mapa.
78
También se presenta un mapa de la República con distinto tipo de sombreado según
nivel bajo, medio o alto de vulnerabilidad económica de los alumnos71. A la vez, los
informes incluyen análisis de la relación entre los factores de contexto (escolares y extra
escolares) y el rendimiento educativo. Como contra cara de este énfasis sobre las
regiones geográficas y los factores asociados al rendimiento, no se hace referencia a los
resultados según división política. El Ministerio nacional deja de responsabilizar
públicamente a las jurisdicciones por el desempeño en los Operativos. Los resultados de
las jurisdicciones se entregan exclusivamente a cada una de sus autoridades en un CD-
ROM para que sean ellas quienes definan el uso de la información. Como afirma
Benveniste (2002b) para el caso de Uruguay, este nuevo énfasis sobre el impacto de los
factores contextuales, fundamentalmente de los extra escolares, en el rendimiento
académico amortigua en cierta medida las responsabilidades políticas por los resultados
escolares72.
71
Se construyó un índice de vulnerabilidad por el que un alumno se considera vulnerable si vive en un
hogar que tiene al menos una de las siguientes características:
1. Hacinamiento: más de tres personas por cuarto.
2. No tiene baño.
3. El nivel educativo más alto alcanzado por cualquiera de los padres es a lo sumo primario completo.
4. Posee al menos un hermano, entre 7 y 17 años, que no va a la escuela.
(Ver Operativo Nacional de Evaluación. Informe de Resultados. Total País. 2000.)
72
Considerando la interdependencia conceptual entre definición del problema y soluciones posibles
(Aguilar Villanueva, 1993), debe advertirse que en alguna medida el énfasis puesto sobre los factores
extra escolares define que las causas del problema se encuentran por fuera del terreno educativo. Desde la
misma perspectiva, el énfasis sobre los factores escolares, en cambio, supone la implementación de
posibles soluciones en el mismo ámbito escolar.
73
Esto se refleja, entre otras cosas, en la legislación. El 4 de enero de 2000, el Presidente de la Nación
firma el decreto 3/00 que postula:
Modifícase el Decreto N° 1276/96, a fin de prorrogar los plazos establecidos para que las
jurisdicciones culminen con los procesos de adaptación a la normativa vigente y garantizar
a los alumnos la validez nacional de sus estudios.
79
implementación de la reforma definida nacionalmente, ya no se buscaría en la
evaluación un instrumento de presión para conseguir la alineación de las jurisdicciones.
Desde el gobierno nacional no se ejerce presión sobre los gobiernos jurisdiccionales.
Por otra parte, más allá de la reforma, durante esta tercera etapa, la mayoría de
los gobernadores de las jurisdicciones son opositores a las autoridades nacionales. En
esta configuración, y dado el peso heredado de la tensión entre ambos niveles de
gobierno en torno a la evaluación74, el Ministerio nacional estaría sorteando cualquier
foco de conflicto con los gobiernos jurisdiccionales. Se veía que no sólo no disemina
públicamente sus resultados, sino que también entrega a sus autoridades información
detallada para que decidan qué uso darle, si es que acaso la quieren usar. En efecto, otro
de los rasgos que caracteriza a esta tercera etapa es que la diseminación adopta
modalidades en las que la información es puesta a disposición de los usuarios. Es el
caso de la elaboración de los CD-ROM para las jurisdicciones y también el de la
instalación del sistema de solicitud de información adicional sobre los resultados y el de
las bases de datos de los cuestionarios complementarios disponibles en la página web
del Ministerio75.
Con el objetivo de reforma en suspenso, el Ministerio nacional estaría dejando
de utilizar la evaluación como instrumento de control (Gvirtz y Narodowski, 2000) y
como instrumento de refuerzo de la dirección central por sobre las direcciones locales
(Lundgren, 1992; Weiler, 1996).
74
Se ha visto páginas atrás una fuerte expresión de este conflicto en 1999, fundamentalmente a través de
las notas periodísticas en ocasión de la publicación de los resultados.
75
Respecto de esta última modalidad, debe advertirse la restricción de Internet como medio de
diseminación. Proporcionalmente son pocas las escuelas que tienen conexión. Aunque hacia fines del
período el propio Ministerio no dispone de cifras precisas, en el año 2000 sólo el 15% de las escuelas
secundarias y el 4% de las primarias tendrían conectividad. Un artículo publicado en el Diario Clarín el
día 10 de abril de 2001 afirma lo siguiente:
Actualmente, 4 de cada 100 primarias y 15 de cada 100 secundarias están conectadas a
Internet. En el país hay 37.098 escuelas públicas, de las cuales 7.384 son medias y 29.712,
primarias. Sólo el 33 por ciento de las escuelas medias tiene una computadora con
velocidad de procesamiento.
Por otra parte, la disponibilidad de información de los Operativos en la página web del Ministerio no
habría sido promocionada de ninguna forma durante el período (E5 y E6). Es decir, los actores escolares y
la sociedad en general no estarían informados acerca de la disponibilidad de resultados en Internet. De
hecho, en el caso de la información escolar, las solicitudes habrían sido muy escasas. Un funcionario del
Ministerio, consultado acerca de la cantidad de solicitudes de información recibidas, responde que desde
su implementación –octubre de 2001- hasta la fecha –junio 2002- se habrían realizado aproximadamente
250 pedidos. Esta cifra debe apreciarse en contraste con la cantidad de escuelas primarias y secundarias
que tiene el país.
80
4.3. La rendición de cuentas de las escuelas: una práctica prevaleciente
76
Sin embargo, la comparación es posible. En efecto, hay casos en que otros organismos utilizan la
información disponible en Internet para realizar distintos tipos de comparaciones. El 18 de diciembre de
2001, por ejemplo, el diario La Nación publica un artículo titulado "Los colegios más caros no son los
mejores". Luego de construir un ranking a partir de los resultados de las evaluaciones censales publicados
en la página del Ministerio y de la lista de precios de 608 colegios privados de la Capital Federal y del
Conurbano elaborada por la Secretaría de Defensa de la Competencia y del Consumidor del Ministerio de
Economía, el cronista concluye que "en las pruebas de lengua y matemática, los institutos que cobran
cuotas más altas no figuraron, salvo excepciones, entre los cien mejores". La nota menciona distintos
colegios, las cuotas que cobran y los puestos que han alcanzado.
81
Considerando las diferencias mencionadas y el contexto político en que se
presentan, se han identificado aquí tres etapas. Durante las dos primeras (1994-1997 y
1998-1999), la evaluación sería fundamentalmente utilizada como instrumento de
conducción del sistema educativo (Lundgren, 1992) ligado al proceso de la misma
"Transformación Educativa" de la que surge. En la primera etapa, el sistema de
evaluación cumple formalmente una función diagnóstica del sistema educativo (Tiana
Ferrer, 1998; Lawton, 1996; Cano García, 1998). Pero es preciso tener en cuenta que la
misma elaboración del diagnóstico –enfatizando determinados datos y dejando de lado
otros- permite definir de cierta manera el estado crítico en que se encuentra el sistema
educativo. A la vez que se provee a la comunidad educativa y a la opinión pública
evidencia "objetiva" acerca de los problemas de la educación argentina, se intenta
también legitimar la reforma del sistema de acuerdo con determinados lineamientos
previamente establecidos en las leyes sancionadas. Dada la evidencia provista por la
evaluación, la reforma aparece como necesaria.
No obstante, para la implementación de las nuevas directrices en los contextos
locales (jurisdiccionales y escolares), la legitimación de la reforma es necesaria pero no
suficiente. Como dice Benveniste (2002b):
...evaluar per se no es una condición suficiente para que las escuelas o
regiones se alineen con directivas del Estado central. El gobierno central
debe ligar sus prácticas evaluativas a esquemas que conlleven a los actores
educativos a aceptar y cumplir directrices gubernamentales. (p. 18)
Así, algunos años más tarde, junto con la ampliación de los años evaluados y con la
implementación censal de los Operativos para el último año del Nivel Medio, la
diseminación de la información comienza a adoptar rasgos que comprometen a los
niveles de gobierno jurisdiccionales y a las escuelas. La información de tales niveles se
disemina entre amplias audiencias, exponiendo su desempeño al escrutinio público
(Scheerens, 2001). A la vez, se instaura para las escuelas un sistema de incentivos. La
evaluación se utiliza entonces principalmente como instrumento de regulación que
puede reforzar el poder de dirección central (Gvirtz y Narodowski, 2000; Lundgren
1992; Weiler, 1996). Se intenta alinear a las jurisdicciones y a las escuelas a los criterios
definidos nacionalmente por medio del impacto que provoca la comparación y la
rendición de cuentas.
Durante estas dos etapas signadas, primero, por la necesidad de definir los
problemas del sistema educativo de forma tal que legitimen la reforma en marcha y,
82
segundo, por una tendencia a responsabilizar a distintos actores del sistema por los
resultados obtenidos como un modo de ejercer presión sobre ellos y conseguir su
alineamiento a las directrices nacionales, se ve la ausencia de la diseminación de la
información recabada por los cuestionarios complementarios. Hasta el año 1999, los
estudios realizados no son dados a conocer ni al público general, ni al ámbito
académico, ni a los mismos diseñadores de políticas al interior del Ministerio de
Educación de la Nación. Podría pensarse que los resultados de los estudios sobre los
factores asociados al rendimiento educativo no se diseminan –tal vez entre otros
motivos- porque su conocimiento público no acompañaría los objetivos políticos de las
primeras etapas. Por un lado, porque la diseminación de estos datos podría conducir a la
definición del problema en otros términos, lo cual requeriría la implementación de
acciones diferentes a las ya impulsadas. Es decir, debilitaría la legitimidad de la reforma
en marcha. Por otro lado, porque podría amortiguar la responsabilidad de los distintos
actores del sistema por los rendimientos alcanzados, lo que haría que el grado de
presión ejercida para que estos actores se ajusten a los lineamientos nacionales sea
menor77.
En el año 2000, tras el recambio de autoridades nacionales, se da inicio a una
tercera etapa. La diseminación de la información presenta cambios significativos
respecto de la etapa anterior. Los resultados se presentan públicamente con una fuerte
consideración de los factores escolares y extra escolares. Paralelamente deja de hacerse
pública la información relativa a las jurisdicciones. Se presentan nuevas modalidades de
diseminación que consisten fundamentalmente en poner a disposición de los actores
distinto tipo de información –sin comprometerlos públicamente- para que puedan hacer
de ella el uso que deseen. Los resultados de las escuelas vuelven a exponerse en
Internet. Pero, por el modo en que se exponen y en el contexto del resto de las
características de la diseminación, parecería que se trata antes que nada de una medida
que el Ministerio nacional mantiene como modo de conservar cierta legitimidad, al
cumplir con ciertas prácticas esperadas y avaladas socialmente (Meyer y Rowan, 1977).
Esta aparente menor presión sobre los actores del sistema coincide con una gestión
política nacional que pone al menos en suspenso la implementación de la Ley Federal
de Educación. En este sentido, la evaluación dejaría de ser utilizada como instrumento
de dirección del sistema hacia la transformación propuesta. En el marco de un cambio
77
Corresponderá analizar en otro momento la incidencia de esta reserva de información en la elaboración
de otras acciones de intervención en el sistema.
83
de rumbo de los objetivos políticos, los problemas educativos empiezan a definirse a
partir de nuevos elementos. Comienzan a explorarse nuevas funciones.
84
CAPÍTULO 4
La elaboración de políticas de mejora:
Instrumentos para docentes, directores y supervisores
Tabla 4.1.
Líneas de acción desarrolladas por el Ministerio de Educación nacional a partir de los
Operativos Nacionales de Evaluación para mejorar la calidad de la educación por año
Distribución de instrumentos de
evaluación
Capacitación en el uso de la información
85
1. Primera línea de acción: la elaboración de recomendaciones metodológicas para
la enseñanza dirigidas a los docentes
78
Los de 1994 se basan en los resultados del primer Operativo (1993); los de 1997, fundamentalmente, en
los del tercer Operativo (1995); los de 1998 y 1999, se basan en los resultados del quinto Operativo
(1997), aunque algunos consideran también los resultados de años anteriores.
86
Tabla 4.2.
Materiales recabados con recomendaciones metodológicas para la enseñanza
por año de publicación
Año Materiales
1994 "Recomendaciones Metodológicas para la Enseñanza. Matemática. Nivel Primario".
"Recomendaciones Metodológicas para la Enseñanza. Lengua. Nivel Primario".
"Recomendaciones Metodológicas para la Enseñanza. Lengua. Nivel Medio".
1997 "Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Lengua".
"Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Matemática".
"Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Ciencias Sociales".
"Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Ciencias Naturales".
1998/ "Recomendaciones Metodológicas para la Enseñanza. Algunas consideraciones sobre la
1999* producción de textos escritos. Lengua".
"Recomendaciones Metodológicas para la Enseñanza. La comprensión lectora de textos
argumentativos. Lengua".
"Recomendaciones Metodológicas para la Enseñanza. 5° Operativo Nacional de
Evaluación. Cursos de Finalización de Ciclos de E.G.B.. Matemática".
"Recomendaciones Metodológicas para la Enseñanza. Geometría de Coordenadas. 1°
Censo Nacional de Finalización del Nivel Secundario (V/VI Año, Nov. 1997).
Matemática".
"Recomendaciones Metodológicas para la Enseñanza. Vectores en el plano y en el
espacio. 1° Censo Nacional de Finalización del Nivel Secundario (V/VI Año, Nov. 1997).
Matemática".
"Recomendaciones Metodológicas para la Enseñanza. Representación gráfica de
funciones. 1° Censo Nacional de Finalización del Nivel Secundario (V/VI Año, Nov.
1997). Matemática".
"Recomendaciones Metodológicas para la Enseñanza. 5° Operativo Nacional de
Evaluación. 1° y 2° Ciclos de E.G.B.. Lengua".
"Recomendaciones Metodológicas para la Enseñanza. 5° Operativo Nacional de
Evaluación. 3° Ciclo de E.G.B.. Lengua".
2001 "Operativo Nacional de Evaluación. Informe de Resultados. Logros Académicos. 2000.
** Lengua. 3° Polimodal - 5° - 6° Nivel Medio ".
"Operativo Nacional de Evaluación. Informe de Resultados. Logros Académicos. 2000.
Matemática. 3° Polimodal – 5° - 6° Nivel Medio".
"Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica de
logros y dificultades. 2000. Ciencias Sociales. 3° Polimodal - 5° - 6° Nivel Medio".
"Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica de
logros y dificultades. 2000. Ciencias Sociales. 6° EGB".
"Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica de
logros y dificultades. 2000. Lengua. 9° EGB - 2° Nivel Medio".
"Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica de
logros y dificultades. 2000. Matemática. 9° EGB - 2° Nivel Medio".
"Operativo Nacional de Evaluación 2000. Interpretación Pedagógica de Logros y
Dificultades. Física/Química. 3° Polimodal- 5°-6° Nivel Medio".
* Se consigna 1998/1999 ya que en algunos de estos documentos constan ambos años: 1998 en la
contratapa y 1999 en la primera página.
** En 2001 los materiales se encuentran disponibles en la página web del Ministerio nacional; no están
impresos.
87
Ambas series de materiales se centran fundamentalmente en el análisis de los
ítems y las sugerencias para el trabajo en el aula sobre determinados temas. Según uno
de los primeros documentos, los pasos para su elaboración consisten en lo siguiente:
Se seleccionaron los ítem en los que se obtuvieron resultados más
deficitarios para cada nivel (primario y secundario) en cada área (lengua y
matemática) y en sus respectivas competencias.
Posteriormente se trataron de identificar las dificultades que pudieran estar
en la base de los bajos rendimientos y se realizaron algunas observaciones
sobre el origen de dichas dificultades.
El trabajo se completó con propuestas metodológicas para ser analizadas e
implementadas por los docentes como contribución a la solución de las
dificultades identificadas. (1994, p. 2)
88
En otro de los documentos se explica que se presentan los resultados y se los analiza
para:
…que los docentes se informen en qué aspectos los alumnos tienen un mejor
desempeño y en cuáles parecen tener más dificultades. (…) ...este
documento tiene como finalidad dar la posibilidad al docente de cotejar las
interpretaciones y sugerencias propuestas para estos contenidos, con las
suyas propias sobre las dificultades y las formas de mejorarlas. (IR
Matemática, 2001, p. 3)
La mayor parte de los elementos que incluyen estas publicaciones a lo largo de todo el
período parecen orientarse en este sentido: profundizar ciertos contenidos de enseñanza,
contribuir a una mayor comprensión sobre el aprendizaje de los alumnos, aportar
herramientas concretas que enriquezcan la tarea docente. En general, es posible
encontrar:
Algún tipo de desarrollo conceptual acerca del área a la que se refieren y de su
enseñanza. Las Recomendaciones de Matemática publicadas en 1997, por ejemplo,
exponen algunas precisiones conceptuales acerca de la resolución de problemas,
detallando cómo y en qué momentos puede intervenir el docente. Las de Ciencias
Sociales del mismo año incluyen un apartado acerca de las características de las
Ciencias Sociales y sus conceptos, la adquisición del conocimiento histórico y social y
las intervenciones del docente. En el caso de Ciencias Naturales, se presenta un
desarrollo conceptual acerca de la ciencia, su enseñanza y su lugar en la escuela.
Análisis de los ítems que presentaron mayores dificultades. En dicho análisis se
presenta, de forma similar a los informes generales, el ítem con el porcentaje de
respuestas para cada opción, la competencia y el contenido evaluado, así como la
operación requerida y evaluada, y se analiza lo que implica en términos intelectuales la
elección de cada opción de respuesta.
Consideraciones didácticas, en función del análisis de los ítems, como la siguiente:
Durante los cambios de estado de la materia se produce una
transformación del aspecto externo de una sustancia, pero desde el punto
de vista físico, se sabe que la sustancia es la misma.
¿Perciben esto los alumnos? Y si esto es así, ¿qué es lo que realmente
piensan o imaginan cuando un sólido se transforma en líquido o un líquido
en vapor o a la inversa?
Existiría una tendencia en los alumnos a resolver situaciones problemáticas
mediante la búsqueda de explicaciones basadas exclusivamente en las
características observables del fenómeno.
El ejemplo del ítem así lo demostraría: el hielo "desaparecería" al
fusionarse dentro del recipiente con agua, en vez de permanecer en forma
89
de partículas muy pequeñas imposibles de ser reconocidas a simple vista.
Pero el hielo es agua. Y si bien desaparece como hielo, no es cierto que
desaparezca como agua.
En este caso el alumno debe construir un modelo mental para una entidad
que no puede ser vista: las moléculas.
Estos modelos mentales pretenden que los alumnos usen y construyan
determinados conjuntos de objetos o sistemas, que los describan
correctamente utilizando ciertos parámetros (masa, volumen, temperatura y
presión) y que establezcan todas las relaciones posibles entre dichos
parámetros.
La conservación de la masa es una noción (esquema mental) que el niño
adquiere gradualmente. Se estima que esa noción se logra alrededor de los
diez años aproximadamente. Las actividades relacionadas con
transformaciones y cambios (físicos) de los materiales que estimulen un
trabajo permanente de la idea de cambios reversibles con conservación de
la masa, ayudarían a lograr este propósito. (Recomendaciones de Ciencias
Naturales, 1997, pp. 19-20; el destacado es original)
90
• realizar las mismas actividades dibujando en el cuaderno o pizarrón;
• discutir las distintas interpretaciones acerca de lo leído y coordinar la
confrontación de los diferentes puntos de vista de los chicos… (RM Lengua,
1997, p. 28)
79
Los temas que se trabajan son: escalas numéricas en una recta; valor absoluto; coordenadas cartesianas
ortogonales; distancia entre puntos del plano; ecuación de la circunferencia; relación lineal (ecuación de
la línea recta); intersecciones de rectas y sistemas de ecuaciones lineales; recta por dos puntos; haz de
rectas; intersecciones de rectas y circunferencias; rectas perpendiculares; distancia de un punto a una
recta; parábola; desigualdad triangular.
91
En síntesis, en todos estos materiales se analizan los resultados y se intentan
identificar las dificultades que podrían ser la causa de los bajos niveles de acierto. Se
informa en qué aspectos los alumnos se desempeñan de mejor manera y cuáles les
ocasionan mayores dificultades. A ello se suman, generalmente, algunas
"consideraciones didácticas", que se refieren al aprendizaje y a la enseñanza de ciertos
temas, desarrollos conceptuales acerca de la disciplina en cuestión y sugerencias de
actividades para trabajar en el aula los puntos detectados como problemáticos. En
algunos casos, también se identifican dificultades más generales como, por ejemplo, de
comprensión lectora o de producción de textos escritos, y se elaboran materiales que
trabajan específicamente sobre esos aspectos. A través de estas acciones, se intenta
ofrecer información que realimente los procesos de enseñanza y aprendizaje (Cano
García, 1998). A la vez, se busca brindar sugerencias para apoyar la tarea docente y así
"remediar"80 las dificultades más salientes.
80
"Remediar" parece ser la función más reconocida de estos materiales entre los funcionarios
ministeriales. De hecho, suelen referirse a ellos como "los remediales" (E1; E2; E3).
92
También se había visto que en función del análisis de las respuestas se llega a hipótesis
del tipo:
...'lo que ocurre es que en todo el Sistema Educativo no se relacionan
fracciones con porcentajes y probabilidad' o 'no se trabajan
suficientemente los procesos de análisis y síntesis'. (E2; el destacado es
propio)
Así, las propuestas de "ofrecer a los docentes herramientas para que reflexionen
sobre su práctica", "plantear algunas alternativas metodológicas para la enseñanza",
"realizar un aporte a la tarea cotidiana de cada uno de los docentes", "formular
propuestas metodológicas para ser analizadas e implementadas por los docentes como
contribución a la solución de las dificultades identificadas", pueden vincularse con la
persuasión acerca de las debilidades de la tarea docente. Esto, a su vez, puede persuadir
acerca de la necesidad de acción. En términos de House (1994):
La persuasión está directamente relacionada con la acción. (…) la
persuasión es eficaz para promover la acción porque se centra en un
público concreto y suministra la información que afecta a ese público. (p.
72)
Como indica Ball (1993a), "donde hay 'enfermedad' también hay 'cura', modelos
de 'práctica eficaz'" (p. 166). En esta trama, atadas al poder persuasivo del diagnóstico
de la evaluación –donde se exponen las "enfermedades" seguidas por sus "remedios"- y
en el marco de los principales lineamientos de la Transformación Educativa, estas
publicaciones también pueden ser leídas como instrumentos para dar determinada
orientación a la enseñanza y no sólo para mejorarla (Chapman y Mählck, 1997; Haertel,
1997).
Pueden identificarse tres tipos de orientaciones. En primer lugar, orientaciones
para el trabajo en el aula en general: se trata de propuestas, cuya implementación se
presenta como necesaria. En segundo lugar, se pretende orientar la enseñanza de
acuerdo con los nuevos contenidos definidos nacionalmente (CBC). En tercer lugar, la
orientación se vincula con lo que será evaluado al año siguiente. Esta última función de
orientación se propone también a partir de la distribución de instrumentos de evaluación
en 1997 –otra de las líneas de acción identificadas- como se verá luego.
93
El primer tipo de orientación de la práctica de enseñanza se manifiesta en
formulaciones como la que sigue:
La siguiente propuesta está orientada a poder organizar en medianos
plazos la práctica conjunta de la lectura y la escritura en el aula. (…) Será
necesario otorgar en la planificación semanal del taller el mismo
porcentaje de tiempo que se le suele dedicar al bloque de lengua escrita
entre exposición y actividades. Asimismo puede ser conveniente incluir
dentro de las actividades en el taller la sistematización de algunos
contenidos pertenecientes a otros bloques… (RM. Algunas consideraciones
sobre la producción de textos escritos, 1998, p. 89; el destacado es propio)
Respecto del segundo tipo de orientación, en que los elementos incluidos no sólo
apuntan a ofrecer alternativas para "remediar" las dificultades identificadas en el
aprendizaje, sino que también aparecen como modo de abordar los nuevos CBC,
algunos materiales proponen:
…orientar la interpretación de los resultados y plantear algunas
alternativas metodológicas para la enseñanza de aquellos contenidos, que
en forma recurrente -y tal como surge de los datos provenientes de los
operativos de 1993, 1994 y 1995- presentaron dificultad en su resolución
por parte de alumnos, para cada uno de los grados y cursos evaluados. (…)
Es de esperar que este material constituya un aporte a la tarea cotidiana
de cada uno de los docentes complementando las diferentes propuestas
que desde el Ministerio se llevan a cabo en relación con la transformación
del Sistema Educativo. (RM Lengua, 1997, p. 7; el destacado es propio)
94
Finalmente, el tercer tipo, vinculado con la orientación de la enseñanza hacia el
contenido evaluado, se manifiesta en la inclusión en las publicaciones de listados de
temas acordados81, tablas de especificaciones82 y réplicas de ejercicios y grillas para
corregirlos. En uno de los cuadernillos se explica que:
Brindamos a los docentes este material -listado de temas acordados para la
evaluación- con la idea que el mismo pueda servir para orientar sus
actividades en cada área y nivel, y constituirse en una guía de contenidos
importantes y sustantivos para el desarrollo de las acciones pedagógicos.
(Recomendaciones Metodológicas para la Enseñanza, 1994, p. 17; el
destacado es propio)
81
Los listados de temas acordados aparecen en las publicaciones de 1994. Consisten en los temas
seleccionados con el consenso de todas las provincias, que permitirían ese año -y hasta tanto se definieran
los contenidos básicos comunes para todo el país-, el diseño de las denominadas tablas de
especificaciones.
82
Como se explicó en el capítulo anterior, las tablas de especificaciones se definen como cuadros de
doble entrada en los que se ingresan dos tipos de informaciones: en las filas, los contenidos a evaluar; en
las columnas, las operaciones que se espera que realice cada alumno con el contenido señalado. El cruce
de fila y columna identifica una competencia determinada en relación con un recorte del saber. Cada
cruce considerado importante a los efectos de ser evaluado tiene un peso relativo, comparativo respecto
de los demás, y condiciona la cantidad de ítems que se considerarán para la evaluación.
95
sugerencias podrían ser vistas como un intento desde el Ministerio nacional de ejercer
cierto poder de definición sobre el curso de la enseñanza –al ensamblarse con el poder
de control de la evaluación-83. Podría pensarse también que este ensamblaje es
enfatizado tanto más, cuando se produce dentro de la misma unidad de evaluación. Es
decir, cuando la especificación de contenidos y las recomendaciones metodológicas
para abordarlos surgen de la misma unidad que luego diseña e implementa la
evaluación. En términos de Lundgren (1992) –quien define distintos instrumentos o
sistemas de gobierno de los sistemas educativos84-, podría pensarse aquí que la
articulación del sistema de dirección "evaluación" con el sistema de dirección
ideológica (fines y contenidos) permitiría conservar el poder de dirección central. Desde
la perspectiva del autor, cuando se implementan sistemas de evaluación en sistemas
educativos que se descentralizan:
Lo que comienza como un cambio en los sistemas de dirección orientados a
una distribución de las instancias decisorias, desde el centro a la periferia,
resulta ser un refuerzo del sistema de dirección central. (p. 114)
83
Un funcionario de la unidad de evaluación del Ministerio explica:
...son recomendaciones, en algún momento se llamaron sugerencias, porque son
recomendaciones o son sugerencias. El Ministerio de Educación, y mucho menos nosotros,
no tiene ningún poder para decir "trabajen así, de acuerdo con esto". Porque el Ministerio
de Educación no tiene poder sobre las escuelas y si el Consejo Federal no saca una
disposición en ese sentido, y aún creo que el Consejo Federal no puede más que
recomendar o acordar... es decir, los que pueden ordenar son las jurisdicciones. (E2)
84
El autor sostiene que un sistema educativo se rige por tres series de instrumentos o de sistemas de
gobierno: 1) el ordenamiento legal; 2) la organización económica y 3) un sistema de dirección ideológica
(fines y contenido). Y afirma que la evaluación puede ser considerada como un cuarto sistema de
dirección. Cuanto más desligados y difusos se hacen los tres primeros sistemas, con la consiguiente
susceptibilidad a diversas interpretaciones, tanto más regirá la evaluación al dar interpretaciones de una
manera operativa.
96
2. Segunda línea de acción: la distribución de instrumentos de evaluación entre
docentes
85
En el año 2000 sólo el 15% de las escuelas secundarias y el 4% de las primarias tendría conectividad.
86
Sin embargo, finalmente sólo habrían sido distribuidas las pruebas administradas en 5° y 6° año del
Nivel Medio, como se consigna en este trabajo.
97
"la finalidad de que sean conocidas, analizadas y utilizadas" por parte de los actores
escolares "para confrontar resultados". Puede ser a la vez un modo de establecer pautas
para la enseñanza. Un alto funcionario se refiere a este uso cuando explica:
... cuando bajábamos un instrumento de medición de evaluación estábamos
dando una pauta. (...) los instrumentos de evaluación de secundaria están
muy bien hechos. Tanto los de Lengua como los de Matemática están
elaborados en base a competencias. Entonces estás dando una señal al
sistema acerca de qué es lo deben hacer. (...) Teníamos que dar una señal
contundente al sistema acerca de cuál es la línea didáctico pedagógica que
se tiene que seguir. (E1)
87
Sobre este proyecto también se registran en la prensa declaraciones de los funcionarios. En una nota del
Diario Clarín el 29 de mayo de 1998 retoman las declaraciones de la Ministra de Educación de la Nación:
La funcionaria tiene un deseo que por el momento no va a instrumentar. Quiere que esta
evaluación del final del secundario sea un requisito para recibir el título. Como paso
intermedio y para que los chicos pongan más interés, las calificaciones del próximo
Operativo van a aparecer en el certificado analítico que se entrega al finalizar la escuela
media, pero no incidirán en el promedio general. (El destacado es original)
98
2.3. Consecuencias de la distribución de instrumentos: la pérdida de validez de las
pruebas
88
Un alto funcionario parece tener clara conciencia de esta falta. Cuando es interrogado acerca de la
publicación de instrumentos completos, responde que eso nunca habría sucedido. En sus términos:
Nunca se dio publicidad de la totalidad de las pruebas. Se dio publicidad parcial a los
instrumentos de manera tal de conservar... Se bajaban a las escuelas modelos de pruebas,
que eran muy parecidas a las pruebas reales pero no eran reales. Porque la prueba tenía
que ser confidencial. Se modelizaban pruebas. (E1; el destacado es propio).
99
información relevante de y para la institución89. En estos casos, es poca la información
incluida que proviene específicamente de las evaluaciones.
Tabla 4.3.
Publicaciones y jornadas de capacitación en el uso de la información por año y audiencia
89
La indagación se centrará fundamentalmente en los materiales impresos. Dados los alcances y los
límites de este estudio, no ha sido posible reconstruir el desarrollo de las actividades presenciales, más
allá de lo registrado en documentos oficiales y lo relatado por los funcionarios entrevistados.
100
En uno de los documentos90 se destaca la importancia de la evaluación para los
supervisores, ya que les permitiría conocer los indicadores críticos sobre los que se
gestionan políticas y acciones de mejora. Se explica que no se pretende lograr un
conocimiento experto en las áreas evaluadas, sino que:
La finalidad es recuperar del primer Operativo Nacional de Evaluación la
medición del rendimiento académico y las variables intra y extra clase,
sociales, culturales e institucionales… que parecieran influir en el proceso
de aprendizaje para tomar decisiones fundadas. (Evaluación y uso de la
información, p. 66)
90
MCyE (1997) Evaluación y uso de la información.
91
"Jornadas (regionales) presenciales de Devolución de la Información del Primer Operativo Censal de
Evaluación de Finalización del Nivel Secundario" dirigidas a supervisores, directivos y docentes
afectados, y equipos técnicos provinciales de Nivel Medio / Polimodal. Esta acción se habría desarrollado
en cada una de las regiones del país durante los meses de mayo, junio, julio y agosto de 1998 (Sistema
Nacional de Evaluación. Acciones 1998).
101
En otros casos92, se proponen ejemplos de hipótesis explicativas del tipo de las
que directores y supervisores podrían elaborar sobre la base de la información que los
Operativos recaban y diseminan. Por ejemplo, para el caso de las respuestas incorrectas,
se dice:
Se pueden construir hipótesis explicativas de porqué los alumnos eligieron
un determinado distractor. Algunas de las hipótesis planteadas para
explicar la elección pueden recuperarse aquí:
- El grado de conocimiento que tenía el alumno sobre el contenido y/o la
competencia está en la base de la dificultad.
- La distancia entre el distractor elegido y la respuesta correcta, requería
del alumno un conocimiento acabado del tema.
- El tema fue contenido de enseñanza pero no se mantuvo vigente hasta la
fecha de evaluación. (p. 19)
Desde una lectura más conceptual, esta línea de acción puede describirse en
términos de una apelación directa a destinatarios concretos (House, 1994): los
supervisores y los directores. Se problematiza y se promueve la problematización de su
campo de intervención, al cuantificarlo y al promover su cuantificación (Rose, 1999).
Se afirma que los datos recabados son útiles porque:
…indican la envergadura del problema existente. Los datos nos sirven para
identificar y cuantificar nuestros problemas. (…) Analizando y comparando
datos se identifican y cuantifican los problemas institucionales existentes en
el campo de la supervisión. (Evaluación y uso de la información, pp. 66-67)
92
Revista titulada ¿Qué hacer con los resultados de los Operativos Nacionales de Evaluación? Esta
publicación pretende capacitar, en este caso a supervisores y directivos, en el uso, aprovechamiento y
generación de información de la evaluación.
102
En uno de los documentos se propone:
A partir de estos interrogantes el director junto a los docentes pueden
reconstruir -revisar- la gestión institucional así como las prácticas
pedagógicas. Esta reflexión y la construcción de hipótesis explicativas por
parte de los actores interesados darán cuenta de aquellos aspectos que
hasta el momento se ignoraban o se les otorgaba un escaso peso a la hora
de explicar los resultados del aprendizaje. (¿Qué hacer con los resultados
de la evaluación?, p. 8; el destacado es propio)
103
del problema (Hall, 1993). Se promueve la acción, persuadiendo a un público concreto
con la información que afecta a ese público (House, 1994).
Junto con la problematización del campo y la persuasión de sus actores sobre sus
posibilidades de intervención, se transmiten las nuevas expectativas respecto de los
roles de dirección y supervisión escolar. Los materiales impresos comunican diversos
aspectos de un nuevo estilo de trabajo, enmarcado en la transformación impulsada por la
Ley Federal de Educación.
Acerca de la necesidad de nuevas formas de intervención, el manual Evaluación
y uso de la información, orientado a los supervisores, se presenta con el objetivo de
"Promover el mejoramiento de la calidad a través de la implementación de prácticas
innovadoras en la gestión institucional" (p. 23). Y define como sus objetivos
específicos:
Propiciar la reflexión en torno a la concepción de evaluación como
instrumento para el mejoramiento de la calidad de la educación.
Incorporar en un esquema de gestión centrado en la toma de decisiones, los
distintos tipos de información generados por la evaluación (indicadores
críticos).
Generar, desde el rol del Supervisor un Proyecto de Supervisión que oriente
la gestión institucional de las escuelas a su cargo y que contenga
estrategias de mejora de los puntos más críticos identificados.
Incorporar esquemas de prácticas innovadoras de un modelo de gestión
superador que permita desde su perspectiva global, la implementación
progresiva de los aspectos programáticos y centrales de la Ley Federal de
Educación. (p. 23)
93
Esta acción se habría realizado entre los años 1997 y 1998 en las provincias de San Luis, Misiones, Río
Negro y Jujuy.
104
organización escolar que dependen del maestro- después de lo cual se enfatiza que el
diseño de políticas de mejoramiento desde el sistema educativo debería estar orientado a
operar sobre los factores escolares identificados, de forma tal de compensar la
incidencia que los factores socio-económicos tienen sobre los resultados del
aprendizaje. Y se insiste en que, aún reconociendo que la condición socio-económica de
los alumnos es un factor importante en su rendimiento, debe tenerse en cuenta que:
…a partir de una intervención estratégica en determinados factores
escolares que han sido identificados como factores de efectividad se pueden
producir cambios en el rendimiento de alumnos de diversos niveles socio-
económicos. (Evaluación y uso de la información, p. 68)
Los resultados de los Operativos Nacionales de Evaluación sugieren que, al
margen de la incidencia de factores extra-escolares, existe un amplio
campo de acción para incidir sobre el aprendizaje en base a medidas
específicamente educacionales. (Evaluación y uso de la información, p. 90)
Estas persuasiones incluyen también enunciados sobre las características de las escuelas
y los maestros o profesores considerados más eficaces. Asimismo, uno de los materiales
contiene un anexo de lecturas especializadas en la temática94.
En el nuevo modelo que se transmite, la información de los Operativos
Nacionales de Evaluación es uno de los insumos que deberían incorporarse. Se trata que
los supervisores materialicen los cambios impulsados por la nueva Ley:
…la Dirección Nacional de Evaluación se propone ofrecer a los
Supervisores algunas orientaciones en relación con estrategias concretas
que permitan operativizar y viabilizar las modificaciones pertinentes desde
este nivel, teniendo como referentes permanentes los marcos normativos
mencionados y los insumos relevados en los Operativos Nacionales de
Evaluación. (p. 16)
94
La evaluación: una herramienta para mejorar la calidad de la institución contiene un anexo de
"Lecturas" que un trabajo de Guiomar Namo de Mello, titulado "Escuelas eficaces: un tema
reactualizado", y otro de Robert E. Slavin, titulado "Salas de clase efectivas, escuelas efectivas:
Plataforma de investigación para una Reforma Educativa en América Latina".
105
habla de la supervisión como una tarea de orientación y asesoramiento, se intenta
contribuir a la formación de un nuevo profesional con roles tales como:
- Impulsor y conductor de innovaciones.
- Gestor de la calidad.
- Negociador y mediador.
- Auditor de la eficiencia de los servicios y de los proyectos de la
comunidad educativa.
- Productor de información ascendente y descendente. (Evaluación y uso de
la información, p. 57)
106
- Se plantea como mejorar y facilitar el trabajo de los docentes (en relación al
rendimiento del alumnado y para mejorar la enseñanza). (p. 90; el
destacado es original)
95
En este sentido, una de las cosas que se observa, por ejemplo, es gran énfasis sobre lo que la literatura
especializada reconoce como factores escolares que inciden en el rendimiento, pero muy escasas
referencias a los resultados que al respecto arrojan los cuestionarios complementarios -que se aplican
todos los años junto con las pruebas de conocimiento, justamente para recabar datos acerca de la relación
de estos factores con el rendimiento.
107
de responsabilidades. Cabría preguntarse por qué. O, al margen de los motivos, ¿cuál es
la implicancia de esta articulación entre capacitación y evaluación?
Nuevamente, puede leerse esta situación desde el plano discursivo de la política.
Ball (1993; 1998) sostiene que las políticas que se articulan producen determinados
efectos y a la vez apoyo para tales efectos. El efecto de las políticas es, desde su
perspectiva, primordialmente discursivo, al construir determinadas posibilidades de
pensamiento y de opciones para la acción. Desde este punto de vista, la articulación de
capacitación y evaluación puede orientarse, como se enfatiza en los materiales, a
garantizar la implementación de la Ley Federal de Educación en el nivel institucional.
La evaluación, con su capacidad de persuasión, de legitimación y de control (House,
1994; House, 1993; Lundgren, 1992; Gvirtz y Narodowski, 2000; Rossi, Freeman,
Lipsey, 1999) puede fortalecer los objetivos de la capacitación. Puede hacer más
efectiva la persuasión acerca de la conveniencia de los modelos propuestos. De este
modo, se fortalecen también las posibilidades de materialización de las nuevas
disposiciones en el nivel escolar.
108
A nivel macro, la articulación entre capacitación y evaluación no se dio.
(…) Se hubiera podido armar un programa de capacitación de directores.
Que fue el espíritu de ese documento 'La evaluación: una herramienta
para...'. (…) Hasta ahí nosotros podíamos llegar, pero después ¿con qué
plata vamos a llegar a los actores en concreto? [Acerca de los materiales].
Yo los produje. Ahora, después no se trabajaron. Lamentablemente fue así.
Eso tendría que haber tenido un dispositivo específico de capacitación.
Para aprovechar lo que había. (…) Lo que no hubo es la capacidad interna,
por muchísimas razones (…) es que no se pudo articular las acciones de
capacitación con las acciones de trabajo de la información de evaluación.
(E1)
109
mejorar la dirección y organización de las escuelas para conseguir mejores resultados de
aprendizaje.
Desde una mirada más crítica, acerca de los aspectos "discursivos" de las
políticas (Ball, 1998a; Ball, 1993; House, 1994; House, 1993), se veía que estas
acciones pueden ser leídas también como modos de problematizar las áreas de
incumbencia de los actores, de definir los problemas y de ofrecer las soluciones.
También se veía que, en todos los casos, las soluciones siguen o apoyan los principales
lineamientos de la "Transformación Educativa". En el caso de las recomendaciones
metodológicas para los docentes, se "diagnostican" las "enfermedades" y ofrecen los
"remedios". La persuasión acerca de los problemas está seguida por la promoción de
determinados cursos de acción (House, 1994). El contenido de estos materiales sitúa las
dificultades y sus soluciones en el terreno de la enseñanza. Ensamblados con la
identificación de las dificultades y con las propuestas de mejora, se comunican también
los nuevos CBC definidos nacionalmente –según las disposiciones de la Ley Federal de
Educación- y los contenidos y las competencias que serán evaluados en años siguientes,
con el propósito de que pueda servir a los docentes para orientar sus actividades. El
mismo rol parece cumplir la distribución de instrumentos de evaluación, que, a la vez,
se propone generar consenso para la implementación de una medida posterior: el
sistema de acreditación del Nivel Medio. Por su parte, las acciones de capacitación a
docentes y directivos pueden ser leídas como una apelación a un público concreto –
supervisores y directores-, suministrando a ese público información que lo afecta,
problematizando su campo, para comunicar a la vez nuevos estilos de gestión, de
acuerdo con los procesos de "Transformación Educativa". Concretamente, por lo que se
refleja en los materiales impresos, la capacitación en el uso y generación de información
aparece más bien como parte de otro propósito. Se busca transmitir un nuevo modelo de
gestión al interior de las escuelas, del que la evaluación es sólo uno de los componentes.
Se trata fundamentalmente de incidir en el ámbito de los establecimientos, proponiendo
nuevas formas de orientar, organizar y dirigir las instituciones. En este sentido, esta
capacitación parece estar impulsada mucho más por la necesidad de acompañar u
orientar la implementación de los cambios dispuestos a partir de la Ley 24.195 que por
lo que podrían sugerir los resultados recabados por las evaluaciones nacionales de la
calidad de la educación.
Así, estas líneas de acción, que se proponen dar instrumentos a los actores
escolares para mejorar los procesos de enseñanza y de aprendizaje, también
110
constituirían instrumentos de orientación de las prácticas de acuerdo con los criterios
definidos en el nivel central. En el marco de un sistema educativo descentralizado, de un
Ministerio nacional sin escuelas a su cargo, el uso de la evaluación que aquí se indaga
puede ser leído como un modo de retener en el nivel nacional cierto poder de dirección,
de definición sobre el sistema. Como concluye Weiler (1996):
...siempre existe la posibilidad de que el poder, al que por una parte
renuncia la descentralización, lo pueda recuperar la evaluación por otra.
(p. 230)
111
CONCLUSIONES
1. Recontextualización
112
durante el período estudiado, la configuración del sistema de evaluación, sus usos y sus
funciones, también puede variar en un mismo sistema político, en función de los
vaivenes de los objetivos promovidos por cada gobierno.
Desde el nivel de la proclama, el Sistema Nacional de Evaluación en la
Argentina se instaura a los fines de: proporcionar los insumos fundamentales para la
toma de decisiones relacionada con la formulación de políticas educativas de
mejoramiento de la calidad; suministrar información válida y confiable sobre cuánto es
lo que aprende y qué es lo que aprende el alumno en su recorrido por el Sistema
Educativo y acerca de cuáles son los factores asociados a ese aprendizaje; y proponer
los ajustes que corresponden a efectos de mejorar la calidad educativa. La evaluación se
introduce así como un instrumento técnico, capaz de ser utilizado con propósitos
"conceptuales" e "instrumentales" para mejorar el rendimiento de los alumnos.
Sin embargo, se veía también que el Sistema Nacional de Evaluación surge a
partir de una de las leyes que da impulso a la denominada "Transformación Educativa"
de los 90. Asimismo, que dicha transformación se sitúa en un sistema político
caracterizado por la falta de confianza entre sus diferentes actores –desconfianza que se
asocia en parte con el bajo grado de previsibilidad o con la discontinuidad de las
políticas y de sus prioridades- (Tedesco y Tenti, 2002). A la vez, que dicha
transformación se encuentra parcialmente determinada por prioridades e influencias de
criterios externos al sector educativo –los objetivos fiscales y las pautas establecidas por
los organismos de crédito internacionales (Braslavsky y Cosse, 1996; Benveniste,
2002a; Andrada, Narodowski y Nores, 2002).
En este contexto, la evaluación del sistema educativo surge como un nuevo
instrumento de política y, como se ha visto a lo largo del trabajo, durante el período
estudiado es objeto de múltiples usos. A partir de la implementación de los Operativos
Nacionales de Evaluación se desarrollan distintas acciones con mayores o menores
falencias, con limitaciones más o menos marcadas, y con consecuencias de mayor o
menor impacto sobre los actores del sistema. A la vez, las diversas líneas de acción
parecen responder, en ocasiones, a diferentes concepciones de Estado o modelos de
intervención. Mientras que algunas acciones, como los rankings o los sistemas de
premios, se acercan a un modelo de Estado que controla resultados y estimula la
competencia, otras acciones, como la capacitación de directivos y supervisores o las
recomendaciones metodológicas para los docentes, conservan rasgos más bien
113
tradicionales de la intervención estatal, más ligada a la orientación de los procesos de
desarrollo cotidiano96.
Dados estos usos múltiples, el Sistema Nacional de Evaluación aparece
vinculado con los fines formales pero a la vez con otros, que son los que van variando
en el tiempo. Además de las funciones conceptuales e instrumentales, la evaluación
aparece ligada a funciones de legitimación de acciones gubernamentales, de control y de
presión sobre otros niveles de gestión para promover su alineación a los criterios
nacionales. Es decir, en aquel contexto de transformación y de conflictos o pujas entre
los diferentes niveles del sistema educativo, la evaluación aparece como un instrumento
capaz de proveer al Ministerio nacional una cuota de poder de dirección, perdida en
parte tras la descentralización (Lundgren, 1992; Weiler, 1996). Estos usos manifiestan
también su determinación por parte de los factores culturales, la historia de los modos
previos de hacer política y las capacidades y recursos de actores ministeriales.
96
En este sentido, Ball (1998) sostiene que mientras que es muy posible discernir un conjunto de
principios o un modelo teórico subyacente a una política -neoliberalismo, nueva economía institucional,
teoría de la elección pública, etc.- ellos son raramente, si acaso lo son, traducidos en textos políticos o
prácticas de modo directo o prístino. Para el autor, el diseño de políticas nacionales es inevitablemente un
proceso de bricolage: un asunto de tomar prestados y copiar pedazos y piezas de ideas de algún otro lado,
canibalizando teorías, investigaciones, tendencias y modas.
114
Tabla 5.1.
Los usos del Sistema Nacional de Evaluación de la Calidad de la Educación
a lo largo del período 1994-2001, por etapas
97
El ministro a cargo durante este período es el Ing. Jorge Alberto Rodríguez (1992 - 1996), bajo la
presidencia nacional del Dr. Carlos Saúl Menem (1989 - 1999).
98
En 1996 asume las funciones la Lic. Susana Beatriz Decibe, quien permanece en su cargo hasta el mes
de mayo de 1999.
115
se suman las de presión y "encauzamiento" para la implementación de las disposiciones
de la Ley.
Junto con la primera aplicación censal del Operativo de Evaluación para 5° y 6°
año del Nivel Medio, los resultados comienzan a diseminarse públicamente también
según los niveles jurisdiccionales y escolares. Sobre los resultados de los
establecimientos se monta además un sistema de incentivos que consiste en la entrega
pública de premios para las escuelas con mejores puntajes. Estas modalidades de
diseminación de la información pueden leerse como un modo de ejercer presión sobre
sus responsables para conseguir su alineación: se hace rendir cuentas a las jurisdicciones
y a las escuelas frente a la sociedad, según su grado de ajuste a los criterios nacionales.
Paralelamente, se multiplica la elaboración de instrumentos para mejorar la práctica de
docentes, directores y supervisores. Así, además de las recomendaciones para la
enseñanza dirigidas a los docentes, se distribuyen pruebas de años anteriores para quinto
año y se desarrollan distintas jornadas y materiales de capacitación en el uso de la
información de la evaluación para supervisores y directores. También las acciones de
mejora promovidas por estos instrumentos aparecen ligadas a los lineamientos de la
"Transformación Educativa": incluyen orientaciones para la enseñanza de acuerdo con
los nuevos C.B.C. y con los contenidos evaluados y comunican los nuevos estilos de
gestión escolar promovidos por la Ley Federal y resoluciones posteriores.
Se ensamblan así las funciones de informar, presionar y controlar el ajuste a los
parámetros nacionales, a la vez que se ofrecen herramientas concretas que promueven
tales ajustes en el nivel escolar. Dada esta articulación de funciones, la evaluación
aparece como un instrumento utilizado para dar, de diversos modos, una dirección al
sistema (Lundgren, 1992). Tal dirección durante estas dos primeras etapas se orienta
hacia la implementación de la nueva legislación.
El año 2000 parece marcar el inicio de un cambio de rumbo. Tras la asunción de
las nuevas autoridades presidenciales y ministeriales99, los esfuerzos para la
implementación de la Ley Federal se detienen. En este nuevo contexto, parecen
detenerse también los intentos por conseguir la alineación de los distintos niveles del
sistema en tal dirección. Sin la implementación de la reforma como objetivo político, la
99
En diciembre de 1999, la Presidencia de la Nación pasa a manos del partido opositor. Junto con el
Presidente electo Dr. Fernando de la Rúa, asume una nueva gestión ministerial, inicialmente a cargo del
Lic. Juan José Llach.
116
evaluación deja de utilizarse como instrumento de presión y de orientación para la
aplicación de las medidas definidas nacionalmente.
Durante el 2000 no se desarrolla ninguna de las acciones anteriores, excepto la
de la diseminación de los resultados vía los informes generales y la prensa. Se elabora
una nueva modalidad de diseminación de resultados, que consiste en un CD-ROM con
información detallada dirigido exclusivamente a cada autoridad jurisdiccional. En el año
2001 se mantienen las acciones del 2000, reaparecen líneas anteriores y surgen algunas
nuevas, que se diferencian de las de etapas anteriores. Entre las líneas anteriores,
vuelven a elaborarse las recomendaciones metodológicas para los docentes –aunque
sólo disponibles vía Internet. Entre las líneas nuevas, los resultados de logro académico
diseminados en informes generales y en la prensa son presentados con una fuerte
consideración de los factores que a él se asocian y sin referencia a las jurisdicciones. Es
decir, dejan de presentarse a la opinión pública los resultados de cada jurisdicción. Las
nuevas modalidades consisten fundamentalmente en poner información a disposición de
los actores sin exponerlos públicamente. Al presentar la relación del rendimiento con las
variables de contexto, las responsabilidades políticas por los resultados se ven
amortiguadas. Sin embargo, no sólo la responsabilidad de las jurisdicciones se
amortigua; también, la responsabilidad del Ministerio nacional sobre la calidad de la
educación, cuando se enfatiza la incidencia de factores extra escolares sobre el
aprendizaje, sobre los que no puede intervenirse desde el campo educativo.
De cualquier modo, en esta última etapa, se estarían explorando nuevas
funciones para la evaluación. Además de las acciones recién señaladas, se ve que la
unidad escolar vuelve a ser objeto de evaluación. Por un lado, se presentan nuevamente
los resultados por escuela a través de Internet, aunque con mucho menor énfasis sobre la
comparación. Por otro lado, la presentación de los resultados de logro académico
contextualizados incluye, además de los factores extra escolares, un gran énfasis sobre
los escolares; es decir, los factores sobre los sí que puede intervenirse desde medidas
educacionales. Las declaraciones de altos funcionarios a la prensa también aportan
elementos en este sentido, al destacar el potencial de la evaluación nacional para
contribuir a identificar cuáles son los factores escolares que contribuyen a un mejor
rendimiento escolar.
Finalmente, puede decirse que, a lo largo del período, el Sistema Nacional de
Evaluación parece ir afianzando su rol simbólico. A pesar de los cambios de gobierno y
de objetivos políticos, el Estado continúa actuando de acuerdo con estas prácticas que se
117
encuentran avaladas internacionalmente (Meyer y Rowan, 1977). La legitimidad que
provee la aplicación de la evaluación busca incluso fortalecerse hacia el final del
período, en el año 2000, cuando Argentina comienza a participar de los exámenes
internacionales100.
3. A modo de cierre
100
Como se especificó en el capítulo segundo, en el año 2000, Argentina comienza a participar de
estudios internacionales de dos organismos: la IEA (Asociación Internacional para la Evaluación del
Logro Educativo) y la OCDE (Organización para la Cooperación y el Desarrollo Económico).
118
4. Algunas posibles líneas de indagación futuras
101
En términos de Certau (1996), como se señaló en la introducción, este sería el estudio del uso de la
información por parte de los "consumidores" o "practicantes".
119
ANEXO 1
Descripción de la implementación de los Operativos Nacionales de Evaluación
102
Lamentablemente, no ha sido posible acceder a la ficha técnica del Primer Operativo Nacional de
Evaluación (1993). Por eso, la descripción se realiza a partir de 1994.
120
43.700 del último año de EGB; y 51.100 de 5to y 6to año del nivel medio103. Como en
los años anteriores, se evalúa Matemática y Lengua en todos los niveles, a lo que se
suma Ciencias Sociales y Ciencias Naturales en 6to y 7mo grado. También en el último
año del Nivel Medio se evalúan estas áreas pero con carácter experimental y muestral.
Los cuestionarios para alumnos, docentes y directores se aplican en los grados de
primaria. En 9no año EGB (2do año de secundaria) y en 5to/6to año los cuestionarios se
aplican sólo a los directores.
El I Operativo Censal de Evaluación de Finalización del Nivel Secundario se
realiza entre el 10 y el 14 de noviembre de 1997 y evalúa 257.410 alumnos de todo el
país.
El Operativo Nacional de Evaluación de 1998 se realiza entre los días 17 y 21 de
noviembre. La muestra se compone de 173.187 alumnos de nivel primario y de 42.084
del último año de EGB (2do de secundaria). Sobre la totalidad de secciones del II
Operativo Censal se selecciona una muestra de 5to/6to año de Nivel Medio equivalente
al Operativo Nacional de 1997. Las áreas evaluadas son las mismas que en los años
anteriores. No queda claro si sólo se aplican cuestionarios para los directores o también
para alumnos y docentes en algunos niveles.
El II Operativo de Finalización del Nivel Secundario censa en Matemática a
267.274 alumnos y en Lengua a 262.400 alumnos de 5to/6to año de Nivel Medio.
El VII Operativo Nacional de Evaluación, realizado entre el 17 y el 21 de
noviembre de 1999, compone su muestra con 150.815 alumnos de la EGB de los años
3ro, 6to, 7mo y 9no. Se evalúan las áreas de Matemática y Lengua y sólo en 6to año de
EGB se incluye también Ciencias Sociales y Ciencias Naturales. Paralelamente, se
aplican los cuestionarios complementarios a los alumnos, docentes y directivos.
El III Operativo Nacional de Evaluación de Finalización del Nivel Secundario
durante el mismo año censa a 261.425 alumnos de 5to/6to año de Nivel Medio en
Matemática y a 262.581 en Lengua.
El Operativo Nacional de Evaluación del año 2000 se realiza entre el 4 y el 8 de
septiembre para 9no año de EGB (2do de secundaria) y 3ro de Polimodal (5to/6to de
secundaria). Evalúa con carácter muestral a alumnos de 9no en Matemática y en Lengua
y con carácter censal a los de 3ro de Polimodal en Matemática, Lengua, Historia-
103
Este último nivel es censado. La muestra que aquí se consigna es la misma que fue seleccionada en
1996 y es tomada sobre la totalidad de secciones del I Operativo Nacional de Evaluación de Finalización
del Nivel Secundario.
121
Geografía, y Física-Química. En el censo se incluyen también cuestionarios
complementarios para los alumnos y para el director.
Entre el 13 y el 17 de noviembre del mismo año se evalúa muestralmente en
Matemática y en Lengua a los alumnos de 3er año EGB, mientras que a los alumnos de
6to año EGB se los evalúa censalmente en Matemática y Lengua, pero también en
Ciencias Naturales y Ciencias Sociales, tal como en los años precedentes. A su vez, se
aplican también cuestionarios a los docentes y a los directores.
122
ANEXO 2
Tabla 6.1.
Informes de Resultados de los Operativos Nacionales de Evaluación por año de publicación.
Año Documento
1995 "Operativo Nacional de Evaluación 1994. Primer Informe".
1996 "Operativo Nacional de Evaluación 1995".
1997 "Operativo Nacional de Evaluación 1996".
1998 "Operativo Nacional de Evaluación 1997".
"1° Operativo Nacional de Evaluación de Finalización del Nivel Secundario 97".
1999 "Operativo Nacional de Evaluación 1998".
"2° Operativo Nacional de Evaluación de Finalización del Nivel Secundario 98".
2000 "7° Operativo Nacional de Evaluación Muestral EGB 99".
"3° Operativo Nacional de Evaluación de Finalización del Nivel Secundario 99".
2001* "Operativo Nacional de Evaluación. Informe de Resultados. Total País. 2000. 9° EGB -
2° Nivel Medio. 3° Polimodal - 5° - 6° Nivel Medio".
"Operativo Nacional de Evaluación de la Calidad Educativa. Boletín de Informe de
Resultados. Total País. Año 2000. Curso 3° Año EGB. Número 1".
"Operativo Nacional de Evaluación de la Calidad Educativa. Boletín de Informe de
Resultados. Total País. Año 2000. Curso 6° Año EGB. Número 1".
"Operativo Nacional de Evaluación de la Calidad Educativa. Boletín de Informe de
Resultados. Total País. Año 2000. Curso 6° Año EGB. Número 2".
* Estos documentos se encuentran disponibles únicamente en la página web del Ministerio. Pese a esto,
se los ubica dentro de esta categoría, debido a que se proponen difundir los principales resultados de los
Operativos como en años anteriores y el propósito de la Unidad de Evaluación es publicarlos -lo cual no
se hizo hasta la fecha por motivos presupuestarios-.
123
ANEXO 3
124
ANEXO 4
125
ANEXO 5
126
FUENTES UTILIZADAS
127
Recomendaciones Metodológicas para la Enseñanza. Lengua. Nivel Medio. 1994.
Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Lengua. 1997.
Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Matemática. 1997.
Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Ciencias Sociales. 1997.
Recomendaciones Metodológicas para la Enseñanza. 3er Operativo Nacional de
Evaluación (1995). Ciencias Naturales. 1997.
Recomendaciones Metodológicas para la Enseñanza. Algunas consideraciones sobre la
producción de textos escritos. Lengua. 1998.
Recomendaciones Metodológicas para la Enseñanza. La comprensión lectora de textos
argumentativos. Lengua. 1998.
Recomendaciones Metodológicas para la Enseñanza. 5° Operativo Nacional de
Evaluación. Cursos de Finalización de Ciclos de E.G.B.. Matemática. 1998.
Recomendaciones Metodológicas para la Enseñanza. Geometría de Coordenadas. 1°
Censo Nacional de Finalización del Nivel Secundario (V/VI Año, Nov. 1997).
Matemática. 1998.
Recomendaciones Metodológicas para la Enseñanza. Vectores en el plano y en el
espacio. 1° Censo Nacional de Finalización del Nivel Secundario (V/VI Año,
Nov. 1997). Matemática. 1998.
Recomendaciones Metodológicas para la Enseñanza. Representación gráfica de
funciones. 1° Censo Nacional de Finalización del Nivel Secundario (V/VI Año,
Nov. 1997). Matemática. 1998.
Recomendaciones Metodológicas para la Enseñanza. 5° Operativo Nacional de
Evaluación. 1° y 2° Ciclos de E.G.B.. Lengua. 1998.
Recomendaciones Metodológicas para la Enseñanza. 5° Operativo Nacional de
Evaluación. 3° Ciclo de E.G.B.. Lengua. 1998.
Operativo Nacional de Evaluación. Informe de Resultados. Logros Académicos. 2000.
Lengua. 3° Polimodal - 5° - 6° Nivel Medio . S/f.
Operativo Nacional de Evaluación. Informe de Resultados. Logros Académicos. 2000.
Matemática. 3° Polimodal - 5° - 6° Nivel Medio. S/f..
128
Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica
de logros y dificultades. 2000. Ciencias Sociales. 3° Polimodal - 5° - 6° Nivel
Medio. S/f..
Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica
de logros y dificultades. 2000. Ciencias Sociales. 6° EGB. S/f..
Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica
de logros y dificultades. 2000. Lengua. 9° EGB - 2° Nivel Medio. S/f..
Operativo Nacional de Evaluación. Informe de resultados. Interpretación pedagógica
de logros y dificultades. 2000. Matemática. 9° EGB - 2° Nivel Medio. S/f.
Operativo Nacional de Evaluación 2000. Interpretación Pedagógica de Logros y
Dificultades. Física/Química. 3° Polimodal- 5°-6° Nivel Medio. S/f.
¿Qué hacer con los resultados de los Operativos Nacionales de Evaluación? Uso,
aprovechamiento y generación de información de evaluación. S/f.
La evaluación, una herramienta para mejorar la calidad de la institución. Módulo para
directivos. S/f.
La evaluación, una herramienta para mejorar la calidad de la institución. Actividades.
S/f.
La evaluación, una herramienta para mejorar la calidad de la institución. Lecturas. S/f.
Evaluación y uso de la información. 1997.
129
El Perfil del Maestro de 7° y 3° Grado. Un Análisis Comparativo. Nivel Primario -
Área Urbana (I Parte) -1995-. Informe de Investigación N° 12. Versión
preliminar. 1996.
El Perfil del Maestro de 7° y 3° Grado. Nivel Primario - Área Urbana. II Parte. -1995-.
Informe de Investigación N° 15. Versión preliminar. 1996.
Características Personales del Maestro y Rendimiento en Matemática. Nivel Primario -
Área Urbana. -1995-. Versión preliminar. 1996.
Los Factores del Rendimiento en la Educación Primaria. II Parte. Nivel Primario -
Área Urbana. 1995. Versión preliminar. 1997.
Factores asociados al logro escolar/1. El alumno del último año del Nivel Medio:
Características, contexto y rendimiento. 1999.
Factores asociados al logro escolar/2. Características del alumno y rendimiento
escolar en Matemática. 1999.
Factores asociados al logro escolar/3. Características institucionales y rendimiento
escolar en Matemática. 1999.
Factores asociados al logro escolar/4. La institución Educativa de Nivel Medio y el
Rendimiento en Matemática. 1999.
Factores asociados al logro escolar/5. Calidad y equidad en la Educación Básica de
Argentina. 1999.
"Los secundarios no saben para qué sirve la evaluación", en: Diario Clarín. 13 de
noviembre de 1997.
"Una escuela de La Pampa fue la que más rindió en todo el país", en: Diario Clarín. 22
de mayo de 1998.
130
"El ranking de las mejores, provincia por provincia", en: Diario Clarín. 22 de mayo de
1998.
"Tres escuelas que se destacaron otra vez", en: Diario Clarín. 25 de mayo de 1998.
"Los chicos salen mal preparados de las escuelas secundarias", en: Diario Clarín. 29 de
mayo de 1998.
"Los mejores alumnos son de San Nicolás", en: Diario Clarín. 29 de mayo de 1998.
"Menem y Duhalde mantuvieron un encuentro de compromiso", en: Diario Clarín. 2 de
junio de 1998.
"¿Un colegio hizo trampa para ganar prestigio?", en: Diario Clarín. 19 de noviembre de
1998.
"Decibe le echa la culpa a la inexperiencia del sistema", en: Diario Clarín. 19 de
noviembre de 1998.
"Por la evaluación investigan a dos colegios", en: Diario Clarín. 22 de noviembre de
1998.
"Protestan contra los ranking", en: Diario Clarín. 29 de mayo de 1999.
"Los secretos de las dos mejores escuelas primarias del país", en: Diario Clarín. 29 de
mayo de 1999.
"Los secretos del Lenguas Vivas, el mejor secundario porteño", en: Diario Clarín. 26 de
junio de 1999.
"Los más destacados", en: Diario Clarín. 26 de junio de 1999.
"La revancha de los chicos de Río Tercero", en: Diario Clarín. 26 de noviembre de
1999.
"En Santiago del Estero, ganaron por primera vez", en: Diario Clarín. 26 de noviembre
de 1999.
"A "la Capi"", en: Diario Clarín. 26 de noviembre de 1999.
"Muchos alumnos están en una situación de vulnerabilidad social", en: Diario Clarín.
28 de agosto de 2001.
"Cayó el rendimiento de los alumnos", en: Diario La Nación. 21 de mayo de 1998.
"Mejoras en las escuelas secundarias", en: Diario La Nación. 28 de mayo de 1998.
"Persisten las dificultades al finalizar el secundario", en: Diario La Nación. 29 de mayo
de 1998.
"La nota no llega a 7", en: Diario La Nación. 28 de mayo de 1999.
"Sólo el 11% conoce el teorema de Pitágoras", en: Diario La Nación. 29 de mayo de
1999.
131
"Un promedio menor a 7 en todo el país", en: Diario La Nación. 26 de noviembre de
1999.
"No conforman los resultados de las pruebas del secundario", en: Diario La Nación. 27
de noviembre de 1999.
"Premios a las escuelas", en: Diario La Nación. 30 de noviembre de 1999.
"Los alumnos rinden mejor en Matemática que en Lengua", en: Diario La Nación. 28 de
agosto de 2001.
3. Sitios de Internet
4. Actores clave
132
REFERENCIAS BIBLIOGRÁFICAS
133
___________. (2000b) La evaluación del rendimiento académico y la construcción de
consensos en Uruguay. Grupo de Trabajo sobre Estándares y Evaluación,
PREAL - GRADE.
Bolon, C. (2000) "School-based Standard Testing", en: Education Policy Analysis
Archives, Volume 8 Number 23.
Braslavsky, C. (1994) La discriminación educativa en Argentina. Buenos Aires, Miño y
Dávila, FLACSO.
___________. (1999) Re-haciendo escuelas. Hacia un nuevo paradigma en la
educación latinoamericana. Buenos Aires, Santillana - Convenio Andrés Bello.
Braslavsky, C. y Cosse, G. (1996) Las Actuales Reformas Educativas en América
Latina: Cuatro Actores, Tres Lógicas y Ocho Tensiones. N° 5. Programa de
Promoción de la Reforma Educativa en América Latina y el Caribe (PREAL).
Braslavsky, C. y Gvirtz, S. (2001) "Nuevos desafíos y dispositivos en la política
educacional latinoamericana de fin de siglo", en: Educación Comparada.
Política Educativa en Iberoamérica. Madrid, Organización de los estados
Iberoamericanos (OEI).
Bryson, J. and Crosby, B. (1992) Leadership for the Common Good. San Francisco,
Jossey Bass Publishers.
Cano García, E. (1998) Evaluación de la calidad educativa. Madrid, Ed. La Muralla.
Carlino, F. R. (1999) La evaluación educacional. Historia, problemas y propuestas.
Buenos Aires, Aique.
Carnoy, M. y de Moura Castro, C. (1997) ¿Qué rumbo debe tomar el mejoramiento de
la educación en América Latina? Buenos Aires, BID (Seminario sobre Reforma
Educativa).
Certau, M. de (1996) La invención de lo cotidiano. 1. Artes del hacer. México,
Universidad Iberoamericaba.
Chapman, D., Mählck, L. (1997) "Changing what happens in schools: central-level
initiatives to improve school practice", en: Chapman, D.; Mählck, L.; Smulders,
A. E. M. (eds.) From Planning to Action: government iniciatives for improving
school-level practice. Paris, UNESCO - International Institute for Educational
Planning, Pergamon.
Chelimsky, E. (1995) "Where we stand today in practice of evaluation: Some
reflections", en: Knowledge & Policy, Volume 8 Issue 3.
134
Chelimsky, E. and Shadish, W. R. (eds.) (1997) Evaluation for the 21st century: A
handbook. Thousand Oaks, CA, SAGE Publications.
Chumbita, H. (1997) Evaluación en la gestión pública: caso del sistema nacional de
evaluación educativa. Instituto Nacional de la Administración Pública, Buenos
Aires.
Clotfelter, C. T and Ladd, H. F (1996) "Recognizing and Rewrding Success in Public
Schools", in: Ladd, H. F. (ed.) Holding Schools Accountable: Performance-
Based Reform in Education. Washington DC, Broolings Institution.
Cols, E. y Basabe, L. en colaboración con Broitman, C. (1998) "La evaluación de la
calidad. Aportes para su análisis", en: Revista del Instituto de Investigaciones en
Ciencias de la Educación, AñoVII, N° 12, Facultad de Filosofía y Letras, UBA,
Argentina.
Constance, P. (2002) "Cómo priorizar la ayuda", en: BIDAmérica. Revista del Banco
Interamericano de Desarrollo, 11 de julio de 2002, disponible en:
http://www.iadb.org /idbamerica/spanish.
Darling-Hammond, L. and Ascher, C. (1991) "Accountability Mechanisms in Big City
School System", en: ERIC/CUE Digest No. 71. New York, ERIC Clearinghouse
on Urban Education.
Darling-Hammond, L. and Falk, B. (1997) "Using standards and assessments to support
student learning", en: Phi Delta Kappan, Volume 79 Issue 3..
De Landsheere, G. (1996) El pilotaje de los sistemas educativos. Madrid, La Muralla.
Diker, G. y Feeney, S. (1998) "Evaluación de la calidad. Un análisis del discurso
oficial", en: Revista del Instituto de Investigaciones en Ciencias de la
Educación, AñoVII, N° 12, Facultad de Filosofía y Letras, UBA, Argentina.
Dorn, S. (1998) "The political Legacy of School Accountability Systems", en:
Education Policy Analysis Archives, Volume 6 Number 1.
Eisner, E. W. (1999) Usos y límites de las pruebas de desempeño. Programa de
Promoción de la Reforma Educativa en América Latina y el Caribe (PREAL).
Tomado y traducido de Phi Delta Kappan de mayo de 1999.
Esquivel, J. M. (2000) "El diseño de las pruebas para medir logro académico:
¿referencia a normas o a criterios?", en: Ravela, P. (ed.) Los próximos pasos:
¿Hacia dónde y cómo avanzar en la evaluación de aprendizajes en América
Latina? Programa de Promoción de la Reforma Educativa en América Latina y
el Caribe (PREAL).
135
Experton, W. (1999) Desafíos para la Nueva Etapa de la Reforma Educativa Argentina.
The World Bank, Latin America and Caribbean Regional Office, Washington.
FIEL - CEP (1998) Una educación para el siglo XXI. El caso argentino y otras
experiencias internacionales. Buenos Aires, Fundación de Investigaciones
Económicas Latinoamericanas.
Filmus, D. (comp.) (1993) Para qué sirve la escuela. Buenos Aires, Tesis-Grupo
Editorial Norma.
Foucault, M. (1977) The Archeology of Knowledge. London, Tavistock.
_________. (1997) La arqueología del saber. México, Siglo XXI.
Fuhrman, S. H. (1999) "The New Accountability", en: Policy Briefs, Graduate School
of Education, University of Pennsylvania.
Gandulfo, A.(1991) "Apéndice 1 - Expansión del sistema educativo escolar argentino",
en: Puiggrós, A. (dir.): Sociedad civil y Estado en los orígenes del sistema
educativo argentino. Historia de la Educación en la Argentina, Tomo II. Buenos
Aires, Editorial Galerna.
Gipps, C. (1994) Beyond Testing: Towards a Theory of Educational Assessment.
London, The Falmer Press.
Gipps, C., Murphy, P. (1994) A fair test? Assessment, achievement and equity.
Buckingham, Open University Press.
Glaser, R. and Silver, E. (1994) "Assessment, Testing, and Instruction: Retrospect and
Prospect", CSE Technical Report 379, National Center for Research on
Evaluation, Standards, and Student Testing (CRESST), Graduate School of
Education & Information Studies, University of California, Los Angeles.
Gvirtz, S. y Narodowski, M. (2000) "Acerca del fin de la escuela moderna. La cuestión
de la simultaneidad en las nuevas reformas educativas de América Latina", en:
Téllez, M. (comp.) Repensando la educación en nuestros tiempos. Argentina,
Ed. Novedades Educativas.
Hacking, I. (1983) Representing and Intervening. Cambridge University Press.
Haertel, E. H. (2002) Pruebas de desempeño y reforma educativa. Programa de
Promoción de la Reforma Educativa en América Latina y el Caribe (PREAL).
Hall, P. (1993) El gobierno de la economía. Madrid, Ministerio de Trabajo y Seguridad
Social.
136
Hanson, M. (1997) La descentralización educacional: problemas y desafíos.
Documento N°9, Programa de Promoción de la Reforma Educativa en América
Latina y el Caribe (PREAL), Santiago de Chile.
Heubert, J. P. and Hauser, R. M. (ed.) (1999) High Stakes: testing for tracking,
promotion, and graduation. Washington, D. C., NATIONAL ACADEMY
PRESS.
House, E. R. (1994) Evaluación, ética y poder. Madrid, Morata.
House, E. R. (1993). Professional evaluation. Newbury Park, CA: SAGE Publications.
IIPE-UNESCO (2001) Los docentes argentinos. Resultados de una encuesta nacional
sobre la situación y la cultura de los docentes. Disponible en: http://www.iipe-
buenosaires.org.ar.
Kogan, M. (1986) Education Accountability. Londres, Hutchinson.
Kotter, J. (1996) Leading Change. Boston, Mass., Harvard Business School Press.
Larripa, S. (2003) El Sistema Nacional de Evaluación de la Calidad educativa
(SINEC): acerca de la comparabilidad de sus resultados. Argentina, 1995-2000.
Tesis de Maestría. Victoria, Universidad de San Andrés.
Lawton, D. (1996) Beyond the National Curriculum. Teacher, Professionalism and
Empowerment. London, Hodder & Stoughton.
Levin, B. (2001) "Conceptualizing the Process of Education Reform From An
International Perspective", en: Education Policy Analysis Archives, Volume 9
Number 14.
Linn, R. L. (1993) "Educational Assessment: Expanded Expectations and Challenges",
CSE Technical Report 351, National Center for Research on Evaluation,
Standards, and Student Testing (CRESST), Graduate School of Education,
University of California, Los Angeles.
_________. (2000) "Assessment and Accountability", en: Educational Researcher
Online, Volume 29, Number 2. Accesible en:
http://www.aera.net/pubs/er/arts/29-02 /linn01.htm
Lord, F. M. (1980) Applications of item response theory to practical testing problems.
Hillasdale, N. J., Lawrence Erlbawn.
Lundgren, U. (1992) Teoría del curriculum y escolarización. Madrid, Ed. Morata.
Lyotard, J. F. (1984) The posmodern condition: a report on knowledge. Manchester,
Manchester University Press.
137
MacDonald, B. (1989) "La evaluación y el control de la educación", en: Gimeno
Sacristán, J. y Pérez Gómez, A. (comps.) La enseñanza: su teoría y su práctica.
Madrid, Ed. Akal.
Madaus, G. (1988) "The influence of testing on the curriculum", in: Tanner (ed.)
Critical Issues in curriculum. 87th Yearbook of NSSE Part 1, Chicago, IL,
University of Chicago Press.
Marchesi, A. y Martin, E. (1999) Calidad de la enseñanza en tiempos de cambio.
Madrid, Alianza Editorial.
McDonnell, L. M. (1994) "Policymakers' Views of Student Assessment", CSE
Technical Report 378, National Center for Research on Evaluation, Standards,
and Student Testing (CRESST), Graduate School of Education & Information
Studies, University of California, Los Angeles.
Messick, S. (1999) "Key Issues", en: Ottobre, F. (ed.) The Role of Measurement and
Evaluation in Education Policy. Paris, UNESCO Publishing, Educational
Studies and Documents N° 69.
Meyer, J. and B. Rowan (1977). "Institutional organizations: Structure as myth
and ceremony", en: American Journal of Sociology, Volume 83, Issue 2, 340-
363.
Ministerio de Cultura y Educación (1993) Ley Federal de Educación, N° 24.195.
Argentina.
_________. (s/f) Sistema Nacional de Evaluación. 1er Operativo Nacional 1993.
Resultados Nacionales. Primer informe. Argentina.
_________. (s/f) Acciones 1998. Argentina.
Ministerio de Educación (s/f) Evaluación de los resultados del SINEC 1993/1999.
Debilidades y fortalezas en las pruebas de evaluación. Argentina.
Mortimore, P. (1998) The road to improvement. Reflections on school effectiveness. The
Netherlands, Swets & Zeitlinger Publishers.
Namo De Mello, G. y Da Silva, T. R. N. (2000) "La gestión en la escuela en las nuevas
perspectivas de las políticas educativas", en: Ezpeleta, J. y Furlán, A. (comps.)
La gestión pedagógica de la escuela. México, Correo de la UNESCO.
Noble, A. J. and Smith, M. L. (1994) "Measurement-Driven Reform: Research on
Policy, Practice, Repercussion", CSE Technical Report 381, National Center for
Research on Evaluation, Standards, and Student Testing (CRESST), Graduate
138
School of Education & Information Studies, University of California, Los
Angeles.
Nores, M. (2001) El Sistema Nacional de Evaluación de la Calidad –SINEC-,
BID/CEDI, Caso Educación, informe preliminar.
OCDE (1991) Escuelas y calidad de la enseñanza. Madrid, Paidós-Ministerio de
Educación y Ciencia.
Perusia, J. C. (2001) Evolución de los Resultados de los Operativos de Evaluación de la
Calidad Educativa 1995 - 1999. Puntuaciones Equiparadas de las pruebas de
Lengua y de Matemática. Informe N°13, Argentina, Ministerio de Educación.
Rama, G. W. (1991) Qué aprenden y quiénes aprenden en las escuelas de Uruguay. Los
contextos sociales e institucionales de éxitos y fracasos. Montevideo, CEPAL.
Ravela, P. (2001) ¿Cómo presentan sus resultados los sistemas nacionales de
evaluación educativa en América Latina? Programa de Promoción de la
Reforma Educativa en América Latina y el Caribe (PREAL).
_________. (ed.) (2000) Los próximos pasos: ¿Hacia dónde y cómo avanzar en la
evaluación de aprendizajes en América Latina? Programa de Promoción de la
Reforma Educativa en América Latina y el Caribe (PREAL).
Resnick, D. P. (1980) "Minimum competency testing historically considered", en:
Berliner, D. C. (ed.) Review of research in education. Volume 8, Washington,
D.C., American Educational Research Association.
Resnick, L. B. and Resnick, D. P. (1989) Assessing the thinking curriculum: New tools
for education reform. National Commission on Testing and Public Policy.
Rose, N. S. (1999) Powers of Freedom: reframing political thought. Cambridge,
Cambridge University Press.
Rossi, P. H., Freeman, H. E., Lipsey, M. W. (1999) Evaluation: A Systematic Approach.
Thousand Oaks, SAGE Publications (6ta edición).
Rowntree, D. (1977) Assessing Students: How shall we know them? London, Kogan
Page.
Santos Guerra, M. A. (1995) La evaluación: un proceso de diálogo, comprensión y
mejora. Málaga, Ediciones Aljibe.
Scheerens, J. (2001) Systemic M&E in Education. Strategic application of monitoring,
evaluation and assessment to improve the functioning of education systems.
Draft discussion paper for the World Bank (ECA region).
139
Sebatane, M. (2000) "International transfers of assessment: Recent trends and
strategies", en: Assessment in Education, Volume 7 Issue 3, 401-416.
Shadish, W. R. Jr.; Cook, T. D.; Leviton, L. C. (1991) Foundation of Program
Evaluation. Theories and Practices. Newbury Park, SAGE Publications.
Shepard, L. A. (1991) "Will National Test Improve Student Learning?", CSE Technical
Report 342, National Center for Research on Evaluation, Standards, and Student
Testing (CRESST), UCLA Graduate School of Education, Los Angeles.
Stake, R. (1998) "Some Comments on Assessment in U.S. Education", en: Education
Policy Analysis Archives, Volume 6 Number 14.
Tamayo Sáez, M. (1997) "El análisis de las políticas públicas", en Bañón, R. y Carrillo,
E. (comps.) La nueva Administración Pública. Madrid, Alianza Universidad.
Tedesco, J. C. (1982) Educación y sociedad en la Argentina (1880-1900). Buenos
Aires, Centro Editor de América Latina.
Tedesco, J. C. y Tenti Fanfani, E. (2002) "La reforma educativa en Argentina.
Semejanzas y particularidades", en: Alcances y resultados de las reformas
educativas en el Cono Sur. Ministerios de Educación de Argentina, Chile y
Uruguay - BID - Universidad de Stanford. En prensa.
Tenti Fanfani, E. (1993) La escuela vacía. Buenos Aires, Losada/Unicef.
Tenti Fanfani, E. (comp.) (2002) El rendimiento escolar en la Argentina. Buenos Aires,
Losada.
Tiana Ferrer, A. (1996): "La evaluación de los sistemas educativos", Revista
Iberoamericana de Educación, nº 10, pp. 37-61 (puede encontrarse en
http://www.campus-oei.org/oeivirt/rie10.htm).
_________. (1998) "Tratamiento y usos de la información de evaluación", en:
CUMBRE IBEROAMERICANA: Programa Evaluación de la Calidad de la
Educación. Documentos, Buenos Aires, OEI, vol. I. (También disponible en:
http://www.ince.mec.es/cumbre/d1-05.htm)
_________. (2000) Cooperación internacional en evaluación de la educación en
América Latina y el Caribe: análisis de la situación y propuestas de actuación.
Serie de informes técnicos del Departamento de Desarrollo Sostenible,
Washington, D.C., Banco Interamericano de Desarrollo.
Theodoulou, S. Z., Cahn, M. A. (ed.) (1995) Public Policy. The Essential Readings.
New Jersey, Prentice-Hall.
140
Thomas, S. y Mortimore, P. (1995) "Comparison of Value Added Models for Secondary
School Effectiveness". Ponencia presentada en la Conferencia Anual de British
Educational Research Association, Bath, 14 al 17 septiembre.
Torrance, H. (1997) "Assessment, Accountability, and Standards: Using Assessment to
Control the Reform of Schooling", en: Halsey, A. H., Lauder, H., Brown, P., and
Wells, A. S. (eds.) Education. Culture, Economy, and Society. Oxford - New
York, Oxford University Press.
Weiler, H. (1996) "Enfoques comparados en descentralización educativa", en: Pereyra,
García Mínguez, Gómez, Beas (comps.) Globalización y descentralización de
los sistemas educativos. Barcelona, Pomares.
Weiss, C. H. (1998) Evaluation. Methods for Studying Programs and Policies. New
Jersey, Prentice-Hall (2da edición).
Wolfe, R. (2000) "El dilema de la "granulidad" en el diseño del sistema de evaluación:
cobertura curricular vs. cobertura poblacional", en: Ravela, P. (ed.) Los
próximos pasos: ¿Hacia dónde y cómo avanzar en la evaluación de aprendizajes
en América Latina? Programa de Promoción de la Reforma Educativa en
América Latina y el Caribe (PREAL).
Wolff, L. (1998) "Las Evaluaciones Educacionales en América Latina: Avance Actual y
Futuros Desafíos", Documento de Trabajo N° 11, Washington, Programa de
Promoción de la Reforma Educativa en América Latina y el Caribe (PREAL).
141