Está en la página 1de 29

Programa de Promoción de la Reforma Educativa en América Latina y el Caribe

Partnership for Educational Revitalization in the Americas

N˚ 26

Las pruebas internacionales


de aprendizaje en América
Latina y su impacto en la
calidad de la educación:
Criterios para guiar futuras
aplicaciones

J. Guillermo Ferrer
Patricia Arregui
Abril 2003

El presente documento corresponde a un resumen del


estudio del mismo nombre financiado con recursos del
Consorcio de Investigación Económica y Social del
Perú, y con el apoyo de PREAL. La versión completa
se encuentra en http://www.grade.org.pe/gtee-preal/
docr/ExperLatino.pdf

Las opiniones vertidas en este trabajo son de respon-


sabilidad de los autores y no comprometen al PREAL,
ni a las instituciones que lo patrocinan.
1
2
ÍNDICE

INTRODUCCIÓN 5

I. LAS PRUEBAS INTERNACIONALES DE APRENDIZAJE 5


I.1. Las reformas educativas y la evaluación del logro
académico en los noventa 5
I.2. ¿En qué consisten las pruebas internacionales? 8
I.3. El debate acerca de la participación en pruebas internacionales 11

II. MARCO CONCEPTUAL Y CASOS DE ESTUDIO 13

III. RESULTADOS DEL TRABAJO DE CAMPO 14

III.1. Agencia: LLECE (Unesco-OREALC) - Primer Estudio


Internacional Comparativo sobre Lenguaje,
Matemáticas y Factores Asociados 14
III.2. Agencia: IEA - TIMSS, TIMSS-R y Educación Cívica 15
III.3. Agencia: OCDE - Prueba PISA 17

IV. RESUMEN CRÍTICO DE LOS RESULTADOS 17

V. RECOMENDACIONES PARA FUTURAS OPORTUNIDADES


DE PARTICIPACIÓN EN PRUEBAS INTERNACIONALES 22

BIBLIOGRAFÍA 27

ENTIDADES ENTREVISTADAS 28

SIGLAS Y ABREVIACIONES 29

3
4
INTRODUCCIÓN cesos de participación de América Latina en
pruebas internacionales1.
En los últimos años, diversos organismos inter-
nacionales y regionales han recomendado que El propósito último de este estudio es el de con-
los países latinoamericanos participen en prue- tribuir a que dicha participación, de resultar re-
bas internacionales de logro académico. Esa re- comendable o de alguna manera ineludible,
comendación suele sustentarse en el argumento pueda servir para el mejoramiento de la gestión
de que los datos comparativos sobre el rendi- y de los resultados de los procesos educativos.
miento estudiantil son útiles para informar a los A la vez, confiamos en que las recomendacio-
países sobre la calidad relativa de sus sistemas nes finales de este estudio servirán para minimi-
educativos y, consecuentemente, sobre su com- zar los impactos negativos que dichas activida-
petitividad en el mercado global de bienes y ser- des pudieran eventualmente acarrear.
vicios. Se argumenta también que las pruebas
internacionales garantizan mayor calidad técni- Antes de concluir esta introducción, deseamos
ca y eficiencia que los sistemas nacionales de agradecer a Gilbert Valverde, Fernando Rei-
medición y que pueden contribuir significativa- mers, Juan Fernando Vega, José Rodríguez,
mente al desarrollo de capacidades locales en Leonor Cariola, Carlos Pardo, Silvia Montoya,
el campo de la evaluación. Shane Hunt, Pedro Ravela y Héctor Fernández
por sus valiosos comentarios a los primeros bo-
La utilidad efectiva de las comparaciones inter- rradores de este informe.
nacionales de logro académico para informar
políticas educativas no es, sin embargo, algo
sobre lo cual exista total acuerdo en la literatura I. LAS PRUEBAS INTERNACIONALES DE
actual. Tampoco se ha recogido ni sistematizado APRENDIZAJE
suficiente evidencia empírica sobre la difusión
que los países han dado a la información recogi- I.1. LAS REFORMAS EDUCATIVAS Y LA EVALUACIÓN
da en las pruebas internacionales ni sobre la DEL LOGRO ACADÉMICO EN LOS NOVENTA
manera en que han utilizado esa información
para promover el mejoramiento de sus políticas, Los esfuerzos mundiales por llevar a cabo refor-
planes, programas y prácticas educativas. mas educativas en las últimas dos décadas han
estado motivados, principalmente, por un cre-
Ante esta falta de evidencia, y ante la posibilidad ciente interés político en asegurar la cobertura y
de que los países de la región comiencen a privi- el acceso universal a la educación, así como el
legiar la participación en pruebas internacionales aprendizaje efectivo de todos los alumnos de los
sin consolidar el desarrollo de sus propios siste- nuevos contenidos curriculares. Este renovado
mas y capacidades de evaluación y medición, se interés por la calidad de la educación se inscri-
consideró oportuno iniciar una indagación explo- be en un contexto de fuertes cambios políticos y
ratoria sobre los riesgos y beneficios de esta par- económicos que son interpretados en formas
ticipación y sobre las condiciones técnicas y polí- variadas por las diferentes corrientes académi-
ticas en que se han venido realizando. cas y de opinión.

Para ello se decidió estudiar la experiencia de Algunas voces destacan la existencia de condi-
algunos de los países que han participado en ciones en las que las reglas de libre mercado, la
pruebas internacionales de logro académico: Ar- globalización y las nuevas tecnologías de infor-
gentina, Chile, Colombia, Cuba, Ecuador, Esta- mación imponen una redefinición de las metas y
dos Unidos, México, Perú y Uruguay (que parti- objetivos de la educación pública, así como del
cipará próximamente por primera vez en una rol del Estado para la consecución de esas me-
prueba internacional). La inclusión de Estados tas. Estos cambios se caracterizan por una serie
Unidos se decidió porque su experiencia arroja de objetivos que Carter y O’Neill (en Ball, 1998)
cierta luz sobre la forma en que América Latina
puede hacer mejor uso de sus oportunidades de
participación en pruebas internacionales. Así,
aunque esta muestra no se considera represen- 1 Cabe añadir que la selección de los países estuvo condicionada
por las limitaciones financieras de los investigadores, que realiza-
tativa de toda la región, permite identificar algu- ron las entrevistas personales y telefónicas haciendo uso de tiem-
nas tendencias y patrones comunes en los pro- po y recursos financieros de otros proyectos de investigación.

5
definen como constitutivos de una “nueva orto- choice), sino hacer más transparente y partici-
doxia”. Algunos de esos objetivos serían: mejo- pativa la gestión mediante la provisión de infor-
rar las economías nacionales estableciendo mación a los actores y usuarios del sistema.
vínculos más robustos entre escolarización, em- Visto de este modo, el Estado no se desentien-
pleo, productividad y mercado; mejorar los re- de de la gestión ni de su responsabilidad por
sultados de aprendizajes relacionados a las promover mayor equidad y calidad de educa-
competencias y destrezas que requiere el mun- ción, sino que busca alentar a la población a
do laboral; lograr un mayor y más directo control que utilice la información sobre los resultados
de los sistemas educativos nacionales sobre los educativos para demandar localmente mayores
contenidos curriculares y sobre la evaluación; niveles de calidad para sus escuelas.
reducir los costos de gobierno en educación; y
ampliar la contribución de la comunidad a la Simultáneamente, el Estado se reserva para sí la
educación, mediante su participación en la toma función redistributiva de los ingresos públicos,
de decisiones escolares y la presión de la libre que se puede hacer más efectiva y equitativa me-
elección de mercado. diante evaluaciones que permitan distinguir cuá-
les son las subpoblaciones del sistema con ma-
Estas tendencias vienen de la mano de nuevas yores dificultades y menores recursos, y así
formas de administración y gestión que plantean poder intervenir con recursos materiales y peda-
la necesidad de mejorar la eficiencia de los sis- gógicos para compensar las diferencias de logro
temas educativos y de fomentar la responsabili- académico. Adicionalmente, las evaluaciones han
zación social y profesional por los resultados de permitido reunir sistemáticamente mayores evi-
la educación. Estas formas de gestión, usual- dencias sobre las actitudes de los alumnos con
mente denominadas de “gerenciamiento”, supo- relación a los aprendizajes mismos y a los valo-
nen el uso de estilos y herramientas diferentes a res personales y sociales, que son contenidos
los tradicionalmente utilizados por el sector pú- explícitamente delineados en la gran mayoría de
blico. Ejemplo de ello son la delegación de res- los currículos de América Latina donde las refor-
ponsabilidad y poder de decisión a las institucio- mas educativas de los últimos veinte años se han
nes proveedoras de servicios (escuelas), así emprendido en contextos políticos de democrati-
como el control “a distancia” de la calidad en la zación y pacificación (Ferrer, 1999)2.
provisión de esos servicios por parte del poder
central. De esta manera, el Estado reemplaza la Es importante notar que la búsqueda del control
intervención directa y la prescripción por la de- más directo sobre los contenidos curriculares se
terminación de objetivos, la comparación y la ha fortalecido en los países que han tenido sis-
responsabilización (Lyotard, en Ball, 1998). temas educativos tradicionalmente descentrali-
Dentro de este marco de interpretación, sin zados, mientras que en aquellos donde la pres-
duda, ha tenido un rol fundamental el uso de cripción curricular ha sido históricamente
mediciones sobre el rendimiento académico de centralizada, los esfuerzos se han concentrado
los estudiantes, que permite establecer me- más bien en la flexibilización del currículo en el
canismos de responsabilización para los alum- nivel local y escolar. En cualquiera de los dos
nos mismos, para los docentes y para las es- escenarios, sin embargo, se percibe la necesi-
cuelas, en forma de graduación y promoción, dad de realizar evaluaciones centralizadas que
acreditación, incentivo a la matrícula, mejoras permitan medir el logro académico de todos los
salariales, y otras tantas formas de estímulo alumnos bajo un mismo parámetro y con rela-
para elevar los resultados educativos. ción a contenidos curriculares a los que todos
los estudiantes deberían poder acceder.
Paralelamente, muchos países, entre ellos los
latinoamericanos, buscan, por medio de las re- En este contexto, una de las herramientas princi-
formas curriculares y de gestión, fomentar y pales de gestión educativa en muchos países del
consolidar valores democráticos, de participa-
ción ciudadana y de respeto por la diversidad.
En este sentido son numerosos los esfuerzos de
muchos países de la región por establecer siste- 2 También en algunos países de Asia, como Japón y Corea del
mas nacionales de medición de la calidad edu- Sur, se ha hecho evidente la necesidad de complementar el
enfoque tradicionalmente academicista de la educación con as-
cativa que permitan, no necesariamente impul- pectos del desarrollo moral, afectivo y social de los estudiantes
sar mecanismos punitivos o de mercado (school (GRADE, 2001).

6
mundo es la evaluación comparativa y cuantitati- múltiples iniciativas de reforma educativa en el
va de los logros de aprendizaje de los alumnos y mundo. Casi todas estas reformas, si bien
la medición del impacto de diversas variables es- muestran grandes diferencias, guardan como
colares y extraescolares sobre esos logros. Los principal semejanza los esfuerzos por actuali-
países que disponían de sistemas nacionales de zar permanentemente los currículos y por me-
evaluación desde antes de los años ochenta, re- dir, como se explicó anteriormente, la imple-
forzaron su aplicación y los vincularon más direc- mentación y aprendizaje efectivo de los
tamente a sus nuevas metas curriculares. Los contenidos de esos currículos.
países que no disponían de tales sistemas de
evaluación, como la mayor parte de los países Comparaciones internacionales
latinoamericanos, los desarrollaron junto con el
diseño e implementación de las reformas educa- Junto con el desarrollo y perfeccionamiento de
tivas de los años ochenta y noventa. sistemas nacionales de medición de aprendiza-
jes, ha crecido notablemente el interés por las
Opiniones especializadas argumentan que el im- comparaciones internacionales de logro académi-
pulso por la creación de estos sistemas de eva- co. Según Bempechat et al. (2000) “la fascina-
luación en los países en desarrollo estuvo influi- ción con el logro académico en diferentes nacio-
do por la presión de algunas agencias de nes ha sido motivada por los rápidos avances
cooperación internacional que condicionaron los tecnológicos que han transformado la economía
préstamos para educación al desarrollo de siste- mundial [...] Los Estados-nación expresan su pre-
mas nacionales de medición que permitieran ocupación por su capacidad para competir en un
medir los resultados de esas millonarias inver- mundo que se vuelve más y más pequeño”.
siones en reformas educativas. Sin embargo,
esta interpretación es insistentemente desafiada El caso de Estados Unidos es paradigmático en
por quienes consideran que, independientemen- cuanto al impacto que las pruebas internaciona-
te de las políticas de las últimas dos décadas, les comparadas pueden tener sobre las políticas
comúnmente denominadas “neoliberales”, la educativas de una nación. Los resultados en
evaluación estandarizada del rendimiento aca- Matemáticas y Ciencias, de los estudiantes nor-
démico y el estudio de los factores escolares y teamericanos en pruebas internacionales, por
extraescolares que afectan ese logro fortalecen debajo del promedio mundial y muy lejos de las
los cimientos democráticos de los sistemas edu- potencias asiáticas, alarmaron a los líderes polí-
cativos, en tanto permiten la opinión informada y ticos de los inicios de los ochenta, quienes no
la demanda de los beneficiarios, a la vez que el dudaron en calificar a los Estados Unidos como
establecimiento de mecanismos de compensa- “una nación en riesgo” (National Commission on
ción para asistir a las comunidades escolares Excellence in Education, 1983). La declaración
que más lo necesitan por parte del Estado. hacía referencia al peligro que corrían los Esta-
dos Unidos de perder liderazgo mundial si su
A esta discusión se suma el hecho de que los sistema educativo público no lograba mejores
cambios económicos mundiales de las últimas resultados de aprendizaje en Ciencias y Mate-
dos décadas también han dado lugar a una cre- máticas, y desencadenó una serie de medidas
ciente preocupación de los países por su capa- de reforma curricular y de gestión en el país,
cidad para competir eficazmente en los merca- con el objetivo explícito de ocupar el primer
dos internacionales. Para poder competir y puesto en los rankings internacionales de logro
prosperar, según se argumenta desde la publi- académico hacia el año 2000.
cación de La naturaleza y las causas de la ri-
queza de las naciones (Smith, 1776), es menes- Pero a las comparaciones internacionales no so-
ter invertir en capital humano. Desde entonces, lamente se les atribuye un valor competitivo, o de
la educación ha sido vista como el principal me- ranking. Existen también argumentos conceptua-
dio para incrementar ese capital y fomentar así les que justifican las comparaciones entre países
el desarrollo y la posibilidad de competir comer- como un instrumento metodológico que ofrece
cialmente en el escenario global. mayor información que la que puede ofrecer un
análisis intranacional. Según Joseph Farrell
La responsabilidad que se le adjudica a la edu- (1979) no se puede realizar ninguna generaliza-
cación por incrementar el capital humano de ción científica sobre educación si no es a través
las naciones se manifiesta actualmente en las de un estudio comparativo. El autor sostiene que

7
“los datos comparativos son esenciales para es- cial. Este ha sido el caso de las pruebas interna-
tablecer la credibilidad de las proposiciones” y cionales de logro académico, que se siguen
que “hasta que no se conoce la relación entre aplicando en una creciente cantidad de países
universos particulares y generales, ningún estu- cada año y que se van perfeccionando gradual-
dio es suficiente para probar una proposición”. mente en lo que se refiere a la especificación
consensuada de sus objetivos, así como a las
Para muchos investigadores y tomadores de de- técnicas de recojo y análisis de la información.
cisiones sobre políticas educativas la participa-
ción en pruebas internacionales constituye una I.2. ¿ENQUÉ CONSISTEN LAS PRUEBAS INTERNA-
“intervención en sí misma”, independientemente CIONALES ?
de los resultados del estudio, y alerta a educa-
dores e investigadores sobre problemas que po- Las pruebas internacionales comparadas son
drían no haber considerado anteriormente. instrumentos de medición estandarizados que
se aplican en varios países simultáneamente,
Otras visiones sostienen que las pruebas inter- en grados o grupos etarios seleccionados, y que
nacionales pueden cumplir un rol más activo o recogen información sobre logros de aprendiza-
propositivo. Husén (1987), cuando discute el im- je conceptual y procedimental en diferentes dis-
pacto de la IEA (International Association for the ciplinas, y sobre los factores contextuales que
Evaluation of Educational Achievement) sobre se presume influyen en el logro académico de
las políticas educativas en los países participan- los estudiantes.
tes, distingue dos categorías de “clientes”: a)
formuladores de políticas (principalmente en el Las pruebas suelen incluir ítemes de opción
nivel central), y b) ejecutores de esas políticas múltiple, preguntas abiertas y/o demostraciones
(técnicos y educadores en el nivel central y lo- prácticas, como por ejemplo de laboratorio en el
cal). Según Husén, los primeros suelen estar caso de las Ciencias Naturales. Entre los facto-
más interesados en datos y hallazgos de investi- res contextuales más importantes que se suele
gación referidos a la estructura del sistema de estudiar están la inversión per cápita en cada
educación, mientras que los últimos prestan sistema nacional; las características familiares y
más atención a la información recogida sobre socioculturales de los alumnos; la infraestructu-
procesos de enseñanza-aprendizaje, prácticas y ra escolar; la preparación académica de los do-
metodología de aula, materiales educativos y centes; la cobertura curricular efectuada en cla-
evaluación de aprendizajes en el aula. se en las áreas disciplinares evaluadas; y las
actitudes y valores de los alumnos con relación
Otros autores proponen algunos objetivos espe- a esas áreas.
cíficos que suelen perseguirse mediante la apli-
cación de pruebas internacionales. Theisen et Las pruebas pueden ser curriculares o “acurricu-
al. (1983), por ejemplo, citan tres objetivos prin- lares”, dependiendo de su grado de vinculación
cipales para esa participación: comparar el logro a los currículos de los países participantes.
académico relativo entre países y por asignatu- Cuando las pruebas son curriculares, los instru-
ra; identificar implicancias de política educativa mentos se diseñan sobre una matriz común que
para un país a través de los determinantes de representa los contenidos básicos que se ofrecen
logro hallados en otros países; y reevaluar las en los niveles educativos a ser evaluados en casi
prioridades de inversión dentro de un país para todos los países participantes. A estos conteni-
elevar la calidad de los aprendizajes. dos comunes se suman contenidos considerados
necesarios para una educación de calidad en el
La teoría sobre educación comparada es exten- siglo XXI, según la opinión de profesionales y
sa y controvertida, y los argumentos sobre el académicos internacionales especializados en
valor y validez de las comparaciones internacio- las áreas disciplinares evaluadas. En el caso de
nales aún son materia de acaloradas discusio- las pruebas “acurriculares”, los diseñadores del
nes en los medios académicos. Sin embargo, estudio establecen estándares de contenido
persiste el interés de los investigadores socia- académico disciplinar que se consideran nece-
les, así como de los formuladores de políticas sarios para una efectiva inserción social y labo-
públicas alrededor del mundo, en realizar com- ral en el mundo de hoy, independientemente de
paraciones, cada vez más precisas y sofistica- los contenidos de los currículos de los países
das, sobre diferentes aspectos de la política so- participantes.

8
Algunas de estas pruebas se han aplicado una ternacionales buscan el desarrollo de nuevas
única vez, a modo de diagnóstico o como ejerci- metodologías de investigación comparada y en-
cio de investigación. Actualmente, se observa foques analíticos (Forster, 2000); actualmente,
una tendencia al diseño de pruebas de aplica- sin embargo, se tiende a desarrollar estas prue-
ción cíclica para seguir el rendimiento de un bas como un instrumento para conseguir insu-
grupo etario o grado escolar de estudiantes mos de información para el diseño y mejora-
cada cierta cantidad de años, y así establecer miento de políticas educativas orientadas a
relaciones longitudinales con respecto al des- elevar la calidad de los aprendizajes. Para ese
empeño académico de esas poblaciones. fin, algunas pruebas ofrecen lo que en este in-
forme llamaremos “opciones nacionales”, es de-
Agencias de evaluación cir, la posibilidad de medir subpoblaciones espe-
cíficas que por alguna razón requieran una
Estas son pruebas diseñadas y coordinadas por medición más enfocada, o de áreas de conoci-
agencias internacionales de evaluación, y con miento particulares y diferentes de las que eva-
cierto grado de participación de las unidades de lúa la prueba general. Así, un país podría hacer
medición de la calidad educativa de los países. uso del operativo internacional para evaluar, por
Algunas de estas agencias son privadas e inde- ejemplo, un grupo etario diferente o agregar íte-
pendientes, de un perfil básicamente académico mes de contenidos curriculares nacionales no
como es el caso de Educacional Testing Servi- contemplados en la prueba internacional.
ces (ETS, ‘Servicios de Evaluación Educacio-
nal’) en Estados Unidos, o de la International Los resultados de las pruebas internacionales
Association for the Evaluation of Educational pueden ser reportados y difundidos por las
Achievement (IEA, ‘Asociación Internacional agencias que dirigen los estudios, por las agen-
para la Evaluación del Logro Académico’), que cias nacionales que coordinan los estudios en
comenzó con un perfil similar pero que gradual- los países participantes, por investigadores in-
mente fue convirtiéndose en una agencia de dependientes o por la prensa (Forster, 2000;
fuertes vinculaciones con los gobiernos naciona- Macnab, 2000). Los datos que las pruebas arro-
les participantes. jan suelen ser cuantiosos y por esa razón se
eligen diferentes formas de reportarlos, de
Otras agencias son intergubernamentales desde acuerdo a las audiencias a quienes están dirigi-
su concepción y en ellas están representadas dos. Algunos informes presentan un ranking de
las máximas unidades políticas o técnicas de acuerdo al logro relativo de los países partici-
administración o evaluación educativa de los pantes, con relación al total del examen o a gru-
países miembros. Ejemplo de estas últimas son pos de ítemes seleccionados para el informe;
la Organización para la Cooperación y el Desa- también suele mostrarse la distribución de los
rrollo Económico (OCDE), el Laboratorio Latino- resultados en relación a la media aritmética de
americano para la Evaluación de la Educación cada país (dispersión), el logro de diferentes
(LLECE) –dependiente de Unesco-OREALC–, o subpoblaciones, o las relaciones entre logro
el Southern Africa Consortium for Monitoring académico y diferentes variables contextuales
Educational Quality (SACMEQ, ‘Consorcio de relevadas por el estudio (Forster, 2000).
África del Sur para la Evaluación de la Calidad
Educacional’). Algunas de las formas en las que se suele usar
la información recogida son: la motivación para
Las pruebas de la IEA o de la OCDE son de mejorar políticas a partir de la simple compara-
cobertura mundial, mientras que otras, como las ción con el logro de otros países; la promoción
del LLECE o SACMEQ, son de cobertura regio- de políticas de mejoramiento a través de la difu-
nal. En la actualidad existen no menos de diez sión masiva de los resultados; el establecimien-
pruebas internacionales que miden el logro es- to de nuevos estándares académicos de acuer-
tudiantil en diferentes áreas de conocimiento, tal do al desempeño de alumnos en otros países; la
como se resume en el Cuadro 1. identificación de los factores escolares y ex-
traescolares que muestran un efecto positivo en
Difusión y uso de los resultados el logro de aprendizajes y el estímulo para las
investigaciones dentro del país mediante la pro-
Independiente de su origen, estrictamente aca- fundización de los resultados del estudio inter-
démico o de aplicación política, las pruebas in- nacional (Forster, 2000; Macnab, 2000).

9
CUADRO 1

RESUMEN DE LAS PRINCIPALES PRUEBAS INTERNACIONALES APLICADAS EN AMÉRICA LATINA

Agencia Prueba Años de Cobertura Población Áreas curriculares Tipo de prueba Principales factores Nº de países
aplicación objetivo y competencias asociados latinoamericanos 1/

OECD; IALS 1994-1998 Global 16-65 años. Lectura: prosa, Preguntas cerradas Variables culturales, 1/22
Statistics (International Adult documentación y abiertas. sociales y demográficas
Canada; Literacy Survey) e información
NCES; cuantitativa.
ETS

OECD; ALL 2002 Global 16 a 65 años. Lectura; Preguntas cerradas Variables sociales, 3/22
Statistics (Adult Literacy alfabetización y abiertas. educacionales, y [Argentina, Bolivia
Canada; and Lifeskills) numérica; económicas. Acceso y Costa Rica]
NCES razonamiento lógico; y uso de NTIC.
trabajo en equipo.

OECD PISA 2000 Global 15 años “Destrezas para la vida”: Opción múltiple y Variables demográficas, 6/33
(Programme for 2001 Matemáticas, lectura y respuesta abierta. sociales, económicas [Argentina, Brasil,
International Student Ciencias. y educacionales. Chile, México,
Perú y Uruguay]

10
LLECE Primer Estudio 1997 A. Latina Grados 3 y 4 Lenguaje y Matemática. Opción múltiple y Variables escolares, 12
(Unesco Internacional preguntas abiertas familiares y sociales. [Argentina, Bolivia,
OREALC) Comparativo sobre en Lenguaje. Brasil, Chile,
Lenguaje, Matemática Colombia, Cuba,
y Factores Asociados Honduras, México,
y Venezuela]

IEA PIRLS (RLS-1991) Global Grado 4 (9 años) Lectura Opción múltiple Hogar; escuela; prácticas 2/35
(Progress in International 2001+ y respuestas abiertas. pedagógicas; curriculum; [Argentina y Colombia]
Reading Literacy Study) políticas.

IEA TIMSS 1995 Global Grados 3-4, 7-8, Ciencias y Matemáticas. Opción Múltiple, Curriculum; Prácticas 2/45 [Colombia y México]
(Third International 1999 y último de Respuesta abierta y pedagógicas; políticas; 2/38
Mathematics and educación demostración práctica. actitudes; hogar; escuela. [Argentina y Chile]
Science Study) secundaria.
TIMSS-R

IEA Educación Cívica 1999 y Global 14 y 17-18 años Ciudadanía y democracia; Preguntas cerradas y Clima escolar, actividades 2/32
1999-2000 identidad nacional y abiertas; escalas de extraescolares, recursos [Colombia y Chile]
(dos fases) relaciones internacionales; actitud en el hogar. culturales
cohesión social y diversidad;
economía y medio ambiente

1/ Se indica el número de países latinoamericanos participantes sobre el número total de países participantes.
I.3. ELDEBATE ACERCA DE LA PARTICIPACIÓN EN bilidades sectoriales de acción, todos contri-
PRUEBAS INTERNACIONALES buyen a una comprensión más integral del
estado actual del sistema educativo y sus
El valor de las comparaciones de logro acadé- condicionantes.
mico entre países o entre regiones es materia
de discusión permanente entre investigadores. • Los gobiernos pueden incluir en estos estudios
Los argumentos que se esgrimen a favor y en preguntas e ítemes que de otra manera debe-
contra de esas comparaciones suelen ser de ca- rían evaluar por su propia cuenta, a través de
rácter eminentemente técnico, aunque también sus sistemas nacionales (Husén, 1987).
entran en juego factores de orden político e
ideológico. A continuación se resumen los bene- • La dispersión de los estudios comparativos
ficios y problemas más frecuentemente citados internacionales suele ser mucho más fuerte
por la literatura especializada con relación a la y evidente que la de los estudios naciona-
participación en pruebas internacionales. les, por lo que permiten indagar más profun-
damente en los efectos de diferentes varia-
Beneficios bles sobre los resultados de aprendizaje
(Husén, 1987).
• Los resultados comparados internacional-
mente atraen la atención de los medios de • La construcción y la aplicación colectiva de
comunicación, movilizan fuerzas políticas pruebas puede promover prácticas profesio-
(Greany y Kellaghan, 1996) y suscitan de- nales democráticas debido al tipo de proce-
bates sobre las implicancias prácticas de dimientos y metodologías utilizadas (Tor-
los resultados obtenidos (Husén, 1987; Hu- ney-Purta, 1990).
sén y Tuijnman, 1994, en Kellaghan, 1996).
• Algunas pruebas, como TIMSS, utilizan di-
• La construcción de pruebas requiere de los seños jerárquicos para la recolección de da-
países participantes una revisión cuidadosa tos, lo cual permitiría, asumiendo que exista
de sus currículos y su comparación con los suficiente varianza en los datos totales,
de otros países, lo cual puede conducir a su analizar cuánto de la varianza se debe a
actualización y mejoramiento (Beaton et al., diferencias entre países o a diferencias en-
1999). También motiva a educadores e in- tre estudiantes dentro de cada país (Bem-
vestigadores a estudiar problemas del sec- pechat et al., 2000). Estos análisis pueden
tor que no se había considerado antes (Hu- contribuir a revelar cómo algunas políticas
sén, 1987). similares pueden tener efectos diferenciales
en los países, dependiendo de otras varia-
• Se desarrolla la capacidad local para la me- bles complementarias3.
dición de aprendizajes (Greany y Kellaghan,
1996; Torney-Purta, 1990; Bloom, 1974), en • Si bien en el proceso participan técnicos inter-
la medida en que educadores e investigado- nacionales, los informes de resultados son
res de la educación se ven llamados a inte- producidos por investigadores nacionales que
ractuar con especialistas internacionales y conocen a fondo los problemas de su país;
así se mantienen actualizados (Beaton et al., por esta razón se espera que exista una inte-
1999; Mislevy, 1995). racción entre investigadores y educadores por
lo menos igual a la que puede existir en el
• Se conoce la efectividad de las políticas caso de pruebas nacionales, para que la in-
implementadas por otros países (Beaton et formación recabada y difundida provoque res-
al., 1999). puestas constructivas a los problemas detec-
tados por el estudio (Bloom, 1974).
• Además del logro académico, permiten
comparar otra gran variedad de variables
educativas, tales como el clima escolar o
los factores familiares y sociales que afec-
3
tan el rendimiento académico (Husén, 1987; Un ejemplo de ello es el efecto positivo que la tarea en el hogar
puede tener en el logro académico de los estudiantes chinos,
Torney-Purta, 1990). Si bien algunos de es- mientras que en Perú el efecto puede ser mucho menor debido
tos factores pueden caer fuera de las posi- al alto índice de analfabetismo de los padres.

11
Problemas cadores, interpretados aisladamente de su
contexto cultural y estructural, pueden con-
• Los resultados de los estudios, en particular ducir a interpretaciones y acciones de políti-
cuando se presentan como ranking de logro ca equivocadas (Burstein et al., 1992, en
entre países, suelen desatar comentarios y Schmidt y McKnight, 1995).
críticas por parte de los políticos, los me-
dios de comunicación y el público, en los • La validez de los estudios se ve amenazada
que solo importa la posición relativa de lo- por las grandes diferencias culturales entre
gro en el escenario internacional y no la los alumnos de diferentes países, que hacen
abundante información sobre factores so- que las “condiciones” en que se toman las
ciales, escolares y personales asociados al pruebas no sean iguales en cada país. Entre
rendimiento (Greaney y Kellaghan, 1996). estas diferencias destacan los diversos gra-
La prensa, particularmente, tiende a desco- dos de familiaridad que los alumnos puedan
nocer los aspectos más complejos y auténti- tener con las pruebas estandarizadas, los
camente informativos de los resultados y estilos de respuesta (como la tendencia a
solo destaca las posiciones en el ranking, a omitir o a adivinar respuestas), y las motiva-
menudo con títulos dramáticos y escandalo- ciones que puedan tener los alumnos para
sos (Husén, 1987; Kellaghan, 1996). hacer un esfuerzo significativo por resolver
las preguntas (Mislevy, 1995).
• Si bien las pruebas internacionales utilizan
diferentes formatos, algunos de ellos inno- • A menudo se toman decisiones de política
vadores, los ítemes más numerosos conti- sobre la base de interpretaciones de causa-
núan siendo diseñados en forma de opción lidad entre las variables estudiadas, cuando
múltiple. Aun cuando estos ítemes, si están en realidad esa causalidad solo podría con-
debidamente construidos, pueden evaluar firmarse mediante estudios experimentales
habilidades cognitivas complejas, persisten controlados (Platt, 1975, en Mislevy, 1995).
críticas y dudas sobre su validez para ese
fin (Greaney y Kellaghan, 1996). • La información cualitativa recogida por los
estudios comparativos no siempre resulta
• Se ha criticado a los estudios internaciona- suficiente para establecer las variaciones
les la falta de metodologías que fomenten la que existen al interior de cada cultura y así
construcción cooperativa y democrática de comprender mejor cómo las creencias y
las pruebas, lo cual pone en riesgo la parti- percepciones de los alumnos afectan dife-
cipación efectiva y el beneficio que puedan rencialmente su rendimiento (Bempechat et
derivar de esa participación los países con al., 2000).
escaso desarrollo técnico (Husén, 1987)4.
• Si bien se ha propuesto el uso de las prue-
• La complejidad de los estudios, sumada a la bas internacionales para fines de responsa-
escasa capacidad que suele tener el público bilización de los gobiernos y funcionarios,
para interpretar los numerosos datos que aún no existen definiciones claras sobre
derivan de los estudios comparativos, deter- quién será responsable, o quién tendrá el
mina que la información que finalmente se poder o la autoridad para modificar y mejo-
difunde resulte ambigua o contradictoria, rar el rendimiento académico de los alum-
que un mismo dato pueda ser utilizado para nos. En general, y como sucede con mu-
argumentos antagónicos (dependiendo de chos sistemas de evaluación nacionales, se
la posición política), o que sencillamente se ha dado poco espacio a la discusión sobre
malinterpreten los datos y se llegue a con- el uso exacto que se dará a las pruebas.
clusiones erróneas (Husén, 1987). Los indi- Puede pretenderse, erróneamente, que la
misma prueba sirva múltiples propósitos
cuando en realidad esos propósitos pueden
ser incompatibles (Kellaghan, 1996).
4 Debe considerarse que esta construcción cooperativa tiene que
ver tanto con la participación efectiva de los técnicos de todos • Hasta la fecha, ni las agencias evaluadoras
los países involucrados, como con la posible participación de
diferentes grupos profesionales en los ámbitos educativos na-
ni académicos especializados han llevado a
cionales para la validación de los contenidos de las pruebas. cabo un registro sistemático de los usos que

12
se ha dado en diferentes países a los resul- Se espera de esta manera realizar un segui-
tados de las evaluaciones. Kellaghan (1996) miento de los alcances y efectos de los progra-
resalta que los informes que existen actual- mas curriculares nacionales.
mente presentan información limitada y rela-
tivamente superficial, y por lo tanto no se Implementación. En cada país se ponen en
pueden identificar los mecanismos exactos marcha los procesos técnicos de evaluación in-
por medio de los cuales la información [de la ternacional, desde las primeras reuniones de
IEA] se “traduce” en acciones de política. discusión entre expertos sobre el marco con-
Aunque este no sea un problema inherente a ceptual a ser utilizado, hasta la selección y va-
las pruebas mismas, históricamente demues- lidación de ítemes, la selección de la muestra
tra que las evaluaciones internacionales no poblacional y la aplicación final de los instru-
siempre logran informar eficazmente a las mentos. Si la relación entre los equipos técni-
audiencias o clientes principales. cos de medición y los profesionales del desa-
rrollo curricular en cada país es fluida y
El balance entre las ventajas y limitaciones que cooperativa, es probable que el proceso de di-
presentan las pruebas internacionales pareciera seño de las pruebas contribuya a las primeras
indicar que la participación en estos proyectos revisiones críticas de los contenidos curricula-
puede ser valiosa para los países, inclusive para res nacionales, ya sean antiguos o de reciente
los países en desarrollo (Greaney y Kellaghan, diseño e implementación. Entran en juego en
1996), siempre y cuando se tomen ciertas previ- esta fase los aspectos financieros, así como
siones con respecto a las características técni- las capacidades organizacionales y profesiona-
cas de las pruebas y a las condiciones políticas les que afectan la viabilidad y calidad de los
e institucionales para su aplicación, incluyendo operativos de diseño y aplicación de las prue-
mecanismos para la correcta interpretación y di- bas. En el contexto latinoamericano juegan un
fusión de los resultados. Kellaghan (1996) pro- rol particularmente importante los aprendizajes
pone una variedad de “condiciones” bajo las técnicos, de tipo estadístico y psicométrico,
cuales debiera concretarse la participación de que se desarrollan durante la experiencia.
un país en pruebas internacionales comparadas.
Esas condiciones son tomadas en cuenta para Interpretación y diseminación de resultados.
sustentar algunas de las recomendaciones que Se lleva a cabo la lectura de los resultados de
se efectúan hacia el final de este documento. evaluación por parte de los técnicos de medi-
ción así como de los profesionales del desarro-
llo curricular convocados durante el proceso de
II. MARCO CONCEPTUAL Y CASOS DE implementación. Esa lectura supone el análisis
ESTUDIO comprensivo y la valoración inicial del nivel de
logro obtenido. Se preparan informes de resulta-
El presente estudio fue estructurado sobre un dos para la prensa, para la opinión pública y
marco conceptual que encuadra la participación para diferentes audiencias profesionales del
en pruebas internacionales de aprendizaje en sector; se ofrecen talleres de difusión y desarro-
una secuencia de cuatro fases: llo de capacidades de interpretación y análisis
de los datos, y se liberan las bases de datos
Iniciativa y adopción. Los resultados de apren- para uso de los medios académicos con fines de
dizaje obtenidos por un país, según muestran investigación. Los esfuerzos de interpretación
las mediciones nacionales de rendimiento u se centran en las inferencias de tipo curricular
otros estudios académicos de investigación edu- que se pueden realizar con relación a los conte-
cativa, estimulan la opinión y la investigación nidos prescritos y enseñados de las áreas de
sobre la necesidad de elevar la calidad de los conocimiento evaluadas.
aprendizajes y sobre las formas de lograrlo. La
unidad central de administración educativa, o al- Decisiones, impacto político y nuevas líneas
guna entidad académica con el aval oficial, re- de investigación. Los resultados de las evalua-
suelve que es necesario medirse con respecto ciones influyen directamente o indirectamente
al logro académico de otros países y, de acuer- mediante la presión de la opinión pública y pro-
do a las prioridades curriculares y de política fesional, sobre las decisiones de funcionarios y
educativa en cada país, se opta por uno o más profesionales del sector para elevar la calidad
tipos de proyecto de evaluación internacional. de los aprendizajes.

13
Casos de estudio de los sistemas nacionales de evaluación de
principios de los noventa, en un momento en que
Del total de pruebas internacionales de aprendi- la responsabilidad de crear y sostener un sistema
zaje en las que América Latina ha participado o de evaluación era complejo desde el punto de
está participando actualmente, se decidió en este vista técnico y político. El Laboratorio ofrecía un
estudio reportar las siguientes experiencias: espacio de diálogo y participación para los fun-
cionarios y técnicos responsables de esos siste-
• Primer Estudio Internacional Comparati- mas y brindó apoyo para la creación de varios
vo sobre Lenguaje, Matemáticas y Facto- sistemas nacionales de evaluación.
res Asociados del LLECE (Laboratorio La-
tinoamericano para la Evaluación de la Las principales motivaciones para realizar el es-
Calidad de la Educación), realizado bajo la tudio comparado fueron la necesidad de esta-
dirección de la Oficina Regional para Améri- blecer una comparación “de raíz latinoamerica-
ca Latina y el Caribe (OREALC) de la Unes- na” que contemplara las particularidades
co. Resulta interesante por tratarse del úni- culturales y educativas de la región y obtener
co estudio comparado de cobertura información para apoyar las decisiones de políti-
estrictamente regional, el cual contó con la ca educativa. Otra razón que motivó a los paí-
participación de un número importante de ses a escoger la prueba del Laboratorio fue que
países latinoamericanos. era mucho más económica que otros estudios
• TIMSS (Third International Mathematics internacionales.
and Science Study); TIMSS-R (repetición
de TIMSS); y Educación Cívica. Todas es- El Primer Estudio Internacional Comparativo so-
tas pruebas son administradas por la Inter- bre Lenguaje, Matemáticas y Factores Asocia-
national Association for the Evaluation of dos fue aplicado en 1997 en 13 países latinoa-
Educational Achievement (IEA). Fueron in- mericanos, en los grados 3o y 4o de educación
cluidas por tratarse de pruebas que han primaria, en las áreas de Lenguaje y Matemáti-
convocado la participación de algunos paí- cas. La prueba incluyó ítemes de opción múlti-
ses de la región y porque la experiencia de ple y también de respuesta abierta, y recogió
su aplicación puede ser contrastada con la información sobre variables asociadas al logro
de Estados Unidos, donde el impacto de académico, entre ellas de contexto socioeconó-
esta evaluación ha sido mucho más signifi- mico, familiar, escolar y áulico. Los principales
cativo que en América Latina. objetivos del Laboratorio fueron entregar una
• Pruebas PISA (Programme for Internatio- comparación de rendimiento académico entre
nal Student Assessment) de la Organiza- países y analizar los factores asociados a ese
ción para la Cooperación y el Desarrollo rendimiento. Objetivos complementarios fueron:
Económico (OCDE). Fue elegida debido a fortalecer los sistemas nacionales de medición y
que es una prueba “acurricular” que propo- evaluación por la vía de la práctica a través del
ne estándares internacionales y ha concita- primer estudio comparado; establecer estánda-
do el interés de varios países de la región. res educativos, y generar una línea de investiga-
ción a partir de los resultados.

III. RESULTADOS DEL TRABAJO DE CAMPO Los resultados confirmaron muchos de los datos
que algunos sistemas nacionales ya habían co-
III.1. AGENCIA: LLECE (LABORATORIO LATINOAME- menzado a producir, como por ejemplo las dife-
RICANO PARA LA EVALUACIÓN DE LA CALIDAD rencias de logro a favor de las escuelas urbanas
EDUCATIVA, DE UNESCO-OREALC) - PRIMER y privadas, escasas diferencias de rendimiento
ESTUDIO INTERNACIONAL COMPARATIVO SO- entre géneros, y una fuerte asociación positiva
BRE LENGUAJE, MATEMÁTICAS Y FACTORES entre bajo nivel socioeconómico y bajo rendi-
ASOCIADOS miento académico. En cuanto a los resultados
comparados internacionales, fue particularmen-
Cuando se aprobó la idea de crear el Laboratorio te llamativa la diferencia entre Cuba y el resto
Latinoamericano para la Evaluación de la Calidad de los países de la región, con más de dos des-
Educativa - LLECE (en adelante, el Laboratorio), viaciones estándar a favor de Cuba. Los resulta-
prácticamente todos los países de la región opta- dos fueron publicados por LLECE en dos infor-
ron por adherirse. Fue concebido como una red mes. El primero presenta los resultados

14
comparativos en forma de ranking y desagrega- Perú, cuestionaron la validez de los resultados y
dos por estratos. El segundo informe, que salió desautorizaron su difusión.
tiempo después, ofrece un análisis de factores
asociados al rendimiento académico en el con- Era potestad de los gobiernos decidir su difusión
junto de países participantes, y se concibió con en cada país. De ahí que, en muchos casos, los
la idea de ofrecer mejores insumos de informa- resultados solo circularan en reuniones de cúpu-
ción para la toma de decisiones de política edu- la, acaso compartiendo un resumen con la pren-
cativa y para estudios académicos en la región. sa, pero sin la voluntad de generar debate públi-
co sobre el tema.
El estudio fue financiado con aportes del Banco
Interamericano de Desarrollo (BID), sumados a al- Los responsables por la ejecución del estudio
gunos fondos de la Fundación Ford y dinero de los en el Laboratorio coinciden con algunos de los
países participantes el cual se les devolvía en for- coordinadores nacionales en que la falta de una
ma de servicios de capacitación para la medición. estrategia fuerte de difusión determinó que los
resultados de la prueba no tuvieran un gran im-
Para garantizar que los ítemes de las pruebas pacto político, a través de la opinión pública, ni
tuvieran una fuerte vinculación con los currícu- en las decisiones de política educativa de la re-
los de los países participantes, se invirtieron dos gión. Las reacciones por parte de los gobiernos
años y medio en el diseño de las mismas, con fueron variadas, dependiendo de las expectati-
reuniones para la selección de ítemes, verifican- vas y de la coyuntura política de cada país, aun-
do currículos nacionales de Matemáticas y Len- que se reconoce que en general, exceptuando
guaje. Este fue uno de los aspectos más benefi- Cuba, fueron de “tono bajo”. Sin embargo, se
ciosos del proceso, pues obligó a los países esperaba que con la difusión del segundo infor-
participantes a efectuar una importante revisión me sobre factores asociados y con el paso del
de sus currículos, lo que les permitió descubrir tiempo, los datos comiencen a ser utilizados por
sus debilidades y fortalezas relativas. investigadores nacionales e internacionales
para análisis secundarios y proyectos de investi-
Los representantes ante el Laboratorio, llamados gación, probablemente comisionados por agen-
“coordinadores nacionales”, fueron en su mayo- tes no gubernamentales, así como por académi-
ría los directores de los sistemas de evaluación cos y organizaciones sindicales.
de cada país, o de la oficina ministerial de la cual
esos sistemas dependían. En algunos casos, el III.2. AGENCIA: IEA - TIMSS, TIMSS-R Y EDUCA-
diseño de la matriz curricular se hizo con la parti- CIÓN C ÍVICA
cipación de los técnicos en currículo de los dife-
rentes ministerios. Sin embargo, en algunos paí- La prueba TIMSS administrada por la IEA fue apli-
ses hubo tensiones importantes entre las oficinas cada en 1995 en unos 45 países de todo el mun-
del currículo y los sistemas nacionales de evalua- do. En algunos países solo participaron algunas
ción, lo cual determinó que los departamentos de provincias y no todos evaluaron todas las pobla-
currículo no estuvieran representados durante el ciones objetivo del estudio: los grados 3° ó 4° de
proceso. Debido ello, se reconoció que la prueba primaria, 7° u 8° grados, y último año de la educa-
final no tendría una base curricular de igual signi- ción básica. Las pruebas se centraron en las
ficado para todos los países, y que ello repercuti- áreas de Matemáticas y Ciencias y la matriz curri-
ría en las inferencias de orden curricular que se cular se definió mediante un relevamiento previo
hicieran más adelante. de los contenidos curriculares prescritos tanto por
documentos oficiales como por libros de texto y
La entrega de los resultados finales por parte de materiales didácticos de uso masivo en un número
la Unesco-OREALC se hizo directamente a los significativo de países. La prueba incluyó ítemes
ministerios. Al mismo tiempo, se realizaron con- de opción múltiple, de respuesta abierta y de de-
ferencias de prensa en Santiago de Chile y se mostraciones prácticas (por ejemplo, de laborato-
editó un compacto para televisión que fue difun- rio). También se realizó un estudio cualitativo, me-
dido en América Latina por la Red de TV Espa- diante videograbaciones, sobre procesos
ñola. Aunque todos los países participantes de pedagógicos de aula en seis países de la muestra.
la prueba del Laboratorio se habían comprome-
tido a publicar los resultados internacionalmen- En cuanto a los resultados comparados interna-
te, dos de los países participantes, México y cionales, quedó confirmado que los países del

15
CUADRO 2

RESUMEN DE LA EXPERIENCIA DE CUATRO PAÍSES EN LA PRUEBA DEL LLECE

Aprendizaje técnico Difusión de resultados Uso de los resultados e impacto


y críticas en la política educativa

Argentina Se valora la oportunidad de compartir expe- La principal receptora de los resultados fue la mi- Escasa repercusión a nivel del Ministerio
riencias con América Latina y de discutir nistra de Educación, quien los compartió con el de Educación, pues los resultados llega-
con otros países en situación de desigual- gabinete ejecutivo de la Presidencia. La lectura ron poco tiempo antes de una renuncia de
dad técnica –para lo cual se requiere mucha dada a los datos fue mínima, en parte porque el todo el equipo de alta dirección. Sin em-
tolerancia y buena voluntad– y de llegar a primer informe solo fue comparativo y no permitía bargo, muchos de estos ex funcionarios
acuerdos para la toma de decisiones. realizar inferencias sobre las razones que expli- que tuvieron acceso a la información circu-
Crítica: se tiene la percepción que el Labo- caban esos resultados. No se previeron estrate- lan actualmente en medios académicos,
ratorio no supo aprovechar adecuadamente gias de difusión y a la prensa solo se le entregó desde donde tienen cierta influencia en la
los conocimientos y la experiencia que ya una copia del informe oficial del Laboratorio, sin formación de profesionales y especialistas
tenían algunos paíse interpretaciones por parte del Ministerio. en educación.

Colombia Producto del proceso, se valora el fortaleci- El gobierno no tenía recursos para publicar los Débil impacto sobre la educación. Se con-
miento de la relación entre el Ministerio de documentos, y solo se entregaron copias del in- sidera que las conclusiones a las que llega
Educación y el ICFES (Instituto Colombiano forme de OREALC a gobernadores o secretarios el Laboratorio no están planteadas de for-
de Fomento a la Educación Superior) que de educación de departamentos. Se piensa que ma que pueda afectar la toma de decisio-
actuó como correpresentante ante el LLECE. los resultados no están “contextualizados” a la nes de política.
Críticas: Poca participación efectiva del realidad regional, debido a la ausencia de están- Solo el ICFES tomó la iniciativa de profun-
país en el diseño de ítemes, falta de acceso dares regionales y a que el proyecto no ofreció dizar el análisis de los datos.
al marco conceptual con el cual se constru- un marco interpretativo de los resultados con re-
yeron los instrumentos, poca comunicación lación a los objetivos y alcances de las reformas
entre los países participantes. y políticas educativas implementadas en las dos
últimas décadas.

Cuba La experiencia fue valorada como de amplio Se dio amplia difusión a los resultados del pri- Atendiendo a los buenos resultados, se de-
aprendizaje para diversos actores del área mer informe, con un marcado y deliberado cariz cidió premiar a los docentes con un incre-
educativa. La participación en el diseño de político, destacándolo como un logro significati- mento del 30% en sus salarios, medida que
las matrices curriculares permitió identificar vo de la política social cubana. también pretendía desalentar el doble em-
falencias del currículo cubano. El debate y Se recibió con beneplácito la información sobre pleo de los maestros, pues los resultados
la confrontación técnica entre diferentes for- los efectos positivos del clima escolar sobre los del estudio mostraban una relación negati-
mas de evaluar permitió acceder a nuevos aprendizajes, contenidos en el segundo informe. va entre el multiempleo y altos rendimien-
conocimientos sobre evaluación, como los tos estudiantiles. En el terreno curricular,
relativos al diseño y calificación de respues- se decidió trabajar con mayor diversidad de
tas abiertas y nuevas tecnologías de medi- textos, por lo que se incentivó la produc-
ción (modelo de Rasch y modelos jerárqui- ción de nuevos materiales educativos.
cos lineales).

Perú Se consideró de gran utilidad un curso de Los representantes peruanos pusieron objecio- El impacto más evidente de la participa-
capacitación de 15 días que el Laboratorio nes técnicas a los resultados y solicitaron pos- ción en el estudio internacional del Labo-
ofreció en Santiago de Chile. tergar su publicación internacional hasta obtener ratorio fue quizá la tardía publicación de
Críticas: limitadas posibilidades de influir mayores detalles sobre el análisis de los datos. los resultados, que es considerada un
sobre el diseño de la prueba, no se percibe Sin embargo, desde antes de la conclusión del símbolo importante de la democratización
que la experiencia haya constituido un es- estudio, se presumía que el gobierno no tenía del sector. Además, se observa que dife-
pacio de identidad y comunicación regional. intenciones de publicarlos, por razones políticas. rentes medios y actores sectoriales citan
La no publicación de los resultados fue interpre- frecuentemente los bajos resultados del
tada en el país como una privación al derecho Perú con respecto a la región para susten-
constitucional de acceso a la información públi- tar argumentos sobre la prioridad de la po-
ca. Los resultados fueron liberados durante el lítica educativa.
Gobierno de Transición, mediante una publica-
ción de la Unidad de Medición de la Calidad
Educativa del Ministerio.

16
sudeste asiático, como Japón, Singapur y Corea tina. Esas experiencias muestran diferentes gra-
del Sur, logran resultados muy superiores a la dos de inserción e impacto efectivos en el esce-
mayoría de los países industrializados del mun- nario de las políticas y la práctica educativa de
do. El único país latinoamericano que participó y cada país, dependiendo de los contextos políti-
permitió la publicación de los resultados, Colom- cos e institucionales en que se inscriben. Aun-
bia, obtuvo uno de los últimos lugares en el ran- que el tamaño de la muestra de países en este
king internacional. estudio, y el número limitado de actores entre-
vistados, limitan las posibilidades de hacer ge-
En 1998 se aplicó TIMSS-R, una repetición de neralizaciones amplias a la región, la cantidad
la prueba, en 38 países, incluyendo tres latinoa- de información obtenida merece un resumen crí-
mericanos. TIMSS será aplicado nuevamente en tico que reúna los aspectos más importantes de
el año 2003. los casos analizados, acuerdo a las fases de
evaluación comparada internacional utilizadas
La prueba de Educación Cívica, también admi- como marco conceptual en este estudio.
nistrada por la IEA, se aplica regularmente en
países de todo el mundo. Los contenidos de la En cuanto al momento previo a la iniciativa y la
prueba se centran en temas de ciudadanía, go- adopción de pruebas, en la que perciben los pri-
bierno y democracia. También se recogen datos meros “descontentos” con respecto a los resul-
sobre factores sociales, familiares y actitudina- tados de aprendizaje obtenidos por los sistemas
les asociados al rendimiento académico. educativos nacionales, en América Latina esa
percepción se basa, al menos parcialmente, en
III.3. AGENCIA: OCDE - PRUEBA PISA algunos referentes empíricos, tales como los re-
sultados de pruebas nacionales de logro acadé-
PISA, la prueba comparativa de la OCDE, se mico, pruebas exploratorias comparadas en la
aplica regularmente en países de todo el mundo región, o resultados de pruebas internacionales
a estudiantes de 15 años de edad, cualquiera anteriores. Parte del “descontento” sobre la efi-
sea su grado de escolarización. Los países cacia de los sistemas educativos, que conduce
miembros de la OCDE ingresan a la prueba au- a la búsqueda de información comparada sobre
tomáticamente, mientras que los demás países rendimiento académico, deviene del convenci-
son invitados a sumarse al proyecto mediante el miento, no del todo fundamentado, de que los
pago de una cuota de membresía. Las pruebas grandes problemas económicos de la región tie-
de PISA se diseñan a partir de un conjunto de nen origen, en parte, en las deficiencias de
estándares de contenido y desempeño, elabora- aprendizaje de los estudiantes, quienes se gra-
dos por un grupo de especialistas en diferentes dúan sin estar preparados para las demandas
áreas de conocimiento, que se consideran im- de conocimiento del mundo actual.
prescindibles para la adecuada inserción de los
jóvenes en la sociedad y en el mundo laboral de Ese uso de referentes empíricos es decidida-
hoy. PISA volverá a aplicarse en el año 2003 y mente más fuerte en países como Estados Uni-
luego en el 2006. dos, donde se han empleado en forma mucho
Al igual que en el caso de las pruebas de la IEA, más extensiva los datos recogidos en pruebas
la decisión de participar en la prueba PISA la nacionales y pruebas internacionales anteriores,
tomó cada país individualmente y por lo tanto no y donde el temor a perder competitividad en el
es posible presentar testimonios de represen- mercado internacional es –o al menos lo fue du-
tantes regionales para esta experiencia de eva- rante la última década– más marcado.
luación. En consecuencia, se han tomado en Las iniciativas de participación, así como la
cuenta las voces de los representantes naciona- elección del proyecto de evaluación comparada
les de evaluación de Argentina, Chile, México, más conveniente para cada país en América La-
Perú y Uruguay. tina, han estado en la práctica definidas por tres
objetivos principales:

IV. RESUMEN CRÍTICO DE LOS RESULTADOS a) La oportunidad de acceder a capacitación


técnica en medición de aprendizajes y dise-
Como se ha podido observar, existe ya un con- ño de instrumentos. Existe, sobre la base
junto importante de experiencias de participa- de experiencias anteriores, una expectativa
ción en pruebas internacionales en América La- y percepción compartidas entre los países

17
CUADRO 3

EXPERIENCIA DE CUATRO PAÍSES EN LAS PRUEBAS DE LA EIA:


TIMMS, TIMMS-R, EDUCACIÓN CÍVICA

Aprendizaje técnico Difusión de resultados Uso de los resultados e impacto


en la política educativa

Chile En el caso de la prueba de Educación Los resultados de TIMSS-R fueron publica- Es notoria la cantidad de artículos escritos
(TIMMS-R y Edu- Cívica, se desarrollaron capacidades dos solo en forma de ranking por un diario por los académicos de uno de los centros
cación Cívica) relacionadas con las estrategias opera- nacional, mientras que la Unidad de Curricu- de investigación sobre políticas públicas
tivas en el trabajo de campo, con dise- lum y Evaluación preparó un documento de de Chile, que utilizan los datos para hacer
ños de manuales, aplicación de instru- difusión resaltando los aspectos más sustan- críticas y sugerencias concretas sobre la
mentos y análisis estadístico. tivos de los datos recogidos. Para el estudio educación pública en el país.
Importante aprendizaje sobre el mode- de Educación Cívica, que incluyó una opción Desde el Ministerio de Educación se está
lo psicométrico IRT, el cual pudo ser nacional, los resultados incluyeron todos los intentando que la información llegue a los
aplicado luego a los operativos de eva- datos comparativos internacionales de base. profesores, a través de instancias de per-
luación nacionales. Los datos de la aplicación diferenciada (íte- feccionamiento docente, para que haya
mes de opción nacional) fueron difundidos y impacto en el aula y en los contenidos.
analizados posteriormente. Los resultados
de esta prueba se presentaron en una capa-
citación para 40 mil profesores.

Colombia Fue una excelente oportunidad de Difusión de los resultados de Cívica, a través Sobre la base de los resultados, el Minis-
(TIMMS y Edu- aprendizaje para los académicos parti- de talleres y seminarios para las escuelas terio de Educación hizo publicaciones que
cación Cívica) cipantes, especialmente en la etapa de participantes. ofrecían recursos pedagógicos para que
investigación del marco contextual de Hubo importante interés del Ministerio de los profesores lograran mejores resultados
la educación en Colombia y en el desa- Educación en la divulgación de los resulta- de aprendizaje.
rrollo de criterios fundamentados para dos de TIMSS, que incluyó un seminario pre- Uno de los grandes impactos del TIMSS
la calificación objetiva de las preguntas vio a la publicación de los resultados para fue que alentó a los técnicos del Servicio
abiertas. funcionarios del Ministerio y del ICFES y pu- Nacional de Pruebas del ICFES a rediseñar
En el caso de la prueba de Educación blicaciones especiales para maestros de Ma- el examen que regula el ingreso a la edu-
Cívica, se valora la oportunidad de par- temáticas con los resultados comparativos cación superior, con un marco conceptual
ticipación en el establecimiento del con los demás países participantes. de referencia a criterios en vez de normas,
marco conceptual que guiaría la cons- y con análisis de respuesta al ítem.
trucción de las pruebas.

Estados Unidos En el nivel local, el aprendizaje más Se publicaron primero los resultados del Los resultados de TIMSS pusieron en mar-
(TIMMS, TIMMS- valioso obtenido a través de la partici- análisis curricular y varios meses después el cha una serie de medidas gubernamenta-
R en el caso de pación en TIMSS fue el relacionado al ranking internacional. Esto contribuyó a que, les, no gubernamentales y profesionales
algunos estados) análisis e interpretación de datos. cuando se supo que Estados Unidos ocupa- para establecer estándares curriculares
En el nivel nacional, se destacan los ba un lugar modesto en ese ranking, las au- más altos, y para alinear los diferentes
avances teóricos logrados mediante el diencias más especializadas ya tuvieran un elementos de la gestión y la práctica edu-
desarrollo de nuevos marcos concep- conocimiento importante sobre los aspectos cativa desde una perspectiva sistémica.
tuales y metodologías de investigación sustantivos del estudio. En el nivel local o distrital, los esfuerzos
y análisis. Se contrató una prestigiosa consultora de se centraron en la alineación curricular lo-
prensa de Nueva York para las relaciones cal con los estándares estaduales y en
públicas y las estrategias de difusión de TI- mejorar las condiciones pedagógicas para
MSS. La consultora proveyó entrenamiento a la entrega de mejores oportunidades de
los coordinadores nacionales y asignó perso- aprendizaje.
nal especializado a la “colocación” de noti- Un efecto singular de TIMSS en el nivel
cias sobre los análisis de TIMSS en diferen- local fue la creación de SMART, consorcio
tes medios de comunicación del país. que ha decidido proveer extensas oportu-
También en el nivel local se realizaron impor- nidades de capacitación a docentes sobre
tantes esfuerzos para lograr una mejor inter- currículo, métodos instruccionales y, espe-
pretación y difusión de los resultados. cialmente, sobre cómo analizar datos de
pruebas estandarizadas.

México Se lograron aprendizajes técnicos va- El país invocó razones técnicas para desauto- Se conservaron las bases de datos con los
liosos vinculados a técnicas de mues- rizar la publicación internacional de los datos. resultados dentro del ámbito de la SEP,
treo y de organización operativa para pero no fueron analizadas posteriormente.
las aplicaciones.

18
CUADRO 4

EXPERIENCIA Y /O EXPECTATIVAS DE CUATRO PAÍSES EN LAS PRUEBAS PISA

Aprendizaje técnico Difusión de resultados Uso de los resultados e impacto


en la política educativa

Chile Se percibe que, en la medida en que Aun cuando Chile no participó PISA 2000, el El gran desafío es lograr que los resulta-
(En proceso para se gana experiencia en medición inter- Ministerio de Educación difundió públicamen- dos de las pruebas no causen solo reac-
participación en nacional, y a partir de la unificación de te los resultados y anunció que Chile partici- ciones críticas contra la administración
PISA 2003) los equipos de evaluación y curriculum paría en la siguiente aplicación del proyecto. educativa nacional sino que, además,
bajo una misma unidad administrativa, Se espera difundir los resultados de PISA en sean utilizados para implementar mejo-
la relación entre los procesos de eva- forma más beneficiosa y efectiva que con las ras pedagógicas y curriculares. Sin em-
luación y desarrollo curricular se va pruebas internacionales anteriores en que el bargo, dado que los nuevos marcos cu-
fortaleciendo, especialmente a través país ha participado, porque se contará con rriculares recién están terminando de
de los procesos de revisión curricular más tiempo para la planificación de una es- implementarse en los años superiores de
sistemática que exigen las pruebas in- trategia adecuada y con mayor apoyo por la educación media, se calcula que los
ternacionales. parte de las organizaciones internacionales. resultados de PISA no promoverán cam-
bios en el currículo en el corto plazo.

México La experiencia de evaluación en el Los primeros destinatarios de los resultados Ya se están realizando, en función de los
(Participación en proyecto PISA ha permitido un mayor serán los equipos técnicos y autoridades po- datos preliminares obtenidos, algunas pro-
PISA Plus, PISA grado de participación técnica que en líticas de la próxima administración guberna- puestas para orientar mejoras en el Pro-
2001 y en prepa- experiencias anteriores de evaluación mental nacional, lo cual aumentará las posi- grama Nacional de Lectura y en el Progra-
ración para PISA internacional bilidades de que los datos sean utilizados y ma de Escuelas de Calidad. También se
2003) La sección de preguntas abiertas de la que el proyecto evaluativo se continúe en el han realizado algunas propuestas para el
prueba ha demandado de las autorida- tiempo. Respecto a los resultados prelimina- desarrollo curricular de formación docente
des de la SEP una convocatoria más res de PISA, que consistieron en una aplica- inicial, en el currículo de Matemáticas de
amplia a actores del medio educativo ción específica de PISA Plus para que Méxi- Educación Básica, y se han facilitado las
en el proyecto, específicamente para co se comparase con otros países de la bases de datos para su análisis a la Aca-
llevar a cabo la calificación de res- región antes de ingresar en la aplicación ge- demia Mexicana de Ciencias y al Centro
puestas. neral de 2001, la Subsecretaría de Planea- de Investigación y Docencia Económica de
ción y Coordinación Institucional ya ha difun- México.
dido un documento interno. Los datos y las
bases mismas también se han entregado a
las administraciones estaduales.

Perú Se considera que esta experiencia Se considera de suma importancia lograr que Se sabe que las noticias de prensa serán
(Al momento del brinda a los técnicos la posibilidad de se difunda información sustantiva, no sola- escandalosas, pero se cree que en la me-
estudio, en pro- ensayar con aspectos técnicos y con- mente el ranking internacional. Para un ópti- dida en que el país siga participando y el
ceso para partici- ceptuales diferentes a los de las prue- mo aprovechamiento de las información, la público se acostumbre a que hay otras in-
pación en PISA bas nacionales. coordinación del estudio en Perú pretende formaciones rescatables además del ran-
2003) realizar un taller donde se explique a actores king, los medios de comunicación debe-
clave del sector educativo cómo interpretar rán buscar otro tipo de noticias para
los resultados de PISA. vender a la población. Un aspecto positi-
vo de la prueba es que el país será pro-
pietario de los instrumentos y podrá apli-
carlos nuevamente si quiere profundizar
las investigaciones.

Uruguay Se perciben tres importantes posibilida- Se planea difundir ampliamente los resultados Los técnicos nacionales de medición reco-
(En proceso para des de aprendizaje con el programa de la prueba, así como lo que pudiera revelar- nocen que, a pesar del buen uso que se
participación en PISA: 1) generará un mayor conoci- se del instrumento mismo, tal como se ha he- pretende dar a las pruebas, la medición
PISA 2003) miento para el diseño de ítemes de las cho con las pruebas nacionales. De esta ma- contra estándares internacionales como los
áreas que actualmente no son evalua- nera, se podría explicar a cada equipo de de PISA conlleva un riesgo político consi-
das por las pruebas nacionales; 2) per- profesores, en cada establecimiento, qué es derable. Por lo tanto, antes de ingresar en
mitirá desarrollar capacidades específi- lo que las diferentes actividades de la prueba una de estas pruebas, consideraron nece-
cas con relación al diseño, calificación y miden, para que ellos puedan aplicar la prue- sario contar con el aval de las autoridades
procesamiento de la información de ba, o ítemes seleccionados de la misma, y así políticas del sector para asumir el costo de
pruebas de respuestas abiertas, y mejor comparar el desempeño de sus alumnos con salir en los últimos lugares del ranking in-
conocimientos de la teoría de respuesta el de los estudiantes en otros países. ternacional.
al ítem; y 3) se aprenderá más sobre la
medición de variables escolares, curri-
culares e instruccionales.

19
de la región en cuanto a los beneficios de mente alineadas con los objetivos naciona-
participar en pruebas lideradas por agen- les de reforma y logro curricular.
cias de alta capacidad técnica y organiza-
cional como la IEA o la OCDE. Se valora Si bien existen algunas opiniones “supranaciona-
especialmente lo que se puede aprender de les” en la región que entienden la evaluación in-
la organización operativa de los proyectos, ternacional dentro de un contexto de política edu-
de la calidad técnica de los instrumentos de cativa basada en la noción de “gerenciamiento”,
medición, de los procedimientos para ga- en parte motivada por el condicionamiento de los
rantizar la calidad y validez de la informa- organismos internacionales, la mayor parte de
ción y de los mecanismos que esas institu- las decisiones de participación no parece haber-
ciones implementan para brindar apoyo y se tomado en función de ese modelo de gestión.
orientación a los países participantes. En Es decir, los beneficios que se esperan de la in-
cuanto a la vinculación de los proyectos formación recogida no están relacionados nece-
comparativos con los sistemas nacionales sariamente a las nociones de descentralización y
de medición, se espera desarrollar capaci- responsabilización por los resultados, sino más
dades técnicas que fortalezcan a estos últi- bien al deseo de proveer mayores herramientas
mos, pero no se ha diseñado generalmente de gestión para un adecuado desarrollo e imple-
un “cruce” sistemático entre los datos obte- mentación curricular. Ello, pese a lo señalado lí-
nidos en ambos tipos de mediciones. neas arriba respecto a la débil vinculación de las
iniciativas internacionales con las unidades res-
b) La posibilidad de obtener información objeti- ponsables del currículo.
va sobre el logro académico de los estu-
diantes con relación a estándares interna- En cuanto a la fase de implementación de las
cionales de contenido, que impacte la pruebas internacionales, se aprecian grandes
opinión pública y facilite una toma de deci- diferencias entre la experiencia de participación
siones mejor informada para el mejoramien- en la prueba del Laboratorio, por un lado, y en
to del sistema educativo. las pruebas de la IEA y de la OCDE, por el otro.
Esas diferencias, están relacionadas principal-
c) La expectativa, al menos por parte de algu- mente con la capacidad técnica, organizacional,
nos actores, de que la participación en una financiera y operativa de las agencias que admi-
prueba internacional estimule la propuesta nistran las pruebas. La IEA y la OCDE aventajan
de estándares regionales contra los cuales al Laboratorio en todas esas características, a
medir el rendimiento de los países latinoa- pesar de que la prueba regional reportó también
mericanos. Si esto último no es posible, se varios beneficios a los países participantes.
espera al menos participar en pruebas inter-
nacionales de cobertura mundial que ofrez- En lo que se refiere a los aspectos estrictamen-
can un marco conceptual sólido que permita te curriculares, la participación en pruebas de la
interpretaciones válidas para el contexto la- IEA se ha dado en condiciones de desigualdad
tinoamericano. Cabe destacar que, si bien con respecto a los países desarrollados, pues
muchas de las decisiones de participación América Latina ha ingresado tarde a los proyec-
en pruebas internacionales en América Lati- tos de evaluación, muchas veces con escasas
na han estado inspiradas en la idea de esta- capacidades técnicas para la representación, o
blecer estándares académicos más claros y con un débil aval financiero e institucional por
exigentes y compararse con ellos, lo que parte de sus gobiernos nacionales. Por estas ra-
demuestra un interés por los aspectos curri- zones, las posibilidades de que los países de la
culares de las reformas, la mayor parte de región influyan en las decisiones con respecto a
las decisiones se ha tomado sin la participa- los marcos conceptuales y curriculares han sido
ción directa de los responsables de las uni- extremadamente reducidas.
dades de currículo de los organismos de
gestión educativa nacionales, ni de otros En el caso de la prueba del Laboratorio, si bien
actores que puedan ejercer influencia sobre la matriz curricular fue discutida con los países,
el desarrollo curricular en cada país. En la falta de un mecanismo de comunicación mul-
este sentido, se podría afirmar que las ini- tidireccional no permitió lograr un consenso con
ciativas y decisiones de participación en respecto a un conjunto de estándares deseables
pruebas internacionales están solo parcial- ni a un marco conceptual común que permitiera

20
una interpretación más sustantiva y contextuali- principalmente, a la falta de una estrategia pre-
zada de los resultados y, por lo tanto, la perti- concebida, así como a la falta de un marco con-
nencia curricular del proyecto se vio fuertemente ceptual sólido y de estándares que permitieran
debilitada. Recordemos que en las pruebas de una adecuada interpretación sustantiva de los
la IEA o de la OCDE en América Latina se valo- resultados, a la vez que el segundo informe ofi-
ra precisamente que los países se midan con cial, que se esperaba tuviera más impacto de
referentes o estándares externos a la región, política, llegó a los ministerios demasiado tarde,
mientras que en la prueba del Laboratorio se cuando las administraciones nacionales habían
esperaba llegar a acuerdos regionales sobre cambiado. Cuba fue, de acuerdo a las entrevis-
medidas deseables de logro. tas, una excepción en este sentido, dado que
allí los buenos resultados obtenidos fueron am-
Una última diferencia que vale la pena resaltar pliamente difundidos desde la Presidencia.
es que, mientras las técnicas de muestreo y los
instrumentos de las pruebas de la IEA y de la En cuanto a los efectos de los resultados de
OCDE son apreciados por su rigor y validez, el pruebas de la IEA, es evidente que las desfavo-
Laboratorio enfrentó serios cuestionamientos rables posiciones de América Latina en los ran-
técnicos por parte de los coordinadores nacio- kings internacionales han causado un efecto de
nales. Por otro lado, la participación en las prue- shock en algunas audiencias, especialmente por
bas de ambas agencias ha favorecido la re- la forma de reporte que ha utilizado la prensa. En
flexión sobre los contenidos curriculares de la actualidad, los países que han decidido conti-
cada país, en la medida en que las comparacio- nuar participando en pruebas de la IEA y de la
nes revelan diferencias importantes en los enfo- OCDE están conscientes de la necesidad de
ques epistemológicos y en la distribución de “educar” a la prensa y otras audiencias influyen-
contenidos a lo largo del currículo de educación tes, de volverlas más especializadas, de manera
básica. Sin embargo, esa reflexión se ha dado que puedan difundir informaciones más relevan-
principalmente entre técnicos y expertos de las tes que la temida tabla de posiciones. Los repor-
unidades de medición, pero con escasa o ningu- tes que redactan las oficinas de evaluación o cu-
na participación de los profesionales de las rrículo de los ministerios, por su parte, se
áreas de desarrollo curricular. Desde el punto de consideran particularmente útiles cuando pueden
vista de la política curricular, ello implica que la tener impacto en el ámbito local, escolar y peda-
medición internacional en cada país tiene esca- gógico y cuando contribuyen a desarrollar capa-
sa vinculación con los procesos de implementa- cidades de análisis e interpretación de datos. El
ción de los programas curriculares que, según caso de Estados Unidos durante la prueba
se expresa, se desean mejorar mediante las TIMSS fue singular, por el alto involucramiento
evaluaciones. de diversos grupos de interés y la consulta siste-
mática a actores del sector, así como también
Sin embargo, los aspectos más débiles de los por la fuerte estrategia de difusión utilizada.
proyectos de evaluación, según se observa en
la experiencia de la mayor parte de los países Con respecto al impacto de la participación en
latinoamericanos, han sido el de la interpreta- pruebas internacionales en las decisiones sobre
ción de los resultados y su posterior disemi- política educativa, de repercusiones políticas, o
nación. Además de las insuficiencias en el pla- de investigaciones realizadas sobre los datos,
neamiento estratégico, la escasa difusión de nuevamente se hace evidente la diferencia entre
resultados estuvo marcada por la falta de comu- la experiencia de América Latina y lo ocurrido en
nicación y coordinación entre los equipos técni- Estados Unidos. En nuestra región, tanto la eva-
cos de medición y los de desarrollo curricular en luación del Laboratorio como las pruebas de la
cada país. Estos dos factores –falta de una es- IEA han tenido un impacto político y de política
trategia de difusión y falta de trabajo conjunto relativamente bajo. Las excepciones, según
entre actores clave– determinaron que se redu- nuestros datos, son Cuba, que tomó algunas de-
jeran las posibilidades de impacto en el mejora- cisiones concretas de políticas sobre la base de
miento de la implementación de reformas y en la los resultados del Laboratorio, y Chile, que ha
reformulación de objetivos curriculares. debido enfrentar el impacto sobre la opinión pú-
blica de los resultados en las pruebas de la IEA.
Durante la prueba del Laboratorio, la debilidad En el caso del Laboratorio se han realizado al-
en la interpretación y diseminación se debió, gunas investigaciones posteriores, en los países

21
y por parte de la OREALC misma, pero hasta el Estas diferencias entre las experiencias de Es-
momento casi no han sido difundidas. tados Unidos y América Latina confirman que la
ausencia de un diálogo informado entre los
Por otra parte, las implicancias curriculares de funcionarios y usuarios de la información
las pruebas internacionales en América Latina, sistemática, resulta en un escaso impacto de las
han sido casi nulas puesto que no se registra evaluaciones en las decisiones sobre políticas
evidencia de que los resultados hayan alertado educativas, y sobre políticas curriculares en par-
a los profesionales e investigadores de la edu- ticular. (Ver recuadro 1).
cación sobre la pertinencia o adecuación de los
contenidos curriculares nacionales. La excep- Adicionalmente, dado que no se monitorean los
ción, hasta donde pudo verificar este estudio, es resultados sobre las pocas decisiones que se
también Cuba dado que allí la experiencia de toman en función de las informaciones de estu-
evaluación comparada permitió alertar a los re- dios comparados, es difícil conocer si se ha
presentantes nacionales sobre la necesidad de avanzado o no en la dirección deseada. Pero
introducir cambios en la secuenciación de algu- hasta el momento la contribución de los resulta-
nos conceptos matemáticos, así como sobre el dos de pruebas internacionales a nuevos ciclos
enfoque teórico con que se plantean los conteni- de política curricular, o de mejoramiento de los
dos en el área de lenguaje. existentes, es mínima y en muchos casos
inexistente. En otras palabras, según indican los
En cuanto a la participación en pruebas de la datos de las pruebas internacionales, es muy
IEA, la experiencia ha repercutido casi exclusi- probable que las iniciativas y decisiones centra-
vamente en el desarrollo técnico de las unida- les de política curricular que se tomen en el fu-
des de medición, lo cual es significativo, pero no turo no consideren la evidencia sobre los resul-
se reportan medidas importantes de política cu- tados de políticas y programas anteriores.
rricular, o educativa en general, en función de
los resultados.
V. RECOMENDACIONES PARA FUTURAS
Con respecto a PISA, una ventaja anticipada del OPORTUNIDADES DE PARTICIPACIÓN
proyecto que puede repercutir positivamente en EN PRUEBAS INTERNACIONALES
el medio educativo es que los instrumentos mis-
mos de medición, serán propiedad de los países La evidencia recogida en este trabajo, si bien
participantes, y se podrán utilizar en aplicacio- no se puede considerar representativa de toda
nes nuevas e independientes para medir otras la región, ha permitido arribar a algunas con-
muestras y así favorecer investigaciones más clusiones iniciales sobre la conveniencia de la
profundas en el ámbito nacional. participación de países latinoamericanos en
futuras pruebas internacionales, así como de
En Estados Unidos, donde existen más de cien las condiciones en que esa participación de-
años de trayectoria en medición y evaluación bería darse.
educacional, la experiencia ha sido muy diferen-
te, particularmente con relación a las pruebas 1. Dado que muchos de los países de la re-
TIMSS y TIMSS-R de la IEA. La creación de gión ya han participado en alguna prueba
consorcios educativos, el involucramiento de or- internacional con anterioridad, se recomien-
ganizaciones sindicales docentes y asociacio- da utilizar la información de esas pruebas
nes profesionales de las diferentes disciplinas para generar opinión y sensibilizar a audien-
académicas, así como las múltiples líneas de cias de interés antes de iniciar nuevos pro-
investigación surgidas a partir de los resultados, gramas de reforma o mejoramiento curricu-
confirman que el impacto de la participación en lar, y antes de adscribirse a un nuevo
pruebas internacionales depende no solamente proyecto de evaluación comparada interna-
del potencial informativo de esas pruebas, sino cional. Esta medida tendría el valor adicio-
también de las estrategias de sensibilización nal de permitir el pilotaje de posibles estra-
previas a la difusión final de los resultados5. tegias de difusión de los resultados.

Una forma viable de sensibilizar a los repre-


5 Vale recordar que para cuando la IEA liberó los resultados de
TIMSS, diferentes audiencias y medios de información ya esta-
sentantes de la prensa, a las organizacio-
ban expectantes y deseosos de conocer los resultados. nes sindicales y a los profesionales de la

22
educación es invitarlos a participar en las b. Las necesidades reales de la informa-
discusiones iniciales del proyecto, así como ción que se va a recoger, y las posibili-
en la discusión sobre resultados anteriores, dades concretas de aprovecharla, de
sobre la importancia de iniciar nuevas eva- acuerdo a los momentos de desarrollo e
luaciones y sobre el vínculo concreto que se implementación curricular del país y de
percibe entre las evaluaciones y los conteni- acuerdo a las dificultades percibidas o
dos curriculares. Es importante que los comprobadas anteriormente en esos pro-
coordinadores en el ámbito nacional calcu- cesos.
len con anticipación, y en colaboración con
otras oficinas ministeriales, el costo material c. Las características de las pruebas, es
y el tiempo de trabajo que requerirá la fase decir, el marco conceptual utilizado, los
de discusión y sensibilización, para que dominios disciplinarios o cognitivos eva-
esta sea un aspecto formal y viable del pro- luados, y los factores escolares y so-
yecto de evaluación. cioeconómicos relevados con relación al
rendimiento. Si la prueba es de cobertura
Durante las discusiones, y mediante la infor- regional y se presenta como un proyecto
mación que se haga circular sobre resulta- de elaboración conjunta entre los países
dos anteriores, se sugiere alertar sobre los participantes, es importante definir un
posibles bajos resultados comparativos del marco conceptual que considere el con-
país, pero simultáneamente ejemplificar la texto de política educativa y curricular de
manera en que la próxima prueba compara- la región y permita una interpretación
da puede informar sobre aspectos específi- contextualizada de los resultados del es-
cos de desarrollo o implementación curricu- tudio. Un estudio de esta naturaleza de-
lar. Paralelamente, esta fase puede bería representar también una oportuni-
comenzar a “educar” a las audiencias con- dad para definir con los técnicos de los
vocadas en algunos de los tecnicismos pro- demás países un conjunto de estánda-
pios de la psicometría y de la sociometría, res mínimos de contenido para realizar
para que comiencen a desarrollar algunas una revisión de los currículos nacionales
capacidades de interpretación y análisis de y comparar, mediante la evaluación, los
datos más allá de los rankings. alcances relativos de los currículos pres-
critos, implementados y logrados.
Si el proyecto de evaluación está liderado
por una institución académica o no guber- d. Las oportunidades de participación
namental, es especialmente importante re- efectiva que el proyecto ofrece con rela-
unir a las autoridades ministeriales de medi- ción a la construcción o adecuación de
ción y currículo, no solo para obtener el aval instrumentos de medición, o a la inclu-
oficial, sino para establecer una especie de sión de “opciones nacionales” de evalua-
“contrato” sobre las necesidades de infor- ción; y la capacidad técnica de los coor-
mación percibidas por el ministerio, u orga- dinadores nacionales para hacer efectiva
nización equivalente, y el tipo de informa- y viable esa participación.
ción que puede derivarse de la evaluación
comparada. e. La utilidad y pertinencia del informe
de resultados utilizado por la agencia
2. Al momento de decidir sobre el tipo de prue- evaluadora, de acuerdo al tipo de au-
ba internacional que se va aplicar, cada diencias que se espera informar.
país debería considerar los siguientes as-
pectos técnicos y contextuales, que afec- 3. Durante la etapa de implementación del
tarán la mayor o menor utilidad de las expe- proyecto se recomienda motivar y asegurar
riencias de evaluación comparada: el vínculo y la comunicación permanente
entre las unidades de medición y los equi-
a. El momento histórico de las reformas pos de desarrollo curricular en los niveles
curriculares en curso, la duración previs- central y regional en cada país. Si parte de
ta del gobierno en funciones, y el grado estos procesos es eminentemente técnica
de afianzamiento del sistema nacional de y requiere poca intervención de personal
medición de la calidad educativa. de currículo, se recomienda mantenerlos

23
informados permanentemente sobre los sumos de información para medidas de polí-
avances del proyecto y sobre las fechas en tica o para decisiones de tipo curricular y
que serán convocados para discutir y anali- pedagógico en el nivel local y escolar).
zar los resultados del estudio. Simultánea-
mente, debería mantenerse una comunica- Según indica la evidencia, la difusión de la
ción permanente con los representantes de información por medio de informes no es
la prensa y de las asociaciones sindicales suficiente para lograr un impacto real en
y profesionales convocadas inicialmente las políticas y prácticas educativas. Por
(recomendación 1). ello, es necesario organizar eventos loca-
les con amplia participación de directores
El mismo mecanismo debería operar entre de escuela y docentes, en los cuales se
los coordinadores y los actores guberna- explique cómo interpretar los datos y se
mentales y no gubernamentales si el ope- discutan las diferentes maneras de mejorar
rativo de evaluación estuviera en manos de el desarrollo curricular en las escuelas y su
una institución académica independiente. implementación en las aulas. Este es tam-
Estos mecanismos de comunicación per- bién el momento de revisar el contexto de
manente son una forma de mantener vivo política curricular: en qué momento de
el “contrato” entre los técnicos y los consu- implantación de los programas curriculares
midores de información que más pueden se encuentran el país y sus regiones; cuá-
influir en la toma de decisiones para cam- les son las dificultades que evidencian las
bios de política y práctica curricular. Como pruebas nacionales, los informes de super-
existen altas posibilidades de que los visión regionales, las investigaciones aca-
usuarios gubernamentales (ministeriales) démicas y la prueba internacional misma
de la información cambien súbitamente, es para decidir qué tipo de mejoras (si no cuá-
más importante aún reforzar los canales de les exactamente) se pueden recomendar a
comunicación permanente con la prensa y las autoridades nacionales y subnacionales
con representantes de instituciones sindi- de educación.
cales, académicas, profesionales y de la
sociedad civil. En este sentido, el análisis de los datos de-
bería conducir a preguntas clave sobre la
4. Hacia el momento en que se reciben los da- forma en que otros países logran mejores
tos ya procesados de la agencia evaluado- rendimientos estudiantiles y sobre las condi-
ra, y de acuerdo a las recomendaciones an- ciones bajo las cuales esos logros son posi-
teriores, los posibles usuarios de la bles. Vale recordar que una de las ventajas
información deberían estar informados de de las pruebas internacionales es que pue-
las fechas en que serán convocados a ana- den revelar información sobre los efectos di-
lizar e interpretar los datos de la prueba. ferenciales de algunas variables sobre el lo-
Aquí se sugiere realizar primero una sesión gro de aprendizajes que no es posible
de análisis y discusión entre los técnicos de detectar en un estudio intranacional. Tam-
evaluación y los representantes de desarro- bién es importante recordar que las asocia-
llo curricular, para planificar en conjunto una ciones entre variables dependientes e inde-
agenda de discusión organizada para el mo- pendientes que muestran los estudios
mento de intercambio con representantes internacionales deberían tomarse con cau-
de la prensa, del mundo académico y de tela y ser analizadas dentro del contexto
organizaciones no gubernamentales. Las particular de cada país.
discusiones con estos actores deberían
conducir a una serie de recomendaciones 5. Se recomienda hacer un seguimiento del
puntuales sobre el tipo de informes que se- tipo de decisiones de política y práctica
ría deseable difundir, concretamente con re- educativa, y curricular en particular, toma-
lación al formato, al tipo de información que das en función de los resultados difundidos.
se debe incluir, a las audiencias prioritarias Una vez identificadas, se sugiere comisio-
y secundarias que se quiere alcanzar, al nú- nar o alentar a instituciones académicas el
mero sugerido de publicaciones y a los dife- estudio de los resultados que sobre el
rentes objetivos que los informes debieran aprendizaje de los estudiantes han tenido, o
perseguir (por ejemplo, si deben brindar in- no, esas decisiones y cambios de prácticas.

24
La información recogida mediante estos es- Latina, la coordinación central de la evalua-
tudios debería canalizarse y difundirse ade- ción (ministerios u otras agencias a cargo)
cuadamente para ofrecer evidencia más debería considerar la posibilidad de conse-
concreta para la toma de decisiones sobre guir recursos para promover esa participa-
nuevas políticas y programas curriculares, ción. Es deseable, también, que la muestra
así como para la decisión sobre nuevas nacional, en vez de estar conformada por
evaluaciones internacionales y el tipo de es- alumnos de todo el país, sea construida con
trategias que son más efectivas para la difu- casos de un departamento o estado que
sión y uso de sus resultados. presente la suficiente heterogeneidad de-
mográfica como para asegurar variabilidad
6. Una vez que se ha participado en una expe- en los resultados y, por ende, la posibilidad
riencia internacional de evaluación, y si la de analizar estadísticamente su relación
información obtenida de esa experiencia con las variables predictivas del logro. Ello
está a la altura de las expectativas de los permitiría diseñar más fácilmente estrate-
coordinadores nacionales y de las autorida- gias de difusión y uso de los datos en un
des políticas del sector, se aconseja conti- contexto más reducido, para luego replicar
nuar participando en nuevas mediciones, esas estrategias en el ámbito nacional.
especialmente en las siguientes aplicacio-
nes de la misma prueba. Esto permitiría la Esperamos con este trabajo haber contribui-
medición del progreso académico de las po- do a la comprensión de las condiciones téc-
blaciones evaluadas y, además, que el pú- nicas y políticas bajo las cuales los países
blico y los usuarios de la información se de América Latina deberían participar en
acostumbren a contar con esta periódica- pruebas internacionales. Es nuestro deseo
mente, y de esta manera maximizar su uso que los resultados de este informe de inves-
técnico y político. tigación alcancen y se difundan en los espa-
cios de decisión sobre evaluación educativa
7. Se recomienda la participación de unidades en la región, así como en el ámbito acadé-
subnacionales de gestión educativa (por mico, y así coadyuvar a una mejor utiliza-
ejemplo, estados, departamentos o grupos ción de los recursos disponibles para la me-
de escuelas asociadas). Si la participación dición de rendimiento académico y, lo que
no puede ser financiada por esas unidades, es más importante aun, para su impacto en
como probablemente ocurriría en América la calidad de los aprendizajes.

25
RECUADRO 1

DIÁLOGO ENTRE INVESTIGADORES , EVALUADORES Y


USUARIOS DE LA INFORMACIÓN

Uno de los aspectos que representa el ma- El modelo racional de toma de decisiones,
yor obstáculo para el uso efectivo de la eva- que asume que los funcionarios seleccionarán
luación internacional en el mejoramiento de opciones de política sobre la base de un análi-
la calidad de los aprendizajes, según se ha sis informado, está siendo cuestionado. Se re-
detectado en este estudio, es la ausencia de conoce que la mayor parte de los problemas
diálogo entre investigadores o evaluadores y no están, ni pueden ser, perfectamente defini-
los usuarios potenciales de la información. dos y que los funcionarios no siempre estable-
cen las prioridades de acción racionalmente
Una explicación al respecto se puede en- sino en función de variables de oportunidad
contrar en Reimers (1999), quien sostiene política y de poder. Por ello, para lograr deci-
que en las altas esferas de administración siones informadas, es preciso ejercer cierto
educativa en muchos países del mundo, la grado de persuasión en los decisores de políti-
mayor parte de las decisiones que se toman cas mediante un proceso de negociación, y no
para incrementar las oportunidades de de diseño unilateral, del proceso de reforma.
aprendizaje se realizan intuitivamente, espe- Ese proceso debe ser interdisciplinario, propo-
culando con la articulación de algunos de sitivo –y no solamente descriptivo–, y debe
los elementos del sistema (currículo, capaci- tener en cuenta que el análisis se debe reali-
tación, supervisión, etc.), en vez de tomarse zar y comunicar dentro de los límites de tiem-
como resultado del análisis cuidadoso de la po que imponen los ciclos de política.
evidencia que muestran las investigaciones
y los análisis de política. El autor argumenta Adicionalmente, Reimers propone el uso de
que esto se debe a la forma en que el cono- un “mediador de conocimiento” entre el
cimiento derivado de la investigación es mundo de la investigación y el mundo de la
acumulado y procesado, y a que no siempre política. La evidencia recogida para este
se reconoce la diferencia entre la investiga- estudio muestra que, en ciertas ocasiones,
ción que pretende simplemente explicar la esa mediación se logra a través de la pren-
realidad, y la investigación de política que, sa y de otras instituciones académicas y no
además, busca describir cómo podría cam- gubernamentales formalmente convocadas
biarse esa realidad, que se asume es lo que durante el proceso de evaluación interna-
los funcionarios necesitan saber. cional. Sostiene Reimers que “el problema
del uso de la información no puede ser
Esa función propositiva de la investigación considerado recién después de concluida la
debería darse en forma de diálogo entre investigación o el análisis [...] la investiga-
los investigadores, funcionarios y otros ción debe comenzar con la consideración
usuarios de la información, de tal manera de las necesidades del cliente si se intenta
que se logre un acuerdo entre las necesi- evitar el riesgo de que los resultados del
dades de información y las posibilidades análisis resulten irrelevantes para los fun-
reales de los investigadores de proveerla. cionarios”.

26
BIBLIOGRAFÍA FERRER, Guillermo (1999). “Aspectos del curricu-
lum prescrito en América Latina: Revisión de
ATKIN, Myron y Paul BLACK (1997). Policy perils tendencias contemporáneas en curriculum, in-
of international comparisons: The TIMSS dicadores de logro, estándares y otros instru-
case. Phi Delta Kappan, 79,1, 22-28. mentos”. GRADE-PREAL. http://www.grade.
org.pe/gtee-preal/docs/Ferrer.pdf
BALL, Stephen (1998). “Big policies/small world:
An introduction to international perspectives FORSTER, Margaret (2000). A policy maker’s guide
in education policy”. Comparative Educa- to international achievement studies. ACER
tion, 34, 2, 119-130. Press, Australia.

BEATON, Albert et al (1999). The benefits and GREANEY, Vincent y Thomas KELLAGHAN (1996).
limitations of international educational Monitoring the learning outcomes of education
achievement studies. International Institute systems. Banco Mundial, Washington DC.
for Educational Planning, International Acad-
emy of Education.Unesco, París. H USÉN , Torsten (1994) “Educational research
and policy-making”, en T. Husén y T. Postle-
BEMPECHAT, Janine et al. (Borrador, 2000). “Cul- thwaite (Eds), International Ecyclopaedia of
tural-cognitive issues in academic achieve- Education. Pergamon Press, Oxford.
ment: New directions for cross-national re-
search”. Board on International Comparative HUSÉN, Torsten (1987). “Policy impact of IEA re-
Studies in Education (BICSE), National Re- search”. Comparative Education Review, 31,
search Council. 1, 29-46.

B LOOM , Benjamin (1974). “Implications of the H USÉN , T. y A. T UIJNMAN (1994). “Monitoring


IEA studies for curriculum and instruction”. standards in education: Why and how it
School Review, 82, 3, 413-435. came about”, en A.Tuijnman y T. Postle-
thwaite (Eds), Monitoring the Standards of
BURSTEIN, L. (1989). “Conceptual considerations in Education. Pergamon Press, Oxford.
instructionally sensitive assessment”. Docu-
mento presentado en American Educational JONES, P.W (1998). “Globalisation and interna-
Research Annual Meeting, San Francisco. tionalism: Ddemocratic prospects for world
education”. Comparative Education , 34,
BURSTEIN, L. et al. (1992). “Education indicators”, 133-155.
en M. Atkin (Ed.), Encyclopedia of educational
research (6a edición). Macmillan, Nueva York. KELLAGHAN, Thomas (1996). “IEA studies and
educational policy”. Assessment in Educa-
CARTER, D.S.G y M.H. O’NEILL (1995). Internation- tion, 3, 2, 133-160.
al perspectives on educational reform and
policy implementation. Falmer, Brighton. KOHN, Melvin (1987). “Cross-national research
as an analytic strategy” (American Sociolo-
GRADE (2001). “Mejoramiento de los procesos
gical Association, 1987 Presidential
de desarrollo curricular y de materiales edu-
Address). American Sociological Review ,
cativos”. Informe final de la consultoría No
52, diciembre, 713-731.
010-2000-ED/MECEP para el Ministerio de
Educación del Perú.
L EVIN , Benjamin (2001). “Conceptualizing the
process of education reform from an interna-
FARRELL, Joseph (1979). The necessity of com-
tional perspective”. Education Policy Analysis
parisons in the study of education: The sa-
Archives , 9, 13. http://epaa.asu.edu/epaa/
lience of science and the problem of compa-
v9n13.html
rability . Presidential address, annual
meeting of CIES, Ciudad de México. Reim-
preso en Comparative Education Review , LYOTARD, J.F (1984). The postmodern condition:
23, 1. 1978. A report on knowledge. Manchester Univer-
sity Press, Manchester.

27
MACNAB, Donald (2000). “Forces of change in WIRT, Frederick (?) “Comparing educational poli-
mathematics education: the case of TIMSS”. cies: Theories, units of analysis, and research
Educational Policy Analysis Archives 8,15. strategies”. Reimpreso en Comparative Edu-
cation Review, vol.24, 2, junio1980.
MCKNIGHT, Curtis (1987) The underachieving cu-
rriculum: Assessing U.S. school mathemat- WOLF, R (1979). “Sampling”. Boletín # 4: Secon-
ics from an international perspective. A Na- dary Study of Mathematics. Second Interna-
tional Report on the Second International tional Mathematics Study, Urbana, IL.
Mathematics Study.

M ISLEVY , Robert (1995). “What can we learn ENTIDADES ENTREVISTADAS


from international assessments?” Educatio-
nal Evaluation and Policy Analysis, invierno (Por razones de confidencialidad, solamente se
1995, 17, 4, 419-437. reportan los nombres de las agencias o unida-
des ministeriales a la que pertenecen los 25 en-
National Commission on Excellence in Educa- trevistados de este estudio)
tion (1983). A nation at risk. Government
Printing Office, Washington DC. Argentina
– IDECE (Instituto para el Desarrollo de la Ca-
PLATT, W.J (1975). “Policy making and interna- lidad Educativa). Ministerio de Educación.
tional studies in educational evaluation”, en – Ex Subsecretaría de Evaluación de la Cali-
A.C. Purves y D.U. Levine (Eds.) Educatio- dad Educativa. Ministerio de Educación.
nal policy and international assessment. Mc-
Cutchen, Berkeley, CA. Chile
– Programa Formación Inicial Docente. Divi-
sión Educación Superior.
REIMERS, Fernando y Noel MC GINN (1997). In-
– Unidad de Curriculum y Evaluación/ SIMCE.
formed Dialogue: Using Research to Shape
Ministerio de Educación.
Education Policy Around the World. Prae-
ger, Nueva York y Londres..
Colombia
– ICFES (Instituto Colombiano para el Fomen-
S CHMIDT , William y Curtis M C K NIGHT (1995).
to de la Educación Superior)
“Surveying educational opportunity in ma-
– Universidad del Valle. Ciudad de Cali.
thematics and science: An international
perspective ”, Educational Evaluation and Cuba
Policy Analysis, otoño 1995, 17, 3, 337-353. – Instituto Central de Ciencias Pedagógicas.
SMITH, Adam (1776). An inquiry into the nature Ecuador
and causes of the wealth of nations. Dublin, – APRENDO. EB/PRODEC. Sistema semiau-
Whitestone, 1776. 3 v. 22 cm. The Library of tónomo oficial de medición de la calidad de
Congress, EEUU. la educación.

THEISEN, Gary et al (1983). “The underachieve- Estados Unidos


ment of cross-national studies of achieve- – Universidad de Wisconsin-Madison.
ment”. Comparative Education Review, 27, – Universidad Estadual de Michigan/ Universi-
1, 46-68. dad Estadual de Nueva York, Albany.
– Federación Estadounidense de Profesores.
T ORNEY -P URTA , Judith (1990). “International – Departamento de Educación. (American Fe-
comparative research in education: Its role deration of Teachers. Educational Issues
in educational improvement in the US”. Edu- Department.)
cational Researcher, (volumen, S/D) 32-35. – Consorcio SMART (Science and Mathema-
tics Required for Tomorrow).
TORRES, Rosa María (1999). “Reformadores y
docentes: El cambio educativo atrapado en- México
tre dos lógicas”, Documento de discusión. – Subsecretaría de Planeación y Coordinación
IIPE Unesco, Buenos Aires. Institucional, Secretaría de Educación Pública.

28
Organización de Estados Iberoamericanos (OEI) NSF: National Science Foundation, ‘Fundación
– Programa Evaluación de la Calidad de la Nacional de Ciencias’.
Educación.
OCDE: Organización para la Cooperación y el
Perú Desarrollo Económico.
– Radio Programas del Perú. OEI: Organización de Estados Iberoamericanos.
– Unidad de Medición de la Calidad. Ministe-
rio de Educación. ONG: Organización no-gubernamental.
– UNESCO-Perú. OREALC (Unesco): Oficina Regional para Amé-
rica Latina y el Caribe.
Unesco-OREALC
– Laboratorio Latinoamericano para la Evalua- PIRLS: Progress in International Reading Litera-
ción de la Calidad de la Educación (LLECE). cy Study, ‘Estudio Internacional sobre los Pro-
gresos en Alfabetización y Habilidades de
Uruguay Lectura’.
Unidad de Medición de Resultados Educativos PISA: Programme for International Student As-
(UMRE) de la Administración Nacional de Edu- sessment, ‘Programa Internacional de Eva-
cación Pública. luación de Estudiantes’.
PNUD: Programa de las Naciones Unidas para
SIGLAS Y ABREVIACIONES el Desarrollo.
PROMEDLAC: Comité Regional Interguberna-
AFT: American Federation of Teacher, ‘Federa- mental del Proyecto Principal de Educación
ción Estadounidense de Maestros’.
en América Latina y el Caribe.
ALL: Adult Literacy and Lifeskills, ‘Prueba para
REDUC: Red Latinoamericana de Información y
Adultos sobre Alfabetización y Destrezas
Documentación en Educación.
para la Vida’.
SIMS: Second International Mathematics Study,
BID: Banco Interamericano de Desarrollo
‘Segundo Estudio Internacional de Matemáti-
ETS: Educational Testing Services, ‘Servicios de cas’.
Evaluación Educacional’.
SACMEQ: Southern Africa Consortium for Monito-
ICFES: Instituto Colombiano para el Fomento de ring Educational Quality, ‘Consorcio de África
la Educación Superior. del Sur para la Evaluación de la Calidad Edu-
IDECE: Instituto para el Desarrollo de la Calidad cacional’.
Educativa. SEP: Secretaría de Educación Pública.
IEA: International Association for the Evaluation of SIMCE: Sistema de Medición de la Calidad Edu-
Educational Achievement, ‘Asociación Interna- cativa.
cional para la Evaluación del Logro Académico’.
SMART: Science and Mathematics Achievement
IRT: Item Response Theory, ‘Teoría de Respues- Required for Tomorrow.
ta al Item’.
TIMSS: Third International Mathematics and
LLECE: Laboratorio Latinoamericano para la Science Study, Tercer Estudio Internacional
Evaluación de la Calidad de la Educación. en Matemáticas y Ciencias’.
NCES: National Council for Education Statistics,
TIMSS-R: Repetición de TIMSS.
‘Consejo Nacional de Estadística de la Edu-
cación’. UMRE: Unidad de Medición de Resultados Edu-
cativos.
NCTM: National Council of Teachers of Mathe-
matics, ‘Consejo Nacional de Profesores de WEI: World Education Indicators, ‘Indicadores
Matemáticas’. Mundiales de Educación’.

29