Está en la página 1de 32

El INEE y la Investigacin

Educativa
Felipe Martnez Rizo*
CUADERNO No. 28

Coleccin Cuadernos
de Investigacin
ISSN 1665-9457
*Director General del Instituto Nacional para la Evaluacin de la Educacin
Este texto puede consultarse en: www.inee.edu.mx

MXICO, SEPTIEMBRE, 2007

Contenido
Introduccin
La tarea del INEE como investigacin

1.

Investigaciones terminadas y en proceso


1.1. Trabajos del INEE en general
1.2. Trabajos del la Direccin de Pruebas y Medicin
1.3. Trabajos del la Direccin de Proyectos Internacionales y Especiales
1.4. Trabajos del la Direccin de Evaluacin de Escuelas
1.5. Trabajos del la Direccin de Indicadores Educativos
1.6. Otros trabajos

5
5
7
10
11
12
13

2.

Recursos para investigadores


2.1. Manuales tcnicos y protocolos
2.2. Biblioteca y Hemeroteca del INEE
2.3. Bases de datos en lnea
2.4. Pgina del INEE en Internet

17
17
18
19
26

3.

Perspectivas de desarrollo de la investigacin


3.1. Posibilidades de colaboracin
3.2. Hacia una agenda de investigacin sobre evaluacin educativa

29
29
29

Conclusin

Coleccin Cuadernos de Investigacin

32

El INEE y la Investigacin Educativa

Introduccin. La tarea del INEE


como investigacin
El Instituto Nacional para la Evaluacin de la Educacin (INEE) concibe su tarea como una actividad de
investigacin en el sentido ms estricto, y no como
una tarea mecnica o rutinaria. La manera como se
expresa la tarea del Instituto en sus documentos bsicos as lo manifiesta.
En el Plan Maestro de Desarrollo del INEE se seala que, en ocasiones, la evaluacin educativa se
reduce a la aplicacin de pruebas de aprovechamiento, y no se consideran otras dimensiones fundamentales de la calidad. Se precisa, adems, que
la evaluacin de algo no se reduce a su medicin, si
bien la incluye, ya que evaluar implica comparar el
resultado de una medicin con cierto referente, un
deber ser, de manera que se pueda llegar a un juicio
sobre lo adecuado o inadecuado de la realidad detectada o medida.
Para el INEE, la evaluacin es el juicio de valor que
resulta de contrastar el resultado de la medicin de
una realidad emprica con un parmetro normativo
previamente definido. El Instituto precisa las caractersticas de una buena evaluacin como un conjunto
que incluye las de una buena medicin, pero tambin otras.
Segn el Instituto, una buena evaluacin se distingue por el carcter comprensivo de la conceptualizacin que la sustenta, que deber atender todas
las dimensiones de la calidad, pero tambin por
otros rasgos, comenzando por el alto nivel tcnico
de las mediciones en que se base, para garantizar
su confiabilidad y validez. Este rasgo implica que la
evaluacin se haga con diseos slidos; que utilice
modelos e instrumentos de enfoques diversos; que,
cuando utilice muestras, stas se definan rigurosamente para asegurar su representatividad; y que los
procesos de recoleccin de datos sean cuidadosos,
al igual que el anlisis de los datos obtenidos.
Estas caractersticas de rigor no son distintas de
las que distinguen a toda buena investigacin, edu-

cativa u otra. Para asegurar que as sea, el INEE tiene


establecido que todos los aspectos metodolgicos
y tcnicos de su trabajo estarn sujetos al escrutinio
pblico.
El INEE seala, adems, que una buena evaluacin supone que los referentes que se definan como
parmetros para contrastar los resultados de la medicin debern ser pertinentes, para que las comparaciones tengan sentido, y que los juicios de valor
resultantes debern ser mesurados, evitando ir ms
all de lo que permita la informacin disponible, y
teniendo siempre en cuenta la equidad, considerando el contexto de los alumnos y las escuelas.
Concebida as, la evaluacin educativa rene
los requisitos para ser considerada investigacin
de tipo aplicado, que puede designarse apropiadamente como investigacin evaluativa.
Pero el Instituto debe ir ms all; una buena evaluacin no debera quedarse en la descripcin de
la realidad, sino que buscar incluir estudios explicativos, identificando factores que incidan sobre la
situacin prevaleciente, para que los actores involucrados cuenten con elementos para sustentar decisiones de mejora. Por ello, estipula el Plan Maestro
de Desarrollo, adems de los resultados educativos,
en trminos de aprendizaje y otros, debern considerarse variables del contexto de las escuelas y las familias de los alumnos, as como variables propias de las
escuelas, incluyendo recursos y procesos, adems de
los productos.
El Plan Maestro no deja dudas respecto a la dimensin investigativa del quehacer el Instituto, al
establecer una lnea de trabajo expresamente dedicada a la investigacin y la formacin de recursos
humanos de alto nivel para la evaluacin. En lo relativo a investigacin, el Plan seala expresamente
que, adems de la evaluacin educativa que es, en s
misma, investigacin de tipo aplicado, el INEE desarrollar otros dos tipos de actividades de investigacin: de

Coleccin Cuadernos de Investigacin


carcter metodolgico para producir o perfeccionar
instrumentos, tcnicas y procedimientos de evaluacin; y de tipo bsico que incluye estudios explicativos
y trabajos tericos.
Con plena conciencia de la amplitud de la tarea
definida en los prrafos anteriores, el Plan aade
que, para lograr la mayor riqueza de trabajos y perspectivas sobre la evaluacin de la calidad educativa, el
INEE desarrollar proyectos de investigacin y buscar
que otras instituciones y acadmicos los realicen.
El Plan Maestro aade que la investigacin ser
una tarea de todas las reas del Instituto, cada una en
su mbito y en estrecha colaboracin entre ellas.
Como parte de la visin del INEE en el futuro, el
Plan establece que, en el ao 2010, el Instituto ser
reconocido como centro de investigacin de calidad y
habr hecho importantes contribuciones al desarrollo
de la metodologa evaluativa en los pases de la regin. Este punto se precisa diciendo que, en la fecha
mencionada:
Estarn operando mecanismos institucionales
para asegurar la calidad acadmica de los productos de investigacin generados por el INEE,
los cuales constituirn una aportacin relevante
al conocimiento de la situacin de la educacin
mexicana.
Con la colaboracin de instituciones nacionales
e internacionales, se habr puesto en marcha un
programa para el desarrollo y fomento de la investigacin, que contemple la realizacin de estudios
independientes, tesis de posgrado y estancias sabticas.
Se habrn realizado estudios explicativos complejos sobre los determinantes del logro escolar e
iniciado estudios de valor agregado y el impacto
social de la educacin.
Se habrn elaborado estudios para la validacin
de instrumentos, as como para la construccin de
tipologas de escuelas ms pertinentes.

Coleccin Cuadernos de Investigacin

Se habrn iniciado estudios para valorar el uso de


los resultados de la evaluacin por parte de distintos actores y para dar cuenta de su impacto.
Se habr incursionado en la evaluacin de programas, en colaboracin con instituciones y especialistas que tengan un dominio de las metodologas
adecuadas para tal fin.
Como una dimensin ms de su tarea, estrechamente relacionada con la investigacin, el Plan
Maestro define tambin una lnea de trabajo relativa a la formacin de recursos humanos de alto nivel
para la evaluacin. Adems de las acciones que tienen que ver especialmente con la capacitacin del
personal de las reas de Evaluacin de las entidades
federativas, la visin al 2010 del Plan establece que
para esa fecha:
Se habr puesto en marcha un programa para el
desarrollo profesional de los especialistas y tcnicos del Instituto, con la colaboracin de diversas
instituciones, especialistas e investigadores nacionales y extranjeros.
Se habr diseado un programa interinstitucional
de posgrado de alto nivel en evaluacin educativa.
En el primer ao del cuatrienio 2007-2010, el
INEE ha comenzado a dar pasos en la direccin que
apunta su Plan Maestro. En las pginas siguientes
de este documento se presentan los elementos que
el Instituto ofrece a la comunidad de investigadores educativos, buscando establecer o fortalecer
relaciones de colaboracin fructferas, para que los
puntos de la visin 2010 del Plan, en lo relativo a investigacin, puedan hacerse realidad.
Se ofrece en primer lugar informacin de los
proyectos recientemente terminados por las diversas reas del Instituto, as como sobre los que se
encuentran en proceso. En un segundo apartado se
presentan los recursos que el INEE pone a la disposicin de los investigadores; y en el tercero se sugieren algunas posibilidades de colaboracin.

El INEE y la Investigacin Educativa

1. Investigaciones terminadas
y en proceso
Algunos productos de investigacin del INEE corresponden en especial al trabajo de una u otra de sus
reas; otros son el resultado del trabajo de varias de
ellas. En lo que sigue se distinguen unos y otros.
1.1. Trabajos del INEE en general
Trabajos ya difundidos
En este rubro se ubican los informes que el Instituto
ha publicado al final de cada ao, desde el primero
en que tuvo actividad, con el ttulo genrico de La
calidad de la educacin bsica en Mxico. Durante los
primeros cuatro aos esos informes se realizaron
con el resumen de los trabajos desarrollados durante el ao por todas las reas del Instituto; a partir
de 2007 tendrn un enfoque temtico. Pese a los
esfuerzos por hacer estas y otras obras derivadas
de las evaluaciones del INEE accesible a no especialistas, la informacin que contienen no deja de ser
compleja. Para facilitar su lectura, la informacin
tcnica va acompaada por la interpretacin que
hace de ella el INEE. Los ltimos informes incluyen
un apartado de advertencias para el lector, en el que
se llama la atencin sobre algunas limitaciones y
otras caractersticas de la informacin, las cuales
debern ser consideradas para extraer conclusiones
debidamente sustentadas en los datos disponibles.
Desde luego, las interpretaciones presentadas
por el INEE no son las nicas posibles, y debern
complementarse con las realizadas por otros lectores. El Instituto tiene la expectativa de que este vasto cmulo de informacin sea revisado cuidadosa
y crticamente por sus lectores, generando anlisis
propios a la luz del conocimiento que cada quien
tiene de su entorno. Ser de gran utilidad conocer
interpretaciones alternativas que, seguramente,
complementarn y enriquecern las que se presentan en los documentos difundidos por el INEE.

Los informes anuales difundidos hasta 2006 son


los siguientes:
La calidad de la educacin bsica en Mxico, 2003.
La primera parte presenta al lector informacin
general sobre el Sistema Educativo Nacional,
en especial de educacin bsica, as como de
algunos rasgos fundamentales de la sociedad
mexicana, contexto del sistema educativo. La
segunda parte sintetiza la situacin de la evaluacin educativa, destacando los aspectos que
debern mantenerse y aquellos que requieren
de mejoras. La tercera parte resume la visin
de la situacin de la educacin bsica mexicana
que se desprende de los trabajos realizados o
promovidos por el INEE en 2003. La conclusin
recapitula los hallazgos ms importantes y llama
la atencin sobre su utilidad para la mejora de la
educacin.
La calidad de la educacin bsica en Mxico, 2004.
El primer captulo presenta una visin del entorno del sistema educativo de Mxico, con indicadores del contexto sociodemogrfico, sociocultural, socioeconmico y socioeducativo
de las escuelas. El segundo captulo sintetiza informacin sobre resultados del aprendizaje que
alcanzan los alumnos de primaria y secundaria,
con base en el informe derivado de las pruebas
aplicadas en 6 de primaria y 3 de secundaria en
2004. El captulo tercero habla sobre otros resultados directos de la educacin, como la escolaridad de la poblacin adulta, la cobertura y el rezago educativo. El cuarto trata sobre el impacto a
mediano y largo plazos del sistema educativo, as
como sobre sus recursos y sobre algunos procesos que tienen lugar en su interior. El ltimo captulo explora con mayor profundidad un tema de
particular importancia y actualidad: la situacin
de la enseanza secundaria. La conclusin recapitula las tendencias que se pueden detectar; y

Coleccin Cuadernos de Investigacin


destaca los principales desafos para el Sistema
Educativo Nacional que se desprenden de las
evaluaciones hechas por el INEE en 2004.
La calidad de la educacin bsica en Mxico, 2005.
Este informe hace tres aportaciones novedosas
sobre el sistema educativo nacional:
El anlisis de la dispersin de la poblacin rural en localidades muy pequeas, con un crecimiento que hace necesario revisar la oferta
educativa para esa creciente poblacin dispersa. Destaca la importancia de las escuelas
de organizacin incompleta o multigrado,
como una estrategia pedaggica que podra
ser impulsada.
El anlisis del acceso y permanencia de los
alumnos en el sistema educativo, con datos
sobre los flujos escolares de la poblacin de
tres a 17 aos, y desde el primer grado de
preescolar hasta el cuarto de enseanza media superior. Se ofrece informacin actualizada sobre desercin, reprobacin y tasa de no
conclusin, as como cifras de egresados y de
certificados de terminacin de estudios.
Los principales hallazgos del estudio comparativo entre 2000-2005, cuya finalidad fue
comparar el nivel de aprendizaje alcanzado
por los alumnos en esos dos momentos, estudio que, por primera vez en el pas, evalu
la tendencia del rendimiento escolar a lo largo de cinco aos, para conocer los posibles
avances y retrocesos.
La calidad de la educacin bsica en Mxico,
2006.
El Informe recoge tanto los resultados de los trabajos ms recientes del INEE, como algunos de
los ms importantes de los aos anteriores. De
esta manera se forma una visin ms completa de la calidad educativa en el pas. En sus tres
partes y los captulos que las integran, el informe
recoge los principales elementos derivados de
los trabajos de construccin de indicadores, evaluacin de recursos y procesos de las escuelas,
y evaluacin del aprendizaje alcanzado por los
alumnos al final de la primaria y la secundaria.
Otros textos que no son productos de un rea del INEE
en particular, incluyen un conjunto de trabajos hechos
durante 2003 por estudiosos de varias instituciones de
Mxico y otros pases, por invitacin del Instituto. La
mayor parte de esos trabajos aprovech la informacin de las bases de datos derivadas de la aplicacin
de las Pruebas de Estndares Nacionales aplicadas por
la SEP de 1998 a 2002. En 2003 la SEP entreg al INEE

Coleccin Cuadernos de Investigacin

las bases de datos derivadas de esas pruebas, que fueron el punto de partida de las evaluaciones del Instituto, hasta que fueron sustituidas por las pruebas Excale
(Exmenes de la Calidad y el Logro Educativos), a partir
de 2005. Los trabajos basados en anlisis de esas bases
de datos fueron los siguientes:
Estudio Sobre las Desigualdades Educativas en
Mxico: La Incidencia de la Escuela en el Desempeo Acadmico de los Alumnos y el rol de los
Docentes. Ernesto Trevio Villarreal y Germn I.
Trevio Gonzlez.
Contextualizacin Sociocultural de las Escuelas de
la Muestra de Estndares Nacionales (1998-2002).
Tabar Fernndez Aguerre, con la asesora de
Rosa Mara Rubalcava.
Determinantes Sociales, Organizacionales e Institucionales de los Aprendizajes en la Educacin
Primaria en Mxico: Un Anlisis de Tres Niveles
(2001). Tabar Fernndez Aguerre, con la colaboracin de Emilio Blanco Bosco.
Factores Socioculturales Asociados al Rendimiento de los Alumnos al Trmino de la Educacin
Primaria: Un estudio de las Desigualdades Educativas en Mxico (Anlisis descriptivo). Ernesto
Trevio Villarreal y Germn I. Trevio Gonzlez.
Factores Externos e Internos a las Escuelas que Influyen en el Logro Acadmico de los Estudiantes
de Nivel Primaria en Mxico, 1998-2002 (Anlisis
comparativo entre entidades con diferente nivel
de desarrollo). Carlos Muoz Izquierdo, Alejandro
Mrquez, Andr Sandoval e Hidalia Snchez.
La Enseanza Secundaria en Mxico 2002. Una
Exploracin de Modelos Explicativos de Resultados de Aprendizaje y Caractersticas del Alumno,
del Entorno Familiar y Escolar (Habilidades de
comprensin lectora y resolucin de problemas
matemticos). Margarita Zarrilla Fierro y Francisco Jos Muro Gonzlez.
Factores Asociados al Aprendizaje del Lenguaje y
las Matemticas en 13 estados de Mxico. 3 y 4
grados en educacin bsica. Rubn Cervini.
Perfiles de las Escuelas Primarias Eficaces en Mxico 2001. Tabar Fernndez Aguerre.
Otros trabajos de 2003 revisaron elementos de
las pruebas TIMSS (siglas en ingls del Tercer Estudio
Internacional de Matemticas y Ciencias).
Tercer Estudio Internacional de Matemticas y
Ciencias Naturales (TIMSS): Resultados de Mxico en 1995 y 2000. Eduardo Backhoff Escudero y
Guillermo Solano Flores.
La Traduccin de Pruebas en Comparaciones Internacionales: Un Estudio Preliminar. Aspectos lingsticos de la traduccin de TIMSS 1995. Guiller-

El INEE y la Investigacin Educativa


mo Solano Flores y Eduardo Backhoff Escudero.
Un trabajo ms del ao 2003 se refiri a la educacin media superior. El Decreto Presidencial que estableci el INEE en 2002 define su mbito de accin
como uno que incluye tanto la educacin bsica
como la media superior, pero no la de tipo superior.
El Instituto decidi concentrar inicialmente su trabajo en la educacin bsica, pero tambin realizar el
siguiente estudio, para tener una vista de conjunto
del otro tipo educativo que cae dentro de su mbito
de competencia, con miras a futuros desarrollos.
Acciones de Evaluacin en las instituciones pblicas de Educacin Media Superior. Roco Antonio
Ros y Elizabeth Garca Flores.
En 2005 y 2006 se produjeron dos trabajos ms:
Anlisis de los resultados de la prueba nacional de
aprovechamiento en lectura en secundaria: estudio multinivel de logro y tendencias
En esta publicacin se analizan los resultados de
la Prueba de Estndares Nacionales en Lectura aplicada en 2003, utilizando tcnicas estadsticas multinivel (modelos lineales jerrquicos) para explorar
la relacin entre el rendimiento acadmico de los
alumnos y las caractersticas del entorno familiar y
escolar. Las tcnicas de anlisis multinivel permiten
profundizar en la exploracin de los resultados descriptivos del rendimiento de los alumnos en el ao
2003 presentados hasta la fecha y extienden los presentados en el 2002.
Polticas y sistemas de evaluacin educativa en
Mxico.
Documento preparado para la reunin del Grupo E-9 de la UNESCO, celebrada en Mxico en
febrero de 2006. El Grupo E-9 comprende a los
nueve pases no desarrollados ms poblados del
mundo, que son China, India, Indonesia, Pakistn, Bangladesh, Egipto, Nigeria, Brasil y Mxico.
La reunin celebrada en nuestro pas tuvo como
tema el de la evaluacin, y el grupo tcnico correspondiente fue coordinado por el INEE, que
prepar este documento, el cual tiene como
objetivo general exponer las polticas y sistemas
de evaluacin de la educacin en Mxico, en especial en relacin con la educacin bsica.
Trabajos por aparecer
La calidad de la educacin bsica en Mxico,
2007.
El informe anual del ao en curso, cuya difusin
est prevista para diciembre, tendr como tema
la educacin de los grupos desfavorecidos y la

equidad. Los captulos se referirn a las telesecundarias, los cursos comunitarios y la educacin de los alumnos indgenas, as como a las
desigualdades del entorno familiar de los alumnos y las de la oferta educativa.
1.2. Trabajos de la Direccin de Pruebas y Medicin
Los productos bsicos de esta Direccin son los informes en que se analizan los resultados de las aplicaciones anuales de pruebas de rendimiento. Estas
aplicaciones se basan en una planeacin de largo
plazo, aprobada en su momento por el Consejo Tcnico del INEE.
Segn este plan, se sigue un ciclo de cuatro aos,
a lo largo del cual se evalan sucesivamente cuatro
grados clave de la educacin bsica: el tercero de la
educacin preescolar; el tercero y el sexto de primaria; y el tercero de secundaria.
Esta planeacin comenz a implementarse desde 2004, con la preparacin de las primeras aplicaciones de sexto de primaria y tercero de secundaria,
que se hicieron en 2005, y cubrieron solamente las
materias de espaol y matemticas, si bien con una
cobertura muy amplia de los contenidos de los programas correspondientes. En el caso de espaol, en
particular, la evaluacin no se limit a la lectura y
los conocimientos sobre la lengua, como es habitual, sino que incluyeron la ortografa y la expresin
escrita. Estas pruebas se denominan Exmenes de la
Calidad y el Logro Educativos, Excale.
Las pruebas aplicadas en 2006 a nios de tercero de primaria incluyeron adems ciencias naturales, geografa, historia y educacin cvica. En 2007
se aplicaron pruebas de ejecucin sobre competencias lingsticas y matemticas a alumnos del tercer
grado de preescolar.
Los informes ya difundidos de esta rea del INEE
se refieren a estas aplicaciones; en lo relativo a 2003
y 2004, los resultados son los de las Pruebas de Estndares Nacionales desarrolladas por la Direccin
General de Evaluacin de la SEP desde 1998, asumidas por el INEE a partir de su creacin; desde 2005
los informes se refieren a las pruebas Excale del INEE.
Durante los primeros aos se produjo slo un informe por ao; progresivamente se han ido abordando
aspectos particulares con mayor profundidad.
Trabajos ya difundidos
Resultados de las Pruebas de Estndares Nacionales 2002-2003.

Coleccin Cuadernos de Investigacin


Resultados de las Pruebas de Estndares Nacionales 2003-2004.
Estos dos informes (difundidos slo en forma
electrnica) presentan los resultados de las dos
ltimas aplicaciones de las pruebas de Lectura
y Matemticas desarrolladas desde 1998 por la
SEP, en especial relativos al sexto grado de primaria y al primero de secundaria. Los anlisis se
hicieron originalmente con base en los resultados crudos de las aplicaciones, sin correcciones
por ponderacin. Posteriormente, el Dr. Richard
Wolfe, del Ontairo Institute for Students in Education de la Universidad de Toronto, quien asesor
el diseo muestral utilizado para las aplicaciones
de las pruebas nacionales de lectura y matemticas desde sus inicios, hizo un estudio de validacin de la muestra empleada en 2003, as como
un anlisis de los resultados, haciendo correcciones por ponderacin.
Estudio comparativo de la educacin bsica en
Mxico 2000-2005.
Este trabajo tuvo el propsito de comparar los
aprendizajes logrados por los estudiantes de 6
de primaria y 3 de secundaria en Comprensin
Lectora y Matemticas en los aos 2000 y 2005,
con el fin de conocer las tendencias del Sistema
Educativo Nacional en ese lapso.
Los anlisis de las bases de datos derivadas de la
aplicacin de las Pruebas Nacionales de Estndares de 1998 a 2002 mostraron que, por diversas
razones tcnicas, los resultados anuales no eran
comparables entre s, por lo que era imposible
establecer tendencias de manera confiable. Las
razones tcnicas que llevaron a esta conclusin
pueden verse en el Cuaderno de Investigacin
N 12.
El diseo de las nuevas pruebas Excale buscar,
entre otras cosas, poder comparar los resultados
a lo largo del tiempo, pero esto slo ser posible
a partir del ao 2005, y no en forma retroactiva,
como es obvio. Para tener una idea de la evolucin de los niveles de aprendizaje en aos anteriores, el INEE decidi aplicar nuevamente, por
nica vez, las Pruebas de Estndares Nacionales
de Comprensin Lectora y Matemticas aplicadas
por la SEP en el ao 2000 para evaluar a estudiantes de 6 de primaria y 3 de secundaria. De esta
manera fue posible una aproximacin a las tendencias de los niveles de aprendizaje durante el
lustro 2000-2005.
El aprendizaje del espaol y las matemticas en la
educacin bsica en Mxico: sexto de primaria y
tercero de secundaria, 2005.

Coleccin Cuadernos de Investigacin

Como su ttulo indica, este estudio evalu las


competencias en Espaol y Matemticas de los
alumnos de sexto de primaria y tercero de secundaria, aplicando por primera ocasin los nuevos
instrumentos desarrollados para este propsito
por el Instituto, Excale.
La primera aplicacin de estos exmenes confirma, en general, los resultados de evaluaciones
anteriores, y da informacin nueva, por su diseo alineado al currculum y porque incluye niveles de competencia definidos en forma rigurosa.
Gracias a ello podemos saber en qu medida los
alumnos consiguen alcanzar los objetivos establecidos en los planes y programas de estudio al
fin de la primaria y la secundaria.Los resultados
obtenidos informan sobre el nivel de los estudiantes y muestran la desigualdad en la distribucin de los aprendizajes entre los estratos y
modalidades escolares del pas.
El aprendizaje de la expresin escrita en la educacin bsica en Mxico: sexto de primaria y tercero
de secundaria, 2005.
El Excale de Espaol comprendi tres aspectos:
Comprensin lectora, Reflexin sobre la lengua
y Expresin escrita. La inclusin de esta ltima
se debe a la importancia que tiene la escritura
como herramienta de pensamiento y por su alto
valor acadmico y social. Pese a ello nunca se haba hecho una evaluacin en gran escala, a nivel
nacional, en la materia.
El propsito central del estudio fue conocer las
habilidades de escritura que alcanzan los estudiantes de sexto de primaria y tercero de secundaria, adems de conocer qu agrega la secundaria al aprendizaje de estas competencias,
respecto de la educacin primaria. Los resultados
de Expresin escrita se reportan por separado, ya
que este componente de Excale de Espaol de
sexto de primaria y tercero de secundaria tuvo
caractersticas particulares:
Consisti en un examen de respuesta construida; es decir, el estudiante tuvo que redactar la respuesta y no seleccionarla, como sucedi en el resto de las evaluaciones;
Para calificar las respuestas se desarrollaron rbricas (o reglas) a fin de que un grupo de especialistas entrenados pudieran
evaluar de forma homognea a todos los
estudiantes;
La muestra tuvo representatividad nacional y
no estatal, como en el resto de los Excale;
El establecimiento de los niveles de logro
educativo para la competencia de escritura

El INEE y la Investigacin Educativa


no sigui el procedimiento descrito para el
resto de los Excale de opcin mltiple, y
Se utiliz la misma prueba para alumnos de
sexto de primaria y tercero de secundaria.
El aprendizaje en tercero de primaria en Mxico: Espaol, Matemticas, Ciencias Naturales y Ciencias
Sociales, 2006.
Adems de evaluar por primera vez las competencias de alumnos de un grado intermedio de
la educacin primaria, segn el plan de pruebas
del INEE, las pruebas Excale aplicadas en 2006 cubrieron de manera ms completa las asignaturas
del currculo, incluyendo de nuevo Matemticas
y Espaol (con Comprensin lectora, Reflexin
sobre la lengua y Expresin escrita), pero adems
Ciencias Naturales, Geografa, Historia y Educacin Cvica.
El estudio confirma algunos hallazgos previos
relativos a las diferencias entre los diversos tipos
de servicio educativo, con resultados inesperados en lo que se refiere a los Cursos Comunitarios, que se estn revisando con las autoridades
del Conafe.
La inclusin de la mayor parte de las reas que
comprenden los planes y programas de estudio
de la primaria sustenta la principal aportacin
del estudio, que permite apreciar el nivel de los
alumnos en todas esas reas y aporta elementos
de gran inters sobre todo para las autoridades
educativas federales, responsables del currculo.
Aprendizaje y desigualdad social en Mxico: implicaciones de poltica educativa en el nivel bsico.
Para encontrar explicaciones plausibles que den
cuenta de las diferencias en el aprendizaje, y con
base en la informacin de los cuestionarios de
contexto y de las pruebas Excale-06 y 09 (6 de
primaria y 3 de secundaria) aplicadas en 2005,
se realiz un estudio utilizando modelos jerrquicos lineales y la metodologa desarrollada por el
investigador Douglas Willms, que presenta en el
libro Learning divides, publicado por el Instituto
de Estadsticas de la UNESCO en 2006, traducido
al espaol y publicado por el INEE.
Con base en esa metodologa, el estudio explora
con mayor profundidad el impacto en el aprendizaje del nivel sociocultural de los hogares de
los estudiantes y el que tienen las condiciones de
las escuelas a las que asisten. Esta obra presenta
la primera parte del estudio, que centra la atencin en los factores del entorno social y familiar
de los alumnos.
Del prefacio de la obra, firmado por el Dr. Willms,
se extracta el prrafo siguiente:

En los ltimos veinte aos, la investigacin ha


ofrecido evidencia amplia de que las escuelas y
los sistemas escolares efectivos suelen contar con
fuertes sistemas para monitorear su desempeo
acadmico. En este sentido, Mxico ha dado grandes pasos gracias al liderazgo y compromiso del
equipo del Instituto Nacional para la Evaluacin de
la Educacin. En menos de un lustro, este Instituto
ha desarrollado un sistema de monitoreo que se
ubica entre los mejores del mundo. Este reporte de
investigacin muestra los resultados de algunas de
sus primeras evaluaciones de forma clara y utilizable. Sus resultados pueden servir para que los educadores puedan estimar sus progresos en la tarea
de elevar y nivelar la curva de aprendizaje en sus
estudiantes.

Trabajos en proceso
Aprendizaje y condiciones escolares en Mxico.
Segunda parte del trabajo anterior, utilizando
tcnicas multinivel con el enfoque del Dr. Willms,
y centrando ahora la atencin a los factores de la
oferta escolar, para estudiar el impacto que tienen las condiciones de los centros escolares en
el aprendizaje de los estudiantes, una vez que se
toman en cuenta sus condiciones socioculturales.
Errores ortogrficos de los alumnos de 3 y 6 de
primaria y de 3 de secundaria.
Este trabajo, cuya terminacin est prevista para
diciembre de 2007, se basa en el anlisis de cerca
de 15,000 textos escritos por los sustentantes de
los Excale de Expresin Escrita que se aplicaron
en 2005 y 2006.
El aprendizaje en tercero de preescolar: competencias lingsticas y matemticas.
En los meses de mayo y junio de 2007, se aplicaron pruebas especiales, de ejecucin, a una
muestra representativa nacional de alumnos de
tercero de preescolar. Este informe, que se difundir en agosto de 2008, presentar los resultados
de este trabajo, innovador en su gnero en nuestro pas.
Dos investigaciones ms estn en sus etapas iniciales:
Capital lingstico (o disponibilidad lxica) de los
estudiantes de educacin bsica.
Se transcribirn y analizaran los textos escritos
por aproximadamente 15,000 estudiantes de 3
y 6 de primaria y de 3 de secundaria.
Anlisis de errores matemticos de estudiantes de
educacin bsica.

Coleccin Cuadernos de Investigacin

10

Se propondr un modelo de clasificacin de


las concepciones errneas en matemticas que
se manifiestan en las respuestas de las pruebas
Excale de primaria y secundaria; con l se analizarn las respuestas de las pruebas aplicadas en
2005 y 2006.

1.3. Trabajos de la Direccin de Proyectos


Internacionales y Especiales
Trabajos ya difundidos
Con base en su Decreto de Creacin, el INEE asumi
la responsabilidad de las evaluaciones de la OCDE
conocidas con el nombre de PISA (por las siglas
en ingls del Programme for Internacional Student
Assessment) en abril de 2003, cuando se hizo cargo de la aplicacin de la segunda ronda de dichas
evaluaciones. La primera ronda de aplicaciones de
PISA tuvo lugar en el ao 2000, antes de la creacin
del INEE, y no se elabor informe nacional alguno
de sus resultados. En 2002 tuvo lugar una aplicacin
adicional de las pruebas de PISA 2000 en algunos
pases, conocida como PISA Plus. Los resultados de
esta aplicacin especial se difundieron en julio de
2003, y el INEE difundi en la misma fecha un anlisis sencillo de sus resultados:
Los Resultados de las Pruebas PISA. Cuaderno de
Investigacin N 1.
Antes de la difusin de resultados de PISA 2003,
y para que el pblico tuviera un conocimiento
bsico de las caractersticas de esa evaluacin
en nuestro pas, el INEE difundi otro texto:
El Proyecto PISA: su aplicacin en Mxico. Cuaderno de Investigacin N 11.
La difusin del informe internacional con los resultados de PISA 2003, por parte de la OCDE, tuvo
lugar en diciembre de 2004. Simultneamente,
el INEE difundi un informe nacional, que analiz tanto los resultados de la ronda 2003, como
los anteriores, de PISA 2000:
Resultados de las pruebas PISA 2000 y 2003 en
Mxico.
Presenta los resultados de Mxico en el contexto internacional, as como los de las entidades
federativas mexicanas y los de las modalidades
educativas de secundaria y educacin media
superior cuyos alumnos fueron evaluados. Para
complementar lo anterior con elementos del
contexto nacional y de las entidades y modalidades, se retoman elementos del informe de las
evaluaciones nacionales 2004, difundido por el
INEE. De esta manera las evaluaciones naciona-

Coleccin Cuadernos de Investigacin

les y las internacionales se enriquecen mutuamente y ofrecen una visin ms completa de la


calidad del sistema educativo mexicano.
PISA para docentes.
Este volumenpresenta una informacin generalsobre PISA, sus unidades de reactivos (con
informacin para su anlisis eimpresin) yejemplos de anlisis pedaggico de algunas unidades
de reactivos. Est dirigido alos maestros mexicanos, para queconozcan lo que evalan las pruebas PISA y la forma en que miden el desempeo
delos alumnos, adems de identificar los procesos cognitivos involucrados en las preguntas
que se utilizan. La obra pretende ayudar a que
docentes y alumnos vean a la evaluacin como
una oportunidad de aprendizaje, y no como una
amenaza.
Dos nmeros de la serie Cuadernos de Investigacin presentan algunos anlisis adicionales de los
resultados de PISA 2003 en Mxico:
Autorregulacin del aprendizaje de las matemticas en estudiantes mexicanos.
Anlisis estatal de los resultados de Mxico PISA
2003.
Se exploran las diferencias en el desempeo de
los estudiantes entre las entidades federativas
mexicanas. Mxico ha realizado un esfuerzo
sustancial para lograr que exista representacin a nivel estatal de los estudiantes que participaron en PISA 2003. Un anlisis que tome
en cuenta las caractersticas individuales y del
sistema educativo ayuda a identificar los factores de mayor impacto en el desempeo de los
estudiantes, si los recursos se utilizan eficientemente y cmo influyen las caractersticas de la
entidad. Este ejercicio es un primer paso para
lograr una fotografa ms clara y as poder investigar cules son las polticas educativas estatales que han logrado que los estudiantes
tengan un mejor desempeo.
Trabajos en proceso
En diciembre de 2007 se presentar el informe
internacional con los resultados de la tercera ronda
de PISA, y simultneamente el informe nacional correspondiente:
Resultados de las pruebas PISA 2006 en Mxico.
En el primer semestre de 2008, a su vez, se difundirn los resultados del Segundo Estudio del
Laboratorio Latinoamericano de Evaluacin de
la Calidad Educativa, LLECE, as como el informe
de nuestro pas.

El INEE y la Investigacin Educativa


Resultados de los alumnos mexicanos en el Segundo Estudio Regional Comparativo y Explicativo del
LLECE.
1.4. Trabajos de la Direccin de Evaluacin de Escuelas
Trabajos ya difundidos
El objeto de estudio de esta rea del INEE se ha precisado como el conjunto de recursos de que disponen los centros escolares, as como los procesos que
tienen lugar en su seno, tanto en el interior de las
aulas procesos de carcter predominantemente
pedaggico como en el plantel como tal, o sea
los diversos procesos de gestin escolar.
En 2003, el rea produjo un conjunto de instrumentos para la evaluacin de diferentes aspectos
de su objeto de estudio, como sigue:
Evaluacin de la Participacin de los Padres de Familia en las Escuelas Primarias. Manuel de aplicacin de los cuestionarios para padres de familia y
profesores. Yuriko Teresa Bentez Ros.
Evaluacin de la Utilidad de las Recomendaciones
del Libro para el Maestro. Asignatura de Ciencias
Naturales 6 Grado. Manual para el uso y aplicacin de instrumentos. Alma Elena Figueroa Rubalcava.
Evaluacin de la Utilizacin Didctica de los Programas de Televisin de Telesecundaria Manual
para aplicar el cuestionario de autoevaluacin
para profesores. Norma Isabel Medina Mayagoitia.
Evaluacin del Funcionamiento General de la Escuela. Manual para el Uso y Aplicacin de Instrumentos. Alma Elena Figueroa Rubalcava.
Evaluacin del Proyecto Escolar. Cuestionario para
directores y profesores y manual para su aplicacin. Victoria Eugenia Gutirrez Marfileo.
Autoevaluacin de la Prctica Docente para Profesores de Educacin Primaria. Manual para la aplicacin del cuestionario. Gabriela Ramos S., Berenice Ponce O. y Adriana M. Orozco.
Batera de Instrumentos para Evaluar las Funciones del Director de Escuela Primaria Manual,
cuestionarios y concentrados. Mara Antonieta
Aguilera G.
Batera de Instrumentos para la Evaluacin del Clima Escolar en Escuelas Primarias. Victoria Eugenia
Gutirrez Marfileo.
Batera de Instrumentos para la Evaluacin y la Autoevaluacin del Desempeo de los Agentes Educativos de Escuelas Primarias. Manual para su uso
y aplicacin. Guadalupe Ruiz Cuellar.

11

Los estudios terminados y difundidos por el rea


son los siguientes:
Prcticas docentes para el desarrollo de la comprensin lectora en primaria.
Este estudio ofrece informacin representativa a
nivel nacional y por estratos sobre algunos rasgos del perfil personal y profesional de los docentes, sus condiciones de trabajo y las prcticas
que llevan a cabo para desarrollar la comprensin lectora entre sus alumnos.
Se busca entender la forma en que las variables
del perfil de los docentes, las condiciones de las
escuelas y las caractersticas de los alumnos influyen en las prcticas. Ofrece a los tomadores de
decisiones informacin til sobre las medidas de
poltica educativa que pueden ser ms efectivas
para mejorar el quehacer de los docentes en las
aulas.
El trabajo muestra la comprensin que tiene
el INEE sobre la calidad del sistema educativo,
como algo que no se puede juzgar solamente
a partir de los resultados de aprendizaje que
alcanzan los escolares. Si bien este elemento es
fundamental, es importante reiterar que la calidad incluye otras dimensiones, las cuales tienen
que ver con las caractersticas, organizacin y
funcionamiento de las escuelas, as como con el
desempeo de sus principales actores: los maestros.
Infraestructura escolar en las primarias y secundarias de Mxico.
El estudio de los recursos humanos y materiales
de las escuelas, sus condiciones organizativas y
los procesos que tienen lugar en su interior son
fundamentales para valorar las condiciones de
la oferta educativa; los hallazgos en este mbito pueden contribuir a la toma de decisiones y
a la formulacin de polticas, sustentadas en informacin vlida y confiable sobre los recursos y
procesos de las escuelas que integran el sistema
educativo.
Este reporte es producto de un anlisis de la informacin sobre la infraestructura y el equipamiento escolar de escuelas primarias y secundarias, que se obtuvo en el marco del operativo
Excale 2005, mediante la aplicacin de una Gua
de Cotejo de Recursos Materiales en las escuelas de
educacin bsica. El documento retoma esta informacin y la sistematiza para dar cuenta de varios elementos que conforman la infraestructura
y el equipamiento existentes en las escuelas de
ambos niveles. Asimismo, incorpora informacin
proveniente de otras fuentes, como el Consejo

Coleccin Cuadernos de Investigacin

12
Nacional de Poblacin (Conapo) y otras bases de
datos del propio INEE para contextualizar los resultados encontrados. Los resultados son representativos a nivel nacional y por estratos.
Disciplina, violencia y consumo de sustancias nocivas a la salud en escuelas primarias y secundarias
en Mxico.
Los datos presentados en este trabajo provienen
de acercamientos complementarios al tema en
cuestin. Uno de estos acercamientos, de gran
escala, recupera la informacin obtenida a travs
de los cuestionarios de contexto aplicados en
2005 a alumnos y docentes de primaria y secundaria, junto con los Exmenes de la Calidad y el
Logro Educativos (Excale).
El otro acercamiento tuvo un enfoque cualitativo; su muestra estuvo constituida por veinte
escuelas de las modalidades pblicas en que se
ofrece este nivel educativo: secundarias Generales, Tcnicas y Telesecundarias. El objetivo principal del estudio fue describir estos distintos tipos
de escuelas en varias dimensiones relativas a su
organizacin, funcionamiento y las problemticas que enfrentan. En este caso la informacin
proviene fundamentalmente de entrevistas a
alumnos, docentes y directivos de las secundarias estudiadas.
El anlisis de la violencia, el consumo de alcohol
y tabaco en las escuelas, as como de algunos
rasgos de la disciplina aplicada a su interior, tiene un carcter fundamentalmente exploratorio
en ambos acercamientos.
Trabajos en proceso
Estudio Cualitativo en Escuelas Secundarias de
Mxico
El rea elabora varios reportes derivados de un
estudio realizado en 20 secundarias pblicas de
cinco entidades federativas, cuyo objetivo general fue desarrollar desde una perspectiva cualitativa un diagnstico de la situacin de escuelas de
diverso tipo de Mxico en las distintas dimensiones
que las caracterizan como unidades organizacionales, atendiendo tanto a los recursos como a los
resultados escolares y poniendo especial nfasis en
los procesos escolares y de aula. Estn en proceso
de elaboracin un reporte general y varios que
desarrollan temas particulares:
Los procesos escolares en veinte escuelas secundarias de Mxico desde la perspectiva de la
eficacia escolar. Un estudio cualitativo.

Coleccin Cuadernos de Investigacin

Perfiles de los actores y caractersticas de escuelas secundarias de Mxico.


Organizacin y funcionamiento escolar en
escuelas secundarias mexicanas. La visin de
profesores, alumnos y padres de familia.
La funcin directiva desde la perspectiva de
la eficacia escolar en escuelas secundarias de
Mxico. Una aproximacin cualitativa.
El clima escolar en secundaria.
Cmo participan los padres de familia en las
escuelas secundarias en Mxico?
Un acercamiento a la prctica docente en las
asignaturas de Espaol y Matemticas en secundaria.
1.5. Trabajos de la Direccin de Indicadores Educativos
Trabajos ya difundidos
La principal tarea de la Direccin de Indicadores es
el desarrollo y mantenimiento de un Sistema de Indicadores que apoyen la evaluacin de la calidad de
la educacin bsica y media superior a nivel nacional y de las entidades federativas.
Los avances del sistema se plasman anualmente
en la publicacin Panorama Educativo de Mxico. Indicadores del Sistema Educativo Nacional. Los indicadores ofrecen una visin sinttica y comprensiva del
sistema educativo nacional, y son presentados siguiendo un esquema organizativo que comprende
cinco grandes apartados: Contexto Social, Recursos
en el Sistema, Acceso y trayectoria, Procesos educativos y gestin y Resultados Educativos. La entrada a
los indicadores es precedida por un apartado introductorio que dimensiona la estructura del sistema
educativo a nivel nacional; y al final se ofrece una
seleccin de los indicadores presentados en el cuerpo principal, para cada una de las entidades federativas. Hasta ahora han aparecido cuatro anuarios:
Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2003.
Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2004.
Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2005.
Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2006.
Adems de su propio sistema de indicadores,
el INEE ha colaborado con la Unidad de Planeacin
y Evaluacin de Polticas Educativas (UPEPE), de la
Secretara de Educacin Pblica, para desarrollar un
sistema conjunto, que cubra todos los tipos educa-

El INEE y la Investigacin Educativa


tivos. De ese esfuerzo conjunto se han derivado dos
productos: un primer volumen conjunto de indicadores sobre la educacin bsica, y un documento
que presenta una planeacin para el desarrollo del
conjunto del sistema:
Indicadores del Sistema Educativo Nacional, 2005.
Plan de Desarrollo del Sistema Nacional de Indicadores Educativos de Mxico.
Trabajos en proceso
Adems del volumen 2007 del anuario de indicadores del Instituto, estn en proceso de publicacin
dos obras ms, de carcter metodolgico, fruto del
trabajo de desarrollo del sistema de indicadores
efectuado de 2005 a 2007. Los ttulos respectivos
son:
Panorama Educativo de Mxico. Indicadores del
Sistema Educativo Nacional 2007.
Avance y perspectivas del sistema nacional de indicadores educativos.
Memoria del seminario internacional de indicadores educativos.
Adems de lo anterior, la Direccin de Indicadores Educativos ha emprendido varios proyectos de
investigacin, de carcter metodolgico, para sustentar el diseo de nuevos indicadores:
Desarrollo de indicadores de habitabilidad educativa de las escuelas.
El proyecto contempla el desarrollo conceptual
y la medicin del constructo de calidad del ambiente fsico de los centros escolares y su entorno
ms cercano. La propuesta articula las nociones
de habitabilidad de los espacios fsicos proveniente de la arquitectura, con avances recientes
de la OCDE en torno a la calidad del ambiente
fsico de aulas y escuelas. El estudio persigue generalizar y sintetizar estadsticos de existencia de
infraestructura, en indicadores complejos que
incorporen tambin mediciones de las condiciones de las aulas, la escuela y su entorno cercano.
Desarrollo de indicadores sobre la pobreza educativa en los hogares.
Se propone disear indicadores que integren la
informacin sobre las carencias educativas de
los miembros del hogar. Los indicadores atienden simultneamente la amplitud y la severidad
de dichas carencias. La estrategia parte de la
propuesta de una norma educativa social basada en las garantas constitucionales y en la Ley
General de Educacin. Los indicadores propuestos miden la brecha en el cumplimiento de dicha
norma educativa.

13

Desarrollo de indicadores sobre el avance escolar


de los alumnos en educacin bsica.
El estudio busca desarrollar indicadores acerca
de las trayectorias escolares de los alumnos, que
superen las limitaciones de los indicadores tradicionales construidos con informacin transversal. En particular se construyen indicadores de
cohortes escolares que dan cuenta de las probabilidades que tienen los alumnos de seguir trayectorias normativas ideales.
Estratificacin de las escuelas urbanas.
El trabajo busca distinguir escuelas urbanas
asentadas en zonas de marginacin y pobreza a
partir de variables del propio centro escolar, as
como de variables sociodemogrficas y de marginacin y pobreza de la zona de asentamiento. Esta estratificacin permitir al INEE realizar
mediciones ms adecuadas del logro educativo,
con muestras que consideren la heterogeneidad
de las escuelas urbanas.
1.6. Otros trabajos
Cuadernos de Investigacin.
Esta serie comprende documentos de carcter
tcnico, dirigidos esencialmente a un pblico especializado, de investigadores y evaluadores, por lo
que se publica con tirajes reducidos o slo en forma
electrnica. Se trata de textos de menor extensin,
en ocasiones derivados de algunos de los trabajos
ms amplios mencionados en los apartados anteriores. Incluyendo este mismo nmero, la serie comprende hasta ahora 28 ttulos, como sigue:
1) Los Resultados de las Pruebas PISA. Felipe Martnez Rizo.
2) Factores que influyen en el logro acadmico de
los estudiantes de primaria en Mxico, 19982002. Carlos Muoz Izquierdo.
3) Tres estudios sobre Determinantes Sociales del
Rendimiento Escolar. Tabar Fernndez.
4) Tercer Estudio Internacional de Matemticas y
Ciencias Naturales (TIMSS): Resultados en Mxico en 1995 y 2000. Eduardo Backhoff.
5) Estudio sobre las desigualdades educativas en
Mxico: la incidencia de la escuela en el desempeo acadmico de los alumnos y el rol de los
docentes. Ernesto Trevio Villarreal y Germn I.
Trevio G.
6) Evaluacin inicial de los procesos de calibracin
y equiparacin de las pruebas del proyecto de Estndares Nacionales. Antonio Magri.
7) Factores asociados al aprendizaje del lenguaje y las matemticas en 13 estados de Mxico. Rubn Cervini.

Coleccin Cuadernos de Investigacin

14
8)
9)
10)
11)
12)
13)
14)
15)
16)
17)
18)
19)

20)

21)
22)

23)
24)

25)

Marginacin y rezago educativo en Mxico. Jos


Luis vila.
Pruebas y rendicin de cuentas. Felipe Martnez
Rizo.
Acciones de evaluacin en las instituciones pblicas de Educacin Media Superior. Roco Antonio
Ros y Elizabeth Garca Flores.
El Proyecto PISA: su aplicacin en Mxico. Rafael
Vidal Uribe, Ma. Antonieta Daz Gutirrez y Javier de Jess Noyola del Ro.
La comparabilidad de los resultados de las pruebas nacionales de lectura y matemticas, 19982003. Felipe Martnez Rizo.
Panorama educativo 2004. La edicin 2004 de
Education at a Glance de la OCDE. Felipe Martnez Rizo.
El diseo de sistemas de indicadores educativos:
consideraciones terico-metodolgicas. Felipe
Martnez Rizo.
Sobre la difusin de resultados por escuela. Felipe Martnez Rizo.
La telesecundaria mexicana: desarrollo y problemtica actual. Felipe Martnez Rizo.
Exmenes de la Calidad y el Logro Educativos (Excale): nueva generacin de pruebas nacionales.
Eduardo Backhoff Escudero.
La Educacin Mexicana en Education at a Glance
2005. Felipe Martnez Rizo.
Metodologa para evaluar la calidad de las traducciones de las pruebas internacionales: el caso
mexicano de TIMSS 1995. Guillermo Solano-Flores, Eduardo Backhoff Escudero y Luis ngel
Contreras-Nio.
Acerca de la Validez de los Exmenes de la Calidad
y el Logro Educativos (Excale). Mara Araceli RuizPrimo, Jess M. Jornet Meli y Eduardo
Backhoff Escudero.
Pruebas de seleccin y pruebas para evaluar escuelas: nuevas consideraciones sobre su uso y la
difusin de sus resultados. Felipe Martnez Rizo.
Promedio de Escolaridad y Nivel de Desigualdad
de Aos de Escolaridad en las entidades y municipios de la Repblica Mexicana. Adn Moiss
Garca Medina, con la colaboracin de Edna
Huerta Velsquez.
Las primarias comunitarias y su desempeo. Felipe Martnez Rizo.
Estndares tcnicos para asegurar la calidad en
los levantamientos de datos. Juan Carlos Camacho Gmez, Jorge Sotelo Cortez y Mara Luz
Zaraza Martnez.
Autorregulacin del aprendizaje de las matemticas en estudiantes mexicanos. Direccin de

Coleccin Cuadernos de Investigacin

Relaciones Internacionales y Proyectos Especiales.


26) Anlisis estatal de los resultados de Mxico PISA
2003. Ileana Brodziak de los Reyes.
27) La educacin en Mxico y Corea del Sur. Felipe
Martnez Rizo.
28) El INEE y la investigacin educativa. Felipe Martnez Rizo.
Los Temas de la Evaluacin.
Mientras ms y mejor se difundan los resultados,
todos los actores del proceso educativo (autoridades, maestros, alumnos y padres de familia) tendrn
ms elementos para tomar las medidas adecuadas a
fin de conseguir que los nios y jvenes de Mxico
cuenten con una educacin de buena calidad. Por
ello el INEE desarrolla un programa para difundir los
resultados de sus estudios. Parte de este esfuerzo es
la coleccin de folletos Los temas de la evaluacin,
dirigida a todo el pblico, que busca presentar los
resultados de los trabajos del INEE de una manera
clara y sencilla. Hasta la fecha se han publicado 22
folletos:
1) La educacin indgena: el gran reto.
2) Cmo est la educacin secundaria en Mxico?
3) Qu es la calidad educativa?
4) Cmo estn en lectura nuestros estudiantes
de 15 aos?
5) Y en habilidades matemticas cmo estamos?
6) Qu es el INEE? Sus fines y estrategias al servicio de la sociedad.
7) Los alumnos evaluados por el INEE en las pruebas nacionales Cmo se obtienen las muestras?
8) Excale: Exmenes de la calidad y el logro educativos. Proceso de construccin y caractersticas bsicas.
9) Preguntas y sentido de las respuestas en las
pruebas nacionales.
10) Resultados de las pruebas nacionales de comprensin lectora y matemticas por modalidad
educativa.
11) Qu resultados obtuvieron las entidades federativas en las pruebas nacionales de comprensin lectora y matemticas?
12) Resultados de logro educativo, factores que
explican los resultados.
13) Mxico y su sistema educativo.
14) El sistema educativo mexicano en el contexto
internacional.
15) El Sistema Educativo Nacional y su contexto.
16) La educacin bsica mexicana entre 2000 y 2005.

El INEE y la Investigacin Educativa


17) Breve recorrido por la evaluacin de la educacin bsica en Mxico.
18) Avances de la evaluacin educativa en Mxico.
19) Perspectivas para el futuro de la evaluacin
educativa en Mxico.

15

20) La difusin de los resultados de las evaluaciones.


21) Las primarias comunitarias.
22) El contexto social: eje para evaluar el proceso
educativo.

Coleccin Cuadernos de Investigacin

El INEE y la Investigacin Educativa

17

2. Recursos para investigadores


2.1. Manuales tcnicos y protocolos
La visin que tiene el INEE del trabajo que le corresponde realizar lo considera como una tarea de carcter eminentemente tcnico. Lo anterior no significa
desconocer las profundas implicaciones polticas y
sociales de la evaluacin educativa, pero s que para
que la evaluacin pueda hacer contribuciones relevantes a la definicin de polticas, es indispensable
que se distinga por su validez y confiabilidad y, en
general, por su solidez tcnica.
Desde 2004 el INEE defini un Modelo de Calidad que subraya la idea anterior: si las evaluaciones
no se hacen bien, sus resultados no podrn ser una
base slida para las decisiones de poltica, ni para retroalimentar a las escuelas y los maestros.
El documento en que se presenta el Modelo de
Calidad aade:
La buena calidad de las evaluaciones no puede
ser simplemente el resultado de un buen propsito,
sin que se pongan los medios necesarios para alcanzarlo. Para que la pretensin de alcanzar los ms
altos niveles de calidad sea creble, el INEE debe precisar la manera en que tratar de llevar a cabo tan
compleja tarea
Alcanzar altos niveles de calidad tcnica no
puede ser, pues, el resultado de un esfuerzo lleno
de buena voluntad sin guas precisas; tampoco es
el producto mgico de ingredientes misteriosos
que no pueden definirse. La calidad slo puede ser
el fruto de un trabajo intenso y disciplinado, que se
apegue estrictamente a estndares decantados por
la experiencia de las mejores prcticas en el campo.
El Modelo de Calidad comprende tres componentes que deben definirse con precisin:
Criterios de calidad, o estndares, a cumplir en
cada paso de las evaluaciones.
Procedimientos claros a seguir para asegurar
que se cumplan los estndares.
Instancias que supervisen la operacin de procedimientos y el cumplimiento de estndares.

Todas las evaluaciones del INEE debern cubrir


estndares de calidad de validez, confiabilidad,
comparabilidad y equidad. Los cuatro aspectos,
desde luego, se aplican de manera distinta a los diversos tipos de evaluaciones, como pruebas de rendimiento, indicadores o evaluaciones de procesos;
por ello el Modelo de Calidad necesita desarrollarse
mediante dos instrumentos:
Manuales Tcnicos en los que se describan con
detalle los criterios de calidad que debern
respetarse y los procedimientos que debern
seguirse en cada paso de cada evaluacin, as
como los controles internos y externos que vigilarn que los procedimientos se sigan y los criterios de calidad se respeten.
Reportes Tcnicos que den cuenta de la manera
y medida en que se cumplieron los criterios y se
siguieron los procedimientos, de manera que las
instancias internas y externas de control puedan
verificarlo.
Por otra parte, el principio de transparencia de
la informacin pblica, que tanta importancia tiene
en una sociedad democrtica, y al que el INEE se adhiere sin reticencia alguna, se extiende no slo a los
resultados de las evaluaciones que realice, sino tambin a la metodologa en que se base y a los instrumentos y procedimientos que utilice para obtener
esos resultados. Por ello, y de conformidad con las
mejores prcticas internacionales, el Instituto pone
tambin al alcance de todos los interesados los manuales tcnicos que ha desarrollado.
Estn disponibles los documentos relativos los
Exmenes para la Calidad y el Logro Educativos
(Excale). Los manuales se desarrollan con base en
el trabajo colegiado de expertos nacionales e internacionales, y muestran paso a paso el proceso de
elaboracin de los Excale desde su planeacin hasta
su aplicacin y la codificacin de los resultados. Se
presentan tambin protocolos que establecen los
criterios para calificar, de manera objetiva, las distintas versiones de las pruebas Excale.

Coleccin Cuadernos de Investigacin

18
Manual de Funciones de la Direccin de Pruebas y
Medicin.
Manual de Procedimientos de la Direccin de Pruebas y Medicin.
Plan General de Evaluacin del Aprendizaje. Proyectos Nacionales e Internacionales.
Manual Tcnico. Diseo de Exmenes de la Calidad
y el Logro Educativos.
Manual Tcnico. Especificaciones de Reactivos.
Manual Tcnico. Construccin de Reactivos.
Manual Tcnico. Validacin de Reactivos.
Manual Tcnico. Muestreo Poblacional.
Manual tcnico. Establecimiento de niveles de
competencia.
Protocolo de calificacin. Reactivos de respuesta
construida de Espaol: Expresin Escrita 6 de primaria y 3 de secundaria.
Protocolo de calificacin. Reactivos de respuesta
construida de Espaol: Expresin Escrita 3 de primaria.
Protocolo de calificacin. Reactivos de respuesta
construida de Ciencias Sociales 3 de primaria.
Manual Tcnico. Especificaciones de Reactivos.
Educacin Preescolar.
Manual Tcnico. Construccin de Reactivos. Educacin Preescolar.
Protocolo de evaluacin. Sistema de codificacin
de errores ortogrficos.
2.2. Biblioteca y Hemeroteca del INEE
Dada la naturaleza del trabajo acadmico, para el
personal de un organismo dedicado a la investigacin es fundamental la existencia de un buen centro
de documentacin, con libros (biblioteca) y publicaciones peridicas (hemeroteca). En la actualidad es
fundamental el acceso a las fuentes de informacin
de tipo electrnico, sin duda, pero los acervos que
utilizan soportes convencionales siguen siendo fundamentales.
Por ello, y en forma congruente con su naturaleza, desde sus inicios el INEE ha dado gran importancia a la formacin de una biblioteca y una hemeroteca de dimensiones modestas pero de gran calidad
por su alto nivel de especializacin.
En la actualidad el Centro de Documentacin del
Instituto cuenta con un acervo de ms de cuatro mil
libros, incluyendo obras de referencia fundamentales, y recibe regularmente ms de 70 ttulos de
publicaciones peridicas, adems de tener acceso a
varios recursos electrnicos. Los nmeros de las revistas son ya ms de 1,200 que, sumados a los libros
y otros materiales, arrojan un total de ms de cinco

Coleccin Cuadernos de Investigacin

mil quinientos documentos. El acervo est distribuido en las dos sedes del INEE, en las ciudades de
Mxico y Aguascalientes.
El Centro de Documentacin del Instituto es
particularmente rico, desde luego, en obras de
evaluacin educativa y psicometra, as como en
materiales curriculares que son fundamentales
para la elaboracin de las pruebas de rendimiento. Destacan tambin las obras de estadstica,
especialmente las relacionadas con anlisis de
datos de todo tipo. Hay tambin obras de educacin, psicologa, sociologa, economa, lingstica,
filosofa, computacin, comunicacin y administracin.
Ya se ha mencionado el especial valor de la seccin de referencia, que incluye obras como la International Encyclopedia of Social & Behavioral Sciences,
International Encyclopedia of Education, Encyclopedia of Educational Research, Encyclopedia of Biostatistics, Encyclopedia of Evaluation, Sage Encyclopedia
of Social Science Research Mwethods, los sucesivos
volmenes de la obra Educational Measurement, y
diversos handbooks, entre otras obras de este importante subgrupo de una buena biblioteca acadmica.
En septiembre de 2007 el acervo estaba conformado como sigue:
Materiales
Libros
CD ROM

Mxico

Ags.

Total

2,622

1,459

4,081

95

89

184

Disquetes

DVD

Cajitas c/tarjetas

Tesis

11

Videocasetes
Nmeros de
publicaciones
peridicas
CD-Rom Revistas

15

15

1,024

183

1,207

Total

3,754

1,765

5,519

Porcentaje

68 %

32 %

100 %

Por lo que se refiere a las publicaciones seriadas,


se reciben por suscripcin 47 ttulos, entre los que
se incluyen las revistas internacionales ms importantes en el campo de la evaluacin educativa. Por
donacin se reciben 26 ttulos ms. La tabla siguiente muestra todos los ttulos que se reciben en orden
alfabtico, as como la fecha a partir de la cual se recibe cada uno.

El INEE y la Investigacin Educativa


Ttulos de publicaciones seriadas
que se reciben por suscripcin
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.

Ttulo
American Educational Research Journal
Applied Measurement in Education
Applied Psychological Measurement
Assessment in Education
British Journal of Mathematical and
Statistical Psychology
Bordn
Cero en Conducta
Digest of Education Statistics
Economics of Education Review
Educational Assessment
Educational and Psychological Measurement
Educational Evaluation and Policy
Analysis
Educational Measurement
Educational Research and Evaluation
Evaluation
Evaluation and Program Planning
Evaluation Review
Harvard Education Letter
Harvard Educational Review
Higher Education Management and
Policy
International Journal of Testing
Journal of Economic Literature
Journal of Educational and Behavioral
Statistics
Journal of Educational Measurement
Journal of Population Economics
Main Science and Technology Indicators
Measurement
Mental Measurements Yearbook
Multivariate Behavioral Research
National Education Goals
New Directions for Evaluation

32. PEB Exchange


33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.

Psychological Methods
Psychometrika
Qualitative Inquiry
Quality and Quantity
Reports of the National Center for
Science Education
Review of educational Research
Review of Research in Education
School Effectiveness and School Improvement
Sociological Methodology
Sociological Methods& Research
Structural Equation Modeling
Studies in Educational Evaluation
The American Economic Review

46. The Condition of Education


47. The Journal of Economic Perspectives

Vigencia
2003200320032007200320062000200520032002200320032003200420052005200320032003200520032003-

Ttulos de publicaciones adquiridas


a travs de otros medios
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23

2003-

24

20032003-

25
26

2006200320052003200520052005,
200620032003200320032003200320032005200320032003200320032003,
2005,
20072003-

19

Ttulo
Apuntes del Instituto de Evaluacin
Boletn Ceneval
Carta Informativa
Confluencia
Cooperacin Acadmica
Decisio
Educacin
Educacin 2001
Educacin Productividad y Empleo
(Boletn del FMED)
Educar
Educare
Enlace Educativo
Expresiones
Horizontes
Innovacin, Tecnologa y Negocios
(Boletn del FMED)
Investigacin y Ciencia
La huella del Conafe
Letra Viva
Matemticas para Todos
Review of Assessment Activities
Revista de la Educacin Superior
Revista de Educacin
Revista Interamericana de Educacin
de Adultos
Revista Mexicana de Investigacin
Educativa
Visin Educativa Aguascalientes
Visin Educativa Sonora

Vigencia
2006200320052003200320032004199720052002200320042005200320052003200620052005200620042006200420022005
2003

Tambin se cuenta con la suscripcin a cuatro


bases de datos de la OCDE desde 2005.

1.

2.
3.

4.

Ttulo
Higher Education Management and
Policy.
SourceOECD Education and Skills.
SourceOECD Science and Information
Technology
SourceOECD Education Statistics

Vigencia
2005200520052005-

El catlogo del Centro de Documentacin del


INEE, tanto en lo relativo a libros como a publicaciones peridicas, puede consultarse en lnea, a travs
de la pgina Web del Instituto. Se pueden hacer
consultas por autor ttulo y tema de todos los libros
del acervo; en lo relativo a publicaciones peridicas,
pueden verse las pginas de contenido de cada uno
de los nmeros de las revistas que se han recibido
desde el ao 2003.
2.3. Bases de datos en lnea
Las distintas evaluaciones que lleva a cabo el INEE
implican la realizacin de importantes operativos

Coleccin Cuadernos de Investigacin

20
de campo, con la aplicacin de pruebas de rendimiento y otros instrumentos a muestras de sujetos
de todo el pas.
Con distintos grados de precisin, segn las caractersticas de la poblacin objetivo y del propsito
de cada evaluacin, las muestras son diseadas de
manera que permitan hacer anlisis a nivel nacional,
estatal y por tipo de servicio. Los instrumentos utilizados, por otra parte, no se reducen a las pruebas
de rendimiento, sino que incluyen cuestionarios
para ser respondidos por los alumnos, los maestros
y los directores de escuela, as como guas de cotejo
y otros. En conjunto, se recoge informacin sobre
decenas de variables de importancia para la evaluacin de la calidad del sistema educativo nacional,
entendida en un sentido muy amplio.
El INEE proceso la informacin recolectada en
sus operativos, y realiza diversos anlisis, que sirven de base para la elaboracin de los informes en
que se plasman los resultados de las evaluaciones.
Es claro, sin embargo, que la informacin es tan
abundante y rica que ningn anlisis puede pretender agotarla. Es tambin posible que anlisis
hechos por otros estudiosos, an sobre los mismos
datos y con los mismos enfoques, lleguen a conclusiones diferentes.
Por ello las bases de datos del INEE, con toda la
informacin necesaria para su utilizacin, estn disponibles para que las utilice cualquier investigador
ajeno al Instituto que quiera hacer sus propios anlisis de la informacin que contienen.
En los siguientes puntos se describen las bases actualmente disponibles. La nica informacin
que no se incluye en ellas, de conformidad con las
normas de la Ley de Transparencia y Acceso a la Informacin Pblica Gubernamental, es la que tiene
que ver con datos confidenciales. Se aade que los

Proyecto
Estndares
Nacionales
2003

Ciclo
escolar
evaluado
2002-2003

Encuestado

Alumno

Alumno
Estndares
Nacionales
2004

2003-2004

Docentes
Instructores
comunitarios
Directores

Coleccin Cuadernos de Investigacin

investigadores no necesitan autorizacin especial


alguna para utilizar las bases; el INEE solicita a los
que lo hagan que den el crdito correspondiente al
Instituto en los eventuales trabajos que se basen en
las bases mencionadas, y que hagan llegar un ejemplar de los mismos.
Bases derivadas de la aplicacin de las pruebas
Excale
Las bases en general corresponden a diseos muestrales de dos etapas en donde primero se seleccionan a las escuelas y posteriormente a los alumnos.
Cada una, contiene datos de identificacin que permiten ubicar a las alumnos evaluados por entidad
federativa y por modalidad educativa, turno de la
escuela, etc, omitiendo aquellos datos que puedan
identificar a la escuela.
Cada una de las bases contiene el nombre de las
variables incluidas as como el significado de cada
uno de los valores que aparecen en ellas.
Las bases correspondientes al logro escolar contienen las respuestas de los alumnos calificadas:
cero para fallo y uno para acierto. Adems, se incorporan las medidas de logro en una escala de 200 a
800 unidades obtenida mediante el modelo de Rasch de la Teora de Respuesta al tem
Para las bases de los Excale en donde se han aplicado tcnicas ms avanzadas de anlisis, se incorporan adicionalmente los ponderadores para el clculo
de errores mediante una tcnica de reemuestreo lo
que permite reproducir los resultados que ha generado el INEE.
La bases estn disponibles en formato SAV propio del paquete estadstico SPSS.
En la tabla siguiente se describe en particular el
contenido de cada base.

Aspecto evaluado
Logro de Comprensin lectora y
Matemticas
Cuestionario de
contexto
Logro de Comprensin lectora y
Matemticas
Cuestionario de
contexto
Cuestionario de
contexto
Cuestionario de
contexto

Grado/Nivel
5 Primaria
6 Primaria
1 Secundaria
2 Secundaria
3 Secundaria

6 Primaria
3 Secundaria

Para obtener resultados al nivel

Disponibilidad

Nacional
Por modalidad
educativa
Entidad federativa
Entidad-modalidad

Liberada

Nacional
Por modalidad
educativa
Entidad federativa
Entidad-modalidad

Liberada

El INEE y la Investigacin Educativa

Comparativo
2000-2005

1999-2000
Alumno

Logro de Comprensin lectora y


Matemticas

6 Primaria
3 Secundaria

2004-2005

Alumno
Excale 06

2004-2005
Docentes
Directores

Alumno
Excale09

2004-2005
Docentes
Directores

Alumno
Excale 03

2005-2006

Docentes
Directores
Ortografa

2004-2006

Alumno

Alumno
Excale 00

2006-2007
Docentes
Directores
Alumno

Excale 06

2006-2007

Docentes
Directores

Logro de Espaol
(Comprensin
lectora, Reflexin
sobre la lengua y
Escritura) y Matemticas
6 Primaria
Cuestionario de
contexto
Cuestionario de
contexto
Cuestionario de
contexto
Logro de Espaol
(Comprensin
lectora, Reflexin
sobre la lengua y
Escritura) y Matemticas
6 Primaria
Cuestionario de
contexto
Cuestionario de
contexto
Cuestionario de
contexto
Logro de Espaol
(Comprensin
lectora, reflexin
sobre la lengua y
escritura), Matemticas, Ciencias Naturales, Educacin
3 Primaria
Cvica, Historia,
Geografa
Cuestionario de
contexto
Cuestionario de
contexto
Cuestionario de
contexto
3 Primaria
Logro en Ortografa 6 Primaria
3 Secundaria
Logro de Lenguaje
y Comunicacin
y Pensamiento
matemtico
Cuestionario de
3 Preescolar
contexto
Cuestionario de
contexto
Cuestionario de
contexto
Logro de Espaol y
Matemticas
Cuestionario de
contexto
6 Primaria
Cuestionario de
contexto
Cuestionario de
contexto

Nacional
Por modalidad
educativa
Entidad federativa
Entidad-modalidad
Nacional
Por modalidad
educativa

21

Liberada

Liberada

Nacional
Por modalidad
educativa
Entidad federativa
Entidad-modalidad

Liberada

Nacional
Por modalidad
educativa
Entidad federativa
Entidad-modalidad

Liberada

Nacional
Por modalidad
educativa
Entidad federativa
Entidad-modalidad

Por liberarse en
octubre de 2007

Nacional
Por modalidad
educativa

Por liberarse en
2008

Nacional
Por modalidad
educativa

Por liberarse en
2008

Nacional
Por modalidad
educativa

Por liberarse en
2008

Coleccin Cuadernos de Investigacin

22
Bases derivadas de la aplicacin de las pruebas
PISA
Resultados de las pruebas
La base de datos disponible en el portal del INEE
corresponde a PISA 2003. La informacin se proporciona en formato de texto ( txt ) e incluye los
desempeos por alumno y por plantel educativo en los tres dominios de la evaluacin matemticas, lectura y ciencias. Junto con las bases,
se proporcionan los Archivos de Control con las
etiquetas y descripcin de las variables para los
programas SPSS y SAS .
Adems de las bases de datos, se incluyen los dos
cuestionarios elaborados por PISA y aplicados en
Mxico para encontrar factores contextuales familiares, sociales y del mbito escolar, que inciden en el aprendizaje y desarrollo de habilidades
de los estudiantes:
Cuestionario para el alumno. (idioma: espaol;
formato: doc )
Cuestionario para la escuela. (idioma: espaol;
formato: doc )
Tambin se proporcionan dos documentos tcnicos que son necesarios para comprender la codificacin y estructura de las bases de datos y el
diseo terico del estudio:
Reporte Tcnico de PISA 2003 (idioma: ingls; formato: pdf )
Manual de la base de datos de PISA 2003 (idioma:
ingls; formato: pdf )
Bases derivadas de los estudios de la Direccin
de Evaluacin de Escuelas
Bases del Estudio de Infraestructura Escolar
de primarias y secundarias de Mxico
Las bases de datos de primaria y secundaria contienen la informacin recabada por un observador externo a la escuela mediante una Gua de cotejo de
recursos materiales. Los datos se recogieron en el
operativo de los Excale y sus respectivos cuestionarios de contexto durante el ciclo 2004-2005. Ambas
bases incluyen todas las variables sobre las que se
obtuvo informacin a travs de la aplicacin de la
Gua y los ndices construidos mediante la combinacin de algunas de las variables originales.
Base de datos del nivel primaria
Para el nivel de primaria se tiene informacin de
2753 planteles que permite tener representatividad de los siguientes dominios: urbana pblica,
rural pblica, educacin indgena, cursos comunitarios y privada.
Se destacan a continuacin los ndices que se
reportan en el informe Infraestructura escolar en

Coleccin Cuadernos de Investigacin

primarias y secundarias, as como las variables


consideradas en su construccin; cabe reiterar,
sin embargo, que la base de datos contiene informacin sobre todas las variables abordadas
en la Gua aplicada, si bien varias de ellas presentan tasas de no respuesta elevadas, lo que afecta la representatividad de la informacin y esto
debe considerarse en anlisis ulteriores.
Nombre del ndice

Variables
que lo integraron
Existencia de espacios Laboratorio o saln de cmputo
fsicos de apoyo a la
Biblioteca
enseanza
Sala de profesores
Saln de actividades artsticas
/ msica
Direccin
Tienda escolar, cooperativa,
Existencia de espacios cafetera
Almacn o bodega
administrativos y de
Patio de recreo
uso comn
reas verdes o jardines
Tipo de bao
Nombre del ndice
Variables que lo integraron
Mantiene bien pintados muros,
techos y fachada
Mantiene limpios muros,
techos y fachada
En su estructura, presenta cuarteadoras, fisuras o
indicadores visibles de que la
Mantenimiento y
construccin se encuentra en
conservacin de las
mal estado
instalaciones
Mantiene bien pintadas y funcionales la cancelera y puertas
Mantiene bien conservada la
vidriera (lminas de vidrio, de
cristal o plstico, transparentes
o translcidas, se encuentran
en buen estado)

Orden y limpieza del


plantel

Se encuentra ordenado
(mobiliario en su lugar, botes
de basura distribuidos en los
distintos espacios, etc.)
Se encuentra limpio al interior
(entrada, patio, espacios comunes, etc.)
Se encuentra limpio al exterior
(rea que lo circunda)
Mantiene limpios muros,
techos y fachada

El INEE y la Investigacin Educativa


Nombre del ndice

Ambiente agradable
del aula

Variables
que lo integraron
Mobiliario, equipo y materiales en su lugar (es un espacio
ordenado)
Condiciones de higiene adecuadas (limpio)
Muros, puertas y ventanas bien
pintados
Ambientacin de clase adecuada (se encuentran materiales didcticos y trabajos de
estudiantes, as como grficos
o alguna representacin del
desempeo de los alumnos en
los muros del aula)
Un pizarrn o pintarrn en buenas condiciones (bien pintado,
completo, etc.)

Mantenimiento y
conservacin de las
instalaciones

Variables
que lo integraron
Mantiene bien pintados muros, techos y fachada
En su estructura, presenta cuarteadoras, fisuras o
indicadores visibles de que la
construccin se encuentra en
mal estado
Mantiene bien pintadas y
funcionales la cancelera y
puertas
Mantiene bien conservada la
vidriera (lminas de vidrio, de
cristal o plstico, transparentes o translcidas, se encuentran en buen estado)

Orden y limpieza del


plantel

Se encuentra ordenado
(mobiliario en su lugar, botes
de basura distribuidos en los
distintos espacios, etc.)
Se encuentra limpio al interior
(entrada, patio, espacios comunes, etc.)
Se encuentra limpio al exterior
(rea que lo circunda)
Mantiene limpios muros,
techos y fachada

Ambiente agradable
del aula

Mobiliario, equipo y materiales en su lugar (es un espacio


ordenado)
Condiciones de higiene adecuadas (limpio)
Muros, puertas y ventanas bien
pintados
Ambientacin de clase adecuada (se encuentran materiales didcticos y trabajos de
estudiantes, as como grficos
o alguna representacin del
desempeo de los alumnos en
los muros del aula):
Pizarrn o pintarrn en buenas
condiciones (bien pintado,
completo, etc.)

Nombre del ndice

Base de datos del nivel secundaria


Tiene informacin de 2368 planteles que permiten tener representatividad de los estratos general, tcnica, telesecundaria y privada. Como en
primaria, se presentan ndices y variables; aplica
tambin lo sealado en cuanto a la prdida de
datos por omisin del aplicador.
Variables
que lo integraron
Direccin
Existencia de espacios de apoyo directi- Subdireccin
vo.-administrativo en rea secretarial
la escuela
rea de prefectura
Nombre del ndice

Existencia de espacios fsicos de apoyo


a la enseanza

Laboratorio o saln de cmputo


Laboratorio (s) de Fsica, Qumica y Biologa
Biblioteca
Saln de usos mltiples o aula
de medios

Tienda escolar, cooperativa,


Existencia de espacios cafetera
Canchas, espacios deportivos
fsicos para alimenExplanada o plaza
tacin, deporte y
esparcimiento
reas verdes o jardines
Patio

23

Adems, utilizando la informacin de los cuestionarios de contexto aplicados en el mismo


operativo en que se recogi la informacin sobre
infraestructura, se gener un ndice sobre el nivel
socioeconmico de los alumnos que se utiliz para
contextualizar los datos encontrados. Bajo la misma lgica de contextualizacin de los resultados,
se utiliz la propia informacin que se recab con
las diferentes versiones de la Gua de cotejo para
construir otro ndice ms que sintetizara estadsticamente los servicios bsicos de infraestructura
con que cuentan las escuelas. Finalmente, para

Coleccin Cuadernos de Investigacin

24
contextualizar a nivel de localidad, se recuper el
ndice de marginacin que elabora el Consejo Nacional de Poblacin (Conapo).
Base del estudio Violencia, disciplina y consumo de sustancias nocivas en primarias y
secundarias
Para el estudio se utilizaron cuatro bases de datos conformadas con la informacin levantada a
travs de los cuestionarios de contexto aplicados
en primaria y secundaria a profesores y alumnos
durante el operativo 2005 de Excale. Estas bases
contienen los datos correspondientes a todas las
variables contempladas por los cuestionarios,
aunque en el marco de este estudio slo se utilizaron aquellas directamente relacionadas con
los temas de inters (disciplina, violencia, consumo de sustancias) y con otros factores que se utilizaron en los anlisis de asociacin reportados
en el informe. Las bases proceden de muestras
amplias que tienen representatividad nacional y
por estrato excepto la de profesores de secundaria. La cantidad de profesores, alumnos y escuelas que representa se presenta en la siguiente
tabla.

indaga prcticamente lo mismo en relacin con


los temas abordados en el estudio; de ah que las
variables manejadas sean tambin iguales. En algunos casos cambia solamente la forma especfica de las preguntas formuladas.
Aunque como ya se sealaba las bases incluyen
toda la informacin de contexto obtenida y en
ese sentido son similares a las que ofrecer la
Direccin de Pruebas y Medicin del INEE, las
bases del estudio de violencia, disciplina y consumo de sustancias incluyen tambin los ndices
construidos mediante la tcnica de anlisis de
componentes principales. El cuadro que aparece
enseguida refiere las variables consideradas en
cada caso.
Nombre del
ndice
ndice de
participacin
de los alumnos
en actos de
violencia

Variables que la integran


Participacin en: peleas donde haya
habido golpes, dao a las instalaciones; robo de objetos o dinero a
compaeros, actos de intimidacin a
compaeros

Muestra de escuelas, alumnos y profesores


por modalidad o estrato de primaria y secundaria
Estrato o Modalidad

Escuela
N

Urbano Pblico
Rural Pblico
Educacin Indgena
Cursos Comunitarios
Privadas
Total

865
873
356
235
441
2,770

Generales
Tcnicas
Telesecundarias
Privadas
Total

566
544
751
536
2397

Alumnos
%

Primaria
31.2
21662
31.5
10716
12.9
4217
8.5
731
15.9
10532
100.0
47858
Secundaria
23.6
16600
22.7
16093
31.3
9720
22.4
9838
100.0
52251

Profesores
%

45.3
22.4
8.8
1.5
22.0
100.0

9857
5377
2288
235
4612
22369

44.1
24.0
10.2
1.1
20.6
100.0

31.8
30.8
18.6
18.8
100.0

2085
1744
1105
1237
6171

33.8
28.3
17.9
20.0
100.0

Fuente: Aguilera, Muoz y Orozco (2007). Disciplina, violencia y consumo de sustancias nocivas a la salud en escuelas primarias y
secundarias de Mxico. Mxico: INEE. Pg. 16

Bases de alumnos
Son dos bases, una para cada nivel, que presentan informacin de contexto de los alumnos de
sexto grado y tercero de secundaria que fueron
evaluados en las pruebas Excale. Ambas cuentan
con datos que tienen representatividad nacional
y por estrato. En los dos niveles educativos se

Coleccin Cuadernos de Investigacin

El INEE y la Investigacin Educativa


Nombre del
ndice

ndice de
victimizacin
(los alumnos
como vctimas
de violencia)

ndice de bienes materiales

Variables que la integran


Primaria: Vctima de robo o dinero
dentro de la escuela; vctima de burla
por los compaeros; vctima de dao
fsico por compaeros y miedo de ir a
la escuela.
Secundaria: Vctima de robo o dinero
dentro de la escuela; vctima de burla
por parte de los compaeros; vctima
de dao fsico por compaeros y
recibimiento de amenazas de compaeros.
Primaria: Nmero de cuartos que se
utilizan para dormir; existencia de
lnea telefnica; cantidad de automviles, refrigeradores, hornos de
microondas, lavadoras, televisores,
vidoecaseteras, reproductores de DVD
y computadoras.
Secundaria: mismos que en primaria,
excepto nmero de cuartos para
dormir.


Bases de profesores
Tambin son dos bases, una por cada nivel educativo. La de primaria integra datos de todos los
docentes de la escuela y todos los grados; los datos contenidos en ella tienen representatividad
nacional y por estrato, no as en secundaria, debido a que solamente presenta informacin de
los profesores de matemticas y espaol de los
grupos evaluados.
Aunque existe informacin de contexto muy
amplia, solamente se retoman 27 variables que
estn relacionadas con el tema del estudio y algunas caractersticas personales del docente y
de las escuelas donde laboran. Estas bases contienen adems los cuatro ndices que se construyeron a partir de algunas variables significativas
de las bases de datos originales. Las variaciones
por nivel en la integracin de estos ndices son
mnimas como se puede ver en el siguiente cuadro:
ndice

ndice de
violencia dentro
de la escuela

Variables que integra


Primaria: dao a instalaciones,
robo de objetos o dinero, peleas
donde haya habido golpes, robo
con violencia de objetos o dinero,
intimidacin a estudiantes, portacin de objetos punzocortantes
Secundaria: mismos que primaria,

ndice

25

Variables que integra

Primaria: Acciones que se presentan fuera de la escuela: portacin


y uso de armas de fuego, robo
ndice de violencia con violencia, robo sin violencia,
fuera de la escuela agresin fsica o verbal a alumnos
y profesores y peleas.
Secundaria: mismos que en primaria.
Primaria. La percepcin de los
profesores sobre: la exigencia acadmica de la escuela, la capacidad
de los estudiantes para lograr los
objetivos de aprendizaje, apoyo
entre maestros para la realizacin
ndice de clima
del trabajo, comunicacin entre
escolar
los miembros de la comunidad
escolar, facilidad en la toma de
acuerdos entre profesores para el
trabajo con los alumnos, clima de
confianza entre los profesores.
Secundaria: mismos que en primaria.
Primaria: satisfaccin del profesor
con: las normas y disciplina de la
ndice de satisfac- escuela, la relacin con alumnos,
cin del profesor
la relacin con el director y con
con la escuela
profesores
Secundaria: mismas variables y satisfaccin con relacin con padres.

Bases del estudio de Prcticas Docentes para


el Desarrollo de la Comprensin Lectora
Estas bases contienen informacin referente a los
planteles, los directores, los docentes y los alumnos de las escuelas primarias. La informacin fue
recabada mediante cuestionarios autoaplicados
a los docentes, una entrevista al director y cuestionarios dirigidos para el caso de los alumnos.
Los datos se recogieron en un operativo de campo realizado durante mayo de 2006 en todos los
estados de la repblica con excepcin de Oaxaca. La muestra recab informacin sobre 9,050
alumnos y 5,900 profesores adscritos a 905 planteles. La muestra es representativa de las escuelas y los docentes de primaria en el mbito nacional y en las modalidades de escuelas primarias
Urbanas Pblicas, Rurales Pblicas, Primarias
Indgenas, Primarias Comunitarias, as como en
primarias Urbanas Privadas. La recopilacin de
informacin se hizo con base en instrumentos
dirigidos a los siguientes informantes:
Directores (incluye informacin sobre el
plantel).
Docentes:
o Primer grado en escuelas no multigrado.
o Segundo grado en escuelas no multigrado.

Coleccin Cuadernos de Investigacin

26
o Tercer grado en escuelas no multigrado.
o Cuarto grado en escuelas no multigrado.
o Quinto grado en escuelas no multigrado.
o Sexto grado en escuelas no multigrado.
o Primaria multigrado.
o Primaria comunitaria.
Alumnos: de cuarto y quinto grado.
La base de datos del director contiene informacin relativa los siguientes temas: servicios infraestructura y espacios escolares; equipo, material y mobiliario escolar; programas y organizacin escolar y
perfil profesional del director.
En las bases de datos de docentes hay secciones
que se comparten y otras que son exclusivas de algn informante, de esta manera los temas indagados son los siguientes:

Grado
1
2
3
4
5
6
Instructores
comunitarios
Multigrado

2.4. Pgina del INEE en Internet


El portal del Instituto Nacional para la Evaluacin
de la Educacin, ubicado en la direccin electrnica www.inee.edu.mx/, es una herramienta que permite a todos los sectores sociales preocupados por
la calidad educativa consultar informacin directa
sobre las actividades del Instituto y los resultados
de sus evaluaciones. Asimismo, pone al alcance de
los usuarios informacin relacionada con los indicadores educativos nacionales ms recientes, con
evaluaciones de recursos y procesos de las escuelas,
adems de que cuenta con una variedad de enlaces
a instituciones de evaluacin de otros pases, lo que
permite tener una visin amplia de la investigacin
nacional e internacional en esta materia.

Parte comn
Datos demogrficos
Perfil profesional
Trayectoria y situacin
laboral
Hbitos de lectura
Satisfaccin docente
rea acadmica
Apoyo a las funciones
docentes
Recursos materiales
Caractersticas del aula

Parte especial
Comprensin lectora
Clima escolar
Clima escolar
Comprensin lectora

Mdulo de escuelas indgenas

Comprensin lectora
Clima escolar

Mdulo de escuelas indgenas

Comprensin lectora
Comprensin lectora para 1
Comprensin lectora 4 y 5

Las bases de datos de los alumnos recopilan informacin sobre: aspectos demogrficos, hbitos
de lectura y prcticas para el desarrollo de la comprensin lectora.
A partir de las variables originales se construyeron los siguientes ndices:
ndice de prcticas para el desarrollo de la
comprensin lectora en 1er grado
ndice de prcticas para el desarrollo de la
comprensin lectora en 4 y 5 grados
Satisfaccin con el trabajo en el aula
Satisfaccin con las condiciones de la escuela y el sistema
ndice de apoyos para la docencia
ndice de equipamiento del aula
ndice de acervos bibliogrficos
Para la construccin de algunos de estos ndices se unieron distintas secciones de las bases
de datos, por lo que cabe distinguir entre las bases originales las derivadas de la lectura de cada
instrumento- y las construidas ex profeso para los
fines del estudio.

Coleccin Cuadernos de Investigacin

Mdulo de escuelas indgenas

Mdulo para escuelas indgenas

En suma, el sitio Web del INEE pone al alcance


de todos los interesados sus publicaciones, actividades, bases de datos, compromisos institucionales, servicios e informacin general, al tiempo que
constituye una memoria del trabajo realizado en sus
cinco aos de vida.
El sitio Web contiene informacin clasificada en
las siguientes secciones:
Acerca del INEE. Ofrece una introduccin detallada de lo que es el Instituto, su historia, logotipo
e imagen, estructura jurdica y operativa, misin y
visin, y todo aquello que da cuenta de lo que ha
hecho desde su creacin, el 8 de agosto de 2002.
Describe cmo estn integrados sus cuerpos colegiados: Junta Directiva, Consejo Tcnico y Consejo Consultivo, as como la base jurdica sobre
la cual desarrolla todas sus actividades. Adems,
cuenta con una serie de preguntas bsicas y sus
respuestas, para todos aquellos que empiezan a
interesarse en la evaluacin educativa.
Proyectos y actividades. Seccin integrada con
informacin sobre los proyectosque el INEE y sus

El INEE y la Investigacin Educativa

reas llevan a cabo. Incluye las especificaciones


de reactivos de los exmenes Excale de Espaol
y Matemticas de sexto de primaria y tercero de
secundaria y los cuestionarios de contexto aplicados tanto a docentes como a alumnos Tambin se
pueden consultar los Manuales tcnicos que describen el diseo, especificaciones, construccin y
validacin de reactivos, el muestreo poblacional,
los protocolos de calificacin de los Excale de tercero y sexto de primaria, tercero de secundaria, y
educacin preescolar. En otros apartados, se puede consultar informacin sobre el Grupo Iberoamericano de PISA (GIP) y sobre las pruebas PISA
y LLECE. Incluye tambin ligas y enlaces a otros
sitios relacionados con la evaluacin educativa
tanto en el mbito nacional como internacional.
Memorias de eventos. La seccin presenta informacin de los eventos pblicos ms importantes
organizados por el Instituto, como mesas pblicas,
cursos de actualizacin y capacitacin, seminarios
y conferencias. Tambin da cuenta de las convocatorias publicadas para la eleccin de los integrantes del Consejo Tcnico y del Director General y,
de manera particular, destaca toda la informacin
que se gener en el marco de las Jornadas de Evaluacin Educativa, llevadas a cabo en 2004, con la
participacin de diversos especialistas.
Sala de prensa. Seccin que muestra la relacin
del INEE con los medios de comunicacin. Se pueden consultar las noticias en las que se hace mencin a la labor del INEE en los distintos medios impresos nacionales, desde 2004. Asimismo, incluye
los boletines de prensa emitidos por el Instituto
desde su creacin, las conferencias de prensa que
ha organizado, as como una galera fotogrfica
de los eventos pblicos ms importantes. Tambin se pueden escuchar los mensajes de la campaa meditica realizada en 2006.
Servicios. Que complementa el poyo al trabajo de
investigadores y acadmicos, poniendo a su alcance bases de datos, tablas estadsticas, reactivos, entre otras herramientas. Destaca en esta seccin el
acceso a los catlogos bibliogrfico y hemerogrfico del Centro de Documentacin del INEE, con
informacin detallada de cada ttulo.
De especial inters para los investigadores son las
secciones de la pgina que se refieren a los productos descritos en la primera parte de este Cuaderno,
as como a los recursos para investigadores puntos
anteriores de esta segunda parte.
Publicaciones. Se pueden consultar electrnicamente e imprimir todos los trabajos, informes,

27

anlisis, estudios, entre otros, que el INEE ha hecho pblicos. El Instituto ha desarrollado diversos
productos editoriales orientados tanto a los investigadores y especialistas, como a los tomadores
de decisiones, directivos de escuelas, maestros,
padres de familia y todo el pblico interesado en
esta temtica. Para ello, cuenta con un catlogo
de publicaciones accesibles a los distintos pblicos, que se pueden consultar en esta seccin,
integrada por: Documentos institucionales, Informes y reportes, Cuadernos tcnicos, Resmenes
ejecutivos, Folletos, Suplementos, Breviarios, y
Coediciones.
Bases de datos de las evaluaciones. Con toda
la informacin, a detalle, de las evaluaciones institucionales, al alcance de especialistas e investigadores. Entre las bases de datos que se pueden
consultar estn: las de Estndares Nacionales, con
la informacin de las Pruebas Nacionales Ciclo
Escolar 2002-2003 primaria y secundaria y Estndares Nacionales Ciclo Escolar 2003-2004
primaria y secundaria. Se pueden consultar las
bases de datos de PISA 2003 en Mxico, las tablas
estadsticas del INEE mediante un buscador de informacin.
Explorador Excale. Desde el inicio del portal mismo se tiene acceso directo a esta novedosa herramienta, que permite a docentes, directores, supervisores, autoridades, tomadores de decisiones y a
todos los actores del sector educativo, consultar
los contenidos que evalan los Exmenes de la
Calidad y el Logro Educativos. Con el Explorador se
pueden consultar las habilidades y conocimiento
que fueron evaluados en 2005 por los Excale de
sexto de primaria y tercero de secundaria, y muy
pronto se incluir la informacin de los Excale 2006,
correspondiente a tercero de primaria.
El Explorador Excale presenta datos en forma desagregada por modalidad educativa y entidad federativa a la que pertenecen los alumnos, lo que
permite que los maestros cuenten con una referencia concreta de los alcances y limitaciones de los
aprendizajes. Esta herramienta informtica tambin cuenta con ejemplos de preguntas de cada
contenido curricular, que pueden ser utilizadas por
los maestros para evaluar a sus estudiantes o como
gua para elaborar preguntas similares.
Por ltimo, y en cumplimiento con la Ley Federal
de Transparencia y Acceso a la Informacin, el portal
del INEE hace pblica toda la informacin relacionada con su trabajo administrativo y de organizacin,
as como las licitaciones que lleva a cabo.

Coleccin Cuadernos de Investigacin

El INEE y la Investigacin Educativa

29

3. Perspectivas de desarrollo de la investigacin


En este ltimo apartado se presentan algunas ideas
sobre el posible desarrollo de investigaciones sobre
temas relacionados con el mbito de accin del INEE,
en especial de trabajos que aprovechen en algn
aspecto los estudios previamente desarrollados por
el Instituto, por parte de especialistas ajenos a l.
3.1. Posibilidades de colaboracin
La abundante informacin recogida por el INEE en el
marco de sus investigaciones, evaluativas y de otros
tipos, puede ser aprovechada por estudiosos de otras
instituciones para la realizacin de trabajos adicionales, que podran enriquecer de manera muy importante el conocimiento de la educacin mexicana.
La presentacin de los trabajos ya realizados por
los investigadores del Instituto, as como de las bases de datos derivadas de ellos, que se ha hecho en
los apartados anteriores, podrn sugerir posibilidades diversas de estudios adicionales.
Todos los productos del INEE, incluyendo sus bases
de datos, tienen carcter pblico, y todos estn a disposicin de los interesados en la pgina web del Instituto, sin necesidad de autorizacin especial alguna.
Como se ha dicho, y de acuerdo con las normas generalmente aceptadas del trabajo acadmico, slo se
pide a las personas que aprovechen elementos producidos por el INEE para sus propios trabajos, que den el
reconocimiento habitual al Instituto y, en su caso, a los
autores de los trabajos que se aprovechen.
Teniendo en cuenta, sin embargo, que la complejidad tcnica de muchos de los productos puede dificultar su aprovechamiento por parte de algunas personas,
en este punto se sugieren formas precisas en que el Instituto podra apoyar los esfuerzos de los interesados.
La forma ms sencilla de colaboracin consistir
en que el personal del INEE brinde orientacin a
los investigadores de otras instituciones interesados en trabajar algn tema sobre los elementos disponibles en el Instituto al respecto.
Una posibilidad concreta es el apoyo que se podr
brindar a los interesados para el uso de las bases
de datos del INEE. Para hacer un uso eficiente del

tiempo del personal del Instituto, se programarn


talleres al respecto, que se ofrecern a grupos de
personas interesadas. Oportunamente se dar
informacin sobre las fechas en que se ofrecern
tales talleres, as como los requisitos que debern
satisfacerse para participar en ellos.
Una variante del punto anterior podr ser el apoyo
a estudiantes de posgrado para la realizacin de
tesis que aprovechen elementos del INEE; el apoyo
podr consistir en una simple orientacin, o llegar
hasta un esquema de cotutora por parte de algn
investigador del Instituto; esto ltimo requerir de
la formalizacin del acuerdo respectivo.
Puede contemplarse la posibilidad de que estudiantes de posgrado realicen estancias en el Instituto, en el marco de la preparacin de su tesis o
en otra forma; esta modalidad implicar tambin
la formalizacin del acuerdo correspondiente y
depender de las posibilidades de atencin a los
interesados, por parte del personal del Instituto.
Una forma similar, para investigadores, es la realizacin de estancias de investigacin, en particular estancias sabticas, con las mismas salvedades que en el punto anterior.
El planteamiento ms ambicioso consistir en
el desarrollo de proyectos completos en forma
conjunta con otras instituciones, al amparo de
convenios especiales para ello.
Conviene precisar que normalmente el INEE no
dispondr de recursos para ofrecer apoyo econmico a los estudiantes o investigadores externos
interesados en desarrollar algn proyecto en colaboracin con el Instituto. Al mismo tiempo, por su
carcter no lucrativo, y por el inters que tiene para
la educacin nacional el desarrollo de este tipo de
actividades, las acciones que el Instituto desarrollo
para promoverlas tendrn un costo mnimo o nulo.
3.2 Hacia

una agenda de investigacin sobre evaluacin

educativa

Como se ha apuntado, el conjunto de investigaciones


que caen dentro del campo de inters del INEE, adems

Coleccin Cuadernos de Investigacin

30
de las evaluativas propiamente dichas, es muy grande.
La amplitud del campo es tal que el INEE no podra cubrirlo por s solo; esto tampoco sera deseable, ya que las aportaciones de estudiosos de otras
instituciones siempre podrn enriquecer el trabajo
del personal del Instituto, an en el caso de que
este fuera suficiente para desarrollar una gran cantidad de investigaciones de los tipos mencionados.
Por ello, y siempre en forma congruente con el Plan
Maestro, la tarea del INEE en lo relativo al desarrollo
de investigaciones comprende dos grupos de acciones: las que tienen que ver con la realizacin de
trabajos de investigacin por parte del personal del
propio Instituto, y la promocin de investigaciones
relacionadas con el trabajo del INEE por parte de investigadores de otras instituciones.
Para orientar ambos grupos de acciones es fundamental contar con una agenda de investigacin, que
enumere y organice un amplio nmero de temas
susceptibles de ser abordados por los estudiosos. A
partir de esa agenda el INEE podr definir prioridades para su personal, y contar con elementos para
focalizar sus esfuerzos de promocin de investigaciones por otros actores. Junto con la formulacin de la
agenda podrn definirse tambin directrices precisas
tanto para el desarrollo de la investigacin dentro del
Instituto, como para su promocin fuera de l.
En congruencia con el Plan Maestro, y con base
en los lineamientos establecidos por el Consejo Tcnico, la agenda de investigacin del Instituto se organizar en tres grandes rubros:

Coleccin Cuadernos de Investigacin

Investigacin terica y/o metodolgica, para el mejoramiento de los modelos e instrumentos que ya
se estn utilizando, o para el desarrollo de otros.
Investigacin para la explicacin e interpretacin
de resultados, tanto en la forma de anlisis adicionales que utilicen la informacin ya recabada,
como de estudios que impliquen la obtencin
de informacin adicional.
Investigacin sobre el grado en que la evaluacin
es utilizada o no por parte de diversos usuarios, as
como sobre el posible impacto de su utilizacin.
En las tres categoras, y adems de investigaciones especficas, tendran cabida trabajos de sntesis,
que presenten el estado del conocimiento sobre un
tema.
Una primera enumeracin de temas organizados segn los tres rubros anteriores se sintetiza en
el cuadro que se presenta a continuacin; en cada
rengln se enlistan algunos temas particulares, que
se precisarn y ampliarn posteriormente, y se presentan a ttulo de ejemplos.
Las posibilidades de colaboracin que se mencionan en la parte anterior de este documento pueden concretarse gracias a estos ejemplos. A partir de
ellos los estudiosos y las instituciones interesadas
podrn establecer comunicacin con el Instituto
para explorar la posibilidad de desarrollar determinadas actividades en forma conjunta. Tratndose de
ejemplos, son bienvenidas desde luego otras ideas.
Tipos, subtipos y posibles temas de una agenda
de investigacin del INEE

El INEE y la Investigacin Educativa


TIPOS Y SUBTIPOS

Para mejorar evaluaciones


existentes

Para desarrollar nuevas evaluaciones

Sobre factores del entorno


social

Sobre factores de la escuela

Sobre el uso para polticas

Sobre el uso para gestin


escolar
Sobre el uso para prctica
docente

31

POSIBLES TEMAS
Investigacin metodolgica
Estudios que profundicen sobre lo que saben y no saben los alumnos en los
dominios; sobre los errores de lxico, de matemticas, etc.;
Validacin de modelos e instrumentos de evaluacin (v.gr. con tcnicas de pensar
en voz alta);
Estudios de sesgo de pruebas e tems (por gnero, grupo tnico, etc.);
Validacin de modelos de evaluacin y comparacin de su efecto;
Prueba de nuevas formas de aplicacin, v.gr. por computadora;
Equiparacin de pruebas PISA-Excale;
Estudios sobre definicin y anlisis de dominios a evaluar;
Estudios sobre resultados de distintos modelos de anlisis de datos;
Mejora del marco sistmico para el desarrollo de indicadores;
Mejora de los cuestionarios de contexto;
Mejora de las muestras: nuevos estratos o subestratos; muestras con capacidad
para evaluaciones que consideren el nivel del aula;
Desarrollo de evaluaciones de nuevos dominios;
Idem de nuevos grados o niveles, en particular para media superior;
Idem de instrumentos para medicin de aspectos no usuales, v.gr. no cognitivos,
actitudes, valores, competencias complejas, etc;
Apropiacin y desarrollo de metodologa para evaluaciones de otros tipos: de
currculos, de valor agregado, de programas etc.;
Desarrollo de evaluaciones sobre competencias de los maestros;
Idem sobre prcticas docentes, modlicas o no;
Desarrollo de pruebas en lenguas indgenas;
Investigacin explicativa e interpretativa
Estudios ms amplios, con modelos explicativos e interpretativos complejos,
sobre el efecto de factores socioeconmicos particulares de especial inters sobre
la calidad educativa; estudios multinivel sobre el conjunto de factores; estudios
sobre escuelas de sectores marginados; estudios de valor agregado;
Estudios sobre el impacto de la educacin en la vida adulta de las personas y en la
sociedad en conjunto;
Estudios sobre oportunidad de aprendizaje;
Estudios sobre factores de los maestros: trayectorias de vida y profesionales; condiciones de trabajo, etc. Idem sobre directores;
Estudios sobre la eficacia y la eficiencia de las escuelas como tales;
Idem sobre modelos de mejora de procesos-resultados de la escuela;
Investigacin sobre uso de la evaluacin
Estudios sobre el impacto de la evaluacin en el currculo;
Idem sobre el uso de la evaluacin de programas formativamente;
Qu tanto usan los resultados los funcionarios responsables de las decisiones en
el nivel del sistema, federal y de las entidades; en su caso, que efectos ha tenido el
uso; si no se usan, por qu;
Idem por parte de las autoridades responsables del currculo;
Idem por parte de jefes de sector, supervisores y directores;
Idem por parte de docentes;
Estudios sobre el impacto de las evaluaciones (no slo las del INEE) sobre la prctica docente en el sistema educativo;

Coleccin Cuadernos de Investigacin

32

Conclusin
Este documento comenz diciendo que el INEE
concibe su tarea como una de investigacin, en el
sentido estricto del trmino. En el punto sobre manuales tcnicos y protocolos se inform sobre los
criterios de calidad que queremos cumplir. Al terminar estas pginas, y retomando un prrafo del
Modelo de Calidad del Instituto, sealamos que
lo que hacemos [no pretende ser] completamente
novedoso, ya que se basa en las mejores prcticas de
los sistemas de evaluacin de mayor experiencia en

Coleccin Cuadernos de Investigacin

el mundo; tampoco es trivial, ya que introduce niveles de rigor que constituyen avances cualitativos en
el medio nacional. Es, simplemente, el paso de un trabajo menos sistemtico a otro ms organizado, que
toma en cuenta las mejores prcticas internacionales
y pone los medios para apegarse a ellas. El producto
sern evaluaciones de gran calidad tcnica, con lo
que ello implica, tanto para sustentar decisiones y
acciones de mejora, como para apoyar la rendicin
de cuentas. Ni ms ni menos.

También podría gustarte