Está en la página 1de 41

PILOTAJE - NICARAGUA DIAGNSTICO DE CAPACIDADES DE LECTURA

INFORME SOBRE RESULTADOS DEL PILOTAJE:

Grupo de Trabajo del Centro de Investigacin y Accin Educativa y Social (CIASES)1

10 DE JULIO, 2008. MANAGUA, NICARAGUA

Integrado por Vanesa Castro, Jos Ramn Laguna, Nora Mayorga, y Daniel Rivas

INDICE INTRODUCCIN....................................................................................................................3 I. IMPORTANCIA DE ESTE ESTUDIO PILOTO ..........................................................4

II. PREPARACIN DEL ESTUDIO E IMPLEMENTACIN DEL TRABAJO DE CAMPO ....................................................................................................................................6 Organizacin del trabajo de campo................................................................................6 Implementacin del trabajo de campo............................................................................9 III. IV. VALORACIN METODOLGICA DE LOS INSTRUMENTOS ......................10 ANLISIS DE LOS RESULTADOS ......................................................................14 Identificacin y lectura de de letras ................................................................................14 Lectura de palabras simples e inventadas ......................................................................17 Fluidez Lectora y Comprensin de lo ledo....................................................................18 Comprensin Oral y Dictado .........................................................................................21 Evaluacin del Dictado ...................................................................................................24

V.

RESULTADOS Y VARIABLES ASOCIADAS.........................................................26 Las caractersticas socioeconmicas del hogar del nio ............................................26 El rol del docente y su influencia en los resultados .....................................................30 La Infraestructura Escolar y los resultados de las pruebas........................................35 La influencia del nivel socio-econmico de los pares entre los estudiantes que tomaron la prueba ..............................................................................................................36

VI CONCLUSIONES............................................................................................................37 ANEXOS ................................................................................................................................41

INTRODUCCIN
La Agencia Internacional para el Desarrollo (AID) financia una serie de programas para apoyar la educacin escolar en pases pobres de diferentes continentes. Especficamente, AID ha otorgado apoyo a proyectos para desarrollar las capacidades de lectura en nios y nias de los primeros grados de primaria. Entre los programas financiados por AID en el rea de lectura y escritura destaca Ed Data. Este programa promueve el desarrollo de sistemas de informacin costo-eficiente basados en recolectas rpidas de datos de calidad. Research Triangle Institute (RTI), --el principal ejecutor del programa Ed Data--, decidi implementar en Nicaragua un estudio piloto para adaptar a espaol y miskito una prueba de Lectura Inicial que se ha venido aplicando en pases de Asia y frica. Se seleccion el miskito adems del espaol pues este idioma se habla en Honduras y la costa Caribe nicaragense, una de las reas geogrficas cuya oferta educativa es de menor alcance y calidad. El pilotaje lo ejecut el Centro de Investigacin y Accin Educativa Social (CIASES) empresa nicaragense contratada por RTI para hacer la aplicacin y valoracin metodolgica de la prueba. El presente informe da cuenta breve de los principales resultados de este pilotaje y sobre las competencias de lectura inicial mostradas por los nios y nias nicaragenses a quienes se aplic el instrumento. Este reporte se encuentra estructurado en seis captulos., El primer captulo explica la importancia del estudio para Nicaragua. El segundo resea los esfuerzos de preparacin del trabajo de campo y el proceso de recoleccin de datos, resumiendo los aspectos positivos y negativos de esta labor para evidenciar las lecciones organizativas del pilotaje. El tercer captulo presenta un anlisis metodolgico de la prueba, el tiempo promedio de aplicacin en cada idioma y formato, as como las dificultades y logros de algunas secciones de la misma. El cuarto captulo presenta los resultados del anlisis de datos en todas las secciones de la prueba: identificacin de letras, palabras simples y sin sentido--, fluidez de lectura, comprensin lectora, oral y dictado. Estos resultados se dan por grado, sexo, departamento e idioma del nio-a. En el siguiente captulo se presenta informacin generada por el estudio que permite determinar cules factores se asocian positiva o negativamente con el rendimiento de los estudiantes. En el sexto captulo se extrae conclusiones acerca de los resultados ms importantes para poner en la discusin algunos temas clave tanto para la futura aplicacin de la Evaluacin de Lectura Inicial en Nicaragua como para mejorar la calidad educativa en el pas.

-3 -

I.

IMPORTANCIA DE ESTE ESTUDIO PILOTO

El tema de la calidad educativa es causa de preocupacin para gobiernos y agencias en casi todos los pases en vas de desarrollo. Diferentes pruebas nacionales e internacionales indican que la mayora de los estudiantes de una buena parte de nuestros pases se est quedando rezagada con respecto a sus pares en Europa, las naciones del sudeste asitico e incluso algunos pases de Amrica Latina como Cuba cuyos resultados son sobresalientes. Nicaragua no es una excepcin en esta tendencia dado que sus resultados en el Segundo Estudio Regional Comparativo 2006 de UNESCO para terceros y sextos grados de 16 pases latinoamericanos son pobres, igual que sus resultados en las pruebas nacionales 2002 y 2006. Ciertamente, Nicaragua logr en SERCE posicionarse mejor que Guatemala, Repblica Dominicana, y Panam; pero no por ello super el promedio de rendimiento de la gran mayora de pases de la regin y/o del rea como El Salvador, Costa Rica. En matemticas de tercer grado un 91% de los estudiantes nicaragenses se coloc en I y II nivel de los cuatro que contempl la prueba. En sexto, un 79% de los estudiantes qued tambin en esos lugares. Para espaol los resultados no son ms alentadores. En tercer grado, hubo un 7% de los estudiantes que ni siquiera lleg a primer nivel y otro 79% se coloc entre I y II nivel; en 6to, 23% de los estudiantes qued en I nivel, y 51% en II para un 84% en esos dos lugares. Estos resultados indican que de cada 100 estudiantes nicaragenses, hay de 79 a 91 sin suficiente dominio bsico de las destrezas necesarias para continuar su aprendizaje en espaol y matemticas. Esta situacin es una evidencia contundente de nuestro rezago en calidad educativa. Se conoce sobre algunos de los problemas vinculados a este rezago: bajo presupuesto educativo para la educacin bsica; horas y das de clases insuficiente; carencia de textos para los estudiantes de primaria 2; docentes mal pagados y con limitada formacin inicial, --si es que se graduaron de maestro-as3--, pero sobre todo en materia de gerencia del sistema hay un gran limitante. Este es, el hecho de que una administracin tras otra ha subestimado la importancia de dedicar ms esfuerzos a la enseanza de los primeros grados, enfatizando en estos grados el dominio de las habilidades bsicas: leer, escribir y realizar procedimientos matemticos simples, todas destrezas esenciales para la continuidad del aprendizaje. Nuestro currculo abarca mucho sin apretar suficiente, y obliga a los docentes a atender muchos ejes transversales, sin que estn entrenados para armonizarlos con la enseanza de lo bsico. Un estudio4 que explica el xito de Cuba en diversas pruebas, indica, que su

Un estudio del MINED hecho en 2007 informa que 50% o ms de los alumno-as de primaria no tienen textos de espaol y matemticas. 3 El MINED reporta que un 26% de los docentes de primaria estn dando clases sin haberse graduado como maestro-as. 4 Cubas Academic Advantage: Why Students in Cuba do better in school. Carnoy M, Gove A., y Marshall J., 2007

-4 -

currculo da importancia a lo esencial; los programas no cubren tantas materias, y sus asignaturas y prcticas docentes se centran en lo ms importante. Este currculo disperso influye en que se preste poca atencin a la alfabetizacin inicial, tanto en la etapa de la formacin de docentes como en la escuela bsica. Por ello, muchos-as estudiantes llegan a 3er grado sin saber leer y tienden a desertar, sobre todo a los 10 aos cuando pueden ingresar al mercado laboral. Como ejemplo, en 2005 se matricularon en 1r grado 204,325 estudiantes, para 2007 de ellos slo 140,601 haba logrado ingresar a 3ro. Esto da un total de 83,884 nio-as que abandon el sistema y/o repiti grado entre 2005 y 2007. Esta cifra de abandono-repeticin 2005-2007 es ms alta que la de las cohortes 2001 a 2003 y 2002 a 20045. Dada la complejidad de problemas que afecta el sistema educativo nicaragense conviene pensar en enfrentar slo algunos de ellos a la vez. El aprendizaje en los primeros grados podra y debera ser el prioritario. i) ii) Porque son los grados con mayor matrcula, Porque son los grados entre los cules todava se puede atender a los nio-as ms pobres, ya que estos no logran avanzar mucho a 5to y 6to de primaria --la tasa de graduacin nacional no pasa del 50% aunque es del 99% entre los estudiantes de ms ingreso--; Porque la edad de estos estudiantes les coloca en un momento de desarrollo cerebral ptimo para el aprendizaje, en 1r grado toma 30 minutos resolver una dificultad de lectura, en 5to grado 2 horas 6.

iii)

Es factible que el gobierno con apoyo de la sociedad civil y las agencias de desarrollo pueda si se lo propone--, cambiar aspectos de la enseanza de los primeros grados para que la mayor cantidad de nio-as tengan oportunidad de aprender y dominen habilidades bsicas para continuar sus estudios. Mejorar la calidad de la oferta educativa en los primeros tres grados de primaria, permitira tambin disminuir la desercin y mejorar la eficiencia en la inversin al disminuir la repeticin. En 2005 la repeticin cost slo en estos tres grados $7, 900,170 dlares7. Los cambios para ser efectivos necesitan basarse en el manejo de informacin confiable sobre lo que funciona mal y puede ser mejorado y tambin sobre lo que funciona exitosamente. Justamente, para eso EGRA es muy til. La aplicacin de la prueba piloto de EGRA ha representado una gran oportunidad para Nicaragua. Contar con una prueba as y aplicarla sistemticamente permitir generar

De 2001 a 2003 no lograron pasar desde primero hacia tercero un total de 78,986 nio-as, y de 2002 a 2004 esta cifra fue de 78,447 estudiantes, las matrculas de primero fueron tambin mayores que en 2005; 234,001 en 2001 y 246,269 en 2002 lo que indica que la perdida de la cohorte 2005 es ms alta en proporcin. 6 Presentacin Amber Gove, RTI 2007 7 Estado de la educacin bsica y media 2005, MINED Dic 2006

-5 -

diagnsticos rpidos sobre cmo se hace la alfabetizacin inicial en los primeros grados de primaria. Para CIASES haber podido aportar en el pilotaje de la prueba EGRA en espaol ha sido muy valioso; como organismo dedicado a la educacin consideramos que este pilotaje y su futura generalizacin van a contribuir: A que Nicaragua y el sistema educativo cuenten con un instrumento fcil de administrar tanto para espaol y miskito. Obtener informacin confiable sobre cules son los principales problemas que enfrentan maestro-as y nio-s en la alfabetizacin inicial. Generar discusiones sobre los resultados para buscar soluciones a los problemas de acuerdo a las circunstancias y localidades en que se presentan.

II.

PREPARACIN DEL TRABAJO DE CAMPO

ESTUDIO

IMPLEMENTACIN

DEL

Organizacin del trabajo de campo La organizacin del Trabajo de Campo se inici a fines de Septiembre y finaliz el dos de Noviembre. Se planific aplicar la prueba a 48 estudiantes por escuela diario--16 estudiantes por grado, todo-as escogidos al azar y se program hacer esto en dos semanas. Para garantizar una ptima organizacin del trabajo se realiz las siguientes actividades: Coordinaciones con el MINED Seleccin de la muestra de escuelas y estudiantes Seleccin de aplicadores Capacitacin de supervisores y aplicadores Cotizacin y compra de los materiales a utilizar en el campo Elaboracin de rutas de acceso para cada escuela con sus correspondientes costos. Contratacin de vehculos con sus respectivos conductores. Elaboracin del Manual del Supervisor y un conjunto de formatos para evaluar el trabajo de campo in situ, Reproduccin de los instrumentos y del Manual, etc. Laminacin de hojas de la prueba que slo seran usadas por los aplicadores. Contratacin de seguro de accidentes y vida para todos los participantes. Muestra La muestra se seleccion buscando garantizar que cada escuela contara al menos con 20 alumno-as por grado entre 1ro y 3ro. Tambin se procur que hubiera una proporcionalidad de centros de acuerdo a las dos reas geogrficas predominantes: rural y urbana; a las dos modalidades de primaria que existen: regular y unidocente y al tipo de escuela con que cuenta el sistema educativo nicaragense: pblicas y privadas autosuficientes y subvencionadas. Si bien, no se puede hablar de representatividad estadstica, las escuelas fueron seleccionadas aleatoriamente dentro de cuatro departamentos que representaban

-6 -

dentro de un panorama amplio--, las diferencias a nivel de las macro-regiones del pas (Pacfico, Central y Atlntico). La muestra cont con 50 centros en los cuales se administrara la prueba a 2400 estudiantes. Las escuelas se ubicaban en 4 departamentos del pas, tres del rea monolinge e hispano hablante: Managua, Carazo y Boaco y uno del rea bilinge en el Caribe, la Regin Atlntica Autnoma Sur, RAAS. La grfica 1 muestra que el 60% de las escuelas seleccionadas son rurales, en tanto que el departamento con una mayor proporcin de escuelas en el rea rural es Boaco y Managua el ms urbano 8. La versin miskita de la prueba se program hacer en la RAAS pues en la RAAN, Regin Atlntica Norte --donde el miskito predomina--, los centros escolares estaban cerrados por los daos ocasionados por el huracn Flix que afect esa regin de Nicaragua en Octubre 2007.
Grfica 1. Distribucin de escuelas por Departamento y rea
100.0 80.0 60.0 40.0 20.0 0.0 Boaco Carazo Managua Rural Urbana RAAS Total 90.0 70.0 35.0 71.4 59.6 10.0 30.0 65.0 28.6 40.4

Fuente: Anexo A1. Capacitacin Para realizar el trabajo de campo se capacit un total de 28 personas entre quienes se seleccion a las 25 ms idneas para ese tipo de trabajo. Todas las personas que participaron en la capacitacin contaban con ttulo universitario y experiencia en el campo de la educacin o el campo de investigacin de campo. La capacitacin fue realizada por la directora del proyecto Ed Data de RTI- AID: Dra. Amber Gove y la asesora tcnica principal de Ed Data, Silvia Thompson. El equipo designado por CIASES para la coordinacin del proyecto dio apoyo activo en la capacitacin tanto en asuntos metodolgicos como en aspectos organizativos y administrativos. Se dio especial entrenamiento a un grupo de aplicadores provenientes del Ministerio de Educacin para contribuir al fortalecimiento institucional del MINED, aportando a que el Ministerio contara con un personal preparado para realizar en el campo este tipo de
8

Si bien la RAAS es ms rural que Boaco, conviene aclarar que la muestra fue restrictiva respecto al nmero de alumnos de 1er a 3er grado y por ello la grfica muestra una menor proporcin de escuelas rurales.

-7 -

evaluaciones. Los funcionarios del MINED que participaron en la capacitacin y aplicacin de la prueba provenan del rea de Primaria. El grupo de capacitandos en el cual participaron los funcionarios del MINED recibi una capacitacin de 10 das, e incluy tambin a potenciales coordinadores-supervisores de equipo para que ello-as tuvieran mayor dominio de la prueba y tambin aportaran en su adecuacin al espaol. La capacitacin estuvo dirigida a preparar al personal en tres reas: Explicar la teora para el aprendizaje de lecto escritura que ha mostrado ser ms eficiente; Crear habilidades para que todo-as y cada uno-a de los participantes pudieran administrar el instrumento lo ms homogneamente posible; para ello adems de prcticas en el lugar de la capacitacin se hicieron dos pre-pilotajes del mismo en varios centros rurales y urbanos; Organizacin del trabajo en el campo, profundizando en sus aspectos ticos y normativos. Para esto ltimo se estudi un Manual diseado por el equipo CIASES para normar el trabajo de campo. El equipo que recibi la capacitacin fue muy activo, y aport a la reestructuracin de los instrumentos. Estos tambin fueron adaptados al lenguaje coloquial nicaragense, para auspiciar un contacto ms amistoso con los nios y nias. La seleccin final del personal se realiz en base a evaluaciones de los y las participantes. Se tom en cuenta sus habilidades aplicando el instrumento y la disposicin de trabajo. Con un grupo constituido por los mejores capacitandos se organiz cinco equipos de trabajo integrado cada uno por cinco personas. Aspectos Logsticos La reproduccin de los instrumentos represent uno de los pocos atrasos que se dio para la entrega de los materiales a los equipos que salieron al campo el 5 de Noviembre. Esto se debi a cambios en el formato y algunos contenidos de la prueba realizados el ltimo da de la capacitacin. Sin embargo, estos atrasos permitieron que se pudieran incorporar todas las recomendaciones y sugerencias surgidas del ltimo pilotaje. Cada supervisor se responsabiliz por el material entregado: instrumentos, tablas de apoyo, cronmetros, cuadernos y lpices para los participantes, Manuales, Hojas de retroalimentacin etc. Cada equipo fue responsable de una ruta con aproximadamente 10 escuelas por ruta. El equipo de la RAAS sali desde el sbado tres de Noviembre para llegar el lunes cinco a la primera escuela a visitar dadas las distancias a recorrer por va acutica y terrestre. Igualmente el equipo a cargo de Boaco, sali desde el domingo cuatro para poder acceder a primera hora del lunes a su primera escuela. Los otros tres equipos, dos de Managua y uno de Carazo salieron el lunes cinco de Noviembre en horas de la madrugada.

-8 -

Se racionaliz el uso de transporte rentado adecuando este servicio a la realidad y necesidades particulares de cada territorio. En la RAAS, hubo que utilizar botes o lanchas, en las zonas urbanas de Managua y Carazo, se decidi utilizar taxis pues era ms costo eficiente, en las zonas rurales de Boaco y Carazo se utiliz el transporte privado contratado. Implementacin del trabajo de campo El pilotaje se efectu en dos semanas, del cinco al diecisis de Noviembre del 2007, tal como se planific. Se logr administrar la prueba en 47 escuelas a un total de 2,206 estudiantes para un 92% de lo planeado, 1927 de estos estudiantes reciban clases en espaol y 282 eran alumno-as de escuelas bilinges. No se contabiliz el nmero de nios y nias que rehus participar pues en el formato para apoyar a los supervisores para la organizacin de la muestra por grado se pidi nada ms los datos finales. Sin embargo, hubo 4 estudiantes --de acuerdo a lo reportado por los supervisores que durante la prueba decidieron no seguir participando. Es posible se hayan dado unos cuantos casos ms pero estos no quedaron reportados. Hubo una equitativa distribucin de gnero entre los estudiantes ya que 1111 eran nios y 1095 nias, tambin fue la distribucin de estudiantes por modalidad de escuelas fue proporcional habiendo 1138 alumno-as de escuelas regulares y 1068 de multigrado9. En cuanto a distribucin por dependencia, un 76.2% de los estudiantes que participaron en este pilotaje son del sistema de educacin pblica, mientras que el restante estudia en escuelas privadas con o sin subvencin (Ver Anexos A1 al A3).
Tabla 1a Distribucin de Estudiantes que participaron en el pilotaje por Dependencia y Sexo Genero Total Dependencia Masculino Femenino Publico 841 840 1,681 Privado Con 50 43 93 Subvencin Privado Sin 220 212 432 Subvencion Total 1,111 1,095 2,206 Tabla 1 b Distribucin de alumnos por gnero y grado GNERO

Total
320 329 313 962 655 633 636 1924

Masculino Femenino
Grado 1 2 3
335 304 323 962

Total

Conviene aclarar que estas proporciones se obtienen de cmo est clasificada la matrcula en las bases de datos de estadstica del MINED, sin embargo, utilizando los datos de la pregunta sobre si el grado era multigrado se obtienen resultados muy diferentes (390 en multigrado y 1,816 en regular).

-9 -

Se aplic 190 cuestionarios a igual cantidad de docentes de 1ro a 3r grado quienes dieron informacin sobre factores tradicionalmente asociados al rendimiento estudiantil: su preparacin, experiencia, mtodos pedaggicos, motivacin, etc. Una buena parte de los problemas de campo se dieron en lunes pues en las escuelas rurales los maestro-as llegan tarde por venir de lejos. Adems de esta dificultad se tropez con direcciones inexactas o erradas lo que creo retrasos luego superados. III. VALORACIN METODOLGICA DE LOS INSTRUMENTOS

El instrumento aplicado a los nios y nias de la muestra consta de 2 partes: la primera es el diagnstico de las capacidades de lectura del nio-a que cuenta con ocho secciones: ubicacin espacial en un prrafo, reconocimiento de letras, dominio de fonemas, lectura de palabras simples, decodificacin de palabras, fluidez de lectura, comprensin lectora, comprensin oral y capacidad de tomar dictado; la segunda es una encuesta socio-econmica para detectar factores asociados al rendimiento de los estudiantes y tambin a recoger alguna informacin sobre mecanismos de seguimiento de la docente a los nio-as. Prueba Se estim que la aplicacin tanto de la prueba como del cuestionario socio econmico sera de aproximadamente 20 minutos. Se logr un mejor resultado pues la aplicacin dur en promedio 18 minutos por estudiante. Las escuelas miskitas se excedieron sobre el promedio excedindose en un poco ms de 3 minutos; mientras que las escuela monolinges tienen un promedio levemente ms bajo: 17.8 minutos. Hubo algunas pruebas realizadas en 5 minutos, pero este mnimo corresponde en su mayora a estudiantes clasificados como cero especial. Slo hubo 5 casos extremos de pruebas en las cuales tres aplicadores tomaron casi 1 hora10.
Tabla 2a. lenguaje Estadsticas del Tiempo aplicacin de la prueba y cuestionario socioeconmico por Desviacin Estandard
4.62 5.87 4.94

Lenguaje Espaol Miskito Total

Promedio
17.77 21.36 18.23

Min
5.00 5.00 5.00

Max
60.00 42.00 60.00

Tabla 2b. Tiempo promedio de duracin del Test por Grado, Sexo y Tipo de Formato

Grado
1

Genero
Masculino Femenino Total Masculino Femenino Total

A
18.44 18.71 18.59 17.79 18.22 18.03

B
19.10 18.32 18.77 17.87 17.52 17.71

C
21.60 20.44 20.92 20.88 20.94 20.91

D
23.72 20.41 22.13 22.64 22.56 22.61

Total
19.36 18.85 19.11 18.36 18.26 18.31

10

Estos casos se documentaron antes de iniciar la segunda fase, para lo cual se indag sobre las dificultades que ocasionaron este retraso.

- 10 -

Total

Masculino Femenino Total Masculino Femenino Total

16.45 16.87 16.69 17.58 17.93 17.78

17.28 16.11 16.79 18.10 17.34 17.77

19.52 20.65 19.95 20.64 20.61 20.63

20.00 23.55 21.87 22.41 21.95 22.19

17.27 17.15 17.21 18.35 18.11 18.23

El formato D es el que tom ms tiempo de aplicacin en promedio, lo cual puede ser un proxy de dificultad (ver Tabla 2b). No obstante estas diferencias no son estadsticamente significativas. Los datos missing: ceros especiales. Tal como se explic, se orient a los aplicadores que cuando los-as nios-as no podan leer ms de una lnea de letras o palabras, ellos deban dar a los nio-as un nmero especfico de intentos antes de dar por terminado el ejercicio. Por tanto, a los estudiantes que no lograron pasar ese nmero fijado de oportunidades por seccin se les calific con un Cero Especial. La Tabla 3 muestra que la mayor cantidad de ceros especiales, se dio en primer grado y que la seccin de palabras sin sentido es la que cuenta con mayor frecuencia de ceros especiales tanto en espaol como miskito. La seccin de fonemas cuyos resultados son muy bajos como se ver posteriormente, al tener vocales en los primeros cinco tems de ambos formatos de pruebas, permiti que algunos estudiantes identificaran los sonidos por lo cual el nmero de ceros especiales en esta seccin no fue superior a 60 en espaol dndose en miskito una situacin similar.
Tabla 3. Nmero de Ceros Especiales por Seccin, idioma y grado. Palabras Lenguaje Grado Letras Palabras sin sentido Espaol
1 2 3 Total 1 2 3 Total 1 2 3 Total 73 10 0 83 41 9 7 57 114 19 7 140 132 15 6 153 65 22 13 100 197 37 19 253 151 20 6 177 62 21 15 98 213 41 21 275

Fluidez de lectura
144 17 4 165 66 21 14 101 210 38 18 266

Miskito

Total

En cuanto a los casos missing relacionados con los tems de las secciones de comprensin lectora, comprensin oral y dictado se observa que slo la seccin de comprensin lectora presenta valores missing (23 a 25% de los tems), los tems para la seccin 7 y 8 no presentan tantos valores vacos (missing) debido a que durante la digitacin se orient clasificar como incorrectas este tipo de respuestas.

- 11 -

Anlisis por formato Se pilote 4 formatos de los instrumentos, para la versin en espaol se aplic dos: A y B, y para la versin miskita los formatos C y D. La Tabla 4a muestra que el formato B result ms difcil para los nios y nias de los diferentes grados, sin embargo la nica diferencia estadsticamente significativa se dio en la seccin sobre fluidez lectora (seccin 6) (ver Tabla 4b).
Tabla 4a. Resultados Generales de cinco secciones del Test por Grado, Espaol A Genero 1 2 3 Total 1 Letras Masculino 28.30 51.16 62.72 46.90 30.97 correctas Femenino 34.07 49.47 61.84 48.49 30.50 por minuto Total 31.46 50.19 62.22 47.79 30.77 Fonemas correctos Palabras correctas por minuto Palabras sin sentido correctas por minuto Fluidez de lectura
Masculino Femenino Total Masculino Femenino Total Masculino Femenino 4.26 5.40 4.88 21.10 27.58 24.64 17.33 22.67 5.94 6.75 6.40 49.28 49.66 49.50 39.42 38.14 7.28 8.37 7.90 65.32 68.30 67.01 49.27 52.10 5.79 6.84 6.38 44.61 48.56 46.83 34.87 37.67 4.81 6.10 5.36 21.90 22.52 22.16 17.48 18.16

Sexo y Tipo de Formato B 2


50.19 49.40 49.82 7.49 6.72 7.13 46.99 49.83 48.31 36.71 38.73

3
61.58 60.19 61.00 7.92 7.73 7.84 61.16 64.27 62.45 46.01 49.01

Total
47.46 46.47 47.03 6.71 6.83 6.76 43.18 45.23 44.08 33.25 35.08

Total Masculino Femenino Total

20.25 24.28 36.84 31.15

38.69 71.87 74.56 73.41

50.88 96.96 109.94 104.33

36.44 63.33 73.85 69.24

17.77 23.34 24.70 23.92

37.65 55.79 59.87 57.69

47.26 74.46 83.74 78.33

34.05 50.98 55.62 53.01

La Tabla 4b muestra que los resultados fueron mixtos para los formatos C y D en miskito, por lo cual no se logra diferenciar cual formato ofreci mayor dificultad (ver Tabla 4c).
Tabla 4b. Resultados de cinco secciones del Test por Grado, Sexo y Tipo de Formato - Miskito C D Genero Grado Grado Grado Grado Grado Grado 1 2 3 Total 1 2 3 9.45 30.34 39.39 26.56 11.49 34.53 49.84 Letras Masculino correctas Femenino 13.91 57.29 51.70 33.62 15.15 34.86 47.45 por 12.04 41.00 44.14 29.88 13.26 34.66 48.58 minuto Total 6.88 7.88 11.70 8.86 8.00 9.91 9.22 Masculino Fonemas Femenino 7.08 10.53 9.29 8.46 5.26 6.44 9.30 correctos 7.00 8.93 10.77 8.67 6.68 8.49 9.26 Total 7.16 17.54 29.77 18.31 5.28 20.42 37.19 Palabras Masculino 5.20 37.11 40.22 21.46 5.68 18.76 40.94 correctas Femenino por Total 6.02 25.28 33.81 19.79 5.47 19.74 39.16

Total
28.92 30.41 29.63 8.94 6.84 7.95 18.46 20.19 19.28

- 12 -

minuto Palabras sin sentido correctas por minuto Fludez de Lectura

Masculino Femenino

10.45 5.82

18.00 39.32

30.37 39.48

19.74 22.13

6.17 8.31

22.36 19.58

36.44 38.76

19.27 20.84

Total Masculino Femenino

Total

7.76 11.93 6.62 8.85

26.43 23.86 52.54 35.20

33.89 40.29 57.14 46.80

20.86 25.55 30.04 27.66

7.20 5.97 10.26 8.04

21.22 27.78 21.92 25.37

37.66 45.57 44.38 44.94

20.02 23.32 24.05 23.67

La seccin de fonemas gener bastantes dificultades (tabla 5a). El promedio de fonemas correctos de una puntuacin mxima de 29 --, no super 6 para 1ero, 7 para 2do y 8 para 3ero. Los mejores resultados se observan en las escuelas privadas subvencionadas, de modalidad regular de Carazo.
Tabla 5 Resultado seccin fonemas por grado y Sexo
Formato A Formato B

Seccin Gnero Masculino Fonemas Femenino correctos Total 1


4.26 5.40 4.88

Grado 2 3
5.94 6.75 6.40 7.28 8.37 7.90

Total
5.79 6.84 6.38

1
4.81 6.10 5.36

Grado 2 3
7.49 6.72 7.13 7.92 7.73 7.84

Total
6.71 6.83 6.76

Tabla 5b. Resultados de la seccin fonemas por grado y Sexo Grado Secciones del Sexo Test 1 2 3 4.56 6.79 7.65 Masculino Fonemas Femenino 5.71 6.74 8.10 correctos 5.12 6.76 7.87 Total

Total
6.30 6.84 6.57

Esta seccin se modific tambin para el estudio de abril 2008 buscando medir mejor el dominio de los estudiantes de los fonemas. Seccin 8: Dictado Se hizo un anlisis detallado de los resultados de esta seccin pues en una primera revisin se encontr sobre-representacin de errores humanos de correccin originados por discrepancias en los criterios de calificacin de los aplicadores para valorar cada tem de la seccin. Estos errores se corrigieron durante la digitacin pues todos los dictados realizados tenan su correspondiente respaldo escrito, por lo cual este problema no tuvo consecuencias. Para la aplicacin de Abril se modific el mecanismo de correccin de esta seccin para incrementar la confiabilidad de la prueba.

- 13 -

IV.

ANLISIS DE LOS RESULTADOS

Identificacin y lectura de de letras (seccin 2) Los estudiantes de 1er grado leen en promedio 28 letras correctas por minuto, para 2do el promedio es de 49 letras y para 3er grado 60 letras por minuto. Utilizando una prueba de ANOVA, encontramos diferencias significativas entre los estudiantes que hablan el idioma espaol (castellano) y quienes hablan miskito, tambin hay diferencias entre grados, y sexo. Sin embargo, a lo interno de cada grado no existen diferencias significativas entre nios y nias.
Tabla 6a. Promedio de Letras ledas correctamente por minuto por grado, sexo e idioma. Grado Lenguaje Genero 1 2 3 Total 29.79 50.63 62.07 47.21 Masculino 32.50 49.44 61.14 47.61 Espaol Femenino 31.11 50.01 61.61 47.41 Total Masculino 10.52 32.31 43.57 27.67 14.44 46.42 49.40 32.10 Miskito Femenino 12.62 37.99 46.20 29.76 Total 27.07 48.09 59.80 44.59 Masculino 29.53 49.16 59.90 45.73 Total Femenino Total 28.29 48.63 59.85 45.16

En vista que slo se logr aplicar la prueba a 282 nios y nias de lengua miskita, no se ha considerado apropiado usar estos resultados en el anlisis pues las valoraciones carecen de fortaleza estadstica. Debido a ello a partir de aqu el grueso del anlisis se refiere a los resultados obtenidos en las escuelas hispano parlante11. RESULTADOS PARA ESPAOL 12
Tabla 6b. Promedio de letras segn formato del test A Genero Grado 1 2 3 Total Letras 28.30 51.16 62.72 46.90 Masculino correctas Femenino 34.07 49.47 61.84 48.49 por 31.46 50.19 62.22 47.79 minuto Total

1
30.97 30.50 30.77

B Grado 2 3
50.19 49.40 49.82 61.58 60.19 61.00

Total
47.46 46.47 47.03

11 12

Para los interesados en promedios generales por idioma se recomienda ver Anexo A5. Van a aparecer en algunas tablas resultados para la RAAS porque una de las escuelas en la cual se aplic la prueba era monolinge y sus estudiantes hicieron el test en espaol. Consecuentemente estos resultados son slo de un centro.

- 14 -

La grfica 2 ilustra la variabilidad observada en los resultados para los nios y nias del idioma espaol, con excepcin del 3er grado las nias aventajan a los nios varones en la velocidad de identificacin de letras.
Grfica 2. Letras Ledas correctamente por sexo y grado

Un anlisis basado en un indicador ponderado denominado % de Fallas por letras (total de veces que la letra fue leda de manera incorrecta sobre total de veces que esta se ley) permite determinar la dificultad que ofreci cada letra. La Grfica 3 muestra las letras con mayor nivel de dificultad: J, Ch, H, Q y Ll para todos los grados. (En el Anexo 7 se grafican estas dificultades grado por grado)

- 15 -

Grfica 3. Grado de Dificultad para Leer Letras (Resultados nacionales pilotaje 2007)
Grado de Dificultad para Leer Letras (Resultados del Pilotaje de EGRA Nicaragua 2007)

40

30

% de Fallas por Letra

20

10

C ch Ch d

Ll

Letras

La tabla 7 muestra las diferencias por turno, modalidad, departamento y dependencia, observndose que los mejores resultados en letras ledas cortamente por minuto se dan en los departamentos de Managua, las escuelas privadas subvencionadas, y en la modalidad extra edad. En cuanto a las diferencias por turno los resultados son mixtos. Los resultados ms deficientes se observan en las escuelas estatales, la modalidad multigrado y en la RAAS.
Tabla 7. Letras correctas ledas por minuto: grado, turno, modalidad, departamento, dependencia.
Diferentes Variables Asociadas 1 GRADO 2 50.21 48.61 53.36 47.67 51.97 48.70 48.59 52.81 53.98 50.96 47.85 51.10 3 62.17 58.63 66.09 59.26 63.70 57.85 59.94 73.52 64.89 63.80 55.66 63.91 Total 46.88 51.66 56.23 44.14 50.12 40.15 46.07 56.05 51.90 48.03 44.38 49.53

Turno Matutino Vespertino Modalidad Extraedad Multigrado Regular Dependencia Centralizado Participacion Educativa Privado Con Subvencin Privado Sin Subvencin Departamento Boaco Carazo Managua

30.69 38.66 49.25 25.83 35.35 19.69 29.81 41.53 36.94 29.70 29.47 33.77

- 16 -

RAAS13 Total

14.75 31.11

43.16 50.01

47.07 61.61

30.38 47.41

Lectura de palabras simples e inventadas El resultado promedio en palabras simples e inventadas indica que en primer grado los estudiantes reconocen un 23.41 de las palabras convencionales y 19.02 de las inventadas. Este nmero se incrementa a 49 palabras simples en segundo y 38.18 inventadas. En tercer grado el promedio de los estudiantes reconoce 64.74 palabras simples y 49.07 inventadas. Las nias tienen mejores promedios que los varones en todos los grados y en las dos secciones. Para ambas secciones los resultados siguen una tendencia ascendente segn el grado, lo cual es esperable a grado ms alto mayor nmero de palabras ledas--. Se encontr diferencias entre el nmero de palabras correctamente ledas dependiendo si eran estas simples o inventadas. Estas diferencias parecieran indicar que las palabras simples resultaron ms fciles que las inventadas. Podra ser que la familiaridad de las palabras simples ayuda a que a los nio-as puedan leerlas con mayor rapidez y precisin; esta facilidad se incrementa con el grado dado que en 1ro hay un 4% de diferencia entre las palabras simples ledas bien y las inventadas, en 2do un 10%, y en 3ro un 15%. Pudiera interpretarse que conforme se amplifica el vocabulario de los nio-as la lectura de grafemas y fonemas asociados a un significado comn se simplifica y a la inversa.
Tabla 8 Resultados segn formato de la prueba A Secciones del Genero test 1 2 21.10 49.28 Masculino Palabras correctas por Femenino 27.58 49.66 minuto 24.64 49.50 Total Palabras sin 17.33 39.42 Masculino sentido 22.67 38.14 Femenino correctas por 20.25 38.69 minuto Total Tabla 8b Resultado promedio por grado Secciones del Test Sexo 1 Masculino Palabras simples Femenino correctas por minuto Total Masculino Palabras sin sentido Femenino correctas por minuto Total
21.54 25.37 23.41 17.41 20.70 19.02

B 3
65.32 68.30 67.01 49.27 52.10 50.88

Total
44.61 48.56 46.83 34.87 37.67 36.44

1
21.90 22.52 22.16 17.48 18.16 17.77

2
46.99 49.83 48.31 36.71 38.73 37.65

3
61.16 64.27 62.45 46.01 49.01 47.26

Total
43.18 45.23 44.08 33.25 35.08 34.05

Grado 2
48.03 49.73 48.92 37.94 38.40 38.18

3
62.94 66.60 64.74 47.40 50.80 49.07

Total
43.81 47.12 45.46 33.97 36.55 35.26

13

Se reitera que estos resultados son slo de un centro monolinge.

- 17 -

Fluidez Lectora y Comprensin de lo ledo En promedio los nios y nias de primer grado leen 34 palabras por minuto, los de 2do grado 72, y los de 3ero, 83 palabras por minuto. Hay diferencias significativas por sexo, --a favor de las nias14, --, rea donde se ubica la escuela lo cual favorece a los centros urbanos; dependencia, a favor de las privadas y modalidad a favor de extra edad. Estas diferencias significativas tambin son favorables a los estudiantes del departamento de Managua (vase Anexo A2 Tablas A2.1-A2.6). Destacan los precarios resultados obtenidos por los nios y nias de la RAAS. Ntese que no se encontr diferencias significativas por turnos (A2.3).
Tabla 9 a Fluidez de Lectura por formato de prueba, sexo y grado Formato A Seccin Grado 1 2 3 Total 1 Gnero 24.28 71.87 96.96 63.33 23.34 Masculino Fluidez de 36.84 74.56 109.94 73.85 24.70 Femenino Lectura 31.15 73.41 104.33 69.24 23.92 Total

Formato B Grado
2 55.79 59.87 57.69 3 74.46 83.74 78.33 Total 50.98 55.62 53.01

Para evaluar comprensin lectora se asign 20 puntos a cada una de las preguntas respondidas correctamente y 0 a las que fueron respondidas equivocadamente o no respondidas del todo. En esta seccin el promedio de los nio-as de primero comprendi un 34.17% de la lectura, este porcentaje se increment a 72.89% en segundo grado, subiendo un 10% de segundo a tercero para 82.8% de comprensin de lectura. Las nias resultaron ms hbiles que los varones en esta tarea superndolos en ms de 5%. El departamento con mejores rendimientos promedios fue Managua, el ms bajo RAAS.
Tabla 9b. Comprensin Lectora por diferentes categoras
Categoras Sexo Masculino Femenino Turno Matutino Vespertino Area Rural Urbana Modalidad Extraedad Multigrado Regular Dependencia Centralizado Participacion Educativa Privado Con Subvencin
14

Grado 1 29.85 38.69 33.90 38.86 26.17 43.93 68.75 22.70 43.49 14.91 29.65 53.13

Grado 2 71.91 73.80 72.78 73.67 68.36 78.21 85.00 67.48 77.21 67.84 70.10 84.83

Grado 3 80.68 85.11 83.77 78.00 79.44 87.24 91.25 78.44 86.79 84.10 79.90 90.00

Total 60.21 65.80 62.13 70.00 57.75 69.43 81.67 55.93 68.86 52.14 59.74 75.70

Tal como se evidencia en el anexo A2.1 estas diferencias debidas a gnero slo aplican en general, pues al interior de los grados no hay diferencias estadsticamente significativas entre nios y nias.

- 18 -

Categoras Privado Sin Subvencin Departamento Boaco Carazo Managua RAAS Total

Grado 1 50.48 28.95 28.43 40.93 13.91

Grado 2 80.28 70.91 74.13 73.12 73.68

Grado 3 89.58 76.93 82.61 85.79 82.86

Total 73.38 58.61 61.83 66.48 46.94

34.17

72.89

82.86

63.00

La Figura No. 4 ilustra las dificultades en Comprensin Lectora qu e creo el formato B entre los estudiantes de primer grado. En cambio para el formato A, un 50% de los estudiantes de primer grado comprendi 20% de las preguntas sobre el texto. Por otra parte, hay estudiantes de 2do y 3er grado que presentan bajo nivel de comprensin (ver outliers) en el formato A.
Figura 4. Promedio de Comprensin Lectora por Grado y Tipo de Encuesta.

La pregunta ms difcil de contestar en el formato A, para el promedio de los nio-as--, fue Qu va a tener la mam de Mara ?. Esta pregunta present un mayor grado de dificultad para los estudiantes de primero pues slo 18.1% de ellos la respondi correctamente. La pregunta ms fcil fue Quin tiene una gata?, obteniendo un mayor porcentaje de respuestas correctas (97.8%) las nias del tercer grado.
Grfica 5a. Porcentaje de Respuestas Correctas por tem de Comprensin Lectora Formato A.

- 19 -

Porcentaje de Respuestas Correctas por item de la seccin 6 - Formato A


Femenino

Grado 3 Grado 2 Grado 1

Masculino

Femenino

Masculino

Femenino

Masculino 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Qu va a tener la mam de Mara? Es flaca o gorda la gata? Quin tiene una gata?

Dnde se escondi la gata? Qu le gusta hacer a la gata?

Para el formato B, -- Figura 5b--, la pregunta ms difcil de contestar para el promedio fue Quin es Lucas?, con un similar grado de dificultad para los nios y nias del primer grado con un promedio de 18.8% y 18.6% de respuestas correctas. La pregunta ms fcil fue Es flaco o gordo el perro?, con un mayor porcentaje de respuestas correctas pa ra las nias del tercer grado (88.6%).
Grfica 5b. Porcentaje de Respuestas Correctas por tem de Comprensin Lectora Formato B.
Porcentaje de Respuestas Correctas por item de la seccin 6 - Formato B
Femenino

Grado 3 Grado 2 Grado 1

Masculino

Femenino

Masculino

Femenino

Masculino 0% 10% 20% 30% 40% 50% 60% 70% 80% 90%

Quin es Lucas? Con quin viva el perro?

Cul es el trabajo de Dogo? Cmo se llamaba el perro?

Es flaco o gordo el perro?

- 20 -

Comprensin Oral y Dictado Las secciones de Comprensin Oral y Dictado comprenden un conjunto de tems codificados como dummies, sin embargo, reconociendo que los tem en cada seccin presentaban diferentes dificultades se ponder el valor de las respuestas. Para la calificacin se garantiz siempre que la suma mxima de los tems corregidos fuera de 100 puntos tal como se ilustra a continuacin:
Tabla 10. Valores ponderados de las subsecciones

Seccin Comprensin Oral Dictado

Subsecciones
7.1 y 7.2 7.3 8.1, 8.5 y 8.6 8.2 y 8.4 8.3

Puntuacin
30 puntos c/u 40 puntos c/u 10 puntos c/u 20 puntos c/u 30 puntos c/u

Total
100 puntos 100 puntos

A continuacin se presenta los resultados del anlisis en un mayor nivel de desagregacin. Para Comprensin Oral (seccin 7) el promedio de los nios y nias comprende un poco ms de la mitad del texto que se les ley. No existe diferencia estadstica entre los diferentes grados lo cual pudiera explicarse porque los nio-as tienen capacidades similares de comprensin cuando se les lee, independientemente que sepan leer o no. La Tabla 11 muestra que existe diferencias significativa por rea, dependencia, modalidad y departamento, a favor de las escuelas del rea urbana, privadas, las modalidades extraedad y regular, y los estudiantes del departamento de Managua (vase Anexos A3.1 a A3.6). Llama la atencin que los alumno-as de tercer grado de la escuela de la RAAS monolinge tienen un alto promedio de preguntas comprendidas, 94.29%, superando el promedio en 34%.
Tabla 11. Comprensin Oral por diferentes categoras Categoras Sexo Masculino Femenino Turno Matutino Vespertino Area Rural Urbana Modalidad Extraedad Multigrado Regular Dependencia 60.00 52.73 60.37 66.25 53.67 61.64 55.63 53.25 67.05 60.63 53.21 62.96 53.17 60.98 54.59 62.13 53.28 68.78 53.66 63.88 56.56 58.86 58.10 57.72 59.91 61.00 58.11 59.44 53.85 59.66 58.09 58.02 59.10 61.09 56.95 59.56 Grado 1 Grado 2 Grado 3 Total

- 21 -

Categoras Centralizado Participacin Educativa Privado Con Subvencin Privado Sin Subvencin Departamento Boaco Carazo Managua RAAS Total

Grado 1 59.09 53.57 58.13 64.55 48.09 54.53 61.78 57.39 56.69

Grado 2 54.31 55.22 58.62 67.41 53.57 55.63 61.22 60.53 58.06

Grado 3 67.18 54.63 64.38 73.13 48.40 60.31 64.72 94.29 60.08

Total 59.59 54.47 60.43 68.36 49.96 56.83 62.58 63.88 58.26

No hubo diferencias significativas para Comprensin Oral ni por turno, ni sexo, ni grado, no obstante, s se encontr diferencias por sexo y grado, cuando se tom en cuenta el tipo de formato (Ver anexo A3.1). La Grfica No. 6 ilustra los niveles de dificultad para los diferentes grados, confirmando la complejidad del formato B, y muestra que para este formato hubo mayor variabilidad de resultados. En la prueba B, y en el caso de 2do grado de la prueba A, los resultados de los nios y nias de segundo grado se distribuyen hacia la parte inferior a la mediana de 60% en comprensin oral.
Grfica 6. Promedio de Comprensin Oral por grado y Tipo de Encuesta.

En el formato A la pregunta ms difcil de contestar en promedio fue Cmo se llama la amiga de Mara?, y esta pregunta present un mayor grado de dificultad para los nios del primer grado pues slo un 45.6% la respondi correctamente. La pregunta ms fcil fue - 22 -

Dnde se queda Mara el sbado?, pues obtuvo un mayor porcentaje de respuestas correctas para los diferentes grados.
Figura 7a. Porcentaje de Respuestas Correctas por tem de Comprensin Oral Formato A.

En el formato B, la pregunta ms difcil de contestar en promedio fue Cmo se llama la hermana de Juan?, esta pregunta tuvo un grado de dificultad similar para los estudiantes de los tres grados. La pregunta ms fcil fue A qu juegan Juan y sus dos hermanos?, con un mayor porcentaje de respuestas correctas para las nias del tercer grado.
Figura 7b. Porcentaje de Respuestas Correctas

por tem de Comprensin Oral Formato B.

- 23 -

Evaluacin del Dictado En primer grado un promedio de 29% de estudiantes hizo correctamente el dictado, en segundo grado, este porcentaje ascendi a 56% y en tercero a 67%. En el dictado se encontr diferencias significativas por sexo, rea, dependencia, modalidad y departamento, a favor de las nias15, las escuelas privadas, rea urbana, la modalidad extra-edad, y los estudiantes del departamento de Managua (vase Anexo 4 Tablas A.4.1 a A4.6). Destacan los precarios resultados obtenidos por los nios y nias de la RAAS y los resultados favorables a Boaco dado que este departamento ms rural y ms pobre que Carazo, le saca ventaja a este otro en primer grado, tercero y en los totales generales (Ver Tabla A4 .13 en el mismo Anexo 4) Los resultados del dictado varan por grado y tipo de encuesta. La Figura No. 8 grafica esta variabilidad y muestra como los nio-as progresan en el dominio del dictado conforme avanzan de grado. Destaca la presencia de valores extremos entre alumno-as de tercer grado quienes no completaron el dictado.
Grfica 8. Resultados del Dictado por grado y Tipo de Encuesta.

Ntese que para el formato A, el promedio los nios y nias de primer grado est por debajo de Algo correcto en todos los tems del dictado. La Grfica 9a muestra que para todos los grados el tem con mayor grado de dificultad fue el Uso de puntacin correcta y el ms fcil fue escribir PAN, con un mayor porcentaje de respuestas correctas para nias y nios de tercer grado.
Grfica 9a. Porcentaje de Respuestas Correctas por tem del Dictado Formato A.

15

Tal como se evidencia en el cuadro A 2.1 estas diferencias debidas a gnero slo aplican en general, pues entre los grados no hay diferencias estadsticamente significativas entre nios y nias.

- 24 -

Los resultados para el formato B son similares, en la Grfica 9b se evidencia que en todos los grados el tem con mayor grado de dificultad fue: Uso de puntacin correcta, y el ms fcil, escribir DIO correctamente, pues aqu se concentra el mayor porcentaje de respuestas correctas para nias y nios de tercer grado.
Grfica 9b. Porcentaje de Respuestas Correctas por tems del Dictado Formato B.

- 25 -

V.

RESULTADOS Y VARIABLES ASOCIADAS

Las caractersticas socioeconmicas del hogar del nio Para analizar si se daban brechas de aprendizaje segn el estatus socioeconmico del estudiante, se construy una variable quintil. Para ello se utiliz informacin sobre los servicios y bienes que los estudiantes decan tener en casa, con estos datos se construy una Proxy de variables econmicas, y subsecuentemente los quintiles16. Confirmando lo que vastos estudios sobre el tema han encontrado 17, este pilotaje hall que las diferencias en caractersticas familiares de los estudiantes son un importante factor para explicar las diferencias en habilidades en lecto-escritura. La Tabla 12 muestra la distribucin de los estudiantes que particip en el pilotaje por departamento y quintil. Est a favor de la confiabilidad de este anlisis el hecho de que los valores son coincidentes con los resultados de la Encuesta de Medicin de Nivel de Vida, LSMS 2005. De acuerdo a estos datos Boaco concentra un 53.4% de estudiantes en el quintil inferior, sobrepasando el promedio de los cuatro departamentos que es 22.2% en 31%. A su vez Managua concentra slo 0.06%, --la menor proporcin--, de estudiantes en ese mismo quintil 1 colocndose por encima del promedio en casi 16%.
Tabla 12. Distribucin de la muestra por Departamento y Quintil Quintil Departamento 1 2 3 4 238 113 65 23 Boaco 106 148 134 43 Carazo 62 118 296 240 Managua 85 110 103 25 RAAS 491 489 598 331 Total

5
6 49 234 8 297

Total
445 480 950 331 2,206

La tabla 13 muestra que en cuatro secciones de la prueba: letras, palabras simples, inventadas y lectura fluida, los nios y nias que provienen de hogares ms acomodados econmicamente (quintil 5) presentan mejores resultados que sus pares del quintil en mayor desventaja (quintil 1). Estas diferencias son estadsticamente significativas 18. A pesar de esta tendencia general, es interesante hacer notar que Boaco concentrando ms de 78% de sus estudiantes en los quintiles 1 y 2 y muy pocos estudiantes en los quintiles 4 y 5, (0.06%), obtiene en primer grado un promedio de 29.7% de letras ledas correctamente por minuto, promedio superior al 29.4% obtenido por Carazo donde los estudiantes del quintil 1 representan un 22% y el total de alumnos de los dos quintiles inferiores es del 52%. Para segundo y tercer grado los estudiantes de Boaco tienen un promedio de letras correctas por encima del promedio y casi igualan a Managua donde hay una proporcin de 18% de
16

El ndice socioeconmico construido sumaba todas las variables dummy (10) de la pregunta 20 del cuestionario (en tu casa tens agua potable, electricidad, vehculo, libros en casa, cocina de gas, etc). No se incluyo cocina de lea. 17 M. Carnoy, A. Gove and J. Marshalls Cubas Academic Advantage (2007); E. Hanushek y J. Luque Efficiency and equity in schools around the world Economics of Education Review, 22 (2003); E. Vega and J. Pettrow, Raising Student Learning in Latin America WB (2007). 18 El Test Anova mostr diferencias significativas para todas las variables utilizadas en la tabla 8.

- 26 -

alumno-as en los quintiles 1 y 2. Es ms, los estudiantes de Boaco a quienes se administr el test superan los promedio de los quintiles 1 y 2 (ver tabla 9b) en lectura de palabras correctas para 1ro y en los casos de 2do y 3ro superan los promedios de palabras correctas por minuto hasta incluso del quintil 4. Aunque no es el objeto de este anlisis, conviene hacer notar que Boaco con casi el 90% de las escuelas de su muestra en el rea rural, no tiene el comportamiento esperado, tanto por su concentracin de poblacin en desventaja entre los estudiantes de la muestra como porque al ser su oferta escolar predominantemente rural es esperable que esta tenga una menor calidad dado que las escuelas rurales nicaragenses tienden a desempearse pobremente en relacin a las urbanas en una serie de indicadores escolares.
Tabla 13. Resultados de 4 secciones del Test por Estatus Socioeconmico, grado y Sexo Grado Quintil

Total

Letras correctas por minuto

Fonemas correctos

Palabras correctas por minuto

Palabras sin sentido correctas por minuto

1 2 3 4 5 Total 1 2 3 4 5 Total 1 2 3 4 5 Total 1 2 3 4 5 Total

27.10 26.97 31.11 34.92 39.51 31.11 3.60 4.34 5.32 5.57 7.87 5.12 16.92 19.88 23.35 29.47 32.74 23.41 14.42 15.75 18.90 23.66 26.46 19.02

48.46 49.27 47.80 50.78 55.84 50.01 4.97 5.91 5.72 8.74 9.72 6.76 47.81 47.69 46.04 51.95 53.55 48.92 36.17 36.90 36.92 40.47 41.97 38.18

63.34 56.04 58.32 63.57 69.08 61.61 4.58 6.73 6.60 9.39 13.99 7.87 64.64 57.43 60.79 69.30 75.02 64.74 49.43 44.40 45.86 51.27 56.92 49.07

45.47 43.92 45.33 50.13 55.36 47.41 4.33 5.64 5.86 7.96 10.64 6.57 41.91 41.44 42.82 50.76 54.55 45.46 32.49 32.18 33.49 38.84 42.35 35.26

Los resultados de los estudiantes cuyos padres de familia trabajan en Servicios Financieros son superiores en todas estas secciones a las de aquellos nio-as cuyos progenitores laboran en las ramas de agricultura o ganadera (Ver Anexo 5: A5 1), aunque estas diferencias no son estadsticamente significativas entre grados. Similares resultados se observa en el caso de la actividad econmica de las madres de los nios y nias que realizaron la evaluacin de lectura inicial (Anexo 5 A5. 3 ).

- 27 -

No se encontr diferencias estadsticamente significativas en ninguna de las primeras secciones de la prueba: letras, palabras simples y sin sentido--, fluidez lectora, al analizar los datos a la luz de variables como asistencia a preescolar o trabajo fuera de casa. Este no es el caso de la variable nivel educativo de la madre que hace diferencia estadsticamente significativa para las secciones (letras, palabras simples, palabras inventadas y fluidez de lectura) y grados (resultados de test ANOVA). Se sugiere que para una mejor determinacin de los efectos de estas citadas variables en el aprendizaje de la lectura inicial, se realice un anlisis de regresin con mayor detalle. Fluidez de Lectura y Comprensin Lectora La Tabla 15a muestra que los estudiantes que provienen de hogares ms acomodados econmicamente (quintil 5) obtuvieron mejores resultados en la lectura fluida de palabras en prrafos. La Tabla 15b confirma que los estudiante que provienen de hogares ms acomodados econmicamente (quintil 5) presentan mejores resultados en cuanto a Comprensin Lectora respecto a sus pares en desventaja los del quintil 1. Como se aprecia en la Tabla 15b se encontr diferencias estadsticamente significativas asociadas al nivel socioeconmico entre los estudiantes de los diferentes grados (pvalue=0.0283).
Tabla 15 Palabras correctas por minutos en prrafos de comprensin lectora Grado Seccin 1 2 3 Quintil 19.59 62.71 91.11 1 Palabras 2 22.37 64.52 82.37 correctas x 26.30 59.52 86.09 3 minuto en 36.45 73.89 97.38 4 prrafos de 5 40.84 72.57 104.47 lectura 27.55 65.69 91.37 Total

Total 56.12 56.04 56.38 70.07 73.81 61.19

Tabla 15b. Resultados Comprensin Lectora por Estatus Socioeconmico, Grado


Quintil 1 2 3 4 5 Total Grado 1 23.51 27.79 32.88 42.00 54.84 34.17 Grado 2 64.46 70.61 71.05 79.63 82.00 72.89 Grado 3 77.83 78.40 84.84 87.04 87.50 82.86 Total 53.66 58.66 62.16 70.25 75.42 63.00

Comprensin Oral Aunque en el anlisis general los resultados de Comprensin Oral no mostraron diferencias estadsticas por grado, (vase Tabla 16) al examinar estos mismos resultados tomando en cuenta el nivel socioeconmico de los estudiantes si se encontr diferencias significativas a favor de los estudiantes pertenecientes al 20% (quintil 5to) superior de la distribucin (Anexo 4, A4.7).
Tabla 16 Resultados Comprensin Oral por Estatus Socioeconmico, Grado
Quintil 1 Grado 1 48.44 Grado 2 55.45 Grado 3 51.23 Total 51.43

- 28 -

2 3 4 5 Total

54.27 58.70 64.30 61.72 56.69

56.59 54.71 62.59 64.00 58.06

55.44 62.17 67.59 66.35 60.08

55.44 58.45 64.84 64.11 58.26

Dictado Los resultados para el Dictado , tambin arrojan diferencias significativas entre los estudiantes de diferentes quintiles, aunque este efecto no se manifiesta a lo interno de los distintos grados (pvalue=0.3109). Igual que en Comprensin Oral el formato A present un menor nivel de complejidad para los estudiantes en los diferentes quintiles (pvalue=0.0591).
Tabla 17. Resultados del Dictado por Estatus Socioeconmico, Grado
Quintil Grado 1 Grado 2 Grado 3 Total

1 2 3 4 5 Total

23.02 23.55 28.16 37.30 40.65 29.20

53.43 53.14 54.71 57.69 60.50 55.56

62.79 63.68 65.28 71.90 76.06 67.31

45.22 46.55 48.83 56.09 59.73 50.47

Existe amplia literatura que identifica la pobreza como una de las principales causas del trabajo infantil, y abundantes estudios que confirman la asociacin entre bajos logros de aprendizaje y trabajo infantil 19. Este pilotaje confirma que los nios y nias que trabajan fuera del hogar tienen en promedio niveles inferiores de Comprensin Lectora y mayores dificultades en el Dictado respecto a sus pares que no trabajan. La nica seccin en la cual no se not estas diferencias fue C omprensin oral lo cual es indicativo de que estos-as nio-as tienen las mismas capacidades que sus pares de comprender lo estudiado, pero menos oportunidades de aprender, por su dificultad para seguir el ritmo de quienes no se ven obligados a trabajar (ver Tabla 18). En Anexos A2.8, A3.8 y A4.8 se aprecia las diferencias estadsticamente significativas para cada seccin de la prueba segn si los estudiantes trabajan fuera de su hogar o no.
Tabla 18. Resultados de las secciones de comprensin y dictado por grado y Estudiante Trabaja Estudiante trabaja Grado 1 Grado 2 Grado 3 Total Respuestas correctas en Comprensin Lectora Compresin Oral Dictado
19

Si No Total Si No Total Si

20.00 37.42 34.17 56.54 56.74 56.69 18.94

62.62 75.38 72.89 59.07 58.00 58.06 45.37

78.30 83.92 82.86 57.26 60.81 60.08 58.35

51.59 65.85 63.00 57.56 58.54 58.26 39.54

Estudio en 11 pases de Gunnarsson, V., Orazem P. y Snchez M. (2003). Child labor and school achievement in Latin America. Working Paper nm. 03023. Iowa University, Estados Unidos, hall que el trabajo infantil produce efectos negativos en las calificaciones de los nios.

- 29 -

No Total

31.63 29.20

57.67 55.56

69.20 67.31

53.05 50.47

Otras variables analizadas porque son aproximaciones del nivel socioeconmico de los estudiantes que se contrastaron fueron: a) Asistencia a Preescolar: se encontr diferencias significativas en segundo y tercer grado en comprensin lectora, aunque igual que en las otras secciones las respuestas a la seccin de Comprensin Oral no se diferenciaron entre quienes haban o no asistido a preescolar. No obstante, la asistencia a preescolar si parece influir en diferencias estadsticas que se detectaron en el Dictado para los estudiantes de 3r grado (vase Anexos A2.8, A3.8, A4.8 y A.5.1). b) Nivel educativo de la madre del estudiante : existe diferencias significativas en cuanto a Comprensin L ectora y en el Dictado a favor de los estudiantes que tienen madres con nivel educativo de bachiller o superior, no hay diferencias en cuanto a Comprensin Oral (vase Anexos A2.9, A3.9, A4.9 y A5.2). c) Rama de actividad econmica del pap: existen diferencias significativas en Comprensin lectora, Comprensin Oral y en el Dictado a favor de los estudiantes cuyo pap trabaja en el Sector Financiero, el cual es un excelente proxy de nivel socioeconmico, dado que es el sector mejor pagado en la economa nicaragense (vase Anexos A2.10, A3.10, A4.10 y A5.3). d) Rama de actividad econmica de la mam: en todas las secciones con excepcin de la de Comprensin Oral se presentaron diferencias estadsticamente significativas al tomar en cuenta el tipo de trabajo que realiza la madre (vase Anexos A2.11, A3.11, A4.11 y A5.4). El rol del docente y su influencia en los resultados Junto con la informacin socioeconmica de los hogares de los nios y nias, se recogi datos sobre caractersticas de los docentes responsables de los estudiantes evaluados. En general los nios y nias cuyos docentes tienen ttulo de licenciado obtienen mejores resultados que aquellos cuyo docente no cuenta con este nivel de calificacin. En Comprensin Oral, el nivel educativo de Licenciado en Educacin (ttulo universitario) se asoci a mejores resultados estadsticamente significativos. Sin embargo, no se observ diferencias claras entre los nios-as cuyo docente es Maestro de Primaria graduado. Estos hallazgos preliminares surgidos de un anlisis estadstico bsico coinciden con los resultados obtenidos en el estudio de las pruebas nacionales estandarizadas (Arcia, Porta y Laguna, 200420).
Tabla 19. Resultados comparativos segn titulo de licenciado del docente Grado Titulo de Licenciado (a) 1 2 3 No 31.62 51.67 60.92 Letras correctas 33.57 48.57 67.21 Si
20

Total
48.18 52.44

Arcia G, Porta E., y Laguna J.R., Resultados pruebas 2002 y factores asociados a las mismas. Documento MED.

- 30 -

Total No Fonemas Si correctos Total No Palabras correctas por Si minute Total Palabras sin No sentido Si correctas por minuto Total No Fluidez de Si Lectura

por minuto

31.94 3.67 4.11 3.74 22.99 22.94 22.98 18.79 18.56 18.75 26.92 25.69 26.72

50.90 5.72 8.70 6.46 51.99 45.37 50.34 40.38 36.11 39.32 68.62 62.86 67.18

62.40 6.77 12.56 8.13 64.65 71.22 66.19 48.81 55.11 50.29 89.59 102.41 92.60

49.10 5.40 9.14 6.21 46.67 50.34 47.47 36.06 39.50 36.81 61.98 69.77 63.66

Total

Otros factores relacionados con la metodologa y foco de la enseanza tales como, ensear los fonemas , asignar ejercicios o lecturas individuales , no resultaron en diferencias significativas para las cuatro primeras secciones de la prueba: letras, palabras simples y sin sentidoy fluidez lectora. No obstante, estos mismos factores se asociaron positivamente en comprensin lectora, oral y dictado. Se encontr que si el docente ensea fonemas, (Anexo A2.15) y asigna ejercicios en clase (A2.16) sus estudiantes tienen diferencias positivas y estadsticamente significativas en sus resultados en Comprensin Lectora, Comprensin Oral y Dictado. E xclusivamente en Comprensin oral los resultados se ven positiva y significativamente influidos cuando el docente deja tareas para hacer en casa, (Anexo A.2 15) o les lee a los estudiantes y les hace preguntas sobre lo ledo. Cuando los padres leen genera tambin una asociacin de signo positivo en los resultados de estas secciones. Estos hallazgos ratifican lo documentado en la literatura en cunto la importancia de lo qu hace el docente su tiempo de instruccin 21 (Abadzi 2006, Carnoy et al., 2007). Se observ tambin, que cuando el docente es profesional en reas distintas a la de educacin, esta calificacin no tiene impacto en los resultados del Dictado y Comprensin Lectora (Ver Anexo 5 A5.6 al A5.8). Esto ltimo pudiera vincularse al hecho que estos docentes no dominan la didctica de las asignaturas o las metodologas pedaggicas apropiadas, pero esta afirmacin es puramente especulativa. Expectativas Docentes Las creencias de los docentes (Castro 98 22) y sus expectativas con respecto a su futuro y la capacidad de sus alumno-as resultaron sumamente relevantes para el anlisis de los logros del aprendizaje. La Tabla 20 muestra como las expectativas negativas del docente sobre sus alumno-as al esperar que reprueben, se asocian a resultados inferiores en la prueba con valor estadstico significativo (ver Anexos 3 y 4 A3.12 y A4 12).

21 22

H. Abadzi, Efficient Learning for the Poor, 2006 ; Carnoy et al., ibid (2007). Preguntas sobre estos temas se incluyeron dado que Vanessa Castro una de las integrantes del equipo de este estudio escribi su tesis doctoral sobre TeachersBeliefs and their impact in Repetition. Este estudio confirma los hallazgos de esa tesis.

- 31 -

Tabla 20 Resultados a la luz de la variable expectativa del docente con respecto a la reprobacin de sus alumnos Grado Cree que alguno de sus alumnos reprobara 1 2 3 Total Letras 43.17 52.09 69.36 55.67 No correctas Si 29.39 49.68 57.98 44.91 letters por 31.22 49.99 59.98 46.47 minuto Total No 9.12 8.90 14.52 11.08 Fonemas 4.42 6.58 6.50 5.79 Si correctos 5.05 6.88 7.91 6.55 Total 38.66 48.85 74.47 55.15 No Palabras 21.19 49.04 60.42 42.49 correctas Si por minuto Total 23.52 49.02 62.90 44.32 Palabras sin No 30.76 36.92 56.32 42.19 sentido 17.32 38.53 45.95 33.17 Si correctas por minuto Total 19.11 38.33 47.78 34.48 48.61 65.03 110.12 76.60 No Fluidez Si 24.60 65.98 84.73 56.79 lectora

Total
No

Comprension Si Lectora Comprensin Si Oral Dictado

27.80 58.68 30.77 34.49 65.13 55.12 56.46 52.43 25.97 29.50

65.86 72.39 73.72 73.55 67.04 57.92 59.09 56.97 55.81 55.96

89.20 88.64 81.36 82.65 65.68 61.19 61.98 79.32 63.19 66.03

59.66 74.04 60.68 62.62 65.91 57.89 59.06 63.87 47.36 49.76

Total
No

Total
No

Si Total

Ahora bien, al analizar los resultados a la luz de las expectativas del docente con respecto a su futuro en el mediano plazo (respuestas a pregunta: dnde se ve Ud. --el docente-- en un lapso de 5 aos?) se encuentra una gama variada de efectos que confirma la importancia de la motivacin de los maestro-as. Aquellos estudiantes cuyos docentes manifiestan estar desmotivados y anhelan cambiar de escuela o de grado obtuvieron inferiores resultados que sus pares (ver Anexo 5: A5. 9, al A5.10). Por otra parte, resulta interesante que los alumno-as de docentes con expectativas de abandonar el sistema educativo o irse fuera del pas en el mediano plazo, obtuvieron resultados superiores -- estadsticamente significativos--, respecto a los de estudiantes cuyos docentes no tienen este tipo de expectativas (ver Tabla 21a y b). Parecieran visualizarse las siguientes tendencias desde el punto de vista de las expectativas de movilidad: Cuando los docentes se ven a si mismos en otra escuela, (movilidad aparentemente horizontal) esto no influye estadsticamente en los resultados de sus estudiantes. Cuando los maestro-as se ven a si mismos trabajando en otros grados, fuera del pas o contando con mayores recursos en los prximos 5 aos, (movilidad vertical

- 32 -

aparentemente), los resultados de sus estudiantes se afectan positivamente en la seccin de Comprensin Lectora. Cuando los maestro-as se ven a si mismos como profesores de secundaria, fuera del sistema educativo o como tcnicos del MINED (movilidad vertical) su actitud influye positivamente en Comprensin Oral. Dado que los resultados de la seccin Comprensin Oral son los que variaron menos de grado a grado, pues todo-as los estudiantes de 1ero a 3er grado comprenden slo dos tercios de lo que se les lee conviene analizar esta ltima informacin con ms herramientas. Al incluir otras variables tales como trabajar como profesor de secundaria o trabajar en una ONG (ver Anexo 5 A511 al A14) los resultados son similares a los anteriores.
Tabla 21a. Resultados segn Expectativa del Docente 4 secciones (espera ser Tcnico del MINED) Fuera del sistema Grado educativo, en otra rea 1 2 3 Total 31.24 49.54 60.53 46.37 Not Letras correctas 25.79 54.99 71.90 51.71 Yes por minute 31.17 49.67 60.69 46.46 Total 5.10 6.82 8.16 6.62 Not Fonemas 9.88 17.14 23.50 16.90 Yes correctos 5.16 7.07 8.38 6.79 Total 23.62 48.35 63.69 44.22 Palabras simples Not 18.34 62.66 67.58 52.15 correctas por Yes minuto 23.55 48.70 63.74 44.35 Total 19.22 37.85 48.35 34.41 Not Palabras sin sentido correctas Yes 14.74 46.66 49.93 39.02 por minuto 19.16 38.06 48.38 34.48 Total 27.82 65.00 90.11 59.43 Not Fluidez Lectora Yes 23.95 86.38 88.14 70.20

Total

27.77

65.52

90.08

59.61

Tabla 21b. Resultados segn Expectativa del Docente (Espera emigrar del pas ) Grado Irse del Pas 1 2 3 31.18 49.58 60.59 Not Letras correctas 30.66 55.43 61.55 Yes por minute 31.17 49.67 60.69 Total 5.12 6.88 8.10 Not Fonemas 7.42 19.22 10.59 Yes correctos 5.16 7.07 8.38 Total 23.51 48.46 63.61 Not Palabras 25.49 63.72 64.82 correctas por Yes minuto Total 23.55 48.70 63.74 19.13 37.92 48.16 Not Palabras sin 20.84 47.05 50.14 sentido Yes correctas por 19.16 38.06 48.38 Total

Total
45.98 56.35 46.46 6.58 11.07 6.79 43.64 58.95 44.35 33.95 45.51 34.48

- 33 -

minuto Fluidez Lectora Not Yes Total


27.67 33.33 27.77 65.18 86.76 65.52 89.96 91.02 90.08 58.52 82.11 59.61

Tabla 21c. Variable significativa segn expectativas laborales del docente y comprensin lectora/oral y dictado
Expectativa laboral docente prximos 5 aos a. Como docente en otra escuela b. Me gustara trabajar en otros grados c. Me gustara trabajar como profesor de secundaria d. Me veo fuera del sistema educativo, trabajando en otra rea e. Trabajando como tcnico del MINED f. Trabajando para una ONG g. Fuera del pas h. Con un mejor salario, ms conocimientos y recursos didcticos i. Otro X X X X X X X X X X X Comprensin Lectora Comprensin Oral Dictado

Materiales didcticos y textos La disponibilidad de libros de textos de espaol y materiales didcticos result positiva y significativa estadsticamente --incluso por grado--, en Comprensin lectora y Dictado, pero no influy en los resultados de C omprensin oral.
Tabla 22. Resultados de Comprensin Lectora, Oral y Dictado en relacin a tenencia de Texto de Espaol
Secciones Respuestas correctas en Comprensin Lectora Comprensin Oral Espaol - Textos Si No Total Si No Total Si No Total Grado 1 Grado 2 Grado 3 43.64 73.75 84.43 28.45 72.76 81.05 34.46 58.93 55.16 56.65 38.28 23.73 29.49 73.31 59.56 57.63 58.70 57.88 53.35 55.86 83.38 61.22 63.31 61.87 71.18 59.53 67.58 Total 70.07 53.52 62.46 60.06 57.66 58.96 58.04 40.63 50.03

Dictado

- 34 -

La Infraestructura Escolar y los resultados de las pruebas Tambin se analiz los datos recogidos en el campo a la luz de informacin estadstica suministrada por MINED del ao 2007. Esta informacin contena datos de: matrcula, rendimiento escolar e infraestructura escolar. El Anexo 6 detalla el efecto de estas variables en cada seccin de los dos formatos de prueba. Se incluy tambin en este anlisis las secciones iniciales de la prueba que se haban analizado en el informe de Febrero porque entonces an no se dispona de esta base de datos. Es una medida de la confiabilidad de los datos de este pilotaje la coincidencia que se encontr entre los datos recopilados por el MINED sobre aprobacin y la informacin arrojada por las pruebas. En la Tabla 23 se muestra como las escuelas con menor nivel de aprobacin segn las estadsticas del MINED son tambin aquellas cuyos resultados promedios en el pilotaje son los ms bajos. Este resultado se sostiene en Comprensin Lectora, Comprensin Oral y Dictado, y es estadsticamente significativo, ver Tabla 23b.
Tabla 23a. Resultados Comprensin Lectora y Rangos de Aprobacin Primaria Secciones Rangos Grado 1 Grado 2 Grado 3 Comprensin Lectora por <80 24.25 62.03 78.63 Rangos de Aprobacin segn 80-90 34.29 78.78 84.18 datos MINED 90-100 58.29 83.91 89.06 Comprensin Oral por Rangos <80 53.11 54.14 55.27 de Aprobacin segn datos 80-90 57.97 58.65 59.92 MINED 90-100 61.63 64.45 68.36 Dictado por Rangos de <80 20.26 46.50 60.25 Aprobacin segn datos 80-90 30.11 59.54 68.31 MINED 90-100 49.53 66.95 80.27 Tabla 23b. Test Anova de Comprensin Lectora y Rangos de Aprobacin Primaria

Total 54.49 65.94 77.04 54.16 58.86 64.81 42.00 52.82 65.55

La existencia de agua potable y saneamiento (aguas negras), electricidad y medios de comunicacin (telfono e internet) aparece impactando positiva y significativamente en Comprensin Lectora, Comprensin Oral y Dictado (ver Anexos A6.1 al A6.4). Sin embargo, variables como la funcionalidad del local (diseado y construido para escuela o adaptado), tener radio, telgrafo, correo postal u otros no se asoci a los resultados medidos en el pilotaje. - 35 -

La Tabla 24 ilustra como los estudiantes de escuelas con acceso a agua potable presentan mejores resultados promedios que los estudiantes de aquellos centros sin ese servicio. Las diferencias son ms relevantes para los nios y nias de primer grado y son estadsticamente significativas (ver Tabla 27b). Similares resultados se obtuvieron en acceso a saneamiento, electricidad y medios de comunicacin.
Tabla 24. Resultados de las Secciones y Agua Potable en la Escuela
Mean correct lett ers per minute 23.5626 33.7721 31.6592 47.9334 50.8009 50.2218 61.3206 61.8841 61.7739 43.8436 48.8380 47.8317 correct words per minute 15.8566 26.0149 23.9126 49.5608 48.9626 49.0834 63.5466 65.2651 64.9290 42.4312 46.7792 45.9031 correct nonsense words per minute 12.9112 21.0655 19.3780 38.4183 38.1714 38.2213 47.2026 49.6656 49.1840 32.4369 36.3215 35.5388 correct connected text words per minute 17.8196 30.7824 28.0997 64.9528 66.1293 65.8917 88.4162 92.5243 91.7209 56.2532 63.1999 61.8002 correct answers t o comprehen sion 23.66 37.77 34.85 68.55 73.96 72.87 78.70 83.87 82.86 56.30 65.18 63.39 correct answers t o oral comprehen sion 53.28 57.49 56.62 55.56 58.59 57.98 50.89 61.84 59.70 53.25 59.32 58.10 correct answers t o dictation 21.83 31.90 29.82 55.81 55.61 55.65 63.86 68.24 67.38 46.65 51.93 50.87

grado 1

Total

Agua Potable en la Escuela? Not Yes Total Not Yes Total Not Yes Total Not Yes Total

La influencia del nivel socio-econmico de los pares entre los estudiantes que tomaron la prueba Con el objetivo de retroalimentar a las escuelas de la muestra con los resultados de sus estudiantes en la prueba, y aportar a que tomaran medidas para mejorar, se hizo un trabajo de anlisis sobre influencia en la prueba de la pobreza del alumnado como grupo, para ello se utiliz la tcnica del cluster. Esta tcnica permiti elaborar reportes sobre EGRA centro por centro agrupando las escuelas segn su nivel de pobreza para luego comparar los resultados de cada con los de todas las escuelas de la muestra, los de los centros del departamento en el que se ubicaban, resto de la muestra en esa jurisdiccin--, y con los de sus pares en porcentaje de estudiantes en pobreza. Para ello, se construy dos clusters de anlisis que permitieran clasificar como pobres o no pobres a los estudiantes de cada escuela que tomaron la prueba. En esta tarea se utiliz las respuestas a las preguntas del cuestionario socioeconmico comprendidas entre la 20 y la 20h, que cubran tems como tiene acceso a servicios, hasta tipo de bienes exist entes en el hogar. Las respuestas permitieron que se construyera una variable Proxy de pobreza, en base a esta variable se agrup a los estudiantes slo a quienes hicieron la prueba--, segn su nivel de pobreza. Tomando en cuenta el nmero de nio-as pobres y no pobres se clasific las escuelas en dos tipos segn su porcentaje mayoritario de estudiantes pobres y no pobres. En la siguiente tabla se muestra la clasificacin de escuelas segn nivel de pobreza de la mayora de lo-as nio-as que tomaron la prueba. (Ver en Anexo 6 tabla con resultados de pobreza por centro y dos ejemplos de reportes escolares sobre EGRA divulgados a las escuelas participantes en el pilotaje). No se corri pruebas estadsticas a estos resultados pero si se - 36 -

encontr que hay escuelas con alto porcentaje de estudiantes pobres, que a pesar de ello obtuvieron mejores resultados que sus escuelas pares mismo porcentaje de estudiantes en el nivel de pobreza--, en la prueba. Un ejemplo es la escuela J P con ms del 95% de los estudiantes que tom la prueba, en pobreza. En este centro los alumnos-as, obtuvo mejores resultados que sus pares en escuelas cuya mayora de estudiantes estaba en el mismo nivel de pobreza.
Comprensin Lectora Tabla 29: Resultados comparativos Escuela J P Masculino Total Nacional Depto Similar Femenino 31.7 37.7 35.2 28.3 29.7 26.0 Grado 1 59.8 66.4 62.3 48.6 51.0 64.7 Grado 2 69.6 68.7 69.0 59.9 63.8 61.1 Grado 3 53.8 56.2 55.1 45.2 48.0 44.7 Total
Nota: Valores corresponden a resultados promedios.

Sera objeto de otro estudio de corte cualitativo--, explorar con precisin el tipo de factores asociados a buenos resultados en escuelas donde una mayora de los estudiantes que tom el test estaba en pobreza. Sin embargo, este tipo de ejemplos confirma que la presencia de factores escolares positivos para el aprendizaje tiene mucha relevancia. VI CONCLUSIONES Con respecto al trabajo de campo y su organizacin En general se considera que el TC se llev a cabo con xito a pesar de que existieron presiones de tiempo en cuanto a la definicin final de la muestra y la reproduccin de los materiales. La meta se cumpli en un 92%, aunque si no se hubiera trabajado en la RAAS el cumplimiento hubiera sido mayor pues en Managua y Carazo se consigui cubrir el 100% de escuelas y estudiantes, y en Boaco el 93%. Este 92% con un promedio de cumplimiento del 69% en la RAAS es aceptable, ms an si se toma en cuenta la poca de fin del ao escolar que conlleva exmenes finales, horarios ms cortos e irregularidades. Se recomienda para el trabajo que se efectuar en el 2008: a- Seleccionar con anticipacin la muestra para corroborar con tiempo las direcciones y datos de cada escuela y garantizar la mayor eficiencia en el campo. b- Realizar el TC en poca ms adecuada. Verificar fiestas locales para evitar contratiempos. c- Mejorar algunos aspectos administrativos como la firma de contratos y reproducciones del material del TC. d- Mejor aprovechamiento del tiempo de acompaamiento de la coordinacin en el TC. Lograr asesorar a dos equipos en un da.

- 37 -

e- Mejorar la poltica de entrega de cuadernos y lpices a los participantes. Elaborar una hoja de instrucciones al respecto. Con esta experiencia se espera para el trabajo que se realizar en marzo-abril del 2008, una mejora en los todos los aspectos organizativos. Con respecto a la prueba como instrumento Tanto la prueba como los cuestionarios probaron ser bastante confiables dado que los errores originados en el instrumento son pocos y se concentran en la seccin de Dictado de la prueba, estos errores dado que el dictado quedaba escrito se subsanaron sin consecuencias. No obstante, para conseguir una mayor eficiencia en el campo se considera recomendable reducir el nmero de preguntas del cuestionario socio econmico para los estudiantes y no aplicarlo a los estudiantes de 1ro. En esta segunda fase esto no creara problema pues la prueba se administrar a partir de 2do grado. Se parte del supuesto que el conocimiento de los estudiantes sobre cmo vive su familia puede ser mayor y ms confiable a partir de 2do grado. Particularmente se recomienda disminuir la duracin de la prueba reduciendo para ello un conjunto de preguntas que se precisarn en la primera semana de marzo. Si se disminuye en 2.8 minutos se puede lograr superar la meta de 48 estudiantes por escuela al hacer 4 estudiantes por hora. Se recomienda tambin equiparar el nivel de dificultad de ambos formatos A y B para espaol puesto que la prueba no se administrar en miskito en esta ocasin. Considerando los bajos resultados observados en la seccin de fonemas, conviene revalorizar la pertinencia de volver a incluir dicha seccin en la aplicacin.

Como resultado de este anlisis se puede emitir algunas conclusiones relacionadas con el tema de la alfabetizacin inicial en Nicaragua que se refieren exclusivamente a esta muestra. En lo general En promedio los nios y nias que tomaron la prueba no tuvieron unos resultados negativos puesto que se ubicaron cerca de las metas o estndares que se han venido aceptando internacionalmente: en primer grado leyeron 34 palabras por minutola meta es 35--, en segundo grado 72, --siendo la meta 60--, y en 3ero, 83 palabras por minuto. Como esta muestra tiene una sobrerepresentacin de centros de la capital (20 de 47) esto ms el tamao de los centros que es en general medio pudiera estar influyendo en estos resultados favorables. Las nias obtuvieron mejores resultados y en general los estudiantes del rea urbana lo cual confirma tendencias internacionales y destaca la desventaja casi 10 puntos promedio en fluidez lectora de los estudiantes de escuelas rurales.

- 38 -

Los centros privados y la modalidad conocida como extra edad que sirve a estudiantes mayores tambin resultaron con mejores resultados. Estas diferencias significativas tambin favorecen a los estudiantes del departamento de Managua. Destacan los precarios resultados obtenidos por los nios y nias de la RAAS lo que confirma su desventaja histrica por una multiplicidad de factores, uno de los principales, el abandono general de los gobiernos nacionales a la costa Caribe. Tambin pueden haber influido en estos pobres resultados el alto nivel de empirismo que prevalece en el Caribe, el dbil apoyo institucional a los programas bilinges que no son debidamente monitoreados y apoyados. Llama la atencin los resultados de Comprensin Oral que difieren de los patrones seguidos por las otras dos secciones. Dado el tamao de la muestra 2007 conviene retomar este asunto con mayor detenimiento al analizar los datos que se recopilaron en Abril-Mayo 2008. Las caractersticas del estudiante Igual que en otros estudios ms amplios con muestras mayores--, esta investigacin piloto confirm la importancia de las caractersticas socio-econmicas de la familia del estudiante y sobre todo de su capital humano, --medido este por el nivel educativo de la madre--, en el rendimiento en pruebas estandarizadas. No obstante, es importante resaltar la existencia de excepciones a esta tendencia en centros especficos y departamentos como Boaco. El rol del docente Su preparacin La formacin inicial del docente fue una variable controversial. No se encontr que ser graduados de una Normal Magisterial incidiera positivamente en los resultados, pero si se encontr que si el maestro-a es graduado como licenciado en educacin esto resulta positivo en el rendimiento de sus estudiantes. Sus mtodos pedaggicos Se confirm la importancia de que hace el docente utiliza el tiempo de instruccin en el aula de clase. Se encontr que los docentes de la muestra que enseaban fonemas, ejercitaban a sus estudiantes durante la clase, que les lean y preguntaban sobre la lectura, dejando adems tareas para hacer en casa tenan estudiantes cuyos resultados en las secciones de comprensin y dictado fueron superiores estadsticamente. Expectativas Se confirm la relacin entre las expectativas del docente y los resultados de sus estudiantes. Cuando el docente esperaba que sus estudiantes o una mayora de los mismos al menos reprobaran, la tendencia era que estos obtuvieran bajos resultados.

- 39 -

Se encontr que las expectativas del docente sobre su futuro a mediano plazo (donde se ve el docente en un lapso de 5 aos) cuando son de movilidad vertical o positivas se asocian a mejores rendimientos en las pruebas de sus alumnos, y viceversa. Infraestructura escolar y condiciones escolares La existencia de servicios tan bsicos como letrinas, agua potable y saneamiento influy positivamente en los resultados. Esta relacin fue tambin confirmada en un estudio para el Banco Mundial en estado de borrador 23. En otros estudios a nivel internacional la tendencia es encontrar resultados mixtos o no concluyentes sobre el tema. Pareciera que la precariedad de los centros escolares nicaragenses y las dificultades que pasan nio-as y maestro-as por carecer de agua y servicios sanitarios mnimos, dan importancia a garantizar un ambiente escolar higinico en sus aspectos bsicos. La tenencia de textos y materiales didcticos en espaol tambin result estadsticamente significativa en la muestra para las secciones de comprensin lectora, oral y dictado. Igual que en el caso del agua, la carencia de textos puede crear un ambiente inapropiado, dificultando adems la labor de enseanza de los docentes. Por ello contar con un mnimo de textos y materiales para los nio-as adquiri en esta muestra relevancia para el aprendizaje, beneficindolo. Pobreza vs factores escolares El estudio tambin indica que las caractersticas de los estudiantes son un factor de peso en el aprendizaje aunque hubo un departamento Boaco con alto nivel de pobreza y tambin escuelas de la muestra con resultados sorprendentemente buenos, a pesar de que reunan entre los estudiantes que tomaron la prueba una mayora de nio-as en pobreza. Esto da relevancia al role de los factores escolares.

23

Este estudio sobre gasto pblico en educacin est por terminarse y fue preparado por Laguna JR., Porta E., y Castro V. en julio 2007 usando para ello los resultados de las pruebas nacionales 2006.

- 40 -

ANEXOS 1 al 6 en file: Anexos a informe final Julio 10 Anexo 7 en file: Grafo dificultad de lectura letras por grado

- 41 -