Criterios para la construccin de pruebas en idiomas maya

PROCESO DE CONSTRUCCION DE PRUEBAS EN IDIOMAS MAYA (Ponencia GUATEMALA) Celso Bonifacio Clacln Solis, Viceministro Bilinge /Guatemala Justo Magzul, DIGEBI/MINED C,Guatemala Ventura Salanic, S!ID/Guatemala
Introduccin El Programa de Estndares e Investigacin Educativa en Guatemala tiene establecido entre sus metas un mecanismo para administrar un Fondo de Respuesta Rpida para permitir a USAID/Guatemala responder e icientemente a solicitudes del !inisterio de Educacin relacionados con actividades de Educacin "iling#e Intercultural$ Entre las principales actividades se encuentra la evaluacin de las %abilidades ling#&sticas de docentes biling#es para certi icarlos como aptos para desempe'ar su papel de acilitador del aprendi(a)e de ni'os * ni'as ma*as en las escuelas biling#es interculturales en el pa&s$ +os primeros es uer(os de medicin de %abilidades ling#&sticas a docentes biling#es se iniciaron en el a'o ,--- utili(ando pruebas dise'ados por la Direccin General de Educacin "iling#e Intercultural .DIGE"I/ En el a'o ,--0 se %i(o el primer es uer(o de evaluacin masiva de docentes en servicio utili(ando pruebas le lectura en oc%o idiomas ma*as$ En el a'o ,--1 se evaluaron el %istrico n2mero de 3456 docentes aspirantes a pla(as nuevas para el !inisterio de Educacin distribuidos en los idiomas siguientes7 89e:c%i .,;</ =9ic%e9 .,3</ !am .,-</ =a:c%i>el .4?</ Ac%i * @(utu)il .0< cada uno/ IAil .?</ * 89an)ob9al .,</$ Parte del incentivo para docentes biling#es del !inisterio de EducacinB este a'o .,--3/ se implementa la entrega de bono econmico por biling#ismo para docentes en servicio con el propsito de incentivar al docente a me)orar sus prcticas pedaggicas en el aula$ Se inici con la elaboracin de cuatro pruebas en los siguientes idiomas7 =a:c%i>elB =9ic%e9B !am * 89e:c%i9$ Se encuentra en proceso de plani icacin la elaboracin de cinco pruebas ms en los idiomas siguientes7 89an)ob9alB IAilB @(utu)ilB Ac%i * Po>onc%i$ Este proceso de elaboracin de pruebas se viene reali(ando ba)o el lidera(go de la Direccin General de Educacin "iling#e Intercultural siguiendo las etapas clsicas para la construccin de pruebas estandari(adas en donde se de ine el propsito de la pruebaB

Justo Magzul/ Ventura Salanic

Pgina 1 de 11

Criterios para la construccin de pruebas en idiomas maya

construccin de la tabla de especi icacionesB redaccin de items .tipo opcin m2ltiple/B revisin del material por eApertos ling#istasB pilota)e de pruebas a nivel de campoB clculo de &ndice de con iabilidadB anlisis de items * sustitucin de items de acuerdo a los &ndices de di icultad * discriminacinB correccin inal * aplicacin de las pruebas$ Este a'o esta en proceso la aplicacin de pruebas para docentes biling#es interculturales$ En el a'o ,--?B el !inisterio de Educacin emiti el Acuerdo !inisterial Co$ ?,0B de ec%a ,3 de ma*o de ,--? donde establece :ue le corresponde a la Direccin General de Educacin "iling#e Intercultural de GuatemalaB dictar las normas tDcnicas para la evaluacin ling#&stica en los idiomas :ue correspondan a los puestos docentes de educacin biling#eB vacantes o nuevos :ue se inclu*an en las convocatorias respectivas$ El propsito de la evaluacin de las %abilidades ling#&sticas de docentes en sus respectivos idiomas es garanti(arB en parteB el adecuado aprendi(a)e del idioma como lengua materna de los ni'os * ni'as ma*asB adems del uso correcto de la comunicacin entre docentes * alumnos para la construccin de los conocimientos a nivel de aula sin descuidar los aspectos culturales :ue in lu*en en el aprendi(a)e$ +a importancia del uso del idioma materno del ni'o .a/ de parte del docente en sus componentes .%ablarB escuc%arB leer * escribir/ constitu*en un actor undamental tal como lo se'ala Eigots>i FCuanto ms se "incule el lengua#e con la acci$n, ms a%u&ar a los ni'os a usar el lengua#e (ara facilitar el a(ren&iza#eG$

Justo Magzul/ Ventura Salanic

Pgina 2 de 11

Criterios para la construccin de pruebas en idiomas maya

Con truccin de !rue"a o"#eti$a en idio%a %a&a de Guate%a'a En el ,--3 se inicia el proceso de la elaboracin de instrumentos de medicin de %abilidades ling#&sticas teniendo como re erencia las pruebas construidas en los a'os ,---B ,--0 * ,--1 as& como de otros es uer(os similares reali(ados en el pro*ecto !edicin de Indicadores de Rendimiento !EDIR apo*ado por la USAID/Guatemala$ En investigaciones reali(adas en 466?4B por la Unidad de +ing#&stica aplicada del onolgicosB

Programa Cacional de Educacin "iling#e InterculturalB se detectan las di erentes variaciones dialectales de los idiomas ma*as tales como7 variantes mor olgicoB onDtico * lDAico$ El idioma ma*a mam por e)emploB se divide en dos grandes reas7 mam del norte de los departamentos de Hue%uetenango cercano a la rontera con !DAico * 8uet(altenango$ Sucede lo mam del sur ubicado en poblados ms al centro de Guatemala en los departamentos de San !arcos * mismo con el idioma >9ic%e9 entre el >9ic%e9 de los departamentos del 8uic%DB 8uet(altenango * @otonicapn$ +as di erencias al nivel onolgico se re ieren a los pe:ue'os cambios entre palabras :ue se dan entre regiones$ @erminaciones en palabras donde var&an una letra m por n e)emplo7 nim por nin en idioma >a:c%i>el$ Di erencias a nivel mor olgico :ue se da en el uso de una u otra orma de elementos para indicar una misma cosa nuIa* * nIa* en >9ic%e9B >a:c%i>el * t(9utu)ilB el nivel onDtico trata de identi icar los cambios :ue se dan en cuanto al uso de una letra en ve( de otra e)emplo >u>u9 por >o>u9 en idioma >9ic%e9$ El nivel lDAico di erencia las ormas :ue se usan en una misma rea para designar el mismo ob)eto e)emplo t9o9* o t(9o9r en idioma >9ic%e9 para indicar sordo$ En la construccin de pruebas en idiomas ind&genas se %a tratado de superar esta di icultad a travDs de di erentes estrategias tales como7 anlisis de di erentes materiales producidosB tales como7 Eariaciones Dialectales en los idiomas anteriormente mencionados,B libros de teAtos utili(ados en las escuelas biling#es interculturalesB * principalmente en la revisin de itemes * la prueba en general de eApertos %ablantes de los idiomas ma*as miembros de la Academia de +enguas !a*as en Guatemala$
1

Mapeo Sociolingstico Unidad de Lingstica Aplicada Proyecto BEST AED 199 2 Sla!"#a"#anil $ot%otel"#al y&l Popt 'a(al )&* +&ate,ala 2---

Justo Magzul/ Ventura Salanic

Pgina

de 11

Criterios para la construccin de pruebas en idiomas maya

En tDrminos generales los cuatro primeros idiomas en mencin contienen variantes principales :ue se dividen de la siguiente manera7 >a:c%i>el se divide en , variantes voclicos * ? variantes lDAicosB el mam se divide en varianteB norte occidente * surB el >9ic%D se divide en 0 variantes :ue re ieren a vocales tensas * prolongadasB vocales rela)adas * las di erencias lDAicasB el idioma :9e:c%i9 no tiene muc%as di erencias dialectalesB bsicamente tienen variantes de dos regiones pero poco marcadas como en el caso de los tres idiomas mencionados con anterioridad$

Per(i' de 'o redactore de ite%e @eniendo presente las caracter&sticas principales :ue deber&a de reunir una prueba ob)etiva estandari(adaB se estableci el per il de los eApertos redactores de &tems a contratarse para la elaboracin de pruebas en idiomas ma*as$ +os re:uisitos principales ueronB tener eAperiencia docenteB alto dominio oral * escrito del idioma a ma*a a traba)arB conocedor de las variantes dialectales del idiomaB eAperiencia en elaboracin de materiales educativos desde el idiomaB adems de la %abilidad de redactar itemes * eAperiencia en evaluacin en general$ +os candidatos seleccionados aprobaron un eAamen riguroso relacionado con las %abilidades de lectura * escritura del idioma as& como de la eApresin oralB se les orient a cerca del propsito de las pruebas$ +as normas de redaccin de itemes de opcin m2ltipleB el tratamiento de las variaciones dialectales * la con idencialidad en el mane)o de items a con ormar para la prueba inal$ Materia'e de a!o&o !ara redaccin de ite%e +os redactores de items contaron con su iciente material de apo*o elaborado en sus respectivos idiomas tales como7 libros de teAtos :ue se utili(an actualmente en las escuelas de educacin biling#eB libros * diccionario :ue contienen glosarios de variaciones ling#&sticasB libros de lectura en idiomas ma*asB bibliogra &as de eApresiones signi icativas en los idiomas ma*asB criterios para la redaccin de items * la tabla de especi icaciones para la cantidad de itemes a redactar$

Justo Magzul/ Ventura Salanic

Pgina . de 11

Criterios para la construccin de pruebas en idiomas maya

+as especi icaciones para la prueba se dividi en tres aspectos principales vocabularioB comprensin lectura * gramticaB el peso para cada uno de estos aspectos ueron ?-<B 0-< * ?- < respectivamente$ +a prueba en su construccin inal contiene 1- itemes todas de opcin m2ltipleB por lo :ue los redactores de itemes elaboraron un total de 41- itemes divididos proporcionalmente de acuerdo a los tres aspectos principales$ +as especi icaciones para la redaccin de items ueron los siguientes7 @ipo de Item Karacter&stica del enunciado Grupo Jpcin m2ltiple con 0 opciones una respuesta correcta * tres distractores Enunciado o pregunta :ue re:uiere de una respuesta$ Palabras :ue contienen consonantes simples * *

glotali(adas

mor olgicamente

parecidas

onolgicamente di erentes e)emplo :a: * :9a:9$ Formato de Item Karacter&sticas de las opciones Kompletacin tipo opcin m2ltiple Palabras parecidas con signi icado di erentes :ue contengan consonantes simples * glotali(adasB una de ellas completa correctamente el enunciado$

Justo Magzul/ Ventura Salanic

Pgina / de 11

Criterios para la construccin de pruebas en idiomas maya

E#e%!'o No) * de ite%+ ,ra%-tica (./ic0e/) U.A1 TANA1 Ub9e*al ri ac%a>7 K%uAo9l le >a)ib9 ta: c%omani> Aa )un >9o ub9e*9al$ K%asi>9i) c%i)u)unal$ =ac%a9 ri ut( ub9ani>$ P$ ?1 a/ K%a:9ab9 le t(9i9 >et*o9n$ b/ =et*o9n le t(9i9 c%a:9ab9$ L c/ =et*o9n t(9i9 le c%a:9ab9$ d/ +e t(9i9 >et*o9n c%a:9ab9 @raduccin Kuarta serie7 Instrucciones7 Entre las cuatro oraciones uno esta escrito correctamente .tiene la estructura gramatical del idioma/$ +Delos uno por uno$ Elige la respuesta correcta$ P$ ?1 a/ De noc%e los perros ladran b/ +adran los perros de noc%eL c/ +adran perros la noc%e d/ +os perros ladran de noc%e +a traduccin de los &tems al espa'ol no tiene muc%o sentido$ LRespuesta correcta$ E#e%!'o No)2 de ite%+ an-'i i e in(erencia (./ic0e) RO/ TANA1 Ub9e*al ri ac%a>7 K%asi>9i) le Iu)B te>9uriB >ac%a9 le >uta ri >9ot9al c%i9a) c%aIe$ SI./INI. Pa :atinamit e>9o a)>emab97 iAo:ib9B ac%i)ab9 Au:u)e9 a>9alab9$ =a>i>o) )alo)o) ta: ri >ic%a>ub9Ml$ =9o >emb9MlB b9at(9B >9*a:b9Ml Au:u)e9 ni>9*a) c%i>$

Justo Magzul/ Ventura Salanic

Pgina 0 de 11

Criterios para la construccin de pruebas en idiomas maya

Ne9l >a>ib9an c%e u>emi> le u:B po9tB su9tB >9ulB c%9u:b9MlB e:b9Ml IaB sub9Ml :9ab9$ Areta: Ia9 >ic%a> ri a)>emab9$ Ou:u)e9 >a>i>9a*i) pa ta: le >9a*b9Ml$ Ru>9 Ia9 >a>itP >ib9 rono)el :9i) c%e uc%9a>i> ri >i ra)il rec% ri >iIa$ P0? K%a>o)o ubi9 ri c%omani> Aasi>9i)7

a/ Ri a)b9anal >9ul$ b/ Ri a)b9anal t(9*a:$ c/ Ri a)>em$ L d/ Ri a) >9a*inel$

@raduccin 8uinta serie7 Instrucciones7 +ea el tro(o de lecturaB luego elige la respuesta :ue se te pregunta$ +ectura En nuestros pueblos eAisten muc%os te)edores7 mu)eresB %ombres * ni'os$ Utili(an di erentes instrumentos para traba)ar$ @ienen telaresB %iloB lan(aderas * muc%os instrumentos ms$ @e)en maravillosamente los cortesB g#ipilesB sute B c%amarrasB cargadoresB servilletaB secadora de mano .corte * g#ipil Q orman el tra)e de la mu)er/$ @odo esto es parte de lo :ue producen los te)edores$ Asimismo estos productos los venden en los mercados$ Kon estas ganancias su amilia P0? Ponle nombre a esta lectura7 a/ @e)edor de ponc%os$ b/ Sastre$ c/ +os te)edores$ L d/ +os vendedores$

Justo Magzul/ Ventura Salanic

Pgina 1 de 11

Criterios para la construccin de pruebas en idiomas maya

Re u'tado de !rue"a e tandari3ada !ara docente %a&a en Guate%a'a Ta"'a No *) Tota' de docente "i'in,4e a !irante a !'a3a nue$a !or idio%a & ,5nero) MINEDUC+USAID6 Guate%a'a 2778)
GDnero !asculino Femenino 44,; 3,, 1;, 663 135 3?; ,50 1?5 44? 40, 444,0 61 66 1; 60 ,6,5 ?,1,

Idioma !a*a

8Re:c%iR =Ric%eR !am =a:c%i>el Ac%i @(Rutu%il IAil 8Ran)obRal

@otal

@otal 451415; 4,-1 ;44 ,11 ,?0 460 41, 3456,

Ta"'a No 2) Porcenta#e de docente "i'in,4e a !irante a !'a3a nue$a !or idio%a & ,5nero) MINEDUC+USAID6 Guate%a'a 2778)
GDnero !asculino Femenino 4;< 4-< 6< 43< 6< 4-< 0< 6< ,< ,< ,< ,< ,< ,< 4< ,< 05B0< 1,B3<

Idioma

8Re:c%iR =Ric%eR !am =a:c%i>el Ac%i @(Rutu%il IAil 8Ran)obRal

@otal

@otal ,;< ,3< ,-< 4?< 0< 0< ?< ?< 4--B-<

La ,&estra de docentes "ilinges 2&e participaron en esta pr&e"a se o"t&3o del total de docentes 2&e participaron en la con3ocatoria para pla%as n&e3as 2&e !i%o el Ministerio de Ed&caci4n de +&ate,ala en el 2--/ donde participaron 05/. aspirantes6 M7'EDU89USA7D:+&ate,ala 2--/6

Justo Magzul/ Ventura Salanic

Pgina ; de 11

Criterios para la construccin de pruebas en idiomas maya

Ta"'a No 9) Pro%edio tota' & !or u"-rea de 'a !rue"a de 'ectura !ara docente "i'in,4e a !irante a !'a3a nue$a ) MINEDUC+USAID6 Guate%a'a 2778)
Promedio total * subreas Promedio .C Q 3456/ Palabras re eridas a material gr ico Palabras %om onas +ectura * preguntas de identi icacin Gramtica +ectura * preguntas de anlisis e in erencia Promedio 35B63 50B55,B5? ;?B3; 01B46 30B06 Desviacin estndar 43B44,3B5,? 46B-05 41B566 ,6B404 ,;B;1;

Ta"'a No :) ;ndice de con(ia"i'idad de 'a !rue"a !ara docente "i'in,4e a !irante a !'a3a nue$a (N<=*>?) MINEDUC+USAID6 Guate%a'a 2778)
Kronbac%Rs Alp%a "ased on Standardi(ed Items B;50

Kronbac%Rs Alp%a B;5-

C o Items 1-

Justo Magzul/ Ventura Salanic

Pgina 9 de 11

Criterios para la construccin de pruebas en idiomas maya

I%!'icacione de !rue"a e tandari3ada en 'a e'eccin & (or%acin de docente %a&a ) Kon orme al Acuerdo !inisterial Co$ ?,0 con ec%a ,3 de ma*o del ,--? emanado del !inisterio de Educacin en Guatemala en uno de sus considerndos menciona )*ue (ara el &esem(e'o &e (uestos &ocentes &e e&ucaci$n +ilinge, se re,uiere &ominio oral % escrito &el i&ioma &e ,ue se trate, (or lo ,ue se -ace necesario esta+lecer las normas ,ue (ermitan a(licar la e"aluaci$n in&is(ensa+le (ara "erificar tales as(ectos % e.ten&er la certificaci$n corres(on&iente a los interesa&os ,ue satisfagan los re,uisitos e.igi&o/ ) Se re:uiere entonces de instrumentos o pruebas estandari(adas con alto nivel de con iabilidadB para poder evaluar con ob)etividad las %abilidades de los docentes candidatos a ocupar una pla(a de docencia en las escuelas de poblacin escolar ma*a %ablante * de docentes en servicio :ue opten por un traslado o una permuta en la docencia biling#e$ Por otro ladoB las Escuelas Cormales "iling#es Interculturales ormadoras de docentesB se %an preocupado por la ormacin adecuada de docentes re ormando ? el PDnsum de estudios en cada uno de los grados 0SB 1S * 3S magisterioB en ati(ando el uso de los idiomas ma*as en un porcenta)es considerable para el desarrollo de las asignaturas %uman&sticas * cient& icas :ue con orma dic%o pDnsum$ @ambiDn se %a enri:uecido los cursos de comunicacin * lengua)e +engua !aterna I .+4/B +engua !aterna IIB Didctica de +engua !aterna$ Se espera :ue el docente egresado de una Escuela Cormal a partir de la preparacin :ue %a tenido en todas las asignaturas * en especial de las asignaturas de +engua !aternaB obtenga los me)ores resultados en una prueba construida desde su propio idioma$

+as variaciones dialectales son aspectos :ue deben considerarse no solamente en las evaluaciones de los docentes sino tambiDn en el aprendi(a)e mismo del estudiante en una escuela biling#e$ !encin importante es el tratamiento de las variantes dialectales en los materiales a utili(ar como teAtos * libros de lectura$

Justo Magzul/ Ventura Salanic

Pgina 1- de 11

Criterios para la construccin de pruebas en idiomas maya

BIBLIOGRA@IA 4$ !inisterio de Educacin Guatemala$ !a*ab9 Co9)ib9Ml u>ab9 )unab9 Kultura >9ic%e9 Segundo Grado$ Guatemala ,--4$ ,$ !inisterio de Educacin Guatemala$ =o)no)in !atemtica Primero =a:c%i>el$ Guatemala ,---$ ?$ !inisterio de Educacin DIGE"I$ UIu)il 89atb9alt(i) =9utuni>$ Recopilacin de +e*es de Educacin "iling#e InterculturalB Guatemala ,--1$ 0$ !inisterio de Educacin$ Programa Cacional de Educacin "iling#e Intercultural PRJCE"I$ !apeo Sociling#&stico$ USAID$ AED$ 466?$ 1$ !inisterio de Educacin$ DIGE"I @usleb9aal aatin 89e:c%i9B Eocabulario de Ceologismos Pedaggicos$ Guatemala ,--0$ 3$ !inisterio de Educacin Nut(ob9 Etamab9al Cab9e @i)oni> =9ic%e9$ Eol I Primer Grado$ Guatemala ,--1$ 5$ !inisterio de Educacin DIGE"I$ !a)a9il =a:c%i>el$ =a:c%i>el autoaprendido$ Guatemala ,--0$ ;$ DIGE"I$ USAID K%i>*9b9alb9il =*Ailen Tol$ Diccionario !am Kastellano$ Guatemala 4663$

6$ DIGE"I$ Roc%o)milal =a:c%i>el K%9ab9Ml$ Gramatica =a:c%i>el$ Impresos Herme$ Guatemala 4663$ 4-$ DIGE"I$ A)lan> Sa9 89e:c%i9 Sistema de Cumeracin !a*a 89e:c%i9 * Arbigo$ Guatemala 4663$

Justo Magzul/ Ventura Salanic

Pgina 11 de 11