Evaluacin de la alfabetizacin para los maestros: arbitrariedad o fundamental?

W. James Popham
Durante los ltimos aos, ha crecido el nmero de programas de desarrollo profesional que han lidiado con evaluar la alfabetizacin de los maestros y/o personal administrativo. El hecho de evaluar la alfabetizacin del personal docente es una tendencia, o por el contrario, debera de ser considerada como un rea de inters significativa para el desarrollo profesional de ahora en adelante? Despus de dividir las preocupaciones de los educadores con la medida de sus evaluaciones y la manera en que rinden cuenta de sus responsabilidades, se estableci que el conocimiento inadecuado de los educadores en cualquiera de estas dos areas puede perjudicar la calidad de la educacin. Por esto, el da de hoy, la evaluacin de la alfabetizacin de los educadores competentes es vista como indispensable. Hasta que el pregrado para maestro empiece a producir maestros evaluados en alfabetizacin, los encargados en desarrollo profesional deben continuar con su labor para rectificar esta omisin en las habilidades profesionales de los educadores. Las Consecuencias de la Omisin Muchos de los maestros de hoy en da saben muy poco a cerca de la evaluacin educacional. Desafortunadamente, cuando ellos terminaron su educacin, no haba ningn requerimiento para que aprendieran esta rea ms a fondo. En los ltimos aos afortunadamente hemos visto que se han incrementado los requerimientos para los aspirantes a maestros en el rea de evaluacin educacional. En consecuencia, en una dcada o dos, la evaluacin del alfabetismo de la fuerza de enseanza se ver substancialmente ms fuerte. Pero por ahora, sern los programas de desarrollo profesional los que abastezcan a los maestros con el conocimiento en evaluacin que ellos necesitan. Dos tipos de Evaluacin El termino evaluacin no precisamente se refiere a exmenes en papel y lpiz. Por el contrario, una evaluacin puede consistir de varias tcnicas como preguntar a los estudiantes preguntas presentadas por el maestro ya sea de manera escrita en el pizarrn, u oral a uno o varios estudiantes a la vez. De manera similar para evaluar las actitudes de los estudiantes se pueden utilizar autoevaluaciones llenadas por los mismos estudiantes de manera annima. Para evaluar las habilidades cognitivas de los estudiantes, los maestros pueden emplear un examen de desempeo en el cual los estudiantes describen una serie de experimentos cientficos independientes. Evaluacin, por lo tanto, no debe de ser sinnimo de examen. A lo largo de sus carreras, los maestros enfrentan decisiones relacionadas con evaluar la educacin de sus alumnos innumerables veces, unas decisiones ms trascendentales que

otras, por eso debemos establecer los tipos de evaluaciones ms relevantes que los maestros necesitan entender. Existen varias maneras de subdividir la evaluacin educacional, Por ejemplo, una que est creciendo en popularidad es la comparacin de la evaluacin sumativa y la evaluacin formativa. Evaluacin sumativa se refiera al uso de la evidencia que se obtuvo de la evaluacin al llegar a un punto de decisin como la conclusin de un ao escolar. El propsito de este tipo de evaluacin es ayudar a los maestros en decisiones como promover a un alumno al siguiente grado o si no logra alcanzar los requerimientos, hacerle recursar el grado. En contraste, la evaluacin formativa es un proceso en el cual la evidencia que se presenta gracias a la evaluacin, es usada por los maestros para ajustar sus actividades de enseanza que usan diariamente, as como el mejoramiento de los programas educativos; y tambin ayuda a los estudiantes para mejorar sus mtodos de estudio. La funcin del proceso de la evaluacin formativa es mejorar la calidad de la evidencia con la que se evala el desempeo de los alumnos. Por el hecho de que la evaluacin formativa es relativamente nueva y aun hay disputas sobre sus antecedentes, yo considero dos clases de lineamientos para incrementar la alfabetizacin de las evaluaciones, los cuales son las evaluaciones en el aula y las evaluaciones de responsabilidad. La primera clase que son las evaluaciones en el aula se refieren a los procesos formales e informales que los profesores emplean con el fin de llegar a ms certeras conclusiones acerca de lo que los estudiantes deben saber y lo q los profesores pueden hacer para llegar a eso. Las evaluaciones de responsabilidades son aquellos instrumentos de medicin, casi siempre estandarizados, usados por entidades gubernamentales como el estado, municipio o zonas escolares para determinar la efectividad de los esfuerzos educativos. Dos grupos de decisiones Uno de esos grupos son las decisiones relacionadas con la manera y el tipo de evaluaciones hechas por los maestros. El segundo grupo proviene de las evaluaciones de responsabilidad que tiene un efecto ya se directo o indirecto en lo que los maestros hacen dentro de las aulas. Ambos grupos de decisiones tienen un impacto significativo en la manera en que los estudiantes son enseados. Veamos primero las evaluaciones en el aula. Si los maestros son alfabetizados en evaluaciones, hay ms probabilidades de que las evaluaciones sean mejores, porque los maestros sabrn que representa una evaluacin precisa contra una imprecisa. El impacto de las evaluaciones en el aula puede variar de tener un impacto mayor a moderado, es por eso que las evaluaciones en el aula tiene que ser lo mejor posibles. Los profesores que

son alfabetizados en evaluaciones no solo sabrn cmo crear evaluaciones ms adecuadas sino tambin una amplia variedad de posibles tipos de evaluaciones. Hablando ahora de las decisiones que los maestros enfrentan en cuanto a las evaluaciones de responsabilidad, Porque es necesario que los maestros sean alfabetizados en las evaluaciones para tomar decisiones en las evaluaciones de responsabilidad? Una razn muy importante porque los maestros se rehsan a escudriar las evaluaciones de responsabilidad, es porque no creen tener el conocimiento necesario para evaluar la calidad de esos exmenes. En los Estados Unidos, la vasta mayora de los exmenes estandarizados son instruccionalmente insensibles, esto es, que son incapaces de distinguir si los alumnos han sido enseados con maestros alfabetizados en evaluaciones o no. Estos exmenes estn diseados para medir el nivel socio-econmico en los estudiantes. Pero los maestros con nivel de alfabetizacin para evaluar insuficiente, no entendern la diferencia entre exmenes instruccionalmente sensibles o insensibles. Los maestros enfrentan decisiones como modificar los exmenes de responsabilidad o incluso pueden decidir no aplicarlos delo todo. Si tuvieran el conocimiento necesario pudieran tener un gran impacto en el sistema educativo, pero para que esto suceda est claro que los profesores necesitan elevar el nivel de su alfabetizacin al evaluar. Una rpida vista del contenido Los programas de desarrollo profesional necesitan ser diseados a la medida, ya sea para administradores, maestros o ambos. Para concluir este anlisis, me gustara dar los objetivos ms relevantes un programa para el desarrollo profesional. 1. La funcin fundamental de la evaluacin educacional, es decir, la coleccin de evidencia partiendo de inferencias hechas sobre aptitudes de los estudiantes, su conocimiento y el efecto que estos tienen: Una idea errnea muy comn entre los educadores es cosificar los exmenes como nica prueba de conocimiento de los alumnos. En realidad, la nica razn por la que se examinan a los alumnos, es para recolectar evidencia sobre lo que no podemos ver en los alumnos. Por eso, debemos depender en el desempeo de los estudiantes que demuestran en sus exmenes para llegar al conocimiento de cada alumno que no podemos percibir a simple vista. 2. Fiabilidad de evaluaciones educacionales, especialmente las maneras en las cuales la evidencia es consistente cuando se examina a los alumnos en grupos (estabilidad, forma-alterna y consistencia), as como buscar otras maneras consistentes para los alumnos que son examinados individualmente: Cuando los maestros comprenden el origen del error de evaluacin, y se dan cuenta de la amplia variedad de factores que desencadenan inconsistencias en los resultados de los alumnos, esos educadores son capaces de ver ms a fondo las inconsistencias de los resultados de los exmenes.

3. El papel tan importante que juegan los tres tipos de validacin de evidencia deben de jugar en la construccin de argumentos para llegar a una certera interpretacin de los resultados de exmenes: Cada vez que un educador utiliza la frase examen valido esta en un error. En lugar, es la inferencia en la que basamos la puntuacin cuya validez se cuestiona. 4. Como identificar y eliminar preferencias al evaluar que ofende o injustificadamente penaliza a los alumnos por caractersticas personales como raza, genero o estrato social: Los maestros necesitan saber cmo identificar y eliminar cualquier preferencia en los exmenes hechos por ellos mismos. 5. Mejorar la construccin de reactivos de opcin mltiple y preguntas abiertas: Una vez que la serie de reactivos ha sido construida, hay muchos procesos que pueden ser usados para mejorar la construccin de los mismos reactivos. 6. El calificar las preguntas abiertas de una manera objetiva y hacer distincin entre las respuestas bien construidas y con letra legible: Las preguntas abiertas como ensayos cortos regularmente dan evidencia en la q los maestros pueden depender para ver el nivel de conocimiento del alumno; pero la escala de evaluacin de estas preguntas se pierde cuando el maestro no tiene procedimientos establecidos. Los profesores necesitan saber cmo crear y utilizar las guas para calificar, para que las respuestas de los estudiantes sean imparcialmente calificadas. 7. Desarrollo y puntuacin de las evaluaciones de desempeo, exhibiciones, actividades en grupo y autoevaluaciones: Los maestros necesitan aprender como generar una considerable variedad de estrategias para evaluar. 8. Disear e implementar evaluaciones formativas que sean consistentes con evidencia de investigacin y experiencia basada en conocimientos acerca del probable xito de esos procesos: Hoy en da hay a la mano evidencia sustancial que propiamente aplicada a la evaluacin formativa puede impulsar el desempeo de los estudiantes. 9. Como colectar e interpretar evidencia de las aptitudes, actitudes e intereses de los estudiantes: Los maestros deben de, por lo menos, aprender cmo les afectan las calificaciones a sus estudiantes, para que, si as lo deseen puedan ayudarlos y tener un impacto positivo. 10. Interpretar el rendimiento de los estudiantes en evaluaciones a gran escala, resultados estandarizados y evaluacin de aptitudes: Los maestros deben entender la variedad de formas en que se reportan los resultados de las evaluaciones as como la escala utilizada al calificar. 11. Como preparar adecuadamente a los estudiantes para evaluaciones a gran escala: En muchas ocasiones los maestros solo presionan a los estudiantes en vez de prepararlos adecuadamente para obtener un buen resultado que tambin beneficiara a los mismos maestros.

12. Como determinar que tan apropiada es una evaluacin de responsabilidad, para medir la eficacia de la enseanza: Ahora ms que nunca, los educadores necesitan entender que hace a un examen apropiado para determinar la calidad de la enseanza. Es mucho merito estos das el uso de comunidades profesionales para la enseanza, estas comunidades consisten en pequeos grupos de maestros y/o administradores que se renen peridicamente para discutir el mejoramiento de los 11 puntos previamente mencionados. Enfoque libre de tendencias La pregunta que inicio esta discusin fue si los programas de desarrollo profesional dirigidos a mejorar la alfabetizacin de evaluacin en los maestros estaban garantizados, ya sea en corto o largo plazo. Yo identifique dos conjuntos de decisiones que toman los maestros relacionadas con evaluaciones que pueden ayudar a estos programas. La primera es ver las evaluaciones desde un diferente enfoque. Las evaluaciones se hacen a los alumnos y por consiguiente al desempeo de los maestros para mejorar la calidad educativa, no como una amenaza. La segunda es que rendir cuentas a las entidades educativas mediante las evaluaciones de responsabilidad sea tan efectivo como es su propsito. Evaluar la alfabetizacin de los maestros es una comodidad necesaria para los maestros por su propio bienestar a largo plazo y por el bienestar del sistema educativo.