ELABORACIN DE CRITERIOS DE DESEMPEO (RUBRICS), ESCALAS ESTIMATIVAS Y OTRAS HERRAMIENTAS DE EVALUACIN CUALITATIVA

ESTNDARES Y CRITERIOS (Rubrics) (Wiggins, 1998) Un estndar verdadero es una descripcin del nivel especfico y deseable o nivel de desempeo ejemplar. Es un objetivo que vale la pena independientemente de que la mayor parte de la gente lo pueda cumplir en el momento. Los estndares educativos o puntos de referencia por lo regular estn normalizados, es decir, definen un nivel que creemos que muchos estudiantes deben cumplir si son perseverantes y se les ensea bien. Los estndares se concretan en los criterios. Esencialmente, hay tres diferentes tipos de estndares educativos: Estndares de contenido: Qu deben saber y ser capaces de hacer los estudiantes? Estndares de desempeo: Qu tan bien deben hacer su trabajo los estudiantes? Estndares de tareas (diseo de trabajo): Qu trabajo es meritorio y riguroso? Qu tareas deben ser capaces los alumnos de llevar acabo? Rbricas de puntaje Una de las herramientas bsicas de evaluacin es la rbrica. Dice a los alumnos qu elementos de desempeo importan ms y cmo el trabajo por evaluar se distinguir en trminos de calidad relativa. La palabra rbrica se deriva de ruber, en latn: rojo. En tiempos medievales una rbrica era un conjunto de instrucciones o un comentario adjunto a una ley o servicio litrgico y tpicamente escrito en rojo. Por esto, rbrica vino a significar algo que da a la gente instrucciones con autoridad. Una rbrica provee niveles de desempeo para facilitar una asignacin de puntaje ms confiable e imparcial. Una rbrica consta de criterios y stos a su vez pueden constar de indicadores para proveer ejemplos o signos delatadores concretos de cada nivel. Por ejemplo, si el criterio es correccin ortogrfica en un ensayo y le asignamos 10 puntos de valor al cumplimiento de este criterio, el indicador de correcta ortografa sera la ausencia de errores ortogrficos en el escrito. Al mismo tiempo podramos aplicar una escala de puntaje, de manera que si el cumplimiento de este criterio tiene un valor de 10 puntos, asignaramos: 10 puntos a 0 errores de ortografa. 9 puntos a 1 error 8 puntos a 2 errores 7 puntos a 3 errores 6 puntos a 4 errores 5 puntos a 5 errores

4 3 2 1 0

puntos puntos puntos puntos puntos

a a a a a

6 errores 7 errores 8 errores 9 errores 10 ms errores

Los criterios son para cumplirse. Los indicadores son para precisar la asignacin de puntaje. Un indicador le dice al profesor dnde puede buscar y qu buscar para juzgar un desempeo exitoso aunque ningn indicador es 100% confiable. Muchas rbricas presentan el error de confiar en indicadores que son fciles de ver en un examen, pero poco confiables. Nosotros debemos tener cuidado de asegurar que los criterios que elijamos sean necesarios y suficientes para cumplir con la objetividad de la evaluacin. Cuando empezamos a utilizar rbricas no tomamos en cuenta, por obvias razones, las formas ms difciles de ver, pero ms vlidas de medir el aprovechamiento. Establecemos indebidamente estndares absolutos a priori en las rbricas en lugar de utilizar muestras especficas de trabajo de los alumnos para anclar la rbrica a un estndar excelente. Luego, ya con experiencia, lo correcto es, tomar muestras de los alumnos a quienes hemos evaluado con los mismos criterios, en periodos anteriores, para determinar los nuevos criterios. Algunas rbricas s nos permiten juzgar al puntaje ms alto como sinnimo de desempeo establecedor de estndares. Si el puntaje ms alto se describe como "un trabajo de calidad apropiado para la publicacin en una revista", por ejemplo, entonces el estndar est especificado en el mismo criterio. En el da a da de la escuela, el lenguaje de las rbricas usualmente es ms ambiguo (muchas cosas se dan por sabidas o establecidas, forman parte de la cultura de evaluacin). Por ejemplo, cuando el criterio de evaluacin explica que los trabajos, para que se consideren de calidad ptima deben ser "persuasivos", "organizados", y "slidos", no apunta hacia un estndar especfico. Entonces la rbrica resulta insuficiente para una buena evaluacin y una buena retroalimentacin. Para saber lo que quiso decir la rbrica, el alumno necesita ver ejemplos de trabajos considerados persuasivos y organizados. Diseo de rbricas Las mejores rbricas seguirn una lgica. Esto significa que an cuando no hay una receta fija para elaborar rbricas, necesitamos un procedimiento de elaboracin y lineamientos tiles. Los lineamientos de diseo son como el itinerario de un viajero; los criterios son como las condiciones que el viajero debe cumplir para tener un viaje que valga la pena. En trminos educativos, los lineamientos son como una rbrica que es dada a los estudiantes por el maestro para auto-evaluacin y auto-ajuste en camino. En el diseo de las rbricas necesitamos considerar los tipos de rbricas disponibles para nosotros. Las rbricas pueden ser holsticas o analticas. Una rbrica holstica tiene solamente un descripcin (criterio) general para el desempeo como un todo. Una rbrica analtica tiene varios criterios correspondientes a cada dimensin, aspecto o parte del desempeo que est siendo calificado. Las rbricas tambin pueden ser genricas o especficas por gnero, materia o tarea.

 Una rbrica genrica juzga con criterios muy amplios el trabajo del alumno como "persuasivo" o "preciso". Los criterios de una rbrica especfica por gnero se refieren a habilidades o conocimiento relacionados con el contenido (tema) que se evala. Una rbrica especfica por tarea utiliza criterios nicos o altamente especficos relacionados con una tarea particular. Una rbrica puede estar enfocada en un evento o puede ser longitudinal. En una rbrica enfocada en un evento el desempeo por evaluar se describe en trminos del contenido y contexto de esa tarea. En una rbrica longitudinal (o de desarrollo) se evala la evolucin o nivel de desempeo del alumno a travs del tiempo. Validez de las rbricas El diseo de rbricas, por lo tanto, debe considerar no slo qu tan apropiada y vlida es la tarea que se evala sino tambin qu tan apropiados y vlidos son los criterios e indicadores de desempeo para evaluar esa tarea. Una rbrica analtica detalla cada caracterstica importante en sus criterios. Una rbrica holstica otorga el puntaje basada en una impresin general. Pero la validez en realidad la tienen las rbricas analticas cuando combinan diferentes caractersticas de acuerdo con la factibilidad. La evaluacin con rbricas holsticas puede parecer algo sencillo de implementar, pero en realidad, compromete su validez, confiabilidad y calidad de la retroalimentacin al estudiante en el nombre de la eficiencia.