EVALUACIN EDUCATIVA: una aproximacin conceptual

Prof. Nydia Elola Lic. Lilia V. Toranzos

Buenos Aires Julio 2000

EVALUACIN EDUCATIVA: una aproximacin conceptual INTRODUCCIN

El presente trabajo consta de dos partes diferenciadas, la primera de ellas consiste en una aproximacin conceptual a la idea de evaluacin o proceso de evaluacin, cules son sus componentes y principales elementos a tener en consideracin en la construccin de una idea ms comprensiva de la evaluacin. La segunda parte est integrada por un glosario que recoge los principales conceptos vinculados con los procesos de evaluacin y los define de modo operativo. A. Una escena posible
Son las cuatro de la tarde de un mircoles cualquiera en una escuela, los profesores van entrando a la sala de profesores para iniciar una reunin de trabajo. Sera un mircoles cualquiera sino fuera porque se aproxima el fin de curso. Ya se sabe, en estos ltimos das son siempre especiales: se incrementa el ritmo de trabajo, hay ms prisa y tensiones. Tambin aflora el cansancio acumulado durante todo el ao y resulta inevitable la saturacin de exmenes, notas, informes, entrevistas finales, etc... Se nota cierta mezcla de disgusto y desazn - . y si no existieran las evaluaciones? pregunta una profesora de lengua mientras se deja caer en una silla. - cmo cambiara todo !... nos dedicaramos solo a ensear, que de hecho es lo nuestro, no les parece? Podramos emplear el tiempo en otras cosas , porque siempre nos falta tiempo al menos a m ! responde otra profesora responsable del rea de matemtica. - Es cierto, si no fuera por la cantidad de pruebas y observaciones que hacemos podramos desarrollar ms los contenidos y no tendramos la sensacin de ir siempre contrarreloj. Adems, no se ustedes, pero yo despus del primer trimestre ya s cmo terminaran el curso mis alumnos comenta una tercera docente. - Estoy de acuerdo, tanto control, tanto control, resulta exasperante. Pero suprimir las evaluaciones .... eso es soar. - No s que decirles, creo que depende mucho de cmo se lo tome uno, de cmo se organice; creo que la evaluacin podra servirnos mucho a nosotros como profesores porque ..... - Vos leste mucho sobre el tema le interrumpe la profesora de matemtica pero el asunto es complicado, hace tiempo que hablamos sobre el tema y no encontramos una solucin que nos convenza a todos, en todas las reas......

B. Los significados ms frecuentes Con mucha frecuencia las discusiones sobre la pertinencia o la utilidad de los procesos de evaluacin en el mbito del sistema educativo se basan en un conjunto de significados que simultneamente le son atribuidos a la evaluacin y en ello se origina la consecuente disparidad de criterios. En la escena que se refera en el punto anterior vemos como se ponen de manifiesto algunas de las ideas con que se asocia la evaluacin, las crticas habituales y sus aspectos ms objetables. 1. Se destacan las opiniones asocian la evaluacin a los exmenes y estos ltimos son considerados un instrumento de poder que refleja un estilo de enseanza conservador y autoritario que produce secuelas negativas en el desarrollo de los alumnos; 2. La emisin de juicios de valor sobre los alumnos y sobre la calidad de sus tareas se suelen basar en una informacin muy elemental, es decir que la tendencia en la prctica evaluadora es la de reducir el espectro de las informaciones y por lo tanto sobresimplificar los juicios de valor. 3. Con frecuencia los instrumentos de evaluacin se usan a menudo con fines dif erentes para los que fueron diseados por ejemplo cuando se administran altas calificaciones como premios y las bajas calificaciones como castigo convirtindolas as en un instrumento de control disciplinario o similar. 4. Se observa un notable desfase entre la teora y la prctica vinculada con la evaluacin atribuible a mltiples causas como la burocracia escolar, la presin del tiempo, cierta inercia y rutina consolidada alrededor de la prctica de la evaluacin ms tradicional. 5. Existe una tendencia fuerte a identificar evaluacin y calificacin lo que manifiesta una vez ms el deterioro del concepto mismo de evaluacin educativa. 6. Los instrumentos de evaluacin que habitualmente se disean se refieren a un nmero muy reducido de competencias cognoscitivas, m uchas veces reducida a la memorizacin comprensiva por ejemplo lo cual deja de lado un conjunto importante de procesos y competencias involucrados en el aprendizaje que por lo tanto debieran ser objeto de evaluacin. 7. Los significados ms frecuentemente asociados con la evaluacin son las ideas relativas a: El control externo, La funcin penalizadora, El clculo del valor de una cosa, La calificacin,

 El juicio sobre el grado de suficiencia o insuficiencia de determinados aspectos. Estas ideas relacionadas con la calificacin propia del mbito escolar ha ido permeando la definicin de evaluacin en su sentido ms amplio y a su vez ha contribuido a la generacin de un conjunto de estereotipos que dificultan la prctica evaluadora. En este sentido la mayora de las definiciones sobre evaluacin se enmarcan en un plano que se puede denominar normativo. Es decir, en el deber ser que define un modelo ideal y se constituye en el referente evaluativo. La evaluacin as aparece solo como una probabilidad de determinar en qu medida las acciones realizadas se ajustan o no a ese patrn normativo y no tanto como una posibilidad de definir nuevas normas o bien recrear las existentes. Este significado algo dbil o incompleto de evaluacin no se plantea con un sentido constructivo, como una opcin para revisar el proceso de enseanza y aprendizaje, para incidir directamente en la toma de decisiones en diferentes mbitos definiendo el sentido de la orientacin de tales acciones. De este modo a pesar que la afirmacin sobre la necesidad de la evaluacin como una herramienta fundamental para mejorar la calidad de los procesos de enseanza y aprendizaje, es indudable que la prctica pedaggica en nuestras escuelas ha estado caracterizada por una dbil cultura de la evaluacin. Esto se manifiesta en escenas que a diario se repiten en nuestras escuelas que reafirman esta percepcin generalizada de la evaluacin como un requisito formal con escaso o nulo valor pedaggico. C. Hacia una definicin ms comprensiva En el proceso de construccin de una definicin de evaluacin que resulte ms comprensiva es posible enumerar una serie de caractersticas que siempre estn presenten en un proceso de evaluacin y que sin duda amplan el horizonte de su aplicacin. En primer lugar se puede afirmar que toda evaluacin es un proceso que genera informacin y en este sentido siempre implica un esfuerzo sistemtico de aproximacin sucesiva al objeto de evaluacin. Pero esta informacin no es casual o accesoria sino que la informacin que se produce a travs de la evaluacin genera conocimiento de carcter retroalimentador, es decir significa o representa un incremento progresivo de conocimiento sobre el objeto evaluado. Desde esta perspectiva la evaluacin permite poner de manifiesto aspectos o procesos que de otra manera permanecen ocultos, posibilita una aproximacin en forma ms precisa a la naturaleza de ciertos procesos, las formas de organizacin de los mismos, los efectos, las consecuencias, los elementos intervinientes, etc...

En sntesis es posible afirmar que en todo proceso de evaluacin reconocemos la presencia de ciertos componentes: 1. bsqueda de indicios: ya sea a travs de la observacin o de ciertas formas de medicin se obtiene informacin, esa informacin constituyen los indicios visibles de aquellos procesos o elementos ms complejos que son objeto de nuestra evaluacin. En este sentido siempre hay que tener presente que toda accin de evaluacin finalmente se lleva a cabo sobre un conjunto de indicios que se seleccionan de modo no caprichoso sino sistemtico y planificado, pero no por ello dejan de ser indicios. Por ejemplo la indagacin sobre la adquisicin de determinadas competencias por parte de un grupo de alumno requiere de la bsqueda de indicios, de pistas que nos permitan estimar la presencia o ausencia de dichas competencias. 2. forma de registro y anlisis: a travs de un conjunto variado de instrumentos se registran estos indicios, este conjunto de informacin que permitir llevar a cabo la tarea de evaluacin. En este sentido resulta positivo recurrir a la mayor variedad posible de instrumentos y tcnicas de anlisis con carcter complementario ya que en todos los casos se cuentan con ventajas y desventajas en el proceso de registro y anlisis de la informacin. 3. criterios: un componente central en toda accin de evaluacin es la presencia de criterios, es decir de elementos a partir de los cuales se puede establecer la comparacin respecto del objeto de evaluacin o algunas de sus caractersticas. Este es uno de los elementos de ms dificultosa construccin metodolgica y a la vez ms objetable en los procesos de evaluacin. Por una parte se corre el riesgo que se planteaba inicialmente de reducir toda la evaluacin a una accin de carcter normativo en el cual solo se intenta establecer el grado de satisfaccin o insatisfaccin de determinadas normas. Por otra parte se puede caer en la tentacin de eludir la bsqueda o construccin de criterios con lo cual toda accin de evaluacin resulta estril ya que solo es posible hacer una descripcin ms o menos completa del objeto de estudio pero no resulta factible realizar un anlisis comparativo. La mayor discusin en materia de evaluacin se platea alrededor de la legitimidad de los criterios adoptados en una determinada accin evaluativa, es decir quin y cmo se definen estos criterios. Esto se incrementa teniendo en cuenta lo que se planteaba inicialmente de la dbil cultura evaluativa de nuestra prctica pedaggica escolar 4. juicio de valor: ntimamente vinculado con el anterior pero constituyendo el componente distintivo de todo proceso de evaluacin se encuentra la accin de juzgar, de emitir o formular juicios de valor, este es el elemento que diferencia la evaluacin de una descripcin detallada, o de una propuesta de investigacin que no necesariamente debe contar con un juicio de valor. Este es un elemento central de toda accin evaluativa y el que articula y otorga sentido a los componentes definidos anteriormente por lo que

tanto la bsqueda de indicios, las diferentes formas de registro y anlisis y la construccin de criterios estarn orientadas hacia la formulacin de juicios de valor. 5. toma de decisiones: por ltimo la toma de decisiones es un componente inherente al proceso de evaluacin y que lo diferencia de otro tipo de indagacin sistemtica. Las acciones evaluativas cobran sentido en tanto soporte para la toma de decisiones. Este es un elemento que adquiere importancia central y no siempre es tenido en cuenta por quienes llevan a cabo los procesos d evaluacin y/o quienes lo demandan. Volver la e mirada sobre el componente de toma decisin significa reconocer que toda accin de evaluacin es una forma de intervencin que trae aparejada la toma de decisiones en algn sentido, an cuando la decisin sea la inaccin y por lo tanto los procesos o fenmenos objetos de evaluacin sufren algn tipo de modificacin como consecuencia de las acciones de evaluacin. Por ello se vuelve imprescindible tener presente con anterioridad cules son l/los propsitos o finalidades que se persiguen con la evaluacin propuesta. Teniendo en cuenta lo antedicho resulta oportuna, en trminos generales, la definicin propuesta por T. Tenbrink: Evaluacin es el proceso de obtener informacin y usarla para formar juicios que a su vez se utilizarn en la toma de decisiones.

c. Las funciones de la evaluacin En trminos generales se pueden reconocer diferentes funciones frecuentemente atribuidas a la evaluacin, las mismas no son excluyentes sino complementarias y algunas se explican a travs de las ideas ms generalizadas que se tienen sobre la evaluacin y otras se relacionan directamente con un concepto ms completo y complejo de estos procesos. 1. funcin simblica: los procesos de evaluacin transmiten la idea de finalizacin de una etapa o ciclo; se asocia con frecuencia la evaluacin con la conclusin de un proceso, an cuando no sea este el propsito y la ubicacin de las acciones evaluativas cabe tener presente que para los actores participantes en alguna de las instancias del proceso, ste adquiere esta funcin simblica. 2. funcin poltica: tal como se sealara en el apartado anterior una de las funciones ms importantes de la evaluacin es su carcter instrumental central como soporte para los procesos de toma de decisiones. Esta funcin es claramente poltica ya que la evaluacin adquiere un rol sustantivo como retroalimentacin de los procesos de planificacin y la toma de decisiones sobre la ejecucin y el desempeo de los programas y proyectos. 3. funcin de conocimiento: en la definicin misma de evaluacin y en la descripcin de sus componentes se identifica como central el rol de la evaluacin en tanto herramienta que permite ampliar la comprensin de los procesos complejos; en este sentido la bsqueda de indicios en forma sistemtica implica necesariamente el incremento en el conocimiento y la comprensin de los objetos de evaluacin. 4. funcin de mejoramiento: en forma complementaria con la funcin de conocimiento y la identificada como funcin poltica, esta funcin destaca el aspecto instrumental de la evaluacin en tanto permite orientar la toma de decisiones hacia la mejora de los procesos o fenmenos objeto de evaluacin. En la medida que se posibilita una mayor compresin de los componentes presentes es factible dirigir las acciones hacia el mejoramiento en trminos de efectividad, eficiencia, eficacia, pertinencia y/o viabilidad de las acciones propuestas.

5. funcin de desarrollo de capacidades: con carcter secundario, ya que no forma parte de los objetivos centrales de cualquier accin evaluativa, los procesos de evaluacin a travs de sus exigencias tcnicas y metodolgicas desempean una importante funcin en trminos de promover el desarrollo de competencias muy valiosas. Si se aprovechan adecuadamente las instancias de evaluacin, stas contribuyen a incrementar el desarrollo de dispositivos tcnicos institucionales

valiosos y poco estimulados habitualmente. Estas competencias se refieren por ejemplo a la prctica sistemtica de observaciones y mediciones, de registro de informacin, de desarrollo de marcos analticos e interpretativos de la informacin, de inclusin de la informacin en los procesos de gestin, de desarrrollo de instrumentos para la recoleccin de informacin, etc. D. Para qu se evala La pregunta por la finalidad de la evaluacin constituye uno de los ejes centrales junto con la definicin del objeto a ser evaluado. En trminos generales y en funcin de las definiciones adoptadas permiten identificar algunas finalidades principales de todo proceso evaluativo: diganstico, pronstico, seleccin y acreditacin estas finalidades no necesariamente se plantean como excluyentes pero s determinan opciones metodolgicas diferenciales. La finalidad de diagnstico enfatiza los componentes vinculados con la produccin sistemtica de informacin calificada con el objeto de orientar la toma de decisiones, la gestin. La finalidad de pronstico enfatiza el valor predictivo que pueda tener la informacin que se produce, es decir las acciones evaluativas persiguen como propsito la produccin de informacin con alto potencial anticipatorio y explicativo sobre los fenmenos o procesos objetos de evaluacin. La finalidad de la seleccin pone el nfasis en la utilizacin que tiene la informacin producida por la evaluacin con propsitos de seleccin, un ejemplo claro de esto son los exmenes de ingreso a diferentes instituciones educativas cuyos aspirantes superan el nmero de vacantes disponibles. En estas circunstancia se opta por alguna estrategia de evaluacin que con frecuencia se justifica adjudicndole un valor pronstico a estos resultados. La finalidad de acreditacin es la que ms se vincula con este valor social simblico que tiene la evaluacin. En estos casos en nfasis est p uesto en las consecuencias que los resultados de la evaluacin tienen para el individuo o la institucin objeto de evaluacin ya que de su resultado depende la continuidad de los estudios para un sujeto o la interrupcin parcial de su carrera escolar, etc..

E. Los mbitos de la evaluacin

Si bien las imgenes ms frecuentes sobre la evaluacin se refiere a la misma aplicada a los alumnos, es importante tener en cuenta que los puntos centrales sealados en este trabajo son tambin aplicables a diferentes mbitos de la evaluacin educativa. Frente a la tarea, es necesario precisar -junto con la finalidad de la evaluacin el mbito dnde la misma tendr lugar y procurar definir las herramientas metodolgicas consideradas ms adecuadas para ese mbito, tanto en las tareas de recoleccin cuanto de sistematizacin y anlisis de la informacin. De este modo es posible diferenciar la evaluacin: de los aprendizajes de las instituciones del sistema educativo de los programas o proyectos F. Con qu herramientas se evala Centrando la atencin en la evaluacin de los aprendizajes la preocupacin se ubica en la seleccin de las herramientas, las tcnicas y los instrumentos ms adecuados para llevar a cabo la tarea de evaluacin. En la bsqueda de los instrumentos de evaluacin es necesario tener presente algunos aspectos fundamentales: a) una de las principales tareas del evaluador es la construccin de instrumentos, por lo que es en este aspecto dnde se pone de manifiesto la pericia del evaluador; b) ningn objeto de evaluacin , por ejemplo el dominio de determinadas competencias, puede ser abarcado en su totalidad con un nico instrumento, por tanto es necesario abandonar la idea sobre la posibilidad de construir un instrumento de evaluacin absolutamente abarcativo; c) cada uno de los diferentes tipos de instrumentos y tcnicas de recoleccin y registro de la informacin posee ventajas y desventajas, la ponderacin de ambos aspectos y la idea de complementariedad de estos deben orientar la seleccin de los instrumentos a emplear. Existen muchas tipologas o clasificaciones de instrumentos, pero ms all de la adopcin de unos u otros criterios clasificatorios lo central es poder identificar estas diferentes herramientas como complementarias entre s y por ende la necesidad de incluir cierta variedad de las mismas en la tarea de la evaluacin. A continuacin se presenta un cuadro dnde se enumeran diferentes tcnicas e instrumentos que se elaboran especialmente para generar informacin que alimente los procesos de evaluacin

Tcnicas Observacin

Instrumentos Registros Listas de cotejo Escalas Pruebas

Tipo Anecdticos Acumulativos

Comprobacin

Autoinforme

Cuestionarios Informes Entrevistas Intravistas

Orales Escritas De actuacin Abiertos Cerrados Abiertos Guiados Abiertas Guiadas

Por ltimo se enumeran tipos de herramientas cuyo contenido central tienen existencia anterior o independiente del proceso de evaluacin y a los que se recurre productivamente para extraer informacin segn las necesidades impuestas por este proceso. Entre ellos encontramos: anlisis de contenido potafolios

G. A modo de sntesis Todo proceso de evaluacin exitoso debe observar algunos requerimientos indispensables o atender a cierto conjunto de premisas. En primera instancia debe entenderse que toda accin evaluativa es una forma particular de intervencin en la realidad. Cualquiera que sea la/s estrategia/s metodolgica/s adoptada/s los objetos de evaluacin sufren algn tipo de modificacin como consecuencia de esta intervencin. Este es un elemento que debe tener presente el evaluador, por una parte para no producir interferencias en demasa en el desarrollo habitual de las acciones y por la otra para ponderar este efecto en la eleccin de las estrategias metodolgicas por ejemplo - y el balance general de los resultados de la evaluacin. En segunda instancia toda evaluacin, por su naturaleza, requiere de criterios establecidos respecto de los cuales se formulen los juicios valorativos. Ya se seal anteriormente que el componente valorativo es uno de los elementos diferenciales de la evaluacin respecto de cualquier otro tipo de indagacin y en este sentido la formulacin, definicin o construccin de criterios resulta un requerimiento ineludible.

En tercer lugar y teniendo en cuenta lo sealado en apartados anteriores, dado que toda accin evaluativa se sustenta en la produccin de informacin y en la bsqueda de indicios sobre aquellos procesos o fenmenos no visibles en forma simple, es imposible plantear una evaluacin que abarque todos los aspectos a considerar, que incluya todos los componentes de un programa o proyectos, que indague sobre todos los procesos de gestin, etc.. Por el contrario cualquier planteo al respecto implica siempre ciertos lmites conceptuales , metodolgicos, operativos, pero en todos los casos son lmites que suponen alguna forma de acotamiento de los alcances de la evaluacin. La informacin constituye el insumo bsico sobre el que se producen los procesos de evaluacin por lo tanto el rigor tcnico dirigido hacia la seleccin las fuentes, las formas de recoleccin, registro, procesamiento y anlisis, as como la confiabilidad y validez resultan exigencias insoslayables a la hora de llevar a cabo cualquier tipo de evaluacin. Las caractersticas mismas de los procesos evaluativos traen como consecuencia una notable movilizacin por parte de todos los sujetos de que una u otra manera se ven involucrados en ellos. Por ello es necesario considerar en trminos generales quienes son los sujetos alcanzados de una y otra forma por las acciones evaluativas y generar entre ellos cierta base de consenso y aceptacin. Esto contribuye a evitar la resistencia propia que generan este tipo de acciones en parte debido a la endeble cultura evaluativa que en general se observa. La comunicacin amplia sobre las finalidades de las acciones de evaluacin, los procedimientos predominantes, la utilizacin de los resultados, la difusin de los mismos son estrategias que promueven una mayor aceptacin entre los involucrados. La relevancia y la oportunidad son, por ltimo, dos requisitos bsicos para que las acciones de evaluacin tengan significacin. La relevancia se refiere a la centralidad de el/los objetos de evaluacin, es decir, la complejidad de un proceso de evaluacin se justifica en la medida en que se lleve a cabo alrededor de problemas, aspectos o fenmenos relevantes. En el mismo sentido la oportunidad es la cualidad de la ubicacin temporal adecuada del proceso de evaluacin y en espec ial de sus resultados. Un proceso de evaluacin exitoso lo es en buena medida en tanto sus resultados se encuentren disponibles en el momento adecuado, para incidir en la toma de decisiones, en los procesos de gestin en forma oportuna.

A continuacin se presenta un grfico que intenta sintetizar los componentes centrales del proceso de evaluacin.

PROCESO DE INFORMACIN Y TOMA DE DECISIONES EN LA EVALUACIN

CONTEXTO SOCIAL CONTEXTO CURRICULAR Y ESCOLAR TAREA MEMORIA DEL EVALUADOR

ESQUEMAS MEDIADORES 4 Teoras implcitas 4 Atribucin 4 Variedad de informaciones 4 Relevancia 4 Ponderacin SELECTOR DE INFORMACIN

INFORMACIN COMPLEMENTARIA

ELABORACIN DE JUICIO

INDICIOS

SELECCIN DE INFORMACIN

ELABORACIN DE LA INFORMACIN

JUICIO DE EVALUACIN