Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Nuevas Perspectivas Evaluacion
Nuevas Perspectivas Evaluacion
sobre la evaluacin
Rod McDonald
DavidBoud
John Francis
Andrew Gonczi
Seccin para la Educacin
Tcnica y Profesional
UNESCO, Pars 1995
SUMARIO
La evaluacin es quizs el ms vital
de todos los procesos involucrados en la
formacin tcnica y profesional. Con un
sistema de evaluacin de alta calidad,
los estudiantes pueden confiar en la
calidad de su formacin y los empleadores pueden tener confianza en los
No. 149, mayo-agosto de 2000
4 1
La necesidad de focalizar en la
competencia
4 2
boletn cinterfor
1. INTRODUCCIN
La evaluacin es quizs el proceso ms vital de la formacin profesional. Un sistema de evaluacin de alta
calidad permite orientar de manera correcta los diferentes aspectos de un
curso, brinda a los estudiantes una retroalimentacin apropiada, asegura que
los buenos estudiantes sean reconocidos por haber aprendido lo suficiente,
y sirve de base para certificaciones reconocidas por todos. Cuando los procedimientos son correctos, los estudiantes pueden confiar en la calidad de
su formacin, y los empleadores pueden confiar en los estudiantes calificados. Sin ellos, sin embargo, esta confianza puede verse amenazada.
4 3
boletn cinterfor
boletn cinterfor
2. EVALUACIN,ENSEANZAY
APRENDIZAJE
4 5
boletn cinterfor
4 6
boletn cinterfor
2.3 La importancia de la
autoevaluacin
Un tema que no ha recibido suficiente atencin es cmo usar mejor las
capacidades y habilidades de los estudiantes para evaluarse a s mismos. A
largo plazo, esto es ms importante que
el aprendizaje de cualquier materia en
particular. Los estudiantes deben salir
de un curso de formacin profesional
equipados para autoevaluarse a lo largo de sus vidas profesionales. Ellos
necesitan ser capaces de hacer juicios
confiables acerca de lo que saben y lo
que no, y de lo que pueden y no pueden hacer. Frecuentemente, la evaluacin conducida por los formadores
refuerza la dependencia de los estudiantes para tomar decisiones respecto a lo que saben, y no aprenden a hacerlo por ellos mismos.
4 7
Actualmente, los
estudiantes
aprenden ms
acerca de la
autoevaluacin a
travs de sus
propias reflexiones informales
sobre su
desempeo en
las pruebas de
evaluacin, pero
esto es francamente insuficiente
autoevaluacin necesita
ser activamente fomentada.
Un punto de partida para hacer esto es
(adaptado de Boud
1992):
4 8
especificar los criterios con suficiente detalle para que cada estudiante pueda juzgar la medida en
que el criterio ha sido satisfecho.
El criterio necesita especificar:
- el rea a ser evaluada;
- los objetivos del trabajo de
evaluacin;
- los estndares a ser alcanzados.
Es necesario implementar estrategias especficas para apoyar el proceso de autoevaluacin. Las dos ms comunes son el uso de guas escritas y
de actividades grupales estructuradas.
Ambas son explicadas en Boud (1992).
4 9
boletn cinterfor
5 0
Las pruebas basadas en estos presupuestos buscan establecer diferencias entre los individuos esto es, saber dnde los individuos se ubican en
esta distribucin representada por la
curva normal. Las preguntas e tems
son seleccionadas por su precisin para
discriminar entre las personas. Eso es,
la excelencia se determina por la manera en que los individuos se desempean (bien o mal) en relacin con los
otros. Si todos los candidatos se desempearon bien en una prueba, sus
diseadores concluiran que la disearon mal no que todos los estudiantes
se desempearon de manera excelente.
Los presupuestos del enfoque basado en estndares son bastante dife-
boletn cinterfor
rentes. Ellos proponen que los estndares educacionales pueden establecerse, que la mayora de los estudiantes
pueden alcanzarlos, que desempeos
diferentes pueden reflejar los mismos
estndares, y que los evaluadores pueden juzgar estos desempeos de manera consistente. El uso de un modelo
tal cuestiona tanto el enfoque de la formacin como el de la evaluacin que
se utilizan actualmente en la formacin
profesional de muchos pases. Los cursos son diseados y realizados para
alcanzar los estndares especficos, y
la evaluacin est basada en estos
estndares.
Las pruebas basadas en este modelo siguen estndares pblicos y buscan medir la comprensin que los estudiantes tienen de los procesos y los
conceptos que subyacen al desempeo en entornos autnticos, tales como
el lugar de trabajo. Estas pruebas llegan a ser herramientas vitales de aprendizaje, y pueden ser realizadas varias
veces a lo largo del ao escolar o incluso en periodos ms largos. Los estudiantes no necesitan alcanzar los
estndares todos juntos y, al mismo
tiempo, la evidencia puede ser recogida a lo largo del tiempo usando una
variedad de mtodos y recurriendo a
una diversidad de contextos.
Los temas de la confiabilidad no
tienen que ver con los mtodos objetivos de puntaje sino con el uso del juicio profesional y de las muestras. Los
evaluadores se convierten en jueces
que sopesan la evidencia y evalan en
Dicho esto, queda una gran cantidad de cuestiones sin abordar referidas tanto a presupuestos de la evaluacin basada en competencias, como a
su implementacin. Considerarlos va
ms all de un texto como este, sin
embargo, muchos de estos temas estn
bien tratados en un reciente libro sobre la materia escrito por Alison Wolf
(1994). Una de estas cuestiones, la
Un enfoque de
implementacin de sistemas de evaluacin de evaluacin basado
en competencias
competencias de amplia
es altamente
escala, es tratada en la
apropiado para la
seccin 5. Otra cuestin
formacin
es la que se relaciona
profesional
con la dificultad de especificacin de resultados requeridos en la educacin general (como opuesta a reas tcnicas), debido a la dificultad en la contextualizacin de los objetivos generales.
5 1
boletn cinterfor
La seleccin
y el uso de
herramientas de
evaluacin est
relacionado con la
pregunta acerca
de qu y cunta
evidencia es
suficiente para
evaluar aquello
que necesita ser
evaluado
5 2
Figura 1
El balance entre la evidencia y los criterios
para la elaboracin de juicios de evaluacin
Juicio
Criterios
boletn cinterfor
Evidencia
LOSCUATROPRINCIPIOSDELAEVALUACIN
Validez
Las evaluaciones son vlidas cuando ellas evalan lo que pretenden evaluar. Esto se logra cuando:
los evaluadores son completamente conscientes de lo que debe evaluarse (en relacin con criterios apropiados y resultados de aprendizaje definidos);
la evidencia es recogida a travs de tareas que estn claramente relacionadas con lo que est siendo evaluado;
el muestreo de las diferentes evidencias es suficiente para demostrar
que los criterios de desempeo han sido alcanzados.
5 3
Confiabilidad
Las evaluaciones son confiables cuando son aplicadas e interpretadas
consistentemente de estudiante a estudiante y de un contexto a otro.
Flexibilidad
Las evaluaciones son flexibles cuando se adaptan satisfactoriamente a
una variedad de modalidades de formacin y a las diferentes necesidades
de los estudiantes.
Imparcialidad
Las evaluaciones son imparciales cuando no perjudican a los alumnos
particulares - por ejemplo, cuando todos los estudiantes entienden lo que
se espera de ellos y de qu forma tomar la evaluacin.
(Adaptado de Hagar et al. 1994)
boletn cinterfor
Bajo un sistema
de evaluacin
centrado en
competencias, los
evaluadores hacen
juicios acerca de
si un individuo
satisface un
estndar o un
grupo de criterios,
basndose en la
evidencia reunida
de una variedad
de fuentes.
La competencia no
puede ser observada directamente, pero puede
ser inferida del desempeo. Por ello es que se
requiere pensar acerca
de los tipos de desempeos que permitirn reunir evidencia, en cantidad y calidad suficiente, para hacer juicios razonables acerca de la
competencia de un individuo. Estos juicios no
pueden ser absolutos. Hay tres grandes principios que, si se siguen,
ayudan a los evaluadores a realizar juicios razonables acerca de la competencia:
5 4
boletn cinterfor
enfatiza el desempeo,
exige una mayor variedad de evidencia que la
requerida por los enfoques tradicionales y busca mtodos de evaluacin directa.
La competencia
no puede ser
observada
directamente, pero
puede ser inferida
del desempeo
Para sistemas de formacin profesional de amplia escala, este enfoque tiene un problema obvio: su aplicabilidad. Por ejemplo, puede ser bastante ms difcil generalizar mtodos
variados de evaluacin que recurrir a
exmenes escritos especialmente
aquellos que se basan en la memoria
de hechos. Adems, es ms fcil demostrar que los exmenes escritos son
imparciales aun cuando puedan no
ser vlidos! El balance entre la credibilidad externa y la validez es importante cuando la legitimidad de las certificaciones todava no ha sido establecida.
5 5
Agrupar de alguna manera los elementos de competencia y los criterios de desempeo (esto probablemente conducir a integrar elementos de competencia y criterios
asociados en unidades de competencia ms comprehensivas).
boletn cinterfor
5 6
Analizar los mtodos de evaluacin disponibles para concentrarse en aquellos que tienen el potencial ms grande para una evaluacin directa e integrada.
Analizar los mtodos disponibles
a la luz de cuestiones prcticas,
tales como el tiempo y los recursos con los que se cuenta.
Redactar una tabla de especificacin que vincule el mtodo con las
competencias que cada uno evaluar.
ALGUNOSMTODOSDEEVALUACINDECOMPETENCIAS
PARAPILOTOSDEAVIACIN
(de Hagar, Athanasou y Gonczi 1994)
CATEGORAS
DESEMPEO
TCNICO
OBSERVABLE
MTODOS DE EVALUACIN
!
!
!
!
!
!
!
!
!
!
RESOLUCIN
DE PROBLEMAS
!
!
Simulador
Problemas durante el vuelo evaluados por prueba del capitn
CONOCIMIENTO
!
!
ACTITUDES
HBITOS DE
TRABAJO
5 7
5 8
boletn cinterfor
que ayudan a clarificar los temas necesarios son (tomadas de Cohen et al. 1994):
Ntese que las nociones de riesgo y precisin que antes se introdujeron son mucho ms importantes en
las evaluaciones para el RAP que en las
evaluaciones corrientes. En efecto, la
Quienes ofrecen
variedad de modos en que
el aprendizaje puede ser formacin profesiodemostrado dentro de un nal deben tomar en
marco de RAP flexible es cuenta el aprendizaje previo como una
mayor. Adems, normalprctica educacional
mente el RAP requerir importante: a travs
instancias de evaluacin de ella los estudiannicas, en la que el evates pueden ser
luador tomar una deci- capaces de progresin sin un conocimiento sar ms rpidamente, y no se vern
del desempeo de la perforzados a aprensona a lo largo del curso.
5 9
MTODOSDEEVALUACIN
MTODOS DE
EVALUACIN
ENTREVISTAS
PROPSITOS Y EJEMPLOS
Clarificar temas planteados en la evidencia documental presentada y/o revisar el alcance y profundidad del aprendizaje.
Puede ser particularmente til en reas donde el juicio y los
valores son importantes. (Puede ser estructurado con preguntas determinadas o relativamente no estructuradas semiestructuradas sin preparacin especfica previa).
Ejemplo: a un dibujante calificado que ha desempeado tareas
que requieren habilidades complejas, y est buscando una certificacin avanzada en construccin, se le pide que explique
las bases legales de ciertas normas de construccin.
boletn cinterfor
MTODOS DE
EVALUACIN
DEBATE
PROPSITOS Y EJEMPLOS
Confirmar la capacidad para sostener un argumento demostrando un conocimiento amplio y adecuado sobre la materia.
Ejemplo: a un representante sindical de un sindicato nacional
que busca que se le reconozcan sus competencias para la negociacin con el objeto de obtener el grado de abogado, se le
solicita que prepare un tema para el debate formal o que tome
parte en un juicio simulado.
PRESENTACIN
6 0
EVALUACIN DEL
DESEMPEO
Evaluar las aplicaciones de la teora en un contexto estructurado de manera correcta y segura (en un medio simulado o en
el taller de laboratorio o en el lugar de trabajo)
Ejemplo: El postulante usa equipo de laboratorio especfico
para realizar un experimento y explica los hallazgos por escrito.
Ejemplo: se le pide al postulante que explique los fundamentos de una secuencia de tareas llevadas a cabo usando
equipamiento completo.
EXAMEN
Evaluar los conceptos y habilidades bsicas y aplicarlos usando ejemplos prcticos. (Puede ser una examen final o parcial
de una materia)
Ejemplo: un administrativo que ha trabajado en la misma empresa durante 12 aos en la oficina de registros contables, busca
reconocimiento de sus aprendizajes para la asignatura introduccin a la contabilidad financiera
boletn cinterfor
MTODOS DE
EVALUACIN
EXAMEN ORAL
PROPSITOS Y EJEMPLOS
Chequear la profundidad de la comprensin de temas complejos y la habilidad para explicarlos en trminos simples.
(Para estudiantes de posgrado esto podra tomar la forma de
examen oral).
Ejemplo. Un maestro multlinge busca una certificacin en
lengua por medio de un examen oral.
ENSAYO
Chequear la calidad del trabajo, la relevancia para la acreditacin buscada y la autenticidad de la produccin (a menudo
comparado con entrevistas o con examen oral).
Ejemplo: el postulante ha trabajado en la produccin de videos y tiene muchos ejemplos de videos producidos. Busca
acreditacin en comunicacin visual para el diseo y produccin de videos.
6 1
Puede ser usado para una variedad de propsitos para aadir ms fluidez al conocimiento y a las habilidades, para completar aprendizajes o para ampliar el aprendizaje previo.
Ejemplo: un programador experimentado en computacin conoce dos de los tres componentes del currculum de un curso.
El postulante acuerda completar el tercer mtodo a travs de
un proyecto de trabajo y presentar la evidencia en dos semanas.
boletn cinterfor
MTODOS DE
EVALUACIN
REVISIN DE
BIBLIOGRFA BSICA
PROPSITOS Y EJEMPLOS
Asegurar que el conocimiento y la capacidad de anlisis de la
literatura pertinente se encuentran en un nivel satisfactorio.
(Esto es a menudo usado cuando el postulante tiene aprendizajes acreditables, pero carece de puntos de vista especficos
que son prerrequisitos para los estudiantes inscriptos y son
bsicos para estudios futuros en el rea).
Ejemplo: una enfermera de muchos aos de experiencia, tanto
en enfermera como en administracin de la salud, busca obtener un crdito para un ttulo en ciencias de la salud. A travs
del RAP, todas las materias clnicas y la mayora de la teora
introductoria son acreditadas en los niveles altos. Se requiere
que conozca, lea y analice crticamente un texto bsico importante para el rea.
REVISIN COMENTADA
DE LA LITERTURA
Para conocer el rango de lecturas realizadas por el postulante y asegurar el rango apropiado de lecturas para los requerimientos de la materia (esto es particularmente adecuado
para las evaluaciones posgrado)
Ejemplo: el postulante busca acreditar aprendizajes en varias
materias de Ciencias Agrarias a partir de su trabajo en campo,
realizado con un equipo de investigacin y desarrollo durante
tres aos para el que ha estado realizando un conjunto de lecturas durante varios aos, relacionados con los problemas que
surgan en el transcurso de las visitas al campo. Ha realizado
bsicamente resmenes de contenido, pero tambin ha comparado diferentes enfoques y ha anotado reflexiones acerca
del modo en el que los temas son presentados y su utilidad
para los problemas en los que ha intervenido. Se le pide al
postulante que complete esta tarea utilizando un enfoque ms
sistemtico.
6 2
INFORMES, CRTICAS,
ARTCULOS
boletn cinterfor
MTODOS DE
EVALUACIN
PORTAFOLIO
PROPSITOS Y EJEMPLOS
6 3
6 4
boletn cinterfor
con un amplio rango de eventualidades, algunas de las cuales solo raramente ocurrirn. Tales autoridades a
menudo responden y reflejan polticas
nacionales sobre educacin y formacin, y deben responder por sus actos
ante el gobierno.
Los sistemas de evaluacin externa proveen informacin a los principales involucrados: estudiantes,
formadores y aquellos que toman decisiones de contratacin en el mercado de trabajo, y de seleccin para el
ingreso a la educacin superior.
6 5
cin pueden ser definidos centralmente, pero implementados por los formadores y docentes de las instituciones
(generalmente evaluaciones prcticas
y asignaciones de tareas a desarrollar
por los candidatos). Los sistemas de
evaluacin externa a lo largo del mundo usan normalmente una combinacin
de evaluaciones externas implementadas por evaluadores calificados y
evaluaciones realizadas por los propios
formadores en las instituciones.
6 6
luadores con los que stas se encuentran vinculadas. Las evaluaciones debern satisfacer las necesidades de todos los tipos de estudiantes que busquen calificaciones de cualquier nivel
y satisfacer, al mismo tiempo, los imperativos polticos, econmicos y sociales del gobierno. Adems, la administracin del sistema debe asegurar que los
resultados de los candidatos sean precisos y equitativos y entregados a tiempo.
Se necesitarn reglas administrativas relacionadas con una variedad de
situaciones por ejemplo, si la admisin de algunos candidatos puede ser
rechazada, la prohibicin de combinar
determinadas materias, la aceptacin
de ingresos tardos, polticas de reintegracin de cuotas por abandono,
transferencia de candidatos entre los
centros, arreglos especiales para candidatos con necesidades especiales, y
acuerdos para candidatos que estn
ausentes de una parte de la evaluacin
debido a enfermedades.
LASECUENCIADEEVALUACIN
El organismo evaluador
El organismo evaluador (OE) es un cuerpo aprobado por el gobierno que conduce las evaluaciones para el otorgamiento de certificados de educacin general,
formacin profesional y tcnica a estudiantes de nivel secundario y postsecundario
de educacin. El organismo publica sus programas (curricula o cursos de estudio
o formacin) antes de las sesiones de evaluacin para permitir la preparacin
completa de los candidatos que se postulan para las evaluaciones. Adems, ofrecen de manera apropiada recursos de apoyo, guas y materiales apropiados. La
informacin detallada acerca de la direccin del proceso de evaluacin es publicada y distribuida a los centros.
boletn cinterfor
Designar un responsable que conducir las evaluaciones en el centro y mantendr la correspondencia con el OE (incluyendo la correspondencia sobre
los estudiantes).
Garantizar condiciones de seguridad para la recepcin y revisin y almacenamiento de las pruebas (lo que incluye la disponibilidad de una cerradura segura, un sitio seguro o gabinete de acero en un lugar no accesible a personas
no autorizadas).
Disponer de la infraestructura y servicios completamente adecuados para recibir a todos los candidatos.
Garantizar la conduccin apropiada del proceso de realizacin de las pruebas.
Designar un docente en cada materia que sea responsable de coordinar y estandarizar las correcciones de los componentes cuyo desarrollo se asigna a
los centros.
6 7
boletn cinterfor
6 8
El OE espera el mismo nivel de rigor en la seguridad y confiabilidad de las evaluaciones llevadas adelante por los centros, que el que se requiere para las pruebas administradas a nivel central.
boletn cinterfor
SISTEMASREGULATORIOS
La regulacin de la evaluacin externa se da en tres niveles. A continuacin se
describe cada uno de ellos:
Regulacin de los centros de evaluacin por parte del Organismo Evaluador
La administracin de las evaluaciones externas es un proceso complejo. El OE
externo necesita obtener datos precisos acerca de los candidatos y hacerlo en los
plazos previstos. Los centros de evaluacin necesitan informacin precisa y especfica acerca de qu hacer y cundo hacerlo, para gestionar todas las actividades involucradas en el proceso: la supervisin y control de los exmenes, la preparacin de los candidatos para la evaluacin, las actividades de evaluacin de
los candidatos.
La persona responsable de conducir las evaluaciones en cada uno de los centros
los directores de las pruebas, requieren tambin de informacin detallada y
especfica para llevar adelante las rutinas administrativas y los casos especiales
(incluyendo en ellos casos de mala prctica y prdida de evaluaciones).
Autorrregulacin de los organismos evaluadores a travs de sus propios procedimientos y documentos de orientacin elaborados sobre la base de un Cdigo
de Buenas Prcticas
Crecientemente, las organizaciones que ofrecen servicios de evaluacin sobre
una base comercial han producido sus propios cdigos de autorregulacin de sus
conductas. Algunos de stos siguen estndares internacionales, tales como las
normas ISO 9000. Es buena prctica para los OE declarar de manera pblica,
formalmente documentada y accesible, cules son sus polticas, principios y prcticas. Un documento tal establece lo que debera ocurrir y las razones por las
cuales esto debe ser as. En Inglaterra y Gales, los OE de la educacin general,
profesional y tcnica han producido documentos y procedimientos pblicos que
establecen cmo conducirn sus empresas.
6 9
boletn cinterfor
5.3 La administracin de
examinaciones externas
un estudio de caso
La mayora de los organismos de
evaluacin del mundo operan sistemas
similares. El resto de este captulo describe un sistema de evaluacin externo genrico aplicable a evaluaciones
de todo tipo. La secuencia sigue el orden del proceso de evaluacin externa.
7 0
Plazos
Dado que cada sesin de evaluacin se desarrolla con plazos precisos,
es esencial que todos los que participan en el proceso (el personal del organismo evaluador, los responsables de
la impresin de los materiales, los forboletn cinterfor
Seguridad
La seguridad es un aspecto crtico
de la administracin. Debe haber resguardos contra los fallos en la informacin a travs de todas las etapas,
desde la escritura de los cuestionarios,
y sus esquemas de correccin impresos, la distribucin a travs del correo
u otros sistemas, y el almacenamiento
en las instituciones, hasta la conduccin de la evaluacin. Las tcnicas para
alcanzar altos niveles de seguridad varan de acuerdo a la cultura y los valores de la nacin involucrados.
Distribucin postal
En algunos pases, el servicio de
distribucin (por ejemplo a travs del
correo) es un mtodo perfectamente seguro de envo de materiales sensibles
a los centros de evaluacin. En otros
pases, son usados otros mtodos (tales
como la distribucin directa por parte del
personal del OE). Deben desarrollarse
procedimientos especficos para asegurar que, una vez que es evaluado el trabajo del candidato, la informacin (por
ejemplo, las correcciones o calificaciones los grados) no se pierda en el sistema de distribucin. (Por ejemplo,
enviando al OE el trabajo evaluado de
los candidatos en un envo separado del
que se utiliza para las hojas con correcciones los examinadores).
Control de calidad
Para ser justos con los candidatos,
los cuestionarios de las pruebas y las
asignaciones de tareas (junto con los
criterios para evaluarlos) deben ser de
alta calidad, los examinadores deben
ser seleccionados, entrenados para corregir siguiendo el mismo estndar, y
los controles de su correccin deben
ser realizados en varias etapas del proceso de evaluacin. Toda toma de decisin necesita ser controlada dos veces, particularmente las decisiones sobre el ajuste de las correcciones, la
ponderacin de los componentes de la
evaluacin o el establecimiento de niveles de logro.
The School Curriculum and Assessment Authority (1994) Code of Practice for GCE A and AS Examinations.
Reference P16/94/068. London Central Office of Information SCCU J063134; and Code of Practice for GCSE
Examinations. Reference KS4/94/046.
7 1
REFERENCIAS BIBLIOGRFICAS
7 2
boletn cinterfor