Documentos de Académico
Documentos de Profesional
Documentos de Cultura
1 - Trad Assessment Base-1
1 - Trad Assessment Base-1
e-mail: danielle.colardyn@wanadoo.fr
0103
DOCUMENTO CONCEPTUAL
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Contenido
Introduccin........................................................................................................................ 3
Principios generales para la evaluacin basada en competencias......................................5
Definiciones de trminos principales...............................................................................5
Propsitos de las evaluaciones.......................................................................................6
Requisitos para la evaluacin..........................................................................................9
Recopilacin de evidencia.............................................................................................10
Conclusin: qu bases para elegir?............................................................................15
Identificacin de pasos para asegurar una evaluacin basada en competencias.............16
Paso 1: Gobernabilidad y legitimidad de acuerdos institucionales................................16
Paso 2: Estndares (basados en la competencia)........................................................18
Paso 3: Mdulos............................................................................................................ 18
Paso 4: Evaluacin: asegurar la calidad en los mtodos y procedimientos de evaluacin
...................................................................................................................................... 19
Conclusin: hacia un sistema unificado de evaluacin......................................................19
Anexo: Informacin adicional sobre las definiciones terminolgicas.............................21
Bibliografa.................................................................................................................... 22
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Introduccin
La actividad de la evaluacin basada en competencias cubre varios aspectos.
Primero, un informe presenta las prcticas de evaluacin en la Unin Europea (FEF, 2002,
prximamente). Segundo, dos seminarios y vistas a los pases ayudan a establecer pasos
hacia un sistema EBC para Bosnia Herzegovina, Rumania y Uzbekistn. Por ultimo, este
documento Conceptual traza algunos principios generales para guiar el diseo e
implementacin de los sistemas EBC en los pases de nuevo ingreso y aquellos que ya son
miembros.
La comunicacin del aprendizaje a lo largo de la vida (Unin Europea, 2002) adopta
metas y objetivos con fuertes implicaciones y relevancia para el desarrollo de la evaluacin
basada en competencias. Las oportunidades de aprendizaje se amplan en cuanto se toma
en consideracin el aprendizaje que est fuera de las instituciones educativas y de
capacitacin. Los enfoques, metodologas y procedimientos de evaluacin tienen que
enfrentar varias situaciones. El aprendizaje en la escuela, en el trabajo y otros aprendizajes
no-formales e informales plantean preguntas para las evaluaciones. En particular:
-
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Se tiene que poner atencin a la definicin de aprendizaje formal: de hecho, la capacitacin que se da en las empresas se
incluye en esta definicin ya que es un contexto organizado y estructurado de aprendizaje. El aprendizaje en el trabajo tambin
puede ocurrir de manera no-formal. No obstante, el aprendizaje que se lleva a cabo en las actividades de educacin y
capacitacin organizadas o actividades planeadas por la empresa con un objetivo de aprendizaje explcito entran dentro de la
categora de aprendizaje formal como se define arriba.
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Especificar los objetivos para las evaluaciones. Distingue entre las evaluaciones
formativas y sumativas. Se diferencian y dependen de diferentes principios
fundamentales;
los
estndares
ocupacionales
2
3
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Evaluacin de competencias es un trmino general que abarca todos los mtodos usados
para evaluar el desempeo de un individuo o de un grupo.
Validacin se refiere al proceso de evaluar y reconocer aquellas habilidades y
competencias que la gente desarrolla a travs de sus vidas y en diferentes contextos,
incluyendo actividades educativas, laborales y de recreacin (adaptado de la Enciclopedia
Internacional de la Educacin, p. 663). En contraste a la certificacin formal, la validacin
tambin abarca el aprendizaje no-formal e informal.4
Certificacin es el proceso de emitir certificados o diplomas que reconocen formalmente los
logros de un individuo (adaptado de FEF).
Acreditacin es el proceso de atribuir o proveer evidencia formal de valor a las
competencias, independientemente de la manera en la cual estas competencias se
adquirieron (Cedefop). Tambin se refiere a la autorizacin de un organismo certificador
con respecto a las Normas Europeas5. Esto significa que el organismo certificador funciona
de acuerdo con la Norma Europea predefinida (EN 45013 en el caso de la certificacin de
competencias del personal). Tambin se refiere a la autorizacin de instituciones o
programas, en cuyo caso significa el proceso de otorgar la categora de acreditacin a una
institucin educativa o de capacitacin, a un programa educativo o de capacitacin. Por
ejemplo, la etiqueta ISO se puede aplicar a una institucin o un programa al que se puede
considerar que funciona de acuerdo con las especificaciones de la norma ISO 6, certificando
la calidad del servicio prestado.
Fuentes: Cedefop (2002) y (EAC, 1995).
El proceso de reconocimiento de competencia incluye todos los elementos
mencionados.
Propsitos de las evaluaciones
Las evaluaciones cumplen varios propsitos. Algunos estn relacionados con el
desarrollo laboral o de una carrera. En este sentido, el objetivo de la evaluacin es proveer
informacin vlida y til a los empleadores para tomar decisiones sobre la seleccin de
contrataciones nuevas y del progreso de los empleados. Otros objetivos de la evaluacin
estn directamente ligados al ingreso escolar y al progreso en los sistemas de educacin y
capacitacin. Por mucho tiempo han existido varios mtodos de evaluaciones educativas y
de capacitacin y resulta til hacer referencia a ellos.
Por mucho tiempo, la educacin funcionaba para seleccionar el porcentaje limitado
de jvenes que pasaban del nivel de secundaria a la educacin superior. El proceso de
seleccin se llevaba a cabo a travs de las evaluaciones, y por este medio se tomaban
decisiones importantes de quines y quines no seran admitidos al siguiente nivel
educativo, y especialmente a la educacin superior.
Como uno puede ver con el aumento en el logro educativo (vase FEF, 2002,
prximamente), gran parte de los jvenes se quedan ms tiempo en la escuela: en los
pases miembros de la Unin Europea, la mayora de los jvenes alcanzan la educacin
media superior (general o vocacional). Hoy, con el desarrollo de una escolaridad ms larga y
4
Validacin tambin se define como la evaluacin de un proceso de evaluacin. Se debe poner atencin sobre una confusin
potencial.
5
Vase EAC: www.european-accreditation.org
6
Vase ISO: www.iso.org
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Evaluacin formativa
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Un ejemplo:
Cuando un nio aprende a multiplicar en la primaria, aparte de aprender la tabla de
multiplicar de memoria, se pueden distinguir varios pasos de una evolucin. Primero la
multiplicacin con un dgito y sin llevar; un dgito y llevar; dos dgitos sin llevar; nmeros
que incluyen cero; dos dgitos y llevar; etc. La evaluacin formativa podra tener como
objetivo, por ejemplo, la multiplicacin con dos dgitos ms llevar: su propsito es
establecer la profundidad de la destreza de ese segmento de aprendizaje. An no indicara
si las habilidades de multiplicacin se han adquirido en su totalidad.
Evaluacin sumativa
Un ejemplo:
Mecnico de herramientas de tecnologa de planchado y transformacin en Audi.
A fin de un mejor sellado de ambas luces traseras del Audi 8, parte del ensamblaje de las
luces traseras ha sido cambiado, y la superficie de sellado se estn agrandando. Para lograr
la forma deseada de acuerdo con el molde y los dibujos tcnicos, es necesario hacer
modificaciones a las herramientas de corte, arrastre, transformacin y separacin. A todos
los candidatos se les da un trabajo especfico, por ejemplo: cambiar las partes de la
herramienta de arrastre.
La tarea de Aprendizaje se puede describir como cambiar una herramienta.
El examen consiste de: cambiar las partes de la herramienta de arrastre.
El examen tiene cuatro etapas:
- La planeacin y preparacin toma 4 horas;
- Para cambiar las partes de la herramienta doblando y unindola manual y
mecnicamente, al candidato se le dan 14 horas;
- Para la revisin de la calidad, se otorga 1 hora y,
- Para documentar y presentar el trabajo, el candidato tiene 7 horas.
En la ecuacin formal, los resultados tambin pueden ser tiles para juzgar la eficacia del maestro y para comparar currcula
alternativa.
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
cambiar la herramienta
control de calidad
documentar
presentar
Herramienta
que
lleva
a
cabo
la
y
produccin
Para concluir
2.
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Evidencia o pruebas
Certificado de asistencia. Una vez concluido el programa educativo o de capacitacin, el individuo recibe un certificado que
atestigua que l o ella sigui el programa. Esta evaluacin es una parte de la metodologa para evaluar: es un certificado de
presencia y no evala competencias.
10
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Dos ejemplos:
- En la seccin de Literatura del Bachillerato General, el examen de letras toma dos horas.
Consiste de dos preguntas sobre los trabajos de los autores estudiados durante el ao
escolar. Por ejemplo, sobre el tema del Queneau de los autores franceses, la primera
pregunta (la cual vale 12 de 20 puntos) es la siguiente: En el captulo V de Fleurs Bleues,
el Duque de Auge declara que la repeticin es una de las flores con ms olor de la retrica.
Qu papel ocupa la repeticin en la novela? La segunda pregunta (con un valor de 8 de 20
puntos), pregunta qu funciones desempea el graffiti en Fleurs Bleues?
- En filosofa, el examen dura 4 horas. Los estudiantes tienen que elegir un tema de tres
temas posibles. Las preguntas de muestra son: Es suficiente la memoria para el
historiador?, Son separables los requisitos para la justicia y la libertad? O, se les pedir a
los estudiantes que demuestren el inters filosfico de un extracto de 20 lneas de algn
autor estudiado durante el ao escolar.
Fuente: extracto de Bachillerato (Francia)
Declaracin
El candidato declara y justifica (de manera oral y escrita) que lo que l o ella puede
hacer corresponde a ciertas partes o elementos del aprendizaje enseado en el programa
educativo o de capacitacin que condujo a la calificacin 10 para la cual l o ella desea
obtener reconocimiento. Un jurado (de terceros) da el juicio final.
Un ejemplo: START en los Pases Bajos.
La meta de START es otorgar una exencin de algunas partes de la currcula vocacional de
bachillerato. START es un procedimiento de evaluacin para gerentes industriales. Las
entrevistas son parte del procedimiento con mltiples mtodos y evaluadores, y est
altamente dirigido por el contexto. El estndar utilizado es el perfil nacional de competencias
para gerentes industriales (nivel 5). Este estndar se traduce a indicadores de competencia
(criterios de evaluacin).
El candidato presenta una situacin autntica. Se hacen preguntas sobre:
La Situacin laboral (organizacin, mtodos de productos y de produccin, estilo de
gestin, informacin completa sobre la organizacin);
La Tarea especfica a satisfacer (responsabilidades, metas y resultados);
Las Actividades del candidato (qu haces para desempearte bien o para obtener tus
resultados);
Los Resultados (sobre que resultados te evala la empresa u organizacin, que debes
cumplir, crear o producir incluyendo especificaciones del producto, lo que hay que hacer y
lo que hay que evitar);
La Transferencia de competencias (preguntas en las que se suponen varias situaciones:
surge ste o aqul problema, el cliente no reaccion as sino as, qu hacer cuando la
maquina o el proceso causa este problema).
El equipo evaluador est compuesto por el docente y un gerente con experiencia del sector
industrial. Llevaron una capacitacin para usar el mtodo START y para realizar
interpretaciones y conclusiones sobre la base de indicadores de competencia.
10
11
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Fuente: Klarus, R. & Wee E. ter (2002) Intake Assessment HTNO - Intake Assessment
Technical Highschools- Wageningen: STOAS Research.
Observacin
La observacin sigue ciertas reglas y mtodos estrictos, por medio de los cuales el
evaluador (quien deber ser una tercera persona) observa al candidato y juzga si l o ella
tiene la competencia en cuestin (si la puede aplicar). La observacin es un ejercicio que
exige mucho. Se necesita metodologa y capacitacin para permitir que el evaluador recopile
la informacin relevante y fiable por medio de las observaciones.
Las actividades de observacin se pueden llevar a cabo en escenarios reales de
trabajo, o se puede basar en experiencias pasadas con el candidato o en una situacin
laboral simulada. Los siguientes ejemplos son observaciones de actividades laborales reales
(candidatos docentes) y la evaluacin se basa en la retrospectiva de la experiencia previa
(trabajadores en tecnologa de alimentos industrializados).
Un ejemplo
Para reclutar a un docente, se recopilan observaciones para evaluar las
competencias del candidato. Los candidatos no slo estudian en un colegio de capacitacin
para docentes: desarrollan competencias en ocupaciones relacionadas. La evaluacin
ayuda a trazar los logros del individuo y a planear un curso de capacitacin a la medida
dirigido a las competencias que no se han adquirido. Despus de presentar una carpeta, el
candidato y el asesor deciden las competencias que sern reconocidas; esto lleva a
exenciones de la currcula.
El candidato prepara y entrega una actividad de aprendizaje para la educacin
general de nivel primaria o secundaria. El candidato selecciona su situacin preferida de
trabajo porque el procedimiento est dirigido a reconocer el logro y no a captar fracasos. Los
evaluadores (un docente con experiencia y un docente del colegio de maestros) observan
las actividades de trabajo del candidato. Los evaluadores observan, no hacen preguntas.
Los evaluadores usan una lista de control de aproximadamente 30 indicadores de
competencia basados en los estndares de competencia nacionales. La estructura de los
estndares sigue el proceso de trabajo de la enseanza: introduccin de una actividad,
instruccin o ayuda individual durante las actividades de aprendizaje, evaluacin con los
alumnos de las actividades de aprendizaje. Los evaluadores registran sus observaciones,
las traducen a una puntuacin y las comparan para llegar a una conclusin final y
compartida. Los resultados de la evaluacin se discuten con el candidato y los evaluadores
formulan un plan de desarrollo de competencias. El plan describe los logros del candidato y
las competencias a desarrollar para poder ser un profesional en su totalidad.
Fuente: Klarus, R., Schuler, Y. & Wee, E. ter (2000) Bewezen geschikt - Competent Proved Wageningen: STOAS Research.
Por preferible que sea, la observacin de las actividades reales de trabajo no
siempre es posible debido a las caractersticas de produccin, precauciones de seguridad, la
produccin que absorbe el tiempo, procesos de entrega, o la provisin absorbente de
servicios. En estas circunstancias, la observacin autntica de actividades laborales se
pueden formar como una observacin histrica. El evaluador trabaja con los mismos
materiales de evaluacin como en el caso de la observacin real. La puntacin de los
indicadores de competencia no est basada en un registro de observacin directa, sino en la
12
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
13
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Ejemplo:
Prueba por simulacin usada para evaluar la competencia por AFPA (Francia)
Consiste de una prueba de dos horas al finalizar el mdulo de Control y
mantenimiento de redes de empresas locales. La consulta de documentos es autorizada.
La prueba consiste de dos partes. La primera, que vale 12 de 20 puntos, sobre
organizacin; contiene cuatro preguntas (3 puntos por pregunta). La segunda es sobre
mantenimiento y contiene cuatro preguntas que valen 8 de 20 puntos.
En la primera parte, se describe la red local de una empresa en cuanto a sus
dimensiones tcnicas y su organizacin (departamentos, cantidad de usuarios, software,
etc). Las cuatro preguntas tienen que ver con: la organizacin del disco hardware que ser
representado por un esquema; los usuarios (cmo estn distribuidos; quin tiene acceso a
qu partes); una pregunta especfica sobre la relacin entre el software; cmo est
organizada la proteccin (cuando, qu, cmo, frecuencia).
La segunda parte de la prueba, sobre mantenimiento, presenta un mensaje de error
en una pantalla; se les pide a los alumnos su significado; que identifiquen una posible
hiptesis para explicar la disfuncin; que indiquen la secuencia en la cual se probar la
hiptesis y que indiquen el medio usado para verificar cada paso.
Evidencia extrada de situaciones laborales (u otras)
El candidato recopila evidencias de competencias en su situacin laboral (o en
escenarios sociales, familiares o culturales) basndose en lo que se describe en los
estndares de evaluacin. Un evaluador (un tercero) juzga la relevancia a las competencias
analizadas.
Un ejemplo:
Empleado de tienda Prueba de competencia Envolver
La competencia se describe de la siguiente manera: durante periodos de mucho trabajo
(diciembre por ejemplo), el candidato puede ayudar a la cajera a envolver por lo menos
cinco tipos diferentes de paquetes (por ejemplo, diferentes tipos de materiales para envolver,
vidrio, juguetes, etc.), tomando en cuenta los deseos del cliente y trabajando rpida y
cuidadosamente.
Implementacin de la evaluacin:
De manera oral, el candidato explica lo que l o ella hizo y los resultados obtenidos.
La actitud profesional se puede observar a partir de:
-
Un enfoque planeado;
Tomar en cuenta la seguridad de uno y de los otros;
Ser amable con los clientes y colegas;
Trabajar de manera independiente;
Trabajar rpidamente;
Trabajar con precisin;
Tomar iniciativa.
14
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Durante la evaluacin, los aspectos mencionados arriba son juzgados en una escala de dos
puntos.
Cero puntos si un aspecto en particular es insuficiente o dudoso; un punto si un aspecto en
particular es satisfactorio o bueno. Las partes que se miden son: a) preparacin, b)
implementacin, c) evaluacin, y d) actitud profesional. Para los elementos de a-c se puede
lograr un mximo de diez puntos y los candidatos pasan con siete puntos. Para el elemento
d se puede obtener un mximo de nueve puntos y los candidatos pasan con seis.
Fuente: Baanbreker Certificaattrajecten vmbo-bve Competentietoetsen, Citogroep, Augustus
2001
Conclusin: qu bases para elegir?
Cada mtodo funciona mejor dentro de un contexto especfico (vase Tabla 1). Es
obvio que una prueba o examen en el aula no sera apropiado para evaluar si un individuo
puede montar una bicicleta. Las pruebas o exmenes en el aula pueden aplicar para una
parte de la certificacin vocacional y profesional, y por lo general excluye los aspectos ms
aplicados. Por otro lado, para las competencias aplicadas, la observacin o simulacin
podran proveer la evidencia que se necesita.
Cada mtodo tiene sus propias especificaciones y especialmente sus propias
dificultades o limitaciones: algunos requieren una capacitacin metodolgica muy estricta
de la persona que recopila la evidencia (evaluador, observador); en algunos, es algo
complejo para el individuo (especialmente uno poco calificado) proveer una idea de sus
competencias. Se puede argumentar que la seleccin de mtodos se debera de basar en la
evidencia requerida para demostrar el logro del estndar mientras se satisfacen las pruebas
de validez y fiabilidad. Por lo tanto, y como ejemplo, la observacin podra ser aplicable al
aprendizaje formal.
La Tabla 1 muestra cundo usar un mtodo particular y algunas limitaciones que
podran estar asociadas con cada mtodo.
15
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Observacin
Simulaciones
Cundo utilizarlo
Para el aprendizaje formal
Para la evaluacin del
aprendizaje previo no-formal e
informal
Para el aprendizaje no-formal e
informal (cuando el proceso
cmo se hace algo es una
parte esencial de la competencia
evaluada);
Para capacitar en actividades u
ocupaciones peligrosas (pilotos
aviadores) usado para evaluar la
competencia de alguien que
busca empleo;
Evidencia extrada de
situaciones (laborales u otros)
reales
Certificados de Asistencia
Limitaciones
Difcil para el aprendizaje noformal e informal
Difcil para el individuo explicar
sus logros
Requiere de una intensa
capacitacin metodolgica
Aunque til para aquellos que
buscan empleo, los empleadores
podran no confiar en los
resultados
Requiere de una intensa
capacitacin para los
evaluadores
Tiene poco valor legtimo
reconocido fuera de la
institucin o empresa
Vase el trabajo previo de la FEF sobre el marco y la metodologa internacional para el desarrollo de estndares. No se
desarrollara ms a fondo pero se coloca como el primer paso.
16
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Evaluaciones sumativas
Aprendizaje formal
-
Controles continuos
Declarativa VAP
Revisin de competencias
Evidencia de situaciones
reales (laborales u otros)
Simulacin
Exmenes
y
pruebas
(incluyendo pruebas fuera
de la escuela, como un
testimonio del empleador)
Aprendizaje
informal
-
no-formal
Declarativa VAP
Revisin de competencias
Evidencia de situaciones
reales (laborales u otros)
Simulacin
Simulacin
Observacin
Evidencia de situaciones
reales (laborales u otros)
Para obtener
Para obtener
Certificacin de un proceso
educativo o de capacitacin
Certificacin de un mdulo
Certificacin de una unidad
de competencias
17
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
12
Vase: www.anpe.fr
13
18
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Dentro de la metodologa de la FEF, las especificaciones de evaluacin describen lo que se debe evaluar sin entrar en los
detalles de cmo se debe evaluar.
19
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
20
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Las competencias adquiridas por medio del aprendizaje no-formal e informal (ver en
informe I) se pueden evaluar mediante diferentes mtodos y usando diferentes
criterios o puntos de referencia de acuerdo con el nivel de operacin (compaa,
sector, autoridad pblica) y control (mercado laboral o sistema educativo);
15
O a un candidato
21
Danielle Colardyn
e-mail: danielle.colardyn@wanadoo.fr
0103
Bibliografa
Bloom, B.J. and Coll., 1979. Handbook on formative and summative evaluation of student
learning. McGraw-Hill Book Company, New York.
CEDEFOP, 2000. Glossary, Thessaloniki, Greece.
European Accreditation of Certification (EAC), 1995. Guidelines on the application of
European Norm 45013, EAC Secretariat, 1995, Sweden.
European Training Foundation (ETF), 1998. Development of standards in vocational
education and training, volume 1, Turino, Italy. (Reprinted with updates 1999).
European Training Foundation (ETF), 1999. Development of standards in vocational
education and training, volume 2, Turino, Italy. (Reprinted with updates 2000).
European Training Foundation (ETF) (2000), Development of standards in vocational
education and training, volume 3, Turino, Italy.
European Training Foundation (ETF), 2001. Linking Vocational Education and Training
Standards and Employment Requirements, volume 4, Turino, Italy.
European Training Foundation (ETF), 2002. Policies and practices on validation of nonformal and informal learning. An analysis of the first responses by the candidate countries.
Note, May, 6 pages.
FEF 2002 forthcoming. Identifying of the main principles underlying assessment based on
competence and taking Stock of good practices in the European Union (52 pages).
European Commission, 2002. Making a European Area of Lifelong Learning a Reality,
Brussels, Belgium.
European Commission, forthcoming in 2002. Report on national policies and practices on
validation of non-formal and informal learning, Forum on transparency of vocational
qualifications.
ROME, 1995. Rpertoire Oprationel des Mtiers et des Emplois, Agence nationale pour
lemploi, Paris. (see : www.anpe.fr )
22