Documentos de Académico
Documentos de Profesional
Documentos de Cultura
ALGUNOS ENFOQUES
ESQUEMA DE CONTENIDOS
1. La de evaluacin de programas. Concepto, finalidad, dimensiones y funciones
1.1. Concepto de evaluacin de programas
1.2. Finalidad y dimensiones de la evaluacin
1.2. Funciones de la evaluacin
2. Cuestiones a tener en cuenta en el proceso de realizacin de una evaluacin
2.1. Para quin se hace la evaluacin
2.2. Quin debe hacer la evaluacin
2.3. Sensibilizacin hacia la evaluacin
2.4. Planificacin de la evaluacin
2.5. Qu informacin debe ser recogida
2.6. Los mtodos en la evaluacin
3. Los informes de la evaluacin y la utilizacin d e los resultados
4. Los criterios y normas para juzgar la evaluacin
5. Enfoques para la evaluacin de los programas y de las instituciones
5.1. Enfoque de evaluacin de programas orientada a la toma de decisiones
5.2. Enfoque de evaluacin para la mejora de la escuela
5.3. Enfoque de calidad total. El modelo de excelencia europeo
6. Referencias bibliogrficas
7. Realizacin de una prctica evaluativa
Propsito
EVALUACIN SUMATIVA
Audiencia
Mejorar el programa
Certificar la calidad del programa
Administradores y personal del
programa
Consumidores potenciales
Quin la hace
Evaluador interno
Evaluador externo
Qu resultados produce?
A qu costo?
Qu objeciones debe hacer?
Medidas vlidas y fiables
Muestreo suficiente
Recogida de informacin al final
Resultados a tiempo
sumativa, la segunda, para conocer los resultados del programa y rinda cuentas ante la
sociedad. La evaluacin interna tambin se encuentra asimilada al trmino de
autoevaluacin, para significar que es realizada por los agentes internos de la institucin.
Cuando se inicia un proyecto de evaluacin de una institucin se habla de
evaluacin institucional, y presupone las dos funciones de la evaluacin, la evaluacin
interna, o autoevaluacin, y la evaluacin externa como rendimiento de cuentas. Desde el
enfoque de evaluacin institucional, se cubre el doble objetivo de conocer cmo funciona la
institucin, con un primer objetivo de la evaluacin diagnstica, para introducir los ajustes
necesarios en la conceptualizacin del programa, en los recursos materiales, la formacin
del personal y los medios econmicos necesarios para realizar las mejoras. El segundo
objetivo sera el de informar a la sociedad sobre cmo trabaja la institucin para conseguir
los objetivos que se ha marcado, y los hace explcitos, y qu logros consigue, fundamentada
esta informacin en la evaluacin interna, o autoevaluacin, y en evaluacin externa, o
certificacin por evaluadores externos, lo que garantiza la credibilidad de los informes de la
evaluacin.
La evaluacin debe ser realizada por un equipo de expertos, pudiendo ser externo o
interno a la institucin, comprometido con la idea de la evaluacin para la mejora, siendo
conveniente, en este ltimo caso, si fuera necesario, que recibieran asesoramiento
especfico sobre cmo actuar para realizar la evaluacin.
El papel del evaluador es proporcionar a los responsables de la organizacin y
aplicadores de los programas, un plan preciso de evaluacin, que incluya estrategias de
informacin y formacin para lograr la colaboracin y la implicacin de todos en la
realizacin de la evaluacin, y asimismo, en la colaboracin de la puesta en marcha de las
acciones que se deriven de los resultados de la evaluacin.
5 Haga recomendaciones
Si el enfoque utilizado es el de Evaluacin Repondiente, de Stake, especifica
doce pasos interactivos, en un modo caracterstico del enfoque de investigacin naturalista,
que puede adoptar una secuencia circular, como las horas en la esfera de un reloj. Son las
siguientes:
1. Hable con las personas implicadas en el programa.
2. Identifique las metas del programa.
3. Revise las actividades del programa.
4. Descubra los intereses y preocupaciones de los grupos implicados.
5. Determine las preocupaciones claves.
6. Identifique las necesidades de profundizar en determinados temas y recoger ms
informacin sobre ellos
- 6-
Las cuestiones principales que deben ser atendidas en todas las evaluaciones son
las siguientes:
4. LA RECOGIDA DE INFORMACIN
EN LA EVALUACIN DE PROGRAMAS
PLANIFICACIN DE
SU PUESTA EN
PRCTICA
Recogida de informacin
APLICACIN DEL
PROGRAMA
Recogida de
informacin
Y EN LA EVALUACIN
- 8-
RESULTADOS
Recogida de
informacin
Figura 1.
Los prerrequisitos para valorar los impactos de una intervencin evaluativa -sus
resultados ltimos-, son los siguientes:
- 9-
DIMENSIONES
El contexto
Las personas y
sus contextos
Calidad del
programa y de
sus metas
Adecuacin a las
metas y al
contexto
Metas
Contenido
Estructura del
programa
Viabilidad
Adecuacin a la
situacin de
partida
Estrategias
Actividades
Secuencias
Clima
Constatacin
Criterios
Referencias
IMPLANTACIN
OBJETO
ANLISIS DE
LOS PROCESOS
Implantacin
Marco
ANLISIS DE
RESULTADOS
Medida logros
Valoracin
Constatacin
Criterios
Referencias
PROPUESTAS
DE MEJORA
Decisiones
Continuidad
Mejoras
Cambio
MTODOS y TCNICAS
Resultados de evaluaciones
previas
isis de necesidades Lectura
de informes, Encuestas
Anlisis de contenido
Evaluacin de expertos
Evaluacin de los recursos
del contexto
Evaluacin de la
planificacin
Evaluacin de los recursos
Evaluacin de los ritmos del
programa
Evaluacin de la
participacin y satisfaccin
Evaluacin de logros en
coherencia con los criterios
Evaluacin de la satisfaccin
Informe y propuestas de
mejoras
Planificacin y seguimiento
Figura 2.
Dada la complejidad que las organizaciones y los programas encierran, tanto para la
evaluacin de necesidades iniciales, como del diseo del programa para contribuir a la
solucin de las mismas, como la planificacin de su puesta en funcionamiento y su
aplicacin, y de sus resultados, las metodologas de recogida de informacin y anlisis de la
misma que utiliza la evaluacin, puede incluir todos los enfoques de investigacin,
dependiendo de sus objetivos, y dimensin, y por lo tanto, diversidad mtodos, tcnicas e
instrumentos, imponindose el principio de complementariedad metodolgica.
Las recomendaciones.
Los evaluadores deben informar a todos los grupos interesados en saber, por lo que
no debe limitarse a un nico estilo de informe. La informacin evaluativa debe aportar
nuevas luces sobre las concepciones de los problemas sociales o sobre la teora implcita de
las actividades de los programas.
La evaluacin no es slo una actividad tcnica sino que es, tambin, una
investigacin diseada para dirigir el proceso de formacin poltica. Por ello, el evaluador
debe ser consciente de que la informacin de una evaluacin debe llegar all dnde se
toman las decisiones, de un modo adecuado, y a tiempo.
Algunas de las variables que afectan a la utilizacin de los resultados de las
evaluaciones son las siguientes:
a) La pertinencia de la realizacin de la evaluacin,
b) La comunicacin entre los promotores de la evaluacin, los evaluadores,
aplicadores de los programas y su beneficiarios,
c) La participacin de los implicados en el programa,
d) La informacin a los implicados en el programa,
e) La factibilidad de la utilizacin de los resultados.
Queda claro, en esta ordenacin, que una evaluacin aportara una informacin
utilizable, si es posible y pertinente hacerla, y si se ha establecido una relacin adecuada y
transparente, informando de las intenciones de la evaluacin a los participantes y
beneficiarios, ya que de otro modo la informacin aportada habra que valorarla con ciertas
dudas de verosimilitud, lo que afectara al uso de los resultados. Si los grupos y personas
implicadas en el programa han sido informados y han colaborado en la evaluacin, ser
ms factible que acepten los resultados y colaboren en las propuestas de cambio que se
deriven de las conclusiones de la evaluacin.
- 13-
informa
sobre
los
resultados
Con ello se lleg a la estructura bsica del enfoque CIPP, cuyas siglas se relacionan
con: C: Contexto, I: Input, entrada, P: Proceso, P: Producto. Su relacin podemos verla en
el siguiente diagrama:
C: La evaluacin del Contexto, para la valoracin de necesidades, mediante estudios
de necesidades que conducirn a priorizar acciones conducentes a solucionarlas, y
desarrollar los programas organizados en tornos a las metas;
Los programas deben ser evaluados antes de su puesta en funcionamiento,
mediante consulta a expertos. Hay que valorar el programa teniendo en cuenta las
metas a las que sirve, la calidad misma de las metas, la calidad estructural del
programa, y la calidad de sus contenidos, estrategias y acciones para aplicarlo.
I:
Sus mtodos
9
Liderazgo participativo
Bsqueda del consenso en la visin, misin, proyectos
Compromiso en la formacin del profesorado, de los empleados
- 17-
revisin, mejora.
Lo importante para que la visin y la misin tengan xito es involucrarse e implicar
a todos los miembros en la "construccin de la visin". Los mtodos de investigacin, y las
tcnicas de recogida y anlisis de la informacin, junto con los conocimientos sobre
organizacin de centros educativos, y diseo y aplicacin de programas educativos, nos
ayudarn a responder a las cuestiones planteadas.
- 19-
Responsabilidad
en la Gestin
CLIENTES
CLIENTES
CLIENTES
CLIENTES
Feed-back
Gestin de
Recursos
Necesidades
Realizacin
del Procesos
Medidas,
Analisis,
Mejoras
Satisfaccin
A
Producto
Figura 3.
Dichos principios son definidos dentro del enfoque de Calidad Total para la gestin
de las organizaciones, y han sido adoptados por el Modelo Europeo de Excelencia, en los
- 20-
- 23-
LA AUTOEVALUACIN
La autoevaluacin es un proceso por el cual se recoge informacin precisa
y rigurosa, de modo sistemtico, sobre la calidad de los programas en el
contexto del centro, siguiendo, en este caso, el modelo europeo.
SE PARTE DE:
Los fines y
situacin actual del
centro
La poltica general
de la administracin
La realidad del
entorno
El conocimiento de
la historia del centro
PARA LLEGAR A:
Conocer el
funcionamiento
del centro
Detectar sus
puntos fuertes y
sus reas de
mejora
Priorizar las reas
de mejora
Figura 5
despliegues, y de los resultados. Seala, por tanto, los puntos fuertes y las reas de mejora.
La evaluacin de este modo realiza una funcin diagnstica sealando las necesidades de
mejora.
Los criterios para priorizar las reas de mejora, son los siguientes:
La gravedad de las carencias detectadas
La factibilidad de las acciones a emprender
La rentabilidad prevista en sus resultados
El grado de consenso entre los afectados por las decisiones a tomar
Una vez priorizadas las necesidades en consenso, se llega al acuerdo de qu
mejoras acometer, y en coherencia se elaboran los correspondientes Planes de mejora.
Un plan de mejora es, por lo tanto un instrumento que parte de la evaluacin de
necesidades que ha marcado la lnea base en la que se encuentra el centro, y sobre la que se
deben promover las mejoras. El plan especifica los objetivos a conseguir de modo realista,
concretos y evaluables, y, para conseguir las mejoras necesita de un seguimiento para
constatar sus logros. El seguimiento del plan sirve a la institucin como instrumento para el
aprendizaje organizativo.
EL PLAN DE MEJORA
El plan de mejora parte de la evaluacin diagnstica que aporta la
autoevaluacin, sealando los puntos fuertes y las reas de mejora.
CRITERIOS PARA
PRIORIZAR LAS
REAS DE MEJORA:
EL PLAN DE MEJORA ES
UN INSTRUMENTO:
SEGUIMIENTO
DEL PLAN:
" Sirve a la
institucin
como
instrumento
para el
aprendizaje
organizativo
Figura 6.
El modelo est abierto a mejoras, por lo que sus indicadores, tras las valoraciones
de los usuarios, se adaptarn cada vez ms a las caractersticas del sistema educativo,
buscando con ello lograr una mayor participacin y compromiso de la comunidad educativa
- 26-
6. REFERENCIAS BIBLIOGRFICAS
Ainscow, M. Hopkins,D., Southwort,G. y West, M. (2001). Hacia escuelas eficaces para
todos. Manual para la formacin de equipos docentes. Madrid, Narcea. (Primera
edicin en ingls en 1994, London, Fulton).
Martnez Mediano, C. (1997). Evaluacin de programas educativos. Modelos de evaluacin
de programas. Investigacin evaluativa. Madrid, UNED, Cuadernos de la UNED,
159.
Martnez Mediano, C. (1998). La teora de la evaluacin de programas. Educacin XXI. 1.
Madrid, UNED, Revista de la Facultad de Educacin.
Martnez Mediano, C. y Gonzlez Galn, A. (2001). La evaluacin para la mejora de la
calidad de los centros educativos. Madrid, UNED, Textos de Educacin Permanente.
Ministerio de Educacin, Cultura y Deporte: (2001). El Modelo Europeo de Excelencia.
Madrid. Secretara General Tcnica.
Stufflebeam, D. and Shinkfield, D. (1987). Evaluacin sistemtica. Madrid: Paids, MEC.
www. efqm.org
www.iso.quema
7. EJERCICIO DE PRCTICAS
Piense en un objeto posible de evaluacin, con el que se sienta relacionado, o est
interesado, y realice el ejercicio en torno a las siguientes indicaciones:
1. Describa el objeto a evaluar.
2. Defina sus metas.
3. Describa, brevemente, cmo debe trabajar o funcionar dicho objeto para conseguir
sus metas.
4. Qu tipo de evaluacin, o mejor, qu funciones aplicara y por qu.
5. Qu tipo de informacin recogera.
6. En qu momentos la recogera.
7. De qu modo y qu instrumentos utilizara.
8. Cules son los criterios de evaluacin.
9. Cmo los aplicara para evaluar el programa.
10. Importancia de la utilidad de los hallazgos.
11. Reflexione sobre los posibles modos de potenciar el uso de los resultados de la
evaluacin de programas. Indquelo.
- 27-
- 28-