Evaluación de Programas. Pedagogía. UNED.

Prueba de Evaluación Continua 2016/ 2017

UNIVERSIDAD NACIONAL DE EDUCACIÓN A

DISTANCIA. FACULTAD DE EDUCACIÓN
Evaluación de Programas. Grado en Pedagogía

PRUEBA DE EVALUACIÓN CONTINUA / Curso 2016/ 2017

Profesora Catalina Martínez Mediano

ALUMNO. NOMBRE Y APELLIDOS: Mª Victoria Quintanilla de la Cruz

PREGUNTAS DE LA PRUEBA.
Conteste con precisión, brevedad y suficiencia.
Conteste directamente sobre el documento, en el mismo formato de letra y espacio.
Puede variar el espacio dedicado a responder a cada pregunta, pero la longitud máxima
de la PEC, una vez contestada, no puede exceder de 18 páginas, incluida ésta.

TEMA 1. CONCEPTO Y FUNCIONES DE LA EVALUACIÓN DE PROGRAMAS.

1. Principales funciones de la evaluación de programas. Argumente su elección.

La evaluación implica en muchas ocasiones diversidad de funciones: diagnóstica,

formativa, sumativa, de rendición de cuentas, administrativa, etc., también puede ser
interna o externa, psicológica y sociopolítica, la autoevaluación…

Cuando planificamos la evaluación será necesario determinar las funciones específicas

que debe cumplir.

Las funciones principales, que fueron formuladas por Scriven en 1991, son la función
formativa y la función sumativa.

La función formativa, nos ayuda a mejorar el programa durante el proceso, facilitando

la posibilidad de efectuar los cambios necesarios durante la aplicación del programa.

La función sumativa, aporta una valoración de la eficacia del programa en su totalidad,

es decir, cuando el programa ha llegado a su fin, nos servirá para orientar las decisiones
de cambio y mejora del programa. Esta función se apoya en la función formativa.

2. Conceptos de Evaluación normativa y Evaluación criterial.

1
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Evaluación normativa: en la evaluación del rendimiento de los alumnos, se utiliza un

criterio o norma para comparar el aprendizaje del alumno y el grupo de referencia. Es un
modelo que se basa en unos niveles prefijados, y nos permite emitir un juicio evaluativo
sobre el aprendizaje logrado por el alumno: suspenso, aprobado, notable, sobresaliente o
matrícula de honor. Si el resultado en el progreso del aprendizaje es igual o superior a la
puntuación de la media del grupo (el alumno aprueba), o por el contrario es inferior. Son
medidas relativas, para la medición del rendimiento se utilizan “test con referencia a la
norma”.

Evaluación criterial: cuando en la evaluación de los aprendizajes hacemos referencia al

criterio, buscamos el dominio o conocimiento real que ha adquirido el alumno, es decir,
el conjunto de conocimientos, habilidades, destrezas, competencias, que el alumno debe
dominar.
En la evaluación de un programa, debemos tener un conocimiento completo y detallado
del mismo, así podremos comparar si realmente logra los objetivos que pretende. Es
necesario establecer unos criterios de calidad, unas normas de realización para comparar
lo realizado con lo que el programa pretende conseguir.

3. Concepto de evaluabilidad y su finalidad.

Concepto de evaluabilidad: es la medida en que un programa puede ser evaluado. La

evaluabilidad es una actividad previa a la evaluación que determina si el programa, su
aplicación y los fines para los que están fundamentados, realmente están bien definidos.

La evaluabilidad de un programa se centra en el programa y las necesidades a las que

pretende dar respuesta, la población, el objeto del programa, los objetivos que el
programa desea conseguir.

TEMA 2. M. SCRIVEN. LA EVALUACIÓN COMO CIENCIA DE LA VALORACIÓN.

4. La evaluación como la ciencia de la valoración y la lógica de la evaluación de Scriven.

Scriven en el análisis sobre la naturaleza de la evaluación, indica que la evaluación no es

sólo una mera acumulación y síntesis de datos relevantes para la toma de decisiones,
requiere que se establezcan unas premisas o criterios evaluativos que verifiquen los
valores relevantes y las normas elegidas para la realización de la evaluación.

La evaluación asigna mérito y valor y dependiendo del ámbito en el que se realiza se

utiliza un modo u otro. La evaluación es un proceso y un resultado, el juicio sobre el
objeto evaluado es una de las principales funciones que debe realizar el evaluador.

Los valores pueden ser investigados y justificados empíricamente, los criterios de

valoración para la realización de evaluaciones deben ser objetivos. La investigación
evaluativa debe producir como conclusión un juicio de valor.

2
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Scriven desarrolla una lógica probativa que pueda ser aplicada a la lógica evaluativa
como un caso especial. El término probativo lo define como un modelo de razonamiento
sencillo y sistemático parecido al que pueda utilizarse en la valoración de un juicio sobre
algo. Sugiere tres actividades: determinación de criterios de mérito o calidad de
programas, fijación de normas claras sobre lo que se debe conseguir con la práctica ¿qué?,
y por último, medida de la realización para confirmar que los programas se aplican
siguiendo los criterios de su mérito, y el grado en que éstos se logran con las normas
fijadas.

Scriven añade conclusiones a esta lógica: previamente a estas tres actividades el

evaluador debe determinar el objeto que va a ser evaluado, el programa; después de
comprobar la realización, e informar de los resultados, el evaluador resumirá los
resultados en un juicio evaluativo

5. Importancia de la evitación de los prejuicios en la evaluación de programas.

El código que guíe la evaluación en la práctica, guarda relación con la honestidad de los
evaluadores. Para que el evaluador sea capaz de controlar los prejuicios y los minimice,
debe explicitarlos y establecer alertas contra las dudas o la ignorancia.

Scriven aconseja a los evaluadores que realicen evaluaciones libres de metas, también
llamadas evaluaciones con referencia a necesidades o a lo que el programa pretende
resolver. El comienzo de estas evaluaciones es a ciegas. El evaluador, observador
trabajará con empeño para encontrar los efectos del programa. La solución es llegar a
acuerdos que garanticen la independencia del evaluador, la transparencia de los
resultados, y el derecho a la información de todos los implicados en el programa.

6. Evaluación formativa y sumativa y su aplicación en la evaluación de programas.

La evaluación formativa y sumativa son términos relacionados con dos modos de

sensibilidad, o respuesta, a las necesidades de los programas educativos y sociales.

Evaluación formativa: se realiza para proporcionar una información a las personas que
intentan mejorar algo. Esta evaluación es fundamental para la mejora continua de lo que
se está evaluando (programa, organización, procesos de enseñanza-aprendizaje…), debe
hacerse al servicio de una evaluación sumativa.

Evaluación sumativa: proporciona información para los encargados de tomar decisiones,

preocupados por crear, terminar o cambiar algo. La evaluación sumativa debe ser
holística y global, además, deberá contribuir a la mejora del programa en general y
aportar beneficios para la evaluación de otros programas similares, esta evaluación se
refuerza con la evaluación formativa,

3
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

7. Concepto de meta-evaluación y su finalidad formativa y sumativa.

La meta-evaluación es un término acuñado por Scriven. Se puede definir con una

investigación sistemática encaminada a emitir un juicio valorativo acerca de la calidad y
los méritos de una evaluación.

Para realizar una meta-evaluación, Scriven propone que, el meta-evaluador puede

servirse tanto de las listas específicamente elaboradas para la realización de una meta-
evaluación, como los estándares consensuados por la comunidad científica. Escriven es
el máximo promotor de las listas de control de la evaluación y de las listas de control de
la meta-evaluación.

La meta-evaluación debe aplicarse a la evaluación una vez que se ha realizado (M-E

sumativa). Y estas mismas normas deben orientar la planificación y realización de la
evaluación (M-E formativa), pudiendo ayudar al diseño, planificación y realización de
los programas.

TEMA 3. EL MODELO CIPP DE D. STUFFLEBEAM: LA EVALUACION ORIENTADA

A LA TOMA DE DECISIONES PARA LA MEJORA Y EL RENDIMIENTO DE
CUENTAS.

8. Comente los cinco problemas que indicó el Comité PDK que debían ser solucionados
para mejorar la base conceptual de la práctica evaluativa, y valore su actualidad.

1- Necesidad de una definición clara: qué se va a evaluar, con orientaciones

metodológicas para la realización de evaluaciones completas.

2- Orientación a la toma de decisiones; evaluación orientada a la toma de decisiones

e información y orientaciones precisas para ayudar a los que toman decisiones.

3- Perspectivas de valor: elaboración de criterios e instrumentos apropiados para

reconocer y tratar perspectivas de valor sobre los proyectos y los programas, y su
aplicación, y para asignar valor, sobre su calidad y su mérito, a la información
obtenida.

4- Distintos niveles de audiencias y de informes: reconocimiento de la existencia de

diferentes tipos y niveles de audiencias para valorar sus necesidades de información,
planificar la recogida de información y datos y las actividades informativas, y de
acuerdo con ello, elaborar distintos informes atendiendo a las distintas audiencias.

5- Diseño de la investigación: adaptando a las necesidades evaluativas, por las que el

comité consideraba que las planificaciones de investigaciones evaluativas deberían
ser juzgados mediante normas distintas que la mera investigación.

9. El concepto de evaluación de programas de Stufflebeam. Valoración del mismo.

4
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

“La evaluación es el proceso de identificar, obtener y proporcionar información útil y

descriptiva acerca del valor y mérito de las metas, la planificación, la realización y el
impacto de un objeto determinado con el fin de servir de guía para toma de decisiones,
solucionar los problemas de responsabilidad, promover la comprensión de los fenómenos
implicados”.

En el análisis de esta definición es evidente el propósito de la evaluación, el alcance de

la misma, los procedimientos y la utilización de los resultados, está realizada de una
manera sistemática y rigurosa.

10. Haga una tabla de síntesis del modelo CIPP, sobre los cuatro tipos de evaluación, las
decisiones a las que sirve y los instrumentos para la recogida de información que
utiliza.

EVALUACIÓN DECISIONES INSTRUMENTOS

Contexto De planificación:  Las entrevistas
 Reuniones
Determinar la necesidad de elaborar o  Lecturas de informes,
seleccionar un programa educativo, etc.
con una clara definición de sus
propósitos y de sus objetivos, de sus
recursos, para atender las necesidades
detectadas y definidas

Entrada De organización, estructurales,  Los propios programas

informará sobre:  Los recursos necesarios
para su aplicación
los recursos disponibles y los que  Los presupuestos
serían necesarios  La elección de un plan
concreto
Las diferentes estrategias alternativas  Los procedimientos para
para mejorar la aplicación del llevarla a la acción
programa

Los planes y propuestas que aportan

mayor potencial para el diseño de la
planificación
Proceso De implementación, informar sobre:  Reuniones de trabajo
con el personal
Cómo se está realizando el plan implicado en el
previsto programa.
 Desarrollo y puesta en
marcha de materiales.

5
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Cuáles serán las revisiones necesarias  Recomendaciones a los

que habrá que realizar para mejorar la estudiantes.
aplicación del programa  Revisión de la
planificación del
trabajo.
 Valoración de las
habilidades
desarrolladas en los
estudiantes en relación
con el programa.
 Observación y
seguimiento de la
enseñanza en el aula.
 Revisión de la
planificación y
realización de trabajos
en casa por los alumnos.
 Utilización de test
diagnósticos.
Producto De reciclaje, aportará información  Informe sobre los
sobre: resultados de la
evaluación (puede
Los resultados obtenidos realizarse sobre las
diferentes etapas),
Cómo han sido reducidas las recoger y analizar
necesidades de intensidad, adecuación juicios, valoraciones
y calidad sobre el éxito del
programa.
Orientará sobre qué se debe hacer con
el programa después de su aplicación

11. Conceptos del mérito, el valor y el significado en la evaluación de programas, y su

relación entre ellos.

Mérito: es una serie de factores o características que apuntan directamente hacia la

calidad del desempeño de un puesto de trabajo o de un programa educativo.

Valor: Cualidad que se confiere a las cosas, hechos o personas pudiendo tener una
estimación positiva o negativa. Se puede aplicar tanto a una acción, una idea, una palabra
o un programa formativo.

El criterio de la evaluación debe tener en cuenta estos dos aspectos:

Su Valor: es un aspecto que responde a las necesidades detectadas.

6
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Su Mérito: que responde a la calidad con la que son resueltas las necesidades detectadas.

El criterio de evaluación sirve para mejorar el proceso evaluador, no como proceso

sancionador calificativo. Ayuda al cliente a juzgar y/o perfeccionar el valor y el mérito
de algún objeto.

TEMA 4. EL MODELO DE EVALUACION DE PROGRAMAS EDUCATIVOS DE

RAMÓN PÉREZ JUSTE.

12. Concepto de evaluación de programas de Pérez Juste.

Para Pérez Juste, el concepto de evaluación de programas “…es una actividad pedagógica
orientada a la mejora de los programas, del educando y del educador, de una manera
directa e indirectamente también actúa en la mejora de variables organizativas y técnicas
y medioambientales, sobre los programas mismos” (1992:1).

La evaluación se fundamenta en su carácter integral, integrado e integrador.

La evaluación de programas es un proceso sistemático que está diseñado de forma

intencional de tal modo que la de recogida de información sea rigurosa, es decir, válida,
valiosa y fiable, orientada a valorar la calidad y los logros de un programa que sirve como
base a la toma de decisiones de mejora posteriores, tanto del programa como del personal
implicado, además, de modo indirecto, incluye el cuerpo social en el que se contextualiza.

Es un medio al servicio de los objetivos educativos debe contribuir en sus logros, también
actúa en la mejora de variables organizativas y técnicas y medioambientales de los
programas mismos.

13. Haga una tabla de síntesis del modelo de Pérez Juste, sobre los cuatro momentos de
evaluación, las decisiones a las que sirve y los instrumentos para la recogida de
información que utiliza.

MOMENTOS DECISIONES INSTRUMENTOS

Inicial: Puesta en marcha del  Análisis crítico del

El programa en sí mismo
programa, minimizando contenido y contraste:
riesgos Entrevistas
Observación de los
Poder excluirlo o retirarlo comportamientos y
si fracasa Los documentos de los
centros
 Juicios de expertos

7
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Procesual: Facilitar la toma de  Información y

El programa en su desarrollo
decisiones colaboración del
Recopilar información profesorado
 Integración efectiva del
programa en el
proyecto educativo

Final: Comprobar la eficacia del  Diseños y técnicas

El programa en sus programa, maximizando la clásicos utilizados en la
resultados objetivación de los propios investigación evaluativa
juicios

Institucionalización de la La evaluación del  Autoevaluación

evaluación programa debe estar siguiendo el ciclo o
integrada dentro del mismo rueda de Derming
programa

14. Los criterios y las referencias en la evaluación de programas.

Hay dos criterios fundamentales que señala Pérez Juste, para la evaluación de la
implementación de los programas:

 La conformidad con la planificación, mediante:

a) La constatación de la existencia de desfases y desajustes.

b) La comprobación de resultados parciales.
c) La observación de la aparición de efectos no planeados.
d) La incardinación efectiva en el Proyecto educativo del centro.

 La satisfacción del personal, constatada a través de entrevistas a las personas y a los

grupos, para conocer su visión del Programa.
15. Definición de los criterios de adecuación o pertinencia, eficacia, eficiencia y satisfacción
en relación con los programas educativos y su evaluación.

Criterio de adecuación o pertinencia: es un criterio de calidad, se utiliza en el primer

momento de la evaluación del programa.
 Al contexto: supone consideraciones tanto físicas como psicológicas y sociológicas,
en respuesta a necesidades sentidas y a las carencias.
 A la situación de partida: el programa debe entenderse como factible, realizable,
adecuado a las personas y s sus necesidades y a la situación, viable y realista. Aporta
priorización y viabilidad.

8
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Criterio de eficacia: se utiliza en el proceso de implantación del programa. (eficacia

parcial) y en la evaluación de los resultados. El objetivo de la evaluación de los logros de
un programa es comprobar la eficacia del mismo, el grado de logro de los objetivos
propuestos, ya sea en sentido absoluto o relativo, de cara a mantenerlo, mejorarlo,
cambiarlo o suprimirlo.

Criterio de eficiencia: sirve a la evaluación de los resultados. Proporciona resultados en

relación con los medios disponibles y las circunstancias en que el programa se aplica.

Criterio de satisfacción: se verifica en la evaluación de los resultados. Considera la

satisfacción del personal, que se constata a través de entrevistas a las personas
(destinatarios, agentes…) y a los grupos para conocer su visión del programa.

TEMA 5. PROCEDIMIENTOS PARA LA REALIZACIÓN DE EVALUACIONES DE

PROGRAMAS EDUCATIVOS. Serán utilizados en la parte orientada a la práctica de esta
prueba.

TEMA 6. LAS NORMAS O ESTÁNDARES DE CALIDAD PARA LA EVALUACIÓN

DE PROGRAMAS EDUCATIVOS DEL JOINT COMMITTEE.

16. Haga una valoración de cada uno de los grupos de normas para juzgar la calidad de las
evaluaciones. Mencione dos normas de cada grupo y justifique su elección

 Normas de utilidad: la evaluación debe ser útil, para asegurar que sirve a las
necesidades de información práctica, centrada en cuestiones importantes. Sirven
para guiar la evaluación de modo que sean relevantes, oportunos y de influencia.
Facilitando informes basados en evidencias, sobre aspectos positivos y negativos,
y debe aportar soluciones para la mejora. Está compuesta por siete normas:

 Identificación de los involucrados

 Credibilidad del evaluador: las personas que dirigen la evaluación deben
ser competentes y creíbles para realizar la evaluación, con el fin de que
los resultados de la evaluación logren la máxima credibilidad y
aceptación.
 Alcance de la información y su selección
 Identificación de los valores: las perspectivas, los procedimientos, y el
uso racional para la interpretación de los hallazgos deben ser
cuidadosamente descritos, de modo que las bases para los juicios de valor
estén claros.
 Claridad de los informes
 Informes a tiempo y diseminación
 Impacto de la evaluación

 Normas de viabilidad: sirven para asegurar que la evaluación es realista,

prudente, diplomática, y f. debe ser viable, factible y eficiente.

9
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Los estándares de viabilidad reconocen que las evaluaciones se realizan en

contextos naturales, sus diseños deben ser operativos, y los gastos en material,
personal o tiempo, no deben exceder al requerido por las cuestiones de
evaluación. Tres son las normas de viabilidad:

 Procedimientos prácticos: los procedimientos prácticos de la evaluación,

deben ser prácticos para evitar disrupciones al mínimo, mientras las
necesidades de información se obtienen.
 Viabilidad política
 Costo/Efectividad: la evaluación debe ser eficiente y producir
información de valor suficiente, de modo que los recursos para su
realización puedan ser justificados.

 Normas de adecuación: una evaluación debe asegurar que es conducida de un

modo legal y éticamente, basada en compromisos explícitos, que aseguren la
necesaria cooperación, la protección de los grupos implicados, y la honestidad de
los resultados. Deben asegurar que las normas de honradez, o adecuación,
aseguren que una evaluación será dirigida legal y éticamente y beneficie al
bienestar de aquellos involucrados en la evaluación, así como las de los afectados
por sus resultados. Hay ocho normas de adecuación u honradez:

 Orientación de servicio
 Acuerdos formales
 Derechos humanos
 Interacciones humanas: los evaluadores deben respetar la dignidad
humana y los valores en sus interacciones con otras personas asociadas
con la evaluación para que los participantes no sean amenazados o
dañados.
 Valoración completa y justa
 Revelación de los hallazgos
 Conflicto de intereses: los conflictos de intereses deben ser tratados
abierta y honestamente, de modo que no comprometa los procesos y
resultados de la evaluación.
 Responsabilidad fiscal

 Normas de exactitud: la evaluación debe ser exacta, para asegurar que revela y
comunica la información encontrada, describe con claridad el objeto de
evaluación y en su contexto, revela virtudes y defectos del plan de evaluación, de
los procedimientos y de las conclusiones (meta-evaluación) y proporciona
conclusiones válida y fidedignas. Las conclusiones y los juicios deben ser
coherentes con los datos. Revelan el valor o mérito del programa evaluado. Las
normas de exactitud son doce:

 Documentación del programa: el programa que va a ser evaluado debe

ser descrito y documentado claramente y con exactitud, para que el
programa esté claramente identificado.

10
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

 Análisis del contexto

 Descripción de los propósitos y procedimientos
 Fuentes de información defendibles
 Información válida: los procedimientos de recogida de información
deben escogerse o deben desarrollarse y después aplicarse, de modo que
aseguren que la información a la que se llegue es fiable para el uso
pretendido.
 Información fiable información sistemática
 El análisis de la información cuantitativa
 El análisis de la información cualitativa
 Justificación de las conclusiones
 Informe imparcial
 Meta-evaluación

SUPUESTO PRÁCTICO. REALIZACIÓN DE LA EVALUACION DE UN PROGRAMA

EDUCATIVO.

Póngase en la situación de que en su centro educativo se está aplicando un programa para la

mejora del aprendizaje del inglés de los alumnos del primer curso de Educación Secundaria
Obligatoria.
Como persona con la debida formación, la Dirección del centro le ha encargado la evaluación del
nuevo programa, con especial incidencia en de la eficacia del programa.
Sobre tal base se le pide:

a) Precise los objetivos que se plantea para tal evaluación

b) Elija un modelo o propuesta evaluativa y justifíquela ante la dirección y el claustro de
profesores.
c) Decida la metodología a utilizar, en particular, en relación con:

i. Contenidos o aspectos fundamentales sobre los que versará la evaluación.

ii. Fuentes productoras de datos.
iii. Técnicas adecuadas para la recogida.
iv. Organización y tratamiento de los datos.
v. Utilización de la información.
d) Emita una valoración sobre las posibilidades y limitaciones de este tipo de evaluación.

Introducción

El siguiente trabajo consiste en el desarrollo de un proceso de evaluación de un programa

educativo que pretende introducir mejoras en la adquisición del aprendizaje del inglés de los
alumnos de primero de Educación Secundaria Obligatoria (ESO).

11
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Un programa es un documento técnico, elaborado por el profesorado, en el que quedan

reflejados los planteamientos docentes y sus propias intenciones y metas educativas. Debe ser
un plan sistemático de intervención, específica e intencionalmente elaborado, sirve a las metas
valiosas.

La evaluación de un programa elaborado para atender a unas necesidades, supone la recogida

de información sistemática sobre la calidad del propio programa, en sus fundamentos, estructura
y coherencia interna; sobre su planificación, para su puesta en acción, considerando los recursos
de la organización, incluidos los personales y materiales; sobre el programa en su desarrollo en
la acción; sobre sus resultados inmediatos y sobre su impacto a medio y largo plazo, con el
objetivo de comprobar y valorar el grado y calidad con el que el programa ha sido elaborado,
planificado, implementado, y los resultados conseguidos, de acuerdo con las metas pretendidas
y si ha logrado unos valores.

En la actualidad, el aprendizaje de las lenguas extranjeras ha mejorado, siendo el aprendizaje de

la lengua inglesa la preferente en nuestro país. Es muy importante a la hora de conseguir un
trabajo tener competencia lingüística en la lengua inglesa, pues suele ser una de las condiciones
básicas que exigen los empleadores. A pesar de ser una competencia necesaria, aún queda
mucho por investigar, pues los métodos e instrumentos utilizados en los centros de enseñanza
no terminan de ser lo suficientemente eficaces y, sobre todo, motivadores para los alumnos y
profesores.

Desde el Ministerio de Educación se hace hincapié en la necesidad de incorporar el Programa

Integral de Aprendizaje de lenguas extranjeras (2010-2020) en el ámbito educativo que debe
ser desarrollado desde las Administraciones. Es un proyecto enfocado a todas las etapas
educativas, el profesorado, los centros educativos, etc., con el que se pretende mejorar el
conocimiento de las lenguas extranjeras en la población española. Las acciones que proponen
para los alumnos consisten en Programas de acompañamiento, Inmersión lingüística en Colonias
vacacionales o en el periodo escolar, estancias en el extranjero, etc.

Desde las instituciones educativas se ha dado respuesta proponiendo programas innovadores

que faciliten la adquisición de la competencia lingüística de la lengua inglesa. En el centro
educativo que pretendemos revisar, en concreto en el primer curso de Educación Secundaria
Obligatoria, se está llevando a cabo un programa para la mejora del aprendizaje del inglés, sobre
el cual versará nuestro trabajo, centraremos una especial atención sobre la eficacia del programa.

El aprendizaje del inglés requiere cuatro habilidades: escuchar, leer, hablar y escribir. El programa
que vamos a evaluar está especializado en el perfeccionamiento del lenguaje hablado,
potenciado desde la visión y escucha de una serie de vídeos en los que los personajes
representan a través de cortas secuencias, situaciones habituales entre jóvenes, en escenarios
como el instituto con los compañeros, el parque con los amigos, en casa con la familia, etc. con
ello se pretende que los alumnos vean situaciones reales con las que se pueden encontrar y
puedan intervenir sin miedo en los diálogos.

Para Harmer (2011), la capacidad de hablar con fluidez presupone no sólo el conocimiento de las
características del lenguaje, sino también la capacidad para procesar información y lenguaje “en
el acto”. Entre los elementos necesarios para la producción oral, el autor afirma que los hablantes
eficaces de inglés necesitan ser, no solamente capaces de producir fonemas individualmente,
sino además usarlos con fluidez, es por eso que se debe involucrar al estudiantado en actividades
que ayuden a mejorar el hablar.

12
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

En el caso de los alumnos de primer curso de ESO, el aprendizaje visual y oral del inglés será de
vital importancia, pues les permitirá acceder a información útil a través de Internet (vídeos
explicativos, música en inglés, películas), en el cine acudiendo a la emisión de películas en
versión original, posibilitando un aprendizaje más ameno y motivador, el cual les proporcionará
un manejo de la lengua verbal más profundo y eficaz.

El programa es un proyecto piloto aplicado durante un año a la clase A del primer curso de ESO,
pretendemos evaluar el programa, el seguimiento que se ha realizado por los implicados en su
desarrollo y el alcance que ha tenido durante este corto periodo de implantación. Utilizaremos los
criterios fundamentales de la evaluación de programas, para valorar los resultados, el de
funcionalidad, el de eficiencia y el de eficacia.

Por último, después de efectuar el proceso de evaluación, revisaremos las normas de Join
Committe on standards for evaluation, para asegurar que la evaluación ha sido viable, útil y
realizada de manera honrada y precisa, y procederemos a la meta-evaluación, la evaluación de
la evaluación, revisando las preguntas de utilidad de la evaluación, si la hemos realizado
rigurosamente, si hemos utilizado los criterios de calidad en coherencia con las metas, etc.

1. Objetivos que se plantean en la evaluación:

 Valorar el grado de satisfacción que sienten los alumnos con el programa

 Valorar la eficacia del programa en la mejora del aprendizaje de la lengua inglesa

2. Modelo evaluativo

Hemos elegido como guía el modelo lógico, pues su planteamiento de la evaluación que
es uno de los más apropiados para valorar la mejora del aprendizaje, en nuestro caso del
inglés.

El modelo lógico para la elaboración y la evaluación de los programas, ofrece un marco

teórico y de organización para el desarrollo y comprensión de los programas y de sus
objetivos, de su planificación y de su realización, junto con su evaluación para la
comprobación de sus resultados y logros. Un modelo lógico es una forma visual y
sistemática de presentar una relación entre los recursos que tiene para operar el
programa, las actividades planeadas y los cambios o resultados que se pretende lograr.

Los modelos lógicos se guían por hipótesis que señalan la dirección del cambio que se
pretende y, de esta manera asegurar y comprobar qué factores pueden incidir en él. La
propuesta se desarrolla de este modo:

• ‘Si los objetivos del programa son realistas y plausibles de conseguir, entonces se
conseguirán’.

• ‘Si se cuenta con los recursos necesarios para la aplicación del programa, entonces será
más factible que se aplique del modo adecuado para conseguir los objetivos
pretendidos’.

13
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

• ‘Si los procesos se realizan de modo que alcancen los objetivos pretendidos en toda
su extensión, entonces se asegurará la consecución de los mismos’.

El modelo lógico para el diseño y evaluación de programas

1.- Programa: Aprendizaje de la lengua inglesa visual y auditiva para 1º de ESO

2.- Medios:

Recursos humanos: el profesorado de la asignatura de inglés, los propios

alumnos que representarán los vídeos emitidos.

Recursos materiales: pantallas con reproducción visual que emitirán videos

cortos representativos de situaciones habituales de la vida cotidiana.

3.- Los procesos: se especificarán las estrategias planificadas que estarán

reflejadas en las actividades que se realizarán en las sesiones propuestas a lo
largo de todo el curso escolar, quiénes las llevarán a cabo, qué días de las
semana y en qué horario, lugar de realización.

4.- Los resultados: nos aclararán si el proyecto está siendo adecuado para la
adquisición de conocimientos, habilidades, actitudes y competencias fijadas,
a través de las actividades propuestas.

5.- Las metas: se están logrando las metas específicas, es decir, las metas que
se han propuesto a corto plazo, a esta pregunta responderán los resultados
obtenidos, si el resultado es afirmativo, dará luz a las metas a largo plazo.

6.- El impacto: el logro de las metas, permitirá que los participantes se beneficien,
además de la organización que podrá implantar el programa en el resto de
cursos, incluso la comunidad será beneficiará si el resultado eficaz.

3. Metodología

 Contenidos o aspectos fundamentales sobre los que versará la evaluación.

La emisión de vídeos con la posterior representación de los alumnos, permite que

éstos pierdan el miedo a la hora de comunicarse (autoconfianza) en la lengua inglesa,
participan de su propio aprendizaje (autonomía) y hacen equipo con el resto de
compañeros (autoorganización) pues debaten sobre quienes formarán el equipo que
representará una escena, produciéndose un aprendizaje integral e integrado, además
de favorecer las esperadas valoraciones positivas que se han depositado en el
proyecto de aprendizaje del idioma.

 Fuentes productoras de datos.

14
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

Cuando investigamos debemos recurrir a la información para determinar si el

resultado propuesto por el programa está dando sus frutos. Podremos tener acceso
a ésta a través de los propios alumnos, profesores, familia, etc. (fuentes primarias)
y a través de los datos que nos proporcionan los documentos oficiales, en este caso
el Programa educativo que estamos evaluando (fuentes secundarias)

 Técnicas adecuadas para la recogida.

Recopilaremos la información a través de la observación, las entrevistas personales,

los cuestionarios, etc. que nos permitirán sacar conclusiones, para así poder hacer un
juicio valorativo sobre su pertinencia, la calidad, su efectividad, su eficacia y el grado
de satisfacción logrados.

Para recopilar información a través de las fuentes de datos primarios utilizaremos la

observación directa en el aula, la entrevista personal para los alumnos, familia y
profesores, el cuestionario para alumnos.

Los datos secundarios los obtendremos a través del propio programa, que el director
nos presta para su revisión, así contaremos con información aclaratoria de entrada.

 Organización y tratamiento de los datos.

Una vez recopilados todos los datos obtenidos, deberemos seleccionar los realmente
útiles, verificaremos que son suficientes y válidos para nuestro cometido, así,
facilitaremos la aplicación de su tratamiento y posterior análisis.

 Utilización de la información.

Una vez preparados los datos valoraremos si hemos logrado los objetivos y las metas
pretendidas, si los resultados ofrecen luces o sombras. Si los resultados son
convincentes, coherentes y adecuados para resolver nuestras dudas sobre la
viabilidad del programa y las actividades analizadas.

Tenemos en cuenta que los resultados de la evaluación han de ser comunicados a

todos los implicados en el proceso, a las distintas audiencias, pues deberán tomarse
decisiones adecuadas y sin demoras, sobre la conveniencia o no de seguir utilizando
el programa de aprendizaje, si requiere de alguna mejora, o por el contrario es
necesario dejar de usarlo.

Por lo tanto, deberemos elaborar un informe con los resultados, pero además,
deberán incluirse en éste las propuestas de cambio y mejora. El evaluador, debe
publicar dichos informes para que puedan ser revisados por otros evaluadores, en
foros, etc.

La información la podremos elaborar a modo de descripción (cualitativa), añadiendo

los datos numéricos obtenidos a través de baremos de porcentajes, cuadros,
representaciones visuales, en las que pueda verse la evolución de la evaluación,
formativa y sumativa o final.

15
Evaluación de Programas. Pedagogía. UNED. Prueba de Evaluación Continua 2016/ 2017

4. Valoración

Este modelo de evaluación ofrece posibilidades o ventajas, en nuestro estudio evaluativo

ha resultado suficiente, aunque también puede tener limitaciones, pues a pesar de que
es un modelo muy completo, y por este motivo lo hemos elegido, se podrían haber
utilizado otros que hubieran aportado otro tipo de datos. Es posible que como en todas
las disciplinas que manejan información y resultados, se puedan usar diferentes modelos
de forma complementaria, pues los resultados de la evaluación podrían ser comparados,
ofreciendo datos más exactos.

Valoración personal del trabajo obligatorio

La realización de este trabajo me ha permitido valorar la importancia que tiene la puesta

en práctica de los conocimientos que vamos adquiriendo a través del estudio de la
asignatura, tengo claro que aún me quedan muchas cosas que matizar, quizás hubiera
necesitado dedicar un poco más de tiempo en el trabajo, pero espero realizar un examen
a la altura de la materia, pues deseo dedicarme a la orientación educativa y esta
asignatura es un material muy importante para mis direcciones futuras

Bibliografía

Martínez Mediano, Catalina (2013) Evaluación de programas: modelos y procedimientos Madrid,

Editorial UNED

Webgrafía

Revista de Investigación Educativa (RIE), volumen 18, número 2 (2000). Evaluación de

programas educativos, Pérez Juste, Ramón (Coordinador).

http://revistas.um.es/rie/article/viewFile/109031/103701

Ministerio de Educación de España, Conferencia de Educación 23 de marzo de 2011. Programa

Integral de Aprendizaje de las Lenguas extranjeras.

https://www.campuseducacion.com/files/programa-integral-aprendizaje-lenguas-ce-23-03-11.pdf

Revista de Educación Carvajal-Portuguez, volumen 37, número 2 (2013). Enseñanza del inglés
en secundaria: una propuesta innovadora, Carvajal-Portuguez, Zayra Elisa.

http://www.revistas.ucr.ac.cr/index.php/educacion/article/view/12927/12254

Debe fijarse bien en el enunciado y responder de modo concreto y preciso a todo lo que
se le pregunta, evitando dar respuestas en exceso genéricas.

EL NUMERO DE HOJAS DE ESTA PRUEBA ES DE 18.

16