Documentos de Académico
Documentos de Profesional
Documentos de Cultura
R. Lance Hogan
Eastern Illinois University
1
Diario en línea de Educación y Desarrollo Laboral Volumen II, Número 4 - Otoño 2007
Abstracto
El propósito de este artículo es presentar el desarrollo histórico y las contribuciones importantes
que conducen a la situación actual del campo de la evaluación de programas. La evaluación del
programa se ha definido como “juzgar el valor o mérito de algo o el producto del proceso” (Scriven,
1991, p. 139). Guskey (2000) actualizó esta definición indica que la evaluación es un proceso
sistemático utilizado para determinar el mérito o valor de un programa, programa o estrategia específica
en un contexto específico. El autor describe siete periodos de tiempo significativos en el desarrollo de la
evaluación de programas e identifica cinco criterios de evaluación utilizados actualmente por los
médicos. Este artículo concluye que proporciona al lector con una visión para el futuro de la evaluación
del programa.
Diario en línea de Educación y Desarrollo Laboral Volumen II, Número 4 - Otoño 2007
Introducción
Organización de la toma de decisiones y los interesados quieren asegurarse de que los
programas están logrando su propósito previsto. Ellos están interesados en la evaluación de los efectos
de los programas, haciendo preguntas como “¿Qué cambios se produjeron?” O “¿Estamos satisfechos
con los resultados?” (Francés, Bell, y Zawacki-, 2000). Por lo tanto, la evaluación del programa es
utilizado por las organizaciones para evaluar periódicamente sus procesos, procedimientos, y los
resultados. De acuerdo con Wholey, Hatry, y el recién llegado (2007), el campo de la evaluación de
programas proporciona procesos y herramientas de mano de obra que los educadores y los
desarrolladores pueden aplicar para obtener datos válidos, fiables y creíbles para abordar una serie de
preguntas sobre el desempeño de los programas. La evaluación del programa se define a menudo como
“juzgar el valor o mérito de algo o el producto del proceso” (Scriven, 1991, p. 139). Guskey (2000)
actualizó esta definición indica que la evaluación es un proceso sistemático utilizado para determinar el
mérito o valor de un programa, programa o estrategia específica en un contexto específico. A pesar de
su función esencial, la evaluación de programas puede ser la actividad más ampliamente entendido mal,
evitado y temido por los médicos (Shrock, y Geis, 1999).
Metodología
El investigador utilizó métodos de búsqueda sistemática para recoger una amplia franja de la
bibliografía pertinente. La revisión sintetiza la literatura sobre la evaluación del programa en lo que
respecta a los siete períodos de tiempo significativos en la evolución de la evaluación del programa
identificado por Madaus, STUFFLEBEAM y Kellaghan (2000). Se recogieron los recursos principales
para este estudio de revistas técnicas basadas en documentos impresos, ERIC, y libros con un enfoque
académico. Se utilizaron una variedad de términos de búsqueda, incluyendo la evaluación, la
evaluación de programas y la historia de la evaluación.
Revisión de literatura
El uso formal documentado por primera vez de la evaluación se llevó a cabo en 1792 cuando
William Farish utiliza la marca cuantitativa para evaluar el rendimiento de los estudiantes (Hoskins,
1968). La marca cuantitativa permitió clasificación objetiva de los examinados y el promedio y la
agregación de las puntuaciones. Por otra parte, la marca cuantitativa fue históricamente importante para
el buen término de la evaluación del programa como una disciplina por dos razones:
Durante este período en Gran Bretaña, se reformó la educación a través de la evaluación. Por
ejemplo, la Comisión de Powis recomienda que los estudiantes de rendimiento en la lectura,
ortografía, escritura y aritmética determinaría salarios de los maestros. No era raro que las
evaluaciones anuales sobre los logros de los alumnos (Madaus y Kellaghan, 1982).
El primer método de evaluación formal en los Estados Unidos se produjo en 1815 cuando el
Ejército desarrolló un sistema de políticas para la “uniformidad de la ordenanza de constructores”
(Smith, 1987, p.42). Estas políticas establecen los procesos de producción estandarizados que
fomentaron la conformidad de los materiales, las técnicas de producción, inspección, y las
especificaciones para todos los proveedores de armas a los militares. La primera evaluación de
educación formal en los Estados Unidos tuvo lugar en Boston, Massachusetts en 1845. pruebas
impresas de varios temas se utilizaron para evaluar rendimiento de los estudiantes en el sistema
educativo de Boston. Horacio Mann, Secretario del Consejo Estatal de Educación, quería una
evaluación exhaustiva de rendimiento de los estudiantes para evaluar la calidad de un sistema escolar
grande. De acuerdo con STUFFLEBEAM, Madaus, y Kellaghan (2000),
De 1887 a 1898, un reformador educativo llamado Joseph Rice llevó a cabo una evaluación
similar mediante la realización de un estudio comparativo sobre la instrucción de ortografía a través de
un número de distritos escolares. Estaba preocupado por los métodos de enseñanza de la ortografía,
porque los estudiantes de los Estados Unidos no estaban aprendiendo a deletrear. Rice fue capaz de
determinar que no había relación entre el tiempo dedicado a la ortografía y la competencia. Se informó
de sus hallazgos en el foro en 1897, en un artículo titulado "La futilidad de la ortografía Grind"
(Colwell, 1998). Evaluación de arroz ha sido reconocida como la primera evaluación de los programas
de educación formal en América (Stufflbeam et al., 2000).
Stufflebeam et al.
El modelo está destinado para el uso de los proveedores de servicios, tales como
tableros de políticas, programas y personal del proyecto, directores de una variedad de
servicios, funcionarios de acreditación, superintendentes del distrito escolar, directores
de escuelas, maestros, administradores universitarios, médicos, líderes militares, y
especialistas en evaluación. El modelo está configurado para su uso en las
evaluaciones internas realizadas por las organizaciones, las autoevaluaciones
realizadas por los proveedores de servicios individuales, y las evaluaciones externas
contratadas. (P. 279)
De acuerdo con Worthen et al., (1997), potenciales debilidades del enfoque orientado a la
gestión se pueden producir a partir de los evaluadores que dan parcialidad a la alta dirección, de la
incapacidad de vez en cuando los evaluadores para responder a las preguntas, a partir de los procesos de
evaluación costosos, ya partir de la suposición de que importantes decisiones pueden ser claramente
identificados con antelación.
Experiencia-Oriented Approach
El enfoque de la evaluación orientada a la experiencia-es el enfoque de evaluación más antigua y
más ampliamente utilizado para juzgar a un programa, actividad o institución (Worthen, Sanders, y
Fitzpatrick, 1997). Los evaluadores que utilizan este enfoque se basan en un panel de expertos para
juzgar un programa y hacer recomendaciones basadas en sus percepciones. El proceso de revisión puede
ser formal o informal. Worthen et al. (1997) definieron un sistema de revisión formal, “uno que tiene (a)
la estructura u organización establecida para llevar a cabo revisiones periódicas; (B) las normas
publicadas; (C) un programa de revisión especificado previamente; (D) una combinación de varios
expertos para juzgar el valor general; y (e) un impacto en función del resultado de la evaluación”(p.
121). Cualquier otra evaluación que carece de uno de los cinco componentes se considera que es un
sistema de revisión informal.
A los ojos de los críticos, la limitación general al enfoque de la evaluación orientada
experiencia-es el papel central del juez experto. Los críticos sugieren que el uso de jueces expertos
evaluadores permite hacer juicios que están sesgados personalmente, inherentemente conservadora,
potencialmente incestuosa, y no están basados en los objetivos del programa (Worthen et al., 1997).
Adversario-Oriented Approach
El enfoque de la evaluación orientada adversario utiliza un proceso judicial en el examen de un
programa. Worthen et al., (1997) identificó el foco central de evaluación orientada adversario-es
obtener resultados mediante el examen de puntos de vista opuestos. Los pros y los contras de un tema
son examinadas por dos equipos separados que luego se debaten públicamente para defender sus
posiciones y acordar mutuamente en una posición común. El proceso de evaluación implica una
audiencia, el procesamiento, la defensa, el jurado, cargos y refutaciones. Según Levine (1982), el
enfoque de confrontación funciona con la suposición de que la verdad emerge de un disco, pero justo,
pelea en la que los lados opuestos de apoyo presenta evidencia.
Una ventaja de este enfoque es que se ilumina tanto positivos como negativos puntos de
vista. Además, el enfoque está abierto a la participación de las partes interesadas y decisiones
colocan una mayor garantía en la conclusión de la prueba. Este enfoque de evaluación no se adopta
comúnmente debido a su determinación de culpabilidad. Worthen y otros (1997) declaró: “La
evaluación debe aspirar a mejorar los programas, no determina su culpabilidad o inocencia.” (P. 149)
Participante-Oriented Approach
El enfoque de evaluación orientado a los participantes-enfatiza experiencias de primera mano
con las actividades del programa y hace hincapié en la importancia de los participantes en el proceso.
Según la definición de Royse, Thyer, Padgett, y Logan (2006), de evaluación participativa “centros de
obtener la cooperación de los actores menos poderosos en la evaluación de principio a fin” (p. 93). Las
partes interesadas definen el enfoque de la evaluación y determinar los parámetros de evaluación. El
enfoque orientado al participante permite al evaluador a comprometerse con el actor como socio en la
solución de los problemas.
evaluación de empoderamiento se ha considerado una clasificación secundaria dentro de la
evaluación orientada al participativa (Secreto, Jordan, y Ford, 1999). Strober (2005) describe la
potenciación de evaluación como un tipo de evaluación formativa en la que los participantes en un
proyecto generan metas para un cambio deseado, se desarrollan estrategias para alcanzarlos, y
supervisar su progreso. Fetterman (2001) identificó tres pasos ya que además de la evaluación de la
capacitación: (a) el desarrollo de un propósito unificador; (B) determinar dónde se encuentra el
programa, incluyendo las fortalezas y debilidades; y (c) la planificación para el futuro mediante el
establecimiento de objetivos.
La evaluación orientada participante-(incluyendo potenciación) enfoque no es sin
inconvenientes. Según Worthen et al., (1997), debido a la dependencia de la observación humana y
perspectiva individual hay una tendencia a minimizar la importancia de los datos de instrumentación y
de grupo. Además, los defensores han sido criticados debido a la subjetividad del proceso de evaluación
y posibilidad de c
onflictos que surjan entre los participantes. Por último, los participantes podían manipular la
situación o retirar en los momentos cruciales causando la evaluación a ser negada.
-
Enfoque de Evaluación CIRO
En 1970, se propuso el modelo CIRO para la evaluación de la gestión de la formación (Warr,
Bird, y Rackham, 1970). Este modelo se basa en la evaluación de los cuatro aspectos de la formación:
los contextos, insumos, reacción, y el resultado. Evaluación contexto se centra en factores tales como la
correcta identificación de las necesidades de formación y la fijación de objetivos en relación con la
cultura y el clima de la organización. Evaluación de entrada se refiere al diseño y la prestación de la
actividad de formación. Evaluación reacción se ve en la obtención y uso de información sobre la calidad
de las experiencias cursillistas. La evaluación de resultados se centra en los logros obtenidos de la
actividad y se evalúa en tres niveles: (a) inmediata, (B) intermedio, y (c) evaluación final.
evaluación inmediata intenta medir los cambios en el conocimiento, habilidad o actitud ante un
aprendiz vuelve al trabajo. De acuerdo con Santos y Stuart (2003), “Evaluación intermedia se refiere al
impacto de la formación en el rendimiento en el trabajo y cómo el aprendizaje se transfiere de nuevo en
el lugar de trabajo.” Por último, la evaluación definitiva intenta evaluar el impacto de la formación en el
rendimiento departamental o de la organización en términos de los resultados globales. De acuerdo con
Tennant, Boonkrong, y Roberts (2002), el modelo se centra en CIRO mediciones antes y después de la
formación se ha llevado a cabo. El principal
9
Diario en línea de Educación y Desarrollo Laboral Volumen II, Número 4 - Otoño 2007
fortaleza del modelo CIRO es que se consideran los objetivos (contexto) y el equipo de
entrenamiento (de entrada).
Conclusión
La mayoría de los expertos estarían de acuerdo en que la evaluación de programas tiene una
historia emocionante y dinámico. Debido a su desarrollo durante los últimos 200 años, la evaluación del
programa ha madurado significativamente en un campo de estudio establecido. La tendencia general de
este campo de estudio ha sido la transición de la evaluación sumativa más tradicionales enfoques de
centrarse en los resultados hacia la evaluación formativa (Marshall, Crowe, Oades, Deane, y
Kavanaugh, 2007). A Través De esta tendencia, las universidades han desarrollado de acuerdo con los
cursos y las organizaciones utilizar sus enfoques para entender sus procesos, procedimientos y
resultados.
PERIODOS DE
DESARROLLO DE LA CARACTERÍSTICAS
EVALUACIÓN
Durante este período en Gran Bretaña, se reformó la educación a través de la
evaluación. Por ejemplo, la Comisión de Powis recomienda que los estudiantes de
Periodo de tiempo de
rendimiento en la lectura, ortografía, escritura y aritmética determinaría salarios
1: La era de la
de los maestros. . No era raro que las evaluaciones anuales sobre los logros de los
Reforma (1792-1900
alumnos (Madaus y Kellaghan, 1982).
de)
Período de tiempo 3:
Stufflebeam et al. (2000) concluyeron que la evaluación tyleriano implica
El tyleriano Edad
comparaciones internas de los resultados con los objetivos; ), la obra de Tyler
(1930-1945)
formó la base de las pruebas referidas a criterios.
Los autores indicaron que dentro del dominio cognitivo había varios tipos de
Período de tiempo de resultados de aprendizaje. Objetivos podrían clasificarse de acuerdo con el tipo de
4: La edad de la comportamiento aprendiz descrito en la misma, y que no había una relación
inocencia (1946 a jerárquica entre los diversos tipos de resultados. Por otra parte, indicaron que las
1957) pruebas deben ser diseñados para medir cada tipo de resultado (Reiser, 2001).
Durante la década de 1970, la evaluación surgió como una profesión las universidades
Período de tiempo de comenzaron a reconocer la importancia de la evaluación ofreciendo cursos de
6: La edad de la metodología de evaluación. Entre ellos se encontraban la Universidad de Illinois, la
Profesionalización Universidad de Stanford, la Universidad de Boston, UCLA, Universidad de Minnesota, y
(1973-1983) la Western Michigan University (STUFFLEBEAM et al., 2000)