Documentos de Académico
Documentos de Profesional
Documentos de Cultura
CESU U2 Contenido
CESU U2 Contenido
Evaluación de la sustentabilidad
8º semestre
Clave:
LIC 03144844
Índice
Presentación.................................................................................................................................................................................................... 2
Investigación evaluativa ................................................................................................................................................................................... 3
Modelos de evaluación .................................................................................................................................................................................... 8
Tipos de modelos ............................................................................................................................................................................................ 9
Técnicas para la evaluación de procesos de intervención ............................................................................................................................. 18
Instrumentos para el registro y recolección de la información ........................................................................................................................ 21
Para saber más ............................................................................................................................................................................................. 26
Cierre............................................................................................................................................................................................................. 27
Fuentes de consulta ...................................................................................................................................................................................... 28
Presentación
El panorama de las últimas décadas hace evidente la expansión de programas y proyectos sociales; ante esto, es necesario resaltar la
relevancia de comprender las implicaciones del marco metodológico en procesos de evaluación, ya que, como señalan Cortés e Iglesias,
“la metodología es la ciencia que nos enseña a dirigir determinado proceso de manera eficiente y eficaz para alcanzar los resultados
deseados y tiene como objetivo darnos la estrategia a seguir en el proceso” (2004), por lo tanto, la metodología en los procesos de
evaluación resulta esencial porque brinda pautas de forma lógica y estructurada.
En la presente unidad, definirás tu objeto de evaluación como punto de partida para orientar el diseño de tu investigación evaluativa, la cual
corresponde a un proceso sistemático para obtener información clave que permita tomar decisiones de manera eficiente y oportuna; sin
embargo, también se reconoce la necesidad de la validez para ser obtenida dicha información.
Por ello, se analizarán y compararán modelos de evaluación propuestos como representativos, los cuales permiten definir el conjunto de
procedimientos necesarios para evaluar el proyecto; lo anterior desde lo técnico, metodológico y operativo; para ello, se debe valorar cuál
de los modelos de evaluación se enfoca al objeto de evaluación, las características del proyecto, los tiempos y recursos disponibles.
Finalmente, identificarás las características y diferencias de aplicación de las técnicas de evaluación, las cuales ayudan a definir cómo se
evaluará considerando el tipo de información necesaria y las fuentes para obtener los datos necesarios, además de reconocer los
instrumentos para el registro y recolección de información como los medios que permiten definir qué se va a evaluar, para lo cual resulta
necesario su adecuado diseño, para que se pueda registrar la información que será base del proceso para satisfacer propiamente la
finalidad del proceso de investigación evaluativa, que será implementado en la siguiente unidad.
Estos conceptos, modelos, técnicas e instrumentos de evaluación, se revisarán en esta unidad. Se presenta a continuación el esquema
general de los contenidos que la integran.
Investigación evaluativa
Modelos de evaluación
Tipos de modelos
Unidad 2.
Metodología de la
evaluación
Caracteríticas de los modelos
Investigación evaluativa
La notable expansión de los programas y proyectos sociales ha hecho constante el plantearse hasta qué punto se logra el propósito
establecido y qué adecuaciones se requieren para mejorar el funcionamiento y resultados. Por ello, la investigación evaluativa, en las
ciencias sociales y económicas, tiene de un innegable potencial en la constante adaptación a las necesidades de nuestro contexto
cambiante, lo cual permite, en su análisis y construcción, consolidarse desde sus conceptos y procesos a través de los múltiples productos
y aportes metodológicos publicados.
Ante esto, la investigación evaluativa integra múltiples conocimientos en las diversas actividades sociales y en sus ámbitos de implicación,
lo cual resulta de suma importancia para identificar el grado de eficiencia y los requerimientos para reformular a partir de la valoración de
los resultados y los esfuerzos realizados.
Retomando a Picado (1990), podemos definir a la investigación evaluativa de programas, como “el esfuerzo por analizar sistemáticamente
la información sobre las actividades, características y resultados de los programas sociales”, por lo tanto, surge la necesidad de resaltar la
diferenciación entre la investigación científica, cuya finalidad es el conocimiento, comprobación de hipótesis y formulación de teorías, en
contraste con la investigación evaluativa, que se orienta a obtener datos clave que permitan tomar decisiones para mejorar de forma
constante el programa o proyecto de interés.
El propósito fundamental es proporcionar información válida sobre los procesos de operación y resultados obtenidos, tanto a directores del
programa o proyecto como a sus beneficiarios.
Al respecto, se retoma lo que Correa, Puerta y Restrepo (1996) citan de Stufflebean y Shinkfield (1995):
“Los charlatanes y los manipuladores utilizan a menudo la evaluación de una manera inadecuada para lograr
sus objetivos. Puede que recopilen la información rigurosamente, pero no revelan las verdaderas conclusiones,
o lo hacen de modo selectivo, o incluso las falsifican, engañando tanto a la gente como a sí mismos”.
Es así como la investigación evaluativa en programas sociales permite obtener información precisa para determinar el cumplimiento de las
metas en relación con los recursos, resultados y efectos logrados, así como de las causas y factores que afectan en los resultados, por lo
que se orienta a determinar la calidad del proceso. En este sentido, estos mismos autores proponen criterios básicos que debe cumplir este
proceso de investigación.
Esquema 1: Criterios científicos básicos que debe cumplir el proceso de Investigación evaluativa
Entre la
información
y la realidad Minimizar las
que se Los apreciaciones
evalúa. Validez Debe ser resultados subjetivas.
interna, de consistente. deben tener
contenido e coherencia Hechos y datos
instrumentos y entre sí. verificables.
externa.
El proceso de investigación evaluativa, por diversos que puedan ser sus conceptos, se enfoca a la eficiencia, eficacia, efectividad e impacto
de logrado, lo cual permite obtener elementos que brinden la pauta para realizar los ajustes necesarios en el programa o proyecto de
interés. Al respecto, González (2005) dice que la OCDE propone los siguientes criterios básicos de investigación evaluativa:
Viabilidad
Sustentabilidad Pertinencia
del proyecto Dirección y Impacto
(corto, mediano utilidad. Eficacia
Efectos del
y largo plazo).
proyecto a Logro de los Eficiencia
(corto, mediano objetivos.
Logro de los
y largo plazo).
resultados.
Según el INEE (2011), objeto de evaluación “se entiende como aquello que se evalúa”, y su delimitación sin duda es un tema central, ya
que permite a los encargados del programa o proyecto, así como a los encargados del proceso de evaluación, determinar qué modelo de
evaluación, técnicas e instrumentos son las más apropiadas al definir qué evaluar. En este orden de ideas, el objeto a evaluar se desprende
propiamente de las metas y objetivos establecidos. Generalmente los programas y proyectos sociales orientan sus objetos de evaluación
en la “reducción” de situaciones o necesidades en conflicto identificadas en la puesta en práctica de los programas o proyectos a evaluar a
través de la mejora de atención, calidad, resultados o productos. A continuación, se representa de forma gráfica la relación entre el objeto
de evaluación y los parámetros más comúnmente utilizados.
Funcionalidad:
Considera parámetros Eficacia: consecución de Eficiencia: optimización adecuación a las
básicos como: los objetivos. de tiempos y recursos. necesidades y
expectativas.
Modelos de evaluación
Según Marcos Valdés (1999), “los modelos de evaluación de proyectos sociales son por definición, conjuntos de aplicaciones y
procedimientos a partir de los cuales es posible implementar la evaluación de un determinado proyecto”; por ello, retomamos que
corresponden a los diseños que orientan desde lo teórico, metodológico y operativo el proceso que permite la evaluación de programas o
proyectos, para lo cual en dicho proceso se debe cuidar la lógica entre estos elementos.
Ante este panorama, un error constante es considerar que aplicar una técnica o instrumento equivale a un modelo de evaluación; sin
embargo, en un modelo, según lo que se pretenda evaluar, pueden aplicarse varias técnicas e instrumentos, por lo anterior, resulta confusa
la elección del modelo de evaluación más pertinente, para lo cual se debe considerar tener presente la finalidad y beneficios que
proporcionaría; posteriormente, es muy importante considerar el tiempo y el costo de la evaluación.
Por lo tanto, es necesario tener claras las condiciones que encausarán el proceso de evaluación del programa o proyecto, considerando
que no surge de un acto subjetivo, sino que implica un alto significado en la operación del procedimiento de valoración y toma de
decisiones objetiva que requiere considerar dimensiones y elementos básicos entre los componentes del modelo de evaluación a elegir.
Modelo de
Unidad de evaluación Centro, institución, organización y departamento
evaluación
Por lo tanto, es importante tomar en cuenta cada uno los componentes básicos para elegir el modelo de evaluación de acuerdo al programa
o proyecto a evaluar.
Tipos de modelos
Los tipos se clasifican de acuerdo con los fines y el propio procedimiento metodológico que implican, por lo tanto, existen marcadas
diferencias en estas clasificaciones, debido a la necesidad de aplicar procedimientos acordes a las múltiples necesidades de evaluación en
diversos ámbitos y sectores. A continuación, se describirá la clasificación propuesta por Valdés (1999), que considera cuatro tipos de
modelos de evaluación representativos, que son: analíticos, globales, formalizados y semiformalizados.
Se orientan en explicar el funcionamiento de un programa o proyecto en relación con factores de tipo causal, que proporcionen información
numérica confiable, para lo cual consideran fenómenos observables y medibles a través del control experimental, a través de la objetividad
para obtener resultados que se caractericen por ser válidos y confiables a través de un proceso sistemático.
Proporciona explicaciones
Modelos analíticos
del funcionamiento
Mediante un proceso sistemático que resalte la
validez y confiabilidad
En esta clasificación, algunos de los modelos analíticos representativos se describen en el siguiente esquema:
Modelo costo-
En la cuantificación de los costos-beneficios.
beneficio
Modelos analíticos
Modelos globales
Se orientan en la interpretación y comprensión de todo el proceso a partir de un estudio reflexivo, por lo que es un proceso que resulta
dinámico considerando los objetivos que se persiguen.
Modelo CIPP • Se orienta como proceso para obtener y ponderar decisiones alternativas.
• Se orienta hacia la identificación de necesidades, problemas y aspiraciones para replanificar.
Modelos formalizados
Se orientan de forma sistematizada; el programador de la evaluación controla las variables sobre el medio en el cual se sitúa el proyecto.
Por lo que el proceso resulta complejo debido al control de elementos externos durante el procedimiento.
El programador de la
Se orienta mediante un Resulta complejo controlar
evaluación controla las
proceso sistematizado. los elementos externos.
variables del medio.
Elaborado con base en González (2005).
Modelos semiformalizados
Se orientan a describir las tendencias de un proyecto, lo cual sirve de comparación con los comportamientos recurrentes. Por lo tanto, la
evidencia empírica e histórica son elementos básicos para este tipo de evaluación.
Los modelos de evaluación comprenden las aplicaciones y procedimientos que permiten valorar la situación actual para optimizarla,
mejorando la eficiencia y efectividad de los fines propuestos del programa o proyecto de interés. Para ello, es necesario reconocer los
objetivos, fines y recursos de la evaluación a fin de seleccionar el modelo más conveniente.
El concepto de técnica encierra en sí mismo la habilidad, el arte, la pericia, con que somos capaces de proceder o actuar en una
intervención determinada, sirviéndonos para ello de uno o de varios instrumentos, según lo requiera cada situación.
Operativamente, las técnicas se adecuan a la especificidad de los procedimientos acordados y utilizan los instrumentos más idóneos en
cada caso, con la finalidad de recabar la información deseada para evaluar la intervención.
La evaluación final procura determinar, de manera sistemática y objetiva, la relevancia, eficacia, eficiencia e impacto del programa, a la luz
de sus objetivos. Así, la evaluación se extiende más allá del monitoreo porque reconoce que el plan de acción constituye una hipótesis con
respecto al camino que nos puede conducir al logro de los objetivos. De hecho, la evaluación consiste en una prueba de esa hipótesis, una
verificación de que dicho camino efectivamente esté conduciendo a las mejoras en las condiciones de vida que se buscaba promover
(Mokate, 2003). En este sentido, podemos retomar la siguiente clasificación de técnicas de evaluación.
Un instrumento es una herramienta específica de la que se sirve una técnica para recoger datos de forma sistematizada y objetiva. Es el
recurso imprescindible con el que podemos realizar, de forma más operativa, la práctica de la acción evaluadora.
La encuesta, por ejemplo, es una técnica que busca información mediante la formulación de cuestiones sobre numerosos aspectos
(preferencias, hábitos, creencias). La técnica de la encuesta puede utilizar distintos instrumentos, como la entrevista o el cuestionario. Son
dos herramientas diferentes para llevar a cabo una recogida de información. Los instrumentos deben poseer la suficiente validez, fiabilidad
y practicidad para que puedan proporcionar información evaluativa de calidad. Algunos ejemplos de las técnicas descritas se presentan en
el siguiente esquema.
Técnicas cuantitativas
• Encuesta
• Medición directa
• Censo
• Análisis económico- financiero
Técnicas cualitativas
• Observación estructurada
• Entrevista estructurada o semiestructurada
• Grupos de discusión
• Análisis documental
Técnicas participativas
Como se ha revisado, existen técnicas y procedimientos de evaluación múltiples, por lo que es importante tener conocimiento suficiente de
estos para elegir el que mejor se ajuste a cada ocasión.
Un profesional ético y responsable, al evaluar, sabe usar la estrategia procedimental más adecuada en cada caso, y procura basar sus
valoraciones en el uso combinado de varias técnicas. No hay técnicas que sean en sí mismas buenas o malas, sólo pueden estar bien o
mal empleadas en cada proceso evaluativo concreto.
Es necesario resaltar que en la práctica de evaluaciones de programas y proyectos sociales, podemos no limitarnos a un solo tipo de
técnicas para proporcionar mayor riqueza y fiabilidad, mediante lo que se denomina triangulación metodológica.
La elección y diseño de instrumentos tiene que ser acorde con el modelo de evaluación seleccionado, así como con el tipo de técnica, ya
que en este sentido será necesario el diseño de instrumentos capaces de registrar y recolectar aportaciones, datos numéricos o resultados
de interacciones entre el evaluador y la comunidad.
Por ello, el proceso de elección de instrumentos debe ser cuidadoso, orientando la visión de la eficiencia de información, no en la mayor
cantidad de datos, ya que no es una garantía de calidad. Por lo tanto, se deben seleccionar las que resultan más adecuadas, considerando
el presupuesto económico, los tiempos disponibles y el tipo de información que se pretende obtener. Mille (2004) señala algunos aspectos
importantes para la selección del tipo de registro y recolección de información.
Considerareleltipo
Considerar tipode
de
Comprobar la validez
Comprobar
Tener
Tener en en claro
claro el el informaciónque
información quesese Cuando resultan
y utilidad
y utilidad de los
de los
objetivo
objetivo de lade la requierey yeleltipo
requiere tipode
de complejos, se deben
instrumentos,por
instrumentos, porlolo
evaluaciónen
evaluación entodo
todo técnica seleccionada,
técnica seleccionada, elaborar manuales de
queque se sugieren
se sugieren
momento.
momento. asícomo
así comolas
lasfuentes
fuentes instrucciones.
pruebas
pruebas piloto.
piloto.
deesa
de esainformación.
información.
A continuación, se presentan algunos instrumentos para recogida y recolección de información comúnmente utilizados.
Matriz de valoración
Lista de cotejo
Guión de entrevista
Lista de verificación
Cuestionario
Guía de observación
Diario de campo
Las técnicas e instrumentos de evaluación utilizados pueden ser muy variados, y tienen que permitir la obtención de la información
necesaria para conocer en todo momento el diseño, elaboración, ejecución y resultados de proyectos.
Finalmente, en el siguiente esquema, se realiza un resumen de lo revisado en esta unidad. Se presenta un panorama general que puede
servir para orientar tu decisión de las técnicas e instrumentos a aplicar en tu proyecto de intervención comunitaria.
Autoevaluación.
Evidencia de aprendizaje. Bases de la investigación evaluativa.
Autorreflexión.
A continuación, se presenta un listado de recursos que serán de gran utilidad para complementar los conocimientos adquiridos:
Investigación evaluativa
http://goo.gl/QLeSMn
En este material publicado por Santiago Correa, Antonio Puerta y Bernardo Restrejo (2002), puedes encontrar la descripción e
implicaciones de la investigación evaluativa.
Cierre
El marco metodológico de referencia sobre la investigación evaluativa proporcionado en la presente unidad, permite identificarla como un
proceso sistemático con la finalidad de obtener información precisa para determinar la calidad de los resultados y redefinir los procesos y
elementos necesarios del proyecto; para ello, es necesario establecer claramente el objeto de la evaluación; de esta manera, se define
concretamente lo que se pretende evaluar, lo cual resulta elemento central de orientación durante todo el proceso. Además, se debe elegir
el modelo de evaluación más apropiado para el tipo de evaluación requerida y las características propias del proyecto y del tipo de
participación del evaluador en dicho proceso.
En la presente unidad, se analizan los componentes metodológicos propios del proceso de investigación evaluativa para definir las técnicas
de evaluación que determinan cómo evaluar, así como los instrumentos para registrar y recolectar información, lo que define con qué se
evaluará y cómo será recolectada esta información.
Lo anterior resulta de gran importancia en tu formación como licenciado en desarrollo comunitario, ya que la fundamentación metodológica
de tus propuestas de evaluación es un proceso central que permite determinar con claridad los procedimientos más apropiados; de lo
contrario, no tendrán un finalidad concreta, sino un diseño confuso e incoherente, lo cual sin duda obstaculiza un desempeño profesional
confiable en las propuestas comunitarias implementadas.
Por ello, la relevancia de la presente unidad como base fundamental de los procesos metodológicos de tu propuesta de investigación
evaluativa.
Fuentes de consulta
Bibliografía Básica
Correa, S., Puerta, A. y Restrepo, B. (1996). Investigación evaluativa. Bogotá: ICFES. Recuperado de http://goo.gl/QLeSMn
Cortés, M. e Iglesias, M. (2004). Generalidades sobre metodología de la investigación. Campeche: Universidad Autónoma del
Carmen. Recuperado de http://goo.gl/qZdqFA
Evaluación de los aprendizajes en el aula. Opiniones y prácticas de docentes de primaria en México (s.f.). Recuperado de
http://goo.gl/nh5NzW
González, L. (2005). La evaluación en la gestión de proyectos y programas de desarrollo. País Vasco: Servicio Central de
Publicaciones del Gobierno Vasco. Recuperado de http://goo.gl/GHqc66
Inee. (2011) ¿Qué evaluar? Los objetos de la evaluación. México INEE. Recuperado de http://goo.gl/7WJF1a
Mille, J. (2004). Manual básico de elaboración y evaluación de proyectos. Coruña: Universidad de Coruña. Recuperado de
https://goo.gl/tdS9qx
Mokate. K. (2003). Convirtiendo el “mosustro” en aliado: la evaluación como herramienta de la gerencia social. Estados Unidos de
América: Banco Interamericano de Desarrollo.
Perea, O. (coord.). (s. f.). Guía de evaluación de programas y proyectos sociales. Recuperado de http://goo.gl/psMhPy
Picado, X. (1990). La evaluación de programas sociales. Recuperado de http://goo.gl/oGfyHV
Valdés, M. (1999). Modelos de evaluación de proyectos sociales. Recuperado de http://goo.gl/zs2QkJ
Sitios electrónicos
RAE. (s. f.). Diccionario de la Real Academia. Recuperado de http://www.rea.es