Documentos de Académico
Documentos de Profesional
Documentos de Cultura
CARE EL Salvador
Ligia Alvarenga
Dirección Nacional CARE El Salvador
Martín Segovia
Coordinador Monitoreo y Evaluación
Oswaldo Fajardo
Consultor Monitoreo y Evaluación
200 Ejemplares
Introducción ………………………………………………………………………. 1
Hablemos de CARE ………………………………………………………………. 2
Rol de CES en El Salvador ………………………………………………………… 3
Fase de Diseño …………………………………………………………………….. 4
La Lógica del Marco Lógico ………………………………………………. 7
Estándares de Proyectos ………………………………………………….. 11
Pasos de Diseño de Proyecto ……………………………………………. 12
Paso 1 Identificación de Proyecto ……………………………………….. 13
Paso 2 Diagnostico/Evaluación de necesidades ………………………… 13
Paso 3 Ambiente operativo ……………………………………………… 13
Paso 4 Análisis de Problemas …………………………………………….. 14
Paso 5 Estrategia para la Intervención …………………………………... 15
Paso 6 Hipótesis del Proyecto …………………………………………… 16
Paso 7 Metas/Objetivos e Indicadores ………………………………….. 19
Paso 8 Productos y actividades ………………………………………….. 22
Paso 9 Plan de Monitoreo & Evaluación ……………………………….. 24
Fase De Ejecución …………………………………………………………………. 25
El sistema de Monitoreo y Evaluación ………………………………….. 35
Fase Monitoreo …………………………………………………………………… 36
Monitoreo …………………………………………………………………. 37
Plan Monitoreo …………………………………………………………… 38
Fases básicas para iniciar actividades de monitoreo ………………....... 41
Fase de Evaluación ………………………………………………………………… 43
Fases Básicas para iniciar las actividades de evaluación ……………….. 48
Fase 1: Analisis de diseño del proyecto …………………………………. 48
Fase 2: Diseño del plan evaluación ……………………………………… 48
Fase 3: Elaboración instrumentos de evaluación ………………………. 48
Fase 4: Ejecución del proceso de evaluación …………………………… 51
Bibliografía …………………………………………………………………………. 55
En esta oportunidad me complace presentarles esta Guía
para el Diseño, Monitoreo y Evaluación de Proyectos de
Desarrollo Humano para el Diseño y Gestión de Iniciativas
Programáticas". El propósito del presente documento es
proporcionar una herramienta de apoyo, mediante esta Guía
Práctica que facilite a todo el personal de programas el
proceso lógico que se debe realizar en todo diseño e
implementación de un sistema de información, monitoreo y
evaluación, permitiendo desarrollar las capacidades para
que pueda aplicar de manera efectiva y consciente, los
lineamientos de CARE El Salvador enmarcados con los
estándares internacionales de CARE en Diseño, Monitoreo
y Evaluación (DM&E).
Ligia Alvarenga
Directora a.i.
CARE El Salvador
Guía para el Diseño, Monitoreo y Evaluación
1
Introducción
Las personas que trabajamos en la industria del desarrollo nos vemos obligados constantemente a
elaborar o revisar propuestas de proyectos para abordar determinada problemática con un grupo
poblacional específico. En esta tarea surgen algunas dudas como las siguientes:
Cuando se busca información para responder estas dudas nos damos cuenta que existe pocas
publicaciones al respecto. También, encontramos que lo único existente, en la mayoría de los casos,
corresponde a documentos elaborados por organizaciones. Esto es porque son las organizaciones
las que diseñan, ejecutan y evalúan proyectos. O por lo menos son las que sienten la necesidad
de tener algo escrito para abordar la situación.
En este sentido la oficina de Care en El Salvador decidió elaborar esta guía para que sea utilizada
por todo el personal del área de programas y especialmente por todas aquellas personas u
organizaciones que luchan por superar la pobreza en El país. Este documento intenta hacer una
simbiosis entre la base teórica existente y la experiencia de más de 10 años de nuestra oficina en
el tema.
Finalmente, quiero agradecer a Oswaldo Fajardo, quien trabajo por más de 10 años en la oficina
de Care en Honduras, su valioso aporte en la construcción de este documento.
Si esta guía le ayuda a resolver tan sólo una duda o inquietud…¡¡¡estaremos satisfechos!!! El esfuerzo
valió la pena.
Martín Segovia
Care El Salvador
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
2
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación 3
a) Democracia y Gobernabilidad.
b) Fortalecer la capacidad de gestión de instancias locales.
c) Incrementar el acceso y calidad de los servicios de salud en los sectores pobres.
d) Incrementar el acceso y calidad de los servicios de educación en los sectores pobres.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
4
FASE DE DISEÑO
Esta fase tiene como propósito proporcionar conceptos conocidos y ampliamente validados en
diferentes ámbitos y sectores, a fin de permitir y facilitar el trabajo práctico en la sistematización
de la información requerida para el diseño de iniciativas programáticas.
Objetivos de la fase:
n Enfatizar sobre los estándares de calidad de CARE que deben cumplir los proyectos
e iniciativas programáticas.
n Fortalecer las capacidades técnicas para preparar un marco lógico aplicando las
herramientas apropiadas.
Competencias a desarrollar
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación 5
Conceptos Generales
La jerarquía del proyecto corresponde a la relación causa-efecto que existe entre las condiciones
específicas en una comunidad y los problemas resultantes.
Los beneficios indirectos son los impactos a los que el proyecto ha atribuido, pero que no son
resultado exclusivo del mismo. Pueden existir otras influencias para el logro de los impactos, tales
como otros proyectos u otras intervenciones.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
6
Existen muchos tipos de proyectos de desarrollo. Algunos proveen apoyo a comunidades rurales
y/o urbanas. Otros ayudan a los hombres, mujeres, adolescentes y niños. Los proyectos pueden
funcionar solos o en colaboración con la comunidad, gobierno o una organización no gubernamental
(ONG). Ellos pueden ser de gran alcance y caros o relativamente modestos en alcance y presupuesto.
A pesar de su diversidad sin embargo, todos los diseños de proyecto tienen la misma estructura y
están basados en una jerarquía similar a la lógica causa-efecto.
Existen otros elementos o factores que pueden afectar los impactos, pueden ser directos o indirectos,
estos son generalmente conocidos como riesgos o supuestos. Los supuestos pueden ser definidos
como las creencias razonables pero no probables mantenidas por el equipo de diseño sobre el medio
en el cual el proyecto se lleva a cabo. Durante el diseño del proyecto, los supuestos son uno de los
elementos más difíciles de enseñar y comprender.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación 7
n Rediseñe la intervención
4. Ingresando los supuestos válidos en el apropiado nivel del diagrama de la hipótesis del proyecto.
5. Verificando que la lógica de intervención se mantiene válida y que no ignora factores importantes.
2. ¿Es importante?
Sí No (no incluir)
El manejar los riesgos permite cierto control al definirse actividades específicas dentro del
proyecto/programa. La identificación de los riesgos da la posibilidad de diseñar planes de contingencia
y mitigación, así como el monitoreo de los mismos.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
8
El proceso de crear un marco lógico comienza con el postulado de que, si conocemos cuál es el
problema o la situación que queremos cambiar, entonces podemos prever una solución o un futuro
mejor (por ejemplo, los objetivos o metas de un proyecto). Luego, el Enfoque del Marco Lógico
(EML) sostiene que, si conocemos nuestros objetivos, podemos entonces identificar un conjunto
de productos del proyecto que lograrán los objetivos. Continuando con este razonamiento, podemos
entonces identificar las actividades y los insumos de los proyectos que son esenciales para generar
los productos necesarios, con miras a lograr los objetivos.
El formato de un marco lógico completo suele tener normalmente una cuadrícula de cuatro columnas
que indican las conexiones entre las intenciones del proyecto ("metas", "objetivos"), las evaluaciones
de resultados ("indicadores"), las formas de comprobar el progreso ("medios de verificación") y los
sucesos o situaciones previstos fuera del control del proyecto que pueden tener una influencia sobre
el mismo ("supuestos").
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
9
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
10
2. Indicadores de Propósito
x Los indicadores a nivel de propósito incluyen los datos de base para medir los cambios.
x Los indicadores de los componentes incluyen datos de base cuando es apropiado.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
11
x Los supuestos reflejan el resultado del análisis de Involucrados (en el documento de proyecto).
x Los supuestos son los suficientemente precisos para permitir hacer el seguimiento de los
mismos (e identificar acciones apropiadas para aumentar la probabilidad de ocurrencia).
x Las fuentes de información (medios de verificación) están bien especificadas para cada
indicador.
x El banco y la agencia ejecutora han definido un sistema de recolección de información para
los indicadores ( en el documento de proyecto)
1. Ser consistente con la Visión y Misión de CARE Internacional, y sus Principios Programáticos.
2. Debe estar claramente relacionado a una estrategia y/o metas programáticas a largo plazo
de la Oficina de País.
3. Asegurar la participación activa y la influencia de las partes interesadas (stakeholders) en
sus procesos de análisis, diseño, implementación, monitoreo y evaluación.
4. Tener un diseño que se base en un análisis holístico de las necesidades y derechos de la
población objetivo y las causas subyacentes de sus condiciones de pobreza e injusticia socia
También debería examinar las oportunidades y riesgos inherentes en las intervenciones
potenciales.
5. Utilizar un marco lógico que explique cómo contribuirá el proyecto con un impacto último
en las vidas de los miembros de una población objetivo definida.
6. Establecer una meta final significativa, pero alcanzable y medible.
7. Ser técnica, ambiental y socialmente apropiado. Las intervenciones deberían basarse en
la mejor práctica actual y en la comprensión del contexto social y en las necesidades,
derechos y responsabilidades de las partes interesadas.
8. Indicar qué tan apropiados son los costos de los proyectos, a la luz de las estrategias
seleccionadas de los proyectos y los productos y resultados esperados.
9. Desarrollar e implementar un plan de monitoreo y evaluación y un sistema basado en el
marco lógico que asegure la recolección de la línea de base, el monitoreo y los datos de
la evaluación final y que anticipe cómo se utilizará la información en la toma de decisiones;
con un presupuesto que incluya los montos adecuados para implementar el plan demonitoreo
y evaluación.
10. Establecer una línea de base para medir el cambio en los indicadores de impacto y efecto,
conduciendo un estudio o encuesta antes de la implementación de las actividades delproyecto.
11. Utilizar indicadores que sean relevantes, medibles, verificables y confiables.
12. Emplear un balance de metodologías de evaluación, asegurar un nivel adecuado de rigor,
y adherirse a los estándares éticos reconocidos.
13. Estar informado por el aprendizaje y contribuir con un aprendizaje progresivo dentro y
fuera de CARE.
Estos estándares se refieren específicamente a los proyectos de CARE (ya sea que se implementen
directamente o a través de socios). Sin embargo, donde existen planes de programas a más largo
plazo, estos estándares también deben aplicarse a ellos.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
12
La siguiente gráfica sugiere los pasos recomendados para el diseño de un proyecto, junto con las
actividades claves requeridas en cada paso.
Plan de
Monitoreo y
Evaluación
Productos y
actividades
Metas e
Indicadores
Hipótesis del
proyecto
Estratégia para la
intervención
Análisis del
problema
Ambiente
operativo
Diagnósticos
Evaluación de
necesidades
Identificación de
Proyecto
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
13
En la primera fase del diseño de proyecto, se identifica el alcance, extensión geográfica, población
meta y problemas generales a ser tratados. Basar estas decisiones en los principios de CARE y en
sus objetivos estratégicos. Tomar en consideración las necesidades locales, los recursos disponibles,
los intereses del gobierno y del donante.
ACCIONES:
Los diagnósticos incluyen muchas herramientas con el propósito de determinar las brechas entre lo
que es y lo que debería ser. Durante la evaluación de necesidades, se identifica los problemas basado
en la información obtenida a través del proceso de recolección de datos a nivel de la comunidad
y de organización. Considerar los problemas desde ambas perspectivas, interna y externa. La brecha
puede existir a nivel de beneficiario (p.ej, la población meta), los proveedores de servicios o de
infraestructura.
ACCIONES:
En este paso, primero se deberá estudiar y describir en detalle el contexto físico, social, económico
e institucional en el cual el proyecto se diseñará. Se deberá proveer suficientes detalles para tomar
decisiones acerca de los problemas y sus causas, además cómo las organizaciones pudieran tratarlos.
Este estudio no es un paso discreto ni finito, continúa durante todo el proceso de diseño.
ACCIONES:
n Delinear la información requerida.
n Revisar los datos secundarios y conducir las entrevistas.
n Recolectar y analizar los datos originales.
El análisis del problema está basado en la lógica de causa y efecto, es fundamental para la planificación,
ya que sirve de orientación para concebir una posible intervención. Se identifica, analiza y organiza
el problema, sus causas y las consecuencias en una jerarquía. Los niveles en la jerarquía corresponden
a condiciones, comportamientos, actitudes, creencias, conocimientos y a factores externos. Existen
varias herramientas que se pueden usar para hacer este análisis. El árbol del problema pudiera ser
el mejor para detectar la causa y efecto. Con este análisis se pretende identificar obstáculos reales,
importantes y prioritarios para los grupos implicados. Resulta valioso este análisis, cuando se efectúa
en forma de reunión o taller en el que participan las partes implicadas (que conocen la problemática)
animado por un facilitador quien domina el método y la dinámica del grupo. Este procedimiento
puede combinarse con otros, como estudios técnicos, económicos y sociales cuyos resultados pueden
añadirse al análisis efectuado por el grupo.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
14
ACCIONES:
n Identificar el(los) problema(s) prioritario(s) y todos los factores relacionados.
n Conduzca un análisis de causa efecto.
n Muestre en el árbol de problema.
Árbol del problema. Otros términos para este método incluyen el Análisis de Árbol, Análisis Causal
y los Diagramas del Problema. El árbol del problema representa un método de sistemas para analizar
la causa y efecto; es extremadamente útil en el diseño del proyecto, es de los más complejos y
poderosos. Da una representación visual de varias secuencias causales que contribuyen al problema.
Si el problema es el tronco del árbol entonces las secuencias causales son las ramas o raíces.
Frecuentemente, consecuencias son también agregadas como ramas o raíces.
En la mayoría de los casos, la secuencia de las causas cae bajo la siguiente jerarquía:
n Las causas directas del problema son condiciones específicas físicas o sociales
n Estas condiciones son causadas por comportamientos humanos o en menor manera por una
falta sistemática;
n El comportamiento humano es primeramente determinado por el conocimiento, actitudes y
creencias de la gente;
n El conocimiento, actitudes y creencias de la gente tienen sus bases en el contexto o el ambiente
en el cual el área meta se encuentre
Menor número de
pasajeros utilizan el Servicio de Autobuses
SAU Urbano
Arbol de Problemas
El servicio del SAU es
inadecuado
Muchos Demoras
pasajeros frecuentes
heridos
Accidentes
frecuentes
Topografía en
mal estado
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
15
Se debe formular el problema central de modo que sea lo suficientemente concreto para facilitar
la búsqueda de soluciones, pero también lo suficientemente amplio que permita contar con una
gama de alternativas de solución, en lugar de una solución única.
Uno de los errores más comunes en la especificación del problema consiste en expresarlo como la
negación o falta de algo. En vez de ello, el problema debe plantearse de tal forma que permita
encontrar diferentes posibilidades de solución.
Como se puede observar, cada componente del árbol de problemas tiene su respectivo correlato
en la columna de jerarquía de objetivos del marco lógico. De este modo, el propósito u objetivo
general del proyecto será aquel que pretende dar solución al problema central identificado en el
árbol de problemas; los objetivos específicos o resultados son los cambios esperados que el proyecto
se propone alcanzar para garantizar el logro del propósito a través del control de las causas que
generan el problema; y, finalmente, el fin u objetivo de desarrollo será aquel al que se pretende
contribuir con la intervención del proyecto, de modo tal que se reviertan los efectos negativos
identificados en el árbol de problemas
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
16
En este paso se construye la hipótesis del proyecto, la cual define qué cambios en los impactos y
efectos pueden esperarse como resultado de las intervenciones propuestas. La formulación de la
hipótesis incluye la identificación de los supuestos y las preguntas claves. Las Hipótesis son respuestas
a la pregunta: “¿Cuáles son los factores externos que la intervención no controla y que dificultan
que la misma tenga efectos duraderos”?
ACCIONES:
n Convertir problema y causa para anticipar los resultados.
n Desarrollar un diagrama “si/entonces” que incluya intervenciones.
n Identificar preguntas claves y los supuestos.
La definición de la hipótesis es un paso pequeño pero crítico en el diseño del proyecto. Es durante
ésta fase que el equipo de diseño cambia de estar predominantemente enfocado en el problema
a enfocarse predominantemente en la solución.
El desarrollo de la hipótesis del proyecto facilita la definición de una meta clara y precisa, es también
un paso en el proceso de diseño que puede causar muchos problemas. Además, es un escenario
donde los supuestos necesitan ser consideradas y nos ayuda a probar la lógica de la jerarquía del
proyecto, incluyendo las intervenciones recomendadas.
n Las actividades se inician una vez que se reúnan las condiciones previas;
n Las actividades realizadas y las hipótesis a este nivel conducen a la realización de resultados;
n Los resultados obtenidos y las hipótesis a este nivel conducen al objetivo especifico;
n El objetivo especifico y las hipótesis a este nivel conducen a la realización de los objetivos
generales.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
17
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
18
Los siguientes pasos básicos deben seguirse en el desarrollo de la hipótesis del proyecto.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
19
ACCIONES:
n Identificar metas “SMART” de impacto y efecto.
n Determinar definiciones operacionales.
n Establecer “benchmarks”.
Definición de Metas/Objetivos.- A pesar que las metas pueden ser simplemente definidas como
especificaciones de lo que los proyectos pretenden alcanzar, existen algunas reglas importantes a
seguir al momento de establecerlas. Finalmente, todos los proyectos deben buscar beneficiar a las
personas de manera significativa; si el proyecto no tiene un beneficio real y significativo, ¿Para qué
molestarse? Asegúrese que las metas del proyecto cumplan con los criterios para un cambio significativo.
Las metas del proyecto deben ser cuidadosamente pensadas y deben estar ligadas directamente con
el análisis del problema. Evite la trampa de tratar de lograr una meta que no se puede alcanzar
debido a cambios en las circunstancia
Meta Impacto – Fin – Objetivo Final o General.- Puede estar definida como el último objetivo o
propósito del proyecto, es escrito para reflejar una mejora en la condición humana la cual se espera
tome lugar en un grupo meta. Presenta las mejoras anticipadas en la vida de los beneficiarios del
proyecto y describe la manera en que usted espera que la estructura del proyecto sea después de
que las intervenciones hayan sido completadas. La lógica del proceso del diseño de proyecto dicta
que una meta de impacto puede solamente ser alcanzada con los logros en todos los niveles de las
metas de efecto (Objetivos intermedios, específicos, propósitos).
Metas de Efecto – Objetivo Intermedio/Especifico – Propósito.- Son definidas como los cambios
pretendidos en condiciones sistemáticas o comportamientos que deben ser alcanzados para lograr
la meta de impacto. Las metas de efecto indican qué prácticas cambiarán, el cómo y cuándo los
cambios previstos tomarán efecto. Entre las típicas metas de efecto se incluyen los sistemas funcionales
de crédito agrícola (sistémico) y la adopción y uso correcto de tecnología apropiada (comportamiento).
Las metas de efecto son verificables hasta cierto punto durante la ejecución del proyecto, existen
puntos finales, no procesos.
Las metas u objetivos deberán ser Específicos, Medibles, Específicos a un Área, Realistas y con Límite
de Tiempo. Definiciones operacionales ayudan a clarificar declaraciones vagas de la meta.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
20
Indicadores
Son simplemente las variables, medidas o criterios usados para verificar si un cambio propuesto
ha ocurrido y por lo tanto, si una meta ha sido alcanzada. Los indicadores por sí solos no representan
valores meta; éste trabajo se logra en la definición de la meta. De la manera en que las metas son
establecidas en cada nivel de la jerarquía del proyecto, indicadores son establecidos para cada uno
de los cinco niveles.
Indicadores de Insumos describen los recursos que van en el proyecto, como el número de horas
de trabajo, la cantidad de dinero gastado o la cantidad de suministros comprados.
Indicadores de Actividades documentan el número de actividades conducidas y/o su grado de
cumplimiento (por ejemplo, - el número de eventos de capacitación ofrecidos, el número de
demostraciones presentadas).
Indicadores de Productos describen a los bienes y servicios producidos por las actividades del
proyecto, como el número de trabajadores capacitados en la comunidad o el número de mujeres
involucradas en grupos femeninos.
Indicadores de Impacto miden el cambio real en las condiciones del problema de base identificado,
incluyendo cambios en la situación de medios de vida, salud, riqueza, etc.
Los indicadores de insumos, actividades y productos son típicamente más fáciles de medir que el
efecto o los indicadores de impacto, aunque ellos ofrecen solo una medida indirecta del éxito del
proyecto. Nosotros asumimos, basados en la lógica del proyecto, que los logros de ciertos productos
eventualmente resultarán, pero no podemos medir ese cambio directamente, ni tampoco demostrarlo.
Estos indicadores también proveen estándares para comparar el progreso de una actividad.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
21
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
22
ACCIONES:
n Definir los productos para cada meta.
n Bosquejar o enfocar las actividades necesarias para producir cada producto/resultado
A continuación están los pasos básicos para desarrollar los productos, actividades e insumos.
1. Defina los productos para cada meta efecto. Decida, como grupo, qué productos serán
necesarios para asegurar los cambios esperados a nivel de efecto. Recuerde que para un
monitoreo y una evaluación exitosa, el enlace entre los productos y las correspondientes
metas efecto deben estar claras. Los indicadores para las metas de productos son
típicamente una simple enumeración de productos. (Ejemplo: Meta Producto: 2000
árboles plantados y sobreviviendo; Indicador: número de árboles plantados y sobreviviendo.)
2. Desarrolle los productos para la administración. Sin relación directa con las metas efecto,
la administración y el apoyo a los productos incluyen documentos como ser los planes
anuales de trabajo o reportes, reuniones para la planificación, retroalimentación o
construcción de equipo, rendimiento del monitoreo y la retroalimentación, también el
conseguir los materiales de oficina. Cada uno de estos productos tiene un grupo de
actividades único que deben también ser definidos e incluidos en el plan de monitoreo
y evaluación del proyecto.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
23
3. Defina las actividades para cada producto. La lista de actividades debe incluir las acciones
a ser tomadas y la secuencia adecuada para la implementación. Además, los límites de
tiempo y las metas cuantificables son componentes importantes de cada actividad de la
meta. De la misma manera que las metas de producto, los indicadores usualmente piden
a los monitores de proyecto documentar el número de actividades exitosamente
implementadas.
4. Defina los insumos. Las metas en este nivel son simplemente las cantidades de los recursos
mínimos requeridos
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
24
Los documentos del proyecto (y sus "marcos lógicos") constituyen un instrumento importante para
la administración del proyecto, pero los mismos no contienen normalmente suficientes detalles
en lo que se refiere a los sistemas de información. Los marcos lógicos sí contienen una lista de
elementos esenciales para planear la gestión de la información, o sea, la información deseada
(como "indicadores objetivamente verificables") y las fuentes de información (como "medios de
verificación"). Estas dos categorías, sin embargo, no incluyen ninguna respuesta a las siguientes
preguntas fundamentales:
Requisitos esenciales del sistema de información no incluidos en el Marco Lógico normal
n ¿Quién va a recogerla?
n ¿Cuándo se va a obtener?
n ¿Quién la va a analizar?
El plan M&E incluye información específica sobre los datos necesarios para medir los indicadores,
las logísticas de recolección de datos y las guías para análisis de los datos e interpretación y
diseminación de resultados.
ACCIONES:
n Especifique indicadores en todos los niveles de la jerarquía.
n Para cada indicador defina:
n las variables ha ser medidas
n quién las medirá
n cuándo se medirán
n cómo se analizarán
n el plan de diseminación.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación 25
FASE DE EJECUCION
Esta fase tiene como propósito proporcionar las herramientas básicas para la preparación de los
planes de trabajo respectivos en la ejecución de los momentos claves de un proyecto o iniciativa
programática.
Objetivos de la fase:
n Precisar el nivel de detalle de las actividades o subactividades claves para desarrollar un proceso
en un plan operativo anual.
n Identificar los objetivos estratégicos de desempeño del personal a partir de los resultados/productos
principales establecidos en un plan de trabajo anual del proyecto, para facilitar procesos de
evaluación de desempeño de personal de la institución.
Preparación de planes operativos
Un supuesto básico es que los gerentes de los proyectos y programas tienen los conocimientos y
habilidades para el manejo de los procesos para la preparación del Plan Detallado de Implementación
para la vida del proyecto y programa, el Plan de Trabajo Anual y su vinculación con los Planes
Operativos Individuales que faciliten los procesos de evaluación de desempeño del personal técnico
del proyecto y programa.
En esta capitulo se brindara un pequeño recordatorio de los procesos a seguir para la preparación
de planes de trabajo minuciosos que faciliten en términos de rapidez y fluidez la implementación
del sistema de información del proyecto, incluyendo el trabajo de campo y análisis de la informaciones
subsiguientes.
Preparación del Plan detallado de Implementación
En este momento se retoman los indicadores seleccionados para medir los resultados o productos
del proyecto y los criterios de los indicadores para medir las actividades que se consideran claves
para el logro de los productos comprometidos. Generalmente este nivel de detalle no se encuentra
en el Plan de Monitoreo del proyecto y programa diseñado, ya que solamente se enlistan los
resultados y sus indicadores más relevantes para medir su desempeño.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
26
Plan de Monitoreo
Objetivo final/ Objetivo general/ Meta de impacto:
Recuérdese que aunque los proyectos y programas estén bien diseñados y conceptuados, es muy
común que al momento de ejecutarlos, se atasquen en la parte operativa; cayéndose en el riesgo
de solamente monitorear y evaluar solo actividades. Los monitoreos que se realizan (principalmente
el de impacto) ayudaran a mantener la atención en los efectos e impactos deseados, como
consecuencia de ello, el Plan Detallado de Implementación del proyecto deberá tornarse mas flexible
enfocándose hacia los efectos deseados y permitir operar al proyecto con mayor flexibilidad; en
este sentido, la planificación y ejecución se enfocara mas en los procesos y sus efectos, mas que en
las actividades.
Matriz sugerida para la preparación del Plan Detallado de Implementación para la vida del proyecto
y programa.
PRODUCTOS (a) – En esta columna se anotan los productos detallados en el plan de monitoreo
(que a su vez corresponden a los definidos en el marco lógico).
INDICADORES DE CUMPLIMIENTO (b) – En esta columna se detallan cada uno de los indicadores
que medirán el cumplimiento de los resultados. Cada indicador se ubica en una línea individual
para dar el detalle de sus metas anuales (de acuerdo a la vida del proyecto).
AÑO (C1…CX) – En estas columnas de detalla la correspondiente meta del indicador. Aquí es
necesario que los diseñadores del proyecto estimen la magnitud del cambio esperado para cada
indicador y el promedio de cambio con el tiempo. Benchmark es el término que usamos para los
valores esperados o niveles de logro en determinados períodos de tiempo.
TOTAL VIDA DE PROYECTO (d) – En esta columna se anota el total del indicador para vida del
proyecto que ha sido detallada en las columnas anteriores.
ACTIVIDADES / PROCESOS (e) – En esta columna se listan o describen las actividades (en forma
agregada para detallarlas en el plan de trabajo anual) necesarias a realizar para alcanzar los
resultados (PRODUCTOS) esperados.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
27
Ejemplo:
Meta de efecto #: 1
Matriz sugerida para la preparación del Plan de Trabajo Anual o Plan Operativo Anual
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
28
PRODUCTO – En esta columna se listan los productos correspondientes al año que se planifica.
METAS – Esta columna contiene la información correspondiente a la VIDA DEL PROYECTO para
monitorear su avance anual en relación a la meta establecida para la vida del proyecto, esto permite
no perder la visión global de lo planificado. Así mismo, establece la columna para anotar la meta
del indicador a lograr durante el año que se planifica.
ACTIVIDADES – Aquí se listan las actividades o subactividades (en caso de haberse definido actividades
muy agregadas en el Plan Detallado de Implementación para la vida del proyecto). El enunciado
de las actividades debe hacerse de manera de cuantificar la acción especifica en el trimestre
correspondiente (es decir, deben ser medibles).
TRIMESTRE – En estas columnas por trimestre, se especifica cuando y la cantidad que se lograra
en el cumplimiento de la actividad.
RESPONSABLE – Aquí se indica el componente o el nivel operativo del proyecto que será responsable
que la actividad se realice de acuerdo a los criterios y calidad requerida por el proyecto. En algunos
proyectos facilitadores, se menciona la institución ejecutora de la acción o actividad.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
29
1
La definición de las actividades esta en correspondencia con el producto y no
necesariamente para cada uno de los indicadores de cumplimiento.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
30
Un ejemplo sencillo de un Plan Operativo para la instalación del proyecto se presenta a continuación:
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
31
OBJETIVO – Corresponde al producto del POA que será alcanzado en el año correspondiente por
el responsable (de un componente) de su ejecución.
RESULTADO – Describe los productos que se esperan alcanzar por el responsable de acuerdo al
objetivo asignado.
INDICADOR DE CUMPLIMIENTO – Específica de acuerdo al resultado, las acciones y sus medidas
para monitorear el cumplimiento o su avance en los momentos de evaluaciones de desempeño de
personal.
MEDIO DE VERIFICACION – Aquí se indica el medio a utilizar para comprobar que la acción descrita
en el indicador fue realizada.
FECHA DE CUMPLIMIENTO – Fecha tope en que se espera tener cumplida o alcanzada la acción
descrita en el indicador.
RECURSOS DE APOYO – En esta columna se detallan los insumos, recursos o personas de apoyo
que serán necesarios para alcanzar el indicador.
Nótese que no se ha hecho énfasis en agregar una columna de actividades en el POI, las mismas
serán parte de los planes semanales o mensuales que se preparen para la ejecución del proyecto por
parte del personal. Las actividades deben de relacionarse directamente para alcanzar los indicadores
propuestos en el POI.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
32
El siguiente diagrama ilustra la progresión horizontal del Plan Operativo Individual, relacionando
las actividades que serán parte de los planes semanales o mensuales que se preparen en la ejecución
del proyecto.
Plan semanal o
Plan Operativo Individual mensual de
actividades
Ejemplo:
Tomando como insumo el POA y
Preparamos el siguiente:
C A R E E l S a l v a d o r
34
Matriz sugerida para la preparación del Plan de Trabajo para realizar los momentos de evaluación & monitoreo del proyecto
y programa.
C A R E
E l
S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
Guía para el Diseño, Monitoreo y Evaluación
35
Monitoreo: Permite ver el avance de los acontecimientos en que medida se acerca a las metas
planteadas (mejores prácticas, rendimientos, tendencias y patrones).
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
36
Fase de Monitoreo
Esta fase tiene como propósito la introducción al Monitoreo, conceptos conocidos y ampliamente
validados en diferentes ámbitos y sectores, a fin de permitir el trabajo práctico y de retroalimentación
en las experiencias concretas de sistematización de estos procesos por el personal de los
proyectos/programas de CARE ES.
Objetivos de la fase:
n Compartir los contenidos e instrumentos de las fases básicas que se sugieren para iniciar las
actividades de monitoreo de un proyecto.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
37
Competencias a desarrollar
Monitoreo
El monitoreo es la recogida y gestión de datos, que están relacionados con los valores fijados como
objetivo definidos de antemano para los indicadores (OVI) en el marco lógico. La información del
Monitoreo se recoge sobre una base continua durante la fase de ejecución del proyecto.
n El monitoreo financiero sigue los insumos y costos del proyecto por actividad dentro de unas
categorías de gastos definidas de antemano.
n El monitoreo físico sigue la distribución y entrega de las actividades y productos o intervenciones
del proyecto.
n El monitoreo organizacional sigue la sustentabilidad, el desarrollo institucional y el fortalecimien
de la capacidad en el proyecto y asociados directos.
Monitoreo de contexto
El proceso del seguimiento del contexto en que está funcionando un proyecto, en cuanto el mismo
afecta a unos supuestos y riesgos importantes para el proyecto. Este incluye el monitoreo de cuestiones
institucionales y de política que podrían afectar la capacidad del proyecto para actuar o la capacidad
de la población objetivo para responder al proyecto. Estas cuestiones deben tratarse hasta cierto
punto durante el monitoreo, pero principalmente durante las evaluaciones.
Monitoreo de los resultados
El proceso de seguir los efectos del proyecto (las respuestas de la población objetivo a los productos
o intervenciones del proyecto) y los impactos (la contribución que hace el proyecto a un cambio
fundamental y sostenible para la población objetivo). Las cuestiones relativas a los efectos deben
tratarse hasta cierto punto durante el monitoreo, pero principalmente durante las evaluaciones. La
evaluación de los impactos raras veces es tratada por el monitoreo y es mayormente el dominio
de la evaluación.
Monitoreo de impacto
Se diferencia de los otros procesos de monitoreo, porque está enfocado exclusivamente a la medición
de los impactos de la intervención de los proyectos o programas; y, además tiene mucha utilidad
para medir la relación ingreso – egreso.
En los procesos habituales de planificación y evaluación de proyectos, los impactos solo son definidos
a nivel de objetivo de desarrollo. En el caso del monitoreo de impacto, se considera que los impactos
inician desde los cambios que se han logrado por medio del proyecto o programa en el comportamiento
de los clientes. Por lo tanto, el impacto comienza desde la adaptación y aplicación de los productos
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
38
que provee el proyecto o programa. El monitoreo de impacto permite medir impactos generados
directamente por el proyecto o programa.
El monitoreo de impacto durante los últimos años ha sido un enfoque importante de la cooperación
internacional, agencias bi y multilaterales como herramienta para comprobar los impactos de los
proyectos y programas en la población, el medio ambiente y en el marco institucional; ya que no
resulta suficiente el monitoreo y la evaluación de los resultados y el desempeño de los proyectos
y programas.
Plan Monitoreo
Se seleccionan los indicadores para medir los resultados o productos del proyecto. También, se
elaboran los indicadores para medir las actividades que se consideran claves para el logro de los
productos comprometidos. Generalmente este nivel de detalle no se encuentra en el documento
de proyecto diseñado, ya que la costumbre es enlistar los resultados y actividades más relevantes
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación 39
CRITERIOS (4) - Es el proceso El personal técnico del proyecto al reportar una letrina
que el equipo de diseño sigue construida deberá cumplir con los siguientes criterios:
para seleccionar y definir las
variables apropiadas en la Letrina construida tiene lo siguiente:
construcción e interpretación del n Fosa excavada
indicador del producto. En n Brocal terminado
algunos casos los productos n Plancha terminada
tienen más de un indicador. n Tasa instalada
n Caseta con techo y puerta
construida
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
40
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
41
Una vez realizado el plan de monitoreo, en donde se determinan los datos necesarios para la
construcción de indicadores de productos/resultados seleccionados, el equipo elabora los instrumentos.
En esta fase se definen las técnicas más adecuadas de medición de indicadores de monitoreo o de
desempeño, de acuerdo a las características o naturaleza del indicador.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
42
n Medidos por rutina de registros de los implementadores o por las encuestas escritas.
Periodo: _______________________________________________
Responsable: ___________________________________________
Región: ________________________________________________
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
43
FASE DE EVALUACION
Esta fase tiene como propósito la introducción a la Evaluación, conceptos conocidos y ampliamente
validados en diferentes ámbitos y sectores, a fin de permitir el trabajo práctico y de retroalimentación
en las experiencias concretas de sistematización de estos procesos por el personal de los
proyectos/programas de CARE ES.
Objetivos de la fase:
n Compartir los contenidos e instrumentos de las fases básicas que se sugieren para iniciar las
actividades de evaluación de un proyecto.
Por evaluación se entiende la valoración, el análisis y la utilización periódica de los datos sobre un
proyecto. Los principales puntos de evaluación en el ciclo de un proyecto son:
Estudio de referencia
El enfoque principal del estudio de línea base consiste en la recogida y el análisis de datos antes de
las intervenciones relacionados con los indicadores (OVI) para las Metas Intermedias y Finales (IG,
FG). Los estudios de referencia se realizan para establecer puntos de referencia para los indicadores
seleccionados, por ejemplo, para proporcionar datos sobre su situación inicial, con el fin de que el
monitoreo y la evaluación posteriores puedan evaluar los efectos e impactos del proyecto para la
población objetivo. El estudio de línea base ayuda también a evaluar la mensurabilidad de los
indicadores seleccionados y puede utilizarse para perfeccionarlos con miras a un futuro seguimiento.
Para ello, los estudios de referencia se realizan después de diseñar y asegurar el financiamiento del
proyecto, pero antes de comenzarse las intervenciones del mismo.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
44
Examen anual
El objetivo de esta evaluación es determinar el progreso y los resultados del proyecto y mantener
el proyecto encaminado hacia el logro de su objetivo. Otro objetivo consiste en examinar las
estrategias y el marco lógico del proyecto y, si es necesario, modificar el marco lógico. Dichas
modificaciones suelen limitarse generalmente al nivel de actividades y a ciertos productos.
Generalmente se realiza antes de la preparación del siguiente Plan Operativo Anual.
Evaluación a medio termino
Es normalmente una evaluación externa (y, por tanto, "objetiva") de un proyecto que se concentra
en sus resultados, la capacidad organizacional y las correcciones a medio término para mejorar la
ejecución en el resto del período del proyecto.
La Evaluación de Medio término es una actividad de evaluación externa que tiene lugar
aproximadamente a mediados de la fase de ejecución de un proyecto. Los datos analizados y
utilizados durante la evaluación proceden de las actividades rutinarias del monitoreo financiero,
físico, de efectos y supuestos. Esta información se ha presentado en una serie de documentos
producidos por el proyecto, entre otros, los informes anuales, los marcos lógicos y los estudios
diagnósticos. La finalidad es identificar posibles mejoramientos respecto a los productos o las
intervenciones del proyecto.
Evaluación final
Es una evaluación externa o interna de los efectos y los impactos producidos por el proyecto, así
como una evaluación del costo-eficacia o costo-beneficio. Normalmente se realiza unos meses antes
de la terminación del proyecto.
El objetivo de la evaluación final es aprovechar las experiencias del proyecto para mejorar el diseño
de proyectos futuros y en marcha. Los datos utilizados para el análisis en esta forma de evaluación
son los mismos que los empleados en la Evaluación de Medio término, pero pueden incluir también
un análisis de eficacia en función de los costos (y a veces de costos-beneficios). Las fuentes de datos
para la evaluación final son, entre otros, los documentos del proyecto y las discusiones con todos
los distintos grupos de personas participantes o asociadas con el proyecto desde su concepción
como, por ejemplo, la población objetivo, el personal del proyecto, las autoridades nacionales
responsables de la formulación de la política y los donantes.
Dos métodos analíticos principales que se utilizan en las evaluaciones finales son: a) comparar antes
y después (de volver a recoger indicadores seleccionados originalmente documentados en el estudio
de línea base y comparar los valores en la puesta en marcha y al final del proyecto), y b) comparar
con y sin (evaluar indicadores seleccionados entre grupos de personas que han estado y no han
estado expuestos a las intervenciones del proyecto).
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
45
Evaluación ex post
Estudio externo y a fondo del impacto que un proyecto tiene sobre la población objetivo. El intervalo
preferido entre la terminación del proyecto y la evaluación ex post es de 5 a 10 años. Raras veces
se realiza por falta de interés por parte del donante para financiarlo.
Las fuentes de datos para el análisis en la evaluación ex post incluyen entrevistas, observaciones,
documentos del proyecto (especialmente el estudio de línea base y la evaluación final), e informes
de cualquier monitoreo en curso de la población objetivo (por ejemplo, por contrapartes del
gobierno u organismos comunitarios).
Los estudios de referencia se basan en la recogida de nuevos datos. Todas las actividades de evaluación
después del estudio de línea base dependen de varias combinaciones de datos de monitoreo, datos
obtenidos de otras organizaciones y nuevos datos que se recogerán sobre el terreno.
Plan Evaluación
Para elaborar el plan de evaluación el equipo retoma los indicadores, también llamados indicadores
objetivamente verificables, de las metas de impacto/objetivo final/general y meta de
efecto/intermedias/objetivos específicos y decide sobre los datos necesarios para medirlos, la fuente
y el método de los datos, la frecuencia de recolección y el responsable de cada dato.
CRITERIOS (1) - Es el proceso que el equipo de diseño sigue para seleccionar y describir mejor los
términos usados en la declaración de las metas u objetivos. Los criterios facilitan la selección y
evaluación de indicadores al describir los detalles incluidos en la explicación de las metas u objetivos.
El hacer uso de criterios o mejor entendido como definiciones operacionales permite al equipo de
diseño simplificar y acortar las frases de la meta. Los términos técnicos no reconocidos universalmente
también requieren de definiciones operacionales. Recuerde, que un término puede ser definido de
diferentes maneras en varios proyectos dependiendo del contexto.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
46
Por ejemplo, el personal técnico de un proyecto de agua y saneamiento sostenible definió que los
criterios operacionales para el objetivo específico #1 (meta de efecto) Incrementada la cantidad
de familias con prácticas adecuadas de saneamiento básico reduciendo los riesgos de transmisión
de enfermedades hídricas en el hogar eran los siguientes:
INDICADORES (2) - Son simplemente las variables, medidas o criterios usados para verificar si un
cambio prop uesto ha ocurrido y por lo tanto, si una meta u objetivo ha sido alcanzada. Los
indicadores por sí solos no representan valores meta; éste trabajo se logra en la definición de la
meta u objetivo. Son también enumerados para ayudar a documentar a que metas u objetivos
corresponden. La información ingresada en esta columna debe ser trasladada (uno a uno) de los
indicadores objetivamente verificables (OVI) correspondientes a cada meta u objetivo del marco
lógico.
Siguiendo el ejemplo anterior, los indicadores definidos por los técnicos del proyecto para medir
el cumplimiento de la adopción de las prácticas de saneamiento:
n Higiene personal
n Higiene del hogar
n Control de excreta
n Manejo adecuado del agua.
CRITERIOS (3) - Es el proceso que el equipo de diseño sigue para seleccionar y definir las variables
apropiadas en la construcción e interpretación del indicador del producto. Generalmente las metas
u objetivos tienen más de un indicador y estos corresponden a:
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
47
La fuente de información son las familias encuestadas en sus hogares y en estas, el jefe o jefa de
hogar será el informante clave
n Línea de base
n Evaluación Media o de medio termino
n Evaluación Final
DATOS NECESARIOS (6) - Un indicador (de impacto o efecto) seleccionado debe ser una variable
específica y medible. Sin embargo, para la construcción e interpretación del indicador se requiere
más de una variable.
Por ejemplo, el indicador Incrementado el porcentaje de familias con manejo adecuado de letrinas
requiere que los siguientes datos (variables) sean recolectados:
n # familias en l a comunidad
n # familias según tipo de letrina (fosa simple, lavable e inodoro)
n # de familias con letrina fosa simple que tiene tapadera
n # familias que tienen papelera en su letrina
n # familias que realizan limpieza interna a la letrina
n # familias que realizan limpieza externa a la letrina
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
48
Las fases básicas que se sugieren para iniciar las actividades de evaluación de un proyecto son:
FASE 1. ANALISIS DEL DISEÑO DEL PROYECTO.
En esta fase se revisa las metas u objetivos, los resultados, las actividades y los insumos que serán
monitoreados y evaluados de acuerdo al marco lógico y el plan de monitoreo & evaluación; y es
en este momento cuando se pueden replantear o ampliar las ideas originales. Para ello, los equipos
técnicos del proyecto, en consulta constante con el cooperante, amplían, explicitan o concretizan
indicadores formulados de manera ambigua en el diseño o incorporan indicadores claves no
considerados antes en los instrumentos de planificación.
En esta fase el Marco Lógico (ML) es validado en sus detalles resultando comprensible para cualquier
persona que lo consulte (los criterios son los mismos para todas las personas que lo consultan o
sea, que el marco lógico por si solo es comprensible, no necesita que lo explique el equipo que lo
diseño). Esta herramienta es clave para orientar todas las actividades de monitoreo y evaluación;
sí el ML es comprensible y suficiente se continúa el proceso. Cuando un proyecto desde su formulación
considera los aspectos mencionados, le ahorra tiempo al equipo responsable del monitoreo y
evaluación.
FASE 2. DISEÑO DEL PLAN DE EVALUACION
Para elaborar el plan de evaluación el equipo retoma los indicadores operacionales, también
llamados indicadores objetivamente verificables, de las metas de impacto y efecto y decide sobre
los datos necesarios para medirlos, la fuente y el método de los datos, la frecuencia de recolección
y el responsable de cada dato.
Una vez realizados los planes, en donde se determinan los datos necesarios para la construcción
de indicadores en los diferentes niveles de la jerarquía, el equipo elabora los instrumentos.
En esta fase se definen las técnicas más adecuadas de medición de indicadores de las metas u
objetivos, de acuerdo a las características o naturaleza del indicador; por ejemplo: si será a través
de encuesta a hogares, entrevista grupal, registros de organizaciones comunales u otras. Este paso
es clave porque permitirá diseñar instrumentos específicos para medir los indicadores de acuerdo
a las técnicas de investigación seleccionadas.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
49
Una vez se ha decidido sobre las técnicas, se inicia la elaboración de instrumentos - para medir los
indicadores - a utilizar en cada técnica. Los instrumentos se elaboran de acuerdo a la técnica de
estudio seleccionada, decidiendo sobre el tipo de información que se requiere para construir o
formular el indicador. Este aspecto es clave ya que dependiendo de la naturaleza del indicador, se
determina la información que se necesita recolectar para poder construirlo o medirlo. Algunos
indicadores sólo requieren un dato, otros más complejos, requieren más de una variable.
Un momento clave en este proceso es la elaboración de la boleta de línea base. Las preguntas,
incluidas en la boleta, deberán aportar los datos suficientes para la prueba de las hipótesis de impacto
planteadas por el proyecto. Por lo que, previo a la elaboración de la boleta, se deberá identificar
claramente la posible influencia de las intervenciones en los indicadores de salud o de otro tipo.
Esto permitirá contar con datos para comparar con evaluaciones posteriores.
Para la evaluación se elabora una guía o formulario de encuesta que será aplicada antes de que un
proyecto inicie sus actividades, este estudio es conocido como línea de base. Se recomienda que la
misma guía de línea base sea utilizada en evaluaciones posteriores (medio termino, final o de
impacto).
También, se puede monitorear los efectos (el avance en los cambios ocurridos en la conducta
humana), si un proyecto trabaja en la promoción de éstas, para ello pueden utilizarse partes de la
misma guía utilizada para levantar la línea base.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
50
Ejemplo:
Plan de evaluación
38. ¿Existen focos de contaminación cerca del hogar? 38.A ¿Si es Sí, que tipo de contaminación
Código existe?
1 = Si 2= No
Foco de contaminación Existe
1=Si 2= No
39. ¿Tienen resumideros construidos?
Código Agua estancada
Basura destapada
1 = Si 2= No ¿Si es Sí, cuantos? Excretas al aire libre
Animales muertos
39.A ¿Le dan mantenimiento al resumidero? Corrales, gallineros, chiqueros,
Código sucios a la par de la casa
Otros, específique
1 = Si 2= No
42. ¿Andan animales sueltos dentro de la casa? 43. ¿Cómo controlan los animales domésticos?
Código Código
1= Si 2= No 3= No tienen animales
1= Chiqueros 4= No tienencontrol/Libres
2= Gallineros 5= No aplica
3= Chiqueros/ 6= Otros
Gallineros Especifique: ____________
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
51
El Sistema de evaluación inicia con el levantamiento del estudio de línea base, donde se recoge la
información necesaria para construir los indicadores de impacto y efecto previo a cualquier intervención
del proyecto. A continuación se describen los pasos principales para realizar este estudio. Estos no
tienen que realizarse necesariamente en el orden en que se encuentran ya que algunos pueden
realizarse de manera paralela.
ORGANIZACIÓN Y PREPARACIÓN
Aquí se elaborará la calendarización de las etapas del proceso que se consideren necesarias y que
garanticen la finalización exitosa de la investigación:
þ Preparación de la investigación,
þ Elaboración o revisión de formularios,
þ Impresión de formularios,
þ Contratación personal de campo y oficina,
þ Compra de materiales,
þ Alquiler de vehículos,
þ Capacitación de encuestadores,
þ Preparación de material de campo,
þ Organización del trabajo de campo,
þ Validación de campo de los instrumentos y su manejo por el personal encuestador,
þ Revisión y codificación de boletas,
þ Programa de captura y depuración,
þ Digitación de base de datos,
þ Depuración de base de datos,
þ Elaboración de tablas de salida,
n Determinar presupuesto
Para elaborar el presupuesto debe considerarse las diferentes etapas del proceso descritas en el
cronograma. Es decir, se elabora tomando en cuenta los recursos necesarios para realizar cada
actividad.
n Material cartográfico
Es necesario recolectar cualquier material cartográfico, que se considere necesario para la selección
de las unidades de muestreo. Casi siempre existen mapas o croquis de las zonas a estudiar.
DEFINICIÓN DE METODOLOGÍA
n ¿Muestra o censo?
En este paso se decide si para el estudio de línea base se tomará una muestra ó si se hará un censo,
esto último implica que se visitarán todos los hogares que viven en el área de influencia del proyecto.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
52
Este paso consiste en decidir y realizar la toma de muestra. Este depende de la información o
insumos disponibles y magnitud del estudio. En los libros de estadística existe suficiente literatura
que describen los distintos métodos para la toma de muestra: aleatorio simple, estratificado,
sistemático, etc...
Otras herramientas claves para realizar el estudio, son los manuales que se consideran necesarios
para el buen desarrollo de la investigación: Manual de cartografía, manual del supervisor, del
entrevistador y codificador.
Los responsables del estudio tendrán la tarea de seleccionar el personal de campo, lo mismo que
designar quiénes desarrollen las funcione de jefe de campo y supervisión, así mismo definirá los
roles que dentro de la encuesta desempeñarán el jefe de campo, supervisores, entrevistadores,
codificadores, digitadores, o cualquier otro recurso necesario para el buen desarrollo de la
investigación. Además decidirán sobre cualquier diferencia entre los mismos.
n Capacitación
La capacitación se puede realizar a través de talleres, donde se discute cada pregunta o ítem del
instrumento. Se recomienda realizar sociodramas de aplicación del instrumento donde cada persona
del equipo juegue los roles de informante y entrevistador/a. También, se recomienda una etapa
práctica de la capacitación, para ello se lleva al personal a una comunidad donde no se realizará
el estudio a fin de aplicar un número reducido de instrumentos y posteriormente se discute la
experiencia obtenida.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
53
Para la recolección de la información se selecciona, del personal, a un(a) Jefe de Campo quien
coordinará todo el proceso y a un(a) Supervisor(a) por cada cuatro Investigadores.
El(la) Supervisor(a) será responsable de revisar las boletas o instrumentos y buscar inconsistencias.
La primera revisión de las boletas diligenciadas en campo, corresponde al entrevistador, quien las
traslada al supervisor para su revisión. En caso de alguna observación este se las devuelve al
entrevistador para su corrección. El jefe de campo deberá tomar una muestra de las boletas entregadas
por el supervisor para revisarlas, si encuentra alguna inconsistencia procederá a su corrección, este
proceso se lleva a cabo en campo, posteriormente trasladarán las boletas a los codificadores.
Las boletas que llegan de campo pasan por un proceso de codificación geográfica, incluso las diferentes
respuestas que aparecen en la alternativa “otros, especifique” de la mayoría de las boletas.
Posteriormente se digitan en el programa de captura y se depura la base de datos.
Los codificadores antes de proceder a codificar las boletas, las revisarán y de encontrarse todavía
algún error la devolverán a campo para su corrección. Finalmente procederán a codificarla y pasarlas
a los digitadores.
PROCESAMIENTO DE DATOS
Este paso es de gabinete: Básicamente consiste en diseñar o decidir sobre el programa donde serán
procesadas las boletas, entre los más comunes tenemos SPSS, EPI INFO, IMPS y ACCES.
Algunas organizaciones, como CARE El Salvador, utiliza como herramienta el Sistema MER para
organizar y presentar la información; para medir los resultados obtenidos con las acciones del
proyecto y al mismo tiempo, para desarrollar una planificación del monitoreo y la evaluación.
Una vez digitadas las boletas se procede a la limpieza de la información. Frecuentemente se realiza
doble digitación y se comparan las bases para corregir errores en el digitado de la información.
Para elaborar o construir los indicadores buscados se procede a producir las tablas de salida con la
información necesaria. Se realizan los cruces de variables requeridos. Posteriormente se comparan
los resultados obtenidos, con los encontrados por otras fuentes dignas de crédito o resultados
obtenidos por instituciones estatales o privadas, para validar la consistencia de los mismos. En todo
caso si se observaran discrepancias que no se puedan atribuir a lo errores propios del muestreo, se
mantendrán los resultados obtenidos en el estudio.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
54
B) ESTUDIO DE EVALUACION
El estudio de evaluación consiste en la aplicación de la misma boleta utilizada para realizar el estudio
de línea base.
Dos criterios utilizados para determinar si un indicador de línea base se puede comparar con un
indicador de evaluación son:
n Que las preguntas que intervienen en la construcción sean exactamente las mismas.
n Que algunas condiciones sean las mismas si se considera que por la naturaleza del indicador
pueden afectar o dificultar la comparación. Por ejemplo, el indicador relacionado con la
prevalencia de diarrea los resultados sólo pueden ser comparados si el estudio de línea base
y el estudio de evaluación se realiza en la misma época del año, ya sea invierno o verano.
C A R E E l S a l v a d o r
Guía para el Diseño, Monitoreo y Evaluación
55
BIBLIOGRAFIA
n Barton, Tom (1997) How Are We Doing? M&E Guidelines for CARE Uganda. CARE-USA.
Atlanta, GA.
n Caldwell, Richard (2002), Project Desing Handbook, Tango Internacional para CARE-USA,
Atlanta.
n Comisión de las Comunidades Europeas, Serie de Métodos para la Gestión del Ciclo de un
Proyecto. N°1 febrero de 1993.
C A R E E l S a l v a d o r