TALLER DE EVALUACIÓN DE IMPACTO

El Marco de Resultados:
Las sutiles diferencias entre las actividades, los
productos, y los resultados e impactos de un
programa

Christian Borja Vega

Banco Mundial
4 de Abril de 2017
Guatemala
ANTES DE COMENZAR…CURIOSIDADES
SOBRE GUATEMALA
• GUATEMALA ES EL PAÍS EXPORTADOR #1 DEL MUNDO DE ARVEJA
CHINA A ESTADOS UNIDOS.
• GUATEMALA HA SIDO SELECCIONADA POR LA BRITISH
BROADCASTING CORPORATION (BBC) COMO DE LOS MEJORES
DESTINOS VACACIONALES DEL MUNDO EN EL SEGMENTO CULTURAL.
• ES EL 2DO PAÍS MÁS EFICIENTE PARA PRODUCIR CAÑA DE AZÚCAR Y
EL 5TO EXPORTADOR MÁS GRANDE DEL MUNDO.
• GUATEMALA LA MAYOR VARIEDAD DE CONÍFERAS MADERABLES
NO PREGUNTAR SÓLO:
“FUNCIONÓ EL PROGRAMA?”
…SINO TAMBIÉN:
“POR QUÉ FUNCIONÓ?”
HERRAMIENTAS CONCEPTUALES
SIMILARES
 CADENA DE RESULTADOS

Insumos Actividades Productos Resultados Resultados

Inter-medios

Implementación (OFERTA) Resultados (DEMANDA + OFERTA)

CADENA DE RESULTADOS SIMPLIFICADA
Las Evaluaciones de
Impacto identifican esta
relación

RESULTADOS
PROGRAMA RESULTADOS
INTERMEDIOS

Teoría de Cambio
 TEORÍA DE CAMBIO

• De qué se trata el
programa?

Formula las • Qué impacto se espera

preguntas lograr con el programa?
correctas
• Cómo se espera que el
programa logre ese
impacto?
PREGUNTA 1: DE QUÉ SE TRATA EL PROGRAMA?

RESULTADOS
PROGRAMA INTERMEDIOS
RESULTADOS
 PROGRAMA

INSUMOS ACTIVIDADES RESULTADOS

Construcción de Instalaciones para
Gente, dinero, provisiones lavarse las manos
instalaciones
PREGUNTA 2: QUÉ IMPACTO SE ESPERA
LOGRAR CON EL PROGRAMA?

RESULTADOS
PROGRAMA INTERMEDIOS
RESULTADOS
 RESULTADOS

MENOS DIARREA MENOS MORTALIDAD

INFANTIL
MENOS ANEMIA
MEJOR DESARROLLO
INFANTIL
PREGUNTA 3: CÓMO SE ESPERA QUE EL
PROGRAMA LOGRE ESE IMPACTO?

PROGRAMA RESULTADOS RESULTADOS

INTERMEDIOS
 RESULTADOS INTERMEDIOS
LA GENTE USA Y SE BENEFICIA CON EL PROGRAMA

MENOS
SE LAVAN LAS MANOS GERMENES EN
LAS MANOS
 CADENA COMPLETA DE RESULTADOS

PROGRAMA RESULTADOS RESULTADOS

INTERM.
• Insumos: gente,
dinero, provisiones • Menos diarrea y
• La gente se anemia
• Actividades: lava las manos
Construcción • Menos
• Menos mortalidad
• Producto: gérmenes en las infantil
Instalaciones para manos
lavarse las manos • Mejor desarrollo
infantil
SI MIDIÉRAMOS SÓLO LA MORTALIDAD INFANTIL
Y NO HUBIERA CAMBIOS, QUÉ NOS DICE ESTO?
QUE EL PROGRAMA NO SE IMPLEMENTÓ
APROPIADAMENTE?
QUE LA GENTE NO LO USÓ
APROPIADAMENTE?
O QUE NO REDUJO LA DIARREA, LA ANEMIA,
ETC.?
 CONCLUSIONES

• PREGUNTARSE NO SÓLO QUÉ,

SINO CÓMO

• Y MEDIRLO!
OTROS EJEMPLOS
MANUALES ESCOLARES
 RESULTADOS
PROGRAMA? INTERMEDIOS RESULTADOS
PROGRAMA RESULTADOS RESULTADOS?
INTERMEDIOS
 ¿CUÁL DE LOS SIGUIENTES ES UN
IMPACTO DEL PROGRAMA?
A. LOS ALUMNOS ESTÁN
HACIENDO SUS TAREAS.
B. LOS MANUALES ESTÁN
SIENDO ENTREGADOS A
LAS ESCUELAS.
C. LOS ALUMNOS TIENEN
MEJOR RENDIMIENTO
ESCOLAR.
D. LOS NIÑOS ASISTEN A LA
ESCUELA MÁS DÍAS EN EL
MES.
 ¿CUÁL DE LOS SIGUIENTES ES UN
RESULTADO INTERMEDIO DEL PROGRAMA?

A. LOS MANUALES ESTÁN

SIENDO ORDENADOS A
LA EDITORIAL.
B. LOS MANUALES SE ESTÁN
ENTREGANDO A LAS
ESCUELAS.
C. LOS ALUMNOS ESTÁN
USANDO LOS MANUALES.
D. LOS ALUMNOS TIENEN
MEJOR RENDIMIENTO
ESCOLAR.
PROGRAMA RESULTADO RESULTADO
• Actividades: INTERMEDIO
Distribuir manuales
• Producto: Manuales Maestros y alumnos • Mejor
disponibles en la usan los manuales aprendizaje
escuela
Tipo de Resultados
Actividades Resultados Resultados
Programa Intermedios

o Maestros o Nuevos
capacitados en métodos o Mayores
o Capacitación de
Educación los maestros
nuevos métodos usados en clase puntajes en los
o Manuales o Mayor uso de exámenes
entregados los manuales

o Nuevos médicos o Nuevos doctores

o Mayor uso de
contratados ejerciendo o Menor
clínicas de
Salud o Asistentes de o Asistentes
salud para dar
mortalidad
parto aplicando materna
a luz
capacitadas nuevos métodos
o Transf. monet
condic. (TMC) o TMCs
o Mayor consumo
Protección entregadas entregadas a o Menos pobreza
de alimentos
o Sistema de los hogares o Menos
Social y selección objetivos de
o Mayor visita
mortalidad
Empleo de los niños a
o Manejo de acuerdo con las infantil
las clínicas
Sistemas de condiciones
Información
 OTROS EJEMPLOS
CADENA DE RESULTADOS

– LOS PROGRAMAS BUSCAN RESULTADOS ESPECÍFICOS EN TEMAS

COMPLEJOS;

– ALGUNOS PROGRAMAS COMBINAN MÚLTIPLES INTERVENCIONES;

– LAS CADENAS DE RESULTADOS PUEDEN AYUDAR A INDENTIFICAR

CÓMO Y POR QUÉ LOS COMPONENTES DEL PROGRAMA PUEDEN
LLEVAR, CUANDO SE COMBINAN, A CIERTOS RESULTADOS;

– FACILITAN LA COMPRENSIÓN DE PROGRAMAS COMPLEJOS.

 EJEMPLO: EL PELIGRO DE LA MATERIA FECAL
La contaminación fecal es la mayor fuente de infecciones diarreicas…

Abastecimiento
de agua

Saneamiento Fluidos Higiene

Dedos
Alimen
Faeces
-tos
Mosca
s

Campos/
Pisos
 RESULTADOS
PROGRAMA? INTERMEDIO RESULTADO

Abastecimiento de agua +
Saneamiento + Higiene
 RESULTADO
PROGRAMA INTERMEDIO
RESULTADO

¿Cuál es el impacto?
¿Qué se espera lograr con el
programa?
• ¿Mejoraría la salud si el programa sólo proveyera agua de calidad?

Si no se produce cambio de comportamiento y la infraestructura de saneamiento es pobremente
provista, la gente puede todavía mostrar pobres resultados en salud
• ¿Mejoraría la salud si el programa sólo proveyera infraestructura de saneamiento?

Si no se provee agua de calidad y no se produce un cambio de comportamiento, la gente puede
todavía mostrar pobres resultados en salud
• ¿Mejoraría la salud si el programa generara elementos que dispararan un cambio de
comportamiento?

Si la calidad del agua y la infraestructura sanitaria son probremente provistas, la gente todavía puede
mostrar resultados pobres en salu

 La cadena de resultados puede ayudarnos a entender la contribución de cada

componente del programa a los resultados deseados
Ejemplo: Intervención combinada de educación, salud y agua potable

Insumos Productos Resultados Impacto

• Dinero • Litros de agua potable • Menor incidencia de • Prueba de que los

• Personal purificada diarrea resultados no se
• Tecnología • Cantidad de telas • Menos casos de hubieran logrado si no
antimosquiteras para malaria en la fuera por la
camas vendidas comunidad intervención
• Número de estudiantes • Mayor tasa de (“contrafactual’)
graduándose de la alfabetización
escuela

Las Evaluaciones de Impacto ayudan a entender

cómo y porqué los componentes (individual
y colectivamente) contribuyen a los impactos
deseados
 EJEMPLOS CADENA DE RESULTADOS EN AYS
INSUMOS Y
ACTIVIDADES
› Construcción o expansión de
redes de acueducto
› Conexiones domiciliarias de
agua
› Bombas de agua rurales
› Subsidios de conexiones
› Construcción o expansión de
redes de alcantarillado
› Plantas de tratamiento de
aguas residuales
› Construcción o subsidios de
baños
PRODUCTOS Y
RESULTADOS
INTERMEDIOS
› Aumenta el acceso a
servicios de Agua y
Saneamiento
› Mejora en la
disponibilidad, cantidad y/o
calidad de agua disponible
› Mejoras en los
comportamientos de higiene
(lavado de manos, reduccion
de deposicion al aire libre,
uso de agua hervida para
consumo)
RESULTADOS
FINALES
› Reducción en la
mortandad y morbilidad
de niños pequeños ( por
diarrhea, y otras
enfermedades
respiratorias y
gastrointestinales)
› Mejoras nutricionales en
niños
› Ahorros por gastos
medicos no realizados
› Ahorros en tiempo de viajes
para recolección de agua
 ¿POR QUÉ NOS SIRVE PARA ENTENDER
COMO OPERA EL PROGRAMA?
• Definir objetivos y metas

• Asigna indicadores a etapas clave

del programa

• Permite visualizar el concepto y el

diseño del programa

• Ayuda a definir responsabilidades

 GRACIAS
CBORJAVEGA@WORLDBANK.ORG

¿PREGUNTAS?