Documentos de Académico
Documentos de Profesional
Documentos de Cultura
CONTENIDO
* Definiciones y alcance del proyecto
* Ciclo de vida del proyecto de inversin
* Criterios y tipos de evaluacin ex post
* Marco lgico e indicadores de resultado e impacto
* Mtodos de evaluacin ex post
* Evaluacin de resultados
* Evaluacin de impacto
* Conclusiones
CUESTIONAMIENTOS
El proyecto habr alcanzado los resultados esperados?
Los beneficiarios son menos pobres o han mejorado su calidad de vida?
El proyecto ha sido rentable econmica y socialmente?
Se estn atendiendo a los beneficiarios estimados en el proyecto?
Los servicios del proyecto son de la calidad deseada?
QU ES LA EVALUACION EX POST?
DEFINICION
Evaluacin que mide los resultados y el impacto del PIP con relacin a las
metas definidas a nivel del propsito y fines, teniendo en cuenta los
supuestos sealados en el ML.
Analiza si las actividades desarrolladas permitieron obtener los productos
y alcanzar el propsito. Determina si el PIP, en la prctica, contribuy a
solucionar el problema planteado, emitiendo juicio de valor apoyado en
evidencias.
TIPOS DE EVALUACION
Pre-inversin: ex ante
INVERSION
POST-INVERSION
ESTUDIO
DEFINITIVO /
EXPEDIENTE
TECNICO
OPERACIN
Y
MANTENIMIENTO
FACTIBILIDAD
EJECUCION
EVALUACION
EX POST
EVALUACION
EX ANTE
SEGUIMIENTO
Y EVALUACION
CULMINACION
Y RESULTADOS
PERFIL
IDEA
FIN
CULMINACION
SEGUIMIENTO
RESULTADOS
IMPACTO
Descripcin
Perspectivas de la
sostenibilidad del PIP
(disponibilidad de
factores necesarios para
la O y M) para la entrega
oportuna de B/S
Cumplimiento de
condiciones que
aseguren la O y M del
PIP. Recomendaciones
de la evaluacin de
culminacin
Evaluacin
integral a nivel de
componentes,
objetivo central e
impactos directos
Anlisis de
impactos
directos e
indirectos y de
sostenibilidad
Tiempo
A la culminacin de la
ejecucin fsica del PIP
Depende de
caractersticas
del PIP (M y LP)
Competencia
UE
OPI
UF a travs de
EEI
OPI a travs de
EEI
mbito de
aplicacin
Si es recomendado por
la evaluacin de
culminacin
Depende de LC y
tipo de PIP, se
aplica a todos o
una muestra
Seleccionando
uno o grupo de
PIPs
Criterios
Eficiencia y sostenibilidad
Sostenibilidad
Pertinencia,
eficiencia,
eficacia,
sostenibilidad e
impactos
Impactos y
sostenibilidad
Involucrados
UE-Operador del
servicio
OPI. UE-Operador
del servicio
Operador del
servicio
EVALUACION EX POST
PROPOSITO
Verificar el cumplimiento de objetivos en trminos de pertinencia,
eficiencia, eficacia, impacto y sostenibilidad.
Compara, en un determinado periodo, lo que se ha logrado en relacin a
lo propuesto (evaluacin ex ante).
Precisa el grado de xito o fracaso del PIP, comparando los objetivos con
los resultados obtenidos.
FRECUENCIA
Puede ser variable aunque es suficiente que sea semestral o anual, a
partir de un determinado resultado en la operacin del proyecto.
METODOS CUALITATIVOS
Se basa en descripciones, diagramas, categoras, mapas, fotos.
EVALUACION DE
RESULTADOS
EVALUACION DE RESULTADO
PROCESO DE EVALUACION DE RESULTADO
1. PREPARACION
EVALUACION DE RESULTADO
PROCESO DE EVALUACION DE RESULTADO
EVALUACION DE RESULTADOS
1. PERTINENCIA
Medida en que objetivos del PIP son coherentes con beneficiarios, el
contexto (local, regional) y polticas del pas.
* Contrasta objetivos del PIP con polticas y planes
EVALUACION DE RESULTADOS
A. Relevancia dentro de polticas y prioridades del sector
El propsito fue vlido segn el marco de polticas y prioridades?
B. Satisfaccin de beneficiarios
Estn satisfechos los beneficiarios con los B/S del PIP?
Servicios han sido demandados como fue planificado?
EVALUACION DE RESULTADOS
D. Gestin de riesgos
EVALUACION DE RESULTADOS
AMBITO DE APLICACION
Es la evaluacin ms importante en la fase de post inversin
Obligatoria para todos los PIP cuya inversin a PM > LC
LINEA DE CORTE PARA RESULTADOS
SECTORES
POR MUESTREO
Educacin, cultura,
deportes y salud
> 5 millones
< 5 millones
Energa
> 6 millones
< 6 millones
> 10 millones
< 10 millones
> 6 millones
< 6 millones
Agricultura,
transporte y
saneamiento
Otros PIP
EVALUACION DE RESULTADOS
2. EFICIENCIA
Medida en que recursos e insumos empleados (fondos, tiempo, etc.) se
han convertido en productos. Es un indicador de productividad de los
recursos empleados, indicando las desviaciones entre lo programado y lo
ejecutado.
L = Metas obtenidas / Recursos empleados
EVALUACION DE RESULTADOS
A. Logro de productos
Productos previstos se ejecutaron en la misma cantidad y calidad?
Qu factores contribuyeron?, en caso negativo cules fueron las
causas?
B. Tiempo de ejecucin
El PIP se ejecut en plazos previstos en pre inversin y expediente
tcnico? (Se considerar el mes 7 siguiente a declaratoria de viabilidad
como inicio de ejecucin del PIP).
C. Costos del PIP
Se ejecut el PIP con presupuesto previsto en pre inversin y expediente
tcnico? Si fueron mayores, cules fueron sus causas? Qu acciones
tom la UE para hacer frente a los mismos y evitar posteriores
incrementos?
EVALUACION DE RESULTADOS
EVALUACION DE RESULTADOS
EVALUACION DE RESULTADOS
EVALUACION DE RESULTADOS
D. Eficiencia global
Cul ha sido la eficiencia en ejecucin del PIP considerando el logro de
productos y l a eficiencia en tiempo y costo?
NEC = Componentes ejecutados / Componentes planificados
ETE = NEC * (Periodo planificado / Periodo ejecutado)
ECE = NEC * (Costo planificado / Costo real)
E. Problemas de la ejecucin
Principales factores que influyeron en la eficiencia?
Principales dificultades y limitaciones de UE en la ejecucin del PIP?
EVALUACION DE RESULTADOS
3. EFICACIA
Grado en que se cumple el propsito del PIP tomando en cuenta los
supuestos. El cumplimiento se debe al PIP o factores externos?. Se
asocia al propsito y fines directos.
La rentabilidad social alcanzada tambin debe ser considerada
EVALUACION DE RESULTADOS
EVALUACION DE RESULTADOS
C. Rentabilidad social
Se aplicar la misma metodologa (C-B, C-E) de la preinversin
Cul es la rentabilidad social del PIP?
Cules son las razones que rentabilidad real < rentabilidad proyectada?
EVALUACION DE RESULTADOS
4. IMPACTO DIRECTO
Cambios de LP (+/-) en las variables sociales, econmicas y/o ambientales
del PIP. Se asocia con los fines del PIP.
* Impactos previstos, negativos y no previstos
A. Impactos directos previstos
Hasta que punto los impactos directos previstos (fines directos o cambios
favorables y previstos) fueron alcanzados?
Qu habr que hacer para maximizar los impactos directos previstos?
B. Impactos directos negativos y no previstos
Qu tipo de impactos (-) tiene el PIP?
EVALUACION DE RESULTADOS
5. SOSTENIBILIDAD
Continuidad de los B/S del PIP durante su vida til. Se asocia a
mantenimiento de capacidades para entregar B/S y uso de estos por los
beneficiarios.
EVALUACION DE RESULTADOS
B. Operacin y Mantenimiento
Cules son las condiciones fsicas y funcionales de productos?
Productos estn operativos?
EVALUACION DE RESULTADOS
C. Sostenibilidad financiera
Cul es el presupuesto planeado y asignado para la O y M?
Estn financiados los costos durante vida til del PIP?
Los ingresos hasta que punto cubren los costos de operacin,
mantenimiento y de reinversin en el PIP?
Cules son las probabilidades que el costo de O y M sea cubierto
durante la vida til del PIP?
D. Gestin de riesgos
Existen riesgos de desastres o de carcter social para el PIP?
Se adoptaron medidas para reducirlos? Cules?
El PIP est preparado para asumir los desastres y conflictos sociales?
EVALUACION DE RESULTADOS
E. Sostenibilidad global
Se basa en tres categoras:
Sostenible: cuando
sostenibilidad
no
se
detectan
problemas
mayores
para
EVALUACION DE
IMPACTO
EVALUACION DE IMPACTO
PROPOSITO
Determinar en trminos generales si el PIP produjo los efectos deseados
en los beneficiarios, instituciones y hogares.
Examina las consecuencias no previstas en beneficiarios (+/-)
Contribucin a la satisfaccin de necesidades
Promover condiciones de mejora de la calidad de vida, cambios de
actitudes y comportamientos
Es una medida de la eficacia que slo se puede establecer a M y LP
METODOS
EVALUACION DE IMPACTO
PASOS CLAVE
1. Determinar si se debe realizar
EVALUACION DE IMPACTO
4. Diseo de la evaluacin de impacto
Los mencionados anteriormente, entre otros
6. Recopilacin de informacin
Se puede emplear estudio de casos, grupos representativos, entrevistas,
observacin, cuestionarios y otros.
EVALUACION DE IMPACTO
INDICADORES DE IMPACTO
1. Indicador de cobertura
Ico = Beneficiarios reales / Beneficiarios previstos
2. Incremento de la produccin
Ipro = Produccin real / Produccin prevista
3. Impacto distributivo
Permite conocer en qu medida se han beneficiado las personas
(hogares) segn sus necesidades bsicas insatisfechas.
EVALUACION DE IMPACTO
EVALUACION DE IMPACTO
EVALUACION CUALITATIVA
Cules son los mayores logros del proyecto?
Cules son las mayores limitaciones que afectan el propsito del PIP?
Cmo deben ser resueltos los problemas?
Qu nuevos resultados pueden afectar el desarrollo del proyecto?
Cul es la impresin de la poblacin intervenida con relacin al PIP?
Qu lecciones pueden obtenerse del PIP?
Cules son las razones para cambiar algunas cosas del PIP?
EVALUACION DE IMPACTO
INDICADORES SELECCIONADOS
RUBRO
CARRETERA
SERVICIOS DE SALUD
Componentes
Nmero de carriles
Longitud de la va
Tipo de pavimento
Impactos directos
Frecuencia de transporte
Porcentaje de accidentes
Excedente de productos
agrcolas, pecuarios, etc.
Ratio de enfermedades
detectadas y tratadas
adecuadamente
Acciones preventivas contra
enfermedades
Beneficios directos
Nivel de cobertura
Utilizacin
Nmero de pasajeros
Tonelaje de carga
Volumen de trfico por tipo de
vehculo
Nmero de atenciones
realizadas
Pacientes atendidos
Referencias t contra
referencias
Disponibilidad
CASO: SANEAMIENTO
Tipos de PIP: agua potable, alcantarillado (letrinas), aguas residuales y
residuos slidos.
COMPONENTES DE AGUA POTABLE:
Captacin de agua (superficial, subterrnea), lnea de induccin,
conduccin, impulsin, planta de tratamiento, reservorio, estacin de
bombeo, redes de distribucin y conexiones.
COMPONENTES DE ALCANTARILLADO:
Redes de recoleccin (colectores principales, secundarios, conexiones),
interceptores, emisores, estacin de bombeo de aguas residuales, PTAR.
Otros componentes: capacitacin de operador y educacin sanitaria a
beneficiarios.
Categoras de intervencin: instalacin,
rehabilitacin y recuperacin del servicio
ampliacin,
mejoramiento,
RESUMEN
INDICADORES
SUPUESTOS
FIN
PROPOSITO
Utilizacin:
-Mayor consumo de agua
-Mayor cobertura de la oferta
Disponibilidad:
-Aumento de acceso al agua
-Mejora de calidad del servicio
-Mayor produccin y distribucin
Disponibilidad de fuentes de
agua
COMPONENTES
INDICADORES
SUPUESTOS
FIN
PROPOSITO
Utilizacin:
-Mayor cobertura de alcantarillado
-Mayor tratamiento de desages
Disponibilidad:
-Aumento de acceso a
alcantarillado
-Mejora de calidad del servicio
-Operatividad del tratamiento de
desages
COMPONENTES
-Nuevas conexiones de
alcantarillado
-Capacidad instalada de
tratamiento
CASO: SANEAMIENTO
A. EVALUACION DE CULMINACION
1. Documentacin
Estudio de preinversin, Expediente tcnico, Contratos, Planes de
trabajo (en caso de adm. directa), Actas de seguimiento, Informes de
liquidacin (fsico y financiero), Informe de supervisin, Acta de entrega
y recepcin del PIP, Convenio de transferencia, Entrevistas, talleres,
encuestas y otras investigaciones.
2. Evaluacin de eficiencia
- N, tipo (superficial, subterrnea) y capacidad o rendimiento de
fuentes de agua y de captacin de agua
- Capacidad y tipo de planta de tratamiento (agua potable y residual)
CASO: SANEAMIENTO
- Capacidad de reservorios
- Longitud y dimetro de lnea de aduccin, conduccin, impulsin
- N y capacidad de las estaciones de bombeo
- Longitud de redes de distribucin y alcantarillado
- Longitud de dimetro de interceptores, emisores y lneas de impulsin de
aguas residuales
-N de conexiones domiciliarias de agua potable, desage y piletas
CASO: SANEAMIENTO
NEC = Cant. Real* Cap. produccin /Cant. Planeada * Cap. Planeada
CASO: SANEAMIENTO
COMPONENTE
PLANIFICADO
REAL
EJECUTADO
Lnea de
conduccin (m)
815
1,209
148.3%
Reservorio (m3)
500
500
100.0%
Red de
distribucin (m)
12,060
14,185
117.6%
862
842
97.7%
7,210
6,185
85.8%
658
573
87.1%
AGUA POTABLE
Conexiones
domiciliarias
ALCANTARILLADO
Red de
alcantarillado (m)
Conexiones
domiciliarias
CASO: SANEAMIENTO
Nivel de ejecucin de componentes (NEC):
Agua potable: 842/862 = 0.977
Alcantarillado: 573/658 = 0.871
NEC global: (842 + 573)/(862 + 658) = 0.931
CASO: SANEAMIENTO
Eficiencia en el costo del PIP (EF):
RUBRO
PROGRAMADO
EJECUTADO
Agua potable
3,051,091
3,144,944
Alcantarillado
1,233,065
1,354,821
TOTAL
4,284,156
4,499,765
CASO: SANEAMIENTO
Eficiencia tiempo
MEDIA
ALTA
1.0
BAJA
MEDIA
1.0
Eficiencia costo
CASO: SANEAMIENTO
3. Evaluacin de la Sostenibilidad
- Estructura orgnica del PIP para la fase de O y M
- Asignacin de equipamiento y RR.HH adicionales para O y M
- Transferencia de conocimientos y capacitacin del personal para
operacin de equipos
- Operacin de la PTAR
- Optimizacin de la distribucin (sistema de control a distancia)
- Participacin de beneficiarios en O y M
- Disponibilidad de beneficiarios a pagar por el servicio
- Ingresos por tarifas, morosidad, costos de O y M, etc.)
CASO: SANEAMIENTO
B. EVALUACION DE RESULTADOS
- Usuarios (%) conectados a alcantarillado que han conectado el
CASO: SANEAMIENTO
EVALUACION DE RESULTADOS
DESCRIPCION OBRAS
Pozos (unidades)
PROGRAMADO
EJECUTADO
VARIACION
71.4%
12
12
100.0%
Cisternas (unidades)
100.0%
42.5
49.4
116.2%
90.6
112.4
124.1
7,848
7,780
99.1%
100.0%
33.6
29.2
86.9%
91.8
117.2
127.7%
Conexiones domiciliarias
de alcantarillado
(unidades)
7,848
7,780
99.1%
Reservorios (unidades)
Conexiones domiciliarias
PTAR (unidades
CASO: SANEAMIENTO
1. Evaluacin de Pertinencia
A. Satisfaccin de necesidades de usuarios
AGUA POTABLE:
- N de usuarios (conexiones) y tasa de crecimiento
- Consumo unitario y total de agua
- Agua facturada/no facturada
- Produccin total de agua
ALCANTARILLADO:
-N de usuarios (conexiones) y tasa de crecimiento
-Volumen de tratamiento de agua
Se debe comparar la demanda proyectada y la demanda real del PIP
CASO: SANEAMIENTO
RUBRO
Poblacin proyectada
(habitantes)
PROGRAMADO
EJECUTADO
VARIACION
63,520
70,093
6,573
Consumo de agua
(m3/mes)
14.1
10.5
-3.6%
Agua no facturada
20.0%
21.5%
1.5%
Demanda de
produccin de agua
(miles m3/mes))
1,294
986
-308
Cobertura de agua
85%
72%
-13.0%
CASO: SANEAMIENTO
SATISFACCIO
N
CANTIDAD
CALIDAD
CONTINUIDAD
TARIFA
ATENCION
AL CLIENTE
Nada
1.3%
1.5%
0.8%
3.1%
11.5%
poco
3.6%
4.2%
5.7%
16.5%
18.4%
Regular
20.3%
19.7%
17.6%
31.5%
33.8%
Mucho
31.3%
39.9%
40.4%
30.4%
22.9%
Bastante
43.5%
34.7%
35.5%
18.5%
13.4%
100.0%
100.0%
100.0%
100.0%
100.0%
TOTAL
CASO: SANEAMIENTO
B. Validez de la estrategia
Debilidades en el planeamiento y diseo del PIP:
- Limitada cobertura geogrfica de redes de APYA en comparacin al
crecimiento poblacional (baja cobertura).
CASO: SANEAMIENTO
C. Gestin de riesgos
El PIP no identific los riesgos importantes siguientes:
- Aseguramiento de terrenos donde se proyectaba fuentes de agua y
PTAR
CASO: SANEAMIENTO
2. Evaluacin de Eficiencia
3. Evaluacin de Eficacia
A. Operacin y utilizacin del PIP
Problemas de ejecucin observados:
- Carencia de terrenos para perforar pozos y PTAR
- Cambio de tecnologa de PTAR
- Habilitaciones no consideradas
CASO: SANEAMIENTO
RUBRO
METAS
LOGRADAS
METAS
PLANEADAS
RATIO (L/P)
AGUA POTABLE
Produccin de agua
(miles m3/ao)
1,345
1,892
71.1%
N conexiones activas
8,432
10,050
83.9%
9.9
14.2
69.7%
22.5
24.0
93.8%
78.8%
80.0%
98.5%
8,185
10,110
81.0%
896
1,275
70.3%
96.0%
94.0%
102.1%
Consumo promedio
agua por conexin
(m3/mes)
Continuidad domiciliaria
(horas)
Agua facturada
ALCANTARILLADO
N conexiones activas
Volumen de tratamiento
(miles m3/ao)
Eliminacin de DBO en
PTAR
CASO: SANEAMIENTO
- Habilitaciones no consideradas
RUBRO
PROGRAMADO
EJECUTADO
Cobertura de gua
potable
89.4%
63.3%
Cobertura
alcantarillado
89.3%
62.4%
Continuidad de
servicios de agua
potable (horas)
24.0
22.9
Nivel adecuado
Nivel apropiado
CASO: SANEAMIENTO
RUBRO
EX ANTE
EX POST
VANS (miles de
soles)
45,812
28,134
TIRS
33.7%
22.4%
CASO: SANEAMIENTO
CASO: SANEAMIENTO
E. Impactos directos del PIP
RUBRO
LINEA DE
BASE
BENEFICIARIOS
NO
BENEFICIARIOS
IMPACTO
DEL PIP
LAVADO DE MANOS
Antes de comer
25%
42%
30%
12%
23%
35%
28%
7%
7%
17%
8%
9%
70%
95%
87%
8%
282
82
162
-80
60
268 (con
servicio)
138 (sin
servicio)
130
(diferencia)
ALMACENAMIENTO
DE AGUA
Lavado de depsito
TRATAMIENTO DE
AGUA PARA BEBER
CASO: SANEAMIENTO
CONCLUSIONES