2

Evaluabilidad

33
Recapitulemos

34
Planificación, seguimiento y evaluación

EVALUACIÓN PLANIFICACIÓN

Actividad programada y puntual de Proceso mediante el cual se establecen los

recolección, análisis e interpretación de la objetivos de la política (productos,
información que permite emitir una resultados e impactos esperados) y los
valoración fundamentada sobre el diseño, medios para alcanzar dichos objetivos, en
la implementación, los resultados o los respuesta a problemas o a necesidades
impactos de una intervención. prioritarias.

SEGUIMIENTO - MONITOREO

Proceso continuo que se desarrolla durante la ejecución de la política para recolectar y

producir información relevante que permita introducir los ajustes necesarios para el logro de
los resultados, o bien, generar conocimiento sobre el contexto de la intervención. 35
 Evaluación
Apreciación sistemática y objetiva de un proyecto, programa o política en curso o
terminado, su diseño, implementación y resultados con base en método científico
(OCDE).

[juicio con referencia a un valor]

[ciencia de la comparación]

[lenguaje de programación]

36
La evaluación según el momento de su implementación (I)

Evaluación ex dure

Se realiza durante la implementación a fin de observar su

funcionamiento y el logro de los productos, entre otros aspectos.

PREINVERSIÓN INVERSIÓN EJECUCIÓN

Evaluación ex ante Evaluación ex post

Refiere al examen o valoración de una propuesta
de intervención que busca solucionar o mitigar
problemas o necesidades que aquejan a una
comunidad de personas antes de que esta se
realice. Precede a la asignación de los recursos que
permitirán, luego, su implementación.
Analiza la materialización de lo planificado, una vez
que la intervención ha concluido o durante su
ejecución. Otorga información relevante para
tomar decisiones que mejoren el diseño, la gestión
de los recursos o incluso decidir la continuidad o
término de la iniciativa.
37
¿Por qué realizar una evaluación ex ante?

Ventajas:
Evita llevar a cabo
programas que no Se identifican
responden a problemas tempranamente los ➔ Permite elaborar mejores proyectos/programas.
concretos, que tienen resultados e impactos
diseños débiles o que esperados
tendrán muy bajo
➔ Permite incluir otros puntos de vista: la de todos
rendimiento
los actores involucrados en la problemática.

➔ Promueve un proceso transparente y de

Permite diseñar
rendición de cuentas
programas eficientes, Brinda la opción de
aplicando las analizar cómo cambiarían
intervenciones que los resultados e
➔ Redunda en un aprendizaje por parte de los
permitirán obtener los impactos esperados si se
mejores resultados con modifican algunos de los equipos.
el menor costo posible parámetros del programa

38
Para debatir

¿Dudas?

39
Puesta en común de la 1ra actividad

Presentación de la política o proyecto con la que cada grupo trabajará el diseño de una
evaluación ex ante o el análisis de evaluabilidad.

➔ Descripción de la intervención.
➔ Problema que se busca resolver.
➔ Mapeo de los principales actores involucrados en el programa/proyecto.

40
 Evaluabilidad
El nivel en el que una actividad o proyecto puede ser evaluado en forma confiable y
creíble (OCDE).

Grado en el que las características particulares del diseño de un programa o plan

afectan a la habilidad de proveer una evaluación efectiva (Youtie, Bozeman y
Shapira, 1998).

[capacidad de brindar información confiable]

41
El análisis de evaluabilidad

Facilita la identificación de mejoras en el diseño de la evaluación, la matriz de

monitoreo y evaluación, y el programa o plan en sí mismo.

Permite recabar información de alto valor estratégico para que los actores
involucrados en la evaluación definan sus cursos de acción.

Permite optimizar el presupuesto del programa y, sobre todo, el de la porción

destinada a evaluación, ya que evita grandes inversiones inadecuadas o
innecesarias y brinda una justificación basada en valoraciones concretas de los
gastos que se deben realizar para las necesidades del programa o plan en cuestión.

Implica un aporte a la transparencia y a la rendición de cuentas.

42
Motivos

¿Para qué hacer un análisis de evaluabilidad?

➔ Asegura la capacidad de las políticas para producir información de calidad.

➔ Es un análisis costo-efectivo, en tanto implica una actividad de pre-evaluación con

bajo costo que permite prepararse mejor para la evaluación de programas o políticas.

➔ Es útil como instrumento de mejora de la gestión de la política.

➔ Mejora los procesos de toma de decisiones.

43
¿Qué miran los análisis
de evaluabilidad?
(algunos, ¡no llegamos a ver todos!)

44
Componentes

Calidad de la
Calidad de la
planificación y del Calidad del sistema de Recursos destinados
estrategia de Estrategia de actores
diseño de la información a la evaluación
evaluación prevista
intervención

Existencia y
Diagnóstico y calidad de los Tipo de estrategia
causas de los indicadores Presupuesto
problemas Identificación de
actores
Fuentes de Propósitos y
información alcance
Objetivos/resultad
os esperados Tiempos
cuantificables Mecanismo de Utilización de
recolección de resultados y
datos retroalimentación Participación de
actores en el
Línea de base proceso de
Archivo, registro y Difusión de hallazgos evaluación Recursos humanos
Temporalidad gestión de los y sistematización de
datos lecciones

45
 Evaluabilidad
En un contexto de baja institucionalización de
los sistemas de M&E: ¿están las PP en
condiciones de producir información de calidad?

https://www.cippec.org/especial/calidad-de-la-
de-informacion/?fbclid=IwAR0GDUtfKSio49_H
8upA4ooZC12ULmyMnQdsl7p4iG6ClzmPeeZPs
5CKyYo

46
 Evaluabilidad de PP sociales nacionales

Dimensión 1 Dimensión 2 Dimensión 3 Dimensión 4

Calidad del diseño y

Calidad del sistema de Calidad de la estrategia
planificación de la Recursos
monitoreo e información de evaluación
intervención

• Diagnóstico • Recolección de información • Preguntas de evaluación

• Objetivo • Tipo de indicadores • Definiciones sobre • Definición de presupuesto
• Metas relevados metodología • Dedicación de recursos
• Teoría de cambio • Sistematización de la • Ciclo de la evaluación humanos
información

10 preguntas 13 preguntas 9 preguntas 3 preguntas

40% 30% 20% 10%

Resultados: dispersión por dimensión

Diseño Sistemas Estrategia Recursos ◆ Gran dispersión en el índice y dentro de cada

dimensión.

◆ Las primeras dos dimensiones tienen resultados

mucho mejores (diseño y sistemas de M&E)

◆ La estrategia de evaluación es la dimensión con

peor desempeño y mayor dispersión del índice.

◆ Existen políticas que se destacan, como el

SUMAR (entre otros programas de salud), la
AUH o el ENIA.
 39,9%
es el promedio del índice en las 35 políticas, con un mínimo de 16.6 y un máximo
de 88.7, sobre 100 puntos

49
¿Cómo se hacen?

50
Planificación

Se enfocan en proyectos
antes que en planes o
programas

Se hacen durante el diseño,

Alta relación
ex ante o durante la
costo-efectividad.
evaluación

¿Internos o externos? ¿Mandatorios o voluntarios?

51
Proceso
• 1. Descripción el perímetro del proyecto
• 2. Identificación de los recursos documentales disponibles
• 3. Revisión de la lógica/teoría de cambio
• 4. Realización de consultas con los actores
• 5. Elaboración de conclusiones
• 6. Recomendación de mejoras
• 7. Socialización de resultados
Trabajo final

En base a la política/proyecto seleccionada, elaborar el diseño de una evaluación ex ante, incluyendo:

➔ Contexto de la política/proyecto.

➔ El análisis de antecedentes.

➔ La descripción de la intervención, el problema que busca resolver y los actores implicados.

➔ Las preguntas que guían la evaluación

➔ Los indicadores a través de los cuales se operacionalizan las preguntas.

➔ La hoja de ruta prevista, donde se indiquen las técnicas de relevamiento a utilizar

53
Gracias!
natalia.aquilino@gmail.com | aracelidiaz64@gmail.com

ESPECIALIZACIÓN EN DIRECCIÓN Y GESTIÓN DE PROYECTOS

54