Documentos de Académico
Documentos de Profesional
Documentos de Cultura
2 Curso - Taller Tipos de Evaluación Oaxaca
2 Curso - Taller Tipos de Evaluación Oaxaca
Fecha 00/00/2016
Curso - Taller
“Instrumentos de evaluación para programas
sociales”
Agosto, 2019
Sede donde se realizará
Oaxaca, Oaxaca la presentación
www.coneval.org.mx
Contenido
6 Otras evaluaciones
¿Qué sería de la vida sin médicos?
Pensemos en un resfriado
Consecuencias Consecuencias
gripa
Neumonía
• Fiebre elevada • Picor de garganta fuerte
• Tos • Estornudos
• Jadeos • Congestión nasal
• Dolores torácicos • Cansancio
• Taquicardia • Dolor de cuerpo generalizado
• Dificultad para respirar • Fiebre alta
• Vómitos Consecuencias
¿Por qué es importante evaluar los resultados?
3 Mejorar el desempeño, el
diseño, la planeación,
operación y presupuestación
de la Política Social
http://www.elfinanciero.com.mx/elecciones-2018/esta-candidata-independiente-promete-bajar-el-precio-de-la-cerveza
Con buena voluntad
Fuente: http://www.diariodeantequera.com/dif-municipal-regalara-3-vestidos-de-novia-a-mujeres-oaxaquenas//
Uso de información y evidencia
Seguridad Alimentaria
¿Cuál es el problema? ¿Por qué se genera?
Con base en la información y la evidencia
Seguridad Alimentaria
¿Cuáles intervenciones funcionan y cuáles no?
Asistencia Alimentaria
a Familias en
Desamparo
• Familias en situación
de pobreza; familias
en situación de
desastre.
• Entrega mensual de
una dotación de
insumos (despensa)
conformada por 4 o
más alimentos
básicos
El gobierno está para conseguir
resultados para la población
Diagnósticos y otras
herramientas Uso de la información Internas y Externas
3. Seguimiento de
recomendaciones
¿Qué se espera de la evaluación?
Valoración Pertinencia y
alcance de los Profundizar sobre Valoración de las
sintética de la Medir los efectos aspectos políticas y
información del indicadores de un netos del
programa relevantes del estrategias de
programa en el programa desempeño desarrollo social
SED
Horizonte de monitoreo y evaluación
¿Cuándo se evalúa?
Etapas Evaluación
Monitoreo
E0
Diseño de la Matriz
de Indicadores (MIR)
Diagnóstico de la problemática social
Definición de Indicadores para contribuir a
objetivos sectoriales
E1
Evaluación de Diseño
Ficha de Monitoreo
E2
Evaluación de Consistencia y
Mejora de MIR y Medición de Indicadores
Resultados
E3
Aprobación de indicadores
Evaluación de Evaluación de
Procesos Impacto
E4
Implementación de Sistema de Monitoreo
La etapa 0 corresponde al periodo en el que se diseña la estrategia o programa. A partir de la etapa 1, corresponde al año de operación del programa.
Actividad 1
¿Qué tipo de evaluación debo utilizar?
¿Qué
Nombre del Tiempo de ¿Qué se busca
Información disponible evaluación Justificación
programa operación hacer?
realizar?
Diagnóstico, reglas de
operación, MIR, El programa tiene más de tres
Identificar por qué
lineamientos para la años en operación, permite
Apoyo a la Cuatro hay demoras en la Procesos
entrega de los bienes y identificar los cuellos de
educación años entrega de los bienes
servicios, evaluación de botella
indígena y servicios
diseño, padrón, mapa de
procesos
Programa de Inició
El programa tiene un año de
fomento a la operacione
Cuenta con diagnóstico, operación y cuenta con
actividad s 2017
reglas de operación, MIR, Diseño información necesaria para
pesquera y Se Mejorar la MIR
padrón de beneficiarios, llevar a cabo una evaluación
acuícola local rediseñó
información presupuestal de diseño.
en mayo
2018
Antecedentes
Definir el problema
y justificar un Programa de Fomento del
Identificar y Patrimonio Cultural
problema público. Presupuesto describir el Indígena
problema
Elementos
mínimos del
diagnóstico
Definir y
Diseño del
justificar los
programa
objetivos Programa de Apoyo para la
Productividad de la Mujer
Emprendedora
Cobertura
3.2 Determinación y
justificación de los objetivos
de la intervención
Diagnóstico de programas nuevos
4. Cobertura
5. Diseño de la intervención
6. Presupuesto
6.1 Fuentes de
financiamiento
6.2 Impacto
presupuestario
Actividad 2
¿Cómo identificar el problema?
26
Actividad 2
¿Cómo identificar el problema?
El problema público:
28
Evaluación de
Diseño
Evaluación de Diseño
Apartados:
7 - 12 16 - 26 Presupuesto y rendición
02 06 de cuentas
27 - 29
Justificación de la 4-6
Complementariedade
creación y del diseño Apartado de la 30 07 s y coincidencias con
del programa 01 1-3
evaluación
otros programas
federales
Criterios generales para responder a
las preguntas
30
sustentando con evidencia
mediante un esquema
documental y haciendo
binario (SÍ/NO)
explícitos los principales
argumentos empleados en
preguntas el análisis
6 preguntas abiertas
Niveles de respuesta
NO = 0 SI = 1-100
Congruencia entre
Anexos
respuestas
Pregunta
Respuesta
1 cuartilla
Justificación
Justificación de la creación y
del diseño del programa
Presupuesto y rendición de
cuentas Existe justificación teórica o
empírica documentada
Complementariedades y
coincidencias con otros
programas federales
Justificación de la creación y
del diseño del programa
Presupuesto y rendición de
cuentas ¿Cómo está vinculado el
Propósito del programa con
Complementariedades y los Objetivos del Desarrollo
coincidencias con otros del Milenio
programas federales
Justificación de la creación y
del diseño del programa
6
4
Presupuesto y rendición de
cuentas
3
Complementariedades y
coincidencias con otros
programas federales
Justificación de la creación y
del diseño del programa
Presupuesto y rendición de
cuentas Recolección
de información
Complementariedades y
coincidencias con otros
programas federales
Justificación de la creación y
del diseño del programa
Es posible identificar el
Presupuesto y rendición de resumen narrativo de la MIR Modificaciones en la MIR del
programa
cuentas
Complementariedades y
coincidencias con otros
programas federales
Justificación de la creación y
del diseño del programa
Presupuesto y rendición de
cuentas Los procedimientos de
ejecución de obras y/o
Complementariedades y acciones
coincidencias con otros
programas federales
Justificación de la creación y
del diseño del programa 7.- Complementariedades y
coincidencias con otros
Contribución a las metas y programas
estrategias nacionales
Presupuesto y rendición de
cuentas
Complementariedades y
coincidencias con otros
programas federales
Actividad 3
Realicemos el apartado 5 de la evaluación de Diseño
Instrucciones:
44
Evaluación y análisis de la Matriz de
Indicadores para Resultados
De la lógica vertical de la MIR
16. Para cada uno de los Componentes de la MIR del programa existe una o un
grupo de Actividades que:
a) Están claramente especificadas, es decir, no existe ambigüedad en su redacción.
b) Están ordenadas de manera cronológica.
c) Son necesarias, es decir, ninguna de las Actividades es prescindible para producir
los Componentes.
d) Su realización genera junto con los supuestos en ese nivel de objetivos los
Componentes.
Nivel Criterios
• Del 0 al 49% de las Actividades cumplen con todas las características establecidas en la
1
pregunta.
• Del 50 al 69% de las Actividades cumplen con todas las características establecidas en la
2
pregunta.
• Del 70 al 84% de las Actividades cumplen con todas las características establecidas en la
3
pregunta.
• Del 85 al 100% de las Actividades cumplen con todas las características establecidas en la
4
pregunta.
Evaluación y análisis de la Matriz de Indicadores para
Resultados
De la lógica vertical de la MIR
Nivel Criterios
• Del 0 al 49% de los Componentes cumplen con todas las características establecidas en la
1
pregunta.
• Del 50 al 69% de los Componentes cumplen con todas las características establecidas en la
2
pregunta.
• Del 70 al 84% de los Componentes cumplen con todas las características establecidas en la
3
pregunta.
• Del 85 al 100% de los Componentes cumplen con todas las características establecidas en la
4
pregunta.
Evaluación y análisis de la Matriz de Indicadores para
Resultados
De la lógica vertical de la MIR
Nivel Criterios
1 • El Fin cumple con dos de las características establecidas en la pregunta.
2 • El Fin cumple con tres de las características establecidas en la pregunta.
3 • El Fin cumple con cuatro de las características establecidas en la pregunta.
4 • El Fin cumple con todas las características establecidas en la pregunta.
Evaluación de consistencia y
resultados
Evaluación de Consistencia y
resultados
Conclusiones
Estructura de la Evaluación de Consistencia
y resultados
Preguntas
13 17
Diseño Operación
3 8
El vinculo con la planeación nacional, la consistencia con la normatividad y las
Diseño
posibles complementariedades o coincidencias con otros programas federales.
Planeación y
orientación a Los instrumentos de planeación y orientación a resultados.
resultados
Percepción de la Identificar el rigor de los instrumentos con los que cuenta el programa para
Población Atendida medir el grado de satisfacción de los beneficiarios.
51 preguntas
Sí, completo,
cumple con
todas las
Sí, completo y características y
cumple con lo utiliza y/o
Sí, completo pero
todas las actualiza
no cumple con
características
todas las
Sí, pero características
incompleto
Nivel 4
Nivel 2 Nivel 3
Nivel 1
Si el programa no cuenta con documentos ni evidencias INEXISTENTE (NO)
Cobertura y Focalización
Operación
Análisis de la
población potencial
Percepción de la Población Análisis de posibles y objetivo y
Atendida complementariedades mecanismos de
y coincidencias con elegibilidad
otros programas
Medición de Resultados federales
Evaluación y análisis de
la matriz de indicadores
para resultados
Diseño
Planeación y Orientación a
Resultados
Cobertura y Focalización
Planeación y
Operación orientación a
resultados
Percepción de la Población
Atendida
De la generación de
Medición de Resultados
información
Diseño
Planeación y Orientación a
Resultados
Cobertura y Focalización
Análisis de cobertura
Operación
Percepción de la Población
Atendida
Medición de Resultados
Diseño
6
Planeación y Orientación a
Resultados 1
5
Cobertura y Focalización
Operación
Operación
Percepción de la Población 2
Atendida
4
Medición de Resultados
3
Diseño
Planeación y Orientación a
Resultados
Percepción de la Población
Atendida
Medición de Resultados
Diseño
Planeación y Orientación a
Resultados
Percepción de la Población
Atendida
Medición de Resultados
Actividad 4
Instrucciones:
Ficha técnica
Presupuesto y rendición de
Población potencial, objetivo cuentas
y mecanismos de
elegibilidad
Instrumentos Percepción de la
población atendida
Diseño
Padrón de beneficiarios y
mecanismos de atención
Operación
Cobertura y Focalización
Evaluación de procesos
Evaluación de procesos
1
Describir los procesos del programa
2 Identificar los problemas normativos que obstaculizan los
procesos
3
Analizar el grado de gestión y articulación de los procesos
Instrucciones
Solución
Diseño de la intervención
Estructura
Objetivos de la evaluación Guión del Análisis de
Factibilidad de
Evaluación de Impacto
Metodología aplicable
Evaluación complementaria
Evaluación Complementaria
1
• Diagnosticar y analizar una
problemática pública, así como la
2
respuesta gubernamental para • Aportan información
atenderla. valiosa para el diseño
de políticas públicas.
Población y Cobertura
Alineación y presupuesto
Indicadores
Información adicional
Conclusiones
Observaciones
Evaluación Específica de Desempeño (EED)
Población y Cobertura
Alineación y presupuesto
Indicadores
Información adicional
Conclusiones
Observaciones
Objetivo
Impulsar la transparencia y
1 la rendición de cuentas
Objetivos estratégicos de las
Difundir de forma dependencias y entidades,
2 permanente la información Matriz de Indicadores de los
programas, y
Difundir páginas de internet,
3 lugar visible y de fácil Resultados de las evaluaciones
acceso externas.
Entrega a
actores relevantes Congreso, Finanzas, Gubernatura, Planeación.
Información para
Congreso estatal, Secretaría de Finanzas,
proceso presupuestario
Planeación
Difusión a
Página electrónica, prensa y Sociedad civil
prensa y sociedad civil
Seguimiento a
Documentos de trabajo
recomendaciones
Instrumentos CONEVAL
Instrumentos CONEVAL para impulsar la
mejora de los programas y políticas
Ficha de Monitoreo
Objetivo
Evaluar los programas y acciones federales de desarrollo social que muestre
sus resultados, cobertura, vinculación con el sector, así como sus
fortalezas, oportunidades, debilidades, amenazas, recomendaciones, las
acciones que ha realizado derivado de las evaluaciones, así como los
avances del programa en el ejercicio fiscal actual evaluado con el anterio.