Documentos de Académico
Documentos de Profesional
Documentos de Cultura
ORIENTADA A RESULTADOS:
Manual Metodológico para la Planificación
y Evaluación de Programas Sociales
PRESENTACIÓN ___________________________________________________ 4
Acerca de la Metodología de Gestión Integral de Programas Sociales
Orientada a Resultados________________________________________________ 7
MODULO 1:PLANIFICACIÓN DE PROGRAMAS SOCIALES ____________ 15
INTRODUCCIÓN _____________________________________________________ 16
UNIDAD 1____________________________________________________________ 18
La metodología de planificación de programas sociales en el marco de la Gestión Integral
orientada a Resultados. _______________________________________________________ 18
El punto de partida para la planificación de los programas sociales: Identificación y
delimitación del problema social que da origen al programa. __________________________ 18
Guía para la identificación y selección del problema social ___________________________ 19
UNIDAD 2____________________________________________________________ 23
Los momentos metodológicos de la planificación de programas sociales 23
Momento metodológico 1: Descripción del problema social. __________________________ 23
Momento metodológico 2: La explicación del problema _____________________________ 32
Momento metodológico 3: Construcción de la visión del programa social________________ 41
Momento metodológico 4: Identificación de los componentes del programa social _________ 44
Momento metodológico 5: Diseño de las actividades del programa social e identificación de las
instancias responsables de su ejecución. __________________________________________ 48
Momento metodológico 6: Formulación del programa social __________________________ 54
MODULO 2: EVALUACION DE PROGRAMAS SOCIALES_______________ 59
INTRODUCCION _____________________________________________________ 60
UNIDAD 3____________________________________________________________ 62
Aspectos conceptuales y metodológicos de la evaluación en el marco de la
Gestión Integral Orientada a Resultados _______________________________ 62
Introducción a la evaluación de programas sociales _________________________________ 62
La evaluación en el marco de la Gestión Integral de Programas Sociales Orientada a
Resultados ______________________________________________________________ 64
¿Qué es la evaluación de programas sociales? _________________________________ 64
¿En qué consiste la evaluación de un programa social? _________________________ 66
¿Para qué se evalúa un programa social?_____________________________________ 66
¿Cuándo se realiza la evaluación de un programa social? _______________________ 67
¿Quién realiza la evaluación de los programas sociales? ________________________ 67
La evaluación en las fases de planificación, ejecución y finalización del desarrollo de programas
sociales. ___________________________________________________________________ 70
Evaluación de la planificación del programa. _________________________________ 70
Evaluación de la ejecución del programa _____________________________________ 71
Evaluación de la finalización del programa ___________________________________ 72
Los momentos metodológicos para el desarrollo de las evaluaciones de programas sociales__ 74
El diseño de la evaluación _____________________________________________________ 76
Consideraciones generales _________________________________________________ 76
Pasos metodológicos para el diseño de la evaluación de programas sociales_________ 78
UNIDAD 4____________________________________________________________ 85
Las instrumentos para la evaluación de Programas Sociales ____________ 85
La evaluación ex-ante ________________________________________________________ 86
Características y Finalidades _______________________________________________ 86
Tipos de viabilidad para el trabajo con la evaluación ex-ante ____________________ 86
Procedimiento sugerido para el trabajo con la evaluación ex-ante ________________ 88
El monitoreo ______________________________________________________________ 104
Características y finalidades ______________________________________________ 104
Procedimiento sugerido para el diseño del monitoreo __________________________ 105
La evaluación diagnóstica ____________________________________________________ 115
Características y finalidades de la evaluación diagnóstica ______________________ 115
Procedimiento sugerido para el trabajo con la Evaluación Diagnóstica ___________ 116
La evaluación desde la perspectiva de los beneficiarios _____________________________ 121
Características y finalidades ______________________________________________ 121
Procedimiento sugerido para el trabajo con la evaluación desde la perspectiva de los
beneficiarios____________________________________________________________ 123
Elementos metodológicos a considerar en el diseño de una evaluación desde la
perspectiva de los beneficiarios ____________________________________________ 125
La evaluación de resultados___________________________________________________ 127
Características y finalidades ______________________________________________ 127
Procedimiento sugerido para el trabajo con la evaluación de resultados __________ 129
La evaluación de impactos____________________________________________________ 135
Características y finalidades ______________________________________________ 135
Procedimiento sugerido para el trabajo con esta la evaluación de impacto ________ 140
ANEXO 1 ___________________________________________________________ 145
METODOLOGÍAS PARA LA CONSTRUCCIÓN DE MUESTRAS __________________ 145
ANEXO 2 ___________________________________________________________ 147
TECNICAS CUALITATIVAS DE RECOLECCION DE INFORMACION _____________ 147
ANEXO 3 ___________________________________________________________ 149
TERMINOS DE REFERENCIA _______________________________________________ 149
ANEXO 4 ___________________________________________________________ 159
EJEMPLO DE PROGRAMA SOCIAL PARA EL TRABAJO DE TALLER____________ 159
BIBLIOGRAFIA______________________________________________________ 166
GLOSARIO _________________________________________________________ 170
PRESENTACIÓN
• Contribuir a optimizar los recursos con los que cuentan los organismos
para la solución de problemas sociales de las poblaciones beneficiarias.
1
Las etapas son divisiones cerradas y terminales de un proceso; una etapa se inicia, se desarrolla, se termina, da
origen a otra etapa y no se puede volver a la anterior. Un momento metodológico, en cambio, es un período de
tiempo en el cual se enfatiza un aspecto específico de la gestión del programa pero que nunca se termina sino que
continuamente se está volviendo a él.
2
La planificación, desde un enfoque tradicional, se concibe como un diseño del "deber ser" de la realidad, es
decir, como la formulación de un documento que contiene un diagnóstico, unos objetivos y acciones para
alcanzarlos. Desde esta perspectiva, la planificación constituye un producto alcanzado en la etapa previa a la
ejecución y no un proceso que se continúa a lo largo de la vida de un programa.
• desagrega el programa en componentes, objetivos específicos, acciones,
tareas y recursos que son necesarios para transformar la problemática
social identificada y analizada
• registra los elementos del programa en la formulación de un documento
que constituirá la base para el inicio del proceso de ejecución que, a su
vez, servirá como insumo para las correcciones o reajustes necesarios
de dicha planificación.
Este contexto incierto y cambiante del programa social hace necesario, por
un lado, realizar un continuo análisis del entorno mediato e inmediato del
programa para detectar los problemas y aspectos que podrían obstaculizar
la ejecución del mismo y, por otro, obligar a recalcular lo planificado. El
análisis del entorno implica también el diseño de estrategias para viabilizar la
ejecución y el logro de los resultados.
3
Tradicionalmente, la evaluación se ha concebido como una etapa de la gestión que debe ser cumplida en dos
tiempos:
a. Antes de la aprobación y ejecución del programa, para evaluar su factibilidad (Evaluación Ex-Ante).
b. Después que ha finalizado la ejecución del programa para conocer sus resultados e impactos (Evaluación
Ex-Post).
GESTION INTEGRAL DE
PROGRAMAS SOCIALES
ORIENTADA A RESULTADOS
PLANIFICACION EVALUACION
EJECUCION
Momentos de la Planificación
Ejemplo:
• Altos niveles de morbi-mortalidad infantil.
• Altos índices de desocupación.
• Bajo nivel de calidad de la educación.
Todo problema social debe tener una delimitación social y geográfica inicial
para que sea posible operar sobre él. La delimitación social está relacionada
con la población que está afectada por el problema social, la misma que
posteriormente, en el proceso de planificación, se precisará de mejor manera
a través de la focalización. La delimitación geográfica tiene que ver con el
espacio geográfico en el cual se presenta el problema.
Ejemplo:
• Altos niveles de morbi-mortalidad de los niños de familias urbano-marginales.
• Altos índices de desocupación de la población pobre del país y/o de la provincia
X.
• Bajo nivel de calidad de la educación de las escuelas urbano-marginales del
país y/o de la provincia Y.
Guía para la identificación y selección del problema social
Ejemplo:
• La Secretaría de Desarrollo Social de la Provincia X.
• Ministerio de Trabajo de la Provincia X.
Ejemplo:
• Mercado Laboral;
• Desocupados
Ejemplo:
• Empleo en negro.
• Empleo precario.
• Bajo o nulo nivel de ingresos monetarios de ocupados y subocupados.
• Subempleo.
• Desocupación abierta.
• Empleo inestable.
Ejemplo:
• Desocupación abierta en la provincia X.
c. Establecer pesos para cada enunciado en cada criterio. Cada uno de los
pesos que se asignen debe estar basados en información y deben
obtener el consenso del equipo de trabajo. Se propone la siguiente
escala de pesos: Alto: 3, Medio: 2, Bajo: 1 y Nulo: 0.
Empleo en 1.200.000 2 2 2 6 2
negro
Desocupación 900.000 2 3 3 8 1
abierta
Baja 100.000 1 2 2 5 3
capacitación
laboral
1- Leer la Guía para la identificación y selección del problema social (Pág. 20)
4- Informar por escrito las conclusiones por ustedes elaboradas, de cada uno de los
puntos de la guía.
UNIDAD 2
♦Pregunta clave:
Los criterios pueden ser, entre otros, edad, sexo, ingreso familiar, situación
de pobreza o de vulnerabilidad, situación laboral, situación nutricional,
etcétera.
Ejemplo: Se atenderá prioritariamente a poblaciones con las siguientes
características generales cuya definición se irá realizando:
Ejemplo:
5) Precisar el problema.
Ejemplo:
• “Alto número de población pobre, con bajo nivel educativo, que está
desocupada en la provincia de Surenzuela”
Ejemplo:
“Alto número de población pobre, con bajo nivel educativo, que está
desocupada en la provincia de Surenzuela”.
Ejemplo:
• Desocupados
• Población pobre
• Población pobre con bajo nivel educativo
Ejemplo:
Desocupados, significa:
Ejemplo:
• Nº de personas que tienen necesidades básicas insatisfechas y que no
trabajan.
• Nº de personas que tienen necesidades básicas insatisfechas, que
trabajan sólo dos horas a la semana y que buscan trabajo activamente.
• Nº de personas con NBI que no tienen educación secundaria
Ejemplo:
Indicadores simples
• Nº de personas desocupadas
• Nº de cursos de capacitación
• Total de ingresos de los hogares
• Nº de personas que tienen acceso al agua potable, etc.
Indicadores complejos:
• Nº de acciones ejecutadas / Nº de acciones programadas
• Nº de niños menores de 14 años que trabajan / Nº total de niños menores
de 14 años
• Nº de personas con NBI desocupadas / Nº total de personas desocupadas
En esta actividad grupal, se propone identificar los indicadores del problema que da
origen al programa social, teniendo en cuenta las metodologías para la
construcción de indicadores y para la definición de la línea de base presentadas en
el momento metodológico ”Descripción del problema social”: Los integrantes del
grupo deberán:
♦Pregunta clave
• ¿Cuáles son los factores que producen el problema social que origina el
programa?
Ejemplo:
Factor 1
Factor 2
Factor 3…
… Factor n
a. Listar, tanto en las columnas como en las filas, todos los factores
explicativos que quedaron en el ámbito de acción del programa.
b. Analizar el nivel de incidencia que cada factor tiene sobre los otros. La
pregunta clave es: Si se modifica el factor 1, ¿en qué medida se modificará
el factor 2, el factor 3, el factor n?
d. Identificar los factores críticos, es decir los que tienen mayor nivel de
incidencia sobre los otros. Se seleccionarán tantos factores críticos como
sea necesario para transformar todos los factores explicativos que se
encuentran en el ámbito de acción del programa. También se pueden
considerar como factores críticos aquellos que en las columnas sean
identificados como factores que no son incididos por ningún otro dentro de
la red causal explicativa.
Se han cruzado los nueve factores que están dentro del ámbito de acción del
programa y se ha analizado el nivel de incidencia que tiene cada uno de
ellos en los otros. La suma total de los valores asignados a cada uno de los
factores, que se consigna en la última columna, indica que los factores con
mayor nivel de incidencia son:
Actividad de aprendizaje Nº 2
1. Construir una red explicativa del problema considerando los diferentes planos de
explicación (factores explicativos directos, indirectos y estructurales).
.
Momento metodológico 3: Construcción de la visión del programa
social
♦Pregunta clave
Ejemplo:
“Falta de crédito para microempresas y PYME´s” pasará a formularse: “Se
otorgarán créditos a microempresas y PYME´s”.
Este Instrumento permite graficar la visión del programa social. Registra con
claridad las estimaciones acerca de los cambios esperados en los
indicadores y factores críticos del programa tras la ejecución del programa.
Número de personas de la
provinicia de Surenzuela que
tienen necesidades básicas
insatisfechas, que trabajan sólo
dos horas a la semana y que
Se otorgarán buscan trabajo activamente. 120.000
créditos a a 100.000
microempresas
y PYME´s Número de personas de la
provincia de Surenzuela que no
tienen educación secundaria,
que trabajan sólo dos horas a la
Se elevará semana y que buscan trabajo
el nivel activamente 80.000
de ingreso a 40.000
Actividad de aprendizaje Nº 3
♦Pregunta clave
Ejemplo:
Veamos cómo los factores críticos de un problema dan lugar a la formulación
de componentes:
Ausencia o bajo nivel de ingreso familiar Elevación del nivel de ingreso familiar.
4
Anticipamos que los objetivos específicos determinan la finalidad de los componentes que se
implementarán en el programa social, y una actividad es un conjunto de tareas que se deben realizar
en cada componente del programa en un período dado y en base a recursos determinados.
- Recursos con los que cuentan las distintas instancias de la institución
ejecutora y otros actores que participan directamente en el desarrollo
del programa;
Este instrumento registra cuáles son los organismos que actualmente están
desarrollando actividades relacionadas con cada componente del programa.
De esta manera, permite conocer:
• las actividades que se están ejecutando desde otros organismos;
• los vacíos de actividad (aquellos componentes que no tienen ninguna
acción en desarrollo);
• duplicidad o superposición de actividades, es decir, las mismas
acciones para el mismo componente;
• la ausencia de organismos que deberían estar actuando.
Actividad de aprendizaje Nº 4
Esta actividad grupal apunta a diseñar los componentes del programa social que
atenderá el problema social que el equipo ha estado investigando y para el cual ya
se ha elaborado una visión.
Desde la perspectiva del problema social, las actividades del programa son
los medios que se dirigen a modificar un factor crítico de ese problema. Por
esa razón las actividades se agrupan en componentes. Metodológicamente,
una actividad es un conjunto de tareas que se deben realizar en relación con
cada componente del programa en un período especificado y con base en
unos recursos previamente determinados.
♦Preguntas claves
Ejemplo:
Actividad 1.1.
Fomento y convocatoria para la presentación de micro-proyectos
productivos comunitarios.
Actividad 1.2.
Evaluación y aprobación de los proyectos presentados.
Actividad 1.3.
Entrega de un monto para incentivar el desarrollo de los proyectos
productivos.
Actividad 1.4.
Supervisión de la realización de los proyectos.
Las tareas son acciones específicas que se deben realizar para ejecutar
cada actividad.
Ejemplo:
Actividad 1.1.
Fomento y convocatoria para la presentación de micro-proyectos
productivos comunitarios.
Tareas:
Actividad 1.2.
Evaluación y aprobación de los proyectos presentados.
Tareas:
a. Definir los criterios de evaluación de los proyectos.
b. Evaluar la viabilidad de cada proyecto.
c. Elaborar un listado de proyectos viables.
d. Aprobar los proyectos.
Los productos son los bienes o servicios que genera una actividad. Las
prestaciones son los bienes o servicios que serán directamente entregados
a la población beneficiaria.
Veamos a continuación cómo se desagregan las actividades en productos y
prestaciones.
Ejemplo:
Ejemplo:
Componente: Creación de puestos de trabajo.
Actividad 1.1.
Fomento y convocatoria para la presentación de micro-proyectos
productivos comunitarios
Tiempo: 2 años.
Tareas:
a. Definición de criterios para difusión y convocatoria del programa en las
zonas de mayor concentración de la población a atenderse.
b. Diseño de mecanismos de difusión y convocatoria.
c. Difusión del programa y realización de la convocatoria a las
comunidades para que presenten los proyectos productivos comunitarios.
Producto: 20.000 proyectos productivos presentados y aprobados en los
2 años.
Recursos Humanos:
1 consultor 12 meses/persona para definición de criterios y estrategia
de difusión y convocatoria.
1 secretaria 24 meses/persona.
Recursos Materiales:
Dos computadoras personales
Una oficina cedida por la Secretaría de Desarrollo Social.
Costo de los Recursos:
Recursos humanos: U$S 115.000
Recursos materiales: U$S 5.000
Costo de la Actividad: U$S 120.000
Ejemplo:
Ejemplo:
Componentes del programa social
Componente 1: Creación de puestos de trabajo.
Componente 2: Elevar el nivel de ingreso familiar.
Componente 3: Créditos para microempresas y PYME´s.
Objetivos específicos:
Objetivo específico 1: Crear 20.000 puestos de trabajo por año en la
provincia de Surenzuela.
• de resultado,
• físicas,
• de cobertura total.
Ejemplo:
• Meta de Resultado 1: 40.000 puestos de trabajo permanentes y de calidad
creados en dos años.
• Meta de Resultado 2: Nivel de ingreso de las 30.000 familias elevado en
un 30 % en el lapso de dos años.
• Meta de Resultado 3: Crédito de U$S 18.000 por los cuatro años
entregados a 20.000 microempresas y 30.000 PYME’s.
Ejemplo:
Veamos algunos ejemplos de metas físicas de los objetivos específicos
anteriores.
• 20.000 proyectos productivos aprobados en dos años
• 500 U$S desembolsados por cada proyecto aprobado
a. A partir del cálculo del costo de los componentes del programa (Ver
Momento Metodológico Nº 5), calcular el costo total del programa
sumando la cantidad de dinero que se requiere para todos los
componente.
b. Identificar las instancias responsables de llevar adelante cada uno de los
componentes del programa.
c. Identificar las fuentes de financiamiento de cada uno de los componentes
del programa social. Por ejemplo: Organismos Internacionales,
Organismos Nacionales, etc..
d. Registrar la información anterior en el Instrumento: Presupuesto del
programa por componentes y sus fuentes de financiamiento.
Actividad de aprendizaje Nº 6
De la
Planificación Momentos
Ejecución metodológicos
finalización
De la Planificación de la Ejecución de la
Finalización
Es un:
proceso Î No es una etapa ni una fase
¿Cuáles son los Se centra en la evaluación físico- Se centra en los resultados e impactos,
aspectos financiera de los productos del pero para ello, se requiere la evaluación de
prioritarios que programa social. procesos.
se evalúan?
¿Qué se evalúa El seguimiento se limita a una La evaluación de la ejecución de los
de la ejecución? evaluación de los productos. programas sociales implica el análisis del
desarrollo de procesos, el cumplimiento de
las actividades y el logro de los resultados
durante el desarrollo del programa.
¿Se considera la La planificación y la formulación Los parámetros y los indicadores de
evaluación en la tradicional no prevé el desarrollo evaluación y monitoreo se construyen a lo
planificación? de parámetros e indicadores de largo del proceso de planificación del
evaluación. programa social.
Actividad de aprendizaje Nº 1
• Evaluación
• Resultados
• Toma de decisiones
• Aprendizaje
Ejemplo:
- un año después de ejecutado el programa.
Actividad de aprendizaje Nº 2
Pregunta 1
1) Diseño de la evaluación
Es aquel en el cual se define qué, cuándo y cómo se va a evaluar. Es
decir, es el momento metodológico en el cual se realizan las preguntas
claves acerca de qué se quiere conocer del programa, se construyen los
indicadores, se identifican las fuentes, los métodos, las técnicas e
instrumentos de recolección de la información y la periodicidad del
relevamiento de la información para cada indicador. En este momento
metodológico también se formula un plan para la sistematización y
ordenamiento de la información y para su análisis, garantizando que la
información de la evaluación alimente efectivamente la toma de
decisiones del programa.
2) Relevamiento de la información:
Es el momento metodológico en el cual, a partir del diseño o preparación
de la evaluación, se procede a la recolección de la información. Es decir que
el evaluador, directamente o a través de técnicos preparados para tal efecto,
acude a la fuente de información en donde recolecta los datos mediante el
método o instrumento seleccionado.
Para recolectar la información de los indicadores construidos se requiere
acudir a todas las técnicas e instrumentos de investigación cualitativa y
cuantitativa que propone la investigación social. Sin embargo, en muchos
casos, el investigador debe construir los instrumentos y los procedimientos
adecuados para describir, medir y explicar, según sea el caso.
El diseño de la evaluación
Consideraciones generales
MOMENTO 1
Descripción del problema
MOMENTO 4
Identificación de los componentes del
programa social
1
Hay indicadores históricamente construidos, es decir, indicadores que han sido diseñados con anterioridad y
que pueden servir para evaluar algunos programas en determinados contextos. Pero no hay indicadores
absolutos, es decir que ningún indicador sirve para evaluar todo programa y para todo contexto en el que se
ejecuta. Por eso, los indicadores requieren ser seleccionados y construidos tomando en consideración el espacio,
el contexto y la especificidad del programa que se evalúa.
existen indicadores pertinentes para las preguntas que se han formulado o
si es necesario construir nuevos indicadores que permitan rastrear la
información de aquello que se interroga.
Ejemplo:
- si el equipo de evaluación quiere evaluar la ejecución del programa
y se interroga acerca de cómo se están cumpliendo los objetivos y
alcanzando los resultados del programa social, será preciso
identificar indicadores previos o construir nuevos indicadores para
cada uno de sus objetivos específicos.
Ejemplo:
- la información para saber si se ejecutan las actividades de un
programa puede ser recolectada cada seis meses a diferencia de la
evaluación del impacto de un programa que posiblemente requiere
que la información se recolecte un tiempo después ( por ejemplo:
un año) de haber sido ejecutado el programa.
9) Diseñar un plan de ordenamiento, procesamiento, análisis e
interpretación de la información.
El equipo de evaluación del programa debe prever los métodos y los
instrumentos para ordenar, sistematizar y procesar los datos obtenidos en la
investigación y definir el nivel de desagregación necesario. Se pueden
utilizar técnicas de ordenamiento y procesamiento de información tales
como: planes de tabulación, matrices de datos, paquetes estadísticos,
tipologías, etcétera.. De la misma manera, se deben identificar las técnicas
cuantitativas (por ejemplo: análisis relacional, de regresión, etc.) o
cualitativas (por ejemplo: conexiones entre procesos, etc.) que se aplicarán
para analizar la información y establecer criterios para interpretar esos datos
considerando siempre que la evaluación consiste en construir juicios de valor
compartidos entre todos los actores involucrados en el programa social que
se evalúa.
Aclaramos que esta no es más que una reseña sintética de los pasos
metodológicos necesarios para el diseño de evaluaciones de programas
sociales, que no pretende dar cuenta de la riqueza y variedad de procesos e
instrumentos que este implica. Un diseño técnicamente correcto requerirá la
aplicación de competencias profesionales específicas.
3- enumerar los aspectos del programa acerca de los cuales estos usuarios
podrían tomar decisiones basadas en la evaluación.
Características y Finalidades
• Análisis de Sustentabilidad
1) Recolección de información.
2) Análisis de la consistencia interna del programa social.
3) Evaluación del costo-efectividad de las actividades.
4) Evaluación de la viabilidad política.
5) Evaluación de la viabilidad institucional.
6) Evaluación de la sustentabilidad del programa.
7) Identificación y selección de alternativas.
8) Redacción del informe que contiene las conclusiones y recomendaciones
derivadas de todos los pasos anteriores.
1) Recolección de la información
a. Identificar la/s actividad/es a la/s que, por su alto costo o por otras
razones, se considere necesario analizar.
Por ejemplo:
Objetivo Específico:
Capacitar para el trabajo a 300 desocupados de los municipios X e Y de la
provincia de Surenzuela.
Actividad:
Diseñar y ejecutar 3 talleres de capacitación presencial en construcción y
mantenimiento de edificios.
Prestación:
40 Horas de capacitación.
Tareas:
1.Diseñar el contenido curricular de los talleres.
2.Contratar tres docentes.
3.Contratar la infraestructura y la logística para los talleres.
Recursos:
a. Materiales:
1. Tres salones de clase (alquiler) por 5 días (40 horas cada uno) U$D
3.000
2. Papelería………………………………………………… U$D 1.000
3. Refrigerios………………………………………………. U$D 5.000
b. Humanos:
1. Tres docentes 40 horas/hombre cada uno………… … U$D 12.000
Costo de la actividad
Total ……………………………………………………………. U$D 21.000
Objetivo Específico:
Capacitar para el trabajo a 300 desocupados de los municipios X e Y de la
provincia de Surenzuela.
Actividad:
Diseñar y ejecutar 3 talleres de capacitación presencial en construcción y
mantenimiento de edificios.
Selección:
Se selecciona la alternativa 1 por ser de menor costo y porque la prestación
que genera es de igual calidad.
Ejemplo:
para la ejecución del componente se necesita la decisión política de la
organización, los recursos humanos calificados para ejecutar el
componente o la actividad, la información básica para ejecutarlos, etcétera.
d. Identificar los requisitos organizacionales con los que cuenta la
institución en el momento previo a la ejecución del programa social.
Ejemplo:
• unidades institucionales críticas,
• cuellos de botella organizacional,
• trabas
• debilidades
• etc..
1 = Muy bajo.
2 = Bajo.
3 = Intermedio
4 = Alto
5 = Muy alto.
Interrogantes Clasificación
Infraestructura y Logística 1 2 3 4 5
¿El resultado o la prestación tiene una infraestructura
adecuada?
¿son adecuados la planta y el equipo físico para su
generación?
¿Hay adecuación en los procesos de mantenimiento
del equipo y de la infraestructura?
¿Los beneficiarios se comprometen con el
mantenimiento?
¿Existe una organización logística adecuada?
¿Los beneficiarios u otros actores locales o
provinciales participan en la logística?
Capacidad Institucional de Largo Plazo
¿Hay interés en agencias locales y provinciales en
que se genere el resultado o se entregue la
prestación?
¿Es adecuada la coordinación entre estas agencias?
¿Existe adecuación entre las organizaciones
comunitarias y la población beneficiaria?
¿Existe flexibilidad y capacidad para adaptar el
programa a circunstancias cambiantes del entorno?
¿Los organismos locales y provinciales tienen una
adecuada organización institucional?
Apoyo de los actores claves
¿El apoyo del programa por parte de los organismos
internacionales es estable y fuerte?
¿El programa tiene un apoyo fuerte y estable de las
organizaciones locales y provinciales?
¿El programa tiene un apoyo fuerte y estable del
gobierno provincial?
¿El programa tiene un apoyo fuerte y estable del (los)
gobierno(s) locales?
Características y finalidades
1) Construcción de indicadores
5
Localización geográfica se refiere a Provincia, Departamento, Municipio y Localidad.
Indicadores 7. Costo (relevamiento trimestral): costo unitario de la prestación
de (por unidad de producto excluyendo los costos de gestión del
PRODUCTO programa). Por ejemplo:
• Costo promedio de los proyectos por área de intervención y por
localización geográfica.
2) Información básica
Debe definirse cuáles serán los actores involucrados dentro del sistema de
monitoreo y qué funciones y responsabilidades tendrá cada uno de ellos en
los distintos momentos de recolección, ordenamiento, procesamiento,
análisis e interpretación de la información y en la toma de decisiones
relacionadas con la gestión del programa social. La resolución de este punto
determinará, a su vez, el circuito de información interno del sistema. Para
ello, puede utilizarse la matriz de actores involucrados que se presenta a
continuación.
Ejemplo:
• a través de esta evaluación diagnóstica se procura identificar
los problemas institucionales y operativos entre los niveles
centrales, provincial y local referidos a los mecanismos de
ejecución de programas de empleo.
A continuación, presentamos la matriz de preparación de la evaluación
diagnóstica aplicada al ejemplo.
Focalización y
accesibilidad
Características y finalidades
a) Focalización y accesibilidad.
b) Contribución al mejoramiento en las condiciones de vida de la población
beneficiaria.
c) Percepción de los beneficiarios respecto de la adecuación de las
respuestas del programa (prestaciones, operatoria, etc.) a su problema
social.
d) Participación (intensidad, grado, características, canales y mecanismos)
de los beneficiarios en la gestión del programa.
e) Identificación de problemas y demandas de las poblaciones beneficiarias.
5. ¿Cuáles son los efectos del programa sobre las condiciones de vida de
los beneficiarios?
1.2. Percepción
acerca de la
prestación
2. Calidad de la 2.1. Nº de personas Grupo de • Documental Análisis
prestación de la población Beneficiarios por documental
desde la beneficiaria que localidad y/o por • Beneficia-
perspectiva de afirman que la tipo de proyectos rios Entrevistas en
los prestación es de profundidad
beneficiarios calidad
Trabajo grupal
2.2. Percepción con
respecto al
tiempo y la forma
de la prestación
3. Participación 3.1. Nº de Grupo de • Documental Análisis
de los beneficiarios que Beneficiarios por documental
beneficiarios opinan y deciden localidad y/o por • Beneficia-
en la gestión acerca de la tipo de proyectos rios Entrevistas en
del programa planificación y profundidad
social. ejecución del
programa Trabajo grupal
3.2. Tipos de
participación
3.3. Nivel de
participación
Elementos metodológicos a considerar en el diseño de una evaluación
desde la perspectiva de los beneficiarios
1. Identificar dos aspectos relevantes que se quieran evaluar del programa social,
sea a través de una evaluación diagnóstica o a través de una evaluación desde la
perspectiva de los beneficiarios.
Características y finalidades
Ejemplo 1: Ejemplo 2:
Ejemplo 1: Ejemplo 2:
Objetivo Específico 1: Objetivo Específico 2:
Crear 20.000 puestos de trabajo por año. Capacitar para el trabajo a 1.000
desocupados de los municipios X e Y de la
provincia de Surenzuela.
• Meta total prevista del resultado = 40.000 • Meta total prevista del resultado = 1.000
puestos de trabajo desocupados capacitados
• Tiempo previsto del resultado = 2 años • Tiempo previsto del resultado = 1 año
• Meta alcanzada del resultado = 25.000 • Meta alcanzada del resultado = 800
puestos de trabajo efectivamente creados desocupados con destrezas y habilidades
para la construcción y el mantenimiento
• Tiempo en el que efectivamente se logró de edificios.
el resultado (tiempo real) = 2 años
• Tiempo en el que efectivamente se logró
• Recursos realmente ejecutados para el resultado (tiempo real) = 1 año
alcanzar el resultado (costo real) =
18.000.000 de unidades monetarias • Recursos realmente ejecutados para
alcanzar el resultado (costo real) =
150.000 unidades monetarias
5) Analizar cómo se cumplieron o cómo se están cumpliendo las metas
de resultado, es decir, los objetivos específicos del programa.
En otras palabras, se trata de analizar la efectividad, la eficacia y la eficiencia
de cada una de las metas de resultado del programa.
L
----------- x 100
M
LxT
------------ x 100
M x Tr
LxTxR
------------------ x 100
M x Tr x Rr
1.000
Capacitar a desocupados con 1 año 120.000 1 año 150.000
1.000 destrezas y 800
desocupados habilidades para desocupados
la construcción y con destrezas
el mantenimiento y habilidades
de edificios. para la
construcción y
el
mantenimient
o de edificios.
Situación 1:
Situación 2:
2. Una vez que analizaron los resultados del programa, extraigan algunas
conclusiones y elaboren recomendaciones referidas al logro del objetivo
específico 1.
La evaluación de impactos
Características y finalidades
• Provee información sobre los efectos del programa en la medida que sus
objetivos son suficientemente claros.
• Provee información acerca de los efectos del programa si en el diseño de
la misma existe suficiente peso estadístico para detectarlos.
• Pone en evidencia, través de la randomización, cuando es posible, las
diferencias entre individuos y grupos y focaliza en los efectos del
programa.
Advertencias
• En el campo de las políticas y programas sociales es necesario avanzar
metodológicamente en la identificación de impactos. Efectivamente, la
especificidad de lo social implica reconocer la multicausalidad de los
fenómenos sociales y por lo tanto, la dificultad de aislar el impacto social
específico o “efecto neto” de un programa o política dentro del contexto
socioeconómico, cultural, institucional, político en el que se desenvuelven
los individuos. “En la producción de los impactos de los programas
sociales inciden un conjunto de factores, condiciones y relaciones
internas y externas al programa que contribuyen a modificar la situación
de la población beneficiaria y su contexto (Castro y Chavez op.cit.).
• La utilización de relaciones causales solamente puede resultar en
encadenamientos lineales y mecánicos que pueden hacer perder de vista
la incidencia de factores del contexto, lo que llevaría a imputar al
programa impactos que no se derivan exclusivamente de su ejecución.
• Es necesario refutar el concepto de homogeneidad de individuos,
familias, grupos, comunidades.
• Es necesario evitar la inferencia de que lo que ocurre en un pequeño
grupo o comunidad es generalizable a otros ámbitos.
Modelo cuasiexperimental:
Modelo no experimental:
♦Criterios metodológicos
Ejemplo:
Ejemplo:
- Censo,
- Encuesta de Hogares,
- Encuestas ad hoc,
- etcétera.
Ejemplo:
Impacto Positivo
Ejemplo:
El Nº de personas de la provincia de Surenzuela que no tienen educación
secundaria, que trabajan sólo dos horas al mes y que buscan trabajo
activamente, se redujo de 80.000 a 60.000. En este impacto contribuyó
significativamente el logro del objetivo específico Nº 1 del programa:
“Creación de 20.000 puestos de trabajo” y el logro del objetivo específico Nº
2: “Capacitación para el trabajo de todos los desocupados de los municipios
X, Y y Z”.
Advertencia
Nuevamente en este punto resulta necesario retomar la advertencia que se
señala al comienzo del capítulo. Es fundamentalmente importante identificar
los factores externos al programa que pudieron haber incidido en la
generación de esos impactos.
Para la determinación de los efectos netos del programa en la modificación
de los valores de los indicadores de la línea de base será necesario
considerar los factores del contexto que pueden estar incidiendo: Por
ejemplo, puede ser que se haya modificado las condiciones de la oferta de
trabajo a nivel regional o local; puede ser que las tasas de actividad se hayan
modificado a raíz de importantes movimientos migratorios, etc.
Muestras no probabilísticas
Muestras intencionadas
Se seleccionan la unidades que son más fáciles de incluir en la evaluación. Es un
procedimiento ampliamente utilizado pero poco aconsejado en la medida que la
muestra resultante está sujeta a toda clase de sesgos
Muestras probabilísticas
Aleatoria simple
Cada caso en la población tiene igual probabilidad de ser seleccionado.
Aleatoria estratificada
La población es clasificada en estratos (grupos) realizándose una muestra simple
en cada uno de ellos.
Multietápica aleatoria
Se diseña una muestra aleatoria por cluster y posteriormente se seleccionan los
casos aleatoriamente al interior del cluster. Es posible realizar más de una etapa de
muestreo por cluster tales como por ej. distritos de escuelas, escuelas y aulas.
Diseño mixto
Se pueden combinar los tipos anteriores con diseños probabilísticos de tipo
aleatorio simple, sistemático, estratificado u otros. Se trata en este caso de
muestras construidas combinando distintas variables. Por ejemplo:
determinada dimensión de pobreza rural, presupuesto asignado por el
programa, condiciones institucionales de funcionamiento del programa a
nivel provincial.
ANEXO 2
Estudios de caso
Talleres
Observación Participante
Grupos Focales
TERMINOS DE REFERENCIA
• Justificación de la evaluación
• Objetivo General
• Objetivos Específicos
• Actividades necesarias para desarrollar la evaluación
• Metodología (incluyendo las características del trabajo de campo)
• Resultados y productos esperados
• Esquema e Índice del Informe Final, Cuerpo del Documento General,
Resumen Ejecutivo en donde se preverán las conclusiones y
recomendaciones
• Cronograma de actividades
• Costos y Presupuesto desagregado
• Cantidad y perfiles de los recursos humanos necesarios
• Mecanismos de supervisión, si es necesario contratar evaluación externa
Actividades y Metodología:
I. Resumen Ejecutivo:
V. Formulación de recomendaciones:
VI. Anexos:
Supervisión y resultados:
Actividades y Metodología
Tiempo
Supervisión y Resultados
CASO
REPÚBLICA DE LATINOLANDIA - PROVINCIA DE SURENZUELA
MINISTERIO DE DESARROLLO HUMANO
PROGRAMA PARA LA REDUCCIÓN DEL DESEMPLEO
Ministerio de Trabajo.
Ministerio de Desarrollo Humano.
PROBLEMA SOCIAL:
“Alto número de la población pobre, con bajo nivel educativo, que está
desocupada en la provincia de Surenzuela”
Factores estructurales
Componente 1:
Creación de puestos de trabajo.
Componente 2:
Elevación del nivel de ingreso familiar.
Componente 3:
Créditos para microempresas y PYME´s.
Objetivo Específico 1:
Crear 20.000 puestos de trabajo por año.
Meta de Resultado:
40.000 puestos de trabajo creados en dos años.
Objetivo Específico 2:
Elevar el nivel de ingreso de 30.000 familias NBI con jefes de hogar de baja
calificación educativa en el lapso de 4 años.
Meta de Resultado:
Nivel de ingreso de las 30.000 familias elevado en un 30 %.
Objetivo Específico 3:
Otorgar crédito a 20.000 microempresas y 30.000 PYME´s en el lapso de 4
años.
Meta de Resultado:
Crédito de USD$ 18.000 dólares por los tres años entregados a 20.000
microempresas y 30.000 PYME’s.
Objetivo Específico 1:
Crear 20.000 puestos de trabajo por año.
Tiempo:
2 años.
Actividad 1.1.
Incentivo y difusión para la presentación de proyectos productivos
comunitarios para la generación de puestos de trabajo.
Tiempo:
2 años.
Tareas:
a. Definición de criterios para difusión y convocatoria del programa en las
zonas de mayor concentración de la población a ser atendida.
b. Diseño de mecanismos de difusión y convocatoria.
c. Difusión del programa y realización de la convocatoria a las comunidades
para que presenten los proyectos productivos comunitarios.
Producto:
Al menos 20.000 proyectos productivos presentados en los 2 años.
Recursos Humanos:
1 consultor 12 meses hombre para definición de criterios y estrategia de
difusión y convocatoria.
1 secretaria.
Recursos Materiales:
Dos computadoras personales
Una oficina cedida por el Ministerio de Desarrollo Humano.
Costo de la Actividad:
USD $ 120.000
Actividad 1.2.
Evaluación y aprobación de 10.000 proyectos productivos comunitarios en los dos años que
generen, al menos, dos puestos de trabajo cada uno.
Tiempo:
2 años desde el 3er. mes de iniciado el programa.
Tareas:
d. Definir los criterios de evaluación de los proyectos.
e. Evaluar la viabilidad del proyecto.
f. Elaborar un listado de proyectos viables.
g. Aprobar los proyectos.
Producto:
10.000 proyectos evaluados y aprobados.
Recursos Humanos:
2 consultores 24 meses-hombre para evaluación y aprobación de
proyectos.
1 secretaria por 24 meses.
Recursos Materiales:
Dos computadoras personales
Una oficina cedida por el Ministerio de Desarrollo Humano.
Costo de la Actividad:
USD$ 240.000
Actividad 1.3.
Entrega de un monto para el incentivo y desarrollo de los 10.000 proyectos productivos.
Tiempo:
Una vez por mes por cada proyecto productivo aprobado por el lapso de 3
años.
Tareas:
a. Desembolsos mensuales a cada proyecto aprobado.
Producto/Prestación:
Desembolso mensual de hasta USD $ 500 por cada proyecto aprobado.
Recursos Humanos:
2 empleados del organismo pagador.
Recursos Materiales:
Una oficina.
Una computadora con programa contable.
Costo de la prestación:
USD 180.000.000 por tres años.
Costo de la Actividad:
USD $ 180.100.000
Actividad 1.4.
Supervisión de la realización de los 10.000 proyectos productivos comunitarios.
Tiempo:
3 años.
Tareas:
a) Visitas a los proyectos.
b) Elaboración de informes de evaluación.
Producto:
Informes permanentes de evaluación de los proyectos.
Recursos Humanos:
1 experto en evaluación de los proyectos.
10 personas para que realicen las visitas a los proyectos.
Costo de la Actividad:
USD $ 18.036.000
COSTO TOTAL DEL COMPONENTE 1 POR ACTIVIDAD:
ACTIVIDAD COSTO
ACTIVIDAD 1.1. USD $ 120.000
ACTIVIDAD 1.2 USD $ 240.000
ACTIVIDAD 1.3. USD $ 180.100.000
ACTIVIDAD 1.4. USD $ 18.036.000
TOTAL USD $ 198. 496.000
BIBLIOGRAFIA
Módulo 1
Grosh, Margaret: "Social Spending in Latin America: the story of the 1980's."
World Bank Discussion Paper No. 106, Washington D.C., 1990.
Scharpf, F.: “Police failure and institutional reform: why should form follow
func-tion?” En: International social science journal, UNESCO, No.108, 1986.
Chen, Huey-Tsyh y Rossi, P.: Evaluating with sense. The Theory Driven
Approach,
Evaluation Research Art, McGraw Hill, New York, 1978.
Pichardo Muñiz, A.: Evaluación del Impacto Social (El valor de lo humano
ante la crisis y el ajuste), Argentina, Julio de 1993.
FACTORES CRÍTICOS DEL PROBLEMA: son los factores que tienen mayor peso
en la producción del problema social. Para identificar los factores críticos del
problema, es necesario analizar cuál es el nivel de incidencia que cada uno de los
factores tiene con respecto a los otros.
PROBLEMA SOCIAL: es una brecha entre el ser y el deber ser de la realidad, que
un actor social identifica con la intención de transformarla. Es un enunciado que
expresa la insatisfacción de un actor con respecto a su realidad social y la intención
de cambiar esa realidad con la que se encuentra insatisfecho.
PRODUCTOS: son los bienes o servicios que genera una actividad en el marco de
la ejecución de un programa.
PROGRAMA SOCIAL: es el conjunto coherente de acciones destinadas a
transformar una situación inicial y mejorar las condiciones sociales de vida de una
población determinada.
RECURSOS: son los insumos que se requieren para generar una prestación o
producto. Los recursos humanos se calculan por unidad de tiempo/persona y los
recursos materiales se calculan por unidad de material.