Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Por
buen
camino
Gua para
el seguimiento
y la evaluacin
de proyectos
comunitarios
seguimiento
y evaluacin...
no se hacen
solamente
porque el
donante lo
pide
Julie Smith
to
proyec
es una
parte
vital
del
proyecto!
accin
diseo
partic
ipacin
de los
inte
resados
consulta
de la
comunidad
S&E
aprendizaje
invest cin
ig a
planicacin
Publicado por la Organizacin de las Naciones Unidas para la Educacin, la Ciencia y la Cultura
7, place de Fontenoy, 75352 PARS 07 SP
UNESCO 2010
Todos los derechos reservados
Versin original
Publicada en 2009 por la UNESCO
UNESCO 2009
Las ideas y opiniones expresadas en esta publicacin son las de los autores y no reejan
necesariamente el punto de vista de la UNESCO.
Las denominaciones empleadas y la presentacin de los datos que en ella guran no implican
por parte de la UNESCO ninguna toma de posicin respecto al estatuto jurdico de los pases,
ciudades, territorios o zonas aludidos, o de sus autoridades, ni respecto a sus fronteras o
lmites.
Printed in France
ndice
Agradecimientos ............................................................................ 4
Prefacio......................................................................................... 5
Siglas ............................................................................................ 6
Resumen ....................................................................................... 7
Seccin 1 Introduccin ................................................................... 9
Seccin 2 Etapas de establecimiento y planicacin del proyecto
y su evaluacin ............................................................ 1 7
Seccin 3 El modelo lgico de programa. Qu es? ....................... 25
Seccin 4 Cmo disear un modelo lgico .................................... 39
Seccin 5 Estructurar y denir su evaluacin .................................... 45
Seccin 6 Tcnicas y herramientas de investigacin .......................... 53
Seccin 7 Evaluacin participativa .................................................. 6 1
Seccin 8 Anlisis y difusin de datos ........................................... 65
Seccin 9 Referencias, Bibliografa anotada, Anexos ....................... 69
Agradecimientos
La presente Gua fue producida bajo la direccin de la Divisin de Educacin Bsica de la UNESCO.
Esta publicacin se basa en la labor y el apoyo aportados por un gran nmero de personas y
organizaciones, que participaron en la iniciativa de la UNESCO Otra manera de aprender. Ante todo,
el equipo del proyecto agradece la valiosa ayuda de Rhiannon Barker, quien redact el documento,
concebido para apoyar los proyectos y al equipo en la investigacin y evaluacin de una serie de
programas en el marco de Otra manera de aprender.
La UNESCO expresa su gratitud a las organizaciones no gubernamentales que aportaron su
contribucin al proyecto y proporcionaron informacin de retorno que se utiliz en la elaboracin de
esta publicacin, as como experiencias y lecciones aprendidas. Sin la cooperacin de copartcipes de
la sociedad civil el manual no habra podido realizarse.
La UNESCO desea agradecer en particular a Sophie Jadin y Mao Kosal (Phare Ponleu Selpak Camboya), Shanthi Ranganathan (TT Ranganathan Clinical Research Foundation - India), Dadi
Pudumjee, Sanjoy Roy y Javita Narang (Ishara Puppet Theatre Trust y Salaam Balaak Trust - India),
Rodney Grant y Sophia Greaves (Pinelands Creative Workshop - Barbados), Joseph Meharris (The
Centre of Hope - Trinidad), Dulce Almonte y Jaime de La Rosa (Red Dominicana de Personas que
Viven con VIH/SIDA (REDOVIH) Repblica Dominicana), Susana Fergusson (PROCREAR - Colombia),
Heriberto Meja (FUNDARVI - Colombia), Luis Fernando Leal (LIGASIDA Colombia), Raquel Barros
(Lua Nova - Brasil), y Jos Carlos de Freitas Spinola, Cido Martins y Patricia Moura (Reciclazaro Brasil).
La UNESCO expresa su reconocimiento a Rosalind David por su respaldo y comentarios. Un
agradecimiento especial para Julie Smith por sus dibujos, que subrayan con humor el espritu y la
dedicacin necesarios para aprender y abordar cuestiones esenciales de inters para el desarrollo.
Cabe sealar que la informacin presentada en la parte relativa al Modelo Lgico de Proyecto est
muy inspirada en el programa Programme Development and Evaluation de la Universidad de
Wisconsin. Su excelente trabajo est disponible en Internet en el sitio www.uwex.edu/ces/pdande/
evaluation/evallogicmodel.html (Copyright 1996 - Board of Regents of the University of Wisconsin
System, d/b/a Division of Cooperative Extension of the University of Wisconsin-Extension.)
Finalmente, la UNESCO agradece a la Comisin Europea y al ONUSIDA su apoyo nanciero, que fue
esencial para la elaboracin de esta Gua.
Prefacio
Actualmente, una amplia variedad de planicadores, nanciadores, encargados de la elaboracin
de polticas y comunidades que apoyan las intervenciones reconocen cada vez ms el valor y la
importancia de un seguimiento y evaluacin de buena calidad. Poder demostrar la medida en que
un proyecto ha alcanzado sus objetivos previstos ayuda a asegurar que los recursos se utilizan de la
manera ms ecaz, eciente y apropiada posible. La presente gua de seguimiento y evaluacin tiene
el propsito de brindar a quienes tienen poca experiencia la conanza y las capacidades necesarias
para abordar el ciclo completo del proyecto, tanto en trminos de planicacin del mismo como de las
correspondientes actividades de seguimiento y evaluacin. La gua trata de los siguientes aspectos:
La importancia de efectuar un anlisis de las necesidades y de asegurar que los principios y las
metas del proyecto tienen clara relacin con esas necesidades.
Las maneras de seguir y evaluar los proyectos tanto durante su ejecucin (evaluacin del
proceso) como en la etapa de nalizacin (evaluacin de los resultados y los impactos).
La importancia de planicar los proyectos con respecto a un modelo o marco claramente
construido. El modelo lgico de programa es un ejemplo de esto.
Cmo asegurar que la informacin derivada del S&E se inserte en el diseo del proyecto en
curso y en la planicacin futura.
Cmo asegurar que los interesados participen activamente en todas las fases de diseo,
planicacin e investigacin relacionados con el proyecto.
Esta publicacin surgi del trabajo de apoyo de una serie de proyectos de desarrollo de competencias
profesionales y empresariales emprendidos mediante la educacin no formal en frica, Asia
meridional, el Caribe y Amrica Latina. Un factor esencial comn de todos los proyectos del programa
son los mtodos creativos e innovadores utilizados para comunicar de manera ecaz, incorporar a
las personas y alentar la participacin. Todos los proyectos giran en torno al fortalecimiento de las
capacidades, la potenciacin y la creacin de oportunidades de aprendizaje. La conceptualizacin de
la UNESCO sobre estos proyectos se basa en los cuatro pilares de la educacin presentados en 1996
por la Comisin Internacional sobre la Educacin para el Siglo XXI: aprender a conocer, aprender a
hacer, aprender a vivir juntos y aprender a ser. El Marco de Accin de Dakar (2000), que expresa
el compromiso colectivo de la comunidad internacional con la Educacin para Todos (EPT), nos
recuerda tambin que la educacin debe orientarse al aprovechamiento de los talentos y potencial de
cada individuo.
Todos los proyectos tienen lugar en zonas de considerable penuria nanciera, donde el apoyo
infraestructural es limitado y las comunidades y las personas tienen muchas dicultades para
escapar a la espiral descendente de pobreza y exclusin social. No obstante, todos los proyectos se
caracterizan por su capacidad de innovacin y por su motivacin y voluntad de avanzar, esforzndose
continuamente por reexionar acerca de sus experiencias y aprender de ellas. Esperamos que esta
Gua ayude a proporcionar apoyo y tcnicas para instaurar y aanzar el proceso de seguimiento y
evaluacin, permitiendo a los proyectos basados en la comunidad lograr xitos y mejorar la ecacia
de las intervenciones.
UNESCO
Divisin de Educacin Bsica
Siglas
EPT
IDS
OMS
ONUSIDA
S&E
Seguimiento y evaluacin
S&EP
SIDA
SMART
UNESCO
VIH
Resumen
La presente Gua ha sido concebida como un recurso en elaboracin que puede utilizarse para
apoyar el seguimiento y la evaluacin de las iniciativas de desarrollo comunitario. Se espera que
gracias a la Gua el personal de los proyectos compruebe que cuando se ha efectuado un proceso
minucioso de planicacin, seguimiento y evaluacin, con plena participacin de las comunidades,
mejoran la calidad y pertinencia de los resultados. Aunque la Gua ha sido preparada sobre la base
de la experiencia y las enseanzas derivadas de un programa especco de proyectos centrados en
la subsistencia sostenible y en aspectos de educacin para la salud, una gran parte del contenido
es genrico y por lo tanto aplicable a una amplia gama de iniciativas comunitarias. Los objetivos
principales de la Gua son:
Ofrecer un panorama de los aspectos fundamentales de la investigacin de calidad que el
personal del proyecto pueda utilizar para efectuar sus propias evaluaciones internas.
Presentar los modelos, marcos y conceptos tericos que se recomiendan y pueden utilizarse
en los proyectos para planicar y llevar a cabo investigaciones.
Proporcionar orientaciones prcticas sobre el uso del modelo lgico de programa y examinar
las maneras en que puede ser adaptado y utilizado en los proyectos.
Recapitular los instrumentos y mtodos bsicos de investigacin, centrndose
particularmente en los mtodos de investigacin cualitativa.
Promover el uso de tcnicas de investigacin participativa.
Seccin 1
Introduccin
1.1 Antecedentes
1.2 Cmo utilizar esta Gua
1.3 A quin est destinada la Gua?
10
10
10
10
10
11
13
14
14
14
1.1 Antecedentes
Poner la investigacin
en su contexto
1.4 Por qu son
necesarios el
seguimiento y la
evaluacin?
10
diga
no
dro
las
gas
CINE
estreno
Amor sin
drogas
DROGAS
IAS
IC
NOTel para
Crccantes
tradrogas
de
no
a las
drogas
11
12
1
la determinacin de las metas, objetivos y
procedimientos del programa, comprendida
la evaluacin inicial de las necesidades
(evaluacin formativa)
el proceso de ejecucin del programa
(evaluacin de proceso)
la medicin de los resultados y los
impactos (evaluacin de resultados)
1.6 Tcnicas
participativas
GRUPOS DE DISCUSIN
Encuesta sobre el proyecto
Sumamente
satisfechos: 100%
nmamente
descontentos: 0%
Mi evaluacin
de su proyecto
demuestra
13
1.9 Qu caracteriza
a una evaluacin bien
hecha?
1.7 A qu debe
aspirar la evaluacin?
14
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
15
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
16
2 Etapas
Sdeeccin
establecimiento
y planicacin del
proyecto y su evaluacin
2.1 El ciclo de planicacin del proyecto
2.2 Redaccin de la propuesta de proyecto
y obtencin de fondos
2.3 Evaluacin de las necesidades
2.4 Elaboracin de un marco de investigacin
17
18
18
19
20
2.1 El ciclo
de planicacin
del proyecto
2.2 Redaccin de la
propuesta de proyecto
y obtencin de fondos
Evaluacin de
las necesidades
Evaluacin
del proyecto
Informacin sobre
lo aprendido para
mejorar la ecacia
del proyecto
Ejecucin
y seguimiento
del proyecto
18
Planicacin
del proyecto
2.3 Evaluacin
de las necesidades
Normalmente, si no se ha hecho ya, una
evaluacin de las necesidades se utiliza antes
de la ejecucin del proyecto para revisar
las metas y los objetivos del programa, as
como los mtodos de trabajo propuestos. Al
planicar la evaluacin de necesidades, es
preciso velar por la inclusin de las diferentes
partes interesadas y grupos de inters dentro
de la comunidad. En lo posible, es preciso
evitar que las opiniones de los miembros de
la comunidad ms expresivos o poderosos se
impongan en la discusin. Las evaluaciones
de necesidades tambin proporcionan una
oportunidad temprana para incorporar a la
comunidad local mediante un proceso de
consulta.
si no sabes dnde
empezaste...
19
La observacin participante en
actividades y grupos locales, dirigindose a la
gente de manera informal, y registrando las
observaciones en notas de terreno.
La recopilacin sistemtica de los
puntos de vista de amplias muestras de
la poblacin, por medio de cuestionarios
semi-estructurados con preguntas abiertas
que permitan a las personas expresarse
libremente.
i.
2.4 Elaboracin de un
marco de investigacin
ii.
Indicadores
iii.
qu le pasa
a Mara?
Mtodos de evaluacin?
su espectculo de tteres
no ha tenido efectos
en los niveles de violencia
domstica en
el pueblo
20
vii. Establecimiento
de prioridades
Establezca prioridades y sea realista.
Asegrese de que todo lo que hace es til y
tiene un propsito, y de que el personal del
proyecto comprende cabalmente los motivos
de la investigacin.
v. Herramientas
de investigacin
Determine las herramientas de investigacin
apropiadas para recopilar los datos necesarios
(vase la Seccin 6).
ONG
donante
21
A quin le sirve?
Es usted realista?
Se dispone de recursos adecuados para la evaluacin?
Tienen los evaluadores formacin y competencias apropiadas en las tcnicas que se
les pide que apliquen? (esto podra ser particularmente importante en las evaluaciones
internas, es decir, cuando se pide al personal del proyecto que realice por s mismo una
gran parte de la evaluacin).
Estn los interesados de acuerdo en que los recursos previstos para la evaluacin sean
proporcionales a la magnitud general del proyecto (es decir, aproximadamente 10% del
presupuesto total del proyecto)?
Tienen todos los interesados opiniones similares respecto de lo que la evaluacin se
propone lograr?
Qu se ha hecho para asegurar que los nanciadores y los profesionales tengan una visin
realista de las comunidades con las que trabajan y acerca de su capacidad para asimilar y
participar en actividades de evaluacin de diversa ndole?
Qu se ha hecho para garantizar la compatibilidad entre los resultados propuestos del
proyecto y los plazos en que se espera se produzcan los cambios?
La meta y visin del proyecto son compatibles con los resultados previstos?
La evaluacin ha tenido en cuenta el contexto histrico, poltico y social (local y nacional)
en el cual se ejecuta el programa?
La evaluacin tiene en cuenta los supuestos tericos en los que se basa el proyecto?
Cules son las fuerzas polticas presentes? Cunto poder poltico se ejerce sobre el
proyecto?
22
Mtodos
La evaluacin es participativa? Los objetivos y los indicadores de seguimiento son SMART
(acrnimo en ingls que signica: Especco, Medible, Apropiado, Realista y Oportuno)?
Se ha concedido a la planicacin de la evaluacin la misma importancia que al acopio de
datos?
Est la evaluacin integrada en todas las etapas de elaboracin y ejecucin?
La metodologa elegida es la ms apropiada en relacin con las intervenciones del
proyecto? Aclare bien por qu.
Cmo se garantiza la calidad de la prctica y/o de la aplicacin de los mtodos? (habr
que formular preguntas diferentes segn que la investigacin haya sido encargada o llevada
a cabo internamente)
El tiempo asignado a la evaluacin es suciente para medir los resultados potenciales
(algunos de los cuales pueden producirse a muy largo plazo)?
Los mtodos utilizados son sucientemente exibles como para que se pueda dar
seguimiento a resultados imprevistos?
Difusin
Cmo se puede estimular a los evaluadores a informar ms cabalmente acerca de sus
actividades de evaluacin?
Se comunicarn los resultados a todos los participantes e interesados, de manera
signicativa, oportuna y apropiada?
Los resultados demostrarn tanto las fallas como los logros del proyecto?
23
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
24
eccin 3 El modelo
Slgico
de programa .
Qu es?
3.1 Qu son los modelos lgicos de programa?
3.2 Cules son las ventajas de la utilizacin
de un modelo lgico de programa?
3.3 Cmo se presentan los modelos lgicos de programa?
3.4 Terminologa
3.4. 1 Visin y meta del proyecto
3.4.2 Insumos
3.4.3 Productos
3.4.4 Resultados
3.4.5 Examinar los supuestos (teora)
3.4.6 Enlaces teora de la accin
3.4.7 Factores externos
3.4.8 Explicar la diferencia entre productos y resultados
3.4.9 Qu es la teora programtica?
3.4.10 Ejemplos de enlaces en un programa de educacin
sobre drogas
26
27
28
30
30
31
31
32
33
33
34
34
35
35
Los contenidos siguientes se basan en gran parte en Programme Development and Evaluation, un
programa elaborado por la Universidad de Wisconsin, que ofrece en Internet un excelente curso interactivo
sobre el modelo lgico de programa
(www.uwex.edu/ces/pdande/evaluation/evallogicmodel.html, consultado en noviembre de 2010).
25
un marco lgico
una herramienta de planicacin
un marco para ayudar a explicar y registrar
cmo funciona el programa y las teoras y
supuestos que lo sustentan
un modelo sensible que muestra la manera
en que se supone debera funcionar el
proyecto
un modelo para sealar las relaciones
lgicas entre los diferentes componentes
del proyecto; ayuda a ofrecer un panorama
simplicado de toda la intervencin
Productos
Actividades Participacin
Prioridades
Considerar:
Situacin
Necesidades
y fortalezas
Sntomas
y problemas
Participacin
de los
interesados
Misin
Visin
Valores
Mandatos
Recursos
Dinmica local
Colaboradores
Competidores
Resultados
deseados
Lo que
invertimos
Lo que
hacemos
A quines
llegamos
Personal
Voluntarios
Tiempo
Dinero
Investigacin
Materiales
Equipo
Tecnologa
Asociados
Organizar
talleres,
reuniones
Prestar
servicios
Elaborar
productos,
currculos,
recursos
Capacitar
Asesorar
Evaluar
Facilitar
Co-participar
Trabajar con
los medios de
comunicacin
Participantes
Usuarios
Organismos
Decisores
Pblico
Clientes
Satisfaccin
Resultados - Impactos
Corto plazo Medio plazo
Largo plazo
Accin
Comportamiento
Prctica
Toma de
decisiones
Polticas
Accin social
Condiciones
Sociales
Econmicas
Cvicas
Ambientales
Factores Externos
Supuestos
Evaluacin
jar objetivos acopiar datos analizar e interpretar presentar informes
Parmetros temporales
Cundo debe realizarse cada etapa de la evaluacin?
Diagrama adaptado de http://www.uwex.edu/ces/pdande/evaluation/evallogicmodel.html (consultado en noviembre de 2010)
26
Buena
planicacin!
Buenas
estrategias!
Planicacin y diseo
del programa
Elaborar un modelo lgico ayuda a aclarar
el razonamiento y a examinar las actividades
y los resultados respecto de las metas
y objetivos del proyecto. Una vez que el
proyecto est en curso de ejecucin, el
modelo puede utilizarse como herramienta
para garantizar que las actividades estn
correctamente orientadas y proceder a las
recticaciones necesarias.
cin!
nica
la
p
a
gias!
buen
strate
e
s
a
n
bue
27
Participacin
El proceso de elaboracin del modelo se
basa en tcnicas participativas que requieren
el trabajo conjunto de los interesados para
claricar los fundamentos del programa y
las condiciones en las cuales el xito es ms
probable. De esta forma hay ms posibilidades
de elaborar los cambios sobre la base del
consenso, despus de un proceso abierto
y transparente, y menos sobre la base de
personalidades, poltica e ideologa. Se
fomenta as entre los interesados un sentido
de pertenencia al proyecto ms fuerte.
Evaluacin permanente
El modelo ayuda a centrarse en cada
componente de la actividad del programa.
Las partes individuales pueden desglosarse
en actividades y vinculadas a resultados
que puedan evaluarse independientemente,
registrando los avances hacia los resultados
provisionales y a largo plazo. De esta manera
se establecen mecanismos slidos para
medir los resultados. Qu ocurre? Qu es
lo que surte efectos? Para quin? El modelo
permitira al equipo del proyecto detectar
los obstculos que impiden que el proyecto
funcione de manera ptima. Tambin le
brinda la posibilidad de valorar la facilidad
con la que se podrn medir los indicadores
seleccionados.
28
representarse en un diagrama pictrico para tener una visin general de los nexos entre los
distintos componentes y procesos que conguran el proyecto.
1a
b
2a
b
c
3
4
3a
b
29
Aspectos clave
Considere quines sern los usuarios
del modelo lgico. Quin necesita
comprender la utilidad y/o el propsito del
modelo: usted, su personal, la comunidad,
los nanciadores, los administradores, los
servidores pblicos.
Elija la representacin grca que ms
convenga al usuario y al uso.
Tenga en cuenta que decidir acerca de
una imagen nica que exponga la teora
del programa es a menudo la parte ms
difcil de la elaboracin y el uso de un
modelo lgico. Probablemente, el proceso
de elaboracin de la imagen nal sea ms
importante que sta.
3.4 Terminologa
servicios de salud
nutricin
funcin de los nanciadores (posible
imposicin de limitaciones)
Esta lista puede ser tan larga como quiera.
El ejercicio es importante porque pone en
perspectiva el gran nmero de variables que
pueden tener repercusiones en el proyecto, lo
que ayuda a comprender la complejidad de las
intervenciones en la comunidad y el limitado
impacto que pueden tener las intervenciones a
pequea escala.
desigualdad de ingresos
situacin y clase social
30
3.4.2 Insumos
Insumos
Lo que
invertimos
Personal
Voluntarios
Tiempo
Dinero
Investigacin
Materiales
Equipo
Tecnologa
Asociados
3.4.3 Productos
Productos
Actividades
Participacin
Lo que hacemos
A quines
llegamos
Organizar talleres,
reuniones
Prestar servicios
Elaborar
productos,
currculos,
recursos
Capacitar
Asesorar
Evaluar
Facilitar
Co-participar
Trabajar con
los medios de
comunicacin
Participantes
Usuarios
Organismos
Decisores
Clientes
Los productos son las actividades, servicios, eventos y otros elementos que llegan a las personas
(individuos, grupos, organismos) que participan en el proyecto o a quienes est destinado.
Los productos son lo que hacemos u ofrecemos. Comprenden talleres, servicios, conferencias,
encuestas comunitarias, facilitacin, asesoramiento local, etc.
31
Resultados - Impactos
Corto plazo
Medio plazo
Largo plazo
Resultados a
corto plazo
Resultados a
medio plazo
Impacto(s)
nal(es)
Aprendizaje
Accin
Condiciones
Concientizacin
Comportamiento Sociales
Conocimientos
Prctica
Econmicas
Actitudes
Toma de
decisiones
Cvicas
Habilidades
Opiniones
Aspiraciones
Ambientales
Polticas
Accin social
Motivaciones
3.4.4 Resultados
Los resultados son los efectos, benecios, ventajas o desventajas directos para individuos, familias,
grupos, comunidades, organizaciones o sistemas. Son ejemplos los cambios en el conocimiento,
el mejoramiento de las habilidades, las modicaciones del comportamiento, las capacidades o la
toma de decisiones, y la elaboracin de polticas. Los resultados pueden ser a corto plazo, a medio
plazo y a largo plazo. Pueden ser positivos, negativos, neutros, deliberados o involuntarios, y pueden
medirse a lo largo del ciclo de vida del proyecto.
En este modelo los impactos se reeren a las consecuencias o efectos nales del programa. Por
ejemplo, una mayor seguridad econmica, menores ndices de tabaquismo entre los jvenes, o
una mejor calidad del aire. En este caso los impactos son sinnimo de resultados a largo plazo de
su meta. Se encuentran en el extremo derecho del diagrama del modelo lgico. Se reeren a los
cambios nales, a largo plazo, de las condiciones sociales, econmicas, cvicas o ambientales. En el
lenguaje comn, los trminos efectos y resultados suelen ser intercambiables.
Al considerar los impactos se deben tener en cuenta no slo los que se procuraba obtener sino
tambin los inesperados. Un ejemplo de ello son los proyectos relacionados con las diferencias
entre hombres y mujeres, destinados a elevar la autoestima y mejorar las posibilidades de estas
ltimas para obtener medios de sustento. Los impactos a largo plazo tendrn relacin con el
mejoramiento de la condicin econmica y social de las mujeres. El resultado de la autonomizacin
de stas y el fortalecimiento de su situacin puede ser importante en trminos de redenicin del
equilibrio del poder y la situacin en el hogar, lo que a su vez puede modicar los supuestos locales
acerca del statu quo.
En un proyecto nanciado por la UNESCO en Asia meridional, se dio a las mujeres tal capacidad
de decisin que comenzaron a armar su derecho a elegir marido y fueron aisladas por haber
contrariado cdigos de comportamiento muy arraigados. Si se prevn esas posibilidades en el
origen del proyecto, es posible atenuar los impactos negativos que podran producirse, y apoyar
a todos los miembros de la comunidad durante la transicin subsiguiente.
32
Supuestos
Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/
coop_M1_Overview.htm (consultado en noviembre de 2010)
33
Resultados - Impactos
Productos
Actividades
Corto plazo
Medio plazo
Largo plazo
Resultados
a corto plazo
Resultados a
medio plazo
Impactos(s)
nal(es)
Aprendizaje
Concientizacin
Conocimientos
Actitudes
Habilidades
Opiniones
Aspiraciones
Motivaciones
Accin
Comportamiento
Prctica
Toma de
decisiones
Polticas
Accin social
Condiciones
Sociales
Econmicas
Cvicas
Ambientales
Participacin
Lo que
hacemos
A quines
llegamos
Organizar
talleres,
reuniones
Prestar servicios
Elaborar
productos,
currculos,
recursos
Capacitar
Asesorar
Evaluar
Facilitar
Co-participar
Trabajar con
los medios de
comunicacin
Participantes
Usuarios
Organismos
Decisores
Clientes
34
INSUMOS
Formacin de personal en educacin
sobre drogas
Talleres con la participacin del personal
y del grupo destinatario para nalizar el
programa y el contenido de la formacin
3.4.9 Qu es la teora
programtica?
PRODUCTOS
RESULTADOS
A corto plazo: aprendizaje, concientizacin,
conocimientos, actitudes
Expectativas
Creencias
Experiencia
Sabidura tradicional
35
factores externos que pueden intervenir, y que se podran sealar como echas que salen del
modelo lgico. Por ejemplo, algunos factores externos que podran dicultar a los individuos la
adopcin de un comportamiento ms seguro en materia de drogas son los siguientes:
Baja
autoestima
Acceso
a otras
actividades
sociales
y de ocio
Nivel de
conocimiento
Comportamiento de
consumo de
drogas
Comportamiento de
los pares
Nivel de
apoyo social
Acceso
fcil a las
drogas
36
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
37
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
38
4 Cmo disear
Suneccin
modelo lgico
4
Etapa 1 : Determinar el propsito del modelo lgico:
quin lo utilizar, y para qu?
Etapa 2: Incorporar a otros
Etapa 3: Establecer los contornos del modelo lgico
Etapa 4: Comprender la situacin
Etapa 5: Escribir un anlisis de la situacin
Etapa 6: Examinar las investigaciones y conocimientos de base
Etapa 7: Comenzar a rellenar las casillas vacas
39
40
40
40
40
40
42
42
Etapa 2: Incorporar
a otros
El comienzo
Etapa 4: Comprender
la situacin
Etapa 1: Determinar el
propsito del modelo
lgico: quin lo
utilizar, y para qu?
Etapa 5: Escribir un
anlisis de la situacin
40
Fijacin de prioridades
Del anlisis de la situacin se deriva la
jacin de prioridades. Una vez analizados
la situacin y el problema en su totalidad,
se pueden jar prioridades. Rara vez es
posible hacer todo, de modo que es necesario
priorizar. En este caso intervienen varios
factores: su cometido, valores, recursos,
competencia, experiencia, historia, lo que sabe
acerca de la situacin y de lo que otros hacen
en relacin con el problema. Las prioridades
conducen a la determinacin de los insumos y
resultados deseados.
41
Etapa 6: Examinar
las investigaciones y
conocimientos de base
La manera en que produce su modelo
depender de la etapa en que se encuentra
su proyecto y de sus conocimientos. Es ms
conveniente utilizar un modelo lgico de
programa como herramienta para ayudar a
planicar el proyecto (ejecucin, entrega y
evaluacin), aunque tambin puede ser til
si se introduce en una etapa ulterior de la
ejecucin del proyecto.
Etapa 7: Comenzar
a rellenar las casillas
vacas
Cul es la diferencia a la que aspira al nal
del programa con relacin a la situacin
anterior?
Al escribir su modelo lgico debe expresar
claramente lo que desea conseguir con el
proyecto:
Insumos
S
I
T
U
A
C
I
P
R
I
O
R
I
D
A
D
E
S
Qu
recursos
necesitamos?
Resultados-Impactos
Productos
Actividades
Qu
debemos
hacer para
que los
individuos/
grupos
puedan
obtener los
resultados a
corto plazo?
Participacin
Corto plazo
Medio plazo
Largo plazo
A quin
debemos
llegar para
que se
logren los
resultados
a plazo
medio?
Qu
requisitos
deben
cumplirse
para que se
logren los
resultados a
plazo medio?
Qu
requisitos
deben
cumplirse
para que se
alcance la
meta nal?
Cul es la
meta nal?
Supuestos
Factores externos
42
Recuerde!
1. Meta o visin
2. Metas y objetivos del proyecto
3. Actividad: cul es su intervencin
proyectada?
4. Productos del proyecto
5. Resultados del proyecto
6. Metodologa de evaluacin
7. Supuestos sobre la meta del proyecto
Cada crculo estar unido de algn modo a
todos los dems; usted debe formular los
enlaces y conexiones. A medida que reexiona
y discute, anote en su diagrama la nueva
informacin.
43
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
44
eccin 5 Estructurar
Sy de
nir su evaluacin
45
46
46
46
47
49
49
51
5.1 En qu punto
se inserta la evaluacin
en un modelo lgico?
5.2 De qu manera el
modelo lgico facilita la
evaluacin?
EVALUACIN
Qu es lo que desea saber?
Objetivo
Preguntas
Indicadores
Calendario
Acopio de datos
formular
preguntas
apropiadas para
la evaluacin
saber qu
informacin
acopiar para
responder a esas
preguntas
saber cundo
acopiar los datos
organizar el acopio
de datos fuentes,
mtodos, muestra,
instrumentos
46
5.4 A qu procurar
responder la evaluacin?
Las preguntas
Qu es importante medir? A qu
dedicar tiempo y recursos?
Elementos clave para reexionar sobre las
preguntas de la evaluacin:
con mi b
o
con mi salari
r
po
a
d
de un
semana...
A&E
47
PROYECTO
PROYECTO+VIDA=
RESULTADOS NO
PREVISTOS
48
S
I
T
U
A
C
I
P
R
I
O
R
I
D
A
D
E
S
Los padres
conocen mejor
el desarrollo
infantil
Concebir un
plan de estudios
para los padres
Personal
Dinero
Asociados
Impartir 6
cursos de
formacin
interactiva con
documentacin
Los padres
aprenden
nuevas formas
de imponer
disciplina
Los padres
destinatarios
asisten
Reduccin de
los ndices
de maltrato
infantil y
descuido de los
nios entre los
participantes
Los padres
utilizan mejores
aptitudes
parentales
Se produjo
un plan de
estudios?
Se impartieron
los 6 cursos?
Cun
ecazmente?
Asistieron
todos los padres
que preveamos?
Quines
asistieron/
no asistieron?
Participaron
en los 6 cursos?
Por qu/por
qu no?
Aument el
conocimiento?
Aprendieron
nuevos
enfoques? Qu
ms ocurri?
Los padres
utilizan
realmente las
competencias
mejoradas?
O qu ocurre?
Qu diferencias
aportan estas
competencias?
Hubo una
disminucin
de los ndices
entre los
participantes?
Qu metas se
alcanzaron?
49
ser directos
ser especcos
50
FORMACIN S RE LA
ATELIER SOUBR
AUTONOM
A DE LA MUJER
ser tiles
ser adecuados
ser prcticos
5.7 Calendario,
programacin y
recoleccin de datos
durante la ejecucin
a mediados de la ejecucin del programa
51
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
52
eccin 6 Tcnicas
Sy herramientas
de investigacin
6.1
6.2
6.3
6.4
6.5
6.6
6.7
6.8
6.9
53
54
54
55
56
56
57
58
58
59
54
Investigacin cuantitativa
Preguntas
formuladas
Cunto, cuntos?
Tipo de pregunta
De respuesta abierta
De respuesta cerrada
Interaccin
Preguntas-respuestas
Formulario
Semi-estructurado o no
estructurado
Controlado
A quin?
Muestreo formal.
Se escogen aleatoriamente
cantidades ms grandes.
Se pueden evaluar las
probabilidades estadsticas
Nivel
En profundidad
En supercie y extensivo
Anlisis
Interpretacin
Formalizacin y anlisis
estadstico
Mtodos comunes
(deberan
utilizarse tcnicas
participativas en
ambas categoras)
Entrevistas:
entrevistas individuales en
profundidad
narrativas
incidente crtico esto es, en
relacin con un hecho especco
en que se explora la respuesta
individual o colectiva al mismo
grupo de discusin
Encuesta
cuestionarios
transversal (situacin en un
determinado momento)
cohorte (seguir a un grupo
a lo largo del tiempo)
Texto escrito:
mtodo del diario
de archivo
Anlisis de medios de
comunicacin:
artculos de prensa
dibujos o fotografas
vdeos
Observacin:
observacin participante
observacin no participante
Tcnicas del proyecto:
respuestas a estmulos
presentados
asociacin de palabras
escenicacin
55
Ensayos controlados
aleatorios
experimentales
Datos de archivo (datos
secundarios)
anlisis ms avanzado de
estadsticas existentes
Observacin
conteo, por ejemplo, de los
pacientes en un servicio de
ciruga
6.4 Investigacin
cuantitativa
6.5 Muestreo
En lugar de interrogar a toda la poblacin
incluida en el proyecto, es a menudo ms
ecaz hacer preguntas o solicitar opiniones a
una muestra representativa de esas personas.
Mientras las cantidades sean sucientes
(a este respecto, pida asesoramiento a un
estadstico), se pueden hacer generalizaciones
que abarcan a toda la poblacin del proyecto.
Si decide efectuar un muestreo, necesita
determinar qu tipo de muestra utilizar.
Es preciso que pueda generalizar sus
conclusiones a toda la poblacin? De qu
tamao ser su muestra?
Qu es la investigacin cuantitativa
y cundo debe utilizarse?
56
6.6 Investigacin
cualitativa
oria
ah
ria
zan
zana
57
ho
6.7 Tcnicas de
investigacin cualitativa
Entrevistas detalladas. Pueden realizarse
con informadores clave, por ejemplo, personas
que han estado estrechamente asociadas al
proyecto y tienen una comprensin particular
al respecto. Pueden efectuarse con personal
del proyecto, organizaciones copartcipes o
participantes en el proyecto. En el Anexo 6
gura ms informacin sobre la manera de
llevar a cabo entrevistas detalladas.
6.8 Instrumentos
de investigacin
La mayora de las actividades de acopio de
datos requieren algn tipo de formulario o
instrumento para recopilar informacin, como
una cha de registro, un cuestionario, un
protocolo de observacin, o una grabacin de
vdeo o sonora. Piense en el mtodo de acopio
de datos que ha elegido y decida lo que se
necesita para registrar la informacin. De ser
posible, utilice instrumentos puestos a prueba
y validados.
58
II
Acopiar informacin
Preguntas:
Qu desea saber?
Piense en lo
siguiente:
Indicadores
Cmo lo obtendr?
Fuentes
Mtodos (cualitativa,
cuantitativa,
participativa)
Calendario
Muestras
Instrumentos
Quin dirigir la
evaluacin? Hgala
participativa!
III
Analizar la
informacin
Anlisis
Interpretacin
IV
Piense en
cmo utilizar la
informacin:
Difundir y compartir
las enseanzas
extradas (tanto las
buenas como las
malas!)
A quin? Cundo?
Cmo?
59
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
60
eccin 7 Evaluacin
Sparticipativa
62
63
61
As que es evidente...
si se distribuyen
preservativos gratuitos...
7.1 Tcnicas de
evaluacin participativa
Qu son el seguimiento y la
evaluacin participativos?
62
Teatro/escenicacin/espectculo
de tteres/artes plsticas. Las artes
creativas son a menudo un recurso natural
y espontneo para revelar y descifrar
inquietudes y prioridades locales e
individuales. Algunos de estos mtodos
pueden ser particularmente tiles con nios y
jvenes.
Aclarar si el
seguimiento y
la evaluacin
participativos deben
proseguir, y en ese
caso, de qu manera
Determinar quin
debera y desea
participar
Aclarar las
expectativas de
los participantes
con respecto al
proceso, y de
qu modo quiere
contribuir cada
persona o grupo
Denir las
prioridades del
seguimiento y la
evaluacin
Acordar cmo y
por quin sern
utilizados los
resultados
Elegir indicadores
que proporcionen
la informacin
necesaria
Analizar la
informacin
Recolectar la
informacin
Convenir los
mtodos, las
responsabilidades y
el calendario
del acopio de
informacin
63
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
64
eccin 8 Anlisis
Sy difusin
de datos
8
65
66
Difusin
Datos cuantitativos
Para una descripcin sencilla de la realizacin
de encuestas y cuestionarios cuantitativos,
consulte:
Fondo Internacional de Desarrollo Agrcola
(FIDA). A Guide for Project Monitoring
and Evaluation. Reviste especial inters
el Anexo D, Methods for monitoring and
evaluation. Telecargado de: http://www.ifad.
org/evaluation/guide/index.htm (consultado en
octubre de 2010)
Vanse tambin las referencias en la
bibliografa anotada al nal de esta gua.
Re
PROYECTO
su
lta
do
ENSEANZAS
S
do
ulta
Res
do
do
S
lta
su
Re
Re
su
lta
Compartilhe
Com
p a r t a l o qo
u eque
h a aprendeu.
aprendido.
67
Notas:
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
......................................................................................................................................................................
68
eccin 9 Referencias,
SBibliografa
anotada
y Anexos
Referencias
Bibliografa anotada
Anexo 1 Formulario de retroinformacin
Anexo 2 Modelos de evaluacin
Anexo 3 Glosario
Anexo 4 Hoja de trabajo del modelo lgico
Anexo 5 Ficha del plan de evaluacin
Anexo 6 Gua para realizar una entrevista detallada
69
70
72
77
78
80
82
83
84
Referencias
Evaluacin de Programas de Prevencin
del Uso Indebido de Sustancias por los
Jvenes, Viena http://www.unodc.org/
pdf/youthnet/action/planning/m&E_S.pdf
(consultado en noviembre de 2010)
Bruce, N., Springett, J., Hotchkiss, J., ScottSamuel, A. (dir.publ.) (1995), Research
and Change in Urban Community Health,
Avebury.
Core Initiative (May 2006), Project Cycle
Management: Community Based
Organisation (CBO) Training Toolkit.
70
71
Bibliografa anotada
La lista presentada a continuacin se reere
a la evaluacin de programas comunitarios
en pequea escala. Se hace generalmente
hincapi en mtodos cualitativos y
participativos para la evaluacin interna.
La lista no es en modo alguno exhaustiva.
La mayora de las referencias mencionadas
guran en ella por ser claras y accesibles, y
generalmente pueden consultarse en Internet.
Todos los sitios web enumerados estaban
en funcionamiento en noviembre de 2010.
La bibliografa debe considerarse como una
obra en curso que se puede complementar y
modicar.
Metas y objetivos
Diferentes concepciones de la evaluacin
Autoevaluacin
Participacin de los usuarios en la
evaluacin
Utilizacin de la evaluacin para estudiar
polticas
Indicadores de resultados: uso debido e
indebido
Seguimiento de los resultados
Evaluacin de los impactos
72
htm#anchor1575679YBrowser.HTML\Shell\
Open\Command
73
74
3. Mtodos de evaluacin
participativos
75
76
Anexo 1 Formulario
de retroinformacin
Esta gua est en curso de elaboracin. Agradeceramos sumamente que nos comunique su
opinin al respecto a n de permitirnos mejorar la calidad y ecacia del producto. Srvase rellenar
el formulario adjunto y enviarlo por correo postal o electrnico a la direccin que gura al nal del
formulario.
Qu tan til le pareci esta gua? a) muy til, b) bastante til y c) nada til
Ha utilizado usted esta gua en la prctica?
Prev usted utilizar esta gua en el futuro?
Cmo utiliz usted la gua? Srvase especicar si slo ha utilizado algunas secciones.
Qu podra hacerse para que la gua sea ms accesible y/o ms til?
Utiliza usted otros materiales de apoyo para facilitar el seguimiento y la evaluacin? Srvase
especicar.
Puede usted dar ejemplos concretos de instrumentos de investigacin ecaces o inecaces que
utiliz en sus proyectos? Podemos contactarle directamente para conversar sobre la posibilidad
de incluir esos ejemplos en la prxima versin de la gua?
Hay algo que le haya resultado inadecuado, absurdo o difcil de comprender? En caso armativo
qu y porqu?
Otras observaciones.
Srvase enviarlo a:
77
78
79
Anexo 3 Glosario
Anlisis
Beneciario
Comunidad
Autonomizacin
Evaluacin
Metodologa
Seguimiento
Participacin
Participantes
80
Investigacin
Investigacin cualitativa
Investigacin cuantitativa
81
82
(aada/modique los recuadros y las echas segn sea necesario para mostrar la teora
del cambio)
Largo plazo
Medio plazo
Alcance
Corto plazo
Actividades
RESULTADOS
PRODUCTOS
INSUMOS
Preguntas
Qu desea
saber?
1.
Indicadores/
Datos
Cmo lo
sabr?
Quin
tendr
esa informacin?
Mtodos/
instrumentos
Cmo reunir
la informacin?
Qu
instrumentos
utilizar?
Muestra
A quin
interrogar?
1.a
b
c
2.
2. a
b
c
83
Material de estimulacin
Se trata de todo producto que se introduce durante la entrevista (o en su transcurso) para generar
debate. Puede incluir fotografas, artculos de prensa, objetos familiares, ancdotas, etc.
Un ejercicio comn consiste en presentar a los entrevistados una serie de armaciones escritas
en grandes tarjetas. Se les pide luego que clasiquen las tarjetas en distintas pilas en funcin,
por ejemplo, de la medida en que estn en acuerdo o desacuerdo con ese punto de vista, o la
importancia que asignan a ese aspecto particular del servicio. Estos ejercicios obligan a los
participantes a explicar sus distintos puntos de vista. La presentacin nal es menos importante
que los intercambios que genera.
84
http://www.unesco.org/en/education