Está en la página 1de 86

Organizacin

de las Naciones Unidas


para la Educacin,
la Ciencia y la Cultura

Por
buen
camino
Gua para
el seguimiento
y la evaluacin
de proyectos
comunitarios

seguimiento
y evaluacin...
no se hacen
solamente
porque el
donante lo
pide

Julie Smith

to

proyec

es una
parte
vital
del
proyecto!

accin

diseo

partic
ipacin
de los
inte
resados

consulta
de la
comunidad

S&E

aprendizaje

invest cin
ig a

planicacin

Publicado por la Organizacin de las Naciones Unidas para la Educacin, la Ciencia y la Cultura
7, place de Fontenoy, 75352 PARS 07 SP

UNESCO 2010
Todos los derechos reservados
Versin original
Publicada en 2009 por la UNESCO
UNESCO 2009

Las ideas y opiniones expresadas en esta publicacin son las de los autores y no reejan
necesariamente el punto de vista de la UNESCO.
Las denominaciones empleadas y la presentacin de los datos que en ella guran no implican
por parte de la UNESCO ninguna toma de posicin respecto al estatuto jurdico de los pases,
ciudades, territorios o zonas aludidos, o de sus autoridades, ni respecto a sus fronteras o
lmites.

Compuesto e impreso en los talleres de la UNESCO

Printed in France

ED-2010/WS/34 cld 2252.10

ndice
Agradecimientos ............................................................................ 4
Prefacio......................................................................................... 5
Siglas ............................................................................................ 6
Resumen ....................................................................................... 7
Seccin 1 Introduccin ................................................................... 9
Seccin 2 Etapas de establecimiento y planicacin del proyecto
y su evaluacin ............................................................ 1 7
Seccin 3 El modelo lgico de programa. Qu es? ....................... 25
Seccin 4 Cmo disear un modelo lgico .................................... 39
Seccin 5 Estructurar y denir su evaluacin .................................... 45
Seccin 6 Tcnicas y herramientas de investigacin .......................... 53
Seccin 7 Evaluacin participativa .................................................. 6 1
Seccin 8 Anlisis y difusin de datos ........................................... 65
Seccin 9 Referencias, Bibliografa anotada, Anexos ....................... 69

Agradecimientos
La presente Gua fue producida bajo la direccin de la Divisin de Educacin Bsica de la UNESCO.
Esta publicacin se basa en la labor y el apoyo aportados por un gran nmero de personas y
organizaciones, que participaron en la iniciativa de la UNESCO Otra manera de aprender. Ante todo,
el equipo del proyecto agradece la valiosa ayuda de Rhiannon Barker, quien redact el documento,
concebido para apoyar los proyectos y al equipo en la investigacin y evaluacin de una serie de
programas en el marco de Otra manera de aprender.
La UNESCO expresa su gratitud a las organizaciones no gubernamentales que aportaron su
contribucin al proyecto y proporcionaron informacin de retorno que se utiliz en la elaboracin de
esta publicacin, as como experiencias y lecciones aprendidas. Sin la cooperacin de copartcipes de
la sociedad civil el manual no habra podido realizarse.
La UNESCO desea agradecer en particular a Sophie Jadin y Mao Kosal (Phare Ponleu Selpak Camboya), Shanthi Ranganathan (TT Ranganathan Clinical Research Foundation - India), Dadi
Pudumjee, Sanjoy Roy y Javita Narang (Ishara Puppet Theatre Trust y Salaam Balaak Trust - India),
Rodney Grant y Sophia Greaves (Pinelands Creative Workshop - Barbados), Joseph Meharris (The
Centre of Hope - Trinidad), Dulce Almonte y Jaime de La Rosa (Red Dominicana de Personas que
Viven con VIH/SIDA (REDOVIH) Repblica Dominicana), Susana Fergusson (PROCREAR - Colombia),
Heriberto Meja (FUNDARVI - Colombia), Luis Fernando Leal (LIGASIDA Colombia), Raquel Barros
(Lua Nova - Brasil), y Jos Carlos de Freitas Spinola, Cido Martins y Patricia Moura (Reciclazaro Brasil).
La UNESCO expresa su reconocimiento a Rosalind David por su respaldo y comentarios. Un
agradecimiento especial para Julie Smith por sus dibujos, que subrayan con humor el espritu y la
dedicacin necesarios para aprender y abordar cuestiones esenciales de inters para el desarrollo.
Cabe sealar que la informacin presentada en la parte relativa al Modelo Lgico de Proyecto est
muy inspirada en el programa Programme Development and Evaluation de la Universidad de
Wisconsin. Su excelente trabajo est disponible en Internet en el sitio www.uwex.edu/ces/pdande/
evaluation/evallogicmodel.html (Copyright 1996 - Board of Regents of the University of Wisconsin
System, d/b/a Division of Cooperative Extension of the University of Wisconsin-Extension.)
Finalmente, la UNESCO agradece a la Comisin Europea y al ONUSIDA su apoyo nanciero, que fue
esencial para la elaboracin de esta Gua.

El verdadero viaje de descubrimiento no consiste en ver nuevos paisajes


sino en mirar con nuevos ojos.
Marcel Proust

Prefacio
Actualmente, una amplia variedad de planicadores, nanciadores, encargados de la elaboracin
de polticas y comunidades que apoyan las intervenciones reconocen cada vez ms el valor y la
importancia de un seguimiento y evaluacin de buena calidad. Poder demostrar la medida en que
un proyecto ha alcanzado sus objetivos previstos ayuda a asegurar que los recursos se utilizan de la
manera ms ecaz, eciente y apropiada posible. La presente gua de seguimiento y evaluacin tiene
el propsito de brindar a quienes tienen poca experiencia la conanza y las capacidades necesarias
para abordar el ciclo completo del proyecto, tanto en trminos de planicacin del mismo como de las
correspondientes actividades de seguimiento y evaluacin. La gua trata de los siguientes aspectos:
La importancia de efectuar un anlisis de las necesidades y de asegurar que los principios y las
metas del proyecto tienen clara relacin con esas necesidades.
Las maneras de seguir y evaluar los proyectos tanto durante su ejecucin (evaluacin del
proceso) como en la etapa de nalizacin (evaluacin de los resultados y los impactos).
La importancia de planicar los proyectos con respecto a un modelo o marco claramente
construido. El modelo lgico de programa es un ejemplo de esto.
Cmo asegurar que la informacin derivada del S&E se inserte en el diseo del proyecto en
curso y en la planicacin futura.
Cmo asegurar que los interesados participen activamente en todas las fases de diseo,
planicacin e investigacin relacionados con el proyecto.
Esta publicacin surgi del trabajo de apoyo de una serie de proyectos de desarrollo de competencias
profesionales y empresariales emprendidos mediante la educacin no formal en frica, Asia
meridional, el Caribe y Amrica Latina. Un factor esencial comn de todos los proyectos del programa
son los mtodos creativos e innovadores utilizados para comunicar de manera ecaz, incorporar a
las personas y alentar la participacin. Todos los proyectos giran en torno al fortalecimiento de las
capacidades, la potenciacin y la creacin de oportunidades de aprendizaje. La conceptualizacin de
la UNESCO sobre estos proyectos se basa en los cuatro pilares de la educacin presentados en 1996
por la Comisin Internacional sobre la Educacin para el Siglo XXI: aprender a conocer, aprender a
hacer, aprender a vivir juntos y aprender a ser. El Marco de Accin de Dakar (2000), que expresa
el compromiso colectivo de la comunidad internacional con la Educacin para Todos (EPT), nos
recuerda tambin que la educacin debe orientarse al aprovechamiento de los talentos y potencial de
cada individuo.
Todos los proyectos tienen lugar en zonas de considerable penuria nanciera, donde el apoyo
infraestructural es limitado y las comunidades y las personas tienen muchas dicultades para
escapar a la espiral descendente de pobreza y exclusin social. No obstante, todos los proyectos se
caracterizan por su capacidad de innovacin y por su motivacin y voluntad de avanzar, esforzndose
continuamente por reexionar acerca de sus experiencias y aprender de ellas. Esperamos que esta
Gua ayude a proporcionar apoyo y tcnicas para instaurar y aanzar el proceso de seguimiento y
evaluacin, permitiendo a los proyectos basados en la comunidad lograr xitos y mejorar la ecacia
de las intervenciones.
UNESCO
Divisin de Educacin Bsica

Siglas
EPT

Educacin para Todos

IDS

Instituto de Estudios del Desarrollo (por sus siglas en ingls)

OMS

Organizacin Mundial de la Salud

ONUSIDA

Programa Conjunto de las Naciones Unidas sobre el VIH/SIDA

S&E

Seguimiento y evaluacin

S&EP

Seguimiento y evaluacin participativos

SIDA

Sndrome de inmunodeciencia adquirida

SMART

Especco, Medible, Apropiado, Realista, Oportuno (por sus siglas en ingls)

UNESCO

Organizacin de las Naciones Unidas para la Educacin, la Ciencia y la Cultura


(por sus siglas en ingls)

VIH

Virus de inmunodeciencia humana

Resumen
La presente Gua ha sido concebida como un recurso en elaboracin que puede utilizarse para
apoyar el seguimiento y la evaluacin de las iniciativas de desarrollo comunitario. Se espera que
gracias a la Gua el personal de los proyectos compruebe que cuando se ha efectuado un proceso
minucioso de planicacin, seguimiento y evaluacin, con plena participacin de las comunidades,
mejoran la calidad y pertinencia de los resultados. Aunque la Gua ha sido preparada sobre la base
de la experiencia y las enseanzas derivadas de un programa especco de proyectos centrados en
la subsistencia sostenible y en aspectos de educacin para la salud, una gran parte del contenido
es genrico y por lo tanto aplicable a una amplia gama de iniciativas comunitarias. Los objetivos
principales de la Gua son:
Ofrecer un panorama de los aspectos fundamentales de la investigacin de calidad que el
personal del proyecto pueda utilizar para efectuar sus propias evaluaciones internas.
Presentar los modelos, marcos y conceptos tericos que se recomiendan y pueden utilizarse
en los proyectos para planicar y llevar a cabo investigaciones.
Proporcionar orientaciones prcticas sobre el uso del modelo lgico de programa y examinar
las maneras en que puede ser adaptado y utilizado en los proyectos.
Recapitular los instrumentos y mtodos bsicos de investigacin, centrndose
particularmente en los mtodos de investigacin cualitativa.
Promover el uso de tcnicas de investigacin participativa.

Sorprenderse, es comenzar a entender.


Jos Ortega y Gasset

Seccin 1

Introduccin

1.1 Antecedentes
1.2 Cmo utilizar esta Gua
1.3 A quin est destinada la Gua?

10
10
10

Poner la investigacin en su contexto


1.4 Por qu son necesarios el seguimiento y la evaluacin?
1.5 Cules son los problemas bsicos de la evaluacin
de las iniciativas comunitarias?
1.6 Tcnicas participativas
1.7 A qu debe aspirar la evaluacin?
1.8 Por qu son tiles los marcos y modelos?
1.9 Qu caracteriza a una evaluacin bien hecha?

10
10

11
13
14
14
14

Apreciar es como mirar a travs de un lente gran angular


que deja ver todo el bosque y no slo la rama del rbol bajo el cual se transita.
Doc Childre

1.1 Antecedentes

previsto que cada seccin pueda ser impresa o


fotocopiada y distribuida segn sea necesario.

Esta Gua fue producida tras la evaluacin


de una serie de proyectos de desarrollo de
competencias profesionales y empresariales
emprendidos mediante la educacin no
formal, que contaron con el apoyo de la
UNESCO1. Uno de los resultados esenciales
de esa evaluacin fue que sera provechoso
para los proyectos una comprensin ms
clara de las ventajas de realizar sus propias
investigaciones y de recibir apoyo y aliento
para producir un marco de investigacin
diseado al comienzo del proyecto, y aplicado
durante todo el periodo de ejecucin. Un
examen de los componentes de investigacin
de todos los proyectos concluy que la
investigacin deba ser parte integrante
del diseo del proyecto y que la mayora
de los proyectos necesitaban contar con
ms formacin y competencias en materia
de elaboracin de diseos y tcnicas de
investigacin.

1.3 A quin est


destinada la Gua?
La Gua est destinada principalmente a
quienes se ocupan de establecer o planicar
proyectos de desarrollo comunitario, o que
trabajan en ellos. Los proyectos apoyados por
la UNESCO, que impulsaron la preparacin
de esta publicacin, estaban destinados
a elevar la calidad de vida de sectores de
poblacin marginados mediante la educacin,
la reduccin de la pobreza y la creacin de
medios de vida sostenibles. Las lecciones
aprendidas de este trabajo pueden aplicarse a
una amplia variedad de proyectos y contextos.

El uso de marcos (tales como el modelo lgico


de programa) ayuda a orientar paso a paso la
planicacin de los proyectos. Contribuye de
este modo no slo a claricar las actividades
de los proyectos, as como las reexiones y
supuestos en los que stos se basan, sino
que adems facilita y ampla el proceso de
evaluacin.

Poner la investigacin
en su contexto
1.4 Por qu son
necesarios el
seguimiento y la
evaluacin?

1.2 Cmo utilizar


esta Gua

En primer lugar, veamos una denicin de


los trminos seguimiento y evaluacin. Para
los nes de esta Gua el seguimiento se
reere al examen y acopio de datos, lo que
ayudar a determinar si se estn alcanzando
los objetivos jados. El seguimiento es una
parte fundamental de la evaluacin y los datos
recopilados se integran en el proceso general
de evaluacin. La evaluacin se reere por
lo tanto al acopio sistemtico de informacin
realizado durante la ejecucin de un proyecto
o despus, a n de emitir un juicio acerca de la
ecacia respecto de los resultados anticipados
y ofrecer bases para las decisiones relativas a
intervenciones futuras.

La Gua no ha sido concebida como un


manual denitivo de seguimiento y evaluacin,
sino ms bien como un punto de partida
con informacin introductoria que requiere
asesoramiento y apoyo suplementario. Se ha

Vase Otra manera de aprender Estudios de


caso, publicacin en la que se resumen los 17
proyectos que constituyen el programa, disponible
en la direccin http://unesdoc.unesco.org/
images/0015/001518/151825s.pdf (consultado en
octubre de 2010).

10

1.5 Cules son los


problemas bsicos de la
evaluacin de iniciativas
comunitarias?

Las actividades de seguimiento y evaluacin


ayudan a determinar si un programa ha
logrado los resultados esperados, de modo
que se pueda dar cuenta de los recursos
gastados y utilizarlos con la mayor ecacia
posible. Las fuentes de nanciacin suelen
solicitar evaluaciones para vericar que el
dinero ha sido utilizado apropiadamente,
pero sigue siendo preciso asegurar que el
personal del proyecto y la poblacin que lo
apoya reconozcan la utilidad del seguimiento
y evaluacin continuos y los aprovechen para
mejorar la ecacia y calidad de sus programas.

Las iniciativas comunitarias no son fciles de


evaluar. No existe una tcnica predeterminada
y concluyente que pueda extraerse de un libro
y ser adaptada para su uso en cada proyecto.
El personal del proyecto debe ser innovador,
aplicar el sentido comn y utilizar los
conocimientos que posee sobre la poblacin
de apoyo, el entorno y el contexto poltico
y cultural para lograr que las preguntas
adecuadas se formulen de manera adecuada.

El seguimiento debe realizarse de manera


continua para que se alcancen las metas y
los objetivos del proyecto y para reajustar
la programacin sobre la base de las
lecciones aprendidas hasta el momento. Las
evaluaciones internas son importantes para
medir la ecacia, la eciencia y los avances
del proyecto, as como para estimular entre
el personal y los grupos beneciarios del
proyecto el sentido de apropiacin de ste. La
evaluacin externa, que es onerosa y que la
mayor parte del tiempo est fuera del alcance
de las iniciativas de las comunidades pequeas,
ofrece sin embargo una posibilidad de examen
independiente que a veces puede ser apropiado.

Cuando tratamos de aprehender algo


en s mismo, nos damos cuenta de que est
anudado a todo lo dems en el universo.
John Muir
Las iniciativas comunitarias suelen consistir
en mltiples intervenciones complejas, que
tienen lugar en diferentes niveles, a menudo
diseadas para obtener distintos resultados.
Hay generalmente una combinacin de
estrategias, dirigidas tanto a nivel de los
individuos como de la comunidad. Las
iniciativas van del propsito de modicar
el comportamiento individual mediante la
educacin y la autonoma, a proyectos de
base ms amplia centrados en la equidad,
la justicia social y las intervenciones

A veces los hombres tropiezan con


la verdad, pero la mayora de ellos
se levanta y sigue su camino
como si nada hubiera ocurrido
Winston Churchill

diga

no

dro
las

gas

CINE
estreno

Amor sin
drogas

pero, cmo sabes que son


tus carteles los que han
reducido el uso de drogas?
na
de da
dro
ga
s

DROGAS

IAS

IC
NOTel para
Crccantes
tradrogas
de

no
a las
drogas

11

intersectoriales. El uso de marcos tericos


ha tenido por objeto introducir ms rigor en
la manera de recopilar e interpretar los datos
de las diferentes variables. Al mismo tiempo,
las nuevas consideraciones acerca de la
evaluacin reconocen la multiplicidad de las
interacciones que tienen lugar en la mayor
parte de los contextos comunitarios y ponen
en tela de juicio las relaciones lineales, ms
simplistas, entre causa y efecto. Habida cuenta
de la compleja forma en que se realiza la
mayor parte de las intervenciones, es preciso
construir y poner a prueba correctamente
las preguntas que hay que formular para
saber si esas intervenciones son ecaces.
Es importante tener conciencia de que los
resultados no siempre pueden preverse y
que pueden ser beneciosos o perjudiciales
para la comunidad. Quienes participan en el
seguimiento y la evaluacin deben mostrar
audacia y conviccin para destacar tanto los
resultados positivos de un proyecto como los
negativos.

combinacin de sistemas para aadir


profundidad y calidad a la evaluacin. Los
diseos demasiado complicados y costosos
pueden constituir un despilfarro de recursos
si la pregunta puede responderse por medios
ms sencillos. Los evaluadores que utilizan
herramientas excesivamente complejas y que
no las comprenden cabalmente, no producirn
resultados tiles y vlidos.

La simplicidad es el renamiento supremo


Leonardo da Vinci
En la actualidad, la mayor parte de la gente
acepta que los enfoques cuantitativos y
cualitativos desempean una funcin til en
la evaluacin de programas y a menudo se
sugiere que una evaluacin pluralista, es
decir, que recurre a una serie de mtodos
de evaluacin cuantitativos y cualitativos, es
la mejor estrategia para abordar problemas
complejos sobre lo que constituye un resultado
positivo o satisfactorio (Beattie, 1995).

Existen numerosas tcnicas y mtodos


diferentes para evaluar programas. Esta
diversidad es lo que convierte a la evaluacin
en un instrumento tan poderoso. Los mtodos
pueden depender de las cuestiones de inters,
del contexto, de los propios principios tericos
del evaluador y de las caractersticas de las
dems personas participantes en el programa.
Los evaluadores pueden recurrir a cualquier

En la evaluacin de la mayor parte de las


intervenciones comunitarias convendr utilizar
diversas tcnicas de investigacin para evaluar
el proyecto en las distintas etapas. Esas
etapas son las siguientes:

En relacin con el seguimiento y evaluacin de proyectos de promocin de salud, una


publicacin reciente de un Grupo de Trabajo europeo de la OMS recomienda que los encargados
de la formulacin de polticas:
Fomenten la adopcin de enfoques participativos de la evaluacin que ofrezcan genuinas
oportunidades de participacin.
Pidan que al menos 10% de los recursos nancieros totales para una iniciativa de promocin
de la salud se asigne a la evaluacin.
Garanticen que se use una combinacin de informacin sobre el proceso y los resultados para
evaluar todas las iniciativas de promocin de la salud.
Apoyen el uso de mltiples mtodos para evaluar las iniciativas de promocin de la salud.
Respalden nuevas investigaciones sobre la elaboracin de metodologas adecuadas para
evaluar las iniciativas de promocin de la salud.
Apoyen el establecimiento de una infraestructura de formacin y educacin para desarrollar
las competencias en evaluacin de las iniciativas de promocin de la salud.
Creen y apoyen oportunidades para el intercambio de informacin sobre mtodos de
evaluacin utilizados en la promocin de la salud mediante conferencias, talleres, redes y otros
medios.
OMS (2006) Evaluation in health promotion. Principles and perspectives Publicacin dirigida por
Rootman, I.; Goodstadt, M; Hyndman, B; McQueen; Potvin, L; Springett, J. & Ziglio, E. Ocina
regional de la OMS para Europa.

12

1
la determinacin de las metas, objetivos y
procedimientos del programa, comprendida
la evaluacin inicial de las necesidades
(evaluacin formativa)
el proceso de ejecucin del programa
(evaluacin de proceso)
la medicin de los resultados y los
impactos (evaluacin de resultados)

como el cambio de comportamiento y el grado


de autonoma en sus comunidades. Mediante
una cuidadosa labor facilitadora, los mismos
participantes elaborarn las varas para
evaluar los cambios que se han producido.
Con ayuda del personal del proyecto pueden
establecer criterios de referencia y a
continuacin, a intervalos regulares, observar
los cambios resultantes de las intervenciones.

1.6 Tcnicas
participativas

El seguimiento y evaluacin participativos


(S&E-P) es una metodologa que supone
la participacin de la poblacin local, los
organismos de desarrollo y los encargados
de la formulacin de polticas, quienes
deciden conjuntamente la manera de medir
los avances y resultados previstos (IDS,
1998). Se trata de una metodologa cada vez
ms difundida, no solamente por su buena
relacin costo-ecacia, pues aprovecha las
capacidades y los recursos locales, sino
tambin porque impulsa a la poblacin
a examinar sus supuestos sobre lo que
constituye un adelanto, haciendo frente a los
conictos y contradicciones que pudieran
surgir. Se considera que los datos y anlisis
resultantes concuerdan mejor con los puntos
de vista y las aspiraciones de las personas
directamente interesadas.

Por regla general, los proyectos comunitarios


de pequea escala trabajan con presupuestos
reducidos, y con pocas capacidades en
trminos de tiempo y calicaciones del
personal. En esas situaciones, la investigacin
cuantitativa, que recurre a encuestas
por cuestionario y al acopio de datos en
gran escala, suele no ser apropiada. Otra
posibilidad consiste en involucrar a los
beneciarios, en calidad de agentes de su
propio desarrollo. En otras palabras, los
que se benecian con el proyecto deben
participar activamente en el seguimiento
del mismo (seguimiento participativo) y
en la evaluacin de sus repercusiones
(evaluacin participativa). Las personas con
quienes trabaja el proyecto pueden intervenir
peridicamente en la estimacin de factores

El S&E-P no se reere solamente a utilizar


tcnicas participativas en un entorno
tradicional de seguimiento y evaluacin. Se

GRUPOS DE DISCUSIN
Encuesta sobre el proyecto

Sumamente
satisfechos:  100%
nmamente
descontentos:  0%

Mi evaluacin
de su proyecto
demuestra

mmm, se asombr Juan, Pensaba que este proyecto era


problemtico. O a lo mejor slo queran ser amables?

13

las actividades del proyecto, garantizando as


que el proceso de evaluacin sea ms ecaz,
transparente y directo.

trata de renovar radicalmente la cuestin


de quin inicia y realiza el proceso, y quin
aprende o se benecia de los resultados.
(IDS, 1998, p.2)
En la Seccin 7 se presentan ejemplos de
tcnicas participativas.

1.9 Qu caracteriza
a una evaluacin bien
hecha?

1.7 A qu debe
aspirar la evaluacin?

Las evaluaciones bien hechas demostrarn los


siguientes aspectos:
Metas, objetivos y plazos claros (Seccin 3).

Una evaluacin de una intervencin


comunitaria tiene por objeto:

Participacin de los beneciarios del


proyecto en la planicacin y el seguimiento y
evaluacin del mismo (Seccin 7).

Disear el proceso para obtener la


informacin necesaria mediante diversos
mtodos.

Entendimiento y apropiacin comunes


de los objetivos del proyecto, y la manera
en que se han de alcanzar por parte de los
interesados y copartcipes, (Seccin 3.2).

Estimular la elaboracin de indicadores,


puntos de referencia e iniciativas claros.
Acopiar y analizar datos durante todo el
ciclo del proyecto en relacin con los objetivos
y resultados deseados.
Determinar los fallos, en caso de no
haberse alcanzado algunos objetivos (o
ninguno).

Proceso de acopio y anlisis de datos


manejable y realista. Mientras ms complejos
sean los instrumentos y mtodos utilizados,
mayores son las probabilidades de que fallen
(secciones 5 y 6).

Hacer los ajustes necesarios sobre la


base de la experiencia y de las lecciones
aprendidas.

La armonizacin de las herramientas y


recursos para el acopio de datos con otros
sistemas existentes (Seccin 6.8).

Retroalimentar con informacin a todos


los participantes en el programa y a las
comunidades locales.
Demostrar los resultados y las lecciones
aprendidas a las organizaciones nanciadoras
y a los proveedores de servicios.

Los recursos nancieros y humanos


apropiados para llevar a cabo el seguimiento y
evaluacin en los niveles necesarios. Cuando
la capacidad tcnica no es adecuada, el diseo
del programa debe comprender formacin y
asistencia tcnica (Seccin 6).

Utilizar los resultados nales para


contribuir a la planicacin y ejecucin
de iniciativas futuras en las comunidades
beneciarias.

Pertinencia y transparencia. El seguimiento


de los programas debe ser realizado de forma
transparente y los datos deben ser generados
y posedos por la comunidad (Secciones 4-7).
Retroinformacin adecuada para apoyar los
procesos de planicacin y proyectos futuros
(Seccin 6).

1.8 Por qu son tiles


los marcos y modelos?

El seguimiento y evaluacin deben ser


culturalmente apropiados y corresponder a las
normas ticas establecidas en las directrices
locales y nacionales (Seccin 6).

Cuando se planica un programa, puede ser


til trabajar dentro de un modelo o marco
estructurado. Los marcos son bsicamente
herramientas de planicacin, que pueden ser
usados para ayudar a congurar las ideas y la
estructura en que se apoyan la planicacin y
evaluacin de proyectos. Los marcos ayudan
a crear y aclarar las teoras, los supuestos y

14

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

15

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

16

2 Etapas
Sdeeccin
establecimiento

y planicacin del
proyecto y su evaluacin
2.1 El ciclo de planicacin del proyecto
2.2 Redaccin de la propuesta de proyecto
y obtencin de fondos
2.3 Evaluacin de las necesidades
2.4 Elaboracin de un marco de investigacin

17

18
18
19
20

2.1 El ciclo
de planicacin
del proyecto

2.2 Redaccin de la
propuesta de proyecto
y obtencin de fondos

Es til pensar en las etapas de un proyecto


como parte de un ciclo, donde cada etapa
ejerce un impacto e inuencias en las etapas
ulteriores, como se ilustra en la gura que
sigue.

El primer paso en cualquier proyecto, una


vez determinados las metas y objetivos
fundamentales, es redactar una propuesta
para obtener fondos. Esta Gua no pretende
proporcionar una lista completa de las
posibles fuentes de nanciacin. Sin embargo,
como primer paso puede ser conveniente
consultar Internet y los sitios web de los
organismos, y consultar con los principales
interlocutores del gobierno local, los grupos
comunitarios y los organismos nacionales
e internacionales. En algunos casos, puede
ser apropiado asegurar el nanciamiento
de la evaluacin de necesidades antes de
solicitar una cantidad mayor de fondos para la
intervencin propiamente dicha.

El ciclo del proyecto


Cuando se consideran el seguimiento y la
evaluacin de un proyecto, es de capital
importancia el compromiso de reintroducir
los resultados en el ciclo del proyecto y
aprovechar lo aprendido para congurar,
adaptar y mejorar el trabajo subsiguiente del
proyecto. La retroinformacin y el aprendizaje
deben tener lugar durante todo el transcurso
del proyecto.

Evaluacin de
las necesidades

Evaluacin
del proyecto

Informacin sobre
lo aprendido para
mejorar la ecacia
del proyecto

Ejecucin
y seguimiento
del proyecto

18

Planicacin
del proyecto

Indicar la medida en que se puede


movilizar a la comunidad interesada y se
puede adoptar, si conviene, un enfoque de
desarrollo comunitario. En este proceso
importa evaluar los puntos fuertes de la
comunidad. Si la comunidad est cohesionada
y muestra altos niveles de integracin y
participacin, podra ser ms conveniente
recurrir a las redes existentes.
Observar las percepciones,
interpretaciones y la aceptabilidad de los
materiales de promocin, los mensajes y otras
intervenciones.
Poner a prueba la adecuacin de los
enfoques y procedimientos de ejecucin.

2.3 Evaluacin
de las necesidades
Normalmente, si no se ha hecho ya, una
evaluacin de las necesidades se utiliza antes
de la ejecucin del proyecto para revisar
las metas y los objetivos del programa, as
como los mtodos de trabajo propuestos. Al
planicar la evaluacin de necesidades, es
preciso velar por la inclusin de las diferentes
partes interesadas y grupos de inters dentro
de la comunidad. En lo posible, es preciso
evitar que las opiniones de los miembros de
la comunidad ms expresivos o poderosos se
impongan en la discusin. Las evaluaciones
de necesidades tambin proporcionan una
oportunidad temprana para incorporar a la
comunidad local mediante un proceso de
consulta.

En esta etapa es prioritario crear criterios de


referencia para medir el cambio. Los mtodos
cualitativos de recopilacin de datos acerca de
la comunidad podran comprender:
Entrevistas en profundidad con
informantes clave de la comunidad receptora,
procurando identicar e incluir a los lderes
de los distintos grupos de inters o facciones
rivales. Las entrevistas pueden plasmarse en
vdeos de referencia en cuya realizacin los
beneciarios pueden intervenir y participar
con agrado.
Discusiones de grupo con profesionales
que trabajen en la comunidad y con gente del
lugar. Puede tratarse de personas procedentes
de asociaciones o instituciones locales, como
escuelas, centros comunitarios, grupos de
mujeres, campesinos reunidos en un mercado,
etc.
La invitacin a participar, por ejemplo
mediante los medios de comunicacin, la
organizacin de un foro de ciudadanos o un
debate pblico acerca de las metas y objetivos
del programa.

Una evaluacin de necesidades debe cumplir


los siguientes objetivos:
Permitir especicar con mayor claridad las
metas y objetivos de un programa.
Asegurar que el programa atiende a los
problemas y prioridades planteados por la
propia comunidad.
Proporcionar una vericacin inicial de que
las cuestiones que las personas exteriores a
la comunidad consideran importantes reejan
las prioridades de la comunidad.
Determinar cules son las cuestiones y
problemas planteados por un grupo de la
comunidad que constituyen preocupaciones
ms amplias.
Proporcionar informacin sobre las
principales partes interesadas de la
comunidad.

no podrs saber hasta


dnde has llegado

si no sabes dnde
empezaste...

19

La observacin participante en
actividades y grupos locales, dirigindose a la
gente de manera informal, y registrando las
observaciones en notas de terreno.
La recopilacin sistemtica de los
puntos de vista de amplias muestras de
la poblacin, por medio de cuestionarios
semi-estructurados con preguntas abiertas
que permitan a las personas expresarse
libremente.

planicar y llevar a cabo las etapas siguientes.


Las principales etapas son:

i.

Determinar los resultados

Determinar los resultados a corto y largo plazo


a partir de las metas y objetivos del proyecto.
En este punto debe recordarse la necesidad
de actuar con realismo. Al tratar de obtener
fondos puede caerse en la tentacin de
ambicionar ms de lo que se puede hacer. Ello
puede dar lugar ms tarde a una percepcin
de fracaso, en tanto que una gran parte del
trabajo positivo y benecioso se pierde debido
a que se han jado objetivos inapropiados
(vase la Seccin 5.6).

Vase tambin la Seccin 7.

2.4 Elaboracin de un
marco de investigacin

ii.

Indicadores

El presente manual recomienda planicar e


iniciar el seguimiento y la evaluacin desde el
comienzo del proyecto.2

Para cada uno de estos resultados, determine


los indicadores que se pueden utilizar para
demostrar si se han obtenido esos resultados
(vase la Seccin 5.6).

Se recomienda usar el marco de modelo lgico


(presentado en la Seccin 3) para ayudar a

iii.

Establezca estrategias para asegurar que


el proyecto est sometido continuamente a
evaluacin y examen (vanse las secciones 5
y 6).

En el Anexo 2 gura una serie ms completa de


tcnicas de evaluacin.

qu le pasa
a Mara?

Mtodos de evaluacin?

su espectculo de tteres
no ha tenido efectos
en los niveles de violencia
domstica en
el pueblo

20

iv. Quin realizar


la investigacin?

vi. Lista de control


de la evaluacin

Decida quin realizar la investigacin;


puede ser conveniente que diversos grupos
de personas lleven a cabo distintas partes
de la investigacin. Por ejemplo, el personal
del proyecto puede encargarse de un aspecto
del trabajo y los miembros de la comunidad,
de otro. Considere la manera en que la
comunidad ser incorporada al anlisis.

Aplique la lista de control de la evaluacin


que gura al nal de la presente Seccin, y
asegrese de que se ha contemplado cada
punto.

vii. Establecimiento
de prioridades
Establezca prioridades y sea realista.
Asegrese de que todo lo que hace es til y
tiene un propsito, y de que el personal del
proyecto comprende cabalmente los motivos
de la investigacin.

v. Herramientas
de investigacin
Determine las herramientas de investigacin
apropiadas para recopilar los datos necesarios
(vase la Seccin 6).

Siento llegar tarde. Mi madre se enferm, despus


no consegua pasaje, luego la inundacin bloque el camino
por ac, y al nal se pinch una rueda. Bueno, y ustedes
por qu no han alcanzado todos los objetivos jados
en el diseo del proyecto?

ONG
donante

21

Resumen: Lista de control recomendada para la evaluacin


De qu hay que preocuparse?
Cul es la nalidad de la evaluacin?

A quin le sirve?

El diseo de la evaluacin respalda la iniciativa que se realiza en el terreno?


La investigacin genera nuevos conocimientos?
Se usa la evaluacin como instrumento para conceder autonoma y capacidad de decisin
a las personas y comunidades que sirve?

Es usted realista?
Se dispone de recursos adecuados para la evaluacin?
Tienen los evaluadores formacin y competencias apropiadas en las tcnicas que se
les pide que apliquen? (esto podra ser particularmente importante en las evaluaciones
internas, es decir, cuando se pide al personal del proyecto que realice por s mismo una
gran parte de la evaluacin).
Estn los interesados de acuerdo en que los recursos previstos para la evaluacin sean
proporcionales a la magnitud general del proyecto (es decir, aproximadamente 10% del
presupuesto total del proyecto)?
Tienen todos los interesados opiniones similares respecto de lo que la evaluacin se
propone lograr?
Qu se ha hecho para asegurar que los nanciadores y los profesionales tengan una visin
realista de las comunidades con las que trabajan y acerca de su capacidad para asimilar y
participar en actividades de evaluacin de diversa ndole?
Qu se ha hecho para garantizar la compatibilidad entre los resultados propuestos del
proyecto y los plazos en que se espera se produzcan los cambios?
La meta y visin del proyecto son compatibles con los resultados previstos?
La evaluacin ha tenido en cuenta el contexto histrico, poltico y social (local y nacional)
en el cual se ejecuta el programa?
La evaluacin tiene en cuenta los supuestos tericos en los que se basa el proyecto?
Cules son las fuerzas polticas presentes? Cunto poder poltico se ejerce sobre el
proyecto?

tica? Trata usted a la gente con respeto?


Se ha elaborado un marco tico apropiado? El marco puede considerar la proteccin del
carcter condencial y annimo de las respuestas.
Quin examin las dimensiones ticas del proyecto, y cmo se aplicarn las normas
ticas?

22

Mtodos
La evaluacin es participativa? Los objetivos y los indicadores de seguimiento son SMART
(acrnimo en ingls que signica: Especco, Medible, Apropiado, Realista y Oportuno)?
Se ha concedido a la planicacin de la evaluacin la misma importancia que al acopio de
datos?
Est la evaluacin integrada en todas las etapas de elaboracin y ejecucin?
La metodologa elegida es la ms apropiada en relacin con las intervenciones del
proyecto? Aclare bien por qu.
Cmo se garantiza la calidad de la prctica y/o de la aplicacin de los mtodos? (habr
que formular preguntas diferentes segn que la investigacin haya sido encargada o llevada
a cabo internamente)
El tiempo asignado a la evaluacin es suciente para medir los resultados potenciales
(algunos de los cuales pueden producirse a muy largo plazo)?
Los mtodos utilizados son sucientemente exibles como para que se pueda dar
seguimiento a resultados imprevistos?

Difusin
Cmo se puede estimular a los evaluadores a informar ms cabalmente acerca de sus
actividades de evaluacin?
Se comunicarn los resultados a todos los participantes e interesados, de manera
signicativa, oportuna y apropiada?
Los resultados demostrarn tanto las fallas como los logros del proyecto?

23

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

24

eccin 3 El modelo
Slgico
de programa .

Qu es?
3.1 Qu son los modelos lgicos de programa?
3.2 Cules son las ventajas de la utilizacin
de un modelo lgico de programa?
3.3 Cmo se presentan los modelos lgicos de programa?
3.4 Terminologa
3.4. 1 Visin y meta del proyecto
3.4.2 Insumos
3.4.3 Productos
3.4.4 Resultados
3.4.5 Examinar los supuestos (teora)
3.4.6 Enlaces teora de la accin
3.4.7 Factores externos
3.4.8 Explicar la diferencia entre productos y resultados
3.4.9 Qu es la teora programtica?
3.4.10 Ejemplos de enlaces en un programa de educacin
sobre drogas

26
27
28
30
30
31
31
32
33
33
34
34
35
35

Los contenidos siguientes se basan en gran parte en Programme Development and Evaluation, un
programa elaborado por la Universidad de Wisconsin, que ofrece en Internet un excelente curso interactivo
sobre el modelo lgico de programa
(www.uwex.edu/ces/pdande/evaluation/evallogicmodel.html, consultado en noviembre de 2010).

25

3.1 Qu son los


modelos lgicos de
programa?

El modelo vincula los resultados (a corto y


largo plazo) con los procesos y las actividades
y con los supuestos tericos en que se basa el
programa. El modelo proporciona un marco de
planicacin, que subraya la manera en que
se espera que se desarrolle el programa, y en
qu orden escalonar las actividades, y observa
la forma en que se logran los resultados.
Incluye un anlisis de los insumos necesarios
para mantener el proyecto en funcionamiento,
y puede contribuir a la elaboracin de los
indicadores que se utilizarn para seguir
los avances del proyecto hacia las metas y
resultados previstos.

Los modelos lgicos han sido descritos de


diversas maneras y con distintos nombres:

un marco lgico
una herramienta de planicacin
un marco para ayudar a explicar y registrar
cmo funciona el programa y las teoras y
supuestos que lo sustentan
un modelo sensible que muestra la manera
en que se supone debera funcionar el
proyecto
un modelo para sealar las relaciones
lgicas entre los diferentes componentes
del proyecto; ayuda a ofrecer un panorama
simplicado de toda la intervencin

Los componentes habituales de un modelo


lgico de programa se indican en el siguiente
diagrama.

Accin del programa modelo lgico


Insumos

Productos
Actividades Participacin

Prioridades
Considerar:

Situacin
Necesidades
y fortalezas
Sntomas
y problemas
Participacin
de los
interesados

Misin
Visin
Valores
Mandatos
Recursos
Dinmica local
Colaboradores
Competidores
Resultados
deseados

Lo que
invertimos

Lo que
hacemos

A quines
llegamos

Personal
Voluntarios
Tiempo
Dinero
Investigacin
Materiales
Equipo
Tecnologa
Asociados

Organizar
talleres,
reuniones
Prestar
servicios
Elaborar
productos,
currculos,
recursos
Capacitar
Asesorar
Evaluar
Facilitar
Co-participar
Trabajar con
los medios de
comunicacin

Participantes
Usuarios
Organismos
Decisores
Pblico
Clientes
Satisfaccin

Resultados - Impactos
Corto plazo Medio plazo

Largo plazo

Resultados a Resultados a Impacto(s)


corto plazo medio plazo nal(es)
Aprendizaje
Concientizacin
Conocimientos
Actitudes
Habilidades
Opiniones
Aspiraciones
Motivaciones

Accin
Comportamiento
Prctica
Toma de
decisiones
Polticas
Accin social

Condiciones
Sociales
Econmicas
Cvicas
Ambientales

Factores Externos

Supuestos

Evaluacin
jar objetivos acopiar datos analizar e interpretar presentar informes
Parmetros temporales
Cundo debe realizarse cada etapa de la evaluacin?
Diagrama adaptado de http://www.uwex.edu/ces/pdande/evaluation/evallogicmodel.html (consultado en noviembre de 2010)

26

3.2 Cules son


las ventajas de
la utilizacin de
un modelo lgico
de programa?

qu hace falta para


atrapar al tigre que ataca
la aldea de la ta?

Buena
planicacin!
Buenas
estrategias!

Utilizar este tipo de sistema tiene muchas


ventajas, que van ms all de la elaboracin
de un marco de investigacin coherente.
Entre los benecios observados guran:

Planicacin y diseo
del programa
Elaborar un modelo lgico ayuda a aclarar
el razonamiento y a examinar las actividades
y los resultados respecto de las metas
y objetivos del proyecto. Una vez que el
proyecto est en curso de ejecucin, el
modelo puede utilizarse como herramienta
para garantizar que las actividades estn
correctamente orientadas y proceder a las
recticaciones necesarias.

Adems, permite promover una visin y


comprensin compartidas de las teoras y
supuestos en los que se basa el proyecto.

Revisar los supuestos


en que se basa el proyecto

Fomentar la apropiacin conjunta


y el compromiso con las metas
del proyecto

En proyectos comunitarios complejos


destinados a producir cambios mediante
diversos cauces4 entre los participantes del
proyecto, los mecanismos que intervienen en
el logro de cada resultado previsto y las teoras
que subyacen al proyecto, son a menudo
oscuros para el personal del proyecto. El
modelo lgico debera ayudar a todos los que
intervienen en el proyecto (particularmente
su personal y la poblacin interesada) a
comprender los mecanismos previstos para
inducir el cambio.

Lo ideal, es que las primeras etapas


de la elaboracin del modelo lgico se
aborden como un ejercicio conjunto, con
la participacin de todos los protagonistas
fundamentales del diseo y la ejecucin
del proyecto. Entre ellos se cuentan el
personal del proyecto, los nanciadores, los
representantes de la comunidad interesada
y otros agentes clave de la infraestructura
comunitaria local. El trabajo conjunto desde
una etapa temprana ayudar a establecer
relaciones de trabajo productivas y nociones
comunes entre los diferentes interesados.

qu hace falta para


preparar un proyecto de
calidad?

Aumentar el conocimiento, desarrollar las


capacidades y habilidades locales, fomentar la
autodeterminacin y la conanza en s mismos.

cin!
nica
la
p
a
gias!
buen
strate
e
s
a
n
bue

27

Son correctos sus supuestos sobre el proyecto?


En los programas sobre el VIH y el SIDA hay a menudo un supuesto (basado vagamente en la
teora del modelo de cambio comportamental) segn el cual el conocimiento acerca de las
maneras en que se transmite el VIH inducir directamente un cambio de comportamiento. Es
claro que la situacin en la vida real es ms compleja; la mente humana, que es un instrumento
muy sutil, pondera las ventajas relativas del cambio de comportamiento con respecto a un
anlisis de costo-benecio. Por ejemplo, si una trabajadora sexual corre el riesgo de perder
un cliente si insiste en el uso de preservativo, esto crear un incentivo negativo para adoptar
comportamientos seguros y ello pesar mucho en cualquier anlisis de costo-benecio. Por
otra parte, unos niveles elevados de autoestima constituirn un factor que puede mejorar las
posibilidades de una negociacin exitosa en cuanto al uso de preservativos.
En el contexto de un programa sobre drogas, se constata que el consumo de drogas es
el resultado de una compleja interaccin de factores sociales, culturales, psicolgicos y
econmicos. Por ejemplo, si un proyecto se desarrolla en un mbito de gran pobreza y penurias
donde una fuerte cultura de drogas prevalece entre una clase marginada de jvenes muy
alienados, est claro que el conocimiento de los peligros del consumo de drogas no ser el
nico factor que determine su comportamiento. El sentido de lealtad y camaradera entre los
miembros del grupo consumidor de drogas podra, a corto plazo, ser ms importante para
algunos jvenes que los efectos negativos sobre la salud a largo plazo. Para ser ms ecaces,
los proyectos deben tener en cuenta todos los factores que inuyen en el comportamiento
humano.

complejas e introducir mejoramientos, en


base a la nueva informacin que va surgiendo.

Un anlisis detallado, que examine cada


aspecto de la actividad del proyecto y
de los impactos previstos, dar lugar a
intervenciones ms ecaces y dirigidas
apropiadamente. Esta etapa es adems una
buena oportunidad para aclarar deniciones
bsicas que pueden prestarse a confusiones y
equvocos, tales como la autonomizacin y la
participacin (vase el Anexo 3 - Glosario).

Participacin
El proceso de elaboracin del modelo se
basa en tcnicas participativas que requieren
el trabajo conjunto de los interesados para
claricar los fundamentos del programa y
las condiciones en las cuales el xito es ms
probable. De esta forma hay ms posibilidades
de elaborar los cambios sobre la base del
consenso, despus de un proceso abierto
y transparente, y menos sobre la base de
personalidades, poltica e ideologa. Se
fomenta as entre los interesados un sentido
de pertenencia al proyecto ms fuerte.

Evaluacin permanente
El modelo ayuda a centrarse en cada
componente de la actividad del programa.
Las partes individuales pueden desglosarse
en actividades y vinculadas a resultados
que puedan evaluarse independientemente,
registrando los avances hacia los resultados
provisionales y a largo plazo. De esta manera
se establecen mecanismos slidos para
medir los resultados. Qu ocurre? Qu es
lo que surte efectos? Para quin? El modelo
permitira al equipo del proyecto detectar
los obstculos que impiden que el proyecto
funcione de manera ptima. Tambin le
brinda la posibilidad de valorar la facilidad
con la que se podrn medir los indicadores
seleccionados.

3.3 Cmo se presentan


los modelos lgicos
de programa?
Los modelos lgicos pueden tener muy
variadas formas y tamaos y se elaboran de
acuerdo a las necesidades particulares de
cada proyecto. Algunos modelos comienzan
con vnculos estructurales muy bsicos entre
los componentes del proyecto pero con el
tiempo van creciendo junto con el desarrollo
del proyecto y la capacidad creativa del
equipo del proyecto. Los modelos deben

Adems, el proceso debera ayudar a


encontrar las maneras de medir los resultados
ms intangibles (por ejemplo, niveles de
participacin, grado de autonomizacin,
cohesin de los grupos, etc.). Esto permite
registrar el progreso de iniciativas ms

28

representarse en un diagrama pictrico para tener una visin general de los nexos entre los
distintos componentes y procesos que conguran el proyecto.

Insumos Productos Resultados


1

1a
b

2a
b
c

3
4

3a
b

A veces un modelo lgico se construye como un cuadro con


listas de elementos en las columnas de insumos, productos
y resultados. (Vase la denicin de estos trminos en la
Seccin 3). El modelo puede incluir una cantidad limitada de
echas direccionales para ilustrar las conexiones y relaciones.
Puede comprender listas numeradas para indicar el orden en una
columna o indicar conexiones entre las columnas.

Otros modelos lgicos utilizan casillas conectadas con lneas y


echas.

Algunos modelos lgicos recurren a crculos y otras formas.


Ciertos grupos comunitarios han utilizado metforas tales como
ostras, rboles, huellas de pies y pulpos.

Unos modelos lgicos son simples, otros son complejos.

Algunos modelos lgicos demuestran slo partes de un modelo


completo; algunos no incluyen supuestos, situaciones o factores
externos; algunos incluyen solamente productos y resultados.

Diagramas extrados de http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm (consultado en noviembre


de 2010)

(Vase tambin las secciones 3.43 y 3.44)

Un modelo lgico es un instrumento para


mejorar los resultados de un programa.
Con frecuencia, el proceso de elaboracin
del modelo lgico es ms importante que el
resultado nal. Reexionar sobre las etapas
del proyecto, de manera lgica y sistemtica,
a menudo ayuda a detectar las insuciencias
(estructurales, econmicas o tericas).

Recuerde que el modelo lgico es slo un


MODELO. Con el n de simplicar y presentar
todo en una sola pgina, usted puede producir
modelos lgicos que muestren de modo
abreviado las complejidades del programa. Lo
ms importante es que el modelo lgico sea
claro y completo para quienes lo utilicen. Para
aprehender la teora del programa, el modelo
lgico debe demostrar los vnculos entre los
elementos.

El uso que se piensa dar al modelo lgico


determina su nivel de detalle y la informacin
que se incluye. Cuando un modelo lgico

29

nivel de exclusin social y de justicia social

se utiliza especcamente con nes de


investigacin, puede adaptarse para
hacer ms hincapi en los resultados. La
presentacin y el nivel de detalle pueden ser
muy diferentes. Las personas que trabajan
en las comunidades y necesitan medir los
resultados pueden desear mostrar ms
detalles en la cadena de resultados y anar
los componentes de insumos y productos.

redes de apoyo social


educacin
empleo y condiciones de trabajo
entorno fsico
prcticas personales de salud y estrategias
de adaptacin

Aspectos clave
Considere quines sern los usuarios
del modelo lgico. Quin necesita
comprender la utilidad y/o el propsito del
modelo: usted, su personal, la comunidad,
los nanciadores, los administradores, los
servidores pblicos.
Elija la representacin grca que ms
convenga al usuario y al uso.
Tenga en cuenta que decidir acerca de
una imagen nica que exponga la teora
del programa es a menudo la parte ms
difcil de la elaboracin y el uso de un
modelo lgico. Probablemente, el proceso
de elaboracin de la imagen nal sea ms
importante que sta.

problemas de desarrollo infantil

3.4 Terminologa

Al tiempo que considera su meta ms amplia,


es importante centrarse ms especcamente
en las prioridades del proyecto. Para un buen
seguimiento de la ecacia del proyecto es
fundamental contar con metas y objetivos
claramente articulados. stos demostrarn
cmo se est alcanzando el objetivo general
o la visin. Si la meta, por ejemplo, es reducir
la incidencia de la infeccin por el VIH, los
propsitos y objetivos pueden referirse a
un mejor conocimiento de los modos de
transmisin, modicar la percepcin del VIH,
informar sobre el cambio de comportamiento
o aumentar la autoestima. Las metas
y objetivos pueden tambin referirse
simplemente a establecer la infraestructura
necesaria para alcanzar objetivos futuros
a ms largo plazo (proporcionar locales,
capacitar al personal, etc.). Las metas
y objetivos deben estar directamente
relacionados con los indicadores (tema que se
discute en la Seccin 5.5).

servicios de salud
nutricin
funcin de los nanciadores (posible
imposicin de limitaciones)
Esta lista puede ser tan larga como quiera.
El ejercicio es importante porque pone en
perspectiva el gran nmero de variables que
pueden tener repercusiones en el proyecto, lo
que ayuda a comprender la complejidad de las
intervenciones en la comunidad y el limitado
impacto que pueden tener las intervenciones a
pequea escala.

Familiarizarse con los trminos que siguen le


ayudar a estructurar un modelo lgico.

3.4.1 Visin y meta del


proyecto
La visin ms amplia y general es: qu est
tratando de hacer por la comunidad? Puede
tratarse directamente de mejorar los niveles
de salud y bienestar (que se reejan en
ndices ms bajos de morbilidad y mortalidad).
Tambin puede tratarse de educacin o de
fortalecimiento de capacidades: elevar los
niveles educativos, la formacin o el bienestar.
Los proyectos comunitarios suelen estar
basados en una serie de valores bsicos (por
ejemplo, equidad, justicia social, libertad,
participacin).
Puede ser interesante discutir sobre los
principales obstculos para alcanzar las
metas en el seno del grupo beneciario.
Pueden intervenir algunos de los siguientes
factores:

Es importante claricar desde el principio


la funcin de los nanciadores. Han
impuesto obligaciones especcas, como
por ejemplo, actividades de seguimiento,
reuniones, participacin en el proyecto? Estas
condiciones alterarn el desarrollo oportuno
de las actividades del proyecto?

desigualdad de ingresos
situacin y clase social

30

3.4.2 Insumos

Los insumos son exibles y pueden variar


en estilo y contenido, en funcin del tipo
de proyecto emprendido. Por ejemplo, un
proyecto de educacin sobre las drogas
necesitar distintos tipos de insumos, segn
que tenga su base en entornos formales
(escuelas, centros de jvenes) o est dirigido
ms generalmente a muchachos de la calle o
a grupos transitorios (trabajadores migrantes
o de temporada).

Los insumos son los recursos y contribuciones


que usted y otros aportan a la iniciativa. Puede
tratarse de tiempo, personas (personal,
voluntarios, beneciarios, si participan), la
comunidad, el dinero, los materiales y el
equipo, los asociados, entre otras cosas.

Insumos

Es imposible determinar la importancia


relativa de los insumos. Sin embargo, hay un
mbito que a menudo se pasa por alto por
causa de las actividades ms tangibles: el
establecimiento de relaciones de colaboracin
slidas y apropiadas. Los asociados pueden
ser organizaciones locales directa o
indirectamente relacionadas con la actividad
del proyecto, proveedores de servicios,
nanciadores (nacionales e internacionales),
autoridades y grupos de usuarios.

Lo que
invertimos
Personal
Voluntarios
Tiempo
Dinero
Investigacin
Materiales
Equipo
Tecnologa
Asociados

Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/


interface/coop_M1_Overview.htm (consultado en noviembre
de 2010)

3.4.3 Productos
Productos
Actividades

Participacin

Lo que hacemos

A quines
llegamos

Organizar talleres,
reuniones
Prestar servicios
Elaborar
productos,
currculos,
recursos
Capacitar
Asesorar
Evaluar
Facilitar
Co-participar
Trabajar con
los medios de
comunicacin

Participantes
Usuarios
Organismos
Decisores
Clientes

Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm (consultado en noviembre de


2010)

Los productos son las actividades, servicios, eventos y otros elementos que llegan a las personas
(individuos, grupos, organismos) que participan en el proyecto o a quienes est destinado.
Los productos son lo que hacemos u ofrecemos. Comprenden talleres, servicios, conferencias,
encuestas comunitarias, facilitacin, asesoramiento local, etc.

31

Esos productos deben llevar a resultados concretos.

Resultados - Impactos
Corto plazo

Medio plazo

Largo plazo

Resultados a
corto plazo

Resultados a
medio plazo

Impacto(s)
nal(es)

Aprendizaje

Accin

Condiciones

Concientizacin

Comportamiento Sociales

Conocimientos

Prctica

Econmicas

Actitudes

Toma de
decisiones

Cvicas

Habilidades
Opiniones
Aspiraciones

Ambientales

Polticas
Accin social

Motivaciones

Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm (consultado en noviembre de


2010)

3.4.4 Resultados
Los resultados son los efectos, benecios, ventajas o desventajas directos para individuos, familias,
grupos, comunidades, organizaciones o sistemas. Son ejemplos los cambios en el conocimiento,
el mejoramiento de las habilidades, las modicaciones del comportamiento, las capacidades o la
toma de decisiones, y la elaboracin de polticas. Los resultados pueden ser a corto plazo, a medio
plazo y a largo plazo. Pueden ser positivos, negativos, neutros, deliberados o involuntarios, y pueden
medirse a lo largo del ciclo de vida del proyecto.
En este modelo los impactos se reeren a las consecuencias o efectos nales del programa. Por
ejemplo, una mayor seguridad econmica, menores ndices de tabaquismo entre los jvenes, o
una mejor calidad del aire. En este caso los impactos son sinnimo de resultados a largo plazo de
su meta. Se encuentran en el extremo derecho del diagrama del modelo lgico. Se reeren a los
cambios nales, a largo plazo, de las condiciones sociales, econmicas, cvicas o ambientales. En el
lenguaje comn, los trminos efectos y resultados suelen ser intercambiables.
Al considerar los impactos se deben tener en cuenta no slo los que se procuraba obtener sino
tambin los inesperados. Un ejemplo de ello son los proyectos relacionados con las diferencias
entre hombres y mujeres, destinados a elevar la autoestima y mejorar las posibilidades de estas
ltimas para obtener medios de sustento. Los impactos a largo plazo tendrn relacin con el
mejoramiento de la condicin econmica y social de las mujeres. El resultado de la autonomizacin
de stas y el fortalecimiento de su situacin puede ser importante en trminos de redenicin del
equilibrio del poder y la situacin en el hogar, lo que a su vez puede modicar los supuestos locales
acerca del statu quo.

En un proyecto nanciado por la UNESCO en Asia meridional, se dio a las mujeres tal capacidad
de decisin que comenzaron a armar su derecho a elegir marido y fueron aisladas por haber
contrariado cdigos de comportamiento muy arraigados. Si se prevn esas posibilidades en el
origen del proyecto, es posible atenuar los impactos negativos que podran producirse, y apoyar
a todos los miembros de la comunidad durante la transicin subsiguiente.

32

3.4.5 Examinar los supuestos


(teora)

una de las razones que explican la falta de


resultados. Puede ser til incorporar un ciclo
de reexin en el proceso. En otras palabras,
el modelo lgico puede disearse desde el
origen del proyecto y ser revisado a intervalos
regulares, a n de reevaluar los supuestos
utilizados y examinar lo que ha cambiado y por
qu.

3.4.6 Enlaces teora


de la accin
Las echas direccionales pueden ser
utilizadas en el modelo lgico para indicar
la manera en que se vinculan los diferentes
elementos del modelo. Las conexiones pueden
ser verticales y horizontales, unidireccionales
o bidireccionales, e indicar los circuitos de
retroinformacin.

Supuestos
Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/
coop_M1_Overview.htm (consultado en noviembre de 2010)

Los supuestos son los principios, creencias e


ideas que tenemos acerca del programa y las
personas interesadas, y sobre la manera en
que pensamos que el programa funcionar.
Los supuestos conducen a la creacin de
creencias subyacentes al respecto; son
validados gracias a la investigacin y la
experiencia. Los supuestos subyacen tras las
decisiones que hacemos acerca del programa
y a su vez inuyen sobre ellas. Pueden tener
relacin con:
El problema o la situacin

Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/


coop_M1_Overview.htm (consultado en noviembre de 2010)

Los recursos y el personal


Son los enlaces, y no solamente los insumos,
los productos y los resultados, lo que conere
su poder al modelo. Disear las conexiones
es a menudo una tarea larga y engorrosa,
pero necesaria. Es lo que nos garantiza que
hemos establecido todas las conexiones
lgicas. A veces, a n de simplicar, incluimos
solamente los enlaces primarios, ya que de
otro modo el modelo lgico sera muy difcil de
leer.

La manera en que funcionar el programa


Lo que el programa espera lograr
La base de conocimientos
El contexto externo
El contexto interno
Los participantes: cmo aprenden, su
comportamiento, motivaciones, etc.

Al cabo del proceso, el resultado nal nos


remite tericamente al comienzo. Se anticipa
que, al concluir el proyecto, la situacin inicial
habr sido transformada. La gran echa
de retroinformacin que gura en la parte
superior derecha del modelo lgico tiene por
objeto ilustrar esta conexin y la dinmica de
la programacin. Algunos preeren indicar el
ujo circular del modelo lgico que conecta
explcitamente el nal con el principio. En
la prctica, los contextos de programa son
dinmicos y cambian constantemente, de
manera que el comienzo rara vez es el
mismo.

Al elaborar un modelo lgico queremos


explicitar todos los supuestos que hacemos
intervenir. Aun si no se explicitan todos
en el grco, es importante explorarlos y
discutirlos.
Considere y aclare sus supuestos relativos a
todas las dimensiones de su modelo lgico.
Qu es lo que sabe? Qu es lo que est
suponiendo? Siga vericando y aclarndolos a
medida que avanza. Los supuestos errneos
o que se han pasado por alto son a menudo

33

la ejecucin del programa

Muchos calican estos enlaces de relaciones


si... entonces.... Leyendo de izquierda a
derecha, un modelo lgico muestra una serie
de relaciones si... entonces.... Al elaborar
un modelo lgico hay que tener en cuenta
los supuestos implcitos, es decir, cmo se
han hecho los enlaces? Son los supuestos
realistas y consistentes? En qu pruebas o
hechos fundamentamos los supuestos?

la velocidad y el grado de los cambios


los participantes y los receptores
las pautas de personal y de recursos
disponibles
Un ejemplo simple es la migracin masiva
tras la apertura de una fbrica en la ciudad,
que ofrece oportunidades de empleo; en ese
proceso se puede perder tanto al personal
del proyecto como a sus beneciarios.
Inversamente, un proyecto exitoso que
promete el desarrollo de medios de sustento
sostenibles para los ms vulnerables puede
alentar a ms personas a migrar hacia la
zona del proyecto, planteando tal vez ms
demandas a los recursos del proyecto.
Un ciclo de reexin, como se seal
anteriormente (3.4.5) podra constituir un
foro adecuado para estimar el impacto de
los factores externos (tanto esperados como
imprevistos).

3.4.7 Factores externos


Un programa no existe aislado, fuera o lejos
de su entorno. Un programa est bajo la
inuencia de factores externos, sobre los
que a su vez inuye. Se trata por ejemplo
del medio cultural, el clima, la estructura
econmica, las pautas de vivienda, los
parmetros demogrcos, el entorno poltico,
los antecedentes y la experiencia de los
participantes en el programa, la inuencia de
los medios de comunicacin, las polticas y
prioridades cambiantes. Todos ellos pueden
tener importantes efectos en el logro de los
resultados, y no pueden ser ignorados. Entre
los elementos que pueden ser afectados
guran:

3.4.8 Explicar la diferencia entre productos y resultados


Es importante comprender la distincin entre productos y resultados.
Los productos designan lo que hacemos. Los resultados y los impactos se reeren a lo que
constituye una diferencia entre la situacin anterior al proyecto y la situacin posterior al proyecto.

Resultados - Impactos
Productos
Actividades

Corto plazo

Medio plazo

Largo plazo

Resultados
a corto plazo

Resultados a
medio plazo

Impactos(s)
nal(es)

Aprendizaje
Concientizacin
Conocimientos
Actitudes
Habilidades
Opiniones
Aspiraciones
Motivaciones

Accin
Comportamiento
Prctica
Toma de
decisiones
Polticas
Accin social

Condiciones
Sociales
Econmicas
Cvicas
Ambientales

Participacin

Lo que
hacemos

A quines
llegamos

Organizar
talleres,
reuniones
Prestar servicios
Elaborar
productos,
currculos,
recursos
Capacitar
Asesorar
Evaluar
Facilitar
Co-participar
Trabajar con
los medios de
comunicacin

Participantes
Usuarios
Organismos
Decisores
Clientes

Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm (consultado en noviembre de


2010)

34

Anteriormente se haca hincapi en la


columna relativa a los productos: lo que
hacemos y a quines llegamos. Registrar
los productos ayuda a informar a los clientes,
nanciadores e interlocutores de la comunidad
acerca de la ndole de la actividad del proyecto.
La mayor parte de los proyectos se ocupan
en grado razonable de la descripcin y el
recuento de actividades y del nmero de
personas atendidas. La cuestin ms difcil se
reere a: Cul es la diferencia?. Se trata de
una cuestin de RESULTADOS e impactos.

Por ejemplo, la teora en que se basa un


programa de intervencin sobre drogas
puede consistir en que, si se da autonoma y
educacin a los jvenes sobre el mal uso de
las drogas, el proyecto les dar conocimientos
y conanza para decidir no usarlas o para
consumirlas de manera menos perniciosa,
dndoles as capacidades y estrategias para
seguir distintos rumbos.

3.4.10 Ejemplos de enlaces


de un programa de educacin
sobre drogas

En algunos modelos lgicos se pueden ver


las actividades separadas de los productos,
algunas de ellas presentadas a menudo antes
de stos. En esos modelos, los productos se
designan generalmente como los logros o
el producto de la actividad. Por ejemplo, el
nmero de talleres efectivamente realizados
o el nmero de personas que escucharon el
mensaje de comunicacin. El supuesto es
que es preciso realizar la actividad tal como
estaba previsto antes de que puedan ocurrir
los resultados esperados.

INSUMOS
Formacin de personal en educacin
sobre drogas
Talleres con la participacin del personal
y del grupo destinatario para nalizar el
programa y el contenido de la formacin

3.4.9 Qu es la teora
programtica?

PRODUCTOS

Un modelo lgico indica la serie de conexiones


o relaciones lgicas que se espera lleven
con el tiempo a los resultados deseados.
El modelo es bsicamente un marco o
instrumento de planicacin; sin embargo, en
el marco hay una serie de supuestos lgicos
que constituyen las bases tericas de la
labor del proyecto. Esta base lgica ha sido
denominada teora de accin del programa
(Patton, 1997) o teora del cambio (Weiss,
1998).

Realizacin de talleres para


el grupo interesado

RESULTADOS
A corto plazo: aprendizaje, concientizacin,
conocimientos, actitudes

Una teora del cambio es una descripcin de


cmo y por qu se espera que un conjunto
de actividades (que pueden ser parte de un
programa muy especco o una iniciativa
general) lleven a resultados tempranos,
intermedios y a largo plazo en un periodo
determinado.

A mediano y largo plazo: mejoramiento


de la salud, el comportamiento
y la situacin econmica
Un anlisis ms detallado de esas relaciones
ayuda a establecer una impresin acerca de
su solidez. Por ejemplo, en la medida en que
un taller sobre drogas sea bien planicado,
estructurado y orientado (sus supuestos),
no es irrealista esperar un mayor nivel
de conocimiento sobre las drogas al nal
de la actividad. Sin embargo, es un poco
ms dudoso esperar que los resultados
de los talleres educativos previstos a plazo
medio y largo lleven a modicaciones
comportamentales o a una salud o situacin
econmica mejores. Son numerosos los

Algunos pueden considerar que la nocin


de teora es demasiado acadmica, pero en
realidad se reere slo a lo siguiente:

Expectativas
Creencias
Experiencia
Sabidura tradicional

35

factores externos que pueden intervenir, y que se podran sealar como echas que salen del
modelo lgico. Por ejemplo, algunos factores externos que podran dicultar a los individuos la
adopcin de un comportamiento ms seguro en materia de drogas son los siguientes:

Ejemplos de factores que pueden inuenciar el comportamiento


de consumo de drogas
Establecer de este modo las conexiones, demostrando los factores que pueden inuir en los
resultados (muchos de los cuales quedan fuera del control inmediato del proyecto) ayuda a situar el
proyecto en un contexto realista.

Baja
autoestima

Acceso
a otras
actividades
sociales
y de ocio

Nivel de
conocimiento

Comportamiento de
consumo de
drogas

Comportamiento de
los pares

Nivel de
apoyo social

Acceso
fcil a las
drogas

36

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

37

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

38

4 Cmo disear
Suneccin
modelo lgico

4
Etapa 1 : Determinar el propsito del modelo lgico:
quin lo utilizar, y para qu?
Etapa 2: Incorporar a otros
Etapa 3: Establecer los contornos del modelo lgico
Etapa 4: Comprender la situacin
Etapa 5: Escribir un anlisis de la situacin
Etapa 6: Examinar las investigaciones y conocimientos de base
Etapa 7: Comenzar a rellenar las casillas vacas

39

40
40
40
40
40
42
42

Etapa 2: Incorporar
a otros

El diseo de un modelo lgico es un proceso.


Para llegar a utilizar ecazmente un
modelo lgico se necesitan tiempo y
prctica. La mejor manera de aprender es
la prctica! El sitio interactivo (en ingls)
http://www.uwex.edu/ces/lmcourse/ es
muy til para ejercitarse con los modelos
lgicos. Vale la pena trabajar con el mdulo
de autoaprendizaje de este sitio, que
recorre clara y metdicamente todas las
etapas y ofrece numerosas oportunidades
de practicar.

Quines deberan participar en la


elaboracin del modelo lgico?
Quines deberan facilitar este proceso?

Etapa 3: Establecer los


contornos del modelo
lgico

El aspecto ms importante del diseo de


un modelo lgico podra ser el proceso
de construccin, antes que el producto
acabado. A travs de ese proceso se
desarrollan la comprensin, el consenso y
la claridad en cuanto a la concepcin del
programa, elementos crticos para el xito
del mismo.

Qu expresar el modelo lgico?: una


actividad nica, especca (por ejemplo, un
simple espectculo de tteres para educar
sobre el VIH y el SIDA en un contexto
determinado), o una iniciativa ms amplia
consistente en actividades diferentes,
pero complementarias? Por ejemplo, una
serie de espectculos de tteres, junto con
una distribucin de octavillas y trabajo
de difusin en la comunidad a lo largo de
varios meses.

Los modelos lgicos se anan y cambian


repetidamente. Deje su modelo lgico en
un lugar visible, tal vez jado en una pared,
donde pueda ser modicado al tiempo que
se ejecuta el proyecto. Modique el modelo
a medida que la dinmica del proyecto
empieza a cambiar y se aprende ms
acerca del programa.

Qu nivel de detalle se necesita?


Quin utilizar el modelo lgico? Cmo?

El comienzo

Etapa 4: Comprender
la situacin

Etapa 1: Determinar el
propsito del modelo
lgico: quin lo
utilizar, y para qu?

La informacin necesaria para esta etapa


puede obtenerse de la evaluacin de
necesidades explicada en la Seccin 2.3.

Por qu est formulando un modelo


lgico?

Etapa 5: Escribir un
anlisis de la situacin

Su objetivo es cumplir un requisito


administrativo? Mostrar a sus
nanciadores lo que est haciendo?
Rellenar una propuesta de subvencin?
Denir un plan de trabajo? Evaluar
su programa? Mejorar la calidad de
su trabajo? Incorporar a todos los
interesados en un proceso participativo
para obtener comprensin y compromiso
acerca del proyecto?

Ese texto ser el cimiento de su modelo lgico.


Estar basado en las siguientes preguntas:
De qu problema o cuestin se trata?
Por qu es un problema? (Cul es la
causa del problema?)
A quin se plantea este problema y en
qu niveles (individual, domstico, grupal,
comunitario, de la sociedad en general)?

Asegrese de que todos los que trabajan en


el modelo comprenden su utilidad.

40

Quines tienen inters en el problema? (Para quin es importante que se resuelva?)


Qu sabemos acerca del problema, la cuestin o la gente de que se trata? De qu experiencia
e investigaciones disponemos?

Un anlisis de situacin de un proyecto de educacin


sobre drogas:
En un programa sobre drogas, por ejemplo, su problema (detectado durante una evaluacin
de necesidades) puede ser que en una comunidad especca (escuela, aldea, mercado) el 20
por ciento de los jvenes de 13 a 20 aos consumen drogas ilegales. Una vez determinado el
problema, debe analizar minuciosamente:
Cules son los benecios percibidos de este comportamiento? (es decir, por qu los jvenes
consumen drogas? Entre los benecios percibidos pueden gurar un sentido de pertenencia a
un grupo, o la sensacin placentera que proporciona la droga).
Cules son los impactos negativos de este comportamiento? (a corto y largo plazo).
A qu grupos afectan las drogas, por ejemplo, jvenes, padres, custodios, familia
ampliada, escuela? Esto ayudar a decidir quin tiene algn tipo de inters en un cambio de
comportamiento y por lo tanto podra desear participar en el programa.
Examine los impactos desde diferentes ngulos: social, psicolgico, econmico.
Para responder cabalmente a estas preguntas es importante dirigirse a los interesados de la
comunidad (comprendido el grupo destinatario: los jvenes consumidores de drogas) y reunir
pruebas y hechos de otras fuentes. Los mtodos de acopio de datos pueden comprender
discusiones con administradores de programas similares, el estudio de publicaciones o de
informes de evaluacin, entrevistas con otros profesionales, etc.

El anlisis de la situacin puede ser un texto


anexo del modelo lgico. Es conveniente
incluir algunas palabras a la izquierda del
modelo lgico, que expresen la esencia del
proyecto. Cul es el problema o situacin?
Con frecuencia diseamos y ejecutamos
programas sin considerar y comprender
plenamente la situacin. Mientras mejor
comprendamos la situacin y analicemos el
problema, ms fcil ser elaborar modelos
lgicos ecaces.

y sus sntomas proporciona una directriz que


permite seguir el avance del proyecto.
Describir a los afectados por el problema
ayuda a determinar quines son los
beneciados.

Fijacin de prioridades
Del anlisis de la situacin se deriva la
jacin de prioridades. Una vez analizados
la situacin y el problema en su totalidad,
se pueden jar prioridades. Rara vez es
posible hacer todo, de modo que es necesario
priorizar. En este caso intervienen varios
factores: su cometido, valores, recursos,
competencia, experiencia, historia, lo que sabe
acerca de la situacin y de lo que otros hacen
en relacin con el problema. Las prioridades
conducen a la determinacin de los insumos y
resultados deseados.

El anlisis de la situacin constituye la base


del resto de su trabajo y sobre la cual se
elaborar el modelo lgico. El contexto social
del proyecto est abierto a ujos y cambios
constantes y por lo tanto debe ser actualizado
cuando sea preciso.
El anlisis de la situacin establece un punto
de referencia para comparaciones durante la
ejecucin del proyecto y para la nalizacin
del programa. Una descripcin del problema

41

Etapa 6: Examinar
las investigaciones y
conocimientos de base
La manera en que produce su modelo
depender de la etapa en que se encuentra
su proyecto y de sus conocimientos. Es ms
conveniente utilizar un modelo lgico de
programa como herramienta para ayudar a
planicar el proyecto (ejecucin, entrega y
evaluacin), aunque tambin puede ser til
si se introduce en una etapa ulterior de la
ejecucin del proyecto.

Cul es su meta nal?


Qu ser diferente?
En qu sentido habr diferencias gracias
al programa entre la poblacin beneciaria, la
comunidad amplia, la infraestructura social y
econmica o el entorno?
Determine una armacin sencilla que
exprese el resultado nal que aspira a obtener.
Este resultado nal es el mismo que su
meta. Dedique tiempo a claricar y denir el
resultado a largo plazo que desea obtener.
Una vez convenido su resultado a largo plazo
(resultado nal/meta), trabaje retrocediendo
en el modelo lgico. Para ejercitarse puede
utilizar el modelo en blanco que gura en el
Anexo 4.

Etapa 7: Comenzar
a rellenar las casillas
vacas
Cul es la diferencia a la que aspira al nal
del programa con relacin a la situacin
anterior?
Al escribir su modelo lgico debe expresar
claramente lo que desea conseguir con el
proyecto:

Planicacin hacia atrs

Insumos

S
I
T
U
A
C
I

P
R
I
O
R
I
D
A
D
E
S

Qu
recursos
necesitamos?

Resultados-Impactos

Productos
Actividades
Qu
debemos
hacer para
que los
individuos/
grupos
puedan
obtener los
resultados a
corto plazo?

Participacin

Corto plazo

Medio plazo

Largo plazo

A quin
debemos
llegar para
que se
logren los
resultados
a plazo
medio?

Qu
requisitos
deben
cumplirse
para que se
logren los
resultados a
plazo medio?

Qu
requisitos
deben
cumplirse
para que se
alcance la
meta nal?

Cul es la
meta nal?

Supuestos

Factores externos

Ejecucin hacia adelante


Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm (consultado en enero de
2008)

42

Recuerde!

Conviene dedicar uno o dos das a reunirse con


todos los miembros del equipo del proyecto
y las partes interesadas. El proceso puede
exigir tiempo, pero ser provechoso. Prepare
una hoja de papel de gran tamao, hojas para
tomar notas, muchos lpices marcadores
de colores, cinta adhesiva para unir listas
y diagramas a medida que desarrolla sus
reexiones. Dibuje varios grandes crculos en
la hoja y rotule cada uno con los componentes
clave del proyecto que desea examinar. Puede
tratarse de:

No hay una manera correcta o incorrecta


de disear un modelo lgico. Experimente y
encuentre el proceso que mejor funciona para
usted y su grupo.
Para planicar un programa se recomienda
el mtodo de empezar por el nal.
Un modelo lgico es dinmico: modifquelo
a medida que cambian su programa, el
entorno o la gente.
Dedique intervalos peridicos a la revisin
de su modelo lgico, esto es, ciclos de
reexin.
En gran parte, la utilidad de un modelo
lgico reside en el proceso de su creacin,
vericacin y modicacin. En este proceso,
de carcter iterativo, los interesados
trabajan conjuntamente para claricar los
supuestos de base, las expectativas y las
condiciones en las cuales el xito ser ms
probable. Recuerde que las principales partes
interesadas son los destinatarios del proyecto.
Los dems interesados pueden ser el
personal, los nanciadores, las organizaciones
no gubernamentales y organizaciones anes, y
las autoridades locales.

1. Meta o visin
2. Metas y objetivos del proyecto
3. Actividad: cul es su intervencin
proyectada?
4. Productos del proyecto
5. Resultados del proyecto
6. Metodologa de evaluacin
7. Supuestos sobre la meta del proyecto
Cada crculo estar unido de algn modo a
todos los dems; usted debe formular los
enlaces y conexiones. A medida que reexiona
y discute, anote en su diagrama la nueva
informacin.

43

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

44

eccin 5 Estructurar
Sy de
nir su evaluacin

5.1 En qu punto se inserta la evaluacin en un modelo


lgico?
5.2 De qu manera el modelo lgico facilita la evaluacin?
5.3 Qu evaluar? El objetivo
5.4 A qu procurar responder la evaluacin?
Las preguntas
5.5 Ejemplo de un modelo lgico con preguntas
para la evaluacin
5.6 Indicadores. Cmo sabr si se han alcanzado
las metas y los objetivos?
5.7 Calendario, programacin y recoleccin de datos

45

46
46
46
47
49
49
51

5.1 En qu punto
se inserta la evaluacin
en un modelo lgico?

5.2 De qu manera el
modelo lgico facilita la
evaluacin?

El modelo lgico describe su programa


o iniciativa, los resultados esperados y el
modo de lograrlos. La evaluacin le ayuda a
saber qu tan satisfactoriamente funciona
en la prctica su programa o iniciativa. Qu
funcion bien, qu fall y por qu? Cmo
hacerlo mejor?

Tal vez se pregunta: Por qu dedicar tanto


tiempo a modelos lgicos cuando lo nico
que necesito es evaluar medir resultados y
contar mi historia? En ese caso, recuerde:
Efectuar una evaluacin de un programa
mal concebido es una utilizacin inecaz de
recursos. Los modelos lgicos pueden ayudar
a mejorar la concepcin del programa de
modo que la evaluacin sea ms til y ecaz.

EVALUACIN
Qu es lo que desea saber?

Cmo lograr saberlo?

Diagrama extrado de: http://www.uwex.edu/ces/lmcourse/interface/


coop_M1_Overview.htm (consultado en noviembre de 2010)

Realizar una evaluacin de programas que


no estn listos para ser evaluados tambin
supone un malgasto de recursos. Los modelos
lgicos pueden ayudar a determinar cules
datos sern tiles y cundo es ms oportuno
el acopio de datos.
Para organizar una evaluacin que
ponga razonablemente a prueba la teora
programtica, debe tener una idea clara de
la reexin terica que sustenta la iniciativa
(Weiss, 1998). Un modelo lgico incita a
emprender ese proceso reexivo.

Piense de qu modo puede integrarse la


evaluacin en su modelo lgico completo,
como se ha descrito.

En sntesis, los modelos lgicos facilitan las siguientes tareas:

Objetivo

determinar lo que se ha de evaluar

Preguntas

Indicadores

Calendario

Acopio de datos

formular
preguntas
apropiadas para
la evaluacin

saber qu
informacin
acopiar para
responder a esas
preguntas

saber cundo
acopiar los datos

organizar el acopio
de datos fuentes,
mtodos, muestra,
instrumentos

Diagrama procedente de: http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm

5.3 Qu evaluar? El objetivo


Una de las principales ventajas del modelo lgico es que clarica qu es el programa. Al determinar
lo que se debe evaluar, pregntese:
Qu desea evaluar en particular? Se centra la evaluacin en la totalidad o el conjunto del
programa, o en un componente del programa? Tal vez preera concentrarse en la campaa
meditica de su programa de extensin o en un determinado grupo destinatario.
Los programas son a menudo complejos. Puede que no disponga de recursos sucientes para
examinarlo todo, o no necesite hacerlo. Utilice el modelo lgico para elegir el aspecto especco, el
alcance, el componente o las partes que desea evaluar.

46

5.4 A qu procurar
responder la evaluacin?
Las preguntas

pocas preguntas es mejor que contestar


inadecuadamente a muchas. Recuerde las
palabras de Einstein: No todo lo que se puede
contar, cuenta. Ni todo lo que cuenta, se
puede contar.
Con frecuencia una evaluacin cobra vida
propia. Surge la tentacin de pensar que
necesitamos ms y ms datos. Es importante,
empero, mantener la evaluacin lo ms
centrada y simple posible. De otro modo, se
corre el riesgo de intentar hacer demasiado
y terminar con informacin con la que no se
sabe qu hacer. Por ejemplo, si est evaluando
un programa de educacin sobre el VIH y el
SIDA, cercirese de que los datos que acopia
guardan relacin con una serie de objetivos
muy concretos relativos a los conocimientos,
las actitudes y los comportamientos
relacionados con el tema. Incluir otros tipos
de informacin, por ejemplo, sobre otros
comportamientos saludables (dieta, consumo
de medicamentos, pertenencia a grupos
comunitarios, etc.), es tentador, pero puede
complicar excesivamente el anlisis nal.

Es mejor conocer algunas de las preguntas


que todas las respuestas.
James Thurber
Lo importante es no dejar
de hacer preguntas. La curiosidad tiene
su propia razn de ser.
Albert Einstein

Evaluar consiste en hacer preguntas acertadas


y crticas, para ayudarnos a aprender y
a responder adecuadamente. Encontrar
las preguntas apropiadas es un aspecto
importante de la elaboracin de evaluaciones
tiles.

Lo que decida medir depende de quin


utilizar los resultados, y con qu nes.
Tambin inuyen el tiempo, el dinero y las
competencias disponibles.

Qu es importante medir? A qu
dedicar tiempo y recursos?
Elementos clave para reexionar sobre las
preguntas de la evaluacin:

Recuerde que es importante evaluar


resultados no previstos (esto es, cosas que no
previ que sucederan) as como resultados

No podr medirlo todo, y no lo har.


Encontrar respuestas correctas a unas

El donante sugiere medir los cambios


registrados en redes comunitarias de
40regiones y cotejar esa informacin con la
participacin masculina en nuestro proyecto
de generacin de ingresos. Esto medir
perfectamente nuestro objetivo.
icicleta...

con mi b

o
con mi salari
r
po
a
d
de un
semana...
A&E

47

esperados. Se pueden producir algunos


cambios que no se consideran positivos:
es tan importante tomar nota de stos como
de los cambios que han sido beneciosos.
(Vase, por ejemplo, la seccin 3.4.4).

de decisiones relativas al programa.


Sac usted provecho de la sesin educativa
sobre el uso indebido de drogas a la que
asisti? es un ejemplo de pregunta amplia
de evaluacin. Se le podra conferir ms
precisin descomponindola en unidades ms
pequeas. Por ejemplo:

Recuerde que la evaluacin debe ajustarse a


la etapa en que se encuentra el programa. Por
ejemplo:

Han cambiado las ideas que tena sobre


las personas que consumen drogas? De qu
modo?

Puede ser inadecuado evaluar un cambio


de comportamiento cuando el programa
slo consiste en un nico seminario o una
iniciativa meditica limitada; por ejemplo, no
es pertinente intentar medir cambios en la
autoestima de personas que slo miraron un
dibujo animado educativo o asistieron a una
clase destinada a padres.

Piensa que una persona que consume


drogas es condenable?
Ha cambiado su comportamiento (o es
probable que cambie) como resultado de su
participacin en el curso?
Aprendi usted nuevas estrategias que
puedan ayudar a modicar comportamientos?

Es preciso saber con la mayor claridad


posible lo que usted REALMENTE quiere
saber, a n de concentrar sus esfuerzos.
Las preguntas de la evaluacin que son
amplias y vagas, tienden a generar respuestas
igualmente vagas que son difciles de
interpretar y poco tiles para la adopcin

PROYECTO

Obtuvo alguna otra cosa del curso? (Esto


puede no tener que ver con la educacin sobre
drogas).

PROYECTO+VIDA=
RESULTADOS NO
PREVISTOS
48

5.5 Ejemplo de un modelo lgico con preguntas


para la evaluacin
El modelo lgico puede ayudarle a denir preguntas apropiadas para su evaluacin.

S
I
T
U
A
C
I

P
R
I
O
R
I
D
A
D
E
S

Los padres
conocen mejor
el desarrollo
infantil

Concebir un
plan de estudios
para los padres

Personal
Dinero
Asociados

Impartir 6
cursos de
formacin
interactiva con
documentacin

Los padres
aprenden
nuevas formas
de imponer
disciplina

Los padres
destinatarios
asisten

Reduccin de
los ndices
de maltrato
infantil y
descuido de los
nios entre los
participantes

Los padres
utilizan mejores
aptitudes
parentales

PREGUNTAS CLAVE DE LA EVALUACIN


Fueron los
insumos
sucientes,
oportunos?

Se produjo
un plan de
estudios?
Se impartieron
los 6 cursos?
Cun
ecazmente?

Asistieron
todos los padres
que preveamos?
Quines
asistieron/
no asistieron?
Participaron
en los 6 cursos?
Por qu/por
qu no?

Aument el
conocimiento?
Aprendieron
nuevos
enfoques? Qu
ms ocurri?

Los padres
utilizan
realmente las
competencias
mejoradas?
O qu ocurre?
Qu diferencias
aportan estas
competencias?

Hubo una
disminucin
de los ndices
entre los
participantes?
Qu metas se
alcanzaron?

Hubo acontecimientos locales que impidieron a


los padres asistir a los cursos?

Son correctos los supuestos?


Asistieron los padres como estaba previsto?
El cambio de conocimientos indujo un cambio
de comportamiento?

Diagrama procedente de: http://www.uwex.edu/ces/lmcourse/interface/coop_M1_Overview.htm (consultado en


noviembre de 2010)

5.6 Indicadores. Cmo sabr si se han alcanzado


las metas y los objetivos?
Un indicador es la prueba del fenmeno sobre el que est haciendo preguntas, o informacin que lo
representa. Por ejemplo:
Los indicadores le ayudan a evaluar los
progresos en curso del proyecto (indicadores
de proceso) y a determinar si se han logrado
o no resultados previstos (indicadores de
resultados). Los indicadores denen los datos
que se acopiarn y deben estar directamente
relacionados con las metas y los objetivos
esenciales del proyecto. Pueden ser
vistos (observados), odos (respuestas
de participantes), ledos (archivos de una
organizacin), sentidos (clima de la reunin),
tocados u olidos. Es la prueba que responde a
las preguntas.

Los indicadores de proceso se reeren a una


actividad en curso del proyecto y pueden
incluir:
el nmero de personas que asisten a los
actos pblicos del proyecto
la nalizacin de la infraestructura
vinculada al proyecto (edicios, publicaciones,
espectculos, cursos de formacin, etc.)
el grado de conciencia de la comunidad y la
respuesta a las iniciativas en curso
Entre los ejemplos de indicadores de
resultados a corto plazo en un programa
educativo sobre las drogas pueden gurar:

Algunos indicadores pueden ser explcitos y


fciles de medir; otros son ms complejos.
Las evaluaciones deben incluir siempre una
combinacin de indicadores de proceso e
indicadores de resultados.

un mayor conocimiento de los efectos del


consumo de drogas en la salud

49

una mayor conanza para encontrar


nuevas estrategias para evitar consumir
drogas

una mayor participacin en las actividades


sociales, econmicas y educativas debido a la
disminucin del consumo de drogas

Los indicadores a ms largo plazo pueden


comprender:

Entre los indicadores relativos a la


participacin de la comunidad pueden gurar
mediciones como el nmero de grupos de
autoayuda existentes en la zona, el nmero
de personas que asisten a reuniones de la
comunidad, y otros.

una disminucin del consumo de drogas


una mejora de salud comprobada

Cabe sealar que los datos correspondientes


a los indicadores slo deben acopiarse si
tienen un valor y una utilidad reales para
el proyecto. Por ejemplo, slo vale la pena
contar el nmero de personas que asisten a
un espectculo de tteres si este ltimo tiene
algn efecto signicativo. Puede consistir
en un cambio en los conocimientos o el
comportamiento de las personas que se
cuentan. Es necesario que en los proyectos se
comprenda el valor de los indicadores que se
estn recolectando, pues de otro modo stos
podran convertirse en una carga que genera
complicaciones suplementarias.

una mayor integracin en la comunidad


Son necesarias consideraciones similares
al tratar la transmisin del VIH, cuando
es igualmente importante diferenciar los
indicadores a corto y a largo plazo. Los
cambios en los indicadores a largo plazo,
como la incidencia de la infeccin del VIH,
no sern perceptibles en el plazo en que se
realizan las intervenciones a corto plazo en
la comunidad (y son sumamente difciles
de medir). Si bien es importante vigilar la
incidencia del VIH, es tambin fundamental
ser realista en cuanto al posible efecto de
la intervencin programada. Por esta razn,
es imprescindible denir indicadores a corto
plazo realistas para lograr una evaluacin
efectiva. En el caso de los proyectos
encaminados a reducir la transmisin del
VIH, posibles indicadores a corto y mediano
plazo pueden incluir mediciones como las
siguientes:

los cambios en el peligro percibido con


respecto al consumo de drogas

En el caso de indicadores ms abstractos


como el aumento de autonoma, estar
libre de un uso indebido o control/eleccin
de sustancias, habr que procurar denir
criterios antes que efectuar mediciones ms
precisas y cientcas. Al intentar evaluar
grados de autonoma, por ejemplo, el primer
paso puede consistir en explorar por qu la
autonoma es importante en relacin con
los objetivos del proyecto. En un proyecto
educativo sobre las drogas esto puede
referirse a dar a las personas los medios
para elegir formas diferentes de utilizar su
tiempo libre; evitar reunirse con usuarios
de droga conocidos como tales; o modicar
los hbitos de consumo de drogas, pasando
a sustancias menos dainas. Determinar el
nivel de conanza y la frecuencia de cambios
de comportamiento como stos puede ayudar
a estimar el grado de autonoma alcanzado.
Sea realista en cuanto a lo que puede
hacer! Se pueden emplear diversas tcnicas
para vericar la informacin (triangulacin)
con el n de descubrir los cambios que ha
ocasionado el proyecto en las vidas de los
beneciarios.

un aumento de los conocimientos sobre los


efectos secundarios de la droga

Los indicadores deberan tener las siguientes


caractersticas:

cambios en las pautas de consumo de


droga noticados

ser directos

un cambio en las percepciones relativas a


las personas con VIH
un aumento de los conocimientos sobre la
transmisin del VIH
el nmero de personas que piden pruebas
de deteccin del VIH en clnicas locales
el nmero de personas que utilizaron
preservativos en el ltimo acto sexual
Los indicadores a corto y mediano plazo en
los proyectos educativos sobre drogas pueden
incluir:

ser especcos

50

FORMACIN S RE LA
ATELIER SOUBR
AUTONOM
A DE LA MUJER

ASISTIR AL CURSO NO EQUIVALE A SER AUTNOMA

ser tiles

ser adecuados

responden a preguntas relativas a cambios


de comportamiento deberan obtenerse, en
funcin de los indicadores que est midiendo,
en la mitad del programa o en algn momento
despus de que haya concluido.

ser apropiados desde el punto de vista


cultural

El acopio de datos puede efectuarse en varios


momentos:

no ser demasiado numerosos!

los datos se examinan durante el ciclo de


reexin

ser prcticos

al comienzo del programa o durante un


evento o actividad especcos

5.7 Calendario,
programacin y
recoleccin de datos

durante la ejecucin
a mediados de la ejecucin del programa

Examine su modelo lgico y las preguntas


de la evaluacin y decida en qu punto de la
trayectoria desear acopiar datos. El programa
deber haber llegado a una etapa en que esa
operacin es a un tiempo posible y ecaz.
Por ejemplo, la informacin de la evaluacin
sobre quin est participando debe recogerse
en cada reunin, mientras que los datos que

al nal del programa, el evento o la


actividad
segn un periodo determinado (cada mes,
cada trimestre o anualmente)
despus del programa, para determinar los
resultados a un plazo ms largo

Para obtener ayuda sobre el contenido y la estructura de su evaluacin, podra empezar a


rellenar la Ficha de Evaluacin que se encuentra en el Anexo 5.

51

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

52

eccin 6 Tcnicas
Sy herramientas

de investigacin
6.1
6.2
6.3
6.4
6.5
6.6
6.7
6.8
6.9

Evaluacin de los procesos del proyecto


Evaluar los resultados y los impactos
Formularios de acopio de datos
Investigacin cuantitativa
Muestreo
Investigacin cualitativa
Tcnicas de investigacin cualitativa
Instrumentos de investigacin
Sntesis: un plan completo de evaluacin

53

54
54
55
56
56
57
58
58
59

Sera posible describir todo cientcamente, pero no tendra sentido: equivaldra a


describir una sinfona de Beethoven como una variacin
de ondas de presin.
Albert Einstein
Concebir futuros adelantos y programas en
mbitos similares.

6.1 Evaluacin de los


procesos del proyecto

Es importante tener conciencia, como


se indica en la seccin 5.6, de que los
indicadores de proceso sern distintos de
los indicadores de resultados.

La realidad de la compleja combinacin de


factores sociales, polticos y econmicos
que entran en juego a nivel comunitario
hace que los proyectos rara vez transcurran
exactamente como estaban planeados. Por
esa razn, es importante que los proyectos
puedan adaptarse y ser exibles. La
evaluacin de los procesos ayuda a seguir de
cerca lo que sucede en la planicacin y la
ejecucin del programa. Si usted ha elaborado
un slido marco para evaluar el proceso de
ejecucin, estar en condiciones de:

6.2 Evaluar los


resultados y los impactos
No ser posible evaluar todos los resultados
del proyecto. En cambio, habr que establecer
prioridades sobre la base de lo que es ms
importante para el xito del programa, y
tambin con respecto a lo que es realmente
medible en el plazo en que se realiza el
proyecto. En el contexto actual, en que la
nanciacin aportada por los organismos
se compromete a menudo sobre una base
anual o bianual, es probable que muchos
de los objetivos del proyecto a largo plazo
no se hayan alcanzado an, ya que no ha
transcurrido suciente tiempo. Asegrese de
que tanto el personal del proyecto como los
que lo nancian son conscientes de esto desde
el comienzo del proyecto, para evitar ponerse
en situacin de fracaso.

Explorar los orgenes del programa y la


secuencia cronolgica de los hechos en la
planicacin y ejecucin del programa. Esto
debera incluir las modicaciones que se
introduzcan en el programa.
Hacer que los participantes en el programa
intervengan en su propio anlisis de lo que
ha cambiado gracias a la intervencin y las
maneras en que se podra ampliar o mejorar.
Examinar la estructura, los componentes y
el sistema de ejecucin del programa.
Examinar los factores contextuales
pertinentes para el funcionamiento del
programa.

Una vez que haya denido resultados


esenciales para el seguimiento debe
escoger maneras adecuadas de acopiar
datos. Una vez ms, sea realista en cuanto a
plazos, competencias para la investigacin
en el equipo, y los recursos nancieros y
humanos. Tenga siempre presente que su
recurso fundamental radica en las personas
que participan en el proyecto. Recuerde
consultarlas cabalmente e incluirlas en su
investigacin. Las tcnicas de investigacin
por las que usted opte pueden incluir una
seleccin de los mtodos cuantitativos y
cualitativos que guran a continuacin. La
seleccin de los mtodos estar condicionada
por la dimensin y las caractersticas
del proyecto y del presupuesto, y por la
informacin que desee recopilar.

Analizar las razones por las cuales el


cambio fue necesario.
Examinar los ndices de participacin y las
caractersticas de los participantes.
Evaluar las percepciones de los
participantes en el programa.
Evaluar los grados de concientizacin de la
comunidad.
Inventariar los recursos utilizados para la
ejecucin del programa

54

6.3 Formularios de acopio de datos


CUADRO 1. Caractersticas de la investigacin cuantitativa y cualitativa
Investigacin cualitativa

Investigacin cuantitativa

Preguntas
formuladas

Quin, qu, cmo, por qu?

Cunto, cuntos?

Tipo de pregunta

De respuesta abierta

De respuesta cerrada

Interaccin

Dilogo u observacin a travs de:


pelcula, vdeo, teatro, cartografa,
etc.

Preguntas-respuestas

Formulario

Semi-estructurado o no
estructurado

Controlado

A quin?

Muestreo con nes especcos.

Muestreo formal.

Se escoge una muestra pequea


pero representativa.

Se escogen aleatoriamente
cantidades ms grandes.
Se pueden evaluar las
probabilidades estadsticas

Nivel

En profundidad

En supercie y extensivo

Anlisis

Interpretacin

Formalizacin y anlisis
estadstico

Mtodos comunes
(deberan
utilizarse tcnicas
participativas en
ambas categoras)

Entrevistas:
entrevistas individuales en
profundidad
narrativas
incidente crtico esto es, en
relacin con un hecho especco
en que se explora la respuesta
individual o colectiva al mismo
grupo de discusin

Encuesta
cuestionarios
transversal (situacin en un
determinado momento)
cohorte (seguir a un grupo
a lo largo del tiempo)

Texto escrito:
mtodo del diario
de archivo
Anlisis de medios de
comunicacin:
artculos de prensa
dibujos o fotografas
vdeos
Observacin:
observacin participante
observacin no participante
Tcnicas del proyecto:
respuestas a estmulos
presentados
asociacin de palabras
escenicacin

55

Ensayos controlados
aleatorios
experimentales
Datos de archivo (datos
secundarios)
anlisis ms avanzado de
estadsticas existentes
Observacin
conteo, por ejemplo, de los
pacientes en un servicio de
ciruga

6.4 Investigacin
cuantitativa

como las unidades de alcohol absorbidas,


o cdigos numricos, por ejemplo, s se
codica como 1 y no como 2. Esto permite
calcular porcentajes para cada respuesta
y, si la muestra es sucientemente amplia,
determinar si entre los grupos de personas
existen diferencias que es poco probable que
se hayan producido por casualidad.

La investigacin cuantitativa supone el acopio


sistemtico de elementos o datos que se
pueden contar y codicar numricamente.
Se exploran teoras e hiptesis referentes
a la relacin entre fenmenos objetivos.
Las tcnicas cuantitativas suelen utilizar
instrumentos de investigacin estructurados,
de modo que los datos son ms fciles de
recolectar y analizar y la bsqueda se puede
reproducir con facilidad. Al realizar grandes
cantidades de observaciones, el mtodo
permite obtener datos estadsticos que facilitan
las generalizaciones.

Sin embargo, los resultados dependen de la


denicin que haya dado el investigador a
las posibles categoras de respuestas; por
consiguiente, hay pocas probabilidades de poner
de maniesto los detalles de las vidas de las
personas o de recoger informacin no prevista.
Por ejemplo, en una encuesta cuantitativa sobre
el consumo de drogas se puede preguntar:
Cuntas veces por semana consume usted
drogas ilcitas? La respuesta a la pregunta
puede aportar algunos datos cuantitativos
bsicos, pero no proporcionar informacin
pormenorizada acerca de las presiones
culturales, sociales o psicolgicas que inducen
a tomar drogas. Tambin es difcil, en este
contexto, reducir las ambigedades en torno a
las deniciones y la comprensin de trminos
clave (por ejemplo, qu es una droga ilcita?).

Tradicionalmente, se ha considerado que la


investigacin cuantitativa es ms cientca y
objetiva que la investigacin cualitativa, por lo
que los organismos de nanciacin la preeren
como evidencia emprica. La tendencia a pedir
informacin cuantitativa para demostrar la
ecacia ha impuesto una enorme carga a las
organizaciones ms pequeas y los proyectos
comunitarios, y las tcnicas requeridas para
acopiar los datos suelen ser inadecuadas al
contexto de los proyectos.
La investigacin cuantitativa exige
generalmente recursos (tanto nancieros
como humanos) que rebasan la capacidad de
pequeos proyectos comunitarios. En algunos
casos ya existen datos de encuestas nacionales
o regionales que pueden ser valiosos como
base para la evaluacin de las necesidades
y la elaboracin de proyectos. Datos sobre el
VIH y el SIDA acopiados mediante encuestas
domiciliarias o conductuales, o desde puntos
de vigilancia, por ejemplo, pueden poner
de maniesto variaciones segn las zonas
geogrcas o los grupos de poblacin en
situacin de mayor riesgo.

6.5 Muestreo
En lugar de interrogar a toda la poblacin
incluida en el proyecto, es a menudo ms
ecaz hacer preguntas o solicitar opiniones a
una muestra representativa de esas personas.
Mientras las cantidades sean sucientes
(a este respecto, pida asesoramiento a un
estadstico), se pueden hacer generalizaciones
que abarcan a toda la poblacin del proyecto.
Si decide efectuar un muestreo, necesita
determinar qu tipo de muestra utilizar.
Es preciso que pueda generalizar sus
conclusiones a toda la poblacin? De qu
tamao ser su muestra?

Qu es la investigacin cuantitativa
y cundo debe utilizarse?

Las decisiones relativas al muestreo dependen


generalmente de la nalidad de la evaluacin,
las preguntas que plantea, la dimensin de
la poblacin y los mtodos que utiliza para
recolectar informacin.5

Los datos cuantitativos son tiles para obtener


un panorama general de una situacin y
para efectuar un muestreo de un nmero
relativamente importante de personas. En
una investigacin cuantitativa se formulan
preguntas como: cunto? o cuntos?.
Los ejemplos ms comunes de los mtodos
de investigacin cuantitativa son los estudios
experimentales, como las pruebas y las
encuestas aleatorias controladas. Todas las
respuestas son, sea nmeros absolutos,

56

Si desea ms ayuda para escoger una muestra


apropiada, consulte alguno de los siguientes enlaces
en Internet: www.mis.coventry.ac.uk/~nhunt/meths
(consultado en octubre de 2010)
www.socialresearchmethods.net/kb/sampprob
(consultado en octubre de 2010)

6.6 Investigacin
cualitativa

Los mtodos cualitativos permiten, y de hecho


es su objetivo, buscar diferencias entre los
individuos y los grupos. Al reconocer que los
seres humanos interactan de un modo en
que no lo hacen los objetos de las ciencias
naturales, los mtodos cualitativos suelen
estar concebidos para tomar plenamente en
cuenta la contribucin que aportan a los datos
tanto el participante como el investigador, en
su calidad de seres sociales.

Comprende el anlisis de datos no numricos


como el texto de las transcripciones de
entrevistas, fotografas en los medios de
informacin, u observaciones del investigador,
y formula preguntas como qu?, cmo?
y por qu?. Estos mtodos se suelen
utilizar cuando el investigador desea ahondar
en el tema y estudiar respuestas a preguntas
que no son fciles de categorizar o que no son
previsibles. Frecuentemente la investigacin
cualitativa se interesa menos en la forma en
que las personas se dividen en grupos que
en respuestas naturales, que se pueden
analizar para descubrir pautas o incluso
contradicciones en los datos. La participacin
de los beneciarios debe ser un elemento
central para los datos cualitativos, desde
el punto de vista tanto del acopio de datos
como de su anlisis. Es importante explorar
mtodos innovadores que puedan emplearse
para recolectar los datos y luego interpretar
los resultados.

Las investigaciones de ambos tipos,


cualitativa o cuantitativa, pueden utilizarse
independientemente o en el marco de una
estrategia de investigacin con mtodos
mltiples. Por ejemplo, puede recurrir
a entrevistas individuales (investigacin
cualitativa) para estudiar las razones que
explican los resultados de una encuesta
nacional (investigacin cuantitativa) segn
los cuales los jvenes desfavorecidos tienen
ms probabilidades de convertirse en
consumidores de drogas inyectables. O bien, a
la inversa, se pueden utilizar temas extrados
de entrevistas de los grupos de discusin
para disear un marco de codicacin

oria

Sus zapatos se han gastado ms rpido


este ao o el ao pasado?

ah

Cul es el aumento porcentual de la


cosecha de zanahorias que llev al
mercado este ao, en comparacin con
el ao pasado?

ria

zan

zana

57

ho

Formularios de retroinformacin. Puede


descubrir lo que piensa la gente de los
servicios que presta el proyecto pidindoles
que rellenen un breve formulario de
retroinformacin. Qu es lo que les pareci
ms til? Cmo mejoraran la actividad?

o cuestionario (un conjunto de posibles


respuestas predenidas) y utilizarlo para una
investigacin cuantitativa en mayor escala.
Ambos tipos de investigacin son tiles y
presentan ventajas singulares. Es importante,
en el punto de partida, formular claramente la
pregunta que se hace, y luego elegir y aplicar
el tipo de investigacin ms adecuado para
obtener una respuesta til.

Talleres de evaluacin y reuniones de


examen. Son reuniones especiales destinadas
a obtener reacciones de los participantes en el
proyecto. Pueden utilizarse tcnicas similares
a las que se emplean con los grupos de
discusin.

6.7 Tcnicas de
investigacin cualitativa
Entrevistas detalladas. Pueden realizarse
con informadores clave, por ejemplo, personas
que han estado estrechamente asociadas al
proyecto y tienen una comprensin particular
al respecto. Pueden efectuarse con personal
del proyecto, organizaciones copartcipes o
participantes en el proyecto. En el Anexo 6
gura ms informacin sobre la manera de
llevar a cabo entrevistas detalladas.

6.8 Instrumentos
de investigacin
La mayora de las actividades de acopio de
datos requieren algn tipo de formulario o
instrumento para recopilar informacin, como
una cha de registro, un cuestionario, un
protocolo de observacin, o una grabacin de
vdeo o sonora. Piense en el mtodo de acopio
de datos que ha elegido y decida lo que se
necesita para registrar la informacin. De ser
posible, utilice instrumentos puestos a prueba
y validados.

Grupos de discusin y mesas redondas.


Un grupo de discusin suele reunir de cuatro
a ocho personas, generalmente relacionadas
por un factor comn (por ejemplo, pueden ser
todos usuarios de drogas o padres, en funcin
del tema central del proyecto). El grupo se
utiliza para debatir sobre cuestiones clave que
son esenciales para la evaluacin. Puede ser
til recurrir a tcnicas que susciten el debate,
como fotografas, grabaciones, pinturas, etc.

Si ha elaborado su propio instrumento,


asegrese de que:
permita obtener la informacin que usted
desea
sea comprendido por las personas
interrogadas y por quienes registran las
respuestas
sea sencillo y fcil de utilizar
tenga en cuenta las caractersticas
culturales y se atenga a las directrices ticas
vigentes
reduzca al mnimo los posibles problemas

Estudios de caso. Se estudian unos pocos


ejemplos detallados. Escoja trabajos que
ilustren sus principales objetivos.
Observacin. Observe, por ejemplo, la
dinmica de los grupos. Quin acude a las
reuniones? Qu preguntas se plantean?
Quin participa? Est bien representada la
comunidad?

Ponga a prueba el instrumento con personas


anlogas a sus futuros entrevistados y
encargados del registro antes de utilizarlo en
el proyecto real: es lo que se denomina una
prueba piloto.

Examen de expedientes. Examine


ejemplos de trabajos que han sido producidos.
Informes de prensa. Acopie y examine
informes periodsticos pertinentes.
Diarios. Pida a algunas personas que
lleven diarios relacionados con las actividades
del proyecto y su participacin en ellas.

58

6.9 Sntesis: un plan completo de evaluacin


I
Denir la evaluacin

II
Acopiar informacin

Preguntas:
Qu desea saber?

Piense en lo
siguiente:

Indicadores
Cmo lo obtendr?

Fuentes
Mtodos (cualitativa,
cuantitativa,
participativa)
Calendario
Muestras
Instrumentos

Quin dirigir la
evaluacin? Hgala
participativa!

III
Analizar la
informacin
Anlisis
Interpretacin

IV
Piense en
cmo utilizar la
informacin:

Difundir y compartir
las enseanzas
extradas (tanto las
buenas como las
malas!)
A quin? Cundo?
Cmo?

Que sea simple!

Asegrese de que la evaluacin sea explcita y sencilla. Concntrese en qu es lo que necesita


saber?, quin utilizar la informacin? y para qu?
Esta es una presentacin muy somera de la evaluacin. Nuestro propsito era mostrarle de qu
modo la facilita la elaboracin del modelo lgico. Muchos otros recursos disponibles pueden ayudar
en cuanto a los aspectos tcnicos de la evaluacin (vase la bibliografa adjunta).
Un modelo lgico no es un modelo de evaluacin, sino ms bien una herramienta que puede
proporcionar un marco coherente para guiar el proceso de evaluacin. El modelo lgico facilita una
evaluacin ecaz ya que le ayudar a:
Determinar qu es lo que se debe evaluar
Denir preguntas apropiadas para su evaluacin sobre la base del programa
Saber qu informacin acopiar para responder a las preguntas de su evaluacin los
indicadores
Determinar cundo recolectar los datos
Determinar las fuentes de datos, y los mtodos e instrumentos de acopio
Examinar posibilidades de examen y difusin de datos

59

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

60

eccin 7 Evaluacin
Sparticipativa

7.1 Tcnicas de evaluacin participativa


7.2 Aspectos clave del seguimiento y la evaluacin
participativos

62
63

61

As que es evidente...
si se distribuyen

... todas podremos hacer


globos de agua!!!

preservativos gratuitos...

SU LGICA DEL PROYECTO PUEDE SER DISTINTA DE LA LGICA DE OTROS

7.1 Tcnicas de
evaluacin participativa

futuro. El proceso debe ser claro en cuanto


al modo en que las buenas prcticas se
compartirn y aplicarn en mayor escala.

En esta gua se hace hincapi en que


las iniciativas comunitarias tienen ms
probabilidades de tener xito cuando la
comunidad hace suyo el proyecto y se integra
en el proceso de preparacin, ejecucin y
evaluacin.

Flexibilidad. Los proyectos comunitarios


estn constantemente inuenciados por una
variedad de factores ajenos al control de
quienes participan en ellos. Por consiguiente,
todos los copartcipes deben tener conciencia
de la necesidad de ser exibles y adaptarse al
cambio.

Qu son el seguimiento y la
evaluacin participativos?

Mtodos comnmente utilizados


en el seguimiento y la evaluacin
participativos:

Se ha establecido que cuatro grandes


principios constituyen los fundamentos del
seguimiento y la evaluacin participativos. Son
los siguientes:

Existen muchos mtodos creativos para hacer


participar a los beneciarios en proyectos
de manera interesante y dinmica. Algunos
ya se han mencionado en la seccin 6.7. A
continuacin guran otras ideas concretas:

Participacin. Se dene como la


apertura del proceso de concepcin para
incluir a las personas ms directamente
afectadas, esto es, los participantes en
el proyecto. Todas las partes interesadas
deberan participar en todas las etapas de la
ejecucin del proyecto, inclusive en la eleccin
concertada de la metodologa de investigacin.

Cartografa. Utilizar mapas de la localidad


para iniciar el debate sobre el tipo de cambio
que se est produciendo, dnde y cmo
sucede. Esta tcnica tambin se puede utilizar
para situar a las partes interesadas y los
participantes en el proyecto.

Negociacin. Acuerdo sobre lo que ser


objeto de seguimiento y evaluacin, los
mtodos de acopio de datos, la interpretacin
de los datos, el intercambio y la difusin de los
resultados y la adopcin de medidas.

Diagramas de Venn. Pueden ser tiles


para mostrar las relaciones entre grupos,
instituciones e individuos.
Diagramas de ujo. Vinculan los cambios
con una causa percibida y ayudan a demostrar
los impactos de los cambios.

Aprendizaje. Acuerdo sobre las


enseanzas extradas que se utilizarn y
llevarn adelante para lograr mejoras en el

62

Diarios. Si se utilizan de manera


sistemtica, los diarios son tiles para
describir los cambios que se producen en las
vidas de individuos o grupos.

7.2 Aspectos clave


del seguimiento y la
evaluacin participativos

Fotografas. Muy apropiadas para dar


comienzo a un debate y describir los cambios
a lo largo del tiempo (por ejemplo, conviene
tomar fotografas antes y despus del
proyecto).

Los mtodos participativos no excluyen


la utilizacin de otros mtodos. De hecho, a
menudo los mejores resultados se obtienen
combinando diversos mtodos y tcnicas de
evaluacin.

Teatro/escenicacin/espectculo
de tteres/artes plsticas. Las artes
creativas son a menudo un recurso natural
y espontneo para revelar y descifrar
inquietudes y prioridades locales e
individuales. Algunos de estos mtodos
pueden ser particularmente tiles con nios y
jvenes.

No todas las partes interesadas o


beneciarios desearn necesariamente
participar en el proceso de seguimiento
y evaluacin. Contribuir a ese proceso
requiere tiempo y energa que no todos estn
dispuestos o en medida de dar.
El seguimiento y la evaluacin
participativos pueden vincularse a la teora
de la construccin del conocimiento segn
la cual el aprendizaje es ms que algo que
afecta a los individuos, y funciona en cambio
a nivel de la comunidad. Scardamalia (2002)
describe el modo en que el proceso de
indagacin colectiva sobre un tema especco
puede permitir un conocimiento ms profundo
mediante la interrogacin interactiva, el
dilogo y el continuo mejoramiento de las
ideas. As pues, las ideas son el medio
operativo en los contextos de construccin
del conocimiento. El docente pasa a ser un
gua ms que un director y permite a los
estudiantes asumir una gran parte de la
responsabilidad de su propio aprendizaje,
comprendidas la planicacin, la ejecucin y
la evaluacin (Scardamalia, 2002).

Las etapas sucesivas del seguimiento y


la evaluacin participativos deberan ser
globalmente anlogas a las que corresponden
a mtodos de investigacin ms tradicionales.
En el siguiente diagrama se indican las
principales etapas:

Aclarar si el
seguimiento y
la evaluacin
participativos deben
proseguir, y en ese
caso, de qu manera

Determinar quin
debera y desea
participar

Aclarar las
expectativas de
los participantes
con respecto al
proceso, y de
qu modo quiere
contribuir cada
persona o grupo

Denir las
prioridades del
seguimiento y la
evaluacin

Acordar cmo y
por quin sern
utilizados los
resultados

Elegir indicadores
que proporcionen
la informacin
necesaria

Analizar la
informacin

Recolectar la
informacin

Las tcnicas participativas pueden


fortalecer la autonoma de los
beneciarios de un proyecto ayudndoles
a encontrar mbitos de responsabilidad y
proporcionndoles las aptitudes necesarias
para realizar su trabajo (aritmtica, lectura y
escritura, entrevistas, clculo, investigacin,
etc.).

Convenir los
mtodos, las
responsabilidades y
el calendario
del acopio de
informacin

Extrado de IDS Policy Brieng. Nmero 12. Noviembre de


1998, pgina 3. Se encuentra en http://www.ids.ac.uk/ids/
bookshop/briefs/PB12.pdf

El problema con el mundo es que los tontos


y los fanticos siempre estn muy seguros de
s mismos, y las personas ms sabias estn tan
llenas de dudas.
Bertrand Russell

63

No sea demasiado ambicioso(a). Empiece


de a poco. Los ejemplos de tcnicas
participativas citados provienen de proyectos
en los que el seguimiento y la evaluacin
participativos fueron una parte (a menudo
reducida) de un plan de investigacin
global. En muchos casos, consultar a los
beneciarios y hacerlos participar en el
proceso de investigacin es una reaccin
espontnea y sucede sin planicacin previa.
Por consiguiente, puede llevarse a cabo sin
recurrir a trminos extravagantes!

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

64

eccin 8 Anlisis
Sy difusin
de datos

8
65

Si t tienes una manzana y yo otra y las intercambiamos, ambos seguiremos teniendo


cada uno una manzana. Pero si t tienes una idea y yo otra y las intercambiamos,
cada uno de nosotros tendr dos ideas.
George Bernard Shaw
de datos puede ser conveniente buscar
asesoramiento al respecto para el
almacenamiento y el anlisis de datos.

Una vez que se tienen todos los datos, hay


que compilarlos claramente de modo que
se puedan reunir los elementos de prueba
y compararlos segn las distintas fuentes.
Entre las principales preguntas que cabe
formular al examinar los datos guran las
siguientes:

Se considera que el anlisis de datos


cualitativos es ms subjetivo que el de datos
cuantitativos. Se realiza un examen sumario
del material recolectado y se determinan
los principales temas. Acto seguido los
datos se clasican ms rigurosamente con
relacin a los ttulos de las categoras. El
anlisis de contenido consiste en examinar
documentos escritos (por ejemplo diarios,
notas de observacin, preguntas de encuesta
de interpretacin abierta) o la transcripcin
de datos orales (por ejemplo, de entrevistas
o grupos de discusin). A medida que se lee
el texto, se asigna un cdigo a los temas
que representan sea conceptos importantes,
sea pautas comunes entre entrevistados o
respuestas distintas de diferentes subgrupos.
Una vez hecho esto, los textos se clasican
y agrupan por categora. Las categoras
se denen antes de que se elabore el
instrumento, o bien se desprendern del
examen de los datos. No es necesario que la
tecnologa o el equipo utilizados sean muy
sosticados, ya que el trabajo puede consistir
en recortar trozos de texto y colocarlos en
pilas de temas similares, y luego organizarlos.

Indica la informacin que usted ha


alcanzado sus objetivos? Sea tan preciso(a)
como pueda para demostrar cmo se
lograron los resultados.
Cules son los resultados del proyecto?
Preste atencin a los resultados tanto
inesperados como previstos (deseables y
no deseables).
Ponen los datos de maniesto algn
logro?
Hay mbitos problemticos que requieran
especial atencin?
Se han presentado obstculos para el
logro de los objetivos predeterminados?
Si la evaluacin fue bien planicada y la
investigacin realizada de modo apropiado,
con objetivos claros, indicadores conables
y un acopio de datos riguroso, la etapa del
anlisis no debera plantear problemas.

Al tratar datos cualitativos es preciso


cuidar de no hacer armaciones numricas
engaosas. Existe con frecuencia la tentacin
de declarar que el 80 % de las personas
piensa que ... las vacas se acuestan antes
de una tormenta. De hecho, si la muestra
total es pequea, digamos 10 personas, el
80 % equivale a solamente 8 personas, una
cantidad demasiado restringida como para
indicar que puede suceder lo mismo en
muestras ms contundentes. Dado que el
nmero de personas encuestadas en una
investigacin cualitativa no permite inferir
una importancia estadstica, deben evitarse
los porcentajes. Es menos engaoso utilizar
expresiones como en nuestra muestra
la mayora de los entrevistados (8 de 10)
pensaba...

El anlisis de datos cuantitativos es preciso y


estructurado. Si se estn manejando grandes
cantidades de datos pueden ser necesarias
las competencias de un estadstico (a
menudo difcil de encontrar!). Aunque los
datos puedan indicar una relacin entre el
servicio prestado y un resultado determinado,
a menos que en el proyecto se haya utilizado
un diseo experimental (segn el cual el
sitio del proyecto se compara con un sitio
similar sin ninguna intervencin de control),
no demostrarn que el programa caus
directamente los resultados.
Existen programas informticos
especializados que pueden facilitar el
anlisis de datos cuantitativos y cualitativos.
Si la evaluacin abarca grandes cantidades

66

Difusin

Cuando se acopian datos procedentes de


distintas fuentes, es importante conceder
la importancia debida a cada elemento de
prueba. Adems, en los resultados tiene
que gurar claramente la dimensin de la
muestra investigada (nmero de personas
entrevistadas) y los instrumentos de la
investigacin (cuestionarios, guas temticas,
etc.) deben adjuntarse al informe nal sobre
el proyecto.

Una vez que los resultados se han recopilado


y analizado, es importante compartir los
resultados con el pblico ms amplio posible.
El personal del proyecto, los donantes y los
participantes tenan todos algo en juego en
el proyecto, y corresponde a los evaluadores
compartir los resultados con ellos, de la
manera ms abierta y directa posible. De
hecho, en el Ciclo del Proyecto, presentado
en la Seccin 2.1, se subray la importancia
de recibir constantemente retroinformacin
de modo que se puedan introducir mejoras
en el diseo del proyecto en todas las
etapas del mismo. Solamente teniendo el
coraje de compartir los resultados (ya sean
positivos o negativos), se pueden extraer
enseanzas y realizar adaptaciones para
mejorar el desempeo futuro. Los talleres y
las reuniones locales pueden constituir un foro
particularmente adecuado para la difusin
de los resultados locales. Los sitios web
tambin son cada vez ms tiles para brindar
un acceso amplio y fcil a los resultados de
mayor alcance.

Datos cuantitativos
Para una descripcin sencilla de la realizacin
de encuestas y cuestionarios cuantitativos,
consulte:
Fondo Internacional de Desarrollo Agrcola
(FIDA). A Guide for Project Monitoring
and Evaluation. Reviste especial inters
el Anexo D, Methods for monitoring and
evaluation. Telecargado de: http://www.ifad.
org/evaluation/guide/index.htm (consultado en
octubre de 2010)
Vanse tambin las referencias en la
bibliografa anotada al nal de esta gua.

Re

PROYECTO

su

lta

do

ENSEANZAS
S

do

ulta

Res

do

do
S

lta
su

Re

Re

su

lta

Compartilhe
Com
p a r t a l o qo
u eque
h a aprendeu.
aprendido.

67

Notas:
......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

......................................................................................................................................................................

68

eccin 9 Referencias,
SBibliografa
anotada

y Anexos
Referencias
Bibliografa anotada
Anexo 1 Formulario de retroinformacin
Anexo 2 Modelos de evaluacin
Anexo 3 Glosario
Anexo 4 Hoja de trabajo del modelo lgico
Anexo 5 Ficha del plan de evaluacin
Anexo 6 Gua para realizar una entrevista detallada

69

70
72
77
78
80
82
83
84

Referencias
Evaluacin de Programas de Prevencin
del Uso Indebido de Sustancias por los
Jvenes, Viena http://www.unodc.org/
pdf/youthnet/action/planning/m&E_S.pdf
(consultado en noviembre de 2010)

Beattie, A. (1995), Evaluation in community


development for health: An opportunity for
dialogue, Health Education Journal, vol.
54: 46572.
Boyce, W. (1993), Evaluating participation in
community programs: An empowerment
paradigm, The Canadian Journal of
Program Evaluation, 8:1, 89-102.

Ocina de las Naciones Unidas contra la


Droga y el Delito (2002). Manual sobre
programas de prevencin del uso
indebido de drogas con participacin
de los jvenes. Una gua de desarrollo y
perfeccionamiento. Nueva York, Naciones
Unidas. http://unodc.org/pdf/youthnet/
action/planning/handbook_S.pdf

Bruce, N., Springett, J., Hotchkiss, J., ScottSamuel, A. (dir.publ.) (1995), Research
and Change in Urban Community Health,
Avebury.
Core Initiative (May 2006), Project Cycle
Management: Community Based
Organisation (CBO) Training Toolkit.

ONUSIDA (2007). Seguimiento de la


Declaracin de compromiso sobre el
VIH/SIDA: Directrices para el desarrollo
de indicadores bsicos. Informe 2008.
Ginebra.

Instituto de Estudios del Desarrollo (1998),


Participatory monitoring and evaluation:
Learning from change, Policy Brieng 12.
www.ids.ac.uk/ (consultado en noviembre
de 2010)

ONUSIDA (2000). National AIDS Programmes:


A Guide to Monitoring and Evaluation.
Ginebra.

J. Rowntree Foundation (2005), Evaluating


community projects. A practical guide.
The Joseph Rowntree Foundation. http://
www.jrf.org.uk/. (consultado en noviembre
de 2010)

Patton, M. (1997), Utilization-focused


evaluation (3 edicin), Thousand Oaks,
CA, Sage.
Programa de las Naciones Unidas para el
Desarrollo (PNUD). (2005) Responding
to HIV and AIDS. Measuring Results: The
Answer Lies Within. Nueva York.

Ocina Regional de la OMS para Europa, OMS


(2006). Evaluation in health promotion.
Principles and perspectives, bajo la
direccin de Rootman, .I., Goodstadt, M.,
Hyndman,.B., McQueen, D., Potvin,.L.
Springett,.J. y Ziglio,E.

Rehle,T., Saidel, T., Mganani, R. (dir.) (2006)


Evaluating programs for HIV and AIDS
prevention and care in developing
countries. Family Health International
www.fhi.org (consultado en noviembre de
2010)

OMS et al (2006) Monitoring and Evaluation


Toolkit: HIV and AIDS, Tuberculosis and
Malaria, 2 edicin. Ginebra. http://www.
who.int/hiv/pub/epidemiology/en/me_
toolkit_en.pdf (consultado en noviembre
de 2010)

Rootman, I., Goodstadt, M., Potvin, L.,


Springett, J. (1997), Toward a framework
for health promotion evaluation,
Copenhague, Organizacin Mundial de la
Salud.

OMS/HER/HEP. Carta de Ottawa para


la Promocin de la Salud. Primera
Conferencia Internacional sobre
Promocin de la Salud (1986), http://www.
who.int/hpr/NPH/docs/ottawa_charter_
hp.pdf (consultado en noviembre de 2010)

Save the Children Fund (Reino Unido), (2003),


Toolkits: A practical guide to monitoring,
evaluation and impact assessment,
Gosling, L.

Ocina de las Naciones Unidas contra la Droga


y el Delito, OMS (2006) - Seguimiento y

Scardamalia, M. (2002). Collective cognitive


responsibility for the advancement of

70

knowledge. En B. Smith (dir.), Liberal


education in a knowledge society (pgs.
67-98). Chicago: Open Court.
http://ikit.org/fulltext/2002CollectiveCog.
pdf (consultado en noviembre de 2010)

W. K. Kellogg Foundation (1998), Evaluation


handbook, USA.
W.K. Kellogg Foundation (2003), Logic model
development guide, USA.

Sinkler, P. (1999), Qualitative health promotion


research in context, proyecto indito para
la Health Development Agency, Londres.

Wallace, T (2006) Evaluating Stepping Stones:


A review of existing evaluations and
ideas for future M&E work, Action Aid
International http://www.comminit.com/
en/node/265544 (consultado en noviembre
de 2010)

Springett (1998), Practical guidance on


evaluating health promotion, Copenhague,
Organizacin Mundial de la Salud.

Webb, D., Elliott, L (2002) Learning to Live:


Monitoring and evaluation in HIV/AIDS
programmes for young people. Londres:
Save the Children Fund.

Taylor, J. (2000), So now they are going to


measure empowerment, Community
Development Resource Association.
http://www.cdra.org.za/articles/So%20
now%20they%20are%20going%20to%20
measure%20empowerment!%20-%20
by%20James%20Taylor.htm (consultado
en noviembre de 2010)

Weiss, C. (1998), Evaluation: Methods


for studying programs and policies.
Englewood Cliffs, NJ, Prentice-Hall.

Universidad de Wisconsin, Program


Development and Evaluation
www.uwex.edu/ces/pdande/evaluation/
evallogicmodel.html (consultado en
noviembre de 2010)

71

Bibliografa anotada
La lista presentada a continuacin se reere
a la evaluacin de programas comunitarios
en pequea escala. Se hace generalmente
hincapi en mtodos cualitativos y
participativos para la evaluacin interna.
La lista no es en modo alguno exhaustiva.
La mayora de las referencias mencionadas
guran en ella por ser claras y accesibles, y
generalmente pueden consultarse en Internet.
Todos los sitios web enumerados estaban
en funcionamiento en noviembre de 2010.
La bibliografa debe considerarse como una
obra en curso que se puede complementar y
modicar.

encargarse en el sitio web de Charities


Evaluation Service: http://www.ces-vol.org.uk


Departamento de Servicios Sanitarios y


Humanos de los Estados Unidos de Amrica.
Centros de lucha contra enfermedades
y prevencin. CDC Evaluation Working
Group: http://www.cdc.gov/eval/resources.
htm#manuals. Contiene enlaces con una
gama completa de sitios sobre evaluacin que
abarcan los siguientes temas:

tica, principios y normas


Organizaciones, sociedades, fundaciones,
asociaciones
Publicaciones peridicas y en lnea
Manuales paso a paso
Recursos sobre el modelo lgico
Instrumentos de planicacin y mejora del
desempeo
Informes y publicaciones: Generalidades
Informes y publicaciones: GPRA
(Government Performance and Results Act)
[Ley sobre el desempeo y los resultados
gubernamentales]
Sugerencias

1. Recursos para evaluaciones


de programas comunitarios
en pequea escala


Action Aid (Reino Unido). Wallace, T. (2006),


Evaluating Stepping Stones: A review of
existing evaluations and ideas for future M&E
work. Action Aid International http://www.
comminit.com/en/node/265544


Americorps. Project STAR. Captulos


telecargables relativos a cada etapa de la
planicacin, la evaluacin, el anlisis y la
difusin. El sitio tiene por objeto mejorar la
calidad y la coherencia de las evaluaciones y
reforzar la capacidad de evaluacin mediante
la promocin y utilizacin de listas de
comprobacin de gran calidad destinadas a
tareas y mtodos de evaluacin especcos.
http://nationalserviceresources.org/

Departamento de Servicios Sanitarios y


Humanos de los Estados Unidos de Amrica.
Centros de lucha contra enfermedades y
prevencin. CDC Evaluation Working Group:
Framework. http://www.cdc.gov/eval/
framework.htm

FHI - Evaluation Handbook Rehle,T.,


Saidel, T., Mganani, R. (dir.publ.) (2005),
Evaluating programs for HIV/AIDS prevention
and care in developing countries. Este
documento proporciona informacin sobre el
modo de evaluar programas de prevencin del
VIH y el SIDA en pases en desarrollo. www.fhi.
org/en/HIVAIDS/pub/Archive/evalchap/

Charities Evaluation Service: Produce


una variedad de publicaciones de apoyo a la
evaluacin, relativas a:

Metas y objetivos
Diferentes concepciones de la evaluacin
Autoevaluacin
Participacin de los usuarios en la
evaluacin
Utilizacin de la evaluacin para estudiar
polticas
Indicadores de resultados: uso debido e
indebido
Seguimiento de los resultados
Evaluacin de los impactos

Fondo Internacional para el Desarrollo


de la Agricultura (FIDA). Un sitio web muy
completo relativo a la evaluacin, con
manuales y ejemplos prcticos de evaluacin
en lnea. Un Servicio de Asistencia sobre
Evaluacin presta servicios rpidos a usuarios
que buscan un acceso expedito a datos,
informacin y conocimientos relativos a la
evaluacin. http://www.ifad.org/evaluation/
Una gua prctica, telecargable, para
administradores de proyectos, centrada en el

Los documentos pueden comprarse por


separado o conjuntamente y pueden

72

seguimiento y la evaluacin de proyectos de


desarrollo rural se encuentra en: http://www.
ifad.org/evaluation/oe/process/guide/

htm#anchor1575679YBrowser.HTML\Shell\
Open\Command


Mc Namara, C. (1999) Basic guide to


outcomes-based evaluation for non-prot
organizations with very limited resources.
Este documento aporta orientaciones para
la planicacin y ejecucin bsicas de
un proceso de evaluacin basada en los
resultados (tambin denominada evaluacin
de los resultados) en organizaciones sin nes
de lucro.

Green, L.W. and Kreuter, M. PRECEDEPROCEED Model for health promotion. El


marco de planicacin Precede-Proceed se
funda en las disciplinas de la epidemiologa,
las ciencias sociales, conductuales y de la
educacin, y la administracin de la salud.
En toda la labor con Precede y Proceed, se
destacan dos proposiciones fundamentales:
1) la salud y los riesgos para la salud estn
determinados por mltiples factores y 2)
en la medida en que la salud y los riesgos
para la salud obedecen a mltiples factores,
los esfuerzos encaminados a inuir en el
cambio conductual, ambiental y social deben
ser pluridimensionales o multisectoriales, y
participativos. http://www.lgreen.net/precede.
htm

National Science Foundation User-friendly


handbook for mixed method evaluation y
User-friendly handbook for project evaluation.
Un manual prctico con numerosos ejemplos
tiles de herramientas e instrumentos de
investigacin. Se examinan los mtodos
cuantitativos y cualitativos.


Ocina de las Naciones Unidas contra la


Droga y el Delito (2002). Viena. Manual sobre
programas de prevencin del uso indebido de
drogas con participacin de los jvenes. Una
gua de desarrollo y perfeccionamiento. Nueva
York, Naciones Unidas. UNODC Viena. (2002).
http://unodc.org/pdf/youthnet/action/planning/
handbook_S.pdf

Horizon Research, Inc. Taking stock:


A practical guide to evaluating your own
programs (1997). Una gua prctica para
la evaluacin de programas elaborada por
organizaciones comunitarias, en la que se
encuentra informacin que se puede poner
inmediatamente en prctica para contribuir
a mejorar los programas. Este manual
se centra en la evaluacin interna. La
informacin que contiene debera preparar
mejor al personal de programas a planicar y
realizar evaluaciones de programas. La gua,
de 97 pginas, puede telecargarse en: http://
www.horizon-research.com/publications/
stock.pdf

 Organizacin para la Cooperacin


y el Desarrollo Econmicos: Improving
evaluation practice: Best practice guidelines
for evaluation. Este documento contiene
recomendaciones particularmente valiosas
para localizar las partes interesadas, las
consultas y las relaciones de colaboracin.
Se encuentra en: http://www.oecd.org/
dataoecd/11/56/1902965.pdf

International HIV/AIDS Alliance.


Comunidades de apoyo para reducir la
propagacin del VIH y hacer frente a los
desafos que plantea el SIDA. http://www.
aidsalliance.org/sw1280.asp

 Organizacin Mundial de la Salud


(OMS) (2002), Working with street children:
Monitoring and evaluation of a street children
project. Manual telecargable destinado a
los educadores de nios de la calle, y a
otras personas que trabajan con stos. Su
objetivo es ayudar al usuario a comprender
la importancia del seguimiento y evaluacin,
facilitando la denicin de una amplia gama
de estrategias apropiadas y, en consecuencia,
una mayor conanza para realizar actividades
de seguimiento y evaluacin. http://whqlibdoc.
who.int/publications/924159036X.pdf

McNamara, C. Basic guide to program


evaluation. Esta gua se funda en la idea
que las personas que trabajan en proyectos
no necesitan ser especialistas para realizar
evaluaciones razonables. Aqu se aplica la
regla del 20-80, segn la cual un 20% de
esfuerzo genera el 80% de los resultados
necesarios. Es mejor emprender lo que
puede convertirse en un esfuerzo ordinario de
evaluacin que no hacer ninguna evaluacin.
Este documento orienta al personal en
cuanto a la naturaleza de la evaluacin de
programas y cmo puede llevarse a cabo de
modo realista y prctico. Disponible en: http://
www.managementhelp.org/evaluatn/fnl_eval.

Programa de las Naciones Unidas para


el Desarrollo (PNUD) (2002) Manual de
seguimiento y evaluacin de resultados.
Un valioso manual sobre seguimiento y
evaluacin disponible en espaol, francs

73

e ingls; incluye material de formacin


relativa al seguimiento y la evaluacin,
solamente en ingls. En el sitio del PNUD se
encuentran varios otros recursos y enlaces
sobre la evaluacin con distintos asociados
multilaterales: http://www.undp.org/
evaluation/documents/HandBook/spanish/
SP-M&E-Handbook.pdf

comprensin de los principios bsicos de


la evaluacin utilizados al aplicar el Modelo
Lgico. Debe utilizarse conjuntamente
con el manual de evaluacin de la Kellogg
Foundation Evaluation Handbook. Se puede
telecargar o encargar gratuitamente en el
sitio web:
http://www.wkkf.org

Public Health Training Network: Practical


evaluation of public health programmes.
Curso completo supervisado por los
Centros de lucha contra las enfermedades
y prevencin, Atlanta (Estados Unidos de
Amrica). Disponible en: http://www.phppo.
cdc.gov/phtn/pract-eval/workbook.asp

W. K. Kellogg Foundation (1998) Evaluation


Handbook. Kellogg Foundation, Estados
Unidos de Amrica. En este manual se
hace hincapi en la evaluacin participativa,
contextual y basada en la comunidad. Se
explican con claridad todos los principales
mtodos de evaluacin y las teoras y los
modelos en que se fundan. Una publicacin
accesible, bien presentada. Se puede
telecargar o encargar gratuitamente en el
sitio web: http://www.wkkf.org

Robson, C. (2000), Small Scale Evaluation,


Londres, Sage. Una breve gua para las
evaluaciones, completa y accesible. Se explica
claramente lo que son las evaluaciones
y cmo pueden utilizarse con la mxima
ecacia, y se exponen las ventajas y los
inconvenientes de distintos mtodos de
evaluacin.

Westat Muraski, L. (1993). Understanding


Evaluation: The Way to Better Prevention
Programs Manual telecargable en que
se examina la evaluacin de programas
estadounidenses sobre las drogas y el alcohol.
Incluye informacin sobre los mtodos
cuantitativos. Se encuentra en: http://www.
ed.gov/PDFDocs/handbook.pdf

Save the Children (Reino Unido) Toolkits:


A practical guide to monitoring, evaluation
and impact assessment, escrito por Louisa
Gosling. La gua abarca el seguimiento,
la evaluacin y la medicin de los efectos,
e incluye una variedad de instrumentos
prcticos que pueden adaptarse en respuesta
a diferentes necesidades. Contiene captulos
relativos a la evaluacin de impacto y la
promocin del seguimiento y la evaluacin.
Se puede encargar en el sitio web: http://
savethechildren.org.uk./en/54_2359.htm

2. Informacin sobre anlisis


cuantitativos


Altman, M. The impoverished social


scientists guide to free statistical software
and resources. Esta gua fue elaborada por
el Dr. Micah Altman, de la Universidad de
Harvard, Director del proyecto del centro
virtual de datos y Director Adjunto del Centro
de Datos del Massachusetts Institute of
Technology (MIT), de Harvard. Adems de la
larga lista principal de materiales especcos
agrupados por categora, esta gua tiene
enlaces con sitios que brindan ayuda para
obtener, convertir y manipular datos, as
como una breve lista de libros sobre el
anlisis de datos. Cada entrada se acompaa
de comentarios sucintos. http://maltman.
hmdc.harvard.edu/socsci.shtml

 United States Aid Interventions


Department (USAID). Se enumera una gran
cantidad de recursos sobre la evaluacin.
http://www.dec.org/partners/evalweb/


University of Kansas Community Toolbox.


http://ctb.ku.edu/

University of Wisconsin - Extension.


Program Development and Evaluation. Sitio
muy prctico e informativo que contiene
orientaciones sobre el modelo lgico. http://
www.uwex.edu/ces/pdande/evaluation/index.
html.

Fondo Internacional para el Desarrollo


de la Agricultura (FIDA), Gua para el
seguimiento y evaluacin de proyectos. De
especial inters es el Anexo D, Mtodos de
seguimiento y evaluacin http://www.ifad.
org/evaluation/guide/index.htm (ver versin en
espaol)

W. K. Kellogg Foundation (2003),


Logic Model Development Guide. Kellogg
Foundation, Estados Unidos de Amrica.
Esta gua proporciona informacin tcnica
detallada e ideas prcticas para facilitar la

74

United States General Accounting Ofce


(mayo de 1992), Quantitative data analysis:
An introduction. http://archive.gao.gov/
t2pbat6/146957.pdf

Un buen sitio web para buscar guas sobre


los mtodos participativos: til bibilioteca en
lnea en la que se pueden buscar palabras
clave, como evaluacin participativa.
http://blds.ids.ac.uk/

Westat Muraski, L. (1993), Understanding


Evaluation: The Way to Better Prevention
Programs. Departamento de Educacin.
Estados Unidos de Amrica. Manual
telecargable en que se examina la evaluacin
de programas estadounidenses sobre las
drogas y el alcohol. Incluye informacin sobre
mtodos cuantitativos. http://www.ed.gov/
PDFDocs/handbook.pdf

4. Sitios generales sobre


evaluacin


American Evaluation Association.


Organizacin internacional dedicada a aplicar
y estudiar la evaluacin de programas, la
evaluacin del personal, la tecnologa, etc.
www.eval.org

3. Mtodos de evaluacin
participativos

Aubel, J. (1999) Participatory Program


Evaluation Manual. Catholic Relief Services.
US Agency for International Development
Services.

African Evaluation Society. Contiene


directrices para la labor de evaluacin en
frica. Incluye normas de evaluacin con
respecto a la calidad, la tica y los valores, e
informacin sobre conferencias y cursos de
formacin.
http://www.afrea.org/home/index.cfm

Chambers, R. (2002) Participatory


workshops: a sourcebook of 21 sets of ideas
and activities. Londres, Earthscan

Evaluation Centre. En este sitio se


proponen especialistas y usuarios de la
evaluacin, con listas de comprobacin
revisadas por expertos para la planicacin,
presupuestacin, contratacin, dotacin de
personal, gestin y evaluacin de evaluaciones
de programas, personal, estudiantes, y otros
aspectos; acopio y anlisis de informacin y
redaccin de informes sobre evaluaciones;
y determinacin de las ventajas, el valor y
la importancia. Cada lista de comprobacin
imparte valiosas enseanzas extradas de la
prctica.
http://www.wmich.edu/evalctr/checklists/

Estrella, M. et al (dir.) Learning from


Change: Issues and Experiences from
Participatory Monitoring and Evaluation.
Bourton Hall. Warwickshire. IDRC/ITP (2000).

Fondo Internacional para el Desarrollo


de la Agricultura (FIDA). Gua para el
seguimiento y evaluacin de proyectos.
Contiene informacin sobre numerosos
mtodos participativos. http://www.ifad.org/
evaluation/guide/index.htm

European Evaluation Society:


www.europeanevaluation.org/

Mayoux L. y Chambers, R. (2005)


Reversing the paradigm: quantication,
participatory methods and pro-poor impact
assessment. Journal of International
Development 17, No. 2, 2005, pgs.271-98

National Science Foundation


Programmatic On-Line Evaluation Resources
OERL: Online Evaluation Resource Library.
Esta biblioteca fue creada por profesionales
interesados en concebir, realizar, documentar
o revisar evaluaciones de proyectos. El
sistema tiene por objeto recopilar y difundir
planes de evaluacin, instrumentos e
informes para los proyectos de la National
Science Foundation que puedan ser utilizados
como ejemplos por los investigadores
principales, los evaluadores de programas y
otros interesados fuera de la comunidad de la
NSF cuando elaboran propuestas y proyectos.
La biblioteca de recursos en lnea sobre
evaluacin (OERL) tambin incluye mdulos
de perfeccionamiento profesional que pueden

Mikkelsen, B. (2005) Methods for


development work and research: a new guide
for practitioners, Nueva Delhi. Sage

Stoecker, R. (2005) Research methods for


community change: a project based approach.
Thousand Oaks. Sage

Whitmore, E. (ed) (1998) Understanding


and practicing participatory evaluation,
San Francisco, American valuation
Association.

75

utilizarse para comprender y emplear mejor


los materiales disponibles. http://oerl.sri.com/

comprensin y la utilizacin de la evaluacin,


y su contribucin al conocimiento pblico, y de
fomentar el dilogo y el debate intersectorial
e interdisciplinario. http://www.evaluation.org.
uk/

Recursos sobre mtodos para la


evaluacin y las ciencias sociales. En este
sitio se enumeran recursos gratuitos para
la evaluacin y la investigacin en ciencias
sociales. Se centra en cmo realizar los
estudios de evaluacin y los mtodos
utilizados: encuestas, grupos de debate,
muestreo, entrevistas y otros mtodos.
Muchos de los enlaces conectan con recursos
que pueden leerse en Internet. Unos pocos,
como los libros de la Ocina de la Contralora
General (Government Accountability Ofce),
se reeren a libros que pueden encargarse, o
leerse en Internet.
http://gsociology.icaap.org/methods/

Muchos pases tienen sus propios sitios


web de sociedades de evaluacin. Para
obtener informacin local utilice un motor
de bsqueda adecuado, como por ejemplo,
Google.

UK Evaluation Society. La Sociedad de


Evaluacin del Reino Unido se encarga de
promover y mejorar la teora, la prctica, la

76

Anexo 1 Formulario
de retroinformacin
Esta gua est en curso de elaboracin. Agradeceramos sumamente que nos comunique su
opinin al respecto a n de permitirnos mejorar la calidad y ecacia del producto. Srvase rellenar
el formulario adjunto y enviarlo por correo postal o electrnico a la direccin que gura al nal del
formulario.
Qu tan til le pareci esta gua? a) muy til, b) bastante til y c) nada til
Ha utilizado usted esta gua en la prctica?
Prev usted utilizar esta gua en el futuro?
Cmo utiliz usted la gua? Srvase especicar si slo ha utilizado algunas secciones.
Qu podra hacerse para que la gua sea ms accesible y/o ms til?
Utiliza usted otros materiales de apoyo para facilitar el seguimiento y la evaluacin? Srvase
especicar.
Puede usted dar ejemplos concretos de instrumentos de investigacin ecaces o inecaces que
utiliz en sus proyectos? Podemos contactarle directamente para conversar sobre la posibilidad
de incluir esos ejemplos en la prxima versin de la gua?
Hay algo que le haya resultado inadecuado, absurdo o difcil de comprender? En caso armativo
qu y porqu?
Otras observaciones.

Srvase enviarlo a:

Divisin de Educacin Bsica


UNESCO, Sector de Educacin,
7, Place de Fontenoy, 75352 Pars 07SP, Francia

77

Anexo 2 Modelos de evaluacin


Tradicionalmente se emplean los siguientes tipos de tcnicas de evaluacin, a veces por s solas y
otras veces combinadas:
1. SOLAMENTE DESPUS (posterior al programa)
Segn este modelo, la evaluacin se efecta despus de nalizado el programa por
ejemplo, una encuesta posterior al programa o un cuestionario de nal de sesin. Es un
modelo comn, pero es el menos able pues no se sabe cules eran las circunstancias
antes de que se realizara el programa. Tiende a centrarse en los resultados y efectos de la
intervencin.
2. RETROSPECTIVA (posterior al programa)
En este tipo de evaluacin, se pide a los participantes que recuerden su situacin, sus
conocimientos, sus actitudes, su comportamiento, etc. antes de que se realizara el programa,
y que reexionen al respecto. Se utiliza generalmente en programas de educacin y extensin
pero puede falsear los resultados debido a una memoria deciente de los entrevistados
(sesgo de memoria).
3. ANTES Y DESPUS (anterior y posterior al programa)
Los beneciarios del programa o las situaciones se examinan antes del programa y luego
nuevamente, despus de nalizado ste (por ejemplo, pruebas previas y posteriores u
observaciones de los comportamientos antes y despus). Se utiliza generalmente en la
evaluacin de programas educativos y las diferencias entre el Momento 1 y el Momento 2 se
atribuyen a menudo al programa. No obstante, muchos otros sucesos en el transcurso de
un programa pueden afectar el cambio observado al margen del programa, por lo que puede
resultar difcil atribuir la integralidad de los cambios a ste.
4. DURANTE (datos adicionales durante la ejecucin del programa) o Evaluacin de proceso
Acopiar informacin varias veces en el transcurso de un programa permite determinar la
asociacin entre las actividades y los efectos del programa. Se pueden recolectar datos sobre
las actividades y los servicios del programa as como sobre los progresos de los participantes.
Este modelo no se utiliza comnmente en las evaluaciones basadas en la comunidad,
probablemente a causa del tiempo y los recursos necesarios para acopiar los datos.
5. SERIES CRONOLGICAS (en mltiples momentos antes y despus del programa)
Las series cronolgicas suponen una serie de mediciones con intervalos antes de que
comience el programa o despus de que concluya. Refuerzan el modelo simple antes-ydespus, al documentar las pautas previas y posteriores y la estabilidad del cambio. Las
series cronolgicas permiten asegurarse de que otros factores externos no coincidieron con
el programa ni inuyeron en el cambio observado.
6. ESTUDIO DE CASO
En el modelo del estudio de caso se utilizan mltiples fuentes de informacin y mtodos
para llegar a un conocimiento detallado y completo del programa. Su ventaja estriba en
su exhaustividad y el examen de las razones por las cuales se produjeron los efectos
observados.
7. EVALUACIN FORMATIVA
Se realiza durante la etapa de planicacin de una intervencin a n de determinar y
resolver los problemas de la intervencin y evaluacin antes de que se realice el programa
a gran escala. La evaluacin formativa debe ayudar a asegurar que el programa se basa en
necesidades detectadas.

78

Uso de comparaciones sin intervencin


Aunque por sus exigencias presupuestarias, logsticas y relativas a otros recursos, suele
ser prohibitivo, conviene tener presente que todos los modelos antes mencionados pueden
tericamente reforzarse aadindoseles una comparacin, con otro(s) grupo(s), individuo(s) o
sitio(s).
Los grupos de comparacin son aquellos que no se seleccionan al azar pero forman parte de la
misma poblacin. (Cuando son seleccionados al azar, se denominan grupos de control). La nalidad
de un grupo de comparacin es aadir garantas de que el programa (la intervencin) gener los
efectos observados, y que stos no tuvieron otras causas. Es esencial que el grupo de comparacin
sea muy similar al grupo del programa. Atencin!: en la vida real esto es MUY difcil de lograr!
Adems, esta metodologa puede ser rechazada por motivos ticos ya que puede agravar las
desigualdades entre los grupos e incitar a la rivalidad.

79

Anexo 3 Glosario
Anlisis

Uso de los datos acopiados durante la investigacin para obtener


resultados que pueden emplearse para ilustrar el impacto y los
efectos de un proyecto. El anlisis debe aportar informacin sobre los
principios bsicos en los que se fund el proyecto. Debe incluir datos
de diversas fuentes con una ponderacin apropiada de cada fuente,
en funcin de la abilidad de los datos.

Beneciario

Este trmino se reere a la comunidad a la que se dirige la


intervencin. Los beneciarios no han de considerarse receptores
pasivos de asistencia, sino ms bien activos copartcipes que colaboran
en aras de un objetivo comn.

Comunidad

Una comunidad local es un grupo muy reducido de personas


que comparten un lugar de residencia comn y un conjunto de
instituciones basadas en aqul. La palabra comunidad tambin
se utiliza en relacin con colectivos de personas que tienen algo en
comn (por ejemplo, comunidad nacional, comunidad de donantes).

Autonomizacin

Es la capacidad que tienen las personas de elegir. En trminos


prcticos, se reere a un proceso en el que los sentimientos de
impotencia se transforman en actos que pueden propiciar cambios
en el entorno social y fsico. Es una idea esencial del desarrollo
comunitario (Bruce, N. et al 1995).

Evaluacin

La recopilacin sistemtica de informacin sobre la cual pueden


basarse conclusiones que ayudarn a formular decisiones en cuanto
a programas previstos, en curso o futuros. Las evaluaciones deben
aportar pruebas que demuestren el impacto de los proyectos.

Metodologa

El estudio de los mtodos (los instrumentos de investigacin).

Seguimiento

El seguimiento es la revisin y recoleccin permanentes de datos


sobre un proyecto/intervencin, que contribuir a la evaluacin general
y ayudar a determinar si se estn logrado los resultados previstos.

Participacin

La participacin se reere a la contribucin al proyecto de las partes


interesadas, esto es, los nanciadores, el personal, los participantes
en el proyecto, la comunidad local, el gobierno local, etc. Una
evaluacin participativa es aquella en que todos estos diferentes
grupos intervienen en el proceso de evaluacin. Esto puede abarcar la
planicacin, la realizacin de investigaciones o la toma de decisiones
en cuanto a las medidas que se adoptarn a raz de la evaluacin. El
proceso puede propiciar un mayor compromiso de la poblacin local
con el proyecto, el cual har suyo. El tipo de instrumentos utilizados en
una evaluacin participativa sern similares a los que se emplean en la
investigacin cualitativa. Lo ms importante es el espacio creado para
un debate abierto y honesto entre una variedad de partes interesadas.

Participantes

Miembros de la comunidad interesados en el proyecto, a los cuales van


dirigidas las intervenciones del proyecto, y que participan activamente
en la elaboracin, la ejecucin, el seguimiento y la evaluacin del
mismo.

80

Investigacin

La investigacin es la bsqueda de conocimientos. Predominan dos


formas de metodologa de investigacin: cualitativa y cuantitativa.

Investigacin cualitativa

Los mtodos cualitativos provienen en gran medida de los campos


de la sociologa y la antropologa y se basan en la observacin y el
estudio a fondo, principalmente mediante entrevistas con informadores
clave. El razonamiento se logra reuniendo informacin procedente de
distintas fuentes para estructurar un cuadro general.

Investigacin cuantitativa

La investigacin cuantitativa se basa en una tradicin emprica ms


positivista. Los mtodos de investigacin requieren mediciones
obtenidas generalmente mediante medios de acopio de informacin
muy estructurados y controlados. El razonamiento y la interpretacin
se efectan principalmente recurriendo a tcnicas estadsticas para
poner a prueba hiptesis predeterminadas en cuanto al modo en que
pueden estar relacionadas variables clave.

81

Anexo 4 Modelo lgico

82

(aada/modique los recuadros y las echas segn sea necesario para mostrar la teora
del cambio)

Largo plazo
Medio plazo
Alcance

Corto plazo
Actividades

RESULTADOS
PRODUCTOS
INSUMOS

Anexo 5 Ficha del plan


de evaluacin
Ficha del Plan de Evaluacin
Objetivo
Qu evaluar? Puede escoger la totalidad del proyecto o un aspecto particular del mismo.

Preguntas
Qu desea
saber?

1.

Indicadores/
Datos

Calendario Acopio de datos


Fuentes

Cmo lo
sabr?

Quin
tendr
esa informacin?

Mtodos/
instrumentos
Cmo reunir
la informacin?
Qu
instrumentos
utilizar?

Muestra
A quin
interrogar?

1.a
b
c

2.

2. a
b
c

Adaptado de la Ficha del plan de evaluacin que se encuentra en http://www.uwex.edu/ces/pdande/evaluation/


index.html

83

Anexo 6 Gua para realizar


una entrevista detallada
Con el grupo de discusin y las entrevistas detalladas, es preciso crear un ambiente relajado
brindando un entorno cmodo a n de establecer un clima propicio. Piense en cmo estn sentadas
las personas, reduzca las posibilidades de perturbaciones, y disponga con cuidado los muebles y
accesorios.
Antes que un cuestionario, en una investigacin cualitativa se utiliza una gua temtica, que cumple
la funcin de ayuda-memoria para facilitar intercambios a fondo y libres. La funcin del investigador
debe consistir principalmente en orientar la conversacin, dejando que los entrevistados hablen
con libertad del tema de que se trate pero enfocando de nuevo la conversacin si sta se desva
demasiado. Generalmente conviene ms empezar con preguntas a las que la persona entrevistada
puede responder fcilmente y luego pasar a temas ms difciles y delicados.
Es probable que las personas acudan a la entrevista con cierta ansiedad en cuanto a lo que cabe
prever. Es importante explicar cabalmente al principio cules son los objetivos de la entrevista,
qu tipo de informacin se busca, y qu uso se le dar. Seale que no hay respuestas acertadas
o equivocadas. Cada entrevistado debe tener oportunidad de hablar en los primeros minutos de la
reunin del grupo de otro modo su ansiedad se acentuar en lugar de disminuir.
En general, cuanto ms semejante a los entrevistados sea el entrevistador, ms relajados y abiertos
se sentirn. Por ejemplo, es posible que las personas se sientan ms cmodas hablando con
alguien del mismo sexo sobre su comportamiento sexual. Ahora bien, no hay normas rgidas y cada
proyecto se debe considerar por separado.
Tambin es importante que el entrevistador se presente como una persona independiente que
no tiene un inters material en los resultados. Es ms difcil para los entrevistados expresar
sus sentimientos reales acerca de un servicio o producto determinado, por ejemplo, si quien los
entrevista es un proveedor de ese servicio.
Casi siempre es preferible grabar y transcribir las entrevistas. De este modo el moderador puede
concentrarse en la entrevista en lugar de tomar apuntes, asegurndose de que no falte nada
y que se siguieron todas las pistas interesantes. Obviamente, se ha de solicitar la autorizacin
de las personas entrevistadas antes de grabar entrevistas, pero casi todas aceptarn que se
grabe su entrevista, sobre todo si se les asegura que las grabaciones slo sern utilizadas por
los investigadores con nes de anlisis, y que no se despertarn escuchando sus voces en la
radio al da siguiente! Es sumamente importante utilizar un equipo de buena calidad, probado de
antemano y que el entrevistador conozca bien. Se recomienda usar bateras nuevas ya que es poco
probable comprobar su funcionamiento en el transcurso de la entrevista, y distrae mucho que el
entrevistador est pendiente de vericar si la cinta avanza. Atencin! Sepa que la transcripcin es
un proceso que requiere mucho tiempo!

Material de estimulacin
Se trata de todo producto que se introduce durante la entrevista (o en su transcurso) para generar
debate. Puede incluir fotografas, artculos de prensa, objetos familiares, ancdotas, etc.
Un ejercicio comn consiste en presentar a los entrevistados una serie de armaciones escritas
en grandes tarjetas. Se les pide luego que clasiquen las tarjetas en distintas pilas en funcin,
por ejemplo, de la medida en que estn en acuerdo o desacuerdo con ese punto de vista, o la
importancia que asignan a ese aspecto particular del servicio. Estos ejercicios obligan a los
participantes a explicar sus distintos puntos de vista. La presentacin nal es menos importante
que los intercambios que genera.

84

Si desea ms informacin o ejemplares suplementarios srvase dirigirse


a:
UNESCO
Sector de Educacin
Divisin de Educacin Bsica
7, place de Fontenoy, 75352 Pars 07 SP, Francia

http://www.unesco.org/en/education

También podría gustarte