SEGUIMIENTO Y EVALUACIN DEL EMPODERAMIENTO

DOCUMENTO DE CONSULTA

INTRAC Noviembre de 1999 P O Box 563, Oxford OX2 6RZ Inglaterra E-mail: intrac@gn.apc.org Fax: +44- (0)1865 201851

NDICE

INTRODUCCIN

Seccin 1.

EL CONCEPTO DE EMPODERAMIENTO

Seccin 2.

LA EVALUACIN DE LOS PROCESOS DE DESARROLLO SOCIAL

Seccin 3.

SEGUIMIENTO Y EVALUACIN DEL EMPODERAMIENTO: UN ESTUDIO DE CASO

Seccin 4.

MTODOS E INSTRUMENTOS PARA EVALUAR EL EMPODERAMIENTO: LECCIONES DE LA PRCTICA

Seccin 5.

EVALUANDO EL EMPODERAMIENTO: UN EJERCICIO PRCTICO ESTUDIOS DE CASO

BIBLIOGRAFA SELECCIONADA

INTRODUCCIN
El objetivo de este Documento de apoyo es introducir temas clave para profesionales del desarrollo relacionados con el concepto de EMPODERAMIENTO y su evaluacin, a fin de que sirva de material de apoyo para los participantes de los talleres regionales. El Documento de apoyo empieza con una discusin del concepto de empoderamiento, ofreciendo una visin general de los diversas interpretaciones y enfoques que han sido desarrollados. A continuacin se presentan tres estudios de caso de una serie de proyectos distintos de ONG que han incidido sobre el empoderamiento. Les sigue un captulo con lineamientos bsicos para el seguimiento y evaluacin (S y E) del desarrollo social, que servir como introduccin general al seguimiento y evaluacin para quienes que no estn familiarizados con dichos temas. La siguiente seccin presenta un estudio de caso detallado de un enfoque de seguimiento y evaluacin de un proyecto de empoderamiento. Acto seguido, presentamos una revisin de los mtodos e instrumentos de recoleccin de informacin, as como una bibliografa detallada. Por ltimo, se ha incluido un ejercicio prctico sobre el S y E del empoderamiento, basado en cuatro estudios de caso cortos. En su calidad de Documento de apoyo, el documento no pretende ser una revisin exhaustiva de la literatura sobre el tema o desarrollar enfoques nuevos de seguimiento y evaluacin. Tampoco sugiere un enfoque especfico para el seguimiento y evaluacin del empoderamiento. Ms bien, ofrece a los participantes una apreciacin general de los enfoques comunes de empoderamiento en el desarrollo, aspectos claves para su seguimiento y evaluacin y mtodos e instrumentos para recolectar informacin. La idea es que los participantes puedan relacionar la informacin presentada en el documento con sus propias experiencias de promocin del empoderamiento y luego desarrollen sus propios enfoques para evaluar hasta qu punto ha tenido lugar el empoderamiento en relacin con su propio trabajo. Algunas secciones del Documento de apoyo sern ms tiles para algunos participantes que otras. Por ejemplo, mientras que la seccin sustantiva sobre evaluacin del desarrollo social puede ser menos relevante para quienes ya estn familiarizados con dichos temas, otros pueden haber tenido escaso contacto previo con la materia. Los Talleres Regionales ofrecen a los participantes una oportunidad para aplicar las lecciones generales que se hayan aprendido sobre evaluacin del desarrollo social al tema especfico de evaluacin del empoderamiento. Por lo tanto, es importante que todos los participantes puedan capitalizar la experiencia establecida en la materia. El Documento de apoyo, por consiguiente, se utilizar en conjuncin con las experiencias de los propios participantes en la tarea de entender tanto el concepto central como los aspectos involucrados en la evaluacin del empoderamiento. Nuestra intencin es esencialmente responder a la siguiente pregunta: cmo podemos saber cuando grupos anteriormente desempoderados, marginados o en desventaja hayan sido empoderados y por lo tanto estn en mejores condiciones para confrontar y lidiar con las fuerzas que influyen sobre su desarrollo? Tantas organizaciones de desarrollo subrayan actualmente que el propsito central de su trabajo es el de empoderar a dichos grupos que resulta apropiado preguntarse cundo y cmo podemos saber si dicha meta ha sido alcanzada. se ser el desafo del taller regional.

SECCIN 1: EL CONCEPTO DE EMPODERAMIENTO

El empoderamiento se ha convertido en un concepto central del discurso y la prctica del desarrollo en la dcada del 90. El concepto de empoderamiento es ampliamente utilizado en las polticas y los programas de los organismos tanto bilaterales como multilaterales, y no solamente de las ONG. Sin embargo, se trata de un trmino complejo, que no es fcil de definir y se presta a una amplia variedad de interpretaciones. Cualquier intento de evaluar si una intervencin de desarrollo en particular ha empoderado o no a la poblacin tiene que reconocer este hecho, y es por esta razn que el documento empieza con un breve anlisis del concepto de empoderamiento. Existe una literatura cada vez ms extensa sobre el empoderamiento. Van Eyken (1990), Friedmann (1992), Craig y Mayo (1994) y Rowlands (1997) han examinado el concepto, concentrndose en la nocin de poder, su uso y distribucin como central para entender cualquier tipo de transformacin social. Dicha centralidad incluye el poder tanto en trminos de cambio radical y confrontacin como en el sentido de la capacidad para hacer, para poder y para sentirse ms capaces y en control de una situacin. El poder es, en la mayora de los casos, la base de la riqueza, mientras que la falta de poder es la base de la pobreza, y tanto los poderosos como los desempoderados constituyen categoras de actores fundamentales para entender la dinmica de cualquier proceso de desarrollo. El poder puede entenderse como un activo propiedad del Estado o de la clase dominante, que lo ejerce para poder mantener el control y sellar su autoridad y legitimidad. Adems, el poder funciona a muchos niveles diferentes y est presente en los intereses contradictorios de distintos grupos dentro de un contexto en particular; por ejemplo, patrocinadores locales o regionales, el poder que a menudo ejercen los hombres sobre las mujeres y el poder que ejercen instituciones como la iglesia sobre la poblacin. Rowlands (1997) va ms all y hace una distincin entre poder sobre, poder para y poder desde dentro, mientras que Craig y Mayo (1995) contrastan la nocin de poder como suma variable, en la cual los desempoderados pueden ser empoderados sin alterar el nivel de poder que ya detentan los poderosos, con la nocin de poder como suma cero, en la cual cualquier ganancia de poder por parte de un grupo inevitablemente lleva a la reduccin del poder que ejercen otros. El poder tambin se relaciona con el conocimiento, que es tanto una fuente de poder como un medio para obtenerlo. En relacin con este tema, Cornwall (1992) ha sostenido que todo el trabajo de desarrollo tiene que ver con el control del conocimiento y que, si los menos privilegiados pudieran controlar las fuentes de conocimiento, las estructuras de las relaciones de poder existentes variaran radicalmente. Las tres citas que se reproducen a continuacin ilustran la variedad de significados de empoderamiento en un contexto de desarrollo. . . .un desarrollo alternativo envuelve un proceso de empoderamiento social y poltico cuyo objetivo de largo plazo es cambiar el balance de la estructura de poder en la sociedad, aumentando la rendicin de cuentas de la accin del Estado, fortaleciendo los poderes de la sociedad civil en el manejo de sus propios asuntos y aumentando la responsabilidad social de la empresa privada. (Friedmann 1992) Empoderamiento quiere decir comunidad colectiva, y en ltima instancia concientizacin de clase, entender la realidad con un sentido crtico para usar el poder que poseen incluso los desempoderados, a fin de cuestionar a los poderosos y en ltima instancia transformar esa realidad por medio de luchas polticas conscientes. (Craig and Mayo 1995) Si bien el enfoque de empoderamiento reconoce la importancia para la mujer de aumentar su poder, intenta identificar el poder menos en trminos de dominacin sobre otros y ms en trminos de la capacidad de las mujeres para aumentar su independencia y su fortaleza interna. Esto se identifica como el derecho a determinar las opciones en la vida e influenciar la direccin del cambio, a travs de la capacidad para asumir el control sobre fuentes cruciales, tanto materiales como no materiales. Coloca menos nfasis que el enfoque de equidad en

fortalecer la posicin de la mujer en relacin con el hombre, intentando ms bien empoderar a la mujer a travs de la redistribucin del poder tanto dentro de una sociedad como entre sociedades. (Moser 1991) El empoderamiento se ha convertido en un propsito importante de las intervenciones de desarrollo social en la dcada del 90. Ha sido operativizado en metodologas prcticas para proyectos y, en trminos de su efecto e impacto, est empezando a traducirse en acciones observables y mensurables. Concretamente, el empoderamiento de la poblacin puede manifestarse en tres reas generales: poder en el sentido de mayor confianza en la propia capacidad para emprender alguna forma de accin con xito poder en trminos de fortalecer las relaciones que establece la poblacin con otras organizaciones poder como resultado de un acceso creciente a recursos econmicos como crdito e insumos. El desarrollo social como empoderamiento no considera a las personas pobres como deficientes y necesitadas de apoyo externo; desde una perspectiva ms positiva, intenta crear un enfoque de desarrollo interactivo y basado en el principio de compartir, en el cual las destrezas y el conocimiento de las personas sean reconocidos. Empoderamiento no es simplemente una terapia que hace que los pobres se sientan mejor respecto de su pobreza, ni tampoco la promocin de iniciativas locales o el fortalecimiento de la conciencia poltica de las personas. Tampoco asume que la poblacin sea totalmente indefensa ni descarta la existencia previa de redes de solidaridad y resistencia a travs de las cuales las poblaciones pobres enfrentan las fuerzas que amenazan sus medios de vida. Por el contrario, el empoderamiento tiene que ver con un cambio positivo a nivel individual, comunitario y estructural, con organizacin y con negociacin. Pero, tal como comenta Rowlands (1997), el empoderamiento toma tiempo y no es un proceso que necesariamente obtenga resultados a corto plazo. A semejanza de otros conceptos de desarrollo, como sociedad civil o participacin, siempre existe el peligro de que el uso del empoderamiento en el contexto de intervenciones de desarrollo se base en un anlisis superficial de las relaciones de poder a nivel local. El empoderamiento puede limitarse a poco ms que una mayor participacin en la toma de decisiones en los proyectos y tener poco o ningn impacto sobre un cambio estructural ms amplio. Este hecho ha generado la inquietud de que el uso de dicho concepto en el desarrollo tienda a disfrazar la naturaleza real de las relaciones de poder. Una reciente coleccin de documentos escritos por antroplogos/as refleja este creciente escepticismo frente al uso cada vez ms generalizado del concepto de empoderamiento (Cheater 1999). James, por ejemplo, advierte que: Los conceptos de compartir poder, de interesados, de participacin y representacin y as sucesivamente, parecen referirse en forma creciente al autocontenido mundo de los proyectos en s: las estructuras externas de tenencia de la tierra y economa de subsistencia que pueden haber sido perturbadas, de las formaciones polticas y militares que han definido y siguen definiendo las formas de vida social en una regin, tienden a desaparecer del cuadro en el mundo del idioma del desarrollo. (James 1999:13-4) Gran parte de la inquietud radica en que muchos proyectos de desarrollo interesados en el empoderamiento no han entendido y analizado la dinmica histrica de la poltica local, con su compleja interaccin entre los distintos grupos de inters locales, la poltica estatal y la economa poltica ms amplia (por ejemplo, Werbner 1999, Chabal 1992). Estas crticas al uso que actualmente se le da al concepto de empoderamiento son importantes de tener en cuenta. Y, sin embargo, mientras James exhorta a sus colegas antroplogos/as y otros acadmicos/as a tomar distancia del trmino, sta no constituye una opcin realista para los profesionales del desarrollo. El empoderamiento es un objetivo clave de una gama tan amplia de intervenciones de desarrollo que el reto para los profesionales del desarrollo estriba en profundizar su comprensin del trmino; reconocer sus complejidades, fortalezas y limitaciones y explorar de qu forma pueden evaluar si ha tenido lugar o no un empoderamiento.

El punto de partida para cualquier anlisis del empoderamiento en una intervencin de desarrollo tiene que ser que el trmino tiene una amplia gama de significados asociados con l. Al igual que participacin y sociedad civil, empoderamiento es un concepto motivacional que evoca una amplia gama de respuestas distintas entre grupos distintos. Es importante intentar comprender la forma en que diferentes organizaciones han utilizado el trmino empoderamiento, y qu tipo de empoderamiento han intentado producir. Con esto en mente, presentamos una serie de estudios de caso breves tomados de la prctica, que ilustran la forma en que una serie de organizaciones de desarrollo distintas ha tratado de promover el empoderamiento en el contexto de un proyecto de desarrollo. Juntos, los tres estudios de caso ofrecen un amplio espectro de interpretaciones de empoderamiento y nos ayudarn a entender la naturaleza sumamente amplia de su significado.

Estudio de caso 1 Empoderando a las comunidades: El proyecto Kebkabiya en Sudn Occidental

El presente estudio de caso constituye un ejemplo de una visin de empoderamiento centrada en un proyecto. El proyecto Kebkabiya es bsicamente un proyecto de seguridad alimentaria, pero Oxfam considera el proyecto como parte del proceso de empoderamiento de la comunidad. De ah que el ttulo del libro basado en el proyecto sea Empoderando a las comunidades. Tal como demuestra este estudio de caso breve, el uso del empoderamiento en este proyecto consiste en gran medida en facilitar la participacin de las comunidades, especialmente las mujeres, en la toma de decisiones del proyecto, y por la parte de Oxfam en estar preparados para ceder el poder a favor de la Sociedad Benfica de Pequeos Productores de Kebkabiya (KSCS, segn sus siglas en ingls). El proyecto Kebkabiya en Sudn Occidental surgi del programa de ayuda humanitaria promovido por Oxfam en Sudn Occidental a raz de la hambruna de 1984. Represent un cambio de la ayuda humanitaria al desarrollo, y el objetivo principal del proyecto era incrementar la seguridad alimentaria en las comunidades alrededor de Kebkabiya. En un principio, el proyecto estuvo dirigido directamente por Oxfam, pero posteriormente se cre una organizacin local, la KSCS, que asumi en forma gradual la direccin del proyecto. El objetivo inicial del proyecto era establecer 12 bancos de semillas, y la primera fase del proyecto permiti al personal de Oxfam identificar otros problemas percibidos en las comunidades de la zona. La segunda etapa del proyecto se inici en 1989 e introdujo componentes adicionales para el abordaje de dichos problemas, entre ellos salud animal, traccin animal, control de plagas, preservacin de suelos y recursos hdricos y desarrollo comunitario. El cambio institucional ms importante en trminos de gestin fue que, mientras que la coordinacin general del proyecto permaneci en manos del personal de Oxfam, se hizo en conjuncin con una nueva estructura democrtica de representacin comunitaria, los Comits Centrales de las aldeas. Cada aldea de un grupo de cinco a 12 aldeas elega a un hombre y una mujer como representantes ante un Comit Central. A su vez, cada Comit Central elega a un hombre y una mujer como representantes ante un Comit de Gestin del Proyecto (CGP). En 1990, el CGP decidi registrarse como una organizacin independiente y se cre la Sociedad Benfica de Pequeos Productores de Kebkabiya (KSCS). Es una organizacin cuyos miembros provienen de las comunidades en las cuales ha venido trabajando el proyecto. En 1992, la KSCS organiz un taller constitucional que expuso el sistema de rendicin de cuentas de la sociedad frente a las comunidades y formaliz la estructura representativa que haba sido introducida en el proyecto, es decir, la designacin por parte de cada aldea de un representante masculino y una representante femenina al Comit Central, etc. Durante la dcada del 90, el proceso iniciado por Oxfam empez a transferir el control directo del proyecto a la KSCS. Para Oxfam, el proyecto representa un ejemplo exitoso de la forma en que un proyecto de seguridad alimentaria dirigido por Oxfam se transform en un proyecto con participacin cada vez mayor de las comunidades locales. Mientras que en la fase inicial del proyecto la poblacin local, especialmente las mujeres, tena muy poca o ninguna injerencia en las decisiones del proyecto, ste es dirigido ahora por la KSCS. Se han desarrollado estructuras democrticas - por ejemplo, a travs de la creacin de la KSCS - que han mejorado los sistemas de rendicin de cuentas de la direccin del proyecto frente a la comunidad. Desde la perspectiva del personal de Oxfam que participa en el proyecto, este hecho ha llevado al empoderamiento de la comunidad. (Fuente: P. Strachan, con Chris Peters, Empowering Communities: A Casebook from West Sudan Empoderando a las comunidades: Un diario de Sudn Occidental - Oxfam 1997)

Estudio de caso 2. Empoderando a los sin tierra: Estudios de caso sobre distribucin de la tierra y seguridad de tenencia para los pobres
Este informe examina las experiencias de Christian Aid (una ONG britnica) y sus contrapartes en tratar de lograr un sistema de distribucin de la tierra ms justo en el Brasil, las Filipinas y Mozambique. En este informe, el empoderamiento se enfoca en trminos de asegurar el acceso a la tierra para los sectores pobres y proporcionarles los medios para cultivarlas productiva y sosteniblemente. Este enfoque se basa en la conviccin de que la tierra es fundamental para las poblaciones pobres que viven en las reas rurales, para que puedan disponer de medios de vida seguros y sostenibles. Los estudios de caso que se describen en este informe demuestran la forma en que Christian Aid y sus contrapartes han trabajado con poblaciones pobres para mejorar su acceso a tierras productivas. 1: Movimiento de los Trabajadores Rurales sin Tierra (MST), Brasil. El MST se define a s mismo como un movimiento social de masas de trabajadores/as rurales sin tierra que intentan obtener acceso a tierras y hacen campaa a favor de la reforma agraria y de un cambio poltico profundo en la sociedad brasilea. Entre 1991 y 1997, el MST ayud a 600,000 personas sin tierra a conseguir tierras, construir viviendas e iniciar escuelas. Para ello, utiliz una estrategia dividida en tres etapas: primero, el MST identifica tierras que no estn siendo trabajadas con fines productivos y procura negociar el usufructo de la tierra. Si dicha estrategia falla, un gran nmero de personas ocupa la tierra e instala un campamento. Como segundo paso, normalmente los propietarios, la polica y el poder judicial intentan desalojar a los ocupantes, pero el MST intenta resistir el desalojo o persuadirlos para que los transfieran a otras tierras similares. El apoyo de las iglesias, sindicatos, movimientos urbanos y ONG es importante en esta etapa. El tercer paso consiste en que el MST trabaja la tierra, tratando de hacerla ms productiva y construyendo carreteras, escuelas, centros de salud, etc. Adems de esta forma de accin directa, el MST, junto con muchos otros grupos, est haciendo campaa a favor de la reforma agraria en el Brasil. Sin embargo, reconoce que no se trata de un asunto aislado, independiente de los retos macroeconmicos ms generales que enfrenta el Brasil. Mientras que el pas ha gastado ingentes sumas de dinero en el pago de la deuda externa en los ltimos cinco aos, los presupuestos para desarrollo rural han sido recortados y la pobreza crece en las reas rurales y urbanas. 2: Agricultores de Mapalad, Filipinas. Los agricultores de Mapalad llevan aos en una disputa legal con un terrateniente local a causa de 144 hectreas de terreno en el sur de las Filipinas. Si bien la tierra les fue asignada a los agricultores bajo el Programa de Reforma Agraria del gobierno (CARP, segn sus siglas en ingls), dicha decisin ha sido ferozmente impugnada por el terrateniente, quien ha apelado con xito contra la sentencia del poder judicial, impidiendo que los agricultores ocuparan la tierra. Este caso es considerado como una prueba del compromiso del gobierno frente a la reforma agraria, y los agricultores han recibido el apoyo de diversas iglesias y ONG. Christian Aid ha participado a travs de su contraparte, Balay Mndanaw Foundation, Inc. (BMFI), quien ha ofrecido a los agricultores asesoramiento legal, acceso a otros actores de la sociedad civil y respaldo moral. Este caso revel el poder de las lites urbanas y rurales, as como de algunos funcionarios/as gubernamentales y miembros del poder judicial, quienes para proteger sus privilegios manipularon a su favor las leyes y polticas existentes. Christian Aid y BMFI consideran que su rol radica en trabajar con los agricultores de Mapalad y otros actores, a fin de empoderarlos para que enfrenten con xito las estrategias de las lites dueas de la tierra. 3. Seguridad sobre la tierra entre los pequeos productores de Mozambique. En Mozambique, Christian Aid ha ayudado a pequeos productores a proteger su acceso ya establecido a la tierra, ante el surgimiento de especuladores y urbanizadores externos. Con el fin de la guerra civil y la liberalizacin econmica se ha desatado una batalla campal en pos de las tierras econmicamente ms valiosas de Mozambique. Ha habido casos de agricultores expulsados de sus tierras, mientras que en otros casos los agricultores han regresado de campamentos de refugiados slo para comprobar que sus tierras haban sido ocupadas por otros. En respuesta a este problema, el Consejo Cristiano de Mozambique fund una organizacin, ORAM, para que trabajara con las asociaciones de pequeos productores en la defensa de sus derechos a la tierra. En 1995 el gobierno inici un proceso de

creacin de una nueva ley de tierras y se cre una Comisin Agraria. ORAM y UNAC (el sindicato nacional de pequeos productores) se las ingeniaron para obtener representacin en la Comisin e iniciaron acciones de cabildeo a favor de los derechos de los agricultores. Tuvieron que enfrentar la fuerte oposicin de grupos de inters poderosos, quienes cabildearon en beneficio de sus intereses comerciales y polticos e intentaron socavar la legitimidad de los derechos campesinos a la tierra, establecida en la nueva ley. Finalmente, la nueva ley se aprob en 1997, en una versin que s inclua muchas de las demandas de los agricultores para la proteccin de sus derechos. Para ORAM y Christian Aid, la nueva ley empodera en principio a los pequeos productores, en el sentido que sus reivindicaciones territoriales ahora se encuentran protegidas por ley. Sin embargo, el trabajo de ORAM prosigue, ya que la aprobacin de la ley se encuentra recin en su primera etapa y es probable que surjan numerosas dificultades durante su aplicacin. Estos estudios de caso relejan la naturaleza dinmica, e incluso peligrosa, del empoderamiento en el contexto de la reforma agraria: para las poblaciones sin tierra ha sido una lucha continua en pro de la reforma agraria. Todos los casos han tenido victorias y retrocesos, y en los tres pases los agricultores y las ONG involucradas han tenido que enfrentar una fuerte oposicin de parte de las lites establecidas. En todos los casos, las acciones organizadas a nivel local han recibido el respaldo de campaas y acciones de cabildeo a nivel nacional a favor de la reforma agraria e incluso la reforma macroeconmica. Es evidente que el empoderamiento no termina con un cambio legislativo o con la aprobacin del acceso a tierras. Se trata apenas del comienzo de un proceso encaminado a garantizar medios de vida seguros, productivos y sostenibles. (Fuente: M. Whiteside, 1999, Serie de trabajo Developing good practice Desarrollando buenas prcticas - Christian Aid)

Estudio de caso 3: Programa de capacitacin para promotoras de salud en Urraco, Honduras

Este estudio de caso examina el empoderamiento de la mujer en el contexto de un programa de capacitacin para promotoras de salud en Honduras. Este programa en particular se cre en Urraco en 1985, con el apoyo de una ONG norteamericana que contribuy con una voluntaria y con financiamiento para las actividades del programa. Aunque el programa no se fund inicialmente con el propsito especfico de empoderar a las mujeres, tanto la voluntaria norteamericana adscrita al programa como algunos de los miembros del equipo de coordinacin consideran cada vez ms que el programa tiene que ver esencialmente con el empoderamiento de la mujer. Y, sin embargo, tal como lo demuestra el estudio de caso, el programa no cont con una estrategia definida para facilitar el proceso de empoderamiento y por lo tanto ha tenido un avance limitado. El programa ofreca un curso de dos aos de duracin para capacitar a personas de las comunidades locales en salud preventiva y tratamiento bsico. El curso est estructurado alrededor de crculos de estudio en 26 comunidades y prev reuniones semanales de aproximadamente dos horas de duracin, as como reuniones sectoriales mensuales en las que todos los grupos se juntan para discutir un tema en comn. 80 mujeres han sido capacitadas como promotoras de salud a lo largo de un perodo de tres aos y medio. Otras mujeres han participado activamente en el programa, ofreciendo comidas para nios y nias desnutridos y trabajando en artesanas y proyectos de crianza de cabras. Hay un equipo de coordinacin formado por cinco mujeres que trabajan a tiempo completo en el programa, y cada una dirige entre tres y seis de los crculos de estudio. En su anlisis del programa, Rowlands (1997) ha explorado el empoderamiento a tres niveles: personal: desarrollo de un sentido de confianza en s mismas y capacidad en las relaciones: desarrollo de la capacidad para negociar e influir sobre la naturaleza de una relacin y las decisiones que se toman dentro de ella colectivo: personas individuales trabajan juntas para aumentar el impacto de sus acciones, por ejemplo, formando cooperativas o participando en las estructuras polticas.

Empoderamiento personal. Las mujeres que participaron en los crculos de estudio manifestaron que haban fortalecido su confianza en s mismas y su autoestima como resultado de su participacin en el programa. Asimismo, hicieron hincapi en la importancia de aprender destrezas nuevas a travs de su participacin en el programa, como, por ejemplo, diagnstico y tratamiento de enfermedades comunes, control del nivel nutricional de sus hijos e hijas, etc. Unas cuantas incluso lograron conseguir empleo. El sentido de empoderamiento personal era particularmente notorio entre las mujeres que formaban parte del equipo de coordinacin. En particular, ellas haban tenido la oportunidad de asistir a reuniones y cursos en otras partes de Honduras e incluso en el extranjero, lo cual les permiti ampliar sus horizontes ms all de su posicin tradicional dentro del hogar. Empoderamiento en las relaciones. Algunas de las mujeres que han participado en el programa manifestaron que sus relaciones con sus esposos y familiares haban cambiado. En su opinin, dichos cambios se traducen en una mayor participacin en la toma de decisiones sobre asuntos de dinero, mayor libertad de movimiento en sus comunidades, un mejor trato por parte de sus esposos y un esfuerzo ms consciente de su parte para mejorar sus relaciones con sus hijos e hijas. Empoderamiento colectivo. Se recogi muy poca evidencia de que los crculos de estudio hubieran llevado a alguna clase de empoderamiento colectivo. Algunas actividades se realizaban grupalmente, pero esto no llev a que los grupos fortalecieran su capacidad para organizarse colectivamente con el objeto de atender sus necesidades o aumentar su acceso al poder econmico, social o poltico. No obstante, s hubo cierta evidencia de un empoderamiento colectivo entre las integrantes del equipo de coordinacin. Por ejemplo, ahora dirigan el programa sin el apoyo de la voluntaria norteamericana y tambin haban establecido contacto con otras organizaciones dentro del pas. Los principales logros del programa de salud en trminos de empoderamiento se han dado a nivel personal, mientras que, salvo el equipo de coordinacin, a nivel de relaciones o a nivel colectivo slo se observa un empoderamiento limitado. Rowlands identifica algunos factores que supuestamente han obstaculizado el proceso de empoderamiento: el programa ha sido estructurado alrededor de un programa de capacitacin de dos aos de duracin, lo cual significa que muchas mujeres lo ven nicamente como una oportunidad para aprender un conjunto finito de destrezas y no han sido motivadas a aprovechar el programa para emprender otras actividades; las mujeres no han sido motivadas a cuestionar las relaciones sociales, polticas y econmicas que sustentan los servicios de salud; la focalizacin del programa en la capacitacin de promotoras de salud ha limitado el nmero de mujeres elegibles para el programa; la metodologa utilizada en la capacitacin no incentiv a las mujeres a desarrollar sus propios temas y agendas, ni a aprender de sus propios errores; diversos factores culturales y locales pueden haber jugado tambin un papel en las limitaciones del proceso de empoderamiento a todo lo largo del programa. (Fuente: J. Rowlands, Questioning Empowerment Cuestionando el empoderamiento - 1997)

Discusin de los estudios de caso

Los tres estudios de caso reflejan nociones de empoderamiento muy diferentes. En el caso del proyecto de Kebkabiya, el empoderamiento de la comunidad se entiende muy especficamente en trminos de fortalecer el rol de la comunidad en la gestin del proyecto. Se trata de una visin ms bien estrecha de empoderamiento, que apenas hace alusin al contexto social y econmico ms amplio y a la forma en que las comunidades empoderadas se insertan dentro de ste. El estudio de caso de Honduras va ms all del proyecto inmediato y hace hincapi en la importancia de empoderar a la mujer, en el sentido de fortalecer su seguridad en s misma y su autoestima. Sin embargo, al igual que el proyecto de Kebkabiya, el empoderamiento de las mujeres del proyecto de Urraco no se ha hecho extensivo a sus derechos polticos y econmicos ms generales. En contraste, los estudios de caso de Christian Aid en el rea de la reforma agraria s constituyen ejemplos de procesos de empoderamiento

10

ms amplios. Las personas sin tierra han luchado exitosamente para obtener acceso a tierras productivas, mientras que en Mozambique la nueva ley de tierras ha reconocido las demandas de los pequeos agricultores. Asimismo, mientras que las campaas apoyadas por Christian Aid s tuvieron desde el principio el objetivo definido de empoderar a los sin tierra haciendo campaa por el reconocimiento de sus derechos a la tierra, en el caso de los dos otros proyectos el empoderamiento no fue el objetivo inicial, sino que fue aadido ms adelante. Estos proyectos han sido mucho menos controvertidos polticamente porque, a diferencia de las campaas a favor de la reforma agraria, no intentaron redistribuir el control sobre los recursos productivos. El hecho de que el concepto de empoderamiento se preste a interpretaciones tan diversas plantea retos particulares para la evaluacin del impacto de los procesos de empoderamiento. En especial, est la pregunta de si el empoderamiento debe ser evaluado o no en funcin de los objetivos especficos del proyecto, sin importar cun limitados sean stos. Por ejemplo, un punto de partida podra ser efectuar la evaluacin dentro del marco del proyecto, es decir, cules son los objetivos de empoderamiento del proyecto u otro tipo de intervencin y hasta qu punto han sido alcanzados. Sin embargo, un punto de partida alternativo es realizar primero un anlisis de las estructuras de poder a nivel local, con el fin de determinar qu factores han sido ms decisivos en crear las condiciones actuales de desempoderamiento entre los sectores pobres y marginados. Este enfoque permitira formular preguntas ms crticas y exigentes acerca de cualquier proceso de empoderamiento iniciado por una organizacin de desarrollo. Por ejemplo, mientras que el proyecto de Kebkabiya parece haber logrado un avance significativo en el cumplimiento de su objetivo de empoderar a las comunidades a travs de su participacin en la conduccin del proyecto, el informe del proyecto no hace ninguna alusin a la intervencin de dichas comunidades en las estructuras polticas y econmicas ms amplias de Sudn. Mientras que la participacin en la toma de decisiones de un proyecto constituye un desarrollo importante en s, por otro lado dicha participacin se circunscribe al contexto del proyecto. Como seala James (1999) en la cita mencionada arriba, muchas organizaciones de desarrollo enfocan el empoderamiento nicamente en trminos del autocontenido mundo de los proyectos. Pero, al hacerlo, subestiman o ignoran estructuras de poder mucho ms profundas, que tienen una injerencia mucho ms poderosa en la vida de las personas. Al evaluar el empoderamiento que resulta de una intervencin de desarrollo, es importante hacer ambas cosas. En primer lugar, el seguimiento de la intervencin puede hacerse en funcin de sus objetivos originales. Pero, si queremos saber si la intervencin ha tenido o no un impacto de largo plazo, ser necesario hacer una evaluacin mucho ms amplia de las estructuras de poder locales. La necesidad de enfocar las intervenciones de desarrollo en el contexto del cambio social ms amplio es central para los enfoques de evaluacin del desarrollo social. Aunque reconocen la complejidad de evaluar el cambio social, en la ltima dcada las organizaciones de desarrollo han empleado enfoques innovadores, de experimentacin y de aprendizaje en la evaluacin de las intervenciones de desarrollo social. Puede ser til elaborar un resumen de las principales lecciones que hayan surgido de dichas experiencias. DIMENSIONES DEL EMPODERAMIENTO Psicolgica Autoimagen e identidad Crear un espacio Adquirir conocimiento Social Liderazgo en acciones comunitarias Accin en derechos Inclusin social Alfabetismo Cultural Redefinir las reglas y normas de gnero Recrear prcticas culturales

Econmica Garantizar la seguridad del ingreso Propiedad sobre los bienes productivos Destrezas empresariales

11

Organizacional Identidad colectiva Crear organizacin representativa Liderazgo institucional

Poltica Participacin en instituciones locales Negociar el poder poltico Acceder al poder poltico

COMENTARIO FINAL
No cabe duda del uso generalizado de, y el compromiso con, un proceso de empoderamiento en muchas intervenciones de desarrollo. Sin embargo, podra afirmarse que en los ltimos cinco aos, aproximadamente, dicho compromiso ha tenido dificultades. Existen evidencias de que muchos proyectos de desarrollo, que ubicaban el empoderamiento en primera fila entre sus objetivos, se han sentido frustrados ante su incapacidad para hacer un seguimiento del proceso y explicarlo, y por lo tanto para evaluar sus resultados. En ese sentido, es importante en el presente taller aclarar de una vez por todas el concepto y el proceso que implica - y poder utilizarlo analticamente para explicar la dinmica de los contextos en los cuales tienen lugar dichos proyectos. Con ello en mente, sera conveniente concentrarnos en nuestras discusiones en unas cuantas preguntas clave: 1. En el contexto de proyectos de desarrollo cuya intencin sea empoderar a los sectores de bajos ingresos, cules son las caractersticas y factores clave en el contexto del proyecto que tendremos que identificar y explicar si queremos entender la dinmica del poder? 2. Cules son las diferencias polticas, sociales y econmicas ms importantes entre quienes detentan el poder y quienes carecen de l en un contexto de desarrollo en particular? 3. Cules son las principales caractersticas de desempoderamiento que tendrn que ser abordadas si el proyecto de desarrollo ha de empoderar a la poblacin local? 4. En su opinin, cules seran los elementos clave de cualquier intervencin de desarrollo diseada para empoderar a las personas de escasos recursos? stas y otras preguntas constituyen el anlisis contextual del poder que debemos realizar al inicio si hemos de poder evaluar en qu medida un proyecto en particular ha cambiado el centro, los patrones y la distribucin del poder. Con demasiada frecuencia, los proyectos de desarrollo intentan evaluar hasta qu punto han influenciado o no el balance de poder en un contexto determinado, pero la mayora se ve imposibilitada de hacerlo porque no cuenta con un anlisis contextual inicial. El propsito de la primera sesin del Taller es, por lo tanto, desarrollar un anlisis de esa naturaleza y garantizar que contemos con un marco para el anlisis y la evaluacin de las nociones de poder y desempoderamiento, tanto en el contexto inmediato del proyecto como en el contexto ms general.

12

SECCIN 2: ENTENDIENDO EL SEGUIMIENTO Y LA EVALUACIN DE LOS PROCESOS DE DESARROLLO SOCIAL

La medicin de la eficacia de una intervencin de desarrollo para promover el empoderamiento requiere de un sistema adecuado de seguimiento y evaluacin. Para poder hacer esto con eficacia, es importante dejar claramente establecidas las lecciones generales que hayan sido aprendidas del seguimiento y evaluacin de intervenciones de desarrollo social. ste es el propsito de esta seccin, que ha sido diseada para aquellos/as participantes que no estn familiarizados con la literatura reciente sobre el tema ni con los avances conceptuales y prcticos en este campo. Actualmente se privilegia un sistema mnimo pero eficiente, cuyo objetivo sea la generacin de una cantidad suficiente pero no exagerada de datos e informacin, que permita a una organizacin de desarrollo formarse una idea confiable acerca del producto, el efecto y el impacto de procesos como el empoderamiento que est promoviendo. Es en esta rea que est teniendo lugar actualmente la mayor parte del trabajo interesante de S y E. Bsicamente, en la ltima dcada ha surgido una alternativa al enfoque de evaluacin de proyectos ms convencional, cuantitativo y orientado a resultados. Es dentro del marco de este modelo alternativo que debemos buscar consejo acerca de cmo aproximarnos al tema del S y E de un proceso de empoderamiento. El creciente surgimiento de un ha empezado a ensearnos cmo podramos hacer para llevar a cabo el S y E de dichos procesos cualitativos, y esta seccin examinar este nuevo modelo de evaluacin de proyectos.

SEGUIMIENTO Y EVALUACIN: UNA INTRODUCCIN

Entre las organizaciones de desarrollo, incluyendo las ONG, debera ser una prctica comn hacer un seguimiento y evaluar los resultados, efectos e impacto de todos sus programas y proyectos. Esto rige para los programas de construccin de capacidades y otras intervenciones de desarrollo social tanto como para los programas que tienen objetivos ms cuantificables, pero en el caso de los primeros la cosa es ms difcil. La pregunta clave es cmo medir un cambio cualitativo utilizando un mtodo que no requiera demasiado tiempo ni esfuerzo, y que genere informacin til y accesible para la toma de decisiones. Es importante reconocer la forma en que el seguimiento difiere de la evaluacin, dado que los dos trminos a menudo se usan en forma conjunta o como sinnimos. La diferencia esencial entre ambos es que, mientras el seguimiento constituye una evaluacin continua y es parte integrante de la gestin de un proyecto, la evaluacin es un ejercicio que realizan peridicamente tanto el personal como los beneficiarios de un proyecto, en ocasiones con el auxilio de equipos externos. Mientras que el seguimiento termina una vez que termina un proyecto, la evaluacin del impacto de un proyecto de desarrollo rural puede llevarse a cabo varios aos despus de concluido el proyecto. No existe una definicin nica de seguimiento y evaluacin, ni un procedimiento estandarizado para llevarlo a cabo. No obstante, s es posible identificar algunas caractersticas comunes en la literatura existente sobre sistemas de seguimiento y evaluacin de programas. En este captulo presentamos algunas definiciones de seguimiento y evaluacin, todas las cuales han sido tomadas de algunos de los manuales clave para especialistas en seguimiento y evaluacin de programas y proyectos de desarrollo (el nfasis es nuestro). El seguimiento es una evaluacin continua, tanto del funcionamiento de las actividades de un proyecto en el contexto de sus cronogramas de ejecucin como del uso de los insumos del proyecto por parte de las poblaciones identificadas en el contexto de las expectativas del diseo. Se trata de una actividad interna del proyecto, parte esencial de una buena prctica gerencial y por lo tanto parte integrante de la gestin cotidiana. (Casley y Kumar 1987:2)

13

El seguimiento es un mecanismo innato para verificar que las cosas estn funcionando de acuerdo a plan y para permitir que se realicen ajustes en forma metodolgica. (Oxfam 1995: 413) El seguimiento es la evaluacin sistemtica y continua de los avances de una intervencin a travs del tiempo. (Gosling y Edwards1995: 81) De estas citas se desprende que las dos caractersticas principales de un sistema de seguimiento son, primero, que se trata de parte integrante de la gerencia de un proyecto y no de algo realizado por un equipo externo y, segundo, que se trata de un proceso continuo, permanente, para recolectar, almacenar, analizar y utilizar informacin. La evaluacin, en contraste, no es parte integrante de la gestin de un programa o proyecto. La evaluacin es una medicin peridica de la relevancia, el desempeo, la eficiencia y el impacto del proyecto en el contexto de sus objetivos declarados. Normalmente envuelve comparaciones que requieren informacin de fuera del proyecto - en tiempo, rea o poblacin. (Casley y Kumar 1987: 2) Una evaluacin es la medicin en un momento determinado del impacto de una intervencin y del grado al que se han logrado los objetivos declarados. (Gosling y Edwards 1995: 89) En trminos generales, existen dos enfoques principales de seguimiento y evaluacin. (i) El primer enfoque puede denominarse ortodoxo o enfoque tipo receta. Se trata del enfoque que ha sido tradicionalmente utilizado por la mayor parte de las organizaciones de desarrollo; se disea un sistema de seguimiento detallado que incluye la seleccin de indicadores antes de la ejecucin del proyecto, que sirve como base para el seguimiento mientras dure el proyecto. Si bien este enfoque es apropiado para el seguimiento de los insumos y productos fsicos de un proyecto, presenta limitaciones mayores cuando se trata de objetivos de desarrollo social ms generales, incluyendo la construccin de capacidades. (ii) En la ltima dcada, aproximadamente, se ha desarrollado un enfoque alternativo basado en procesos, que resulta menos prescriptivo y ms flexible y adaptable. En vez de definir todos los elementos del sistema de seguimiento al inicio del proyecto, el sistema se desarrolla y evoluciona a partir de la experiencia permanente de ejecutar el proyecto. El seguimiento y evaluacin debe incidir sobre el producto, el resultado y el impacto de la intervencin. Quizs sea conveniente analizar los trminos resultados e impacto. La evidencia sugiere que las organizaciones de desarrollo en general son mejores en evaluar aspectos tales como los productos, el esfuerzo y las actividades, pero menos hbiles a la hora de determinar cul ha sido el resultado de todo el proyecto. Hay que tener en cuenta adems que, mientras que la poblacin local puede participar en la definicin de los resultados y el impacto, dichos trminos a menudo provienen de la perspectiva de los donantes; sin embargo, entender el cambio que ha tenido lugar desde la perspectiva de la poblacin involucrada ser ms relevante. PUNTO DE MEDICIN Productos Resultados Impacto QU SE MIDE Esfuerzo Eficacia Cambio INDICADORES Ejecucin de las actividades Uso de los productos y produccin sostenida de beneficios Diferencia con la situacin problemtica original

Mientras que inicialmente el S y E conllevar una exposicin detallada del esfuerzo invertido y una descripcin de las actividades realizadas, la primera etapa crucial de la medicin ser evaluar cul ha

14

sido el resultado del proyecto en trminos del efecto que ha tenido sobre la situacin inicial. Bajo efecto nos referimos al cambio ms inmediato, tangible y observable - en relacin con la situacin inicial y los objetivos establecidos - que se percibe se ha producido como resultado directo de las actividades del proyecto. En el proceso general de S y E, la evaluacin de impacto es la ltima etapa y rara vez se llega a ella. En primer lugar, es importante no confundir impacto con efecto; este ltimo se refiere al resultado ms inmediato generado por una intervencin; mientras que el primero, al cambio de ms largo aliento. Impacto se refiere a las consecuencias o productos finales que resultan ya sea directa o indirectamente de una intervencin, a los que se les puede dar un valor objetivo o subjetivo. Adems, tenemos que tener en cuenta que el impacto tambin puede ser negativo como resultado de consecuencias inesperadas de la intervencin de desarrollo. Por ejemplo, los programas de crdito que supuestamente deben beneficiar a los sectores de bajos recursos con frecuencia se concentran en las personas ms solventes y terminan exacerbando con ello la pobreza y las diferencias. Tanto el seguimiento como la evaluacin representan un medio para medir la eficacia de una intervencin programtica, para poder tomar las decisiones gerenciales tanto de largo como de corto plazo. Un sistema de seguimiento proporciona la informacin necesaria para tomar las decisiones gerenciales de un proyecto y constituye al mismo tiempo una evaluacin permanente de la forma en que el proyecto est evolucionando. El tipo de informacin requerido depender de quin lo necesite. A nivel del proyecto o programa, las decisiones gerenciales requerirn informacin detallada acerca de los avances del proyecto, mientras que la oficina regional o la sede internacional pueden necesitar nicamente informacin ms abstracta, consolidada. Un sistema de seguimiento eficiente a nivel de proyectos debe proporcionar un registro constante de los avances del proyecto. La evaluacin depender del sistema de seguimiento desarrollado un buen sistema de seguimiento proveer informacin que formar el ncleo de cualquier evaluacin. Sin embargo, posiblemente se requiera informacin adicional para llevar a cabo una evaluacin. El seguimiento y evaluacin debe revelar si el proyecto est siendo ejecutado de acuerdo a plan. Cada proyecto y cada programa deben contar con objetivos definidos en trminos de productos, efecto e impacto. El objetivo primario del seguimiento es verificar si el proyecto est o no en el camino correcto para cumplir dichos objetivos y, si no lo est, tomar la decisin de modificar el proyecto o revisar los objetivos. El seguimiento y evaluacin debe identificar los problemas o dificultades en la ejecucin del proyecto. El anlisis de la informacin recogida como parte del proceso de seguimiento debe revelar los problemas o dificultades que hayan surgido en el proyecto, permitiendo a la gerencia del proyecto tomar las acciones apropiadas para superarlos. El seguimiento y evaluacin debe dar cuenta de los recursos utilizados. Una de las funciones del seguimiento es que acte como un sistema de rendicin de cuentas para quienes suministran los fondos, ya sea instituciones estatales, ONG o personas individuales. Bsicamente, el sistema de seguimiento demostrar cunto dinero ha sido gastado y en qu. Muchas organizaciones consideran que sta es la funcin ms importante y necesaria del seguimiento. El seguimiento y evaluacin debe confirmar si los supuestos formulados en la etapa de planificacin siguen siendo vlidos. La planificacin de un proyecto se realiza sobre la base de un diagnstico y supuestos iniciales acerca de las condiciones locales, tanto sociales como fsicas. El seguimiento puede servir como un mecanismo para comprpobar la validez de dichos supuestos y, de ser necesario, presentar alternativas que puedan ser incorporadas a la ejecucin del proyecto. El seguimiento y evaluacin debe evaluar si el proyecto sigue siendo relevante para las necesidades de los beneficiarios/as. Un sistema de seguimiento eficaz debe mantenerse al tanto de las necesidades de la poblacin que el proyecto o programa aspira a beneficiar. Esto ayudar a garantizar que el proyecto contine siendo apropiado y se mantenga enfocado.

15

EL SISTEMA GENERAL DE S Y E
El diseo de un marco general del proceso, las etapas y las actividades de una evaluacin constituye un primer paso fundamental. Sin embargo, dicho marco tiene que ser algo ms que un simple ejercicio sobre el papel a nivel central; tiene que ser operativizado a nivel de los proyectos. La falta de un marco general puede ser y de hecho muchas veces es el obstculo ms importante para iniciar el S y E. El marco al cual nos referimos consta de varios componentes principales: estructura, mtodos, indicadores, almacenamiento y recuperacin y anlisis e interpretacin de la informacin. Existen evidencias de organizaciones de desarrollo que estn formalizando dichos marcos, convirtindolos en Sistemas de Planificacin, Seguimiento y Evaluacin (PSE) que pueden ser altamente estructurados, no siempre son fciles de seguir a primera vista y claman a gritos alguna instruccin para ser operativizados a nivel de los proyectos. Smillie (1995) ha lanzado una advertencia contra el enfoque tipo receta para evaluar un proyecto, especialmente en lo que respecta al Marco Lgico como un medio para estructurar las actividades de evaluacin; mientras que Blankenberg (1995) alude al temor genuino de las organizaciones de desarrollo de que dichos sistemas se conviertan en macroceflicos y no justifiquen el gasto. Bsicamente, estamos buscando alguna evidencia de una visin general del ejercicio de evaluacin, de que se hayan contemplado sus diferentes etapas y de que exista una nocin de que el ejercicio har algo ms que simplemente catalogar el esfuerzo invertido y el producto. Es importante evitar caer en la situacin de realizar evaluaciones como ejercicios improvisados que se realizan una nica vez, con escaso sentido de planificacin o direccin general. La nocin de un marco general es especialmente importante ante la naturaleza de proceso que emerge de la evaluacin del desarrollo social. Por ello, las organizaciones de desarrollo estn integrando cada vez ms sus actividades de evaluacin de proyectos a sistemas institucionalizados y partiendo de esa base. En una revisin de 1995, Plan Internacional examin los sistemas de un nmero de organizaciones de acuerdo a seis criterios bsicos: elementos de proceso, productos, gestin, usuarios, eslabonamientos y aspectos tcnicos. La revisin arroj amplias evidencias de la creciente tendencia a incorporar el S y E a los sistemas existentes de planificacin de proyectos, y tambin a estructurar las actividades evaluativas de forma ms coherente. Sin embargo, no existe una nocin de alguna forma de sistema de S y E universal para proyectos de desarrollo social; de hecho, existe una notable gama de enfoques, cada uno diseado en funcin de la naturaleza y los requerimientos particulares de la organizacin que administra el enfoque. En esencia, dichos sistemas se cien a grandes rasgos a la secuencia de evaluacin que sirvi como base para los estudios de caso analizados en el Taller de Amersfoort en 1992

PREPARACIN - EJECUCIN INFORMES - REFLEXIN con la introduccin de principios y procedimientos institucionales ms formales y estandarizados en las distintas etapas. El creciente inters en dichos sistemas puede atribuirse parcialmente a la naturaleza del desarrollo social. Las evaluaciones convencionales y en gran parte cuantitativas se concentran en los insumos y los productos y generalmente logran medir dichos elementos utilizando mtodos cuantitativos de investigacin. La evaluacin del desarrollo social, por otra parte, no puede hacerse utilizando mtodos tan limitados y requiere de un enfoque ms amplio, capaz de detectar y explicar los cambios cualitativos que hayan tenido lugar. Por consiguiente, es de esperar que, a medida que las organizaciones de desarrollo especialmente las ONG promuevan activamente el desarrollo social, necesitarn desarrollar y fortalecer sus capacidades de S y E de acuerdo a ello. Parecera haber una relacin directa entre la influencia creciente del desarrollo social y la sofisticacin cada vez mayor del S y E. El anlisis detallado de un nmero de sistemas de S y E para intervenciones de desarrollo social revela los siguientes principios generales como el tipo de principios sobre el cual descansan dichos sistemas: el sistema debe ser mnimo pero costo-efectivo, debe ser inteligible tanto para el personal como para las contrapartes del proyecto a todos los niveles y no debe requerir informes onerosos e innecesarios;

16

 el sistema debe disearse de forma tal que fortalezca las capacidades de reflexin y anlisis de todos/as los involucrados, y no solamente lleve a la ejecucin mecnica de actividades preprogramadas; el sistema debe tener la capacidad para aportar informacin consistente y de calidad sobre el producto, el resultado y el impacto al ciclo (anual) del proyecto para fines tanto contables como de aprendizaje -, llevando a la adaptacin regular de los planes y objetivos; el sistema debe enfatizar la toma de decisiones y el anlisis, y no orientarse nicamente a la recoleccin de datos y cifras; el sistema debe partir del supuesto que el cambio que resulte de un proceso de desarrollo social puede ser impredecible, y por lo tanto que no siempre es posible basar la evaluacin de dicho cambio en expectativas predeterminadas sobre resultados probables; el sistema debe basarse asimismo en una participacin tan amplia como sea realistamente posible y necesario, valorando las contribuciones de los diversos grupos de interesados; debe reconocer la diversidad de gnero y tratar de garantizar que tanto las mujeres como los hombres puedan colaborar; el sistema debe reconocer que el aspecto ms importante del S y E del desarrollo social es el seguimiento, y debe enfatizar esta funcin en oposicin al enfoque de evaluacin expost; finalmente, el sistema debe reconocer el valor de las fuentes de informacin alternativas, tanto orales como visuales, as como de las percepciones de la poblacin local que no haya estado directamente involucrada en el proyecto. Los principios arriba expuestos son desde luego mucho ms fciles de expresar que de incorporar a un sistema de S y E que sea comprendido y usado por todos. En la mayora de los estudios convencionales acerca del Ciclo de un Proyecto, el S y E inevitablemente aparece en las etapas posteriores y por consiguiente se ve afectado por las incoherencias y dificultades de las etapas previas. Problemas como influencias externas, resultados intencionales y no intencionales, lo tangible y lo intangible y los roles potencialmente contradictorios de la organizacin ejecutora y la financiera, pueden contribuir a generar un escenario complejo e impredecible dentro del cual est funcionando el sistema. Aunque los principios arriba sealados probablemente gozaran de reconocimiento y solidaridad generalizados, existe escasa evidencia de que hayan sido ampliamente empleados en la prctica de la evaluacin del desarrollo social. Aunque algunos/as argumentarn que, por definicin, dichos sistemas constituyen una abominacin para la evaluacin de un proyecto de desarrollo social, que debe ser lo ms desestructurada posible, es difcil rehuir la necesidad de un marco que produzca en forma coherente informacin que permita entender en forma continua el proceso emergente.

INDICADORES
Un hito operativo de gran trascendencia en la dcada pasada ha sido la creciente familiaridad de las organizaciones de desarrollo con el uso aparente de indicadores cualitativos para la evaluacin del desarrollo social. La gran proliferacin de discusiones y ejemplos en la literatura sobre el tema es un reflejo de dicho avance. En ese sentido, por lo tanto, no hay necesidad de revisar en este documento ni la informacin general sobre indicadores cualitativos ni mucho menos los aspectos bsicos relacionados con dichos indicadores, como definicin, caractersticas, seleccin y uso. Existe una gran variedad de informacin general sobre dichos temas, en las obras de Casley y Kumar (1987), Pratt y Boyden (1985), Oakley (1988), Marsden y Oakley (1990), Westendorff y Ghai (1993), el Banco Mundial (1994) y Gosling y Edwards (1995). Los principios bsicos de que los indicadores no deben ser ambiguos, pero s coherentes, especficos, sensibles y fciles de recolectar, son tan vlidos hoy como lo eran la primera vez que fueron sugeridos por Casley y Kumar, en 1987. Otro aspecto es que los indicadores deben reflejar los resultados de un proyecto a tres niveles: producto, resultado e

17

impacto; y para la evaluacin del desarrollo social es casi seguro que se requerirn indicadores tanto cuantitativos como cualitativos. Por ltimo, est la pregunta de quin identificar los indicadores y cundo. Una observacin general que podra hacerse inicialmente sera que, si bien existe una creciente familiaridad con el lenguaje de los indicadores y cada vez se les incluye ms en la documentacin de los proyectos, siguen predominando los indicadores que revelan resultados materiales, mientras que en la evolucin de un proyecto de desarrollo social los resultados no suelen ser predecibles de antemano. En materia de indicadores de desarrollo social, los tres aspectos clave pareceran ser actualmente: identificacin y operativizacin de indicadores tanto del resultado inmediato como del impacto a largo plazo del desarrollo social una investigacin que nos ayude a responder a la pregunta cuntos indicadores? cmo desarrollar un conjunto de indicadores que satisfaga a una variedad de interesados. En lo que concierne al primer aspecto, probablemente sea cierto, pero tambin cuestionable, afirmar que los indicadores de producto continan dominando las actividades de seguimiento del desarrollo social, y que los indicadores de resultado y de impacto siguen encontrndose en gran medida en una fase experimental, salvo un creciente nmero de excepciones notables. Los indicadores de efecto y de impacto plantean problemas particulares. En primer lugar, los dos trminos a menudo se utilizan en forma intercambiable y no se hace una distincin entre efecto e impacto; en dichos casos, el uso de impacto es ms comn, hacindose quizs una distincin entre impacto inmediato e impacto a largo plazo. En ese sentido, es aconsejable no preocuparnos demasiado por la exactitud del uso de los trminos, concentrndonos ms bien en la naturaleza cambiante del resultado general del proyecto, y por lo menos haciendo una distincin y seleccionando indicadores que ayuden a dar una idea de lo que est ocurriendo en dos fases distintivas de la evolucin del proyecto. Sin embargo, tiene que haber una etapa intermedia entre el insumo y el impacto general del proyecto; intentar desarrollar indicadores para un lapso de tiempo tan amplio har imposible identificar y describir los cambios a medida que vayan ocurriendo. Los indicadores del desarrollo social, por lo tanto, tienen que seleccionarse y operativizarse de acuerdo al siguiente marco y secuencia generales: Objetivo >>Objetivos espec- >> Actividades>>>Indicadores >>Indicadores de >>>Indicadores superior ficos del proyecto del proyecto de producto resultado inmede impacto diato y verificable Si bien es cierto que no hay nada especialmente novedoso acerca de la secuencia arriba expuesta y sus interrelaciones, es notable la poca cantidad de enfoques de evaluacin de desarrollo social que parecen ceirse a este marco. En esta secuencia es importante subrayar adems que, a medida que un proyecto pasa de los insumos al efecto y de ste al impacto, la influencia de factores no relacionados con el proyecto empieza a sentirse cada vez ms, lo cual hace ms difcil para los indicadores seleccionados medir los cambios generados por el proyecto. Este hecho debera moderar el ejercicio y no conducir a infructuosos esfuerzos para identificar cambios que reflejen el indicador seleccionado. En segundo lugar, el impacto puede tardar una cantidad de tiempo inesperada en ocurrir y hacerse evidente, debilitando con ello la utilidad de los indicadores para detectar dicho cambio. En tercer lugar, todo el ejercicio podra ser costoso y oneroso, lo cual hara imposible su ejecucin para muchos proyectos con escasos recursos. No existe ninguna evidencia emprica fcilmente disponible para dilucidar dichos dilemas. Ojal que algunas de las investigaciones en marcha sobre evaluacin de impacto viertan alguna luz al respecto. En la lnea de los problemas planteados arriba, una pregunta igualmente crtica se refiere al nmero de indicadores que podra necesitar un proyecto para medir el efecto y el impacto de sus actividades. En ese sentido, la insistencia de Carvalho y White (1995) en que ... cualquier listado de indicadores debe ser parsimonioso y depender claramente de la necesidad es oportuna y ha sido coreada por Dawson (1995). Igualmente, una revisin de la Evaluacin de Impacto realizada por Partnership Africa Canada (PAC) en 1995 concluy que era necesario estudiar ms detenidamente el nmero de indicadores que a menudo se proponan para las mediciones de impacto. Se trata de un aspecto en verdad importante, ya que parecera que la respuesta del personal de proyectos al reto de la

18

evaluacin a menudo consiste en exagerar el nmero de indicadores, sin tomar en cuenta las exigencias que supondr su operativizacin. De hecho, la literatura sobre el tema tiene ms de un ejemplo de largos listados de indicadores que pareceran inapropiados para los recursos disponibles. Davies (1995), escribiendo a propsito de la ONG banglades Proshika, por ejemplo, dio cuenta de 13 indicadores de empoderamiento que generaron alrededor de 25 pginas de preguntas en una propuesta de evaluacin para medir el impacto. En trminos generales, es ms aconsejable tratar de evaluar el efecto y el impacto con base en un nmero reducido de indicadores relevantes y manejables, que permitan formarse un juicio sobre el cambio que ha tenido lugar, que abrumarnos metodolgica y cronolgicamente con un listado inmanejable y ambicioso. El cuadro a continuacin, tomado de un libro de Oxfam de prxima aparicin, ofrece un til resumen de las propiedades esenciales que deben poseer los indicadores.

Propiedades SMART de los indicadores

Propiedades ESpecficos Definicin Los indicadores deben reflejar las cosas que un proyecto intenta cambiar, evitando mediciones sujetas en gran medida a influencias externas. Los indicadores deben definirse con exactitud, de manera tal que su medicin e interpretacin sea lo menos ambigua posible. Los indicadores deben proporcionar informacin objetiva antes que subjetiva es decir, deben ser independientes de la persona que recolecta la informacin. Los indicadores deben ser plausibles de comparacin entre grupos y proyectos, permitiendo as comparar y consolidar los cambios. Los indicadores deben ser alcanzables para el proyecto, y por extensin sensibles a los cambios que el proyecto desea realizar. Los indicadores deben ser factibles de recolectar dentro de un lapso de tiempo y a un costo razonable, y deben ser relevantes para el proyecto en cuestin. Los indicadores deben describir para cundo se espera que tenga lugar un cambio determinado.

Mensurables y poco ambiguos

Alcanzables y sensibles Relevantes y fciles de recolectar Con lmite de Tiempo (Roche 1999)

Bsicamente, el nmero de indicadores debe disminuir a medida que el proyecto se desplaza de los insumos al producto, al resultado y finalmente al impacto. Si la seleccin de los indicadores de producto se ha hecho con la cautela de costumbre en trminos de relevancia y usabilidad (y as sucesivamente), debern servir de base para uno o dos indicadores de resultado ms generales, y luego para un indicador del impacto general. El indicador de impacto es un indicador marco y deber dividirse en un nmero pequeo de indicadores ms especficos a medida que aumenten las seales del impacto de la intervencin. Por ejemplo, si tomamos el objetivo de un proyecto hipottico de desarrollo social, podramos desarrollar el siguiente grupo de indicadores manejables: Objetivo Indicadores de producto a. Formacin y estructuracin de organizacin b. Construccin de capacidades con miras al crecimiento de la organizacin c. Tipo y frecuencia de actividades de la Indicadores de resultado a. Surgimiento y fortalecimiento de organizacin a nivel comunitario b. Participacin cada vez mayor de la organizacin en los asuntos de desarrollo local Indicador de impacto a. Consolidacin de organizaciones autnomas involucradas en los asuntos de desarrollo local

Desarrollo organizacional a nivel de la comunidad

19

organizacin d. Acciones planeadas y ejecutadas La leccin clave es mantener el nmero de indicadores a un nivel mnimo pero adecuado. Es mucho ms eficiente manejar y producir resultados a partir de un nmero relativamente pequeo de indicadores que dejarse abrumar por un listado largo y ambicioso pero al final inmanejable. Los datos y la informacin de los indicadores de producto arriba mencionados no deberan ser excesivamente complicados de recolectar, pero s requieren coherencia y un medio de almacenamiento adecuado. Si dichos indicadores empiezan a producir la informacin esperada, debern servir como base para evaluar el efecto y as sucesivamente. Desde luego, todo es ms fcil sobre el papel que en la prctica, y el S y E de las intervenciones de desarrollo social, debido a su naturaleza ms exigente y especial, es ms propenso a sufrir los efectos de las inevitables contradicciones de los proyectos de desarrollo. El anlisis de dnde nos encontramos en relacin con este tema de los indicadores del desarrollo social se encuentra diseminado en una difusa reserva de documentacin y literatura, lo cual dificulta la sntesis. Lo que queda claro es que, mientras que algunas organizaciones de desarrollo todava tienen que trascender el discurso y una apreciacin general de los temas, otras no solamente estn experimentando sino que tambin estn intentando extraer algunas lecciones de dicha experimentacin. Por ejemplo, varias organizaciones de desarrollo han identificado y estn empezando a operativizar indicadores apropiados para intervenciones de desarrollo social. De hecho, no son pocos los ejemplos de indicadores que las organizaciones estn usando para hacer el seguimiento y en ltima instancia la evaluacin de los resultados y el impacto de sus proyectos de desarrollo social. Los siguientes ejemplos nos darn una idea de los considerables avances alcanzados hasta la fecha en el desarrollo de indicadores en algunas reas: Autogestin, capacidad para resolver problemas, democratizacin y autosuficiencia como fenmenos de empoderamiento (Shetty) Crecimiento organizacional (Howes y Sattar 1992) Creacin de conciencia y acceso a servicios (Franco et al. 1992) Fortalecimiento de organizaciones contrapartes y fomento de la cooperacin (Priester et al. 1995) Cambios de actitud (Richards 1985) Autonoma, membresa, base del conocimiento y ampliacin de la base (Uphoff 1989) Acceso, participacin y movilidad de la mujer, matrimonio, toma de decisiones, conciencia, autoestima y desarrollo grupal (CARE 1994). De hecho, tal es la proliferacin de indicadores de desarrollo social disponibles que Khan (1994) ha sugerido que ahora podramos agruparlos por grupos de indicadores genricos. Khan equipara el desarrollo social con personas aprendiendo a modificar su comportamiento y con la construccin de instituciones y sugiere una serie de indicadores genricos, tanto cuantitativos como cualitativos, con los cuales debera ser posible hacer el seguimiento de un nmero de cambios a travs del tiempo: reclutamiento en el programa (incorporacin), inters continuado (asistencia), adquisicin de conocimientos y destrezas nuevas (aprendizaje) y modificacin del comportamiento (adopcin).

Ejemplos de INDICADORES de empoderamiento grupal

Antes del proceso Individualismo, falta de acciones colectivas Falta de anlisis crtico Dependencia econmica, social y poltica Falta de seguridad en las propias capacidades Sospecha y aislamiento Despus del proceso Cohesin interna y sentido de solidaridad Capacidad de anlisis y discusin crtica Estructura interna y elemento de autogestin Actividades colectivas Capacidad de lidiar y relacionarse con otros

Operativizacin de indicadores
ste y otros ejemplos son actualmente bastante comunes en la literatura sobre el tema; lo que es menos comn son evidencias acerca de la forma en que el uso de dichos indicadores ha funcionado en

20

la prctica. Es en este terreno donde tiene que ocurrir un hito importante. Parecera ser que a nivel de proyectos existen ejemplos de experimentos que han tratado de operativizar los tipos de indicadores sealados arriba, pero no se trata de una prctica generalizada y muchos proyectos probablemente no hayan trascendido la etapa de identificacin de indicadores. El aspecto clave de los indicadores que tienen una dimensin cualitativa sustancial es su operativizacin, que comprende una serie de pasos, empezando por la necesidad de traducirlos en fenmenos o acciones reconocibles y verificables, que puedan ser objeto de seguimiento. El proceso general puede entenderse de la forma que consignamos a continuacin y tiene que ceirse a esta secuencia si los indicadores han de producir la informacin requerida para entender los avances y cambios.
Seleccin > Actividades > Identificacin > Seguimiento > Adaptacin > Almacen. > de indicade actividades permanente de de la dores y acciones indicadores informacin verificables Interpre- >Usar tacin Aprender y anlisis

Es en las etapas finales que parecera necesitarse dicho hito. Sigue habiendo una notable tendencia a considerar que la tarea ha concluido una vez que se han seleccionado los indicadores; y sin embargo, la tarea en realidad recin est empezando. Adems, estas etapas finales no pueden construirse slo externamente y es en este terreno donde ocurren los problemas en su mayor parte. La estructuracin de un ejercicio de seguimiento conforme al ejemplo arriba citado requiere de un enfoque ms participativo y dinmico, un enfoque que puede no basarse en la percepcin convencional de indicadores y que tendr que estar en gran medida en manos del personal de proyectos y de la poblacin local. Estos dos ltimos factores exigen un diseo que sea inteligible y factible a dichos niveles, y no simplemente la introduccin de un sistema diseado por terceros. De hecho, es el diseo del sistema para la aplicacin de los indicadores lo que resulta clave para todo el proceso, y en el siguiente captulo veremos una cantidad de ejemplos sobre esto. Un rea en la que ha tenido lugar una considerable experimentacin es la participacin como un indicador del desarrollo social. En un sentido, este desarrollo era de esperarse, considerando la preeminencia que ha adquirido en la actualidad la nocin de participacin en la teora y la prctica del desarrollo. Las obras de Cohen y Uphoff (1977), Oakley (1988 y 1991) y Rifkin et al. (1988) han sido profundizadas por Montgomery (1995), quien resumi gran parte de aquel trabajo anterior. Por ejemplo, Montgomery sugiere que los indicadores cualitativos de participacin pueden dividirse en tres categoras generales: (a) Crecimiento organizacional, (b) Comportamiento grupal y autonoma grupal y (c) empoderamiento. La sugerencia de Montgomery es similar a la de Khan (ver arriba), en el sentido del surgimiento aparente de una serie de indicadores cualitativos genricos de participacin, que actualmente son bastante comunes en la documentacin de un proyecto. Por ejemplo, el estudio de Partnership Africa Canada (1995) acerca del impacto constituye una til revisin de algunas variedades de indicadores de participacin similares. Asimismo, en materia de indicadores cuantitativos de participacin, menos complejos que los primeros, Valadez y Bamberger (1994) han resumido convenientemente un conjunto comn de indicadores de participacin comunitaria en el contexto de los proyectos promovidos por el Banco Mundial. Revisando la prctica, parece haber dos formas distintivas en que los proyectos de desarrollo social determinan o seleccionan los indicadores o medios que pretenden usar para hacer el seguimiento y evaluacin de los avances y cambios: El enfoque ms comn y convencional es aqul mediante el cual se seleccionan los indicadores de antemano y stos sirven de base para el seguimiento inicial. Se pueden usar los criterios de costumbre y se produce un listado. Invariablemente, en este enfoque se hace referencia a la participacin en la seleccin de los indicadores pero, dado que el concepto de indicador probablemente no les sea familiar a todos los interesados, la autenticidad de muchos ejercicios de este tipo es debatible. Cada vez ms, sin embargo, la seleccin de indicadores participativos est empezando a romper el molde, o por lo menos se estn realizando ejercicios en los cuales se pregunta a los interesados de qu forma juzgaran los resultados de las actividades del proyecto, y la gerencia del proyecto traduce luego sus respuestas en indicadores. Por definicin, los indicadores sociales relevantes y plausibles de seguimiento son notoriamente difciles de

21

determinar pero, como se trata de principios fundamentales, tienen que ser determinados dentro del contexto en el cual van a operar y no pueden ser de fabricacin totalmente externa. En los ltimos aos ha empezado a tomar cuerpo un enfoque innovador y potencialmente muy influyente, que prescinde de la prctica convencional y favorece el uso de la pregunta(s) abierta(s) como el medio para determinar la forma en que se han de identificar y evaluar los avances y cambios. El origen de este enfoque parecera ser el trabajo temprano de Davies (1995) con CCDB, que discutimos arriba, y que actualmente est siendo replicado a una escala menor pero potencialmente importante. En lugar de indicadores, se hace una pregunta simple a los interesados: Durante el mes pasado, en su opinin, cul fue el cambio ms significativo que tuvo lugar en las vidas de las personas que participan en el proyecto? Las potenciales respuestas a esta pregunta se desagregan luego en tres reas: cambios en la vida de la poblacin; cambios en la participacin de la poblacin; cambios en la sostenibilidad de las instituciones de la poblacin y sus actividades. Las respuestas de los interesados a dichas preguntas pueden ser: (a) descriptivas, qu, quin, cundo, dnde, etc., o (b) explicativas, la evaluacin subjetiva de los interesados de la significacin de los cambios ocurridos durante el perodo del informe. Un nmero de iniciativas actualmente promovidas por importantes ONG europeas en el rea de indicadores bien puede empezar a modificar el curso de dichas prcticas en los prximos aos. Hasta ahora, la prctica del S y E del desarrollo social muchas veces ha fracasado en la etapa de seleccin de los indicadores. Ahora estas iniciativas parecen estar atacando frontalmente el problema y evaluando cmo entender el proceso de desarrollo social a nivel de los proyectos. Numerosas prcticas establecidas van a ser objeto de revisin; por ejemplo, la determinacin del medio para evaluar el cambio, el nivel al cual tiene lugar el seguimiento y la puesta a prueba de un enfoque minimalista. El nfasis en la percepcin de los interesados acerca de los cambios que han ocurrido recuerda el enfoque de antes y despus para describir el desarrollo social, que fue quizs la punta de lanza de la bsqueda de una estrategia ms efectiva para monitorear el desarrollo social que el uso de indicadores predeterminados. Los indicadores se han convertido en las vacas sagradas del S y E; los documentos de los proyectos invariablemente incluyen una seccin sobre indicadores y los marcos lgicos piden indicadores objetivamente verificables. El hito prctico ms importante en la evaluacin del desarrollo social podra ser la relajacin de esta rgida exigencia, una mayor experimentacin con indicadores ms abiertos y el uso de herramientas como historias de proyectos y lneas de tiempo para hacer el seguimiento de los avances y cambios. Adems, la actualizacin de los indicadores durante el proceso de un proyecto y el aprendizaje sistemtico a partir de los resultados del seguimiento son otras medidas clave que mejoraran sustancialmente la prctica actual.

22

INDICADORES DE EMPODERAMIENTO INTERNO

Objetivo especfico AUTOGESTIN Indicadores AUMENTO Y TENDENCIAS DE LA MEMBRESA REGLAS Y PROCEDIMIENTOS CLAROS ASISTENCIA REGULAR A REUNIONES CONTABILIDAD FINANCIERA ADECUADA IDENTIFICACIN DE PROBLEMAS CAPACIDAD DE ANLISIS SELECCIN LIBRE Y JUSTA DE DIRIGENTES INTEGRACIN DE MIEMBROS MS DBILES A LA TOMA DE DECISIONES TRANSPARENCIA EN EL FLUJO DE INFORMACIN RESOLUCIN DE CONFLICTOS ACCIONES INICIADAS POR EL GRUPO PERSONERA JURDICA SISTEMA DE APOYO INTRAGRUPAL

RESOLUCIN DE PROBLEMAS DEMOCRATIZACIN

SOSTENIBILIDAD Y AUTOSUFICIENCIA

INDICADORES DE EMPODERAMIENTO EXTERNO

Construccin de vnculos CON ORGANIZACIN EJECUTORA DEL PROYECTO CON ORGANISMOS ESTATALES Indicadores

INFLUENCIA EN DISTINTAS ETAPAS DEL PROYECTO REPRESENTACIN EN ADMINISTRACIN DEL PROYECTO GRADO DE AUTONOMA FINANCIERA INFLUENCIA SOBRE FONDOS ESTATALES DE DESARROLLO INFLUENCIA SOBRE OTRAS INICIATIVAS ESTATALES DE DESARROLLO EN LA ZONA REPRESENTACIN EN DICHOS ORGANISMOS CABILDEO FRENTE A PARTIDOS REGULARES INFLUENCIA EN ESCUELAS Y CENTROS DE SALUD LOCALES FORMACIN DE FEDERACIONES ESTABLECIMIENTO DE CONTACTOS Y TRABAJO EN REDES NIVEL DE DEPENDENCIA DE LITES LOCALES GRADO DE CONFLICTO CAPACIDAD PARA INCREMENTAR PODER

CON ORGANISMOS SOCIALES Y POLTICOS LOCALES CON OTROS GRUPOS Y MOVIMIENTOS SOCIALES CON LITES LOCALES Y OTRAS PERSONAS QUE NO PERTENECEN AL GRUPO (SHETTY, sin fecha)

23

RECOLECCIN Y ALMACENAMIENTO DE INFORMACIN

Ya hemos analizado arriba tanto la afirmacin de que los sistemas de S y E disminuyen gradualmente una vez que han sido definidos como la observacin de que el sistema a menudo colapsa debido a la falta de informacin y datos. La recoleccin y el almacenamiento de datos e informacin para fines de evaluacin permanente podran describirse como el cuarto de mquinas del S y E; si no funcionan como es debido, se paraliza todo el sistema. No hay actualmente una escasez de guas y descripciones sobre toda la gama de mtodos de recoleccin de datos e informacin. Tanto Valadez y Bamberger (1994) como Gosling y Edwards (1995) han elaborado sendas guas exhaustivas en relacin con el S y E; stas se han visto reforzadas considerablemente por todo el repertorio de tcnicas del diagnstico rural participativo (DRP). En la dcada pasada ha surgido un gnero completamente nuevo de tcnicas de recoleccin de datos e informacin. stas prescinden de los enfoques ms formales, que tienen un sesgo cuantitativo y se basan en la disciplina, prefiriendo tcnicas ms adecuadas a las demandas de participacin de los interesados y a las complejidades inherentes a la medicin de un cambio cualitativo. Sin embargo, probablemente sea cierto afirmar que el alto perfil del que gozan en la actualidad dichas tcnicas desmiente la situacin sobre el terreno, donde la recoleccin de informacin sigue siendo un problema lgido. Adems, las tcnicas como el DRP son ampliamente utilizadas y son eficaces para recolectar informacin para la planificacin, pero parecen ser menos apropiadas para el seguimiento y evaluacin. Una pregunta importante que es necesario hacer acerca del uso de las mencionadas tcnicas es cunta informacin debe ser recolectada y registrada para poder evaluar los avances adecuadamente. Asimismo, hemos sealado que el S y E de los objetivos cualitativos del desarrollo social implica una descripcin de las acciones y fenmenos a travs del tiempo, y esta tarea plantea el mismo problema. Tanto en la recoleccin como en la descripcin de la informacin, ya sea utilizando indicadores o algn otro medio menos estructurado, el asunto es lograr un equilibrio entre abrumarnos con informacin o carecer de informacin suficiente como para formarnos un juicio. Sin embargo, no existen reglas universales para confrontar este dilema y es cuestin de determinar la cantidad mnima de informacin y descripcin necesaria - teniendo en cuenta la naturaleza del proyecto y los recursos disponibles - para producir evidencia adecuada para fines de evaluacin. Quizs el aspecto ms importante sea garantizar que, como mnimo indispensable, la pregunta se aborde a nivel de los proyectos y que se haga cierta evaluacin. La evidencia actual sugerira que esta pregunta rara vez se formula, y que se presta poca atencin a temas como el tiempo, los recursos, la familiaridad del personal y los interesados y los requerimientos mnimos de informacin antes que un proceso de evaluacin empiece a funcionar. La referencia de Davies (1995) a 13 indicadores y 25 pginas de preguntas es un ejemplo perfecto para considerar dichas observaciones. Asumiendo que las interrogantes planteadas arriba estn siendo atendidas, la siguiente pregunta operativa tiene que ver con la forma en que la informacin y la descripcin deben ser organizadas y almacenadas para su eventual anlisis e interpretacin. A este respecto, las investigaciones de Lofland (1971) sobre Anlisis de Escenarios Sociales y de Patton (1987) sobre Mtodos Cualitativos en la Evaluacin constituyen textos tiles acerca de los principios generales que podran adoptarse para las prcticas correspondientes. Al sugerir dichas obras, cabe anotar que el contexto en el que se escribieron los servicios sociales y educativos en Estados Unidos es completamente diferente al contexto del tpico proyecto de desarrollo pequeo, pero los principios bsicos que suscriben pueden ser adaptados a este ltimo escenario. Una vez que se hayan determinado los indicadores (o no!), sus caractersticas operativas y las actividades y mtodos de recoleccin de informacin y presumiblemente la pregunta de quin se encargar de todo ello es que cobra importancia la pregunta del almacenamiento. Cuando formulemos la pregunta de cmo han de almacenarse la informacin y las descripciones, la respuesta probablemente ser mediante el uso de archivos y alguna clase de sistema de archivo. Entonces surgirn preguntas sobre los diferentes tipos de archivos, qu se debe incluir en los archivos, con qu frecuencia se archivar la informacin, quin se har cargo de esto, etc. En realidad, dichas preguntas slo pueden responderse en el contexto de un proyecto especfico una vez que aspectos tales como los recursos humanos disponibles, la familiaridad del personal con dichas tcnicas, las fechas y tiempos y el nivel de sofisticacin hayan sido considerados. Todo el proceso puede parecer agotador a primera vista, pero si puede organizarse al

24

nivel correcto y ser modesto en cuanto a sus expectativas, debera ser menos agotador que satisfacer las excesivas exigencias que se suele imponer a las oficinas de campo.

Marco de un sistema interno de almacenamiento de informacin del proyecto para un proceso de empoderamiento Crear un SISTEMA DE SEGUIMIENTO INDIVIDUAL para cada grupo u organizacin dentro del cual se promover el proceso: REGISTRAR la siguiente informacin MENSUALMENTE: - las reuniones del grupo u organizacin - los principales temas debatidos - la asistencia Crear un SISTEMA DE ARCHIVO INDIVIDUAL para los siguientes indicadores clave del proceso de empoderamiento: A. actividades del grupo u organizacin B. cambios de comportamiento del grupo u organizacin C. acciones realizadas / articulacin D. relaciones con otros grupos u organizaciones HOJAS INFORMATIVAS SEPARADAS para cada uno de los puntos anteriores MENSUALMENTE A.1.1. (primer mes) A.1.2. (segundo mes) B. 1.2. (primer mes) B. 1.2. (segundo mes) Lamentablemente, existen pocos o ningn ejemplo escrito de amplia disponibilidad de sistemas de almacenamiento y recuperacin de informacin a nivel de proyectos que sean apropiados para las necesidades cualitativas de la evaluacin del desarrollo social, y que pudieran proporcionar evidencias de cmo funciona un sistema de este tipo y cmo aborda las preguntas planteadas arriba. En los sistemas de S y E con un enfoque ms cuantitativo es crecientemente comn el uso de computadoras para manejar las montaas de datos; en el caso de los materiales cualitativos, las tcnicas son en su mayor parte manuales. Las caractersticas clave de un sistema cualitativo son que su actualizacin debe incorporarse a las actividades diarias del personal y los interesados, que debe ser accesible y que no debe convertirse en un ejercicio esttico de recoleccin de informacin sino en una actividad dinmica vinculada al aprendizaje del proyecto y al aprendizaje institucional. Independientemente de su naturaleza, si no creamos un sistema que sea amable con el personal y los interesados del proyecto, el anlisis y la interpretacin de los cambios que hayan ocurrido sern ms difciles.

ANLISIS E INTERPRETACIN
La etapa final de la evaluacin del desarrollo social consistir en el anlisis y la interpretacin de la descripcin y la informacin recolectadas. Si bien se medirn las dimensiones ms cuantitativas de los indicadores utilizados y se atribuir un valor numrico a los cambios que se considere que han tenido lugar, el anlisis y la interpretacin de la informacin constituyen un ejercicio diferente. Necesitaremos analizar el material recogido a la luz tanto de la situacin inicial como de los indicadores utilizados, para luego interpretar los hallazgos en trminos de lo que nos dicen acerca de los posibles cambios que

25

hayan ocurrido. El propsito del anlisis es organizar el material y esto a su vez facilitar la interpretacin. El ejercicio guarda cierta semejanza con la evaluacin de sistema abierto, en el sentido que hay un interrogatorio continuo y un intento de entender la reaccin en cadena en trminos del impacto de una intervencin de desarrollo. Sin embargo, una reaccin en cadena no asume que exista una progresin lineal automtica del producto al resultado al impacto; en el anlisis, 1 + 1 no siempre es 2, sino quizs 3 4, ya que puede haber otros resultados no anticipados de la intervencin de desarrollo.

CUANTIFICACIN DEL EMPODERAMIENTO Vnculos externos Confianza en s mismos del grupo 3. El grupo mantiene una excelente 3. Todos los miembros parecen haber interaccin con muchas organizaciones fortalecido su confianza en s mismos. relevantes que lo pueden ayudar a conseguir sus objetivos. 2. El grupo mantiene cierta interaccin de buena calidad con varias otras organizaciones 1. El grupo mantiene unas cuantas interacciones con algunas organizaciones. 0. El grupo no mantiene ningn interaccin confiable con otras organizaciones. 2. La mayora de los miembros parece haber fortalecido su confianza en s mismos. 1. Algunos miembros han fortalecido cierto grado de confianza en s mismos a raz del grupo. 0. Los miembros no parecen haber fortalecido su confianza en s mismos.

DIAGRAMA DE TELARAA DEL EMPODERAMIENTO Crecimiento organizacional Grado de autonoma Nivel de confianza

Desarrollo de vnculos

Aprendizaje y Anlisis

Autosuficiencia

Solidaridad

Actor de la sociedad civil

26

Un supuesto importante en este proceso ser, desde luego, la existencia de alguna percepcin de la situacin inicial a partir de la cual se puedan analizar los cambios. Esencialmente, el anlisis y la interpretacin intentarn primero estructurar y luego ofrecer una explicacin explcita de la naturaleza, la magnitud y el patrn de los cambios que puedan haber ocurrido dentro del contexto dado como consecuencia de la intervencin. El tema clave es, por lo tanto, el uso de indicadores cualitativos en la determinacin de lo que constituye un xito o un fracaso y la influencia del idioma, la cultura y los valores en este proceso. Un anlisis de la evidencia todava algo limitada en esta ltima etapa de la evaluacin del desarrollo social revela dos aspectos prcticos clave: (a) El potencial para la subjetividad en la descripcin y las observaciones formuladas acerca del proyecto y sus avances, as como la necesidad, por consiguiente, de garantizar que el registro de la informacin est tan estructurado como sea posible alrededor de los indicadores, o de algn otro medio sustituto. Pero incluso esto puede no resolver el potencial problema, dadas las dificultades inherentes a la evaluacin de lo que constituye un cambio y el hecho de que tanto los acontecimientos como las acciones pueden explicarse e interpretarse de maneras distintas. La explicacin y la interpretacin son una expresin de los valores e intereses de las personas, por lo que es importante recoger, examinar y comparar las de los diferentes interesados. En este ejercicio vienen a cuento los comentarios de Riddell (1990), en el sentido que ... si los juicios formulados acerca de los aspectos cualitativos de los proyectos no son sustancialmente cuestionados por los actores o grupos relevantes, entonces las preocupaciones puristas acerca de la evaluacin objetiva de dichos factores devienen en irrelevantes en gran medida. (b) Los procesos cualitativos de cambio, por definicin, a menudo se desenvuelven lentamente, con el resultado de que peridicamente el registro puede carecer de sustancia. En dichos casos existe el peligro de que el personal registre la informacin de forma inexacta, en su ansiedad por ver algn resultado. (c) El registro de la descripcin y las observaciones puede ser una tarea agotadora, para la cual algunos trabajadores/as a nivel de los proyectos pueden ser ms adecuados que otros. En el ejercicio de anlisis e interpretacin en s tambin hay una serie de problemas que han salido a la luz con la prctica: El proceso de ANLISIS INTERPRETACIN ACCIN SUBSIGUIENTE debe ser un ejercicio participativo, que promueva la participacin tanto de los miembros de los grupos como del personal del proyecto. El foro para este ejercicio suelen ser las discusiones abiertas o las reuniones de revisin, a menudo bajo la direccin de un facilitador/a y estructuradas en torno a las dos dimensiones del ejercicio y los indicadores. La memoria tanto individual como colectiva ser un elemento importante del anlisis y la interpretacin, y diferentes interesados cumplirn un papel en extraer en retrospectiva las conclusiones ms importantes acerca de cul ha sido el impacto de una intervencin en particular. Esta actividad puede no ser fcil y probablemente se requiera un perodo de ensayo, a fin de dar a todos los interesados y al personal la oportunidad de entender el ejercicio y desarrollar las destrezas necesarias para cumplir un activo papel. El trabajo de Davies (1995) con CCDB acerca del desarrollo de un sistema de seguimiento apropiado explica los pormenores de la participacin de los interesados y la forma en que las descripciones de las experiencias de vida de la gente fueron examinadas sucesivamente a diferentes niveles proyecto, oficina central y organizacin donante y sometidas a un proceso iterado de anlisis, que eventualmente seleccion un nmero reducido como ilustrativo de los cambios que haban tenido lugar. El anlisis y la interpretacin deben llevarse a cabo regularmente y no programarse para megaeventos anuales. La regularidad de dichas reuniones la dictarn factores inherentes al contexto y al proyecto, pero es casi seguro que cada tres meses, aproximadamente, tendrn lugar ejercicios peridicos para verificar lo que est ocurriendo. Es preferible un ejercicio regular de medio da, cada tres meses, que permita a un proyecto formarse una idea de lo que est teniendo lugar, a una revisin anual, que a menudo se queda entrampada ante la incapacidad del proyecto para estructurar en una nica ocasin todos los cambios que puedan haber ocurrido

27

durante todo el ao. En su enfoque para la evaluacin de impacto del trabajo de CONCERN en Tanzania, Wardle (1996) subray la importancia de las reuniones regulares, sin las cuales no se puede construir una continuidad de la interpretacin. Cada vez que sea posible, el anlisis y la interpretacin verbales deben traducirse en alguna forma de diagrama visual. En esta rea ha habido un desarrollo sumamente til de tcnicas visuales en la ltima dcada, y hay una gran cantidad de material con el cual podramos experimentar. Especialmente toda la gama de tcnicas asociadas con el DRP representa una til base a partir de la cual empezar (Gosling y Edwards 1995). Igualmente, el concepto desarrollado por Patton (1987) en la Matriz Proceso-Resultados ofrece un amplio formato diagramtico en el cual pueden presentarse las conclusiones del anlisis y la interpretacin. El enfoque de antes y despus, que compara las caractersticas o acciones particulares asociadas con un indicador especfico (por ejemplo, organizacin grupal) antes y despus de un perodo de actividad programtica (Shetty 1996), es una tcnica de uso comn. Otra tcnica es el diagrama de telaraa, que inserta los cambios esperados de una serie de objetivos en cinco crculos espaciados a intervalos fijos y asigna un puntaje a los avances de cada objetivo sobre una escala del 1 al 5. Finalmente, a medida que el anlisis y la interpretacin evolucionen a lo largo de un perodo de tiempo, ser conveniente empezar a estructurar un marco general dentro del cual puedan ser ubicados los cambios que estn ocurriendo. Por ejemplo, quizs sea posible identificar etapas particulares del cambio que est teniendo lugar, que podran anotarse y describirse con el fin de entender de qu forma est evolucionando - y quizs intensificndose - dicho cambio. En ese sentido, una de las primeras investigaciones de Galjart y Buijs sobre interpretacin de las diferentes etapas de la evolucin de un proceso de participacin Movilizacin, Primera Accin, Construccin y Consolidacin proporcion un marco general de las etapas bajo las cuales poda entenderse dicha evolucin. En vista de las dificultades inherentes a la determinacin de si se ha alcanzado o no una etapa en particular de uno de los objetivos de un proyecto y cundo, y qu nivel y tipo de cambio podra sealizar, los proyectos estn usando en forma creciente los valores numricos y la narrativa para explicar el proceso que se va develando.

Los ndices, las escalas y otras formas de representacin diagramtica de los avances cualitativos han estado presentes pero no en forma generalizada a lo largo de la dcada pasada y, cuando dichas tcnicas pueden usarse autnticamente, pueden resultar invalorables para entender la forma en que est evolucionando un proceso en particular. Al usarlas, sin embargo, es necesario asumir que los juicios de valor se hacen con base en un registro continuo y detallado de la evolucin de los fenmenos bajo anlisis y que no son el producto de evaluaciones resumidas. Dicho de otro modo, las evidencias deben estar disponibles para respaldar los avances que sugieren.

COMENTARIOS FINALES
Esta seccin ha sugerido que un principio bsico del S y E del desarrollo social es que el enfoque debe ser mnimo pero eficiente. Para ser eficiente, debe haber un sistema reconocible, en el sentido que tiene que haber una lgica, coherencia y estructura detrs del enfoque; las acciones ad hoc, espontneas o descontinuadas carecern de la coherencia necesaria para hacer el seguimiento de los procesos involucrados. No obstante, dada la naturaleza de los procesos sujetos a seguimiento y la necesidad de flexibilidad y adaptacin, el sistema no debe ni abrumar a los actores ni paralizar el proyecto con demandas incesantes. En realidad, el asunto es lograr el equilibrio adecuado; es decir, hacer un seguimiento de un nmero pequeo pero aceptable de indicadores, recolectar una cantidad adecuada de datos y de descripcin, conforme a la necesidad, e integrar perodos de anlisis e interpretacin a las actividades del proyecto. En todo ello, es importante asumir una visin amplia, considerando el ejercicio como un todo, y asegurar que todos los involucrados asuman esta misma perspectiva; de no ser as, el S y E puede devenir en un conjunto de componentes independientes, cuyo diseo individual no se gue por el principio general.

28

En el caso de un proceso de empoderamiento, en especial, es necesario hacer una serie de preguntas clave respecto de los aspectos ms crticos de su S y E: 1. Cules son los factores principales que pueden (a) favorecer o (b) limitar la capacidad de una organizacin de desarrollo para establecer un sistema mnimo pero eficiente de S y E, a fin de hacer el seguimiento y evaluacin del impacto de un proceso de empoderamiento? 2. Habiendo identificado los indicadores de un proceso de Empoderamiento, cules seran en su opinin los cuatro pasos clave para operativizarlos? 3. En su opinin, qu papel deberan jugar la comunidad o la poblacin local en el S y E de un proceso de empoderamiento?

29

Seccin 3: SEGUIMIENTO Y EVALUACIN DE LOS PROCESOS DE EMPODERAMIENTO: UN ESTUDIO DE CASO DE ETIOPA

El estudio de caso presentado por Terry Bergdall (1996) informa sobre el sistema de seguimiento y evaluacin utilizado por el Programa para el Empoderamiento de la Comunidad (CEP, segn sus siglas en ingls) en Etiopa. Su objetivo es ilustrar un ejemplo concreto de la operativizacin de un sistema de seguimiento y evaluacin en el contexto de un programa de desarrollo que se propuso empoderar a las comunidades. El CEP ha adoptado un enfoque de evaluacin flexible y adaptable, que se basa en las percepciones de cambio, en vez de confinarse a un conjunto estrecho de indicadores predeterminados. El sistema fue planeado cuidadosamente al inicio de programa y su objetivo fue responder a las siguientes preguntas: cmo hacer que el seguimiento sea participativo? cmo promover la participacin de los involucrados a todos los niveles? cmo puede la informacin ser una base de aprendizaje institucional? Este estudio de caso permite extraer lecciones tiles y prcticas, gracias a la descripcin que hace el autor sobre la forma en que efectivamente opera un sistema de seguimiento y evaluacin, incluyendo la forma en que se han incorporado mtodos tanto cuantitativos como cualitativos. Aprendizaje institucional en un programa orientado a procesos: Seguimiento y evaluacin del Programa para el Empoderamiento de la Comunidad en South Wollo, Etiopa El Programa para el Empoderamiento de la Comunidad (CEP) es un proyecto piloto financiado por la Organizacin Sueca para el Desarrollo Internacional Cupertino (SIDA, segn sus siglas en ingls) como parte integrante de los preparativos para un importante programa de apoyo a largo plazo de la Regin Amhara en el noreste de Etiopa. El proyecto ha trabajado en cinco woredas (distritos) occidentales en la Zona de South Wollo desde abril de 1994. En su calidad de proyecto piloto, el CEP es una actividad experimental que tiene por objeto identificar enfoques eficientes para catalizar iniciativas locales y la responsabilidad de la comunidad sobre el desarrollo en las zonas rurales. El CEP no se dise ni lanz como un paquete total, con una receta prefabricada detallada, sino que emergi luego de una serie de actividades y contina evolucionando como un programa orientado a procesos. Empez organizando una serie de Talleres de Participacin Comunitaria (TPC) dentro de los kires, que son las pequeas organizaciones de autoayuda tradicionales que existen en toda Etiopa y proporcionan asistencia a los miembros de la comunidad en acontecimientos sociales importantes como funerales y bodas. Desde el principio, el seguimiento y la evaluacin se han considerado elementos cruciales en esta empresa. Como consultores/as contratados por SIDA para apoyar el programa, hemos tratado de abordar varias preguntas clave a medida que orientbamos el trabajo de seguimiento y evaluacin al interior del proyecto. Partimos del supuesto de que un sistema eficiente de seguimiento y evaluacin deba (a) ser cuantitativo, (b) ser cualitativo y (c) permitir que tenga lugar un aprendizaje institucional. El trabajo de seguimiento y evaluacin de los ltimos dos aos ha abordado por consiguiente estas tres consideraciones primarias. En primer lugar, se ha concentrado en los aspectos cuantitativos: qu ha sucedido en las reas del programa despus que empez la ejecucin del proyecto, cundo sucedi, dnde sucedi, cunto de ello sucedi? En segundo lugar, se ha centrado en los aspectos cualitativos: qu cambios importantes han tenido lugar y de qu forma se perciben dichos cambios? En tercer lugar, y quizs lo ms importante, ha incidido sobre los aspectos relacionados con el aprendizaje institucional: qu nuevas revelaciones colectivas han emergido sobre participacin, empoderamiento de la comunidad y desarrollo desde abajo a raz de las actividades del programa?

30

El sistema de seguimiento interno El sistema de seguimiento interno de CEP se cre en abril de 1995 e incluy la recoleccin de informacin tanto cuantitativa como cualitativa. Adems, el sistema de seguimiento y evaluacin incluy informacin de contexto y la redaccin de informes de documentacin sobre las actividades particulares que tenan lugar al interior de cada comunidad apoyada por el programa. Una aspiracin del diseo del seguimiento y evaluacin era involucrar a todos los interesados del programa en un proceso de aprendizaje institucional. Entre los interesados se incluy a los kires (comunidades); diferentes niveles del gobierno; el SIDA y el consorcio de consultores/as a cargo de la supervisin del proceso de planificacin para el programa futuro de largo plazo. Todo aprendizaje implica la recepcin, clasificacin y retencin de informacin. Para personas y grupos por igual, conocimiento es el resultado de un proceso complejo que implica manejar vastas cantidades de informacin. El comportamiento la forma en que las personas se conducen y hacen las cosas est estrechamente relacionado con su visin y su percepcin del mundo en que viven. El cambio de percepcin es decir, el conocimiento constituye un prerrequisito para el cambio de comportamiento permanente. Por extensin, los cambios sociales requieren de un consenso colectivo respecto de percepciones acordadas y su importancia. El sistema de seguimiento y evaluacin de CEP fue concebido, dentro de esta lnea, como algo ms que una simple herramienta para obtener informacin acerca de los avances de un programa en particular. Fue pensado como un importante mecanismo para promover el cambio. En su sentido ms amplio, se es el significado implcito de aprendizaje institucional en un programa de desarrollo social.

Seguimiento cuantitativo
Los nmeros son fascinantes. Mucha gente de la comunidad del desarrollo tiene la percepcin de que el seguimiento y evaluacin simplemente no es serio si no genera un montn de cifras para examinar y analizar. Aunque el equipo de consultores/as del cual form parte tena una actitud ms bien escptica respecto de la importancia de recolectar un montn de nmeros, s queramos darle la atencin debida a la recoleccin y el anlisis de informacin para el seguimiento cuantitativo. Como se ver, cuanto ms trabajbamos asistiendo al proyecto en la creacin de su diseo para el sistema de seguimiento cuantitativo, tanto ms nos enamorbamos de su potencial carcter ilusorio. Cuando se inici el trabajo de seguimiento en CEP, se identific una serie de retos para la creacin de un sistema cuantitativo, entre ellos la necesidad de identificar indicadores clave relevantes para el objetivo del programa; de crear un sistema manejable, focalizado y limitado a la cantidad de informacin recolectada; y de disear un sistema simple y eficiente para recolectar, almacenar y recuperar la informacin. Sin embargo, el diseo inicial del sistema cuantitativo result excesivamente ambicioso, en su esfuerzo por recolectar datos en relacin con una serie de preguntas: Qu cosas se han hecho en la comunidad? Cunto de ello ha sido realizado por la propia comunidad? Quin realiz el trabajo? Qu tipo de mantenimiento local se ha efectuado luego de las actividades de desarrollo? Cunta inversin local se est haciendo? Cules son las capacidades de facilitacin y el compromiso de los coordinadores/as de los kires?

El diseo original contemplaba el seguimiento de 27 actividades de desarrollo tpicas (por ejemplo, construccin de andenes, proteccin de fuentes de agua, plantacin de plantones, etc.), que emergieron de los planes de accin elaborados por los miembros de los kires en los primeros talleres de participacin comunitaria. Quizs lo ms ambicioso de todo fue que el diseo contemplaba la recoleccin de informacin exhaustiva acerca de todas las actividades efectuadas con la comunidad, y luego hacer una distincin entre actividades realizadas con base en iniciativas locales y actividades realizadas mediante movilizacin.

31

Iniciativa local se refera a las actividades de desarrollo programadas y ejecutadas por pequeos grupos de gente. Eso no eliminaba la posibilidad de cierta asesora o asistencia externa, pero dicha ayuda deba ser proporcionada en respuesta a las iniciativas locales: los pobladores/as de la comunidad seguan siendo los actores primarios y eran esencialmente responsables de la organizacin y ejecucin del trabajo por sus propios medios. La propiedad fundamental del proyecto yaca con ellos. Las iniciativas locales podan ser realizadas por la propia organizacin del kire o por grupos ms pequeos o personas individuales dentro de los kires. Movilizacin se refera a las actividades de desarrollo bsicamente concebidas, planificadas y organizadas por organizaciones externas, trtese de dependencias estatales, agentes de desarrollo gubernamentales u organizaciones no gubernamentales, aunque dichos proyectos fueran realizados con la participacin de la comunidad en forma de trabajo comunitario. El cumplimiento de cuotas o metas de desarrollo planificadas por oficiales externos a la comunidad inmediata (por ejemplo, el kire) se consideraba un ejemplo de movilizacin. Otra actividad considerada movilizacin era Alimentos por trabajo, dado que, si bien no era planificada por oficiales externos exactamente, el principal incentivo de la actividad eran los pagos en alimentos, de origen externo a la comunidad. La intencin de esta recoleccin de informacin era ofrecer una amplia gama de opciones para el anlisis y la comparacin de los datos. Algunas de las posibilidades consideradas fueron: frecuencia absoluta y relativa de 27 actividades de desarrollo, que podan desagregarse an ms en frecuencias de movilizacin y frecuencias de iniciativa local; tipos de actividades de desarrollo ms tpicamente planeados por mujeres, hombres y jvenes; comparaciones de los tipos de actividad de desarrollo por movilizacin e iniciativa local, tanto antes como despus del taller de participacin comunitaria; cantidad total de trabajo realizado mediante movilizacin e iniciativa local en cada una de las 27 actividades de desarrollo, con comparaciones de los totales tanto antes como despus del taller de participacin comunitaria; tipo de mantenimiento de cada actividad de desarrollo por movilizacin e iniciativa local, tanto antes como despus del taller de participacin comunitaria; inversin material y en efectivo por los kires en actividades de desarrollo por movilizacin e iniciativa social antes y despus del taller de participacin comunitaria (despus del taller, esta informacin poda analizarse en relacin con cada una de las tres visitas de seguimiento); nmero de coordinadores/as de kires capacitados en tcnicas de facilitacin, por categoras de mujeres, hombres y jvenes; participacin efectiva de coordinadores/as de kires como facilitadores/as en los talleres durante la visita de seguimiento nmero tres en cada kire; evaluaciones de la capacidad de cada kire para continuar el proceso de CEP por su propia cuenta una vez concluidas las visitas de los facilitadores/as; anlisis de toda esta informacin, consolidada o desagregada por woredas y otras divisiones geogrficas.

En los meses de junio y julio de 1995 se cre y prob la base de datos computarizada para el sistema de seguimiento cuantitativo; se ingres la informacin cumulativa hasta la fecha y se hicieron preguntas acerca de los datos y los medios para verificarlos. Este ejercicio sac a la luz una serie de cuestionamientos serios respecto de las ambiciones y el diseo del sistema de seguimiento cuantitativo, que discutieron a profundidad los Facilitadores/as Principales y consultores/as de MAP, extrayendo algunas conclusiones sobre los datos a monitorear. Inicialmente se pens que era importante poder hacer dos comparaciones: una, entre lo que haba sucedido en relacin con trabajos de iniciativa local durante los dos aos anteriores al taller de participacin comunitaria de un kire y lo que haba ocurrido durante los dos aos posteriores; y la otra, entre los logros alcanzados a travs de esfuerzos de movilizacin y aqullos alcanzados mediante iniciativas locales. Sin embargo, los datos para ambas comparaciones resultaron problemticos. Los miembros de los kires no podan suministrar

32

informacin precisa acerca de ninguna de las dos categoras de informacin, y los facilitadores/as tampoco tenan forma de verificar los datos. Otra categora de informacin originalmente contemplada era el seguimiento de las inversiones materiales y en efectivo realizadas por los kires, a fin de determinar si haba habido algn cambio sustantivo a travs del tiempo. Esto tambin result problemtico, ya que los estimados de los miembros de los kires eran claramente imprecisos y variaban sustancialmente de kire en kire y de woreda en woreda. Nuevamente, no haba nadie que cuantificara con exactitud o verificara los datos reportados. Finalmente, todos los datos recogidos se haban concentrado exclusivamente en los planes de accin confeccionados por los kires; no se estaba recolectando sistemticamente ningn tipo de informacin sobre las necesidades prioritarias de desarrollo. Asimismo, haba una falta de claridad respecto de la pregunta clave en este contexto - las necesidades consignadas deban ser solamente aqullas que los kires consideraban que podan atender con sus propios recursos y habilidades, o las necesidades de desarrollo deban consignarse independientemente de la capacidad de un kire para satisfacerlas?

En vista de lo anterior, el sistema de seguimiento cuantitativo se someti a revisiones mayores en marzo de 1996. En materia de recoleccin de informacin se adoptaron las siguientes decisiones y se tomaron las siguientes medidas: Dados los problemas de recolectar y verificar datos exactos, se elimin toda informacin relativa a logros pasados, ya sea a travs de iniciativas locales o por movilizacin. Asimismo, se elimin todo intento de cuantificar las inversiones materiales o en efectivo realizadas por los kires en sus actividades de desarrollo. Adems, se elimin toda recoleccin de informacin sobre el trabajo de movilizacin; solamente se mantuvieron los datos relativos a iniciativas locales. Se decidi que se recolectara informacin acerca de las necesidades de desarrollo registrando las necesidades prioritarias identificadas en los talleres de participacin comunitaria, independientemente de la capacidad de un kire para resolverlas o no. Aunque se empez a recolectar dichos datos, stos no fueron ingresados ni se les hizo un seguimiento en la base de datos computarizada debido a la complejidad de ingresar y hacer el seguimiento de datos tan diversos. La compilacin de la informacin y los informes acerca de las necesidades de desarrollo prioritarias se hicieron manualmente segn la necesidad.

El resultado de las revisiones fue que se potenci el sistema para recolectar informacin cuantitativa que pudiera ser recogida y reportada de forma ms exacta y verificable. Sin embargo, la informacin sigui siendo bastante extensa. Se consider que la principal mejora radicaba en la confiabilidad de los datos que ya no requeran los estimados especulativos de los miembros de los kires y eran verificables. Los datos sobre los planes de accin se reducan a una cuestin de informes y la informacin sobre los logros poda ser fsicamente inspeccionada y medida. En suma, todas estas revisiones bsicamente dieron como resultado el seguimiento de las iniciativas comunitarias posteriores a las intervenciones del CEP. Adems de registrar la asistencia a dichos eventos, tambin se recopila informacin sobre los planes de accin confeccionados durante los talleres de participacin comunitaria y las reuniones de seguimiento y las iniciativas locales realizadas ms all de los proyectos especficos programados en los talleres o en las reuniones de seguimiento. Sin embargo, sigue en pie la pregunta: qu significan todas estas cifras realmente? Los datos cuantitativos recolectados hasta ahora han puesto sobre el tapete muchas preguntas interesantes que necesitan esclarecerse antes de poder entender plenamente la significacin de las cifras. A continuacin algunas preguntas clave para la interpretacin de los datos:

33

Aunque la distincin entre iniciativa local y movilizacin se subraya en los lineamientos para la recoleccin de informacin del sistema de seguimiento y evaluacin interno, no es seguro que las cifras que aparecen en los informes reflejen efectivamente dicha distincin. No solamente existen grandes dificultades para identificar y cuantificar iniciativas locales. El problema mucho mayor si no la imposibilidad radica en aislar el estmulo crucial detrs de dichas iniciativas: aunque el sistema de seguimiento y evaluacin del CEP tiene cuidado de no adjudicarse el crdito por dichas actividades, una interpretacin seria de los datos tendra que hacer alguna evaluacin de los otros estmulos posibles, aparte del CEP, que podran haber motivado dichas iniciativas locales. Los esfuerzos por establecer algn tipo de muestra de control para lograr una mejor comprensin de la informacin cuantitativa de las comunidades despus de los talleres y reuniones de seguimiento arrojan un resultado diferente al que podra esperarse en cualquier caso, incluso si no se hubiera realizado ningn taller.

Actualmente se est programando un estudio cualitativo complementario en una muestra seleccionada al azar de kires donde hayan tenido lugar talleres de participacin comunitaria y reuniones de seguimiento, a fin de ayudar a absolver dichas preguntas y contribuir a una interpretacin ms informada de la informacin cuantitativa. El objetivo superior del estudio propuesto ser agregar informacin cualitativa al sistema de seguimiento interno del CEP, de manera tal que las cifras que corresponden a la informacin cuantitativa puedan entenderse mejor. Los objetivos especficos del estudio sern investigar e informar sobre: lo que las comunidades entienden bajo iniciativas locales tal como figuran en los datos del sistema de seguimiento; una evaluacin de la confiabilidad de dichas cifras consignadas en los informes y una indicacin cualitativa del margen de error; los posibles estmulos, aparte del CEP, que podran haber motivado las iniciativas que aparecen en los informes y una discusin de su importancia; alguna indicacin comparativa de la significacin de las iniciativas locales consignadas despus de los talleres de participacin comunitaria y de seguimiento, frente a las de una muestra reducida de kires donde no se hayan realizado dichos talleres.

Para enriquecer la oportunidad de aprendizaje directo del trabajo de campo, dicho estudio complementario ser realizado por un equipo especial de funcionarios/as regionales designados (muy probablemente de la Oficina de Agricultura y la Oficina de Asuntos de la Mujer). El equipo llevar a cabo su trabajo de campo en seis kires diferentes seleccionados al azar donde haya funcionado el CEP y tres kires de control en las inmediaciones donde no haya habido presencia del programa. El equipo dispondr de un mnimo de tres das en cada uno de los kires seleccionados. La informacin se recolectar mediante discusiones grupales, entrevistas en profundidad y observaciones personales. Se espera que los resultados de dicho estudio arrojen valiosa informacin indicativa para interpretar la extensa informacin cuantitativa recolectada por el programa. La participacin de los funcionarios/as regionales deber contribuir sustancialmente a la naturaleza participativa del trabajo de seguimiento y evaluacin.

Seguimiento cualitativo del CEP

La informacin cuantitativa es esencial para el seguimiento de cualquier programa de desarrollo. Sin embargo, tal como lo demuestra la seccin precedente, acusa limitaciones obvias. Si bien es cierto que los datos cuantitativos pueden ofrecer una indicacin ms o menos acertada de cunto y cuntos, es difcil que cifras estriles respondan a la pregunta y qu. La informacin cuantitativa tiende a abstraer la experiencia humana y despojarla de su contexto. La informacin cualitativa sirve de complemento para el seguimiento numrico de las iniciativas locales de desarrollo, al insuflar vida al trabajo de desarrollo por medio de historias y ancdotas. stas a su vez son claves para entender la dinmica del

34

empoderamiento. La creacin de un sistema de seguimiento cualitativo, sin embargo, plantea un nmero de preguntas. En primer lugar, cmo hacer que el sistema de seguimiento sea participativo? El foco de las actividades de seguimiento, incluso cuando se hacen en forma cualitativa, frecuentemente lo definen personas muy alejadas de las actividades sujetas a seguimiento. Los indicadores los identifican especialistas, consultores/as o personal directivo, que recolectan informacin y analizan los resultados. Los participantes del programa y el personal de campo, si participan en absoluto, tpicamente reciben el encargo de revisar las conclusiones de dichos especialistas y hacer comentarios al final del proceso. El seguimiento participativo, si ha de ser genuino, tiene que identificar estrategias prcticas para que los participantes y miembros del personal sean parte integrante de todo el sistema en todo momento, de principio a fin. En segundo lugar, de qu forma pueden participar los interesados a todos los niveles del programa en el proceso de seguimiento? sta es otra dimensin de la pregunta sobre participacin formulada arriba. Los interesados en la mayora de los programas son mltiples y variados. Es necesario identificar estrategias creativas para promover su participacin en los aspectos prcticos del sistema de seguimiento. En tercer lugar, cmo podemos hacer que la informacin recogida mediante el sistema de seguimiento se convierta en una base de aprendizaje institucional? Si no le damos un uso prctico, la informacin ser slo medianamente interesante. Es necesario establecer mecanismos para aprender de la experiencia y modificar el programa de acuerdo a lo que vayamos aprendiendo. En lugar de que dichas modificaciones provengan nicamente de las conclusiones extradas por el personal directivo, el personal y los interesados a todos los niveles de la organizacin requieren un mecanismo prctico para participar en los cambios. Esto implica un proceso para llegar a un consenso general acerca de las fortalezas y debilidades de la ejecucin del programa, las direcciones que es necesario tomar en el futuro y las medidas prcticas que es preciso adoptar para lograr el resultado final deseado. El diseo del sistema de seguimiento y evaluacin tom seriamente en consideracin dichas preguntas. El enfoque primario para el seguimiento cualitativo se concentr en registrar y hacer un seguimiento de las percepciones de cambio; dicho enfoque se bas en el trabajo de investigacin de Rick Davis, CDS, Swansea. Por diversas razones, el cambio se consider como un tema apropiado para el seguimiento cualitativo. Con el objetivo superior de mejorar la calidad de vida, el seguimiento del cambio puede ayudarnos a no perder de vista el cuadro ms amplio. El contenido del cambio que se consigna en los informes sigue siendo sin embargo especfico, directamente ligado a comunidades individuales. Adems, el cambio es un concepto relativamente fcil de considerar para las personas. Requiere de pocos factores predeterminados. Las preguntas acerca de los cambios a menudo conducen a una gran variedad de temas no anticipados, estimulando con ello a muchas personas de diversos sectores y perspectivas a decir lo que es de importancia para ellas. Las impresiones fluyen con naturalidad cuando se compara una situacin antes y despus y, por tratarse de algo tan poco complicado, muchas personas pueden participar. Y, sin embargo, formular preguntas sencillas acerca de las razones del cambio es un rpido trampoln hacia la reflexin sobre temas ms complejos. El modelo adoptado por el CEP intent involucrar directamente a personas de todos los niveles del programa en el proceso de seguimiento. Incluy a los participantes de los talleres realizados en los kires (que en otros contextos podran llamarse los beneficiarios/as o el grupo objetivo); a los facilitadores/as y el personal del CEP; a funcionarios/as gubernamentales de los woredas, la circunscripcin zonal y regional; as como a representantes de la organizacin financiera, SIDA. La intencin del diseo era promover la participacin de personas de todos estos grupos en el seguimiento y el anlisis de la informacin mediante (a) la seleccin de lo que consideraran como los cambios ms importantes que estaban teniendo lugar en los kires donde funcionaba el CEP durante un perodo determinado de informes y (b) acto seguido, la explicacin de las razones detrs de sus opciones.

35

En resumen, el diseo del proceso de seguimiento comprende los siguientes pasos. Cada nivel del programa recibe el encargo de seleccionar lo que considera que han sido los cambios ms importantes que han ocurrido en su rea geogrfica en particular durante un perodo determinado de informes. Se empieza con el nivel de los kires. Los cambios seleccionados se juntan con los cambios seleccionados por otros grupos del mismo nivel y luego se envan al siguiente nivel, donde el proceso de seleccin se repite. En cada etapa se envan slo cuatro cambios seleccionados al nivel siguiente. El proceso contina su marcha, de los kires a los woredas, de stos a la circunscripcin zonal y finalmente a la regin. Adems de seleccionar los cambios ms importantes, cada grupo explica por qu eligi dichos cambios. Una vez que las selecciones y explicaciones filtradas llegan a la cima del sistema de seguimiento, inician un nuevo recorrido de arriba hacia abajo a travs de la cadena en forma de memorndums y discusiones grupales. Desde abajo hasta arriba, los participantes de los kires identifican mnimamente 288 cambios importantes durante un solo perodo de informes (4 cambios x 6 kires x 3 unidades de facilitacin x 4 woredas, partiendo del trabajo en los cuatro woredas piloto originales). De stos, el proceso de seleccin finalmente resulta en 16 cambios significativos a ser revisados por el comit de coordinacin zonal. Cada paso de esta seleccin va acompaado de explicaciones acerca de las opciones seleccionadas. Al principio, los facilitadores/as intentaron recolectar historias relacionadas con tres tipos especficos de cambios: (a) cambios de actitud o imagen (b) cambios en trminos de desarrollo sostenible (c) cambios relativos al bienestar fsico o econmico. No se estipul un cuarto cambio, sujetando el tema totalmente a la discrecin de los miembros de los kires. Los participantes de los kires en los siguientes talleres de seguimiento, sin embargo, manifestaron que las categoras eran confusas e innecesarias y los facilitadores/as tuvieron dificultades para explicarlas. Descontentos con el cariz que estaba tomando la discusin, los facilitadores/as empezaron a prestar menos atencin a este tema o lo eliminaron por completo de la agenda de las reuniones de seguimiento. Durante una reunin de revisin con los Facilitadores/as Principales que tuvo lugar en Dessi del 4 al 15 de marzo de 1996 salieron a relucir otros problemas relacionados con el diseo del seguimiento cualitativo. Uno de los ms importantes tena que ver con la participacin de los administradores/as y funcionarios/as de los woredas, que se mostraban confundidos acerca de su papel en el proceso de seguimiento y continuamente se manifestaban reticentes a decidir la importancia de unos cambios que figuraban en los informes pero que ellos no haban presenciado con sus propios ojos. Revisar historias no corroboradas y emitir juicios de valor acerca de ellas les pareca un gesto carente de contenido. Despus de la primer reunin de seguimiento, su inters en participar en el ejercicio fue decayendo. Una larga discusin sobre dichos problemas llev a un nmero de modificaciones en el proceso de seguimiento. Se eliminaron las categoras de los cambios, pidindose a las personas que se limitaran a identificar los cambios que consideraran ms importantes. Las reuniones trimestrales con los facilitadores/as pasaron a ser la ocasin principal para consolidar las historias de los kires y seleccionar los cambios ocurridos en todo el woreda que segn su parecer eran los ms importantes. Las historias se ampliaron para incluir los cambios observados entre los funcionarios/as extensionistas trabajando en las reas del programa. Adems, se pidi a los funcionarios/as de los woredas que participaran directamente en las visitas de verificacin. Luego de modificar el proceso, se incluy en las reuniones de seguimiento con los kires la revisin y discusin de la historia de cambio seleccionada por los funcionarios de los woredas como la ms importante. Esto se hizo al final de la reunin y sirvi como retroalimentacin y como una oportunidad para continuar reflexionando sobre el tema. Luego de contar la historia, los facilitadores/as lideraron una discusin con los participantes del kire basada en las siguientes preguntas:

36

Qu les sorprendi acerca de esta historia? Si les pudieran hacer preguntas a los actores de esta historia, qu informacin adicional les gustara tener? En qu sentidos les parece que esta historia representa un cambio importante (si estn de acuerdo con que representa un cambio importante)? Si algo similar a lo ocurrido en la historia hubiera de suceder en este kire, qu cosas haran igual y qu cosas haran de modo diferente? De qu forma produciran dichas acciones un cambio importante en este kire?

Finalmente, se pidi a los participantes que identificaran los cambios ms importantes que haban tenido lugar en su kire como consecuencia de las actividades vinculadas con el programa. Qu impacto tuvo este proceso sobre los kires? Las sesiones de retroalimentacin con los facilitadores/as revelaron que los pobladores/as ciertamente estaban interesados en escuchar lo que otros kires haban logrado y lo que los funcionarios/as de los woredas consideraban como el cambio ms importante. Asimismo, la conversacin a menudo pareci provocar el espritu competitivo de los miembros de los kires. Despus de discutir la historia, los pobladores/as estaban ansiosos por explicar sus propios logros en la promocin de un desarrollo autosostenible. Adems, segn los facilitadores/as, estas discusiones hicieron que los participantes renovaran su decisin de asumir la responsabilidad sobre los nuevos planes de accin que acababan de crear en la reunin de seguimiento. En cierta forma, era una actitud de si ellos han podido hacerlo, nosotros podemos hacerlo mejor! En lo que se refiere a los woreda, los funcionarios/as con frecuencia acometan sus visitas de verificacin con escepticismo. Aunque haban escuchado muchas historias interesantes relacionadas con supuestos cambios, no estaban convencidos de que dichas cosas estuvieran sucediendo en verdad. Una vez en el campo, se sorprendieron de lo que vieron. Hasta la fecha no ha habido ningn caso en que un funcionario/a haya descubierto algn informe falso. De hecho, los informes revelan que los funcionarios/as de los woredas se han sorprendido repetidamente ante la motivacin, el compromiso y los logros alcanzados por los pequeos proyectos locales promovidos por miembros de los kires exclusivamente con recursos y conocimientos locales. En conclusin, el seguimiento cualitativo del CEP, basado en las percepciones del cambio, utiliza un enfoque altamente inductivo, que convierte acontecimientos indicativos imprevisibles en la base para extraer conclusiones acerca de los resultados. Esto resulta valioso cuando los objetivos de empoderamiento del programa vienen impregnados de conceptos como mayor participacin, confianza en s mismos, responsabilidad, capacidad para resolver problemas, etc. Dichas categoras conceptuales son extremadamente difciles de evaluar. En vez de confinarnos a un estrecho rango de indicadores predeterminados, el enfoque del CEP ofrece la posibilidad de ser flexibles y adaptables a las circunstancias cambiantes. Dicho enfoque contrasta fuertemente, desde luego, con los enfoques de seguimiento convencionales, que son deductivos en su orientacin, es decir, que parten de la concepcin de un estado deseado y luego tratan de identificar indicadores empricos de que dicho fenmeno ha ocurrido. Tal como lo demuestra la experiencia de campo, el sistema de seguimiento cualitativo empleado por el CEP prcticamente fortaleci el poder de los de abajo y constituye una alternativa a los enfoques convencionales, en que especialistas alejados del campo a menudo definen los sujetos de seguimiento. Ha dado a quienes se encuentran ms cerca de la experiencia sujeta a seguimiento la oportunidad de dirigir el proceso, tomando sus opciones y haciendo sus interpretaciones al principio y no al final. Los funcionarios/as mencionados arriba se ven entonces en posicin de responder a una diversidad de explicaciones generadas desde abajo. Coincidiendo con los objetivos superiores del CEP en su conjunto, la agenda bsica de seguimiento se establece as firmemente desde abajo y no desde arriba.

37

Seccin 4: MTODOS E INSTRUMENTOS PARA LA EVALUACIN DEL EMPODERAMIENTO: LECCIONES DE LA PRCTICA

Esta seccin presenta varios ejemplos de estudios recientes sobre la evaluacin de intervenciones de ONG en el campo del desarrollo social. stos ilustran valiosas lecciones respecto de la recoleccin, el anlisis y el uso de informacin. Cada informe analiza la utilidad de diferentes mtodos e instrumentos de seguimiento y evaluacin. Aunque ninguno de los ejemplos tiene que ver especficamente con el empoderamiento, todos se refieren a la operativizacin de la evaluacin y las ventajas y desventajas de distintos enfoques. El primer ejemplo se tom de un informe de ActionAid y se basa en un proyecto de investigacin de ActionAid con financiamiento del DFID (Departamento para el Desarrollo Internacional del gobierno britnico) sobre mtodos e indicadores para medir el impacto de reduccin de la pobreza. La investigacin comprendi estudios en Bangladesh, India, Ghana y Uganda. Extrae conclusiones tiles acerca de la realizacin de evaluaciones de impacto participativas. La seccin a continuacin reproduce un extracto comentado del informe. El segundo ejemplo ha sido tomado de la versin preliminar de un nuevo libro de Oxfam sobre Evaluacin de Impacto. ste se basa en un importante proyecto de investigacin sobre evaluacin de impacto realizado por Oxfam y Novib en conjuncin con contrapartes en nueve pases. El extracto que presentamos aqu contiene algunas reflexiones acerca de las principales lecciones que emergen en relacin con las herramientas y mtodos de recoleccin de informacin. El ltimo estudio es de la ONG danesa Impact Study y presenta una revisin de los mtodos e instrumentos utilizados. Dicha revisin se bas en un estudio de 45 proyectos diferentes en Bangladesh, Tanzania y Nicaragua. En cada pas se llev a cabo un Estudio Nacional, es decir, una revisin de una amplia gama de proyectos de diferentes ndoles promovidos por ONG danesas. Los Estudios Nacionales se complementaron con un Estudio en Profundidad en cada pas, que examin un solo proyecto en mucho mayor detalle.

EVALUACIN DE IMPACTO PARTICIPATIVA - ACTIONAID

Lecciones clave de la investigacin Filtracin de resultados y cultura institucional: Es importante no concentrarse exclusivamente en los interesados primarios sino prestar atencin tambin a las organizaciones intermediarias. Independientemente de los mtodos que se utilicen para obtener informacin de la poblacin, lo cierto es que los resultados tienen que ser filtrados tanto por el personal de la organizacin u organizaciones locales que estn recolectando la informacin como, posteriormente, por estas mismas organizaciones. Todas las organizaciones poseen ambos sistemas, as como una cultura subyacente de supuestos, valores o normas aceptadas en la cual se basan dichos sistemas; estos sistemas y valores pueden ya sea respaldar o debilitar la capacidad de una organizacin para escuchar y responder a la evaluacin de sus clientes acerca del impacto de sus intervenciones. Hacia una cultura de evaluaciones de impacto en las ONG: La evaluacin de impacto es comnmente considerada ya sea como parte de una agenda impuesta principalmente por las organizaciones financieras o, en ocasiones, en trminos peyorativos como un ejercicio ms bien acadmico. Adems, la mayora de las ONG locales cuenta con onerosos sistemas contables y de presentacin de informes (muchos de stos impuestos por sus organizaciones financieras), con lo cual al personal apenas le queda margen o incentivo para escuchar y entender las percepciones de la gente acerca de sus intervenciones y tomar medidas al respecto. Para la mayor parte de las ONG, escribir informes, ya sea para sus Oficinas Principales o para sus donantes, es un trabajo, y muchas asumen que la evaluacin y la medicin de impacto revisten mayor inters para los donantes y directores/as que para el personal. Tericamente, sin embargo, cualquier organizacin debera poder desarrollar una cultura de Evaluacin de Impacto, en la cual el personal a todos los niveles sea motivado y empoderado para identificar, hacer un seguimiento y presentar informes acerca del impacto, utilizando para ello tanto sus contactos directos con las comunidades como su propio juicio. Posiblemente se

38

requieran indicadores de impacto en los cuales el personal deba basar sus informes, pero stos bien pueden no captar los impactos esperados o no deseados de un proyecto. Tanto el proceso mediante el cual se recolecta la informacin relativa a un indicador como el grado al que quienes recolectan los datos entienden su importancia determinarn el que los datos en s sean o no de algn valor en la evaluacin del impacto. Necesidad de discernimiento crtico respecto de los mtodos en s: Antes de empezar esta investigacin, no nos habamos percatado de la influencia que pareca tener un nmero relativamente pequeo de enfoques de DRP sobre los trabajadores/as de desarrollo en la mayora de los pases, ni tampoco de la necesidad de utilizar una capacidad de discernimiento mucho mayor antes de decidirse a emplear una herramienta en particular. Muchas de las personas que participaron en esta investigacin tuvieron ms dificultades de lo previsto para diferenciar entre la idoneidad de distintos mtodos. En Bangladesh se observ cierta conciencia acerca de las diferencias entre los distintos mtodos utilizados, por ejemplo, en trminos del tiempo que le tomaba a la gente desarrollar los diferentes ejercicios de DRP y la facilidad con que entendan la forma de hacerlos. Pero no estaban dispuestos a elegir entre los distintos mtodos al recomendar su uso a terceros. Preferan sugerir la combinacin de varios paquetes, en lugar de elegir entre ellos. Esta actitud se contradice con la necesidad de reducir el volumen total de tiempo que toman dichos ejercicios, un problema que descubrimos en los cuatro pases. En Uganda el personal expres un abanico de preferencias distintas por ciertos mtodos, pero no hubo un consenso de opinin. En Ghana se utiliz una gran variedad de mtodos diferentes, pero no se lleg a ninguna conclusin acerca de cul de todos los mtodos era el ms idneo. Los resultados sugieren que es necesario que las investigaciones futuras se centren ms explcitamente en una revisin crtica de los propios mtodos de DRP, con miras a determinar cules son los ms tiles para ayudar tanto a los beneficiarios/as como a las organizaciones a entender el impacto de las diferentes intervenciones, y cules deben mantenerse en reserva o incluso descartarse. Indicadores. A todo lo largo de este estudio hemos debatido el grado al que los enfoques participativos deben concentrarse en indicadores como tales, y tambin si el uso de dichos indicadores es suficiente por s solo para que las poblaciones pobres entiendan el impacto. La conclusin a la que llegamos fue que, a grandes rasgos, los indicadores suelen ser necesarios pero rara vez son suficientes. As, pues, pueden ser valiosos como puntos de referencia y discusin, pero la seleccin de los indicadores tiene que reposar sobre una base slida de dilogo intenso entre el personal de la ONG y sus beneficiarios/as. Existe el peligro evidente de que, si las organizaciones donantes empiezan a exigir indicadores determinados por los beneficiarios/as, la interaccin minuciosa y permanente entre el personal de la organizacin y las comunidades se ver sustituida por largos listados de dichos indicadores. Una de nuestras preocupaciones en esta investigacin era la confiabilidad de los indicadores identificados por la poblacin. La poblacin sera coherente en su seleccin de los indicadores a travs del tiempo o stos variaran, por ejemplo, de acuerdo a las estaciones? El estudio revel tanto que la poblacin era sorprendentemente coherente en su seleccin de los indicadores como que, si una ONG ha trabajado en un rea en particular durante algn tiempo, no debe esperar que la poblacin proponga indicadores muy diferentes a los que la propia ONG ha venido utilizando. Gnero. La investigacin ha arrojado algunas lecciones tiles sobre gnero. En los proyectos en los cuatro pases se hizo un esfuerzo especial para organizar reuniones separadas con distintos subgrupos (hombres/mujeres adultos y jvenes) en las aldeas. En algunos casos (por ejemplo, en Ghana), esta decisin se bas en la premisa que hombres y mujeres tienen intereses distintos, definidos por sus roles de gnero: las mujeres suministran informacin sobre agua y vacunacin; los hombres, sobre arados tirados por bueyes y migracin. Pero, al hacerlo, el equipo de investigacin estaba aceptando y consolidando los roles de gnero establecidos, en vez de cuestionarlos. De este modo, tanto en la documentacin como en el anlisis se presta mucho menos atencin a las diferencias en los puntos de vista sobre temas comunes. Considerando el esfuerzo que se invirti durante la investigacin para organizar reuniones separadas con grupos de hombres y mujeres, la cantidad de informacin finalmente obtenida (en forma de datos analizados) acerca de las diferencias de opinin entre dichos grupos no ha sido muy sustantiva. En trminos generales, el problema no es tanto la falta de conciencia de gnero entre el personal y los investigadores/as de campo, sino la falta de una demanda percibida de resultados desagregados por gnero por parte de los niveles superiores de organizaciones

39

como ActionAid. Si hubiera habido tal demanda, sta podra haber servido para contrarrestar las presiones percibidas por el personal de consolidar y sintetizar los resultados de la investigacin de numerosas reuniones en numerosas aldeas. El desafo estriba por lo tanto en mantener un fuerte enfoque de gnero, no solamente durante la etapa de recoleccin de la informacin en un proyecto de investigacin como ste, sino tambin en el proceso de interpretacin de los datos y determinacin de sus implicaciones operativas. (Fuente: Participatory Impact Assessment - Evaluacin de impacto participativa - Hugh Goyder, Rick Davies y Winkie Williamson, ActionAid 1998)

LIBRO DE OXFAM SOBRE EVALUACIN DE IMPACTO

El cmo: Mtodos y herramientas En este estudio se utiliz una gran variedad de herramientas y mtodos. Quizs la conclusin ms importante sea que la seleccin de una combinacin y una secuencia adecuadas de herramientas y mtodos depende fuertemente de que tengamos claro nuestro propsito y el foco de la evaluacin y diseemos el proceso evaluativo en un formato apropiado para el contexto, el proyecto en cuestin y las organizaciones involucradas. La capacidad para desarrollar combinaciones y secuencias metodolgicas apropiadas y la capacidad para adaptarse e innovar a medida que el estudio avanza parecen ser tan importantes como el conocimiento y las destrezas requeridos para cada mtodo individual. Quizs exista un nmero de revelaciones clave que tienen que ver con las familias generales de mtodos exploradas en este estudio: Primero, es evidente que hay que aprovechar al mximo los datos existentes, ya sea datos sobre el proyecto o informacin disponible de otras fuentes acerca del contexto. La produccin de documentos sinpticos consolidando largos aos de informes y archivos de los proyectos result particularmente provechosa en algunos casos. En adicin, las fuentes gubernamentales locales, los registros de educacin y salud y las estadsticas de las estaciones de investigacin agrcola probaron ser una importante fuente de informacin, pese a sus severas limitaciones. En segundo lugar se comprob que, incluso cuando la informacin existente era de buena calidad y se haba invertido un gran esfuerzo en recopilar informacin de lnea de base, en casi todos los casos hubo la necesidad de reconstruir por lo menos una parte de la historia, no solamente de los proyectos sino tambin de los cambios experimentados en las vidas de los hombres, las mujeres y las comunidades. Desde luego, esta medida fue an ms necesaria en los casos en que los planes y documentos del proyecto eran dbiles o inexistentes y/o en situaciones de emergencia, en que los rpidos cambios en el contexto generan cambios en las prioridades y acciones que no siempre son documentados. Un importante nmero de herramientas y mtodos revisados en el Captulo 4 ilustra la forma en que se hizo esto. Tercero, si bien es cierto que las encuestas de hogares a gran escala tienen muchas limitaciones y han recibido crticas negativas por parte de la prensa en aos recientes, los estudios de caso revelan que pueden cumplir una til funcin si permanecen enfocadas, si se prueban y adaptan previamente, si los encuestadores/as reciben capacitacin y preparacin adecuadas, si la informacin se coteja y ordena secuencialmente con otros datos ms cualitativos de manera apropiada y si existe la capacidad adecuada para analizar los resultados. Las miniencuestas que se describen en el Captulo 3 y el uso del cuestionario en el estudio de Wajir, ambos de los cuales utilizaron una combinacin de herramientas participativas y preguntas estndar, parecen representar alternativas tiles para las encuestas exhaustivas. Cuarto, el amplio abanico de mtodos de entrevistas, talleres y grupos focales que se utiliz en los estudios de caso suscit algunas preguntas crticas respecto de las ventajas y desventajas de los procesos individuales en oposicin a los procesos grupales. Estos temas rara vez se abordan en gran

40

parte de los manuales sobre investigacin participativa o diseo de investigaciones. Sin embargo, los estudios de caso demostraron claramente que haba ejemplos de (a) personas individuales que respondan a la misma pregunta de modos diferentes, dependiendo de si estaban solas o en grupo, (b) personas individuales que manifestaban en privado su desacuerdo con las conclusiones a las que haban llegado los grupos en pblico, (c) grupos particulares, especialmente mujeres, jvenes y miembros de hogares menos favorecidos, que eran sistemticamente excluidos o ignorados en dichos ejercicios grupales. Por otra parte, tambin hubo ejemplos de ejercicios grupales que llevaron a (a) nuevas revelaciones para los participantes, en ocasiones gracias al intercambio de informacin sensible, por ejemplo sobre violencia domstica, que haba sido mantenida en reserva hasta ese entonces, (b) una solidaridad y un propsito comn fortalecidos y (c) la unin de voces anteriormente marginadas, lo cual las fortaleci para que fueran escuchadas. Quinto, la observacin directa y la observacin participante como mtodo muchas veces tampoco recibe gran atencin en los textos y manuales sobre seguimiento y evaluacin. Y, sin embargo, en numerosos estudios es evidente lo ventajoso que resulta que los investigadores/as residentes y la poblacin simplemente merodeen por el lugar y mantengan los ojos abiertos. En especial, la observacin de este tipo ayud a desarrollar confianza y a forjar buenas relaciones con la poblacin local y el personal del proyecto; permiti obtener informacin que de otra manera hubiera sido imposible de conseguir por medio de preguntas o facilitando discusiones; permiti entender mejor las relaciones, tanto al interior de las comunidades como entre la comunidad y otras organizaciones e instituciones; y, finalmente, permiti cotejar en un grado importante la informacin recogida por otros medios. La observacin depende en grado sumo de las habilidades del observador/a y es intensiva en recursos, pero por otro lado dichas habilidades pueden cultivarse y desarrollarse y este tipo de enfoque puede ser menos exigente con el tiempo de la poblacin local. Dadas las inquietudes planteadas ms adelante respecto de la naturaleza de algunos de los enfoques participativos adoptados en trminos del tiempo que requieren, merece la pena tener presente esta consideracin. Sexto, aunque en los estudios de caso se emple una amplia y exhaustiva gama de tcnicas participativas, hay quizs un nmero reducido que parece ser particularmente pertinente y til para los fines de evaluacin de impacto. stas son: las lneas de tiempo, las jerarquizaciones de bienestar y de preferencias, los flujogramas de impacto y los anlisis de tendencias. Adems, ya hemos visto cmo el trabajo participativo de esta naturaleza tiene que: dar mayor reconocimiento a las relaciones sociales y de poder existentes al interior de las comunidades; prestar mayor atencin a las restricciones de tiempo de las personas y al costo oportunidad para ellas de participar en los proyectos; y combinar las herramientas mencionadas con otros mtodos y fuentes de informacin. Como sealamos arriba, es necesario desarrollar estndares y criterios ms precisos para la evaluacin de la calidad de los procesos de investigacin participativa. Sptimo, el uso de estudios de caso individuales, comunitarios y relativos a proyectos e instituciones fue prevalente en casi todos los pases involucrados. Los estudios de caso son especialmente tiles en situaciones complejas en las que muchas variables se interrelacionan entre s y los resultados y el impacto probablemente variarn de poblacin en poblacin. Los estudios de caso bien seleccionados y el anlisis cruzado de los estudios de caso aaden un alto valor agregado, especialmente si inciden sobre aspectos ms generales de polticas que sean de inters general. Finalmente, sigue pendiente todo el tema de la atribucin, el cotejo de la informacin y la importancia de la retroalimentacin. Ninguno de los mtodos o herramientas utilizados puede resolver por s solo el problema de determinar la atribucin, y ni siquiera utilizados en conjunto pueden probarla. Sin embargo, si se utilizan en forma conjunta y se coteja debidamente la informacin, pueden proveer una reserva de evidencia susceptible de ser aprobada, impugnada o modificada, lo cual a su vez facilita la formacin de un juicio razonado y plausible. (Fuente: Impact Assessment and NGOs: Learning for a Change? Evaluacin de impacto y ONG: Aprendiendo para el cambio? - Chris Roche, Oxfam, 1999)

41

ESTUDIO DE IMPACTO DE ONG DANESAS: REVISIN DE MTODOS E INSTRUMENTOS DE EVALUACIN DE IMPACTO

La decisin de utilizar el Estudio de Impacto para probar mtodos e instrumentos de evaluacin de impacto apropiados era un objetivo vlido y se esperaba que generara evidencia largamente esperada acerca de la operativizacin de los mismos. En ese sentido, el Estudio fue experimental y sus hallazgos sobre dichos mtodos e instrumentos deben entenderse bajo esa luz. Un hecho positivo fue que la mayor parte de los actores involucrados en el Estudio participaron de buena gana en sus diferentes ejercicios y actividades y no opusieron ninguna resistencia a participar. Desde luego, para muchos miembros del personal sta era la primera vez que participaban en un experimento de esta naturaleza, y tambin estaba el aspecto de la novedad. Pero estuvimos lo suficientemente impresionados por el entusiasmo de la participacin como para preguntarnos por qu las ONG y otras organizaciones de desarrollo no utilizaban dichos mtodos con ms frecuencia! En el contexto de sus propias prcticas culturales, la poblacin local en particular nos comunic sus puntos de vista abiertamente y demostr que todo el mundo tiene algo que aportar. Los mtodos e instrumentos que revisamos exigieron ms tiempo y esfuerzo que el enfoque de evaluacin en equipo ms convencional, pero generaron un mayor sentido de participacin de todos los actores, y no solamente del equipo externo. Bsicamente, los mtodos buscaron valorar las opiniones del personal y los beneficiarios/as del proyecto. Durante el Estudio de Impacto se utiliz una gama de mtodos e instrumentos distintos con el fin de recolectar datos e informacin de diversas fuentes. El Estudio de Impacto emple cuatro mtodos bsicos: (a) revisin y anlisis de la documentacin, (b) anlisis del contexto, (c) opinin de los beneficiarios/as y (d) autoevaluacin por parte del personal y la gerencia del proyecto y representantes de las ONG danesas. Para poder aplicar estos cuatro mtodos, el estudio utiliz una coleccin de instrumentos diferentes, cada uno de los cuales se examinar en cierto detalle ms adelante. En la mayor parte de los proyectos evaluados en los Estudios Nacionales se hizo un esfuerzo consciente por usar toda la gama de mtodos e instrumentos, pero ello no fue siempre posible. En los Estudios en Profundidad, por otra parte, los equipos de investigacin seleccionaron los mtodos e instrumentos que consideraron ms apropiados. En general, todos los estudios emplearon los cuatro mtodos bsicos en alguna medida, ms no as todos los instrumentos. Ocasionalmente algo suceda que impeda incluir un instrumento en particular. O, por alguna otra razn, el uso de dicho instrumento no resultaba tan exitoso.

MTODOS
Revisin de la documentacin sta fue la primera etapa fundamental de las seis investigaciones del Estudio de Impacto. Cada uno de los equipos de investigacin recolect y analiz la documentacin existente acerca de los proyectos materia de estudio. Esta revisin inicial permiti a los equipos de investigacin formarse una idea acerca de la evolucin histrica del proyecto e identificar los aspectos clave en los cuales podra incidir el estudio. La revisin de la documentacin fue decisiva asimismo porque dio a los equipos de investigacin la oportunidad de evaluar los sistemas internos de recoleccin de datos e informacin de los proyectos. Lo ms importante, sin embargo, fue que la revisin de la documentacin se us para empezar a construir una imagen detallada del desempeo del proyecto en relacin con las variables y los temas materia de estudio. Dicha imagen fue crucial para formular las preguntas clave alrededor de las cuales se estructurara cada estudio. Las revisiones de la documentacin tuvieron lugar bajo condiciones distintas en el caso de los Estudios Nacionales y los Estudios en Profundidad, en el sentido que los primeros tuvieron que lidiar con mltiples proyectos y normalmente no tuvieron el tiempo para buscar o esperar documentos importantes. La disponibilidad de la informacin y el acceso a la misma constituyen por lo tanto aspectos cruciales para los Estudios Nacionales. Adems, descubrimos una gran variedad de enfoques de identificacin y almacenamiento de la documentacin de los proyectos. Muchos de los proyectos

42

ms grandes con frecuencia carecan de un sistema de fcil acceso para la identificacin y recuperacin de los proyectos. Anlisis del contexto Mientras que los Estudios Nacionales efectuaron una revisin a grandes rasgos del contexto en cada uno de los tres pases en donde se llev a cabo el Estudio, y el Estudio en Profundidad de Nicaragua se concentr en un tema clave de las intervenciones programticas, los Estudios en Profundidad de Bangladesh y Tanzania realizaron un anlisis contextual ms minucioso tanto del entorno inmediato como del contexto sociopoltico ms amplio dentro del cual operaban sus respectivos proyectos. Un anlisis contextual de esa naturaleza puede proporcionar los parmetros crticos para medir el impacto de una intervencin de desarrollo. En ese sentido, el impacto no slo se mide en funcin del avance o no de los objetivos de un proyecto, sino que puede entenderse solamente en relacin con aquellas otras fuerzas que pueden influir sobre el desarrollo o el cambio dentro de un contexto en particular. Opinin de los beneficiarios/as El Estudio de Impacto, y especialmente los Estudios Nacionales, se disearon para garantizar una contribucin importante por parte de los beneficiarios/as a la evaluacin de impacto de los proyectos materia de estudio. En los ltimos cinco aos, aproximadamente, se ha colocado un nfasis cada vez mayor en las percepciones de cambio de los beneficiarios/as como un elemento decisivo de los estudios de evaluacin de impacto. Cabe sealar, sin embargo, que la mayor parte de los estudios que hacen esta afirmacin se basan en experimentos con un solo programa o proyecto a lo largo de un perodo de tiempo extendido, y no en el enfoque multiproyectos, en una sola ocasin, de los Estudios Nacionales. Ciertamente en trminos de disposicin a colaborar con el Estudio de Impacto, el mtodo de recabar la opinin de los beneficiarios/as fue un xito y el Estudio se benefici en alto grado del hecho que cientos de beneficiarios/as se tomaran el tiempo y la energa para hablar con nosotros. No obstante, el compromiso ideolgico de utilizar dicho mtodo no debera cegarnos respecto de sus limitaciones en el contexto de un Estudio como el nuestro. En primer lugar, dada la falta de antecedentes previos del uso de dicho mtodo en los proyectos estudiados salvo las discusiones que tienen lugar durante las visitas a los proyectos -, as como el hecho de que fue decisin nuestra utilizar el mtodo, todo el ejercicio fue impulsado desde fuera en su mayor parte. En la mayora de los casos, los beneficiarios/as no tenan idea de que iban a participar en un ejercicio con beneficiarios/as hasta que lleg el equipo de investigacin. Ms an, no hubo virtualmente ninguna oportunidad para que el equipo de investigacin influyera sobre la seleccin de los beneficiarios/as que participaran en el ejercicio, con el resultado de que en muchos proyectos sentimos que no se haba incluido a una muestra representativa de beneficiarios/as. Adems, dado que no hubo oportunidad de desarrollar ningn tipo de relacin con los beneficiarios/as, ni de explicar el propsito del ejercicio, por momentos fue difcil concentrarnos en sus percepciones de cambio, y no en sus opiniones acerca de las necesidades de la comunidad. Finalmente, sin embargo, y esto fue lo ms importante, la forma en que se nos oblig a ceirnos al mtodo nos priv de la oportunidad de adaptarlo al entorno de los beneficiarios/as en trminos de idioma y cultura. El compromiso ideolgico de recabar las opiniones de los beneficiarios/as para determinar el impacto debe ir acompaado de un uso concienzudo y riguroso de dicho mtodo, para estar seguros de que sus resultados estn bien fundamentados. En general, consideramos que los beneficarios/as aadieron una dimensin valiosa al resto de mtodos e instrumentos empleados en el Estudio. Adems, estamos seguros de que las percepciones de los beneficiarios/as han contribuido enormemente a lo que de otro modo hubiera sido una evaluacin esttica y unidimensional. Pero, si a partir de ahora dicho mtodo ha de formar parte del sistema de seguimiento, entonces tendr que llevarse a cabo de una manera ms rigurosa.

43

Autoevaluacin Esta modalidad de evaluacin es muy similar a la anterior, excepto que ofrece a quienes estn ms directamente involucrados en el lado de la prestacin de los servicios la oportunidad de expresar sus puntos de vista acerca del desempeo del proyecto: la gerencia y el personal del proyecto y el personal de las ONG danesas con algn tipo de participacin directa en el proyecto. Este mtodo se ha difundido bastante en muchos proyectos, pero rara vez se efecta bajo el ttulo de autoevaluacin. Lo ms comn es realizar sesiones de revisin a intervalos regulares, o revisiones mensuales de avances, como un medio para reunir al personal para intercambiar puntos de vista acerca de los avances del proyecto. En ese sentido, la autoevaluacin en el sentido estricto del trmino es un mtodo cualitativamente distinto, ya que se trata de un ejercicio ms estructurado y focalizado en la evaluacin del desempeo en funcin de una serie de variables. Con demasiada frecuencia, las revisiones internas de los proyectos son ejercicios demasiado abiertos, que no estn estructurados en torno a temas clave y a menudo dedican ms tiempo a planificar para el futuro. En general, el personal de los proyectos particip de buena gana en los ejercicios de autoevaluacin, y para muchos miembros de menor jerarqua del personal era la primera vez que su opinin era consultada de esta forma. La autoevaluacin representa una oportunidad para que la gerencia y el personal de un proyecto desarrollen una visin continua y estructurada acerca de la forma en que est progresando un proyecto. Sin embargo, plantea el reto de tratar de ser objetivos en un mtodo sumamente subjetivo. En ese sentido, descubrimos que el personal tena experiencia con autoevaluaciones crticas. Inevitablemente, cuando las autoevaluaciones se convierten en ejercicios que se realizan una sola vez, como sucedi en el Estudio de Impacto, el personal se ve obligado a intentar resumir procesos largos y actividades complejas en una nica respuesta, y esto no siempre ha dado buenos resultados. Si se ha de utilizar dicho mtodo, ste tiene que ser permanente y coherente para que el personal pueda desarrollar una visin acerca del desempeo del proyecto a travs del tiempo.

INSTRUMENTOS PARA EVALUAR EL IMPACTO

Reuniones grupales: ste fue el instrumento ms comnmente usado en todos los componentes del Estudio de Impacto, salvo el Estudio en Profundidad de Bangladesh, en que el principal mtodo utilizado fue la entrevista personal. En el captulo 2 podemos constatar que ms de 500 beneficiarios/as participaron en alguna forma de reunin grupal como parte del ejercicio de recabar la opinin de los beneficiarios/as en cada uno de los tres Estudios Nacionales. Dada la limitacin de tiempo de estos estudios, fue imposible recurrir a una autoevaluacin ms personal, ya que no hubo la posibilidad de preparar una muestra ms cientfica. De ah que, luego de las discusiones iniciales en ocasin del Taller de Estudio, la gerencia del proyecto generalmente dispusiera que los grupos de beneficiarios/as se reunieran con el equipo de investigacin para discutir una serie de temas. De esta forma, el Estudio de Impacto pudo recabar los puntos de vista de un considerable nmero de beneficiarios/as en un perodo de tiempo relativamente corto. En general, hubo un buen equilibrio de gnero en los grupos y stos se condujeron en forma bastante interactiva, especialmente en Nicaragua. Las reuniones se desarrollaron a partir de un conjunto de preguntas abiertas y se permiti que surgieran discusiones, con el equipo de investigacin cuidando que no se apartaran demasiado del tema. Por momentos los beneficiarios/as parecieron genuinamente interesados en toda la experiencia. Si bien, tal como hemos informado, en las reuniones grupales hubo un til equilibrio de gnero, inevitablemente los hombres trataron de dominar la discusin, especialmente en Bangladesh y Nicaragua. Adems, dado que tuvimos escasa posibilidad de influir sobre la composicin de los grupos, algunos parecieron incluir a los beneficiarios/as ms influyentes y ms solventes, que se las ingeniaron para llevar la discusin hacia sus temas de inters. Asimismo, por momentos fue inevitablemente difcil mantener al grupo enfocado, y algunos beneficiarios/as vieron las reuniones como una oportunidad para discutir ms detalladamente las necesidades de su comunidad. Resulta claro que este instrumento siempre ser una herramienta bsica de cualquier ejercicio incorporado al proyecto que implique recabar la opinin de los beneficiarios/as y tenemos que asumir que, en dichas circunstancias, el ejercicio se llevara de una manera un poco ms rigurosa.

44

Entrevista familiar: Dada la importancia de intentar determinar la forma en que un proyecto ha afectado directamente las vidas de los beneficiarios/as, tambin entrevistamos a un nmero reducido de familias de beneficiarios/as en varios proyectos. El seguimiento continuo de un nmero representativo de familias a nivel de la comunidad es un instrumento comn para hacer un seguimiento detallado de este efecto directo. Sin embargo, no encontramos ningn ejemplo de que se estuviera usando dicho instrumento en ninguno de los proyectos de los Estudios Nacionales, aunque s evidencias de que el proyecto de LIFT monitoreaba regularmente a las familias beneficiarias. Si bien consideramos que dicho instrumento tiene un uso potencialmente importante en la recoleccin de las opiniones de los beneficiarios/as, y el Estudio en Profundidad de LIFT en particular bas gran parte de su investigacin en Hogares y Familias, en los Estudios Nacionales nos topamos con los mismos problemas que con las reuniones grupales. El equipo de investigacin no tuvo la posibilidad de intervenir en la seleccin de las familias para las entrevistas, la mayora de stas no tena idea de cmo sera el ejercicio y, con base en las observaciones y respuestas, concluimos que las familias seleccionadas no eran representativas de una seccin transversal de la comunidad. El nfasis a menudo pareca ponerse en impresionar al equipo de investigacin con los beneficiarios/as ms elocuentes y sus familias. No obstante, el hecho de que en la mayora de las entrevistas era el hombre el que hablaba en nombre de la familia nos dio una perspectiva adicional acerca de las relaciones de gnero a nivel familiar. Sin embargo, las entrevistas familiares de hecho nos dieron la oportunidad de observar el ambiente familiar y evaluar el posible impacto del proyecto en estos trminos. Generalmente, las entrevistas familiares pueden ponerse por escrito en forma de mini estudios de caso, para ayudar a ilustrar un texto. Observacin directa: Dada la ausencia de evidencia suficiente formalmente registrada, decidimos que utilizaramos la observacin directa como un instrumento para complementar la informacin que recolectamos por medio de los otros instrumentos. Hicimos esto en forma permanente y utilizamos las observaciones para aadir un poco de detalle de la vida real a nuestros hallazgos. Por ejemplo, en las visitas a las comunidades y a las familias de los beneficiarios/as, observamos todo lo que pudimos de lo que probablemente constituan seales del beneficio de participar en el proyecto; por ejemplo, el tipo de propiedad sobre la vivienda, el nivel de limpieza de la comunidad, las seales de erosin del suelo y as sucesivamente. Desde luego, no tuvimos forma de verificar nuestras observaciones y por lo tanto no hemos basado ninguna de nuestras conclusiones exclusivamente en ellas. Pero s representaron un medio muy til para contextualizar los beneficios y proporcionar ejemplos directos de cualquier beneficio que pudiera haber tenido lugar. Uso de informantes clave: Cada uno de los tres Estudios Nacionales utiliz informantes clave para aportar una opinin adicional, informada pero idealmente independiente, o menos directamente involucrada, acerca del proyecto y los beneficios y cambios que ste pudiera haber generado para las comunidades locales. Dichos informantes fueron tpicamente maestros/as de escuela, funcionarios/as de los gobiernos locales u otras figuras de relevancia en el rea local. Haciendo un balance, nuestra impresin fue que la mayora de ellos s tena un punto de vista o un comentario que hacer acerca del proyecto, y en muchos casos introdujeron una perspectiva que ni los beneficiarios/as ni el personal del proyecto haban sacado a relucir. Por ejemplo, los informantes clave pudieron comparar los esfuerzos del proyecto con los de otras iniciativas similares promovidas por otros proyectos; pudieron introducir un elemento poltico y dar su opinin acerca de las fortalezas relativas y los motivos de algunos de los actores involucrados; o pudieron establecer una conexin entre las actividades del proyecto y lo que en su opinin constituan necesidades locales clave. Aunque, a semejanza de los otros casos, no tuvimos gran injerencia en la seleccin de los informantes clave, en general consideramos que la mayora aport una perspectiva balanceada acerca del desempeo del proyecto, aunque tambin tuvimos uno o dos casos de informantes seleccionados a mano que lo vean todo color de rosa! Anlisis cuantitativo: Aunque muchas de las variables y los temas del Estudio de Impacto tuvieron dimensiones fuertemente cualitativas sostenibilidad, gnero, democratizacin, sociedad civil, trabajo con contrapartes, etc. -, tambin intentamos utilizar datos cuantitativos relevantes en la medida de lo posible, tanto como evidencia como para ilustrar nuestros argumentos. En los Estudios Nacionales ste fue especialmente el caso cuando evaluamos, por ejemplo, los Insumos, los Productos, la Eficacia y algunos aspectos del Impacto sobre la Pobreza. Adems, hemos introducido en nuestro anlisis una

45

serie de cuadros cuantificando el contenido de la documentacin existente acerca de las variables y los temas materia de estudio. Ya hemos visto que los informes sobre los proyectos de las ONG danesas presentan un fuerte sesgo hacia los Insumos y Productos. De igual manera, muchos de los estudios de impacto existentes tienen un contenido predominantemente cualitativo. Hemos procurado lograr un equilibrio en la medida de lo posible y nos permitiramos afirmar, por ejemplo, que los cuadros constituyen un til medio para entender la magnitud, as como para hacer comparaciones entre sectores y pases, algo que podra resultar difcil utilizando la narracin solamente. El Estudio en Profundidad del proyecto de LIFT en Bangladesh hizo un uso especial y eficiente de extensos cuestionarios para recolectar informacin, que podran dar un indicio del impacto del proyecto a nivel tanto de Extensionistas Locales como de Hogares y familias. Las cinco categoras expuestas arriba representan los principales instrumentos que utiliz el Estudio de Impacto. Cabe anotar que tambin se hizo uso de una serie de instrumentos adicionales, como diarios de campo, seminarios con informantes clave y sondeos de mercado. (Fuente: DANIDA: Danish NGO Impact Study DANIDA: Estudio de impacto de ONG danesas INTRAC, 1999)

COMENTARIO FINAL
En esencia, podemos concluir que no existe un mtodo o instrumento nico que podamos usar para hacer el seguimiento y en ltima instancia la evaluacin de un proceso de empoderamiento. La evidencia tanto de ambos estudios como de la prctica revela que no basta con preparar un cuestionario el instrumento clsico de la investigacin del desarrollo y esperar que ste nos permita seguir la evolucin de un proceso de empoderamiento. El proceso no sale a la luz fcilmente, ni tampoco es fcil de cuantificar. Los procesos de desarrollo cualitativos exigen enfoques cualitativos para su seguimiento, y tambin un marco evaluativo radicalmente diferente. Bsicamente, el empoderamiento no puede ser evaluado si no se le ha hecho antes un seguimiento. Un sistema de seguimiento relevante es fundamental para poder establecer si el proceso se est desarrollando o no. Sin embargo, existe un nmero relativamente reducido de ejemplos de sistemas de seguimiento para procesos de empoderamiento. Extraamente, las organizaciones de desarrollo han evolucionado mucho en lo que respecta a la retrica del empoderamiento pero son universalmente dbiles en lo que atae a su seguimiento. Existe escasa evidencia de que muchas organizaciones de desarrollo hayan podido desarrollar sistemas eficaces para hacer el seguimiento de un proceso cualitativo. De hecho, los conocimientos y la metodologa general estn ah. El problema radica en el diseo y la ejecucin de un sistema mnimo pero eficiente. Pregunta: En su opinin, cules son los MTODOS e INSTRUMENTOS ms tiles que podran utilizarse en el S y E de un proceso de EMPODERAMIENTO?

46

Seccin 5 : EVALUANDO EL EMPODERAMIENTO : UN EJERCICIO PRCTICO

No es suficiente tener una idea general de los temas involucrados en el S y E de un proceso cualitativo como el empoderamiento. stos tienen que operativizarse luego a nivel del programa o proyecto. Hasta la fecha, ste ha sido el mayor desafo para las organizaciones de desarrollo. La prctica hasta el momento sugiere que muchas organizaciones estn resolviendo finalmente los problemas relacionados con el S y E del empoderamiento pero parecen incapaces de traducir los resultados en sistemas operativos. En demasiados casos, la operativizacin termina con la identificacin de indicadores, sin reconocer que los indicadores tienen que ser adaptados a las actividades del proyecto y usados de forma tal que generen datos e informacin que nos permitan monitorear con eficacia los avances de un proyecto. Es importante, por consiguiente, que entendamos el proceso general involucrado en el S y E del empoderamiento y podamos disear y ejecutar un sistema de seguimiento que nos permita monitorearlo con eficacia. Para hacer esto, vamos a disear un sistema de seguimiento para un proyecto en particular. Vamos a dividir el taller en grupos que vern cuatro ESTUDIOS DE CASO distintos. El contexto bsico de cada proyecto y el problema que supuestamente debe abordar se encuentran resumidos en una hoja. Cada proyecto tiene como uno de sus objetivos el empoderamiento de la comunidad local / la poblacin local / las mujeres. Con base en esta informacin, cada grupo disear un enfoque para el seguimiento de dicho proceso de empoderamiento y para la presentacin de informes sobre el mismo. Los pasos que comprende el ejercicio son los siguientes:

Sobre la base de la Introduccin al contexto y al problema que intentar abordar el proyecto, cules consideran ustedes que sern los FACTORES CRTICOS de los que el proyecto tendr que tomar nota o que el proyecto tendr que abordar si ha de intentar empoderar a su grupo objetivo?

Determinar el PROPSITO GENERAL del proyecto en trminos del EMPODERAMIENTO de toda / una parte de la poblacin local. Poner por escrito dicho propsito en no ms de un prrafo.

ESPECIFICAR hasta TRES OBJETIVOS ESPECFICOS que se trazaran ustedes para el proyecto a fin de promover el empoderamiento de la poblacin objetivo. Cerciorarse de indicar exactamente cul es el grupo objetivo del proceso de empoderamiento.

Identificar y describir no ms de DOS INDICADORES que usaran para CADA uno de los OBJETIVOS ESPECFICOS de empoderamiento indicados arriba. Estos indicadores se convertiran luego en la base del sistema de seguimiento del proyecto.

Tomar UNO de los INDICADORES arriba mencionados y explicar en detalle cmo le haran el seguimiento. Adems, qu mtodos emplearan y cmo registraran y almacenaran la informacin?

Indicar qu TCNICAS o HERRAMIENTAS especficas usaran para evaluar los datos y la informacin y que les permitiran entender la forma en que el proceso de Empoderamiento est evolucionando.

47

ESTUDIO DE CASO 1:

Impacto de un proyecto a nivel local Un estudio de LIFTPatuakhaliby Parvin Sultana y Steen Folke, BANGLADESH
EL CONTEXTO LOCAL
stos son los datos y cifras bsicos relacionados con el Contexto del Proyecto: * El proyecto est situado en el delta meridional del pas, una ubicacin perifrica en Bangladesh, bordeando la Baha de Bengala. * La zona es azotada con frecuencia por inundaciones y ciclones que causan destrozos en la agricultura, las granjas de hortalizas, las viviendas y la infraestructura. * Las comunicaciones son difciles en la regin debido a la gran cantidad de ros y canales y a una red vial extremadamente precaria. * Las tierras agrcolas no son muy frtiles, en parte debido a su salinidad y en parte a la falta de sistemas de irrigacin; la agricultura es por lo tanto menos intensiva y produce solamente una cosecha de arroz aman al ao. * La mayora de la poblacin vive en la pobreza y sus medios de vida giran principalmente en torno a la agricultura, con parcelas que apenas rozan la subsistencia. * En las reas rurales, la tenencia de tierras es por lo tanto un importante factor determinante de la riqueza y la pobreza, y los agricultores maginales y sin tierras se encuentran entre los sectores ms pobres. * La pesca (en estanques, ros y el mar) siempre ha sido una importante fuente secundaria de sustento y alimentacin, mientras que el cultivo de hortalizas est poco desarrollado. * Culturalmente, la zona es menos conservadora que otras regiones de Bangladesh, el uso del velo o purdah entre las mujeres es menos estricto y el fundamentalismo musulmn no est muy difundido. * Una pequea minora hind vive en la zona; los hindes suelen vivir en sus propios paras, pero las relaciones entre hides y musulmanes son normalmente buenas. * La zona no ha recibido una gran cantidad de asistencia externa; durante algunos aos Danida ha sido la principal financiera externa en apoyar una serie de proyectos diferentes. * La mayora de las ONG ms importantes de Bangladesh trabaja en la zona, especialmente en programas de ahorro y crdito. Estos factores pueden considerarse como un conjunto de condiciones y restricciones tanto para los medios de vida de la poblacin en general como para la ejecucin y el efecto o impacto del proyecto. Pero, dentro de las condiciones dadas, las mejoras en la vida de las personas son hasta cierto punto el resultado de sus propias acciones. Las personas no son solamente objetos pasivos de desarrollo o grupos objetivo de los proyectos. El impacto de cualquier intervencin de desarrollo depende de la forma en que diversos grupos y personas aprovechen la asistencia ofrecida. Eso obviamente depende de sus capacidades tanto individual como socialmente definidas, pero tambin tiene que enfocarse en el contexto de otros elementos relacionados con sus medios de vida, incluyendo otros proyectos de desarrollo. Tpicamente, las estrategias de manejo de la gente pobre en esta rea son una combinacin de agricultura en pequea escala y una variedad de fuentes de sustento. El cultivo de hortalizas (y para los extensionistas locales semillas y plantones) constituye una opcin disponible fuertemente articulada por el Proyecto. La pesca, la ganadera, la artesana, el transporte con rickshaws, el trabajo agrcola, la construccin de carreteras y el comercio al menudeo son otras opciones disponibles algunas de ellas promovidas por otros proyectos de desarrollo y la mayora de las familias pobres utiliza una combinacin de varias de ellas para ganarse la vida.

48

OBJETIVO SUPERIOR Y OBJETIVOS ESPECFICOS

En trminos generales, el objetivo superior del proyecto es incrementar la seguridad econmica y el bienestar nutricional de 28,000 hogares de pequeos agricultores por medio de granjas de hortalizas y prcticas agroforestales. Adems, el proyecto aspira a empoderar a los agricultores locales pobres y marginados y ayudarlos a participar ms efectivamente en las iniciativas de desarrollo. Los principales objetivos especficos del proyecto han sido la capacitacin de extensionistas locales, la organizacin de una red de proveedores de semillas de rboles y hortalizas y apoyo al fortalecimiento de organizaciones locales. El proyecto se inici en 1994 y contina hasta la fecha. Ha concentrado sus esfuerzos en dos grupos principales de actores: Extensionistas locales, en la esperanza de que luego transmitiran el conocimiento adquirido a los pequeos agricultores de la zona. Dichos Extensionistas son responsables de establecer negocios de abastecimiento de semilla y ponerlos a disposicin de los pequeos productores. La mayora de los Extensionistas son tambin pequeos productores, pero tienden a tener parcelas ms grandes que el promedio. En ese sentido, el ingreso familiar del Extensionista tiende a ser ms alto que el de otros agricultores locales. La mayora de los Extensionistas son varones, pero tambin hay algunas mujeres. Productores familiares: La mayora de los productores que participaron en el proyecto eran ya sea pequeos o marginales (una hectrea o menos), aunque tambin se incluy un nmero reducido de agricultores ms grandes. Aunque la mayor parte de las familias percibe su ingreso principal de la agricultura, tambin trabajan como comerciantes y obreros como fuentes de ingreso importantes. nicamente un nmero reducido de pequeos productores locales pudo participar en el proyecto; la gran mayora no particip. El enfoque bsico del proyecto es una variante del modelo de extensin productor a productor: el personal del proyecto selecciona y capacita a productores con aptitudes en mtodos biointensivos de horticultura y agroforestera, para que a su vez acten como Extensionistas locales frente a otros agricultores, los Productores familiares. El proyecto se ejecut inicialmente en un estilo bastante rgido y poco participativo. Se bas en un paquete predeterminado, encarnado en el enfoque, que contemplaba determinadas tcnicas agroforestales y un volumen fijo de capacitacin. Sin embargo, el proyecto empez luego a desarrollar una actitud ms sensible frente a los temas de gnero y tambin a reconocer que todo su enfoque de empoderamiento tena que ubicarse en el contexto ms amplio del proyecto y no slo en trminos de los productos del proyecto.

49

ESTUDIO DE CASO 2:

TANZANIA
CONTEXTO DEL PROYECTO
Kibondo se encuentra 260 kilmetros al norte de Kigoma, en la carretera a Mwanza, es decir, en una regin muy remota del pas, en comparacin con los centros urbanos. Kibondo es capital de distrito del distrito ms septentrional de la Regin de Kigoma. La ciudad est ubicada en la cima del cerro que se yergue sobre las llanuras circundantes, una ubicacin estratgica ms que prctica que la poblacin de Kibondo le debe a los colonos alemanes, que hicieron de la pequea ciudad el centro distrital. De Kibondo a la frontera con Burundi hay unos 15 kilmetros en lnea recta. Dar es Salaam se encuentra a unos 1,400 km de distancia, una travesa de tres das en automvil. Kibondo tiene la mala fama de ser una ciudad alejada y subdesarrollada. Los habitantes de la regin han sido considerados subdesarrollados por los sucesivos gobiernos. Los wahas son atrasados, estn llenos de enfermedades y son ignorantes, manifest el Comisionado del distrito en 1953, en un memorndum administrativo. Despus de la independencia, ser asignado a Kibondo como empleado pblico siempre ha sido considerado como una suerte de castigo. La interpretacin de que los wahas son atrasados se refleja igualmente en los proyectos de desarrollo actualmente en curso. En los documentos iniciales de los proyectos se pone de relieve la forma en que el desarrollo local se ve obstaculizado por el alcoholismo de la poblacin y cmo el desarrollo debe abordarse mediante iniciativas de generacin de conciencia. Kibondo ejerci una funcin de reserva de mano de obra para la agricultura en las grandes plantaciones coloniales y en la poca inmediatamente posterior a la colonia, especialmente en las Regiones de Tanga, Tabora y Kagera. Ms an, se trata de un entorno en el que los agricultores tienen razones vlidas para mostrarse extremadamente escpticos frente a las propuestas y demandas de los agentes de desarrollo externos. La falta de continuidad de las polticas agrarias, combinada con una visin cortoplacista y la ausencia de voluntad poltica, han dado pie el escepticismo de los agricultores frente a cualquier interferencia externa en su agricultura. Esta situacin ha generado una tendencia a abandonar el distrito por parte de quienes tienen una visin ms progresista, que desean invertir en su trabajo antes que en sus tierras. Adems, la regin de Kibondo se ha visto recientemente afectada en forma dramtica por la llegada de grandes nmeros de refugiados/as de Burundi. Esto ha permitido que la economa florezca, iniciando un proceso de cambio social con una variedad de ganadores y perdedores.

EL PROYECTO DE DESARROLLO DE KIBONDO

El proyecto se inici en 1992, con lo que ahora se conoce como la primera fase del proyecto, que se extendi desde 1992 hasta 1996. El proyecto ha trabajado en 20 aldeas con una poblacin de 64,200 habitantes, ms del 70% de la poblacin total del distrito. La organizacin de desarrollo empez a trabajar inicialmente en el distrito de Kibondo en 1986 como parte del Proyecto Kigoma, mayormente en zonas impactadas por el flujo de refugiados, ayudando la poblacin afectada adversamente por dicho fenmeno. Las actividades de desarrollo que se realizaron en la zona entre 1986 y 1988 fueron especialmente de repoblacin forestal, extensin agrcola y promocin del uso de animales de tiro. El proyecto ha ingresado recientemente en una segunda fase, que abarca desde 1997 hasta el 2001. Ambas fases han contado con presupuestos de casi dos millones de dlares americanos. Las actividades del proyecto en su etapa inicial consistieron en apoyar la produccin de cultivos agrcolas en el distrito de Kibondo en especial caf - y proporcionar asistencia financiera a algunos residentes para empezar pequeos proyectos de generacin de ingresos. Otras actividades son: la introduccin de nuevas especies de productos agrcolas, el desarrollo de piscigranjas, la siembra de rboles y la promocin de obras de infraestructura en las aldeas. El principal enfoque metodolgico del proyecto descansa sobre dos principios fundamentales: los proyectos piloto y la demostracin. Ambos constituyeron el enfoque estratgico central a todo lo largo de la primera fase del proyecto (de 1992 a

50

1996). Los proyectos piloto se concibieron como un mtodo mediante el cual se seleccionaba unas cuantas aldeas del distrito donde pudieran concentrarse las actividades. La idea central detrs de este mtodo era seleccionar dichas aldeas y darles todo el apoyo necesario de acuerdo a las posibilidades del proyecto como una forma de ensear y demostrar a otras aldeas estrategias para mejorar y evolucionar hacia una agricultura moderna y otras actividades econmicas. Tanto los proyectos piloto como las demostraciones se introdujeron a nivel de personas individuales en cada aldea. En cada aldea se seleccion a unas cuantas personas como agricultores modelo, conocidos para los fines del proyecto como Agricultores de contacto (AC). A semejanza de las 20 aldeas a nivel distrital, el personal de extensin del proyecto concentrara sus esfuerzos en dichos AC, para llegar con sus servicios de extensin ms fcilmente a travs de ellos a los pobladores locales. Adems, la idea era que los AC ensearan a los vecinos del lugar tcnicas mejoradas para la agricultura, mientras que al mismo tiempo los pobladores aprendan de los AC las mejores prcticas agrcolas introducidas por los extensionistas del proyecto. El resultado ha sido la creacin de una sociedad especial promovida por el proyecto a nivel de aldeas. sta consiste de tres grupos de actores sociales: los agricultores de contacto, que se han beneficiado del proyecto y han recibido considerables insumos y subsidios; los agricultores nuevos y los holoi poloi o una amplia mayora que siente que ha sido olvidada por el proyecto. Cabe sealar que los agricultores de contacto son slo 665, de una poblacin de 52,000 habitantes. La segunda fase del proyecto inici un significativo cambio de enfoque: de un enfoque orientado a la demostracin y el apoyo a un enfoque ms participativo y de empoderamiento. La idea es que este nuevo enfoque fomente la participacin de las poblaciones locales en el diseo de programas de desarrollo y en la determinacin y el influenciamiento de sus resultados. Asimismo, que apoye a grupos de productores locales en trminos de fortalecer sus capacidades organizacionales y ayudarlos a establecer vnculos y alianzas con otros grupos similares. Quizs lo ms importante sea que durante la segunda fase el proyecto ha decidido abandonar el sistema de otorgar donaciones agrcolas a los agricultores, incentivndolos ms bien a formar grupos y presentar propuestas de la forma en que quieren forjar alianzas de trabajo con el proyecto. En su segunda fase, por consiguiente, el proyecto intent desarrollar una estrategia de empoderamiento que ayudara a romper la dependencia de los grupos favorecidos por el proyecto.

51

ESTUDIO DE CASO 3:

FORTALECIMIENTO DE LA SALUD EN NICARAGUA

CONTEXTO DEL PROYECTO
La Regin Autnoma del Atlntico Sur (RAAS) comprende una enorme rea de la costa atlntica nicaragense. Tiene una poblacin estimada actualmente en aproximadamente 260,000 habitantes, cuatro veces ms que hace 25 aos. Este crecimiento se debe casi exclusivamente al desplazamiento masivo de campesinos migrantes del centro de Nicaragua a las tierras agrcolas y ganaderas de la regin de la costa atlntica. Este movimiento migratorio ha sido encabezado por mestizos, que ahora superan ampliamente en nmero a los grupos tnicos indgenas. La regin RAAS es una de las vastas fronteras agrcolas del pas que recin est siendo abierta e introduciendo un patrn de vida completamente nuevo a regiones que durante siglos mantuvieron una rala poblacin y permanecieron mayormente en manos de pequeos grupos tnicos. El municipio de Pearl Lagoon (PL) est situado unos 35 km al norte en barco desde Bluefields, la capital de la regin RAAS. Tiene una poblacin de aproximadamente 7,000 habitantes, distribuidos en 17 comunidades esparcidas a orillas de la Laguna. El municipio tiene una composicin multitnica formada por criollos, miskitos, garfunas y mestizos; el idioma dominante es el criollo, pero tambin se hablan el espaol y el miskito. A nivel de estratificacin social, los criollos constituyen el grupo dominante, tanto en trminos de cantidad como de medios econmicos. Los miskitos y la poblacin incluso ms pequea de garfunas son menos influyentes, mientras que el nmero de mestizos sigue siendo pequeo pero se encuentra notoriamente en aumento. La agricultura, la pesca y cierta tala de rboles representan las actividades econmicas ms importantes, todas principalmente para consumo domstico, aunque pequeos excedentes se comercializan en Bluefields. PL se encuentra entre los municipios ms prosperos de la regin RAAS, habiendo experimentado un notable incremento de su actividad comercial pesca, turismo y se sospecha que tambin narcotrfico. El aumento de la riqueza, que se concentra en su mayor parte en pocas manos y en la capital municipal, es bastante visible. En todos los otros pueblos situados a orillas de la laguna las cosas apenas han cambiado. La tasa de analfabetismo es alta, se practica una economa bsicamente de subsistencia y el aislamiento es una realidad. El transporte fluvial es el principal medio de locomocin dentro del municipio, pero se encuentra en condiciones precarias en las comunidades distantes de PL. Inevitablemente existen tensiones entre los diferentes grupos tnicos, con la poblacin criolla ms vinculada a la estructura poltica y administrativa existente, mientras que los miskitos y los garfunas permanecen en gran parte marginados. El nmero cada vez mayor de mestizos y su creciente penetracin en la zona han generado inquietud acerca de las relaciones futuras entre los distintos grupos tnicos.

La situacin de la salud en Pearl Lagoon

El estado de salud de la poblacin de PL est directamente relacionado con la precariedad de la situacin econmica y las condiciones generales de vida en las comunidades alrededor de la Laguna. La prevalencia de las enfermedades ms comunes en la zona est directamente relacionada con las condiciones higinicas generalmente precarias existentes en las comunidades: agua contaminada, propagacin de deshechos humanos, no recoleccin de basura, servicios de salud deficientes y proliferacin de mosquitos. La capital municipal est razonablemente bien dotada, con un doctor/a, varias enfermeras y una posta mdica bien administrada. El resto del municipio dispone de cinco postas mdicas y una brigada mvil que visita las comunidades ms apartadas cada dos meses. Las postas mdicas cuentan normalmente con un/a auxiliar de salud, tienen pocos recursos y la rotacin de personal es alta. Mientras que aproximadamente el 80 por ciento de la poblacin de PL vive a dos horas en bote de una posta mdica, el servicio es en general deficiente y no cuenta con recursos suficientes. El servicio de salud suele trabajar hasta el lmite de su capacidad para mantener siquiera una atencin mnima fuera de la capital municipal, y la probabilidad de que sus recursos sean incrementados en el futuro inmediato es escasa. En trminos epidemiolgicos, el municipio presenta la mayor parte de las caractersticas de salud que suelen caracterizar a los pases de bajos recursos,

52

especialmente en las regiones tropicales bajas donde la poblacin se encuentra diseminada y los servicios de salud son difciles de movilizar y administrar. Las enfermedades ms comunes que afectan a la poblacin son los males respiratorios e intestinales, ambos de los cuales son las causas principales de mortandad infantil en la franja etaria de uno a cinco aos. Entre las otras caractersticas de salud ms importantes del municipio tenemos las siguientes: la mortandad infantil era de 76 por 1,000 en 1991 no se conocen las cifras de mortandad materna pero se sabe que son altas las enfermedades diarricas y la deshidratacin son enfermedades serias entre los menores de cinco aos, especialmente en los meses ms calurosos la incidencia de enfermedades de transmisin sexual es extremadamente alta se estima que alrededor del 35 por ciento de los menores de cinco aos sufre de algn grado de desnutricin altas tasas de fertilidad, con familias de cinco a seis hijos en promedio aumento de los problemas de alcoholismo y drogadiccin

Mientras que la capital municipal es relativamente estable, las condiciones generales de higiene y saneamiento bsico en las comunidades que circundan la Laguna son extremadamente deficientes. Las viviendas son en su mayor parte rudimentarias y la mayora carece de letrina. Ha habido algunas mejoras con apoyo externo en el abastecimiento de agua de las comunidades, pero la mayora sigue usando pozos contaminados u otras fuentes de agua no tratada. Simplemente no existen servicios adecuados para ayudar a las comunidades a mejorar y preservar su medio ambiente.

EL PROYECTO
Fase 1 : 1991-94 : El proyecto surgi en respuesta al pedido directo del gobierno nicaragense a una ONG internacional de apoyar sus esfuerzos para mejorar el estado de la salud de las comunidades aisladas de la costa atlntica. En la primera fase, el objetivo superior del proyecto fue el siguiente: Mejorar el estado de salud de las poblaciones que habitan las comunidades alrededor de Pearl Lagoon La poblacin meta deban ser los nios y nias menores de seis aos y las mujeres gestantes. En trminos de estrategia, el proyecto de salud deba ser participativo y tratar de empoderar a las comunidades locales a fin de fortalecer su participacin en acciones encaminadas a resolver sus problemas de salud. En su primera fase, el proyecto tuvo dos componentes principales: Promocin y prevencin de la salud: capacitacin de dirigentes comunales, comits de salud, trabajadores/as de salud y parteras tradicionales; higiene comunitaria, letrinas, pozos. Apoyo a servicios de salud: apoyo a la red existente de servicios de salud, provisin de un servicio mvil en las comunidades Dadas las limitaciones de los servicios de salud pblica en la Laguna en trminos de calidad y recursos, el proyecto represent una sustancial inyeccin de recursos y era de esperar que tuviera un impacto visible sobre la salud de la poblacin. El proyecto, sin embargo, aspiraba no solamente a proporcionar un servicio curativo sino tambin a fortalecer los servicios existentes, promover la participacin de la poblacin a travs de la investigacin en accin y mejorar la higiene bsica a nivel de las comunidades.

53

Fase 2: 1995-97 Una evaluacin externa del proyecto en 1994 recomend que el proyecto continuara por un perodo adicional de dos aos, a fin de consolidar los procesos de promocin y capacitacin de la comunidad y generar las condiciones locales necesarias para su sostenibilidad y continuidad. Los objetivos generales y la estrategia de la segunda fase fueron en gran parte iguales a los de la primera fase, salvo que se puso mayor nfasis en (a) el empoderamiento de las comunidades locales para que asumieran mayor responsabilidad sobre el fortalecimiento de la salud, (b) promocin y prevencin de salud y (c) menos nfasis en simplemente dotar de recursos al servicio de salud existente.

54

ESTUDIO DE CASO 4 :

EGIPTO
CONTEXTO NACIONAL
El fracaso del model de desarrollo econmico tras la revolucin de 1952 en Egipto result a fines de los 60 en una reconceptualizacin importante del desarrollo. Se identific la redistribucin, las necesidades bsicas y la participacin como componentes esenciales para garantizar proyectos de desarrollo ms eficientes y eficaces. El programa de puertas abiertas de Sadat dio la bienvenida a la asistencia externa y a las inversiones de capital, que tuvieron importantes implicaciones para el fortalecimiento de la participacin comunitaria en proyectos en el sector urbano. Sin embargo, la ejecucin de muchas reformas de largo plazo necesarias se pospuso hasta principios de los 90, en que Egipto inici un programa de ajuste estructural bajo la direccin del FMI y el Banco Mundial. El programa deba reducir el rol del Estado en el manejo de la economa, dejando el mercado a merced de las fuerzas de la oferta y la demanda. Partiendo de esta premisa, el gobierno egipcio ha diseado un marco estratgico encaminado a la estabilizacin econmica, el crecimiento y la eficiencia social. En Egipto, la mayor parte de los estimados de pobreza se basa en una lnea de pobreza orientada al consumo, que se rige por el costo de una canasta bsica que satisface los requerimientos nutricionales mnimos y un cierto margen para gastos en productos bsicos no alimentarios. Segn los estimados, el porcentaje de la poblacin que viva en Egipto por debajo de la lnea de pobreza a mediados de los 90 se encontraba en algn lugar entre el 23 y el 48 por ciento, dependiendo de la metodologa utilizada. Esta medicin no toma en cuenta el acceso a recursos y servicios pblicos esenciales. El PNUD introdujo en 1996 el concepto de Pobreza de Capacidad, que se refiere a lo que las personas son capaces de ser, hacer, escoger y lograr. El Informe de Desarrollo Humano de 1996 para Egipto estima que el 34 por ciento de los egipcios se encontraba en o por debajo del nivel de pobreza de capacidad en 1995. Las reas rurales acusan un nivel ms alto de pobreza que las zonas urbanas, y los departamentos del Alto Egipto figuran sistemticamente en el ltimo lugar de la lista. Sin embargo, la incidencia de pobreza en los departamentos de Gran Cairo y Alejandra es ms alta que en cualquier otra regin de Egipto. stos albergan a ms de 3.3 millones de pobres, cerca de la cuarta parte del total nacional. Una medida decisiva adoptada por el gobierno para combatir la pobreza fue la creacin del Fondo Social para el Desarrollo en 1991, el cual, siendo prometedor, sigue reflejando el enfoque centralizado de planificacin estatal. Sus objetivos principales son promover actividades de generacn de ingresos y empleo iniciadas por las comunidades locales, brindar servicios sociales bsicos y mejorar la participacin local mediante tcnicas intensivas en trabajo. El Programa de Desarrollo Comunitario aspira a mejorar los servicios a nivel comunitario en las zonas de bajos ingresos, en alianza con ONG y los beneficiarios/as locales. El gobierno tambin ha adoptado un enfoque integral a nivel poltico y social para incentivar la creacin de cooperativas comunales locales y organizaciones voluntarias privadas. Mientras que en 1986/87 se registraron cerca de 450 organizaciones en el ministerio correspondiente, para 1993 se haban inscrito ms de 1,500 y la cifra lleg a casi 15,000 para 1998. Se trata de organizaciones que trabajan en guarderas infantiles, atencin familiar, atencin de adultos mayores y personas con discapacidad, actividades culturales y programas de alfabetizacin. Sin embargo, de las 15,000 organizaciones, el 25 por ciento se encuentra literalmente inactivo, el 25 por ciento funciona slo a tiempo parcial y el 27 por ciento tiene un xito limitado como proveedores de pequeos servicios regulares, mientras que el resto ha establecido programas comunitarios locales de diverso tamao e importancia. Egipto tiene una larga tradicin de gobiernos altamente burocrticos y centralizados, y el progreso y el desarrollo siempre han estado asociados con formas excluyentes de gobernar y de hacer poltica. El Estado mantiene el control sobre las organizaciones privadas, que es obligatorio por ley. Toda sociedad tiene que registrarse en el ministerio y una de las condiciones es el compromiso de la sociedad propuesta de no inmiscuirse en actividades polticas. Las autoridades pblicas tienen la potestad de restringir las actividades de las asociaciones profesionales, los sindicatos y las sociedades

55

locales; por ejemplo, pueden impedir la realizacin de reuniones pblicas y de publicaciones. Existe una gran disparidad entre las libertades econmicas y polticas, y la mayor parte de la sociedad civil permanece excluida de los procesos de toma de decisiones. Una forma prometedora de facultar a las organizaciones de la sociedad civil para que jueguen un papel efectivo es la creacin de acuerdos contractuales entre la comunidad y la asistencia gubernamental o externa. En la dcada del 80, el gobierno egipcio empez a modernizar los mtodos para llegar a los sectores pobres, sujetndolos en gran medida a iniciativas de la comunidad y recursos locales. En 1994 se inaugur el Programa Nacional de Desarrollo Rural Integral (Shorouk). El objetivo superior del programa es movilizar a la poblacin para fortalecer su participacin, llevando al desarrollo comunitario con base en un acuerdo entre la comunidad y las autoridades gubernamentales. Contrato se entiende tradicionalmente como un formato acordado que describe la naturaleza de la relacin entre dos o ms partes, que pueden ser un vendedor y un comprador, un propietario y un inquilino o un empleador y un empleado. A nivel formal, el contrato sera por escrito, consignando los nombres de las partes, su nacionalidad, ocupacin y lugar de residencia y los derechos y obligaciones de cada una de las partes, as como los trminos y condiciones del acuerdo. Sin embargo, especialmente en las zonas rurales la contratacin de mano de obra para la agricultura o para trabajar en pequeos talleres o como electricistas, gasfiteros y otros oficios similares puede no requerir de un contrato formal en forma escrita. Un contrato verbal bastara para describir la relacin entre las partes. Ya sea a nivel formal o informal, el proveedor del bien o servicio siempre lleva la batuta cuando se trata de establecer las reglas y condiciones del contrato.

EL FOCO DEL PROGRAMA

Este programa a nivel nacional se llama programa de Mejoramiento de la calidad de vida y es administrado por la organizacin ejecutora (OE) y financiado por la AID estadounidense. Se trata de un proyecto piloto de desarrollo urbano diseado para mejorar las condiciones de vida de los pobladores de los centros urbanos a travs de la promocin de Organizaciones Voluntarias Egipcias Privadas (OVEP). La primera fase se ejecut entre febrero de 1995 y junio de 1996. El objetivo superior del programa es potenciar las capacidades de las OVEP locales mediante actividades de capacitacin, asistencia tcnica, diagnstico de necesidades y recursos financieros. El programa se basa en la conviccin de que unas OVEP fuertes permiten un vnculo vital con la comunidad local. La idea es crear un mecanismo para la accin colectiva y la participacin de los grupos abandonados del rea del programa y vincularlos con actividades, fondos o fuentes de ingresos a los que tienen derecho en el marco del programa. El acuerdo contractual pertinente es entre la OE y organizaciones identificadas en la zona, que luego fungen de enlace con los diferentes beneficiarios/as. Los beneficiarios/as participan en las actividades realizadas por las organizaciones locales en cooperacin con la OE. El programa opera en tres de los distritos ms antiguos de El Cairo: El-Rashidy, El-Kharg y El-Salmiya. El-Rashidy tiene ms de un milln de habitantes y es un ejemplo tpico de un distrito tradicional de El Caire, otrora prspero, que actualmente est sufriendo una crisis econmica y de degradacin social. El-Kharg es un rea culturalmente mixta, con numerosos migrantes. Es una zona ms pobre que la mayor parte de ElRashidy y necesita servicios especiales con desesperacin. Los diferentes proyectos del programa de Mejoramiento de la calidad de vida son: El Programa de construccin de instituciones del programa aplica mtodos de capacitacin y asistencia tcnica de probada eficacia, as como mtodos ms innovadores como apostar asistentes de gerencia locales en las organizaciones voluntarias y promover la educacin de pares entre las asociaciones del proyecto. El objetivo superior del proyecto es fortalecer las destrezas administrativas de aproximadamente 23 OVEP locales e impulsar planes estratgicos de accin para los prximos cinco aos en un mnimo de 15 OVEP. Las Iniciativas de autoayuda consisten en enfoques innovadores de servicios de desarrollo comunitario y actividades culturales que privilegian la autoayuda y la participacin local. Las OVEP que participan en el programa de construccin de instituciones reciben donaciones para realizar actividades como servicios de salud, guarderas infantiles, agua y alcantarillado, generacin de empleo y empresa y servicios educacionales y culturales.

56

El Programa de desarrollo econmico local promueve actividades de generacin de ingresos. Un fondo crediticio otorga pequeos crditos a personas de bajos ingresos y tambin a jvenes y pequeos y medianos empresarios/as establecidos, a travs de acuerdos contractuales. Para este ltimo grupo se ofrecer un programa de apoyo al desarrollo de pequeas empresas. Un aspecto importante es vincular a los empresarios/as locales con instituciones financieras y la comunidad empresarial ms amplia de El Cairo. El Programa de creacin de redes se considera como la piedra angular de los esfuerzos para desarrollar una plataforma ms amplia de participacin, democratizacin y equidad social. Las redes de asociaciones locales por rea de inters sern canales esenciales de interaccin creativa y productiva para los miembros de las redes. Se trata de una oportunidad para aprender de sus respectivas experiencias, colaborar en proyectos especficos y trabajar juntas en campaas de sensibilizacin e incidencia. El proyecto Movilizacin de recursos de la comunidad se basa en la premisa de que, para poder alcanzar la sostenibilidad, las iniciativas tienen que aportar recursos humanos y financieros de la comunidad. Las organizaciones voluntarias privadas deben aportar el 25 por ciento de los voluntarios/as y los fondos. El proyecto tiene programada una campaa de sensibilizacin y promocin de voluntarios/as, as como actividades de capacitacin para programas de voluntariado y recaudacin de fondos. El Programa de documentacin y promocin de proyectos contribuye a la sostenibilidad general del proyecto al atraer ms instituciones y apoyo de donantes e impulsando la rplica del modelo. Esto se har mediante la produccin y distribucin de materiales escritos y audiovisuales y la sistematizacin de los mtodos y las lecciones aprendidas a lo largo del proyecto. Adems de ello, se intentar reforzar los vnculos existentes con instituciones del gobierno.

El programa de Mejoramiento de la calidad de vida es un ejemplo del enfoque basado en contratos que se est usando actualmente en Egipto. Un anlisis del grado al que ayuda a grupos previamente excluidos a obtener acceso a recursos de desarrollo servir para evaluar la utilidad del enfoque en el contexto de las comunidades urbanas de Egipto. A la fecha, sin embargo, el programa no ha podido establecer ninguna clase de sistema de seguimiento para determinar hasta qu punto ha logrado promover un desarrollo comunitario eficaz y empoderar a los residentes locales. Dichas iniciativas podran empezar a romper la cultura del silencio y la exclusin que est tan difundida en Egipto a nivel de las comunidades.

57

BIBLIOGRAFA SELECCIONADA
Banco Mundial (1994) Advancing Social Development, Washington DC. Blankenberg, F. (1995) The Role of Planning, Monitoring and Evaluation, La Haya: Novib. CARE (1994) Bangladesh. Evaluation of the Economic and Social Benefits of Income Generation Projects,

Carvalho, S. y White, H. (1995) Performance Indicators to Monitor Poverty Reduction, Washington D.C.: Banco Mundial. Casley, D. y Kumar, K. (1987) Project Monitoring and Evaluation in Agriculture, Washington D.C.: Banco Mundial. Chabel, P. (1992) Power in Africa, MacMillan. Cheater, A. (ed.) (1999) The Anthropology of Power: Empowerment and Disempowerment in Changing Structures, Londres: Routledge. Cohen, J. y Uphoff, N. (1977) Rural Development Participation, Nueva York: Cornell University Press. Craig, G. y Mayo, M. (1994) Community Empowerment, Londres: Zed Books. Davies, R. (1995) An Evolutionary Approach to Facilitating Organisational Learning: An Experiment by the Christian Commission for Development in Bangladesh, CDS: Universidad de Swansea. Dawson, E. (1995) Women, Gender and Impact Assessment: A Discussion Paper, Oxford: Oxfam. Franco, F. et al. (1993) Empowerment through Entitlement, La Haya: Cebemo/ DGIS. Friedmann, J. (1992) Empowerment: The Politics of Alternative Development, Oxford: Blackwell. Galjart, B. y Buijs, D. (eds) (1982) Participation of the Poor in Development. Institute of Cultural and Social Studies, Universidad de Leiden. Gosling, L. y Edwards, M. (1995) Toolkits: A Practical Guide to Assessment Monitoring, Review and Evaluation, Londres: SCF. Hopkins, R. (1994) Impact Assessment: Overview and methods, Oxfam/Novib. James, W. (1999) Empowering Ambiguities en A. Cheater (ed.) (1999). INTRAC (1999) The Danish NGO Impact Study: Overview Report. DANIDA Khan, S. (1994) Ranking Social Development Indicators, Londres: ACTIONAID. Loflan, J. (1971) Analysing Social Settings, Belmont: California Wadsworth Press. Marsden, D. y Oakley, P. (1990) Evaluating Social Development Projects, Oxford: Oxfam. Montgomery, R. Swansea. (1995) Stakeholder Analysis, Centre for Development Studies, Universidad de

Moser, C. (1991) Gender Planning and Development, Londres: Routledge.

58

Oakley, P. (1988) 'Conceptual Problems of the Monitoring and Evaluation of Qualitative Objectives' Community Development Journal, Vol. 23, No. 1, pp 3 - 11. Oakley, P. (1988) The Monitoring and Evaluation of Participation, Roma: FAO. Oakley, P., Pratt, B. y Clayton, A. (1998) Outcomes and Impact: Evaluating Change in Social Development. Oxford: INTRAC. Partnership Africa Canada (1995) Impact Evaluation, Informe interno, Ottawa. Patton, (1987) How to Use Qualitative Methods in Evaluation, California: SAGE. Pratt, B. y Boyden, J. (1985) The Field Directors' Handbook, Oxford: Oxfam. Priester, M. et al. (1995) With Quality in Mind: Final Report on the measures taken by Cebemo, Hivos, ICCO y Novib en respuesta al Estudio de Impacto, Amsterdam: GOM. Richards, P. (1985) Indigenous Agricultural Revolution, Hutchinson. Riddell, R. (1990) Judging Success: Evaluating NGO Approaches to Alleviating Poverty in Developing Countries, Londres: ODI Rifkin, S. y Bichmann, W. (1988) On Measuring Participation, Social Science and Medicine, Vol. 6, No. 9, pp. 931-940. Rowlands, J. (1997) Questioning Empowerment, Oxford: Oxfam. Shetty, S. (1994) Development Project in Assessing Empowerment. Nueva Delhi: Society for Participatory Research Institute for Asia. Smillie, I. (1995) The Alms Bazaar: Altruism under fire - Non-Profit Organisations and International Development, Londres: IT Publications. Strachan P. con Peters, C. (1997) Empowering Communities: A Casebook from West Sudan, Oxford: Oxfam Uphoff, N. (1989) A Field Methodology for Participatory Self-Evaluation of Peoples Participation Groups, Roma: FAO. Valadez, J. y Bamberger, M. (1994) Monitoring and Evaluating Social Programs in Developing Countries, Washington: EDI Development Studies. Van Eyken, W. (1991) The ConCept and Process of Empowerment. La Haya: Bernard van Leer Foundation. Wardle, C. (1996) Wider Impact Study, Tanzania: Draft design and plan, Concern. Werbner, R. (1999) The Reach of the Postcolonial State: Empowerment/Disempowerment and Technocracy, en A. Cheater (ed.) (1999). Development,

Westenforff, D. y Ghai, D. (1993) Monitoring Social Progress in the 1990s, Ginebra: UNRISD. Whiteside, M. (1999) Empowering the Landless: Case studies in land distribution and tenure security for the poor. Londres: Christian Aid.

59