Está en la página 1de 111

R

58

manuales

anual metodolgico de evaluacin multicriterio para programas y proyectos

Juan Francisco Pacheco Eduardo Contreras

Instituto Latinoamericano y del Caribe de Planificacin Econmica y Social (ILPES) Santiago de Chile, julio de 2008

Este documento fue preparado por Juan Francisco Pacheco, funcionario del rea de Polticas Presupuestarias y Gestin Pblica del ILPES y Eduardo Contreras, consultor del ILPES y profesor del Departamento de Ingeniera Industrial de la Universidad de Chile. Esta publicacin es parte de trabajos realizados por el ILPES y profesores de la Universidad de Chile, ha contado con apoyo valiossimo de alumnos practicantes en el ILPES, como de tesistas de la Universidad de Chile. En especial se agradece a la profesora Sara Arancibia de la Universidad Diego Portales, que gentilmente nos ha permitido usar parte de su material docente. Las opiniones expresadas en este documento, que no ha sido sometido a revisin editorial, son de exclusiva responsabilidad de los autores y pueden no coincidir con las de la Organizacin.

Publicacin de las Naciones Unidas ISSN versin impresa 1680-886X ISSN versin electrnica 1680-8878 ISBN: 978-92-1-323231-6 LC/L.2957-P N de venta: S.08.II.G.71 Copyright Naciones Unidas, septiembre de 2008. Todos los derechos reservados Impreso en Naciones Unidas, Santiago de Chile La autorizacin para reproducir total o parcialmente esta obra debe solicitarse al Secretario de la Junta de Publicaciones, Sede de las Naciones Unidas, Nueva York, N. Y. 10017, Estados Unidos. Los Estados miembros y sus instituciones gubernamentales pueden reproducir esta obra sin autorizacin previa. Slo se les solicita que mencionen la fuente e informen a las Naciones Unidas de tal reproduccin.

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

ndice

Resumen ........................................................................................7 Introduccin ........................................................................................9 Parte I..................................................................................................11 1. Complejidad de la evaluacin de proyectos .............................13 2. Por qu y dnde utilizar la Evaluacin Multicriterio? .........15 2.1 Por qu utilizarla?...............................................................15 2.2 Dnde utilizar la Evaluacin Multicriterio? .......................16 3. Gestin y administracin de inversiones..................................21 3.1 Marco institucional del sistema Nacional de Inversin Pblica (SNIP)......................................................................22 3.2 Proceso de planificacin y ejecucin de la inversin pblica ..................................................................................23 4. Actores: participacin e involucrados ......................................27 4.1 El capital social ....................................................................27 4.2 El anlisis de involucrados ...................................................28 5. Mtodos de comparacin ...........................................................33 5.1 Mtodos cuantitativos puros.................................................33 5.2 Mtodos cualitativos puros...................................................35 6. Mtodos de Evaluacin Multicriterio.......................................39 6.1 El proceso de decisin .........................................................39 6.2 Clasificacin de las tcnicas multicriterios ..........................42 6.3 Construccin de jerarquas ...................................................43 6.4 Mtodo Sencillo de Estandarizacin (01-Z).........................45 6.5 Mtodo AHP.........................................................................49 Parte II ................................................................................................57 7. Descripcin del proceso para la Evaluacin Multicriterio .....59

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Parte III.............................................................................................................................................67 8. Aplicacin de Evaluacin Multicriterio .................................................................................69 8.1 Ejemplo 1: seleccin de alternativas de proyectos de infraestructura educacional .........69 8.2 Ejemplo 2: priorizacin de proyectos de deportes...........................................................90 8.3 Ejemplo 3: priorizacin de proyectos de infraestructura hidrulica ................................98 Bibliografa .....................................................................................................................................103 Anexos .............................................................................................................................................105 Serie manuales: nmeros publicados ...........................................................................................111 ndice de figuras RBOL DE OBJETIVOS ..................................................................................................18 Figura 1 DISEO Y EJECUCIN DE PROGRAMAS Y PROYECTOS DE POLTICAS PBLICAS ..........24 Figura 2 Figura 3 ESQUEMA DISEO-EJECUCIN INVERSIN PBLICA Y MARCO LGICO .......................25 IDENTIFICACIN DE INVOLUCRADOS ...........................................................................30 Figura 4 Figura 5 PROBLEMA DE DECISIN (ESQUEMA) ...........................................................................40 Figura 6 JERARQUA DEL PROBLEMA .........................................................................................45 Figura 7 JERARQUA SIMPLE ......................................................................................................50 Figura 8 ESCALA DE SAATY .......................................................................................................51 Figura 9 SNTESIS DEL MODELO .................................................................................................56 Figura 10 PROCESO DE EVALUACIN MULTICRITERIO ................................................................60 Figura 11 IDENTIFICACIN DE LOS CRITERIOS .............................................................................61 Figura 12 JERARQUA DEL MODELO .............................................................................................62 Figura 13 CONSTRUCCIN DE LAS MATRICES DE COMPARACIONES ............................................63 Figura 14 ANLISIS DE LOS INDICADORES ...................................................................................64 Figura 15 RANKING DE ALTERNATIVAS DE PROYECTOS ..............................................................65 Figura 16 ESTRUCTURA PARA SELECCIN DE ALTERNATIVAS ....................................................75 Figura 17 MODELO FINAL PARA LA SELECCIN DE ALTERNATIVAS (EDUCACIN) ......................77 Figura 18 MODELO JERRQUICO PARA PRIORIZACIN DE INFRAESTRUCTURA (EDUCACIN) .....84 Figura 19 MODELO DE PRIORIZACIN DE PROYECTOS (EDUCACIN) ..........................................88 Figura 20 MODELO JERRQUICO PARA PRIORIZACIN (DEPORTES) .............................................95 Figura 21 MODELO JERRQUICO CON PONDERADORES GLOBALES Y LOCALES ...........................96 Figura 22 MODELO JERRQUICO PARA INFRAESTRUCTURA HIDRULICA .................................100 Figura 23 RESUMEN DE LAS PONDERACIONES DE PROYECTOS DE INFRAESTRUCTURA HIDRULICA ..............................................................................................................101 ndice de cuadros Cuadro 1 RESUMEN DE LOS MTODOS ........................................................................................38 Cuadro 2 INDICADORES DE PROYECTO .......................................................................................46 Cuadro 3 MEDIA Y DESVIACIN ESTNDAR DE INDICADORES ....................................................47 Cuadro 4 NORMALIZACIN DE INDICADORES ............................................................................................. 47 Cuadro 5 MATRIZ DE JUICIOS DE IMPORTANCIA .........................................................................48 Cuadro 6 INDICADORES JERARQUA ............................................................................................48 Cuadro 7 MATRIZ DE COMPARACIN ..........................................................................................52 NDICES ALEATORIOS POR TAMAO DE MATRIZ ..........................................................55 Cuadro 8 Cuadro 9 MATRIZ DE COMPARACIN DE CRITERIOS GENERALES (EDUCACIN) .........................75 Cuadro 10 MATRIZ DE COMPARACIN DE CRITERIOS ESPECFICOS (EDUCACIN) ........................76 Cuadro 11 PONDERACIN DE SUBCRITERIOS DE CONTENIDOS (EDUCACIN) ...............................76 Cuadro 12 PONDERACIN DE SUBCRITERIOS DE GESTIN (EDUCACIN) ......................................76 Cuadro 13 PONDERACIONES GLOBALES DE SUBCRITERIOS (EDUCACIN) ....................................77 4

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Cuadro 14 Cuadro 15 Cuadro 16 Cuadro 17 Cuadro 18 Cuadro 19 Cuadro 20 Cuadro 21 Cuadro 22 Cuadro 23 Cuadro 24 Cuadro 25 Cuadro 26 Cuadro 27 Cuadro 28 Cuadro 29 Cuadro 30 Cuadro 31 Cuadro 32 Cuadro 33 Cuadro 34 Cuadro 35

COMPARACIN DE ALTERNATIVAS (EDUCACIN) ........................................................80 ASIGNACIN DE CATEGORA POR MONTO ....................................................................81 ASIGNACIN DE CATEGORA POR POBREZA .................................................................82 ASIGNACIN POR DENSIDAD POBLACIONAL ................................................................82 ASIGNACIN POR CRECIMIENTO ..................................................................................83 ASIGNACIN POR URGENCIA........................................................................................83 RANKING DE PROYECTOS .............................................................................................84 MATRIZ DE COMPARACIN (PRIORIZACIN DE PROYECTOS) .......................................85 MATRIZ DE COMPARACIN PARA CRITERIOS POLTICOS-EMOCIONALES .....................85 MATRIZ DE COMPARACIN PARA CRITERIOS SOCIO-DEMOGRFICOS ..........................85 MATRIZ DE COMPARACIN (ADJUDICACIN HISTRICA) .............................................86 MATRIZ DE COMPARACIN (NIVEL DE POBREZA) ........................................................86 MATRIZ DE COMPARACIN (DENSIDAD POBLACIONAL) ...............................................86 MATRIZ DE COMPARACIN (CRECIMIENTO DEMOGRFICO) ........................................87 MATRIZ DE COMPARACIN (GRADO DE URGENCIA DEL PROYECTO) ............................87 PONDERADORES GLOBALES (PRIORIZACIN DE PROYECTOS) ......................................87 SNTESIS DE RESULTADO POR PROYECTO ....................................................................89 COMPARACIN DE RANKING........................................................................................89 RESUMEN DE LOS DATOS .............................................................................................96 RESULTADOS POR ESCENARIO .....................................................................................98 DATOS REFERENCIALES DE LOS PROYECTOS EVALUADOS ........................................101 RANKING PARA EMBALSES ........................................................................................102

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Resumen

Este documento contiene tpicos relacionados con la inversin pblica y opciones metodolgicas para la evaluacin y jerarquizacin de proyectos y programas, revela adems temticas de las organizaciones pblicas relacionadas con los Sistemas Nacionales de Inversin Pblica (SNIP), y pretende aportar en el sentido de incorporar, en la evaluacin y priorizacin de programas y proyectos, mtodos basados en criterios de evaluacin relacionados con mltiples objetivos en una mtrica comn.

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Introduccin

La evaluacin de proyectos, o evaluacin de inversiones, o anlisis costo - beneficio, ampliamente difundido hasta la fecha, consiste en comparar los costos (de inversin y operacin) del proyecto con los beneficios que este genera, con el objeto de decidir sobre la conveniencia de su realizacin. El objetivo de este anlisis, es detectar oportunidades de inversin que puedan crear valor, y contribuir as al crecimiento econmico de una nacin. Para poder llegar a comparar los costos con los beneficios, previamente es necesario identificarlos, medirlos y valorarlos. La identificacin de costos y beneficios, consiste en determinar, en forma cualitativa, los impactos positivos y negativos que genera el proyecto. Por ejemplo: la construccin de una central hidroelctrica permitir entre otras cosas: disminuir las tarifas, aumentar la potencia instalada y mejorar la oferta de energa (beneficios), por el lado de los costos, identificamos entre otros: las obras civiles, movimientos de tierras, equipos, uso de recursos humanos altamente capacitados y la migracin de algunas aves cuyo hbitat se localiza precisamente en el entorno del ro que ser utilizado para el embalse. La medicin de beneficios y costos se refiere a su cuantificacin en unidades fsicas, siguiendo con el ejemplo anterior: cuantos kilowatt-hora podrn ser generados, cuantas toneladas de materiales se necesitarn, cuantas mquinas, cuantos profesionales segn especialidad debern participar en el proyecto, y por ltimo, cuntas aves debern migrar.

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

La valoracin de beneficios y costos, consiste en transformar las unidades fsicas en indicadores econmicos, mediante los precios de los bienes producidos y los recursos utilizados, este ltimo paso del proceso es el que presenta dificultades en algunos casos. Siguiendo con el ejemplo anterior, la mayora de los costos y beneficios identificados y medidos en la central hidroelctrica son valorables, sin embargo, que costo tiene la migracin de las aves? Adicionalmente, como ilustra el ejemplo anterior, existen costos y beneficios que pueden ser identificados pero difcilmente pueden ser medidos (ex ante) en unidades fsicas, por ejemplo, cunto mejorar el aprendizaje de los alumnos beneficiados por un proyecto de informtica educativa?, podemos estimar cuntos alumnos se beneficiarn, pero resulta complejo predecir cunto aumentar la calidad de su proceso educativo.Este tipo de impactos, ya sean costos o beneficioso impactos positivos o negativos, dan cuenta de dos temas centrales: la complejidad de la evaluacin de proyectos y la necesidad de herramientas que consideren criterios adicionales a los econmicos tradicionales. Para abordar este tema, partiendo por la justificacin de su necesidad, en la primera parte de esta publicacin se presenta el tema de la complejidad en la evaluacin de proyectos, inicialmente esta complejidad se trata en forma general, para luego presentar, de forma intuitiva, la evaluacin multicriterio como una herramienta de apoyo a la gestin de dicha complejidad, se presentan ejemplos de mbitos de aplicacin de la herramienta en distintas etapas del ciclo de vida de un proyecto. As, este documento se estructura en tres partes: En la primera parte (I) se muestran elementos y conceptos sobre la Evaluacin Multicriterio y cuestiones como la complejidad de la evaluacin de proyectos. La razn que justifica la introduccin de diferentes criterios ante las limitaciones de la evaluacin tradicional, la necesidad de una buena administracin y gestin de inversiones, el marco institucional necesario, actores involucrados, para finalmente llegar a la presentacin de algunos mtodos de evaluacin. En la segunda parte (II), se presenta el proceso, entregando lineamientos para llevar a cabo una evaluacin del tipo multicriterio. En la tercera parte (III), se presenta casos donde se ha aplicado este tipo de evaluaciones, se muestran en especfico un caso de educacin, un caso de deportes y uno de infraestructura hidraulica. De esta manera se pretende entregar una informacin que permita al lector introducirse en esta materia e intentar aplicarla en los mbitos en que las herramientas mostradas lo permitan.1

En la realizacin de este trabajo se ha contado con la ayuda de diferentes personas, entre ellos alumnos que con su entusiasmo y dedicacin han permitido reunir y ordenar informacin, notas de clases y los casos prcticos desarrollados que aqu se presentan, agradecemos los aportes de Carolina Guerrero, Francisco Espinoza, Gustavo Cabezas y los memoristas Marcelo A. Mndez, Pablo Torres y Sergio A. Mella.

10

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Parte I

11

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

1. Complejidad de la evaluacin de proyectos

En la evaluacin de proyectos o programas de inversin pblica no se agota toda la informacin disponible sobre problemas o necesidades que estos pretenden solucionar, con la recopilacin de informacin solamente econmica. Existe una gran cantidad de factores que no pueden ser valorados para ser incluidos en un anlisis Costo-Beneficio o que son excluidos en un anlisis Costo-Eficiencia debido a la naturaleza de las variables que inciden en una situacin en anlisis. Entendiendo que una variable es una caracterstica de la realidad que puede ser determinada por observacin y puede tomar diferentes valores de una unidad de observacin a otra. En general, se establece que dependiendo de la naturaleza de la investigacin y del tipo de informacin que trate, las variables pueden agruparse en dos tipos, cuantitativas y cualitativas. Una variable cuantitativa es aquella variable que representa una caracterstica o propiedad del objeto de estudio que puede cuantificarse y puede ser expresada con nmeros. Una variable cualitativa es una variable que representa una propiedad que hace referencia a cualidades del objeto de estudio y no puede ser expresada con nmeros. Cuando el objeto de estudio es la Sociedad, nos enfrentamos a ambos tipos de variables. Porque la manera en que se presentan los diversos factores que constituyen el sistema social y en particular el comportamiento del ser humano, indica que algunos factores pueden ser expresados cuantitativamente y otros no. As, las decisiones se

13

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

deberan tomar considerando no slo aspectos econmicos, ya que no todos los factores que se modifican con una intervencin son cuantitativamente expresables del modo tradicional o monetario. Las consecuencias polticas, su impacto ambiental, algunos efectos posteriores a la realizacin del proyecto, la consecucin de objetivos estratgicos, el aporte a la descentralizacin, etc. son factores de difcil cuantificacin y tienen un gran peso en proyectos y programas de inversin pblica. Desde el diseo hasta la realizacin de un proyecto o programa, a lo largo de todo este proceso, factores como la percepcin, intuicin, experiencia y otros, son de capital importancia, por lo tanto el factor humano-cualitativo no puede ser excluido. Por otra parte, un proyecto o programa muchas veces afecta no slo a las variables que se pretende intervenir, sino que trae efectos adicionales, muchos de ellos no deseados o predichos, esto sucede porque el ambiente social es un sistema complejo y en su dinmica innumerables factores participan para obtener un resultado especfico. Por lo tanto, para una buena evaluacin surge la necesidad de incluir instrumental que abarque un espectro ms amplio y que sea capaz de lidiar con mltiples objetivos y contradicciones. Consideremos el siguiente ejemplo. Supongamos que un municipio desea reducir la delincuencia en una zona de su comuna. Para esto evala dos alternativas de proyecto, una cancha de football o una plaza con reas verdes. Decide por una de ellas en funcin de una evaluacin econmica, la que posee un VAN, TIR, etc. social mayor. La decisin adoptada por el municipio sera la correcta si el sesgo obligatorio, en esta, fuera la rentabilidad econmica. Sin embargo esa no es toda la informacin disponible para la evaluacin y la toma de decisiones. Existe un grupo de criterios cualitativos que se pueden agregar al anlisis antes expuesto, tales como: polarizacin por equipo de football en la zona del proyecto, rango de edad de las personas envueltas en ilcitos, nivel de drogadiccin en la zona, etc. Estos criterios hacen la diferencia al momento de evaluar una alternativa de proyecto, as si el grado de polarizacin en las preferencias por equipos de football es alta, no sera conveniente construir la cancha de football, pues en un ambiente de alta delincuencia podra conducir a mayores niveles de violencia. Por el contrario si el nivel de drogadiccin juvenil es alta, es preferible construir la cancha en vez de la plaza, aunque posea un VAN menor relativo. La obviedad del ejemplo indica que sera necesario incluir los aspectos antes descritos para mejorar la toma de decisiones, sin embargo el gran nmero de factores y naturaleza de algunos de ellos hace difcil su inclusin en las formas tradicionales de evaluacin de proyectos. Por su parte, las tcnicas de Evaluacin Multicriterio permiten trabajar con varios criterios a la vez, identificar la importancia relativa de cada uno y evaluar entre distintas alternativas de proyecto, independiente de la naturaleza de los factores que estn implcitos en una situacin especfica.

14

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

2. Por qu y dnde utilizar la Evaluacin Multicriterio?

2.1 Por qu utilizarla?


La visin racionalista positivista cartesiana, ha dominado el sistema de pensamiento de la civilizacin occidental desde que la filosofa clsica griega sistematiz el uso del anlisis, el juicio y la argumentacin. El racionalismo en el mundo moderno asume que para cualquier problema de toma de decisiones existe una solucin ptima precisa y que es posible encontrarla razonando respecto al problema y modelndolo adecuadamente. Un supuesto subyacente en esta visin es la tangibilidad de las variables y atributos que inciden en la toma de decisiones. La teora tradicional de evaluacin de proyectos, se enmarca bsicamente dentro de la tradicin racionalista, en efecto, hemos supuesto siempre que los individuos maximizan su utilidad, y que la sociedad maximiza el bienestar social, que podemos conocer toda la informacin (o al menos la mayor parte) necesaria para la toma de decisiones y que la tangibilidad de esta informacin nos permite medir (todos los costos y beneficios) para llegar a un criterio nico (VAN) que nos permite tomar la decisin en forma racional. De esta manera, la Evaluacin de Proyectos2 supone la capacidad de identificar, medir y valorar, todos los costos y beneficios involucrados, cuestin que en la prctica no siempre es posible. As,

Enfoque de eficiencia.

15

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

los beneficios y costos que se deben identificar, medir y valorar, son aquellos que resulten relevantes desde el punto de vista del inversionista que desea llevar a cabo el proyecto. Tpicamente se distinguen dos puntos de vista, uno es el del inversionista privado (Evaluacin Privada), y otro es el de todos los agentes econmicos que conforman la comunidad nacional (caso en el que se estar efectuando una Evaluacin Social de proyectos). Con frecuencia este ltimo anlisis se aplica a polticas y programas que tienen tipos de productos fuera del mercado como, por ejemplo, los mejoramientos en la calidad ambiental. El estatus y el papel del anlisis costo beneficio en los proyectos pblicos y en la toma de decisiones sobre polticas pblicas ha sido tema de continuas discusiones como tambin de conflictos polticos y administrativos. Las entidades pblicas asesoras han sido criticadas con frecuencia por utilizar el anlisis costo- beneficio para la determinacin del presupuesto. Algunos ejecutivos pblicos y dirigentes polticos han adoptado la posicin de que el anlisis costo-beneficio constituye un intento de frustrar el proceso de discusin, la participacin ciudadana, la democracia y la toma de decisiones polticas que tendr lugar alrededor de potenciales programas y proyectos pblicos. En la prctica la evaluacin social de proyectos en Latinoamrica, ha estado centrada en la evaluacin costo beneficio bajo el enfoque de eficiencia, y en bienes y servicios en los que existen mercados observables.3Uno de los riesgos que se corre con el uso de este mtodo es que la tendencia a cuantificar los efectos sobreenfatice aqullos que son valorizables, an cuando otros efectos intangibles no cuantificados o valorizados pueden ser tanto o ms importantes. Lo anterior nos plantea varios desafos, tales como: buscar consensos en torno a la evaluacin de proyectos, incorporar las variables no cuantificables o factores subjetivos que pesan en las decisiones de los agentes econmicos, incorporar procesos de toma de decisiones que son crecientemente grupales. Sin embargo, esto no nos deja en un mundo sin herramientas de apoyo para la toma de una decisin, por el contrario, esas herramientas en parte son las que proporcionan los mtodos multicriterio. Una visin caricaturesca de estos mtodos, se puede representar, por contraste, con la toma de decisiones en base a quin golpea ms fuerte la mesa (mtodo lamentablemente muy en boga, en particular en el mbito poltico). Si vamos a tomar decisiones en base a quien golpea la mesa (y cmo la golpea), hagmoslo entonces de forma consistente, evitando contradicciones, sin perder de vista los objetivos y facilitando los consensos con mayor transparencia de informacin. En sntesis, explicitar y cuantificar los criterios que estn detrs de los golpes a la mesa. En materia de decisiones de inversin significa todo esto que debemos descartar el anlisis tradicional? (maximizar VAN social o privado suponiendo que podemos cuantificar todos los costos y beneficios relevantes). A nuestro juicio la respuesta es no, ms bien debemos complementarlo. La siguiente pregunta es Dnde y cmo?.

2.2 Dnde utilizar la Evaluacin Multicriterio?


Si pensamos en el ciclo de vida de un proyecto (idea, perfil, prefactibilidad, factibilidad, ejecucin), podemos identificar aplicaciones interesantes, de estos mtodos, al menos en las siguientes etapas del ciclo:

A.

Identificacin de ideas

Dada cierta misin, o ciertos objetivos, con mtodos multicriterio podemos analizar de manera estructurada las formas de alcanzarlos, identificando acciones, algunas de las cuales eventualmente se traducirn en proyectos de inversin.
3

Serie Manuales N. 34. ILPES. Pg. 31.

16

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Posteriormente estos mtodos tambin nos permitirn hacer rankings de ideas y descartar las malas antes de cualquier estudio (ni siquiera de perfil). Esta aplicacin es til a nivel de la funcin de administracin (Ministerios y empresas del estado) dentro del esquema general del Sistema Nacional de Inversiones (S.N.I.) presentado en el captulo 3.

B.

Anlisis de alternativas (en cualquier etapa de preinversin: perfil, prefactibilidad, factibilidad)

Esta es una sub etapa tradicional en evaluacin de proyectos (luego del estudio de mercado, el diagnstico y la optimizacin de la situacin actual). Sobre todo en estudios de nivel de prefactibilidad y factibilidad, i.e., estudios cuyo costo es significativo, en aquellos proyectos en que sea necesario evaluar muchas alternativas, podemos abordar dicha evaluacin con mtodos multicriterio. En el caso particular de un estudio de factibilidad, se sabe que a este nivel generalmente se trabaja con una sola alternativa dado los costos de evaluar, se intenta en general seleccionar slo una a nivel de prefactibilidad, si esa seleccin no fue posible va VAN, es posible elegir la alternativa a evaluar a nivel de factibilidad con herramientas como la Evaluacin Multicriterio Esta aplicacin se debera hacer con la participacin tanto de las unidades encargadas de la administracin de los proyectos, como de las unidades encargadas de la asesora e involucrados, disminuyendo as posibles conflictos en la seleccin de alternativas.

C.

Priorizacin de carteras (post evaluacin de proyectos con VAN)

Enfrentados a una cartera de proyectos rentables, con restriccin de presupuesto, el anlisis tradicional de optimizacin del VAN conjunto, o de uso del IVAN, puede ser complementado con una jerarquizacin multicriterio, que tome en cuenta variables como la contribucin a la estrategia general de la empresa, la complementariedad con otras inversiones en marcha, o en el caso de la evaluacin para la inversin pblica, los aspectos ambientales y redistributivos. En este caso los agentes que deberan participar en la aplicacin, deberan ser los responsables de la funcin de administracin, los de la funcin de gobierno (Ministerio de Hacienda y Consejos Regionales o Comunales) e involucrados. Tambin dentro del mbito pblico, para seleccionar en forma consensuada proyectos y programas que postulan a fondos concursables. En este mbito se han desarrollado experiencias al menos en los sectores de educacin y en deportes. La aplicacin de este tipo de mtodo contribuye en este caso a mejorar la transparencia de la asignacin de recursos en concursos, disminuyendo la posibilidad de asignaciones discrecionales.

D.

Para evaluar propuestas en procesos de licitaciones

En los procesos de licitacin en Latinoamrica que suelen utilizar mtodos que tpicamente se ponderan la experiencia de la empresa proponente, del equipo, el plan de trabajo propuesto, los costos, etc. Slo que la determinacin de las ponderaciones en la mayor parte se hace en forma arbitraria, o sea, no se utilizan mtodos para definir con alguna rigurosidad los ponderadores. En esta aplicacin, para eliminar arbitrariedad y lograr una mayor inclusin, deberan participar directamente las instituciones de la funcin de administracin, no necesariamente con la participacin de los organismos asesores y de gobierno, pero s incorporando a agentes

17

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

representativos de las reas de actividad en cuestin: mundo del arte, de las ciencias, etc., segn corresponda. Consiguiendo as ponderaciones ms rigurosas y participativas.

E.

Para programas de inversin en el sector pblico

Dentro del sector pblico ha alcanzado gran difusin la metodologa de marco lgico (Serie Manuales No 42. Metodologa del marco lgico para la planificacin, el seguimiento y la evaluacin de proyectos y programas. ILPES). Esta herramienta para la formulacin y seguimiento de programas, guarda relacin con los enfoques multicriterio. En efecto, un mtodo como la Evaluacin Multicriterio, permite agregar resultados. Se presenta a continuacin un ejemplo (tomado de una presentacin de Hctor Sann sobre rboles de problemas y rboles de objetivos).4 Con las tcnicas de rboles de problema y rboles de objetivos, se llega a lo siguiente:
Figura 1

RBOL DE OBJETIVOS
Aumento en los ingresos de los agricultores

Disminucin de prdidas en cosechas

FRUTA RECOLECTADA SIN DETERIORO

ADECUADO DISEO MECNICO

FRUTA RESISTENTE

Fuente: Hctor Sann, presentacin en el Curso de Marco Lgico, 2001.

Suponiendo que tenemos que optar y que no podemos ejecutar a la vez el diseo mecnico y la variedad de fruta resistente, algunos criterios posibles para la seleccin de alternativas, podran ser los siguientes: 4

Problemas e intereses de los involucrados. Recursos y mandatos de los involucrados. Recursos a disposicin del proyecto. Probabilidad de alcanzar los objetivos. Horizonte del proyecto. Factibilidad poltica. Anlisis de costo-beneficio. Costo-efectividad de la estrategia. Efecto sobre el flujo de caja. Criterios ambientales. Criterios de gnero.

Hector Sann, Curso de Marco Lgico, 2001 (presentacin power point).

18

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

- Riesgos sociales. - Sustentabilidad. - Otros........... Hasta aqu suelen llegar los anlisis con marco lgico. Pero y cmo tomamos una decisin a partir de todos estos criterios? Cmo podemos identificar alternativas que permitan aumentar los ingresos de un grupo de agricultores? Una vez ms, una posible solucin es la evaluacin multicriterio, que en general permitira complementar el anlisis del marco lgico con una agregacin de actividades, componentes y propsitos, de manera de obtener una mtrica nica de contribucin al fin.

F.

Para la construccin de indicadores de desempeo del personal a cargo de los proyectos

Esta es una aplicacin relevante para las etapas de ejecucin y operacin del proyecto, posterior a la evaluacin ex ante. Se puede generalizar dicha aplicacin a la construccin de indicadores de control de gestin durante la implementacin del proyecto. En todos los casos anteriores se necesita agregar varios criterios para llegar a un solo ndice que permita tomar la decisin. En base a la experiencia presentada en este documento, parece conveniente seguir explorando la aplicacin de la Evaluacin Multicriterio en otros mbitos de decisin, investigar la aplicabilidad a programas, al diseo de productos, a los procesos de licitacin y a la formulacin de proyectos.

19

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

3. Gestin y administracin de inversiones

Hoy en da las inversiones pblicas se ejecutan en el marco de algn Sistema Nacional de Inversin Pblica. Entendidos estos como el conjunto de normas, instrumentos y procedimientos comunes para el sector pblico y entidades del sector privado que ejecuten inversin pblica, mediante los cuales se relacionan y coordinan entre si, para preparar, evaluar, priorizar, financiar, dar seguimiento y ejecutar los proyectos de inversin publica, en el marco de las polticas, planes y programas de desarrollo.5 Est constituido por un conjunto de instituciones del Estado relacionadas a travs de procedimientos, que tienen como ncleo a un rgano rector, en base a cuerpos legales que definen sus competencias y roles para cada una. El marco institucional del Sistema Nacional de Inversiones representa un ordenamiento legal necesario para la realizacin de las polticas pblicas con transparencia, coordinacin y apego a las normas. Su existencia fomenta una poltica clara de inversin en un marco homogneo, sistemtico y coherente. Y, asegura que los proyectos financiados representen los intereses y valores definidos previamente para el bienestar de la sociedad y el uso eficiente de los recursos destinados para ello.

ILPES, Serie Manuales No 34, pgina 13.

21

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

3.1 Marco institucional del Sistema Nacional de Inversin Pblica (SNIP)


La evaluacin multicriterio para la inversin pblica slo puede ser realizada con xito si esta se hace bajo una estructura organizacional que permita la articulacin y coherencia entre objetivos organizacionales de diferentes niveles. Para esto, el SNIP entrega el marco institucional necesario, a travs de sus distintas instancias, para que el sistema en su conjunto pueda funcionar y dirigirse hacia el o los objetivos deseados. La enorme diversidad y cantidad de variables que son necesarias para la evaluacin de los distintos proyectos y programas de inversin pblica, requiere de un sistema que pueda articularlas en cuanto a funciones y procesos. De tal modo que exista una articulacin eficaz desde las polticas definidas a nivel macro hasta la accin micro. El marco institucional define, por ejemplo, las siguientes entidades genricas:

Entidades rectoras: son los organismos que dictan normas, instrucciones, disean procesos y procedimientos para ser considerados en la toma de decisiones. Realizan funciones de asesora y coordinacin. Tienen que ver con la direccin del proceso. Entidades vinculadas: son sistemas que cruzan horizontalmente la gestin del aparato pblico y que participan activamente en el proceso de inversin. Entidades incorporadas: son las entidades del sector pblico que pueden presentar proyectos y programas de investigacin para su aprobacin y posterior ejecucin. Entidades de orden territorial: corresponde a la participacin de entidades distintas a las de nivel central.

En la organizacin del Sector Pblico, para los SNIP es posible distinguir 3 tipos de funciones genricas dentro del proceso de inversin pblica. De Gobierno (decisin) Este nivel adopta decisiones y prioriza acerca de qu proyectos o estudios realizar, en base a las recomendaciones tcnico-econmicas proporcionadas por el nivel asesor. La funcin de Gobierno reside en el Poder Ejecutivo a travs del Presidente de la Repblica; y por descentralizacin y desconcentracin territorial, en los Ministros, los Intendentes Regionales; y a nivel local en los Alcaldes. De administracin (ejecucin) Es una accin tcnica que se traduce en la identificacin, formulacin, evaluacin y ejecucin, a travs de la contratacin de estudios y obras, de los proyectos de inversin pblica. La funcin de Administracin es realizada por los ministerios, servicios, empresas e instituciones pblicas, como asimismo por las municipalidades y servicios regionales. De asesora (coordinacin) A esta funcin le corresponde la coordinacin y compatibilizacin de las decisiones de inversin, entre los niveles de Gobierno y Administracin. Debe realizar la revisin tcnica de los estudios y proyectos de los organismos pblicos (Ministerios, Organismos Regionales, Empresas del Estado, etc.) que postulan a financiamiento pblico, y emitir la correspondiente recomendacin tcnico-econmica.

22

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Las instituciones que se vinculan con el SNIP se pueden agrupar de acuerdo con sus caractersticas funcionales en instancias de coordinacin horizontal.6 Instancia de Gobierno: se refiere a la articulacin en trminos de asesora que presta el rgano rector a las autoridades de Gobierno y al poder legislativo. Este corresponde a un apoyo recproco, de tal modo que se mejora la toma de decisiones y se fortalecen los sistemas de inversin. Instancia de planificacin La importancia de esta instancia depende de los marcos legales-institucionales de cada pas. La planificacin puede venir estructurada a nivel nacional o se pueden definir estrategias que guan la inversin, entre otros casos. Instancia presupuestaria Corresponde al vnculo intra el sistema de los organismos encargados del presupuesto, normalmente esta funcin est a cargo de los ministerios del presupuesto o hacienda. Instancia inversora Corresponde a la relacin entre las instituciones inversoras y los organismos rectores. En ciertos casos la jerarquizacin de los proyectos est a cargo de las instituciones inversoras, luego de que el rgano rector haya aprobado un conjunto de estos. Instancia decisional Se refiere a la toma de decisiones respecto de los montos y tipos de inversin. Esta se puede encontrar a nivel nacional, subnacional o sectorial. La asignacin de recursos est definida normalmente por reglas, aprobaciones y mtodos utilizados para evaluar la viabilidad de los proyectos. Instancia de control Se refiere a los controles de la legalidad de los procedimientos que siguen los inversores. Existen diferentes niveles de control segn las etapas y el producto de los proyectos, pero generalmente estn orientados a las etapas de pre-inversin. Ests distintas instancias y funciones permiten una coordinacin entre los organismos encargados de formular, evaluar y ejecutar las inversiones, la existencia de este sistema institucional permite coordinar la aplicacin de nuevos mtodos de evaluacin dentro del proceso administrativo, y en el caso particular, el sistema se fortalece con una herramienta que incluye y articula niveles y objetivos, tanto jerrquicos como territoriales.

3.2 Proceso de planificacin y ejecucin de la inversin pblica


En un sistema de gobierno se pueden distinguir tres niveles de funcionamiento. En primer lugar se encuentra el nivel estratgico, donde se definen los lineamientos de polticas pblicas para todo el pas. Comprende a aquellas instituciones responsables de las decisiones de carcter estratgico, polticas y legislativas que orientan y regulan la accin pblica con una visin de largo plazo. Luego se encuentra el nivel programtico. Corresponde a los organismos de nivel intermedio encargados de definir los planes y los programas intersectoriales e intrasectoriales. Constituyen el nexo entre la parte ms alta de la institucionalidad y lo ms bajo de la administracin pblica.

La modernizacin de los sistemas nacionales de inversin pblica: anlisis crtico y perspectivas (CEPAL, Serie Manuales N 23).

23

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Al final se encuentra el nivel operativo, donde se ejecutan los programas y proyectos que responden a metas sectoriales especficas, pero orientadas por los niveles superiores. La planificacin y la ejecucin de proyectos o programas de inversin pblica comparten una misma estructura. Ambos se rigen y estn constituidos por: - polticas pblicas definidas, son lineamientos generales que sirven como gua para las acciones de todo el sistema. - objetivos que representan los logros que se pretenden alcanzar. Estos, son de radical importancia, porque permiten hacer comparaciones entre lo planeado y lo ejecutado. - criterios tcnicos para la evaluacin de las alternativas y la seleccin de aquellas que satisfacen determinados parmetros. - proyectos y programas diseados que responden a necesidades especficas de zonas determinadas. Sin embargo, la planificacin y la ejecucin poseen una diferencia funcional importante. Cuando se lleva a cabo el diseo de la inversin pblica el proceso se realiza en sentido descendente. A nivel estratgico se definen los lineamientos de polticas pblicas para todo el pas, en un nivel macro, que sirve de gua y referencia para la elaboracin de los objetivo a nivel programtico. En el nivel operativo se especifican las metas a alcanzar y ejecutan los programas y proyectos. Por el contrario, cuando se ejecutan los programas o proyectos de inversin pblica, estos se realizan en forma ascendente. Las unidades operacionales formulan proyectos de acuerdo a metas que desean alcanzar respondiendo a las necesidades que han identificado, estos son presentados en los niveles intermedios quienes los evalan y filtran en base a los objetivos y criterios definidos, los que a su vez responden a polticas pblicas establecidas en los niveles superiores. Esta estructura se replica para cada de las partes constituyentes del esquema del SNIP, as el nivel local est constituido por los niveles estratgico, programtico y operacional, de manera funcional. De igual modo los niveles nacional y regional. A su vez, el esquema del SNIP contiene los mismos niveles como estructura constituyente. El nivel nacional correspondera al estratgico, el nivel regional corresponde al programtico y el nivel municipal al operativo.
Figura 2

DISEO Y EJECUCIN DE PROGRAMAS Y PROYECTOS DE POLTICAS PBLICAS


Nivel estratgico Decisiones polticas, estratgicas y legislativas que orienten la accin pblica.

Diseo

Nivel programtico Objetivos institucionales. Desarrollo de programas sectoriales.

Ejecucin

Nivel operacional Se ejecutan los programas y proyectos. Est sujeto a metas. Financiamiento.

Fuente: Elaboracin propia ajustado de Polticas Pblicas Asociadas al Fomento Productivo en Chile, 2001.

24

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

El diseo y ejecucin de proyectos o programas de inversin pblica requiere de la coordinacin, complementacin y retroalimentacin de los distintos estamentos definidos: estratgico, programtico y operacional. La imbricacin entre los diferentes niveles de decisin o planificacin necesitan de algn instrumental adecuado que faciliten el anlisis en sus distintas jerarquas, una metodologa que sobresale por su amplia difusin y eficiencia, es la Metodologa Marco Lgico.7 Ella es capaz de articular en forma completa, pero concisa, y trasparentando todos los procesos necesarios para la coordinacin nter-niveles del diseo y la ejecucin de la inversin pblica. El traslape entre los diferentes niveles decisionales/funcionales utilizando Matrices de Planificacin se presenta en el esquema a continuacin, donde se muestra una forma de relacionar y coordinar los tres niveles funcionales del Sistema Nacional de Inversiones. Adems, esquematiza el proceso de diseo y ejecucin de la inversin pblica. Gracias a esta funcionalidad es posible verificar si los objetivos de un determinado proyecto estn en correspondencia con los objetivos especificados por los niveles superiores siguiendo una relacin de causalidad desde el fin a nivel operativo hasta la poltica declarada por el nivel estratgico.
Figura 3

ESQUEMA DISEO-EJECUCIN INVERSIN PBLICA Y MARCO LGICO


Nivel Estratgico Fin Propsito Componentes Actividades Poltica

Fin Nivel Programtico Propsito Componentes Actividades Plan Programa

E j e c u c i n

D i s e o

Fin Nivel Operativo Propsito Proyecto Componentes Actividades

Fuente: Juan Francisco Pacheco, Presentacin. rea de Polticas Presupuestarias y Gestin Pblica, ILPES

Metodologa de marco lgico para la planificacin, el seguimiento y la evaluacin de proyectos y programas, Edgar Ortegn, Juan Francisco Pacheco y Adriana Prieto. (LC/L.2350; LC/IP/L.259)

25

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Esta concatenacin de objetivos (fines y propsitos) de distintos niveles (operativos, programticos y estratgicos) plantea tambin una dimensin de complejidad en la evaluacin de proyectos. A modo de ejemplo, en la evaluacin de un proyecto desde un nivel estratgico, deber considerarse la contribucin de este a los objetivos de un programa del nivel superior, y finalmente su contribucin al logro de los objetivos de una poltica. La metodologa del marco lgico plantea la construccin de indicadores, tanto para la medicin del logro de fines y propsitos, como para la medicin del avance de las componentes y actividades de un proyecto. Estos indicadores pueden ser cuantitativos, pero normalmente estn medidos en diferentes unidades, lo qu nos lleva a la siguiente pregunta: cmo se puede obtener una mtrica nica de avances y logros de los proyectos que permita compararlos unos con otros? La evaluacin multicriterio puede dar una respuesta en este mbito de la complejidad de la evaluacin.

26

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

4. Actores: participacin e involucrados

Uno de los aspectos importantes en la formulacin de un proyecto es la participacin y obviamente el respectivo anlisis de involucrados, en particular creemos que en la evaluacin de los proyectos tanto en las etapas ex-ante como posteriores, la participacin es posible y se facilita con el uso de los mtodos aqu expuestos, al mismo tiempo de ir generando elementos que contribuyan a crear puentes entre los beneficiario y las instituciones a cargo. Desde el punto de vista de los proyectos es indisoluble el vnculo que existe entre Participacin, las tcnicas de Anlisis de Involucrados, la creacin y fortalecimiento de Capital Social. La adopcin de mtodos que incorporen esta dimensin desde la preinversin, creemos que facilita el buen desarrollo de un programa o proyecto. Por este motivo hemos incorporado los tpicos siguientes.

4.1 El capital social


Los proyectos se articulan dentro de espacios territoriales donde la comunidad dispone de un capital social y una cultura que afectan las dinmicas que le permiten o no llevar una vida que se juzgue como justa y valedera. Llevar una vida justa, desde el punto de vista tico, significa que las personas estn dotadas de un mnimo que contempla cierta cantidad de ingresos, de una educacin que le permita incorporarse al mercado laboral, de una salud acorde al medio donde se desempea y dispone de un lugar donde vivir dignamente.8
8

Este punto est tomado casi ntegramente del anexo 6 de Ortegn, Pacheco y Roura, 2005, Metodologa general de identificacin, preparacin y evaluacin de proyectos de inversin pblica. Serie Manuales CEPAL, N 39

27

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

En esta tarea, uno de los elementos que explican el desarrollo de las comunidades es la presencia del capital social, concepto fuertemente asociado a la confianza y la participacin. Junto al capital construido, el capital natural y el capital humano son las cuatro formas bsicas de capital. De acuerdo a Kliksberg (2000:28) el capital natural est constituido por la dotacin de recursos naturales con que cuenta un pas; el capital construido es aquel generado por el ser humano que incluye diversas formas de capital (infraestructura, bienes de capital, financiero, comercial, etc.); el capital humano est determinado por los grados de nutricin, salud y educacin de su poblacin. El BID ha reconocido en sus mltiples actividades el rol del capital social en el desarrollo, incluyendo los valores ticos y la cultura como parte del concepto de capital social. Esta misma institucin ha manifestado, a travs de sus experiencias, que la participacin tiene sentido como fin en s misma y como instrumento del desarrollo (Ymada, 2001). Ahora bien, el capital social dispone de un marco conceptual disperso, sin embargo, ofrece estrategias alternativas de superacin de la pobreza, tanto en los diagnsticos actuales de las causas de la persistencia de la pobreza como en las nuevas alternativas de poltica actualmente bajo consideracin. Entre algunos tericos del capital social encontramos al norteamericano Robert Putnam y al francs Pierre Bourdieu, quienes identificaron que ciertos aspectos como la confianza depositada en las relaciones humanas capital social dentro de las comunidades redunda en un mayor desarrollo de s misma, transformndola en capital econmico, es decir, la existencia de capital social afecta positivamente el desarrollo econmico de las comunidades. En sntesis, para describirlo, se ha asociado a conceptos tales como la confianza, la participacin social, el empoderamiento (empowerment) y la reciprocidad. Y es uno de los elementos que permitira facilitar tanto el crecimiento como la movilidad social de las personas. Sin embargo, cmo enfrentarnos el problema econmico cuando hay recursos intangibles como el capital social que estn distribuidos inequitativamente?, cmo hacer cuando lo que hace falta no es en primer lugar la educacin ni los ingresos ni la salud, sino la confianza entre las personas dentro de una comunidad?. En el mbito de la evaluacin de proyectos existen al menos dos formas de contribuir a la formacin de capital social: i) No destruyndolo, lo que se logra por la va de la participacin de los involucrados desde la etapa de preinversin, evitando as futuros conflictos entre los involucrados a raz del proyecto, alineando intereses y voluntades. ii) Impulsando la participacin, el empoderamiento y la confianza, lo que se logra incorporando a los involucrados no slo en los estudios y diseos previos, sino tambin en la ejecucin y operacin de los proyectos pblicos. Esto ltimo puede materializarse en aportes de los beneficiarios, ya sea pecuniarios u otros tales como aportes de trabajo, infraestructura, terrenos, materiales, etc. La idea es que a la vez que se refuerza el xito de la ejecucin y operacin de los proyectos gracias a un mayor compromiso y alineamiento de los involucrados en el mismo, se contribuya a la formacin de capital social.

4.2 El anlisis de involucrados


El anlisis de involucrados,9 es un mbito dentro de la preparacin y evaluacin de proyectos que nos permite conocer los diferentes comportamientos que seguirn, en diferentes momentos quienes estn relacionados con un proyecto.
9

Ver anexo. Metodologa general de identificacin, preparacin y evaluacin de proyectos de inversin pblica. (LC/L.2326-P; LC/IP/L.257).2005.

28

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Los beneficios de este anlisis son: fijar estrategias a seguir de acuerdo con los resultados del anlisis con cada involucrado y conocer cual alternativa es mejor recibida por ellos. Sabemos que existen dinmicas de distinto orden asociadas a la relacin entre actores y los vnculos de estos asociados a una intervencin. En la etapa de planeacin de un proyecto este anlisis de involucrados puede jugar un rol importante en la comprensin de estas dinmicas. El cuidado que se preste a esto puede significar en parte el xito o fracaso del proyecto. Es en esta etapa donde se debe detectar como se movilizarn los distintos actores segn sus intereses y por lo tanto los enfoques participativos son fundamentales para obtener mayor certidumbre. Muchas veces el paso de una posicin neutra a otra de compromiso (movilizacin de los actores) no se manifiestan hasta la ejecucin del proyecto. La dificultad de esto es que si hay mucha resistencia de parte de los involucrados, puede obligar a cambios en el proyecto. Esto significa introducir modificaciones a algo ya establecido y acordado, lo que puede tener incidencias sobre los costos del proyecto o puede significar mermas en la satisfaccin que pretende el proyecto. Por lo tanto, avistar tempranamente las posicin que adoptar cada involucrado permite que sea ms fcil la gestin futura de quin dirija el proyecto. Para este tipo de anlisis se pueden seguir los pasos siguientes: 1. Identificar involucrados. 2. Clasificar involucrados. 3. Definir para cada uno: - Posicin. - Fuerza. - e Intensidad del involucrado. 4. Comparar alternativas. 5. Generar estrategias. Descripcin de los pasos para el anlisis de involucrados. i) Identificar los involucrados: Esto significa conocer que actor se movilizar en relacin al proyecto, no slo debe tenerse en cuenta la posicin actual, sino que debe tambin considerarse la futura. Es conveniente utilizar un listado de actores, el que se puede obtener a partir del conocimiento del grupo que est haciendo el proyecto o, utilizando un anlisis de relaciones de acuerdo con el diseo del proyecto, generar una lista de actores. Una vez hecho el listado es recomendable expresarlo en un diagrama como el siguiente.

29

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 4

IDENTIFICACIN DE INVOLUCRADOS
Profesores Profesores
Administradores Administradores docentes docentes

Estudiantes Estudiantes

Padres de Padres de familia familia

Cmara Cmara del libro del libro

Entidades Entidades financieras financieras

Unidad Ejecutora
Organismos Organismos reguladores reguladores

Proveedores Proveedores Ministerio Ministerio deeducacin educacin de Municipio Municipio

Facultades Facultades de Educacin Educacin

Fuente: Gestin de proyectos. Segunda regla: Relacinese con los involucrados. 2005. Hctor Sann. Presentacin.

Este diagrama nos permite visualizar los distintos actores involucrados y cules podran ser las categoras de actores a utilizar dependiendo de las caractersticas comunes de cada actor (por ejemplo. Instituciones pblicas como Municipio, Ministerio de Educacin y organismos reguladores, podran quedar en esa categora). ii) Clasificar los involucrados; significa agruparlos de acuerdo a ciertas caractersticas como: si pertenecen a instituciones pblicas, privados, organizaciones o la relacin que tengan con el proyecto si se refiere al entorno o si son internos al proyecto (contratistas y empleados). Si estn cercanos o lejanos al proyecto y toda otra caracterstica que pueda ser de utilidad. Es evidente que algunas categoras de involucrados podran tener una relacin parecida en trminos de tratamiento. En el ejemplo del punto uno, es posible pensar que las Instituciones pblicas respaldarn el proyecto y s su relacin con el proyecto est enmarcada en un plano normativo de responsabilidades que podra afectar positiva o negativamente el proyecto. Para esta categora las estrategias estarn enmarcadas dentro de lo normativo institucional. iii) Definir posicin; esto indicar cul es el apoyo u oposicin al proyecto o alternativa de proyecto por parte del involucrado, se utilizar signo positivo o negativo en la comparacin de las alternativas. iv) Definir fuerza; esto se hace de acuerdo al involucrado y su poder para afectar el proyecto. Esto nos muestra la importancia que el involucrado tiene para el proyecto. v) Definir intensidad; indica el grado de involucramiento que se tenga con el proyecto, es la importancia que el involucrado le da al proyecto. vi) Comparacin de alternativas; para esto se construye un anlisis de Fuerza e Intensidad para cada involucrado en cada alternativa, lo que permite tener una aproximacin sobre la alternativa que tiene ms apoyo.

30

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

vii) Generar estrategias; significa que con la informacin que se obtiene de la comparacin entre alternativas, dependiendo del inters de quin realice o beneficie el proyecto, se deben disear acciones que permitan algn nivel de convergencia, acuerdo o mayor aceptacin de una alternativa frente a otras. Este anlisis no debe entenderse como esttico, debe considerar todas las fases del ciclo del proyecto. Por otra parte, un buen anlisis permite los enfoques participativos desde el inicio de la planeacin del proyecto. Desde el punto de vista de la Gerencia del Proyecto, los involucrados inciden fuertemente en la identificacin de los supuestos que harn viable un proyecto, lo que equivale a decir que continuamente se deber interactuar con los involucrados, de forma de intentar anticiparse a cualquier desafeccin respecto al proyecto, para introducir a tiempo las mejoras que se consideren necesarias. Toda esta nueva dimensin de complejidad en la gestin moderna de proyectos, es tambin abordable con herramientas de apoyo. En particular en la evaluacin ex ante, en las etapas de preinversin, dentro de los agentes que debern participar en la aplicacin de la metodologa multicriterio que se presenta a continuacin, debe considerarse al menos a los principales involucrados del proyecto. Dentro de este tipo de involucrados, entre los de mayor intensidad de vinculacin, siempre estn los beneficiarios, ellos debern participar por lo tanto como uno de los principales expertos a consultar para la aplicacin de la metodologa.

31

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

5. Mtodos de comparacin

Teniendo en cuenta las menciones hechas sobre diferentes aspectos tanto metodolgicos como institucionales y de administracin de la inversin pblica, repasaremos sucintamente algunos mtodos de comparacin existentes, intentando una clasificacin de ellos. Los mtodos de comparacin en la jerarquizacin o priorizacin o seleccin alternativas proyectos responden a distintos tipos de evaluacin que pueden ser clasificados en dos grupos, dependiendo de la cantidad de objetivos con los que puedan trabajar. Los mtodos simples, son aquellos que realizan anlisis a partir de un solo objetivo y los mtodos complejos que pueden trabajar con varios objetivos simultneamente. Los que a su vez se agrupan en mtodos cuantitativos, cualitativos y mixtos.

5.1 Mtodos cuantitativos puros


Los mtodos cuantitativos son aquellos que capturan una realidad esttica y objetiva, estudiando las relaciones entre variables cuantificadas, que pueden ser de tipo ordinales, de intervalos lineales o de razn. Sus resultados poseen el carcter de ser generalizables.

A.

Mtodos simples

Indicadores econmicos El empleo de indicadores econmicos es uno de los mtodos ms usados para la seleccin y determinacin de prioridades de proyectos. Indicadores de este tipo son por ejemplo: el valor actual neto (VAN), la tasa interna de retorno (TIR), la relacin beneficio/costo, el perodo de recuperacin del capital, etc. 33

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Aun cuando este tipo de indicadores es el ms recomendable si se desea asegurar una mxima eficiencia en el uso de los recursos, como se ha sealado, usualmente no se cuenta con informacin suficiente para un clculo confiable de ellos, se presentan beneficios y costos que se pueden identificar pero que no resulta posible valorar. Por ello la aplicacin de estos indicadores se ve limitada tan solo a cierto tipo de proyectos. Presentan adems la desventaja de excluir todos aquellos criterios que no pueden expresarse en trminos monetarios. Una buena aplicacin de ellos consiste en fijar ciertos niveles mnimos que deben cumplir los proyectos (para los cuales pueden ser calculados) a fin de ser aceptables (por ejemplo una TIR superior al costo del capital). Luego se efecta la jerarquizacin de aquellos que cumplan con los requisitos mnimos a travs de otro mtodo.

B.

Mtodos complejos

Dominancia entre proyectos Este tipo de mtodos se aplica en condiciones de incertidumbre y trata de determinar dominancia entre proyectos desde el punto de vista de los resultados esperados. Es decir, analiza los posibles resultados de un proyecto bajo distintos escenarios y la probabilidad asociada a cada uno de ellos, y los compara con los correspondientes a otros proyectos. Si en cualquier escenario posible se da que el peor resultado de un proyecto A es igual o mejor al mejor resultado de un proyecto B, existir dominancia absoluta del primero sobre el segundo y ser recomendable emprender el proyecto A. Existir dominancia probabilstica de un proyecto A sobre un proyecto B cuando para cualquier escenario posible la probabilidad de obtener un cierto resultado (deseable) sea mayor para el proyecto A que para el B. La aplicacin de este tipo de modelos es conveniente para la determinacin de la alternativa ptima para un determinado proyecto o seleccin de proyectos alternativos en condiciones de incertidumbre. Su uso para la seleccin de los proyectos a incluir en un programa de inversiones es limitado. Ello ya que para proyectos de distintos sectores ser muy difcil establecer si un determinado resultado de uno de ellos es ms o menos deseable que el resultado del otro proyecto bajo el mismo escenario. Adems, su uso se ve complicado por la dificultad para estimar en forma confiable la probabilidad asociada a cada resultado posible del proyecto. Programacin lineal Frente al problema de tratar de alcanzar objetivos mltiples con recursos limitados y sujeto a numerosas restricciones, se ha intentado aplicar modelos de programacin lineal a la seleccin de paquetes de proyectos. La funcin objetivo seleccionada suele ser maximizar la suma de los valores actuales netos sociales de los proyectos incluidos en el programa de inversiones. Las restricciones reflejan limitaciones de recursos (fundamentalmente dinero), lmites a la inversin por sector, regin y/o institucin y relaciones de dependencia, complementariedad o exclusividad entre proyectos. Sin embargo, la aplicacin de este mtodo requiere contar con una evaluacin social de cada proyecto que postule al programa de inversiones. Ello limita seriamente al modelo ya que en la prctica se suele contar con evaluaciones de este tipo solo para solo unos pocos proyectos (mayoritariamente los de infraestructura, ya que los sectores sociales tienden a evaluarse con mtodos de costo efectividad). Adems, el problema se torna rpidamente tan complejo que no es posible encontrar una solucin por procedimientos sencillos.

34

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

En efecto, la indivisibilidad de los proyectos obliga a recurrir a programacin entera. Adems, las relaciones entre proyectos y las limitaciones de disponibilidad de fondos y de su distribucin sectorial y espacial, generan un gran nmero de restricciones. Por ltimo, el nmero de proyectos y alternativas de proyectos a considerar torna el problema an ms complejo y difcil de solucionar. Por lo tanto, aun reconociendo el potencial de instrumentos de este tipo, no es posible pensar en su empleo para la determinacin de programas de inversiones cuando figuren en ellos gran nmero de pequeos proyectos para los cuales no se cuente con informacin o metodologas para el clculo de su VAN. La recoleccin y preparacin de informacin, el planteamiento del modelo y su solucin podran tomar fcilmente mucho ms tiempo que el elaborar el programa de inversiones a mano.

5.2 Mtodos cualitativos puros


Los mtodos cualitativos son aquellos que estudian las relaciones entre variables cualitativas. Otorgan informacin sobre juicios, actitudes o deseos. Esta puede originarse a partir de encuestas, observacin, dinmicas de grupo, entrevistas o tcnicas proyectivas. Aportan informacin sobre aspectos no considerados en los mtodos cuantitativos, por lo tanto es complementaria, permitiendo una evaluacin integral y holstica. Tienen la propiedad de enriquecer y matizar la informacin cuantitativa. Aunque no poseen la objetividad propia de este. Pueden adquirir la capacidad de cuantificacin si se les asigna un valor para indicar mayor o menor grado del atributo en el objeto.

A.

Mtodos simples

Lista de verificacin Este procedimiento permite juzgar en forma sencilla y rpida si un proyecto cumple o no con los objetivos que se haya fijado el pas o la institucin. Para su aplicacin es necesario definir claramente los objetivos a base de los cuales se juzgar el proyecto. Para cada objetivo se establece una escala en la cual se clasifica el proyecto. En cada escala se fijan niveles mnimos que el proyecto deber cumplir a fin de ser seleccionado. La principal ventaja de este procedimiento radica en su sencillez. Sin embargo no es posible emplearlo para jerarquizar proyectos. En efecto, no es posible saber si el no cumplimiento de un criterio puede ser compensado por un muy buen cumplimiento de otros criterios. En consecuencia el mtodo solo sirve para descartar rpidamente proyectos que no cumplen ciertas condiciones mnimas. Aporte a metas Estos modelos pretenden medir el aporte que realiza un proyecto al logro de determinadas metas. A diferencia del mtodo basado en una puntuacin de acuerdo a la concordancia del proyecto con el objetivo, en este caso se pretende obtener una estimacin del avance porcentual hacia el logro de determinada meta debido a la realizacin del proyecto. Por ejemplo, si la meta es dotar de viviendas dignas a 1000 familias de escasos recursos y el proyecto contempla la construccin de 100 casas, el porcentaje de aporte a la consecucin de la meta ser de un 10%. Tras estimar el aporte porcentual del proyecto a cada una de las metas propuestas, se sumarn dichos valores, eventualmente ponderando segn la importancia de la meta. Se obtendr as un indicador del aporte general del proyecto a la obtencin de las metas nacionales. Aun cuando este mtodo aparece como muy lgico, su aplicacin prctica resulta casi imposible. En efecto, rara vez ser posible encontrar metas claramente definidas en funcin de las

35

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

cuales se pueda medir el aporte de los proyectos. Adems, aun cuando dichas metas se conocieran, sera bastante difcil estimar el aporte efectivo de cada proyecto a las distintas metas. Q- sorting (interaccin nominal) Este procedimiento para la jerarquizacin de proyectos se basa en el trabajo sistematizado de un grupo de evaluadores, como producto del cual se obtiene una clasificacin de los proyectos segn su aporte a los objetivos de la organizacin. El procedimiento combina etapas de trabajo individual con etapas de trabajo en grupo. El procedimiento se inicia pidindole a cada evaluador que clasifique los proyectos de acuerdo a su prioridad. Para ello puede aplicarse un procedimiento de "Q-sorting". Este procedimiento consiste en una secuencia de pasos destinados a facilitar la clasificacin de los proyectos en distintas categoras segn la prioridad atribuida a l por el evaluador. Cada evaluador recibe un conjunto de cartillas en que cada una representa un proyecto. Su tarea consiste en clasificarlas en dos grupos, uno representando proyectos de alta prioridad y otro representando proyectos de baja prioridad. En el siguiente paso se le solicita separar del grupo de proyectos de baja prioridad aqullos de prioridad intermedia y los de muy baja prioridad. Asimismo, debe separar de los proyectos de alta prioridad los de prioridad intermedia y los de muy alta prioridad. Se obtiene as una clasificacin de los proyectos en cinco categoras segn el nivel de prioridad atribuido a ellos por el evaluador. Luego sigue una etapa de interaccin nominal en que los resultados obtenidos por cada uno de los evaluadores son presentados en una sesin de grupo, sin identificar quien ha entregado cada clasificacin. El modo de presentacin consiste en indicar cuantos "votos" obtuvo cada proyecto en cada categora. Estos resultados son discutidos por el grupo con el objeto de aumentar la coherencia de los juicios en el caso de aquellos proyectos en que se observe una alta dispersin entre las distintas categoras. Enseguida se realiza, en forma individual, una segunda ronda de "Q-sorting". Sus resultados vuelven a ser presentados al grupo y son discutidos. El procedimiento se repite hasta alcanzar un adecuado nivel de coherencia acerca de la prioridad asignada a cada uno de los proyectos.

B.

Mtodos complejos

Mtodo Delphi, es un mtodo para estructurar un proceso de comunicacin grupal de tal manera que pueda ser resuelto, por el grupo, un problema complejo. Usualmente es aplicado para la prediccin de eventos bajo condiciones de incertidumbre. El mtodo consiste en la realizacin de una serie de encuestas annimas a un grupo seleccionado de expertos con el fin de recoger posibles convergencias de opiniones y consensos. La esencia de este mtodo es reducir los espacios intercuartiles para precisar la mediana, esto significa que las sucesivas encuestas y el anonimato permiten recoger todas las opiniones en procesos sucesivos hasta obtener un resultado fruto del consenso del grupo. En un primer momento el mtodo realiza encuestas para calcular cules son las diferencias entre las opiniones, luego se realiza un debate transdisciplinario para acercarse al consenso y as sucesivamente hasta obtener un resultado. Las fases necesarias para enfrentar un problema son la definicin del mismo, la seleccin de los expertos, la elaboracin y lanzamiento de los cuestionarios y finalmente, el desarrollo prctico y explotacin de los resultados.

36

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Una de las ventajas de este mtodo es la casi certeza de obtener un consenso, sin embargo esto no asegura la coherencia del resultado. Por otro lado se enfrenta a la desventaja de ser costoso y largo, adems ser ms bien intuitivo que racional.

C.

Mtodos mixtos

Los mtodos mixtos son procesos capaces de recolectar, analizar y vincular datos de tipo cualitativo y cuantitativo. Poseen la ventaja de dar una visin ms precisa y adquirir un mayor grado de comprensin del fenmeno en estudio, la posibilidad de una multiplicidad de observaciones permite un anlisis ms acabado del problema y una mayor variedad de perspectivas de anlisis. Modelos de puntuacin Este tipo de modelos es bsicamente una extensin del modelo de aporte a metas. Se agrega al procedimiento sealado la determinacin de ponderaciones para cada objetivo. Empleando dichas ponderaciones y la puntuacin obtenida por el proyecto frente a cada objetivo, se determina un puntaje nico para el proyecto. Para ello pueden emplearse modelos aditivos, multiplicativos u otras funciones matemticas. Un ejemplo de modelo aditivo es:

Pj = f(wi*sij)
Donde: Pj = puntaje del proyecto j wi = ponderacin del objetivo i sij = puntuacin del proyecto j frente al objetivo i Estos modelos presentan la ventaja de permitir la jerarquizacin de proyectos segn su aporte a objetivos preestablecidos. Sin embargo, salvo que los ponderadores y las escalas de puntuacin que se diseen y apliquen de modo de cumplir con las propiedades de una escala proporcional ("ratio scale"), no es posible afirmar si un proyecto es mejor o peor que otro en un determinado porcentaje. Este mtodo es eminentemente prctico y sencillo de usar pero es necesario tener presente la limitacin antes indicada. AHP (Analytic Hierarchy Process) El proceso analtico jerrquico (AHP), es una metodologa de anlisis multicriterio desarrollada a fines de la dcada del 70 por el doctor en matemticas Thomas L. Saaty. Es un mtodo de descomposicin de estructuras complejas en sus componentes, ordenando estos componentes o variables en una estructura jerrquica, donde se obtienen valores numricos para los juicios de preferencia y, finalmente los sintetiza para determinar qu variable tiene la ms alta prioridad. Esta fundado sobre una base terica simple pero slida. Esta metodologa propone una manera de ordenar el pensamiento analtico, de la cual destacan tres principios: - Construccin de las jerarquas - Establecimiento de prioridades - Consistencia lgica En capitulo siguiente se presentar el detalle de la teora y el mtodo para aplicar estos tres principios pero previamente se propone un mtodo sencillo para cumplir el requerimiento de que las escalas de puntuacin se diseen y apliquen de modo de cumplir con las propiedades de una escala proporcional ("ratio scale"), y para determinar ponderadores de los criterios de una forma que refleje las preferencias de los involucrados, es el mtodo que hemos denominado 01 Z.

37

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Para sintetizar los mtodos presentados hasta este punto, se incluye la siguiente Tabla Resumen.
Cuadro 1

RESUMEN DE LOS MTODOS


Simples Indicadores econmicos Lista de verificacin Aporte a metas Q-sorting Complejos Programacin lineal Dominancia entre proyectos Delphi

Cuantitativos

Cualitativos

Mixtos

AHP Modelos de puntuacin

Fuente: rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

38

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

6. Mtodos de Evaluacin Multicriterio

Los mtodos multicriterio se fundamentan a partir del proceso decisorio que requiere de la aplicacin de mtodos de comparacin para apoyar al tomador decisiones de tal manera que sus decisiones sean plenamente consistente con algn marco de racionalidad adoptado. As, la descripcin de los mtodos multicriterio presentados en este trabajo se inicia con la explicacin sobre el proceso de decisin.

6.1 El proceso de decisin


Un proceso de decisin implica, necesariamente, la comparacin entre las alternativas sobre las que se puede optar frente a cierta disyuntiva presente, en primer lugar se hace necesario separar un problema de decisin en los elementos que lo componen, para la posterior comparacin entre ellos, de esta manera la toma de decisin implica el hecho de comparar elementos que se traduce en la necesidad de realizar mediciones que permitan aplicar los criterios de comparacin para establecer preferencias entre ellos, es decir, una jerarqua.

39

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 5

PROBLEMA DE DECISIN (ESQUEMA)


Elementos
ObjetivosCriterios, Actores, Juicios de valor (conflictos) ConocimientoExperiencia, Intuicin, Alternativas

Proceso

Resultados

Jerarquizacin Priorizacin Seleccin

Decisin

Fuente: Arancibia, Sara y Contreras, Eduardo, 2006. Evaluacin Multicriterio, Aplicaciones al mbito pblico. Presentacin.

La figura anterior, muestra como se constituye un problema de decisin y lo fundamental que puede ser contar con un proceso adecuado para el uso de los elementos, ya que si se desea tener una herramienta eficaz y eficiente que apoye las decisiones, es de importancia contar con la mayor cantidad de elementos de anlisis y utilizar el proceso ms adecuado para ello. Grafica, adems, tanto los elementos, el proceso y los resultados (decisin), el sistema indica unos input (elementos) y output del proceso (decisin) estos tres componentes tienen la siguiente descripcin: Elementos: estn compuestos por los objetivos, criterios, actores involucrados, juicios de valor (conflictos), conocimiento, experiencia, intuicin, alternativas. Los elementos que participan en un proceso de decisin por lo general se miden en escalas diferentes (peso, distancia tiempo por ejemplo), por lo que se requiere transformar estas unidades en una unidad abstracta que sea vlida para todas las escalas. Proceso: esta integrada por la jerarquizacin y priorizacin. - Jerarquizacin: Relacin de orden entre las alternativas, se requiere de un modelo de decisin. - Priorizacin: Razn de proporcionalidad, en trminos de cunto mejor es una alternativa que otra; se requiere de un proceso de evaluacin. Resultado: es la decisin sobre seleccin de una alternativa, jerarquizacin o priorizacin de proyectos. As, a partir de lo anterior, en el anlisis de un problema podemos incorporar sus distintas dimensiones (criterios), sta es una forma de acercar el modelo a la realidad (multidimensionalidad). Sin embargo, la dificultad que presenta considerar ms de una dimensin, es que surgen preguntas como; Cul es ahora el proyecto ms adecuado?, Cmo determinamos la importancia de estos factores, y cmo sintetizamos luego toda esta informacin para tomar la mejor decisin? Esto implica en primer lugar, reconocer la complejidad del proceso de toma de decisiones sean individuales o grupales. Adems de reconocer tambin, que participan en el proceso muchas variables intangibles imposibles de cuantificar en medidas tradicionales, aspectos polticos, sociales y ambientales por ejemplo, que deben verse representados por una escala comn. Y que estas variables son de difcil medicin en trminos econmicos lo cual limita el uso de los mtodos tradicionales de evaluacin de proyectos. La forma de resolver este problema tpico es el uso de un conjunto de teoras, mtodos, modelos y herramientas de apoyo a la toma de decisiones aplicable no slo al anlisis de

40

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

inversiones sino a una amplia gama de problemas en la gestin tanto privada como pblica tales como: Anlisis de posicionamiento de marcas en el mercado, medicin de percepciones de clientes y seleccin de tecnologas. Se hace necesaria una metodologa que logre combinar las distintas dimensiones, objetivos, actores y escalas que se hallan envueltos en el proceso, sin sacrificar la calidad, confiabilidad y consenso en los resultados. En respuesta, una de las caractersticas principales de las metodologas multicriterio es la diversidad de factores que se logran integrar en el proceso de evaluacin. Su particularidad est en la forma de transformar las mediciones y percepciones en una escala nica, para comparar los elementos y establecer rdenes de prioridad. As, permiten agregar efectos de un proyecto en una mtrica comn. Estas tcnicas indican que se deben seguir algunos pasos para aplicar ordenadamente diferente instrumental, para ello se debe tener en cuenta lo siguiente: 1. Se deben definir los criterios (objetivos intermedios), y sus respectivas restricciones. 2. Definir tipos de variables: discretas o continuas. 3. Modelamiento de las preferencias. Existen bsicamente dos alternativas: optimizar por separado para cada objetivo y luego agregar los subconjuntos de soluciones asignar pesos a los distintos objetivos y encontrar una sola solucin. 4. Definir si se usan modelos determinsticos (sin incertidumbre) aleatorios. En el ltimo caso se aplica la Teora de preferencias sobre contingencias: - programacin dinmica. - simulacin. - anlisis probabilstico. 5. Si se opta por agregar objetivos se deben definir los mtodos de agregacin, tales como: - Mtodo de "juicio de expertos" - Funciones de utilidad multiatributadas: transforman los mltiples criterios en uno slo. - Factor analysis - Escalamiento Multidimensional - Analytic Hierarchy Process (AHP) - Otros En esencia, la Decisin Multicriterio es una optimizacin con varias funciones objetivo simultneas y un nico agente decisor. Esto puede formularse matemticamente de la siguiente manera: mx. F(x); x X Donde: x: Es el vector [x1, x2, x3,..., xn] de las variables de decisin. El problema de decisin es el de asignar los mejores. X: Es la denominada regin factible del problema (el conjunto de posibles valores que pueden tomar las variables) F(x): Es el vector [f1(x), f2(x),..., fp(x)] de las p funciones objetivo que recogen los criterios u objetivos simultneos del problema.

41

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

6.2 Clasificacin de las tcnicas multicriterios


Para clasificar las tcnicas multicriterio es necesario ver como fluye la informacin entre los actores, esta observacin nos permite hacer una primera diferenciacin entre las tcnicas existentes. As, fijndose en el flujo de informacin existente entre dos de los actores ms destacados del proceso de toma de decisiones, el analista y el decisor (Moreno- Jimnez, 1989), las tcnicas multicriterio pueden clasificarse en: 1. Tcnicas sin informacin a priori (generadoras): Son aquellas en las que el flujo de informacin va desde el analista al decisor. Entre estas tcnicas destacan: el mtodo de ponderaciones, el de la -restriccin y el simplex multicriterio. Tcnicas con informacin a priori: El flujo de informacin es en el sentido contrario, del decisor al analista. Dentro de este grupo de tcnicas se suele hacer otra distincin, segn el nmero de alternativas que tenga el problema: finito o infinito. Si el conjunto de alternativas es infinito se suelen aplicar aproximaciones basadas en optimizacin, en las que se supone que los distintos objetivos pueden ser expresados en un denominador comn mediante intercambios. Destacan en este apartado los mtodos de Programacin por Compromiso o Programacin por Metas. Si el conjunto de alternativas es discreto, hacemos la siguiente diferenciacin: i. Mtodos de Agregacin: En este tipo de Mtodos se modelizan las preferencias a travs de una funcin valor: - Directos: Teora de Utilidad Multiatributo (MAUT). Busca expresar las preferencias del decidor sobre un conjunto de criterios en trminos de la utilidad que le reportan. Se fundamenta en los siguientes axiomas: 1) Maximizacin de la funcin de utilidad: todo decisor intenta maximizar una funcin que agrupa todos los criterios relevantes. 2) Tricotoma: todo par de acciones son susceptibles de ser comparadas, entonces existe un ordenamiento de las preferencias bien definido. 3) Transitividad: el orden de las preferencias es transitivo. La tcnica consiste en medir la utilidad parcial de cada criterio respecto de cada alternativa y luego agregarlas en una funcin de utilidad global. - Jerarqua: Proceso Analtico Jerrquico (Analytic Hierarchy Process: AHP). ii. Mtodos basados en relaciones de orden: Se modelan las preferencias a travs de un sistema de relaciones binarias: - Mtodos de Superacin (MS): Se comparan dos alternativas respecto a todos los criterios a travs de relaciones binarias. Se busca determinar si una alternativa supera a otra buscando criterios suficientes que sealen su supremaca. Las relaciones que se establecen no son necesariamente transitivas. 3. Tcnicas en las que el flujo de informacin es en los dos sentidos, dando lugar a las denominadas tcnicas interactivas. Dentro de este conjunto de mtodos, los ms utilizados han sido: STEM y Mtodo de Ziots-Wallenius. En la actualidad, casi todos los mtodos pueden considerarse dentro de este ltimo grupo, bastando para ello que el decisor revise sus juicios dentro del proceso de toma de decisiones.

2.

Respecto de los tres mtodos discretos mencionados anteriormente, se puede indicar que, a pesar de los duros enfrentamientos que han tenido los respectivos seguidores, recientemente se est buscando la integracin de las mismas, o por lo menos, la integracin de las dos tcnicas consideradas de la escuela americana (MAUT y AHP). 42

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Aquellos problemas en los que el conjunto de alternativas es finito, adems de discreto y, cuya decisin se basa en las diversas caractersticas o atributos de las alternativas respecto de los criterios de decisin relevantes, se denominan Decisin Multicriterio Discreta y les son aplicables algunos de los mtodos de la Decisin Multiobjetivo. El Proceso Analtico Jerrquico (AHP), una de las metodologas multicriterio, con fundamentos matemticos, ms utilizadas, puede caracterizarse como un mtodo de evaluacin multicriterio, de variables discretas, con medicin de preferencias por agregacin de criterios y determinstico (no considera incertidumbre).

6.3 Construccin de jerarquas


La evaluacin multicriterio permite emplear una amplia gama de objetivos, tanto en nmero como en tipos de criterios, para la comparacin de las alternativas o de proyectos. Permitiendo manejar toda la informacin a nuestra disposicin empleando mtodos que permitan el trabajo con los mltiples objetivos. Comparacin (evaluacin) Por qu y para qu?
Los recursos siempre son escasos, y es por eso que la comparacin ayuda a discriminar,

entre proyectos, sobre la prioridad en la asignacin de recursos.


Hace ms eficiente la asignacin de recursos. Apoya la toma de decisiones

Tanto el paso de los proyectos de una etapa a otra a lo largo de su ciclo de vida como la elaboracin de programas de inversiones requieren previamente una seleccin de alternativas y priorizacin de los proyectos en espera de financiamiento, esto implica establecer mtodos de comparacin que permitan desarrollar un buen proceso evaluativo, a fin de determinar cuales sern financiados y en que perodo. Para el desarrollo de este proceso es posible emplear distintos procedimientos, cada uno de los cuales presenta ciertas ventajas y limitaciones. De esta manera cualquier evaluacin de la ndole que nos importa debe comprender dos grandes fases; la primera referida a la utilizacin de algn enfoque o tcnica que permita la comprensin de un sistema complejo y la segunda, a la eleccin de un mtodo que permita medir los diferentes aspectos asociados al mismo. Los sistemas complejos, ya se ha dicho, pueden ser mejor comprendidos mediante su descomposicin en elementos constituyentes, la estructuracin de dichos elementos jerrquicamente, y la composicin o sintetizacin de los juicios, de acuerdo con la importancia relativa de los elementos de cada nivel de jerarqua, ascendiendo o descendiendo de un nivel a otro. As, cada conjunto de elementos en una jerarqua como la antes mencionada ocupa un nivel. El nivel superior llamado Foco, consta solamente de un elemento: el objetivo amplio y global (equivalente al propsito respecto de los componentes en la metodologa de Marco Lgico) que regir toda la evaluacin. Los niveles siguientes pueden tener cada uno diversos elementos, aunque su cantidad es generalmente pequea entre cinco y nueve elementos. Debido a que los elementos de un nivel debern compararse uno con el otro en funcin de un criterio del nivel superior siguiente, los elementos de cada nivel deben ser del mismo orden de magnitud. Objetivo (Goal): - Es lo que se espera resolver - Es el Objetivo principal

43

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Criterios: - Son los elementos que definen el objetivo principal Subcriterios: - Son los elementos que definen el criterio debajo del cual ellos se encuentran. Estos deben ser cuantificables. Alternativas: - Estas son diferentes soluciones o cursos de accin Foco, criterios y subcriterios Cuando se construye una jerarqua para la evaluacin de un programa o proyecto de inversin pblica el foco, los criterios y subcriterios no surgen espontneamente del consenso de los expertos. El foco representa un objetivo puntual que se desea lograr. Este se enmarca en los fines del nivel superior al que se desea contribuir en la mayor medida posible. Debido a la naturaleza jerrquica administrativa (nacional, regional y local) y funcional (polticas, planes, programas y proyectos), el foco y los criterios deben estar dirigidos por el nivel superior. De este modo los criterios a nivel de planes deben estar en lnea con las polticas, los programas con los planes y los proyectos con los programas. A su vez los criterios y subcriterios deben poseer las siguientes caractersticas: Deben ser especficos para cada sector. Siguiendo la lgica vertical, los criterios y subcriterios deben ser especficos para cada rea de desarrollo, sectorial o territorial, para la cual se le haya definido una poltica, plan o programa. Luego todos los proyectos que pertenezcan a un mismo sector deben ser evaluados con los mismos criterios y ponderaciones. Deben ser permanentes en el tiempo. Los criterios no slo deben ser constantes para un mismo sector, sino que tambin deben serlo a travs del tiempo. Para dar seguimiento y comparar los proyectos a travs del tiempo, el cristal bajo el cual fueron evaluados debe ser el mismo, as se puede asegurar que los proyectos en distintas pocas pueden ser evaluados y comparados para anlisis posteriores. No obstante, esto ltimo no impide que puedan ser sometidos a revisin los criterios y los ponderadores una vez que se haya determinado la evaluacin.
La construccin de jerarquas u ordenamiento jerrquico de los elementos de un

problema, puede ser graficado de acuerdo con la figura 6, este esquema nos permite visualizar la relacin entre los distintos elementos del problema y adems da pie para aplicar los mtodos de evaluacin que propondremos en este trabajo.

44

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 6

JERARQUA DEL PROBLEMA


Foco

Qu criterios aportan al objetivo global?


Criterio General k Criterio Especfico i.1 Criterio Especfico i.2 Criterio Especfico i.3

Criterio General i Criterio Especfico i.1 Criterio Especfico i.2 Criterio Especfico i.3 Criterio Especfico j.1 Criterio Especfico j.2 Criterio Especfico j.3

Criterio General j

+ gener al ( es t r at gic o)

+ es pec f ic o ( t c nic o)

Alternativa A

Alternativa B

Alternativa A

Fuente: Arancibia, Sara y Contreras, Eduardo, 2006. Evaluacin Multicriterio. Aplicaciones al mbito pblico. Presentacin.

As, partiendo de la construccin de jerarqua de un problema seleccionamos un mtodo de anlisis. Para este trabajo presentamos dos posibles, uno sencillo y prctico y otro ms complejo que corresponde al mtodo AHP. Este proceso es denominado priorizacin o jerarquizacin.

6.4 Mtodo Sencillo de Estandarizacin (01-Z)


Este mtodo es una forma sencilla de evaluacin multicriterio, capaz de identificar la importancia relativa entre criterios e integrar una variedad de indicadores cuantitativos como cualitativos. Se distingue por el uso de una matriz de comparaciones de criterios y el uso de la herramienta estadstica Z. A travs de una matriz de comparaciones se pregunta si el criterio i es ms importante que el criterio j, si este es el caso se le asigna un valor 1 a la celda correspondiente a la fila que contiene el criterio i y la columna con el criterio j, y 0 (cero) en caso contrario (la diagonal de esta matriz no se completa). De este modo es capaz de asignar ponderadores para cada criterio en la evaluacin. La forma de calcular los ponderadores es muy sencilla. Se deben sumar las filas y calcular qu porcentaje representan respecto del total. Por otro lado, es capaz de comparar los distintos indicadores de los proyectos o alternativas de proyectos, en cada uno de sus criterios, a travs de la estandarizacin de sus valores. La estandarizacin (Z) es una tcnica que permite la homogenizacin de las escalas de medida para la comparabilidad de estas. A continuacin se presenta un ejemplo del mtodo 01-Z con las siguientes caractersticas:
Se utilizar un mtodo que combina mtodos cualitativos y cuantitativos. Se medir en base a indicadores cuantitativos (P, Q, R y S) y puntajes de cumplimiento

con objetivos (Concordancia) 45

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

La priorizacin se har en base a puntajes ponderados obtenidos de los valores

normalizados de los indicadores Ejemplo: priorizacin de proyectos Para el rea de salud se seleccionan tres alternativas desde el Banco de Proyectos. El objetivo es mejorar la salud en una zona geogrfica. El siguiente cuadro resume la informacin disponible para cada uno.
Cuadro 2

INDICADORES DE PROYECTO
Proyecto A B C P 0,008 0,0096 0,0056 Valor de los indicadores del proyecto Q R S -0,0403 0,0075 73 857 -0,0364 0,845 58 745 -0,0625 0,0074 36 783 Concordancia 80 50 90

Fuente. rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

El cuadro entrega informacin sobre los indicadores P, Q, R y S. Indicadores cuantitativos cualquiera relevantes para la evaluacin. Adicionalmente se conoce la correspondencia de cada proyecto con los objetivos que se buscan alcanzar. La variable Concordancia corresponde a la valoracin cualitativa de los juicios, expresados cuantitativamente, de expertos respecto a la contribucin que hacen los proyectos. Se elabor a partir de juicios y su correlativo numrico se obtuvo a partir de un rango de 0 a 100. Donde 100 es mximo aporte al objetivo y 0 es ningn aporte. Los valores intermedios indican mayor o menor grado de contribucin del proyecto. Hasta este momento conocemos algunos indicadores y cul proyecto concuerda en mayor medida con nuestro objetivo. El paso siguiente consiste en integrar todos los criterios tal que sirva para la toma de decisiones. El primer paso es estandarizar los indicadores de la primera tabla. Hasta el momento cada uno est en distinto orden de magnitud, por lo tanto es dificultoso determinar como incorporarlos en una medida nica. Esto es posible por medio de una normalizacin de los indicadores a travs de medidas de tendencia central, de este modo los datos sern comparables, ya que lo que hacemos es ver las distancias relativas de cada indicador, en la coleccin, a la media. De ese modo nos olvidamos de las magnitudes. Para esto se debe calcular la media y la desviacin estndar de cada indicador. Es importante recordar que estamos trabajando con la poblacin y no con una muestra de proyectos. Las formulas para la media y la desviacin estndar son las siguientes:

xj

x =
n

j ,i

Sj =

(x

j ,i

xj)

46

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Donde: x j : es la media aritmtica del indicador j-simo.

x j ,i : es el i-simo dato del indicador j-simo. S j : es la desviacin estndar del indicador j-simo. n : es el nmero de proyectos. j = 1,, m. Donde m es el m-simo indicador que se dispone con informacin sobre un
proyecto. i = 1,, n. El siguiente cuadro resume los resultados.
Cuadro 3

MEDIA Y DESVIACIN ESTNDAR DE INDICADORES


Proyecto A B C Media Desv. Est. P 0,008 0,0096 0,0056 0,007733 0,001644 Valor de los indicadores del proyecto Q R S -0,0403 0,0075 73 857 -0,0364 0,845 58 745 -0,0625 0,0074 36 783 -0,0464 0,286633 56 4617 0,011495 0,394825 15 2213 Concordancia 80 50 90 73 333 16 9967

Fuente: rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

Una vez que hemos obtenido la media y la desviacin estndar se puede proceder con la estandarizacin de los datos. Se construye el estadstico Z de la siguiente manera:

Z j ,i =
Donde: Z j ,i : es el valor normalizado de x j ,i .

x j ,i x j Sj

Con la normalizacin estamos suponiendo que el indicador j est distribuido Normal con media cero y varianza uno (N~(0,1)). Con esto se puede saber cunto se aleja de la media cada proyecto para un determinado indicador. Adems tenemos la seguridad de que cada indicador posee la misma distribucin, por lo tanto todos los valores en la tabla son comparables. Los resultados de la normalizacin se resumen en el siguiente cuadro:
Cuadro 4

NORMALIZACIN DE INDICADORES
Proyecto A B C P 0,1624 1,1356 -1,2974 Valor de los indicadores normalizados del proyecto Q R S Concordancia 0,5307 -0,7070 1,1428 0,3923 0,8699 1,4142 0,1500 -1,3728 -1,4006 -0,7072 -1,2928 0,9806

Fuente: rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

47

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Ahora es posible integrar todos los criterios de evaluacin en uno solo y elegir el mejor proyecto. Es necesario, antes, conocer las ponderaciones de cada indicador, esto es cun importante es un criterio respecto de los otros. Estos se obtienen a partir de una matriz que compara a pares los criterios. La matriz se completa respondiendo a la pregunta: es el criterio de la fila ms importante que l de la columna?
Cuadro 5

MATRIZ DE JUICIOS DE IMPORTANCIA


P P Q R S Concord. 0 1 0 1 Q 1 0 1 1 R 0 1 0 0 S 1 0 1 1 Concordancia 0 0 1 0

Fuente: rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

Se suman las filas: P=2, Q=1, R=3, S=1 y Concordancia=3. Luego se suman estos resultados (2+1+3+1+3=10) y se calcula el porcentaje que representa el criterio P respecto del total (10), e igual para el resto. Los resultados se muestran a continuacin:
P 0.20 Q 0.10 R = 0.30 S 0.10 Concord 0.30

Se ha establecido que las ponderaciones son las siguientes: P (0.2), Q (0.1), R (0.3), S (0.1) y Grado de concordancia (0.3). El cuadro final muestra cada proyecto ponderado por cada indicador. Luego se agregaron los valores y se estableci la jerarqua.
Cuadro 6

INDICADORES JERARQUA
Proyecto A B C P 0.2 0,033 0,227 -0,260 Q 0.1 0,053 0,087 -0,140 R 0.3 -0,212 0,424 -0,212 S 0.1 0,114 0,015 -0,129 Concordancia 0.3 0,118 -0,412 0,294 Total 0,106 0,341 -0,447 Prioridad 2 1 3

Fuente: rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

Con este procedimiento se ha logrado establecer la prioridad de los proyectos que fueron evaluados. Adems se han integrado con xito variables cualitativas tales como juicios sobre la importancia de un indicador por sobre otro o el grado de concordancia con los objetivos. Y se ha llegado a la conclusin que el Proyecto B es el mejor evaluado y se recomienda su ejecucin por sobre los otros. Comentarios sobre el mtodo Uno de los principales aspectos a destacar es la simplicidad con la que se pueden calcular los ponderadores de los criterios, tan solo con un par de sumas y divisiones. Sin embargo este mtodo 48

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

carece de formas para comprobar si los juicios ingresados en la matriz que compara los criterios son consistentes, es decir, que representan opiniones informadas y coherentes. Adems, no nos permite diferenciar entre los grados de importancia de los criterios, esto es, responder a la pregunta de cunto ms importante es un criterio respecto de otro. Otro aspecto dbil del mtodo es al momento de jerarquizar los criterios. En nuestro ejemplo se hace evidente, Q y S tienen la misma ponderacin, de igual modo R y Concordancia. La manera de resolver esto es observando en la misma matriz cul de los dos es ms importante (en este caso es S, por lo tanto en la jerarqua ira primero que Q). Sin embargo, se debe destacar de este mtodo el uso del estadstico Z, ya que si no nos fuera posible establecer ponderaciones que discriminen la importancia de los criterios y tuviramos que trabajar con una ponderacin igual para todos, de todos modos podramos jerarquizar los criterios solamente usando Z. Ya que nos permite comparar las diferentes escalas de medidas y realizar operaciones sobre ellas.

6.5 Mtodo AHP


El mtodo Analytic Hierarchy Process es capaz de hacerse cargo de los problemas que posee el mtodo anterior, adems de tener una serie de ventajas, como se ver a continuacin. El mtodo AHP posee, como ya se ha mencionado, tres principios rectores:
Construccin de las jerarquas Establecimiento de prioridades Consistencia lgica

Estos principios, en trminos generales guan el proceso de evaluacin. A continuacin se explican cada uno de ellos.

A.

Principio de construccin de jerarquas

Las jerarquas que trata el mtodo de AHP son aquellas que conducen un sistema hacia un objetivo deseado como la solucin de conflictos, un desempeo eficiente o la felicidad total. La construccin de jerarquas sigue los mismo lineamientos explicados en la seccin anterior. El esquema jerrquico est compuesto por: Objetivo o foco Criterios Subcriterios Alternativas.

49

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 7

JERARQUA SIMPLE
Se mide por el indicador Hect./Inv.

Seleccionar un proyecto de regado para una regin determinada que potencie una mejor calidad de vida en la zona

Establece el aporte del proyecto a la generacin de empleos

Beneficiarios

Hectrea

Empleos

Comunas ms pobres

Se mide por el indicador Beneficiario/Inv.

Alt 1

Alt 2

Alt 3
Establece el aporte del proyecto a beneficiar las comunas ms pobres

Nota: Se filtrar previamente aquellos proyectos tcnicamente factibles y con VAN>0

Fuente: Arancibia, Sara y Contreras, Eduardo, 2006. Evaluacin Multicriterio, presentacin.

El ejemplo muestra cmo se podra estructurar la eleccin de un proyecto, en este caso un proyecto de regado para una determinada zona geogrfica. Primero se establece un foco, que es el objetivo general y principal: seleccionar un proyecto de regado para que este mejore la calidad de vida de una zona geogrfica especfica. Una vez que ya tenemos claro el foco, se pueden definir los criterios, que son los elementos que permiten conocer los mbitos involucrados en la consecucin del objetivo. Se ubican un nivel ms abajo: Beneficiarios, Hectreas, Empleos y Comunas ms pobres. Diferentes proyectos aportan en diferente medida a cada criterio, ah radica la importancia de disear la jerarqua, porque una vez evaluados y filtrados aquellos proyectos que sean tcnicamente factibles y con VAN positivo, pueden ser evaluados en funcin de los criterios seleccionados. Las distintas alternativas son evaluadas segn los criterios establecidos que son relevantes para el objetivo principal. As es como el criterio Beneficiaros representa cunto dinero se invierte por persona. Hectrea mide el monto invertido por hectrea. Empleo, mide la generacin de empleos como resultado de la inversin y Comunas ms pobres, establece cunto aporta el proyecto a beneficiar las comunas ms pobres de la zona. As, con estos criterios y sus indicadores podemos seleccionar la alternativa que mejor satisfaga al logro del objetivo planteado.

B.

Principio de establecimiento de prioridades

El clculo de la prioridad se realiza en funcin de comparaciones a pares con respecto a un criterio dado. Para comparar los elementos se forma una matriz y se pregunta: Cunto supera este elemento (o actividad) al elemento con el cual se est comparando- en la medida en que posee la propiedad, contribuye a ella, la domina, influye sobre ella, la satisface, o la beneficia? El segundo principio que destaca de este mtodo multicriterio es el establecimiento de prioridades entre los elementos de la jerarqua. Se propone una escala de prioridades como forma de independizarse de las diferentes escalas que existen entre sus componentes. Los seres humanos perciben relaciones entre los elementos que describen una situacin, pueden realizar comparaciones a 50

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

pares entre ellos con respecto un cierto criterio y de esta manera expresar la preferencia de uno sobre otro. La sntesis del conjunto de estos juicios arroja la escala de intensidades de preferencias (prioridad) entre el total de elementos comparados. De esta forma es posible integrar el pensamiento lgico con los sentimientos, la intuicin (que es reflejo de la experiencia), etc. Los juicios que son ingresados en las comparaciones a pares responden a estos factores.
Figura 8

ESCALA DE SAATY

Intensidad 1 3 5 7

Definicin De igual importancia Moderada importancia Importancia fuerte Muy fuerte o demostrada Extrema

9 2,4,6,8

Valores intermedios Recprocos aij=1/aji

Explicacin 2 actividades contribuyen de igual forma al objetivo La experiencia y el juicio favorecen levemente a una actividad sobre la otra La experiencia y el juicio favorecen fuertemente una actividad sobre la otra Una actividad es mucho ms favorecida que la otra; su predominancia se demostr en la prctica La evidencia que favorece una actividad sobre la otra, es absoluta y totalmente clara Cuando se necesita un compromiso de las partes entre valores adyacentes Hiptesis del mtodo

Fuente: Thomas Saaty, 1997. Toma de decisiones para lderes.

Tipos de Comparaciones Pareadas: (1) Importancia: Apropiado cuando se comparan criterios entre s. (2) Preferencia: Apropiado cuando se comparan alternativas. (3) Ms probable: Usado cuando se compara la probabilidad de los resultados, ya sea con criterios o alternativas. Crear una matriz para cada criterio o subcriterio de la jerarqua que permita determinar la prioridad Pij, de los elementos de su nivel inmediatamente inferior. Comparar de a pares estos elementos del nivel inferior, usando una escala de proporciones. (Escala de Saaty) Es deseable que el establecimiento de prioridades, cuando hay ms de un experto involucrado, se logre a travs del consenso entre ellos. Sin embargo, en ocasiones no es posible sostener una serie de entrevistas junto con todos los involucrados. Saaty resolvi este inconveniente integrando los juicios a travs de la media geomtrica de la siguiente forma:

Aij = n
Donde:

a n ij

Aij: es el resultado de la integracin de los juicios para el par de criterios i, j.

a n ij : es el juicio del involucrado para el par de criterios.

51

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

n= 1,, n. Corresponde al nmero de involucrados que expresan sus juicios sobre los criterios. Ejemplo: Importancia relativa de los criterios Para solucionar un problema se ha propuesto un determinado objetivo (foco), para este se definieron los siguientes criterios: Ambiental (representa el impacto en el medio ambiente), Social (representa cmo se vern afectadas las costumbres del grupo social afectado) y Econmico (cul es el beneficio econmico para la zona donde se ejecutar el proyecto). Luego, se estableci la importancia relativa para cada criterio. En el cuadro inferior se puede observar que el criterio econmico es cuatro veces ms importante que el ambiental (si vemos la segunda columna y cuarta fila), de igual modo se podra decir que el criterio Ambiental posee un cuarto de la importancia del criterio Econmico (si vemos la cuarta columna y segunda fila).
Cuadro 7

MATRIZ DE COMPARACIN
Ambiental Social Econ. Ambiental 1 2 4 Social 1\2 1 2 Econ. 1\4 1\2 1

Fuente: rea de Polticas Presupuestarias y Gestin Pblica, ILPES.

De acuerdo a lo establecido anteriormente sobre el proceso analtico jerrquico, una vez que se ha construido el modelo jerrquico, en donde se incorporen los diferentes criterios y alternativas relevantes para el proceso de decisin en cuestin y se han ingresado los juicios correspondientes a la comparaciones a pares entre los diferentes elementos del modelo, el problema se reduce al clculo de valores y vectores propios los que representarn las prioridades y el ndice de consistencia del proceso respectivamente. Una vez completada la Matriz, el problema se transforma en un problema de Vectores y Valores propios:

A*w=*w
Donde A=Matriz recproca de comparaciones a pares (Juicios de importancia/ preferencia de un criterio sobre otro) w= Vector propio que representa el ranking u orden de prioridad =Mximo valor propio que representa una medida de la consistencia de los juicios Ejemplo: Clculo de prioridades con el mtodo de aproximacin Continuamos con el ejemplo anterior. En primer lugar se debe simplificar la matriz de comparaciones, transformando las fracciones en nmeros decimales, con el fin de simplificar el desarrollo.
1 0.5 0.25 1 1/ 2 1/ 4 0.5 2 1 1/ 2 2 1 4 2 4 2 1 1

52

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Luego, se calcula el cuadrado de la matriz simplificada (la que contiene nmeros decimales) y se suman los elementos para cada fila.

3 1.5 0.75 5.25 6 3 1.5 10.5 12 6 3 21


Los valores obtenidos para cada fila se suman (5.25+10.5+21=36.75). Posteriormente, cada uno de estos valores es dividido por la suma resultante. Para as obtener el vector propio, que representa el vector de prioridades para cada criterio.

0.142857 10.5 0.285714 36.75 21 0.571429 36.75 36.75

5.25

Amb 0.142857 Social 0.285714 Econ 0.571429

Este procedimiento se repite (obtener la matriz cuadrada, sumar los elementos de cada fila, dividir esos resultados por la suma de los mismos y obtener los vectores propios) hasta que la diferencia entre los vectores propios de dos procesos consecutivos sea muy pequea o cero. En este caso, si se repite el proceso, se obtendr el mismo vector propio. De esta forma hemos establecido el orden de las prioridades o ponderacin de las variables. En primer lugar se encuentra el criterio econmico, le sigue el social y finalmente el ambiental. Para conocer otra forma de hacer este clculo ver anexo 1.

C.

Principio de consistencia lgica

Los seres humanos tienen la capacidad de establecer relaciones entre los objetos o las ideas, de manera que sean consistentes es decir, que se relacionen bien entre s y sus relaciones muestren congruencia. En este sentido consistencia implica dos cosas: transitividad y proporcionalidad; la primera es que deben respetarse las relaciones de orden entre los elementos, es decir, si A es mayor que C y C es mayor que B entonces la lgica dice que A es mayor que B. La segunda es que las proporciones entre los rdenes de magnitud de estas preferencias tambin deben cumplirse con un rango de error permitido. Por ejemplo si A es 3 veces mayor que C y C es dos mayor que B entonces A debe ser 6 veces mayor que B, este sera un juicio 100% consistente (se cumple la relacin de transitividad y de proporcionalidad). La escala a que se hace referencia existe en el inconsciente, no est explcita y sus valores no son nmeros exactos, lo que existe en el cerebro es un ordenamiento jerrquico para los elementos. Dada la ausencia de valores exactos para esta escala la mente humana no est preparada para emitir juicios 100% consistentes (que cumplan las relaciones de transitividad y proporcionalidad). Se espera que se viole la proporcionalidad de manera tal que no signifique violaciones a la transitividad. La consistencia tiene relacin con el grado de dispersin de los juicios del actor. Los juicios consistentes imponen 2 propiedades en forma simultnea: A) Transitividad de las preferencias: Si C1 es mejor que C2 y C2 es mejor que C3 entonces se espera que C1 sea mejor que C3. 53

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

B) Proporcionalidad de las preferencias: Si C1 es 3 veces mejor que C2 y C2 es 2 veces mejor que C3 entonces se espera que C1 sea 6 veces mejor que C3 Por supuesto, es necesario, cierto grado de consistencia en la fijacin de prioridades para los elementos o actividades con respecto de algn criterio para obtener resultados vlidos en el mundo real. El AHP mide la inconsistencia global de los juicios mediante la Proporcin de Consistencia, que es el resultado de la relacin entre el ndice de Consistencia y el ndice Aleatorio. El ndice de Consistencia es una medida de la desviacin de consistencia de la matriz de comparaciones a pares y el ndice Aleatorio es el ndice de consistencia de una matriz recproca aleatoria, con recprocos forzados, del mismo rango de escala de 1 hasta 9. El valor de esta proporcin de consistencia no debe superar el 10%, para que sea evidencia de un juicio informado. Esto depender del tamao de la matriz de comparacin a pares. Ejemplo: Clculo de la Relacin de Consistencia (RC) Se sigue con el mismo ejemplo que hemos ido resolviendo. En un principio habamos definido el problema como: A*w=*w. Sin embargo resolver la ecuacin anterior es bastante complejo. Saaty defini una nueva relacin que ofrece clculos mucho ms sencillos.

Max = V * B
Donde:

Max : es el mximo valor propio de la matriz de comparaciones a pares.


V: es el vector de prioridades o vectores propios, que ya obtuvimos, de la matriz de comparaciones. B: es una matriz fila, correspondiente a la suma de los elementos de cada columna de la matriz de comparaciones a pares. Es una matriz de mx1, donde m es el nmero de columnas de la matriz de comparaciones.

B = (7 3.5 1.75)
Reemplazando por los valores en la relacin definida y resolviendo, nos queda:

Max

0.142857 = (7 3.5 1.75) * 0.285714 0.571429

Max = 3
En este caso el mximo valor propio es igual al rango de la matriz de comparaciones. En caso donde pueda existir inconsistencia en los juicios el valor propio tiende a ser mayor. Con este resultado se puede calcular el ndice de Consistencia.

CI =

Max n
n 1
54

33 =0 2

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Para finalmente obtener la Relacin de Consistencia, necesitamos antes el ndice Aleatorio. Para este existe una tabla elaborada por Saaty que muestra los ndices de Consistencia para una serie de matrices aleatorias con recprocos forzados:
Cuadro 8

NDICES ALEATORIOS POR TAMAO DE MATRIZ


Tamao de la Matriz ndice Aleatorio 2 0 3 0,58 4 0,9 5 1,12 6 1,24 7 1,32 8 1,41 9 1,45 10 1,49

Fuente: Thomas Saaty, 1997. Toma de decisiones para lderes.

Entonces se define y resuelve la Relacin de Consistencia como:

RC =

CI 0 = =0 RI 0.58

Es evidencia de un juicio informado una Relacin de Consistencia menor a 0.1, por lo tanto no es necesario reevaluar los juicios expresados en la matriz de comparaciones. En caso contrario, si la Relacin de Consistencia fuera mayor, se hara necesario reevaluar los juicios. Esto significara que se vuelva a consultar a los expertos. Procedimiento para el anlisis jerrquico Para determinar la mejor decisin, el mtodo AHP requiere: 1. Definicin del problema: En esta etapa debe quedar claramente definido el objetivo general del proceso de decisin junto con los actores involucrados en l. Adems se debe entregar una descripcin del ambiente en que se desarrollar el estudio, sus caractersticas socio-econmicas, ambientales, culturales, etc. dependiendo de los parmetros afectados por los proyectos en cuestin. 2. Definicin de actores: Los participantes involucrados en el proceso de decisin, deben ser cuidadosamente seleccionados, ya que de estos depende la representatividad del resultado del modelo. 3. Estructurar el problema de decisin en un modelo de jerarqua (Jerarquizar): En esta etapa se debe construir una estructura jerrquica que involucre todos los aspectos de inters, para la jerarquizacin de las alternativas. 4. Identificacin de las alternativas factibles: Dentro de todas las posibilidades de proyectos alternativos se seleccionan aquellos que son factibles de realizar bajo un punto de vista de anlisis general, donde se consideran criterios tales como la factibilidad tcnica o econmica. 5. Construccin del modelo jerrquico: Se estructura el problema planteado en una jerarqua de criterios y alternativas. Para esto es necesario definir en una primera instancia los criterios estratgicos que participan en la decisin (Polticos, econmicos, sociales, medioambientales, etc.). Por lo general estos criterios son a nivel macro y representan los objetivos perseguidos por el proyecto. Una vez hecho esto, se procede a desglosar cada uno de los criterios definidos en la etapa anterior hasta llegar a un nivel de especificacin que permita un fcil anlisis y la comparacin de las alternativas. 6. Ingreso de los juicios: En base a la informacin obtenida o a la percepcin de los actores del proceso se ingresan los juicios para cada par de elementos. Se comienza del primer nivel, dnde se encuentran los criterios estratgicos, se compara su importancia relativa con respecto del logro del objetivo general, luego se desciende en los niveles jerrquicos, siempre realizando comparaciones de

55

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

a pares referidos al nivel inmediatamente superior, hasta llegar al ltimo nivel donde se encuentran las alternativas, las que son evaluadas en base a criterios tcnicos ms fciles de tratar. 7. Sntesis de los resultados: Como se explic en los prrafos anteriores, por medio de comparaciones entre pares de elementos con respecto a su nivel inmediatamente superior y, gracias a la propiedad de transitividad entre los elementos, es posible establecer un ranking de prioridades para las diferentes alternativas, ranking que, dependiendo de la problemtica, enfrentada representa la decisin a adoptar. 8. Validacin de la decisin: Para otorgar mayor confiabilidad a la decisin se debe establecer el rango de variacin del peso relativo de los criterios estratgicos que soporta la decisin sin cambiar de alternativa propuesta, para esto se realiza un anlisis de sensibilidad dnde se analizan diversos escenarios posibles, determinando los puntos de corte para el peso de cada uno de los criterios.
Figura 9

SNTESIS DEL MODELO.

Fuente: Arancibia, Sara y Contreras, Eduardo, 2006. Evaluacin Multricriterio. Presentacin

El Anlisis Jerrquico de Procesos integra aspectos cualitativos y cuantitativos en un proceso nico de decisin, en el que es posible incorporar simultneamente valores personales y pensamiento lgico en una nica estructura de anlisis. De este modo se puede convertir el proceso que ocurre naturalmente en nuestra mente en uno explcito, facilitando y promoviendo la toma de decisiones bajo escenarios multicriterios y con resultados ms objetivos y confiables. Ventajas de la Metodologa Esta metodologa es una herramienta de apoyo a la toma de decisiones que permite: Definir el problema que se desea resolver. Identificar los criterios discriminantes en la toma de decisiones. Trabajar con un equipo multidisciplinario. Estructurar los criterios y subcriterios en una jerarqua. Determinar la importancia de cada criterio en trminos de ponderadores y sintetizar toda esta informacin para tomar la mejor decisin. Llegar a un resultado en consenso.

56

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Parte II

57

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

7. Descripcin del proceso para la Evaluacin Multicriterio

El objetivo del presente captulo es definir una estructura que sirva de pauta metodolgica para la evaluacin multicriterio de proyectos. En este se especificarn los pasos necesarios y los cursos de accin frente a las dificultades que se presenten en la evaluacin. Se describe esta metodologa empleando ambos tipos de evaluaciones multicriterio que se presentaron en la ltima parte de la seccin anterior. El mtodo simple de estandarizacin, su caso especial y el AHP. Los pasos que se describirn a continuacin son vlidos tanto para casos de jerarquizacin como de priorizacin de proyectos en el rea de inversin pblica.

59

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 10

PROCESO DE UNA EVALUACIN MULTICRITERIO


Definir Grupo de Expertos

Seleccin de Criterios

Definir los Indicadores

3
Construccin de Prioridades
Criterio i Criterio j Criterio k

Esquema Jerrquico

Criterio i

Clculo de Ponderadores

Criterio j Criterio k

4 5

6
Anlisis de Indicadores
Indicador Cualitativo Alto Medio Alto Medio Medio Bajo Bajo Correlativo Numrico 5 4 3 2 1

Comprobar Consistencia

7 8

Estandarizacin Indicadores

9
Establecer Ranking

Anlisis de Sensibilidad

Clculo de los ndices

12

11

10

Fuente: rea de Polticas Presupuestarias y Gestin Pblica. ILPES.

Paso 1. Defina un grupo de expertos Si es posible establecer un equipo de expertos para la construccin del modelo, deber chequear los elementos que se mencionan a continuacin. Sin embargo depende de la envergadura de las iniciativas, las posibilidades de financiamiento y otros. Por lo tanto es posible que sea un grupo reducido de expertos. Establecimiento del equipo de trabajo. El mtodo multicriterio requiere de la construccin de un modelo que sirva para la evaluacin de los proyectos. Este modelo se realiza a partir del estudio de los objetivos relevantes. Por lo tanto es necesario que seleccione a un grupo de expertos que sepan identificarlas para la construccin del modelo de decisin. Caractersticas del equipo de trabajo Las personas que debe elegir para la construccin del modelo deben ser profesionales en el rea donde se realizar la intervencin. Con slidos conocimientos y experiencia en la elaboracin

60

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

de proyectos, con caractersticas de expertos en la materia. De preferencia personas que trabajen como expertos en la elaboracin y evaluacin de proyectos de inversin pblica. Entrevistas con los expertos Es necesario que defina las entrevistas con los expertos. Sera ideal que se pudieran organizar reuniones con todos en varias ocasiones, para que los resultados que se obtengan de ellos sean fruto del consenso. Sin embargo, es muy probable que se enfrente a dificultades para lograrlo, por lo tanto planifique las reuniones y procure un mecanismo que le permita facilitar el proceso de dialogo y acuerdo entre los expertos. Paso 2. Seleccin de criterios Identifique los criterios La identificacin de los criterios es relevantes para la evaluacin. Depender del nivel jerrquico donde se quiera implementar la iniciativa cules objetivos se deben considerar, ya sea de poltica, planes, programas y los del propio proyecto. Si estos no estn definidos previamente puede recurrir a lo siguiente para su eleccin: - Elija criterios que permitan recolectar la informacin necesaria para medir ex post factum. - Realice anlisis de los discursos de las autoridades relevantes. - Observe las necesidades de la gente. - Estudie los objetivos de las polticas.
Figura 11

IDENTIFICACIN DE LOS CRITERIOS


Necesidades de informacin ex post factum Objetivos de poltica Anlisis de los Discursos

Criterios
Necesidades de la gente Otros

Objetivos del proyecto

Fuente: rea de Polticas Presupuestarias y Gestin Pblica. ILPES.

Definir los criterios Defina con claridad los criterios que se aplicarn para la evaluacin. El significado que posea cada criterio es fundamental para, posteriormente, definir cules sern sus variables y sus indicadores.

61

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Nmero de criterios De preferencia, por motivos prcticos, no emplee un nmero elevado de criterios para la evaluacin. Si cuenta con el software adecuado, como el Expert Choice, la tarea se har ms sencilla. Sin embargo, por motivos de racionalidad es preferible no incluir ms de diez. Verificar los criterios Los criterios deben estar en correspondencia con los objetivos planteados por las distintas instituciones encargadas de ello en los diferentes estamentos jerrquicos. Por lo tanto, es fundamental que los criterios sean una herramienta para medir los aportes que las iniciativas propuestas hacen al logro de los objetivos del SNIP. Debe verificar la relacin causal entre los criterios y los objetivos especificados por esas instituciones. Paso 3. Especifique las variables e indicadores Una vez que se han identificado los criterios, necesita definir cmo sern medidos. Para la construccin de los indicadores que sern empleados, se requiere que los objetivos sean desglosados en variables que puedan ser medidas y evaluadas. Defina con claridad y con la mayor rigurosidad posible cules sern las variables que sern empleadas para medir los objetivos. A partir de las variables definidas, para los criterios, construya indicadores que los representen adecuadamente, ya sean estos objetivos institucionales, programticos o del proyecto. Paso 4. Esquema jerrquico Construya la jerarqua del problema Cuando se hayan definido los criterios, construya el esquema jerrquico del modelo. Es de gran utilidad para el ordenamiento de la racionalidad del proceso. Ordene los criterios por niveles, desde los ms generales hasta los ms especficos, estableciendo la jerarqua del problema: - Defina el foco, el problema que desea resolver. - Defina los criterios generales y los subcriterios para cada uno. - En el nivel inferior defina las alternativas disponibles.
Figura 12

JERARQUA DEL MODELO


Foco (Jerarquizacin o Priorizacin)

Criterio

Criterio

Criterio

Criterio

Subcriterios

Subcriterios

Subcriterios

Subcriterios

Alternativas o Proyectos Fuente: rea de Polticas Presupuestarias y Gestin Pblica. ILPES.

62

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Paso 5. Construccin de las prioridades Construya las matrices de comparaciones En este paso debe ingresar los juicios respecto de la importancia relativa de los criterios y sus subcriterios. Debe identificar cuales son sus posibilidades de establecer las relaciones de importancia entre ellos. a) Si no es posible establecer la importancia relativa de los criterios, de todos modos podr aplicar el multicriterio. Sin embargo, deber saltarse este paso. b) Si es capaz de determinar que un criterio es ms importante que otro, pero slo ordinalmente, utilice el mtodo de estandarizacin sencillo para completar la matriz de comparaciones con ceros y unos segn corresponda. c) Si es posible determinar grados de importancia relativa entre los criterios complete las matrices de comparaciones con la escala propuesta por el mtodo AHP. Si est trabajando con un grupo de personas o expertos, es posible que no logren llegar a un acuerdo respecto del grado de importancia relativa de los criterios. Resuelva este caso con el mtodo de agregacin a travs de la media geomtrica propuesta en la seccin 6.5 letra B.
Figura 13

CONSTRUCCIN DE LAS MATRICES DE COMPARACIONES


Criterio i Criterio i Criterio j Criterio k Criterio j Criterio k

Lo que ingrese aqu depender de las posibilidades para definir la importancia relativa de los criterios

Fuente: rea de Polticas Presupuestarias y Gestin Pblica. ILPES

Paso 6. Clculo de ponderadores A partir de los juicios expresados en las matrices de comparaciones calcule los ponderadores correspondientes a cada criterio. a) Para el caso en que no fue posible establecer la importancia relativa de los criterios asigne igual peso para todos ellos, calculado como la divisin de uno (1) por el nmero de criterios. As obtendr un ponderador igual para todos. b) Si utiliz el mtodo sencillo de estandarizacin realice el procedimiento indicado en la seccin 6.4 (Ejemplo: de priorizacin de proyectos, Matriz de juicios de importancia), para obtener los ponderadores. c) Si utiliz el procedimiento indicado por el mtodo AHP para completar la matriz de comparaciones debe calcular los ponderadores de la forma propuesta en 6.5, letra B (Ejemplo: Clculo de prioridades con el mtodo de aproximacin) Paso 7. Comprobar la consistencia En el caso que se est empleando el mtodo AHP deber verificar la consistencia de los juicios ingresados en las matrices de comparaciones. Si est empleando un software especializado, obtendr un resultado de la Relacin de Consistencia para cada matriz. Verifique que este sea inferior al 10%.

63

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

En el caso de que no se cuente con un software especializado, realice los procedimientos indicados en la seccin 6.5 (Letra C) para el clculo de la Relacin de Consistencia. De igual modo esta debe ser inferior al 10%. Si es que la Relacin de Consistencia para alguna de las matrices es superior al 10%, debe reingresar los juicios en la o las matrices que demuestren inconsistencia y volver a calcular los ponderadores y la Relacin de Consistencia hasta que sea menor a 10%. Paso 8. Anlisis de los indicadores Los indicadores de las iniciativas poseen diferentes caractersticas segn sea la variable que estn describiendo. El trato que se le de a esta informacin ser distinto segn el mtodo con el que se est trabajando. Por lo tanto es importante, que antes de empezar a trabajar con la informacin que posee para los indicadores, observan con detencin los datos para tener una idea de las posibilidades en este paso y el siguiente. Construccin de tablas La informacin cualitativa debe ser cuantificada para que sea aplicable a los mtodos (esto es vlido para los modelos que se estn explicando). Para esto debe construir tablas que permitan su homologacin numrica. En estas se deben establecer los grados del atributo y su correspondiente numrico. Es importante que la escala aplicada, que indica la cota superior, inferior y los valores intermedios, sea igual para todos los indicadores. La informacin cuantitativa de los indicadores proviene de diferentes medidas, y por lo tanto, de diferentes escalas que hacen imposible una comparacin objetiva entre ellas. Una de las formas posibles de hacerlas comprables, y es lo que se hace para el mtodo AHP, es clasificar la informacin de cada indicador en tablas que indiquen los diferentes grados de la caracterstica. Se debe crear una escala con valores mnimo, mximo e intermedios tales que agrupen todo el rango de valores del indicador cuantitativo. Para el mtodo AHP es importante que el rango de las escalas de las tablas, tanto cuantitativas como cualitativas, sea el mismo.
Figura 14

ANLISIS DE LOS INDICADORES


Indicador cualitativo Alto Medio alto Medio Medio bajo Bajo Correlativo numrico 5 4 3 2 1 Proyecto A B C D Indicador cualitativo Medio bajo Alto Medio Medio alto Correlativo numrico 2 5 3 4

Indicador cuantitativo 5-4 4-3 3-2 2-1 1-0

Indicador cualitativo Alto Medio alto Medio Medio bajo Bajo

Correlativo numrico 5 4 3 2 1

Proyecto A B C D

Indicador cuantitativo 3-2 1-0 5-4 2-1

Indicador cualitativo Medio Bajo Alto Medio bajo

Correlativo numrico 3 1 5 2

Fuente: rea de Polticas Presupuestarias y Gestin Pblica. ILPES.

64

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Paso 9. Estandarizacin de los indicadores Si se est trabajando con el mtodo sencillo de estandarizacin o con el caso en donde no fue posible establecer ningn tipo de importancia relativa entre los criterios, los indicadores deben ser estandarizados para su uso. Para hacer esto aplique el estadstico Z a todos los indicadores disponibles para la evaluacin, tanto cuantitativos como cualitativos. Si est empleando el mtodo AHP, en el paso 7 ya realiz la estandarizacin de la informacin a travs de la clasificacin en tablas. Paso 10. Clculo del ndice Calcule el ndice que sintetiza los indicadores de cada uno de los criterios y sus ponderaciones. En pasos anteriores ya defini un ponderador para todos los criterios que identific y estandariz los indicadores de esos criterios, por lo tanto ahora multiplique cada indicador normalizado por su correspondiente ponderador. Realice esto para cada una de las alternativas o proyectos que est evaluando. Paso 11. Establezca un ranking Ordene jerrquicamente los ndices calculados para cada alternativa o proyecto de mayor a menor. Seleccione o d preferencia a aquel que obtuvo el mayor valor en la evaluacin.
Figura 15

RANKING DE ALTERNATIVAS O PROYECTOS


Proyecto o alternativa A B C D ndice 3,27 3,98 2,99 3,52 Proyecto o alternativa B D A C ndice 3,98 3,52 3,27 2,99 Ranking 1 2 3 4

Fuente: rea de Polticas Presupuestarias y Gestin Pblica. ILPES.

Paso 12: Anlisis de Sensibilidad Realice anlisis del comportamiento del ranking establecido frente a cambios en las ponderaciones relativas de los principales criterios. Defina escenarios posibles y comprelos con el escenario actual de su evaluacin. Establezca bajo qu condiciones la priorizacin o jerarquizacin de los proyectos o alternativas evaluadas se mantiene.

65

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Parte III

67

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

8. Aplicaciones de Evaluacin Multicriterio

Los tres ejemplos que se presentan a continuacin se enmarcan en una iniciativa desarrollada en el Departamento de Ingeniera Industrial de la Universidad de Chile10 con el fin de sensibilizar a las instituciones pblicas sobre el uso de aplicaciones multicriterio en la evaluacin de proyectos de inversin pblica, a travs de trabajos de alumnos memoristas.

8.1 Ejemplo 1: seleccin de alternativas de proyectos de infraestructura educacional


A continuacin se desarrolla un caso de evaluacin donde se aplica al sector Educacin en Chile, la metodologa multicriterio propuesta por Saaty, Analytic Hierachy Process.11 Se incorpora la metodologa en dos instancias de decisin: la seleccin de alternativas de proyectos y la priorizacin de proyectos para infraestructura educacional. La seleccin de alternativas de proyectos, consiste en proporcionarles a los sostenedores de las iniciativas un mtodo que les permita evaluar y comparar las distintas alternativas de proyectos que generen para la superacin del problema individualizado.

10 11

Iniciativa de los docentes Sara Arancibia y Eduardo Contreras. Esta aplicacin fue realizada en la memoria de ttulo de Marcelo A. Mndez S., llamada Anlisis Multicriterio Discreto para la Formulacin y Priorizacin de Proyectos de Infraestructura Educacional

69

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

La priorizacin de proyectos se realiza una vez que los sostenedores educacionales hayan presentados los proyectos y que el Ministerio de Planificacin (MIDEPLAN) haya dado su recomendacin, los organismos encargados de administrar y repartir los fondos de inversin deben elegir los proyectos a financiar. En este caso se utiliza la metodologa multicriterio para la seleccin de los proyectos.

A.

Sistema institucional

El proceso de inversin comienza con la preparacin y envo, de parte de MIDEPLAN y de la Direccin de Presupuestos del Ministerio de Hacienda (DIPRES), del documento Procedimientos y Formularios para el Sistema de Estadsticas Bsicas de Inversin al SEBI. Con estas instrucciones las instituciones preparan los antecedentes para la presentacin de sus proyectos. Depender de los montos y la fuente de financiamientos a los que postules, los antecedentes sern enviados al MIDEPLAN o a sus secretarias regionales (SERPLAC), para que emitan una recomendacin tcnico-econmica. Una vez asesorados y revisados los proyectos y si obtienen una recomendacin tcnicoeconmica, son enviados a las instituciones de gobierno encargadas de decidir su ejecucin. Por el contrario si existen reparos en algn proyecto, este es devuelto a la institucin solicitante para su reformulacin.

B.

Inversin en educacin

La inversin en Educacin puede ser agrupada en tres categoras: proyectos, programas y estudios. Los proyectos son iniciativas en infraestructura educacional. Los programas, en cambio, son iniciativas cuyos resultados no son materiales tales como los proyectos de capacitacin. Y los estudios son investigaciones que requieren de una inversin menor. Las fuentes de los fondos de inversin para educacin provienen de fondos sectoriales y fondos regionales, pudiendo incluso conseguir financiamiento un proyecto con una mezcla de ambos. Los fondos sectoriales corresponden a los llamados que realiza anualmente el Ministerio de Educacin, en el marco de la Reforma Educacional, llamados Aportes de Capital para financiar proyectos de infraestructura para el logro de la Jordana Escolar Completa (JEC). Su funcionamiento es a nivel ministerial, regional o nacional, y est sujeta a las bases del concurso. Los fondos regionales corresponden al financiamiento que realiza el Fondo Nacional de Desarrollo Regional (FNDR) en cada regin del pas. Este fondo se divide en: FNDR tradicional y Provisiones del FNDR. FNDR tradicional son fondos libres destinados para inversin en infraestructura en educacin, salud y otros. Y los fondos que se denominan Provisiones del FNDR, son montos fijos determinados por la DIPRES para financiar proyectos en salud, servicios pblicos, emergencia y educacin. En el caso de educacin, el fondo es cubierto por el Fondo de Infraestructura Educacional (FIE). Estos fondos se encuentran alineados con las polticas de desarrollo regional especficos para cada zona. De este modo la decisin sobre la inversin est a cargo de los gobiernos regionales (GORE) y del concejo regional (CORE). Las pautas que se utilizan para la preparacin de proyectos de infraestructuras estn en el manual del ILPES Gua para la identificacin y formulacin de proyectos de educacin del ao 1994, el que fue revisado y modificado en conjunto con el MIDEPLAN al ao siguiente.

C.

Seleccin de alternativas de proyectos

Para aplicar la metodologa propuesta se eligi un proyecto presentado por la Ilustre Municipalidad de Bun a travs de la Unidad de Estudios y Proyectos de su Secretara Comunal de

70

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Planificacin (SECPLAC). Para el que se realiz una simulacin agregando una alternativa al proyecto de tal modo que pudiera realizarse la evaluacin. El ttulo del proyecto es: Ampliacin del Liceo Tcnico Profesional A-131. Comuna de Bun, provincia de Maipo.

D.

Definicin del problema

Seleccionar entre un par de alternativas la mejor, es decir, aquella que satisface de mejor manera el problema educacional identificado, que en este caso corresponde a: Dficit de Cobertura Educacional en la Comuna de Bun. Las causas del problema son: - Aumento de la poblacin en edad escolar de la comuna. - Infraestructura educacional insuficiente por desvo de fondos hacia la Jornada Escolar Completa, recortando los fondos para la absorcin del aumento de la demanda. Los efectos que genera: - Desercin escolar. Menores que deben abandonar la educacin por insuficiencia de matrcula. - Migracin de alumnos hacia otros establecimientos en otras comunas, provocando aumentos en los costos de movilizacin y una mayor congestin vial. Competencia por matrcula que genera problemas de desigualdad de oportunidades. Los medios: - Creacin de nuevas matrculas en la provincia para liberar matrculas en Bun. - Mejoramiento de la infraestructura actual, para el que se estudiarn las alternativas. Los fines: - Matrcula suficiente para los nios y jvenes de la comuna. - Desplazamiento controlado que disminuya la congestin vial y refuerce la identidad local. - Matrcula asegurada para la poblacin local. 1. Identificacin de los actores involucrados en el problema Se definen dos actores involucrados en el problema. Estn quienes modelan el problema de decisin y el agente que decide en base al modelo. El primero corresponde a los expertos en materia educacional quienes identificarn las variables que definen el problema y construirn el modelo segn AHP. Los expertos fueron: Pamela Vera (Analista del Sector Educacin, MIDEPLAN), Julia Standen (Analista del Sector Educacin, SERPLAC) y Hugo Bordoli (Analista y Evaluador de Educacin y Cultura, MINEDUC). El agente decisor es quien formula la iniciativa, evala las alternativas en base al modelo y elige la mejor alternativa para resolver el dficit identificado. Es el sostenedor de la iniciativa de inversin 2. Modelamiento jerrquico del problema de decisin Definir el foco del problema: seleccin de alternativas de proyecto de infraestructura educacional. Identificacin de los criterios de seleccin: luego de sucesivas reuniones de acordaron los criterios de seleccin y una escala discreta comn para todos los criterios, con el objeto de que los juicios del evaluador sean consistentes para la evaluacin de cada uno de ellos. La escala va de 1 a 71

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

5, donde para cada criterio se definieron los significados de los valores, 1 (mnimo), 3 (medio) y 5 (mximo); permitiendo que sea el propio formulador quin asigne los valores intermedios 2 y 4. A continuacin se detallan los criterios empleados: Criterio general: Objetivos Las alternativas de proyectos deben ser comparadas de acuerdo a los objetivos especficos planteadas por cada una de ellas, se asume que las alternativas comparten su objetivo general, porque provienen de la identificacin de un mismo dficit. Se compararn segn los siguientes atributos: Pertinencia: Es el grado en que la alternativa resuelve mejor el dficit identificado. Debe evaluarse qu tan directamente relacionados estn los objetivos especficos de cada alternativa con las causas ltimas del problema identificado. Escala de evaluacin:
5 3 1 Los objetivos especficos declarados atacan directamente las causas ltimas del problema. No existe una clara relacin entre los objetivos especficos de la alternativa y las races del problema identificadas en el rbol de objetivos. La definicin de los objetivos especficos de la alternativa no guarda ninguna relacin con las causas ltimas del problema identificado.

Alcance: Es el grado en que la alternativa planteada es capaz de contribuir como una solucin de largo plazo. Deben evaluarse las alternativas procurando que sean una solucin de largo plazo.
La estrategia a seguir sealada por los objetivos especficos de la alternativa contempla todos los aspectos necesarios para garantizar su permanencia en el tiempo, permitiendo resolver el problema de manera profunda y permanente. Se espera que la alternativa represente una buena solucin al dficit encontrado para el mediano plazo. La solucin propuesta por los objetivos especficos de la alternativa slo permite cubrir el dficit por un perodo corto de tiempo. La alternativa puede calificarse en este punto como una "solucin parche".

5 3 1

Criterio general: Contenidos Las alternativas de proyectos deben compararse segn sean relevantes los contenidos de sus caractersticas. Las caractersticas consideradas son: Calidad: Es la medida en que la alternativa es capaz de ofrecer una solucin integral, como proyecto educativo, al dficit y no tan solo de infraestructura.
La alternativa representa una solucin de fondo que la transforma en un proyecto educativo potente, en el que las acciones propuestas en infraestructura constituyen slo un medio para enfrentar el dficit identificado. La alternativa se hace cargo del problema detectado mediante sus acciones en infraestructura, las que eventualmente podran influir en un mejoramiento de la calidad de la educacin recibida por los beneficiarios del proyecto. La alternativa slo propone una solucin en infraestructura para el problema detectado, sin preocuparse de generar mayores efectos en la calidad de la educacin que los beneficiarios recibirn.

72

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Conexin con otras iniciativas: Es el grado en que la iniciativa se conecta con otras iniciativas sociales.
La alternativa resulta un complemento perfecto para la implementacin de iniciativas paralelas, potenciando enormemente su efecto como un proyecto social y no puramente educativo. Existe cierto grado de conexin con otros proyectos de tipo social, pero la alternativa se preocupa principalmente de atacar el problema educacional. La alternativa aparece como completamente aislada de otras iniciativas sociales, abordando exclusivamente el dficit educacional identificado.

5 3 1

Ajuste a polticas: Es el grado de coherencia de la alternativa con las directrices y polticas de desarrollo regional como con las polticas definidas para el rea de educacin.
5 3 1 La alternativa se inserta dentro de las polticas sealadas para el desarrollo de la regin y del sector educacin. La alternativa satisface medianamente las intenciones expuestas en las polticas regionales y sectoriales en que debe enmarcarse. Existe un claro desajuste entre la alternativa propuesta y los requerimientos polticos del sector y la regin. La alternativa puede presentar una buena solucin al problema identificado, y sin embargo no ajustarse de los objetivos sectoriales y/o regionales.

Criterio general: Gestin Las alternativas de proyecto deben compararse de acuerdo a sus posibilidades de gestin, en el caso de que fueran a convertirse en proyectos. Deben ser considerados los siguientes atributos: Factibilidad tcnica: Es el grado en que la alternativa propuesta puede realizarse desde el punto de vista tcnico.
La alternativa no representa ninguna dificultad tcnica para su eventual implementacin. Los requerimientos para el diseo, ejecucin y operacin de la alternativa son conocidos y sin mayor complejidad tcnica. Existen algunos requerimientos tcnicos que podran implicar dificultades, retrasos o deficiencias en la entrega del servicio educacional propuesto por la alternativa. Se prev la aparicin de problemas tcnicos importantes en la eventual implementacin de la alternativa, que representan una clara amenaza para el xito del proyecto.

5 3 1

Factibilidad financiera: Es el grado en que la alternativa es ejecutable desde el punto de vista de los recursos que son requeridos para ella. Deben evaluarse las posibilidades concretas de financiamiento que se estiman necesarias para llevarla a cabo. Se considerarn en forma independiente las etapas de inversin y operacin.
No existen problemas respecto a la factibilidad de financiamiento de la alternativa. Los recursos que ella requiere son abordables y guardan relacin con las caractersticas del proyecto. Los recursos necesarios para la implementacin de la alternativa son algo restrictivos, an siendo coherentes con las caractersticas de ella. La alternativa presenta serios problemas en sus posibilidades de financiamiento. Los montos requeridos por la alternativa son demasiado altos con relacin a sus caractersticas.

5 3 1

73

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Administracin: Las alternativas deben ser evaluadas respecto a la calidad esperada de su administracin, tales como su coherencia con el proyecto educativo, apoyo institucional, etc. este criterio debe ser evaluado tanto para la etapa de inversin como de operacin, considerando las caractersticas de la unidad tcnica a cargo de la administracin.
Hay un alto grado de innovacin en la administracin de la iniciativa, sin requerir costos adicionales para ello. Existe adems un apoyo institucional slido que permite garantizar una ptima administracin del proyecto. La administracin de la iniciativa no es del todo consistente con el proyecto educacional que hay tras ella. Es posible que la administracin del proyecto se realice mal o con serias deficiencias. No existe un nivel mnimo de calidad esperada en la administracin del proyecto. No hay un grado de coherencia aceptable entre el proyecto educacional propuesto y su administracin, as como tampoco el respaldo de alguna institucin que avale el xito en la gestin del proyecto.

E.

Seleccin de las alternativas factibles

Ampliacin del Liceo industrial existente Se propone la ubicacin de la matrcula demandante en una ampliacin del anexo del Liceo A-131 de Educacin Tcnica Profesional, el que actualmente funciona en un terreno de ms de 12.000 mts2, con 24 salas de clases y 5.000 mts2 libres. Esta solucin resolvera parte del dficit de educacin media y tcnica profesional, al contemplar la construccin de 16 nuevas salas con una capacidad total de 720 alumnos. Costos de Inversin Costos Operacionales = $611.055.000 = $393.800.000

Costo Anual Equivalente (CAE) = $383.151,67 N de Beneficiarios = 720 alumnos CAE / N de Beneficiarios = $532,16 Construccin de nuevo liceo en Bun. Se propone la construccin de un nuevo establecimiento que integre matrcula para Enseanza Bsica y Media, el que se localizara en terrenos destinados para equipamiento, con una superficie de 4.500 mts2. Entre las dependencias del establecimiento se contara con 28 salas de clases y espacios para talleres, laboratorios, cocina, comedor y una multicancha, distribuidas en un edificio de 3 pisos con una capacidad total de 1.350 alumnos. Costos de Inversin Costos Operacionales = $1.305.251.200 = $366.000.000

Costo Anual Equivalente (CAE) = $943.424,08 N de Beneficiarios = 1.350 alumnos CAE / N de Beneficiarios = $698,83 Construccin del modelo jerrquico Una vez identificado el dficit, los criterios y las alternativas factibles, se puede construir la jerarqua del problema de decisin.

74

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 16

ESTRUCTURA PARA SELECCIN DE ALTERNATIVAS


Seleccin de Alternativas de Proyectos de Infraestructura Educacional

Objetivos

Contenidos

Gestin

Pertinencia Alcance

Calidad Conexin con Otras Iniciativas Ajuste a Polticas

Factibilidad Tcnica Factibilidad Financiera - Inversin - Operacin Administracin - Inversin - Operacin

Alternativas de Proyectos de Infraestructura Educacional

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

F.

Determinacin de los ponderadores

Los expertos emitieron juicios sobre la importancia relativa de los criterios y subcriterios y se establecieron comparaciones pareadas. Los resultados se obtuvieron con el software Expert Choice. Ponderadores a nivel de criterios generales (primer nivel). Se les pregunt a los expertos: qu tanto ms importantes son sus objetivos especficos antes que su contenido?
Cuadro 9

MATRIZ DE COMPARACIN DE CRITERIOS GENERALES (EDUCACIN)


Seleccin de Alternativas de Proyectos Objetivos Contenidos Gestin Objetivos 1 1/3 1/3 Contenidos 3 1 2 Gestin 3 1/2 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

C.R. = 0.05 = 5% < 10% ; Vector Propio = (0.594 ; 0.157 ; 0.249) Por lo tanto las preferencias por cada criterio general con relacin a la importancia que ellos deben tener en la evaluacin y luego en la seleccin de las alternativas es de la siguiente forma: Objetivos (59.4%), Contenidos (15.7%) y Gestin (24.9%).

75

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Ponderacin a nivel de criterios especficos (segundo nivel) Se les pregunt a los expertos: Entre los atributos que se ha estimado deben evaluarse dentro de los objetivos especficos de la alternativa de proyecto, cunto ms importante debe ser la pertinencia de estos frente a su alcance? Para el criterio general Objetivos, se obtuvieron las siguientes ponderaciones:\
Cuadro 10

MATRIZ DE COMPARACIN DE CRITERIOS ESPECFICOS (EDUCACIN)


Objetivos Pertinencia Alcance Pertinencia 1 1/4 Alcance 4 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

C.R. = 0.00 = 0% < 10% ; Vector Propio = (0.800 ; 0.200) El objetivo especfico Pertinencia tiene un peso relativo de un 80% y Alcance un 20%. Para el criterio general Contenidos, se obtuvieron las siguientes ponderaciones:
Cuadro 11

PONDERACIN DE SUBCRITERIOS DE CONTENIDOS (EDUCACIN)


Contenidos Calidad Conexin con otras iniciativas Ajuste a Polticas Calidad 1 1/5 1/3 Conexin con otras iniciativas 5 1 4 Ajuste a polticas 3 1/4 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

C.R. = 0.08 = 8% < 10% ; Vector Propio = (0.627 ; 0.094 ; 0.280) Calidad posee una ponderacin de 62.7%, Conexin con otras alternativas un 9.4% y Ajuste a polticas un 28%. Para el criterio general Gestin las ponderaciones fueron:
Cuadro 12

PONDERACIN DE SUBCRITERIOS DE GESTIN (EDUCACIN)


Gestin Factibilidad Tcnica Factibilidad Financiera Administracin Factibilidad Tcnica 1 1/1 1/2 Factibilidad Financiera 1 1 1/2 Administracin 2 2 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

C.R. = 0.00 = 0% < 10%;Vector Propio = (0.400 ; 0.400 ; 0.200) Esto significa que Factibilidad tcnica junto a Factibilidad financiera obtuvieron, cada una, un 40% y Administracin un 20%. Adems los expertos asignaron igual ponderacin a Inversin y Operacin, tanto para el subcriterio Factibilidad financiera como para como Administracin. Por lo tanto cada uno de ellos representa un 50% en su respectivo criterio general.

76

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

A continuacin se establecen las ponderaciones globales:


Cuadro 13

PONDERACIONES GLOBALES DE SUBCRITERIOS (EDUCACIN)


Criterio Especfico Pertinencia Alcance Factibilidad Tcnica Factibilidad Financiera Calidad Administracin Ajuste a Polticas Conexin con otras iniciativas Ponderador Local 0,800 0,200 0,400 0,400 0,627 0,200 0,280 0,094 Ponderador del elemento que lo contiene 0,594 0,594 0,249 0,249 0,157 0,249 0,157 0,157 Ponderador Global a 0,475 0,119 0,100 0,100 0,098 0,050 0,044 0,015 % 47,5 11,9 10,0 10,0 9,8 5,0 4,4 1,5

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.


a

Para estimar el ponderador hay que considerar lo siguiente (Ponderador Global = Ponderador Local x Ponderador del elemento que lo contiene)

Finalmente se presenta el modelo para la seleccin de la alternativa:


Figura 17

MODELO FINAL PARA LA SELECCIN DE ALTERNATIVAS (EDUCACIN)


Seleccin de Alternativas de Proyectos de Infraestructura Educacional

Objetivos (L=0.594 ; G=0.594)

Contenidos (L=0.157 ; G=0.157)

Gestin (L=0.249 ; G=0.249)

Pertinencia (L=0.800 ; G=0.475) Alcance (L=0.200 ; G=0.119)

Calidad (L=0.627 ; G=0.098) Conexin con Otras Iniciativas (L=0.094 ; G=0.015) Ajuste a Polticas (L=0.280 ; G=0.044)

Factibilidad Tcnica (L=0.400 ; G=0.100) Factibilidad Financiera. (L=0.400 ; G=0.100) - Inversin (L=0.500 ; G=0.050) - Operacin (L=0.500 ; G=0.050) Administracin (L=0.200 ; G=0.050) - Inversin (L=0.500 ; G=0.025) - Operacin (L=0.500 ; G=0.025)

Alternativas de Proyectos de Infraestructura Educacional

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. Nota: L=ponderador local G=ponderador global.

77

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

G.

Ingreso de los juicios

El sostenedor de la iniciativa, a partir de la escala elaborada, es capaz de expresar los juicios que posee sobre los criterios enumerados y traspasar esa informacin a un indicador cuantitativo para su uso. Realiza esto para cada alternativa. Alternativa A: Ampliacin del Liceo Industrial existente. Criterio general: Objetivos Pertinencia: La alternativa ataca directamente los problemas de creacin de nuevas matrculas y mejoramiento de la infraestructura existente. Nota = 5 Alcance: El nmero limitado de matrculas que se crean con la implementacin de la alternativa y el crecimiento esperado de la poblacin por creacin de nuevas viviendas, permiten suponer que sta representa una buena solucin al dficit identificado slo para el mediano plazo. Nota = 3 Criterio General: Contenidos Calidad: La alternativa no se vislumbra como un proyecto slido que se preocupe por la calidad de la educacin que recibirn los beneficiarios, concentrndose exclusivamente en la provisin de un servicio para una demanda insatisfecha. Nota = 2 Conexin con otras iniciativas: La alternativa resulta un buen complemento para el crecimiento progresivo de la poblacin urbana en la comuna, creando la necesidad de proveer servicios esenciales como la educacin. Nota = 5 Ajuste a Polticas: la alternativa no apunta a satisfacer la implementacin de la Jornada Escolar Completa (JEC) requerida por la Poltica Nacional de Educacin, concentrndose en un dficit educacional real, pero desajustado con las polticas del sector y la regin. Nota = 1 Criterio General: Gestin Factibilidad Tcnica: La construccin de 16 nuevas salas de clases no contempla ninguna dificultad tcnica. Nota = 5 Factibilidad Financiera: Inversin: las cifras detalladas por la alternativa son coherentes con sus caractersticas y se encuentran alrededor del promedio de los costos de inversin para proyectos similares. Nota = 5 Operacin: justificacin anloga a la anterior. Nota = 5 Administracin: Inversin: la unidad tcnica a cargo de la administracin pertenece a la propia Municipalidad de Buin, lo que si bien no garantiza deficiencias en ella, tampoco asegura una ptima gestin del proyecto. Nota = 4 Operacin: justificacin anloga a la anterior. Nota = 4

78

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Alternativa B: Construccin de nuevo liceo en Buin. Criterio General: Objetivos Pertinencia: La alternativa ataca directamente los problemas de creacin de nuevas matrculas y mejoramiento de la infraestructura existente. Nota = 5 Alcance: La construccin de un nuevo liceo y las futuras opciones de crecimiento de la oferta que eso implica presentan a la alternativa como una buena solucin para el largo plazo. Nota = 5 Criterio General: Contenidos Calidad: De acuerdo a sus caractersticas, esta alternativa se estima como un proyecto educativo eventualmente importante, al considerar la construccin de laboratorios, talleres y una multicancha. Sin embargo, la sola incorporacin de estos espacios no asegura una implementacin de calidad para el uso correcto de ellos. Nota = 3 Conexin con otras iniciativas: La alternativa resulta un buen complemento para el crecimiento progresivo de la poblacin urbana en la comuna, creando la necesidad de proveer servicios esenciales como la educacin. Nota = 5 Ajuste a Polticas: La alternativa no apunta a satisfacer la implementacin de la Jornada Escolar Completa (JEC) requerida por la Poltica Nacional de Educacin, concentrndose en un dficit educacional real, pero desajustado con las polticas del sector y la regin. Nota = 1 Criterio General: Gestin Factibilidad Tcnica: Existe un nivel de exigencia tcnica mayor para la construccin de laboratorios y otros espacios para actividades especficas, lo que podra complicar la ptima entrega del servicio que pretende ofrecerse. Nota = 3 Factibilidad Financiera: Inversin: las cifras detalladas por la alternativa son coherentes con sus caractersticas y se encuentran alrededor del promedio de los costos de inversin para proyectos similares. Nota = 5 Operacin: justificacin anloga a la anterior. Nota = 5 Administracin: Inversin: la unidad tcnica a cargo de la administracin pertenece a la propia Municipalidad de Buin, lo que si bien no garantiza deficiencias en ella, tampoco asegura una ptima gestin del proyecto. Nota = 4 Operacin: justificacin anloga a la anterior, con especial nfasis en el hecho de que esta alternativa plantea la construccin de un nuevo establecimiento, cuya administracin operativa es una actividad de responsabilidad considerable. Nota = 3

H.

Sntesis de los resultados

En este momento ya se est en condiciones de establecer una calificacin para cada alternativa de proyecto. El siguiente cuadro muestra la nota final de cada alternativa. 79

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Cuadro 14

COMPARACIN DE ALTERNATIVAS (EDUCACIN).


Nota Alternativa A Alternativa B Pertinencia 5 5 Alcance 3 5 Calidad 2 3 Conexin con otras iniciativas 5 5 Ajuste a Polticas 1 1 Factibilidad Tcnica 5 3 Factibilidad Financiera Inversin 5 5 Operacin 5 5 Administracin Inversin 4 4 Operacin 4 3 Criterios Ponderador Global 0,475 0,119 0,098 0,015 0,044 0,100 0,050 0,050 0,025 0,025 Nota Final (P) Ponderacin Alternativa A Alternativa B 2,375 2,375 0,357 0,595 0,196 0,294 0,075 0,075 0,044 0,044 0,500 0,300 0,250 0,250 0,100 0,100 4,247 0,250 0,250 0,100 0,075 4,358

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

Eleccin de la alternativa Hasta este momento no se han considerado los costos como criterio de decisin. MIDEPLAN solicita a los sostenedores de inversin en infraestructura educacional que informe el indicador: Costo anual equivalente por beneficiario (CAE/Beneficiarios) y que se seleccione aquella alternativa que tenga el menor. Sin embargo, para efectos de este trabajo, se propone un indicador que integre los juicios obtenidos y los requisitos de costos que exige el MIDEPLAN. El ndice para Seleccin de Alternativas de Proyectos (ISAP) es un ndice que relaciona el Costo Anual Equivalente por beneficiario con el puntaje (P) obtenido por el proceso AHP. ISAP se define:

CAE ndice para Seleccin de Alternativ as de Proyectos(ISAP) =

Num.deBeneficiarios P

El criterio de seleccin ser elegir a aquel proyecto que presente un menor ISAP. De este modo se cumple que: resultar un menor ISAP en la medida que el puntaje sea mayor y/o que el costo anual equivalente por beneficiario sea menor. Por lo tanto si se calcula el ISAP para cada alternativa se obtiene los siguientes resultados:

532.16 = 125.3 4.247 698.83 ISAP(Alternati va NuevoLiceo)= = 160.4 4.358 ISAP(Alternati va Ampliacin Liceo)=
La alternativa de Ampliacin Liceo es la que presenta un ISAP menor, por lo tanto ser la alternativa elegida para presentar como proyecto.

I.

Priorizacin de proyectos sector educacin

Se simular el proceso de priorizacin que deben realizar los integrantes del Concejo Regional de la regin Metropolitana, quienes deben asignar recursos a proyectos recomendados por el MIDEPLAN.

80

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

1. Identificacin de los actores involucrados en el problema El agente involucrado en la etapa de priorizacin y decisin de ejecucin de los proyectos que fueron recomendados por el MIDEPLAN es el CORE (Concejo Regional) de la Regin Metropolitana. En este caso quienes modelarn el problema de priorizacin son quienes usaran el mismo para tomar su decisin. En la construccin del modelo participaron: Pedro Ponce, Fernando Prez y Claudio Bustamante 2. Definicin del problema El problema consiste en la priorizacin de proyectos de infraestructura educacional. Modelamiento jerrquico del problema de decisin En base a entrevistas individuales con cinco integrantes de la Comisin de Educacin, Cultura y Deportes del CORE (correspondiente a una representacin de un 56% de este y un 19% de la totalidad del Concejo Regional). Debido a la gran cantidad de alternativas, que hacen inviable la comparacin pareada entre ellas, se aplica una subdivisin de cada criterio por niveles de intensidad. De este modo hay tres niveles de comparaciones: por Grupos de Criterios, por Criterios de cada grupo y por Niveles de intensidad de cada criterio. Se identificaron los siguientes criterios y subdivisiones: a) Criterios Polticos-Emocionales. Se refiere a los sentimientos de compromiso ideolgico adquiridos por los concejeros, independiente de las caractersticas de los proyectos y de las comunas donde se pretenden realizar. Compensacin por partido poltico: Se relaciona con la preferencia manifiesta de los concejeros del CORE hacia proyectos presentados en los municipios donde ejercen alcaldes de su mismo partido o coalicin. Dada la existencia de dos grandes coaliciones, Alianza y Concertacin, se asignarn las ponderaciones a travs del cuociente entre los casos favorables para cada uno respecto del total de proyectos. Representacin provincial: Se refiere a la preferencia manifiesta de los concejeros hacia las comunas a las que ellos pertenecen. Se descompondr en las seis comunas de la regin Metropolitana y las ponderaciones sern asignadas segn la probabilidad de que un proyecto, respecto del total, beneficie a esa comuna. Adjudicacin histrica de proyectos: Se refiere a una discriminacin positiva o negativa, dependiendo si en el periodo pasado determinada comuna fue beneficiada o no. Para la subdivisin se us el monto per capita asignado por el FNDR para las comunas de la regin Metropolitana durante el periodo 1999-2001. Los niveles de intensidad son los siguientes:
Cuadro 15

ASIGNACIN DE CATEGORA POR MONTO


Nivel de Intensidad Alta Media Baja Nula Monto asignado ($ per capita) Ms de 20.000 Entre 4.000 y 20.000 Menos de 4.000 Sin asignacin en el perodo

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

81

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

b) Criterios Socios-Demogrficos. Se refiere a las caractersticas particulares de cada comuna donde se presentan los proyectos. Nivel de pobreza: Se busca favorecer las comunas ms pobres. Se incluyen en este otros criterios como: ruralidad, dficit de establecimientos con JEC, desercin escolar, etc. Usando informacin de la encuesta CASEN (Caracterizacin Socio-Econmica Nacional) se determin el porcentaje de la poblacin comunal que se encuentra en situacin de pobreza (incluye poblacin indigente y no indigente), para realizar las subdivisiones.
Cuadro 16

ASIGNACIN DE CATEGORA POR POBREZA


Nivel de Intensidad Muy Alto Alto Medio Bajo Muy Bajo Poblacin en situacin de pobreza (%) Ms de 25 Entre 18% y 25 Entre 11% y 18 Entre 5% y 11 Menos de 5

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

Densidad poblacional: Se busca beneficiar a comunas con una mayor densidad poblacional, para que sus estudiantes no deban recurrir a otras comunas. La densidad poblacional se calcul a partir del Censo de Poblacin y Vivienda del ao 2002, como la cantidad de habitantes por metro cuadrado. A partir de esto se obtuvo la siguiente tabla de intensidades:
Cuadro 17

ASIGNACIN POR DENSIDAD POBLACIONAL


Nivel de Intensidad Muy Alta Alta Media Baja Muy Baja Densidad Poblacional (hab/km2) Ms de 10.000 Entre 8.001 y 10.000 Entre 4.001 y 8.000 Entre 1.000 y 4.000 Menos de 1.000

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

Crecimiento demogrfico: Se busca cubrir el dficit en comunas donde el crecimiento poblacional ha sido mayor o donde se espera que lo sea. Se emple la tasa de crecimiento12 de la poblacin para el periodo 2000-2005, y a partir de el se estableci la siguiente tabla.

12

La tasa de crecimiento se obtuvo con la siguiente formula: Tasa media de crecimiento anual = ln( Poblacint = 2 / Poblacint =1 ) * 100 n

82

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Cuadro 18

ASIGNACIN POR CRECIMIENTO


Nivel de Intensidad Muy Alto Alto Medio Bajo Negativo Tasa media de crecimiento anual (%) 2,7 a 4,6 2,0 a 2,6 1,3 a 1,9 0,0 a 1,2 -1,8 a -0,1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

c) Criterios orientados al proyecto. Se refiere a caractersticas especficas del proyecto, sin importar la comuna de origen. Grado de urgencia del proyecto: Se aplica una discriminacin positiva a aquellos proyectos que apuntan a satisfacer una necesidad de mayor gravedad. Se distinguen tres niveles de intensidad:
Cuadro 19

ASIGNACIN POR URGENCIA


Nivel de Intensidad Urgencia del Establecimiento La carencia educacional detectada es de la mayor urgencia. Existe un importante nmero de alumnos no atendidos por el sistema o, si se trata de una iniciativa de reparacin, el establecimiento presenta una situacin catastrfica de su infraestructura, impidiendo la entrega del servicio educacional en condiciones mnimas y poniendo en serio peligro la integridad fsica de sus alumnos. El dficit identificado afecta a parte importante de la poblacin objetivo. Si ya hay un establecimiento foco del problema, ste tiene un fuerte deterioro de su infraestructura, que constituye un riesgo permanente para la comunidad escolar. No existe una urgencia considerable para la implementacin del proyecto. Si el problema se encuentra en un establecimiento ya existente, la infraestructura de ste presenta deficiencias importantes, que sin embargo pueden ser soportadas en el corto plazo con alguna solucin momentnea.

Mximo

Alto

Medio

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

Es importante recordar que los proyectos que sern evaluados por las categoras antes mencionadas ya fueron evaluados por el MIDEPLAN, quin ya realiz su recomendacin tcnicoeconmica. Por lo tanto repetir estudios de costos y otros no se hace necesario.

83

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Construccin del modelo jerrquico


Figura 18

MODELO JERRQUICO PARA PRIORIZACIN DE INFRAESTRUCTURA (EDUCACIN)


Priorizacin de Proyectos de Infraestructura Educacional

Criterios PolticoEmocionales

Criterios SocioDemogrficos

Criterios orientados al proyecto

Compensacin por partido poltico - Concertacin - Alianza por Chile Representacin provincial - Santiago - Cordillera - Chacabuco - Maipo - Melipilla - Talagante Adjudicacin histrica de proyectos Alta Media Baja Nula

Nivel de Pobreza Muy Alto Alto Medio Bajo Densidad Poblacional Muy Alta Alta Media Baja Muy Baja Crecimiento Demogrfico Muy Alto Alto Medio Bajo Negativo

Grado de Urgencia del Proyecto - Mximo - Alto - Medio

Proyectos de Infraestructura Educacional

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

J.

Proyectos a priorizar

Se seleccionaron 10 proyectos de un total 91 para la Regin Metropolitana, segn los que fueron preseleccionados por el Ministerio de Educacin para el Quinto Concurso Pblico de Aporte de Capital.
Cuadro 20

RANKING DE PROYECTOS
Ranking 5 9 14 24 42 96 120 194 257 349 Comuna San Joaqun Independencia La Florida Curacav Cerro Navia Puente Alto Talagante La Florida La Granja Maip Nombre del Establecimiento Centro Educacional Municipal San Joaqun N 484 Liceo Presidente Balmaceda Colegio Las Araucarias Escuela D-429 Valle de Puangue Complejo Educacional Cerro Navia Liceo Industrial Puente Alto Escuela Bsica Particular N 13 Colegio Nacional Escuela Oscar Castro Escuela Particular N 75 Claudio Matte Colegio Madre de Jess

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

84

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

K.

Determinacin de los ponderadores

Ponderadores a nivel de Grupos de Criterios: A los expertos se les pregunt: "qu tanto ms importantes son los criterios polticoemocionales que los criterios socio-demogrficos, al momento de priorizar proyectos de infraestructura educacional?". Las respuestas se traducen en la siguiente tabla:
Cuadro 21

MATRIZ DE COMPARACIN (PRIORIZACIN DE PROYECTOS)


Priorizacin de Proyectos Criterios Poltico-Emocionales Criterios Socio-Demogrficos Criterios orientados al proyecto Criterios Poltico-Emocionales 1 1/ 4,22 1/ 2,76 Criterios Socio-Demogrficos 4,22 a 1 1/ 1,06 Criterios orientados al proyecto 2,76 1,06 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.02 = 2% < 10% ; Vector Propio = (0.631 ; 0.175 ; 0.194)
a Cuando los juicios no pueden concordar, Saaty propone una manera de integrarlos eficientemente: A = 3 a1ij * a 2 ij * a 3ij
ij

Esto significa que los grupos de criterios Poltico-Emocionales tienen un peso de 63.1%, los Socio-Demogrficos de 17.5% y los criterios orientados al proyecto un 19.4%. Ponderadores a nivel de Criterios: Se comparan a pares los subcriterios que estn dentro de una misma categora.
Cuadro 22

MATRIZ DE COMPARACIN PARA CRITERIOS POLTICOS-EMOCIONALES


Criterios Compensacin por Partido Poltico Poltico-Emocionales Compensacin por Partido Poltico 1 Representacin Provincial 1/ 1.19 Adjudicacin Histrica de Proyectos 1/ 2.27 Representacin Provincial 1.19 1 1/ 3.04 Adjudicacin Histrica de Proyectos 2.27 3.04 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.02 = 2% < 10%; Vector Propio = (0.424 ; 0.416 ; 0.160)

El subcriterio Compensacin por Partido Poltico es el que tiene la mayor importancia, seguido de cerca por Representacin Provincial. Criterios Socio-Demogrficos:
Cuadro 23

MATRIZ DE COMPARACIN PARA CRITERIOS SOCIO-DEMOGRFICOS


Criterios Socio-Demogrficos Nivel de Pobreza Densidad Poblacional Crecimiento Demogrfico Nivel de Pobreza 1 1/ 2,92 1/ 4,22 Densidad Poblacional 2,92 1 1/ 2,29 Crecimiento Demogrfico 4,22 2,29 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.02 = 2% < 10%; Vector Propio = (0.624 ; 0.249 ; 0.127)

85

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Ponderaciones a nivel de Intensidad de Criterios: Se comparan por pares los niveles de intensidad por subcriterio.
-

Compensacin por Partido Poltico: se calcularon como la probabilidad de ocurrencia para cada partido. Concertacin = 14/26 = 0.538 = 53,8% Alianza por Chile = 12/26 = 0.462 = 46,2%

Representacin Provincial: de igual forma que el anterior. Santiago = 16/26 = 0.615 = 61,5% Cordillera = 2/26 = 0.077 = 7,7% Chacabuco = 2/26 = 0.077 = 7,7% Maipo = 2/26 = 0.077 = 7,7% Melipilla = 2/26 = 0.077 = 7,7% Talagante = 2/26 = 0.077 = 7,7%

Adjudicacin Histrica de proyectos:


Cuadro 24

MATRIZ DE COMPARACIN (ADJUDICACIN HISTRICA)


Adjudicacin Histrica de Proyectos Nula Baja Media Alta Nula 1 1/ 1,26 1/ 2,47 1/ 3,27 Baja 1,26 1 1/ 2,47 1/ 3,27 Media 2,47 2,47 1 1/ 1,59 Alta 3,27 3,27 1,59 1

Fuente: Trabajo sobre priorizacin de proyectos. C.R. = 0.00 = 0% < 10%; Vector Propio = (0.390 ; 0.347 ; 0.156 ; 0.107)

Nivel de Pobreza:
Cuadro 25

MATRIZ DE COMPARACIN (NIVEL DE POBREZA)


Nivel de Pobreza Muy Alto Alto Medio Bajo Muy Alto 1 1/ 20.8 1/ 4.22 1/ 4.72 Alto 2.08 1 1/ 2.15 1/ 2.41 Medio 4.22 2.15 1 1/ 1.26 Bajo 4.72 2.41 1.26 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.00 = 0% < 10%; Vector Propio = (0.516 ; 0.255 ; 0.124 ; 0.105)

Densidad Poblacional:
Cuadro 26

MATRIZ DE COMPARACIN (DENSIDAD POBLACIONAL)


Densidad Poblacional Muy Alta Alta Media Baja Muy Baja Muy Alta 1 1/ 1,71 1/ 2,47 1/ 2,47 1/ 2,47 Alta 1,71 1 1/ 1,44 1/ 1,44 1/ 1,44 Media 2,47 1,44 1 1/1 1/1 Baja 2,47 1,44 1,00 1 1/1 Muy Baja 2,47 1,44 1,00 1,00 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.00 = 0% < 10%; Vector Propio = (0.357 ; 0.208 ; 0.145 ; 0.145 ; 0.145)

86

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Crecimiento Demogrfico:
Cuadro 27

MATRIZ DE COMPARACIN (CRECIMIENTO DEMOGRFICO)


Crecimiento Demogrfico Muy Alto Alto Medio Bajo Negativo Muy Alto 1 1/ 2,08 1/ 2,62 1/ 4,22 1/ 5,74 Alto 2,08 1 1/ 1,26 1/ 2,15 1/ 2,76 Medio 2,62 1,26 1 1/ 1,82 1/ 2,29 Bajo 4,22 2,15 1,82 1 1/ 1,59 Negativo 5,74 2,76 2,29 1,59 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.00 = 0% < 10%; Vector Propio = (0.438 ; 0.213; 0.173 ; 0.103 ; 0.073)

Grado de urgencia del Proyecto:


Cuadro 28

MATRIZ DE COMPARACIN (GRADO DE URGENCIA DEL PROYECTO)


Grado de Urgencia del Proyecto Mximo Alto Medio Mximo 1 1/ 1,96 1/ 4,22 Alto 1,96 1 1/ 2,15 Medio 4,22 2,15 1

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131. C.R. = 0.00 = 0% < 10%; Vector Propio = (0.572 ; 0.292 ; 0.136)

A continuacin se establecen las ponderaciones globales: Ponderador Global = Ponderador Local x Ponderador del elemento que lo contiene.
Cuadro 29

PONDERADORES GLOBALES (PRIORIZACIN DE PROYECTOS)


Criterio Compensacin por Partido Poltico Representacin Provincial Grado de Urgencia del Proyecto Nivel de Pobreza Adjudicacin Histrica de Proyectos Densidad Poblacional Crecimiento Demogrfico Ponderador Local 0,424 0,416 1,000 0,624 0,160 0,249 0,127 Ponderador del elemento que lo contiene 0,631 0,631 0,194 0,175 0,631 0,175 0,175 Ponderador Global 0,268 0,262 0,194 0,109 0,101 0,044 0,022 % 26,8 26,2 19,4 10,9 10,1 4,4 2,2

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

87

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Se presenta el modelo para la priorizacin de los proyectos:


Figura 19

MODELO DE PRIORIZACIN DE PROYECTOS (EDUCACIN).


Priorizacin de Proyectos de Infraestructura Educacional

Criterios Poltico-Emocionales (L=0.631 ; G=0.631) Compensacin por partido poltico (L=0.424 ; G=0.268) - Concertacin (L=0.538 ; G=0.144) - Alianza por Chile (L=0.462 ; G=0.124) Representacin provincial (L=0.416 ; G=0.262) - Santiago (L=0.615 ; G=0.161) - Cordillera (L=0.077 ; G=0.020) - Chacabuco (L=0.077 ; G=0.020) - Maipo (L=0.077 ; G=0.020) - Melipilla (L=0.077 ; G=0.020) - Talagante (L=0.077 ; G=0.020) Adjudicacin histrica de proyectos (L=0.160 ; G=0.101) - Nula (L=0.390 ; G=0.039) - Baja (L=0.347 ; G=0.035) - Media (L=0.156 ; G=0.016) - Alta (L=0.107 ; G=0.011)

Criterios Socio-Demogrficos (L=0.175 ; G=0.175)

Criterios orientados al proyecto (L=0.194 ; G=0.194)

Nivel de Pobreza (L=0.624 ; G=0.109) - Muy Alto (L=0.516 ; G=0.056) - Alto (L=0.255 ; G=0.028) - Medio (L=0.124 ; G=0.014) - Bajo (L=0.105 ; G=0.011) Densidad Poblacional (L=0.249 ; G=0.044) - Muy Alta (L=0.357 ; G=0.016) - Alta (L=0.208 ; G=0.009) - Media (L=0.145 ; G=0.006) - Baja (L=0.145 ; G=0.006) - Muy Baja (L=0.145 ; G=0.006) Crecimiento Demogrfico (L=0.127 ; G=0.022) - Muy Alto (L=0.438 ; G=0.010) - Alto (L=0.213 ; G=0.005) - Medio (L=0.173 ; G=0.004) - Bajo (L=0.103 ; G=0.002) - Negativo (L=0.073 ; G=0.002)

Grado de Urgencia del Proyecto (L=1.000 ; G=0.194) - Mximo (L=0.572 ; G=0.111) - Alto (L=0.292 ; G=0.057) - Medio (L=0.136 ; G=0.026)

Proyectos de Infraestructura Educacional

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

88

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

L.

Sntesis de los resultados

En base a la informacin y al modelo que ya se tienen es posible obtener los puntajes finales por proyecto:
Cuadro 30

SNTESIS DE RESULTADO POR PROYECTO.


Proyecto Ranking 5 9 14 24 42 96 120 194 257 349 Comuna San Joaqun Independencia La Florida Curacav Cerro Navia Puente Alto Talagante La Florida La Granja Maip Alcalde Concertacin 0,144 Alianza 0,124 Alianza 0,124 Concertacin 0,144 Concertacin 0,144 Alianza 0,124 Alianza 0,124 Alianza 0,124 Concertacin 0,144 Alianza 0,124 Provincia Santiago 0,161 Santiago 0,161 Santiago 0,161 Melipilla 0,020 Santiago 0,161 Cordillera 0,020 Talagante 0,020 Santiago 0,161 Santiago 0,161 Santiago 0,161 Adjudicacin histrica de proyectos Media 0,016 Baja 0,035 Baja 0,035 Alta 0,011 Baja 0,035 Nula 0,039 Nula 0,039 Baja 0,035 Baja 0,035 Baja 0,035 Criterios Nivel de Pobreza Medio 0,014 Bajo 0,011 Bajo 0,011 Alto 0,028 Alto 0,028 Alto 0,028 Medio 0,014 Bajo 0,011 Alto 0,028 Bajo 0,011 Grado de Densidad Crecimiento Urgencia del Poblacional Demogrfico Proyecto Muy Alta 0,016 Alta 0,009 Media 0,006 Muy Baja 0,006 Muy Alta 0,016 Media 0,006 Muy Baja 0,006 Media 0,006 Muy Alta 0,016 Baja 0,006 Negativo 0,002 Negativo 0,002 Medio 0,004 Medio 0,004 Bajo 0,002 Muy Alto 0,010 Alto 0,005 Medio 0,004 Medio 0,004 Muy Alto 0,010 Medio 0,026 Alto 0,057 Medio 0,026 Alto 0,057 Mximo 0,111 Alto 0,057 Alto 0,057 Alto 0,057 Mximo 0,111 Medio 0,026 Puntaje Final del Proyecto 0,379 0,399 0,367 0,270 0,497 0,284 0,265 0,398 0,499 0,373

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

M.

Priorizacin de los proyectos

En este momento se puede establecer un ranking para los proyectos de infraestructura educacional. El ranking se muestra en la siguiente tabla:
Cuadro 31

COMPARACIN DE RANKING
Ranking (CORE) 1 2 3 4 5 6 7 8 9 10 Ranking (MINEDUC) 257 42 9 194 5 349 14 96 24 120 Nombre del Establecimiento Escuela Particular N 75 Claudio Matte Complejo Educacional Cerro Navia Liceo Presidente Balmaceda Escuela Oscar Castro Centro Educacional Municipal San Joaqun N 484 Colegio Madre de Jess Colegio Las Araucarias Liceo San Jernimo Puente Alto Escuela D-429 Valle de Puangue Escuela Bsica Particular N 13 Colegio Nacional Comuna La Granja Cerro Navia Independencia La Florida San Joaqun Maip La Florida Puente Alto Curacav Talagante Puntaje 0,499 0,497 0,399 0,398 0,379 0,373 0,367 0,284 0,270 0,265

Fuente: Trabajo sobre Ampliacin del Liceo Tcnico Profesional A-131.

89

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Dados los puntajes obtenidos para cada proyecto, fue posible establecer un orden de prioridad entre ellos, correspondiente al puntaje CORE. As sabemos que se debe ejecutar primero, por sobre los otros, el proyecto para la Escuela Particular N 75 Claudio Matte. La evidente diferencia entre el ranking elaborado por el MINEDUC y el CORE corresponde a las diferencias en los criterios empleados. El MINEDUC responsable de la parte tcnica seleccion y jerarquiz los proyectos en base a los siguientes criterios:
Monto del aporte solicitado por cada alumno que se incorporar al rgimen de Jornada

Escolar Completa diurna, favoreciendo los montos menores.


Calidad social de los proyectos. Esta se mide a travs de los grupos homogneos (es la

agrupacin de establecimientos segn variables socioeconmicas de acuerdo al artculo 10 de la Ley 19.410 y decretos reglamentarios) que sirven de base para la realizacin del Sistema Nacional de Evaluacin de Desempeo (SNED). Esto permite focalizar los aportes de capital en los establecimientos que concentran una poblacin escolar socioeconmicamente ms vulnerable. En cambio el CORE privilegia los aspectos polticos como se puede constatar en las pginas anteriores.

8.2 Ejemplo 2: priorizacin de proyectos de deportes


El objetivo de este ejemplo y el prximo es presentar dos casos adicionales, pero en forma ms breve, para que el lector pueda conocer aplicaciones en otras reas y distintas formas de la toma de decisiones bajo herramientas de anlisis multicriterio. En este caso se emplea el software Expert Choice como herramienta principal para el anlisis.13 El objetivo de esta tesis es proporcionar un sistema eficiente y claro de priorizacin de proyectos de infraestructura deportiva que postulan a fondos de Chiledeportes.

A.

Sistema Institucional

Chiledeportes es el nombre que emplea para todos los efectos el Instituto Nacional de Deportes de Chile. Creado el ao 2001 por la Ley 19.712 Art. 10. Entre sus funciones tiene las de proponer polticas destinadas la desarrollo de la actividad fsica nacional, elaborar normas, fomentar la construccin de recintos deportivos, mantener un banco de proyectos, transferir recursos para el apoyo de la actividad fsica, etc. Chiledeportes se enmarca dentro del SNIP a cargo del MIDEPLAN tal como fue expuesto en el ejemplo anterior. Por lo tanto el MIDEPLAN realiza el anlisis Costo-eficiencia de los proyectos presentados. Una vez hecho esto y recomendado un conjunto de proyectos, son enviados a Chiledeportes para que decida si tendrn o no su auspicio.

B.

Definicin del problema

Dificultad en la seleccin y priorizacin de proyectos de infraestructura deportiva que son presentados a Chiledeportes. Los motivos de las dificultades son la gran cantidad de proyectos
13

Este ejemplo se basa en la memoria presentada por Sergio A. Mella T. titulada Anlisis Multicriterio para la priorizacin de proyectos en Chiledeportes.

90

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

recomendados por el MIDEPLAN y la diversidad de caractersticas a considerar en las evaluaciones de estos. 1. Identificacin de los actores involucrados en el problema Los expertos encargados de la definicin de los criterios de decisin para la construccin del modelo fueron: Jos Miguel Campos (Jefe departamento Inversiones Chiledeportes) - Guillermo Unnasch (Arquitecto jefe departamento Infraestructura Chiledeportes) - Marcela Gonzlez (Asesora Mideplan para Chiledeportes)
-

El proceso de entrevistas fue realizado en forma individual para cada experto y se aplic la agregacin de los juicios propuesta por Saaty. 2. Modelamiento jerrquico del problema de decisin Existe un marco definido que orienta las acciones en materia de deportes y que sirvi como referente en la seleccin de los criterios y subcriterios de los expertos. Este marco est constituido por la Poltica Nacional del Deporte y la Ley del Deporte. A grandes rasgos la Poltica Nacional del Deporte se basa en los siguientes fundamentos: - Promocin del bien comn. - Orientacin de mercados deportivos. - Fiscalizacin y regulacin. - Visin y estrategia comn de pas. - Modernizacin permanente. De lo anterior se desprenden los siguientes principios: - Igualdad de oportunidades. - Equidad social y derecho al deporte y la actividad fsica. - tica y cultura deportiva. - Descentralizacin y desconcentracin. - Participacin de la comunidad. - Autonoma y libertad de asociacin. - Subsidariedad. Desde la Ley del Deporte se desprenden los siguientes criterios: - Asegurar el deporte en las edades crticas (edad escolar, nios y adultos mayores). - Comprometer en la actividad deportiva a sectores de alto riesgo social. - Criterios de seleccin de proyectos tales como: factores geogrficos y medioambientales, ndices de seguridad ciudadana, situacin socio-econmica, etc. Adems de considerar los aspectos tcnico-financieros, impacto social y deportivo y la relacin costo-beneficio. Los criterios y subcriterios identificados para la priorizacin de proyectos son los siguientes: i) Polticas Regionales: se refiere a los objetivos regionales y sectoriales. Definen los elementos importantes y determinan a la poblacin objetivo.

91

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Subcriterios: a. Modalidad Deportiva: se refiere a las diferentes tipologas deportivas definidas en la ley. Cada regin otorga prioridades distintas a cada criterio, dependiendo del tipo de deporte y de la modalidad de estos. Las modalidades son las siguientes:
Alto rendimiento: implica una prctica sistemtica y de alta exigencia. Deporte competitivo: es la prctica sistemtica de una especialidad deportiva, sujeta a

norma y con una programacin de competencias y eventos.


Deporte formativo: corresponde a la puesta en prcticas de procesos de enseanza y

aprendizaje a cargo de profesionales o tcnicos especializados en alguna actividad fsica.


Deporte recreativo: corresponde a las actividades fsicas realizadas en el tiempo libre.

b. Poblacin Beneficiaria: este criterio est definido por dos factores: el ndice de Desarrollo Humano (IDH) y la Situacin de vulnerabilidad.
IDH Comunal: este indicador define aspectos sociales de una comuna tales como salud,

ingreso y educacin. Su clasificacin es la siguiente: Alto Medio-alto Medio Medio-bajo Bajo

Situacin de vulnerabilidad: por los lineamientos de poltica y ley existe una

discriminacin positiva a proyectos que estn orientados a grupos vulnerables, tales como: nios, grupos en riesgo social, etc. las categoras son: - Vulnerable - No vulnerable c. Localizacin: se generarn proyectos en zonas donde los ndices de prctica deportiva sean altos y la infraestructura escasa y en zonas apartadas de centros urbanos. Se consideran dos factores en este subcriterio: el ndice de equipamiento comunal y el ndice de aislamiento crtico.
ndice de equipamiento comunal: relaciona dos factores: el estndar de equipamiento y

el ndice de prctica. El estndar de equipamiento es un ndice que relaciona la infraestructura disponible ajustado al nmero de usuarios. Y el ndice de prctica se define como las horas demandadas para actividades deportivas en la comuna. Las categoras para este ndice son:
-

Alto ndice de practica / Alto estndar de equipamiento Alto ndice de practica / Medio estndar de equipamiento Alto ndice de practica / Bajo estndar de equipamiento Medio ndice de practica / Alto estndar de equipamiento Medio ndice de practica / Medio estndar de equipamiento Medio ndice de practica / Bajo estndar de equipamiento Bajo ndice de practica / Alto estndar de equipamiento 92

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Bajo ndice de practica / Medio estndar de equipamiento - Bajo ndice de practica / Bajo estndar de equipamiento
ndice de aislamiento comunal: este ndice informa sobre la situacin en la que se

encuentra una comuna respecto de factores crticos de aislamiento de centros urbanos. Las intensidades son: Alto Medio-alto Medio Medio-bajo Bajo

d. ndice de gestin: se medir con las categoras Generacin de empleo y Situacin de proyectos anteriores.
Generacin de empleo: corresponde al nmero de puestos de trabajo que el proyecto

genere durante su ejecucin y despus de l. Son de dos tipos: - Transitorios - Permanentes


Situacin de proyectos anteriores: el objetivo es evaluar el desempeo de la institucin

que en el pasado postul y gan la asignacin de recursos para infraestructura deportiva y evaluar su desempeo respecto al proyecto anterior al momento de postular a un nuevo proyecto. La clasificacin del desempeo es la siguiente: - Buena - Regular - Mala ii) Criterios Tcnicos: se refiere a las caractersticas tcnicas del proyecto, tales como el Tipo de proyecto y la Calidad tcnica de los proyectos. a. Tipo de Proyectos: los proyectos se clasifican en categoras segn los requerimientos u objetivos propios de cada uno. La clasificacin es la siguiente: Tipo A (Terminacin y Mejoramiento) Tipo B (Ampliacin y Construccin) Tipo C (Equipamiento y Reparacin) Tipo D (Adquisicin y Mantenimiento)

ii) Calidad Tcnica de los Proyectos: se realiza un anlisis tcnico de los proyectos respecto del cumplimiento de las exigencias tcnicas para las distintas disciplinas y de la factibilidad de su realizacin. La clasificacin empleada fue: - MB (muy buena) - B (buena) - R (regular) - M (mala) iii) Criterios Econmicos: se consideran factores como: CAE/Usuarios, nmero de beneficiarios y la programacin de la inversin.

93

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

a. Nmero de Beneficiarios: corresponde al nmero de personas que se benefician con la ejecucin del proyecto. Los beneficiarios se pueden clasificar en dos tipos: - Beneficiarios Directos: son las personas que pertenecen al lugar en cuestin y que practican deportes en el lugar solicitado. - Beneficiarios Indirectos: son las personas que se ven beneficiadas indirectamente por el proyectos, ya sea porque practican en ella y son de otro sector o porque utilizan la infraestructura para otros fines no deportivos. b. CAE/Usuario: corresponde al costo anual equivalente por usuario y mide el costo por usuario. Se obtiene de la siguiente forma:
CAE / usuario = (CAE terreno + CAE inv . inf + CAE inv .eq ) + CT + CAE (COP + MTTO ) Promedio Anual Usuarios Equivalent es

Donde: CAE: Costo anual equivalente por usuario a minimizar. CAE terreno: Costo anual equivalente del terreno. CAE Inv.Inf: Costo anual equivalente de la inversin en infraestructura del recinto deportivo. CAE inv.Eq.: Costo anual equivalente de la inversin en equipamiento del recinto deportivo. CT: costo de traslado, incluye el costo por tiempo de viaje hasta el recinto deportivo, ms el valor del pasaje del vehculo de transporte, este ultimo slo en el evento en que, dada la distancia, se deba tomar locomocin. CAE(COP+MTTO): Costo anual equivalente de los costos de operacin y mantenimiento del recinto deportivo. c. Programacin de la Inversin: el objetivo de este criterio es que las inversiones no arrastren fondos por muchos aos, por lo tanto se da mayor preferencia a los proyectos que requieran fondos por una menor cantidad de aos. Las categoras son: - Proyectos de 1 ao - Proyectos de 2 aos - Proyectos de 2 o ms aos

94

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Por lo tanto el modelo jerrquico para la priorizacin de proyectos ser:


Figura 20

MODELO JERRQUICO PARA PRIORIZACIN (DEPORTES)


Establecer ranking de proyectos

Polticas regionales

Criterios tcnicos

Criterios econmicos

- Modalidad deportiva - Poblacin beneficiaria - Localizacin - ndices de gestin

- Tipo de proyectos - Calidad de proyectos

- N beneficiarios - CAE/Usuario - Programacin de la inversin

- Directos - Indirectos

Alto rendimiento Dep. formativo Dep. recreativo Dep. competitivo

- IDH comunal - Situacin vulnerabilidad

- Generacin de empleo - Situacin de proyectos anteriores

- ndice equipamiento comunal - ndice aislamiento crtico

- Directos - Indirectos

Fuente: Anlisis Multiciriterio para priorizacin de Proyectos Chiledeportes. Sergio Mella.

C.

Seleccin de Proyectos a Priorizar

Los siguientes proyectos fueron presentados para la Regin Metropolitana el ao 2001 y fueron obtenidos desde el Banco Integrado de Proyectos (BIP) administrado por el MIDEPLAN. - Proyecto 1. Construccin cancha de futbolito unidad vecinal N 34, Quinta Normal. Estado : No ejecutado. - Proyecto 2. Construccin Multicancha unidad vecinal N 24, Cerro Navia. Estado: Ejecutado. - Proyecto 3. Construccin de Multicancha Los Jacarandaes, La Granja. Estado: Ejecutado.

D.

Determinacin de los ponderadores

Como se mencion los juicios fueron ingresados a travs de entrevistas individuales y se aplic la agregacin de juicios en casi todas las matrices de comparaciones a pares. Los resultados del proceso de comparacin de juicios en las matrices los clculos de los vectores de prioridades se resumen en el siguiente cuadro. Para todos se cumple la condicin de consistencia.

95

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Figura 21

MODELO JERRQUICO CON PONDERADORES GLOBALES Y LOCALES


Establecer ranking de proyectos (L:1.00; G:1.00)

Polticas regionales (L:.481; G:.481) - Modalidad deportiva (L:.357; G:.172) - Poblacin beneficiaria (L:.329; G:.158) - Localizacin - ndices de gestin (L:.172; G:.084)

Criterios tcnicos (L:.297; G:.297) - Tipo de proyectos (L:.524; G:.155) - Calidad de proyectos (L:.476; G:.141)

Criterios econmicos (L:.222;G:.222) - No beneficiarios (L:.39; G:.087) - CAE/Usuario (L:.405; G:.09) - Programacin de la inversin (L:.205; G:.046) - Directos (L:.849; G:.074) - Indirectos (L:.151; G:.013)

- Alto rendimiento (L:154; G:.026) - Dep. formativo (L:.363; G:.062) - Dep. recreativo (L:.291; G:.05) - Dep. competitivo (L:.192; G:.033)

- IDH comunal (L:.37; G:.059) - Situacin vulnerabilidad (L:.63; G:.10)

- Generacin de empleo (L:.598; G:.05) - Situacin de proyectos anteriores (L:.402; G:.034)

- ndice equipamiento comunal (L:.811; G:.055) - ndice aislamiento crtico (L:.189; G:.013)

- Directos (L:.171; G:.009) - Indirectos (L:.829; G:.041)

Fuente: Anlisis Multiciriterio para priorizacin de Proyectos Chiledeportes. Sergio Mella.


a

Ver anexo 2 para ver en detalle todos los ponderadores para todos los criterios y subcriterios.

E.

Evaluacin de los Proyectos

Si bien existe informacin que para el ao 2001 no exista para los proyectos, porque las normas que obligaban a incluirla recin comenzaron al ao siguiente. Tales criterios fueron: ndice de Gestin y sus subcriterios, Nmero de Beneficiarios y subcriterios y Localizacin subcriterio ndice de Equipamiento Comunal. La informacin disponible para cada proyecto se agrupa en el siguiente cuadro:
Cuadro 32

RESUMEN DE LOS DATOS


Proyectos Datos de los proyectos Modalidad deportiva Disciplina IDH comunal Situacin vulnerabilidad ndice de aislamiento Tipo proyecto Calidad de proyectos No beneficiarios CAE/usuario Programacin de la inversin Proyecto 1 Deporte recreativo Alta prioridad Medio-bajo (0,726) Vulnerable Bajo Construccin Buena 9 546 Rango D (3 446) 1 ao (6 meses) Proyecto 2 Deporte recreativo Alta prioridad Bajo (0,695) Vulnerable Bajo Construccin Muy buena 16 162 Rango A (1 667) 1 ao (3 meses) Proyecto 3 Deporte recreativo Alta prioridad Medio-bajo (0,725) Vulnerable Bajo Construccin Muy buena 12 038 Rango A (1 596) 1 ao (2 meses)

Fuente: Anlisis Multiciriterio para priorizacin de Proyectos Chiledeportes. Sergio Mella

96

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

F.

Priorizacin de los Proyectos

El ranking que se puede establecer a travs de los resultados es el siguiente: - Proyecto 2 - Proyecto 3 - Proyecto 1 Anlisis de Sensibilidad El anlisis de sensibilidad permite determinar los cambios en la priorizacin de proyectos frente a cambios en las importancias relativas de los criterios, esto es, los ponderadores. El motivo de este cambio puede ser un cambio en las polticas sociales, recorte de presupuesto, etc. En este caso se analizarn los siguientes tres escenarios posibles: - Escenario 1: en este caso se asignar el ponderador ms alto a los criterios econmicos luego a los criterios tcnicos y el ltimo a las polticas regionales. - Escenario 2: en este caso se le asignar el mayor ponderador al criterio tcnico luego el criterio econmico y por ultimo las polticas regionales. - Escenario 3: en este caso se le asignar a los tres criterios el mismo ponderador. Al cambiar el orden de importancia de los tres criterios, tambin cambia la jerarqua de las tres categoras ms importantes: Escenario actual: 1. El tipo de proyecto A en el subcriterio tipo proyecto del criterio tcnico (8.9%). 2. La poblacin vulnerable dentro de los subcriterios poblacin beneficiaria del criterio polticas regionales (8.5%). 3. Calidad de proyecto Muy Bueno en el subcriterio calidad de proyecto en los criterios tcnicos (6.9%). Escenario 1: 1. Rango A del subcriterio CAE/usuario de los criterios econmicos (10%). 2. El tipo de proyecto A en el subcriterio tipo proyecto del criterio tcnico (8.9%). 3. Calidad de proyecto Muy Bueno en el subcriterio calidad de proyecto en los criterios tcnicos (7.6%). Escenario 2: 1. El tipo de proyecto A en el subcriterio tipo proyecto del criterio tcnico (14.5%). 2. Calidad de proyecto Muy Bueno en el subcriterio calidad de proyecto en los criterios tcnicos (12.3%). 3. El tipo de proyecto A en el subcriterio tipo proyecto del criterio tcnico (6.1%). Escenario 3: 1. El tipo de proyecto A en el subcriterio tipo proyecto del criterio tcnico (10.0%). 2. Calidad de proyecto Muy Bueno en el subcriterio calidad de proyecto en los criterios tcnicos (8.5%). 3. Rango A del subcriterio CAE / usuario de los criterios econmicos (6.9%). Los resultados se presentan en el siguiente cuadro:

97

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Cuadro 33

RESULTADOS POR ESCENARIO


Proyecto Proyecto 1 Proyecto 2 Proyecto 3 Escenario 1 0,445 0,767 0,720 Escenario Escenario 2 0,445 0,746 0,705 Escenario 3 0,439 0,714 0,669

Fuente: Anlisis Multiciriterio para priorizacin de Proyectos Chiledeportes. Sergio Mella.

Como se observa en el cuadro superior el ranking de priorizacin de proyectos no ha cambiado, ya que el Proyecto 2 sigue siendo la prioridad por sobre los otros. Esto se debe a las caractersticas de los proyectos 2 y 3, que tienen muy buena evaluacin en los criterios tcnicos y estn orientados hacia la poblacin vulnerable.

G.

Conclusiones

Se ha logrado a travs de la metodologa multicriterio un proceso de toma de decisin adecuado, con una herramienta flexible y simple, que permite el desglose de un problema complejo de decisin en una jerarqua que facilita un anlisis por partes y secuencial. Adems permiti a los expertos conocer que existen variables que deben ser incluidas en los futuros catastros para una evaluacin ms completa y eficiente.

8.3 Ejemplo 3: priorizacin de proyectos de infraestructura hidrulica


En este ejemplo el objetivo es explorar una metodologa multicriterio con la aplicacin prctica del mtodo AHP para la priorizacin de cinco proyectos de infraestructura hidrulica para riego.14

A.

Definicin del problema

El problema consiste en la priorizacin de una cartera de cinco grandes obras de infraestructura hidrulica a nivel nacional.

B.

Modelamiento jerrquico del problema de decisin

La seleccin de criterios para el modelo de anlisis se compone de Criterios Estratgicos, que son los ms globales; los Subcriterios que estn en un nivel intermedio y los Criterios Terminales, que corresponde a los que estn en la parte inferior de la jerarqua. Los criterios definidos para la construccin del modelo son los siguientes: 1. Criterio Estratgico: Econmico Se refiere a los componentes del proyecto que guardan relacin con aportes a la equidad y eficiencia de los recursos asignados. i) Nmero de familias beneficiadas por aportes del Estado: este subcriterio mide, a travs de un indicador, la relacin entre el nmero de familias que sern beneficiadas con el proyecto con el aporte que hace el Estado al mismo.

14

El ejemplo fue desarrollado por Pablo Torres en su memoria de ttulo Aplicacin de una Metodologa Multicriterio para la Priorizacin de Proyectos de Infraestructura Hidrulica que hace una aplicacin del mtodo AHP usando Expert Choice.

98

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

ii)

VAN por metro cbico de agua: es un indicador que relaciona los beneficios econmicos descontados al presente con los metros cbicos de agua que se generarn con la iniciativa. VAN por aporte del Estado: permite medir el inters de los privados a travs de calcular la relacin entre el VAN y el aporte del Estado.

iii) 2.

Criterio Estratgico: Complejidad de desarrollo en el ciclo de vida del proyecto Este criterio dice relacin con todos los elementos que podran afectar el ciclo de avance o maduracin del proyecto. i) Calidad de estudios: es necesario conocer la opinin de los expertos en materias como la precisin, confiabilidad, disponibilidad y actualidad de los datos considerados en la evaluacin.

Etapa de desarrollo del ciclo de vida del proyecto: este criterio mide la confiabilidad, precisin y disponibilidad de la informacin contenida en los estudios existentes; a travs de la categorizacin de los estudios en las etapas de un proyecto (perfil, prefactibilidad, factibilidad, diseo y construccin). Actualidad de los estudios: independiente del tipo de estudio realizado, este criterio mide la antiguedad de los datos contenidos en los estudios. Mientras menor sea esta, mejor.

ii)

Complejidad legal: los dos elementos principales que dificultan la evaluacin de proyectos de riego son los derechos de agua y las expropiaciones.

Complejidad de las expropiaciones: en este criterio se busca medir la dificultad a la que se enfrentan los proyectos de este tipo ante los procesos de expropiaciones. La dificultad de expropiacin est relacionada con el tipo de terreno, la cantidad del mismo y las posibles necesidades de trasladar familias. - Los derechos respectivos no estn inscritos, es decir, pertenecen al estado de Chile y por lo tanto serian factibles de constituir. - Existen derechos sobre el cuerpo de agua y estos no pertenecen a los beneficiarios, es decir existen derechos de un tercero, estos derechos podran ser consuntivos o no consuntivos, es decir derecho de uso del flujo o derecho con consumo. - Los derechos estn constituidos y/o en trmite de constituirse para los beneficiarios.

Derechos de agua: existen tres estados de derechos de agua:

iii)

SEIA: (Sistema de Evaluacin de Impacto Ambiental) representa la dificultad administrativa en el SEIA, ya sean demoras en la realizacin o evolucin de las etapas del proyecto o la imposibilidad de concrecin, por motivos ambientales y/o grupos que se oponen al proyecto y/o reas protegidas y/o etnias involucradas.

3. Criterio Estratgico: Social Este criterio agrupa aquellos atributos que tienen influencia en la calidad de vida de las personas. i) Compromiso: este criterio busca medir los deseos de las personas por el proyecto y la posibilidad de mantenerlo en el tiempo, a travs de la existencia de organizaciones capaces de hacerse cargo de la mantencin y operacin de la obra.

99

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Poderes en pugna: este criterio considera la percepcin del costo poltico de la

realizacin o no del proyecto. Para esto busca medir los poderes existentes, a favor o en contra, de los proyectos.
Garanta de suministro: busca determinar si existe alguna organizacin que pueda

hacerse cargo de la mantencin y operacin de la obra. Existen tres posibles tipos de organizaciones funcionales: las juntas de vigilancias, las Comunidades de agua y las asociaciones de regantes. ii) Desarrollo: corresponde al diferencial en la calidad de vida de la poblacin a travs del crecimiento socioeconmico en la zona de realizacin del proyecto.

Potenciamiento de otros sectores de la economa: se refiere a las externalidades del proyecto. Principalmente se consideran el sector elctrico y el turstico inmobiliario. Sector elctrico: se refiere a la posibilidad de generar energa elctrica a partir de la construccin del proyecto. Sector turstico e inmobiliario: se refiere a captar algn pronunciamiento explcito de algn privado referente a inversin en estas reas.

Generacin de empleo: se refiere a la posibilidad de medir calidad y cantidad potencial de empleo como consecuencia de la ejecucin del proyecto. Generacin de empleos en etapa de construccin: se refiere al empleo que potencialmente podra generarse a partir de la construccin del proyecto. Generacin de empleos en etapa de operacin y mantenimiento: se refiere al empleo que potencialmente podra generarse con la ejecucin de esta etapa. Generacin de empleos por aumentos en la productividad agrcola: se refiere a las externalidades que permitirn mejorar la actividad agrcola en la zona y que traern como consecuencia un aumento en el empleo.

Porcentaje de pobreza: consiste en considerar a la cantidad de pobres que se vern beneficiados con la ejecucin del proyecto.

Entonces la jerarqua del modelo es el siguiente:


Figura 22

MODELO JERRQUICO PARA INFRAESTRUCTURA HIDRULICA


Objetivo Objetivo

Econmico Social
Nfamilias / unidades de subsidio VAN / mt3 de agua VAN / aporte del Etado SEIA Desarrollo Compromiso Estudios Legal

Complejidad de Desarrollo en el Ciclo de Vida del Proyecto

Empleo

% de Pobreza Otros Sectores

Garantia de Suministro Poderes en Pugna

Actualidad de Estudios Etapa de Desarrollo

Derechos de Aprovechamiento Expropiaciones

Construccin Mantenimiento

Produccin Agrcola Elctrico Turistico e Inmobiliario

Fuente: Aplicacin de una metodologa multicriterio para la priorizacin de proyectos de infraestructura hidrulicas. Pablo Torres.

100

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

C.

Seleccin de proyectos a priorizar

La informacin referente a los proyectos a priorizar en infraestructura hidrulica son los siguientes:
Cuadro 34

DATOS REFERENCIALES DE LOS PROYECTOS EVALUADOS


N Familias Embalse1 Embalse2 Enbaalse3 Embalse4 Embalse5 3 300 1 600 1 300 2 500 650 VAN (social) 80,3 121,6 140 10 26 Aporte Estatal 87 42 35 65 18 Mt3 de Agua 120 50 142 48 24 N % Empleos Pobreza 521 575 880 539 323 20,6 27 25 19 19 Turismo 2,1 4,2 4,9 3,9 3,5 Electricidad 80,3 100 163 121 26 Etapa de Desarrollo Factibilidad Factibilidad Factibilidad Prefactibilidad Prefactibilidad

Fuente: Aplicacin de una metodologa multicriterio para la priorizacin de proyectos de infraestructura hidrulicas. Pablo Torres.

D.

Determinacin de los ponderadores

El siguiente cuadro resume las ponderaciones de los diferentes criterios del modelo de priorizacin.
Figura 23

RESUME DE LAS PONDERACIONES DE PROYECTOS DE INFRAESTRUCTURA HIDRULICAS


NFamilias / Aporte Estatal 39,7 % Econmico 68,9 % VAN / mt 3 de agua 9,2 % VAN / Aporte del Estado 20 % Etapa de Desarrollo 4,5 % Estudios 5,7 % Complejidad de
Objetivo Riego 100 %

Actualidad de estudios 1,2 %

Desarrollo en el Ciclo de Vida del Proyecto 14,8 % Legal 6,9 % Derechos de agua 5,4 % Garanta de Suministro 6,8 % Compromiso 14,3 % Poderes en pugna 7,5 % Sector Elctrico 0,1 % Otros Sectores 0,2 % Social 16,3 % Tur e Inmobiliario 0,07 % Construccin 0,8 % Desarrollo 2 % Empleo 1,1 % Mantenimiento 0,2 % Produccin Agrcola 0,1 % % de Pobreza 0,7 % Expropiaciones 1,5 % SEIA 2,2 %

Fuente: Aplicacin de una metodologa multicriterio para la priorizacin de proyectos de infraestructura hidrulicas. Pablo Torres.

101

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

E.

Evaluacin de los proyectos

Una vez aplicado el modelo los cinco proyectos de embalse se puede obtener un ranking para la priorizacin de estos. El siguiente cuadro ilustra lo anterior.
Cuadro 35

RANKING PARA EMBALSES


Embalse3 Embalse2 Embalse1 Embalse5 Embalse4 Prioridad 1 2 3 4 5 Puntaje 24,6 21,1 18,7 18,2 17,4

Fuente: Aplicacin de una metodologa multicriterio para la priorizacin de proyectos de infraestructura hidrulicas. Pablo Torres.

F.

Conclusiones

Una de las principales conclusiones que se puede sacar de este trabajo de ttulo es que con la evaluacin tradicional se est perdiendo poco ms de un 30% de poder evaluativo, ya que los criterios Social y Complejidad de desarrollo en el ciclo de vida del proyecto sumados representan un 31.1% del modelo. Adems es propio destacar la flexibilidad y transparencia que permite el modelo.

102

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Bibliografa

Aldunate, Eduardo. Metodologa del Marco Lgico, ILPES Boletn No 15, 2004. Barba-Romero Sergio. Manual para la toma de decisiones multicriterio. (LC/IP/L.122). 1996. COHEN, Ernesto y FRANCO, Rolando. Evaluacin de Proyectos Sociales. Grupo Editor Latinoamericano (GEL). Buenos Aires, Argentina. 1988. Ortegn Edgar, Aldunate Eduardo y Pacheco Juan Francisco. La modernizacin de los sistemas nacionales de inversin pblica: anlisis crtico y perspectivas. (LC/L. 1830-P; LC/IP/L. 216). 2002. Ortegn Edgar, Pacheco Juan Francisco. Los sistemas nacionales de inversin pblica en Centroamrica: marco terico y anlisis comparativo multivariado. (LC/L.2160-P; LC/IP/L.246). 2004. Ortegn Edgar, Pacheco Juan Francisco y Prieto Adriana. Metodologa de marco lgico para la planificacin, el seguimiento y la evaluacin de proyectos y programas, (LC/L.2350; LC/IP/L.259).2005. Ortegn Edgar, Pacheco Juan Francisco y Roura Horacio. Metodologa general de identificacin, preparacin y evaluacin de proyectos de inversin pblica. (LC/L.2326-P; LC/IP/L.257).2005. Pacheco, Juan Francisco. Polticas Asociadas al Fomento Productivo en Chile. Tesis de magster. Universidad de Chile. 2001. Quintero Uribe, Vctor M. Evaluacin de proyectos: construccin de indicadores sociales. Fundacin Para La Educacin Superior. Tercera edicin. Colombia. 1997. Richard A. Musgrave y Peggy B. Musgrave. Hacienda Publica terica y aplicada.. McGraw-Hill. Quinta Edicin. Espaa. 1999. Sampieri Roberto H., Collado Carlos F. y Lucio Pilar B. Metodologa de la Investigacin. Sptima edicin. McGraw-Hill. Mxico. 2006. SAATY, T. 1997. Toma de Decisiones Para Lderes. Universidad de Santiago de Chile.

103

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

SAATY, T. 2000. Fundamentals of Decision Making ando Priority Theory with the Analytic Hierarchy Process. RWS Publications. Universidad de Pittsburgh, U. S. A. SPIEGEL, Murria. 1998. Probabilidad y Estadsticas. McGraw-Hill. Mxico. Trabajo. Anlisis multicriterio discreto para la formulacin y priorizacin de proyectos de infraestructura municipal. Marcelo A. Mndez Salgado. Profesor gua: Eduardo Contreras. Memoria de ttulo para optar a Ingeniero Civil Industrial. Universidad de Chile. Santiago. 2002. Trabajo. Anlisis multicriterio para priorizacin de proyectos en Chiledeportes. Sergio A. Mella Toledo. Profesor gua: Eduardo Contreras. Memoria para optar a ttulo de Ingeniero Civil Industrial. Universidad de Chile. Santiago 2002. Trabajo. Aplicacin de una metodologa Multicriterio para la priorizacin de Proyectos de Infraestructura Hidrulica. Pablo Torres. Profesor gua: Eduardo Contreras. Memoria para optar a ttulo de Ingeniero Civil Industrial. Universidad de Chile. Santiago. 2002. YAMADA, Gustavo, BID (2001), Reduccin de la pobreza y fortalecimiento del capital social y la participacin: La accin reciente del Banco Interamericano de Desarrollo. 2001. Para el Seminario Internacional de Capital Social CEPAL- U. de Michigan.

104

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Anexos

105

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Anexo 1
A continuacin se presenta un mtodo alternativo para calcular el vector de prioridades de una matriz de comparaciones. A continuacin se presenta el Mtodo Aproximado. La matriz de comparaciones a pares es:
1 1/ 2 1/ 4 2 1 1/ 2 4 2 1

A continuacin se debe obtener la matriz normalizada. Para esto primero sume los elementos de cada columna:

(7

3.5 1.75)

Luego divida a cada elemento de la matriz de comparaciones por la suma correspondiente a la columna a la cual pertenece:

1 / 7 0.5 / 3.5 0.25 / 1.75 0.5 / 1.75 2 / 7 1 / 3.5 4 / 7 2 / 3.5 1 / 1.75


Finalmente obtendr la matriz normalizada:

0.142857 0.142857 0.142857 0.285714 0.285714 0.285714 0.571429 0.571429 0.571429


Para obtener el vector de prioridades debe calcular la media de cada fila de la matriz normalizada:
0.142857 + 0.142857 + 0.142857 = 0.142857 3 0.285714 + 0.285714 + 0.285714 = 0.285714 3 0.571429 + 0.571429 + 0.571429 = 0.571429 3 Finalmente se obtiene el vector de prioridades para los criterios identificados. Recordando el ejemplo en el captulo 4.2.4., las prioridades quedaran de la siguiente forma: Ambiental (0.1428), Social (0.2857) y Econmico (0.5714).

107

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Anexo 2
El siguiente cuadro es un resumen de todos los ponderadores para cada criterio y subcriterio del Ejemplo 2: Anlisis Multicriterio para Priorizacin de Proyectos en Chiledeportes.
Cuadro A-1

RESUMEN PONDERADORES LOCALES Y GLOBALES


Criterios Polticas regionales (L:.481; G:.481) Subcriterios Modalidad deportiva (L:.357; G:.172) Subcriterios Alto rendimiento (L:.154; G:.026) Subcriterios Intensidades o categoras D. Alta P P1 D. Media P P1 D. Baja P P1 D. Alta P P2 D. Media P P2 D. Baja P P2 D. Alta P D. Media P D. Baja P D. Alta P D. Media P D. Baja P D. Alta P D. Media P D. Baja P Alto Medio-Alto Medio Medio-Bajo Bajo No vulnerable Vulnerable 9 categoras Ponderador Local Global 0,47 0,012 0,258 0,007 0,141 0,004 0,068 0,002 0,038 0,001 0,025 0,001 0,637 0,021 0,258 0,008 0,105 0,003 0,638 0,04 0,258 0,016 0,105 0,007 0,637 0,032 0,258 0,013 0,105 0,005 0,038 0,002 0,065 0,004 0,121 0,007 0,266 0,016 0,511 0,03 0,081 0,808 0,191 0,019 *** ***

Dep. competitivo (L:.192; G:.033) Dep. formativo (L:.363; G:.062) Dep. recreativo (L:.291; G:.05) Poblacin beneficiaria (L:.329; G:.158) IDH comunal (L:.37; G:.059)

Localizacin (L:.14; G:.067)

Situacin vulnerabilidad (L:.63; G:.1) ndice equipamiento comunal (L:.811; G:.055) ndice aislamiento crtico (L:.189; G:.013)

ndices de gestin (L:.172; G:.084)

Generacin de empleo (L:.598; G:.05)

Transitorios (L:.171; G:.009) Permanentes (L:.829; G:.041)

Situacin de proyectos anteriores (L:.402; G:.034) Criterios tcnicos (L:.297; G:.297) Tipo de proyectos (L:.524; G:.155) Calidad de proyectos (L:.476; G:.141) Criterios econmicos (L:.222; G:.222) No beneficiarios (L:.39; G:.087) Directos (L:.849; G:.074) Indirectos (L:.151; G:.013) CAE/Usuario (L:.405; G:.09)

Programacin inversin (L:.205; G:.046)

Alto Medio-Alto Medio Medio-Bajo Bajo P1 P2 P3 P1 P2 P3 Bueno Regular Malo Tipo A Tipo B Tipo C Tipo D MB B R M P1 P2 P3 P1 P2 P3 Rango A Rango B Rango C Rango D 1 ao 2 aos 2 aos o ms

0,476 0,271 0,15 0,067 0,035 Sin datos Sin datos Sin datos Sin datos Sin datos Sin datos 0,605 0,252 0,143 0,572 0,239 0,098 0,091 0,536 0,262 0,115 0,087 0,25 0,424 0,326 Sin datos Sin datos Sin datos 0,513 0,275 0,138 0,074 0,605 0,252 0,143

0,006 0,003 0,002 0,001 0,001 Sin datos Sin datos Sin datos Sin datos Sin datos Sin datos 0,02 0,008 0,005 0,089 0,037 0,015 0,014 0,076 0,037 0,016 0,012 0,018 0,031 0,024 Sin datos Sin datos Sin datos 0,046 0,025 0,012 0,007 0,028 0,011 0,007

Fuente: Anlisis Multicriterio para priorizacin de Proyectos Chiledeportes. Sergio Mella.

108

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Cuadro A-2

PONDERADORES LOCALES Y GLOBALES


ndice equipamiento comunal Alto ndice de prctica / Alto estndar de equipamiento Alto ndice de prctica / Medio estndar de equipamiento Alto ndice de prctica / Bajo estndar de equipamiento Medio ndice de prctica / Alto estndar de equipamiento Medio ndice de prctica / Medio estndar de equipamiento Medio ndice de prctica / Bajo estndar de equipamiento Bajo ndice de prctica / Alto estndar de equipamiento Bajo ndice de prctica / Medio estndar de equipamiento Bajo ndice de prctica / Bajo estndar de equipamiento Ponderador Local Global 0,110 0,006 0,055 0,003 0,008 0,000 0,160 0,009 0,100 0,005 0,050 0,003 0,265 0,014 0,154 0,008 0,097 0,005

Fuente: Anlisis Multiciriterio para priorizacin de Proyectos Chiledeportes. Sergio Mella

109

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Glosario
Indicador: es una medida que corresponde a una determinada variable. ndice: corresponde al resultado de la relacin de dos o ms variables. Jerarqua: esquema que determina un orden entre los distintos elementos que la componen Jerarquizacin: establecimiento de un orden entre los elementos que pertenecen a un conjunto respecto de una o ms caractersticas relevantes. Matriz de comparaciones: matriz que en sus filas y columnas contiene juicios respecto de la importancia relativa de un criterio respecto de otro. Multicriterio: representa a una forma de pensamiento organizado capaz de abordar problemas complejos a travs de una integracin modelada de al menos dos criterios de anlisis. Ponderador: medida que representa algn grado de una caracterstica de un elemento del conjunto respecto del total. Priorizacin: establecimiento de un orden de preferencia intertemporal, respecto de alguna materia especfica, entre los elementos que componen el conjunto al cual pertenecen. Ranking: orden establecido entre los elementos pertenecientes a un conjunto.

110

CEPAL - Serie Manuales No 58

Manual metodolgico de evaluacin multicriterio para programas y proyectos

Serie

manuales
Nmeros publicados
El listado completo de esta coleccin, as como las versiones electrnicas en pdf estn disponibles en nuestro sitio web: www.cepal.org/publicaciones
58. Manual metodolgico de evaluacin multicriterio para programas y proyectos, Juan Francisco Pacheco, Eduardo Contreras (LC/L.2957-P), No de venta: S.08.II.G.71, (US$ 15.00), 2008. 57. Manual de presupuesto plurianual, Roberto Martirene (LC/L.2829-P), No de venta: S.07.II.G.153 (US$ 15.00), 2007. 56. Indicadores ambientales y de desarrollo sostenible: avances para Amrica Latina y el Caribe, Rayn Quiroga Martnez (LC/L.2771-P), No de venta: S.07.II.G.108 (US$ 20.00), 2007. 55. Potencialidades y aplicaciones de los datos censales: una contribucin a la explotacin del Censo de Poblacin y Vivienda de Nicaragua 2005, CELADE (LC/L.2786-P), No de venta: S.07.II.G.119, (US$ 15.00), 2007. 54. Las cuentas nacionales: lineamientos conceptuales, metodolgicos y prcticos, Michael Sruzier (LC/L.2765-P), No de venta: S.07.II.G.101, (US$ 15.00), 2007. 53. El modelo GTAP y las preferencias arancelarias en Amrica Latina y el Caribe: reconciliando su ao base con la evolucin reciente de la agenda de liberacin regional, Andrs R. Schuschny, Jos E. Durn y Carlos J. de Miguel (LC/L.2679-P), N de venta: S.07.II.G.29, (US$ 15.00), 2007. 52. Modelo de anlisis del impacto social y econmico de la desnutricin infantil en Amrica Latina (LC/L.2650-P), N de venta: S.06.II.G.175, (US$ 15.00), 2006. 51. Manual de prospectiva y decisin estratgica: bases tericas e instrumentos para Amrica Latina y el Caribe, Javier Medina Vsquez y Edgar Ortegn, (LC/L.2503-P), N de venta: S.06.II.G.37, (US$ 20.00), 2006 50. Regularizando la informalidad del suelo en Amrica Latina y el Caribe. Una evaluacin sobre la base de 13 pases y 71 programas, Nora Clichevsky, (LC/L.2474-P), N de venta: S.06.II.G.3, (US$ 15.00), 2006 49. Opciones y propuestas estratgicas para la superacin de la pobreza y precariedad urbana en Amrica Latina y El Caribe, Ricardo Jordn (LC/L.2473-P), N de venta: S.05.II.G.219, (US$ 15.00), 2006. 48 Pauta metdolgica de evaluacin de impacto exante y expost de programas sociales de lucha contra la pobreza Aplicacin metdolgica Hugo Navarro, Kaiuska King, Edgar Ortegny Juan Francisco Pacheco LC/L.2449-P), N de venta: S.06.II.G.18, (US$ 15.00), 2006. 47. Evaluacin del impacto, Cristin Aedo (LC/L.2442-P), N de venta: S.05.II.G.185, (US$ 10.00), 2005. 46. Los sistemas nacionales de inversin pblica en Barbados, Guyana, Jamaica y Trinidad Tabajo, Edgar Ortegn y Diego Dorado (LC/L.2436-P), N de venta: S.05.II.G.182, (US$ 10.00), 2005. 45. Indicadores de desempeo en el sector pblico, Juan Cristbal Bonnefoy y Marianela Armijo (LC/L.2416-P), N de venta: S.05.II.G.163, (US$ 10.00), 2005. 44. El sistema de inversiones pblicas en la provincia de San Juan, Repblica Argentina, Edgar Ortegn, Juan Francisco Pacheco y Ana Carolina Cmpora Rudolff (LC/L.2387-P), N de venta: S.05.II.G.130, (US$ 10.00), 2005.

Algunos ttulos de aos anteriores se encuentran disponibles

El lector interesado en adquirir nmeros anteriores de esta serie puede solicitarlos dirigiendo su correspondencia a la Unidad de Distribucin, CEPAL, Casilla 179-D, Santiago, Chile, Fax (562) 210 2069, correo electrnico: publications@eclac.cl.

Nombre:................................................................................................................................... Actividad: ................................................................................................................................ Direccin: ................................................................................................................................ Cdigo postal, ciudad, pas: .................................................................................................... Tel.: ............................Fax: ..................................... E.mail: ...................................................

111

También podría gustarte