EVALUACIN EX-POST DEL PROYECTO TERMINADO Antecedentes.

Desde el inicio de las operaciones del SNIP (a fines del ao 2000) hasta diciembre de 2011 se declar viables alrededor de 140 mil proyectos de inversin pblica (PIP), los cuales comprenden un monto de inversin aproximado a S/. 198 mil millones. Entonces, considerando la magnitud de los recursos que orienta el Estado a la inversin pblica, era importante evaluar si los proyectos ejecutados cumplen los objetivos que motivaron su planteamiento, adems que esa informacin servir como retroalimentacin para los nuevos proyectos que se propongan.

2.1-CONCEPTO.Una evaluacin en general, es la recoleccin y anlisis sistemtico de evidencias con el propsito de mejorar el entendimiento del objetivo evaluado, as como tener la capacidad de emitir opiniones respecto al mismo. En el contexto del sistema Nacional de Inversin Pblica (SNIP), se define como una evaluacin objetiva y sistemtica sobre un proyecto cuya fase de inversin ha concluido o est en la fase de post inversin. El objetivo es determinar pertinencia, eficiencia, efectividad, impacto y la sostenibilidad a la luz de los objetivos especficos que se plantearon en la pre inversin. Es una herramienta de aprendizaje y de gerencia para mejorar los procesos de anlisis, planificacin y ejecucin de proyectos, as como la toma de decisiones. La evaluacin ex post de proyectos de inversin pblica tiene dos objetivos principales: 1. Retroalimentacin a travs de las lecciones y recomendaciones para mejorar la administracin y desempeo de la inversin pblica, para el mismo proyecto evaluado, proyectos similares y polticas del sector. 2. Transparencia del proceso y los resultados de la inversin pblica. Podemos concluir que la evaluacin es el acto de emitir un juicio de valor apoyado por evidencias, por lo tanto, no es satisfactorio nicamente llegar a la conclusin que se alcanzaron los objetivos o calificar un proyecto de acuerdo con algunos criterios al final de los estudios de evaluacin.

2.2.- Los pasos para la evaluacin Ex Post. La evaluacin es el acto de emitir un juicio de valor apoyado por evidencias, por lo tanto, no es satisfactorio nicamente llegar a la conclusin que se alcanzaron los objetivos o calificar un proyecto de acuerdo con algunos criterios al final de los estudios de evaluacin. Para satisfacer dichos objetivos, la evaluacin ex post de un proyecto tendr los siguientes pasos.

2.2.1. Medicin de los Resultados de un Proyecto La medicin de los resultados tiene por objeto comprender lo que ha logrado el proyecto respecto a lo previsto en el estudio de pre inversin con el que se declar viable. Es decir, el nivel de logro de los productos (asociados a los componentes), el objetivo central y los fines directos e indirectos se miden al momento de la evaluacin y se comparan con lo que se ha previsto (comparacin entre lo planificado y los resultados real). Esta comparacin se har de manera cuantitativa hasta donde sea posible.

2.2.2. Examen del Proceso, los Factores que Influyen y las Relaciones Causales. A pesar de que el grado de xito de un proyecto puede ser medido mediante la evaluacin de resultados obtenida a partir de estas comparaciones, no es suficiente para examinar el proyecto en relacin al contexto en el que fue planificado y realizado, ni para poder indagar los factores que promovieron o impidieron el logro de los resultados esperados. Un conocimiento detallado del proyecto es esencial si es que desean obtener lecciones y recomendaciones para poder ser usadas como retroalimentacin para el mismo proyecto y otros proyectos similares en marcha y en el futuro. Es por este motivo que el examen de los procesos de implementacin, operacin y mantenimiento, as como las relaciones causales entre el proyecto, los efectos directos e indirectos y los factores internos / externos son necesarios.

2.2.3. Aplicacin de los Criterios de Evaluacin Utilizar los cinco criterios para evaluar un proyecto, permite observar su valor desde puntos de vista diferentes y, como resultado, se puede especificar diversos factores que influyen en el xito o fracaso del proyecto.

Cada criterio tiene una serie sub-criterios, en forma de preguntas y son usados como una gua cuando un estudio evaluacin est siendo diseado.

2.2.4. Recomendaciones, Lecciones Aprendidas y Retroalimentacin Los hallazgos de una evaluacin Ex-Post tiene valor nicamente cuando se retro alimenta y se utilizan. Se consideran que la evaluacin Ex post es una herramienta practica de gestin y por ello es necesario hacer recomendaciones especficas y tomar lecciones a partir de los resultados de la evaluacin. 2.3 Mtodos de Evaluacin. 2.3.1 Mtodos de Comparacin Al disear un estudio de evaluacin, una combinacin apropiada de las comparaciones de diferentes dimensiones, as como una combinacin adecuada de los mtodos cuantitativos y cualitativos, debe examinarse teniendo en cuenta factores como las caractersticas del proyecto y de los efectos, la disponibilidad de la informacin (los valores objetivo, lnea base, etc.), la disponibilidad y la calidad de grupo de control, presupuesto disponible para estas actividades, etc. Al evaluar los efectos e impactos de un proyecto se deben efectuar comparaciones en diferentes dimensiones. a) Comparacin entre lo Planificado / Lo Logrado b) Comparacin entre antes / Despus de Proyecto c) Comparacin entre Con / sin Proyecto d) Comparacin Temtica

a) La comparacin entre lo planificado y lo logrado (las metas y los logros). Realmente es una comparacin bsica para medir la magnitud de los logros de los componentes, de la operacin, utilizacin y del objetivo central o los efectos directos del proyecto. Esta comparacin requiere metas (valores objetivos) que deben ser tomados de los estudios de preinversin. En caso de existir discrepancias, las causas y factores que las originaron, deben ser investigadas. Sin embargo, para los efectos indirectos o impactos, las metas no se suelen establecer a nivel de pre-inversin. En cualquier nivel, si las metas no fueron establecidos explcitamente, se puede comparar con los estndares establecidos y/o promedio nacional / regional. b) La comparacin antes y despus del proyecto Es usualmente utilizada para medir los efectos del proyecto. Esta comparacin requiere la lnea base, el valor del indicador antes de la intervencin del proyecto, para poder realizarla, la cual no siempre est disponible para los efectos indirectos (impactos). Sin embargo si no se hubiese preparado la lnea base con anterioridad, es an posible llevar a cabo una comparacin de

antes y despus generando la lnea de base al momento de la evaluacin, por ejemplo a travs de entrevistas a los involucrados con el proyecto usando preguntas retroactivas como cunto era.antes del proyecto?, lo que inevitablemente reducir el grado de confiabilidad de la informacin. Tambin debemos anotar el hecho de que la comparacin antes y despus del proyecto no se limita la informacin cuantitativa, ya que tambin se puede aplicar usando mtodos cualitativos a travs de preguntas como cmo o qu eraantes del proyecto? S in embargo, la comparacin entre antes / despus del proyecto tiene una limitacin; la dificultad de separar el impacto de un proyecto de la influencia de otros factores. Por lo tanto, este tipo de comparacin debe ser compensada por un examen cuidadoso de las relaciones causales entre el proyecto y los cambios observados socioeconmicos y ambientales despus del proyecto. c) La comparacin con y sin proyecto Es til para determinar el impacto de un proyecto que est separado de la influencia de otros factores. En caso de tener disponible a un grupo de control (en el caso de sin intervencin del proyecto) es lo ms apropiado para aislar el impacto de un proyecto. Un grupo de control, es un grupo similar al grupo de beneficiarios en todas sus condiciones menos en el hecho de no haber recibido la intervencin de un proyecto. Este enfoque que compara los cambios en estos dos grupos es llamado el modelo cuasi-experimental4. Se utiliza usualmente en la evaluacin de impactos a gran escala que son investigados en el transcurso de periodos bastante largos que duran aos. La dificultad en tomar este tipo de aproximacin es la falta de disponibilidad de un grupo de control y la gran cantidad de recursos necesarios para su implementacin. Mtodos cualitativos tambin se pueden aplicar en este tipo de comparacin. d) Comparacin temtica.Se utiliza para analizar los resultados de un proyecto de algunos puntos de vista especficos, por ejemplo, comparacin entre los casos de xito y los de fracaso, comparaciones por algunas caractersticas socioeconmicas / naturales de la poblacin o reas objetivo tales como el nivel de ingresos, la distancia al mercado, la fertilidad del suelo, clima, etc. 2.3.2. Mtodos Cuantitativos. Son aquellas donde las opiniones estn basadas en comparaciones, tendencias y en algunos casos anlisis estadsticos de datos numricos. Generalmente, stos son usados para la valorizacin de logros de resultados o efectos del proyecto. La informacin para los mtodos cuantitativos se obtiene de los registros de la ejecucin, operacin, utilizacin del proyecto, Archivos y datos estadsticos de las organizaciones relacionadas de alguna manera al proyecto, as como el trabajo de campo. Si esa informacin pudiera ser recolectada y analizada estadsticamente con rigurosidad, las conclusiones podran ser relativamente sencillas de generalizar. Pero usualmente la recopilacin de la informacin es una actividad que requiere una enorme cantidad de recursos, adicionalmente se debe considerar que los nmeros por si solos no dicen mucho sobre los factores detrs de los hallazgos. 2.3.3. Mtodos Cualitativos.-

Se basan en informaciones cualitativas tales como descripciones, categoras, diagramas, mapas, fotos etc. La informacin cualitativa se obtiene a travs de entrevistas individuales o grupales, talleres, observaciones de campo etc. y se usa principalmente para entender el contexto, analizar las causas y relaciones as como los factores que influyen y que no estn representados de manera directa en la informacin cuantitativa. En otras palabras, esta informacin es indispensable para poder interpretar los datos numricos. Sin embargo, si por Ejemplo se aplicasen mtodos cualitativos solo a una pequea parte de una poblacin grande o gran nmero de comunidades que haya sido objeto de un proyecto, sera muy difcil generalizar los hallazgos., sumndole a esto el hecho de que los prejuicios podran distorsionar las observaciones cuando de informacin cualitativa se trata. Se puede resumir que al apreciar que cada mtodo tiene sus ventajas y desventajas, pero que si se aplican balanceadamente se complementan. Usualmente, los cambios en el rea u objetivo son revelados a travs de mtodos cuantitativos a la vez que las causas y procesos detrs de estos cambios son investigados a travs de mtodos cualitativos. Los mtodos cuantitativos establecen tendencias generales de cambio en el rea objetivo, mientras que los mtodos cualitativos brindan un entendimiento detallado del contexto, las relaciones causales y factores de las tendencias, enriqueciendo la interpretacin de los datos numricos. Para comparar los costos y los beneficios de un proyecto se consideran todos los ingresos y egresos del mismo, el valor relativo del dinero en el tiempo y la tasa de inters equivalente cuando se comparan magnitudes monetarias en momentos distintos. Esto puede calcularse de varias formas, pero las ms utilizadas son el valor actual neto (VAN), la tasa interna de retorno (TIR) y la relacin costo-beneficio.