Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Construccion Indicadores Desempeno
Construccion Indicadores Desempeno
Rosario Bello
http://www.eclac.org/ilpes/
Una planificacin sin un presupuesto es una lista de buenos deseos un plan sin indicadores de desempeo (resultados y gestin), es un barco sin timn.
SE PUEDE AFIRMAR, QUE LOS GOBIERNOS HAN IDO INTRODUCIENDO CAMBIOS EN LA GESTIN Y EN LA PRESUPUESTACIN POR CUATRO RAZONES PRINCIPALMENTE: PARA MEJORAR EL PROCESO DE ASIGNACIN DE RECURSOS ENTRE DIFERENTES OPCIONES, PARA MEJORAR LA EFICIENCIA (PARA OBTENER EL MXIMO PRODUCTO CON LOS RECURSOS DISPONIBLES), PARA MEJORAR LA TRANSPARENCIA Y EL RENDIMIENTO DE CUENTAS LA EXIGENCIA DE LA CIUDADANA POR SERVICIOS EFECTIVOS, LO QUE OBLIGA AL ESTADO A LEGITIMARSE SOBRE LA BASE DE UN MEJOR DESEMPEO PBLICO.
PRESUPUESTO CONVENCIONAL 1 AO QUIN GASTA? EN QU GASTA? RECURSOS NECESARIOS PARA QUE EL GOBIERNO FUNCIONE
RECURSOS LUEGO PLANIFICACIN
PRESUPUESTO PARA RESULTADOS MEDIANO Y LARGO PLAZO PARA QU SE GASTA? QU RESULTADOS SE QUIEREN LOGRAR? VNCULO RECURSOS RESULTADOS PLANIFICACIN LUEGO RECURSOS ANUAL O SEMESTRAL OUTPUTS; MEJORAR EFICACIA Y EFICIENCIA DEL GASTO PBLICO VINCULANDO LA ASIGNACIN Y USO DE $$$ A LOS RESULTADOS DE LAS INSTITUCIONES A PARTIR DE INFORMACIN DE DESEMPEO FLEXIBLE; CONTRATOS DE DESEMPEO Y DISCRECIONALIDAD DEL GASTO PRODUCTO, RESULTADOS E IMPACTO (EFICACIA, EFICIENCIA Y CALIDAD) MIRADA EXGENA EN LA POBLACIN OBJETIVO GASTA PARA AHORRAR(AHORRO EN MEDIANO PLAZO: MS SALUD, MS EDUC)
RGIDA; CENTRADA EN EL CUMPLIMIENTO DE PROCESOS PROCESO (ECONOMA) Y A VECES COBERTURA (EFICACIA) MIRADA ENDGENA INSTITUCIONAL AHORRA PARA GASTAR EJECUCIN PRESUPUESTARIA
Avances en dos niveles: 1. Funcin Prospectiva. Los sistemas de planificacin, se proponen con una mirada de largo plazo (20 aos), (Escenarios y Metas) 2. Institucionalizada la Funcin Formulacin. Expresa en planes de nacionales de desarrollo (4 - 5 aos) asociados a presupuestos plurianuales. (Asignacin de recursos a objetivos estratgicos y metas)
HAY ESTANCAMIENTO CONVERGENCIA ENTRE SECTORES FALTA DE INFORMACIN RENUENCIA A MEDIR RESULTADOS E IMPACTO
Estancamiento: 1. Frente a los problemas sociales (pobreza, salud, educacin) Los planes de desarrollo expresan un sin fin de actividades y metas sectoriales no integradas ni convergentes 2. La planificacin y la elaboracin de presupuesto no estn alineados, porque no se vincula la informacin sobre resultados con el proceso presupuestario y con la asignacin de recursos
Estancamiento: 3. Escasa articulacin entre el nivel macro y el nivel sectorial-institucional: Metas Nacionales con escasa expresin en prioridades sectoriales; Metas Sectoriales difcilmente articuladas con metas institucionales; Metas Institucionales sin conexin con metas operacionales
4. Exceso de instrumentos de planificacin: Plan Nacional de Desarrollo; Planes Sectoriales; Planes Institucionales; Programas Presupuestarios. Cada uno con sus objetivos, indicadores, metas, etc.
Tres lemas
Compartir objetivos estratgicos (un plan, una meta, varias instituciones) Definir indicadores de impacto, y de resultados (mediano plazo) Simplificar (un solo sistema de seguimiento?, pocos indicadores)
PENSAR LAS POLITICAS PBLICAS COMO UNA CADENA DE GENERACIN DE VALOR PBLICO
Transformacin deseada
Procesos
Productos
Resultados
Impacto
GENERAR UN CONJUNTO ARTICULADO DE DEFINICIONES ESTRATGICAS ALINEADAS A LAS PRIORIDADES GUBERNAMENTALES, TRABAJADAS CON LOS MINISTERIOS SECTORIALES, LA SECRETARA DE LA PRESIDENCIA Y LAS PRIORIDADES PRESUPUESTARIAS ESTABLECIDAS EN EL PROYECTO DE LEY DE PRESUPUESTOS OBJETIVO: HACER CONSISTENTE LA SOLICITUD DE RECURSOS CON LAS PRIORIDADES PROPUESTAS POR LAS INSTITUCIONES EN SU PRESUPUESTO, INCORPORANDO INFORMACIN DEL POR QU Y CMO SE UTILIZARN LOS RECURSOS, CONTRIBUYENDO A UNA DISCUSIN PRESUPUESTARIA ORIENTADA A RESULTADOS Y NO A INSUMOS. APOYAR LOS PROCESOS DE PLANIFICACIN Y CONTROL DE LAS INSTITUCIONES, Y A PARTIR DE ESTO ORIENTAR LA GESTIN INSTITUCIONAL HACIA EL CUMPLIMIENTO DE LOS RESULTADOS, PARTICULARMENTE RESPECTO DE LA ENTREGA DE BIENES Y SERVICIOS A SUS BENEFICIARIO
EJEMPLO
EJEMPLO
M V OE M $$$
M V OE M $$$
M V OE M $$$
PND SECTOR
MINISTERIO
PROGRAMAS
PND
GOBIERNO REGIONAL
MINISTERIO
GOBIERNO PROVINCIAL MUNICIPIO
M P X L
A N E A C I N
P R O G R A M A CI N
INDICADORES
Metas Estratgicas
Metas
Programas
Presupuestarios
PROGRAMA PROGRAMA PROGRAMA
PROGRAMA
Indicadores
MX
SECRETARA(S)
ECONOMA (SE) TRABAJO (STPS) (TODAS) TRABAJO STPS EDUCACIN (SEP) ECONOMA (SE) HACIENDA (SHCP) ECONOMA (SE) AGRICULTURA (SAGARPA) MEDIO AMBIENTE (SEMARNAT) TRABAJO Y PREVISIN (STPS) ENERGA (SENER) TURISMO (SECTUR) RELACIONES EXTERIORES (SRE) SEGURIDAD PBLICA (SSP) SEDESOL
US$ 8.020
US$ 29.000
Porcentaje
ndice de competitividad
Escala 1 al 7
Personas por ao
21.4 millones
46 millones
MX
SECRETARA(S)
SEDESOL TODAS EDUCACIN (SEP) SEDESOL SEP SEDESOL SALUD SEDESOL SALUD SEDESOL SEDESOL TRABAJO (STPS) EDUCACION (SEP) ECONOMIA (SE)
INDICADOR
% de Personas en pobreza alimentaria Aos de escolaridad Calidad educativa Calificacin de MX en examen PISA Tasa de mortalidad infantil (=> 5 aos) Esperanza de vida al nacer Brecha de ingreso % que representa ingreso de las mujeres con respecto al ingreso hombres en trabajos equivalentes
Porcentaje 200 800 puntos Defunciones cada 100 mil nacidos vivos Nmero de aos
25
80
Porcentaje
90%
COSTA RICA
Inversin anual en educacin como porcentaje del PIB. 6% al 8%
Diagnstico
Identificar problemas Definir prioridades
Metodologa
Evaluacin
Ejes de Poltica
Sectores
Social y lucha contra la pobreza, Educacin , Salud Seguridad ciudadana y prevencin del delito Cultura
Social
Productiva
Sostenibilidad Ambiental
Ciencia y tecnologa, Financiero Infraestructura y Transportes Trabajo y Seguridad Social Comercio Exterior Productivo - Turismo Poltica Monetaria y Superv. Sistema Financiero Ambiente, energa telecomunicaciones Coordinacin gubernamental y
Poltica Exterior
Metas Globales
INDICADO RES
11 EJES ESTRATGICOS
Metas Estratgica s
Metas Sectoriales
Acciones Estratgicas
Planes y Programas
MINISTERIO
5 EJES ESTRATGICOS
MISION AGUA AMBIENTE ENERGIA MINERIA TELECOM ACCIONES ESTRATGI CAS
MISION VISION
Indicadores
Metas EJE
Planes Operativos
2
DEFINIR INDICADORES DE DESEMPEO ASOCIADOS A LAS DEFINICIONES ESTRATGICAS
Planes Estratgicos Institucionales Misin, Productos estratgicos Indicadores Indicadores Resultados y Productos
Un indicador es un instrumento que nos provee evidencia cuantitativa acerca de si una determinada condicin existe o si ciertas metas han sido logrados o no. Un indicador de desempeo nos entrega informacin cuantitativa respecto de la eficacia, calidad y eficiencia en el logro de los objetivos de un programa. Puede cubrir aspectos cuantitativos o cualitativos.
Indicadores y tomadores de decisiones Un sistema de cuenta pblica orientada a resultados, requiere datos sobre un conjunto de indicadores diferentes, (informacin) para distintos niveles de toma de decisiones. Los Legisladores y los Directores de instituciones requieren informacin estratgica sobre los desempeo de los programas. Los Gerentes de programas y sus staff requieren detalles sobre la provisin de insumos, las actividades, bienes y servicios que generan y resultados intermedios .
I N S U M O S
Proceso
Producto
Resultados Intermedios
Impacto
http://www.eclac.org/ilpes/
GESTIN PBLICA
DESICIONES
INDICADORES
INFRAESTRUCTURA
OTROS GASTOS
RESULTADOS E IMPACTOS
SERVICIOS
PRODUCTOS
PROCESO
INSUMOS
RECURSOS
INVERSIN EN INFRAESTRUCTURA
Indicador de EFICACIA
Mide el grado de cumplimiento de un objetivo. No considera los recursos asignados para ello Ejemplo: Porcentaje de becas entregadas en relacin a las programadas. Reduccin de la tasa de analfabetismo en la poblacin atendida por el programa
Elevar ingreso
Porcentaje de incremento en el ingreso anual de las familias atendidas por el programa respecto al grupo de control.
Porcentaje de la superficie subsidiada que disminuye niveles de erosin en el suelo sobre el total de hs con subsidio Porcentaje de trabajadores sin calificacin egresados del programa de capacitacin que consiguen un empleo comparado con los no Participantes del programa
Sustentabilidad ambiental
insercin laboral
Transferencia de Tecnologa Mejorar cobertura de atencin primaria en salud escolar Incremento de la Tasa de escolaridad primaria
Porcentaje de centros de atencin primaria en salud con programas especiales para Escuelas pblicas sobre el total de centros Porcentaje de incremento de nios y nias rurales beneficiarios del programa que terminan la primaria respecto del promedio nacional.
Indicador de EFICIENCIA
Mide la relacin entre los productos y servicios generados con respecto a los insumos o recursos utilizados. Aproximaciones a este concepto: -Costos de produccin (costos medios, costos unitarios gastos administrativos en relacin al gasto total) -Productividad media de los distintos factores de produccin Ejemplos: Costo promedio anual por alumno atendido Promedio de solicitudes tramitadas por funcionario
Porcentaje del gasto administracin del programa sobre el total del presupuesto ejecutado Costo del programa por municipio atendido Porcentaje de gasto en operacin respecto de gasto total Costo promedio de todas las actividades asociadas a la produccin del un servicio (capacitacin) Costo promedio por escuela supervisada.
Productividad : Productividad de los inspectores: (Empresas inspeccionados/Jornadas persona) Nmero de camas-da disponible por hospital Asistencia a clases por mes Nmero de casos terminados por juez Nmero de enfermos/as atendidos por da Nmero de enfermos por mdico en el hospital
Indicador de CALIDAD
Mide atributos, capacidades o caractersticas que deben tener los bienes o servicios para satisfacer adecuadamente los objetivos del programa. Calidad es una dimensin de la eficacia, pero por su importancia se la distingue con nombre propio Ejemplos: Grado de satisfaccin de los usuarios Oportunidad
CALIDAD
Precisin
Porcentaje de respuestas a los Senadores dentro de los lmites acordados sobre el total solicitado Porcentaje de reportes econmicos entregados en tiempo acordado sobre el total realizado
Porcentaje de localidades aisladas cubiertas por servicios de educacin sobre el total pas
Porcentaje de escuelas que cuentan con infraestructura para discapacitados sobre el total pas Porcentaje de Poblacin con necesidades especiales que son miembros activos de la Biblioteca XXY
Porcentaje de contratos terminados por errores sobre total del semestre Tasa de fallas efectivas/ Tasa de Fallas esperadas
Porcentaje de materiales de viviendas sociales que cumplen con especificaciones tcnicas sobre total
Indicador de ECONOMA
Mide la capacidad del programa para generar o movilizar adecuadamente los recursos financieros. Economa es una dimensin de la eficiencia. Ejemplos: Ingresos propios generados Presupuesto ejercido
ECONOMA
Porcentaje de recuperacin de crditos de corto plazo Aporte de beneficiarios a financiamento sobre Monto total de inversin del programa Gasto de realizado sobre el gastos programado Recuperacin de cobranza sobre la Facturacin Propocin de recursos ingresados al programa por otras fuentes Porcentaje de ejecucin del presupuesto Porcentaje de recuperacin de los costos del programa
INDICADORES DE DESEMPEO
IMPACTO
INDICADORES DE DESEMPEO
Secuencia de resultados en el tiempo y mbitos:
$$
Procesos
Productos
Resultados
Impacto
Indicadores de los servicios resultantes una vez usado los recursos EFICACIA CALIDAD EFICIENCIA
ECONOMA EFICIENCIA
EFICACIA
EFICACIA
LAS BASES METODOLGICAS De los cuatro niveles : Dos de ellos son exgenos: OBJETIVOS Y BIENES Y SERVICIOS. Pertenecen al contexto poltico, econmico y social en que se inserta el PND, Sector, Programas, y Dos son endgenos: INSUMOS E INVERSIN. Pertenecen al mbito de la gestin gerencial del programa.
INDICADORES EN METODOLOGA PLANIFICACIN ESTRATGICA Dimensin del desempeo a medir mbito de medicin
Objetivos
VISIN ..trabajar efectiva y eficientemente para garantizar la satisfaccin de las necesidades fundamentales de existencia, seguridad y prosperidad del Estado costarricense y de sus nacionales,
MISIN ..es el ente rector de las RREE del pas, . corresponde representar al Estado y defender sus intereses polticos, econmicos y sociales, as como los de sus nacionales en el exterior, mediante..que brinde servicios ausuarios internos y externos, al ciudadano nacional, al cuerpo diplomtico , y a las Iglesias..
OBJETIVOS ESTRATGICOS Poltica exterior Promocin Formacin diplom. Cooperacin Serv. Exterior Protocolo
Productos Procesos
Contribuir a disminuir la prevalencia de enfermedades crnicas asociadas a la obesidad de la poblacin beneficiaria del sistema pblico. Poblacin beneficiaria del sistema pblico con malnutricin por exceso, ha mejorado su condicin nutricional Poblacin beneficiaria con sobrepeso u obesos con tratamiento multidisciplinario * Identificacin y seleccin de beneficiarios * Diagnstico y definicin del programa de tratamiento *Ejecucin Programa
% de poblacin objetivo que recibe tratamiento oportunamente, sobre el total. (Calidad /Producto) Promedio de poblacin objetivo con tratamiento por centro de salud rural (Eficiencia / Producto) % de Beneficiarios con diagnstico realizado respecto de los beneficiarios programados en el mes (Eficacia/ Proceso) Costo promedio del programa por beneficiario atendido en el ao.
- 48 - 105 - 33 - 33 - 219
Producto Estratgicos
Usuario
Gasto Asociado
Medio de Verificacin
N de Obj. Estratgico
Disponer de informacin sobre los niveles de cumplimiento de los objetivos planteados y resultados esperados de cada programa y enriquecer el anlisis en la formulacin del presupuesto y su discusin en el Congreso. se presentan como informacin complementaria al Proyecto de Ley de Presupuestos, y una vez aprobado ste, las metas se vinculan con el seguimiento (monitoreo) de la ejecucin.
4. Optar por sistemas integrados de evaluacin: Men de evaluaciones Dirigido a satisfacer necesidades especficas de informacin de resultados de distintos usuarios dentro y fuera del gobierno Combinacin de tcnicas de evaluacin para cubrir diferentes niveles de la cadena de implementacin de los programas
Evaluaciones de Diseo
Evaluaciones de Impacto
Diseo
Impacto
Evaluaciones de procesos
Evaluacin de Diseo. Se realiza a programas que se encuentran en su primer ao de implementacin y examina en que medida el programa hace un aporte relevante a la solucin de un problema especfico y si los objetivos del programa se encuentran alineados con los objetivos de su sector o entidad. Evaluacin de Consistencia y Resultados. Es una evaluacin diseada para obtener una perspectiva general y comparativa sobre los siguientes aspectos de los programas: diseo, planificacin estratgica, cobertura, mecanismos de focalizacin, operacin, percepcin de los beneficiarios y resultados.
Evaluacin de impacto. Busca medir los cambios en las condiciones de bienestar de la poblacin beneficiaria que son atribuibles a un programa especfico. Evaluacin de Procesos. Determina la eficiencia y la eficacia de los mecanismos de operativos de un programa durante su implementacin y ofrece recomendaciones con respecto a aspectos susceptibles de mejora antes de que finalice el programa Evaluacin de Indicadores. Mide la calidad de los indicadores, incluyendo las MIs, para establecer si son claros, relevantes, econmicos, monitoreables y adecuados, lo mismo que si su informacin proviene de fuentes confiables.
Evaluaciones de Impacto
Diseo
Insumos
Actividades
Producto
Resultados
Impacto
Evaluaciones de procesos
5. Evaluaciones de impacto multisectoriales que capten el efecto conjunto de varios programas o instituciones sobre un determinado resultado de poltica pblica. El resultado de las polticas pblicas por lo general depende de la accin de varios programas. Resultados transversales o intersectoriales: disminucin de la pobreza; productividad, competitividad
Mide el impacto de los programas que apuntan a un mismo objetivo como es el caso de la evaluacin de los programas de micro emprendimiento, la evaluacin de los programas de cultura, la evaluacin de los programas de fomento, etc.
6. ANLISIS DE LA CONSISTENCIA ESTRATGICA SECTORIAL: Dependencias o servicios que integran un mismo sector, como es el caso de la evaluacin a las instituciones del sector pesca o infancia
Diseo institucional. Analiza la consistencia entre misin, objetivos estratgicos, oferta de bienes y servicios (productos estratgicos), y beneficiarios vinculados a cada servicio, la estructura institucional y la distribucin de funciones entre cada una de las unidades de las instituciones evaluadas. Capacidad institucional. Mecanismos o procedimientos de gestin (de coordinacin y asignacin de responsabilidades, de asignacin y transferencia de recursos y modalidades de pago, de auditora, rendicin de cuentas y transparencia en el uso de recursos, as como tambin las actividades e instrumentos de monitoreo y evaluacin, criterios de focalizacin y/o seleccin de beneficiarios, capacidades institucionales (profesionales, tecnolgicas, organizacionales, etc.).
Resultados y uso de recursos. Medidos a travs de indicadores de desempeo de eficacia, calidad, eficiencia y economa, obtenidos de los productos estratgicos, vinculando estos resultados con los recursos asignados para la provisin de estos beneficios (costoefectividad) y analizando la disciplina financiera.
EJEMPLO MXICO
LECCIONES
1. la implementacin de los sistemas de evaluacin y control de gestin est institucionalmente cerca o coordinada con el proceso presupuestario, tiene efectos positivos sobre: a) el trabajo de formulacin y ejecucin del Presupuesto. b) la percepcin de que los resultados de las evaluaciones y del cumplimiento de las metas de los indicadores podran tener un efecto en la asignacin de los recursos, c) refuerza el compromiso de las instituciones evaluadas e incrementa la probabilidad de que las recomendaciones surgidas de dicho proceso sean efectivamente implementadas.
2. Mejorar los sistemas de informacin de los programas e instituciones, implica entregar en forma oportuna y confiable la informacin necesaria para evaluar sus resultados. Requiere: a) contar con registros de datos bsicos de beneficiarios y postulantes. b) Caracterizacin de la poblacin beneficiaria. c) Datos de la situacin de los beneficiarios antes de participar en el programa o lnea base, etc.
3. la calidad y pertinencia de los indicadores de desempeo y metas que acompaan la formulacin del Presupuesto de cada ao. Requiere: fortalecer la relacin entre los indicadores y las clasificaciones presupuestarias, de modo que sea posible establecer con mayor claridad la relacin entre asignaciones financieras y niveles de produccin.
4. Esfuerzos de capacitacin sostenidos en el tiempo y a travs de diferentes esquemas tendientes a producir cambios en las habilidades y prcticas de los funcionarios y que la orientacin basada en resultados penetre efectivamente en la cultura organizacional del sector pblico a) fortalecer las capacidades tcnicas de los responsables lderes o directores o encargados de las reformas clave. b) Ofrecer capacitacin aplicada continua y servicios de asesoramiento especficos a los ministerios y agencias sectoriales. c) Desarrollar planes de incentivos para recompensar el buen desempeo y la adopcin del modelo.
5. Coordinacin Inter-institucional Las reformas de gestin basada en resultados crearon nuevos roles para una serie de entidades, dando origen a nuevas interacciones a) entre los niveles polticos y tcnicos de las dependencias o servicios del gobierno; y b) entre estas dependencias/servicios, el Congreso y las entidades de control (contraloras). Se necesita una clara definicin de estas interrelaciones, para asegurar que la informacin influencie efectivamente la formulacin de polticas, informe la gerencia de los programas y refuerce la rendicin de cuentas
Datos tiles
Base de indicadores ILPES/CEPAL http://sws.eclac.cl/indicadores Sitio web ILPES: www.ilpes.cl Rosario.bello@cepal.org