Documentos de Académico
Documentos de Profesional
Documentos de Cultura
MINISTERIO DE HACIENDA
Direccin de Presupuestos
NDICE F IGURAS
FIGURA N 1: INSTRUMENTOS DE EVALUACIN E INTEGRACIN AL CICLO P RESUPUESTARIO ............2
FIGURA N 2: INTEGRACIN AL CICLO PRESUPUESTARIO .................................................................10
FIGURA N 3: INTEGRACIN AL CICLO PRESUPUESTARIO .................................................................25
FIGURA N 4: INTEGRACIN AL CICLO PRESUPUESTARIO PRIMERA ETAPA....................................35
NDICE R ECUADROS
RECUADRO N 1: EJEMPLOS DE INDICADORES DE DESEMPEO POR DIMENSIN.................................6
RECUADRO N 2: INDICADORES DE DESEMPEO .................................................................................8
RECUADRO N 3: BALANCE DE GESTIN INTEGRAL............................................................................9
RECUADRO N 4: PROCESO PRESUPUESTARIO. ETAPA DE EVALUACIN INTERNA ............................10
RECUADRO N 5: PROGRAMA DE MEJORAMIENTO DE LA GESTIN ...................................................14
RECUADRO N 6: EJEMPLOS DE INDICADORES DE DESEMPEO POR RESULTADO ..............................15
RECUADRO N 7: PROGRAMA DE MEJORAMIENTO DE LA GESTIN (PMG), SISTEMA DE
PLANIFICACIN / CONTROL DE GESTIN ...................................................................................17
RECUADRO N 8: MATRIZ DE MARCO LGICO ..................................................................................19
RECUADRO N 9: DISEO OPERATIVO ..............................................................................................23
RECUADRO N 10: PROGRAMAS EVALUADOS AO 2001. RECOMENDACONES - IMPLICANCIAS .......29
RECUADRO N 11: INCORPORACIN DEL ENFOQUE O P ERSPECTIVA DE GNERO EN LAS
PRESENTACIONES DE PROGRAMAS AL FONDO CONCURSABLE...................................................37
NDICE C UADROS
CUADRO N 1: INDICADORES DE DESEMPEO AO 2001 ....................................................................12
CUADRO N 2: INDICADORES DE DESEMPEO AO 2002 ....................................................................13
CUADRO N 3: CALIDAD DE INDICADORES ..........................................................................................14
CUADRO N 4: P ROGRAMAS EVALUADOS 1999 - 2001 .......................................................................27
I. Introduccin
Los interrogantes que surgen frente al desafo de evaluar el desempeo de las instituciones pblicas
y sus acciones se pueden sintetizar en dos preguntas fundamentales a travs de qu instrumentos es
posible efectuar esta funcin? y cmo incorporamos los juicios evaluativos que surjan de tales
evaluaciones en acciones que mejoren la situacin?. Las respuestas a estas preguntas no son fciles.
En efecto, como est ya ampliamente documentado 1 , la evaluacin de las acciones de dichas
instituciones enfrenta las siguientes caractersticas del sector pblico.
-
La vinculacin compleja entre productos y resultados, estos ltimos en muchos casos diversos,
con dimensiones cualitativas difciles de objetivar, con efectos no siempre observables en
perodos de tiempo compatibles con los tiempos que imponen los procesos administrativos o las
agendas polticas, y en otros casos con efectos finales no completamente controlables producto
de variables externas.
La ausencia de una relacin transaccional con el beneficiario, debido a que muchos de los
productos o servicios se proveen gratuitamente o con significativos subsidios que impiden una
adecuada expresin de la valoracin de los productos o servicios por parte de los usuarios, lo
que tambin dificulta disponer de un indicador de resultados de gestin agregado.
Contrariamente a lo que ocurre con el sector privado donde las ventas son un indicador claro de
aceptacin y el balance un indicador agregado de resultados.
Los problemas recin mencionados se traducen en serias dificultades para los tomadores de
decisiones de asignacin de los recursos pblicos, en un escenario de exigencias cada vez mayores
de disciplina fiscal y de responsabilidad por la calidad del gasto frente a la ciudadana. Esto ha
trado como consecuencia, en los ltimos aos, un gran auge de los desarrollos tericos y prcticos
en relacin a la evaluacin y seguimiento del desempeo de la gestin presupuestaria o presupuesto
por resultados 2 .
Chile no escapa de los problemas recin sealados ni de la necesidad de mejorar su desempeo. Por
esto durante los ltimos aos, como parte de un conjunto ms amplio de iniciativas de mejoramiento
de la gestin pblica, el Ministerio de Hacienda ha desarrollado e introducido en el proceso
presupuestario diferentes instrumentos con el objeto de hacer ms transparente y mejorar el anlisis
y formulacin del pres upuesto pblico, y por tanto de las decisiones en materia de asignacin de
recursos a los diferentes programas, proyectos e instituciones (ver figura N1). Dichos instrumentos
se han perfeccionado en el tiempo, incorporando adems nuevos elementos innovadores. Todos
ellos enfatizan la bsqueda de resultados, compromisos y transparencia en la gestin, y forman parte
de un proceso gradual de cambio de prctica de la gestin pblica.
A partir de la elaboracin del presupuesto 2001 se ha contado con informacin evaluativa de un
conjunto de programas, se incorporaron indicadores de desempeo de los Servicios Pblicos y se
cre un Fondo Central de Recursos para Prioridades Gubernamentales (Fondo Concursable), al cual
postulan en un formato estandarizado las iniciativas nuevas, y las ampliaciones o reformulaciones
sustantivas de programas existentes. Adicionalmente, en esta misma lnea a partir del ao 2001 se
incorpor el desarrollo de evaluaciones en profundidad, las que sern utilizadas en la elaboracin
del prximo presupuesto.
Por otra parte, se dio un nuevo impulso a la elaboracin de balances institucionales a travs de los
Balances de Gestin Integral (BGI) creados el ao 1997, y se estableci una nueva instancia de
evaluacin de la ejecucin presup uestaria que precede a la presentacin del Proyecto de Ley de
Presupuestos en el Congreso Nacional.
Figura N 1
Instrumentos de Evaluacin e Integracin al Ciclo Presupuestario
EVALUACIN DE PROGRAMAS
INDICADORES
DE DESEMPEO
PROCESO PRESUPUESTARIO
MINISTERIO DE HACIENDA
FONDO
CONCURSABLE
BGI
MEJORAMIENTO DE GESTIN
La continuidad de esta lnea de trabajo, entendindola como un proceso, permitir en los prximos
aos contar con ms y mejores indicadores, lo que crecientemente enriquecer el compromiso y
evaluacin de desempeo de las instituciones, contribuyendo a la transparencia y a una mejor
calidad del gasto.
d) Calidad del Servicio. La calidad del servicio es una dimensin especfica del concepto de eficacia
que se refiere a la capacidad de la institucin para responder en forma rpida y directa a las
necesidades de sus clientes, usuarios o beneficiarios. Son atributos de los productos (bienes o
servicios) entregados, tales como: oportunidad, accesibilidad, precisin y continuidad en la entrega
del servicio, comodidad y cortesa en la atencin.
Algunas relaciones que reflejan este concepto son, por ejemplo, nmero de reclamos sobre el total
de casos atendidos, tiempo de tramitacin de beneficios, tiempo de espera en oficinas de atencin de
pblico o velocidad de respuesta ante cartas, llamadas o reclamos por parte de los usuarios.
Ejemplos de indicadores para cada dimensin descrita se presentan en el siguiente recuadro.
Recuadro N 1
Ejemplos de Indicadores de Desempeo por Dimensin
A. EFICACIA
1. Porcentaje de cambio en la calidad de vida de los Agricultores (Instituto de Desarrollo
Agropecuario, INDAP)
2. Porcentaje de nios obesos menores de 6 aos bajo control (Subsecretaria de Salud)
B. EFICIENCIA
1. Promedio de Fiscalizaciones por Fiscalizador (Superintendencia de Instituciones de Salud
Previsional)
2. Promedio mensual de reclamos resueltos por funcionario (Superintendencia de Electricidad y
Combustibles, SEC)
C. ECONOMA
1. Porcentaje de recursos aportados por terceros (Comisin Nacional del Medio Ambiente, CONAMA)
2. Porcentaje de Cobranza (Comisin Chilena de Energa Nuclear, CCHEN)
D. CALIDAD
1. Tie mpo promedio de entrega de viviendas (Servicio de Vivienda y Urbanizacin, SERVIU)
2. Tiempo promedio de solicitudes de Bonificacin (Corporacin Nacional Forestal, CONAF)
El indicador se puede asociar directamente a una asignacin o varias asignaciones, un tem o varios itemes, un
subttulo o varios subttulos, y un programa o un conjunto de programas.
Recuadro N 2
Indicadores de Desempeo
MINISTERIO
SERVICIO
PROGRAMA
Producto relevante
(bien y/o servicio) al
que se vincula
Indicador de
Desempeo
Frmula de
clculo
Informacin Histrica
1998
1999 2000
Estimacin
PARTIDA
CAPTULO
PROGRAMA
Meta
2001
2002
Programa/ Subttulo/
tem/ asignacin
Medios de
verificacin
Eficacia
Eficiencia
Calidad
Economa
Las definiciones estratgicas son presentadas conjuntamente con la propuesta de presupuesto de cada Servicio,
pudiendo provenir de procesos de planificacin estratgica formulados con anterioridad por la institucin o bien de otros
procesos de planificacin, anlisis o documentos elaborados por el Servicio.
8
Programa, Subtitulo, tem o Asignacin de acuerdo al Clasificador Presupuestario de la Ley de Presupuestos.
1.4 Seguimiento
En el perodo 1994-1997 el cumplimiento de las metas de desempeo comprometidas en los
indicadores fue informado al Ministerio de Hacienda por cada uno de los servicios en el perodo de
formulacin del presupuesto del ao siguiente, efectundose un anlisis de los resultados. Los
informes de cumplimiento en cada ao fueron enviados al Congresos Nacional.
A partir de los compromisos o metas fijadas para el ao 2001, el cumplimiento se informar en el
Balance de Gestin Integral (ver recuadro N 3) del ao correspondiente, durante el primer trimestre
del siguiente ao, efectundose a continuacin las reuniones tcnicas que corresponda para analizar
los resultados. Los medios de verificacin definidos son la base de informacin en esta etapa. El
informe completo de cumplimento se presentar al Congreso junto con el Proyecto de Ley de
Presupuestos.
Recuadro N 3
Balance de Gestin Integral (BGI)
Desde el ao 1997 la Ley de Presupuestos ha establecido que los rganos y servicios pblicos regidos por el Ttulo II
de la Ley 18.575 (Gobierno Central), tendrn la obligacin de proporcionar informacin acerca de sus objetivos, metas
y resultados de su gestin. Con este fin el decreto del Ministerio de Hacienda N 47 (1999) y sus modificaciones cre
los Balances de Gestin Integral (BGI) a travs de los cuales se informa de dichos resultados como cuenta pblica al
Congreso Nacional.
Los Balances son elaborados por los propios Servicios Pblicos en el marco de las instrucciones que para estos efectos
define el Ministerio de Hacienda, a travs de la Direccin de Presupuestos. Es esta ltima institucin la responsable de
las definiciones generales para este proceso y de su envo al Congreso Nacional.
En la elaboracin de los BGI correspondiente al ao 2000 se introdujeron una serie de modificaciones orientadas a
perfeccionar el diseo y contenidos del instrumento, de modo de garantizar una mejor informacin de los resultados
globales de gestin de las instituciones pblicas.
Los principales aspectos que comprende este balance institucional son: i) Presentacin de las definiciones estratgicas y
de los resultados ms relevantes de la institucin, ii) Identificacin de la institucin en aspectos tales como; estructura
organizacional, dotacin, principales productos, iii) Resultados de la gestin incluyendo informe de desempeo, de
gestin financiera, de recursos humanos, entre otros aspectos.
Los BGI son enviados al Congreso Nacional a ms tardar el 30 de Abril de cada ao. Adems , a partir del ao 2001 la
informacin que estos contienen es utilizada en el proceso de evaluacin interna que realiza la Direccin de
Presupuestos, previo al proceso de formulacin presupuestaria.
etapa de evaluacin interna que comprende el proceso presupuestario de esta institucin (ver
recuadro N 4).
Recuadro N 4
Proceso Presupuestario. Etapa de Evaluacin Interna
A partir del ao 2000, el proceso presupuestario en el Ministerio de Hacienda consolid una etapa inicial de
evaluacin interna de cada Servicio y Ministerio. En ella se analizan todos los antecedentes disponibles en relacin
a la gestin financiera y de desempeo de las instituciones, anlisis que sirve de base para las definiciones de
presupuestos exploratorios y marcos presupuestarios para la siguiente etapa de Formulacin del Proyecto de Ley
de Presupuestos.
Como se sealara, las metas y grado de cumplimiento de los indicadores se envan al Congreso
Nacional como parte de la informacin que acompaa la presentacin del Proyecto de Ley de
Presupuestos, con el objeto de que los integrantes de las Comisiones Legislativas cuenten con estos
antecedentes en la tramitacin de dicho proyecto (ver figura N 2).
Figura N 2
Integracin al Ciclo Presupuestario
Seguimiento
Indicadores
Ley de Presupuestos
EVALUACIN
INTERNA
Presentacin Aprobacin
Proyecto
Ley
FORMULACIN
EJECUCIN
Balance Gestin
Integral
Presentacin
Formato Estndar.
Fondo Concursable
Evaluacin de
Programas
En relacin a los resultados de los indicadores cabe tener presente que el objetivo de los indicadores
de desempeo en relacin con la asignacin de recursos no necesariamente implica una relacin
mecnica, inmediata y directa de ms o menos recursos dependiendo del cumplimiento de su meta.
En algunos casos de programas, productos (bienes o servicios) con resultados insuficientes, con el
10
fin de no perjudicar a los beneficiarios con reducciones significativas del presupuesto, puede ser
ms recomendable fijar condiciones que propicien o exijan un mejor desempeo, condiciones que
pueden ser establecidas en la propia Ley de Presupuestos o procesos vinculados a su preparacin.
De este modo, con posterioridad, se podr revisar la decisin en base al desempeo que muestren el
o los indicadores, segn corresponda. En otros casos, reas con buen desempeo pueden no requerir
de recursos adicionales si su oferta cubre adecuadamente las necesidades.
Atendiendo a las razones descritas, los indicadores y sus resultados son utilizados con prudencia, ya
sea que estos constituyan fundamento o condicionantes de decisiones financieras. Adicionalmente,
los indicadores no siempre podrn dar cuenta en forma integral del desempeo institucional,
requirindose de otros antecedentes complementarios para esto, lo que refuerza un uso prudente.
En los aos anteriores el proceso se inicio con las propuestas de las Instituciones. Para el proceso de formulacin del
Presupuesto 2002 se envi una propuesta de indicadores al 64% de las instituciones.
11
2.2 Efectividad
El presupuesto correspondiente al ao 2001 incorpor indicadores de desempeo para un total de 72
servicios pblicos presentando 275 indicadores. Estos indicadores cubren principalmente las
funciones sociales y econmicas y mayoritariamente miden el mbito de eficacia de productos o
servicios institucionales como muestra el cuadro N 1. Su cumplimiento ser evaluado una vez
finalizado el ao 2001.
Cuadro N 1
Indicadores de Desempeo Ao 2001
Funciones
A Funciones Generales
Eficacia
42
Eficiencia
2
Economa
9
Total
53
Porcentaje (%)
21,4
B Funciones Sociales
72
14
27
113
41,0
C Funciones Econmicas
86
15
109
39,6
TOTAL
200
24
51
275
Nota: Clasificacin de acuerdo a la Clasificacin Funcional del Gasto, Estadsticas de las Finanzas
Pblicas, Direccin de Presupuestos, Ministerio de Hacienda.
100
El presupuesto correspondiente al ao 2002 incorpora 537 indicadores para 109 servicios pblicos,
nmero significativamente mayor que en el ao anterior. Un 56% de los indicadores presentados
corresponden al mbito de la eficacia como se observa en cuadro N 2. En este ltimo ao los
indicadores se vinculan con un 33% de los productos (bienes o servicios) provistos por las
instituciones 10 .
10
Uno o ms indicadores por producto estratgico definido. Para estos efectos se entiende por productos (bienes o
servicios), aquellos que materializan la razn de ser de la misin institucional. Estos pueden corresponder a una
definicin agregada de las prestaciones o programas que el servicio ofrece como respuestas para atender a las
necesidades de sus clientes, beneficiarios o usuarios. Los productos se deben generar bajo la responsabilidad de la
institucin, ya sea por produccin directa o por subcontratacin.
12
Cuadro N 2
Indicadores de Desempeo Ao 2002. Ambitos o focos de Evaluacin
Funciones
Eficacia
Eficiencia
Economa
Calidad
51
16
B Funciones Sociales
133
33
38
62
266
49,5
C Funciones Econmicas
TOTAL
115
299
13
53
21
67
40
118
189
537
35,2
100
A Funciones Generales
Total
Porcentaje
(%)
82
15,3
Notas:
Clasificacin de acuerdo a la Clasificacin Funcional del Gasto, Estadsticas de las Finanzas Pblicas,
Direccin de Presupuestos, Ministerio de Hacienda.
En el proceso de formulacin de indicadores 2002 se incluye indicadores de la dimensin de calidad.
2.4 Calidad
2.4.1 Consolidacin Metodolgica
En estos dos ltimos aos se ha perfeccionado los formatos de presentacin de indic adores y los
documentos tcnicos que orientan su elaboracin, lo que ha permitido ir consolidando la
metodologa. Cabe sealar que con el objeto de homologar criterios tcnicos bsicos, sta ha pasado
a formar parte de la Evaluacin de Programas Gubernamentales (ver punto III), ha sido incorporada
en el formato estndar de presentacin de iniciativas al Fondo Concursable (ver punto V), y forman
parte tambin de los antecedentes tcnicos para el desarrollo del sistema de Planificacin y Control
de Gestin de los Programas de Mejoramiento de Gestin (ver recuadro N 5) que dirige el
Ministerio de Hacienda.
2.4.2 Generacin de Competencias
La elaboracin de indicadores para su incorporacin en el presupuesto as como en los otros
instrumentos recin sealados ha permitido avanzar en al generacin de competencias al interior de
las instituciones. Adems, la relacin de trabajo ms directa con los profesionales encargados ha
permitido un anlisis ms detallado de los aspectos tcnicos, facilitando adems la comprensin del
objetivo de las mediciones. Todo lo anterior debera ir generando una mayor sinergia para su
elaboracin y uso como herramienta de gestin.
13
Recuadro N 5
Programa de Mejoramiento de Gestin (PMG) 11
En el ao 1998, con la implementacin de la Ley 19.553, se inici el desarrollo de los Programas de Mejoramiento de la
Gestin (PMG) en los Servicios Pblicos, asociando el cumplimiento de objetivos de gestin a un incentivo de carcter
monetario para todos los funcionarios que se desempean en ellos.
En al ao 2000 se consider necesario perfeccionar la elaboracin y aplicacin de este instrumento con el objeto de
contribuir, a partir del ao 2001, al desarrollo de reas estratgicas para la gestin pblica. A partir de ese ao la
elaboracin de los PMG por parte de los servicios se enmarca en un conjunto de reas de mejoramiento de la gestin
comunes para la mayora de las instituciones del Sector Pblico, las que constituyen el Programa Marco.
El Programa Marco de los PMG 2001 comprende etapas de desarrollo o estados de avance posibles de los sis temas de
gestin vinculados a las reas de mejoramiento. Cada etapa de desarrollo es definida especificando claramente sus
contenidos y exigencias, constituyendo un objetivo de gestin posible de comprometer en un programa anual. De este
modo, con el cumplimiento de la etapa final el sistema debe alcanzar su completo desarrollo segn caractersticas y
requisitos bsicos.
Las reas de gestin establecidas son: Recursos Humanos, Atencin de Usuarios, Planificacin / Control de Gestin,
Auditoria Interna, Desconcentracin, Administracin Financiera. Asociado a estas reas se definen 11 sistemas de
gestin. El Programa Marco de los PMG 2002 incorpora adems el rea Enfoque de Genero .
Proceso
Producto
Resultado
Total
Intermedio Final Total
30
6
36
82
A Funciones Generales
12
34
B Funciones Sociales
44
68
88
66
154
266
C Funciones Econmicas
Total
22
78
72
174
72
190
23
95
95
285
189
537
11
Ver documento Programa de Mejoramiento de la Gestin (PMG), Ministerio de Hacienda, DIPRES disponible en
pgina web http://www.dipres.cl en la seccin Control de Gestin, Publicaciones.
14
Recuadro N 6.
Ejemplos de Indicadores de Desempeo por Resultado
A. EFICACIA
a. Porcentaje de egreso favorable de nios y nias egresados de programas proteccionales
(Servicio Nacional de Menores, SENAME)
b. Tasa anual de variacin de reclusos con contrato de trabajo (Gendarmera de Chile)
B. EFICIENCIA
a. Promedio de controversias resueltas por abogado (Superintendencia de ISAPRES)
b. Promedio de Inspecciones a faenas mineras por fiscalizador (Servicio Nacional de Geologa y
Minera, SERNAGEOMIN)
C. ECONOMA
a. Porcentaje de crditos de corto plazo recuperados (Instituto de Desarrollo A gropecuario, INDAP)
b. Porcentaje de cuentas por cobrar con relacin a ventas (Central de Abastecimientos, CENABAST)
D. CALIDAD
a. Porcentaje de declaraciones y pagos va Internet y planilla electrnica (Instituto de Normalizacin
Previsional, INP)
b. Tasa de Cesre a con herida operatoria infectada (Servicios de Salud)
15
16
Recuadro N 7
Programa de Mejoramiento de Gestin (PMG), Sistema de Planificacin / Control de
Gestin12
El sistema de Planificacin y Control de Gestin incorporado en el Programa Marco del Programa de Mejoramiento
de la Gestin, tiene por objeto que los servicios diseen e implementen un Sistema de Informacin para la Gestin
(SIG) que permita la construccin de indicadores de desempeo para apoyar la toma de decisiones.
El sistema se desarrolla en etapas, la primera establece las definiciones estratgicas, esto es; misin, objetivos
estratgicos, productos, clientes. La segunda, disea el sistema de informacin para la gestin, el que incluye entre
otros, centros de responsabilidad e indicadores de desempeo por producto. La tercera, coloca en funcionamiento el
SIG y en la cuarta etapa, el servicio presenta los indicadores de desempeo de sus principales productos en la
formulacin del Presupuesto.
3.2. Seguimiento
Considerando la crucial importancia del seguimiento, adems de la identificacin de los medios de
verificacin y de establecer el procedimiento a travs del cual se debe presentar el cumplimiento de
las metas comprometidas, se est estudiando delegar la realizacin de auditorias a las bases de
datos, al menos de un modo aleatorio, en las auditorias interna de los Servicios en el marco de las
actividades del Consejo de Auditoria Interna General de Gobierno 13 .
12
Ver Programa de Mejoramiento de la Gestin, Ao 2001. Documento Tcnico en pgina web http://www.dipres.cl
en la seccin Control de Gestin, Publicaciones.
13
El Consejo de Auditoria Interna General de Gobierno est radicado en el Ministerio Secretara General de la
Presidencia.
17
18
3
Medios de Verificacin
4
Supuestos
FIN:
PROPSITO:
COMPONENTES:
ACTIVIDADES:
Teniendo como base estos antecedentes se desarrolla la evaluacin considerando los focos o
mbitos que a continuacin se sealan:
(i) Justificacin. La justificacin es la etapa en que se analiza el diagnstico o problema que dio
origen al programa y que ste espera resolver (o contribuir a solucionar).
(ii) Diseo. La evaluacin del diseo consiste en el anlisis del ordenamiento y consistencia del
programa considerando sus definiciones de fin y propsito (objetivos), y componentes y actividades
para responder a ellos. Lo anterior considera la justificacin inicial del programa y como estos
elementos de diagnstico han evolucionado.
14
En algunos casos, en que se ha considerado necesario y compatible con los plazos, se han efectuado estudios
complementarios principalmente orientados a recoger nueva informacin o sistematizar la existente.
19
20
21
El proceso de anlisis de recomendaciones con las instituciones se inici en el ao 1999, no obstante este fue parcial
y no estableci compromisos formales con las instituciones.
22
ciclo presupuestario. El primero que comprende hasta el 31 de diciembre de cada ao, cuyos
antecedentes son incorporados por la institucin en el BGI, y el segundo junto con la presentacin
de la propuesta de presupuesto por parte de cada Servicio, lo que ocurre en el mes de julio.
Paralelamente, desde el ao 2001, se est avanzando en perfeccionar los indicadores de desempeo
de los programas evaluados, con el objeto de analizar su evolucin a travs de un seguimiento ms
permanente e incorporacin de dichos indicadores en la preparacin y discusin del Proyecto de Ley
de Presupuestos.
1.
2.
3.
4.
Seleccin de Programas
Seleccin de Consultores
Preparacin de Antecedentes
Capacitacin y Preparacin de Marcos Lgicos
Preliminares
5.
Evaluacin
- Resultados
- Recomendaciones
6.
Envo al Congreso
7.
8.
Seguimiento
(i) Seleccin de Programas. El proceso de evaluacin se inicia con la seleccin de los programas.
Esta se efecta con la participacin del Congreso Nacional sobre la base de una propuesta
presentada por el Ministerio de Hacienda. A su vez esta propuesta tiene como base diferentes
fuentes de informacin respecto de las necesidades de evaluacin de programas, provenientes del
propio Ministerio u otras Instituciones Pblicas.
23
(ii) Seleccin de Consultores. Una vez efectuada la seleccin de los programas se realiza la
selecci n de consultores, a travs de un concurso pblico, y se conforman los paneles evaluadores.
(iii) Comunicacin a las Instituciones Responsables de los Programas Evaluados. Paralelamente a la
seleccin de los evaluadores se informa del inicio del proceso de evaluacin a los Ministerios e
instituciones responsables de los programas seleccionados, y se les solicita la preparacin de los
antecedentes del programa, informacin base para efectuar la evaluacin.
(iv) Preparacin para las Evaluaciones. Previo al inicio de las evaluaciones se capacita en la
metodologa de evaluacin a los evaluadores que conforman el panel y a los profesionales que se
desempean en las unidades responsables de los programas. Con estos ltimos se inicia la
preparacin preliminar de los marcos lgicos de cada uno de los programas.
(v) Ejecucin de la Evaluacin. Se inicia la evaluacin teniendo como base de informacin los
antecedentes del programa y los marcos lgicos preliminares. La etapa de ejecucin de la
evaluacin contempla la entrega de un informe de avance e informe final, los que son comentados
por la institucin responsable del programa evaluado y el Ministerio de Hacienda.
(vi) Envo al Congreso. Se enva oficialmente al Congreso Nacional el informe final de las
evaluaciones efectuadas por los paneles, informe ejecutivo preparado por el Ministerio de Hacienda
en base al informe final, y los comentarios finales a la evaluacin por parte de la institucin
responsable del programa evaluado.
(vii) Formalizacin de Compromisos. Sobre la base de las recomendaciones efectuadas por los
paneles evaluadores se definen compromisos entre la institucin responsable del programa y la
Direccin de Presupuestos del Ministerio de Hacienda.
(viii) Seguimiento. El seguimiento de los compromisos institucionales en relacin con las
recomendaciones se efecta al 31 de diciembre y al 30 de junio de cada ao.
24
Indicadores
Evaluacin de
Programas
SEGUIMIENTO
Ley de Presupuestos
EVALUACIN
INTERNA
FORMULACIN
EJECUCIN
Presentacin
Proyecto
Aprobacin
Ley
En relacin al primer proceso, a partir del ao 2000 los resultados finales de las evaluaciones son
analizados en reuniones con el Director de Presupuestos del Ministerio de Hacienda, en las que
participan los analistas correspondientes de la Divisin de Control de Gestin y de los Sectores
Presupuestarios de la Direccin. Tales antecedentes sirven de base para las definiciones de los
marcos presupuestarios y la formulacin del presupuesto, en algunos casos afectando directamente
estas asignaciones o dando lugar a condiciones para la ejecucin del gasto (glosas presupuestarias).
Adems, los informes finales de las evaluaciones son enviados al Congreso Nacional en forma
previa al envi del Proyecto de Ley de Presupuestos de cada ao, acompaados de los comentarios a
los resultados de la evaluacin por parte de las instituciones responsables de los programas. Este
ltimo documento cumple con permitir que la institucin exprese, formalmente, sus acuerdos o
discrepancias con los juicios evaluativos finales que emite el panel evaluador, en su carcter de
instancia de evaluacin externa.
25
A partir del ao 2000, los informes de sntesis 16 de las evaluaciones y comentarios de las
instituciones responsables de los programas tambin forma parte de los anexos con informacin que
acompaa al Proyecto de Ley de Presupuestos, informacin que es presentada en las Subcomisiones
de Presupuestos. Estos anexos incluyen adems indicadores de desempeo, informacin sobre
personal y gastos efectivos, entre otros antecedentes.
Finalmente, a partir del ao 2001 la informacin de resultados de las evaluaciones y del seguimiento
de los compromisos institucionales con el avance de la incorporacin de las recomendaciones
tambin constituye informacin que es utilizada en el ciclo presupuestario, especficamente en la
etapa de evaluacin de cada servicio al inicio de este proceso. Como se seala en la recuadro N 4,
sta se efecta en forma previa y es la base para las definiciones de los marcos presupuestarios que
ms tarde el Ministerio de Hacienda enva a cada una de las instituciones, junto con las
instrucciones para la preparacin de sus propuestas de presupuestos.
2.2. Efectividad
Se han evaluado 120 programas pblicos. Los recursos anuales invertidos en estos programas
alcanzan alrededor de 1.514 mil millones de pesos, de ellos un 90% est destinado a programas de
carcter social como se observa en cuadro N 4.
16
Los informes de sntesis pueden ser encontrados en la siguiente direccin de pgina web: http://www.dipres.cl en la
seccin Control de Gestin, Programa de Evaluacin, Evaluacin de Programas Gubernamentales.
26
Cuadro N 4
Programas Evaluados 1997 2001
FUNCIONES
A. Funciones Generales
B. Funciones Sociales
C. Funciones Econmicas
1.358.852
89,7
129.559
8,6
TOTAL
1.514.458
100
Nota:
Clasificacin de acuerdo a la Clasificacin Funcional del Gasto,
Estadsticas de las Finanzas Pblicas, Direccin de Presupuestos,
Ministerio de Hacienda.
Se considera el gasto efectivo del programa en el ao en que fue
evaluado. Los programas que han sido reevaluados, hecho ocurrido a
partir del ao 2001, consideran el presupuesto de este ltimo ao.
En el caso de aquellos programas que tienen presupuesto en dlares, el
tipo de cambio se valoriza en (tc) = $594,7.
2.4 Calidad
2.4.1 Consolidacin de la Metodologa
En general la metodologa es considerada apropiada, y elementos esenciales de sta han sido
incorporados en un formato estndar para la presentacin a financiamiento de iniciativas nuevas,
ampliaciones o reformulaciones sustantivas de programas existentes (ver punto V).
En los sucesivos procesos de ejecucin del programa se han introducido cambios, precisando
mbitos y alcances de la evaluacin, los que se han traducido en modificaciones de los formatos y
orientaciones tcnicas a los paneles de evaluacin. Entre estos destacan:
-
17
27
Recuadro N 10
Programas Evaluados Ao 2001
Recomendaciones-Implicancias
Situaciones
Programas
Ajustes Menores
* Programa Participacin Ciudadana CONAMA
Considera programas evaluados que requieren de ajustes menores,
tales como el perfeccionamiento de sus sistemas de recoleccin de * Programa Fondo de Proteccin Ambiental CONAMA
informacin y monitoreo, incremento en el uso de recursos
* Programa Inspeccin de Exportaciones S A G
tecnolgicos y perfeccionamiento de mecanismos de recuperacin
* Programa Redes de Medicin MOP
de costos
* Programa Planes de Aprendizaje SENCE
Modificaciones en el Diseo de Alguno de sus Componentes y/o
Procesos de Gestin Interna
29
30
En particular, puesto que un aspecto importante del trabajo de los paneles es reconstruir el marco
lgico del programa, como una forma de ir superando estos problemas, a partir de la preparacin del
presupuesto 2001 se incorpor un nuevo procedimiento para los casos de programas nuevos,
reformulaciones o ampliaciones sustantivas. Dicho procedimiento exige que las iniciativas sean
presentadas a un Fondo Concursable en un formato estndar, el que incluye un conjunto de
antecedentes bsicos de los pro gramas que corresponden, en su mayora, al formato del marco
lgico utilizado en la Evaluacin de Programas Gubernamentales. De esta forma se busca que los
programas dispongan de un mejor ordenamiento e informacin para su monitoreo y evaluacin (ver
punto V).
Con el objeto de superar estas dificultades se considera necesario continuar reforzando actividades y
procedimientos ya iniciados con este fin, pero que debido a su an corto perodo de implementacin
no alcanzan su total consolidacin y efectos esperados.
3.1. Diseo de Programas y Disponibilidad de Informacin para la Evaluacin
Como ya se sealara, puesto que un aspecto importante del trabajo de los paneles es reconstruir el
marco lgico del programa, se continuar reforzando el procedimiento de presentacin a
financiamiento en el presupuesto en formato estndar en base al marco lgico utilizado en la
Evaluacin de Programas Gubernamentales, para todos aquellos programas nuevos o con
reformulaciones o ampliaciones sustantivas (ver punto V).
3.2. Mediciones de Indicadores de Desempeo
Se continuar perfeccionado la elaboracin de indicadores y sus mediciones con el objeto de que,
una vez finalizada las evaluaciones, los programas cuenten con su matriz de marco lgico e
indicadores de desempeo que permita un monitoreo y seguimiento permanente, tanto en la propia
institucin, en sus procesos de gestin interna, como en el Ministerio de Hacienda.
3.3. Integracin a la Discusin Legislativa
Como se sealara en punto I, a partir del ao 2001, con el objeto de mejorar los procedimientos para
la discusin presupuestaria, se cre una instancia de evaluacin de la ejecucin presupuestaria que
antecede a la presentacin del Proyecto de Ley de Presupuestos. Al igual que como se mencionara
para el caso de los indicadores de desempeo, hacia esta instancia pre-presupuestaria se debern
canalizar los resultados de las evaluaciones.
31
2. Avances
Actualmente se encuentran en desarrollo dos Evaluaciones en Profundidad cuyos resultados finales
se obtendrn a fines del mes de marzo del ao 2002. El Informe de Avance ha sido enviado al
Congreso Nacional en el mes de agosto de acuerdo a lo comprometido en el Protocolo de Acuerdo
sealado.
18
En algunos casos, en que se ha considerado necesario y compatible con los plazos, se han efectuado estudios
complementarios principalmente orientados a recoger nueva informacin o sistematizar la existente.
32
19
Formulario E en el proceso de formulacin del presupuesto para el ao 2002, del Ministerio de Hacienda.
33
En el primer ao de aplicacin de este instrumento las iniciativas fueron presentadas a la Direccin de Presupuestos
del Ministerio de Hacienda y fueron revisadas con el apoyo de MIDEPLAN.
21
De acuerdo a lo establecido en la Resolucin Exenta N 0832, que aprueba convenio entre el Ministerio de
Planificacin y Cooperacin (MIDEPLAN) y la Direccin de Presupuestos del Ministerio de Hacienda.
34
enviados al Ministerio de Hacienda. Este envo debe efectuarse conjuntamente con la presentacin
oficial de la propuesta de presupuesto de cada ministerio.
(iii) Anlisis y Seleccin. En base a los antecedentes de la revisin y calificacin de las
presentacione s, y considerando tambin otros antecedentes de desempeo, y de pertinencia o
prioridad institucional, se efecta una preseleccin de programas de acuerdo a la disponibilidad de
recursos. Dicha preseleccin es presentada al Presidente de la Repblica para su seleccin
definitiva.
(iv) Incorporacin al Proyecto de Ley de Presupuestos. Una vez seleccionados los programas a ser
financiados con recursos del Fondo, estos se incorporan en el Proyecto de Ley de Presupuestos para
su tramitacin en el Congreso Nacional.
La segunda etapa consiste en el perfeccionamiento de los diseos o rediseos de los programas en
aquellos casos en que las presentaciones no fueron satisfactorias, debiendo volver a presentarse a
MIDEPLAN.
La tercera etapa corresponde al seguimiento, que como ya se ha sealado se efectuar en base a los
indicadores de desempeo.
1.6. Integracin al Ciclo Presupuestario
El Fondo es un instrumento de asignacin de recursos que forma parte del proceso formal de
formulacin de presupuestos y la presentacin a ste en un formato estndar es el procedimiento
definido para estos efectos. La integracin al ciclo presupuestario se ilustra en la figura N 4.
Figura N 4
Integracin al Ciclo Presupuestario Primera Etapa
Presentacin
Formato
Estndar.
BASE MARCO
LGICO
Indicadores
(Evaluacin de
Programas Gubernamentales)
MIDEPLAN
Calificacin
Seleccin
Ley de Presupuestos
EVALUACIN
INTERNA
FORMULACIN
Presentacin
Proyecto
Aprobacin
Ley
35
EJECUCIN
2.2 Efectividad
No obstante su corto perodo de existencia, la operacin del Fondo a travs de su formato estndar
de presentacin y procedimientos ha facilitado el anlisis para la seleccin de iniciativas al disponer
de informacin de mejor calidad y en un orden ms apropiado para su revisin y anlisis. Esto ha
disminuido la inercia en la formulacin del presupuesto, permitiendo que los recursos incrementales
se asignen considerando las mejores iniciativas nuevas y las ampliaciones de los mejores programas
existentes.
A los avances logrados han contribuido los procesos establecidos en las instrucciones para la
formulacin de presupuestos y su aplicacin. Entre otros, all se solicit que las presentaciones de
iniciativas al Fondo respondieran a un riguroso proceso de anlisis y seleccin en las instituciones,
considerando las prioridades definidas tanto al interior de los Servicios como a nivel de los
Ministerios a los que pertenecen.
En el proceso correspondiente al ao 2002 se seleccionaron 126 programas.
36
Por otra parte, esta segunda aplicacin permiti avanzar en la institucionalizacin del procedimiento
en las instituciones, lo que ha futuro debera ir mejorando tambin sus procesos internos de
preparacin del presupuesto.
2.4. Calidad
2.4.1 Consolidacin Metodolgica
Previo al inicio del proceso correspondiente al ao 2002 se efectuaron talleres de presentacin de
los aspectos metodolgicos centrales del formato, por parte del Ministerio de Hacienda y
MIDEPLAN, a instituciones que lo solicitaron. Esto, unido a la capacitacin efectuada en el marco
de las evaluaciones de programas, la asistencia tcnica brindada por MIDEPLAN en el proceso de
presentacin de las iniciativas, un formato ms amigable y la experiencia en la aplicacin anterior
por parte de las instituciones, se ha traducido en un significativo avance en la calidad de las
presentaciones, y por tanto, en la consolidacin de la metodologa.
Adems, cabe destacar que en el proceso de preparacin y formulacin del presupuesto
correspondiente al ao 2002, la Direccin de Presupuestos del Ministerio de Hacienda ha querido
incorporar con mayor profundidad el enfoque o consideraciones de gnero en las presentaciones de
iniciativas al Fondo Concursable 22 . Para esto ha incorporado dicha temtica al formato estndar de
presentacin (ver recuadro N 11).
Recuadro N 11
Incorporacin del Enfoque o Perspectiva de Gnero en las Presentaciones de Programas al
Fondo Concursable
El anlisis de gnero se puede incorporar en las diferentes etapas de formulacin de un programa. Es por esto que el
formato estndar de presentacin al Fondo Concursable lo incluye en el diagnstico, identificacin de beneficiarios, fin
y propsito del programa, definiciones de componentes e indicadores.
En particular, a nivel de componentes (bienes y/o servicios) se solicita la identificacin precisa de diferencias
necesarias de considerar en la definicin del (o de los) componente (s), dependiendo de s los beneficiarios son hombres,
mujeres o ambos, para que efectivamente se logre el propsito u objetivo del programa. Estas diferencias pueden
corresponder a las caractersticas de los bienes y/o servicios, al modo de acceso o provisin de stos y/o a los procesos
vinculados.
Finalmente, al aplicar anlisis de gnero los indicadores deben medir los efectos o resultados del programa y sus
componentes en la situacin de hombres y mujeres.
22
Este desarrollo se efectu en el marco de los compromisos establecidos por el Ministerio de Hacienda en el Plan de
Igualdad de Oportunidades entre Hombres y Mujeres, y cont con la colaboracin del Servicio Nacional de la Mujer,
SERNAM.
37
38
VI. BIBLIOGRAFA.
Banco Mundial (1998). Manual para la gestin del gasto pblico. Washington DC.
Direccin de Presupuestos. Ministerio de Hacienda (2001). Gua Metodolgica para la formulacin
de Indicadores. ( www.dipres.cl).
Direccin de Presupuestos. Ministerio de Hacienda (2001). Presentacin General del Programa de
Evaluacin de Proyectos Gubernamentales 2001.
Guzmn, Marcela (2001). Chile: Evaluacin de Programas e Indicadores de Desempeo. Serie
Seminarios y Conferencias. Comisin Econmica para Amrica Latina y el Caribe, CEPAL.
Marcel, Mario. (2000). Indicadores de Desempeo como Instrumento de Modernizacin en el
Estado de Chile. Perspectivas 1999.
Mayne, J. y Zapico-Goi, E. (2000). Seguimiento de los Resultados de la Gestin en el Sector
Pblico. Perspectivas desde la Experiencia Internacional. Instituto de Estudios Fiscales, Ministerio
de Hacienda. Madrid, Espaa.
Mokate, Karen, M. (1999). Eficacia, eficiencia, equidad y sostenibilidad: qu queremos decir?.
INDES. Banco Interamericano de Desarrollo.
Oficina de Evaluacin (EVO) (1997). Evaluacin un herramienta de gestin para mejorar el
desempeo de los proyectos. Banco Interamericano de Desarrollo.
Organisation for Economic Co-Operation and Development (OECD) (2001a). Outcomes-Focused
Budgeting. Case Studies. May 2001.
Organisation for Economic Co-Operation and Development (OECD) (2001a). Outcomes-Focused
Management and Budgeting. May 2001.
World Bank. Public Sector Performance The Critical Role of Evaluation. Operations Evaluation
Department. The World Bank.
39