Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Indicadores de Evaluación Del Desempeño
Indicadores de Evaluación Del Desempeño
LIMITADA
LC/IP/L. 237
Noviembre de 2003
ORIGINAL: ESPAOL
13
Noviembre, 2003
Versin resumida de un documento del mismo ttulo, que ser publicado prximamente por el ILPES
y que fue preparado por Juan Cristbal Bonnefoy, Investigador del rea de Gestin Pblica y Regulacin
del ILPES.
Las opiniones expresadas en este resumen, que no ha sido sometido a revisin editorial, son de exclusiva
responsabilidad del autor y pueden no coincidir con las del Instituto.
INSTITUTO
LA
TINOAMERICANO Y
LATINOAMERICANO
DEL CARIBE DE
PLANIFICACIN
ECONMICA Y SOCIAL
(ILPES)
Edificio Naciones Unidas
Av. Dag Hammarskjld 3477
Vitacura
Santiago, Chile
Casilla 1567
Telfonos (56-2) 210 2506 y
(56-2) 210 2507
Fax (56-2) 206 6104
(56-2) 208 0252
(56-2) 208 1946
Direccin del ILPES en
Internet:
http://www.ilpes.org
http://www.ilpes.cl
NDICE
Presentacin ............................................................................
I. INTRODUCCIN ..........................................................
12
20
31
39
42
PRESENTACIN
El tema de las polticas presupuestarias tiene y ganar creciente relevancia
en las preocupaciones de los gobiernos, como lo demuestra la gran
cantidad de reformas ya realizadas y las que estn en curso. Estas
reformas responden, por un lado, a las necesidades de la gestin
macroeconmica y, por otro, a las demandas de la ciudadana de mayor
eficacia, eficiencia y transparencia en la conduccin de los asuntos
pblicos. Las reformas involucran un conjunto amplio de medidas que
tienden a reforzarse entre s como son, por ejemplo: la concertacin
estratgica en torno a visiones prospectivas, que permitan construir futuro
como alternativa vlida a los procesos de planificacin ms tradicionales
y establecer pactos fiscales que fundamenten el accionar pblico; la
gestin presupuestaria para el ciclo econmico en su conjunto,
diferenciando entre factores de carcter permanente y transitorio; el
anlisis sobre la totalidad del ciclo de las polticas pblicas, abarcando
los momentos de diseo, seguimiento de la ejecucin y evaluacin de
sus resultados tanto en trminos de eficacia como de eficiencia y
economicidad; y la mayor transparencia hacia la ciudadana, incluyendo
diversas modalidades de participacin social.
En la presupuestacin moderna, la disciplina en la gestin de los
agregados fiscales debe ser complementada con la efectividad en la
asignacin de recursos y la eficiencia operacional en la entrega de
servicios. Las mayores interdependencias y sinergias se generan en las
reformas que afectan las inercias de la distribucin de recursos,
intersectorial e intrasectorialmente, as como en las innovaciones de la
gestin pblica que actan en el plano microeconmico. En este marco,
surge la necesidad de una prctica gerencial que sea parte de una cultura
de desempeo centrada en los resultados y que se oriente en beneficio
directo del ciudadano, con alto grado de compromiso de cumplimiento
y esquemas apropiados de incentivos y evaluacin. Esta gestin pblica
renovada parte del reconocimiento de los derechos que tienen los
ciudadanos como contribuyentes y usuarios de los servicios.
Lograr que la gestin del sector pblico sea ms eficiente y
comprometida con los resultados ciertamente representa una tarea de
envergadura que requiere del diseo de polticas, de lneas de accin y
de la movilizacin de los recursos humanos y materiales del aparato
pblico. Pero junto con ello, debe existir la voluntad poltica que site el
tema como uno de los instrumentos del proceso de rediseo del Estado,
un proceso que para que pueda dar sus frutos forzosamente deber
trascender ms all del corto o mediano plazo.
En este contexto general, el Instituto Latinoamericano y del Caribe
de Planificacin Econmica y Social (ILPES) ha venido realizando
diversas actividades relativas a la gestin por resultados entre las cuales
cabe destacar:
1
Gua para la discusin de la mesa redonda: Evaluacin de programas, medicin
de resultados y convenios de desempeo (documento LC/IP/R.221, octubre 2002).
2
Realizada por la Secretara Ejecutiva de la CEPAL, a travs del ILPES, con el
patrocinio del Servicio de Gestin Pblica de la Organizacin para la Cooperacin y el
Desarrollo Econmico (PUMA-OCDE) y bajo los auspicios del Ministerio de Hacienda
de Chile.
LOS INDICADORES DE EV
ALUACIN DEL DESEMPEO:
EVALUACIN
AP
ARA LA GESTIN POR RESUL
TADOS
UNA HERRAMIENT
HERRAMIENTA
PARA
RESULT
EN AMRICA LA
TINA
LATINA
Juan Cristbal Bonnefoy3
I.
INTRODUCCIN
Las recomendaciones de polticas econmicas del Consenso de
Washington marcaron la agenda de reformas en Amrica Latina durante
la primera mitad de la dcada de los noventa. Estas frmulas ponan el
acento en los cambios institucionales que se relacionan con la disciplina
fiscal, la reforma fiscal e impositiva, la reorientacin del gasto pblico
hacia la salud y la educacin, las privatizaciones de empresas pblicas y
la desregulacin de los mercados. Sin embargo, la evidencia emprica
demuestra que las iniciativas implementadas hasta mediados de los
noventa se centraron en el restablecimiento de los equilibrios
macroeconmicos y la reestructuracin de incentivos de mercado y
precios relativos. Las reformas desplegadas no afectaron sustancialmente
la institucionalidad estatal, con la excepcin de aquellas que afectaron a
las empresas pblicas, ya sea por la va de las privatizaciones o por la
bsqueda de una mayor eficiencia y eficacia en las empresas que
continuaron en el mbito estatal (Haggard, 1995).
El proceso de reformas logr reducir el dficit fiscal promedio de la
regin de un 2.2% del PIB en 1990 a un 1.1% en 19974 , pero subsistieron
en la mayora de los pases latinoamericanos altos niveles de pobreza y
de desigualdad social. En este contexto, en 1998 la CEPAL propuso, a
travs del Pacto Fiscal, un redireccionamiento de las reformas del Estado
enfatizando el desarrollo institucional y el fortalecimiento de la
gobernabilidad. Tambin otras instituciones, como el Banco Mundial,
comenzaron a revalorar el rol de las instituciones estatales en el desarrollo
y a relativizar la importancia de las fallas de mercado en comparacin
a las fallas institucionales.
En el mbito poltico estas propuestas se formalizan durante la
Cumbre de las Amricas de 1998, denominado Consenso de Santiago (o
neo-Consenso de Washington). Este conjunto de proposiciones plantea
que las debilidades institucionales constituyen un cuello de botella para
transformaciones econmicas ms profundas, reafirmndose que la
3
Investigador del rea de Gestin Pblica y Regulacin del ILPES,
jbonnefoy@cepal.cl .
4
Promedio simple para 19 pases del saldo del Gobierno Central. ILPES, Base de
Datos de Estadsticas de las Finanzas Pblicas, http://www.cepal.cl/ilpes/.
10
11
II.
12
13
Cuadro 1
Qu mecanismos se utilizan para estimar la eficiencia, eficacia y costo efectividad/
eficiencia del gasto (value for money) de las actividades pblicas
pblicas?
Total
Pases
Revisin del xito de los principales programas
en el logro de sus objetivos anunciados
Revisiones especiales (ad-hoc) sectoriales
o de programas
Evaluacin sistemtica de la eficiencia, eficacia
y economa
Evaluaciones especiales (ad-hoc) de la eficiencia,
eficacia y de la economa
Evaluaciones ad-hoc de costos de efectividad
(cost effectiveness/value for money)
Acuerdos del desempeo detallando resultados
deseados
Revisiones realizadas por organizaciones externas
(por ejemplo, Banco Mundial, oficina
suprema de auditora)
Porcentaje Porcentaje 6
(N=38 pases) pases de LA
18
47.3 %
33.3%
29
76.3 %
50.0%
18.4 %
33.3%
14
36.8 %
16.7%
10
26.3 %
0.0%
12
31.5 %
16.7%
15
39.4 %
33.3%
Fuente
Fuente: OECD/World Bank Survey on Budget Practices and Procedures, 2003.
14
15
Recuadro 1
Fundamentos para la Construccin de Indicadores de Desempeo
1.
2.
3.
4.
5.
6.
7.
Fuente
Fuente: Gua para la Construccin de Indicadores de Desempeo en los
Servicios Pblicos, Direccin de Presupuestos, Ministerio de Hacienda de Chile,
1995.
16
Mayormente Mayormente
Productos
Resultados
ARGENTINA
BOLIVIA
CHILE
COLOMBIA
MXICO
URUGUAY
Una
combinacin
de Productos
y Resultados
en todos los
programas
Una
Una
combinacin
combinacin
de Productos
de Productos
y Resultados
y Resultados Ninguno
en algunos
en la mayora
programas de los programas
X
X
X
X
X
X
Fuente
Fuente: OECD/World Bank Survey on Budget Practices and Procedures, 2003.
17
Recuadro 2
La medicin de resultados y los problemas
de nomenclatura
Al traducir del ingls trminos como outcomes y outputs, la confusin se incrementa
pues muchos pases slo se refieren a resultados, pero la distincin entre
resultados y productos generalmente no se realiza. Incluso entre pases
anglosajones existen notables diferencias. A modo de ejemplo, el trmino outcome
(resultado o impacto) se utiliza en Estados Unidos como las consecuencias
intencionadas del accionar gubernamental, en tanto que Australia analiza los
outcome como el impacto real, independiente de que ste haya sido intencionado
o no.
La OCDE ha intentado ordenar esta prolfica y diversa nomenclatura. En
primer lugar asume que los insumos son recursos que la organizacin o un gerente
tiene disponible para lograr un producto o resultado. Los insumos pueden incluir
los funcionarios, equipos o instalaciones, materiales fungibles y los bienes o
servicios recibidos. Los costos constituyen los gastos incurridos al usar los insumos.
oductos estn relacionados con los bienes y servicios producidos
Los p rroductos
directamente por un organismo pblico para los ciudadanos, negocios y/o otras
agencias gubernamentales. Los r esultados se relacionan con los impactos o
consecuencias para la comunidad de los productos o actividades del gobierno.
Los resultados reflejan los impactos intencionados y no intencionados de las
acciones gubernamentales, estos proveen la racional para las intervenciones
gubernamentales. El esquema siguiente presenta la interrelacin entre los cuatro
conceptos y las relaciones que establecen los indicadores de eficiencia, efectividad,
economa y costo-efectividad.
Resultados
Efectividad
Productos
Costo-Efectividad
Procesos
Eficiencia
Insumos
Economa
Costos
Fuente
Fuente: Kristensen, Groszyk y Bhler (2002).
18
9
Por ejemplo en la LDO 2003 el Programa de Erradicacin del Trabajo Infantil que
se mencion tiene una meta de productos de entregar 650.400 becas para escolares; el
Programa de Prevencin de Incendios Forestales tiene una meta de rea fiscalizada de
6.000.000 de hs. para el 2003; el Programa de Transporte Ferroviario Urbano tiene una
meta de 385.600 pasajeros transportados por da til (Ministrio do Planejamento,
Oramento e Gesto, 2002 a).
19
III.
LA CONSTRUCCIN DE INDICADORES
EN LA PRCTICA
20
Recuadro 3
Definiciones Estratgicas del Sistema de Control de Gestin de Chile
1.
2.
3.
4.
Fuente
Fuente: Programa de Mejoramiento de la Gestin Ao 2004, Documento Tcnico,
Direccin de Presupuestos de Chile, 2003.
Recuadro 4
Requisitos de las Metas de Gestin del SEV de Uruguay
Una meta de gestin debe cumplir a lo menos los siguientes requisitos:
Fuente
Fuente: Gua para la Construccin de Indicadores de Gestin, CEPRE - Comit
Ejecutivo para la Reforma del Estado, Uruguay, 1999.
21
22
Descripcin
Pertinencia
Homogeneidad
Independencia
Costo
Confiabilidad
Existe una tensin entre ambos criterios: se deben cubrir los aspectos ms
Simplicidad y
significativos del desempeo, pero la cantidad de indicadores no puede
Comprehensividad exceder la capacidad de anlisis de los usuarios, tanto internos como externos.
Los indicadores deben ser de fcil comprensin, libre de complejidades.
Oportunidad
No-redundancia
Participacin
Fuente
Fuente: Elaboracin del autor sobre la base de Direccin de Presupuestos de Chile (1995), Marcel
(1998), National Center for Public Productivity (1997) y Shack (2003).
23
24
25
10
26
27
28
12
Ver la experiencia del municipio espaol de Sant Cugat del Valls en Turull y
Vivas (2003).
29
Recuadro 5
Cuadro de mando Catalunya Progrs de la Generalitat de Catalunya
El cuadro de mando Catalunya Progrs (CMCP) intenta recoger de manera
sinttica y sistematizada la informacin ms relevante sobre la gestin, la
realizacin de actuaciones y la consecucin de los objetivos previstos. EL CMCP
integra desde una visin interdepartamental la informacin cualitativa ms
representativa de la gestin pblica haciendo especial hincapi en el anlisis del
impacto de las actuaciones pblicas.
Como su nombre indica se trata de construir un sistema de informacin que
permita evaluar el progreso de la Comunidad Autnoma, entendido en una doble
vertiente: progreso como sinnimo de cambio y como sinnimo de mejora. En el
fondo, la idea subyacente es conocer si la regin avanza de manera continua. As
pues, el objetivo del CMCP consiste en monitorear el estado de la sociedad catalana
recogiendo de forma sistemtica informacin relevante sobre la gestin del
gobierno, sobre el grado de consecucin de los fines previstos y analizando el
impacto de las actuaciones pblicas. En ltima instancia se pretende que el cuadro
de mando sea utilizado para tomar decisiones pblicas de mejor calidad. Es por
tanto, un instrumento de gestin orientado a facilitar el pilotaje del conjunto de la
accin de gobierno.
Catalunya Progrs prioriza aquellos aspectos de la informacin difcilmente
evaluables desde el seguimiento de la gestin presupuestaria. Por ello, el nfasis
recae en interpretar informacin eminentemente cualitativa procedente de fuentes
diversas pero siempre bajo el marco conceptual de los seis ejes-valor del Plan
CAT21.
Partiendo de la multidimensionalidad de la informacin, Catalunya Progrs
se estructura de forma modular, en la cual cada mdulo se especializa en el
tratamiento de la informacin desde un determinado punto de vista. En estos
momentos estn definidos y en funcionamiento tres mdulos:
30
IV.
13
CEPAL, Panorama Social de Amrica Latina 2002-2003. Por gasto pblico en funciones
sociales se entiende el gasto corriente y de inversin efectuado en educacin, salud y
nutricin, seguridad y asistencia social, vivienda, agua y saneamiento.
14
Cabe destacar que en 1997 15 de 17 pases aumentaron su gasto pblico social,
permitiendo que en 12 de ellos se compensaran con creces el descenso del gasto social
predominante en los aos ochenta, superando los niveles de 1980-1981. Sin embargo en
el bienio 1996-1997 el ritmo de crecimiento se desaceler significativamente, alcanzando
una tasa promedio anual de 3.3%, equivalente a la mitad de la del perodo 1990-1995,
que fue de 6.4%. CEPAL, Panorama Social de Amrica Latina 1998.
31
Grfico 1
Evolucin de la Pobreza y del Gasto Pblico Social 1990-2001
en Amrica Latina
% de personas en situacin
de pobreza
60
50
48.3
13.3
13.8
14
12.1
12
40
43.8
43.5
42.1
42.5
10
10.1
8
30
20
4
10
2
0
0
1990
1997
1999
2000
2001
Fuente
Fuente: Elaboracin propia a partir del Panorama Social de Amrica Latina de CEPAL de diferentes
aos.
32
33
34
35
17
36
37
38
V.
REFLEXIONES FINALES
39
40
41
VI.
BIBLIOGRAFA
42
43
44