Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Este enfoque ha sido utilizado en las últimas décadas en distintos países miembros de la
Organización para la Cooperación y el Desarrollo Económico (OCDE). Desde el año 2000,
más del 75% por ciento de los países miembros de la OCDE reportaban utilizar
información sobre desempeño en los procesos de presupuestacion1. Entre los países con
mayor experiencia se pueden mencionar al Reino Unido con la introducción desde 1982 del
Financial Managment Initiative y Nueva Zelanda con la introducción (1984) de un sistema
de relaciones intra-gubernamentales que consiste en contratos de servicios (purchase
agreements), suscritos entre los ministros y los órganos ejecutores dotados de autonomía
administrativa, conteniendo términos de referencia expresados en indicadores de resultados.
Posteriormente, en 1993 en Estados Unidos se aprobó la Ley de Desempeño y Resultados
del Gobierno (Government Performance and Results Act) que procura la instalación de un
sistema presupuestario basado en el desempeño y en la flexibilidad gerencial, el cual
concluye con un proceso de informe programático que se entrega al Congreso para apoyar
la discusión presupuestal2.
1
Ver ILPES-CEPAL, Gestión Pública por Resultados, 2003
2
Shack Yalta, Nelson, Avances en la implementación de indicadores de desempeño en los organismos
públicos del Perú, en ILPES-CEPAL, Gestión Pública por Resultados, 2003.
3
Ver Banco Mundial y OCDE, Buenas prácticas recientemente identificadas de gestión para resultados de
desarrollo, 2005 y May, et.al. Hacia la Institucionalización de los Sistemas de Monitoreo y Evaluación en
America Latina y el Caribe, 2006.
4
Ver Guzmán, Marcela, Sistema de Control de Gestión y Presupuestos por Resultados: La Experiencia
Chilena, División de Control de Gesión del Ministerio de Hacienda, Chile, 2004
2
En México, SEDESOL ha realizado desde 1999 un esfuerzo por incorporar un enfoque de
gestión orientado hacia el logro de resultados y con ello ha hecho hincapié en el desarrollo
y fortalecimiento de sus funciones e instrumentos de monitoreo y evaluación. Inicialmente,
este esfuerzo se centró en la evaluación externa anual de los programas sujetos a reglas de
operación5. A partir del 2004, se promueve la construcción de un sistema de evaluación y
monitoreo basado en resultados. Con el sistema se busca fortalecer el componente de
evaluación con mediciones rigurosas del impacto de los programas, y desarrollar un
mecanismo piloto de monitoreo basado resultados. En la actualidad, la Secretaría se
encuentra lista para iniciar una segunda fase del sistema bajo un nuevo modelo y con un
alcance mayor. Para ello, se han identificado importantes desafíos transversales en el
ámbito institucional, técnico-operativo y de información.
El presente artículo se divide en cuatro secciones que detallan i) la primera fase del sistema
de monitoreo y evaluación basado en resultados; ii) el cambio en el contexto institucional y
normativo; iii) el nuevo modelo para la etapa de expansión y consolidación, y finalmente,
iv) las conclusiones.
5
Desde 1999 se establece en el Presupuesto de Egresos de la Federación la obligación de llevar a cabo
evaluaciones externas anuales a todos los programas sujetos a reglas de operación.
3
• Diseño de sistemas para el reporte de actividades, pero con información y un uso
limitado para retroalimentar a los encargados de la toma de decisiones
• Desvinculación entre planeación estratégica, operativa y presupuestal.
• Necesidad de crear incentivos en los niveles medios jerárquicos para promover
la orientación a resultados
6
Además, existen estudios complementarios como evaluaciones cualitativas, monitoreo de sostenibilidad de
obra pública y ejercicios específicos de satisfacción de beneficiarios.
4
Figura 1. Sistema de evaluación y monitoreo basado en resultados
Total 13 16 17 21
7
Decreto de presupuesto de egresos de la federación para el ejercicio fiscal correspondiente y Acuerdo por el
que se expiden los requisitos mínimos que las dependencias y entidades de la Administración Pública Federal
deberán considerar para seleccionar a las instituciones académicas y de investigación u organismos
especializados, de carácter nacional o internacional, interesados en realizar la evaluación de resultados de los
programas gubernamentales sujetos a reglas de operación en el ejercicio fiscal 2002 (DOF 30-04-2002).
5
Evaluación multi-anual de impacto: Para complementar lo anterior, se realizaron diferentes
evaluaciones de mediano y largo plazo con el fin de cuantificar las relaciones causales entre
las acciones implementadas por los programas y los cambios en diferentes dimensiones del
bienestar de los beneficiarios. A través de las evaluaciones de impacto, se buscó generar
evidencia sólida sobre la efectividad de distintas intervenciones en la nutrición de los niños,
la asistencia escolar, el ingreso de las familias, el acceso a servicios básicos, entre otros.
Estas evaluaciones requieren una mayor inversión en términos de presupuesto, un nivel
superior de especialización para su análisis y un mayor tiempo de maduración de las
intervenciones para observar los impactos esperados. Por lo anterior, se realizaron de forma
selectiva para programas y acciones de carácter estratégico tales como Oportunidades,
Hábitat, Tu Casa, Programa de Apoyo Alimentario, fortificación de la leche Liconsa,
Estrategia de Microrregiones, y acciones de piso firme. Los resultados de estas
evaluaciones son públicos y se han utilizado para informar la toma de decisiones sobre
adecuaciones al diseño, expansión de cobertura y continuidad de los programas.
Monitoreo basado en resultados: Aunque se realizaban reportes periodicos de indicadores
del avance físico y financiero de los programas, no se encontraban sistematizados ni tenían
una orientación hacia el logro de resultados. Con base en el diagnóstico realizado por el
BM, se inició con la implementación de una fase piloto del componente de monitoreo
basado en resultados8. Esta fase incluyó capacitación extensiva sobre la metodología de
marco lógico (MML)9; la construcción de matrices; el diseño conceptual del sistema; y el
desarrollo de una plataforma informática.
Las matrices de marco lógico se elaboraron a través de talleres participativos con los
responsables del diseño, operación y evaluación de los programas. El objetivo de dichos
talleres fue i) identificar de manera consensuada el objetivo general de cada programa y su
correspondiente modelo lógico (i.e. cadena de resultados: actividades, productos, resultados
e impactos); ii) definir los indicadores del programa y sus metas; y iii) determinar las
fuentes de información para el seguimiento de los indicadores. La introducción de las MML
implicó una mejora en relevancia y parsimonia de los indicadores.
Una vez identificados los indicadores y establecidas las metas, éstos fueron concentrados
en un tablero de control10. El tablero presenta la información utilizando semáforos que
indican el avance de los indicadores con respecto a las metas establecidas.
A partir de 2007, la Secretaría avanzó hacia la definición y el uso de matrices de marco
lógico (MML) en sus 21 programas sujetos a reglas de operación. Esto significó un paso
adicional hacia el mejoramiento y estandarización de los procesos de formulación de
8 En la fase piloto se incluyeron cuatro programas (Opciones Productivas, Coinversión Social, Hábitat y
Apoyo Alimentario) con distintos grados de avance institucional en la recopilación de indicadores y sistemas
de información.
9
La MML es una herramienta de gestión pública que permite presentar de forma sistemática y lógica los
objetivos de un programa, las relaciones de causalidad de sus componentes y los factores externos al
programa que pueden influir en su consecución.
10 Un tablero de control o cuadro de mando, es una analogía utilizada en la gestión empresarial para el diseño
y operación de un conjunto de instrumentos que den cuenta de la buena marcha (o no) de una organización.
De manera más reciente se ha popularizado la imagen de un semáforo que indica las alertas y señales
requeridas para la buena gestión.
6
indicadores y metas, y hacia el establecimiento de bases más sólidas para realizar la
medición de resultados de sus programas.
De acuerdo con el planteamiento inicial, una vez concluida la fase piloto del componente
de monitoreo, se buscaría la incorporación del resto de los programas de desarrollo social al
tablero de control. Si bien, el objetivo de contar con un sistema de evaluación y monitoreo
que apoye la gestión para resultados continúa vigente, recientemente se han dado
importantes cambios normativos e institucionales a nivel nacional que hacen necesario un
replanteamiento del diseño conceptual del SEMBR.
La necesidad de iniciar una segunda fase del SEMBR que involucra un replanteamiento del
modelo de orientación a resultados de la Secretaría responde a dos razones principales. La
primera está relacionada con la experiencia adquirida a partir de la implementación piloto
del componente de monitoreo. La segunda razón tiene que ver con la necesidad de adaptar
el SEMBR a un nuevo contexto normativo e institucional marcado por las reformas
introducidas al presupuesto público11, la creación del Consejo Nacional de Evaluación de la
Política Social (CONEVAL), así como por la necesidad de adoptar los lineamientos de
iniciativas federales actualmente en desarrollo como el Sistema de Evaluación del
Desempeño (SED)12 y el Programa de Mejora de la Gestión (PMG).
Hacia mediados de 2007, se introdujo una nueva y clara orientación desde la SHCP, la SFP,
la Presidencia de la República y el CONEVAL para avanzar hacia el establecimiento de un
vínculo (nacional y sectorial) entre la planeación, el presupuesto y la ejecución de los
programas federales haciendo uso de herramientas de monitoreo y evaluación. En
particular, esta nueva orientación se materializa en la administración federal a través de la
creación del SED, con el impulso al PMG, y con base en el Plan Nacional de Desarrollo y
de los programas sectoriales.
11
Ver Ley Federal de Presupuesto y Responsabilidad Hacendaria (DOF 30-03-2006) y su reglamento;
Decreto de Presupuesto de Egresos de la Federación para los ejercicios 2007 y 2008; y Lineamientos para la
Programación Presupuestal 2008.
12 El Sistema de Evaluación del Desempeño es el conjunto de elementos metodológicos que permiten realizar
una valoración objetiva del desempeño de los programas, bajo los principios de verificación del grado de
cumplimiento de metas y objetivos, con base en indicadores estratégicos y de gestión que permitan conocer el
impacto social de los programas y de los proyectos;
7
En este contexto, a partir de finales del 2007, la SHCP coordinó un esfuerzo para
operacionalizar la gestión basada en resultados, desde la perspectiva del Sistema de
Evaluación del Desempeño (SED) que tiene entre sus objetivos:
III. Un nuevo modelo del SEMBR para la fase expansión y consolidación 2008-
2012
13
Portal Aplicativo de la Secretaría de Hacienda (PASH)
14
La matriz de indicadores contempla cuatro niveles de monitoreo de los programas: actividades,
componentes, propósito y fin. Los primeros se refieren a las acciones operativas y los bienes o servicios que
genera el programa. Los niveles superiores miden los resultados e impactos del programa y su contribución
con los objetivos sectoriales.
15
Periódicamente se reporta el avance en los indicadores de las matrices de todos los programas federales.
8
En respuesta a los cambios institucionales y normativos, se realizó un replanteamiento del
SEMBR. En el nuevo modelo se pasa de un enfoque fundamentalmente basado en la
operación de los programas a un esquema más amplio, centrado en el desempeño agregado
del sector desarrollo social. Dicho esquema se fundamenta en la medición del desempeño a
partir de la dimensión estratégica del Programa Sectorial de Desarrollo Social (PSDS), así
como de su alineación con el Plan Nacional de Desarrollo. Bajo este enfoque, el rediseño
del SEMBR tiene como objetivo operacionalizar dentro de la SEDESOL la iniciativa del
presupuesto basado en resultados y el SED, incorporando sus lineamientos y propósitos.
Con este nuevo enfoque se busca consolidar los avances logrados, corregir los problemas
encontrados y complementar su alcance, incorporando otras áreas de evaluación de la
gestión, incluyendo la dimensión presupuestal.
16
Conforme a lo establecido en los Lineamientos generales para la Evaluación de los Programas Federales de
la Administración Pública Federal (DOF 30-03-07)
9
Figura 2: Nuevo modelo conceptual del SEMBR.
SEMBR
Monitoreo Evaluaci ón Presupuesto
Basado en Basada en Basado en
Resultados Resultados Resultados
MML Impacto
Diseño Presupuesto por
objetivos
Consistencia
Indicadores y Resultados
transversales Avance físico y
financiero
-Cobertura Indicadores y
procesos
-Focalización Rendición de
-Percepción cuentas y PMG
Específicas
El objetivo general es operacionalizar dentro del sector desarrollo social la iniciativa del
presupuesto basado en resultados y la evaluación del desempeño, bajo un enfoque que
busque el logro de las metas sectoriales, a través de un sistema de evaluación y monitoreo
basado en resultados.
Objetivos específicos
10
social, con el fin de lograr una mejor alineación con el Plan Nacional de Desarrollo
y el Programa Sectorial.
Diseño conceptual
El diseño conceptual del SEMBR se estructura en torno a seis componentes básicos. Como
ya se mencionó, los tres primeros constituyen los pilares del modelo –monitoreo,
evaluación y presupuesto basado en resultados – y el resto corresponden a aspectos
transversales del sistema: organización institucional requerida para respaldar al SEMBR;
desarrollo de capacidad institucional en evaluación y monitoreo; y agenda de información.
11
estratégicos para el seguimiento presupuestal. Asimismo, se monitorean cerca de 20
indicadores prioritarios para el cumplimiento de los objetivos sectoriales, incluidos en el
plan indicativo.
Esta agenda definirá las acciones de evaluación del corto y mediano plazo, considerando
los distintos tipos de evaluación: i) evaluaciones del desempeño de los programas sociales
(consistencia y resultados); ii) evaluaciones del desempeño de las delegaciones; iii)
evaluaciones de impacto para programas estratégicos; y iv) evaluaciones específicas, de
procesos e indicadores.
En este componente del SEMBR, un primer paso será revisar la clasificación presupuestal,
de corte funcional y contable que actualmente rige la elaboración del presupuesto y
complementarla o ajustarla a la clasificación programática asociada a los objetivos del
programa sectorial. Este ejercicio busca establecer una secuencia lógica entre el programa
presupuestal y los objetivo de la estrategia o plan sectorial, asociando a estos los
indicadores, metas y líneas de base en cada nivel.
12
presupuesto-resultados no es directa ni automática, por lo que el SEMBR debe ser utilizado
como una herramienta que apoye la toma de decisiones, no la determine.
Agenda de información
Por lo anterior, es importante impulsar una agenda de información que contemple por un
lado, bases normativas y estándares para la generación, recolección y procesamiento de
datos del desempeño, así como mecanismos para el control de su calidad. Por otro lado,
buscaría definir parámetros de interoperabilidad de las herramientas tecnológicas
existentes, conectividad de las oficinas, entidades y delegaciones y el desarrollo de una
plataforma tecnológica para desplegar el Sistema.
Organización institucional
IV. Conclusiones
En los últimos años, se ha buscado transitar a una gestión de la política de desarrollo social
orientada al logro de resultados. A partir del 2004, se han sistematizado gradualmente las
acciones de evaluación y monitoreo con el fin de construir un sistema de evaluación y
monitoreo que apoye la gestión para resultados. En una primera etapa, se conceptualizó un
sistema con un mayor énfasis en evaluación y centrado en la gestión individual de
programas. Respondiendo a los cambios recientes en el marco normativo e institucional y a
las lecciones aprendidas en la primera etapa, se hizo un replanteamiento del modelo. Este
13
modelo busca incorporar una visión del desempeño sectorial; vincular el monitoreo y la
evaluación con el proceso de planeación y presupuestación; y explicitar componentes
transversales críticos, incluyendo una agenda de información y la organización y capacidad
institucional.
Construir una gestión para resultados es un proceso continuo de mediano y largo plazo que
requiere una combinación de elementos técnicos y políticos. Requiere generar información
relevante, oportuna y de calidad que sea utilizada en la toma de decisiones. Es necesario
también, conformar las bases institucionales que permitan la vinculación entre las
actividades de planeación, programación y presupuestación, ejecución, y evaluación.
Finalmente, es importante contar con un esquema de incentivos orientado al logro de
resultados y mecanismos para garantizar la sostenibilidad de la iniciativa.
14