Manual para El Diseno y Contruccion de Indicadores PDF

CONSEJO NACIONAL DE EVALUACIN
DE LA POLTICA DE DESARROLLO SOCIAL

Investigadores acadmicos Mara del Rosario Crdenas Elizalde
Universidad Autnoma Metropolitana
Fernando Alberto Corts Cceres
El Colegio de Mxico
Agustn Escobar Latap
Centro de Investigaciones y Estudios
Superiores en Antropologa Social-Occidente
Salomn Nahmad Sittn
Centro de Investigaciones y Estudios
Superiores en Antropologa Social-Pacco Sur
John Scott Andretta
Centro de Investigacin y Docencia Econmicas
Graciela Mara Teruel Belismelis
Universidad Iberoamericana
DIRECTORIO
Secretara Ejecutiva Gonzalo Hernndez Licona
Secretario Ejecutivo
Ricardo C. Aparicio Jimnez
Director General Adjunto de Anlisis de la Pobreza
Thania Paola de la Garza Navarrete
Directora General Adjunta de Evaluacin
Edgar A. Martnez Mendoza
Director General Adjunto de Coordinacin
Daniel Gutirrez Cruz
Director General Adjunto de Administracin

Revisin tcnica Edgar A. Martnez Mendoza
Jos Manuel del Muro Guerrero
Freddy Damin Urbina Romero
Gabriela Gutirrez Salas
Israel Larry Escobar Blanco
Manual para el Diseo y la Construccin de Indicadores. Instrumentos principales para el moni-
toreo de programas sociales de Mxico
Primera edicin: septiembre de 2013
Consejo Nacional de Evaluacin de la Poltica de Desarrollo Social
Boulevard Adolfo Lpez Mateos 160
Colonia San ngel Inn
CP 01060
Delegacin lvaro Obregn
Mxico, Distrito Federal
Impreso y hecho en Mxico
Printed and made in Mexico
ISBN 978-607-95986-6-2
Citacin sugerida:
Consejo Nacional de Evaluacin de la Poltica de Desarrollo Social. Manual para el Diseo y la
Construccin de Indicadores. Instrumentos principales para el monitoreo de programas sociales
de Mxico. Mxico, DF: CONEVAL, 2013.
CONTENIDO
GLOSARIO 6
INTRODUCCIN 9
CAPTULO 1
QU ES UN INDICADOR? 11
CAPTULO 2
INDICADORES 13
1. Datos e indicadores 14
CAPTULO 3
MBITOS DE DESEMPEO DE LOS INDICADORES
Y SUS DIMENSIONES 17
1. mbitos de desempeo del indicador 18
2. Dimensiones y mbitos de desempeo 20
3. Restricciones 26
CAPTULO 4
PASOS PARA CONSTRUIR UN INDICADOR 29
1. Revisar la claridad del resumen narrativo 30
2. Identicar los factores relevantes 33
3. Establecer el objetivo de la medicin 36
4. Plantear el nombre y la frmula de clculo 39
5. Determinar la frecuencia de medicin del indicador 52
6. Seleccionar los medios de vericacin 53
CAPTULO 5
CRITERIOS DEL CONEVAL PARA LA VALORACIN
DE LOS INDICADORES 57
CAPTULO 6
ESTABLECIMIENTO DE LA LNEA BASE Y LAS METAS 63
1. Lnea base 64
2. Metas 65
CAPTULO 7
INDICADORES, PRESUPUESTO Y TOMA DE DECISIONES 63
REFERENCIAS BIBLIOGRFICAS 67
6
Manual para el Diseo y la Construccin de Indicadores
Actividades: Principales acciones emprendidas mediante las
cuales se movilizan los insumos para generar
los bienes o servicios que produce o entrega el
programa.
Adecuado: Criterio para la eleccin de indicadores que con-
siste en proveer sucientes bases para medir. Un
indicador no debe ser ni tan indirecto ni tan abs-
tracto que convierta en una tarea complicada y
problemtica la estimacin del desempeo.
mbito de desempeo: Aspectos del proceso que deben ser medidos en
cada nivel de objetivo.
Aportacin marginal: Criterio para la eleccin de indicadores que con-
siste en que, en caso de que exista ms de un
indicador para medir el desempeo en determi-
nado nivel de objetivo, el indicador debe proveer
informacin adicional en comparacin con los
otros indicadores propuestos.
Calidad: Dimensin de indicadores que busca evaluar
atributos de los bienes o servicios producidos por
el programa respecto a normas o referencias ex-
ternas.
Claro: Criterio para la eleccin de indicadores basado
en la precisin y la claridad. El indicador debe
ser tan directo e inequvoco como sea posible, es
decir, entendible.
Componentes: Bienes y servicios pblicos que produce o entre-
ga el programa para cumplir con su propsito;
deben establecerse como productos terminados
o servicios proporcionados.
Dimensin del indicador: Aspecto del logro del objetivo a cuanticar, esto
es, la perspectiva con que se valora cada objeti-
vo. Se consideran cuatro dimensiones generales
para los indicadores: ecacia, eciencia, calidad
y economa.
Economa: Dimensin de indicadores que mide la capaci-
dad del programa que lo ejecuta para recupe-
rar los costos erogados, ya sea de inversin o de
operacin.
GLOSARIO
7
Instrumentos principales para el monitoreo de programas sociales de Mxico
Econmico: Criterio para la eleccin de indicadores referido
a los costos e implicaciones para su costo y me-
dicin; se deben elegir aquellos indicadores dis-
ponibles a un costo razonable.
Ecacia: Dimensin de indicadores que mide el nivel de
cumplimiento de los objetivos.
Eciencia: Dimensin de indicadores que mide qu tan bien
se han utilizado los recursos en la produccin de
los resultados.
Fin: Descripcin de cmo el programa contribuye,
en el mediano o largo plazo, a la solucin de un
problema de desarrollo o a la consecucin de
los objetivos del Plan Nacional de Desarrollo y los
programas derivados.
Frecuencia de medicin: Periodicidad con que se realiza la medicin del
indicador.
Indicador de gestin: Ubicado en el nivel de componente o actividad
en la Matriz de Indicadores para Resultados. En el
marco de la Ley General de Desarrollo Social, este
tipo de indicador deber reejar los procedimien-
tos y la calidad de los servicios de los programas.
Indicador de resultado: Ubicado en el nivel de n o de propsito en la
Matriz de Indicadores para Resultados. En el mar-
co de la Ley General de Desarrollo Social, esta cla-
se de indicadores deber reejar el cumplimiento
de los objetivos sociales de los programas.
Indicador proxy: Tambin llamado indicador indirecto, se usa ante
la imposibilidad de medir lo que efectivamente
es de importancia. El indicador mide una varia-
ble distinta a la que nos interesa de manera es-
pecca, pero presenta una relacin lo ms direc-
ta posible con el fenmeno en estudio.
Indicador: Herramienta cuantitativa o cualitativa que per-
mite mostrar indicios o seales de una situacin,
actividad o resultado.
Lnea base: Valor del indicador que se establece como pun-
to de partida para evaluarlo y darle seguimiento.
Construida con base en la Metodologa de Mar-
co Lgico, la cual es una herramienta de moni-
toreo que permite entender y mejorar la lgica
interna y el diseo de los programas presupues-
Matriz de Indicadores
para Resultados:
8
tarios. Comprende la identicacin de los obje-
tivos de un programa (resumen narrativo), sus
relaciones causales, indicadores, medios de veri-
cacin y supuestos o riesgos que pueden inuir
en su xito o fracaso.
Medios de vericacin: Muestran las fuentes de informacin que se utili-
zarn para medir los indicadores y vericar que
los objetivos del programa (resumen narrativo)
se lograron.
Meta: Permite establecer lmites o niveles mximos de
logro; comunica el nivel de desempeo espera-
do por la organizacin y permite enfocarla hacia
la mejora.
Herramienta de planeacin estratgica basada
en la estructuracin y solucin de problemas que
permite organizar de manera sistemtica y lgi-
ca los objetivos de un programa y sus relaciones
de causalidad; identicar y denir los factores ex-
ternos al programa que pueden inuir en el cum-
plimiento de los objetivos; evaluar el avance en
la consecucin de stos, as como examinar el
desempeo del programa en todas sus etapas.
Esta metodologa facilita el proceso de concep-
tualizacin y diseo de programas y permite for-
talecer la vinculacin de la planeacin con la
programacin.
Monitoreable: Criterio para la eleccin que consiste en que el
indicador debe poder sujetarse a una compro-
bacin independiente.
Propsito: Resultado directo a ser logrado en la poblacin
objetivo a consecuencia de la utilizacin de los
componentes (bienes y servicios pblicos) pro-
ducidos o entregados por el programa.
Relevante: Criterio para la eleccin con base en que el in-
dicador provee informacin sobre la esencia del
objetivo que se quiere medir; debe estar denido
sobre lo importante, con sentido prctico.
Metodologa
de Marco Lgico:
9
INTRODUCCIN
La Matriz de Indicadores para Resultados (MIR) se ha constituido en la
base para el diseo de indicadores en Mxico. La Metodologa de Mar-
co Lgico (MML) plataforma para la construccin de la MIR permite
alinear los objetivos de los programas presupuestarios con los objetivos
estratgicos de las dependencias y entidades federales y con el Plan Na-
cional de Desarrollo. La MIR es un instrumento clave para la planeacin
dado que proporciona informacin para el monitoreo y evaluacin de
resultados.
Para el ejercicio scal 2012, los 734 programas del Gobierno Federal con-
taban con la MIR y con 6,708 indicadores para monitorear los objetivos
de dichos programas. Ello facilit la identicacin de los resultados y la
incorporacin de indicadores para supervisar su desempeo.
Los indicadores mencionados se dividen en dos grupos: de resultados,
que cuantican la solucin de las problemticas especcas que atiende
un programa, y de servicios y gestin, que dan seguimiento a los produc-
tos y a las principales actividades de los programas.
A pesar de que el monitoreo y la evaluacin de los programas ha contri-
buido, desde 2007, a precisar los objetivos de los programas y establecer
indicadores ms especcos, es indudable que la construccin de estos
ltimos resulta el aspecto que presenta los mayores retos.
El manual que aqu se presenta es un instrumento diseado para aportar
a funcionarios de gobierno y pblico en general, informacin clara y sen-
cilla sobre el diseo y la construccin de indicadores para el monitoreo
de programas sociales.
Qu es un indicador?
CAPTULO 1
12
En la vida diaria es comn interactuar con dife-
rentes indicadores sin que necesariamente se les
denomine as: las seales de trnsito, la aguja de
reloj, las echas de la salida de emergencia, los
sealamientos de algn edicio gubernamental,
entre otros.
Todos estos indicadores proporcionan informa-
cin de manera simple, precisa y sin ambigedad;
por ejemplo, sabemos en qu momento debemos avanzar o detener el
automvil mediante las luces del semforo; conocemos la hora precisa
por la posicin de las manecillas del reloj; y podemos ubicar la salida de
emergencia de algn lugar gracias a la sealizacin adecuada. Para
entender estos indicadores, en su mayora, no es necesario que una per-
sona nos explique su signicado; slo requerimos un poco de informa-
cin para interpretarlos de manera lgica.
Un indicador es una herramienta cuantitativa o cualitativa que muestra
indicios o seales de una situacin, actividad o resultado; brinda una se-
al relacionada con una nica informacin, lo que no implica que sta
no pueda ser reinterpretada en otro contexto. Imaginemos el caso de un
semforo. Para un automovilista, la luz roja le indica que debe detener el
carro; en cambio, para los peatones es una seal de que puede cruzar
la calle. En este sentido, la informacin que ofrece el indicador resulta
confusa? No. El semforo que detiene a los automviles no da la seal
para que los peatones crucen la calle; stos lo hacen una vez que los
automviles paran. La funcin del semforo no es indicar a la gente que
puede cruzar la calle; de ello se encargan los semforos peatonales.
Cada indicador brinda informacin relevante y nica respecto a algo:
una seal que debe ser interpretada de una nica manera, dado que tie-
ne un solo objetivo. Por ejemplo, la luz roja de un semforo tiene como ob-
jetivo indicar cundo un automvil debe detenerse; el algo que se quiere
mostrar. Para entender ese algo, debe comprenderse que los indicadores
tienen un objetivo concreto, y dado que ste es nico, la informacin rela-
cionada con el indicador es nica.
Un indicador es una
herramienta que muestra
indicios o seales de
una situacin, actividad o
resultado.
Indicadores
CAPTULO 2
14
En la MIR, los instrumentos para el monitoreo de los avances en cada
objetivo se denominan indicadores y su nalidad es mostrar informacin
relacionada con el desempeo de dicho objetivo.
Los indicadores cumplen la misma funcin que los de carcter cotidiano:
mostrar informacin concerniente a un objetivo nico; deben proporcio-
nar informacin clara y precisa sobre el desempeo y el cumplimiento
de los objetivos establecidos en la MIR. Dado que los objetivos son nicos
dentro de la matriz, tambin lo sern los indicadores (aunque puede
haber un cierto nmero que den cuenta de un mismo objetivo). Cada
indicador monitorea el objetivo al que se encuentra asociado y slo ofre-
ce informacin relativa a ste. Aunque conceptualmente la construccin
de indicadores es sencilla, es necesario hacer algunas aclaraciones so-
bre qu son y qu no son.
1. DATOS E INDICADORES
Un indicador es un instrumento que provee evidencia de una determi-
nada condicin o el logro de ciertos resultados. Esta informacin puede
cubrir aspectos cuantitativos y cualitativos sobre los objetivos de un pro-
grama o proyecto.
Los indicadores cotidianos slo proporcionan informacin con un nico
dato: una direccin, un lugar, una indicacin o alguna otra seal; para el
objetivo al que se encuentran asociados, esta informacin es suciente.
Sin embargo, los indicadores necesariamente deben representar la rela-
cin entre dos o ms variables.
Por qu? Supongamos que el programa Ca-
pacitando tiene la nalidad de capacitar al
mayor nmero de personas en un ao y un
peridico local da a conocer los resultados de
dicho programa en 2010 y reporta lo siguiente:
Hasta la fecha se han capacitado 10,000 per-
sonas, lo cual representa una gran avance en
temas de capacitacin. Es adecuada esta
armacin? El nmero de personas capacitadas es un elemento su-
ciente para manifestar que se ha tenido un gran avance? Al volver a
leer y analizar la nota, se advierte que dicha armacin no es justa con
el desempeo del programa, puesto que no se muestran los avances
reales ni los resultados. La armacin est sujeta al cuestionamiento: qu
Un indicador debe
representar la relacin entre
dos o ms variables. Un
nmero no es un indicador.
15
porcentaje representan estos capacitados respecto de la poblacin que
pretende beneciar el programa y respecto de la poblacin del pas?
Con la informacin proporcionada (se han capacitado 10,000 per-
sonas) no se puede dar una respuesta sensata a la pregunta, dado
que no se cuenta con mayor informacin sobre el programa ni de la
poblacin que atiende. Supongamos que la poblacin del pas llega-
ra slo a un milln, entonces las personas capacitadas representaran
apenas el uno por ciento; de ah que sera conveniente volver a pre-
guntarnos si este porcentaje efectivamente representa un gran avance
en temas de capacitacin.
Es evidente que un nmero necesita un contexto, un punto con el cual se
pueda comparar a n de determinar y tener bases sucientes para emitir
una opinin o un juicio acerca del desempeo. Supongamos que el mis-
mo peridico publicara una fe de erratas para aclarar que las personas
capacitadas se reeren de manera exclusiva al poblado de gente no-ca-
pacitada, lugar donde opera el programa nicamente y que tiene una
poblacin de 18,000 personas. Con esta nueva informacin, el anlisis
anterior cambia en forma drstica. El porcentaje de capacitados ahora
representa 56 por ciento del poblado de gente no-capacitada, en lugar
del uno por ciento, si consideramos a toda la poblacin del pas. Desde
este nuevo panorama, la armacin de esto representa un gran avance
en temas de capacitacin recobra sentido.
Los nmeros son datos necesarios que deben reportarse; sin embargo,
no son un medio conable ni objetivo para evaluar el desempeo de un
programa. Sin un punto de comparacin, es difcil establecer los logros, ya
que slo se conoce el estado actual de la problemtica. Cuando se bus-
ca presentar los avances de un programa, es conveniente mostrar tanto
el estado inicial como el actual de la problemtica; de esta manera, es
fcil valorar la importancia de sus resultados.
En virtud de que los nmeros proporcionan in-
formacin que no necesariamente reeja los
resultados de los programas, es preciso tener
un punto de comparacin para la informa-
cin que se reporta, esto es, una base sobre
la cual se pueda emitir un juicio acerca de su
desempeo. Esta base debe integrarse de in-
Cuando se relaciona una
variable con una referencia,
se obtiene un seguimiento
ms puntual de los objetivos
16
formacin sobre el estado inicial de la situacin y el contexto en el que
se desarrollan las variables. No debe confundirse el estado inicial con la
lnea base, concepto que analizaremos ms adelante.
Los indicadores deben representar la relacin de dos o ms variables
a n de que sea ms fcil analizar los resultados alcanzados por un
programa. Es importante tambin que los indicadores estn contextua-
lizados, es decir, que se describan algunas caractersticas geogrcas
o temporales que permitan al indicador reejar respecto a qu est mi-
diendo; en el ejemplo anterior, la fe de erratas ayud a identicar que
las personas capacitadas tenan una caracterstica particular: todas
residan en una ciudad no-capacitada; el indicador deja en claro res-
pecto a qu variables estn midindose sus avances y en qu contexto
se deben evaluar. En resumen, un indicador debe cumplir, en principio,
con las dos siguientes caractersticas:
a) El indicador debe ser una relacin entre dos o ms variables.
b) El indicador debe estar contextualizado al menos geogrca y
temporalmente.
CAPTULO 3
mbitos de desempeo
de los indicadores
y sus dimensiones
18
Una vez descrito qu es y qu no es un indicador, es momento de clasi-
carlos de acuerdo con el mbito de su medicin. Los indicadores inclui-
dos en las MIR deben medir diferentes aspectos de los objetivos a los que
estn asociados. Si se desea valorar un programa o proyecto de manera
objetiva, es necesario que los indicadores establecidos para monitorear y
evaluar su desempeo cuantiquen diferentes aspectos del programa, es
decir, valorarlo con diferente perspectiva.
Por qu es necesario valorar un programa con distintas perspectivas?
Hay programas en los cuales los aspectos del uso de los insumos son
ms importantes que la calidad de los bienes o servicios que entrega.
Asimismo, habr ocasiones en que es ms relevante medir el grado de
cumplimiento de los objetivos del programa que el cmo se han utilizado
los recursos econmicos. Los logros de un programa dependern de la
perspectiva con la que se valore; por lo tanto, es necesario analizar sus
actividades, bienes, servicios y resultados desde diversos ngulos para
tener una valoracin integral.
1. MBITOS DE DESEMPEO DEL INDICADOR
Los objetivos en la MIR se encuentran enlazados en una cadena lgica de
resultados, conocida como la lgica vertical, la cual tiene una estructura
similar a una cadena de produccin, dado que cada etapa del proceso
est encadenada en el tiempo: no pueden realizarse las etapas nales
sin haber comenzado las tareas iniciales, adems de que la complejidad
de stas se incrementa cuando ms se avanza en el proceso.
Los programas deben estructurar sus objeti-
vos de manera similar a las etapas del pro-
ceso de produccin, y los objetivos deben
estar encadenados e incrementar su com-
plejidad. Esto implica que los objetivos supe-
riores son ms complejos que los inferiores
y para poder realizar aqullos tuvieron que
cumplirse estos ltimos.
As, cada nivel de la MIR se encuentra vinculado a una etapa diferente
del proceso de produccin, por lo que cada objetivo est asociado a
una complejidad particular para su realizacin. En este sentido, se debe-
ran medir diferentes aspectos de mayor complejidad conforme se avan-
za hacia el objetivo superior.
Los objetivos de los
programas estn alineados
y ordenados de manera
jerrquica.
19
El mbito de desempeo se dene como los aspectos del proceso que
deben ser medidos en cada nivel de objetivo. Las actividades se relacio-
nan con la gestin que realiza el programa, de la misma manera que los
componentes se vinculan a la generacin y entrega de los productos o
servicios. El propsito se reere a los resultados concretos del programa,
mientras el n comprende el efecto de ste sobre un objetivo de mayor
alcance en el mediano plazo. Cada nivel de la matriz se encuentra aso-
ciado a objetivos con diferente grado de complejidad, por lo que es ne-
cesario establecer indicadores que permitan monitorear distintas etapas
de la cadena de produccin.
Fuente: Elaboracin del CONEVAL.
Qu se debe monitorear en cada nivel de objetivo? Qu nos deben
mostrar los indicadores? En la gura 1 se delimitan los mbitos, nica-
mente cuatro se relacionan con los niveles de objetivos establecidos
en la MIR.
Figura 1. mbitos de desempeo de los indicadores
Fin
mbito de
desempeo
Objetivo
Propsito
Componente
Actividades
Efectos
Resultados
Productos
Procesos
Insumos
Indicadores que permiten vericar los
efectos sociales y econmicos a los
que contribuye el programa.
Indicadores que permiten vericar
la solucin de una problemtica concreta
en la poblacin objetivo.
Inidicadores que permiten vericar
la produccin y entrega de bienes
y servicios del programa.
Inidicadores que permiten vericar
la gestin de los procesos del programa.
I
n
u
e
n
c
i
a

i
n
d
i
r
e
c
t
a
I
n
u
e
n
c
i
a

d
i
r
e
c
t
a
C
o
n
t
r
o
l

d
i
r
e
c
t
o
20
En las actividades se deben medir los procesos que realiza la institucin
para generar los productos. Se pretende vericar la gestin que empren-
de el programa para crear los productos, tanto aquellos que entrega a
la poblacin beneciaria como los que utiliza el mismo programa como
insumo intermedio.
En los componentes se miden la produccin, la entrega y las caracters-
ticas de todos los bienes y servicios que se otorgan directamente a los
beneciarios; tambin deben incluirse los bienes generados para uso del
propio programa.
En el propsito, los indicadores deben enfocarse a medir los resultados
del programa en la solucin de una problemtica social concreta. En
principio, el propsito reeja la problemtica social que debe solucionar
el programa, su razn de ser. De esta manera, los indicadores en este
mbito de desempeo deben permitir determinar los resultados alcan-
zados por el programa en la resolucin de dicha problemtica.
En el n se busca medir el efecto de la interven-
cin del programa en la solucin de un proble-
ma de mayor complejidad. Los indicadores en
este mbito permiten vericar los impactos socia-
les o econmicos a los que contribuye el progra-
ma. A diferencia de los indicadores del propsito,
los de impacto o n no son responsabilidad direc-
ta del programa. Dada la complejidad y el alcan-
ce de estos objetivos, un programa solamente
contribuye a la solucin de una parte de la problemtica global. De
este modo, la solucin de objetivos del n es a mediano plazo y necesi-
ta la coordinacin de varios programas o instituciones para cumplirse.
2. DIMENSIONES Y MBITOS DE DESEMPEO
Los indicadores deben permitir monitorear el logro de los objetivos a los
que se encuentran asociados; sin embargo, es posible medir diferentes
dimensiones del desempeo para un mismo objetivo. La dimensin del
indicador se dene como el aspecto del logro del objetivo a cuanticar,
esto es, la perspectiva con que se valora cada objetivo. Se consideran
cuatro dimensiones generales para los indicadores: ecacia, eciencia,
calidad y economa.
Es importante que los
indicadores planteados
tengan relacin directa con
el nivel en que se encuentra
el objetivo.
21
Aunque lo ideal sera medir todas las dimensiones del logro, en la prc-
tica esto no resulta una tarea sencilla ni econmica. Por tal motivo, en
cada nivel se recomienda medir slo algunas dimensiones, pero no es
limitativo ni debe entenderse como exclusivo. En la gura 2 se muestran
las dimensiones del logro que se sugiere sean cuanticadas en cada
nivel de la MIR y su relacin con el mbito de desempeo. Como se anali-
zar ms adelante, la dimensin de la ecacia es la nica que se sugiere
sea medida en todos los niveles de la MIR; las dimensiones de calidad
y economa se recomiendan en productos y procesos, respectivamente,
mientras que la de eciencia puede ser utilizada en procesos, productos
y resultados.
Dado que no todos los programas tienen los mismos objetivos, es posible
reasignar una dimensin diferente a la anterior; no obstante, hay ciertas
restricciones que deben mantenerse. Esto se describir con ms detalle
en la ltima seccin de este captulo.
Figura 2. Dimensiones sugeridas de los indicadores
Cuando se mide:
Impacto
Resultados
Ecacia
Ecacia
Eciencia
Ecacia
Eciencia
Calidad
Ecacia
Eciencia
Economa
Productos
Procesos
Fin
Propsito
Componente
Actividades
Insumos
Se est midiendo:
Los indicadores
recomendados:
22
Qu es un indicador de ecacia, eciencia, calidad
o economa?
a) Indicadores de ecacia
Los indicadores de ecacia miden el grado del cumplimiento del obje-
tivo establecido, es decir, dan evidencia sobre el grado en que se estn
alcanzando los objetivos descritos. Este tipo de indicadores son los ms
comunes dentro de las MIR.
Cuadro 1. Indicadores de ecacia
En virtud de que la informacin que proporcionan estos indicadores con-
cierne al cumplimiento de los objetivos, stos pueden ubicarse en cual-
quiera de los niveles de la MIR. Sin embargo, estos indicadores no brindan
informacin sobre el uso de recursos o las caractersticas de los bienes y
servicios entregados. En cuanto a actividad, componente y propsito, es
necesario, dependiendo del objetivo, complementar la informacin con
algn otro indicador de diferente dimensin.
Indicadores de ecacia? Observacin
Objetivo
Propsito. La poblacin indgena en localidades
de menos de cinco mil habitantes dispone de
servicio de drenaje y saneamiento.
El objetivo se reere a un problema de acceso
a servicios de drenaje, por lo cual el indicador
es apropiado para medir el grado de cumplimiento
del objetivo, porque se reere a la proporcin de la
poblacin que dispone del servicio.
Indicador
Porcentaje de la poblacin indgena en localidades
de menos de cinco mil habitantes que dispone del
Objetivo
Fin. Contribuir a mejorar el ingreso de las mujeres
que habitan en las localidades rurales.
El objetivo se reere a mejorar el ingreso, por lo cual
el indicador es apropiado para medir el grado de
cumplimiento del objetivo, porque se permite vericar
si el ingreso de las mujeres se incrementa
o disminuye.
Indicador
Tasa de variacin del ingreso laboral de las mujeres
que habitan en localidades rurales.
Objetivo
Fin. Contribuir a integrar una perspectiva de gnero
en las polticas pblicas de las entidades federativas.
El objetivo trata de incorporar las polticas pblicas
una perspectiva de gnero, por lo cual el indicador
es apropiado para medir el grado de cumplimiento
del objetivo, ya que se reere a la proporcin de
polticas que integran dicha perspectiva.
Indicador
Porcentaje de polticas pblicas que incorporan
una perspectiva de gnero en las entidades
federativas dado que cumplen con []
Objetivo
Actividad. Proyectos en materia de liberacin
de presos y representacin legal dictaminados.
El objetivo se reere a dictaminar los proyectos
recibidos por el programa al igual que el indicador;
no obstante, el indicador es de eciencia, no de
ecacia. El indicador no es apropiado para medir
el grado de cumplimiento del objetivo.
Indicador
Costo promedio de proyectos en materia
de liberacin de presos y representacin legal
dictaminados.
23
b) Indicadores de eciencia
Los indicadores de eciencia miden la relacin entre el logro del progra-
ma y los recursos utilizados para su cumplimiento. Estos indicadores cuan-
tican lo que cuesta alcanzar el objetivo planteado, sin limitarlo a recur-
sos econmicos; tambin abarca los recursos humanos y materiales que
el programa emplea para cumplir el objetivo especco.
Cuadro 2. Indicadores de eciencia
Estos indicadores pueden ubicarse en los primeros tres niveles de la MIR,
pero no se recomienda su uso para medir el desempeo en cuanto al n.
Aunque estos indicadores pueden ser establecidos en el propsito, esto
depende mucho del diseo del programa. En ocasiones, estos indica-
dores no son objetivos para la toma de decisiones, ya que nicamente
determinan cunto ha costado alcanzar los objetivos sealados; la valo-
racin de estos indicadores debe complementarse de modo necesario
con indicadores de ecacia.
Indicadores de eciencia Observacin
Objetivo
Actividad. Proyectos en materia de justicia evaluados
en tiempo y forma.
El objetivo se reere a la evaluacin en tiempo
y forma de los proyectos, por lo cual el indicador
es apropiado para cuanticar los recursos utilizados
para cumplir el objetivo, dado que tiene que ver con
el tiempo invertido por el programa para evaluar los
proyectos.
Indicador
Das promedio para evaluar los proyectos en materia
de justicia.
Objetivo
Propsito. La poblacin indgena en localidades
de menos de cinco mil habitantes dispone de
El objetivo se reere a un problema de acceso
a servicios de drenaje, por lo cual el indicador es
apropiado para cuanticar los recursos utilizados para
cumplir el objetivo, ya que alude al costo promedio
por conectar a un hogar al sistema de drenaje.
Indicador
Costo promedio por conectar a un hogar al sistema
de drenaje y saneamiento.
Objetivo
Actividad. Proyectos en materia de liberacin
de presos y representacin legal dictaminados.
El objetivo se reere a dictaminar los proyectos
recibidos por el programa, por lo que el indicador
es adecuado, puesto que trata sobre los recursos
humanos utilizados por el programa para dictaminar
un proyecto.
Indicador
Promedio de proyectos dictaminados por persona
en el mes t.
Objetivo
Componente. Cursos de capacitacin en materia
de uso de energas alternativas implementados.
El objetivo se reere a los cursos implementados por
el programa; no obstante, el indicador se relaciona
con la percepcin de los participantes respecto al
desempeo del curso y no al uso de recursos para
su realizacin, por lo que no es un indicador de
eciencia.
Indicador
Porcentaje de participantes en los cursos que
calican con nivel de satisfaccin alta y muy alta
el desempeo del curso.
24
c) Indicadores de economa
Los indicadores de economa miden la capacidad del programa para
administrar, generar o movilizar de manera adecuada los recursos nan-
cieros. Estos indicadores cuantican el uso adecuado de estos recursos,
entendido como la aptitud del programa para atraer recursos monetarios
ajenos a l que le permitan potenciar su capacidad nanciera y recupe-
rar recursos nancieros prestados.
Cuadro 3. Indicadores de economa
La diferencia esencial con los indicadores de eciencia (relacionados
con recursos econmicos) es que a los indicadores de economa no
les interesa el cumplimiento de los objetivos; nicamente observan la
administracin de los recursos nancieros por parte de los responsables
del programa.
Las caractersticas particulares de estos indicadores les permiten slo ubi-
carse en el nivel de actividad donde se encuentran asociados, en la ma-
yora de las veces, a objetivos como recuperacin de cartera y atraccin
de recursos externos.
d) Indicadores de calidad
stos miden los atributos, las capacidades o las caractersticas que tie-
nen o deben tener los bienes y servicios que se producen. Los programas
establecen las caractersticas mnimas que han de cumplir los bienes y
Indicadores de economa Observacin
Objetivo
Componente. Apoyos para la implementacin
de proyectos productivos alternativos entregados.
El objetivo se reere a la entrega de apoyos,
por lo cual el indicador es apropiado para medir
la capacidad del programa para administrar los
recursos nancieros, dado que concierne al monto
de recursos que aportan los estados respecto a los
que proporciona la Federacin.
Indicador
Porcentaje de participacin nanciera de gobiernos
estatales respecto a las aportaciones federales.
Objetivo
Actividad. Seguimiento de los apoyos para la
implementacin de proyectos productivos alternativos.
El objetivo se reere al seguimiento que realiza
el programa a los apoyos, por lo cual el indicador
es apropiado para medir la capacidad del programa
para administrar los recursos nancieros, ya que trata
el porcentaje de recursos que recupera el programa
de los proyectos fallidos.
Indicador
Porcentaje de recursos recuperados de los
beneciarios que incumplieron el uso de recursos.
Objetivo
Componente. Cursos de capacitacin en materia
de uso de energas alternativas implementados.
El objetivo se reere al costo promedio de los cursos
sin medir la capacidad del programa para administrar
los recursos nancieros, por lo que no mide economa,
sino eciencia.
Indicador
Costo promedio de los cursos de capacitacin
en materia de uso de energas alternativas.
25
servicios que entrega a la poblacin; los indicadores de calidad permiten
monitorear los atributos de estos productos desde diferentes perspectivas:
la oportunidad, la accesibilidad, la percepcin de los usuarios y la preci-
sin en la entrega de los servicios.
Oportunidad: se reere a aquellos indicadores que proporcionan
informacin sobre la atencin que el programa brinda a sus be-
neciarios. Los indicadores describen la conveniencia del tiempo
y lugar en que se realizan las acciones del programa.
Accesibilidad: se reere a los indicadores que reejan informa-
cin sobre la cualidad de acceder a algn lugar. Estos indi-
cadores describen, principalmente, si la infraestructura que
genera el programa cuenta con accesos para personas con
capacidades diferentes.
Percepcin de usuarios: es la calidad ms comn a ser cuanti-
cada; se reere a opinin de los beneciarios del programa sobre
los bienes o servicios que recibieron del programa.
Precisin: cuantican los fallos o errores que pueden ocurrir du-
rante la gestin o la generacin de los bienes o servicios que
produce el programa.
En virtud de que se miden los atributos de los bienes y servicios que ge-
nera el programa, se recomienda implementarlos nicamente a nivel de
componente. Estos indicadores no deben ser usados para medir el des-
empeo de los objetivos de n ni de propsito, debido a que la informa-
cin que proporcionan no se reere a los resultados del programa; slo
reejan las caractersticas de los bienes y servicios entregados a la pobla-
cin beneciaria.
26
Cuadro 4. Indicadores de calidad
3. RESTRICCIONES
Es claro que no es posible medir todos los aspectos de calidad en un
mismo objetivo, por lo que es recomendable que los responsables del
programa analicen y determinen cul de ellos proporciona la informa-
cin ms importante para los tomadores de decisiones conforme a las
deniciones formuladas.
Como se ha mencionado, no siempre es posible jar indicadores de al-
guna dimensin en todos los niveles de la MIR. Puede establecerse cier-
ta exibilidad en la construccin de los indicadores; sin embargo, se
debe recordar que stos monitorearn y evaluarn el desempeo de los
programas sociales. Ante ello, es preciso aclarar tres cuestiones al mo-
mento de sealar las dimensiones que se pretende medir en cada nivel
de la MIR:
Indicadores de calidad Observacin
Objetivo
Componente. Cursos de capacitacin
y actualizacin para emprendedores en zonas
rurales implementados.
El objetivo se reere a los cursos implementados por
el programa, por lo cual el indicador es apropiado
para medir los atributos de los servicios entregados
por el programa, ya que cuantica la proporcin
de participantes que calican como satisfactorio
el desempeo del curso.
Indicador
(Percepcin) Porcentaje de emprendedores
en zonas rurales que clasican los cursos de
capacitacin con satisfaccin alta y muy alta.
Objetivo
Propsito. Las instituciones de educacin superior
pblicas cuentan con programas educativos de
calidad.
El objetivo se reere a que las instituciones cuenten
con programas educativos de calidad; sin embargo,
el indicador permite medir el cumplimiento del
objetivo (ecacia), pero no la calidad de los servicios
que entrega el programa.
Indicador
Porcentaje de instituciones de educacin superior
pblicas con al menos el 80 por ciento de sus
programas educativos acreditados por organismos
competentes.
Objetivo
Componente. Canastas de apoyo alimentario bsico
en zonas rurales entregadas.
El objetivo se reere a la entrega de canastas con
apoyo alimentario; no obstante, el indicador permite
medir el cumplimiento del objetivo (ecacia), pero no
la calidad de los servicios que entrega el programa.
Indicador
Costo promedio de las canastas de apoyo
alimentario en las zonas rurales.
Objetivo
Componente. Asesora jurdica en localidades
indgenas impartidas.
El objetivo se reere a la imparticin de asesoras
jurdicas, por lo cual el indicador es apropiado para
medir los atributos de los servicios entregados por
el programa, dado que cuantica el tiempo promedio
de atencin prestado en cada asesora.
Indicador
(Oportunidad) Tiempo promedio (horas) de atencin
en la asesora.
Objetivo
Componente. Carreteras en zonas metropolitanas
rehabilitadas.
El objetivo se reere a la rehabilitacin de carreteras,
por lo cual el indicador es apropiado para medir los
atributos de los servicios entregados por el programa,
porque cuantica la proporcin de la carretera que
sufre daos despus en un intervalo.
Indicador
(Precisin) Porcentaje de kilmetros de carretera
rehabilitados que sufren daos representativos antes
de noventa das despus de ser habilitados.
27
a) Si los indicadores de cobertura son de ecacia, se pueden colo-
car indicadores de cobertura como los resultados?
Los indicadores de cobertura, aun cuando son de ecacia, se re-
comienda que sean medidos en el mbito de los componentes.
Dado que este tipo de indicadores se relaciona con la entrega de
los productos, nicamente muestran los avances en la cobertura,
pero no cuantican, en la mayora de los casos, la solucin a una
problemtica especca. Dicha solucin no depende slo de los
bienes y servicios que ofrece un nico programa, sino de diversos
factores ajenos a ste; por ejemplo, no basta que la poblacin re-
ciba becas para poder continuar sus estudios; es necesario que
los beneciarios tengan inters en concluir su formacin profesio-
nal. No es suciente dar despensas alimenticias para combatir
la desnutricin; tambin es indispensable que la poblacin se
comprometa a no consumir ciertos alimentos o realizar alguna
actividad fsica.
Normalmente, existe una salvedad para incluir indicadores de
cobertura en los resultados cuando el diseo del programa est
enfocado a solucionar problemas de acceso. Aunque este dise-
o es muy especco, es comn que el programa confunda el
resultado que pretende lograr con la entrega de bienes y servi-
cios, lo que no implica que deban establecerse indicadores de
cobertura en los resultados.
b) Por qu no se pueden medir aspectos relacionados con la cali-
dad en el propsito o n?
Los indicadores de calidad, en particular los de percepcin, to-
man en cuenta la opinin de la poblacin beneciaria o aten-
dida acerca de los bienes o servicios que otorga el programa.
No obstante, puede considerarse una encuesta al beneciario
un elemento suciente para determinar el desempeo del pro-
grama? La medicin de la percepcin es una dimensin que
mide la calidad de los bienes o servicios que recibe la pobla-
cin; sin embargo, no es fcil comprobar si los cambios en la
percepcin de la poblacin son permanentes o transitorios. Los
primeros deberan ser el tipo de cambio que un programa es-
pera lograr con su intervencin, mientras que los segundos son
28
soluciones transitorias que, aunque benecian a la poblacin,
estn lejos de resolver la problemtica concreta. Los indicado-
res de percepcin quedan dentro de este segundo grupo; slo
permiten analizar las mejoras temporales de la poblacin, pero
no los cambios permanentes.
c) Se deben incluir indicadores de todas las dimensiones sea-
ladas? Una matriz puede tener nicamente indicadores de
ecacia?
No es de extraar encontrar MIR que no incluyan todas las di-
mensiones sealadas en cada objetivo. En ocasiones, es su-
ciente con un par de indicadores por objetivo para medir el
desempeo de los programas, lo que no implica contar con
indicadores de todas las dimensiones. La informacin que se
desprende de los indicadores no slo debe ayudar a mostrar
el desempeo del programa, sino que debe proporcionar infor-
macin para retroalimentar y mejorar sus procesos. Aunque se
generen indicadores de todas las dimensiones, puede suceder
que esta informacin no sea relevante para mejorar los proce-
sos y, por tanto, tampoco arroje informacin importante sobre
su desempeo.
Finalmente, la decisin de incluir las diferentes dimensiones de
los indicadores depende de los responsables del programa. Los
indicadores, ms que un elemento para la scalizacin, deben
ser vistos como herramientas de monitoreo y evaluacin. El medir
distintos aspectos permite mostrar de manera ms clara los lo-
gros alcanzados por el programa.
Pasos para construir
un indicador
CAPTULO 4
30
Cmo se establece que un programa ha resuelto la problemtica para
la que fue creado? Cmo se determinan sus avances? Los indicadores
son el medio ms apropiado para el monitoreo y la evaluacin de los
objetivos de los programas sociales; permiten estimar el grado de avance
de los objetivos, cuanticar la percepcin de la poblacin objetivo res-
pecto a los bienes o servicios que recibe o medir el costo de los insumos
empleados por el programa o proyecto, entre otras aspectos. Dicha infor-
macin es necesaria no slo para emitir un juicio sobre el desempeo del
programa, sino que, adems, facilita a los responsables o coordinadores
del programa especicar cules son las reas de oportunidad dentro de
los procesos que realiza.
Para poder construir un indicador, es recomendable que se sigan los si-
guientes seis pasos:
1. REVISAR LA CLARIDAD DEL RESUMEN NARRATIVO
Los indicadores sern claros y precisos si el objetivo al que estn asocia-
dos tambin lo es. De ah que el primer paso para la construccin de los
indicadores es revisar la claridad del objetivo al que estn relacionados;
para ello se revisan los siguientes aspectos fundamentales:
1. Revisar la claridad del resumen narrativo.
2. Identicar los factores relevantes.
3. Establecer el objetivo de la medicin.
4. Plantear el nombre y la frmula de clculo.
5. Determinar la frecuencia de medicin.
6. Seleccionar los medios de vericacin.
Los objetivos establecidos se encuentran ubicados
en el mbito de desempeo adecuado?
El resumen narrativo cumple con la redaccin sugerida
en la Metodologa de Marco Lgico (MML)?
Los trminos tcnicos o acrnimos incluidos en el resumen
narrativo estn denidos?
31
Los objetivos deben ser precisos en cuanto a lo que pretenden lograr; as,
el disear y establecer un indicador es una tarea sencilla. Por tal motivo,
es recomendable que los objetivos cumplan con la redaccin sugerida
en la MML, ya que permite identicar rpidamente los elementos de ma-
yor relevancia para el objetivo.
Asimismo, al momento de revisar los objetivos, se debe analizar si efecti-
vamente cada uno de ellos se encuentra ubicado en el nivel correcto;
es decir, debe vericarse que los objetivos relacionados con los procesos
se encuentren en el nivel de actividades; los concernientes a los bienes
y servicios, en el nivel de componentes; y los de resultados y de impacto,
en el nivel de propsito y n, respectivamente. Es importante recordar que
los objetivos estn alineados jerrquicamente, por lo que los indicadores
tambin deberan estarlo.
Un aspecto comn en todos los programas es el uso de trminos tcnicos,
siglas o acrnimos. En el lenguaje de los programas es normal emplear
vocablos tcnicos que, en muchas ocasiones, se plasman en la MIR; no
obstante, stos no necesariamente son de uso comn para la ciudada-
na, por lo que, al revisar la MIR, se presentan dicultades para compren-
der lo expresado en los objetivos o en sus indicadores. Es recomendable
que los programas redacten los objetivos evitando trminos tcnicos, si-
glas y acrnimos, y si se considera necesario utilizarlos, se debe incluir su
signicado en una nota tcnica.
En el ejemplo siguiente se presentan dos de los casos ms comunes:
un resumen narrativo largo y sin un objetivo concreto, y un resumen
narrativo sencillo y acotado, pero poco preciso. En el primero no es
sencillo determinar cul es el cambio que se espera lograr o la pobla-
cin a la que se hace referencia. Este es un ejemplo de los mltiples
objetivos que se incluan en los programas federales antes de la imple-
mentacin de la MML.
32
En el segundo ejemplo, la idea central del objetivo se dene de manera
adecuada, pero el uso de siglas le resta claridad: qu es NA o ZI? Son
estados, municipios o localidades? Qu tipos de proyectos son EA? Se
apoya a todas las mujeres?
Los objetivos deben ser descriptivos y, al mismo tiempo, concretos. No es
conveniente describir renglones y renglones para tratar de explicar qu
se pretende hacer en cada objetivo. Si los objetivos del programa han
sido bien identicados, es sencillo plasmarlos en una oracin. No es ne-
cesario que el programa adorne el objetivo; es comn confundir al lec-
tor al incluir aspectos que no se relacionan con las acciones del progra-
ma, lo que diculta reconocer los que s deben ser cuanticados.
Si los objetivos presentan deciencias en su construccin, hay que corre-
girlos para que sean ms claros y precisos. El primer aspecto a corregir es
denir los acrnimos o siglas y omitir elementos tcnicos; el segundo, es
acotar la redaccin conforme a la MML. Finalmente, una vez delimitados
los objetivos, es necesario que el programa analice si lo descrito efectiva-
mente corresponde con los objetivos del programa. En el cuadro 6 se
presentan algunos objetivos despus de ajustar ciertos puntos de redac-
cin y claridad.
Cuadro 5. Claridad
Los objetivos son claros? Observacin
Objetivo
Fin. Beneciar al pas mediante la mejora del ingreso
de los hombres de la tercera edad, mujeres jvenes
y nios que habitan tanto zonas rurales como urbanas
para que, independientemente de su condicin social
o econmica, disfruten del derecho al ms alto nivel
de salud, educacin y calidad de vida que les permita
su libre desarrollo en lo individual y en lo familiar.
El objetivo no es claro. Hay mltiples objetivos
enmarcados en una misma frase.Tampoco es fcil
reconocer cul es la poblacin que atiende
el programa.
Este tipo de objetivos son confusos y no permiten
el diseo ni la construccin de indicadores para
su seguimiento.
Objetivo
Fin. Contribuir al ingreso de las mujeres en NA o ZI,
mediante la implementacin de proyectos EA.
El objetivo no es claro, aunque es entendible su idea
central. Se presentan siglas que no describen las
caractersticas de la poblacin objetivo ni qu tipo
de proyectos son los que apoyan.
33
Cuadro 6. Ajuste de objetivos
La claridad es la base del diseo del indicador, pues determinar los
factores relevantes a considerar en el indicador. Dichos factores son la
columna vertebral a la que se aadirn elementos necesarios para cons-
truir los indicadores que permitan monitorear el objetivo.
2. IDENTIFICAR LOS FACTORES RELEVANTES
stos son los aspectos ms importantes del objetivo, ya que describen
qu y en quin se va a medir; corresponden al conjunto de palabras que
enuncian cul es el logro esperado y sobre quin se espera dicho logro.
Podemos omitir la identicacin de los factores relevantes? No. Los fac-
tores determinan dos aspectos signicativos: lo que se pretende medir y
en quines se medir. Una vez que se cuente con un resumen narrativo
claro y preciso, se pueden establecer cules son los factores relevantes
de nuestro objetivo.
Antes Despus
Objetivo
Fin. Integrar a las mujeres al desarrollo social en
condiciones de equidad y ejercicio pleno de sus
derechos y el corresponsable cumplimiento de sus
obligaciones, a travs del fortalecimiento de las IMEF
para prevenir, detectar y atender la violencia contra
las mujeres.
Contribuir a prevenir la violencia contra las mujeres
a travs de las acciones que realizan las instancias
de mujeres en las entidades federativas.
Objetivo Propsito. Subir el ingreso de los beneciarios.
Personas en condiciones de pobreza patrimonial
en zonas urbanas mejoran su ingreso laboral.
Objetivo Componente. Impartir cursos.
Cursos de capacitacin y actualizacin en materia
de uso de energas alternativas impartidos.
Objetivo Actividad. Recepcin de solicitudes en internet.
Recepcin de solicitudes para los apoyos
del programa en el portal aplicativo.
34
La gura 3 es un ejemplo de un resumen narrativo referente al n; lo prime-
ro es identicar el objetivo que se quiere lograr del medio para alcanzarlo;
hay que considerar que slo el n puede contener estos dos elemen-
tos.
1
As, es necesario establecer qu elementos deben ser revisados al
momento de identicar los factores relevantes, puesto que el medio no
puede considerarse como un factor relevante, dado que es la forma en
que el n se liga con el propsito, esto es, la manera en que se pretende
cumplir el objetivo.
En cuanto al propsito, deben identicarse del objetivo el qu y en quin
de los factores relevantes. El primero se relaciona con el logro que se es-
pera alcanzar con el programa (en el ejemplo de la gura 4 correspon-
dera a crean agroempresas), mientras que el segundo se reere a los
jvenes. De esta manera, los indicadores asociados deben considerar
estos elementos.
1
En ocasiones, en el resumen narrativo de propsito, componente y actividades se incluye el medio para
alcanzar los objetivos de manera errnea. Es importante sealar que en las revisiones del CONEVAL, el
medio no se considera dentro de los factores relevantes. Por ello, es conveniente que los objetivos de las
matrices se adecuen a la sintaxis de la MML.
Figura 3. Identicacin de factores relevantes. Objetivo n
Factores relevantes
El cmo no entra dentro de
los factores relevantes
Contribuir a mejorar el ingreso laboral de la poblacin indgena
mediante la implementacin de proyectos productivos El objetivo
El medio
35
Para los objetivos establecidos en el componente y la actividad, la iden-
ticacin de los actores relevantes es similar al propsito. Con la nalidad
de reconocer con claridad los factores relevantes, es importante tener
objetivos claros y precisos. Una vez que se cuente con ellos, es sencillo
disear y construir los indicadores. A continuacin se presentan algunos
ejemplos adicionales al respecto.
Cuadro 7. Identicacin de factores relevantes
El qu y en quin? Factores relevantes
Objetivo
Contribuir a prevenir y atender la violencia contra
las mujeres a travs de las acciones que realizan las
instancias de mujeres en las entidades federativas.
Quin: Mujeres
Qu: Se previene y atiende la violencia en su contra
Objetivo
Personas en condiciones de pobreza patrimonial
en zonas urbanas mejoran su ingreso laboral.
Quin: Personas en condiciones de pobreza
Qu: Mejoran su ingreso laboral
Objetivo
Cursos de capacitacin y actualizacin en materia
de uso de energas alternativas impartidos.
Quin: Cursos
Qu: Impartidos
Objetivo
Recepcin de solicitudes para los apoyos
del programa en el portal aplicativo.
Quin: Solicitudes
Qu: Se reciben en el portal aplicativo
Figura 4. Identicacin de factores relevantes. Objetivo propsito
Factores
relevantes
Los jvenes emprendedores rurales
El objetivo
crean agroempresas en zonas rurales
36
Cmo se disea un indicador con base en factores relevantes? En vir-
tud de que stos son un puado de elementos, hay una amplia gama
de posibles indicadores que pueden ser construidos para monitorear el
objetivo; por ejemplo, para los cursos impartidos se pueden construir indi-
cadores sobre la variacin anual de cursos impartidos, el nmero prome-
dio de asistentes, el grado de satisfaccin, el costo promedio del curso,
entre otros. No obstante, y como se seal, los indicadores deben proveer
informacin que sea til para la operacin del programa. El discriminar
qu informacin es til para el programa depende directamente de los
operadores; en algunas ocasiones, la informacin que generan algunos
indicadores ser de mayor provecho que la de otros.
Existen criterios para determinar cules son los mejores indicadores? No.
Los responsables del programa y los operadores deben decidir qu indi-
cadores les aportan la informacin de mayor benecio para monitorear
su desempeo.
3. ESTABLECER EL OBJETIVO DE LA MEDICIN
Hasta ahora, podra concluirse que pueden generarse varios indicadores
con base en los factores relevantes identicados en el objetivo, es decir,
puede haber diversos indicadores para medir un mismo objetivo. Con-
tradictorio? No. Al nal de esta seccin, se constatar que, aun cuando
un mismo objetivo pueda tener varios indicadores,
lo importante es que en conjunto aporten informa-
cin sobre distintos aspectos contenidos en el re-
sumen narrativo.
Una vez que se han identicado los factores rele-
vantes del objetivo, el siguiente paso es determinar
cul es el objetivo de la medicin. En este punto
deben denirse las dimensiones del indicador que
sern incluidas en el monitoreo del programa. Para
ello, es necesario sealar que esta valoracin de-
pende, en gran parte, de las necesidades propias de cada programa.
Los indicadores de ecacia han de ser los primeros en considerarse para
monitorear el desempeo del programa y el cumplimiento de los objeti-
vos. En seguida, es conveniente establecer los indicadores de economa,
calidad y eciencia necesarios, cuntos y dnde? Los responsables, ms
que nadie, deben disponer los aspectos de mayor relevancia que han de
ser cuanticados para monitorear los logros alcanzados.
Los responsables del
programa deben decidir los
aspectos ms importantes
a medir, as como la
informacin que reeja mejor
los logros del programa.
37
Aunque no se pueden jar elementos para decidir qu indicadores de-
ben ser establecidos, o no, s se pueden considerar los siguientes aspec-
tos. El primero consiste en sealar las dimensiones de los indicadores
adicionales que deben ser analizados y determinados por los respon-
sables del programa. Algunos programas de desarrollo social pueden
estar ms interesados en conocer la opinin de la poblacin objetivo
respecto a los bienes y servicios que se les entrega que en monitorear
el costo de stos (el costo podra ser invariable en el tiempo). Asimismo,
habr programas ms preocupados por conocer la tasa de recupera-
cin de los prstamos otorgados que la opinin de los participantes en
los cursos de actualizacin.
Los indicadores no slo son un medio para que la sociedad tenga co-
nocimiento de los logros; tambin son una herramienta que facilita el
anlisis y la toma de decisiones respecto a la gestin y los resultados.
Los indicadores deben brindar la informacin que se considere rele-
vante sobre la gestin y los procesos que el programa desarrolla. Vale
la pena mencionar que no necesariamente un programa debe esta-
blecer indicadores de todas las dimensiones en un mismo objetivo, o
en una misma MIR. En este sentido, el indicador muestra los aspectos
ms importantes del programa? Ayuda a identicar reas de oportu-
nidad? Devuelve informacin que permite mejorar el actual diseo
del programa?
El segundo aspecto se reere a la forma de presentar los indicadores
y a la posible interpretacin de sus valores. Es recomendable que los
indicadores se muestren de manera positiva, lo que permitir reforzar
la idea de los avances del programa. Por ejemplo, es preferible brin-
dar informacin de los alumnos aprobados en lugar de alumnos re-
probados, de poblacin atendida sobre poblacin no atendida, o de
beneciarios satisfechos sobre beneciarios no satisfechos. Lo anterior
no implica dejar de transparentar la informacin o manipularla, sino
presentar la informacin de los indicadores como debe entenderse,
como un logro.
En este sentido, se debe cuestionar lo siguiente: el indicador est descri-
to de manera positiva? Puede ser sujeto a una malinterpretacin? Existe
alguna forma ms sencilla de mostrar la misma informacin con algn
otro indicador?
38
Por ltimo, es necesario evitar lo que se ha denominado trampa de la me-
dicin, la cual consiste en medir como resultado slo aquello que es fcil
de cuanticar. La implementacin de los indicadores con criterios homo-
gneos es relativamente nueva en la administracin pblica federal, por
lo que varios programas de desarrollo social no recopilaban informacin
relevante ni daban un seguimiento apropiado a los recursos que otorga-
ban. La principal razn por la que fue complicado establecer indicadores
adecuados fue la falta de informacin, de capacidad tcnica o de gene-
racin y recopilacin de informacin.
Sin embargo, la carencia de estos elementos no justic que programas
no implementaran esquemas de seguimiento, recopilacin y sistemati-
zacin de la informacin y capacitacin para crear indicadores que
mostraran resultados importantes en lugar de reportar nicamente infor-
macin sobre el uso y destino de los recursos. De ah que la integracin
de procesos de recopilacin y depuracin de informacin, as como un
seguimiento adecuado, se han convertido en tareas que los programas
deben incorporar para mejorar el diseo y la construccin de herra-
mientas para el monitoreo y la evaluacin de sus objetivos.
Ahora bien, retomando la pregunta es apropiado establecer varios indi-
cadores en un mismo objetivo? Debe asociarse un indicador a un ob-
jetivo, como se seal? La respuesta es simple: cada objetivo debe tener
al menos un indicador que permita monitorear los logros del programa
(ecacia); no obstante, en ocasiones ser de suma importancia para el
programa reportar cualidades diferentes al cumplimiento. Los indicadores
de eciencia, calidad y economa son complementarios a los de ecacia,
pero no son sustitutos.
Los indicadores de ecacia permiten al programa ver el grado de avan-
ce que ha tenido respecto al objetivo planteado, y los otros indicadores
hacen posible determinar la forma en que el programa ha alcanzado di-
chos objetivos. De esta manera, se cuenta con un panorama ms amplio
sobre las acciones que implementa el programa para el logro de los ob-
jetivos. Con estos elementos, es necesario denir un nombre y un mtodo
de clculo para los indicadores.
39
4. PLANTEAR EL NOMBRE Y LA FRMULA DE CLCULO
Presentar los indicadores como una relacin en-
tre dos o ms variables permite tener el contexto
sobre el cual se desarroll el programa. Una vez
denidos los factores relevantes de la medicin y
las dimensiones del indicador que se requieren
medir en cada uno de los objetivos, es necesario
denir un nombre y un mtodo de clculo para el
indicador. Para establecer el nombre y la frmula
de clculo se debe considerar que:
a) El nombre del indicador debe ser claro y relacionarse con el ob-
jetivo de la medicin.
b) El mtodo de clculo debe ser una expresin matemtica deni-
da de manera adecuada y de fcil comprensin, es decir, deben
quedar claras cules son las variables utilizadas.
En el diseo de indicadores, los mtodos de clculo ms comunes son
el porcentaje, la tasa de variacin, la razn y el nmero ndice. Aunque
stos no son las nicas expresiones para los indicadores, s son las ms
frecuentes. Cuando los programas disean indicadores con una es-
tructura ms compleja se recomienda colocar un anexo en el que se
detalle el mtodo de clculo empleado y cmo se interpretan sus va-
lores. En este contexto, a continuacin se presenta una breve descrip-
cin de los mtodos de clculo que ms se utilizan en el seguimiento
de un indicador.
Porcentaje
Un porcentaje es la forma de expresar un nmero como partes de cada
cien. Los porcentajes son el cociente entre dos variables con una misma
unidad de medida en el mismo periodo; representan, en la mayora de
los casos, un conjunto de menor dimensin de otro conjunto. En la gura
5 se presenta un ejemplo para un objetivo en el nivel de actividad y un
posible indicador para monitorear su desempeo.
El nombre del indicador
debe ser claro y su mtodo
de clculo una expresin
matemtica de fcil
comprensin.
40
Para monitorear el objetivo establecido, es necesario conocer el nmero
de solicitudes recibidas y cuntas de stas fueron respondidas (gura 6).
En el mtodo de clculo se deben describir las variables con precisin,
adems de denir correctamente la temporalidad en la que se realizar
la medicin.
Figura 6. Ejemplo de construccin de indicadores (porcentaje)
Actividad. Solicitudes de participacin
en la convocatoria respondidas.
Porcentaje de solicitudes para la
participacin en la convocatoria
respondidas en el periodo.
Solicitudes respondidas
(recibidas y respondidas)
Solicitudes recibidas
Numerador
Denominador
x 100
Nmero de solicitudes respondidas en el periodo t
Nmero de solicitudes recibidas en el periodo t
Mismo periodo
Igual unidad de medida
41
Una vez determinado el mtodo de clculo es necesario vericar que el
nombre del indicador y su mtodo de clculo sean coherentes entre s.
En la gura 7 se muestran los principales elementos que se deben veri-
car: a) que en el nombre del indicador se incluyan los factores relevan-
tes; b) que las unidades de medida en el nombre del indicador tengan
correspondencia con las unidades de medida denidas en el mtodo
de clculo; y c) debe haber correspondencia entre las frecuencias de
medicin de cada una de las variables del mtodo de clculo; en el por-
centaje las variables deben ser cuanticadas en el mismo periodo.
Porcentaje de solicitudes para la participacin en
x 100
Nmero de solicitudes respondidas en el periodo t
Nmero de solicitudes recibidas en el periodo t
Mismo periodo
la convocatoria respondidas en el periodo
42
El cuadro 8 contiene algunos ejemplos de indicadores (porcentajes)
para diferentes niveles de la MIR; en ellos se sealan los factores relevan-
tes y se presenta un posible indicador para monitorear su desempeo.
Como se observa, la identicacin de los factores relevantes y el esta-
blecimiento de un indicador tienen como base un objetivo denido de
manera adecuada, por lo que es sencillo identicar estos elementos.
Los porcentajes son el mtodo de clculo ms utilizado y permiten co-
nocer el grado de avance o cobertura de alguna variable. Aunque este
mtodo es sencillo, su complejidad tcnica realmente depende de la
denicin de la variable a la que se encuentra asociada.
Tasa de variacin
Una tasa de variacin es la forma de expresar un cambio relativo en el
tiempo; es el cociente de dos observaciones de una misma variable en
diferentes periodos. En la gura 8 se presenta un ejemplo para un objetivo
de componente. En este caso, es de inters del programa medir el incre-
mento o decremento de los apoyos econmicos otorgados cada ao.
Cuadro 8. Tipos de Indicadores: porcentajes
Nombre del indicador Factores relevantes Mtodo de clculo
Propsito
Porcentaje de asistencia
escolar de la poblacin
indgena de 6 a 14 aos
de edad
Quin: Poblacin indgena
de 6 a 14 aos
Qu: Asiste a la escuela
(Nmero de poblacin indgena
de 6 a 14 aos de edad que asiste
a la escuela en el ao t / Nmero
de poblacin indgena de 6 a 14
aos en el ao t) X 100
Componente
Porcentaje de
beneciarios que evalan
satisfactoriamente los servicios
otorgados de capacitacin,
asesora y participacin para
negocios establecidos
Quin: Beneciarios
Qu: Evalan satisfactoriamente
los servicios
Nmero de beneciarios que
evalan satisfactoriamente los
servicios otorgados, capacitacin,
asesora y participacin para
negocios establecidos en el
semestre t / Nmero de beneciarios
entrevistados en el semestre t)
X 100
43
Es importante sealar que para este mtodo de clculo se deben tener
observaciones de una misma variable, pero en dos diferentes puntos
en el tiempo (pasado y presente). La informacin ms actual se colo-
ca en el numerador y la menos reciente, es decir, el punto de inters, en
el denominador. Como se muestra en la gura 9, hay que describir con
claridad el nombre de las variables en el mtodo de clculo y vericar
la temporalidad en que se realiza la medicin.
Figura 9. Ejemplo de construccin de indicadores (tasa de variacin)
-1 x100
-1 x100
Nmero de apoyos econmicos entregados en el periodo t Numerador
Denominador Nmero de apoyos econmicos entregados en el periodo t-k
Diferente periodo
Apoyos
entregados
en tiempo t
Apoyos
entregados
en tiempo t-k
Componente. Apoyos
econmicos entregados.
Tasa de variacin del nmero
de apoyos econmicos entregados.
44
Una vez formulado el mtodo de clculo, el siguiente paso es vericar
que el nombre del indicador y su mtodo de clculo sean coherentes
entre s. La gura 10 contiene los principales elementos que se deben
vericar: a) que en el nombre del indicador se incluyan los factores rele-
vantes del objetivo; b) que las unidades de medida establecidas en el
nombre del indicador tengan correspondencia con el mtodo de cl-
culo; y c) debe vericarse que la frecuencia de medicin denida para
calcular el indicador sea coherente con la brecha (periodo t y periodo
t-k) con la que se cuantican las variables que componen el indicador.
-1 x100
Nmero de apoyos econmicos entregados en el periodo t
Nmero de apoyos econmicos entregados en el periodo t-k
Diferente periodo
Restamos
la unidad
Tasa de variacin del nmero
de apoyos econmicos
entregados en el periodo
45
Cuadro 9. Indicadores: tasa de variacin
En el cuadro 9 se presentan algunos ejemplos de indicadores (tasas
de variacin o tasa de cambio) para diferentes niveles de la matriz de
indicadores.
Vale la pena reiterar que para estos mtodos de clculo no deben incluir-
se juicios de valor en el nombre del indicador, como tasa de crecimiento,
tasa de mejora, tasa de reduccin, etctera.
El sentido del indicador depender de los valores que tome el indicador,
lo que determinar si ste crece, se reduce o mantiene. El nombre del indi-
cador per se no dene el sentido del indicador, por lo que deben omitirse
estos juicios.
Razn/promedio
La razn es el cociente entre dos variables cualesquiera en un cierto perio-
do y es la forma de expresar un tanto de unidades del numerador por cada
unidad del denominador. El promedio es una particularidad de la razn y
se representa como la suma nita de un conjunto de valores dividida entre
el nmero de sumandos. El ejemplo de la gura 11 se reere a un objetivo
de componente y el indicador propuesto es el promedio de la inversin
destinada a las escuelas beneciarias del programa.
Propsito
Tasa de variacin del valor real
en los activos en las unidades
econmicas rurales
Quin: Activos
Qu: Se valan
[(Valor real en los activos
en las unidades econmicas rurales
apoyadas en el ao t / Valor real
en los activos en las unidades
econmicas rurales apoyadas
en el ao t - 2) - 1]*100
Componente
Tasa de creacin anual
de microempresas
Quin: Microempresas
Qu: Se crean
[(Nmero de microempresas
creadas con los apoyos del
programa en el ao t / Nmero
de microempresas creadas con
los apoyos del programa en el ao
t - 1)-1]*100
46
Para las razones o promedios, se deben tener dos variables con diferentes
unidades de medida, pero para un mismo periodo. De nuevo, una vez
identicadas las variables necesarias para el indicador (monto de inver-
sin y escuelas beneciaras) se construye el indicador como se muestra
en la gura 12. El mtodo de clculo debe describir con claridad cules
son las variables incorporadas y vericar que la temporalidad de medi-
cin de stas es para el mismo periodo.
Figura 12. Ejemplo de construccin de indicadores (promedio 1)
Componente. Apoyos para la
recuperacin de espacios entregados.
Inversin promedio por escuela
beneciada para la recuperacin
de espacios.
-1 x100
Monto en inversin gastado en el periodo t
Nmero de escuelas beneciadas en el periodo t
Numerador
Denominador
Mismo periodo
Diferente unidad de medida
Inversin
realizada ($)
en periodo t
Escuelas
beneciadas
en periodo t
Distintas
variables
47
Una vez determinado el mtodo de clculo, es necesario vericar que el
nombre del indicador y su mtodo de clculo sean coherentes entre s. En
la gura 13 se muestran los principales elementos que se deben vericar:
a) que en el nombre del indicador se incluyan los factores relevantes del
objetivo; b) debe haber correspondencia lgica entre las variables com-
prendidas en el mtodo de clculo y el nombre del indicador; y c) debe
haber correspondencia entre las frecuencias de medicin de las varia-
bles incluidas.
Un segundo ejemplo se muestra en la gura 14, en la que es necesario un
indicador para un objetivo de componente; como propuesta de indica-
dor se sugiere la duracin promedio de las asesoras jurdicas impartidas.
En esta caso, las variables de inters son las horas dedicadas a la impar-
ticin de las asesoras y el nmero de stas.
Monto en inversin gastado en el periodo t
Nmero de escuelas beneciadas en el periodo t
Inversin promedio por
escuela beneciada para
la recuperacin de espacios
Distintas
variables
Mismo periodo
48
Una vez identicados los aspectos a medir, se establecen las variables
de inters en el numerador o denominador segn corresponda. Es ne-
cesario tener identicado qu variable va en qu lugar. No es lo mismo
las asesoras promedio por hora que el nmero de horas dedicadas
a cada asesora. Aunque ambos utilizan las mismas variables, la infor-
macin considera proporciones diferentes, por lo que muestra aspectos
distintos del desempeo del programa. Una vez identicado el mtodo
de clculo, se describen las variables con claridad y se establece una
frecuencia de medicin coherente; las dos variables deben ser cuanti-
cadas con la misma frecuencia (gura 15).
Duracin promedio
de los servicios de asesora
jurdica impartidos.
Componente. Servicios de
asesora jurdica en
comunidades rurales impartidos.
-1 x100
Horas de atencin en el trimestre t
Asesoras jurdicas impartidas en el trimestre t
Numerador
Denominador
Mismo periodo
Diferente unidad de medida
Horas
en el
trimestre t
Asesoras
jurdicas en
el trimestre t
Distintas
variables
49
Una vez determinado el mtodo de clculo, se requiere vericar que el
nombre del indicador y su mtodo de clculo sean coherentes entre s. En
la gura 16 se muestran los principales elementos que se deben vericar:
a) en el nombre del indicador se incluyen los factores relevantes del obje-
tivo; b) las unidades de medida establecidas en el nombre del indicador
deben tener correspondencia con las del mtodo de clculo; y c) debe
haber correspondencia entre las frecuencias de medicin de las distintas
variables denidas.
En el cuadro 10 se presentan algunos ejemplos de indicadores (razones
o promedios) para diferentes niveles de la MIR y se sealan los factores
relevantes de cada objetivo; los aspectos ms importantes que deben
considerarse son: el vericar la relacin de las variables establecidas en
el indicador y que el numerador y denominador sean congruentes con lo
dispuesto en el objetivo.
Figura 16. Ejemplo de construccin de indicadores (promedio) 2
Duracin promedio de los
servicios de asesora
jurdica impartidos
Horas de atencin el trimestre t
Asesoras jurdicas impartidas en el trimestre t
Distintas
variables
Diferente periodo de tiempo Igual unidad de medida
50
Nmeros ndices
Un ndice (nmero ndice) es una medida estadstica diseada para es-
tudiar las variaciones de una magnitud o de ms de una en relacin con
el tiempo o el espacio. Los ndices son medidas construidas que tienen
un consenso metodolgico y son utilizados por instancias nacionales e
internacionales. En el cuadro 11 se presentan algunos ejemplos de indi-
cadores (ndices) para diferentes niveles de la MIR.
Cuadro 10. Indicadores: promedio
Fin
Razn de mortalidad materna
hospitalaria (Unidad Mdica
Rural y Hospitales Rurales)
Quin: Nacidos en unidades mdicas
Qu: Fallecen
[Nmero de defunciones maternas
ocurridas en unidades mdicas (UMR
y HR)/Nmero de nacidos vivos en
unidades mdicas (UMR y HR)] X
100,000
Componente
Promedio de visitas de
monitoreo a los proyectos en
el trimestre t
Quin: Proyectos del programa
Qu: Son monitoreados
(Nmero de visitas de monitoreo
a los proyectos en el trimestre t/
Nmero de das en el trimestre t)
Componente
Promedio de horas semanales
de que disponen los
beneciarios para estudiar
Quin: Beneciarios del programa
Qu: Estudian
(Total de horas que los beneciarios
disponen para estudiar en
el semestre t/Nmero total de
beneciarios entrevistados en
el semestre t)
Componente
Promedio mensual
de pacientes atendidos
por el programa
Quin: Pacientes
Qu: Atendidos en centros
ambulantes
(Nmero de pacientes atendidos en
los centros ambulantes del programa
en el mes t/Nmero de das en el
mes t)
51
Cuadro 11. Indicadores: nmeros ndices
Una ventaja de los ndices es que son publicados por fuentes ociales, lo
que implica que es informacin externa al programa y cuenta con una
metodologa clara. No obstante, para utilizar un ndice como indicador
de un programa o proyecto es necesario revisar que la metodologa
para generar el ndice mida aspectos que tengan que ver con el pro-
grama o proyecto.
Hasta este punto, se ha denido un nombre para el indicador y un mto-
do de clculo con base en los factores relevantes identicados del objeti-
vo. Asimismo, se han establecido los indicadores ms importantes para el
monitoreo del programa. En las siguientes secciones se complementarn
los indicadores con informacin para su seguimiento. Cul es el periodo
para hacer el seguimiento de los indicadores? Cmo se asegura que la
informacin que proporcionan los indicadores sea dedigna?
Fin
El ndice de Desarrollo
Humano (IDH)
Quin: Personas
Qu: Mejoran su desarrollo humano
Es una medida resumen del
desarrollo humano que reeja
los logros medios de un pas en tres
dimensiones bsicas de desarrollo
humano: una vida larga y saludable
(salud), acceso al conocimiento
(educacin) y un nivel de vida digno
(ingresos).
Ver http://bit.ly/twOSRh
Fin
El ndice de Pobreza
Multidimensional (IPM)
Quin: Personas
Qu: Reducen su condicin
de pobreza
Identica las diversas privaciones
a nivel individual en alimentacin,
salud, educacin, vivienda y
seguridad social. Cada persona de
una misma familia se clasica como
pobre o no pobre, dependiendo del
nmero de privaciones que sufra
su familia. Estos datos se agregan
entonces a las medidas nacionales
de pobreza.
Ver http://bit.ly/twOSRh
52
5. DETERMINAR LA FRECUENCIA DE MEDICIN
DEL INDICADOR
No se ha sealado en este documento algn criterio para establecer la
frecuencia de medicin del indicador. Aunque en general es intuitivo de-
terminar dicha frecuencia, es conveniente sealar algunos puntos sobre
el tema. Retomando los mbitos de desempeo y el proceso de produc-
cin del programa, los resultados se presentan en orden cronolgico, es
decir, el cumplimiento de las actividades se realiza antes de los compo-
nentes y mucho antes que el propsito o el n.
Como se muestra en la gura 17, los indicadores asociados a las activi-
dades tienen una mayor frecuencia de medicin (mensual, bimestral),
mientras los de n presentan una menor (bianual, sexenal). Cuanto ms
alto es el nivel de objetivos, menor ser su frecuencia de medicin.
Figura 17. Frecuencia de medicin del indicador
M
a
y
o
r
M
e
n
o
r
Ms utilizadas
Anual
Trianual
Sexenal
Anual
Bianual
Trianual
Trimestral
Semestral
Anual
Mensual
Trimestral
Semestral
C
u
l

d
e
b
e

s
e
r

l
a

f
r
e
c
u
e
n
c
i
a

d
e

m
e
d
i
c
i
n
?
Fin
Propsito
Componente
Actividades
53
Los indicadores de gestin
se miden con mayor
frecuencia en un periodo.
Aunque no es una regla, los responsables del pro-
grama de desarrollo social pueden establecer o
modicar la frecuencia de medicin de sus indi-
cadores dependiendo de las necesidades de in-
formacin. Lo anterior, dado que a priori no puede
determinarse una frecuencia de medicin debido
a que obedece, entre otras factores, a:
a) La disponibilidad de la informacin
de los datos de las variables que
conforman el indicador. En ocasio-
nes, la generacin de un indicador
depender de manera inevitable de
la frecuencia en la disposicin de los
datos.
b) Las necesidades de informacin por parte del programa. El pro-
grama de desarrollo social puede determinar que cierta informa-
cin debe ser generada con periodicidad a n de monitorear los
avances o las reas de oportunidad en los procesos.
Si bien denir una frecuencia de medicin parece ser un tema simple, los
programas deben considerar que al establecerla se comprometen a actua-
lizar la informacin del indicador y de sus variables conforme a lo dispuesto.
En este sentido, es importante sealar que, aun cuando la informacin del
indicador es para el monitoreo de sus objetivos, tambin es un compromiso
de transparencia.
6. SELECCIONAR LOS MEDIOS DE VERIFICACIN
Los medios de vericacin corresponden a las fuentes de informacin
en las que est disponible la informacin necesaria y suciente para
construir el indicador sealado. Dichos medios pueden ser documentos
ociales, documentos o reportes internos que genera el programa, ba-
ses de datos procesadas, entre otros. Dado que stos pueden ser vastos,
en la MIR es conveniente reportar lo siguiente:
a) Nombre completo del documento que sustenta la informacin.
b) Nombre del rea que genera o publica la informacin.
Los indicadores de
resultados se miden con
una menor frecuencia.
54
c) Periodicidad con que se genera el documento (debe coincidir
con la frecuencia de medicin del indicador).
d) Liga a la pgina de la que se obtiene la informacin (si es el
caso).
A diferencia de los indicadores, cabe la posibilidad de que los medios de
vericacin se repitan en distintos niveles de la MIR, lo cual depende de los
indicadores establecidos. Los medios de vericacin no son nicamente
la manera de transparentar la operacin del programa; tambin permi-
ten denir si es factible construir un indicador planteado, o no. Como se
mencion, en ocasiones la falta de informacin impide la construccin
de indicadores apropiados para el monitoreo de los objetivos. En la gura
18 se presenta un diagrama que ayuda a identicar si la informacin
para el indicador est disponible y qu se debe hacer si sta no puede ser
generada.
Figura 18. Establecimiento de medios de vericacin
Se establece el
medio de vericacin
La informacin la
genera otra institucin?
Es mayor el benecio
que el costo de generar
la informacin
La informacin
la genera el programa
o la institucin?
Se debe replantear el
indicador. Utilizar un
indicador proxy.
No
No
S
S
S
No
55
Como se observa en la gura 18, el primer paso para establecer los me-
dios de vericacin es determinar si el programa (como parte del segui-
miento, operacin o gestin) genera o consolida la informacin de las
variables que componen el indicador:
a) Si el programa o la propia institucin generan la informacin ne-
cesaria, entonces se establecen los medios de vericacin.
b) Si el programa no genera dicha informacin, es conveniente de-
terminar si alguna otra institucin la produce para construir el in-
dicador. Hay un conjunto de instituciones que origina una amplia
gama de informacin estadstica que los programas pueden re-
portar en sus indicadores.
c) Si el programa ha dispuesto que ni la institucin ni alguna otra
producen la informacin necesaria para construir su indicador,
entonces debe analizarse el costo de producirla y sus benecios
(encuesta, entrevistas, etctera). En este aspecto ha de valorar-
se la importancia que representa la informacin generada tanto
para el programa como para la institucin. Asimismo, cul ser el
costo en relacin con el presupuesto del programa.
d) Si el programa considera que el benecio es menor al costo de
generar la informacin necesaria, entonces debe plantearse la
posibilidad de descartar el actual indicador y establecer uno pro-
xy relacionado. Los indicadores proxy son indicadores indirectos.
A diferencia de los objetivos y de sus indicadores, los medios de verica-
cin pueden repetirse en los distintos niveles. Es comn que en un mismo
documento o reporte se pueda encontrar la infor-
macin para generar uno o ms indicadores. De
igual modo, es necesario vericar que la frecuen-
cia de medicin de los indicadores coincida con
la frecuencia de publicacin o reporte de los me-
dios de vericacin.
La importancia en los medios de vericacin resi-
de en que, si no existen o no se construyen, cual-
quier juicio sobre el desempeo del programa es poco conable; es decir,
no se puede emitir un juicio respecto al desempeo de un programa sin
Los medios de vericacin
dan certeza a la ciudadana
sobre la informacin que
reportan.
56
Cuadro 12. Medios de vericacin: ejemplos comunes
citar o no tener la certeza sobre la fuente de informacin que la sustente.
Se debe sealar que a travs de un medio de vericacin los ciudada-
nos pueden acceder a la informacin acerca del avance y los logros del
programa de manera transparente. Por ello, la informacin que reporta y
genera el programa siempre debe estar disponible y actualizada.
En el cuadro 12 se presentan ejemplos sobre qu es y qu no es un medio
de vericacin.
Medio de vericacin Es apropiado? Observaciones
Base de datos No
No permite determinar si la informacin se
encuentra disponible. Slo se seala que la
informacin est en una base de datos; el
medio de vericacin no es suciente para el
monitoreo.
Encuesta No
No permite determinar si la informacin se
encuentra disponible.Tampoco se menciona si
la informacin est consolidada y depurada;
el medio de vericacin no es suciente
para el monitoreo.
Reporte de avances del programa.Trimestral.
Disponible en [www.].
S
Se cuenta con un nombre claro
de la ubicacin de la informacin y su
frecuencia de publicacin. Adems, la
informacin es pblica y se encuentra
disponible en un sitio web. El medio de
vericacin es suciente para el monitoreo.
Informacin interna No
No permite determinar si la informacin
est disponible. No se seala el nombre del
documento ni quin genera dicha informacin.
El medio de vericacin no es suciente para
el monitoreo.
Base de datos de la encuesta para
el seguimiento del programa. Bianual.
A cargo de la direccin [nombre]
S
Se cuenta con un nombre claro de la
ubicacin de la informacin y su frecuencia
de publicacin. Adems, se seala el nombre
de la direccin o rea a cargo de generar
la informacin. El medio de vericacin es
suciente para el monitoreo.
Informe sobre la situacin del Consejo [...].
Reporte semestral disponible en [www]
S
Se cuenta con un nombre claro de la
ubicacin de la informacin y su frecuencia de
publicacin. Adems, la informacin es pblica
y se encuentra disponible en un sitio web. El
medio de vericacin es suciente para el
monitoreo.
Criterios del CONEVAL
para la valoracin
de los indicadores
CAPTULO 5
58
Una vez construidos los indicadores del programa de desarrollo social,
el siguiente paso es hacer una valoracin sobre las caractersticas mni-
mas que deben cumplir aqullos. Por lo anterior, es necesario vericar que
contengan los elementos mnimos que establece el Consejo Nacional de
Evaluacin de la Poltica de Desarrollo Social (CONEVAL). Estos criterios se
presentan en la gura 19 y representan las caractersticas mnimas que
deben contener los indicadores para el monitoreo de los programas de
desarrollo social.
Figura 19. Criterios de valoracin de indicadores
Claro
Relevante
Adecuado
Monitoreable
Econmico
Aporte
marginal
Caractersticas
de un indicador
de desempeo
59
Cundo es claro un indicador?
Se reere a si existen dudas sobre lo que se pretende medir; es decir, si el
indicador tiene algn trmino o aspecto tcnico ambiguo que pueda
ser interpretado de ms de una manera. En ocasiones, los programas o
instituciones utilizan trminos tcnicos que son comunes a su gestin,
por lo que omiten sus deniciones. Es importante denirlos para que
la persona que no conoce el programa entienda los indicadores del
mismo modo que los operadores del programa o la institucin.
Cundo es relevante?
Se debe vericar que los elementos ms importantes del indicador estn
directamente relacionados con algn aspecto fundamental del objetivo
(factores relevantes). Cuando los indicadores guardan un estrecho vn-
culo con los objetivos, es posible conrmar el logro del objetivo en un
aspecto sustantivo.
Cundo es econmico?
Cuando al comparar el benecio de generar la informacin necesaria
para el indicador respecto al costo econmico o humano, si el benecio
es mayor al costo, se estima que el indicador es econmico. Asimismo,
es apropiado que el programa compare el costo de generar el indica-
dor en relacin con su presupuesto anual. Vale la pena aclarar que si un
indicador no es relevante ni adecuado, tampoco puede considerarse
econmico. Independientemente del costo que origina obtener la infor-
macin del indicador, ste no es apropiado para monitorear el desem-
peo del programa.
Cundo es monitoreable?
Se analiza la claridad de los medios de vericacin y del mtodo de
clculo del indicador para determinar si ste puede ser sujeto a una
comprobacin independiente. Esto quiere decir que cualquier indivi-
duo puede replicar el clculo del indicador, para lo cual es necesario
que el mtodo de clculo del indicador sea claro y que la informacin
para su construccin est denida de manera adecuada en los me-
dios de vericacin.
Los medios de vericacin deben ser lo sucientemente precisos para
que no se tenga lugar a dudas sobre dnde se encuentra la informacin
necesaria para construir o replicar el indicador.
60
Cundo es adecuado?
Se reere a si el indicador nos da una base suciente para emitir un juicio
respecto al desempeo del programa y si la informacin que proporcio-
na el indicador es relevante y apropiada para describir los logros del pro-
grama en un cierto periodo.
Cundo tiene aporte marginal?
Este criterio se aplica nicamente cuando un objetivo tiene dos o ms
indicadores. En este caso, si stos cumplen con todo los criterios anterio-
res, un indicador tiene aporte marginal si la informacin adicional que
proporciona mide aspectos que no consideran los dems indicadores y
cuando se proporciona informacin objetiva adicional para monitorear
el desempeo del programa.
Como se observa, los criterios establecidos por el CONEVAL no son carac-
tersticas fuera de lo comn o inalcanzables. Los indicadores deben per-
mitir monitorear los programas, por lo que es importante que el indicador
mida los factores relevantes incluidos en los objetivos. Qu sucede si un
indicador no cumple con los criterios? Pierde sentido en su razn de ser.
Los indicadores son herramientas que nos devuelven informacin rele-
vante para el seguimiento de objetivos; si los indicadores no se relacio-
nan con estos ltimos, entonces no tiene sentido establecerlos. Por qu?
Supongamos que usted va a contratar a un beisbolista si cumple cier-
tas cualidades. No obstante, cuando se le cuestiona sobre sus mejores
habilidades, ste responde: Puedo correr cien yardas planas en quince
segundos y en la ltima temporada mand cien pases para touchdown
en nicamente cincuenta juegos. Lo contratara? La respuesta es no
necesariamente.
Al evaluar, esperamos que un programa determinado logre ciertos objeti-
vos y la mejor manera de comprobar si ha cumplido con ellos es analizar
sus indicadores. En este caso, el beisbolista es como un programa y las
habilidades son sus indicadores. No es factible emitir un juicio sobre la
capacidad del jugador como beisbolista con base en las habilidades
descritas, aunque s podemos decir que puede ser un buen jugador de
futbol americano. La analoga es similar para los programas: no es po-
sible emitir un juicio sobre el desempeo de un programa cuando los
indicadores no se relacionan con los objetivos. As de sencillo.
61
Por tal motivo, es necesario que la validacin de estos criterios se reali-
ce con objetividad, es decir, reconocer si los indicadores incumplen con
alguno de ellos. El identicar reas de oportunidad permite mejorar el
diseo y la construccin de los indicadores.
Un elemento fundamental para la construccin de los indicadores es la
pertinencia en relacin con sus objetivos. Para vericar estos aspectos, es
recomendable formular las preguntas incluidas en el cuadro 13 en cada
uno de los niveles de la MIR.
Cuadro 13. Elementos de cumplimiento de la lgica vertical
Nivel Qu aspectos debemos revisar?
2
El n establecido debe cumplir las siguientes
caractersticas:
a) Est claramente especicado, es decir, no existe ambigedad
en su redaccin.
b) Es un objetivo superior al que el programa contribuye, esto es, no se
espera que la ejecucin del programa sea suciente para alcanzar el n.
c) Su logro no est controlado por los responsables del programa.
d) Es nico, es decir, incluye un solo objetivo.
e) Est vinculado a objetivos estratgicos de la dependencia o el programa
sectorial.
El propsito establecido debe cumplir
las siguientes caractersticas:
en su redaccin.
b) Es consecuencia directa que se espera ocurrir como resultado
de los componentes y los supuestos a ese nivel de objetivos.
c) Su logro no est controlado por los responsables del programa.
d) Es nico, esto es, incluye un solo objetivo.
e) Est redactado como una situacin alcanzada; por ejemplo: morbilidad
en la localidad reducida.
f) Se incluye de manera precisa la poblacin objetivo.
Los componentes sealados deben cumplir
las siguientes caractersticas:
en su redaccin.
b) Son los bienes o servicios que produce el programa.
c) Estn redactados como resultados logrados; por ejemplo, becas
entregadas.
d) Son necesarios, esto es, ninguno de los componentes es prescindible
para producir el propsito.
e) Su realizacin genera, junto con los supuestos en ese nivel de objetivos,
el propsito.
Para cada uno de los componente, existe
una o un grupo de actividades que:
a) Estn claramente especicadas, es decir, no existe ambigedad
en su redaccin.
b) Estn ordenadas de manera cronolgica.
c) Son necesarias, esto es, ninguna de las actividades es prescindible
para producir los componentes.
d) Su realizacin genera, junto con los supuestos en ese nivel de objetivos,
los componentes.
2
Con base en los trminos de referencia para la evaluacin de diseo que emite el CONEVAL.
62
Cabe la posibilidad de que un programa establezca indicadores que
cumplan con las caractersticas de claridad, relevancia, economa, ade-
cuacin, monitoreabilidad y aporte marginal, pero que sus objetivos de-
nidos no reejen los resultados que pretende alcanzar. En este sentido,
y como se ha sealado de modo reiterativo, para que los indicadores
sean los apropiados para el monitoreo y la evaluacin de un programa,
es necesario que sus objetivos reejen con precisin los resultados que
pretende lograr en el corto y el mediano plazo.
Aunque la base esencial para el diseo de los indicadores es la claridad
de los objetivos, es recomendable que se revisen todos los aspectos de-
nidos en el cuadro 13 para cada nivel de la MIR.
3
Para la validacin, cada
objetivo debe cumplir cada una de las caractersticas sealadas.
3
Para una mejor descripcin sobre la denicin de objetivos y de la lgica vertical de la MIR, se recomien-
da revisar el Manual de Metodologa de Marco Lgico del CONEVAL.
Establecimiento de la
lnea base y las metas
CAPTULO 6
64
Es necesario denir dos aspectos adicionales para los indicadores. Aun-
que stos deben satisfacer los requisitos descritos con anterioridad, tam-
bin es necesario establecer elementos para su seguimiento: la lnea
base y las metas.
1. LNEA BASE
Se conoce como lnea base al valor del indicador que se ja como punto
de partida para evaluarlo y darle seguimiento. Una vez denido el indica-
dor, es necesario conocer la situacin actual del programa mediante sus
indicadores. Cul es el valor inicial del indicador en el momento de ini-
cio del programa o proyecto? La lnea base permite que los responsables
del programa establezcan y denan las metas que se pretende alcanzar
en un cierto periodo.
Cmo se dene una lnea base? La denicin
consiste en utilizar la informacin disponible
del programa en el periodo inicial y sustituir-
la en el mtodo de clculo; el valor resultante
es la denominada lnea base y es el punto de
partida del programa. Respecto a este valor,
se determinarn las metas del programa y se
emitirn juicios de valor sobre su desempeo.
Este resultado no corresponde de modo necesario a la primera estima-
cin que se realiza al indicador, sino al valor inicial que el programa to-
mar como referencia.
Denir una lnea base es sencillo cuando se tiene la informacin necesa-
ria; sin embargo, en ocasiones los programas de desarrollo social no la
han generado ni recopilado. Si no se dispone de informacin inicial, es
recomendable retomarla de fuentes externas y buscar principalmente:
a) Informacin sobre indicadores similares en algn otro programa, o
b) Consultar un experto tcnico que tenga conocimientos en el
campo.
Aunque todos los programas tienen objetivos particulares, es posible
que recopilen informacin con caractersticas similares a las que se
buscan. Para ello, hay que revisar documentos normativos ociales para
La lnea base y las metas
son elementos para el
seguimiento del desempeo
del programa.
65
localizar indicadores que necesiten informacin til para generar la l-
nea base. Esto es vlido? S, pero nicamente para determinar la lnea
base del indicador. El programa no debe reportar avances o logros de
otros programas.
El segundo mecanismo es ms simple. Se reere a contratar los servicios
de un experto tcnico con conocimientos y experiencia para emitir o
determinar un valor para la lnea base. Al igual que la consulta de indi-
cadores de otros programas, la consulta al experto es vlida slo para
establecer la lnea base; el programa o proyecto es responsable de
recopilar informacin real y verdica para reportar sus indicadores.
La lnea base es el estado inicial del indicador del programa y es nece-
saria para especicar metas. Estas ltimas son los avances en el cumpli-
miento de objetivos que el programa se impone alcanzar en un cierto
periodo.
2. METAS
stas permiten acreditar el grado de avance
de los objetivos. Dado que las metas son co-
nocidas y acordadas con los ejecutores de los
programas, es fcil comprobar quin ha cum-
plido cabalmente con ellas.
Una caracterstica esencial de las metas es
que deben ser realistas, es decir, deben ser
un valor cuantitativo que, dada la capacidad
tcnica, humana y nanciera del programa, sea factible de alcanzar en
un periodo. Es comn jarse metas demasiado ambiciosas que no es po-
sible cumplir o, al contrario, metas por debajo del umbral de la capacidad
del programa que se alcanzan y superan con facilidad.
La meta es el objetivo
cuantitativo que el programa
o proyecto se compromete
alcanzar en un periodo
determinado.
CAPTULO 7
Indicadores, presupuesto
y toma de decisiones
68
La MIR es una herramienta de gestin que permite a los tomadores de de-
cisiones contar con informacin concreta respecto al desempeo de un
programa. Los indicadores de un programa contenidos en la MIR deben
asegurar el seguimiento de los logros alcanzados a lo largo del desarrollo
del programa, pero para qu sirve esta informacin?
En un sistema de cuenta pblica orientada a resultados, es necesario dis-
poner de informacin sobre el desempeo de los programas. Dicha infor-
macin debe mostrar la manera en que los programas usan los recursos
pblicos para solucionar la problemtica central por la que fueron crea-
dos. Esta informacin debe ser estratgica, esto es, considerar los logros
alcanzados tanto en la gestin del programa (la provisin de insumos, las
actividades o procesos que realiza, bienes y servicios que genera o entre-
ga) como en los resultados intermedios y nales de la intervencin sobre
una poblacin objetivo.
De esta forma, se tiene un panorama claro y transparente de la ecacia
con que se ejecutan los recursos pblicos de cada dependencia guber-
namental; asimismo, se crean herramientas para la toma de decisiones
que conduzcan a la mejora del diseo y la operacin de los programas
pblicos. La idea de incorporar indicadores y metas al proceso presu-
puestario signica disponer de informacin til que enriquezca el anlisis
para la formulacin del presupuesto y su respectiva discusin en el Con-
greso de la Unin.
Finalmente, en este manual ha quedado expuesto que el establecimien-
to de los indicadores sienta las bases para un monitoreo adecuado y
contribuye a una toma de decisiones ms oportuna. Los indicadores per-
tinentes, relevantes, claros, econmicos y monitoreables ayudan a dar se-
guimiento adecuado a la gestin y a los resultados de los objetivos de
los programas: lo anterior representa una etapa fundamental en la ejecu-
cin y el mejoramiento de las polticas pblicas orientadas a la solucin
de problemticas sociales.
69
Aldunate, E. (2004). Metodologa del Marco Lgico. Chile: Instituto Latinoamericano y del Caribe
de Planicacin Econmica y Social (ILPES).
Banco Interamericano de Desarrollo (BID) (1997). Anexo I. La Matriz de Marco Lgico, en Evalua-
cin: una herramienta de gestin para mejorar el desempeo de los proyectos. Washington.
Camacho, H. et al. (2001). El enfoque del marco lgico: 10 casos prcticos. Cuaderno para la
identicacin y diseo de proyectos de desarrollo. Madrid: Fundacin CIDEAL.
Cohen, E. y R. Franco (2001). Evaluacin de proyectos sociales. Mxico, DF: Siglo XXI Editores.
_____ (2005). Gestin social. Cmo lograr eciencia e impacto en las polticas pblicas sociales.
Mxico, DF: Siglo XXI Editores.
Consejo Nacional de Evaluacin de la Poltica de Desarrollo Social (CONEVAL) (2007). ANEXO
02. Nota tcnica con los principales conceptos de la Matriz de Indicadores. Consultado en
http://www.coneval.gob.mx/coneval/
_____ (2008). Informe de Evaluacin de la Poltica de Desarrollo Social en Mxico. Consultado en
http://www.coneval.gob.mx/coneval/
_____ (2007). Normatividad para la Evaluacin de los Programas Federales. Mxico.
Direccin de Presupuestos de Chile (DIPRES) (2001). Metodologa para la elaboracin de la Ma-
triz de Marco Lgico. Documentos de evaluacin de impacto. Santiago de Chile.
Ley General de Desarrollo Social. Diario Ocial de la Federacin, 20 de enero de 2004. Mxico.
Lineamientos Generales para la Evaluacin de los Programas Federales de la Administracin
Pblica Federal. Diario Ocial de la Federacin, 30 de marzo de 2007. Mxico.
Medina Giopp, A. (2007). El Sistema Nacional de Monitoreo y Evaluacin de la Gestin Pblica
en Mxico. Washington: Banco Mundial.
Organizacin de las Naciones Unidas (ONU) (2001). El uso de los indicadores socioeconmicos
en la formulacin y evaluacin de proyectos sociales: aplicacin metodolgica. Chile, San-
tiago: ILPES-CEPAL.
Secretara de Hacienda y Crdito Pblico/Secretara de la Funcin Pblica/Consejo Nacional
de Evaluacin de la Poltica de Desarrollo Social (2010a). Gua para el Diseo de Indica-
dores Estratgicos. Mxico.
_____ (2010b). Gua para la Construccin de la Matriz de Indicadores para Resultados. Mxico.
Referencias bibliogrcas
Esta obra se termin de imprimir en el mes de septiembre de 2013 en Talleres Grcos
de Mxico, Canal del Norte 80, Col. Felipe Pescador, CP. 06280, Mxico, D.F.
La edicin consta de 500 ejemplares.

Manual para El Diseno y Contruccion de Indicadores PDF

Cargado por

Información del documento

Título original

Derechos de autor

Formatos disponibles

Compartir este documento

Compartir o incrustar documentos

Opciones para compartir

¿Le pareció útil este documento?

¿Este contenido es inapropiado?

Copyright:

Formatos disponibles

Manual para El Diseno y Contruccion de Indicadores PDF

Cargado por

Copyright:

Formatos disponibles

CONSEJO NACIONAL DE EVALUACIN

DE LA POLTICA DE DESARROLLO SOCIAL

También podría gustarte