EVALUACION - CONSTRUCCION DE INDICADORES

JULIO CESAR OSORIO

CONSTRUCCION M
DE INDICADORES
Economista – Universidad del Valle
Evaluación Social de Proyectos – Universidad de los Andes
M i
Magister en Pl
Planeación
ió – Universidad
U i id d Javeriana
J i
 EVALUACION

La evaluación nació el séptimo día de la Creación, cuando DIOS

miró todo lo que había creado y declaró “ES BUENO.”

Con esa sola frase, DIOS se convirtió en el primer evaluador del

mundo.

No obstante, la evaluación nacida en los cielos resultó insuficiente

y demasiado subjetiva para algunos. Por lo tanto, al escuchar la
evaluación de DIOS (autoevaluación,
(autoevaluación por cierto),
cierto) el DIABLO objetó
e insistió ¿cómo sabe que es bueno? ¿cómo lo midió? ¿con qué
indicador juzgó la bondad de su creación? ¿con qué lo comparó?.

Así, nace la evaluación como la conocemos hoy -- ¡en los fuegos

del infierno!
 QUE ES UN INDICADOR ?

Expresión
Conjunto de de medida
variables de un
cuantitativas atributo
o cualitativas
lit ti
que se va a
medir y Criterios para
monitorear evaluar el
comportamiento
t i t
de las variables de
un objetivo

Número que establece

una relación entre dos o
más datos significativos
de dominios
semejantes o diversos y
que proporciona
información sobre el
estado en que se
encuentra un sistema.
 REQUISITOS TECNICOS DE UN INDICADOR

• Que los datos utilizados en el Indicador sean válidos y confiables

• Que los datos contengan información relevante para la toma de

decisiones

• Que los datos estén bien documentados

• Que se puedan actualizar periódicamente

• Que sean sencillos, fáciles de medir e interpretar

 REQUISITOS TECNICOS DE UN INDICADOR

• Que se puedan utilizar con otros indicadores

• Que sean capaces de mostrar tendencias a través del tiempo

• Que sean aplicables a escala nacional, interinstitucional o

institucional

• Que sean determinantes, es decir, seleccionado de manera que

sean los q
que mejor
j expresen
p la naturaleza del resultado objeto
j
de medida. Los indicadores deben ser pocos para facilitar su
integración.

JULIO CESAR OSORIO M

 CRITERIOS PARA LA CONSTRUCCION DE INDICADORES

Relevancia: Desagregación: Comprensibilidad:

Medir lo importante, en consenso En lo posible, desagregar la Deben ser fáciles de usar e
con los actores relevantes,
relevantes lo que información por sexo y otras variables interpretar
interpretar.
brinda legitimidad. relevantes (edad, grupo
socioeconómico, pertenencia étnica)

Pertinencia: Comparabilidad: Costo Razonable:

Medir efectivamente las metas y Comparables de un año a otro. Su proceso de construcción,
recolección y registro debe ser
objetivos de la Institución. adecuado a las posibilidades
financieras de las Instituciones

Confiabilidad: Independencia: Oportunidad:

Datos suficientes y demostrables. Medir lo controlable. Sus resultados deben estar en
forma oportuna,
oportuna de manera que
retroalimenten la gestión.

Integración:
Interconexión de unos con otros
para medir integralmente el
desempeño.
 INDICADOR INTELIGENTE

I DEPENDIENTE
N

D MENSIONABLE
I

C 4

A CTUALIZABLE

D DETERMINANTE

O BJETIVAMENTE VERIFICABLE

R EALIZABLE
 QUÉ EVALUAR Y CÓMO ?

Qué PROBLEMA
Evaluar

OBJETIVO (PROPOSITO Y FIN)

Cómo
VARIABLE Evaluar

INDICADOR

De GESTION DEL PROCESO De LOGRO

Actividades Impacto
Recursos Efecto
Tiempo Resultado

JULIO CESAR OSORIO M

 IDENTIFICACION DE VARIABLES

Se entiende por VARIABLES las características,

cualidades, elementos o componentes de un OBJETIVO,
las cuales se pueden modificar o variar en el tiempo.

También las VARIABLES se definen como la información

básica y necesaria sin la cual no es posible construir el
indicador.

La variable determina los parámetros o aspectos que

intervienen en el logro del propósito del indicador y que
son necesarios para su relación y composición

JULIO CESAR OSORIO M

 VARIABLES

CULTURA OTRAS VARIABLES

Oferta Normas
Consumo Valores
Formación Satisfacción
Violencia
ECONOMICO Sanciones

Empleo
Flujo Turístico
Producción
Inversión

JULIO CESAR OSORIO M

 CLASIFICACION DE LOS INDICADORES

1. Indicadores de Logro (Eficacia)

9 Foco en el Resultado.

9 Las Medidas de Resultado Reflejan los éxitos del

pasado, no las decisiones y actividades del hoy.

9 Ej l Indice
Ejemplo: I di d Satisfacción…
de S ti f ió

JULIO CESAR OSORIO M

 CLASIFICACION DE LOS INDICADORES

2. Indicadores de Proceso (Eficiencia):

9 Miden Procesos Intermedios, actividades y

comportamientos.

9 Permite a la Institución Ajustar su comportamiento por

el desempeño.

9 Ejemplo: Horas de Entrenamiento…..

JULIO CESAR OSORIO M

CONTROL DE GESTION Y EVALUACION DE RESULTADOS:
DOS SUBSISTEMAS INTERDEPENDIENTES

INSUMOS OBJETIVO:
PROCESO PRODUCTO
IMPACTO
CAMBIO EN
EL BIENESTAR

RETROALIMENTACION

CONTROL DE GESTION Sistema Interno: EFICIENCIA

EVALUACION DE RESULTADOS
Sistema Externo: Eficacia
 TIPOLOGIA Y REPRESENTACION DE INDICADORES

MAPAS Y GRAFICOS RATIOS

Ubicación Territorial Número

Densidad Territorial Media,, Moda,, Mínimo,, Máximo
Correlación Varianza o Desviación Estándar
Matrices % Vertical o Horizontal
Curvas de Desigualdad Cuota de Mercado
Tasa de Cobertura
Indice de Crecimento
Indice de Concentración
ANALISIS COMPLEJO Variaciones

Cruzamiento de Variables
Correlación
Inferencia Estadística
Análisis Factorial

JULIO CESAR OSORIO M

 CONSTRUCCION MATEMATICA DE LOS INDICADORES

1 INDICADORES EN TERMINOS ABSOLUTOS

1.

EJEMPLO: Número de Familias que viven en Hacinamiento

2. INDICADORES EN TERMINOS RELATIVOS (PORCENTAJE)

EJEMPLO: Porcentaje Familias que viven en Hacinamiento

% = Número de Familias que viven en Hacinamiento x 100

Total Familias

JULIO CESAR OSORIO M

 CONSTRUCCION MATEMATICA DE LOS INDICADORES

3. INDICADORES DE CALIDAD (SATISFACCION) SERVICIO

La calidad o satisfacción se puede medir con las siguientes

técnicas:

Clisa (cliente satisfecho) No Estructurada - Husego

Encuesta por Correo Entrevista de Profundidad

In Situ Libreta de Calificaciones

Entrevistas Personales Cliente Incógnito

Entrevista on Line

JULIO CESAR OSORIO M

 CONSTRUCCION MATEMATICA DE LOS INDICADORES

4. INDICES

9 Un índice es la condensación de información en un sólo número.

9 Un índice es la agregación de varios indicadores en un sólo

número.

9 Son tan sólo indicadores, señalando el sentido de evolución de

l variable
la i bl y no dan
d una medición
di ió precisa,
i como consecuencia i
de la cantidad de formulas que existen para su cálculo, de la
composición de las canastas de variables.

9 Un índice puede ser la agregación de varios índices en un sólo

número.
 CONSTRUCCION MATEMATICA DE LOS INDICADORES

4. INDICES

Ejemplo: Indice de Nivel Educativo (INE)

INE = 2/3( TA) + 1/3 ( TE)

donde:

TA = Tasa de Alfabetismo
Total personas > 15 años con educación = o > a tercero de Primaria / Total Personas mayores
de 15 años

TE = Tasa de Escolaridad
Total personas entre 7 y 24 años que asiste al Colegio / Total Personas entre 7 y 24 años

Un Indice de Nivel Educativo (INE) cercano a cero (0) indica un

menor logro educativo.
 CONSTRUCCION MATEMATICA DE LOS INDICADORES

4. INDICES

Ejemplo: Indice de Desarrollo Humano (IDH)

IDH = ( (IEV) + ( INE) + (II) ) /3

donde:

IEV = índice de esperanza de vida

INE = índice de nivel educativo

II = índice
í di ded ingreso
i

Un Indice de Desarrollo Humano IDH igual a uno (1) significa un

nivel de desarrollo superior (máximo).
(máximo)
 EJEMPLOS DE INDICES

DATOS E INDICADORES DEL INGRESO

POBREZA (p) POBREZA EXTREMA (pe)

DESCRIPION DEL INDICADOR SIMBOLO FORMULA VALOR FORMULA VALOR

No de Personas con ingreso menor a LP o LI LI. qi qp 113 qpe 35

Linea de Pobreza. zi LP $ 172.190 LI $ 66.279
Sumatoria de (Zi -Yi); Yi: Ingreso per capita. Total (Zi - Yi) Total (Zi - Yi)p $ 1.670.382 Total (Zi - Yi)pe $ 111.424
Incidencia Hi Hp = qp / n 80,7% Hpe = qpe / n 25,0%
(1/qp)*Total (Zi - Yi)p (1/qpe)*Total (Zi - Yi)pe
Brecha de Ingresos Ii 8,6% 4,8%
Zp Zpe

Ingreso promedio de toda la poblacion p o pe. μi μp = TotalYi/qp $ 94.336 μpe = TotalYi/qpe $ 48.571
Ingreso per capita ponderado de la pob. P o pe (y1+..+nyn)i Total (y1+..+nyn)i $ 459.675.000 Total (y1+..+nyn)i $ 27.075.000
Gp = 1+(1/qp)-[(2/q2*μ)(y1+..+nyn) Gpe = 1+(1/qp)-[(2/q2*μ)(y1+..+nyn)
Coeficiente Gini Gi 24,6% 11,8%
Indice de Sen Pi Pp = Hp *( Ip + (1 - Ip) * Gp ) 25,1% Ppe = Hpe *( Ipe + (1 - Ipe) * Gpe ) 4,0%

JULIO CESAR OSORIO M

 CONSTRUCCION MATEMATICA DE LOS INDICADORES

5. VARIACIONES RELATIVAS

V t, t -1 = ((Xt/X t -1 ) -1 ) * 100

Ejemplo:

Total Ventas Libros Escolares ((OCRP)) 2004, 2003

OCRP 2004, 2003 = ( ( 100 / 75) – 1 ) * 100 = 33%

Interpretación: las ventas de Libros Escolares

en el 2004 aumentaron un 33% con relación a
las del 2003.
CONSTRUCCION MATEMATICA DE LOS INDICADORES

• Número
– Total de niñas con problemas de nutrición

• Porcentaje
– Porcentaje de adolescentes embarazadas incorporadas al programa de retención
escolar

• Promedio
– Años de escolaridad promedio por sexo

• Tasa
– Tasa de mortalidad infantil masculina año 2006 (9,4/1000 nacidos vivos)

• Relación
– Relación niñas / niños en la educación básica (0,94, año 2000)

• Brecha
– brecha entre ingreso promedio de la ocupación principal de mujeres y hombres (35,7,
año 2000).
 VARIABLE - INDICADOR

CULTURA INDICADORES

Consumo Cultural Número

a Asistencia
a. Valor Per Cápita
b. Costo Tasa de Crecimiento
Distribución Porcentual
Formación
F ió Artística
A tí ti V i
Varianza, Desviación
D i ió
a. Oferta Indices
b. Calidad Ubicación (mapas)
c. Ubicación
 OBJETIVO – VARIABLE - INDICADOR
Ejemplo
j p

GENERAR OPORTUNIDADES DE EMPLEO PARA DISMINUIR LA POBREZA EN COLOMBIA

Si busco evaluar el FIN:

1 Defino QUE ES POBREZA

1.Defino
PARA QUE (FIN, RESULTADO)
2.Según la definición identifico
las VARIABLES

3. Con cada variable construyo

INDICADOR

JULIO CESAR OSORIO M

 OBJETIVO – VARIABLE - INDICADOR

DEFINICION DE POBREZA:

“La pobreza se define como una situación que impide al

individuo, a la familia o al grupo social, satisfacer una o más
necesidades básicas y participar plenamente en la vida social”

SI aceptamos esta definición, las VARIABLES estarán

relacionadas con realidades como:

9 Hacinamiento
Construyo Indicador
9 Deserción Escolar
Construyo Indicador
9 Alimentación
Construyo
y Indicador
 RESULTADO – EFECTO - IMPACTO

ORGANIZACIÓN

Productos Usuarios
CONTEXTO Insumos Beneficiarios Objetivos
Humanos Bienes y
Tecnológicos Procesos Servicios
Económicos
Infraestruc.

Metas de Metas de Metas de Metas de

Gestión Resultado Efecto Impacto

Contexto Insumos Procesos Resultado Efecto Impacto

Diseño Implementación Evaluación

Información y Análisis
(INDICADORES)
 INDICADOR - META

INDICADOR:
Medición cuantitativa una situación
y sus cambios en el tiempo. Puede
ser simple o compuesto.

META:
Expresión cuantificable de los
logros a alcanzar por parte de una
organización en un horizonte de
tiempo determinado.
determinado
 META O RECORRIDO DEL INDICADOR

9 Fijar solo una meta por indicador y por periodo

9 Asegurarse que son cuantificables

9 Asegurarse que comuniquen claramente el desempeño

esperado

9 Establecer metas realistas pero retadoras

9 Basarlas en hechos y datos