INDICADORES BASICOS

PARA LA EVALUACION DE
LOS RENDIMIENTOS
EVALUACION DE DESEMPEO Y DEL
IMPACTO
ARIADNA PEREZ VILLAGOMEZ

O Necesario establecer

parmetros que
permitan emitir
juicios de valor
fiables para la
evaluacin de la
calidad educacional
e institucional

O Indicadores
O Criterios e

indicadores
O (uso de dimensiones
e indicadores para
evaluar la calidad
dela educacin )

O Las variables son

utilizados como
niveles diferentes de
generalidad

O Se caracterizan por :
a) Rasgos que pueden

ser observados
b) Propiedad de poder
variar
Son expresiones observables
que pueden variar y adaptarse
a diferentes valores

O Las dimensiones

sern aquellos
rasgos que
facilitarn una
primera divisin
dentro del concepto

O Indicador : derivacin

de un concepto de una
variable (Guerra Z.,Mdel C. 2001 P. 7)

O Descripcin de una

Diferentes direcciones del

situacin, factor o
componente educativo
en su estado ptimo
de funcionamiento
(Valds , H y Prez , F.

anlisis

1999)

O INDICADORES:

Sern aquel conjunto

de rasgos perceptibles
que harn posible una
referencia emprica a
la presencia del
concepto (Ibarra M., F. y
otrls1990 p.53)

O Aquel componente que

debe ser considerado

para evaluar de forma
objetiva el proceso o el
producto de un sistema
educativo que revela algo
de su desempeo y cuyo
resultado de evaluacin
permite considerar
alternativas para
mejorarlo (Maritza del
Carmen Guerra 2001)

O En cada componente

se identifican y se
utilizan las variables
que constituyen la
parte general,
abstracta y delimitada
del objeto de la
evaluacin; las
dimensiones que
expresan la esencia del
contenido de una
variable determinada

O (Mario Vidal 2001)

O Necesario definir en

cada rea las

variables,
dimensiones e
indicadores que
sern evaluados

O Modelo de evaluacin

O Tecnologa para la

institucional
universitarios
O Indicadores para le
evaluacin de las
funciones de las
instituciones
universitarias

determinacin para
evaluar la calidad de
un sistema educativo
O Evaluacin de la
calidad bajo el prisma
de indicadores

O La evolucin del

O Sistema de

profesorado
universitario
O La evaluacin
institucional de la
investigacin

indicadores para
medir la
competitividad
universitaria
O Proyecto MEID: un
modelo de
evaluacin integral
de entidades
docentes

INDICADORES BASICOS DEL RENDIMIENTO

UNIVERSITARIO
1.- PREDIAGNOSTICO:
Esencial para
comenzar a evaluar
Tener un ideal general
del estado de la
institucin

2.- Aspectos
fundamentales que
puedan ser cuantificados
Buscar indicios,
sntomas significativos

3.- antecedentes
nacionales e
internacionales
Criterios de calidad
internacionalmente
aceptados
Situar el rendimiento
de las universidades
en el contexto de la
situacin vivida por
docentes y empleados

Afectacin por

insuficiencia de os
salarios

4.- Limitarse a un
nmero determinado de
variables, dimensiones e
indicadores
Estos limites son
arbitrarios
Los indicadores
elaborados son
susceptibles de
analizar rpidamente

Si el numero de

variables nos puede

brindar una
percepcin de los
aspectos crticos de la
institucin , entonces
es adecuado

5.- las variables son

seleccionadas , de
acuerdo con los
principales autores y
funciones de la vida
universitaria

VARIABLES

DIMENSIONES

Enseanza

Docentes, alumnos ,
Egresados

Investigacin

Investigacin,
publicaciones

Practica Laboral

Habilidades
profesionales,
desempeo

Informacin

Bibliotecas, sistemas
de informacin

Extensin

Extensin , servicios

Gestin

Presupuesto,
salarios, costo

CUANTIFICACION Y PONDERACION DE
LOS INDICADORES
O Se necesita una escala para

O Por ejemplo:

medir los indicadores de

cada dimensin
O Tener en cuenta el peso de
cada dimensin segn las
actividades fundamentales
que realiza la universidad

Docentes
Alumnos
Publicaciones
Salarios
Egresados

100
100
100
80
70

Se pretende una escala de 1000

puntos equivalente 0 a 100 o
de 0 a 10

ESTRUCTURA DE LOS INDICADORES

BASICOS

O De forma anloga se

procede con el resto de las

variables y dimensiones
hasta agotar 6, 12 , de
acuerdo el puntaje total
asignado
O Para la interpretacin de

resultados :

Evaluacin

institucional,
facultativa, de carrera,
programas (deben ser
ajustados los
indicadores, segn la
importancia de acuerdo a
las actividades
fundamentales que
realicen )

 En cada institucin

O OBSERVACIONES:

puede ser variada la

distribucin de valor de
las diferentes
dimensiones
La escala de cada
indicador evaluadas en
forma cuantitativa,
pueden ser
reemplazadas por
promedios de
estimaciones cualitativas

Necesidad de verificar

permanencia de los
indicadores y su escala, segn
los contextos particulares y
los parmetros vigentes
Interpretar el cuadro general
de la institucin teniendo en
cuenta la congruencia de
todos los indicadores entre s
y con la situacin de otras
universidades

O La lectura e

interpretacin de os
indicadores es tan
importante como la
elaboracin de los datos
que la componen
O La experiencia de
recoger los datos, fijar
criterios de evaluacin y
de interpretar los
indicadores constituye
una forma importante de
entrenamiento para los
participantes

O La evaluacin puede

organizarse para:
Buscar informacin para
la planificacin
Trabajo de investigacin
Conocimiento de los
puntos crticos de la
institucin
Mejoramiento de la
institucin

EVALUACION DEL DESEMPEO

O Si no se pueden

especificar las metas,

no puede distinguirse
el buen desempeo
del malo, no se puede
recompensar a los
gestores sobre la base
del desempeo, y
puede generarse
ineficiencia (Galarza S. J
1994 p 171)

O Desempeo :

La correspondencia
entre su accionar
cotidiano y las metas que
se supone deben ser
alcanzadas (Ibdem )

O Un primer nivel de

aproximacin al
criterios de evaluacin
del desempeo
consiste en distinguir
entre metas a corto ,
mediano y largo plazo

O Esto facilitara la

determinacin de
variables, dimensiones
e indicadores que
permitan su medicin

O Tres criterios para

O Criterio de Galarza (1994)

juzgar una direccin

universitaria:
Costo por estudiante
Nmero de programas
Su capacidad para
evitar estudiantiles y
profesorales

1.- seleccin de un criterio que

permita asignar rangos a las
universidades en una serie
continua (facultades, carreras,
dirigentes etc.)
Debe tenerse en cuenta que

no todos cumplen los

mismos objetivos y
misiones

2.- Seleccionar una pauta

de valor (acreditacin
universitaria)
Propuesta Ibdem que
incluye indicadores
materializables:

Relacin costo promedio

por estudiante
Relacin numero de
docentes por estudiante
Relacin numero d
empleados por estudiante
Relacin nmero de
docentes por empleado
Relacin numero de
programas de pregrado
frente a los de posgrado

 Relacin entre la cantidad

Tasas de consulta por

de libros, video
documentos, revistas,
archivos etc. De las
bibliotecas y centros de
documentacin con
respecto al nmero de
estudiantes y docentes
Tasa se ocupacin de a
infraestructura fsica : aula,
laboratorio, redes de datos,
ayudas educativas, etc.

estudiante, de as bibliotecas
y centros de documentacin
Tasas de consulta por
profesor , de las bibliotecas y
centros de documentacin
Tasas de retencin escolar en
los respectivos ciclos
Proporcin de docentes de
formacin avanzada con
respecto a los de formacin
de pregrado

 Proporcin de docentes que

dominan lenguas extranjeras

Proporcin entre el
presupuesto (tanto de la
entidad en su conjunto como
de os diferentes programas),
respecto al nmero de
egresados
Proporcin entre el nmero
de docentes y la produccin
intelectual (investigaciones,
publicaciones, eventos
cientficos, etc.)

Cobertura en la seguridad

social y bienestar
universitario

Estos aspectos pueden ser

utilizados para evaluar el
desempeo de una
institucin, facultad o
carrera

O Hoy se aprecia un cierto

consenso en la idea de que

el fracaso o el xito de todo
sistema educativo depende
fundamentalmente de la
calidad del desempeo de
sus docentes (Valds. H.
2000 p.10)

O La evolucin del docente

juega un papel importante

porque permite caracterizar
su desempeo, propicia su
desarrollo y constituye una
importante va de atencin
y estimulacin a los
maestros o profesores si se
aplica adecuadamente

O En amrica latina muchos

agentes educativos
consideran que para que
se generen necesidades de
autoperfeccionamiento
continuo de su gestin en
el personal docente,
resulta imprescindible
que se someta consciente
y peridicamente , a un
proceso de evaluacin del
desempeo (Ibdem)

O El procedimiento para

evaluar el recurso
humano se denomina
evaluacin del
desempeo, y
generalmente se elabora
a partir de programas
formales de evaluacin
basados en una
razonable cantidad de
informacin segn los
empleados y su
desempeo en el cargo
(Pin, J. 2001 p 9 )

O Evaluacin del

desempeo
profesional docente :
La determinacin de
dimensiones e
indicadores que propone
al operacionalizar la
variable desempeo
laboral del recin
graduado (Josefina
pin) 2001

O Se insiste en la

necesidad de evaluar
el desempeo de las
instituciones como el
de las facultades ,
carreras, dirigentes,
profesores, egresados y
estudiantes , creando
condiciones mnimas
para ello

LA EVALUACION DEL IMPACTO

O Trata de establecer los

posibles efectosconsecuencias del objeto

evaluable en una
poblacin amplia y no
slo a los inmediatos
propuestos y previstos,
sino todo el espectro de
consecuencias que
resultan de la aplicacin
de objeto evaluable

O La evaluacin de los

resultados slo
considera los efectos
previstos a partir de
objetos
predeterminados

O La evaluacin de la

efectividad es la
evaluacin del efecto
til implcito en la
consecuencia de los
resultados

O La evaluacin de la

eficiencia busca el
logro de esos objetivos
con la mayor
economa de recursos

O La evaluacin

econmica puede ser

considerada un caso
particular de la
evaluacin de la
eficiencia

O Incluye todas las dems

formas evaluativas :
Es general y sinttica
Abarca el anlisis de
diversas esferas
Los efectos esperados se
pueden constatar tanto
en los usuarios como en
el entorno social
Se dirige a conocer
efectos esperados o no +
o-

O Se define:

O Caractersticas que

El grado de trascendencia
en el entorno
socioeconmico concreto ,
con el fin de valorar su
efecto sobro los objetos
aplicados y asegurar la
seleccin mejorada de
nuevos objetos de
evaluacin

favorecen su utilizacin:
1. Es posible siempre que el
efecto de la aplicacin del
objeto trascienda lo
inmediato
2. Constituye un efecto
diferido (a posteriori)
3. Los indicadores han de ser
especficos, por la forma de
vincularse con la realidad

Sus factores condicionantes:

O El objeto debe ser conocido

efecto diferido (a posteriori),

de insercin profunda y
susceptible de ser detectada
en el entorno
socioeconmico
O A partir de la insercin del
objeto en el entorno
socioeconmico se debe
esperar el proceso de
maduracin de la misma
O Se debe conocer la manera
especifica en el que el objeto
evaluable se inserta en el
proceso y los resultados en
que fructifica esa insercin

O Se deben elaborar los

instrumentos especficos
que permitan detectar los
frutos de insercin ,
incluyendo su valoracin
cualitativa
O Son de inters dentro del
conjunto de indicadores, los
que permiten reflejar el
proceso de recuperacin del
esfuerzo social invertido en la
insercin del objeto, en la
practica , reflejar el logro de
los beneficios
suplementarios
correspondientes

O La evaluacin de impacto

debe considerar objetos con

participantes del ms
amplio espectro profesional
productivo y de servicios
O Buscar efecto mediato exige
determinado grado de
seleccin sistemtica de los
objetos que nos permita
perfeccionar gradualmente
su utilizacin en calidad de
instrumento de la
planificacin econmica
social

O Toda evaluacin de

impacto debe proponer

variables que reflejan en
mayor medida la
repercusin econmica
social de la insercin en
la prctica del objeto, as
como la coordinacin,
del efecto recproco
entre la esfera
econmica y la esfera
social

Componentes del Modelo de Evaluacin de

Impacto:
Finalidad: Medir las

transformaciones
experimentadas por el
entorno, con el fin de
mejorar

Unidad de evaluacin:

mientras ms
corresponda con los
intereses de la sociedad y
ms se aproxime el
evaluado a esos
intereses, mayor ser el
perfeccionamiento del
proceso evolutivo
La toma de decisiones
corresponde a la
sociedad en su conjunto

O Rol del evaluador:

O Enfoque:

corresponde a todos los

Tomando como

implicados en el proceso
evaluativo (evaluadores
externos e internos )
Esto hace que se cumpla
con la finalidad y la
unidad

referencia el enfoque
histrico, cultural,
evidencia un en enfoque:
dialctico, histricolgico y
macroestructurado

O Proceso metodolgico:
Es integrador, dinmico,

y perfeccionador
Se operacionaliza a
travs de sus variables,
indicadores e
instrumentos

ETAPAS PARA LA APLICACIN

O ETAPA I : Conocimiento

del efecto de impacto

Anlisis de los
documentos rectores
(resoluciones programas
ramales, sectoriales
territoriales, proyectos)
Entrevistas y encuestas
con las direcciones y
administraciones de las
estructuras incluyendo la
de la produccin y los
servicios

Entrevistas con las

direcciones y
administradores
empleadoras
Anlisis de prioridades y
banco de problemas

Etapa II: posibilidades de la evaluacin:

O Convenio entre las partes

interesadas (tener en
cuneta, el entorno social
en su conjunto)
O Aplicacin de la
tecnologa de la educacin
avanzada para la
determinacin de los
problemas y su
correspondencia con las
acciones desarrolladas en
la primera etapa
O Seleccin de los objetos a
evaluar

O Determinacin de cortes

parciales para el anlisis

de los posibles efectos
del objeto evaluado
O Establecimiento de
perodos de intercambio,
reuniones y actividades
cientficas
O Consideracin de
recursos materiales para
llevar a cabo la
evaluacin

O Identificacin de los

O Evaluabilidad de los

efectos transformadores
que permitir la
implantacin del objeto
O Utilizacin de la
estrategia de superacin
de la educacin
avanzada
O Determinacin de las
necesidades que se
pretenden satisfacer
(diagnstico)

programas de los objetos

que sern evaluados, para
ello, pueden utilizarse dos
formas:
1.
Anlisis documental y
entrevistas a los
diseadores de los
programas
2. Anlisis de los
programas de acuerdo
con la realidad social

O Precisar las fuentes de

informacin
O Seleccin de los agentes
evaluativos de acuerdo
con las partes
interesadas

Etapa III: Determinacin de los objetos

de la evaluacin de Impacto
O Establecimiento de

indicadores
O Determinar aspectos

sociales y econmicos
que se pretenden
solucionar, tiempo
necesario para demostrar
sus efectos positivos

O Transformaciones o

cambios que se esperan,

tiempo y lugar, una vez
que se haya implantado
el objeto evaluable

Etapa IV: Diseo de la evaluacin de

Impacto
O Comprobar si existe

O Determinacin de la

correspondencia entre la
oferta y la demanda
O Establecimiento de los
juicios de valor a partir del
anlisis de las acciones de
las etapas anteriores, con
el sistema de indicadores
O Elaboracin de
instrumentos y aplicacin
de prueba de validacin

metodologa para el
procesamiento de la
informacin
O Anlisis y comprobacin
con las partes
interesadas
O Establecimiento del
diseo de evaluacin de
impacto

Etapa V : Recogida y anlisis de la

informacin hasta la elaboracin del informe
O La preparacin de los agentes

O Se debe reflejar los efectos

en la aplicacin de los
instrumentos para el logro de
una eficiente recogida de la
informacin
O Las valoraciones grupales, el
debate y discusin
constituyen fuentes
fundamentales en la emisin
de los juicios de acuerdo ala
metodologa establecida,
determinando los resultados
obtenidos

producidos, causas y
consecuencias en cada caso,
solucin de los problemas y
el condicionamiento de
nuevos diagnsticos que
superen los objetos
evaluados
O Favorece su carcter
sistmico,
participativo,problematiza
dor , desarrollador y
transformador