Está en la página 1de 8

Artculo Original

Administracin

IDENTIFICACIN DE LOS FACTORES PSICOMTRICOS SUBYACENTES


EN LA ENCUESTA DE EVALUACIN DOCENTE DE LA UASLP
Juan Manuel Izar Landeta*, lfego Ramrez Flores**, Juan Manuel Tejada Tayabas***

Izar-Landeta J.M., Ramrez-Flores E. Tejada-Tayabas Izar-Landeta J.M., Ramrez-Flores E. Tejada-Tayabas


J.M. Identificacin de los factores psicomtricos J.M. Identification of Subjacent Psycometric Factors in
subyacentesen la encuesta de evaluacin the Teachers Evaluation Survey from UASLP.
docente de la UASLP. Hitos de Ciencias Econmico Hitos de Ciencias Econmico
Administrativas 2007;13 (37):113-120. Administrativas 2007;13 (37):113-120.

RESUMEN ABSTRACT

Objetivo: Evaluar la pertinencia de los reactivos en la Objective: To evaluate the relevance of the questions
encuesta de evaluacin docente de la Universidad in the Universidad Autonoma de San Luis Potosis
Autnoma de San Luis Potos (UASLP) con la finalidad (UASLPs) Teachers Evaluation Survey in order to
de mejorarla. improve it.

Material y mtodo: Se aplica la tcnica del Anlisis Material and method: Exploratory Factorial Analysis
Factorial Exploratorio mediante componentes principales is applied by means of Main Components to the 26
a los 26 reactivos de la encuesta del personal acadmico questions of the academic personnels survey from
del Campus Rioverde de la UASLP en el ciclo escolar Rioverdes Campus of UASLP in the scholar cycle 2004-
2004-2005. 2005.

Resultados: Se logr agrupar la informacin de los 26 Results: Data of the 26 questions were grouped in three
reactivos en 3 factores, que fueron: La aptitud del categories, which were: Teachers Aptitude, Classes
profesor, su dinamismo en clases y las formas de evaluar Dynamics and Students Evaluation Methodology.
a los alumnos.
Conclusions: The 3 factors resulted trustworthy and
Conclusiones: Los 3 factores resultaron confiables y suggest that the teachers evaluation instrument should
sugieren que el instrumento de evaluacin docente debe be modified in order to pick up the same basic information
modificarse y captar la misma informacin bsica con with less questions.
menos reactivos.

Palabras Clave: Factores psicomtricos. Encuesta. Key words: Psychometric factors. Survey. Evaluation.
Evaluacin.
DIRECCION PARA RECIBIR CORRESPONDENCIA: Facultad de Ingeniera de la Universidad Autnoma de San Luis Potos. Correo electrnico:
jmizar@uaslp.mx

* Doctor en Administracin. Profesor-Investigador. Facultad de Ingeniera de la Universidad Autnoma de San Luis Potos.
** Maestro en Administracin. Profesor-Investigador. Facultad de Contadura y Administracin de la Universidad Autnoma de San Luis
Potos.
*** Doctor en Administracin. Universidad Autnoma de San Luis Potos.

Fecha de recibido: 11 de Octubre 2007. Fecha de aceptacin: 5 de noviembre de 2007.

SEPTIEMBRE-DICIEMBRE 2007. Ao 13, Nmero 37. 113


IDENTIFICACIN DE LOS FACTORES PSICOMTRICOS SUBYACENTES EN LA ENCUESTA DE EVALUACIN DOCENTE DE LA UASLP.

L
a evaluacin es una estrategia indispensable obtener elementos que permitan perfeccionar dicha
para el mejoramiento de la calidad de los encuesta de manera que se pueda contar con un
servicios educativos. Es actualmente una instrumento, confiable, vlido y prctico para la
prctica ampliamente aceptada, abarcando programas, evaluacin de la prctica docente.
procesos, desempeo de docentes y alumnos (ANUIES,
2000). Un elemento considerado en la evaluacin se Se parte de las siguientes interrogantes Cul es el
refiere al desempeo de la prctica docente que realiza comportamiento de los reactivos con relacin a la forma
el profesorado. Su importancia radica en que en que es respondida la encuesta? Son consistentes
precisamente a travs de las actividades que sta los reactivos? Hay algn contenido conceptual comn
implica, el docente incide en la transmisin y en los grupos de reactivos? Los reactivos son
construccin de conocimiento en el alumno (Malo y congruentes con la estructura de los criterios
Jimnez, 1998; CIIES, 1994). Algunos autores (Llerena, establecidos?
1991; Valds, 2000) identifican diversas estrategias para
evaluar el desempeo del profesor, entre las cuales estn MTODO
las encuestas de alumnos. Esta estrategia si bien Participantes
enfrenta mltiples cuestionamientos, es una de la ms Los datos provienen de la aplicacin de la encuesta en
generalizadas e incluso, se seala que adems de los semestres agosto diciembre de 2004 y enero
prctica puede proporcionar informacin vlida y confiable junio de 2005 a los profesores del campus (n=46), de
a condicin de que se evalen las caractersticas de los cuales 11 son de tiempo completo y 35 hora-clase,
los instrumentos a utilizar (Garca, 2000; Luna, 2000). 34 hombres y 12 mujeres, con un rango de antigedad
Como parte de sus procesos de evaluacin, la de laborar en la institucin de 1 a 22 aos, en su mayora
Universidad Autnoma de San Lus Potos contempla (63%) con ms de 11 aos. Aproximadamente en la
la evaluacin del desempeo de los profesores frente a misma proporcin, los profesores imparten docencia en
grupo (Plan Institucional de Desarrollo de la UASLP 1997 carreras administrativas y en ingenieras. La encuesta
2007). Para ello, personal de la Secretara Acadmica fue aplicada por personal de apoyo de la entidad
dise hace ya varios aos una encuesta de evaluacin acadmica de manera colectiva, en los salones de clase
del personal docente, la cual se ha aplicado y horarios de los grupos que corresponden a los
consistentemente cada semestre a los grupos de profesores a evaluar. La base de datos obtenida cuenta
alumnos de las diferentes carreras de la Universidad en con 170 observaciones para cada una de las 26
los ltimos aos. preguntas.

Si bien, dicho instrumento es considerado un elemento Instrumento


para la obtencin de informacin tendiente a la mejora La encuesta de evaluacin del personal docente de la
de los procesos enseanza aprendizaje, es adems UASLP consiste en una hoja impresa con 26 reactivos
aunque con valor marginal- un elemento para evaluar el y las opciones de respuesta. Las preguntas se refieren
desempeo del profesor en la obtencin de algn a la actuacin del profesor al impartir su clase, por
estmulo. Sin embargo, se desconoce la existencia de ejemplo si: regresa los exmenes calificados, sigue
estudios en que se hayan evaluado las caractersticas el programa de la materia; asiste a clases; aclara
psicomtricas de dicho instrumento. Por otra parte, dudas, etc. (ver Anexo). Las preguntas se presentan
existen indicios de que la estructura de la encuesta, en orden aleatorio con el objeto de evitar sesgo en las
con nueve factores o criterios medidos con 26 reactivos, respuestas y se relacionan con nueve criterios como
puede resultar insuficiente, adems de que algunos formas de evaluar, dominio de la materia, motivacin al
reactivos son referidos directamente al comportamiento estudiante, etc. (Ver tabla I).
observable del profesor, mientras que otros a aspectos
apreciativos del estudiante. El alumno contesta la encuesta con una escala Likert
que incluye las respuestas nunca, pocas veces,
Por lo anterior, en este trabajo se pretende explorar algunas veces, frecuentemente y siempre, con una
dichas caractersticas a fin de identificar los constructos, opcin adicional para aquellos casos sin respuesta.
que son los factores psicomtricos subyacentes de la Luego estas respuestas se pasan a una escala numrica
encuesta de evaluacin del desempeo de los docentes y as se reportan a cada escuela o facultad para cada
(EEDD) mediante una muestra de una entidad materia impartida del plan de estudios.
acadmica de la UASLP. De manera especfica, se
pretende evaluar la pertinencia de los reactivos de la Anlisis de datos
encuesta, analizar la estructura factorial de la misma, Para el anlisis de los datos se examinaron de
estimar ndices de consistencia y; proponer intercorrelaciones entre los reactivos, para evaluar la
modificaciones al instrumento. Lo anterior, permitir pertinencia de los mismos. Asimismo, se utiliz un

114 HITOS DE CIENCIAS ECONMICO ADMINISTRATIVAS


IZAR-LANDETA J.M., RAMREZ-FLORES E., TEJADA-TAYABAS J.M.

TABLA I con significacin de 0.000; (d) el coeficiente


AGRUPACIN DE LAS PREGUNTAS DE LA ENCUESTA POR CADA CRITERIO KMO (KaiserMeyerOlkin), que ha sido de
0.962, resultando adecuado, pues est
muy prximo a la unidad; (e) la matriz anti
imagen, con sus coeficientes de
correlaciones parciales entre las diferentes
variables, cuyos valores han sido pequeos;
(f) los coeficientes de adecuacin de la
muestra (MSA), los que han resultado
mayores de 0.90; (g) las comunalidades,
que sealan cunta varianza de una variable
queda explicada por la solucin factorial y
en este caso, todas han sido superiores a
0.50. Estas 7 pruebas sealan de manera
contundente que el anlisis factorial resulta
til para la reduccin de los datos (Hair y
col., 1999; Visauta y Martori, 2003).

Con todos estos indicadores, se concluye


que el anlisis factorial resulta apropiado
para aplicarse a esta serie de datos, con el
objeto de reducir las variables. Se procedi
Anlisis Factorial Exploratorio (AFE) mediante primeramente a obtener una solucin sin rotacin.
componentes principales y rotacin Varimax (Hair, Conforme al criterio de raz latente el cual se recomienda
Anderson, Tatham y Black, 1999) para examinar la aplicar cuando el nmero de variables est entre 20 y
congruencia de los reactivos con los criterios 50 (Hair y col., 1999) como en el presente caso, se
contemplados en la encuesta. Finalmente, se estim obtuvieron tres factores mayores que la unidad (Tabla II).
los ndices de confiabilidad de los factores. Todo el El primero de ellos tiene un valor eigen de 19.39, dando
procesamiento se realiz utilizando el SPSS. cuenta de un 74.59% de la varianza total, el segundo
factor tiene un eigenvalor de 1.54 y da cuenta de un
RESULTADOS 5.91% de la varianza mientras el tercer factor con 1.10
La base de datos obtenida integr 170 observaciones explica el 4.25% de la varianza total. La varianza
para cada una de las 26 preguntas, haciendo una razn explicada por la solucin de los 3 factores es del 84.75%,
de observaciones a variables de 170/26 = 6.5, el que que es un valor muy alto y seala que la solucin
se considera apenas aceptable, pues el valor mnimo encontrada es aceptable. En la grfica 1 se incluye un
recomendado es de 5 y el
deseable de 10 (Hair y cols., GRFICA 1
1999). GRFICO DE LOS EIGENVALORES

Se evalu la pertinencia del AFE


mediante el examen de: (a) la
matriz de correlaciones entre las
variables, para la cual lo deseable
es que haya una mayora de
correlaciones significativas entre
aquellas. En este caso todas las
correlaciones resultaron
significativas (p < 0.000) y todas
obtuvieron coeficientes de
correlacin mayores de 0.30
(Hair y cols., 1999); (b) el valor
del determinante calculado con
los elementos de la matriz result
cercano a cero; (c) la prueba de
esfericidad de Bartlett, cuyo
coeficiente ha resultado en 7338,

SEPTIEMBRE-DICIEMBRE 2007. Ao 13, Nmero 37. 115


IDENTIFICACIN DE LOS FACTORES PSICOMTRICOS SUBYACENTES EN LA ENCUESTA DE EVALUACIN DOCENTE DE LA UASLP.

TABLA II
ESTADSTICAS DESCRIPTIVAS CON RELACIN A LAS VARIABLES DE
LA ESTRUCTURA ORGANIZACIONAL (ESCALA 0 -20)

grfico de los eigenvalores, que sirve para determinar el los cuales representan las diferencias entre los
nmero de factores a considerar bajo la metodologa coeficientes de correlacin estimados y los observados,
del contraste de cada, el que tambin indica que el siendo mejor el ajuste factorial, entre menores sean sus
primer factor es con mucho el ms importante y con 3 valores. En este caso el 8% de los residuales han tenido
factores es suficiente para explicar el comportamiento valores mayores de 0.05, lo que sugiere que el ajuste
de todas las variables. logrado con el modelo factorial ha sido aceptable.

En esta primera solucin, las cargas (correlaciones con Sin embargo, aunque el ajuste haya sido bueno y el
el factor) de las 26 variables resultaron mayores de 0.50 anlisis factorial recomendable, la solucin actual sin
para el primer factor, lo que signific que agrupaba a rotar no result satisfactoria para lograr la reduccin de
todas las variables, pues sus cargas factoriales son las variables en un nmero menor representado por lo
notoriamente mayores que las de las mismas variables factores, por lo cual se procedi a buscar una solucin
sobre los otros dos factores. Esta solucin se considera rotada, la que en este caso, en una primera instancia
inaceptable ya que no permite reducir los datos de las se ha aplicado el mtodo Varimax, que representa una
26 variables en unos cuantos factores. rotacin ortogonal de los ejes.

Para evaluar el ajuste de esta solucin, se examin la Con dicho procedimiento, la nueva solucin (Tabla III) s
matriz de correlaciones reproducida, que incluye las separa las variables, quedando las diez primeras con el
comunalidades de las variables y los valores residuales, primer factor, las siguientes ocho con el segundo y las

116 HITOS DE CIENCIAS ECONMICO ADMINISTRATIVAS


IZAR-LANDETA J.M., RAMREZ-FLORES E., TEJADA-TAYABAS J.M.

TABLA III
ESTADSTICAS DESCRIPTIVAS CON RELACIN A LAS VARIABLES DE
LA ESTRUCTURA ORGANIZACIONAL (ESCALA 0 -20)

ltimas con el tercero, al ser sus cargas factoriales del profesor, su dominio de la materia y su apoyo a los
mayores que las correspondientes a las mismas alumnos, entonces podra etiquetarse este factor como
variables sobre los otros factores. la aptitud del profesor, el cual abarca aspectos como
sus conocimientos y su didctica de exposicin.
Al analizar el tipo de variables agrupadas en cada factor
para etiquetar los factores, se puede apreciar que las Las variables con mayores cargas sobre el segundo
variables con mayores cargas sobre el primer factor son: factor fueron: Organizar diversas actividades, promover
Aclarar dudas, cumplir los temas a tiempo, la seguridad la participacin del alumno en clases, tomar en cuenta
del profesor al exponer los temas, el seguimiento del dicha participacin, recomendar bibliografa pertinente
programa, la vinculacin entre la materia y la prctica para clase, relacionar su materia con otras, admitir
profesional, la claridad en la exposicin, la asistencia a sugerencias y observaciones, hilvanar los temas de
clases, el apoyo con ejemplos prcticos, su disposicin manera congruente y mantener el inters en clase.
a asesorar alumnos y el respeto hacia los alumnos. Estas variables sugieren aspectos como el dinamismo
Dichas variables se refieren a aspectos de la exposicin que imparte el profesor en la clase para motivar al

SEPTIEMBRE-DICIEMBRE 2007. Ao 13, Nmero 37. 117


IDENTIFICACIN DE LOS FACTORES PSICOMTRICOS SUBYACENTES EN LA ENCUESTA DE EVALUACIN DOCENTE DE LA UASLP.

estudiante y su preparacin de las clases, por lo que encuesta, que como quiera, es un buen instrumento
este factor podra etiquetarse como el dinamismo del para medir el desempeo docente (Garca, 2000, Luna,
profesor. 2000).

Finalmente, las variables que tuvieron mayores cargas Tambin se ha visto cmo en una primera instancia la
sobre el tercer factor fueron: Regresar los exmenes solucin original no produjo una reduccin de las
calificados, preguntar lo que ensea, hacer un avance variables de la encuesta, pero la solucin rotada con la
coherente del programa, manejo adecuado del tiempo, metodologa Varimax, ha sido una buena opcin
entregar oportunamente los exmenes, calificar alternativa para reducir las variables a 3 factores, los
conforme al programa, cubrir el programa y ser puntual cuales dan cuenta de una muy buena proporcin de la
en clases. En particular, estas dos ltimas variables, varianza global de todas las variables.
sus cargas factoriales sobre los otros dos factores
tambin fueron elevadas, por lo que en un momento Esto puede dar una idea de la importancia y aplicacin
dado podran desecharse. No obstante, observando las de una herramienta estadstica como el anlisis factorial
primeras variables con mayores cargas en este factor, siendo un mecanismo para reducir informacin sin perder
se sugiere las formas de evaluar del profesor y en menor lo verdaderamente importante. De hecho, si se analiza
grado cubrir el programa, lo cual puede etiquetarse como la misma encuesta, puede percibirse como se indic
las formas de evaluacin. antes, que hay preguntas redundantes, como es el caso
de las preguntas 3, 10 y 11, o bien la 8 y la 16, la 1 y la
En la misma tabla III en su cuarta columna se presentan 14, y la 13 y 15, que podran englobarse como una sola
las comunalidades de las variables, todas ellas mayores pregunta de la encuesta y no por separado.
de 0.5, lo que indica que todas las variables son
significativas para la solucin rotada y dicha solucin Al reducir los datos y conjuntar las 26 variables en 3
factorial es satisfactoria. nuevas variables, que son los factores, podr obtenerse
la misma informacin con menos reactivos, lo cual ser
Finalmente, al efectuar el anlisis de confiabilidad de la una ventaja para los alumnos que contestan la encuesta,
solucin encontrada, se obtuvieron los siguientes valores que debe resultar en una mayor objetividad en sus
alfa de Cronbach para cada factor: 0.974 para el factor respuestas. Asimismo, permitir reducir algunas fuentes
aptitud del profesor, 0.973, para dinamismo y 0.962 para de sesgo (Garca, 2000a) adems de facilitar el
evaluacin, siendo los 3 valores muy altos, lo cual dice subsiguiente manejo estadstico de los resultados y el
de manera enftica que la solucin obtenida es confiable. anlisis de los mismos. Otra posibilidad sera abarcar
otros factores sealados como relevantes en la
DISCUSIN evaluacin del desempeo docente, con menos
A partir de los resultados del anlisis factorial exploratorio preguntas por factor (idealmente tres) de manera que la
realizado, se pudo apreciar un aspecto significativo en encuesta estuviera estructurada por cinco o seis factores
el comportamiento de las preguntas de la encuesta de pero con menos reactivos. Cabe mencionar que los
evaluacin del desempeo de los profesores: Los niveles resultados obtenidos, enfrentan varias limitantes; los
tan elevados en las intercorrelaciones -algunas mayores datos provinieron de una muestra no representativa, con
de 0.90 lo cual se considera anormal- apuntan a la observaciones repetidas, lo que aunado a los elevados
existencia de redundancia. Es posible que algunas niveles de las intercorrelaciones entre las preguntas,
preguntas aunque puedan ser diferentes, el estudiante signific el incumplimiento de supuestos de normalidad.
responde a ellas como si fueran equivalentes, o bien, Es recomendable por lo tanto considerarlos como un
que responde por bloques calificando de la misma ejercicio que apunta a una posible evaluacin de la
manera grupos de preguntas. Esto refuerza la encuesta.
importancia de evaluar con mayor detalle cada pregunta
para eliminar aquellas que resultan redundantes. CONCLUSIONES
Es conveniente hacer hincapi en que este instrumento
Por otra parte, considerando los resultados del anlisis debe proporcionar informacin confiable y vlida para
factorial se reafirma la ventaja de reducir el nmero de ser utilizada para mejoramiento del proceso enseanza
preguntas de la encuesta, que abarquen los 3 aspectos aprendizaje, por lo que los factores adems de ser
contemplados en los factores. Esto significa, que con estadsticamente significativos, deben ser pertinentes
menos preguntas es posible obtener la misma para los objetivos institucionales. Para ello, es importante
informacin sobre el desempeo del docente que se realizar los anlisis reportados en el presente trabajo
est evaluando en la encuesta, tal como est con una muestra representativa de la universidad y
estructurada actualmente. Adems, dicha reduccin validarla respecto a otras medidas convergentes y con
puede hacer ms gil y eficiente la aplicacin de la el rendimiento de los estudiantes.

118 HITOS DE CIENCIAS ECONMICO ADMINISTRATIVAS


IZAR-LANDETA J.M., RAMREZ-FLORES E., TEJADA-TAYABAS J.M.

ANEXO

REFERENCIAS

ANUIES. La Educacin Superior en el Siglo XXI: Lneas Estratgicas 1991.


de Desarrollo. Una Propuesta de la ANUIES; Mxico, ANUIES. 2000.
Luna, E. Aspectos implcitos sobre la enseanza, reflejados en los
CIEES. Marco de referencia para la evaluacin. Comit de ingeniera cuestionarios de evaluacin de la docencia. Evaluacin de la
y tecnologa/Secretara de Educacin Pblica. SEP/ANUIES, Mxico, Docencia, Rueda, M. y Daz, F. Paids, 63 83. Mxico, 2000.
1994.
Malo, S. y Jimnez, A. (coords.). La Calidad en la Educacin
Garca, J. Qu factores extraclase o sesgos afectan la evaluacin Superior en Mxico. Una Comparacin Internacional; Mxico, UNAM.
docente en la educacin superior? Revista Mexicana de 1998.
Investigacin Educativa. Vol. V. No. 10. Consejo Mexicano de
Investigacin Educativa, 303-324. Mxico, 2000a. UASLP. Plan Institucional de Desarrollo de la UASLP 1997 2007.
Editorial Universitaria Potosina. Mxico, 1998.
Garca, J. Las dimensiones de la efectividad docente, validez y
confiabilidad de los cuestionarios de evaluacin de la docencia: Valds, H. Encuentro Iberoamericano sobre evaluacin del
Sntesis de investigacin internacional. Evaluacin de la Docencia, desempeo docente. Revista Electrnica de Organizacin de
Rueda, M., y Daz, F. Paids, 41- 62. Mxico, 2000. Estados Iberoamericanos. http://www.campus-oei.org/de/
rifad02.htm. Consultado el 18 de septiembre del 2006. Mxico,
Hair, J. Anderson, R. Tatham, R. y Black, W. Anlisis Multivariante 2000.
(5. Ed.). Pearson Educacin. Madrid, Espaa, 1999.
Visauta, B. y Martori, J. Anlisis Estadstico con SPSS para
Llarena De Thierry. R. Evaluacin del personal acadmico. Perfiles Windows, Volumen II, Estadstica Multivariante (2. Ed.). Editorial,
Educativos. No. 53-54, julio-diciembre. CISE-UNAM, 18-29. Mxico McGraw Hill. Madrid, Espaa, 2003.

SEPTIEMBRE-DICIEMBRE 2007. Ao 13, Nmero 37. 119


IDENTIFICACIN DE LOS FACTORES PSICOMTRICOS SUBYACENTES EN LA ENCUESTA DE EVALUACIN DOCENTE DE LA UASLP.

120 HITOS DE CIENCIAS ECONMICO ADMINISTRATIVAS

También podría gustarte