Indicadores Educativos

Estos son algunas propuestas sobre datos sobre alumnos/as y la carga docente. Son indicadores ms relacionados con el Plan Educativo y/o Docente:

Capacidad Mxima. El mximo nmero de matrcula que, con los recursos actuales (instalaciones y recursos humanos), podra matricular el centro Altas. Es decir, matrcula al inicio del curso, ya sean nuevos en esa gestin o que vengan de otro ao (por ejemplo en los ciclos de formacin profesional) Bajas. Abandonos a lo largo del ao, sera la matrcula al final de curso MENOS la matrcula al inicio de curso Horas / Alumno / Ao. Horas impartidas al ao. Esto depende mucho de las carreras, lo mejor es poner una media [1] Horas / Docencia / Semana. Horas de docencia totales que se imparten en una semana completa (sin fiestas) Dedicacin Alumnos por semana. No se suele pensar en este indicador, pero es importante. Se busca estimar la dedicacin de un alumno al estudio (al margen de las clases). Un dato tpico es 1h/da, es decir 5h/semana y para este perfil de alumnos (baja disponibilidad de espacios y tiempos de estudio) es importante conocerlo. Dedicacin Profesores. Es la dedicacin de los profesores por asignatura. No es la dedicacin por semana sino cuanto tiempo, por cada hora de clase, es necesario dedicar a la asignatura. Un ratio posible (si nunca ha pensado en esto) es 1 h de preparacin por cada hora de clase (1/1) aunque lo ideal en un profesor experimentado es 1/2 o 1/3 [2]

Los indicadores calculados, es decir, que salen de los datos anteriores, son:

% Retencin: Altas/Bajas, por ejemplo con 100 altas y 10 bajas, sera un 90% de retencin. Es decir los alumnos que terminan vs a los que empiezan. Uno relacionado es el % de repitientes pero no me parece tan interesante. % Ocupacin: Matrcula Actual / Capacidad Mxima, es decir si tengo 100 alumnos pero podra matricular 150 pues sera un 67% (100/150) de ocupacin. Horas Impartidas Totales: Horas/Alumnas x Alumnas. No es lo mismo tener 100 alumnas e impartir 1.000 horas (un cursito a cada una), que 100 alumnas impartiendo 12000 horas (un tcnico medio a cada una).

Indicadores Econmicos
Los indicadores ms fciles de obtener suelen ser los econmicos aunque lo realmente difcil es establecer los costes segn los servicios que se ofrecen. Por eso hay que hacer ciertas simplificaciones y pensar en el centro, con todos sus servicios, como unidad de gestin. Estamos tomando los datos en Euros porque permite comparar con otros pases y es mejor redondearlo [3] para que sea ms sencilla su lectura.

Presupuesto Anual. El total del presupuesto anual del centro incluyendo todo lo necesario para dar su servicio educativo. Gasto Personal. Cual es el gasto total incluyendo todo el personal, no slo los docentes. Gasto Operacin. El gasto de operacin es lo que cuesta anualmente operar el centro e incluye todo lo que no es personal ni inversin en activos patrimoniales (es decir el

edificio, el equipamiento y lo que se podra vender). Es decir, son los gastos corrientes o de funcionamiento. Salario Profesor. Cul es el salario anual total, en promedio, de un profesor a tiempo completo? Salario Directivo. Cul es el salario anual total del personal directivo, en promedio, a tiempo completo? Aportes Internos. Hay aportes internos al centro? Me refiero a Fondos Propios, por ejemplo cuotas de alumnos o negocios propios del centro. En el caso de centros pblicos aqu sera cero (y habra que poner en Aportes Externos los fondos que aporta el estado) Aportes Externos. Cuntos son los aportes externos? Lo habitual es el Estado (Fondos Pblicos), la cooperacin internacional (Fondos de Ayuda) y fondos privados (donantes, cuotas de socios, etc)

Con los indicadores Educativos y Econmicos se extraen ratios que ayudan a diagnosticar los centros educativos, por ejemplo:

Coste Alumno. Presupuesto Total / Altas [4] Ratio Personal/Operacin. Son los porcentajes de cada gasto sobre el presupuesto total. Por ejemplo un 75/25 es que el 75% del gasto es personal y el 25% funcionamiento (este es un ratio tpico en centros educativos) Dependencia Externa. Aportes Externos / Presupuesto [5]

Es importante calcular los costes de personal a tiempo completo, esto es, con una dedicacin mensual de unas 160h. Sino hay que prorratear el salario, pero el parmetro de comparacin es dedicacin a tiempo completo. Sino haga una estimacin, por ejemplo, dos a tiempo parcial implica uno a tiempo completo (sume los sueldos).

Indicadores Recursos Humanos

El coste de personal es el ms importante en educacin. Los docentes, su calidad y su productividad, son la clave en cualquier proyecto educativo. Aunque es algo difcil de medir (sobre todo la calidad educativa) hemos tratado de tomar datos ms sencillos:

Personas. Cuntas Personas trabajan en la institucin? No slo profesores sino todas las personas que suponen un gasto en el presupuesto. Dedicacin Exclusiva. Cuntas tienen dedicacin exclusiva? Es decir, que trabajan slo en ese centro. Si hay diferentes horarios, haga una estimacin promedio. Personal Fijo. Cuantos estn en planilla/nmina y tienen contrato estable? Personal Temporal. Cuntos estn de forma temporal? Lo tpico son personas que facturan o que cobran en efectivo (tpico en profesores por horas) Dedicacin Mensual Fijo. Cual es la dedicacin mensual del personal fijo? Es decir, cuantas horas dedica a la institucin, en promedio, una persona contratada fija? Dedicacin Mensual Temporal. Lo mismo para una persona con dedicacin temporal (aqu tendr que hacer una estimacin o prorratear).

Al igual que en el apartado anterior, lo importante es buscar cual es la dedicacin del personal a la institucin. Lo ideal es tener el personal a tiempo completo y estable, pero es

muy dficil debido a la especializacin acadmica. Pero es realmente til conocer la dedicacin al centro.

Indicadores Instalaciones
Aunque en realidad yo prefiero tener buenos profesores que buenas instalaciones pero es evidente el impacto que tienen unas buenas instalaciones no slo en el rendimiento acadmico sino sobre todo en la productividad del personal. Adems permite un trabajo en valores de forma indirecta (higiene, limpieza, apropiacin, identidad, etc). Los indicadores que hemos visto ms sencillos de obtener son:

m2 Totales. Cuantos m2 tiene el centro? m2 Oficinas. Cuantos m2 de Oficinas y espacios administrativos? m2 Acadmicos. Cuantos m2 de aulas, talleres o espacios educativos donde hay clases de forma continua? Tipo Propiedad. Puede ser propiedad (privada o pblica, si es del estado) o tambin alquiler Valor de las Instalaciones. Cual es el valor que tienen sus instalaciones en la actualidad si alguien quisiera comprarlas?

INDICADORES PARA LA EVALUACIN INTEGRAL DE LA PRODUCTIVIDAD ACADMICA EN LA EDUCACIN SUPERIOR (Indicators for a Comprehensive Evaluation of Academic Productivity in Higher Education)
In format

por Mara Estela Martnez Castro (estelamartinezmx@yahoo.com.mx) Gerardo Coronado Ramrez (chinicuil98@yahoo.com)

En formato Ficha del artculo Sobre los autores Imprimir el artculo

Article record About the authors Print this article

Abstract
This article reports the results of an evaluation of academic productivity of three academic departments of the University of Guadalajara, Mexico, through an interrelated system of evaluative indicators it is possible to construct an effective method for identifying the levels and degree of equilibrium in the academic productivity of an institution of higher education. The method used to evaluate the dimensions of departmental academic productivity permitted interpretation and analysis of the data in order to make comprehensive value judgments and recommendations. Thus, achievements in the areas of research, extension, and teaching were evaluated for the departments observed. The criteria for analyzing the indicator were: effectiveness, efficacy, efficiency, adequacy, and continuing education.

Resumen
El artculo reporta resultados de la evaluacin de la productividad acadmica practicada a tres departamentos de la Universidad de Guadalajara, en Mxico, mediante la utilizacin de un esquema valorativo e interrelacionado de indicadores con el que se demuestra que es posible construir un mtodo efectivo para identificar los niveles y el grado de equilibrio existente en la productividad acadmica en una institucin de educacin superior. La propuesta consiste en un sistema evaluativo que combina las principales reas de actuacin universitarias con criterios valorativos, lo que permiti la interpretacin y el anlisis de los datos para emitir juicios de valor y recomendaciones de una forma integrada; esto significa que se consideraron en conjunto los logros correspondientes en las reas de investigacin, extensin y docencia de los departamentos observados, bajo los criterios de efectividad, eficacia, eficiencia, suficiencia y actualizacin.

Keywords
Teaching, Higher Education, Effectiveness, Efficacy, Efficiency, Adequacy, Extension, Research, Indicators, Evaluation of Academic Productivity, Comprehensive Evaluation Departmental Evaluation.

Descriptores
Docencia, Educacin superior, Efectividad, Eficacia, Eficiencia, Extensin, Evaluacin productividad acadmica, Evaluacin integral, Evaluacin departamental, Indicadores, Investigacin, Suficiencia

Introduccin

La Universidad de Guadalajara ha demostrado su permanente preocupacin por adaptarse a las tendencias que van marcando el destino de las universidades pblicas de Mxico; tambin ha manifestado ser una organizacin educativa que avanza al ritmo que exige el proceso mismo de modernizacin de su entorno y de la comunidad universitaria. Ello ha sido posible gracias al impulso y fortalecimiento de procesos internos de evaluacin y de regulares ejercicios de autoevaluacin institucional.
Comments to this article Related articles: Orden, A. de la et al. (1997). Desarrollo y validacin de un modelo de calidad universitaria como base para su evaluacin. Volume 9, n 1

Comentar este artculo Artculos relacionados: Orden, A. de la et al. (1997). Desarrollo y validacin de un modelo de calidad universitaria como base para su evaluacin. Volume 9, n 1

A raz de su ltima reforma acadmica, a principios de los noventa, los esfuerzos por medir sus niveles de calidad se han multiplicado utilizando diversos mecanismos valorativos, evidenciando que las actividades evaluativas se han convertido en una accin regular y un elemento de gran utilidad para la toma de decisiones en la vida de esta institucin. La realizacin de las tareas mencionadas ha permitido avanzar significativamente en el logro de la calidad de los servicios que esta casa de estudios brinda a la comunidad y a sus integrantes, sin embargo se empiezan a observar algunos efectos no deseados en el funcionamiento universitario que pueden asociarse con el sentido que han tomado las acciones evaluativas efectuadas en su interior.

Se puede mencionar, por ejemplo, que los resultados de las evaluaciones institucionales son presentados de manera aislada, sin establecer correlaciones entre las reas evaluadas, lo que aumenta el riesgo de ofrecer visiones sesgadas, incompletas e inclusive errneas del funcionamiento universitario.
Ante esta situacin, para nada deseable, surgi la inquietud de proponer ejercicios evaluativos que eviten la distorsin analtica, que reduzcan al mnimo procesos de simulacin y que no produzcan tensiones infructuosas entre los miembros de la comunidad.

Entonces, se asume como conveniente un sistema de evaluacin institucional basado en indicadores que aporten datos significativos sobre aspectos particulares y que, relacionados con otros indicadores, puedan proporcionar una visin integrada de las funciones sustantivas que se realizan en cada una de las instancias operativas de la universidad, particularmente de las acadmicas. Mediante la utilizacin de este sistema integrado de indicadores se podran obtener resultados de mayor precisin que hiciesen posible sugerir acciones tendientes a mejorar

la productividad de un departamento acadmico; mejora que no se encontrara referida solamente al aspecto compensatorio o financiero que premie a unos cuantos, sino ms bien que detecte aquellos elementos de las actividades acadmicas sustanciales que requieran ser fortalecidos y aumenten su productividad no en trminos de cantidad sino, sobre todo, de calidad, con la intencin de que se realicen sus trabajos como lo establece la figura departamental prefigurada en sus documentos normativos y planes de desarrollo; es decir, por ncleos de especializacin disciplinar que integren armoniosamente las funciones sustantivas universitarias y no por centros especializados en una actividad acadmica dispersa.
Darle este rasgo definitorio de integralidad a la evaluacin que se realiza regularmente en la Universidad de Guadalajara (UdeG), fue lo que inspir el inters por recuperar muchos de los datos que existen de los diferentes procesos evaluativos universitarios ya sea mediante el anlisis de los reportes de actividades acadmicas, informes de las rectoras de algunos centros universitarios y de la rectora general de la misma universidad, as como la opinin de autoridades acadmicas departamentales, para con todo ello conformar una propuesta instrumental susceptible de ser empleada por los departamentos y que permitiese emitir juicios valorativos de la profundidad, eficacia, efectividad y pertinencia de su accin de forma totalizadora y correlacionada. El trabajo aqu presentado ofrece los resultados de los esfuerzos realizados para alcanzar este objetivo, proceso que permiti aportar una herramienta til para la evaluacin de los departamentos con un enfoque distinto al que prevalece en la mayora de las universidades e instituciones de educacin superior, cuyas evaluaciones se ubican en la perspectiva productivista del trabajo acadmico exigiendo resultados sin relacionarlos con aquellos factores que en alguna medida intervienen para obtenerlos con una mayor calidad. La Evaluacin en las Instituciones de Educacin Superior en Mxico Es preciso reconocer que la historia de la evaluacin de la educacin superior en Mxico lleva ya poco ms de tres dcadas de desarrollo, ya que desde los aos setenta la Asociacin Nacional de Universidades e Instituciones de Educacin Superior (ANUIES) realiz los primeros ejercicios de autoevaluacin en este pas para elaborar diagnsticos, pronsticos de demanda y crecimiento de programas especficos de desarrollo institucional (ANUIES, 1997, p. 4). A raz de esto ANUIES desarroll en 1984 un esfuerzo de sistematizacin de la metodologa de evaluacin para la educacin superior, mediante la utilizacin de criterios y procedimientos generales en este nivel educativo (Casillas, 1995, p. 41). El espacio dedicado a los procesos de evaluacin se fue abriendo ms y como consecuencia de los trabajos realizados, en 1989 la Coordinacin Nacional para la Planeacin de la Educacin Superior (CONPES) aprob la instalacin de la Comisin Nacional de Evaluacin de la Educacin Superior (CONAEVA), con el propsito de impulsar el proceso de evaluacin a nivel nacional mediante la formulacin de criterios y directrices generales para proponer polticas y acciones tendientes a mejorar la educacin superior.

En esta apertura surgieron las siguientes instancias: en 1990 el Fondo para Modernizar la Educacin Superior (FOMES), cuya operacin de recursos permiti subsanar en parte los rezagos de la inversin en la infraestructura y equipamiento acumuladas durante la dcada anterior en las instituciones; en 1991 se establecieron los Comits Interinstitucionales para la Evaluacin de la Educacin Superior (CIEES), cuyo principal

propsito es la evaluacin de la calidad de los programas, especialmente los de formacin de profesionales en el nivel de licenciatura y de las funciones de administracin institucional y de difusin de la cultura a travs de nueve comits establecidos por reas de conocimientos, integrados por pares acadmicos de distintas universidades; por ltimo, en 1992 se constituy la Federacin de Instituciones Particulares Mexicanas de Educacin Superior (FIMPES), como una agrupacin que desarroll criterios propios de evaluacin institucional para sus agremiados.
Se puede asegurar entonces, que en el nivel de educacin superior en Mxico los organismos mencionados han sido las principales instancias con programas empleados para el seguimiento del esfuerzo de la evaluacin; y han establecido indicadores de funcionamiento institucional y parmetros que orientan el comportamiento esperado de las instituciones principalmente por el inters de obtener la acreditacin y el financiamiento, hecho este que ha marcado las tendencias generales de la evaluacin en las instituciones educativas del nivel superior. Por otra parte, cada institucin establece distintos procesos y mecanismos para el ingreso, promocin y permanencia de su personal acadmico, as como el acceso a estmulos econmicos, con lo que se propiciar una mayor participacin de los cuerpos colegiados en su diseo, operacin y evaluacin como lo seala el Programa de Desarrollo Educativo 1995-2000 (ANUIES, 1997, p. 6) En la Universidad de Guadalajara, adems de los programas de evaluacin al personal acadmico que se mencionan ms adelante, se han llevado a cabo diversos procesos de evaluacin, de los cuales vale la pena mencionar dos: el programa denominado Evaluar para Mejorar, promovido a finales de 1998 por la Vicerrectora de la propia universidad, en el que se pretenda evaluar a los departamentos y planes de estudio en su primera fase mediante la conduccin de los colegios departamentales y los comits consultivos de las coordinaciones de cada plan de estudios; para el ao 2000 se haban llevado a cabo algunos talleres y el equipo de trabajo se encontraba en la etapa de definicin de los indicadores. El segundo programa es el que se conoce como Autoestudio, creado en el Plan Institucional de Desarrollo 1995-2000 de la propia universidad, motivado por las nuevas formas del binomio evaluacin-financiamiento, que necesaria e inevitablemente cobrarn vigencia en nuestro pas (UdeG, 1996a, p. 140). Entonces se construy un modelo basado en estndares considerando las reas de desarrollo institucional: atencin a la demanda estudiantil; distribucin de la matrcula; eficiencia de la docencia; programas de docencia; personal acadmico; investigacin; difusin de la cultura y extensin de los servicios; apoyo acadmico; apoyo administrativo; financiamiento y vinculacin. Los resultados de esta evaluacin se dieron a conocer en 1998. La evaluacin de los acadmicos En cuanto a la evaluacin del personal acadmico, a partir de 1986 se puso en marcha como uno de los proyectos del Programa de la Carrera Docente del Personal Acadmico (instrumentado desde 1972), incluyndolo dentro del Proyecto Nacional de Formacin del Personal Acadmico y que se convertira en 1993 en un instrumento de la poltica de la educacin superior con la creacin del Programa Nacional de Superacin del Personal Acadmico conocido como SUPERA.

Adems, el Consejo Nacional para la Ciencia y la Tecnologa (CONACYT), el Sistema Nacional de Investigadores (SNI) y algunas fundaciones y empresas que invierten fondos en investigacin, son organismos que se han encargado de implementar algunos criterios

de evaluacin para medir el desempeo de los acadmicos, ya que para otorgar becas y estmulos solicitan ciertos requisitos que se fueron estableciendo como indicadores para la evaluacin de la produccin acadmica.
Los acadmicos en la Universidad de Guadalajara La evaluacin del desempeo del personal acadmico de la UdeG, en lo que se refiere a las actividades de investigacin, extensin y docencia inici de una manera sistematizada con el mismo proceso de reforma universitaria desde 1990, ao en el que se dieron a conocer los criterios para llevar a cabo una homologacin del personal acadmico mediante la documentacin probatoria de las actividades realizadas. Posteriormente se implementaron diversos programas de deshomologacin por medio del otorgamiento de estmulos econmicos. Estos programas han implicado un proceso de evaluacin importante del desempeo acadmico al interior de la institucin, ya que invadi la esfera de produccin individual de los acadmicos, modificando como lo seala Luis Montao significativamente, en la mayora de los casos, la naturaleza y el contenido del trabajo, as como la organizacin y el comportamiento de los acadmicos (Montao, 1993, pp.14-15). Uno de los efectos provocados por este tipo de evaluaciones es la elaboracin individualizada de productos acadmicos, bajo el discurso de la excelencia en las que se representan las desigualdades intelectuales, culturales y sociales (Rodrguez, 1999, p. 18). En el discurso de la excelencia se demanda mayor productividad acadmica y a su vez, la distribucin de recursos tambin es un factor importante, aunque como dice Eduardo Ibarra:

En la distribucin de recursos a la ciencia existe la creencia de que son las ciencias duras las que requieren de fuertes inversiones en infraestructura, mientras las mal llamadas ciencias blandas se bastan a s mismas slo con lpiz y papel. (Ibarra, 1998b, p.376)

Mtodo
Este estudio se llev a cabo durante el periodo que comprende de marzo del 2000 a marzo del 2001, y los datos que aqu se incluyen corresponden a la produccin acadmica de tres departamentos de la UdeG reportados durante 1997, 1998 y 1999. El trabajo que se presenta recupera informacin suficiente para llevar a la prctica un proceso de evaluacin de manera integrada.

Con la primer informacin de tipo documental, basada en lecturas tanto de la UdeG como de los procesos de evaluacin prevalecientes en su interior, fue posible plantear el problema que se refiere a la productividad acadmica dentro del modelo departamental existente en la institucin. Derivado de la investigacin inicial se constat que no existe evaluacin especfica sobre la productividad acadmica a nivel departamental en esa universidad; por lo que se establecieron los objetivos de investigacin, se desarrollaron las preguntas que orientaran este estudio, as como la justificacin del proyecto y su viabilidad.
Objetivo general El objetivo general fue indagar comparativamente cules son los elementos decisivos de la

productividad acadmica en tres departamentos de la Universidad de Guadalajara. Por lo que es pertinente precisar que la productividad acadmica se considera como la integracin de resultados derivados de la produccin proporcional del personal acadmico de un departamento, en sus actividades de investigacin, docencia y extensin, en relacin con las normas establecidas para la evaluacin (Martnez, 2001, p. 43). Despus de construir el marco terico, se estableci como trabajo principal una evaluacin de tipo descriptiva, comparativa, correlacional y valorativa, lo que ayud en la definicin del modelo que deba adoptarse. Tomando como principio fundamental que toda evaluacin se basa en la aplicacin de un modelo, ya que es el modelo el que dirige el enfoque conceptual de los trminos utilizados, se tomaron los conceptos bsicos y el procedimiento del modelo de evaluacin comparativa mediante la utilizacin de indicadores, propuesto por Michael Scriven (1991), por lo que dicho procedimiento se expresa desde la implementacin del diseo o plan de evaluacin a realizar.

La naturaleza de los datos cuantitativos y cualitativos obtenidos en este estudio, permiti tambin realizar ejercicios estadsticos que a su vez facilitaron la interpretacin y el anlisis de los resultados, orientados hacia el enjuiciamiento valorativo del cual surgieron las recomendaciones para la toma de decisiones con la principal finalidad de mejorar la productividad acadmica.
La estrategia operativa y metodolgica se divide en cuatro fases que consisten bsicamente en la definicin de la situacin a evaluar; la recopilacin de informacin y aplicacin de los indicadores; la sistematizacin de datos e interpretacin de los resultados; y finalmente, mediante el anlisis de la informacin, la emisin de juicios por parte de los evaluadores para terminar en recomendaciones. Representatividad de la muestra Debido al carcter comparativo de esta evaluacin, la representatividad de la muestra elegida se bas principalmente en que los departamentos analizados tuvieran caractersticas similares. Considerando que en la Universidad de Guadalajara operan trece centros universitarios, siete regionales y seis temticos en la zona metropolitana de Guadalajara, se juzg conveniente incluir en este estudio tres departamentos que pertenecieran a distintos centros universitarios para evitar algunos sesgos o repeticiones sobre todo en la operatividad y la dinmica de la productividad acadmica. Se estim la conveniencia de que los departamentos analizados tuvieran factores esenciales en comn, bsicamente que reportaran la produccin de investigaciones, participacin en la docencia y llevar a cabo actividades de extensin y difusin del conocimiento. Se incluyeron dos temticos metropolitanos (Departamentos A y B) y uno regional (Departamento C). Los criterios bsicos de integracin de la muestra fueron la representatividad departamental, significatividad departamental, cobertura disciplinar y viabilidad de acceso informativo. reas y Criterios de Evaluacin Las reas o mbitos de la evaluacin fueron las funciones sustantivas: docencia, investigacin y extensin; los criterios de anlisis de los indicadores fueron: efectividad, eficacia, eficiencia, suficiencia y actualizacin.

La efectividad se refiere a la pertinencia o funcionalidad, entendida como la coherencia del proyecto institucional y de sus programas con las necesidades y caractersticas del rea de influencia de la institucin. Se mide el impacto social o institucional. La eficacia es entendida como criterio de relacin o correspondencia entre los fines, objetivos y metas con los logros concretos de ejecucin. Se refiere a la coherencia entre las actividades desarrolladas por el departamento y sus acadmicos para cumplir sus fines y los objetivos de cada uno de sus programas. La eficiencia es el nivel ptimo de funcionalidad y congruencia para posibilitar la concrecin de metas con calidad. Se refiere a la coherencia entre recursos invertidos, esfuerzos desplegados y tiempo empleado para el logro de los objetivos. La suficiencia, para efectos de este estudio se refiere a la capacidad para cubrir las necesidades de insumos financieros y materiales, as como otros requerimientos planteados para el desarrollo de las actividades acadmicas. La actualizacin es entendida como el nivel de vigencia y renovacin de conocimientos disciplinares y pedaggicos, de contenidos programticos, de inters y de reemplazo.

Indicadores
Tomando como base la determinacin de dichas reas y criterios, se instrument el Sistema de Indicadores por reas y Criterios de Evaluacin cuyos componentes se desglosan en la Tabla 1, por cada dimensin y criterio analizados.

Tabla 1
Indicadores por reas y Criterios de Evaluacin

Para el rea de la investigacin

Efectividad Eficacia Eficiencia 6: Eficiencia en la la obtencin del financiamiento para realizar investigaciones Suficiencia 9:Financiamiento (interno y externo) suficiente para realizar investigaciones Actualizacin No se incluyeron indicadores con este criterio para el rea de la investigacin 1:Inters de la 4:Evaluacin sociedad por la interna en investigacin investigacin realizada en el departamento.

5:Desarrollo en equipo de los 2:Contribuciones trabajos de 7: Equipo de cmputo innovadoras al investigacin adecuado para la campo realizacin de disciplinar. actividades acadmicas

10:Suficiencia del equipo de cmputo destinado a la realizacin de actividades acadmicas

3:Distinciones a la investigacin 8:Espacios adecuados para la realizacin de actividades acadmicas 11:Espacios suficientes para la realizacin de actividades acadmicas

Para el rea de la extensin

Efectividad No se incluyeron indicadores con este criterio para el rea de la extensin Eficacia 12:Membresa a sociedades y asociaciones cientficas vinculadas al campo disciplinar 13: Desarrollo actividades editoriales Eficiencia 17: Eficiencia de los mecanismos de apoyo para la participacin de acadmicos en eventos cientficos de Suficiencia 18: Suficiencia de apoyos otorgados para la participacin de acadmicos en eventos cientficos Actualizacin 19: Suscripciones vigentes a revistas cientficas

14: Captulos de libros publicados anualmente 15: Libros anualmente publicados

16: Trabajos presentados en reuniones cientficas o eventos acadmicos especializados

Para el rea de la docencia

Efectividad 20: Programas docentes exitosos Eficacia 22: Tesis dirigidas por nivel Eficiencia Suficiencia No se incluyeron 23: Acervo indicadores con bibliogrfico este criterio para suficiente el rea de la docencia Actualizacin 24: Asistencia a cursos de actualizacin docente (pedaggica y didctica) 25: Asistencia a cursos de actualizacin disciplinar 26: Diseos o actualizaciones de planes y programas docentes 27: Acervo bibliogrfico actualizado

21: Elaboracin de material didctico

Se entiende por indicadores aquellos datos cuya caracterstica principal es la sntesis de un aspecto particular cuantitativo o cualitativo de un objeto de estudio y que correlacionados con otros nos proporciona una visin integrada de una situacin a evaluar (Martnez Castro, 2001, p. 39)

Descripcin de Indicadores Los indicadores que conforman el sistema propuesto en este trabajo de evaluacin, son los siguientes:

AREA: Investigacin
Criterio: Efectividad Indicador 1: Inters de la sociedad por la investigacin realizada en el departamento. Descripcin: Se refiere a la respuesta que tanto la comunidad del entorno del departamento, como la comunidad cientfica tienen respecto a las actividades y los avances logrados por el departamento. Habr proyectos cuya relevancia pueda considerarse significativa en trminos de cobertura local, regional, nacional e internacional en distintos niveles. Variables que participan: 1.1. Nmero de proyectos de investigacin realizados por el departamento

1.2. Nmero de notas laudatorias emitidas por la comunidad u organismos pblicos o privados, nacionales o extranjeros que se hayan emitido respecto al trabajo del departamento; o nmero de artculos periodsticos o notas televisivas o radiofnicas en las que se presentaron aspectos de cada uno de los proyectos realizados en el departamento. 1.3. Nmero de convenios con organismos pblicos o privados, para la realizacin de programas o proyectos en los que interviene el personal acadmico del departamento. Elementos cualitativos: 1.4. 1.5. Valoracin del nivel de relevancia de la investigacin para la sociedad.

mbitos de relevancia de la investigacin en el nivel local o regional, nacional e internacional. Identificacin:

Nmero de convenios, solicitudes y notas laudatorias emitidas por la comunidad u organismos pblicos o privados, nacionales o extranjeros que se hayan emitido respecto a cada uno de los proyectos de investigacin del departamento en los ltimos tres aos.
Estndar deseable:

Al menos una nota o solicitud de informacin respecto a los proyectos emitida por cada ao o la existencia al menos un convenio de colaboracin en programas o proyectos realizados por personal acadmico del departamento por ao.

Indicador 2: Contribuciones innovadoras al campo disciplinar

Descripcin: Habr de obtenerse el grado de significatividad e innovacin que poseen las contribuciones derivadas de la investigacin dentro del campo que abarca la disciplina del conocimiento de su departamento. Variables que participan: 2.1. Nmero de proyectos asociados a temticas consideradas de frontera. Elementos cualitativos: 2.2. 2.3. Contribuciones tericas o metodolgicas al campo disciplinar

Valoracin del nivel de significatividad en la innovacin de las contribuciones derivadas de la investigacin. Identificacin:

Existencia y valoracin de las contribuciones tericas o metodolgicas significativas que se hayan realizado respecto a cada uno de los proyectos de investigacin del departamento en los ltimos tres aos.
Estndar deseable: Al menos contar con dos proyectos vigentes asociados a temticas de frontera y cuya valoracin resulte razonablemente significativa a las contribuciones innovadoras derivadas de los mismos.

Indicador 3: Distinciones a la investigacin Descripcin: Se consideran las distinciones otorgadas por organismos externos, tanto a los investigadores adscritos al departamento como a nivel departamental. Variables que participan: 1.1. 3.1. Nmero de proyectos de investigacin realizados por el departamento Nmero de distinciones otorgadas a la investigacin por organismos externos. Identificacin:

Nmero de distinciones que se hayan emitido respecto a cada uno de los proyectos de investigacin del departamento en los ltimos tres aos.
Estndar deseable:

Al menos una distincin otorgada a la investigacin que realizan los acadmicos, por cada departamento en cada ao.

Criterio: Eficacia Indicador 4: Evaluacin interna en la investigacin Descripcin: Acciones de evaluacin de las actividades de investigacin que se efectan al interior del departamento con la finalidad de mejorar la calidad de los productos de los proyectos de investigaciones que ah se realizan. Variables que participan: 4.1. 4.2. Nmero de ejercicios de evaluacin realizados en el ltimo ao destinados a valorar la actividad investigadora. Periodicidad de los ejercicios de evaluacin realizados para valorar la actividad investigadora por ao. Identificacin:

Nmero de ejercicios de evaluacin de proyectos realizados por cada departamento en el ltimo ao.
Estndar deseable: Al menos una accin evaluativa destinada a valorar la actividad investigadora por ao.

Indicador 5: Desarrollo en equipo de los trabajos de investigacin. Descripcin: Se refiere al volumen de actividades de investigacin que resultan de trabajos grupales, sean estos disciplinarios o interdisciplinarios. Pueden considerarse equipos de trabajo entre varios investigadores, en combinacin con asociados e incluso con el apoyo de asistentes. Tambin se considera trabajo en equipo de investigacin cuando se desarrollan proyectos de tipo departamental en los que interviene personal acadmico de diversas categoras, cuando se organizan comits conjuntos de desarrollo de proyectos, o cuando se forman equipos multidisciplinarios para realizar investigacin. Variables que participan: 1.1. 5.1. Nmero de proyectos de investigacin realizados por el departamento Nmero de proyectos diseados y/o realizados por un equipo de investigacin Elementos cualitativos: 5.2. 5.3. Desarrollo de trabajos de investigacin en equipo

Formacin de equipos multidisciplinarios para realizar la investigacin Identificacin:

Proporcin de proyectos de investigacin del departamento desarrollados en equipo en los ltimos tres aos.
Estndar deseable: Al menos un proyecto de investigacin desarrollado en equipo por cada departamento en cada ao.

Criterio: Eficiencia Indicador 6: Eficiencia en la obtencin del financiamiento para realizar investigaciones Descripcin: Se refiere al nivel de gestin para la obtencin de recursos econmicos que se ingresan al departamento de acuerdo a las necesidades financieras de los proyectos que realiza, respecto al tiempo empleado para el logro de dicha obtencin de recursos de fuentes financieras internas y externas. Variables que participan: 1.1. 6.1. 6.2. Nmero de proyectos de investigacin realizados por el departamento

Nmero de proyectos de investigacin financiados por fuentes internas en los ltimos tres aos. Nmero de proyectos de investigacin financiados por fuentes externas en los ltimos tres aos 6.3. Fuentes de financiamiento externas del departamento Elementos cualitativos:

6.4. Apreciacin del nivel de eficiencia de ambas fuentes de financiamiento respecto a la obtencin de recursos financieros de apoyo a la investigacin en ambas fuentes, por parte de alguno de los grupos de inters involucrados. Identificacin:

Proporcin de proyectos que han conseguido financiamiento mediante fuentes internas y externas
Estndar deseable: Valoracin eficiente en trminos de tiempo para la obtencin de recursos provenientes tanto de fuentes de financiamiento internas como externas en apoyo a la investigacin.

Indicador 7: Equipo de cmputo adecuado para la realizacin de actividades acadmicas Descripcin: Se refiere a las condiciones de adecuacin en las que se encuentra el equipo de cmputo en relacin con las necesidades planteadas por los proyectos que realiza el departamento. Variables que participan:

7.1. 7.2.

Nmero de colaboradores acadmicos del departamento.

Nmero de equipos de cmputo que tiene el departamento para uso acadmico Elementos cualitativos:

7.3.

Valoracin respecto a la adecuacin del equipo de cmputo que utiliza el personal acadmico. Identificacin:

Proporcin y valoracin del equipo de cmputo utilizado por el personal acadmico

Estndar deseable:

Valoracin del equipo de cmputo como adecuado para la realizacin de actividades acadmicas.

Indicador 8: Espacios adecuados para la realizacin de actividades acadmicas Descripcin: Condiciones de los espacios de trabajo que posee el departamento para el desempeo de sus actividades acadmicas. Variables que participan: 8.1. Nmero de cubculos destinados al trabajo acadmico Elementos cualitativos: 8.2. Valoracin de la adecuacin de las instalaciones del departamento que son destinadas al trabajo acadmico. Identificacin: Proporcin de los espacios destinados al trabajo acadmico Estndar deseable: Espacios calificados como adecuados para la realizacin de actividades acadmicas.

Criterio: Suficiencia Indicador 9: Financiamiento (interno y externo) suficiente para realizar investigaciones Descripcin: Esta referido a la cantidad de recursos que se ingresan al departamento de acuerdo a las necesidades financieras de los proyectos que realiza. Variables que participan: 6.1. Nmero de proyectos de investigacin financiados por fuentes internas

6.2. Nmero de proyectos de investigacin financiados por fuentes externas 9.1. 9.2. Monto de los recursos obtenidos para el financiamiento de los proyectos de investigacin provenientes de fuentes internas en los ltimos tres aos. Monto de los recursos obtenidos para el financiamiento de los proyectos de investigacin provenientes de fuentes externas en los ltimos tres aos. Elementos cualitativos: 9.3. Valoracin del nivel de suficiencia respecto a la obtencin de recursos financieros de apoyo a la investigacin en ambas fuentes. Identificacin:

Proporcin por proyecto de los recursos que ingresaron para financiamiento de la investigacin durante los ltimos tres aos y nivel de suficiencia de dichos recursos.
Estndar deseable: Calificacin como suficiente por parte de alguno de los grupos de investigacin involucrados.

Indicador 10: Suficiencia del equipo de cmputo destinado a la realizacin de actividades acadmicas. Descripcin: Se refiere a la relacin equipos/acadmicos existente para la realizacin de actividades acadmicas. Variables que participan: 7.1. 7.2. Nmero de colaboradores acadmicos del departamento.

Nmero de equipos de cmputo que tiene el departamento para uso acadmico Elementos cualitativos:

10.1.

Valoracin respecto al nivel de suficiencia del equipo de cmputo utilizado por el personal acadmico. Identificacin:

Proporcin y valoracin de la suficiencia del equipo de cmputo utilizado por el personal acadmico. Estndar deseable: Al menos un equipo de cmputo por acadmico cuya valoracin se considere como suficiente

Indicador 11: Espacios suficientes para la realizacin de actividades acadmicas

Descripcin: Nivel de suficiencia de los espacios de trabajo que posee el departamento para el desempeo de sus actividades acadmicas. Variables que participan: 7.1. 8.1. Nmero de colaboradores acadmicos del departamento. Nmero de cubculos destinados al trabajo acadmico Identificacin:

Proporcin del espacio destinado al trabajo acadmico.

Estndar deseable: Al menos un cubculo por acadmico

AREA: Extensin Criterio: Eficacia Indicador 12: Membresa a sociedades y asociaciones cientficas vinculadas al campo disciplinar Descripcin: Se refiere a la cantidad y tipo de adscripcin que tiene el departamento (o sus miembros) a sociedades y asociaciones disciplinares. Variables que participan: 7.1. 12.1. Nmero de colaboradores acadmicos del departamento.

Nmero de asociaciones a las que se encuentra afiliado el personal acadmico del departamento. Identificacin:

Proporcin de membresas a sociedades cientficas o acadmicas.

Estndar deseable:

Al menos una membresa a sociedades cientficas o acadmicas por cada acadmico del departamento.

Indicador 13: Desarrollo de actividades editoriales Descripcin: Se refiere al volumen y caracterizacin del destino de las publicaciones peridicas, manuales, reportes tcnicos de investigacin, o ensayos que se generan por los integrantes del departamento. Variables que participan:

7.1. 13.1.

Nmero de colaboradores acadmicos del departamento.

Nmero de artculos elaborados para difusin cientfica por cada uno de los acadmicos del departamento. Nmero de artculos elaborados para divulgacin cientfica por cada uno de los acadmicos del departamento.

13.2. 13.3.

Nmero de manuales, reportes tcnicos o ensayos de distribucin interna elaborados por cada acadmico del departamento. Identificacin:

Proporcin de actividades editoriales por acadmico en los ltimos tres aos

Estndar deseable:

Al menos la realizacin de una actividad editorial por acadmico por ao.

Indicador 14: Captulos de libros publicados anualmente Descripcin: Es la proporcin anual de captulos de textos o tratados que escriben los acadmicos adscritos al departamento. Variables que participan: 7.1. Nmero de colaboradores acadmicos del departamento.

14.1. Nmero de captulos elaborados por cada acadmico Identificacin:

Proporcin de captulos de libros elaborados por los acadmicos del departamento en los ltimos tres aos.
Estndar deseable:

Al menos la elaboracin de un captulo de libro por ao elaborado por cada acadmico del departamento.

Indicador 15: Libros publicados anualmente Descripcin: Se refiere a la produccin especializada de textos que corresponden al campo disciplinar del departamento que se publican anualmente. Variables que participan: 15.1. Nmero total de libros publicados por el departamento en los ltimos tres aos Identificacin:

Promedio de libros publicados por el departamento anualmente

Estndar deseable:

Al menos la publicacin de un libro por ao en cada departamento

Indicador 16: Trabajos presentados en reuniones cientficas o eventos acadmicos especializados. Descripcin: Presentacin anual de ponencias y/o conferencia por parte de los integrantes del departamento en eventos especializados de anlisis o difusin cientfica locales o regionales, nacionales e internacionales. Variables que participan: 7.1. 16.1. 16.2. 16.3. Nmero de colaboradores acadmicos del departamento.

Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros locales o regionales en los ltimos tres aos. Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros nacionales en los ltimos tres aos. Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros internacionales en los ltimos tres aos. Identificacin:

Proporcin anual por acadmico de presentaciones en foros acadmicos especializados locales, regionales, nacionales e internacionales.
Estndar deseable:

Al menos una presentacin anual en foros acadmicos ya sea locales, regionales y nacionales y una presentacin en foros internacionales, por cada acadmico.

Criterio: Eficiencia Indicador 17: Eficiencia de los mecanismos de apoyo para la participacin de acadmicos en eventos cientficos. Descripcin: Se refiere al nivel de gestin para la obtencin de apoyos otorgados al personal acadmico para su participacin en eventos cientficos. Variables que participan: 7.1. 16.1. 16.2. Nmero de colaboradores acadmicos del departamento.

Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros locales o regionales en los ltimos tres aos. Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros nacionales en los ltimos tres aos.

16.3.

Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros internacionales en los ltimos tres aos. Elementos cualitativos:

17.1.

Valoracin en trminos de eficiencia para el otorgamiento de recursos de apoyo para la participacin acadmica en eventos cientficos. Identificacin:

Valoracin del nivel de eficiencia en la gestin para la obtencin de apoyos otorgados al personal acadmico para su participacin en eventos cientficos.
Estndar deseable:

Calificacin de la gestin como eficiente para la obtencin de recursos de apoyo a la participacin de acadmicos en eventos cientficos.

Criterio: Suficiencia Indicador 18: Suficiencia de apoyos otorgados para la participacin de acadmicos en eventos cientficos. Descripcin: Valoracin de la suficiencia en trminos financieros de los apoyos otorgados al personal acadmico para su participacin en eventos cientficos. Variables que participan: 7.1. 16.1. 16.2. 16.3. Nmero de colaboradores acadmicos del departamento.

Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros locales o regionales en los ltimos tres aos. Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros nacionales en los ltimos tres aos. Nmero de ponencias y/o conferencias que present el personal acadmico del departamento en foros internacionales en los ltimos tres aos. Elementos cualitativos:

18.1.

Valoracin en trminos de suficiencia financiera respecto al apoyo otorgado para la participacin de acadmicos en eventos cientficos Identificacin:

Valoracin del nivel de suficiencia en la obtencin de apoyos financieros otorgados al personal acadmico para su participacin en eventos cientficos.
Estndar deseable: Calificacin del financiamiento como suficiente para apoyar la participacin de acadmicos en eventos cientficos.

Criterio: Actualizacin Indicador 19: Suscripciones vigentes a revistas cientficas Descripcin: Se refiere al total de revistas cientficas vigentes a las que se encuentra suscrito el departamento, como parte del servicio de actualizacin de conocimientos del campo disciplinar en los mbitos nacional e internacional. Variables que participan: 19.1. Nmero total de suscripciones a revistas peridicas que tiene vigentes el departamento 19.2. 19.3. Nmero de suscripciones vigentes a nivel nacional Nmero de suscripciones vigentes a nivel internacional Identificacin:

Vigencia en la suscripcin del departamento con revistas cientficas por su origen nacional e internacional.
Estndar deseable:

Suscripcin al menos de una revista cientfica de origen nacional y dos internacionales por departamento.

AREA: Docencia

Criterio: Efectividad
Indicador 20: Programas docentes exitosos Descripcin: Se referir esta informacin a la proporcin de los planes de estudio que ofrece el departamento y que cuenten por lo menos con una de las siguientes caractersticas[1]

Alta demanda (nmero superior en ms del 3% de aspirantes rechazados en solicitudes de ingreso, con relacin a la capacidad instalada)

Reconocimiento de instancias oficiales como programa de calidad comprobable

Proporcin adecuada de titulados respecto a egresados, segn la normatividad existente en cada programa docente.

Proporcin adecuada de egresados trabajando en el rea de formacin, segn la normatividad existente en cada programa docente. Variables que participan:

20.1.

Nmero de programas acadmicos formativos que ofrece el departamento. 20.2. Niveles acadmicos que atiende el departamento.

20.3.

Nmero de programas que tienen al menos una de las caractersticas sealadas.

Identificacin:

Nmero de programas docentes considerados exitosos

Estndar deseable:

Ofrecer al menos un programa docente exitoso por departamento.

Indicador 21: Elaboracin de material didctico Descripcin: Es la diversidad y cantidad de material didctico diseado y elaborado por los acadmicos del departamento. Variables que participan: 7.1. 21.1. 21.2. Nmero de colaboradores acadmicos del departamento.

Nmero total de materiales didcticos elaborados por acadmicos del departamento Clasificacin del material didctico que se elabor en el departamento durante 3 aos. Identificacin:

Proporcin anual de materiales didcticos elaborados por el departamento.

Estndar deseable:

Elaboracin anual de al menos dos materiales didcticos de cualquier tipo, por acadmico.

Criterio: Eficacia

Indicador 22: Tesis dirigidas por nivel Descripcin: Ser la proporcin de tesis dirigidas por el personal acadmico del departamento segn los niveles de estudios que estuviesen atendiendo. Variables que participan: 7.1. 22.1. Nmero de colaboradores acadmicos del departamento.

Nmero total de tesis dirigidas por acadmicos del departamento en los ltimos tres aos. Identificacin:

Proporcin anual de tesis dirigidas por el personal acadmico del departamento y concluidas en los ltimos tres aos.
Estndar deseable:

Al menos una tesis dirigida anualmente por cada uno de los integrantes del personal acadmico del departamento.

Criterio: Suficiencia Indicador 23: Acervo bibliogrfico suficiente Descripcin: Se trata de indagar si el personal acadmico cuenta con el suficiente acervo bibliogrfico que necesita para realizar sus actividades de investigacin y docencia. Variables que participan: 27.1. Nmero total de ttulos que ofrece el departamento a sus acadmicos en su centro de informacin o biblioteca. Elementos cualitativos: 23.1. Valoracin de la suficiencia del acervo bibliogrfico del departamento. Identificacin: Nivel de suficiencia del acervo bibliogrfico del departamento para la realizacin de actividades de investigacin y docencia. Estndar deseable: Obtener el nivel de suficiente en la valoracin del acervo bibliogrfico del departamento para la realizacin de actividades de investigacin y docencia.

Criterio: Actualizacin Indicador 24: Asistencia a cursos de actualizacin docente (pedaggica y didctica) Descripcin: Cantidad promedio de cursos de actualizacin pedaggica a los que anualmente asiste el personal acadmico del departamento. Variables que participan: 7.1. 24.1. 24.2. Nmero de colaboradores acadmicos del departamento.

Nmero total de cursos de actualizacin pedaggica que tomaron los acadmicos del departamento en los ltimos tres aos Ttulos de los cursos de actualizacin pedaggica que tomaron los acadmicos del departamento en los ltimos tres aos. Identificacin:

Promedio anual de cursos de actualizacin pedaggica que tomaron los acadmicos del departamento.
Estndar deseable:

Al menos la asistencia a un curso anual de actualizacin pedaggica por acadmico.

Indicador 25: Asistencia a cursos de actualizacin disciplinar Descripcin: Cantidad promedio de cursos de actualizacin disciplinar a los que asiste el personal acadmico durante un ao. Variables que participan: 7.1. 25.1. 25.2. Nmero de colaboradores acadmicos del departamento.

Nmero total de cursos de actualizacin disciplinar que tomaron los acadmicos del departamento en los ltimos tres aos. Ttulos de los cursos de actualizacin que tomaron los acadmicos del departamento en los ltimos tres aos. Identificacin:

Promedio anual de cursos de actualizacin disciplinar que tomaron los acadmicos del departamento.
Estndar deseable: Al menos la asistencia a un curso anual de actualizacin disciplinar por acadmico.

Indicador 26: Diseos o actualizaciones de planes y programas docentes Descripcin: Proporcin de planes y programas de estudio que ofrece el departamento, diseados o actualizados durante el ltimo trienio. Variables que participan: 7.1. 26.1. Nmero de colaboradores acadmicos del departamento.

Nmero de planes de estudio y programas del departamento que fueron diseados o modificados por el departamento en el ltimo trienio. Identificacin:

Proporcin anual de diseos y actualizaciones de planes de estudio

Estndar deseable:

Al menos una accin de diseo o actualizacin de un plan o programa de estudios por acadmico anualmente

Indicador 27: Acervo bibliogrfico actualizado Descripcin: Se trata de indagar si el personal acadmico cuenta en trminos de actualidad con

el acervo bibliogrfico que necesita para realizar sus actividades de investigacin y docencia. Variables que participan: 27.1. Nmero total de ttulos que ofrece el departamento a sus acadmicos en su centro de informacin o biblioteca. Elementos cualitativos: 27.2. Valoracin del acervo bibliogrfico del departamento en cuanto a su obsolescencia o actualidad. Identificacin:

Nivel de actualidad del acervo bibliogrfico del departamento para la realizacin de actividades de investigacin y docencia.
Estndar deseable:

Juicio de actualizado en la valoracin del acervo bibliogrfico del departamento

Es importante mencionar que la mayora de los indicadores propuestos en este sistema de valoracin de la productividad acadmica ya existen, aunque es una prctica comn presentar los datos de manera individual, no como sistemas o conjuntos integradores. Por lo que al extraer aquellos datos para ser analizados de manera integrada y comparativa, la interpretacin en conjunto cobra sentido y coherencia proporcionando una panormica distinta. A cada uno de los indicadores incluidos se le dio un tratamiento que consisti en la revisin, anlisis, replanteamiento, pertinencia, prueba de sensibilidad, incorporacin de su estndar normativo, y por ltimo, su aplicacin, como se explica a continuacin: La revisin se bas en un reconocimiento de criterios e indicadores que se han utilizado en otros programas o proyectos relacionados con la produccin de los acadmicos, en sus diversas dimensiones de evaluacin, tal es el caso de ANUIES, SNI, UdeG y CONACYT, en Mxico, mencionados en prrafos anteriores; as como el Proyecto Nadeau (Proyecto de Validacin Institucional e Internacional sobre Criterios e Indicadores de Calidad en la Educacin Superior, que consiste en la continuacin del proyecto pan-canadiense iniciado y dirigido por Nadeau en 1993, que implic a 80 universidades canadienses y 250 colegios comunitarios de ese pas, permitiendo la identificacin de 111 criterios generales y 1447 indicadores de calidad y excelencia para estudiantes, profesores, administradores, programas de estudio, servicios institucionales internos y del contexto institucional externo). El anlisis se fundament en determinar cules de esos indicadores podran incluirse o descartarse principalmente por la claridad, viabilidad, confiabilidad y validez de cada indicador. El replanteamiento y la pertinencia estribaron en ir acotando los indicadores en consideracin a su pertinencia y significatividad. Con el listado preliminar de indicadores se realiz una prueba de sensibilidad que consisti en presentar en su conjunto los indicadores a tres acadmicos con experiencia en las reas de investigacin, extensin y docencia, que pudiesen responder de manera rpida, confiable y

sincera sobre la congruencia de dichos indicadores, en el sentido de indagar si la productividad acadmica departamental podra ser valorada a travs de los indicadores propuestos para tal efecto. En cuanto a la incorporacin de su estndar normativo, se refiere a la descripcin del estndar que ayuda al reconocimiento de que la expresin fctica de los indicadores ser considerada como la correcta, completa o tendencialmente satisfactoria para cada uno de ellos (Coronado, 1999, p. 8). Dicha incorporacin es el resultado de un anlisis basado en diversos cuestionamientos que se hicieron como parte de este trabajo a un grupo de investigadores de la propia Universidad de Guadalajara con experiencias similares en la produccin acadmica y a partir de ah se establecieron los mnimos para cada variable. Los estndares incorporados fueron aceptados por los acadmicos entrevistados, ya que los consideraron como requerimientos mnimos para el desempeo de las actividades de cada rea. Despus de pasar la prueba de sensibilidad, los indicadores fueron aplicados, integrando documentos como informes de actividades de cada departamento; informes de actividades presentadas por los rectores de los respectivos centros universitarios; listados del personal acadmico adscritos a cada departamento; lneas y proyectos de investigacin; oferta de cursos; organigramas departamentales; documentos de informacin general, como folletos o pginas electrnicas de cada departamento, listados del personal promocionado por la UdeG y la pgina web de la propia universidad. Como actividad previa al trabajo de campo se elabor una gua de cuestionario dirigido a los jefes de los tres departamentos que conforman este estudio y cuya informacin complement el anlisis de los datos cualitativos considerados importantes sobre aspectos que no fueron encontrados documentalmente. Para sistematizar esta informacin se utiliz el anlisis intra e interdepartamental, esto significa que se establecieron comparaciones al interior de cada departamento y despus entre los departamentos.

Resultados
Caracterizacin Departamental

Se realiz un primer acercamiento comparativo (Caracterizacin Departamental) que permiti conocer con mayor precisin los aspectos acadmicos (descriptores) ms relevantes de cada uno de los departamentos.

Dichos descriptores fueron:

Planta acadmica = nmero de integrantes de la planta acadmica incluidos los investigadores y tcnicos acadmicos en sus categoras de titulares, asociados y

asistentes. Grado Acadmico Promedio (GAP) = se refiere al nivel de estudios terminados del personal acadmico en promedio por departamento.[2] Miembros del Sistema Nacional de Investigadores = nmero de investigadores pertenecientes al SNI Promedio de promocin acadmica = nmero de niveles ascendidos del personal acadmico en el Programa de Estmulos Acadmicos (PROESA) y en el Programa de Actualizacin Acadmica (PROACTUAL), en promedio por departamento. Personal que obtiene estmulos en los programas acadmicos de la UdeG = nmero de acadmicos que obtienen estmulos econmicos del Programa de Retencin y Estmulos a Grupos de Liderazgo Acadmico (PRYEGLA), del programa de estmulos a docentes y del programa de estmulos a la productividad acadmica. Grupos de Liderazgo = nmero de grupos pertenecientes al Programa de Retencin y Estmulos a Grupos de Liderazgo Acadmico (PRYEGLA) adscritos al departamento Proyectos de investigacin realizados entre 1997 y 1999 Estructura organizativa departamental = unidades, coordinaciones o laboratorios que forman el departamento. As como la interaccin entre dichas coordinaciones. Programas docentes que se ofrecen = en los distintos niveles de licenciatura, maestra y doctorado. Actividades de difusin = son eventos que se ofrecen peridicamente por parte del departamento.

Segn los resultados de la caracterizacin departamental, los tres departamentos: Cuentan con acadmicos miembros del Sistema Nacional de Investigadores; participan en programas de promocin acadmica; participan en el Programa de Grupos de Liderazgo Acadmico; la proporcin del personal acadmico que se beneficia con los programas de estmulos implementados por la propia universidad en estos tres departamentos rebas el 35%, dato cercano que coincide con la poltica de distribucin en el mbito nacional de estmulos que establece un 30% de beneficiados en las instituciones educativas. Desarrollan proyectos de investigacin individuales y colectivos; la estructura organizativa obedece a la propuesta de modelo departamental implementada para la Red, ya que la figura mxima de toma de decisiones al interior de un departamento es el Colegio Departamental, presidida por el jefe de cada departamento y la existencia de unidades, coordinaciones, laboratorios o academias. En cuanto a sus actividades de difusin y/o extensin los tres departamentos reportan llevar a cabo peridicamente ciertos eventos, como son los seminarios en el mbito internacional y actividades de apoyo tcnico de carcter permanente en el mbito local y regional. Planta Acadmica es el dato utilizado para integrar los resultados de la produccin proporcional del personal acadmico en cada departamento

Aplicacin del Sistema de Indicadores

En la Grfica 1 se puede observar comparativamente la valoracin realizada a los tres departamentos por reas y con respecto a los estndares mnimos establecidos.

Grfica 1 Valoracin comparativa de las reas analizadas en los tres departamentos

Departamento A En trminos generales el Departamento A lleg casi a los estndares mnimos establecidos en este estudio para poder detectar su nivel de productividad acadmica, pues sumando los resultados finales integrados en cada rea, obtuvo un total de 228 puntos, cuyo promedio corresponde al 93.82% respecto al promedio general de 243 puntos.
La investigacin constituye el rea fuerte del departamento, ya que de sus once indicadores, cuatro rebasan los estndares, cuatro ms estn en el nivel de los estndares y slo tres indicadores se ubican por debajo de los estndares mnimos establecidos. En la extensin, de sus ocho indicadores, dos rebasan los estndares, uno est en el nivel de los estndares y cinco se ubican por debajo de los estndares mnimos establecidos para esta rea. Con respecto a la docencia, de sus ocho indicadores, uno rebasa el estndar, tres estn en el nivel y cuatro se ubican por debajo de los estndares mnimos establecidos para el rea de docencia.

Departamento B
La productividad acadmica del Departamento B se puede medir en un 88.88% considerando los estndares establecidos en este estudio, ya que la suma de los resultados finales que integran cada rea fue de 216 puntos, respecto al promedio general de 243 puntos.

De las tres reas analizadas, la investigacin constituye segn los resultados de este estudio el rea mayormente fortalecida, ya que de sus once indicadores, dos rebasaron los estndares, cinco ms se encuentran en el nivel mnimo de los estndares y cuatro indicadores se ubican por debajo de los estndares mnimos establecidos. La prioridad otorgada a la investigacin se relaciona con la informacin proveniente de la Caracterizacin Departamental, en la que se establece que el Departamento B cuenta con una planta acadmica cuyo Grado Acadmico Promedio es de Pasantes de Maestra, de los cuales el 17% son miembros del Sistema Nacional de Investigadores. El posicionamiento de los indicadores de las reas de extensin y docencia, se ubican de manera similar ya que de los ocho indicadores que conforman cada una de estas reas, uno rebas el estndar, uno se encuentra en el nivel mnimo de los estndares y seis indicadores se sitan por debajo de los estndares mnimos establecidos, en cada una de ellas.

Departamento C
El Departamento C demuestra su liderazgo en las actividades de investigacin rebasando por dos puntos el mnimo establecido en los estndares que conforman esa rea en este estudio. Pero sumando los resultados finales integrados por cada rea, obtuvo un total de 175 puntos, cuyo promedio corresponde al 72.01% respecto al promedio general de 243 puntos. La investigacin constituye el rea fuerte del departamento, ya que de sus once indicadores, seis rebasaron los estndares establecidos, tres se sitan en el nivel mnimo y solamente dos indicadores se ubicaron por debajo de los estndares mnimos planteados. Esta prioridad otorgada a la investigacin se relaciona con la informacin proveniente de la Caracterizacin Departamental en la que se establece que el Departamento C cuenta con una planta acadmica cuyo Grado Acadmico Promedio es de Pasantes de Maestra, de los cuales el 6% son miembros del Sistema Nacional de Investigadores. El posicionamiento de los indicadores de las reas de extensin y docencia, se ubican de manera similar ya que de los ocho indicadores que conforman cada una de estas reas, ninguno rebas el estndar, solamente uno se encuentra en el nivel mnimo de los estndares y siete indicadores se sitan por debajo de los estndares mnimos planteados, en cada una de ellas. Para el caso de la docencia, este departamento en comparacin con los otros dos, cont con el porcentaje ms alto de acadmicos que reciben estmulos al desempeo docente 23%, lo que podra significar que los niveles correspondientes a esta rea deberan ser ms altos.

Integracin de resultados por reas y criterios

Efectividad en la investigacin Medir el inters de la sociedad por la investigacin realizada en el departamento es un proceso

bastante complejo, pero al realizar el cruce de indicadores resulta interesante detectar la congruencia entre los mismos. Los tres departamentos demuestran la existencia de convenios con otros organismos, comprueban que se emitieron notas laudatorias por parte de la comunidad, o por parte de organismos pblicos o privados, nacionales y extranjeros.

La autovaloracin expresada por los jefes de departamento les concede niveles importantes de significacin a las investigaciones y las contribuciones que de ellas se derivan, en los mbitos regionales, nacionales e internacionales.
Adems, la existencia de distinciones otorgadas a la investigacin por organismos externos a la propia universidad en los tres departamentos es un elemento importante de congruencia con la efectividad de la investigacin a nivel departamental. Por esto con los resultados obtenidos de los indicadores en esta rea, queda demostrado que la investigacin en los tres departamentos analizados puede considerarse efectiva.

Eficacia de la investigacin Los ejercicios de evaluacin interna de actividades de investigacin realizados por lo menos una vez anualmente se asocian con el desarrollo de trabajos de investigacin en equipo, ya que dos departamentos manifestaron realizar dichos ejercicios evaluativos, y los tres departamentos cuentan con equipos de investigacin. Por lo que se puede afirmar que s son eficaces las investigaciones que se llevan a cabo en los departamentos analizados.

Eficiencia de la investigacin Los tres departamentos manifestaron que cuentan con equipo de cmputo y espacios fsicos adecuados para realizar las labores acadmicas. Aunque por otro lado, tambin coincidieron los tres departamentos en considerar deficiente el nivel de gestin para obtener recursos financieros de apoyo a la investigacin. Con base en lo anterior, se puede entonces afirmar que la eficiencia de la investigacin se relaciona con el aspecto de la obtencin de recursos financieros, en cuanto a la gestin de los mismos.

Suficiencia de la investigacin El promedio de apoyos tanto internos como externos para los proyectos de investigacin fue considerado insuficiente en dos departamentos. Este tipo de apoyo financiero cubre los requerimientos bsicos, como son sustancias y materiales, en ocasiones se considera el pago de honorarios para asistentes, adquisicin de bibliografa, y pagos de viticos en los casos en que se necesita salir de la ciudad o del pas con fines de investigacin. De acuerdo con los resultados obtenidos para este criterio, se puede establecer la correlacin

entre insuficiencia de espacios para la realizacin de las actividades acadmicas y la insuficiencia de financiamiento para los proyectos, aunque los tres departamentos cuentan con suficiente equipo de cmputo. Por lo que se puede afirmar que no es suficiente la capacidad de recursos disponibles para la investigacin en los departamentos analizados.

En resumen, el rea de la investigacin segn la evaluacin realizada e integrando los resultados de los tres departamentos es efectiva y eficaz lo que puede considerarse como los puntos fuertes dentro del rea; y los puntos dbiles son la deficiencia, as como la insuficiencia de recursos financieros de apoyo a la investigacin.

Eficacia en la Extensin La membresa a sociedades y asociaciones cientficas vinculadas al campo disciplinar implica la presencia del departamento mediante su personal acadmico en la presentacin de resultados de trabajos de investigacin principalmente. Uno de los departamentos analizados demuestra tener vinculacin al campo disciplinar por pertenecer a diversas asociaciones de su competencia profesional. En cuanto al desarrollo de actividades editoriales que podra ser la elaboracin de artculos de difusin cientfica, artculos de divulgacin cientfica, o manuales, reportes tcnicos o ensayos producidos por los acadmicos del departamento, solamente uno de estos tres departamentos alcanz el estndar propuesto. En lo referente a la elaboracin de captulos ninguno de los tres alcanz el estndar. La produccin especializada de libros en cambio, s rebas el estndar en dos departamentos. La presentacin anual de ponencias y/o conferencias por parte de los acadmicos en eventos especializados de anlisis o difusin cientfica fue apenas alcanzada por un departamento (que coincidentemente es el que tiene mayor nmero de miembros inscritos a sociedades cientficas), los otros dos quedaron muy por debajo del estndar. La correlacin entre estos indicadores permite lanzar la afirmacin de que la extensin en los tres departamentos no es eficaz.

Eficiencia en la extensin Solamente uno de los departamentos valora como eficiente el otorgamiento de recursos para la participacin de acadmicos en eventos especializados, se puede afirmar que no hay eficiencia en la extensin de los departamentos analizados.

Suficiencia en la extensin Se consider aqu la capacidad para cubrir las necesidades de insumos financieros planteados para la realizacin de actividades propias de la extensin. Desafortunadamente los tres departamentos coincidieron en considerar que es insuficiente el apoyo que se otorga a sus

acadmicos para que puedan participar en eventos cientficos.

Actualizacin en la extensin An cuando uno de los departamentos cuenta con suscripciones a revistas cientficas nacionales e internacionales, no se puede afirmar en trminos generales que exista actualizacin en la extensin de los departamentos. En resumen, se interpreta que el rea de la extensin segn la evaluacin realizada e integrando los resultados de los tres departamentos no es eficaz, no es eficiente, no es suficiente y no cuenta con los elementos de actualizacin requeridos.

Efectividad en la docencia A nivel departamental cobra relevancia ofrecer al menos un programa docente exitoso y en los resultados obtenidos de este anlisis dos departamentos cumplieron con el estndar deseable, el tercer departamento tiene planeado ofrecer en el corto plazo un programa de posgrado. Otro factor importante para detectar la efectividad en la docencia lo constituye la elaboracin de materiales didcticos y las proporciones que resultaron de este anlisis no llegaron ni al 0.10 cuando se estableci que al menos dicha proporcin fuese de 1 material didctico elaborado por cada acadmico del departamento. Es difcil interpretar que por el slo hecho de contar con programas docentes exitosos se considere efectiva la docencia cuando result nula la elaboracin de materiales didcticos.

Eficacia en la docencia Aunque slo se considera un indicador para establecer cierta relacin de eficacia en la docencia, los tres departamentos que se incluyeron en este estudio obtuvieron un resultado muy por debajo del estndar en la direccin de tesis.

Actualizacin en la Docencia El personal acadmico no reporta en sus informes la asistencia mnima esperada a un curso disciplinar y a un curso de actualizacin docente (pedaggica y didctica) por ao en ninguno de los tres departamentos. Las proporciones resultantes apenas si llegan en uno de los casos al 0.57 en los cursos de actualizacin disciplinar. La preparacin y actualizacin de nuestros profesores en cuestiones pedaggicas y didcticas no rebas siquiera el 0.10, proporcin bastante baja.

En cuanto a la actualizacin de planes y programas docentes slo un departamento logr apenas llegar al estndar mnimo de una accin de este tipo. Y en lo que se refiere al acervo bibliogrfico que necesitan o requieren para realizar sus actividades de investigacin y docencia se consider que s esta actualizado en los tres departamentos. Considerando que el personal no se actualiza en el mbito disciplinar ni pedaggico, y que no actualizaron los planes de estudios se interpreta que no hay actualizacin en la docencia de estos tres departamentos an cuando cuentan con el acervo bibliogrfico actualizado.

Suficiencia en la docencia Aun cuando el acervo fue considerado como actual por los tres departamentos, slo se valor como suficiente en uno de ellos, precisamente el que cuenta con su propio centro de documentacin, por lo que se interpreta que es insuficiente el apoyo a la docencia en este sentido. En resumen, se interpreta que el rea de la docencia segn la evaluacin realizada e integrando los resultados de los tres departamentos no es efectiva, no es eficaz, no hay actualizacin en los docentes, no hay suficiencia de apoyos para la docencia.

Conclusiones
Mediante la aplicacin del sistema integrado de indicadores que se propone en este trabajo de evaluacin se confirma la posibilidad de valorar as como de establecer comparaciones valorativas de productividad de significacin relevante a nivel departamental en una institucin de educacin superior. Se confirm tambin el hecho de que si los datos obtenidos en cualquier evaluacin son vistos aisladamente, su valor no se aprecia con toda claridad, pero al correlacionarlos y analizarlos de manera entrelazada nos permite establecer comparaciones y dimensionar la informacin resultante desde una panormica distinta. Haber demostrado la posibilidad de una evaluacin con la modalidad integral resulta relevante en tanto se considera que las universidades podrn seguir impulsando y fortaleciendo los procesos de evaluacin internos con un enfoque distinto al que prevalece en algunas instituciones de educacin superior, y mediante la deteccin de los niveles de productividad acadmica prevalecientes, sera posible conocer los elementos de las funciones sustantivas que requieren ser fortalecidos para aumentar su calidad. Por lo que el sistema puede emplearse para detectar reas de oportunidad. En el caso de esta evaluacin la situacin actual de la productividad acadmica en los departamentos deja de ser slo una presuposicin y se convierten en hechos verificables y analizables. Sirve este modelo de evaluacin comparativa para detectar la produccin por reas y emitir juicios de valor respecto a la interaccin de los indicadores y sus variables por cada rea

y criterio considerado.

Se sugiere analizar ms a fondo la conceptualizacin que se tiene de la productividad acadmica de tal forma que se considere como la integracin de los resultados en relacin con las normas establecidas para tal efecto, normas que por s mismas implican la produccin equilibrada de actividades de las tres reas que conforman las funciones sustantivas universitarias: investigacin, extensin y docencia. Que las universidades logren rebasar el concepto de evaluacin en trminos slo de medicin, sancin o control de tal forma que en la prctica se proporcionen elementos de mejora en la toma de decisiones, derivados de las evaluaciones que se realizan al personal acadmico. Se considera pertinente ahondar la indagacin respecto al impacto de los ejercicios de evaluacin, probar sistemas de indicadores, impulsar reas detectadas como deficitarias, incluir indicadores de mayor complejidad y hacer de los indicadores guas de accin. Se constat que los instrumentos metodolgicos utilizados resultaron adecuados para lograr una aproximacin a los resultados de la modernizacin universitaria bajo el discurso de la excelencia acadmica, vista desde el ngulo de la productividad de su personal acadmico. Una caracterstica importante de los indicadores que se proponen es que por s mismos integran diversas variables que conforman un aspecto importante de la productividad acadmica, por lo que se puede partir de cada uno de ellos para realizar estudios posteriores ms especficos. Cada indicador nos da una ramificacin de posibilidades para realizar anlisis ms profundos. Lo que significa que si se tiene un inters particular por ampliar la informacin de algunos indicadores, es posible convertirlos en nuevos mbitos de la evaluacin, sin olvidar la consideracin de la viabilidad de acceso informativo como un aspecto que bien puede ser un obstculo de particular relevancia.

: SEP-ANUIES. 193-211 Coronado Ramrez, Gerardo (1999). Scriven, Michael (April 2000). Product Evaluation Checklist. En: The Evaluation Center. http://www.wmich.edu/evalctr/checklists/productevaluation.htm (Consultado en mayo de 2000) Scriven, Michael (s/f) Practical Program Evaluation. En: http:// www.wmich.edu (Consultado en mayo de 2000) Scriven, Michael (June 2000). The Logic and Methodology of Checklists. En: http://www.wmich.edu (Consultado en julio de 2000) Scriven, Michael (July 2000). Key Evaluation Checklist (KEC). Primarily for project/program/organization evaluation). En: http://www.wmich.edu (Consultado en julio de 2000) Stufflebeam, Daniel L. (November 2000) The Ten Commandments, Constitutional Amendments, and Other Evaluation Checklists. Conferencia presentada en Evaluation 2000.

Annual Meeting of the American Evaluation Association. Honolulu, Hawaii. November 4, 2000. Disponible en la direccin: www.wmich.edu/evalctr/checklists/checklistpaperAEA.pdf (Consultado en diciembre de 2000)

[1] Tomadas de listados que valoran programas, como el Formato para ingreso de programas docentes al Padrn de
Excelencia de CONACYT y los Indicadores y Estrategias para el mejoramiento de la Calidad en la Educacin Superior de Carlos Topete.

[2] Este indicador existe en la Universidad de Guadalajara desde 1998 en el proceso de Autoestudio que realiz la
misma institucin de acuerdo a la siguiente frmula: grado obtenido por el personal acadmico, cada grado tiene un valor, los valores obtenidos se suman y ese puntaje se promedia entre el nmero de acadmicos del departamento. El resultado corresponde a uno de los valores asignados a cada grado y en ese nivel se ubica a cada departamento. Por ejemplo el grado 7 equivale a nivel de maestra o estudiantes de doctorado. Se puede consultar en: Martnez, Estela (2001). P. 151

ARTICLE RECORD / FICHA DEL ARTCULO