Documentos de Académico
Documentos de Profesional
Documentos de Cultura
CELMAN. Sujetos y Objetos en La Evaluacion Universitaria
CELMAN. Sujetos y Objetos en La Evaluacion Universitaria
Como una piedra en bruto que cobra forma y brillo por acción
de las manos, el ojo, el cerebro y las orientaciones creativas del escultor
que la elige, conoce y transforma, la evaluación educativa pretende
iluminar las caras opacas de la vida institucional, dando protagonismo a
sus actores para que se apropien del espacio institucional, sean
partícipes de la elaboración del texto que los identifique y estén en
mejores condiciones de transformar, desde sus perspectivas utópicas, el
contexto situacional en el que se reconocen.
S. Celman
RESUMEN:
MARCO REFERENCIAL
1
Profesora titular de la cátedra Evaluación Educativa de la carrera de Ciencias de la Educación, Universidad
Nacional de Entre Ríos. Investigadora en temas educativos de evaluación, política y gestión escolar.
1
Por otra parte, dentro del campo teórico de la evaluación, se consolidan áreas de fuerte
confrontación que ponen de manifiesto profundas diferencias conceptuales, metodológicas
y ético-políticas al interior de la propia disciplina (House, 1995; Álvarez Méndez, 2001).
Estamos viviendo un cambio de ciclo, una época de fuertes crisis sociales, políticas y
culturales que afectan a los sistemas educativos y sus actores a través de los lineamientos y
formas de implementación de las reformas educativas de los 90 , que asumen
características peculiares en América Latina. En este caso, nos interesa destacar los
sistemas de evaluación de la calidad, con fuertes implicancias en el control2 y
diferenciación de sujetos e instituciones.
Una de las formas en que esta tensión habrá de resolverse tendrá que ver con los
avances y retrocesos de lo público dentro del ámbito de la educación y con el perfil que, por
su mediación, adopte la construcción de una nueva ciudadanía.3
2
Llama la atención la incorporación al lenguaje de las organizaciones sociales en general y educativas en
particular, del término monitoreo , propio de los campos empresariales altamente informatizados.
3
Cantero, G., Celman, S y equipo: Reformas educativas y ciudadanía . Informe final de investigación,
Facultad de Ciencias de la Educación, UNER, 2003.-
4
Lic. Susana Celman, La evaluación democrática: remando contra la corriente. . Jornadas Internacionales
de Investigación sobre la Universidad. Universidad Nacional de Río Cuarto 13 y 14 de junio de 2002.
2
han tenido a su cargo el protagonismo en la esfera de los aportes teóricos con aquellos que
generaron las huellas en el terreno empírico de las instituciones. Tampoco son los mismos,
aquellos que representan el poder de instaurar mecanismos evaluativos con los que tienen la
responsabilidad de conducir los procesos educativos .
El interjuego entre las reglas, las recurrencias, las culturas y las estrategias que
regulan las acciones de los sujetos individuales y colectivos (Bourdieu, 1988) connotarán
las distintas intencionalidades que, en ciertos momentos de esta historia, se diferencian
claramente y, en otros, se articulan y concurren en forma conjunta, representadas,
generalmente, por diferentes actores y gestores .
En ambos casos, parecería aceptarse que estos objetos de evaluación existen fuera
de la acción educativa, son algo sobre los cuales los actores del campo educativo concreto,
como sujetos sociales, no intervienen. Ajenos a ellos, los toman tal como son, para
someterlos, en este caso, a prácticas de evaluación. Desde esta perspectiva, se entiende que
los interrogantes habituales de los docentes y alumnos remiten, con una elevada frecuencia
a preguntar cómo se va a realizar la evaluación, restringiendo el problema a una cuestión
técnico-metodológica e instrumental.
3
caso y situación particular, la presencia de los rasgos o atributos esenciales del objeto que
es evaluado. Presencia, ausencia o grado en que dichos rasgos se verifican, son la base
concreta para construir el juicio evaluativo que incluye una valoración.
Estos ejemplos nos permiten precisar dos problemas: el primero, es que se excluye
del análisis evaluativo que, tanto un plan de estudios cuanto la duración de una carrera o un
diseño original de investigación, son propuestas, proyectos, construcciones contextuadas y
orientadas intencionalmente en una cierta dirección y, por ello, representan una toma de
postura dentro de otras teóricamente posibles, que involucran y definen a quienes lo
elaboraron. Y en segundo lugar, que lo propio de los proyectos educativos es que se
construyen en el campo de la práctica, en un juego dialéctico con los ambientes concretos
de aprendizaje, donde, a partir de este encuentro, ambos cambian, se transforman: ni el
proyecto permanece idéntico a como fue concebido ni el medio de aprendizaje mantiene
sus características iniciales. (Parlett y Hamilton, 1996). Por esto, los diseños experimentales
que suponen como condición de validez el mantenimiento invariable del contexto
situacional donde se realiza el experimento para poder medir solo la acción de la variable
objeto de investigación, son poco pertinentes al estudio de problemas educativos.
Desde otro lugar, presentaremos una concepción más compleja, inserta en una
postura que podría denominarse, en términos generales, constructivista. Veamos algunos
antecedentes: Gimeno Sacristán (1987) al caracterizar lo que él llama anatomía de una
práctica compleja afirma que la evaluación es un proceso de selección de un objeto dentro
del panorama de realidades que intervienen en la educación; una parcela o aspecto de esa
realidad. Implícitamente, parece afirmar que todo no se puede evaluar, precisamente por el
carácter complejo y dinámico de los objetos del campo educativo. Es necesario, entonces,
que el evaluador realice una operación, que, a modo de metáfora, podríamos asemejarla al
ajuste de la lente en una cámara fotográfica: reducir el foco para lograr mayor nitidez aún a
costa de disminuir la amplitud del panorama que se registra. Esta tarea de enfocar una
realidad es, según este autor, uno de los momentos iniciales del proceso de evaluación.
Como vemos hasta aquí, se mantiene la exterioridad del objeto respecto del sujeto, quien,
ante la imposibilidad de captar la situación a evaluar en su totalidad, prioriza algunas partes
sobre otras(1ra. Selección)
4
de la institución, se consideran más importantes y significativos para su conocimiento y
comprensión.
En ambos casos, están operando las teorías implícitas que ponderan y sostienen las
opciones realizadas; se ponen de manifiesto creencias acerca de la relevancia de estos
aspectos, concepciones éticas, valoraciones en las que se expresa una filosofía, una
ideología, una visión del mundo, toda una pedagogía implícita. La evaluación acota y
selecciona la realidad valorada, se tenga o no conciencia de esa decisión, se expliciten o no
los criterios de la reducción realizada. Aún en el caso de las pruebas psicométricas, de un
test de inteligencia por ejemplo, estos instrumentos que se han elaborado con un especial
resguardo de los criterios de objetividad y confiabilidad, no miden, la inteligencia en
términos absolutos, sino algunos comportamientos y procesos que a priori se han
seleccionado y se admiten como representantes de la misma.
Charles Hadji5, define a la evaluación como una lectura orientada sobre el objeto a
evaluar. Se requiere, dice, tomar distancia de la realidad que se analiza para poder
pronunciarse sobre ella en un contexto decisional dominante. No existe una lectura directa
de la experiencia; hay siempre un proceso de interacción entre el evaluador y la realidad a
evaluar. En función de las propiedades de esa realidad, el evaluador construye el referente,
es decir, aquello en función de lo cual se va a efectuar la evaluación; aquello que le permite
pronunciarse sobre la realidad que evalúa, el lugar donde nos paramos para emitir el
juicio de valor. (Bertoni y otros, 1996)
Por otro lado, es importante destacar que el objeto no se establece solamente en las
primeras declaraciones y definiciones previas, sino que se constituye también a posteriori,
en la práctica concreta, procesual y dialéctica de la evaluación que, al construir
conocimiento sobre el objeto lo construye como tal. Al evaluar, vamos conociendo nuevas
facetas de ese objeto; el objeto se enriquece a medida que lo conocemos; el conocimiento
que vamos logrando sobre dicho objeto, abre nuevas perspectivas de indagación.
5
Hadji, Ch (1992): L Evaluation démystifiée. Edit. ESF, París, France. En este libro, el autor desarrolla
importantes aportes en la línea de la evaluación formativa y educativa, sin descuidar aspectos metodológicos
y éticos propios de las prácticas en instituciones pedagógicas.
5
educación y ampliar nuestras perspectivas acerca de qué significa saber . Se dirige
especialmente a quienes viven y trabajan en las escuelas, como contribución a iluminar su
experiencia educativa, como una ayuda a ver y comprender.
Sostiene este autor que. a semejanza del crítico de arte, que tiene por tarea ayudar a
otros a ver las cualidades que posee una obra de arte, la crítica educativa funciona como
una comadrona de la percepción. La ayuda a nacer, después la refina y la ayuda a ser más
aguda .
Es esta idea de la mirada que construye su imagen del objeto al mismo tiempo que
se modifica en la acción de percibirlo, que le permite entrar al problema de la Objetividad y
subjetividad en la investigación y evaluación cualitativas. Trabaja los conceptos de Newell
(1986) de objetividad ontológica y objetividad de procedimiento con la aspiración, dice, de
poder convencer al lector de que la primera no puede, en principio, proporcionar lo que
esperamos y que la segunda proporciona menos de lo que pensamos. Intentaré presentar
una síntesis de su argumentación.
¿Qué se entiende habitualmente por objetividad? Ver las cosas tal como son,
conocerlas en su estado ontológico. Buscamos, dice Eisner, la verificabilidad, tanto en la
percepción como en el entendimiento. Deseamos ver lo que está realmente ahí afuera. La
verificabilidad implica una relación isomórfica entre afirmación y realidad. Los griegos
aspiraban a alcanzar el saber cierto y verdadero. Por eso, su intento de diferenciar el saber
(epistéme) de la creencia (doxa). Establecida la teoría de la correspondencia entre saber y
verdad, conocer es descubrir las leyes que gobiernan el universo. Se va a la búsqueda de un
mundo objetivo, cognoscible objetivamente. La objetividad de procedimiento es la
aspiración al desarrollo y utilización de un método que elimine o aspire a eliminar la
incumbencia del juicio personal en la descripción y valoración de un estado de hechos. Uno
de los ejemplos presentado por el autor es el de las denominadas pruebas objetivas, donde,
una vez contestada la prueba, identificar las respuestas correctas o incorrectas no precisa de
interpretación, tan es así que esta tarea así como la puntuación, la puede realizar un escáner
óptico. Se trata, entonces, de un caso de objetividad de procedimiento.
¿De qué manera podemos saber si nuestra perspectiva ontológica sobre la realidad
se iguala o se corresponde con ella?. Para saberlo, necesitaríamos conocer por un lado la
realidad y por el otro, nuestros puntos de vista sobre ella; pero si conociéramos la realidad
tal como es, no necesitaríamos tener un punto de vista sobre ella y a la inversa, si no
podemos conocer la realidad tal como es, no podemos saber si nuestro punto de vista
coincide o no con ella. Para discutir la afirmación de que una perspectiva verdadera de la
realidad es la que permite predecir o controlar los acontecimientos, el autor recurre a
Popper, quien afirmó que nunca podemos verificar la verdad de una afirmación, solo
podemos refutarla y aún entonces, nunca completamente.
6
Hadji6 nos permite avanzar un paso más en la consideración de este tema. Afirma
que el evaluador no es un instrumento de medición, es el actor de una comunicación
social y reconoce la incidencia de las situaciones y los contextos sobre la evaluación.
Acuerda con Cardinet (1991) en la elaboración de un modelo que se aparta de la medición,
característico de los enfoques psicométricos, para proponer una aproximación sociológica
al campo de la evaluación educativa. Afirma que las performances cognitivas de los
sujetos son dependientes de las condiciones sociales en las que ellos se desarrollan, así
como las percepciones del evaluador de esas performances son igualmente
dependientes del contexto social. Lo que en una época y en un medio se consideren
cuestiones dignas de ser estudiadas, conocidas y valoradas, así como los estándares y
referentes desde los cuales se las juzguen, se construyen a partir de las significaciones
culturales hegemónicas dentro de ese contexto.
Retomando la idea del proceso evaluativo como lectura guiada de la realidad, cabe
aclarar que, como en toda acción de conocimiento, no se trata solo de un acto individual.
El/los evaluadores son, al menos en parte y posiblemente al mismo tiempo, portadores y
creadores de modos de comprensión, sistemas de significación que recuperan y
transforman lo heredado e internalizado social e institucionalmente en particulares
espacios y tiempos. La cultura incide en la creación del objeto, dice Gimeno Sacristán7 y el
lenguaje es vehículo de transmisión de las representaciones y los valores, constituyéndose
en fuente de poder y autoridad. Pero en este juego de cara y contracara, las palabras, las
significaciones son también recreadas por y desde la subjetividad del evaluador, como una
consecuencia de la relación entre un sujeto particular y su medio, vehiculizada por un
determinado lenguaje apropiado y construido al mismo tiempo.
Entiendo que las prácticas nunca son la realización concreta y precisa de los principios
constitutivos de los cuerpos teóricos, sino que son estos, precisamente, los que se van
estructurando y desestructurando, al menos en parte, en el transcurso y como resultado de
las experiencias de confrontación empírica, al mismo tiempo que las ideas, conceptos y
criterios orientan las propuestas y los modos de acción particulares.
Lave, en el primer capítulo del estupendo libro que publica con Chayklin8 sintetiza las
conclusiones de un congreso en el que culminó un trabajo de varios años entre psicólogos,
sociólogos y antropólogos de Suecia, Dinamarca, Finlandia, Francia, Suiza y los Estados
Unidos sobre lo que inicialmente denominaron el problema del contexto y luego se fue
definiendo alrededor del tema de la actividad socialmente situada: :
6
Op. Cit.
7
Op. Cit.
8
Chayclin, S y Lave J (2001): Estudiar las prácticas. Perspectivas sobre actividad y contexto. Edit.
Amorrortu. Bs. Aires.
7
2. El aprendizaje es parte integrante de la actividad en y para el mundo en todo
momento.
3. Lo que se aprende es siempre complejamente problemático.
4. La adquisición de conocimiento no es una simple cuestión de absorber
conocimiento. Por el contrario, las cosas que se suponen categorías naturales, como
cuerpos de conocimiento , aprendices y transmisión cultural , requieren
reconceptualizaciones como productos culturales y sociales.
En las tres experiencias, el proyecto de evaluación se puso en práctica entre los años
2000 y 2002.en facultades y/o carreras universitarias. En el primero, se organizó con miras
a evaluar la enseñanza de grado; en el segundo y en el tercero, la intención estuvo centrada
en la evaluación curricular. Los objetivos generales de los proyectos coincidían en intentar
conocer qué estaba ocurriendo en cada uno de estos núcleos de la vida académica, para
posibilitar procesos de mejora.
8
su génesis, sus relaciones con otros aspectos, su valor en el contexto general de la carrera,
sus aspectos constitutivos). La síntesis evaluativa de cada taller fue transcripta por los
observadores y devuelta a los participantes para su aprobación y eventual modificación. Las
conclusiones de estos talleres se trabajaron, luego, en reuniones con docentes y miembros
del equipo de gestión, a fin de ampliar perspectivas y triangular la información. Finalmente,
se elaboró un documento que se elevó a Consejo Directivo conteniendo la síntesis de la
evaluación de los núcleos problemáticos seleccionados y propuestas para su posible mejora.
9
En el momento de redactar este artículo, se están tabulando y procesando los datos provenientes de dichos
cuestionarios.
9
tal tarea, como sujetos epistémicos plenos, es decir, con capacidad para decidir y participar
en el trabajo de constitución del conocimiento. Creemos que una condición de posibilidad
para que esto ocurra es que, a su vez, se los reconozca institucionalmente como sujetos
sociales con categoría ciudadana, es decir con potencialidad y disposición para pensar,
cuestionar e intervenir en lo público.
Al mismo tiempo. desde mi lugar, fue necesario explicitar el marco general a partir del
cual he construido un modo de comprender y proponer el trabajo en este campo. Entiendo
que no se trata de un saber y una acción de carácter técnico. Es más bien una forma de
asumir una praxis profesional, dentro de la cual, existen límites innegociables, teóricos y
éticos. En mi caso, los rasgos generales de la postura asumida son coincidentes con los que
hemos denominado Evaluación educativa democrática y participativa, mediante
procesos de construcción colegiada, con resguardo de la transparencia, consulta a
fuentes diversas y comunicación de la información a los diferentes grupos. (Celman,
2002)
Retomando este concepto, entiendo que este lugar de asesor puede ser cumplido con
una u otra orientación. Podría priorizarse en la evaluación, su punto de vista profesional y
ser quien, desde ese lugar de saber-poder elabore un diseño que se corresponda con su
postura teórico-metodológica. De ese modo, el proyecto le pertenece, aún cuando su
ejecución pueda incluir algunas acciones descentralizadas (por ejemplo, que sean otros los
que apliquen algunos instrumentos, respondan a los mismos y/o tabulen la información
recogida). Pero en este caso lo sustantivo es que la racionalidad imperante con que se ha
estructurado y concebido, que lleva implícita su orientación y finalidad, es propia del
evaluador y no de los sujetos de la comunidad universitaria.
10
No se trata de negar un saber teórico y experiencial construido por pertenencia al
campo, que, posiblemente, lo diferencia de los que caracterizan a los miembros de la
institución. Es más, este conocimiento es necesario y, si no existe en esa universidad
personas o grupos que lo sustenten, se requerirá su apoyo externo. El trabajo de la
Evaluación Educativa Institucional involucra saberes especializados en este campo para
ayudar a encarar, con solvencia, un proyecto válido. Pero esto solo no basta.
Creemos que el núcleo del problema radica en reconocernos como sujetos políticos que
interactúan en instituciones sociales históricamente constituidas, conformando una praxis
siempre en interjuego con otros. Se trata, entonces, de construir o encontrar, remando
contra la corriente , los modos de crear un ambiente de estudio y de trabajo que permita
una interacción muy particular y en el que se den ciertas condiciones que garanticen la
habilitación de prácticas democráticas.
10
En términos de Ardoino: el control deviene prácticamente normativo para informar del fenómeno o de la
acción a la cual se aplica; esta normativa es, de todas formas, lógica (identidad, conformidad,
compatibilidad, coherencia) y moral. Se pasa así, insensiblemente, de lo verdadero al bien o a lo bueno a
través de la noción de corrección .(Ardoino y Berger, 1989)
11
concepciones políticas respecto a la sociedad y el futuro. Esos debates y combates ponen
de manifiesto que la evaluación forma parte importante de las estrategias políticas de la
universidades , de los Estados y de las sociedades, pero son aspectos de un universo mucho
más amplio y complejo. La solución de esos conflictos no puede estar sólo en las
instituciones universitarias o sólo en agencias de los gobiernos, como si fueran problemas
apenas técnicos. Es verdad que los gobiernos necesitan instrumentos técnicos que apoyen
sus decisiones político-administrativas. Pero, en definitiva, la universidad no puede dejar
de participar activamente de esos debates públicos. Debe asumir públicamente su
función crítica y, siempre en procesos de construcción colectiva, procurar obtener la
hegemonía de sus concepciones y prácticas de evaluación institucional, estando claro
que nadie tiene el patrimonio exclusivo de la verdad y que todo proceso es una
construcción .
12
BIBLIOGRAFÍA
ÁLVAREZ MÉNDEZ, J.M. (2001): Evaluar para conocer, examinar para excluir.
Morata, Barcelona.
13