M

Observar para evaluar al profesorado: una experiencia prctica. 167-181 Jos Mayorga Fe rn ndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

11

4`

vr

Observar para evaluar al profesorado: una experiencia prctica

Ma Jos Mayorga Fernndez Emelina Lpez Gonzlez
Universidad de Mlaga

En los ltimos tiempos se han realizado un elevado nmero de investigaciones centradas en !a evaluacin del profesorado. emplendose diferentes mtodos de investigacin. En este trabajo planteamos una experiencia prctica de evaluacin de/profesorado mediante una metodologa observacional, porque este tipo de metodologa permite profundizar en los intercambios que se producen en el aula. Un aspecto importante a! trabajar con la metodologa observacional es el control de calidad de los datos, por lo que se ha conocido la solidez de los datos recopilados mediante la tcnica de concordancia de los registros de observacin entre dos observadores. Posteriormente, para su tratamiento, se han realizado varios tipos de anlisis secuenciales. Los resultados obtenidos han proporcionado informacin valiosa sobre las conductas que se desarrollan en el aula y, por supuesto, de algunas variables que pueden estar influyendo en el proceso de enseanza-aprendizaje. Lately, a considerable number of papers have been published on teachers evaluation, following different meted of researchs. In this study we have approached to a practice experience of evaluation of the faculty, by means of an observational methodology, because this type of methodology allows to deepen in the exchanses that are produced in the classroom. Control of data quality is an important aspect when working with observational metholodogy. Concordance technique of observational registers among observers it is recognized as a sure sound way of identifying the collected data. Subsequently, for their processing, various types of sequential analisis have been carried out. Results obtained have provided valuable information on the behaviors that were developed in the classroom and, of course, some variables that may be influencing in the learning-teaching process.

1. Introduccin
La mayora de los estudios centrados en la investigacin del proceso de Enseanza-Aprendizaje han empleado tcnicas de anlisis superficiales y han analizado cuestiones como, por ejemplo, la ratio profesor-alumno, los recursos tecnolgicos disponibles, anlisis documentales, etc. En este caso hemos pretendido focalizar el objeto de estudio, para lo cual planteamos una investigacin empleando la metodologa observacional.

167

XXI, Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

Universidad de Huelva 2009

XX 1

Observar para evaluar al profesorado: una experiencia prctica. 167-181 Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

Revista de Educacin

La observacin del proceso de Enseanza-Aprendizaje es una tarea laboriosa, a la vez que compleja. La trascripcin de las situaciones, la identificacin de los caracteres, tanto del profesorado como del alumnado, la elaboracin sistemtica de cdigos de que hacen referencia a los diferentes aspectos considerados, son cuestiones que tenemos que abordar para poner en prctica un estudio de estas caractersticas. En este trabajo hemos tenido en cuenta determinados aspectos relativos a la actividad que se desarrolla en el da a da en el aula y, ms concretamente, las conductas que realiza el profesor cuando imparte su docencia. Esto conlleva adentrarse en unos condicionantes de la actividad docente que hemos organizado en varios niveles de concrecin: a. b. c. Nivel inicial: tareas planteadas por el profesor. Nivel de interaccin superficial: movimientos corporales, gestuales y establecimiento de la comunicacin. Nivel de interaccin profunda: interacciones comunicativas (anlisis en profundidad de las intervenciones verbales del profesor).

De todos es sabido que la interaccin profesor-alumno influye sobremanera en el desarrollo del proceso de Enseanza-Aprendizaje. Adems, es lgico pensar que los fenmenos interactivos entre los miembros del grupo-clase son complejos y presentan diversidad de relaciones. Esa diversidad ha sido la razn por la que hemos decidido plantear diferentes niveles de concrecin en este estudio. Debemos aclarar que el nivel de interaccin profunda surge a partir del nivel de interaccin superficial cuando se marcan los cdigos relacionados con el establecimiento de la comunicacin.

2. Diseo de Investigacin
Para plantear el diseo de esta investigacin se han tenido en cuenta los siguientes criterios delimitadores de los diseos observacionales (Anguera, 2001): a. b. c. La temporalidad del registro. Las unidades observadas en funcin de los sujetos. El nivel de respuesta o dimensionalidad de las categoras incluidas.

A partir de estos criterios hemos decidido sustentar nuestra investigacin en un Diseo de Seguimiento, Ideogrfico y Multidimensional, denominado SIM. Es de seguimiento porque vamos a observar durante un perodo de varios meses; la observacin se va a distribuir a lo largo de varias sesiones. Ideogrfico porque, siguiendo a Anguera (2001), trabajamos con un grupo de individuos que comparten un criterio de agrupacin. El citado criterio es que son profesores universitarios con una predisposicin positiva hacia el tema de la evaluacin de la docencia. Por ltimo, contempla una dimensionalidad de las categoras incluidas porque, como ya hemos sealado anteriormente, trabajamos segn varios niveles de concrecin, donde coexisten diferentes niveles taxonmicos de conductas.

3. Objetivos
El objetivo de la investigacin es conocer qu conductas desarrollan estos profesores durante el proceso de Enseanza-Aprendizaje, ya que esas conductas, inevitablemente, influyen en la interaccin con el discente y, por tanto, en la calidad de la enseanza. Con ello no pretendemos afirmar que toda la responsabilidad de la calidad de la enseanza descanse en manos del profesorado, sino que el profesor es una parte importante a tener en cuenta.
XXI, Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

168
Universidad de Huelva 2009

 Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

Q -=`_-_Q

Al

Para hacer funcional este objetivo incluimos las siguientes matizaciones:

a. b. c. d. Identificar qu tareas docentes realizan cada uno de estos profesores: explicaciones tericas, realizacin de prcticas u otras actividades complementarias. Conocer los movimientos espaciales que realizan los profesores en el aula. Concretar qu interacciones verbales mantienen los profesores con sus alumnos. Valorar en qu medida las distintas conductas observadas permanecen estables en el tiempo. Conocer la influencia que las conductas relativas a las tareas docentes estn ejerciendo sobre las interacciones verbales del profesor.

e.

Para alcanzar estos objetivos realizamos dos tipos de anlisis. En primer lugar, un anlisis secuencial longitudinal (relacionado con los objetivos: a, b, c y d), y en segundo, un anlisis secuencial transversal (relacionado con el objetivo e).

4. Muestra
Para el desarrollo de este estudio hemos seleccionado a un grupo de profesores de la Universidad de Mlaga. Esa seleccin se ha realizado mediante un muestreo intencional atendiendo a un criterio concreto: no rechazar determinadas situaciones de evaluacin y lo que ello implica, como por ejemplo, la presencia del observador en el aula. Por tanto, los profesores que configuran la muestra son un total de seis, cinco profesores y una profesora, pertenecientes a titulaciones de Ciencias Sociales, as como de Ciencias Naturales y de la Salud. Hemos considerado un total de seis sesiones de observacin por cada profesor. Las distintas sesiones han sido grabadas en vdeo, con el consentimiento del profesor y de los alumnos, para evitar que se pierda informacin. Los das de grabacin se eligieron mediante un muestreo aleatorio simple, a lo largo del segundo cuatrimestre del curso acadmico 02/03. Las sesiones de observacin se han extendido desde el 26 de febrero al 17 de mayo. No hemos dejado ninguna observacin para junio con la intencin de no afectar al perodo de exmenes. La finalidad que se ha buscado siguiendo este muestreo es que los profesores no conocieran con anterioridad el calendario de observacin, evitando de esta forma que prepararan las clases ms de lo habitual. Al objeto de que no se produjeran desajustes en las grabaciones, hemos acordado que si un profesor, por alguna razn, faltara a clase, esa observacin se pasara automticamente al siguiente da de clase con el grupo de alumnos que est participando en la investigacin. En la prctica, por motivos ajenos a la investigacin (exmenes previos al calendario oficial) el profesor n 4 ha sido grabado en una ocasin menos que los dems profesores. Los datos observacionales los hemos considerado como datos de tiempo, siguiendo a Bakeman y Quera (1996). Se ha dividido cada sesin de observacin en intervalos de 60 segundos. Para ello se ha introducido una seal acstica en las grabaciones que avisa de la finalizacin del intervalo de observacin. El tiempo total de observacin ha sido de 2.186 minutos. A continuacin en la tabla 1 mostramos el tiempo de observacin de cada profesor:

169
XXI, Revista de Educacin, 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

Universidad de Huelva 2009

Revista de Educacin

xx'

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

Profesor Profesor no 3 Profesor no 4 Profesor no 5 Profesor n 6 Profesor n7 Profesora no 8

Total observacin

Observacin en minutos
326 252 440 405 415 348 2.186

Tabla

no I:

Tiempo total de observacin.

Los datos recopilados los identificamos como datos secuenciales y concurrentes, ya que hemos tenido en cuenta, tanto el orden en que se han producido, como la posibilidad de que ocurran conjuntamente en los distintos niveles de concrecin considerados.

5. Material
El registro de las sesiones se ha realizado mediante una cmara (Panasonic X16 Digital Zoom). La seal acstica consiste en un sonido de frecuencia 704 Hz y de 1 segundo de duracin realizado por el sintetizador AY-3-8910 de un ordenador PC.

Instrumentos de medida: se han diseado un total de 3 plantillas de observacin:

En la primera de ellas se incluye la tarea docente que est desempeando el profesor en cada momento. En la segunda plantilla, referida al nivel de interaccin superficial, se incluyen las conductas relativas a los movimientos espaciales del profesor, si mantiene interacciones verbales (estas conductas se desarrollan en la plantilla no 3), as como los movimientos gestuales del profesor. En la tercera plantilla, referida a la interaccin profunda, se registran diferentes aspectos relacionados con la interaccin verbal del profesor.

6. Proceso de categorizacin
Para la concrecin de las distintas categoras con las que se trabaja, en los diferentes mbitos de anlisis, hemos partido de una fase inicial o exploratoria. Esta fase inicial se cumple con el visionado de una sesin de observacin por profesor. Cada sesin ha sido elegida al azar. La finalidad de esta primera fase es obtener una muestra ms o menos representativa del total de las conductas de los profesores que participan en la investigacin, para posteriormente elaborar el listado definitivo de conductas. Esta primera toma de contacto con distintas situaciones de observacin nos permite iniciar acuerdos y clarificar qu conductas vamos a englobar en las distintas categoras. A partir de los resultados obtenidos en la fase inicial, realizamos otro visionado de las sesiones de observacin para concretar todos los acontecimientos que incluimos en las categoras. Las categoras se han estructurado segn los diferentes niveles de concrecin que hemos comentado arriba. De esta forma se han obtenido varios
XXI, Revista de Educacin. 7 (2005). ISSN: 1575-0345. Universidad de Huelva.

70

Universidad de Huelva 2009

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelinu Lpez Gonzlez. Universidad de Mlaga.

A 4ij ^-
,

instrumentos exhaustivos y que captan las peculiaridades de las conductas que pretendemos analizar.

A _ 1I'd T

2:

Los sistemas de categoras incluidos son los siguientes, presentados en la tabla

Nivel inicial: tarea docente

2T: explicaciones tericas. 3T: realizacin de prcticas. 5T: actividades complementarias. Movimientos espaciales del profesor: Eol: esttico con oscilaciones. Esl: esttico sin oscilaciones. Aacl: se acerca a un alumno con contacto. Aasl: se acerca a un alumno sin contacto. Agcl: se acerca a un grupo de alumnos con contacto. Agsl: Se acerca a un grupo de alumnos sin contacto. Ocl: se acerca a otro lugar con contacto. Osi: se acerca a otro lugar sin contacto. Srumb: el profesor pasea sin rumbo por el aula. Interaccin Verbal (superficial). Val: se dirige verbalmente a un alumno. Vgl: se dirige verbalmente a un grupo de alumnos. Interaccin gestual. Spl: solicita participacin. Cpl: establece conexin positiva. Cnl: establece conexin negativa. Atl: llamadas de atencin. 01: otros movimientos gestuales propios de comunicacin.

Interaccin superficial:

la

Interaccin verbal (profunda):

El profesor se dirige a un alumno. lanupl: el profesor le plantea preguntas falsas. lanup2: el profesor le plantea preguntas verdaderas. lanur: responde a un alumno. lanuxl: le explica teora. lanux2: realiza un ejemplo o comentario personal. El profesor se dirige al grupo clase. 1gnupl: plantea preguntas falsas. 1gnup2: plantea preguntas verdaderas. ignur: responde una pregunta. lgnuxi: realiza una explicacin de contenido terico. lgnux2: realiza un comentario sobre una experiencia personal o un ejemplo.

Tabla n2: Categoras de observacin.

7. Control de sesgos
Los sesgos clsicos de la metodologa observacin que estn presentes en esta investigacin son los siguientes: Sesgo de reactividad: la reactividad hace que los profesores se esfuercen por a. dar sus clases de forma ms pedaggica; adems, produce en los alumnos un modelado de sus comportamientos, con lo cual disminuye el ruido y los alborotos en el aula. Para minimizar este sesgo, la medida que se ha tomado es establecer un perodo previo de observacin, permitiendo as que el grupo observado se adapte a la situacin de tener presente una
XXI, Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva:

171

Universidad de Huelva 2009

Revista de Educacin

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

cmara grabando. En los posteriores anlisis han sido desechados estos datos. b. Otro sesgo latente es la expectancia. Este sesgo es difcil de evitar, debido a que desconocemos con exactitud cules son las expectativas que poseen las personas que estn siendo observadas. Para superarlo no se dio a conocer el calendario de observacin, de tal forma que los profesores no llevasen preparadas sus clases de manera especial como, por ejemplo, que introdujesen ms elementos pedaggicos que de costumbre en sus explicaciones. Adems, no se ha mantenido retroinformacin, ni positiva ni negativa, con los sujetos que participan en el estudio, acerca de los resultados que se han ido obteniendo. Para evitar que se produzcan sesgos relacionados con el instrumento empleado en la recopilacin de la informacin observacional, como es la cmara de vdeo, hemos encendido todas las luces del aula, y se ha colocado la cmara de tal forma que quede delante de las ventanas, o en cualquier otro lugar que la luz no dificulte la grabacin. Durante el registro de los datos en las plantillas de observacin, para que no se produzcan errores debido a la fatiga, el observador descansaba cada media hora unos 10 minutos aproximadamente.

c.

d.

8. Control de calidad de los datos

Un aspecto importante al trabajar con la metodologa observacin es el control de calidad de los datos. Los datos son la base del anlisis observacional, por lo que debemos conseguir que sean fiables. En nuestro estudio, para conocer la solidez de los datos recopilados, planteamos la tcnica de concordancia de los registros de observacin entre dos observadores. La concordancia que pretendemos alcanzar es una concordancia consensuada (Buenda, Hernndez y Cols, 1998). En primer lugar, visionamos y registramos 20 minutos de la tercera sesin de observacin de cada profesor para que sirva de entrenamiento a los observadores. Una vez entrenados, elegimos al azar el 10% del tiempo total de observacin de cada profesor. En la tabla 3 mostramos los registros empleados para calcular la concordancia entre observadores.
Profesores
N3 N 4 N5 N6 N7 N8

Grabacin
26/02/02 30/04/02 15/03/02 26/04/02 16/05/02 15/03/02

10% 1 parte
2' parte 2' parte 2' parte 1' parte 2' parte

Tiempo total
27' 27' 37' 35' 32' 29'

Tabla n3: Registros empleados para calcularla concordancia entre observadores. La medida que hemos empleado para calcular la concordancia es el coeficiente Kappa de Cohen, segn la expresin:

172
Universidad de Huelva 2009

Po - Pe " 1.-P
XXI, Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

js

-: ..;

Realizados los anlisis hemos obtenido los resultados que presentamos en la tabla 4. Profesores Profesor n3 Profesor n4 Profesor n5 Profesor n 6 Profesor n 7
Kappa de Cohen 0,7205 0,7609 0,8205 0,7146 0,6896
0,6887
%

concordancia
74,03 77,40 85,62 73,26 70,80
70,92

Profesora n8

Tabla n4. Resultados obtenidos Kappa de Cohen.

Los ndices Kappa son, en general, muy aceptables. Podemos considerar como buenos los de los profesores n 3 (0,7205), n6 (0,7146), n7 (0,6896) y la profesora no 8 (0,6887); y excelentes los de los profesores no 4 (0,7609) y no 5 (0,8205). Observados estos resultados se aprecia cmo el Kappa medio es:
Km = K Km = 0,7324
U

= 0,7324

Por tanto, podemos afirmar que la medida global de concordancia es bastante aceptable. La generalizacin del Kappa de Cohen para mltiples registros, se ha calculado mediante la frmula de Conger (1980), en la cual, tanto la proporcin de acuerdo observada como la esperada se calculan haciendo la media de las proporciones parciales:
Km = Po - Pe 1 - Pe

Obtenindose los resultados que se muestran en la tabla 5.

! .

Profesores:
Profesor no 3 Profesor no 4 Profesor no 5 Profesor no 6 Profesor no 7 Profesora no 8

Proporcin de acuerdo
0,7443 0,1042 0,774 U,U547 0,8356 0,0841 0,72423 0,0103 0,7079 0,0589 0,6960 0,023

Tabla n 5: Probabilidades observadas y esperadas de cada uno de estos profesores.

XXI; Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

1 73

Universidad de Huelva 2009

XX

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fe rn ndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

Revista de Educacin

Po

=1
N

n = a -,

= a concordancia nominal para C categoras (> 2). n, y K y son respectivamente observaciones

Po =

4,478

= 0,7463, donde

marginales para cada categora.

Pe

=1

(n,,) N' , - i

(n,,)

Pe =

0,36 5- = 0,0558

Con lo cual:
Km=

0,6905
0,9442

=0 7313

Todo ello confirma los resultados anteriores, lo cual indica que la concordancia entre observadores es muy aceptable.

9.

Anlisis de datos y resultados

Para el anlisis de datos realizamos un anlisis secuencial mediante el paquete informtico de anlisis secuencial GSW para Windows versin 4.0 (Bakeman y Quera, 2001). Se han empleado, en concreto, los programas SDIS y GSEQ, ambos incluidos en el citado paquete informtico. Los datos obtenidos mediante el registro han sido tomados con mtrica de intervalo, ya que hemos tenido en cuenta las lneas de registro y no las duraciones temporales de las categoras contempladas. Por ello se han introducido como datos del tipo ISD (Interval Sequential Data), donde una secuencia de intervalos constituye un bloque de intervalos de tiempo constante de 60 segundos. Para alcanzar los objetivos planteados realizamos dos tipos de anlisis:
1.-Un anlisis secuencial longitudinal. 2.- Un anlisis secuencia) transversal.

Se trata de intentar identificar en qu medida estos profesores desarrollan algn tipo de patrn de conducta. Para detectar esos posibles patrones empleamos el mtodo de retardos. Al emplear este mtodo debemos considerar una conducta denominada conducta criterio , y conocer qu conductas coinciden con ella (retardo 0), qu conductas la siguen en el tiempo pasado un intervalo (retardo 1), as como pasados dos intervalos de tiempo (retardo 2). Cualquier categora que consideremos interesante se puede entender como una conducta criterio. En el anlisis secuencial longitudinal determinamos como conductas criterio todas las categoras incluidas en el estudio, para as identificar en qu medida esas conductas permanecen estables en el tiempo. A continuacin mostramos los resultados ms destacados:

174
10

XXI, Revista de Educacin, 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

Universidad de Huelva 2009

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

- r=D

A
TAREA MOVILIDAD INTERACCIN V. INTERACCION V. INTERACCION G. DOCENTE ALUMNO GRUPO PROFESOR
PROFESOR 3 PROFESOR 4

2T
3T

eol esl
col esl eol lanur lanux2 val

lgnuxl 1gnup1
l gnux l

atl 01 at l
01

2T 3T
ST

PROFESOR 5

2T 3T

lgnuxl

of

esl eol
esl

ST
PROFESOR 6 PROFESOR 7

2T

lgnuxi

atl
0l

3T 2T
3T

eol es l eol es 1
Tabla

lanu r val

lgnux2

5T
PROFESORA 8

2T

lanux2

Ignux1

3T

n6: Conductas estables.

Todas las conductas incluidas en la tarea docente permanecen estables, es decir, tanto la realizacin de prcticas (2T), como las explicaciones tericas (3T), al igual que la realizacin de actividades complementarias (5T), no son categoras espordicas, sino que se mantienen a lo largo de diferentes intervalos. Las categoras relativas a la realizacin de prcticas (2T) y a las explicaciones tericas (3T) son actividades realizadas por todos los profesores, mientras que la realizacin de actividades complementarias (5T) lo fueron por los profesores n 4, n 5 y no 7. Respecto a la movilidad docente, los profesores coinciden en la estabilidad total, es decir, estos profesores, la mayor parte del tiempo de clase permanecen, o bien estticos con oscilaciones (eol), o bien totalmente estticos (es1). Las categoras que se mantienen estables en la interaccin verbal del profesor con un alumno individual, no son muy abundantes. Los profesores n 3 y n 4 no poseen estabilidad en ninguna de estas categoras, lo cual significa que estos profesores atienden personalmente a un alumno en momentos puntuales, sin que ese intercambio exceda del intervalo en el que se produce. En algunas ocasiones los profesores mantienen conversaciones individuales con sus alumnos sin que se pueda escuchar lo que estn diciendo (val); estas categoras son estables en el profesor n 6 y n 7. Por tanto, se puede afirmar que estos profesores interactan con sus alumnos durante ms de un intervalo seguido, interacciones que se desarrollan cuando el nivel de ruido en clase es elevado; esto sucede, por ejemplo, cuando estn realizando alguna prctica. Adems, el profesor n 6, al igual que el no 5, suelen responder a las preguntas de sus. alumnos (1anur), respuestas que no son puntuales en el tiempo, sino que se extienden. a los siguientes intervalos de tiempo. En ocasiones, los profesores responden a las preguntas planteadas por un alumno dirigindose slo a l, pero dicha respuesta tambin puede ir orientada a todo el grupo.
.XXI. Revista de Educacin, 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

175

Universidad de Huelva 2009

Revista de Educacin

XXI

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

t+1

t+2 lanux1 -2,32

t+3

Dados
2T

Condicionados
lanux1 -2,30 lanux2 3,93 lanux2 3,17 1gnux1 -2,66

lanux2 2,41 1gnux1 -2,67

lanux2 2,39 1gnux1 -2,65

t+1 lanur 403

t+2

t+3 lanur -3,87

Dados

3T

lanur -3,94

Condicionados
lanur -4,09 lanuxl -2,83 1gnuxl 6.18 t

lanux2 -2,27

lgnux1 6,21

lgnuxl 6,24 lanux1 -2,77

1gnuxl 5,90

t+1 lanur 4.61 lgnux1 -4.93

I I lanur
4.19 -4.80

t+2

I I lanur
4.06

t+3

Dados

5T

I I 1gnux1
lanux1 4,80

I I 1gnux1
-4.59

Condicionados
lanur 4.65 lanux1 4.85 1gnux1 -4.91

176
Universidad de Huelva 2009

Figura n1: La tarea docente favorece la interaccin verbal del profesor.

(0 XXI. Revista de Educacin, 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

D = -D D

El profesor n 5 y la profesora n 8 habitualmente plantean a sus alumnos, de manera individual, un elevado nmero de ejemplos o comentarios sobre experiencias personales (lgnux2), para que stos comprendan la teora que est siendo explicada.

Con frecuencia dichos comentarios van acompaados de las respuestas del profesor a una pregunta de un alumno, o acompaan los comentarios de los propios alumnos sobre experiencias personales.
Respecto a las categoras de interaccin verbal del profesor con todo el grupo de alumnos, resaltamos que la categora que ms se repite es la relativa a las explicaciones tericas del profesor sobre contenido dirigido a todo el grupo (lgnuxl). Esa categora es estable en los profesores n3, n4, no 5, n6 y n8. Todos estos profesores dedican la mayor parte del tiempo a explicar contenidos tericos a sus alumnos. El profesor n 3, adems, complementa esas explicaciones tericas con la realizacin de preguntas falsas a sus alumnos (1gnupl ), mientras que el profesor n6 lo acompaa de explicaciones mediante ejemplos o comentarios sobre experiencias personales (1gnux2). Aparentemente todos ellos, excepto el profesor n7, dan mucha importancia a la transmisin de contenidos tericos aunque, como se puede apreciar en la realizacin de las tareas, tambin realizan otras actividades con sus alumnos que no son simplemente explicar teora. Los profesores n 3, n 4 y no 6 mantienen constantes la categora relativa a las llamadas de atencin a sus alumnos (at 1), lo cual puede ser debido a que los alumnos de esos profesores se distraen con facilidad, o que esas asignaturas requieren de ms atencin por parte de los alumnos, segn ellos afirman entre otras posibles razones. Adems, los profesores n 3, n 4, n 5 y n 6 son muy expresivos y emplean un amplio lenguaje gestual, debido a que las conductas incluidas en la categora otros movimientos propios de la comunicacin (ol ) permanece en ellos constante. En el anlisis secuencial transversal consideramos como conducta criterio todos los cdigos relacionados con la tarea docente del profesor, y conductas condicionadas todas las categoras incluidas en la interaccin verbal. A continuacin mostramos grficamente en un diagrama de transicin los resultados obtenidos (figura 1).

177
o xxi. Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.
Universidad de Huelva 2009

Revista de Educacin

XX1

Observar para evaluar al profesorado: una experiencia prctica. 167-18I M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

Las distintas tareas docentes consideradas s posibilitaban las intervenciones verbales del profesor, como se aprecia en el anterior diagrama de transicin.
Tal y como se muestra en el diagrama, la realizacin de prcticas (2T) produce la aparicin de las categoras de explicacin terica del profesor mediante ejemplos o experiencias personales a un alumno individualmente (lanux2), lo cual puede ser debido a que el profesor le est explicando a un alumno cmo tiene que realizar una determinada prctica. Dicha influencia s permanece constante en el tiempo; adems son categoras que concurren en el retardo 0. La realizacin de prcticas no ejerce ningn otro tipo de influencias positivas sobre las categoras de interaccin verbal del profesor, pero s ejercen influencias negativas sobre: las explicaciones tericas a un alumno individual sobre el contenido (lanuxl) y las explicaciones tericas, y sobre el contenido a todo el grupo clase (1 gnuxl). Cuando los alumnos estn realizando prcticas, no se produce ningn tipo de explicacin de contenido terico de la asignatura, pudiendo ser debido a que dicho contenido ya ha sido explicado con anterioridad. La segunda tarea docente considerada como conducta criterio es la explicacin terica de contenido (3T). Dicha categora tambin ejerce de manera estable influencia sobre una categora de interaccin verbal del profesor, la relativa a la explicacin terica por parte del profesor sobre el contenido, a todo el grupo clase (lgnuxl). Esto parece lgico, ya que la manera ms habitual de exponer la teora es realizando explicaciones tericas sobre la misma. Esta categora tampoco ha ejercido ningn otro tipo de influencia positiva sobre las dems conductas de interaccin verbal, aunque s influencias negativas. Influencias negativas que se centran, por un lado, en las respuestas del profesor a las preguntas del alumno (1 anur) y, por otro lado, a las explicaciones tericas sobre el contenido (lanuxl) y mediante ejemplos (1 anux2) a los alumnos de manera individual. Es decir, el profesor, cuando est realizando explicaciones tericas, por regla general, lo hace para todo el grupo de clase, no focalizando su atencin sobre alumnos determinados. Por ello, la categora ms sobresaliente es la relacionada con la explicacin terica a todo el grupo. La ltima categora considerada como conducta criterio es la realizacin de actividades complementarias (ST). Esta conducta tambin ejerce una influencia considerable sobre una categora de interaccin verbal del profesor, la relativa a las respuestas del alumno (lanur). Esa influencia se extiende hasta el retardo 3. Pero a pesar de ello, dicha tarea coincide en el retardo 0 con otra categora, la explicacin terica, de manera individual del profesor, sobre contenido (l anuxl ), categora que reaparece en el retardo 2. Esto puede ser debido a que, cuando el profesor plantea estas actividades complementarias, l suele responder a las preguntas de sus alumnos, pero tambin les facilita aclaraciones sobre el contenido terico.

10. Conclusin
La complejidad de los procesos de interaccin entre un profesor y sus alumnos viene determinada por la combinacin de mltiples aspectos, unos son fcilmente observables y otros no tanto. En este estudio hemos intentado identificar algunos de esos aspectos.
Podemos concluir que estos profesores coinciden en algunas de las conductas que desarrollan dentro del aula como, por ejemplo, los movimientos espaciales que realizan. Todos ellos permanecen estticos, y si se mueven lo hacen en un radio de espacio pequeo. La razn de estos movimientos tan reducidos, quiz se encuentre en que, de esta forma, al alumno le resulte ms fcil el contacto visual con el profesor, as como al profesor mantener contacto visual con sus alumnos y, por tanto, control de la situacin.

178
Universidad de Huelva 2009

Las tareas docentes que se priorizan son las realizaciones de prcticas y las explicaciones tericas. Slo dos de estos profesores realizan otras actividades
G0 XXI, Revista de Educacin, 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.


Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga. 0 p = .Q

complementarias. Adems, podemos considerar que esos dos profesores mantienen contacto, de manera habitual, con sus alumnos individualmente.

A pesar de que existen semejanzas entre estos profesores, tambin hay diferencias. Por ejemplo, todos ellos otorgan mucha importancia a las explicaciones tericas, pero algunos intentan implicar directamente tambin a sus alumnos, plantendoles preguntas, por ejemplo. Unos orientan su docencia de forma magistral, y otros intentan hacerla ms interactiva, aunque exista tambin en el trasfondo un estilo magis tr al.
Respecto a si existen patrones de conductas en las tareas docentes relacionadas con las interacciones verbales del profesorado, podemos afirmar que s. Los patrones identificados son 3: a) Cuando se realizan prcticas las interacciones verbales, se centran en dar ejemplos a los alumnos de manera individual. El profesor en ningn momento explica teora, ni a un alumno, ni al grupo.
Sl 2T lanux2 NO lanuxl lgnuxl

b) Las explicaciones tericas sobre contenidos del profesor van dirigidas a todo el grupo, y no a los alumnos individualmente (no responde a sus preguntas, no les explica teora, ni les plantea ejemplos).

3T

'

SI

--

----

ignuxl

NO

1anur lanuxl la nu x2

c) Cuando se plantean actividades complementarias, el profesor centra sus interacciones verbales en dar explicaciones tericas a un alumno individualmente y en responder sus preguntas.
SI
51 5T 1anur 1

^-

--

lanuxl

Para lograr mejoras en los procesos de Enseanza -Aprendizaje debemos partir del conocimiento de la realidad del aula, y una buena manera de conocer esa realidad es el empleo de la metodologa observacional, ya que permite profundizar en los intercambios que se producen en el aula, en el da a da. Con el empleo de esta metodologa hemos alcanzado sobradamente los objetivos planteados en nuestra investigacin: hemos identificado las tareas docentes que realizan estos profesores, hemos conocido sus movimientos espaciales e intercambios verbales. Igualmente se ha podido vislumbrar qu conductas permanecen estables en el tiempo, as como cules son las influencias que ejercen las conductas relativas a las tareas docentes con respecto a las interacciones verbales de estos profesores. En este estudio hemos considerado interesante analizar, tanto aspectos relacionados con la interaccin verbal, como aspectos relativos a los movimientos espaciales y gestuales del profesor dentro del aula. La razn es simple, y es que pensamos que los movimientos espaciales y los movimientos gestuales se pueden
XXI. Revista de Educacin, 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

l 79

Universidad de Huelva 2009

Revista de Educacin

XX

Ma

Observar para evaluar al profesorado: una experiencia prctica. 167-181 Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

considerar aspectos complementarios a la interaccin verbal. Al transmitir informacin al alumnado lo hacemos mediante un lenguaje verbal y gestual para mantener una interaccin dinmica y bidireccional con ellos. Por muy interesante que sea la comunicacin verbal, si no se consigue captar la atencin visual de nuestros alumnos, es probable que esa informacin no llegue a ser procesada. Para finalizar, vemos conveniente sealar que cualquier intento de cuantificar las situaciones interactivas entre profesor - alumno est sometido a mltiples variables que estn influyendo y que escapan de nuestro control, a pesar de que en esta investigacin intentamos controlar el mayor nmero de sesgos posibles. Por ello, debemos contemplar estos resultados vinculados directamente con esta realidad, y no pretendemos, por tanto, hacer generalizaciones.

Referencias
ALCOCER, NI. (1998): Investigacin accin participativa, en GALINDO, J. (Coord.): Tcnicas de investigacin en .Sociedad, Cultura y Comunicacin. Mxico, Addison Wesley Longman. ANGUERA, M.T. (1983): Manual de prcticas de observacin. Mxico, Trillas. ANGUERA, M.T. (1986): Observacin , en MOLINA, S. (Ed.): Diccionario de Educacin Especial (Vol. I). Madrid, Cepe. ANGUERA, M.T. (1988): Observacin en la escuela. Barcelona, Grao. ANGUERA, M.T. (1993): Observacin en Ja escuela: aplicaciones. Barcelona, Edicions Universitat de Barcelona. ANGUERA, M.T.; BEHAR, J.; BLANCO VILLASEOR, A.; CARRERA ARCHS, M.V.; LOSADA, J.L.; QUERA, V y RIBA, C. (1993): Metodologa Observacional en la investigacin psicolgica. (Vol. II). Barcelona, Universitas PPU. ANGUERA, M.T. (Coord.) (1999): Observacin en deporte y conducta cinsico-motriz: Aplicaciones. Barcelona, Edicions Universitat de Barcelona. ANGUERA, M.T. (Coord.) (2001): Metodologa de las Ciencias de/Comportamiento. Monogrfico sobre Metodologa Observacional. BAKEMAN, R. y GOTTMAN, J.M. (1989): Observacin dela interaccin: Introduccin al anlisis secuencial. Madrid, Morata. BAKEMAN, R. y QUERA, V. (2001): Anlisis de la interaccin. Anlisis secuencial con SDISy GSEQ Madrid, RA-MA editorial. BUENDA, L.; COLS, P. y HERNNDEZ, F. (1998): Mtodos de investigacin en psicopedagoga. Madrid, Mc Graw Hill. CROLL, P. (1995): La observacin sistemtica en el aula. Madrid, La Muralla. DE KETELE, J.M. (1984): Observar para educar. Observacin y evaluacin en la prctica educativa. Madrid, Visor. GONZLEZ MUOZ, M.C. et al. (1995): Evaluacin de/profesorado de secundaria. Anlisis de tendencias y diseo de un plan de evaluacin. Madrid, Centro de Publicaciones. Secretara General Tcnica. GONZLEZ RAMREZ, T.; COLS BRAVO, P. y LPEZ GRRIS, I. (1990): La metodologa observational como proceso de intervencin, formacin y toma de decisiones , en Revista de Investigacin Educativa, 8. GUITIAN AYNETO, C. y MARRERO RODRGUEZ, G. (1994): Evaluacin de/a docencia en la Universidad de las Palmas de Gran Canaria. Las Palmas de Gran Canaria, S. P. Universidad de las Palmas de Gran Canaria.
C0 XXI. Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

180
Universidad de Huelva 2009

Observar para evaluar al profesorado: una experiencia prctica. 167-181 M Jos Mayorga Fernndez. Emelina Lpez Gonzlez. Universidad de Mlaga.

0
ILl

JIMNEZ, B.; BORDAS, I.; CORONEL, J.M.; DOMNGUEZ, G.; GAIRIN, J.; PO GONZLEZ, A.; SANTOS, M.A.; y TEJADA, J. (Eds.) (1999): Evaluacin de programas, centros y profesores Madrid, Sntesis. MATEO ANDRS, J.; ESCUDERO ESCORZA, T.; DE MIGUEL DAZ, M.; MORA RUIZ, J.G. y RODRGUEZ ESPINAR, S. (1996): Evaluacin del profesorado de secundaria. Barcelona, Cedecs editorial S.L. MATEO ANDRS, J. (2000): La evaluacin del profesorado y la gestin de la calidad de la educacin. Hacia un modelo comprensivo de evaluacin sistemtica de la docencia , en Revista de Investigacin Educativa, 18. MARTN, N.K.; YIN, Z. y BALDWIN, B. (1998): Construct validation of the acctidues & beliefs on classroom control inventory. En Journal of classroom interaction, 33. RODRGUEZ DEZ, B. (2000): La observacin como instrumento de evaluacin del profesorado que promueva la mejora e innovacin del proceso de enseanza , en Bordn, 52. RUBIO, M.J. y VARAS, J. (1997): El anlisis de la realidad, en la intervencin social. Mtodos y tcnicas de investigacin. Madrid, Editorial CCS. TEJEDOR, J. (2000): El diseo y los diseos en la evaluacin de programas , en
Revista de Investigacin Educativa, 18.

Ma, Jos Mayorga Fernndez es becaria de investigacin del Departamento Mtodos de Investigacin y Diagnstico en Educacin de la Universidad de Mlaga. Correo electrnico: serfara@uma.es

es profesora del Departamento de Mtodos de Investigacin y Diagnstico en Educacin de la Universidad de Mlaga Correo electrnico: emelopez@uma.es

Eme/ma Lpez Gonzlez

181
XXI, Revista de Educacin. 7 (2005). ISSN: 1575 - 0345. Universidad de Huelva.

Universidad de Huelva 2009