Documentos de Académico
Documentos de Profesional
Documentos de Cultura
ISSN: 0716-8039
revista.psicologia@facso.cl
Universidad de Chile
Chile
Nieves Schade1
Pilar Hernández2
Bárbara Elgueta3
Resumen
El presente estudio tuvo como objetivo la implementación informatizada de un test
convencional. Específicamente mediante un modelo estadístico descriptivo se realizó
una aplicación piloto de una prueba para evaluar memoria: MEMOPOC, con el fin de
determinar la aplicabilidad del instrumento en formato computacional. Se evaluaron
dos aspectos: los técnicos y formales del instrumento La muestra estuvo constituida
por 36 niños, que cursaban de kinder a Cuarto Básico, de un colegio municipalizado
de la comuna de Concepción. Los resultados indican que hay algunas falencias técni-
cas necesarias de corregir y a su vez muestra los beneficios que significó el cambio del
test a un sistema computarizado. La discusión esta en base a las proyecciones del test
y los aportes de los test informatizados en la evaluación psicométrica.
Palabras clave: test informatizados, evaluación, memoria
Abstract
The present study attempted to implement a computerized version of a conventional
test. Specifically, through a descriptive statistical model, a pilot application of the test
MEMOPOC for evaluating memory was performed in order to determine the
applicability of a computerized format. Two aspects where evaluated: the technical
and the formal. The sample was constituted by 36 children, from kindergarten to fourth
grade elementary, of a municipal school in the district of Concepción. The results
indicate that there are few technical errors to correct and also showed the benefits that
meant changing to a computerized system. The discussion is based on the projections
of the test and benefits of computerized tests in psychometric evaluation.
Key words: computerized test, evaluating, memory.
73
Revista de Psicología de la Universidad de Chile
74
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
pero añaden que esto no debe mal posible gracias a programas computacionales
interpretarse con la insensatez que implica que gestionan Bancos de Ítems a partir de
el que un computador sustituya plenamente ciertas reglas preestablecidas.
la labor de diagnóstico del psicólogo. Un in-
forme psicométrico obtenido automática- En resumen, un Test Adaptativo Informa-
mente sólo constituye un buen punto de par- tizado consiste en un banco de ítems con pro-
tida y complemento instrumental para el piedades conocidas y un procedimiento para
psicodiagnóstico, ya que es labor privativa seleccionar los más apropiados para la habili-
del profesional la de contextualizar los da- dad de cada persona. El procedimiento de
tos y conformarlos como un todo coherente selección es un algoritmo informático que pre-
a la realidad clínica del evaluado. En 1986 la senta ítems más difíciles o más fáciles según
American Psychological Association (APA) se acierten o se fallen los anteriores.
dicta una serie de directrices éticas sobre el Su principal ventaja sobre los Tests con-
uso de esta clase de informes. En ella se hace vencionales es la eficiencia: permite obtener
hincapié en el hecho que los informes genera- medidas más precisas con el mismo número
dos por computador deben utilizarse única- de ítems o conseguir la misma precisión con
mente en conjunción con el juicio profesional. casi la mitad de elementos (Wainer, 1990;
Olea y Ponsada, 1996).
c) Tests Adaptativos Informatizados
Lord 1980 (citado en Muñiz y Hontangas,
Los Tests Adaptativos Informatizados son 1999) agrega dentro de las ventajas de estas
el resultado de la aplicación computacional pruebas: a) mayor flexibilidad para que los
de un nuevo modelo de medición de aptitu- examinados puedan acceder a la realización
des, es decir la teoría de la Respuesta al ìtem. del test; b) posibilidades casi ilimitadas de
El concepto clásico de la Teoría de Res- incorporar nuevos tipos de ítems, incluyen-
puesta al Ítem es la Curva Característica del do gráficos complejos, sonidos, videos, etcé-
ítem, y corresponde a la función matemáti- tera; c) resultados inmediatos de las pruebas
ca que relaciona la probabilidad de acertar y d) mejora de la seguridad de la prueba.
a un ítem con la capacidad de los sujetos. En general, este tipo de test ha alcanzado
“...la teoría clásica se centra en las propiedades un desarrollo muy amplio (Chang y Ansley,
de la puntuación global del test (x), mientras 2003). Sin embargo McBride (1998), se refie-
que la Teoría de Respuesta a los Ítems se centra re a tres problemas fundamentales que pre-
en las particularidades de cada ítem(q).”(Prieto sentan esta clase de test. En primer lugar, los
y Delgado, 1999, pp. 208) examinados no suelen tener oportunidad de
No es el objetivo de esta revisión el reali- modificar sus respuestas, una vez que estas
zar una descripción acabada de la Teoría de hayan sido emitidas. En segundo lugar, in-
Respuesta a los Ítems, sin embargo es nece- vestigaciones demuestran que es necesario
sario connotar la relación de este modelo con mantener bancos de ítems muy numerosos
el desarrollo de los tests informatizados. A para solventar la confiabilidad de las medi-
partir de esta teoría se generan pruebas psi- ciones. En tercer lugar, Rocklin, O’Donnell y
cológicas de medición de aptitudes, que en Holst (1995) creen que lo relacionado con la
función del tipo de respuesta de cada indivi- situación afectiva y motivacional derivada
duo (estrategias de solución, tiempo de del éxito o fracaso en las respuestas es un
latencia de la respuesta, omisiones, tipos de factor interviniente de gran peso. Las perso-
errores más frecuentes, etc.), asumen dispo- nas difieren en sus reacciones ante la dificul-
siciones particulares para cada caso. Este pro- tad del test, ya sea por la orientación moti-
cedimiento de auto selección de los ítems es vacional hacia el éxito o el fracaso, la
76
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
77
Revista de Psicología de la Universidad de Chile
y usos de los tests informatizados y menos bre o identificación. El test presenta un ade-
investigación en el tema, a pesar de los am- cuado nivel de fiabilidad (K20= 0.80), con-
plios beneficios reconocidos en la informati- sistencia interna y los juicios de los expertos
zación de tests que estos reportan. indican que es un test que mide lo que pre-
tende medir, es decir, presenta un adecuada
El presente estudio pretende contribuir en validez de contenido.
el desarrollo de este tema. El objetivo de la
investigación fue la implementación informa- Este test es atractivo y muy amigable para
tizada de un test convencional. Específicamen- los niños pero presenta como dificultad es que
te mediante un modelo estadístico descripti- es muy pesado, es decir, difícil de manipular
vo realizar una aplicación piloto de la prueba y trasladar, por lo cual se consideró que
para evaluar memoria: MEMOPOC, con el fin informatizarlo podría suplir estas dificultades.
de determinar la aplicabilidad del instrumen-
Prueba de Memoria para Posiciones, Colores
to en formato computacional. A este respecto
y Objetos (MEMOPOC, versión informatizada).
se consideró evaluar dos niveles: Aspectos
Esta prueba esta basada en la anterior en
técnicos y formales del instrumento
cuanto al diseño de las actividades, los tiem-
pos de presentación de los estímulos y lap-
Método sos que median entre ellas. Al sujeto se le
presentan las tres tareas posibles las cuales
Muestra pueden elegir por donde empezar, tiene ac-
tividades que le permiten ensayar y ver si ha
1. SUJETOS comprendido las instrucciones. Luego co-
La muestra fue intencionada no probabi- mienza con la tarea elegida, aparece la pri-
lística estratificada por edad, curso y sexo, mera ficha en el tablero y luego la segunda y
constituida por 36 niños, que cursaban de el niño cada vez debe hacer un clic en la fi-
kinder a Cuarto Básico, con un rendimiento cha que va apareciendo nueva, así sucesiva-
escolar promedio, todos pertenecientes a una mente hasta que se equivoca. Al final apare-
escuela municipalizada de la comuna de San ce el puntaje obtenido por el niño y si quiere
Pedro, Octava Región. volver hacer la prueba. Las posiciones de los
estímulos en el tablero, cada secuencia son
2. INSTRUMENTOS productos del azar, para evitar aprendizaje
de las secuencias cada vez que hace el test.
Prueba de Memoria para Posiciones, Colores
y Objetos (MEMOPOC): Prueba creada por Cuestionario: El cuestionario constaba de
Rehbein (1984) y estudiada sus característi- dos parte una que evaluaba los aspectos téc-
cas de fiabilidad y validez por Schade (1994). nicos y otra los aspectos cualitativos de la
Test que mide memoria para posiciones, co- prueba como son: la exigencia de la activi-
lores y objetos. El test está compuesto por un dad de acuerdo a la edad y la motivación
tablero magnético de 61 por 46 cm., sobre el frente a la tarea. Las respuestas eran de tipo
cual se encuentran marcados 30 puntos ne- cerradas en escala Lickert y otras si y no.
gros en 5 filas. Se presentan estímulos con-
3. PROCEDIMIENTO
sistentes en dos grupos de 15 círculos de
maderas (fichas), con un imán en su superfi- Los niños fueron invitados en forma in-
cie inferior. Constan de tres subpruebas: po- dividual a la sala de computación del cole-
siciones, colores y objetos. Las fichas de po- gio, se les explicó someramente de lo que se
siciones son todas de color rojo óxido, las de trataba y se les solicitó su colaboración. Los
colores son todas de distintos colores y la de niños debían ejecutar el test y luego respon-
objetos varía en formas, carentes de un nom- der el cuestionario.
78
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
Tabla 1
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿alcanzaste a leer u oír las
instrucciones? según subtest.
22 14
Colores 61,1% 38,9% 1,778
28 8
Objetos 77,8% 22,2% 11,111 **
79
Revista de Psicología de la Universidad de Chile
Tabla 2
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿estuvo clara la voz? según subtest
19 17
Colores 52,8% 47,2% 0,111
19 17
Objetos 52,8% 47,2% 11,111 **
Tabla 3
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿Está bien el tamaño de la letra?
según subtest
¿Está bien el tamaño Frecuencia y % Chi–cuadrado observado
de letra? Respuesta Observada p (esperada) = 0,5
Si No
30 6
Posición 83,3% 16,9% 16,000**
33 3
Colores 91,7% 8,3% 25,000**
30 6
Objetos 83,3% 16,9% 16,000**
80
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
28 8
Colores 77,8% 22,2% 11,111**
28 8
Objetos 77,8% 22,2% 11,111**
Tabla 5
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te faltó ensayar más? según subtest
19 17
Colores 52,8% 47,2% 0,111
20 16
Objetos 55,6% 44,4% 0,444
81
Revista de Psicología de la Universidad de Chile
Tabla 6
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿diferenciaste bien un color de otro?
según subtest
¿Diferenciaste bien un color Frecuencia y % Chi–cuadrado observado
de otro? Respuesta Observada p (esperada) = 0,5
Si No
26 10
72,2% 27,8% 7,111**
* : significativo para a = 0,05
**: significativo para a = 0,01
Tabla 7
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te parecieron claras las imagenes?
según subtest
¿Te parecieron claras Frecuencia y % Chi–cuadrado observado
las imágenes? Respuesta Observada p (esperada) = 0,5
Si No
32 4
88,9% 11,1% 21,778**
* : significativo para a = 0,05
**: significativo para a = 0,01
82
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
Tabla 8
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿pudiste encontrar las fichas nuevas
en el espacio? según subtest
¿Pudiste encontrar las Frecuencia y % Chi–cuadrado observado
fichas nuevas en el espacio? Respuesta Observada p (esperada) = 0,5
Si No
20 16
55,6% 44,4% 0,444
* : significativo para a = 0,05
**: significativo para a = 0,01
83
Revista de Psicología de la Universidad de Chile
Tabla 10:
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te sentiste cansado(a)después de la
actividad? según subtest
¿Te sentiste cansado(a) Frecuencia y % Chi–cuadrado observado
después de la actividad? Respuesta Observada p (esperada) = 0,5
Si No
3 33
8,3% 91,7% 22,444**
* : significativo para a = 0,05
**: significativo para a = 0,01
• ADECUACIÓN DEL TIEMPO PREVISTO PARA El 83% de los sujetos respondió a esta pre-
REALIZARLA gunta “bastante” o “totalmente”. Esta varia-
ble correlaciona positiva y significativamente
La pregunta que determina la evaluación con edad (Rtau=0,38) y con curso (Rtau=0,39),
de este aspecto es: ¿alcanzaste a responder lo que señala que a mayor edad y más alta
en el tiempo que se te dio? escolaridad aparece mayor adecuación al
tiempo previsto para responder. Los valores
para Chi cuadrado en la Tabla 11.
Tabla 11
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿alcanzaste a responder en el tiempo
que se te dio? según subtest
¿Alcanzaste a responder Frecuencia y % Chi–cuadrado observado
en el tiempo que se te dio? Respuesta Observada p (esperada) = 0,5
Si No
30 6
83,3% 16,7% 16,000**
* : significativo para a = 0,05
**: significativo para a = 0,01
84
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
85
Revista de Psicología de la Universidad de Chile
vidad también es reflejo de las capacidades Por otra parte, la prueba tiene otro poten-
de los niños relativas al dominio básico de cial de desarrollo, más allá de la medición
computadores. A pesar de su poca experien- psicométrica. Al diseñar el instrumento en su
cia con los computadores a los niños les bas- forma de autoaplicación se está creando una
tó con una práctica semanal compartida fren- eficaz y atractiva batería de entrenamiento y
te al computador para alcanzar un aceptable estimulación de habilidades memorísticas es-
nivel de dominio del “mouse” y la lógica de pecíficas, particularmente útil para niños con
los botones de diálogo. trastornos específicos de aprendizaje, sujetos
en rehabilitación de daño cerebral, etc. Una
Un aspecto menos positivo tiene que ver presentación de este tipo permitiría que fuera
con la suficiencia del número de ensayos, puesto a disposición de alumnos y profeso-
previo a la ejecución puntuable de la tarea. res, vía Internet en el contexto del proyecto
Los niños de todas las edades señalaron como ENLACES del Ministerio de Educación.
insuficientes las posibilidades de practicar
que la prueba le ofrecía. La forma de enfren- En general, la experiencia de diseñar y
tar la prueba sin la supervisión directa de un poner a prueba un test psicológico de ejecu-
evaluador lleva a que los niños exploren ción en formato informatizado tiene en sí
mediante ensayo y error. Esta vez la motiva- misma elementos importantes de destacar.
ción por la tarea juega en contra de los obje- No existen en nuestro entorno profesional
tivos de evaluación ya que los niños se sien- psicólogos especializándose en esta clase de
ten “obligados” a probar los límites y aplicaciones computacionales. Este hecho
“secretos” de la prueba, lo cual es imposible hace que la experiencia de este trabajo resul-
de lograr en tan pocos ensayos. te pionera, al menos para el contexto regio-
nal. Por otra parte, el trabajo coordinado con
Este punto sirve para determinar los ca- ingenieros programadores/diseñadores crea
minos que se abren en el desarrollo del una nueva área de cooperación interdiscipli-
MEMO–POC. Por una parte, para ser usada naria de interesante proyección
como instrumento de medición
psicometricamente adecuado, una vez solu- El logro fundamental de este estudio con-
cionadas ciertas deficiencias técnicas, la prue- sistió en transformar una prueba muy poco
ba puede convertirse en un eficaz medio de dúctil (difícil de transportar, cara en mate-
evaluación de trastornos en la memoria vi- riales, etc.) y en la practica inaplicable, en un
sual, ya no sólo en niños sino también en instrumento transportable, amigable, fácil de
adultos, asociado por ejemplo, a tareas como aplicar y de gran atractivo para los niños.
el diagnóstico del grado de compromiso
cognitivo que puedan estar provocando en- Los pasos subsecuentes son corregir las
fermedades degenerativas del sistema ner- falencias detectadas y proceder a la determi-
vioso central (Alzheimer, Accidentes nación de las características psicométricas del
Vasculares Encefálicos, etc.), y sin descartar instrumento, validez de constructo y fiabili-
el uso potencial en el terreno de la selección dad, en la confianza que se han controlado
de personal en empleos que requieran un un número importante de fuentes de varia-
dominio preciso de las habilidades memo- ción en los puntajes causadas por errores de
rísticas visuales de corto plazo (operadores presentación del instrumento.
de sistemas de radar, controladores de cali-
dad, etc.)
86
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005
87
Revista de Psicología de la Universidad de Chile
88