Está en la página 1de 17

Revista de Psicología

ISSN: 0716-8039
revista.psicologia@facso.cl
Universidad de Chile
Chile

Schade, Nieves; Hernández, Pilar; Elgueta, Bárbara


Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopoc
Revista de Psicología, vol. XIV, núm. 1, 2005, pp. 73-88
Universidad de Chile
Santiago, Chile

Disponible en: http://www.redalyc.org/articulo.oa?id=26414106

Cómo citar el artículo


Número completo
Sistema de Información Científica
Más información del artículo Red de Revistas Científicas de América Latina, el Caribe, España y Portugal
Página de la revista en redalyc.org Proyecto académico sin fines de lucro, desarrollado bajo la iniciativa de acceso abierto
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

Ensayo de Aplicación práctica, el Test Informatizado de


Memoria Memopoc*

Practical Application of Memopoc informatized Memory


Test: A test of the procedure

Nieves Schade1
Pilar Hernández2
Bárbara Elgueta3

Resumen
El presente estudio tuvo como objetivo la implementación informatizada de un test
convencional. Específicamente mediante un modelo estadístico descriptivo se realizó
una aplicación piloto de una prueba para evaluar memoria: MEMOPOC, con el fin de
determinar la aplicabilidad del instrumento en formato computacional. Se evaluaron
dos aspectos: los técnicos y formales del instrumento La muestra estuvo constituida
por 36 niños, que cursaban de kinder a Cuarto Básico, de un colegio municipalizado
de la comuna de Concepción. Los resultados indican que hay algunas falencias técni-
cas necesarias de corregir y a su vez muestra los beneficios que significó el cambio del
test a un sistema computarizado. La discusión esta en base a las proyecciones del test
y los aportes de los test informatizados en la evaluación psicométrica.
Palabras clave: test informatizados, evaluación, memoria

Abstract
The present study attempted to implement a computerized version of a conventional
test. Specifically, through a descriptive statistical model, a pilot application of the test
MEMOPOC for evaluating memory was performed in order to determine the
applicability of a computerized format. Two aspects where evaluated: the technical
and the formal. The sample was constituted by 36 children, from kindergarten to fourth
grade elementary, of a municipal school in the district of Concepción. The results
indicate that there are few technical errors to correct and also showed the benefits that
meant changing to a computerized system. The discussion is based on the projections
of the test and benefits of computerized tests in psychometric evaluation.
Key words: computerized test, evaluating, memory.

* El presente trabajo es producto de un proyecto de Investigación financiado por la Dirección de Investigación de la


Universidad de Concepción.
1 Dr. en Psicología Univ. Pont. de Salamanca, España y docente del departamento de Psicología, Univer-
sidad de Concepción. email: nschade@udec.cl
2 Docente Departamento de Psicología, Facultad de Ciencias Sociales. Universidad de Concepción
3 Psicóloga Instituto Diego Portales. Carrera de Servicio Social

73
Revista de Psicología de la Universidad de Chile

Introducción en embarcarse en la aplicación de las tecno-


logías en su propio trabajo (Schatz y
En años recientes el uso de los computa- Browndyke, 2002), aunque podemos encon-
dores ha impactado en casi todos los ámbi- trar avances importantes en los países más
tos de la vida de las personas y la psicología desarrollados como España, donde se apre-
no ha sido una excepción. Dentro de las áreas cia una autentica revolución en cuanto al di-
del quehacer del psicólogo, una en las que se seño y aplicación de los test psicológicos y
ha ido incorporando es en la psicometría educacionales a nivel informático. Incluso en
(Viswesvaran, 2000). Varias ventajas han sido algunas universidades existen grupos de in-
atribuidas al uso de los computadores en la vestigadores que estudian aspectos específi-
evaluación psicológica. Los tests informati- cos como construcción y gestión de bancos
zados, como son denominados actualmente, de ítems, medidas cognitivas informatizadas
reportan ventajas como rapidez, uso de estí- de visualización espacial, control y tasa de ex-
mulos tridimensionales, formatos interacti- posición de los ítems, entre otros (Olea y
vos, control riguroso del tiempo de reacción Ponsada, 1998). En Estados Unidos también se
y de presentación de los estímulos, no ocu- aprecia un uso amplio de estos incluso cuen-
pan espacio, el resultado es inmediato, redu- tan con planes gubernamentales de fomentos
cen el tiempo de dedicación de los profesio- de estas tecnologías en diferentes ámbitos,
nales a esta tarea. (Viswswaran, 2000; Huff y como en las fuerzas armadas y educación.
Sirece, 2001).
En nuestro país el panorama es muy dis-
Además, el manejo adecuado de la com- tinto, de acuerdo a un estudio realizado por
putación genera una mayor seguridad por Concha (2003) acerca de la utilización de los
lo que aumenta la estabilidad, fiabilidad y tests informatizados en el quehacer del psi-
validez de las mediciones. Al ser las instruc- cólogo, en el cual participaron 106 psicólo-
ciones y los medios de presentación estan- gos, a quienes se les aplicó un cuestionario
darizadas esto hace que sean más ventajosos en dos versiones, una de papel– lápiz y otra
para la evaluación de determinados pacien- vía Internet. Los resultados mostraron que
tes. Por ejemplo, los estudios muestran que estos profesionales usan muy poco los tests
los tests cognitivos basados en la computa- informatizados (80% nunca y el 3,8% siem-
ción ofrecen un 60% de ahorro en tiempo que pre). Las razones que ellos plantean son: el
la administración tradicional con población desconocimiento, la carencia de recursos en
de pacientes psiquiátricos (Schatz y cuanto equipamiento, infraestructura, soft-
Browndyke, 2002) ware y falta de entrenamiento. Las pocas apli-
caciones se aprecian más en el ámbito labo-
En general, estos avances tecnológicos ha-
ral y los tests informatizados más usados son
cen cada vez más accesible la elaboración de
el 16PF– 5, seguido por el MMPI; Lüscher y
pruebas con un nivel máximo de automati-
Raven respectivamente. Uno de los aspectos
zación, al respecto Muñiz y Hambleton (1999)
que merece mencionarse de este trabajo es
creen que “el uso del computador en psico-
que muchos psicólogos creen que el uso de
metría permitirá utilizar ítems más comple-
éstos, es reduccionista y enfría la relación
jos y cercanos a la realidad, que incluso se
médico paciente, pero el cuestionamiento que
puede simular, lo que conllevaría posibles
ellos señalan, pone en videncia su desconoci-
mejoras en la validez predictiva, al acercarse
miento en el uso de los tests informatizados.
más el test a la realidad criterial que se pre-
Pero también, es importante señalar que un
tende predecir” (pp. 24).
grupo presenta disposición a trabajar con ellos
A pesar de las ventajas antes señaladas, y ven como fortaleza la facilitación del traba-
los psicólogos han sido relativamente lentos jo como psicólogo, ahorro de tiempo, mayor

74
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

control en el proceso global y limitación en la Según Muñiz y Hambleton, (1999), la apli-


existencia de errores. cación de tecnología computacional en la
evaluación psicométrica tiene cuatro ámbi-
Los tests informatizados (TICs), estricta- tos generales de influencia: a) Presentación
mente hablando, son aquellos que utilizan Informatizada de test convencionales; b) Ela-
el computador como medio de presentación boración automatizada de informes; c) Test
de ítems, de entrada de las respuestas y de adaptativos informatizados y d) Construc-
análisis e interpretación de los rendimientos ción automatizada de los tests. Ver Figura 1.
(Olea, Ponsada y Prieto, 1999).

Figura1 : Aplicaciones de la computación a la evaluación psicométrica.

A continuación se revisará someramente resultados. En Estados Unidos por ejemplo,


cada uno de estos por separado. los test convencionales informatizados más
utilizados en la práctica clínica son: MMPI,
a) Presentación informatizada de Tests MMPI–2, Rorschach, WAIS– R, WAIS III,
convencionales WISC – R, WISC III.

Bunderson y otros (1989), afirman que la b) Elaboración automatizada de informes


primera generación de tests informatizados
correspondió a la implementación de test Esta aplicación de la informática a la eva-
convencionales de papel y lápiz en un com- luación psicométrica está muy relacionada
putador y la aplicación de los mismos a tra- con la anterior. Al obtenerse de modo auto-
vés del teclado y la pantalla. matizado las puntuaciones de las pruebas,
es una extensión “natural” el que se pueda
Si bien esta forma de presentación de los automatizar la interpretación de los datos y
tests clásicos no cambió nada de su esencia, que se emita el informe correspondiente.
el nuevo formato aportó toda una serie de
ventajas instrumentales entre las cuales se Muñiz y Hambleton (1999) plantean que
destacan: presentación precisa y controlada en sí mismos, los informes generados por
de los ítems a través de la pantalla, correc- computador no tienen nada de malo, ya que
ción y archivo automatizado de las respues- “liberan al psicólogo de las tareas más auto-
tas, eficiencia y rapidez a la hora de dar les máticas, tediosas y burocráticas” (pp. 26),
Revista de Psicología de la Universidad de Chile

pero añaden que esto no debe mal posible gracias a programas computacionales
interpretarse con la insensatez que implica que gestionan Bancos de Ítems a partir de
el que un computador sustituya plenamente ciertas reglas preestablecidas.
la labor de diagnóstico del psicólogo. Un in-
forme psicométrico obtenido automática- En resumen, un Test Adaptativo Informa-
mente sólo constituye un buen punto de par- tizado consiste en un banco de ítems con pro-
tida y complemento instrumental para el piedades conocidas y un procedimiento para
psicodiagnóstico, ya que es labor privativa seleccionar los más apropiados para la habili-
del profesional la de contextualizar los da- dad de cada persona. El procedimiento de
tos y conformarlos como un todo coherente selección es un algoritmo informático que pre-
a la realidad clínica del evaluado. En 1986 la senta ítems más difíciles o más fáciles según
American Psychological Association (APA) se acierten o se fallen los anteriores.
dicta una serie de directrices éticas sobre el Su principal ventaja sobre los Tests con-
uso de esta clase de informes. En ella se hace vencionales es la eficiencia: permite obtener
hincapié en el hecho que los informes genera- medidas más precisas con el mismo número
dos por computador deben utilizarse única- de ítems o conseguir la misma precisión con
mente en conjunción con el juicio profesional. casi la mitad de elementos (Wainer, 1990;
Olea y Ponsada, 1996).
c) Tests Adaptativos Informatizados
Lord 1980 (citado en Muñiz y Hontangas,
Los Tests Adaptativos Informatizados son 1999) agrega dentro de las ventajas de estas
el resultado de la aplicación computacional pruebas: a) mayor flexibilidad para que los
de un nuevo modelo de medición de aptitu- examinados puedan acceder a la realización
des, es decir la teoría de la Respuesta al ìtem. del test; b) posibilidades casi ilimitadas de
El concepto clásico de la Teoría de Res- incorporar nuevos tipos de ítems, incluyen-
puesta al Ítem es la Curva Característica del do gráficos complejos, sonidos, videos, etcé-
ítem, y corresponde a la función matemáti- tera; c) resultados inmediatos de las pruebas
ca que relaciona la probabilidad de acertar y d) mejora de la seguridad de la prueba.
a un ítem con la capacidad de los sujetos. En general, este tipo de test ha alcanzado
“...la teoría clásica se centra en las propiedades un desarrollo muy amplio (Chang y Ansley,
de la puntuación global del test (x), mientras 2003). Sin embargo McBride (1998), se refie-
que la Teoría de Respuesta a los Ítems se centra re a tres problemas fundamentales que pre-
en las particularidades de cada ítem(q).”(Prieto sentan esta clase de test. En primer lugar, los
y Delgado, 1999, pp. 208) examinados no suelen tener oportunidad de
No es el objetivo de esta revisión el reali- modificar sus respuestas, una vez que estas
zar una descripción acabada de la Teoría de hayan sido emitidas. En segundo lugar, in-
Respuesta a los Ítems, sin embargo es nece- vestigaciones demuestran que es necesario
sario connotar la relación de este modelo con mantener bancos de ítems muy numerosos
el desarrollo de los tests informatizados. A para solventar la confiabilidad de las medi-
partir de esta teoría se generan pruebas psi- ciones. En tercer lugar, Rocklin, O’Donnell y
cológicas de medición de aptitudes, que en Holst (1995) creen que lo relacionado con la
función del tipo de respuesta de cada indivi- situación afectiva y motivacional derivada
duo (estrategias de solución, tiempo de del éxito o fracaso en las respuestas es un
latencia de la respuesta, omisiones, tipos de factor interviniente de gran peso. Las perso-
errores más frecuentes, etc.), asumen dispo- nas difieren en sus reacciones ante la dificul-
siciones particulares para cada caso. Este pro- tad del test, ya sea por la orientación moti-
cedimiento de auto selección de los ítems es vacional hacia el éxito o el fracaso, la

76
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

ansiedad que experimentan ante la situación res encontramos MICROCAT, CONTEST,


de evaluación (Rocklin y O’Donnell,1987; OTD, etc. Estos programas permiten el en-
Vispoel,Herindrickson y Bleiler,2000, samblaje y optimización
Vispoel, Clough, Bleiler, Hendrickson y Ihrig,
2002) o el concepto que tienen de sí mismas Hasta aquí hemos revisado las cuatro apli-
(Vispoel, Rocklin y Wang, 1994). La suma de caciones de la computación a la evaluación.
estos elementos conspira contra la validez de Un aspecto que merece mencionarse se rela-
las medidas obtenidas. Rocklin, y O’Donnell ciona con la estimación de las características
y Holst (1995), se propusieron modificar el psicométricas de confiabilidad y validez que
proceso de selección de los ítems al permitir debe cumplir cualquier test. Muchos inves-
a los sujetos seleccionar el grado de dificul- tigadores para estimar la validez de un test
tad de los ítems para que así se pueda adap- basado en un computador hacen compara-
tar la situación de evaluación a su estado ciones entre la versión informatizada y la
afectivo y emocional. Por otra parte, estima- versión de papel y lápiz. Pero los tests basa-
ron necesario presentar alguna clase de re- dos en el computador presentan diferencia
troalimentación ante las respuestas para dar- que se deben principalmente a este nuevo
le mayor sentido a la evaluación. formato, por lo cual se sugiere evaluar la va-
lidez de constructo. Existen pocos estudios
El resultado de estas propuestas es la apa- con respecto a la validez del constructo (el
rición de los Test Autoadaptados Informati- test representa el constructo por el cual esta
zados. Estos tests se describen como una va- siendo medido), existiendo la posibilidad que
riación de los test adaptados informáticos los test presenten una variación en la medi-
que permiten reducir la ansiedad y así mejo- ciones producto de un constructo irrelevan-
rar la ejecución en la prueba. Estos difieren te, este constructo irrelevante es el medio por
de los anteriores, en que el examinado pue- el cual esta siendo presentado el test. Esto se
de elegir el nivel de dificultad durante la ad- relaciona con la familiaridad con las tecno-
ministración del test (Pitkin y Vispoel 2001). logías, formato, diseño del test, etc. Por lo
Otra dificultad que se ha vista hace alusión a tanto, los autores señalan que la validez de
uso de estos con algunos pacientes psiquiá- constructo debe ser evaluada y medida y que
tricos quienes presentan algunos obstáculos el objetivo al desarrollar un test basado en la
como fobia frente al computador, inadecua- informática es aumentar la validez de
da percepción con respecto a la utilidad de constructo y disminuir la validez irrelevante
estos y otros presentan muchas reticencias a (Kristen y Sireci, 2001).
su uso (Schatz y Browndyke, 2002).
Finalmente, es importante señalar que
d) Construcción automatizadas de Tests dada la necesidad de prevenir contra el uso
inadecuado de los tests informatizados la
La construcción de los tests psicológicos se American Psychological Association (APA)
está beneficiando grandemente de la imple- en 1986 publicó directrices al respecto basán-
mentación de procedimientos informatizados. dose en las normas establecidas por el códi-
Una de la razones es que permite que la te- go de ética de los psicólogos de EE.UU. y en
diosa labor de analizar ítems y ensamblar los estándares generales de aplicación de
pruebas se realiza casi exclusivamente me- pruebas informatizadas de instituciones
diante programas computacionales especiali- como la American Educational Research
zados en el análisis estadístico. Association y el National Council of
Measurement in Education.
Existe un grupo de programas que con-
forman software especializados para la cons- De la revisión realizada se puede concluir
trucción de pruebas. Entre los más popula- que en Chile existen muy pocas aplicaciones

77
Revista de Psicología de la Universidad de Chile

y usos de los tests informatizados y menos bre o identificación. El test presenta un ade-
investigación en el tema, a pesar de los am- cuado nivel de fiabilidad (K20= 0.80), con-
plios beneficios reconocidos en la informati- sistencia interna y los juicios de los expertos
zación de tests que estos reportan. indican que es un test que mide lo que pre-
tende medir, es decir, presenta un adecuada
El presente estudio pretende contribuir en validez de contenido.
el desarrollo de este tema. El objetivo de la
investigación fue la implementación informa- Este test es atractivo y muy amigable para
tizada de un test convencional. Específicamen- los niños pero presenta como dificultad es que
te mediante un modelo estadístico descripti- es muy pesado, es decir, difícil de manipular
vo realizar una aplicación piloto de la prueba y trasladar, por lo cual se consideró que
para evaluar memoria: MEMOPOC, con el fin informatizarlo podría suplir estas dificultades.
de determinar la aplicabilidad del instrumen-
Prueba de Memoria para Posiciones, Colores
to en formato computacional. A este respecto
y Objetos (MEMOPOC, versión informatizada).
se consideró evaluar dos niveles: Aspectos
Esta prueba esta basada en la anterior en
técnicos y formales del instrumento
cuanto al diseño de las actividades, los tiem-
pos de presentación de los estímulos y lap-
Método sos que median entre ellas. Al sujeto se le
presentan las tres tareas posibles las cuales
Muestra pueden elegir por donde empezar, tiene ac-
tividades que le permiten ensayar y ver si ha
1. SUJETOS comprendido las instrucciones. Luego co-
La muestra fue intencionada no probabi- mienza con la tarea elegida, aparece la pri-
lística estratificada por edad, curso y sexo, mera ficha en el tablero y luego la segunda y
constituida por 36 niños, que cursaban de el niño cada vez debe hacer un clic en la fi-
kinder a Cuarto Básico, con un rendimiento cha que va apareciendo nueva, así sucesiva-
escolar promedio, todos pertenecientes a una mente hasta que se equivoca. Al final apare-
escuela municipalizada de la comuna de San ce el puntaje obtenido por el niño y si quiere
Pedro, Octava Región. volver hacer la prueba. Las posiciones de los
estímulos en el tablero, cada secuencia son
2. INSTRUMENTOS productos del azar, para evitar aprendizaje
de las secuencias cada vez que hace el test.
Prueba de Memoria para Posiciones, Colores
y Objetos (MEMOPOC): Prueba creada por Cuestionario: El cuestionario constaba de
Rehbein (1984) y estudiada sus característi- dos parte una que evaluaba los aspectos téc-
cas de fiabilidad y validez por Schade (1994). nicos y otra los aspectos cualitativos de la
Test que mide memoria para posiciones, co- prueba como son: la exigencia de la activi-
lores y objetos. El test está compuesto por un dad de acuerdo a la edad y la motivación
tablero magnético de 61 por 46 cm., sobre el frente a la tarea. Las respuestas eran de tipo
cual se encuentran marcados 30 puntos ne- cerradas en escala Lickert y otras si y no.
gros en 5 filas. Se presentan estímulos con-
3. PROCEDIMIENTO
sistentes en dos grupos de 15 círculos de
maderas (fichas), con un imán en su superfi- Los niños fueron invitados en forma in-
cie inferior. Constan de tres subpruebas: po- dividual a la sala de computación del cole-
siciones, colores y objetos. Las fichas de po- gio, se les explicó someramente de lo que se
siciones son todas de color rojo óxido, las de trataba y se les solicitó su colaboración. Los
colores son todas de distintos colores y la de niños debían ejecutar el test y luego respon-
objetos varía en formas, carentes de un nom- der el cuestionario.

78
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

Resultados para la subprueba de Objetos. Tanto para


Posiciones como para Colores, los porcenta-
Los resultados que se presentan a conti- jes observados de aprobación (alcanzan a leer
nuación están divididos en dos partes, los ”todo” o “bastante”) no alcanzan a ser signi-
que se relacionan con los aspectos técnicos y ficativamente mayores que los de los sujetos
aquellos que tienen que ver con los aspectos que encuentran deficiente dicho aspecto (al-
cualitativos del instrumento. canzan a leer “más o menos” o peor).

Aspectos Técnicos de cada subprueba Existe correlación positiva y significativa,


a un nivel de significación del 5%, entre la
• TIEMPO APROPIADO PARA LEER LAS evaluación de la calidad de la presentación
INSTRUCCIONES de las instrucciones en la subprueba de Posi-
ción y las variables de Edad (tau=0,35) y
La pregunta que determina la evaluación Curso (tau=0,38), en otras palabras se apre-
de este aspecto es “¿Alcanzaste a leer las ins- cia que los niños de menor edad y menor
trucciones?”. escolaridad tienden a encontrar insuficiente
el tiempo destinado a la lectura de las ins-
De acuerdo con los criterios fijados en este
trucciones. Los valores para Chi cuadrado se
estudio, la calidad de la presentación de las
presentan en la tabla 1
instrucciones alcanza niveles aceptables sólo

Tabla 1
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿alcanzaste a leer u oír las
instrucciones? según subtest.

¿Alcanzaste a leer/ Frecuencia y % de Chi–cuadrado observado


oír las instrucciones? Respuesta Observada p (esperada) = 0,5
Si No
23 13
Posición 63,9% 36,1% 2,778

22 14
Colores 61,1% 38,9% 1,778

28 8
Objetos 77,8% 22,2% 11,111 **

* : significativo para a = 0,05


**: significativo para a = 0,01

• CLARIDAD DE LA VOZ equivalentes en las 3 subpruebas, no obstan-


te los peores resultados son para la
La pregunta que determina la evaluación subprueba de posición. La apreciación es si-
de este aspecto es “¿estuvo clara la voz?” milar sin importar grupos de edades, sexo,
curso u horas semanales de acceso a compu-
Se trata de una cualidad técnica pobre-
tador. Los valores para Chi cuadrado se pre-
mente evaluada. Los porcentajes de aproba-
sentan en la Tabla 2
ción y desaprobación son estadísticamente

79
Revista de Psicología de la Universidad de Chile

Tabla 2
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿estuvo clara la voz? según subtest

¿Estuvo clara la voz? Frecuencia y % Chi–cuadrado observado


Respuesta Observada p (esperada) = 0,5
Si No
16 20
Posición 44,4% 55,6% 0,444

19 17
Colores 52,8% 47,2% 0,111

19 17
Objetos 52,8% 47,2% 11,111 **

* : significativo para a = 0,05


**: significativo para a = 0,01

• TAMAÑO ADECUADO DE LA LETRA DE LAS ciones significativamente positivas entre este


INSTRUCCIONES aspecto y las variables de edad (tau=0,45 con
posiciones; 0,43 con colores y 0,37 con obje-
La pregunta que determina la evaluación tos) y escolaridad (tau=0, 49 con posiciones;
de este aspecto es ¿está bien el tamaño de la 0,45 con colores y 0,38 con objetos). Estos
letra?”. valores indican que los niños de menor edad
y de menor escolaridad tienden a evaluar
Aspecto evaluado muy positivamente con
menos positivamente este aspecto en las 3
porcentajes superiores al 80% de aprobación
subpruebas. Los valores para Chi cuadrado
en las 3 subpruebas. Se encontraron correla-
en la Tabla 3.

Tabla 3
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿Está bien el tamaño de la letra?
según subtest
¿Está bien el tamaño Frecuencia y % Chi–cuadrado observado
de letra? Respuesta Observada p (esperada) = 0,5
Si No
30 6
Posición 83,3% 16,9% 16,000**

33 3
Colores 91,7% 8,3% 25,000**

30 6
Objetos 83,3% 16,9% 16,000**

* : significativo para a = 0,05


**: significativo para a = 0,01

80
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

• TIEMPO ADECUADO PARA INDICAR CON UN Porcentajes de aprobación en torno al 75%


CLICK EN LOS BOTONES DE DIÁLOGO obtuvo este aspecto lo que corresponde a una
buena evaluación por parte de los sujetos de
La pregunta que determina la evaluación la muestra, sin influir edad, sexo, curso ni
de este aspecto es “¿te alcanzó el tiempo para horas semanales de práctica en computador.
hacer click?”. Los valores para Chi cuadrado en la Tabla 4.
Tabla 4
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te alcanzó el tiempo para hacer
click? según subtest
¿Te alcanzó el tiempo Frecuencia y % Chi–cuadrado observado
para hacer click? Respuesta Observada p (esperada) = 0,5
Si No
26 10
Posición 72,2% 27,8% 7,111**

28 8
Colores 77,8% 22,2% 11,111**

28 8
Objetos 77,8% 22,2% 11,111**

* : significativo para a = 0,05


**: significativo para a = 0,01

• SUFICIENCIA DEL NÚMERO DE ENSAYOS resultados más notables se ven en la prueba


de objetos, donde el porcentaje de rechazo
La pregunta que determina la evaluación es un poco mayor. Esta evaluación es similar
de este aspecto es “¿te faltó ensayar más?”. para todos los grupos de edad, sexo, cursos
y no se relaciona significativamente con la
En general, cerca de aproximadamente el
cantidad semanal de horas de acceso a com-
50% de los niños se sintió disconforme con
putador. Los valores para Chi cuadrado se
la cantidad de ensayos previos a la ejecución
aprecian en la Tabla 5.
completa de cada una de las pruebas. Los

Tabla 5
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te faltó ensayar más? según subtest

¿Te faltó ensayar más? Frecuencia y % Chi–cuadrado observado


Respuesta Observada p (esperada) = 0,5
Si No
16 20
Posición 44,4% 55,6% 0,444

19 17
Colores 52,8% 47,2% 0,111

20 16
Objetos 55,6% 44,4% 0,444

* : significativo para a = 0,05


**: significativo para a = 0,01

81
Revista de Psicología de la Universidad de Chile

• DIFERENCIACIÓN DE COLORES (SUBTEST la programación eran discriminados ade-


COLORES) cuadamente por la mayoría de los niños de
la muestra sin importar edad, sexo, curso
La pregunta que determina la evaluación ni la cantidad de horas semanales de acce-
de este aspecto es “¿diferenciaste bien un so al computador con un 95% de seguri-
color de otro?”. dad. Los valores para Chi cuadrado en la
Tabla 6.
Los resultados indican que en la
subprueba de Colores los tonos usados en

Tabla 6
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿diferenciaste bien un color de otro?
según subtest
¿Diferenciaste bien un color Frecuencia y % Chi–cuadrado observado
de otro? Respuesta Observada p (esperada) = 0,5
Si No
26 10
72,2% 27,8% 7,111**
* : significativo para a = 0,05
**: significativo para a = 0,01

• CLARIDAD DE LAS IMÁGENES (SUBTEST Sólo 4 sujetos calificaron negativamente este


OBJETOS) aspecto. El 89% de la muestra encontró que las
imágenes eran bastante o totalmente claras. En
La pregunta que determina la evaluación esta apreciación no influyo edad, sexo, curso
de este aspecto es” ¿te parecieron claras las ni horas semanales frente al computador. Los
imágenes?” valores para Chi cuadrado en la Tabla 7.

Tabla 7
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te parecieron claras las imagenes?
según subtest
¿Te parecieron claras Frecuencia y % Chi–cuadrado observado
las imágenes? Respuesta Observada p (esperada) = 0,5
Si No
32 4
88,9% 11,1% 21,778**
* : significativo para a = 0,05
**: significativo para a = 0,01

82
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

• DISCRIMINACIÓN DE POSICIÓN DE FICHAS EN minan el logro en las diferentes subpruebas,


EL ESPACIO (SUBTEST POSICIONES) la capacidad para encontrar fichas nuevas en
el espacio es la que presenta menor grado de
La pregunta que determina la evaluación desarrollo. El 45% de los sujetos tuvo proble-
de este aspecto es: “¿pudiste encontrar la mas serios para realizar esta tarea sin impor-
nueva ficha en el espacio?”. tar edad, sexo, curso u horas de acceso sema-
nal a computador. Los valores para Chi
Dentro de las tareas específicas que deter-
cuadrado en la Tabla 8.

Tabla 8
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿pudiste encontrar las fichas nuevas
en el espacio? según subtest
¿Pudiste encontrar las Frecuencia y % Chi–cuadrado observado
fichas nuevas en el espacio? Respuesta Observada p (esperada) = 0,5
Si No
20 16
55,6% 44,4% 0,444
* : significativo para a = 0,05
**: significativo para a = 0,01

Aspectos cualitativos no formales de la Aún cuando el 80% de los sujetos encon-


prueba en general tró que la duración de la prueba era adecua-
da, los niños mas pequeños y los de menor
• CALIFICACIÓN DE LA EXTENSIÓN DE LA curso tendieron a evaluar como más larga la
ACTIVIDAD tarea encomendada ya que se encontró una
correlación Tau de –0,31 con edad y de –0,33
La pregunta que determina la evaluación con curso (significativa con un 95% de segu-
de este aspecto es: ¿Fue muy larga la activi- ridad). Los valores para Chi cuadrado en la
dad? Tabla 9.
Tabla 9
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿fue muy larga la actividad? según
subtest
¿Fue muy larga Frecuencia y % Chi–cuadrado observado
la actividad? Respuesta Observada p (esperada) = 0,5
Si No
7 29
19,4% 80,6% 14,211**
* : significativo para a = 0,05
**: significativo para a = 0,01

83
Revista de Psicología de la Universidad de Chile

• CANSANCIO UNA VEZ FINALIZADA LA En total 32 de 36 sujetos dijeron no encon-


EJECUCIÓN trarse cansados en lo absoluto luego de la
aplicación. En esta evaluación no influyo
La pregunta que determina la evaluación edad, sexo, escolaridad ni horas semanales
de este aspecto es: ¿estás cansado(a) después de acceso a computador. Los valores para Chi
de esta actividad? cuadrado en la Tabla 10.

Tabla 10:
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿te sentiste cansado(a)después de la
actividad? según subtest
¿Te sentiste cansado(a) Frecuencia y % Chi–cuadrado observado
después de la actividad? Respuesta Observada p (esperada) = 0,5
Si No
3 33
8,3% 91,7% 22,444**
* : significativo para a = 0,05
**: significativo para a = 0,01

• ADECUACIÓN DEL TIEMPO PREVISTO PARA El 83% de los sujetos respondió a esta pre-
REALIZARLA gunta “bastante” o “totalmente”. Esta varia-
ble correlaciona positiva y significativamente
La pregunta que determina la evaluación con edad (Rtau=0,38) y con curso (Rtau=0,39),
de este aspecto es: ¿alcanzaste a responder lo que señala que a mayor edad y más alta
en el tiempo que se te dio? escolaridad aparece mayor adecuación al
tiempo previsto para responder. Los valores
para Chi cuadrado en la Tabla 11.

Tabla 11
Prueba de Chi cuadrado para valores dicotomizados de respuestas a ¿alcanzaste a responder en el tiempo
que se te dio? según subtest
¿Alcanzaste a responder Frecuencia y % Chi–cuadrado observado
en el tiempo que se te dio? Respuesta Observada p (esperada) = 0,5
Si No
30 6
83,3% 16,7% 16,000**
* : significativo para a = 0,05
**: significativo para a = 0,01

• GRADO DE ABURRIMIENTO Esta característica esta particularmente


bien evaluada: 34 niños de 36 señalaron no
La pregunta que determina la evaluación haberse aburrido nunca sin influir edad, sexo,
de este aspecto es: ¿te sentiste aburrido en escolaridad ni horas de acceso al computador.
algún momento?

84
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

• DISPOSICIÓN A REPETIR LA ACTIVIDAD multimedia implica el uso combinado de di-


versos modos sensoriales (visual, táctil y au-
La pregunta que determina la evaluación ditivo) lo que genera en los niños un alto gra-
de este aspecto es: ¿harías de nuevo esta ac- do de interés, particularmente si la exigencia
tividad? de la tarea es coherente con su nivel de habi-
lidades.
El 13,8% de los sujetos respondió a esta
pregunta “bastante” y el 86,1% restante res- En cuanto a los aspectos técnicos del ins-
pondió “totalmente”, no obstante son los ni- trumento se observaron ciertas falencias que
ños de mayor edad y de más alta escolari- es necesario destacar. Lo primero que se debe
dad quienes están más proclives a repetir el mencionar es la relativa confusión que se
test y seguir practicando. Las correlaciones generó en torno a la comprensión de las ins-
observadas son de 0,35 con edad y 0,33 con trucciones. Las tres subpruebas presentaron,
escolaridad. en mayor o menor medida dificultades en
este aspecto (lectura de instrucciones y clari-
Discusión dad de la voz), particularmente la prueba de
posición la cual pareciera ser más compleja
Respecto a los resultados de la investiga- para los niños en función de la clase de habi-
ción piloto, el primer hallazgo a destacar se lidades memorísticas que mide
refiere a los aspectos cualitativos no forma-
les del instrumento. Una vía de solución a esta falencia nace
observando la manera en que los niños se
El grado de exigencia de la tarea para los enfrentan a nuevos juegos de computación.
evaluados fue razonablemente tolerable para Estos por lo regular presentan pantallas de
la gran mayoría. Se aprecia que, en la pers- animación que demuestran la forma correc-
pectiva de toda la muestra, la prueba no pro- ta de operar. Sería un aporte interesante el
vocó agotamiento entre los evaluados, no fue que la tarea a desarrollar en cada subprueba
catalogada como extensa y el tiempo previs- sea modelada previamente mediante una
to para ejecutarla se ajustó a los requerimien- demostración animada, acompañada de las
tos de niños entre 5 y 10 años. No obstante, instrucciones en formato de audio, ya que al
se observó que en niños de menor edad la parecer el formato de texto complica la com-
exigencia de las tareas propuestas demandó prensión, particularmente a aquellos niños
un uso más intensivo de sus capacidades lo más pequeños que no manejan adecuada-
que se expresó con un grado mayor de ago- mente la lectura.
tamiento al finalizar la prueba si se le com-
para con niños de mayor edad. Un aspecto muy positivo resultó la capa-
cidad de interacción de los niños con la prue-
En cuanto al grado de motivación que la ba. Los cuadros de diálogo funcionaron de
ejecución informatizada generó en los suje- buena manera lo que se refleja en no encon-
tos, se observó que la prueba no provocó trar problemas de importancia en el tiempo
aburrimiento significativo en ninguno de los destinado a indicar con un click las opciones
niños evaluados; es más, la totalidad de la preferidas. Se trató de lograr interactividad
muestra se mostró dispuesta a repetir la ac- a través del diseño de cuadros de diálogo
tividad en un futuro cercano. atractivos en color y agregando diseños que
En suma, la prueba fue asumida como un expresaran en nivel visual la contingencia del
desafío entretenido, atractivo y motivante. contenido (p.ej.: “caritas” sonrientes en los
Esto en sí mismo hace pensar en lo oportuno cuadros de felicitaciones, sorpresa en el error
de generar material educativo y psicométrico en los ensayos, tristeza en las finalizaciones
en formato computacional. El formato de las pruebas, etc.). Este logro en interacti-

85
Revista de Psicología de la Universidad de Chile

vidad también es reflejo de las capacidades Por otra parte, la prueba tiene otro poten-
de los niños relativas al dominio básico de cial de desarrollo, más allá de la medición
computadores. A pesar de su poca experien- psicométrica. Al diseñar el instrumento en su
cia con los computadores a los niños les bas- forma de autoaplicación se está creando una
tó con una práctica semanal compartida fren- eficaz y atractiva batería de entrenamiento y
te al computador para alcanzar un aceptable estimulación de habilidades memorísticas es-
nivel de dominio del “mouse” y la lógica de pecíficas, particularmente útil para niños con
los botones de diálogo. trastornos específicos de aprendizaje, sujetos
en rehabilitación de daño cerebral, etc. Una
Un aspecto menos positivo tiene que ver presentación de este tipo permitiría que fuera
con la suficiencia del número de ensayos, puesto a disposición de alumnos y profeso-
previo a la ejecución puntuable de la tarea. res, vía Internet en el contexto del proyecto
Los niños de todas las edades señalaron como ENLACES del Ministerio de Educación.
insuficientes las posibilidades de practicar
que la prueba le ofrecía. La forma de enfren- En general, la experiencia de diseñar y
tar la prueba sin la supervisión directa de un poner a prueba un test psicológico de ejecu-
evaluador lleva a que los niños exploren ción en formato informatizado tiene en sí
mediante ensayo y error. Esta vez la motiva- misma elementos importantes de destacar.
ción por la tarea juega en contra de los obje- No existen en nuestro entorno profesional
tivos de evaluación ya que los niños se sien- psicólogos especializándose en esta clase de
ten “obligados” a probar los límites y aplicaciones computacionales. Este hecho
“secretos” de la prueba, lo cual es imposible hace que la experiencia de este trabajo resul-
de lograr en tan pocos ensayos. te pionera, al menos para el contexto regio-
nal. Por otra parte, el trabajo coordinado con
Este punto sirve para determinar los ca- ingenieros programadores/diseñadores crea
minos que se abren en el desarrollo del una nueva área de cooperación interdiscipli-
MEMO–POC. Por una parte, para ser usada naria de interesante proyección
como instrumento de medición
psicometricamente adecuado, una vez solu- El logro fundamental de este estudio con-
cionadas ciertas deficiencias técnicas, la prue- sistió en transformar una prueba muy poco
ba puede convertirse en un eficaz medio de dúctil (difícil de transportar, cara en mate-
evaluación de trastornos en la memoria vi- riales, etc.) y en la practica inaplicable, en un
sual, ya no sólo en niños sino también en instrumento transportable, amigable, fácil de
adultos, asociado por ejemplo, a tareas como aplicar y de gran atractivo para los niños.
el diagnóstico del grado de compromiso
cognitivo que puedan estar provocando en- Los pasos subsecuentes son corregir las
fermedades degenerativas del sistema ner- falencias detectadas y proceder a la determi-
vioso central (Alzheimer, Accidentes nación de las características psicométricas del
Vasculares Encefálicos, etc.), y sin descartar instrumento, validez de constructo y fiabili-
el uso potencial en el terreno de la selección dad, en la confianza que se han controlado
de personal en empleos que requieran un un número importante de fuentes de varia-
dominio preciso de las habilidades memo- ción en los puntajes causadas por errores de
rísticas visuales de corto plazo (operadores presentación del instrumento.
de sistemas de radar, controladores de cali-
dad, etc.)

86
Ensayo de Aplicación práctica, el Test Informatizado de Memoria Memopuc, Vol. XIV, Nº 1: Pág. 00-00. 2005

Referencias Bibliográficas OLEA J. Y PONSADA, V. (1998) Test informati-


zados y adaptativos informatizados: In-
BUNDERSON, C., INTUYE, D. Y OLSEN J. (1989) The vestigación en España. Revista Electróni-
four generations of computarizad ca de Investigación y Evaluación Educativa,
Educational measurement. En R. L. Linn Vol. 4, Nº 2.
(Eds) , Educational Measurement Londres:
McMIllan. OLEA J., PONSADA, V., Y PRIETO, G. (1999) Test
Informatizados: fundamentos y Aplicaciones.
CHANG, S., Y ANSLEY T. (2003) A comparative Madrid: Piràmide
Study of item exposure control methods
In computerized adaptative testing. PITKIN A., Y VISPOEL W. (2001) Differences
Journal of educational Measurement. 40, 71– between self–adaptated and
103. computerized Adaptative test: A meta–
analisis. Journal of Educational
CONCHA (2003) Utilización de tests informati- Measurement, 38,235– 247
zados en el quehacer del psicólogo. Semina-
rio para optar al grado de Licenciado en PRIETO G. Y DELGADO, A. R. (1999) Medición
Psicología. Universidad de Concepción. cognitiva de las aptitudes En Olea J.,
Concepción Chile.
PONSADA, V. Y PRIETO G. (Eds). Test Informati-
H UFF , K., Y S IRECE , S. (2001) Validity in zados Madrid: Pirámide.
computer based testing. Educational
REHBEIN, L. (1984) Long term effects of early
Measurement, Issues and Practice. Vol. 20,
hipocampectomy in the monkey. Tesis Doc-
16–27.
toral no publicada, Northeastern
GREEN, B., BOCK, R., HUMPHREYS, L. , LINN., R., University, Boston. USA.
Y RECKASE, M. (1984) Evaluation plan For
ROCKLIN,T Y O’DONNELL A. M. (1987) Self–
the computerized adaptive tests. Journal
adapted testing: A performance–
of Educational Measurement. 21, 347–360.
improving Variant of computerized
MCBRIDE, J. (1998) Innovation in computer– adaptive testing. Journal of Educational
based ability testing: promise, problems, Psychology, 77, 368–372.
and perils. En M. D. Hakel (Eds) Beyond
ROCKLIN, T. , O’DONNELL A. M. Y HOLST P. (1995)
multiple choices. Londres; LEA
Effects and underlying mechanisms of
MUÑIZ J. Y HAMBLETON R. (1999) Evaluación self– adapted testing. Journal of educational
psicométrica de los tests informatizados. Psychology,. 77, 368–372.
En Olea J., Ponsada, V. y Prieto G. (Eds).
SCHADE, N. (1993) Validación y Fiabilidad de un
Test Informatizados. Madrid: Pirámide
Test de Reconocimiento Acumulativo. Tesis
OLEA J., Y HONTAGAS, P. (1999). Tests Informa- Doctoral. Editorial Kadmos: Universidad
tizados de primera generación. En Olea Pontificia de Salamanca. España.
J., Ponsada, V. y Prieto G. (Eds). Test In-
S CHATZ , P., Y B ROWNDYKE, J. (2002)
formatizados Madrid: Pirámide
Applications of computer based
OLEA J., Y PONSODA, V. (1996) Tests adaptativos neuropsychological Assessment. The
informatizados. En C. Vizcarro y J. A. Journal of Educational Measurement, Vol
León (Eds) Nuevas tecnologías para el apren- 37, 21–38.
dizaje. Madrid: Pirámide

87
Revista de Psicología de la Universidad de Chile

VISPOEL, W. P. HERINDRICKSON, A. Y BLEILER, T. VISPOEL, W., ROCKLIN, T. Y WANG, T. (1994).


(2000) Limiting answer review and Individual differences and test
change on computerized adaptive Administration procedure: A comparison
vocabulary test: Psychometric and of fixed–item, computerized–adaptive
attitudinal results. Journal of Educational and self–adaptive testing. Applied
Measurement, 37, 21–38. Measurement in Education,7 (1) 53–79.

V ISPOEL , W. P. C LOUGH , S., B LEIR , T., V ISWESVARAN , C. (2000) Innovations in


HENDRICKSON A., Y IHRIG, D., (2002) Can computerized assessment. Personnel
Examinees use judgements of item Psychology. Vol 53, 260–263.
difficulty to improve proficiency estimate
On computerized adaptative vocabulary W AINER, H. (1990) Computerized adaptive
test. Journal of Educational Measurement, testing: a primer. Hillsdale, NJ: LEA.
39, 311–339.

88

También podría gustarte