1

ANLISIS DE UN TEST
POR MTODOS DE LA TCT CON EL PROGRAMA SPSS


1. El test

Los datos corresponden a un subtest de una batera de tests de aptitudes comercializada.
El subtest elegido es un test de Razonamiento Abstracto, formado por 25 tems de
eleccin mltiple de 6 alternativas de respuesta, de las cuales solamente una es correcta.
El test es de aplicacin en Segundo Ciclo de Educacin Secundaria Obligatoria.

1.1 Alternativa correcta en cada item
La alternativa correcta de cada tem se presenta en la tabla 1.

Tabla 1. Alternativas correctas de cada uno de los 25 items

Item Correcta
1 1
2 4
3 4
4 3
5 2
6 1
7 4
8 3
9 6
10 3
11 6
12 6
13 2
14 4
15 5
16 4
17 1
18 4
19 2
20 3
21 4
22 6
23 5
24 4
25 4


2. El anlisis de los datos

El anlisis de los datos de un test comienza con la descripcin de las frecuencias de
seleccin de cada una de las alternativas.

2.1. Anlisis de alternativas de respuesta
En la tabla 2 se presentan las frecuencias relativas (porcentajes) de eleccin de las
diferentes opciones de respuesta. El nmero indica la alternativa seleccionada. El 8
representa respuestas omitidas. Puesto que no se trata de un test de velocidad, no se ha
diferenciado entre omitidas y no alcanzadas.
Este anlisis se ha realizado con el programa SPSS-Tablas-Tablas de frecuencias.

2
Tabla 2. Frecuencias relativas de las diferentes opciones de respuesta
1 2 3 4 5 6 8

% % % % % % %
item1
97,1% 1,0% ,3% ,2% ,5% ,3% ,6%
item2
6,5% ,3% 4,4% 81,6% 6,0% ,2% ,9%
item3
4,6% 1,5% 43,5% 43,9% 1,1% 4,2% 1,1%
item4
7,6% 12,9% 32,3% 9,9% 23,0% 9,8% 4,5%
item5
,5% 40,0% 30,0% 22,2% 2,5% ,9% 3,9%
item6
97,8% ,5% ,3% ,4% ,3% ,1% ,5%
item7
,9% 4,6% 4,7% 76,9% 10,2% ,4% 2,4%
item8
,7% 4,8% 86,2% 1,8% 1,5% 1,7% 3,2%
item9
1,6% ,6% 13,7% ,6% 2,8% 79,4% 1,4%
item10
4,5% 10,0% 62,8% 3,6% 3,7% 7,2% 8,0%
item11
21,8% 1,5% 1,6% ,9% ,3% 72,5% 1,4%
item12
12,1% 11,9% 15,3% ,5% 4,8% 46,9% 8,5%
item13
21,9% 67,0% 4,7% 1,3% 1,5% ,9% 2,8%
item14
21,8% 3,8% 3,5% 58,7% 2,1% 1,5% 8,7%
item15
5,5% 1,0% ,8% 1,7% 87,3% ,5% 3,3%
item16
4,7% 1,8% ,7% 88,8% ,6% 1,6% 1,8%
item17
50,8% 11,2% 9,7% 4,3% 2,6% 1,3% 20,1%
item18
8,3% 24,3% 2,4% 41,0% 7,7% 1,5% 14,8%
item19
28,2% 28,2% 14,9% 1,6% 4,8% 2,3% 20,0%
item20
6,0% 9,9% 66,6% 3,5% 1,5% ,9% 11,7%
item21
1,1% ,8% 1,5% 20,2% 57,3% 5,0% 14,1%
Item22
9,0% 1,7% 1,9% 3,6% 2,2% 74,4% 7,3%
Item23
7,1% 4,0% 4,5% 14,2% 53,5% 1,3% 15,5%
Item24
3,0% 1,2% 2,6% 58,4% 9,2% 16,4% 9,2%
Item25
42,6% 11,4% 4,2% 15,9% 5,1% 4,4% 16,5%

Para analizar el funcionamiento de la respuesta correcta y de los distractores (opciones
incorrectas) se examinan los % de la tabla. Todas las opciones incorrectas deben ser
seleccionadas por proporciones de sujetos considerablemente inferiores a la de la
respuesta correcta. Por ejemplo, el tem 3 puede ser problemtico, ya que prcticamente
es igual la proporcin de elecciones a la opcin 3 (incorrecta) y a la 4 (correcta).
Por otra parte, para que un distractor sea adecuado, debe ser elegido por un % aceptable
de sujetos (en principio un mnimo de 4-5%), aunque debera matizarse en funcin de la
puntuacin total.

2.2. Anlisis de tems de la Teora Clsica de los tests y clculo de la fiabilidad
Los clculos se realizan con el programa SPSS-Escalas-Anlisis de Fiabilidad, una vez
recodificados los tems a valores 1 (eleccin de la respuesta correcta) y 0 (respuesta
incorrecta), tal como se explic en prcticas. Estos tems recodificados llevan los
nombres VAR0001-VAR0025.

3


Para obtener los estadsticos requeridos se hace click en Estadsticos y se marcan las
opciones siguientes:


4
El mtodo seleccionado en este caso es el coeficiente Alpha, como puede verse en la
primera pantalla.

A continuacin se hace click en Continuar y Aceptar y el programa nos proporciona
la siguiente salida presentada en la tabla 3.

Tabla 3. Resumen del procesamiento de los casos
N %
Vlidos
3147 100,0
Excluido
s(a)
0 ,0
Casos
Total
3147 100,0

Posteriormente el programa proporciona el valor del coeficiente alpha, procedimiento
seleccionado.

Estadsticos de fiabilidad

Alfa de
Cronbach
N de
elementos
,815 25


Los estadsticos descriptivos univariantes de los elementos se presentan en la tabla 4.


Tabla 4. Estadsticos descriptivos de los
elementos
Media
Desviacin
tpica N
item1
,97 ,168 3147
item2
,82 ,388 3147
item3
,44 ,496 3147
item4
,32 ,468 3147
item5
,40 ,490 3147
item6
,98 ,146 3147
item7
,77 ,422 3147
item8
,86 ,345 3147
item9
,79 ,404 3147
item10
,63 ,483 3147
item11
,73 ,447 3147
item12
,47 ,499 3147
item13
,67 ,470 3147
item14
,59 ,492 3147
item15
,87 ,333 3147
item16
,89 ,316 3147
item17
,51 ,500 3147
item18
,41 ,492 3147
item19
,28 ,450 3147
item20
,67 ,472 3147
item21
,20 ,401 3147
item22
,74 ,437 3147
item23
,54 ,499 3147
5
item24
,58 ,493 3147
item25
,16 ,365 3147

Recordad que la Media en el caso de tems dicotmicos como el test que analizamos es
la Proporcin de aciertos o ndice de dificultad del tem. La varianza en estos tems es
simplemente p
i
q
i
, alcanzndose sus valores mximos cuando p
i
= q
i
= 0,50, siendo ms
bajas cuanto ms extremas son las proporciones. La desviacin tpica que aparece en la
tabla es la raz cuadrada de la varianza.

A continuacin se obtienen los estadsticos bivariantes que relacionan cada elemento
con el total. De ellos, la columna etiquetada como Correlacin corregida elemento-
total es el denominado en la TCT ndice de discriminacin del tem, que es un criterio
importante para la seleccin de tems, recomendndose que en general su valor sea
0.30.
La ltima columna expresa el valor del coeficiente alpha si se eliminase el tem y que
como alpha es directamente proporcional al nmero de tems, debera decrecer si el
elemento es adecuado.


Tabla 5. Estadsticos total-elemento

Media de la
escala si se
elimina el
elemento
Varianza de la
escala si se
elimina el
elemento
Correlacin
elemento-total
corregida
Alfa de
Cronbach si
se elimina el
elemento
item1
14,31 20,794 ,230 ,813
item2
14,47 20,058 ,278 ,811
item3
14,84 19,867 ,239 ,814
item4
14,96 19,780 ,282 ,811
item5
14,88 19,588 ,310 ,810
item6
14,30 20,738 ,310 ,812
item7
14,51 19,451 ,415 ,805
item8
14,42 19,939 ,362 ,808
item9
14,49 20,097 ,251 ,812
item10
14,65 19,128 ,428 ,804
item11
14,56 19,483 ,378 ,807
item12
14,81 19,400 ,347 ,809
item13
14,61 19,111 ,448 ,803
item14
14,70 18,988 ,453 ,803
item15
14,41 19,726 ,451 ,805
item16
14,39 19,743 ,474 ,805
item17
14,77 19,170 ,400 ,806
item18
14,87 19,647 ,294 ,811
item19
15,00 19,559 ,354 ,808
item20
14,62 18,969 ,482 ,802
item21
15,08 20,344 ,184 ,815
item22
14,54 19,142 ,482 ,802
item23
14,75 19,308 ,369 ,807
item24
14,70 19,023 ,443 ,804
item25
15,12 20,539 ,151 ,816

6
Puede observarse que para estos datos, alpha aumenta si se elimina el tem 25 (es el que
tiene adems el ndice de discriminacin con un valor ms bajo) y permanece igual con
el 21 (que tambin tiene un bajo valor del ndice de discriminacin).

En la tabla 6 se presentan los estadsticos descriptivos del test total y a ella acudiremos
en busca de estos estadsticos cuando nos sean necesarios.

Tabla 6. Estadsticos de la escala
Media Varianza
Desviacin
tpica
N de
elementos
15,28 21,173 4,601 25

A continuacin, en la tabla 7, se presentan los resultados del ANOVA, que se recordar
que es otra forma para obtener el coeficiente alpha:

Tabla 7. ANOVA para los tems del test

Suma de
cuadrados gl
Media
cuadrtica F Sig.
Inter-personas
2664,395 3146 ,847
Inter-elementos
4170,665 24 173,778 1106,401 ,000
Residual(a)
11859,095 75504 ,157
Intra-personas
Total
16029,760 75528 ,212
Total
18694,155 78674 ,238
Media global =,61

Recordemos de las clases de teora que una forma de calcular alpha es:


Re
1 1
0,157
1 0, 815
0, 847
MCIP MC sidual
MCP MCInterpersonas

= =
= =

Recordemos que alpha tambin puede estimarse mediante la correlacin intraclase. El
SPSS nos proporciona dos valores para la correlacin intraclase, equivalente al
coeficiente alpha.

Tabla 8. Coeficiente de correlacin intraclase
Intervalo de confianza 95% Prueba F con valor verdadero 0

Correlacin
intraclase(a)
Lmite inferior
Lmite
superior Valor gl1 gl2 Sig.
Medidas individuales
,149(b) ,142 ,158 5,392 3146,0 75504 ,000
Medidas promedio
,815(c) ,805 ,824 5,392 3146,0 75504 ,000
Modelo de efectos mixtos de dos factores en el que los efectos de las personas son aleatorios y los
efectos de las medidas son fijos.
a Coeficientes de correlacin intraclase de tipo C utilizando una definicin de coherencia, la varianza
inter-medidas se excluye de la varianza del denominador.
b El estimador es el mismo, ya est presente o no el efecto de interaccin.
c Esta estimacin se calcula asumiendo que no est presente el efecto de interaccin, ya que de otra
manera no es estimable.

El primero de los valores Medidas individuales- es el coeficiente alpha que se
obtendra si el test estuviese formado por un nico tem. El segundo de los valores
Medidas promedio- es el equivalente el coeficiente alpha de longitud n.
7
Los valores del IC del (1-)% permiten establecer inferencias para el coeficiente alpha.
Por ejemplo, en el test tratado los lmites inferior y superior son respectivamente 0,805
y 0,824.

2.3 Otros procedimientos para el clculo de coeficientes de fiabilidad con el SPSS-
Escalas-Fiabilidad.
En apartados anteriores se utiliz el procedimiento ms habitual en la actualidad; no
obstante, con el SPSS tambin pueden derivarse otras formas de coeficientes de
fiabilidad, como los mtodos de dos mitades y los diferentes procedimientos de
Guttman:

A. Procedimientos dos mitades.
Para su clculo con SPSS se procede de la misma forma: Escalas-Fiabilidad, pero se
selecciona el mtodo Dos mitades.



Para utilizar el procedimiento Pares-impares (recomendado normalmente), hay que
introducir en primer lugar todos los tems impares y despus los pares, ya que el SPSS
utiliza como primera mitad los n/2 primeros tems y como segunda mitad los restantes.
La salida proporcionada por el SPSS es la siguiente, presentada en la tabla 9:

Tabla 9. Estadsticos de fiabilidad
Valor
,650
Parte 1
N de elementos
12(a)
Valor
,717
Parte 2
N de elementos
12(b)
Alfa de Cronbach
N total de elementos
24
8
Correlacin entre formas
,703
Longitud igual
,826
Coeficiente de
Spearman-Brown
Longitud desigual
,826
Dos mitades de Guttman
,824
a Los elementos son: item1, item3, item5, item7, item9, item11, item13, item15, item17, item19, item21,
item23.
b Los elementos son: item2, item4, item6, item8, item10, item12, item14, item16, item18, item20, item22,
item24.

Como puede observarse proporciona coeficientes alpha para cada una de las mitades de
12 items, la correlacin entre las dos mitades (0,703), la correlacin corregida por el
procedimiento de Spearman-Brown (0.826). Tambin proporciona el procedimiento de
Guttman-Flanagan,, equivalente al de Rulon, que no hace el supuesto de paralelismo de
las mitades y que en este caso, como es esperable, proporciona un valor algo menor
(0,824).

B. Procedimientos de Guttman de consistencia interna con los n tems.
Para obtener los diferentes coeficientes de Guttman, se procede de la misma forma,
cambiando la opcin en el Mtodo


El resultado son los 6 coeficientes de Guttman, en los que puede verse la equivalencia
entre Lambda-3 y el coeficiente alpha, como se ha visto en teora. Estos valores se
presentan en la tabla 10.

Tabla 10. Estadsticos de fiabilidad
1
,782
2
,820
Lambda
3
,815
9
4
,829
5
,803

6
.
N de elementos
25

Los restantes resultados (del anlisis de tems) son independientes del mtodo y no se
repiten aqu.

C. Otros resultados.
Los estadsticos anteriores son los que se pueden obtener con el SPSS. Puede observarse
que faltan algunos estadsticos importantes de la TCT, como el Error tpico de medida.
Este estadstico, debe calcularse manualmente, utilizando el coeficiente de fiabilidad
calculado y la desviacin tpica del test, que aparece en la tabla de Estadsticos de la
Escala.
Los procedimientos que se han visto en la teora para hacer inferencias sobre
puntuaciones verdaderas, puntuaciones diferencia, etc., se obtienen manualmente,
utilizando la informacin de los estadsticos particulares a partir de los resultados del
SPSS.