Tema 3: Fiabilidad (II):

Procedimientos de Evaluación
Psicometría- Curso 2020/2021
Facultad de Psicología-- Universidad de Murcia
Prof. Mª Dolores Hidalgo Montesinos
Índice
1. Introducción
2. Método formas paralelas
3. Método test-retest
4. Métodos basados en las dos mitades
• Coeficiente Spearman-Brown
• Variantes dos mitades: Rulon y Flanagan
5. Métodos basados en la consistencia interna
• Coeficiente alfa
• KR-20 y KR-21
2
 1. Introducción
¿Y cómo puedo saber si mi test es fiable?
Procedimientos empíricos de estimación del coeficiente de fiabilidad
1. Método formas paralelas (basado en la definición de test paralelos tema 2)
2. Método test-retest (basado en la repetición de la medida)
3. Métodos basados en una sola aplicación del test
Interpretación coeficiente de fiabilidad: http://www.cop.es/uploads/pdf/CET-R.pdf

Hernández, A., Ponsoda, V., Muñiz, J., Prieto, G. y Elosua, P. (2016). Revisión del modelo para
evaluar la calidad de los tests utilizados en España. Papeles del Psicólogo, 37, 192-197.
2.Método formas paralelas
(equivalencia)
Aplicación de dos test paralelos a los EJEMPLO
mismos sujetos.
FIABILIDAD: Correlación entre las
puntuaciones de las dos formas.
PROBLEMAS:
◦ Influencia de la primera administración sobre
la segunda (efecto de práctica/conocimiento
previo)
◦ Maduración
◦ Aprendizaje
2.Método formas paralelas
(equivalencia)
Cuestionario EPI de Eysenck (Formas A y B). Neuroticismo, Extraversión y Sinceridad
Items Forma A
1. ¿Desea Vd. a menudo animación y bullicio?
2. ¿Necesita con frecuencia amigos que le comprendan y alienten?
3. De ordinario, ¿es Vd. una persona despreocupada?

Items Forma B
1. ¿Le agrada mucho bullicio y agitación a su alrededor?
2. ¿Tiene Vd. a menudo un sentimiento de desasosiego como si deseara algo, pero sin
saber qué?
3. ¿Tiene Vd. casi siempre una respuesta ”a punto” cuando la gente le habla?
9. ¿Ha perdido Vd. a menudo horas de sueño, a causa de sus preocupaciones?
28. Cuando está disgustado, ¿necesita algún amigo para contárselo?
 2.Método formas paralelas
(equivalencia)
Forma A Forma B

Participantes Neuroticismo Extraversión Neuroticismo Extraversión

(SE
MUESTRAN
LOS 10
PRIMEROS
CASOS)

1 12 22 13 20

2 22 7 22 12

3 6 24 5 21

4 5 10 3 11

5 3 12 4 9

6 10 14 11 15

7 12 18 10 19
INTERPRETACIÓN
8 11 6 12 8

9 8 7 9 7

10 7 11 6 12

…… ……
3. Método test-retest (estabilidad)
Aplicación del mismo test a los mismos sujetos en dos momentos temporales.
FIABILIDAD: Correlación entre las puntuaciones de las dos medidas.
PROBLEMAS:
◦ Influencia de la primera administración sobre la segunda (efecto de
práctica/conocimiento previo)
◦ Maduración
◦ Aprendizaje

IMPORTANTE: DECIDIR TIEMPO ENTRE PRIMERA Y SEGUNDA ADMINISTRACIÓN

1) Características que son estados: entre dos semanas y 1 mes
2) Características que son estables: más de 1 mes.
3. Método test-retest (estabilidad)
EJEMPLO:
The Social Phobia Inventory (SoPhI; Moore & Gee, 2003) is a 21-item scale which
measures social anxiety according to DSM-IV-TR criteria (American Psychiatric
Association, 2000). Items are rated on a 5-point scale, ranging from 1 “never” to
5 “mostly”.

Bermejo, R., García-Lopez, L.J. & Hidalgo, M.D. (2011). The Social Phobia Inventory (SoPhi): Validity and
reliability in an adolescent population. Anales de Psicología, 27 (2), 342-349.
3. Método test-retest (estabilidad)
Participantes SOPHI-TEST SHOPI-RETEST
(SE MUESTRAN LOS AL MES
10 PRIMEROS
CASOS)
1 54 27

2 58 56

3 83 87

4 62 43

5 73 53

6 87 62

7 75 65
INTERPRETACIÓN
8 44 45

9 91 87

10 72 55

…… ……
4. Métodos basados en dos mitades
◦ Coeficiente Spearman-Brown
◦ Variantes dos mitades:
◦ Rulon
◦ Flanagan
Características generales:
Una sola aplicación del test
Se divide el test en dos subtests (dos partes). Se obtienen dos puntuaciones una
para un subtest y otra para otro subtest.
Ejemplo: Test 20 ítems (dos subtests de 10 ítems). Puntuación Total basada en
los 20 ítems, puntuación total subtest 1 basada en 10 ítems y puntuación total
subtest 2 basada en los otros 10 ítems restantes
4. Método de dos mitades
Coeficiente de Spearman-Brown
Una sola aplicación del test
Pasos:
1. Se divide el test en dos subtests (dos partes)
2. Se obtiene el coeficiente de correlación entre las puntuaciones obtenidas
en los dos subtests: Coeficiente de fiabilidad del test mitad.
3. Se aplica la corrección de Spearman-Brown para obtener la fiabilidad del
Test total.

VEAMOS UN EJEMPLO
4. Método de dos mitades
Cuestionario de Autoconcepto Físico (CAF)

Moreno, J.A. y Cervelló, E. (2005). Physical self-perception in Spanish adolescents: effects of gender and involvement in physical activity. Journal of
Human Movement Studies, 48, 291-311

Seleccionamos 12 ítems SI NO

1. Me siento feliz 1 2
2. Tengo mucha resistencia física 1 2
3. Tengo más fuerza que la mayoría de la gente de mi edad 1 2
4. ……….. 1 2
5. …… 1 2
6. …….. 1 2
7. ……. 1 2
8. ……. 1 2
9. …… 1 2
10. Soy bueno/a en los deportes 1 2
11. …… 1 2
12. …… 1 2
1. Dividir el test en dos mitades
Items

Sujeto 1 2 3 4 5 6 7 8 9 10 11 12 Xp Xi TOTAL

1 1 0 1 0 0 0 0 0 0 0 0 0 0 2 2

2 1 1 1 0 0 1 0 0 0 0 0 0 2 2 4

3 1 1 1 1 0 0 0 0 0 0 0 0 2 2 4

4 1 1 0 1 1 0 0 1 0 0 0 0 3 2 5

5 1 1 1 1 1 0 0 0 0 0 0 0 2 3 5

6 1 1 1 0 1 1 1 0 0 0 0 0 2 4 6

7 1 1 1 1 1 1 1 0 0 0 0 0 3 4 7

8 1 1 1 1 0 1 1 1 1 1 0 0 5 4 9

9 1 1 1 1 1 1 1 1 1 1 1 0 5 6 11

10 1 1 1 1 1 1 1 1 1 1 1 1 6 6 12

SUMA 10 9 9 7 6 6 5 4 3 3 2 1 30 35 65

N 10 10 10 10 10 10 10 10 10 10 10 10 10 10 10

SUMA/ 1 0.9 0.9 0.7 0.6 0.6 0.5 0.4 0.3 0.3 0.3 0.1 3 3.5 6.5
N
2. Obtener correlación entre las puntuaciones de las
dos mitades

rx P xI
= 0.808
3. Aplicar Coeficiente de Spearman-Brown
2r X P X I 2(0.808)
r xx ' = = = 0.894
1 + r X P X I 1 + 0.808
Excelente ≥ 0.85
 Interpretación Coeficientes de consistencia y basados en dos mitades

Coeficiente de Spearman-Brown
2r X P X I 2(0.808)
r xx ' = = = 0.894
1 + r X P X I 1 + 0.808
Variantes dos mitades
Ecuación de Rulon (1939), basada en las diferencias entre las
puntuaciones del subtest par y las puntuaciones del subtest impar (D).
Ecuación de Flanagan (1937): basada en la varianza de las puntuaciones
pares y la varianza de las puntuaciones impares.
Ecuaciones
s 2
r XX ' =1- D Ecuación de Rulón

s 2
X

æ s +s
2 2
ö
r XX ' = 2ç 1 - ÷
XP XI Ecuación de Flanagan
ç s 2 ÷
è X ø
Veamos un ejemplo

ESCALA DE INTELIGENCIA EMOCIONAL (Trait-Meta Mood Scale, TMMS-24)

Salovey, P. y Mayer, J. D. (1990). Emotional intelligence. Imagination, Cognition, and Personality, 9, 185-211.

A continuación se plantean una serie de enunciados acerca de los cuales desearíamos conocer tu opinión. Muestra tu acuerdo o desacuerdo
siguiendo el siguiente esquema:

0 1 2 3
Nada de Algo de Bastante de Muy de
Acuerdo acuerdo Acuerdo Acuerdo

1. Presto mucha atención a los sentimientos 0 1 2 3

2. Normalmente me preocupo mucho por lo que siento 0 1 2 3
3. Normalmente dedico tiempo a pensar en mis emociones 0 1 2 3
4. Pienso que merece la pena prestar atención a mis 0 1 2 3
emociones y estado
5. Dejo que mis sentimientos afecten a mis pensamientos 0 1 2 3
6. Pienso en mi estado de ánimo constante 0 1 2 3
7. A menudo pienso en mis sentimientos 0 1 2 3
8. Presto mucha atención a cómo me siento 0 1 2 3
Pasos para calcular Rulon y Flanagan
Items

Sujeto 1 2 3 4 5 6 7 8

A 3 3 3 3 3 3 2 3

B 3 3 2 2 1 1 2 1

C 3 3 3 3 3 3 2 2

D 2 3 3 2 3 2 2 1

E 1 2 1 1 1 1 0 0
1. Obtener puntuaciones totales en cada subtest mitad del test original.
Ejemplo: test tiene 8 ítems. Cada subtest tendrá 4 ítems
2. Obtener la puntuación D (diferencia entre puntuaciones par e impar
3. Obtener puntuación total en el test.
4. CALCULAR VARIANZAS
Sujeto XP XI D X
A 12 11 1 23
B 7 8 -1 15
C 11 11 0 22
D 8 10 -2 18
E 4 3 1 7
Varianza 8.24 9.04 1.36 33.2
APLICAR LAS FÓRMULAS

s 2
1.36
r XX ' = 1- = 1- D
= 0.959
s 2
33.2
X

æ s X2 P + s X2 I ö
r XX ' = 2ç 1 - ÷ = 2æç1 - 8.24 + 9.04 ö÷ = 0.959
ç s 2 ÷ è 33.2 ø
è X ø

Excelente ≥ 0.85
5. Métodos basados en consistencia
interna
Coeficiente alfa de Cronbach
◦ Items en cualquier formato de respuesta

Coeficientes KR-20 y KR-21

◦ Items en formato de respuesta dicotómico
◦ KR-21 cuando los ítems tienen la misma media (proporción de éxito o dificultad).

Estos coeficientes de fiabilidad están expresando el grado de consistencia

Interna de los ítems, es decir, el grado de homogeneidad, no de
dimensionalidad

Estos coeficientes son un límite inferior del coeficiente de fiabilidad cuando

los ítems del test no son estrictamente paralelos.
Varianza de las respuestas
dadas al ítem j n
(número de
ítems del test)

æ 2 ö
n
ç ås j ÷
n ç j =1 ÷
r XX ' = 1- 2
n -1ç sX ÷ Ecuación de Cronbach

ç ÷
è ø
Cuando los ítems son dicotómicos su varianza se
obtiene según:
pj = proporción de aciertos en el ítem j
qj = proporción de fallos en el ítem

pj + qj = 1

Varianza de las respuestas

dadas al ítem j

æ n
ö
ç å p jq j ÷
n ç j =1 ÷
r XX ' = 1- Ecuación KR-20

n -1 ç sX ÷
2

ç ÷
è ø
 æ µ2
ö
ç µX - X
÷
n ç n ÷
Ecuación KR-21
r XX ' = 1-
n -1ç sX
2
÷
ç ÷
è ø
GRIT SCALE- ESCALA DE TENACIDAD
Duckworth, A. L., Peterson, C., Matthews, M. D., & Kelly, D. R. (2007). Grit: Perseverance and passion for long-term
goals. Journal of Personality and Social Psychology, 92, 1087–1101.

10-Me siento totalmente identificado / 1-No me siento nada identificado

Ítem 1: Los contratiempos no me desaniman

Ítem 2: Soy una persona muy trabajadora
Ítem 3: Termino lo que empiezo
Ítem 4 He logrado una meta que me llevó años de trabajo

Items
Sujeto 1 2 3 4 Total=X
A 5 6 4 6 21
B 6 7 5 7 25
C 6 7 6 8 27
D 7 8 6 8 29
E 5 6 4 5 20
Coeficiente alfa de Cronbach
Paso 1: Obtener para cada ítem del test su varianza
Paso 2: Obtener la varianza de las puntuaciones totales en el test

Items
Sujeto 1 2 3 4 Total=X

A 5 6 4 6 21
B 6 7 5 7 25
C 6 7 6 8 27
D 7 8 6 8 29
E 5 6 4 5 20
σ2 0.56 0.56 0.80 1.36 11.84
Coeficiente alfa de Cronbach
Paso 3: Aplicar la fórmula

æ n
2 ö
ç ås j ÷
n ç j =1 ÷ 4æ 3.28 ö
r XX ' = 1- = ç1 - ÷ = 0.96
n -1ç s X ÷ 3 è 11.84 ø
2

ç ÷
è ø
EPQR-A Eysenck Personality Questionnaire Revised-A
(6 ítems de la subescala Extraversión)
Sandín, F., Valiente, R., Chorot, P., Olmedo, M. y Santed, M.A. (2002). Versión española del cuestionario EPQR-Abreviado (EPQR-A) (I):
Análisis Exploratorio de la estructura factorial. Revista de Psicopatología y Psicología Clínica, 7, 195-205.

Responder SI o NO
La respuesta positiva (SI) se codifica como 1
La respuesta negativa (NO) se codifica como 0
1. ¿Es una persona habladora?
2. ¿Es una persona animada?
3. ¿Es una persona callada? (R)
4. ¿Le consideran muy animado/a?
5. ¿Podría animar una fiesta?
6. ¿Tiende a mantenerse en el anonimato? (R)
(R) ítems en sentido inverso. Hay que cambiar el sentido de la
codificación
Ejemplo KR-20
Items
Sujeto 1 2 3 4 5 6 X
A 1 1 0 1 0 0 3
B 1 0 1 1 1 0 4
C 0 1 1 0 0 0 2
D 1 1 1 1 1 1 6
E 1 0 0 0 0 0 1
 Ejemplo KR-20
Items
Sujeto 1 2 3 4 5 6 X
A 1 1 0 1 0 0 3
B 1 0 1 1 1 0 4
C 0 1 1 0 0 0 2
D 1 1 1 1 1 1 6
E 1 0 0 0 0 0 1
4/5=0.8
p 0.6 0.6 0.6 0.4 0.2
1-0.8=0.2
q 0.4 0.4 0.4 0.6 0.8 σ2=
(0.8)(0.2)=
pq 0.16 0.24 0.24 0.24 0.24 0.16 2.96
Ejemplo KR-20 (continuación)
æ n
ö
ç å p jq j ÷
n ç j =1 ÷= 6 æ 1.28 ö
r XX ' = 1- ç1 - ÷ = 0.681
n -1ç s X2 ÷ 5 è 2.96 ø
ç ÷
è ø
 Ejemplo KR-21
Un test de razonamiento lógico formado por 6 ítems de respuesta dicotómica.
Todos los ítems tienen la misma dificultad (p=0.53).
La media puntuaciones totales en el test fue de 3.2
La varianza de las puntuaciones totales en el test fue 2.96
¿Cuál sería el coeficiente de fiabilidad estimado de ese test?

æ µ X2 ö æ (3.2) 2 ö
ç µX - ÷ ç 3.2 - ÷
n ç n ÷= 6ç 6 ÷ = 0.594
r XX ' = 1- 1-
n -1ç s X2 ÷ 5ç 2.96 ÷
ç ÷ ç ÷
è ø è ø