Psicometría y Análisis Factorial

Fundamentos y Aplicaciones en R

Curso sobre evidencias de validez y análisis de confiabilidad con

énfasis en Análisis Factorial Confirmatorio

08. COEFICIENTES DE CONSISTENCIA INTERNA

Ronald W. Castillo Blanco

Febrero 2022
Confiabilidad
Introducción y cuándo reportarlo

2
Confiabilidad
¿Son los ítems
coherentes y Consistencia Alpha,
congruentes entre Interna Omega
ellos y con el total de
las puntuaciones?

¿Son las
PRECISIÓN
puntuaciones Test - Retest
DE LA
estables en el
MEDICIÓN
tiempo?

¿Son las mediciones

las mismas luego de
aplicaciones de Pruebas paralelas
versiones similares
del test?
3
(Wilkinson and the Task Force on 4
Statistical Inference, 1999)
Ideas clave:

✓Utilizar el coeficiente alfa, omega, etc., es realizar el

análisis de confiabilidad mediante el método de
consistencia interna.
✓En lo posible, siempre reportar una medida de
confiabilidad.

5
Vayamos más allá de lo que solemos
aceptar en cuanto al coeficiente alfa

Compiladores vs buenos compiladores

¡Que empiece la acción! 

6
Coeficiente alpha y por qué no es
necesario calcular KR20

7
Hacia los años 50s….
Citado más en más de
22000 estudios!

8
Algebraica y numéricamente KR20 = 

9
Érase los años 30s del siglo pasado….

10
La fórmula “KR-20”

11
➢ Fórmula de fracciones heterogéneas
𝑎 𝑐 𝑎 𝑑 +𝑐 𝑏
+ = ….(1)
𝑏 𝑑 𝑏𝑑
➢ Fórmula de fracciones homogéneas
𝑎 𝑐 𝑎+𝑐
+ = ….(2)
𝑏 𝑏 𝑏

➢ Fórmula de fracciones heterogéneas

𝑎 𝑐 𝑎(𝑑) + 𝑐(𝑏)
+ =
𝑏 𝑑 𝑏𝑑
Un caso especial b = d:
𝑎 𝑐 𝑎(𝑏) + 𝑐(𝑏) 𝑎 + 𝑐
+ = =
𝑏 𝑏 𝑏𝑏 𝑏
La ecuación (2) es un caso especial de la ecuación (1). Todas
12
las operaciones pueden hacerse con (1) porque esta es más general.
Consistencia interna antes de :
Promedio de
todas las
posibles 1937 1941 1945 1951
todas mitades Kuder-Richardson Hoyt Guttman Cronbach
(KR20) (Usando i de ()
ANOVA) Guttman

1910 1937 Flanagan

Fórmula de 1939 Rulón
Spearman-Brown
(Dos mitades) 1941 Mosier

2𝜌𝑎𝑏 Dos
𝜌𝑋𝑋′ = mitades
1 + 𝜌𝑎𝑏 Y luego de alfa…

13
 Raju’s coefficient Feldt’s coefficient
(Raju, 1977) (Feldt y Brennan, 1989)

Angoff-Feldt coefficient Kristof’s coefficient

(Feldt, 1975) (Kristof, 1974)

Feldt-Gilmer Coefficient Lambda2

(Gilmer and Feldt, 1983) (Guttman, 1945)

Maximized Lambda4 coefficient

(Callender y Orburn, 1977) Maximal reliability
(Li, Rosenthal y Rubin, 1996)
……
Todo lo anterior resumido en:

14
¿Qué nos dirá Cronbach de todo esto que fue
pasando a los 50 años de su importante
artículo…?
15
En consideración a los aportes de Lee Cronbach,
evitemos usar la expresión “alfa de Cronbach”
cuando hagamos mención del coeficiente alfa.

It is an embarrassment to me that
the formula became conventionally
known as “Cronbach’s ”.
(Cronbach y Shavelson, 2004, p. 397)

Cronbach, L. J., y Shavelson, R. J. (2004). My current thoughts on coefficient alpha and

successor procedures. Educational and Psychological Measurement, 64(3), 391–418.
doi:10.1177/0013164404266386
16
¿Qué es incorrecto en el siguiente
procedimiento?

Mediciones Número de ítems α

Dimensión 1 5 .78
Dimensión 2 5 .82
Dimensión 3 4 .81
Dimensión 4 4 .75
Total 16 .84

No existe “alfa total”. El coeficiente de consistencia interna alfa

se calcula a partir del supuesto de unidimensionalidad.

17
Ideas clave:

✓ La formulación del coeficiente alpha fue iniciado antes de la

síntesis de Lee Cronbach de 1951.
✓ El KR20 es solo un caso especial del coeficiente alpha.
✓ De preferencia expresar “coeficiente alpha” en lugar “alpha
de Cronbach”.
✓ No existe alpha total.

18
Repensemos la consistencia interna desde
la perspectiva del modelamiento de
ecuaciones estructurales

19
 Modelos de medición congenéricos,
equivalente-tau y paralelos Ver: Cho (2016)

(a) Modelo congenérico (b) Modelo equivalente-Tau (b) Modelo paralelo

λ1 λ λ
λ2 λ λ

λ3 λ λ

Var(e1)=Var(e2)=Var(e3)

  20
Ideas clave:

✓La consistencia interna también se enmarca en el

análisis de estructura interna.
✓El coeficiente alpha es un caso especial del
coeficiente omega.

21
La definición de confiabilidad por
consistencia interna

𝑉𝑎𝑟𝑖𝑎𝑏𝑖𝑙𝑖𝑑𝑎𝑑 𝑣𝑒𝑟𝑑𝑎𝑑𝑒𝑟𝑎
𝜌𝑋𝑋′ =
𝑉𝑎𝑟𝑖𝑎𝑏𝑖𝑙𝑖𝑑𝑎𝑑 𝑡𝑜𝑡𝑎𝑙

2
𝜎𝑇
𝜌𝑋𝑋′ = 2 2
𝜎𝑇 + 𝜎𝑒

22
Aunque la
denominación de
coeficiente
omega se hace
explícito con
McDonald (1999), la
formulación de esta
se había iniciado con
Jöreskog (1971)
como composite
realiability.

23
 Coeficiente de consistencia interna
omega ()
𝑝 2
σ𝑖=1 𝜆𝑖
𝜔= 𝑝 2 𝑝
σ𝑖=1 𝜆𝑖 + σ𝑖=1 𝑒𝑖
𝑑𝑜𝑛𝑑𝑒:
𝑝 𝑒𝑠 𝑒𝑙 # í𝑡𝑒𝑚𝑠
𝑒𝑖 = (1 − 𝜆2𝑖 )

www

24
Ideas clave:

✓El coeficiente omega se formuló antes del texto de

McDonald (1999)
✓El coeficiente omega se calcula a partir de las cargas
factoriales resultantes del AFC.

25
Ejemplos en publicaciones en revistas
del alto impacto

26
27
28
29
30
31
32
33
34
De una revisión de la totalidad de artículos en
Psychological Assessment en el 2019 (119), se tuvo que
en 50 reportaron resultado de consistencia interna en
su sección de resultado.

35
Ejemplo de tabla de presentación de resultados
descriptivos
Tabla 4
Descriptivos y coeficientes de consistencia interna de las dimensiones de la escala de la
percepción de la calidad de servicio del usuario interno (N=578)

Medición Núm. ítems M DE  Asimetría

Cooperación entre usuarios internos 5 13.6 3.7 .80 -0.96

Liderazgo de la gestión 3 12.7 5.0 .82 -0.75
Valoración de su labor 5 13.8 3.5 .77 -0.96
Responsabilidad institucional 5 11.3 3.8 .71 -0.41

36
Ideas clave:

✓ No se suele valorar la consistencia interna de “acuerdo con

algún autor”. La valoración la hace el lector..
✓ Se reporta un coeficiente de consistencia interna, los dos al
mismo tiempo es innecesario.

37
 Algunos artículos que describen las limitaciones del coeficiente alfa.
(Esta diapositiva se agregó a la conferencia luego de las preguntas de los
participantes)
➢ Cortina, J. M. (1993). What is coefficient alpha? An examination of theory and applications. Journal of
Applied Psychology, 78(1), 98–104. https://doi.org/10.1037/0021-9010.78.1.98
➢ Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3), 297–334.
https://doi.org/10.1007/BF02310555
➢ Cronbach, L. J., & Shavelson, R. J. (2004). My Current Thoughts on Coefficient Alpha and Successor
Procedures. Educational and Psychological Measurement, 64(3), 391–418.
https://doi.org/10.1177/0013164404266386
➢ Gadermann, Anne M., Guhn, & Martin & Bruno D. Zumbo. Estimating ordinal reliability for Likert-type and
ordinal item response data: A conceptual, empirical, and practical guide.
➢ Gignac, G. E., & Watkins, M. W. (2013). Bifactor Modeling and the Estimation of Model-Based Reliability in
the WAIS-IV. Multivariate Behavioral Research, 48(5), 639–662.
https://doi.org/10.1080/00273171.2013.804398
➢ Raykov, T. (1997). Scale Reliability, Cronbach's Coefficient Alpha, and Violations of Essential Tau-Equivalence
with Fixed Congeneric Components. Multivariate Behavioral Research, 32(4), 329–353.
https://doi.org/10.1207/s15327906mbr3204_2
➢ Schmitt, N. (1996). Uses and abuses of coefficient alpha. Psychological Assessment, 8(4), 350–353.
https://doi.org/10.1037//1040-3590.8.4.350
➢ Sijtsma, K. (2009). On the Use, the Misuse, and the Very Limited Usefulness of Cronbach's Alpha.
Psychometrika, 74(1), 107–120. https://doi.org/10.1007/s11336-008-9101-0
➢ Yang, Y., & Green, S. B. (2011). Coefficient Alpha: A Reliability Coefficient for the 21st Century? Journal of
Psychoeducational Assessment, 29(4), 377–392. https://doi.org/10.1177/0734282911406668
➢ Zumbo, B. D., Gadermann, A. M., & Zeisser, C. (2007). Ordinal Versions of Coefficients Alpha and Theta for
Likert Rating Scales. Journal of Modern Applied Statistical Methods, 6(1), 21–29.
https://doi.org/10.22237/jmasm/1177992180
38
La importancia de saber sobre principios y
supuestos, además de la matemática del asunto.

El manejo matemático en investigación aplicada está más allá de saber

operar: es conocer los supuestos, los principios y las deducciones implicadas
en las herramientas estadísticas.

39
Demostración de la fórmula del
coeficiente omega

𝑉𝑎𝑟𝑖𝑎𝑏𝑖𝑙𝑖𝑑𝑎𝑑 𝑣𝑒𝑟𝑑𝑎𝑑𝑒𝑟𝑎
𝜌𝑋𝑋′ = Definición 1
𝑉𝑎𝑟𝑖𝑎𝑏𝑖𝑙𝑖𝑑𝑎𝑑 𝑡𝑜𝑡𝑎𝑙

𝑉𝑎𝑟(𝑇)
𝜌=
𝑉𝑎𝑟(𝑋)
40
Derivación del coeficiente omega

𝜆1 𝑥1 = 𝜆1 𝜂 + 𝜖1
𝜆2 𝑥2 = 𝜆2 𝜂 + 𝜖2
Supuesto 1
𝜆3
Supuesto 2
𝜆𝑛
𝑥𝑛 = 𝜆𝑛 𝜂 + 𝜖𝑛

𝑛 𝑛 𝑛

𝑋 = ෍ 𝑥𝑖 = ෍ 𝜆𝑖 𝜂 + ෍ 𝜖𝑖 Definición 2
𝑖=1 𝑖=1 𝑖=1

𝑛 𝑛

𝑉𝑎𝑟 𝑋 = 𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + ෍ 𝜖𝑖
𝑖=1 𝑖=1

41
 𝑛 𝑛
Supuesto 3
𝑉𝑎𝑟 𝑋 = 𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + ෍ 𝜖𝑖 No covarianza entre
𝑖=1 𝑖=1
factor y errores

𝑛 𝑛 𝑛 𝑛

= 𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + 𝑉𝑎𝑟 ෍ 𝜖𝑖 + 2 ∗ 𝐶𝑜𝑣 ෍ 𝜆𝑖 𝜂 , ෍ 𝜖𝑖

𝑖=1 𝑖=1 𝑖=1 𝑖=1
𝑛 𝑛

𝑉𝑎𝑟 𝑋 = 𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + 𝑉𝑎𝑟 ෍ 𝜖𝑖

𝑖=1 𝑖=1
Supuesto 4
𝑛 𝑛 Errores no
correlacionados
𝑉𝑎𝑟 𝑋 = 𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + ෍ 𝑒𝑖
𝑖=1 𝑖=1
𝑛

𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂
𝑖=1
𝜌= 𝑛 𝑛

𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + ෍ 𝑒𝑖
𝑖=1 𝑖=1

42
 𝑛

𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂
𝑖=1
𝜌= 𝑛 𝑛

𝑉𝑎𝑟 ෍ 𝜆𝑖 𝜂 + ෍ 𝑒𝑖
𝑖=1 𝑖=1
𝑛 2

෍ 𝜆𝑖 𝑉𝑎𝑟 𝜂
𝑖=1
𝜌= 𝑛 2 𝑛

෍ 𝜆𝑖 𝑉𝑎𝑟 𝜂 + ෍ 𝑒𝑖
𝑉𝑎𝑟 𝜂 =1 𝑖=1 𝑖=1

𝑛 2

෍ 𝜆𝑖
𝜔= 𝑛
𝑖=1
2 𝑛

෍ 𝜆𝑖 + ෍ 𝑒𝑖
𝑖=1 𝑖=1

43
Coeficiente omega con errores correlacionados

𝑛 2

෍ 𝜆𝑖
𝑖=1
𝜔𝑐𝑜𝑟𝑟𝑒𝑔 =
𝑛 2 𝑛

෍ 𝜆𝑖 + ෍ 𝑒𝑖 + 2 ෍ 𝜃𝑖𝑗
𝑖=1 𝑖=1 1≤𝑖<𝑗≤𝑛

(Raikov, 2004)

44
Ideas clave:

✓ La fórmula del coeficiente omega considera supuestos como la no

correlación entre errores y unidimensionalidad.
✓ Aunque se está popularizando, la expresión “omega ordinal” sería
innecesaria ya que la estrategia de la variable ordinal es manejado en
el AFC previo a la obtención de las cargas factoriales.
✓ En caso de errores correlacionados () habrá que usar un factor de
corrección en el denominador de la fórmula.