Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Curso 2022/23
2
TUTORÍAS I PLANIFICACIÓN
Fecha Previsión
Presentación general de la materia
14/2/2023
T1. Introducción a la psicometría
21/2/2023 T2. Principios básicos para la construcción de instrumentos de medición psicológica
28/2/2023 T3. Técnicas para la construcción de escalas de actitudes
7/3/2023 T3. Técnicas para la construcción de escalas de actitudes
14/3/2023 T4. Fiabilidad de las puntuaciones I
21/3/2023 T4. Fiabilidad de las puntuaciones II
28/3/2023 T4. Fiabilidad de las puntuaciones III
11/4/2023 T6. Validez de las inferencias I
18/4/2023 T7. Validez de las inferencias II
25/4/2023 T7. Validez de las inferencias III
2/5/2023 T8. Análisis de los ítems
9/5/2023 T9. Asignación, transformación y equiparación de las puntuaciones
3
Tema 7. Parte II. Evaluación de las propiedades
métricas de los instrumentos de medición
psicológica
1. Variabilidad
Obj. 3. Factores que afectan al coeficiente de validez 2. Fiabilidad de las puntuaciones (del test y del criterio)
3. Longitud
Héctor Martínez I UNED La Rioja Tema 7. Validez de las inferencias (II)
2. VALIDACIÓN CON VARIOS PREDICTORES Y UN SOLO INDICADOR DEL CRITERIO (p. 324) T7 I 7
Obj. 1. Analizar la validez de un criterio (variable dependiente) cuando disponemos de varios predictores
(varios tests), en la práctica con dos variables independientes.
Ejemplos:
- Rendimiento en matemáticas a partir de un test de capacidad de cálculo y otro de CI
- Adecuación a un puesto de vigilante a partir de un test que mida su apatía, otro que mida su nivel
atencional y un tercero que mida su autocontrol
- Rendimiento en psicometría a partir de su CI y su nº de horas dedicadas a la materia.
Si muchos sujetos están en verde será buen predictor (aciertos: NAA + NRR);
Muchos rojos, mal predictor (errores: NAR + NRA);
Llamamos a NRA falsos negativos (suspendieron el test, pero aprobaron el criterio. Parecía que no, pero al final);
A NAR falsos positivos (aprobaron el test, pero no el criterio. Parecía que sí, pero no);
',$
- Razón de idoneidad : 𝑅. 𝐼. = ↑
2. Índices de selección '
',3
(F44 y 45) - Razón de selección: 𝑅. 𝑆. = ↑
'
𝑁IZ 60
Razón de selección: 𝑅. 𝑆. = = = 𝟎, 𝟑
𝑁 200
𝑁II 36
Razón de eficacia: 𝑅. 𝐸. = = = 𝟎, 𝟔
𝑁IZ 60
b. Modelo de regresión
De las múltiples opciones de selección, el libro se centra en dos:
- Situación 1. No hay limitación de plazas y se selecciona a todos los que superen un punto de corte en uno
o varios predictores [Ej. EBAU].
- Situación 2. Existe limitación de plazas y se selecciona a los que hayan obtenido el mejor resultado en el
predictor/es del test que elijamos [Ej. Oposición].
Gráficamente sería:
𝑆• · 𝑟v€
𝑅•~ =
Despejaríamos (F45):
𝑆•: · 𝑟v€
:
+ 𝑠v: − 𝑠v: · 𝑟v€
:
* Esto es aplicable a dos muestras o a una muestra de ASPIRANTES (mayúsculas) frente a los
admitidos/seleccionados (minúsculas)
Fórmulas secundarias:
Š‹ •
‡‰
‡ : : : :
𝑅•~ · ˆ = 𝑟v€ · 𝑆~·• = 𝑠€·v → 𝑆~ · 1 − 𝑅•~ = 𝑠€ · 1 − 𝑟v€ 𝑆~ = 𝑠€ 1 − 𝑟v€ + 𝑟v€ · •
‡‰ ŠŒ ŠŒ
25. Si se eliminaran por completo los errores de medida del test y del criterio, el nuevo coeficiente de validez sería:
a) 0,90; b) 0,95; c) 0,81
Solución. Corresponde al punto 4.2 que veremos a continuación (p. 362):
𝑟•~ 0,60
𝑅•‰•ˆ = = = 𝟎, 𝟗𝟓
𝑟•• · 𝑟~~ 0,81 · 0,49
4. FACTORES QUE INFLUYEN EN EL COEF. DE VALIDEZ (p. 359) T7 I 28
4.2 LA FIABILIDAD DE LAS PUNTUACIONES DEL TEST Y DEL CRITERIO ↑↑
Cuando calculamos la validez como la correlación entre las puntuaciones empíricas obtenidas por los sujetos en el
test y en el criterio hay que considerar que esas puntuaciones empíricas están afectadas por errores de medida y
que estos influyen en el coeficiente de validez produciendo una serie de sesgos a eliminar o, al menos, controlar.
Existen varios supuestos que nos definirá el enunciado. Para explicarlos partiremos de un ejemplo (F46):
Fiabilidad del CRITERIO
NO se modifica Se modifica Fiabilidad perfecta
𝑟•~ 𝒓𝑿𝒀
𝑅•~ = 𝑅••ˆ =
NO se modifica 𝑟~~ 𝒓𝒀𝒀
𝑅~~
𝑟•~ 𝒓𝑿𝒀
Fiabilidad del TEST 𝑅•~ = 𝑹𝑿𝒀 =
Se modifica 𝑟•• 𝒓𝑿𝑿 𝒓𝒀𝒀
𝑅•• 𝑹𝑿𝑿 𝑹𝒀𝒀
Fiabilidad 𝑟•~ 𝑟•~
𝑅•‰ ~ = 𝑅•‰ •ˆ =
perfecta 𝑟•• 𝑟•• · 𝑟~~
El valor máximo del coeficiente de validez nunca puede ser superior al índice de fiabilidad (𝑟v€ ≤ 𝑟‘v )
4. FACTORES QUE INFLUYEN EN EL COEF. DE VALIDEZ (p. 359) T7 I 29
4.2 LA FIABILIDAD DE LAS PUNTUACIONES DEL TEST Y DEL CRITERIO ↑ ↑
Ejemplo del libro. Aplicado un test de razonamiento abstracto (RA) a una muestra de sujetos se obtuvo un
coeficiente de fiabilidad igual a 0,64 (rxx’), la fiabilidad del criterio resultó ser 0,60 (ryy') y el coeficiente de validez
0,56 (rxy). El ejercicio consistirá en encontrar el nuevo valor del coeficiente de fiabilidad en distintos supuestos
que iremos viendo en el punto.
Supuesto 1. Estimación del coeficiente de validez en el supuesto de que tanto el test como el criterio tuvieran
una fiabilidad perfecta.
𝑅•‰ •ˆ es el coeficiente de validez teórico con test y criterio libres de errores de medida.
𝑟•~ 𝑟•~ es el coeficiente de validez empírico
𝑅•‰ •ˆ =
𝑟•• · 𝑟~~ 𝑟•• es el coeficiente de fiabilidad empírico del test
𝑟~~ es el coeficiente de fiabilidad empírico del criterio
• ‰ˆ ;,<•
Solución supuesto 1. 𝑅•‰ •ˆ = = = 0,91
• ‰‰ · • ˆˆ ;,•– · ;,•;
Al eliminar todos los errores de medida de test y criterio, el coef. de validez aumentaría mucho (de 0,56 a 0,91)
Supuesto 2. Estimación del coeficiente de validez en el supuesto de que el test tuviera una fiabilidad perfecta.
𝑟•~ 𝑟•~ es el coeficiente de validez empírico
𝑅•‰ ~ =
𝑟•• 𝑟•• es el coeficiente de fiabilidad empírico del test
• ‰ˆ ;,<•
Solución supuesto 2. 𝑅• ‰ ~ = = = 0,70
• ‰‰ ;,•–
El coef. de validez aumenta, pero menos que en el supuesto 1 (debido a que las puntuaciones del criterio aún
pueden estar afectadas por errores)
Supuesto 3. Estimación del coeficiente de validez en el supuesto de que el criterio tuviera una fiabilidad perfecta
𝐶𝑜𝑣(𝑋𝑉~ ) 𝐶𝑜𝑣(𝑋𝑌) 𝑟•~ 𝑆• 𝑆~ 𝑟•~ 𝑟•~ 𝒓𝑿𝒀 𝑟•~ es el coeficiente de validez empírico
𝑅••ˆ = = = = = =
𝑆• 𝑆•ˆ 𝑆• 𝑆•ˆ 𝑆• 𝑆•ˆ 𝑆• 𝑆•ˆ 𝑟•~ 𝒓𝒀𝒀 𝑟~~ es el coeficiente de fiabilidad
𝑆• 𝑆~ empírico del criterio
•‰ˆ ;,<•
Solución supuesto 3. 𝑅••ˆ = = = 0,73
•ˆˆ ;,•;
El coef. de validez aumenta, pero menos que en el supuesto 1 (debido a que las puntuaciones del test aún
pueden estar afectadas por errores)
Supuesto 4. Estimación del coeficiente de validez del test en el supuesto de que se mejorara la fiabilidad tanto en
el test como en el criterio
𝑟•~ 𝑟•~ es el coeficiente de validez empírico
𝑅•~ = 𝑟•• es el coeficiente de fiabilidad empírico del test
𝑟•• 𝑟~~
𝑅•• 𝑅~~ 𝑟~~ es el coeficiente de fiabilidad empírico del criterio
*En mayúsculas aparecen los coeficientes de fiabilidad mejorados.
Solución supuesto 4. ¿Cuál sería el coeficiente de validez si se consiguiera un coeficiente de fiabilidad en el test de
0,75 y en el criterio de 0,64?
𝑟•~ 0,56
𝑅•~ = = = 0,63
𝑟•• 𝑟~~ 0,64 0,60
Héctor Martínez I UNED La Rioja 𝑅•• 𝑅~~ 0,75 0,64 Tema 7. Validez de las inferencias (II)
4. FACTORES QUE INFLUYEN EN EL COEF. DE VALIDEZ (p. 359) T7 I 33
4.2 LA FIABILIDAD DE LAS PUNTUACIONES DEL TEST Y DEL CRITERIO ↑ ↑
Ejemplo del libro. Aplicado un test de razonamiento abstracto (RA) a una muestra de sujetos se obtuvo un
coeficiente de fiabilidad igual a 0,64 (rxx’), la fiabilidad del criterio resultó ser 0,60 (ryy') y el coeficiente de validez
0,56 (rxy). El ejercicio consistirá en encontrar el nuevo valor del coeficiente de fiabilidad en distintos supuestos
que iremos viendo en el punto.
Supuesto 5. Estimación del coeficiente de validez del test en el supuesto de que se mejorara la fiabilidad del test
𝑟•~ 𝑟•~ es el coeficiente de validez empírico
𝑅•~ =
𝑟•• 𝑟•• es el coeficiente de fiabilidad empírico del test
𝑅•• 𝑅•• es el coeficiente de fiabilidad del test mejorado
Solución supuesto 5. ¿Cuál sería el coeficiente de validez si se consiguiera un coeficiente de fiabilidad del test se
pudiera aumentar hasta 0,75 y se mantuviera constante el del criterio?
𝑟•~ 0,56
𝑅•~ = = = 0,61
𝑟•• 0,64
𝑅•• 0,75
Supuesto 6. Estimación del coef. de validez del test en el supuesto de que se mejorara la fiabilidad del criterio
𝑟•~ 𝑟•~ es el coeficiente de validez empírico
𝑅•~ =
𝑟~~ 𝑟~~ es el coeficiente de fiabilidad empírico del criterio
𝑅~~
𝑅~~ es el coeficiente de fiabilidad del criterio mejorado
Solución supuesto 6. ¿Cuál sería el coeficiente de validez si se mantiene invariante el coeficiente de fiabilidad del
test y por algún procedimiento se consigue que la fiabilidad del criterio aumente hasta 0,64?
𝑟•~ 0,56
𝑅•~ = = = 0,58
𝑟~~ 0,60
𝑅~~ 0,64
Valor máximo del coef. de validez. Es el índice de fiabilidad del test (F48 y p. 367)
𝑟•~ es el coeficiente de validez empírico
𝑟•~ ≤ 𝑟••
𝑟‘v es el índice de fiabilidad
Solución valor máximo. ¿Cuál sería el valor máximo que podría alcanzar el coeficiente de validez empírico?
Como el enunciado nos decía que el coeficiente de fiabilidad es igual a 0,64 (rxx’), el índice de fiabilidad (que nos
indica el valor máximo que puede alcanzar el coeficiente de validez) será (F11):
𝑟•• = 𝑟••™ = 0,64 = 0,80
Solución. Estamos en el Supuesto 1, es decir, estimación del coeficiente de validez en el supuesto de que tanto el
test como el criterio tuvieran una fiabilidad perfecta. Por tanto:
𝑟•~ 0,5 0,5
𝑅•‰•ˆ = = = = 𝟎, 𝟕𝟓
𝑟•• · 𝑟~~ 0,75 · 0,60 0,67
Nos falta conocer el coeficiente de validez empírico (𝑟•~ ), pero a cambio nos dan el coeficiente de determinación.
Como vimos al final del T6, el coeficiente de determinación es:
: → 0,25 = 𝑟
𝐶. 𝐷. = 𝑟v€ •~ → 0,5 = 𝑟•~
Ejemplo del libro. Supongamos un test de 25 elementos que tiene un coeficiente de validez de 0,60 (rxy) y un coeficiente de
fiabilidad de 0,64 (rxx). ¿Cuántos elementos habría que añadirle para obtener un coeficiente de validez de 0,70?
:
𝑅•~ (1 − 𝑟•• ) 0,70: (1 − 0,64)
𝑛= : : = = 3,80
𝑟•~ − 𝑅•~ · 𝑟•• 0,60: − 0,70: · 0,64
𝑛º 𝑒𝑙𝑒𝑚𝑒𝑛𝑡𝑜𝑠 𝑓𝑖𝑛𝑎𝑙𝑒𝑠
𝑛= → 𝐸𝐹 = 𝑛 · 𝐸𝐼 = 3,80 · 25 = 95
𝑛º 𝑒𝑙𝑒𝑚𝑒𝑛𝑡𝑜𝑠 𝑖𝑛𝑖𝑐𝑖𝑎𝑙𝑒𝑠
Por lo tanto, habrá que añadir = 95 − 𝟐𝟓 = 𝟕𝟎 ítems.
Héctor Martínez I UNED La Rioja Tema 7. Validez de las inferencias (II)
4. FACTORES QUE INFLUYEN EN EL COEF. DE VALIDEZ (p. 359) T7 I 39
4.3 VALIDEZ Y LONGITUD ↑ ↑
Junio 2022. 1ª semana. 21. La fiabilidad de un test compuesto por 25 ítems es 0,70 y su coeficiente de validez es igual a
0,80. ¿Cuántos ítems habría que añadir al test para alcanzar un coeficiente de validez de 0,90? A) 86; b) 61; c) 4
Solución. 25 ítems; Fiabilidad ¿índice o coeficiente? 𝑟••™ = 0,70; 𝑟•~ = 0,80; 𝑅•~ = 0,90
:
𝑅•~ (1 − 𝑟••™ ) 0,90: (1 − 0,70)
𝑛= : : = = 3,33
𝑟•~ − 𝑅•~ · 𝑟••™ 0,80: − 0,90: · 0,70
í𝑡𝑒𝑚𝑠 𝑓𝑖𝑛𝑎𝑙𝑒𝑠
𝑛= → 𝐸𝐹 = 𝑛 · 𝐸𝐼 = 3,33 · 25 = 83,21
í𝑡𝑒𝑚𝑠 𝑖𝑛𝑖𝑐𝑖𝑎𝑙𝑒𝑠
Como nos piden los elementos a añadir:
83,21 − 25 = 𝟓𝟖, 𝟐𝟐
Solución. Sabemos que 𝑟•~ ≤ 𝑟•• (máxima validez); y que 𝑟•~ = 0,64 = 0,80
𝑟•~ · 𝑛 0,80 · 2
𝑅•~ = = = 𝟎, 𝟖𝟖
1 + 𝑛 − 1 · 𝑟•• 1 + 2 − 1 · 0,64
𝑛º 𝑒𝑙𝑒𝑚𝑒𝑛𝑡𝑜𝑠 𝑓𝑖𝑛𝑎𝑙𝑒𝑠
𝑛= → 𝐸𝐹 = 𝑛 · 𝐸𝐼 = 50 · 3,33 = 166,4
𝑛º 𝑒𝑙𝑒𝑚𝑒𝑛𝑡𝑜𝑠 𝑖𝑛𝑖𝑐𝑖𝑎𝑙𝑒𝑠
Por lo tanto, habrá que añadir = 166,43 − 𝟓𝟎 = 𝟏𝟏𝟔, 𝟒𝟒 ítems