Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Tema 3
Tema 3
Psicometría
Ideas clave 4
3.1. ¿Cómo estudiar este tema? 4
3.2. Análisis de la respuesta correcta: índice de
dificultad, discriminación y validez 5
3.3. Análisis de las opciones incorrectas 20
3.4. Corrección de los aciertos al azar 23
© Universidad Internacional de La Rioja (UNIR)
Lo + recomendado 27
+ Información 29
Test 31
© Universidad Internacional de La Rioja (UNIR)
ACIERTO:
Índice de validez 1/K
• Relaciona el ítem con un criterio externo. RESPUESTA
AZAR
ERROR:
1-1/K
DESCONOCE
OMISIÓN
Psicometría
Tema 3. Esquema
Esquema
3
Ideas clave
Para estudiar este tema, deberás leer con atención las ideas clave que se desarrollan a
continuación.
E
n este tema se estudian los diferentes modos de analizar los ítems de una
prueba psicométrica. Una vez que se ha construido la versión provisional de
la prueba, debemos analizar las características psicométricas de los ítems
para ver cuáles deben ser eliminados o depurados con el fin de formar la prueba
definitiva.
Psicometría
4
Tema 3. Ideas clave
3.2. Análisis de la respuesta correcta: índice de
dificultad, discriminación y validez
U
na vez que hemos construido los ítems de un test, basándonos en
aspectos teóricos y lógicos para que midan el constructo teórico que
reflejan, debemos ver si cada ítem de la prueba es un buen indicador del
rasgo. Para ello debemos seleccionar una muestra representativa a la que
apliquemos la prueba y nos permita depurarla.
Índice de dificultad
𝐴𝑗
𝑝𝑗 =
𝑁𝑗
Psicometría
5
Tema 3. Ideas clave
Cuando queramos corregir los errores, es decir, penalizar a aquellos evaluados que
responden al azar a un ítem dicotómico, debemos emplear la fórmula de dificultad
corregida en la que se asume que todas las alternativas tienen la misma probabilidad
de ser elegidas y que las personas que se equivocan no conocen la respuesta correcta:
𝐹𝑗 𝐹𝑗
𝑁 𝐴𝑗 −
𝑝𝑗𝑐 = 𝑝𝑗 −
𝑗
= 𝑘−1
𝑘−1 𝑁𝑗
Donde:
pj es la dificultad sin corregir del ítem.
Fj es el número fallos o errores cometidos en el ítem.
Nj es el número de personas que ha respondido la prueba.
k es el número alternativas de respuesta que presenta el ítem.
Aj es número de aciertos a todos los ítems de la prueba.
Ejemplo 1
1 0 0 0 1 1 1 3
2 0 1 0 1 2
3 0 0 1 0 1 2
4 0 0 0 1 1 2
Psicometría
6
Tema 3. Ideas clave
5 0 1 0 1 1 3
6 0 1 1 2
7 0 0 1 1 1 3
8 0 0 1 0 1
9 0 1 0 0 1 2
10 0 1 0 1 0 1 2
𝐴1 0
𝑝1 = = =0
𝑁1 10
𝐴3 2
𝑝3 = = = 0,29
𝑁3 7
𝐹1 10
𝑁
𝑝1𝑐 = 𝑝1 − 1
= 0 − 10 = 0 − 1 = −1 = 0
𝑘−1 2−1
𝐹3 5
𝑁
𝑐
𝑝3 = 𝑝3 − 3
= 0,29 − 7 = 0,29 − 0,71 = −0,42 = 0
𝑘−1 2−1
Psicometría
7
Tema 3. Ideas clave
En esta segunda tabla se pueden ver los índices para el resto de ítems. Nótese que
cuando no hay fallos, como el caso del ítem 6, el resultado con ambas fórmulas es
igual. Y cuando los errores restan, si el resultado es negativo, se pone el valor de 0,
ya que la dificultad no puede ser negativa.
1 0 0 0 1 1 1 3
2 0 1 0 1 2
3 0 0 1 0 1 2
4 0 0 0 1 1 2
5 0 1 0 1 1 3
6 0 1 1 2
7 0 0 1 1 1 3
8 0 0 1 0 1
9 0 1 0 0 1 2
10 0 1 0 0 1 2
Aj 0 5 2 3 3 9
Nj 10 10 7 4 7 9
Fj 10 5 5 1 4 0
pcj 0 0 0 0,50 0 1
Psicometría
8
Tema 3. Ideas clave
Las características que tiene el índice de dificultad para ítems dicotómicos son las
siguientes (Abad, Olea, Ponsoda y García, 2011):
Toma valores entre 0 (cuando se fallan todos los ítems) y 1 (cuando se aciertan
todos). Cuanto más se aproxime a 0, más difícil será el ítem y cuanto más se
acerque a 1, más fácil. Por lo que un ítem con una dificultad media tendrá un valor
de 0,5.
𝜎 2 (𝑗) = 𝑝𝑗 × 𝑞𝑗
Por lo tanto, para una dificultad media la varianza será máxima y para otros valores
será menor. Por ejemplo, para tres ítems dicotómicos con los siguientes valores
de dificultad: p1 = 0,50; p2 = 0,25; y p3 = 0,10, se obtendrían los siguientes valores
de varianza:
• 𝜎 2 (1) = 𝑝1 × 𝑞1 = 0,50 × 0,50 = 0,2500
• 𝜎 2 (2) = 𝑝2 × 𝑞2 = 0,25 × 0,75 = 0,1875
• 𝜎 2 (3) = 𝑝3 × 𝑞3 = 0,10 × 0,90 = 0,900
© Universidad Internacional de La Rioja (UNIR)
Se aconsejan emplear ítems con dificultad media, ya que presentan una mayor
varianza.
Psicometría
9
Tema 3. Ideas clave
Se deben estudiar detenidamente aquellos ítems que tengan una dificultad
inferior a 0,20 y superior a 0,90, ya que serían demasiado difíciles o fáciles
respectivamente.
Podemos calcular los índices de dificultad sin corregir (pi) y varianza (σ2) de la tabla 1
del siguiente modo:
La salida de resultados ofrece la media (mean) de cada ítem, que sería la dificultad
sin corregir del ítem, y la desviación típica, que elevándola al cuadrado reflejaría la
varianza de cada ítem. Por ejemplo, para el ítem 2 la desviación típica (sd) es de 0,53
que al elevarla al cuadrado toma un valor de 0,28 que es la varianza del ítem.
En el caso de ítems no dicotómicos, con valores que van más allá de 0 y 1, el modo
de calcular la dificultad es mediante la media del ítem, de tal modo que, a mayor
media, menor dificultad y a menor media, mayor facilidad de acertar el ítem.
© Universidad Internacional de La Rioja (UNIR)
Psicometría
10
Tema 3. Ideas clave
Figura 2. Cálculo de dificultad y varianza con R Commander. Paso 2: seleccionamos todos los ítems.
Fuente: http://cran.r-project.org
Psicometría
11
Tema 3. Ideas clave
Índice de discriminación u homogeneidad
Indica la discriminación de un ítem entre las personas que tienen valores altos y bajos
en un constructo de interés. Por ejemplo, las personas con un nivel de atención alto
deberán tener características diferentes de las que tienen un nivel atencional bajo.
Proporción de aciertos
Dj = ps - pi
Donde:
ps es la proporción de sujetos que acierta el ítem del grupo superior.
pi es la proporción de sujetos de acierta el ítem del grupo inferior.
Dj: toma valores entre [-1, +1] de tal manera que:
© Universidad Internacional de La Rioja (UNIR)
Psicometría
12
Tema 3. Ideas clave
• Dj ≤ 0,19: discriminación muy pobre, deberíamos eliminar el ítem.
Correlación ítem-test
Correlación de Pearson (𝑟𝑥𝑦 ): cuando tanto el ítem como el test son cuantitativos.
𝜎𝑥𝑦
𝑟𝑥𝑦 =
𝜎𝑥 𝜎𝑦
Donde:
• 𝜎𝑥𝑦 es la covarianza entre el ítem (Y) y el test (X).
Donde:
• 𝑥̅ E es la covarianza entre el ítem (Y) y el test (X).
• 𝑥̅ A es la desviación típica del test.
• 𝑥̅ y Sx es la desviación típica del ítem.
© Universidad Internacional de La Rioja (UNIR)
Psicometría
13
Tema 3. Ideas clave
un punto de corte: las puntuaciones de 0 a 4 se convierten en 0 y las de 5 a 10 en
1.
Psicometría
14
Tema 3. Ideas clave
Ejemplo 2
1 2 1 1 4
2 3 1 0 4
3 5 0 1 6
4 0 1 0 1
5 4 0 0 4
𝜎𝑥𝑦 3,2
𝑟𝑥𝑦 = = ∗ 1,79 = 0,93
𝜎𝑥 𝜎𝑦 1,92
© Universidad Internacional de La Rioja (UNIR)
Psicometría
15
Tema 3. Ideas clave
Cálculo con R Commander
Psicometría
16
Tema 3. Ideas clave
Figura 7. Cálculo de correlación de Pearson con R commander. Salida.
Fuente: http://cran.r-project.org
Ítem 2
Sujetos (dicotómico) X
1 1 4
2 1 4
3 0 6
4 1 1
5 0 4
Psicometría
17
Tema 3. Ideas clave
Aplicando la fórmula de correlación biserial-puntual obtenemos un índice de
discriminación negativo, lo que reflejaría que es un ítem que discrimina al revés de lo
esperado por lo que debería ser eliminado:
𝑥̅𝐴 − 𝑥̅𝐸 3 −5
𝑟𝑏𝑝 = √𝑝𝑞 = √0,6 × 0,4 = −0,55
𝑆𝑥 1,79
Criterio externo
Psicometría
18
Tema 3. Ideas clave
Coeficiente Ø: cuando tanto el ítem como el criterio son dicotómicos.
Correlación tetracórica: cuando el ítem y el criterio son dicotómizados y con
distribución normal bivariante.
Índice de validez
Los ítems con un índice de validez bajo tendrán baja correlación con el criterio y
se deberían eliminar de la prueba, ya que no contribuyen a predecir el criterio y
por lo tanto tenderían a bajar la validez del rasgo psicológico.
Los ítems con un índice de validez alto presentarían una alta correlación con el
criterio y un índice de discriminación bajo, por lo que contribuirían a incrementar
la validez de la prueba.
Psicometría
19
Tema 3. Ideas clave
3.3. Análisis de las opciones incorrectas
E
l análisis de las diferentes opciones de respuesta en tu test de rendimiento
óptimo permite ver qué patrones han seguidos los evaluados a la hora de
responder y si estos patrones son adecuados. Este análisis se suele realizar
principalmente en aquellos ítems de elección múltiple, es decir, con más de dos
opciones de respuesta.
A B C D
1 B 20 40 20 20
2 C 30 35 20 35
3 A 25 25 25 25
4 D 5 30 5 60
5 B 10 40 40 10
Psicometría
20
Tema 3. Ideas clave
El ítem 2 es un ítem que debería ser eliminado, ya que la alternativa correcta (C)
es la menos elegida (20 %).
El ítem 3 es un ítem que debería reformularse, ya que se eligen por igual las cuatro
alternativas.
El ítem 4 también debería reformularse porque, aunque la alternativa correcta (D)
se elige más que los distractores, hay dos distractores que se eligen muy poco (A
y C).
Y el ítem 5 se debe reformular también al elegirse la alternativa correcta (B) en
igual proporción que un distractor (C).
Siguiendo a Abad et al. (2011), el estudio de las respuestas a las diferentes opciones
de respuesta nos debería llevar a tomar las siguientes decisiones:
Eliminar o reformular los distractores que apenas son elegidos.
No debería preocuparnos que los distractores sean elegidos en igual proporción
por los evaluados.
Que un ítem sea fallado por la mayoría de los evaluados no implica que esté mal
formulado, aunque deben ser analizados para detectar a qué se puede deber. Por
ejemplo, un ítem difícil presentado a un grupo con un nivel de rasgo bajo es muy
probable que se falle en una alta proporción.
Si un distractor es muy elegido en comparación con el resto de alternativas,
deberíamos reformular ese distractor o bien plantearnos si quizá sea la opción
correcta.
A mayor nivel de rasgo, más se debería elegir la opción correcta y menos los
distractores.
Los distractores se deberían elegir siempre menos que la opción correcta.
Psicometría
21
Tema 3. Ideas clave
Los distractores se deberían elegir en una proporción similar en todos los niveles
de rasgo.
C O R R E C TA 1 C O R R E C TA 2
C O R R E C TA 3
Figura 8. Representación gráfica de las respuestas de tres niveles de capacidad a ítems de tres alternativas
© Universidad Internacional de La Rioja (UNIR)
Psicometría
22
Tema 3. Ideas clave
3.4. Corrección de los aciertos al azar
S
upongamos que tenemos un test con opciones múltiples de respuesta en la
que solo una respuesta es correcta, podría sobreestimarse la puntuación
directa de una persona, si alguno de sus aciertos se debe al efecto del azar,
es decir, elegir la alternativa correcta no porque la conozca, sino de forma azarosa.
A la hora de responder un ítem de elección múltiple y con una sola respuesta correcta
hay varias posibilidades:
CONOCE ACIERTA
RESPUESTA ACIERTO:
1/K
AZAR
DESCONOCE
ERROR:
1-1/K
OMISIÓN
© Universidad Internacional de La Rioja (UNIR)
Figura 9. Opciones de respuesta a un ítem de elección múltiple con una alternativa correcta.
Por esta razón, en los ítems de rendimiento óptimo con varias alternativas de
respuesta debemos corregir esta posibilidad penalizando los errores.
Psicometría
23
Tema 3. Ideas clave
En concreto la probabilidad de acertar un ítem al azar sin conocer la respuesta es
igual a 1/𝑘, donde 𝑘 es el número de alternativas del ítem. Evidentemente, a mayor
número de alternativas, más complicado será acertar al azar un ítem. De manera
complementaria, la probabilidad de equivocarse al responder un ítem al azar sin
conocer la respuesta es 1- 1/𝑘. Esta probabilidad siempre es mayor que la
probabilidad de acertar al azar, salvo en el caso de ítems de dos alternativas de
respuesta.
𝐸
𝑥𝑐 = 𝐴 −
𝑘−1
Donde:
𝐴 son los aciertos al test.
𝐸 son los errores al test.
𝑘 es el número de alternativas de la prueba.
Psicometría
24
Tema 3. Ideas clave
La fórmula beneficia a quienes responden solo los ítems que verdaderamente
conocen y no se arriesgan al responder.
Puntuación
Sujetos Aciertos Errores Omisiones
corregida
1 7 2 1 6,33
2 5 5 0 3,75
3 2 6 2 0,50
4 5 0 5 5,00
5 6 0 4 6,00
Tabla 6. Cálculo de la puntuación corregida y sin corregir al azar de un test con cuatro alternativas.
𝐸 2
𝑥𝑐 = 𝐴 − =7− = 6,3
𝑘−1 4−1
𝐸 5
𝑥𝑐 = 𝐴 − =5− = 3,7
𝑘−1 4−1
© Universidad Internacional de La Rioja (UNIR)
𝐸 6
𝑥𝑐 = 𝐴 − =2− = 0,5
𝑘−1 4−1
Psicometría
25
Tema 3. Ideas clave
El sujeto 4 y 5 tendrían la misma puntuación sin corregir y corregida, ya que no tienen
errores.
Evidentemente, en el caso de que el número de alternativas del test fuera menor, los
errores penalizarían más y sería mucho más arriesgado contestar al azar.
Abad, F. J., Olea, J., Ponsoda, V. y García, C. (2011). Medición en ciencias sociales y de
la salud. Madrid: Síntesis.
Psicometría
26
Tema 3. Ideas clave
Lo + recomendado
Lecciones magistrales
En esta lección magistral se explican los diferentes tipos de análisis que se deben
hacer para depurar una prueba eliminando o reformulando aquellos ítems que no
miden adecuadamente el rasgo que se trata de medir. Los índices son: dificultad,
discriminación y validez. Además, se explica cómo se analizan las diferentes opciones
de respuesta y cómo corregir las respuestas al azar.
No dejes de leer
Psicometría
27
Tema 3. Lo + recomendado
En este documento se presentan las primeras evaluaciones de test editados en
Españas llevadas a cabo con un modelo de evaluación desarrollado por la Comisión
Europea de Test y adaptado al contexto español.
Accede al documento a través del aula virtual o desde la siguiente dirección web:
http://www.papelesdelpsicologo.es/pdf/1947.pdf
No dejes de ver
Este vídeo contiene una breve presentación sobre un ejercicio práctico del análisis de
ítems mediante índices de discriminación.
Accede al vídeo a través del aula virtual o desde la siguiente dirección web:
https://www.youtube.com/watch?v=fhrnEDJp2V0
© Universidad Internacional de La Rioja (UNIR)
Psicometría
28
Tema 3. Lo + recomendado
+ Información
A fondo
Este artículo describe las diferentes adaptaciones que se han realizado del inventario
de depresión de Beck en España, indicando sus propiedades psicométricas más
relevantes.
Accede al artículo a través del aula virtual o desde la siguiente dirección web:
http://www.papelesdelpsicologo.es/pdf/2275.pdf
Webgrafía
Accede a la página web a través del aula virtual o desde la siguiente dirección web:
https://psikipedia.com/libro/psicometria/2754-analisis-de-los-items
Psicometría
29
Tema 3. + Información
Bibliografía
Abad, F. J., Olea, J., Ponsoda, V. y García, C. (2011). Construcción de tests y análisis
de ítems. En Medición en ciencias sociales y de la salud (pp. 38-69). Madrid: Síntesis.
Martínez Arias, R. (1996). Análisis convencional de los elementos o ítems del test. En
Psicometría: teoría de los tests psicológicos y educación (pp. 541-575). Madrid:
Síntesis.
© Universidad Internacional de La Rioja (UNIR)
Psicometría
30
Tema 3. + Información
Test
1. Según los valores que puede tomar el índice de dificultad:
A. Valores cercanos a 1 son lo ideal para ítems difíciles.
B. Se recomiendan valores cercanos a 0 para los ítems.
C. Un ítem NO puede tener una dificultad negativa.
2. Un ítem dicotómico que presenta una varianza máxima tendrá una dificulta de:
A. 0,5.
B. 1.
C. 0.
1 1 1 0 1
2 1 1 1 1 1 0
3 0 1 0 0 0 0
4 1 1 0 0
5 1 1 0 1 0 0
6 0 1 1 0 0 0
A. Ítem 3.
B. Ítem 1.
© Universidad Internacional de La Rioja (UNIR)
C. Ítem 2.
Psicometría
31
Tema 3. Test
4. Según la tabla de la pregunta 3. ¿cuál es el ítem que más discriminación presenta?
A. Ítem 4.
B. Ítem 2.
C. Ítem 5.
7. ¿Qué se tiene que cumplir para que una persona obtenga en un test de
rendimiento óptimo la misma puntuación corrigiendo los aciertos al azar y no
corrigiéndolos?
A. Que acierte la mitad y falle la otra mitad.
B. Que no cometa errores.
C. Que no deje preguntas en blanco.
8. Indica qué problema presenta el hecho de no corregir las respuestas al azar en los
test de rendimiento óptimo:
A. La puntuación del test se puede sobreestimar.
B. La puntuación del test sería demasiado baja.
C. La puntuación del test se puede infraestimar.
© Universidad Internacional de La Rioja (UNIR)
Psicometría
32
Tema 3. Test
9. ¿Cuál es el patrón de resultados ideal que se debe dar en un ítem de rendimiento
óptimo con múltiples alternativas de respuesta?
A. Responder por igual a los distractores y a la correcta.
B. Responder más a la correcta y por igual a los distractores.
C. Responder por igual a los distractores y en mayor proporción que a la
correcta.
Psicometría
33
Tema 3. Test