Revisión de Confiabilidad

UNIDAD I.
EVALUACIÓN
PSICOLÓGICA EN
ADULTOS: DEFINICIÓN Y
MODELOS
1.5. Revisión de Confiabilidad y Validez de
la evaluación psicológica en los manuales
de las pruebas psicológicas.
La Evaluación Basada en la Evidencia,
consiste en el uso de la investigación
y las teorías científicas como base para:
- La selección de los constructos a evaluar

según los objetivos.
- El uso de técnicas e instrumentos
validados.
- La implementación del proceso de
evaluación.
Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Se trata de desarrollar una evaluación:
- Psicológicamente relevante
- Culturalmente sensible
- Científicamente fundada

Las principales garantías de una evaluación
científica están:
- La precisión y validez de las medidas

- La rigurosidad con la que el proceso de
evaluación es implementado.

El principal propósito de estandarizar es
determinar la distribución de puntuaciones
crudas en la muestra (grupo norma).
Las calificaciones crudas obtenidas

se transforman entonces en alguna forma de
calificaciones derivadas o normas.

Toda prueba estandarizada tiene
instrucciones estándar de aplicación y
calificación que deben seguirse
estrictamente, sin dejar lugar a la
interpretación personal o al sesgo.
La estandarización también incluye aplicar la

prueba a una muestra de estandarización de
la población meta a la que está destinada la
prueba.

La forma en que una muestra de
estandarización se secciona de una
población varía desde un muestreo.
Representatividad, debe tener

las mismas características que te
interesa estudiar en la población.

- Muestreo aleatorio simple
Para formar parte de la muestra, cada
elemento es elegido al azar; por tanto,
cada unidad de la población tiene la
misma probabilidad de ser
seleccionada.
- Muestreo aleatorio sistemático

Después de elegir al azar al primer
elemento, se selecciona uno a uno a
los sucesivos componentes siguiendo
una enésima secuencia de un listado
de la población.

- Muestreo aleatorio estratificado
Debes dividir a la población en
subgrupos o estratos, en función del
conjunto de características de la
población en estudio y finalmente
eliges de cada uno de ellos un número
determinado de unidades al azar.
Constante
Proporcional

Las normas indican la posición de una
persona en la prueba con respecto a
la distribución de las calificaciones
obtenidas por personas de la misma edad
cronológica, grado, sexo u otras
características demográficas.

Las puntuación directa o bruta valor o
número que resume la ejecución de la
persona en el test y se obtiene siguiendo las
instrucciones que se indican en el manual.
Esta puntuación directa no contiene ningún
significado por sí misma.

Los principales tipos de normas:
- Normas de edad, es la calificación media

de una prueba obtenida por las personas en
una edad cronológica determinada
- Norma de grado, es la calificación media

obtenida por los estudiantes en un nivel de
grado específico.
Implican erróneamente que la tasa de

aumento de las capacidades evaluadas es
constante de un año al siguiente, de modo
que con frecuencia desaconsejan su uso.

- Normas de percentilares, consisten en
una tabla de percentiles que corresponden a
puntuaciones crudas particulares.
Representan medidas de posición en una

distribución de frecuencias, ordenan a los
sujetos e indican el porcentaje del grupo que
se deja por debajo.

Se expresan en términos del porcentaje
de sujetos de la muestra de
estandarización que caen bajo
determinada puntuación cruda.
El percentil 50, corresponde a la

mediana.
Muestran la posición relativa de cada

individuo en la muestra normativa, pero
no la magnitud de la diferencia entre
puntuaciones.

- Normas de calificación estándar
Las normas de calificación estándar son

puntuaciones convertidas que tienen
cualesquier media y desviación estándar
deseadas.

Las Puntuación Z, son
transformaciones que se
pueden hacer a los valores o
las puntuaciones crudas, con
el propósito de analizar su
distancia respecto a la media,
en unidades de desviación
estándar.
Nos indica la dirección y el

grado en que un valor
individual obtenido se aleja de
la media, en una escala de
unidades de desviación
estándar.
Las Puntuación T,
Si la Puntuación Z, se
multiplica por 10 y se suma o
resta de 50, se convierte en
una puntuación T.
Propuesta con McCall en

1922.

Las Puntuación Stanina,
Proporciona un sistema de
calificaciones de un solo
dígito con un a media de 5 y
una desviación estándar igual
a 2. Se basa en el hecho de
que las calificaciones van de
1 a 9.

Los baremos, son tablas que
recogen los resultados de
asignar a cada posible
puntuación directa obtenida
por el individuo, un valor
numérico que informa
sobre la posición que ocupa
la puntuación directa
en relación con los que
obtienen las personas que
integran el grupo normativo
donde se barema la
prueba.

Cualquier norma se restringe a la población
normativa particular de la que se tomó la
muestra.
No son absolutas, universales o

permanentes.
La muestra debe ser lo suficientemente

grande como para proporcionar valores
estables.

Las pruebas ancla para desarrollar tablas de
equivalencia para los resultados de distintas
pruebas.
El método equipercentil, en el que las

puntuaciones se consideran equivalentes
cuando tienen percentiles iguales en un
determinado grupo.
CI de 115 en la prueba A CI de 115 en la prueba A

CI de 120 en la prueba B X

Al estandarizarlas sobre poblaciones
definida de manera más restringida y
elegidas para adaptarse a los propósitos de
cada prueba.
Normas del subgrupo: grado escolar, nivel

socioeconómico, ambiente rural o urbano.

La estandarización es un paso importante
en el diseño y la evaluación de pruebas
psicológicas y otros instrumentos de
evaluación, pero no es el último paso.
Antes de que una prueba pueda utilizarse

con cierta seguridad, debe obtenerse
información acerca de su confiabilidad y
validez por lo que a sus propósitos
específicos concierne.

Las medidas de variabilidad indican la
dispersión de los datos en la escala de
medición de la variable considerada y
responden a la pregunta:
¿Dónde están diseminadas las puntuaciones

o los valores obtenidos?
Rango, desviación estándar y varianza.

El rango, también llamado recorrido, es la
diferencia entre la puntuación mayor y
la puntuación menor, e indica el número de
unidades en la escala de medición que se
necesitan para incluir los valores máximo y
mínimo.
Ejemplo:
Si tenemos los siguientes valores
17 18 20 20 24 28 28 30 33
El rango será: 33 – 17 = 16

La desviación estándar o característica es
el promedio de desviación de las
puntuaciones con respecto a la media.
Se simboliza como: s o la sigma minúscula o

bien mediante la abreviatura DE.
Cuánto se desvía, en promedio, de la media

un conjunto de puntuaciones.

La varianza refleja la extensión o magnitud
de la variabilidad de una variable. Es la
desviación estándar elevada al cuadrado y
se simboliza como s2.
Ejemplo:
Si sabemos que las medidas de rendimiento
laboral están correlacionadas con la
capacidad profesional del sujeto, el clima
laboral, la motivación.
Quiere decir que la varianza del rendimiento

laboral está explicada por la varianza de
estas otras variables.

La covarianza es el promedio del producto
cruzado de dos conjuntos de desviaciones.
Hace referencia a la varianza, compartida

entre dos variables.
Ejemplo:
En el grado de rendimiento de una tarea
cognitiva depende de dos factores. La
velocidad mental y perseverancia.
La varianza de la tarea es el resultado de la

suma de la varianza derivada de la velocidad
mental y de la perseveración.

La Teoría Clásica de los Test se considera
que la puntuación que obtiene un sujeto en
un test se compone de:
- Puntuación observada (X)

- Puntuación real (V)
- Error de medida (E)

El error de medida permite predecir la
probable fluctuación en la calificación de un
solo individuo debida a factores aleatorios
irrelevantes o desconocidos.
Puede ser:
- Sistemático (o constante), se produce
cuando las mediciones son
sistemáticamente mayores o menores.
- No sistemático (o casual), se produce

cuando las medidas son alternativamente
mayores o menores.

La error de medida, es cualquier condición
que sea irrelevante para el propósito de la
prueba representa.
Una condición importante que te afecta el

tamaño del coeficiente de confiabilidad es la
naturaleza del grupo en el que medido.
Los coeficientes de confiabilidad

dependen de la variabilidad de la muestran
en la que fue medido.

La medición de la confiabilidad de una
prueba permite estimar qué proporción de la
varianza total de las puntuaciones se debe a
al error de medida.
La confiabilidad, indica el grado de

concordancia entre una puntuación
observada y la puntuación real, sin incurrir
en el error de medida.
A menor error de medida, mayor

confiabilidad del test.

La APA describe la confiabilidad como:
«La exactitud (consistencia y estabilidad) de la

medición de un test, es decir la precisión
con la que mide la prueba».
Se refiere a la consistencia de las puntuaciones

obtenidas por las mismas personas cuando se
las examina en distintas ocasiones con el mismo
test.
La confiabilidad declarada caracteriza a la

prueba cuando se aplica en condiciones
normales a personas similares a las que
conformaron la muestra normativa u original.

Si deseamos comparar la confiabilidad de
diferentes pruebas, resulta más conveniente
el coeficiente de confiabilidad.
Mientras que el error estándar de medición

es más apropiado para interpretas las
puntuación individuales.
El error estándar de medición y el

coeficiente de confiabilidad son dos formas
de expresar la confiabilidad de la prueba.

La confiabilidad indica la medida en
que las diferencias individuales en los
resultados pueden atribuirse a
verdades diferencias en las
características.
Los indicadores de confiabilidad más

frecuentes desde los modelos clásicos
son:
- La consistencia interna
- La consistencia temporal o
coeficiente test-retest
- La confiabilidad interjueces.

La consistencia interna se refiere al grado
en que los diferentes ítems de una escala
miden de manera consistente el mismo
constructo subyacente.
- Coeficiente Alta de Cronbach

El coeficiente más utilizado en las ciencias
socia les para el cálculo de la consistencia
interna:
- Coeficiente Alfa de Cronbach, y expresa

la fiabilidad del test en función del número
de ítems y de la proporción de la varianza
total del test debida a la covariación de los
ítems.
Cuanto más cerca se encuentre el valor de

alfa a 1 mayor será la consistencia interna de
los ítems que constituyen el test.

Según Nunnally (1967)
Entre .50 o .60 investigaciones exploratorias
Al menos .80 investigación básica
De .90 a .95 en investigación aplicada

La consistencia temporal o coeficiente
test-retest, indica la estabilidad de la
medida a lo largo del tiempo.
Muestra el grado en que los resultados de

una prueba pueden generalizarse en otras
ocasiones.

Toma en consideración los errores de
medición de diferencias en las condiciones
asociadas con dos ocasiones de
administración.
Dado que en ambas ocasiones se aplicó la

misma prueba, los errores no se reflejan en
un coeficiente test-retest.

Es probable que las diferencias sean
mayores luego de un intervalo largo que de
uno corto.
La magnitud de un coeficiente de
confiabilidad test-retest tiende a ser mayor
cuando el intervalo entre la prueba inicial y
el retest es corto (días o semanas) que
cuando es largo (meses o años).

La confiabilidad interjueces, se trata de determinar si
dos o más resultados obtenidos por dos o más
evaluadores distintos, o por el mismo evaluador en
momentos diferentes, son coincidentes.
Es hacer que dos personas califiquen las respuestas de

un número considerable de examinados y calcular luego
la correlación entre los dos conjuntos de calificaciones.
En el caso de instrumentos clínicos de evaluación

empleados en exámenes intensivos individuales, hay
evidencia de una considerable “varianza del
examinador”. Categorías de pruebas dejan mucho al
juicio del calificador.

Se calcula a través de un índice de
concordancia entre evaluadores,
siendo la fórmula más utilizada el
coeficiente Kappa de Cohen.

La validez de los instrumentos de medición
tiene que ver con lo que miden y con qué tan
bien lo hacen.
Los métodos:
- Analizar el contenido de la prueba
- Calcular la correlación (calificaciones-
criterio de interés)
- Investigar las características psicológicas
particulares o constructos medidos por la
prueba.

La validez de contenido tiene que ver con el
precisar las áreas o temas del contenido,
objetivos o procesos que han de probarse y
la importancia relativa de temas y procesos
individuales.
Atañe a si éste produce un rango de

respuestas que son representativas del
dominio entero o universo de habilidades,
entendimientos y otras conductas que
supuestamente debe medir la prueba.

- Coeficiente de correlación: consiste en
correlacionar las puntuaciones que obtiene
un grupo de sujetos en la aplicación de
una prueba con las obtenidas en una
segunda aplicación.
El más común es el Coeficiente de

Correlación de Pearson.
Toma en consideración la posición de la

persona en el grupo.
La cantidad de su desviación por encima o

por debajo de la media del grupo.

La correlación es un índice estadístico que
indica el grado de asociación de dos
variables.
Una matriz de correlaciones es una tabla

de doble entrada donde figuran, ordenadas,
todas las correlaciones de las variables
estudiadas, tomadas de dos en dos.
https://www.tylervigen.com/spurious-
correlations

Ejemplo:
Si por medio de la correlación descubrimos

una relación estadística significativa entre el
carácter autoritario del padre de una familia
(A) y la agresividad de sus hijos (B), podría
plantearse varia hipótesis.
A es causa de B
B es causa de A
A y B son dos efectos de una causa
determinada en común (X)

- Validación concurrente se emplea
siempre que una prueba se aplica a
personas clasificadas en varias categorías
(Ejemplo: NSE), con el propósito de
La validez con relación a criterio determinar si las puntuaciones en la prueba
de las personas de categoría son diferentes
Hace referencia a procedimientos en los de las de los individuos que se hallan en
cuales las calificaciones en la prueba de un otras.
grupo de personas se comparan con las
puntuaciones, clasificaciones u otras - Validez predictiva atañe a la precisión con
medidas de desempeño. que las puntuaciones de una prueba
predicen puntuaciones de criterio, según lo
indica la correlación entre la prueba
(predictor) y un criterio del desempeño
futuro.
La validez de facie alude a si la prueba
“parece válida” a los examinados que la
presentan, al personal administrativo que
decide sobre uso y a otros observadores sin
capacitación técnica.
A menudo puede mejorarse mediante el

simple recurso de replantear los reactivos
de modo que parezcan relevantes y
plausible en el medio particular en el que
serán usados.

La validez creciente se relaciona con el
concepto de utilidad, tal como se aplica en
los contextos de selección de personal.
La utilidad de una prueba se define como

un incremento medido en la calidad de los
empleados que son contratados o
promovidos sobre la calidad de los
empleados cuando no se usa una prueba u
otro procedimiento de evaluación .

La validez de constructo de un instrumento de
evaluación psicológica se refiere al grado en que el
instrumento mide un constructo particular, o
concepto psicológico como la ansiedad, la
motivación para el logro, la extroversión-
introversión o el neuioticismo.
- Los juicios de expertos de que el contenido de

la prueba corresponde al constructo de interés.
- Análisis de la consistencia interna de la prueba.
- Correlaciones de las puntuaciones.
- Interrogar con detalle a los examinados o a los
calificadores acerca de sus respuestas.

Al igual que la confiabilidad, la validez
varía directamente con la extensión de la
prueba y con la heterogeneidad del
grupo de personas examinadas.
Prueba larga + grupo variado = varianzas

más grandes
Mayor varianza = mayor validez

predictiva.

Revisión de Confiabilidad

Cargado por

Información del documento

Título original

Derechos de autor

Formatos disponibles

Compartir este documento

Compartir o incrustar documentos

Opciones para compartir

¿Le pareció útil este documento?

¿Este contenido es inapropiado?

Copyright:

Formatos disponibles

Revisión de Confiabilidad

Cargado por

Copyright:

Formatos disponibles

UNIDAD I.

- La selección de los constructos a evaluar

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

- La precisión y validez de las medidas

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Las calificaciones crudas obtenidas

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

La estandarización también incluye aplicar la

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Representatividad, debe tener

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

- Muestreo aleatorio sistemático

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

- Normas de edad, es la calificación media

- Norma de grado, es la calificación media

Implican erróneamente que la tasa de

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Representan medidas de posición en una

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

El percentil 50, corresponde a la

Muestran la posición relativa de cada

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Las normas de calificación estándar son

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Nos indica la dirección y el

Propuesta con McCall en

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

No son absolutas, universales o

La muestra debe ser lo suficientemente

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

El método equipercentil, en el que las

CI de 115 en la prueba A CI de 115 en la prueba A

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Normas del subgrupo: grado escolar, nivel

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Antes de que una prueba pueda utilizarse

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

¿Dónde están diseminadas las puntuaciones

Rango, desviación estándar y varianza.

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Se simboliza como: s o la sigma minúscula o

Cuánto se desvía, en promedio, de la media

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Quiere decir que la varianza del rendimiento

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Hace referencia a la varianza, compartida

La varianza de la tarea es el resultado de la

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

- Puntuación observada (X)

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

- No sistemático (o casual), se produce

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

Una condición importante que te afecta el

Los coeficientes de confiabilidad

Licenciatura en Psicología | Técnicas e Instrumentos para la Evaluación Psicológica en Adultos

La confiabilidad, indica el grado de

La utilidad de una prueba se define como