TEMA 2 Validación Del Instrumento de Medición
TEMA 2 Validación Del Instrumento de Medición
TESIS II
1
ETAPAS DE LA INVESTIGACION
Nuevos
conocimientos
Presentación de Infor me
Resultados Final
2
Preguntas:
• ¿De que depende la selección del instrumento de
investigación?
• ¿Cuales son los pasos para construir un instrumento?
• ¿Cuales son las secciones que debe tener el instrumento?
• ¿Todos los instrumentos de recolección de datos de una
investigación deben ser validados?
• ¿Que pasos debemos seguir para validar un instrumento que
hemos diseñado?
• ¿Todos los pasos para validar un instrumento deben ser
aplicados siempre?
3
Secuencia lógica para la construcción de un cuestionario
4
INSTRUMENTOS DE EVALUACIÓN
En su elaboración deben cumplir
CONDICIONES
PRÁCTICAS TÉCNICAS
Fácil de construcción
VALIDEZ Grado en que un
instrumento sirve
Fácil de administrar al propósito
CONFIABILIDAD para el cual se
va utilizar y
Sencillo de corregir y de ofrece la
interpretar información que
Grado de confianza en la información
se requiere
que brinda dicho instrumento.
Tiene bajo costo “mide lo que se 5
Evaluar con precisión y consistencia. desea medir”.
(Se obtiene el mismo resultado en
diferentes momentos)
Secuencia lógica para el proceso de diseño, redacción y validación de un instrumento
6
Unidad II: Validación y confiabilidad de instrumentos de
investigación
7
VALIDACIÓN Y CONFIABILIDAD DE INSTRUMENTOS DE
INVESTIGACIÓN
9
¿CÓMO SE SELECCIONAN LOS EXPERTOS Y QUE
INSTRUMENTOS SE APLICAN?
11
TIPOS DE VALIDEZ DE LOS INSTRUMENTOS
Validez de concepto o
Validez de contenido Validez de criterio
Constructo
• La validez de contenido está determinada por • La validez de criterio establece la validez de • El criterio se fija en el presente. Los
el grado en que un instrumento refleja el un instrumento de medición comparándolo resultados del instrumento se correlacionan
dominio específico de lo que se mide. Este con algún criterio externo. con el criterio en el mismo momento del
tipo de validez es de gran importancia en • En la validez de criterio se desea saber hasta tiempo.
pruebas de rendimiento. Para que un qué punto podemos generalizar (o predecir) • Si un instrumento tiene validez de concepto,
instrumento de medición tenga validez de hacia el éxito que habrá de tener una persona las puntuaciones alcanzadas por los sujetos
contenido, debe contener, representados, a en la ejecución de una tarea diferente. varían de acuerdo con las predicciones
todos los ítems del dominio de contenido de inherentes a la teoría subyacente al concepto.
las variables que se van a medir. Esto es, los •Se establece al validar un instrumento de • El proceso de validación de un constructo
ítems seleccionados, para incluir en la prueba, está vinculado con la teoría. No es posible
medición al compararlo con algún criterio
deben ser una muestra representativa del llevar a cabo la validación de constructo, a
externo que pretende medir lo mismo.
universo de ítems asociados a la variable que menos que exista un marco teórico que
se desea medir. soporte a la variable en relación con otras
•Validez concurrente y la validez predictiva. En
las campañas electorales, los sondeos se variables.
•Grado en que un instrumento refleja un • Debe explicar el modelo teórico empírico que
comparan con los resultados finales de las
dominio específico de contenido de lo que se subyace a la variable de interés. Ej: El
mide. Ej: Una prueba de operaciones elecciones. Ej: Coeficiente de
Contingencias, Spearman – Análisis de Factores y Análisis de
aritméticas no tendrá validez de contenido si Cofactores, el Análisis de Covarianza.
incluye sólo problemas de adición y excluye Pearson, Alfa de Cronbach y la Técnica
Brow,
problemas de sustracción, multiplicación y Aiken
división (Validez de juicio de experto).
Validez total. La validez total de una prueba es la suma de la validez de contenido, la validez de criterio y la
validez de concepto. Entre mayor evidencia de validez de contenido, validez de criterio y validez de concepto
tenga un instrumento de medición; éste se acerca más a representar la variable o variables que pretende
12 medir.
Validación de instrumentos de medición
15
[Link] de contenido:
• Evaluado por un grupo de expertos o Jueces
• Instrumento refleja un dominio específico de contenido de lo que
se mide. Debe contener a todos los ítems del dominio de contenido
de las variables a medir.
• Se debe utilizar un cuestionario con preguntas que posteriormente
se llevan a una matriz, a la que se le dará un puntaje.
16
17
18
Validez de criterio
d. Validez de criterio:
Correlación de la escala con otra prueba que mida lo mismo, idealmente
con el patrón de oro (no siempre existe) que se ha usado rutinariamente y
es aceptado.
Dos tipos: validez concurrente y validez predictiva.
La validez concurrente
Comparar las puntuaciones de la prueba con otros indicadores paralelos o
criterios externos.
Correlación entre el nuevo instrumento y una escala que ya ha sido
probada (patrón de oro) para medir una característica.
Validez Concurrente: X e Y se miden en el mismo momento.
Ejm: Realización de mamografía y biopsia (criterio)
19
Validez de criterio
La validez predictiva
Grado en que una prueba sirve para predecir comportamientos futuros.
Ecuación de regresión donde se describe una línea recta que se ajusta mejor para la
estimación de la característica evaluada a partir del nuevo instrumento.
El coeficiente de correlación de Pearson con valores superiores a 0.8 indica que el nuevo
instrumento funciona casi igual al patrón de oro
El coeficiente de correlación de Pearson con valores menores de 0.3: el instrumento mide
cosas totalmente diferentes al fenómeno que se quiere estudiar.
Validez de Criterio predictivo: X se mide en el momento 1 Y se mide en el momento 2.
Ejemplo: Test para medir el coeficiente de inteligencia y el rendimiento académico (criterio)
20
FACTORES QUE AFECTAN LA VALIDEZ
La improvisación
El El instrumento
instrumento es inadecuado
es inadecuado para laspara las personas
personas a las que a
selas
les que se no
aplica: leses
aplica:
empático. no es empático.
Aspectos mecánicos.
21
Ejemplo de formato para validación de instrumento
por jueces expertos.
22
JUICIO DE EXPERTOS
EL JUICIO DE EXPERTOS VIENE A SER EL CONJUNTO DE OPINIONES QUE BRINDAN LOS
PROFESIONALES. ESTAS APRECIACIONES CONSISTEN EN LAS CORRECCIONES QUE REALIZA EL ASESOR
DE TESIS O EL ESPECIALISTA EN INVESTIGACIÓN, CON LA FINALIDAD DE QUE LA REDACCIÓN DE LAS
PREGUNTAS TENGA SENTIDO LÓGICO Y COMPRENSIBILIDAD Y QUE CADA UNA DE ELLAS DEBEN
ESTAR EN EMPATÍA CON LOS INDICADORES.
PARA LLEVAR A CABO ESTE PROCESO ES MUY FRECUENTE EL USO DE FORMATOS Y ADJUNTAR A
CUALQUIER INSTRUMENTO DE MEDICIÓN LA MATRIZ DE CONSISTENCIA Y LA TABLA DE EVALUACIÓN
DEL INSTRUMENTO DE INVESTIGACIÓN POR EXPERTOS. CON ESTOS APORTES, LOS INSTRUMENTOS23 DE
INVESTIGACIÓN ESTARÁN EXPEDITOS PARA SU APLICACIÓN PARA LA PRUEBA PILOTO
En términos muy puntuales, luego de convocar la participación de quienes
actuarán como expertos y de informarles sobre cómo deben desarrollar el proceso
de valoración (calificación), el proceso requiere los siguientes pasos:
24
¿En conclusión, los expertos que corrigen?
Del mismo modo, corrigen los diseños (estructura) de las guías de observación, entrevistas,
cuestionarios, pruebas psicológicas y test para medir actitudes.
También pueden realizar algunas correcciones durante el proceso de redacción del proyecto de
investigación y el informe final de la misma.
25
MODELO DE TABLA DE EVALUACIÓN DEL
INSTRUMENTO DE INVESTIGACIÓN POR
EXPERTOS
VARIABLE INDEPENDIENTE: COMPETENCIAS BÁSICAS DE
LAS TECNOLOGÍAS DE INFORMACIÓN Y COMUNICACIÓN
NUMERO DE EXPERTOS
Nº de preguntas 1 2 3 4 5 6 7 8 ∑ %
1 92 81 95 84 90 78 88 75 683 85,38
2 93 88 90 92 91 90 90 89 723 90,38
3 70 89 85 70 75 77 93 85 644 80,50
4 60 72 88 77 82 78 75 90 622 77,75
5 80 91 72 65 84 83 70 82 627 78,38
6 75 88 78 90 84 90 80 93 678 84,75
7 60 55 73 78 88 75 89 88 606 75,75
8 77 88 90 81 77 86 92 94 685 85,63
9 75 73 93 93 82 90 89 92 687 85,88
10 90 82 95 90 85 91 80 90 703 87,88
11 69 89 86 66 78 80 70 73 611 76,38
12 78 80 92 91 84 75 65 70 635 79,38
13 84 64 85 89 93 79 68 78 640 80,00
14 62 90 81 88 69 80 75 84 629 78,63
15 60 92 79 80 65 89 80 89 634 79,25
16 90 88 85 82 89 87 96 85 702 87,75
17 94 73 88 79 90 93 88 75 680 85,00
18 85 60 80 90 82 85 73 90 645 80,63
26
19 75 84 73 69 88 82 81 96 648 81,00
20 73 93 91 71 80 72 89 85 654 81,75
TOTAL 1642,00
Operación matemática para determinar el nivel %:
∑ = Es la sumatoria de las calificaciones de cada pregunta. Por ejemplo, a la sumatoria calificada por
los 8 expertos de la pregunta Nº1 le corresponde 683 puntos.
% = El porcentaje se obtiene del valor de la sumatoria dividido entre el número de expertos. Ejemplo
Es decir, que la pregunta número uno ha pasado la exigencia mínima y se podría afirmar que ya “casi”
se encuentra validada.
1642/20 = 82.10%
Interpretación
De acuerdo al resultado, el valor obtenido nos indica que es 82.10% y como es mayor de 75
puntos, se valida dicho instrumento.
27
PRUEBA PILOTO
28
Recogida de datos de la Investigación
RECOGIDA DE DATOS
¿Con qué
¿Dónde, cuando y ¿Quién obtendrá
¿Qué datos son instrumentos cómo obtendremos la los datos?
necesarios? recogemos la información?
información?
Datos personales
y profesionales Reuniones de
Formación en Profesores de
cuanto a las TIC la Facultad
Necesidades de El Investigador
Encuesta Visitas a los
formación en las profesores,
TIC previo
Actitud hacia las acuerdo
TIC 29
Tercera fase: Prueba piloto
De acuerdo con los resultados del análisis de concordancia entre los jueces
expertos, se procede a una segunda redacción de ítems que conformarán el
instrumento que será administrado para la prueba piloto, cuya muestra
puede ser seleccionada a través de una muestra probabilística simple al azar.
30
Prueba piloto
33
Lista de control para el proceso de prueba piloto
34
Prueba piloto: aspectos a valorar
35
FUENTES DE ERROR:
37
CONFIABILIDAD DE INSTRUMENTOS DE INVESTIGACIÓN
Según Chávez (2007), la confiabilidad es “el grado de congruencia con que se realiza la medición
de una variable “. Según Hernández y Col (2012), la “confiabilidad de un instrumento de medición
se determina mediante diversas técnicas, y se refieren al grado en la cual se aplica, repetida al
mismo sujeto produce iguales resultados”. Para ello, se constato que si se aplica es confiable el
instrumento.
k
KR 20
) (1 Vt
( k 1
p.q
)
KR-20 = Coeficiente de Confiabilidad (Kuder Richardson)
k = Número de ítems que contiene el instrumento.
Vt: Varianza total de la prueba.
Sp.q = Sumatoria de la varianza individual de los ítemes.
p = TRC / N; Total respuesta correcta entre número de
sujetos
q=1–p
38
En base al resultado, con un valor de 0,84, se considera
el instrumento como altamente confiable.
VALIDACIÓN Y CONFIABILIDAD DE
INSTRUMENTOS DE
Homogeneidad del • Cuanto más homogéneo sea el grupo, mayor será la confiabilidad de
grupos la prueba.
41
FACTORES QUE INCIDEN EN LA CONFIABILIDAD
• Existen pruebas en las cuales hay gran cantidad de ítems fáciles que
Dificultad de los nadie alcanza a responder en su totalidad en el tiempo establecido; en
otras, se presentan pocos ítems de gran dificultad que tampoco
ítems. pueden ser contestados completamente. Ambas situaciones afectan la
con-fiabilidad de la prueba.
• En ítems de respuesta abierta, en ensayos y en otras pruebas de
este tipo, la objetividad que posea el juez para la asignación de la
Objetividad calificación en los ítems afecta significativamente la confiabilidad de la
prueba realizada.
42
CONFIABILIDAD DE PRUEBAS ESTANDARIZADAS
¿Qué tan confiable debe ser una prueba para ser útil? No existe un criterio general que
determine el nivel mínimo de confiabilidad que debe tener una prueba para que se pueda
considerar como útil para la investigación; sin embargo, la aceptación general es la
siguiente:
Las pruebas estandarizadas que se utilizan para ayudar a tomar decisiones acerca de
individuos, deben tener coeficientes de confiabilidad de por lo menos 0.85.
45
Confiabilidad
Correlación muy alto dice que las dos preguntas están evaluando el mismo aspecto y con
uno de los dos es suficiente para medirlo.
47
48
49
Confiabilidad
Alfa de Crombach
Valores: oscila entre 0.0 y 1.0
O significa confiabilidad nula
1 representa confiabilidad total
50
Confiabilidad
3. Confiabilidad Interevaluador: Mide que tan similares son los puntajes asignados por
diferentes evaluadores a un mismo fenómeno; para el caso en que los evaluadores entrevistan
a las personas.
– Para valores continuos (cuantitativos) coeficiente de correlación intraclase.
– Para valores categóricos (cualitativos) Índice de Kappa y el porcentaje de acuerdo. 51
Adecuada amplitud de rango
52
Sensibilidad al cambio
• Habilidad del instrumento para encontrar las variaciones o
cambios que presenta el fenómeno.
• Si mide dolor, los puntajes obtenidos con el instrumento
deben disminuir cuando hay mejoría del proceso y
viceversa.
54
MODELO DE VALIDEZ
Documentos a presentar para la validación:
1. Carta de presentación
2. Matriz de consistencia.
3. La Operacionalización de la(s) variable(s) de
estudio.
4. El instrumentos(s) con su solucionario.
5. Las ficha(s) de validación.
55
1. Modelo de
carta de
presentación,
oficio u
solicitud
56
2. Matriz de Consistencia
57
3. Operacionalización de la(s) variable(s) de estudio
58
3. Operacionalización de la(s) variable(s) de estudio
59
4. El instrumento de investigación
60
5. La ficha de validación
61
5. La ficha de “TITULO DE LA TESIS”
VALIDACIÓN DE LOS INSTRUMENTOS
validación Graduando: ………………………………
……………………………….
Fecha:
Apellidos y nombres del experto:
MINIMAMENT
INACEPTABLE ACEPTABLE
E ACEPTABLE
CRITERIOS INDICADORES
100
40
50
55
80
85
90
45
60
65
70
75
95
1. Claridad Está formulado con lenguaje comprensible.
2. Objetividad Esta adecuado a las leyes y principios científicos.
Está adecuado a los objetivos y las necesidades reales de
3. Actualidad
la investigación
4. Organización Existe una organización lógica
Toma en cuenta los aspectos
[Link] Metodológicos esenciales.
OPINIÓN DE APLICABILIDAD:
…………………………………………………………………………………………………………………………………………………………
……………………………………………………
62 PROMEDIO DE VALORACIÓN
FIRMA DEL EXPERTO INFORMANTE
5. La ficha de
validación
63
5. La ficha de
validación
64
EJEMPLO VALIDEZ
( PRETEST)
65
EJEMPLO VALIDEZ (CUESTIONARIO)
66
EJEMPLO VALIDEZ (CUESTIONARIO)
67
EJEMPLO VALIDEZ (CUESTIONARIO)
68
CONCLUSIONES
La técnica juega un papel muy importante en el proceso de la investigación científica, a tal grado
que se puede definir como la estructura del proceso de la investigación científica. Sus rasgos
esenciales consisten en que: propone una serie de normas para ordenar las etapas de la
investigación científica. Aporta instrumentos y medios para la recolección, concentración y
conservación de datos. Pero estos dos conceptos aplicados están sumamente relacionados entre sí.
69
CONCLUSIONES
Las técnicas son procedimientos de actuación para la recolección de información asumidos de
forma concreta y particular por cada ciencia, relacionados con las distintas fases del método
científico
La validez es una cuestión de grado y una prueba tiene muchas valideces, dependiendo cada una
de los propósitos específicos con que se utilice. La validez de cualquier prueba depende de cómo
se utilice en la situación local
ejemplo, puede ser consistente con los resultados que produce, pero no medir lo que pretende.
En resumen con la validez y confiabilidad se pretende:
71
REFERENCIAS BIBLIOGRÁFICAS
72