Está en la página 1de 49

Universidad de Santiago de Chile

Departamento de Educación
Programa Magister en Educación
Actualización Pedagógica para post-
graduados Diseño de Instrumentos
de Evaluación
Tema N°2 Procedimientos e
Instrumentos de Evaluación: Validez y
Confiabilidad

Benjamín Troncoso Velásquez


Mg. Historia, Mg. Educación
benjamintroncoso@gmail.com
¿QUÉ ES UN INSTRUMENTO DE CALIDAD?

En la Universidad de Santiago de Chile


existe la convicción de la necesidad de
establecer una cultura de Evaluación en los
establecimientos educacionales, que permita
medir en forma sistemática y permanente los
logros y avances de cada uno de los estudiantes;
reflexionar en torno a esas evaluaciones,
aplicando estrategias de recuperación de
aprendizajes en sus dimensiones: conocimiento,
habilidades y actitudes.
Los profesores y profesoras
necesitan saber cómo planificar la
evaluación, observar el aprendizaje,
analizar e interpretar la evidencia
del aprendizaje, retroalimentar a los
alumnos y alumnas, y apoyarlos en
la autoevaluación.
Con este curso, queremos entregar
herramientas que permitan a los
docentes poner en práctica el enfoque
de evaluación para el aprendizaje,
desarrollando habilidades para diseñar,
elaborar y analizar instrumentos de
evaluación , que sean pertinentes,
válidos y estén alineados con los
objetivos de aprendizaje de las bases
curriculares, y que una vez aplicados
puedan realizar un análisis de
resultados con foco en la toma de
decisiones.
ORIENTACIONES PARA EL PROCESO DE PLANIFICACIÓN DE LA
EVALUACIÓN
Interrogantes evaluativas Foco principal
¿Para qué Evaluar? Para mejorar el proceso de aprendizaje del alumnado.

¿Qué Evaluar? Objetivos, contenidos, competencias y resultados de


aprendizaje; de acuerdo a criterios de evaluación.

¿Cómo Evaluar? Con procedimientos e instrumentos de evaluación. Por medio


de tareas y actividades.

¿Cuándo Evaluar? Antes, durante y después del proceso de enseñanza


aprendizaje.

¿Con qué intencionalidad? Diagnóstica, formativa y sumativa.

¿Quién evaluará ? El profesor a los estudiantes, entre compañeros o iguales y


autoevaluación.

Fuente: Elaboración propia


CLASIFICACIÓN DE LOS PROCEDIMIENTOS DE EVALUACIÓN
Escrita Ensayo / Respuesta fija o estructurada.
Evaluación Prueba Oral
Tradicional Ejecución
Procedimientos
de Evaluación Informe Autobiografía /Cuestionario/Entrevista

Observación Registro anecdótico/Lista de comprobación


Escala de apreciación

Evaluación Bitácoras Libro/diario de clases/Escala de


Observación
Auténtica apreciación /Cuaderno de campo
sistemática
Monografía/Resúmenes/Trabajos aplicación
Análisis de las
/Cuaderno de clases/Resolución de ejercicios
producciones
Procedimientos Textos escritos – oral/Investigaciones
Evaluación Producciones plásticas/ motrices
de Desempeño Intercambios Diálogo/Entrevista/ Asamblea Puesta en común
orales
Objetivas/Abiertas/ Interpretación de datos/
Pruebas Exposición de un tema/Resolución de ejercicios/
específicas pruebas de capacidad motriz/Cuestionarios/
Grabaciones/ Diseños/Campañas- montajes
Sans Martí(2008)
QUÉ ES UN INSTRUMENTO DE EVALUACIÓN
Todo recurso que
nos brinda
2 información sobre
el aprendizaje de 3
los alumnos.
Es el soporte físico Ningún instrumento
1 que se emplea es por sí mismo
para recoger suficiente si no se
información sobre utiliza en forma
los aprendizajes de inteligente y
los estudiantes. reflexiva.

Instrumento
de 4
Evaluación
Mientras más
información se Los
obtenga más instrumentos
certeza tendremos deben evaluar
5 de los resultados
que esperamos aprendizajes
obtener. significativos.
CONCEPTOS CLAVES
DE EVALUACIÓN

1 PROCEDIMIENTO DE
EVALUACIÓN

MEDIOS DE
2 EVALUACIÓN

3 INSTRUMENTO DE
EVALUACIÓN

4 AULA
Son estrategias que se utilizan
para recoger
sistemáticamente
PROCEDIMIENTO
información.
DE EVALUACIÓN ¿Cómo vamos a evaluar?

Son pruebas o evidencias que


sirven para recabar información
sobre el objeto a evaluar.
¿Qué vamos a evaluar?
MEDIOS DE
EVALUACIÓN
Son aquellas herramientas reales
y físicas utilizadas para valorar el
aprendizaje evidenciado a
través de los diferentes medios
de evaluación
INSTRUMENTO DE ¿Con qué vamos a evaluar?
EVALUACIÓN

COHERENCIA
 Técnicas de evaluación:

“estrategias que utiliza el evaluador para


recoger sistemáticamente información sobre
el objeto evaluado. Pueden ser de tres tipos,
la observación, la encuesta (entrevistas) y el
análisis documental y de producciones”
(Rodríguez e Ibarra, 2011: 71-72).
 Medios para evaluar:
“pruebas o evidencias que sirven para recabar información sobre
el objeto a evaluar”. Estas evidencias, productos o actuaciones
realizadas por los estudiantes son los medios que nos informan
sobre los resultados de aprendizaje y que utiliza el evaluador para
realizar las valoraciones correspondientes. Varían en función del
tipo de competencia o aprendizaje que se pretende evaluar.
Algunos ejemplos que se presentan son los siguientes: para valorar
la aplicación y destrezas de investigación (proyecto de
investigación); para valorar destrezas profesionales (estudio de
casos); para valorar competencias comunicativas (presentación o
entrevista).
 Instrumentos de evaluación:

“herramientas reales y tangibles utilizadas por la


persona que evalúa para sistematizar sus
valoraciones sobre los diferentes aspectos”
(Rodríguez e Ibarra, 2011: 71-72). Algunos ejemplos
son: las listas de control, las escalas de estimación,
las rúbricas, las escalas de diferencial semántico,
las matrices de decisión o incluso instrumentos
mixtos donde se mezclen más de uno.
ASIGNATURA HABILIDAD EVALUADA MEDIOS DE INSTRUMENTOS DE
EVALUACIÓN/FUENTES DE EVALUACIÓN
EVIDENCIAS
Comunicación -Ensayo -Escala de Apreciación
-Debate -Matriz de decisiones
-Ateneo -Rúbrica.
-Escala de Calificación.
-Apps.
Historia, Geografía y .etc.
-Interpretación documentos.
Ciencias Sociales -Estudio de casos.
-Dramatizaciones.
-Artículo de opinión Ejemplo
-Disertaciones
Mapa conceptual.
Portafolio, etc…

Comunicación Oral -Lectura oral. -Escala de Apreciación.


Lenguaje y -Disertación. -Lista de comprobación.
-Recitación de poemas. -Rúbricas
Comunicación.
-Diálogos culturales. -Registro anecdótico.
-Cuenta cuentos. -etc.
-Soliloquios.
Para complementar:
1.- Las técnicas de evaluación (Hamodi, López y López ,2015)
son las estrategias que el profesorado utiliza para
recoger información acerca de las producciones y
evidencias creadas por el alumnado (de los medios); son
de dos tipos, en función de si el alumnado participa o no
en el proceso de evaluación.

2.- Los medios de evaluación


son todas y cada una de las producciones del
alumnado y sirven para demostrar lo que los discentes
han aprendido.

3.- Los instrumentos de evaluación


son las herramientas que tanto los profesores como los
alumnos utilizan para plasmar de manera organizada la
información recogida mediante una determinada
técnica de evaluación.
Para Comprender…

INSTRUMENTOS DE
EVALUACIÓN
Escalas de diferencial semántico
Valora el nivel de esfuerzo que tú haces para sacar buenas en
la asignatura evaluación para los aprendizajes:

Ningún esfuerzo |___|___|___|___|___|___|__Mucho esfuerzo


1 2 3 4 5 6 7
Escalas de estimación
Escala de Apreciación para Evaluar Portafolios: Escala de Apreciación para evaluar debates(tipo Likert)

ASPECTOS A DEFICIENTE REGULAR BUENO EXCELENTE INDICADORES S G O RV N


EVALUAR (Requiere (Modificar (Puede ser (Cumple
Respeta orden
mejorar algunos mejorado) totalmente)
elementos) de intervención
1 2 3 4
1. Organización e Acepta
identificación de opiniones de los
secciones demás
2.Materiales Escucha
seleccionados
atentamente a
adecuadamente
los demás
Fuente: Elaboración propia S= siempre; G= generalmente; O= ocasionalmente;
RV= rara vez; N= nunca
Listas de control
Matrices de decisión
Lista de control para evaluar
Portada de informe

1.- Membrete SI___NO__


2.- Título SI___NO__
3.- Curso SI___NO__
4.- Nombre SI___NO__
Rúbrica Analítica para evaluar textos escritos
Desempeño
Puntajes
Criterio Muy Bueno Bueno Suficiente Insuficiente
3 2 1 0
Calidad del El argumento central se El argumento central Se formula un No es posible identificar
argumento formula claramente a lo se formula claramente. argumento, pero no se un argumento.
central. largo de la exposición. Pero no se alude al mantiene en forma
Se alude al argumento argumento durante el consistente a lo largo
en todo el texto. desarrollo de todo el del texto.
texto.

Calidad de la La evidencia claramente La evidencia El argumento central es La evidencia que apoya al


evidencia de apoya al argumento claramente apoya al apoyado por evidencia argumento central es
apoyo al central y es suficiente. argumento central, muy limitada. irrelevante e inexistente.
argumento pero es insuficiente.
central.
Estructura del La estructura presenta La estructura presenta La estructura se El texto no presenta una
texto. una introducción, una introducción, encuentra desarrollada organización
desarrollo y conclusiones desarrollo y pobremente, en una o estructurada.
coherentes. conclusiones , pero no más partes existen
son completamente incoherencias.
coherentes.

Total: 60% nota 4.0


RESULTADOS DE
APRENDIZAJE

PROCEDIMIENTOS DE EVALUACIÓN

SISTEMA DE CALIFICACIÓN
OBJETO DE EVALUACIÓN CRITERIOS DE EVALUACIÓN

PRODUCTOS/ACTUACIONESAPR
TAREA DE EVALUACIÓN DE ENDIZAJES INSTRUMENTO DE
CALIDAD EVALUACIÓN

MEDIOS DE EVALUACIÓN

TÉCNICA/PROCEDIMIENTO DE
EVALUACIÓN

RETROALIMENTACIÓN --- PARTICIPACIÓN


Formato
INSTRUMENTO DE
EVALUACIÓN

Construcción

Planificación

Objetividad-Pertinencia-Validez-Confiabilidad
RIGOR Y CALIDAD DE UN
INSTRUMENTO EVALUATIVO

 VALIDEZ

 CONFIABILIDAD

 OBJETIVIDAD
VALIDEZ Y CONFIABILIDAD

Conceptos fundamentales para cualquier


evaluación.
Permiten resguardar la función
pedagógica.

Validez:
El instrumento mide lo que pretende medir. En la actualidad, también se integra
la finalidad del instrumento.
Tipos de
Validez

Instrumentos
de Evaluación
de Calidad

Validez de Validez Validez


Contenido Instruccional Consecuencial

Rojas-Barahona & Foster (2008)


La validez de contenido, a veces llamada la
validez lógica o racional, determina en qué
grado una medida representa a cada
elemento de un constructo.
EJERCICIO N° 1
VALIDEZ DE CONTENIDO
Ejemplos de transgresión a la validez de contenido

En una clases de matemática, el Como sabía que el profesor de historia


profesor nos pidió rotar un nos preguntaba sobre personajes y fechas,
triángulo en un plano coordenado. aprendía todo de memoria, me iba súper
Sin embargo terminó evaluando bien; lo malo que ahora no recuerdo nada
mejor lo que tenía más colorido de esa unidad.

Tuve que leer una novela que me gustó


mucho, por los valores que tenía. Sin
embargo la profesora preguntó por los
nombres de los personajes.
Sugerencias para preservar la validez de contenido

Construir matrices Verificar a través


y tablas de de jueces la
especificaciones para adecuación de las
cada instrumento de situaciones e
evaluación, instrumentos de
contemplando evaluación para
referencia y énfasis medir los contenidos
curricular, planteados en el
indicadores de aprendizaje(trabajo
logro(habilidades, con pares)
contenidos,
actitudes. otros)
Validez Instruccional

 Aplicación de la Validez de Contenido.

 Lo que los estudiantes han tenido que aprender durante las


clases para responder correctamente.(Cracker et al, 1988).

 Sinvalidez Instruccional los estudiantes no tienen oportunidad


de demostrar lo que aprendieron, y los profesores no tienen la
posibilidad de evaluar lo que han enseñado.
Ejemplo de Sugerencias para
transgresión a la resguardar la
Validez Validez
Instruccional. Instruccional.
Validez Consecuencial

 Las evaluaciones producen efectos(buscados o no) en el


proceso de enseñanza /aprendizaje.
 Perseguir como objetivo que cada situación de evaluación
sea una oportunidad de aprendizaje.
 Buscar que las evaluaciones nos permitan tomar decisiones
sobre la planificación, la didáctica y las futuras evaluaciones.
 Diseñar procesos de análisis de datos de las evaluaciones
que permitan entregar información de los logros de
aprendizaje tanto para docentes como para estudiantes.
Ejemplos de transgresiones a la Sugerencias para resguardar la
validez consecuencial validez consecuencial
 El SIMCE y las pruebas “ de nivel”  Definir claramente los propósitos y
miden sólo un eje del currículo; por usos de la evaluación;¿Para qué
lo tanto este semestre no voy a evaluamos?
pasar los otros ejes en profundidad.  Identificar las evidencias útiles para el
Quiero que mis alumnos saquen propósito evaluativo. ¿Qué necesito
buenos resultados en las pruebas. saber para cumplir con el propósito
 El profesor de geografía nunca nos propuesto para la evaluación?,¿qué
hace aplicar la materia. Sólo tipo de evidencia me entrega esa
pregunta definiciones de conceptos, información?
así que los aprendo de memoria y  Una buena planificación permite
me aseguro un 7.0 resguardar esta correspondencia.
Confiabilidad
 Elconcepto de confiabilidad hace  Moss, P. A. (1994). plantea que la
referencia a consistencia, exactitud y confiabilidad en el aula pasa por el
estabilidad de los resultados, a las análisis sobre la suficiencia de
inferencias que se pueden realizar, y información.
tiene directa relevancia en las  Las conclusiones y posteriores
conclusiones y posterior toma de decisiones respecto de la forma de
decisiones (Luckett & Sutherland, abordar el proceso de
2000). enseñanza/aprendizaje deben estar
 Se relaciona con la consistencia de basadas en la evidencia suficiente para
la medición, más allá de lo que se no cometer errores o al menos
mida exactamente. minimizarlos.
Ejercicio n°2
CONFIABILIDAD
Reprobé tecnología, es que puse
muy nerviosa ya que había que
presentar el trabajo frente al
curso y todos me estaban
mirando.

El profesor de Ciencias me dijo que,


por lo que vio en mi prueba, yo no sé
interpretar gráficos. Tengo rabia, porque
yo sí sé hacerlo; pero él sólo puso una
pregunta en la prueba y no entendí
muy bien lo que había que hacer.
Aproximación al concepto de Indicador de Evaluación

El Diccionario de la
Real Academia Un indicador no es sino una
Española define al señal o indicio que permite
indicador como captar y representar
aquello “que indica aspectos de una realidad
o sirve para indicar”, que no resultan
directamente asequibles al
observador.
Oxford Dictionary lo
define como “una
cosa que señala algo”
o “un tablero que da El científico social construye indicadores con la
información sobre la intención de aproximarse a diversos aspectos poco
situación actual”. visibles de su ámbito de trabajo.
Representan lo que se espera
que los alumnos y alumnas
hagan para dar cuenta del logro
del objetivo de aprendizaje

INDICADORES O
TAREAS A EVALUAR

Son una descripción que


explicita en términos
evidenciables u observables
la o las acciones que deben
realizar los estudiantes para
considerar que ha alcanzado
un objetivo de aprendizaje
INDICADORES

INDICA: ES REGISTRABLE:
 Señala : “Ahí  Se puede
está” informar.
 Anotar

CARACTERÍSTICAS

SE REDACTA
ES OBSERVABLE: COMO RASGO
 Se puede DE CONDUCTA:
constatar  Tiempo presente.
 Verificable  Tercera persona
 Es concreto
 Los indicadores son construidos desde los criterios de
desempeño descritos en el elemento de competencia de
la norma a evaluar.

 Son definidos como medidas objetivas de los sucesos del


proceso que a su vez permiten evaluar si se está
cumpliendo o no, o en qué medida, los criterios de
evaluación que se han elaborado.

 Son variables empíricas que permiten al evaluador medir el


elemento de competencia y constituyen el máximo grado
de operacionalización de la competencia . Los indicadores
son específicos
VENTAJAS DE LOS INDICADORES E EVALUACIÓN
Hacen observable a
los criterios del
Los Indicadores de
elemento de
evaluación
competencia
describen las
permitiendo valorar
habilidades y
el desempeño del
destrezas que se
estudiante con
quieren evaluar.
objetividad al
recoger la evidencia.

Permiten la Permiten verificar el


elaboración de cumplimiento de los
medios e criterios de
instrumentos evaluación, es decir,
evaluativos condiciones de
pertinentes. desempeño.
Representan
una medida Deben ser
cuantitativa o verificables.
cualitativa.
Las características
que deben tener
los Indicadores:
Deben servir
Deben revelar para orientar
los propósitos de Deben ser futuras
los criterios de comprensibles decisiones para
evaluación para que mantener o
elaborados. puedan ser modificar
interpretados acciones.
por todos los
involucrados
en el proceso.
ESTRUCTURA DEL INDICADOR

Capacidad específica o acción


Contenido Condición de calidad
observable

Contenido hace posible el


Capacidad específica desarrollo de la capacidad Condición en el
(acción) que, específica. Responde a la que se evidencia el
generalmente, hace pregunta ¿qué es lo que... (la desarrollo de la
alusión a una operación capacidad específica)? La capacidad en
mental. respuesta es el contenido. productos tangibles
indicadores de Evaluación:
Son desempeños o acciones específicas
observables en la o el estudiante que
entregan evidencia del logro de un
MINEDUC (2016)
conocimiento, habilidad o actitud.
Programa de 1° Medio

Definición de Indicador
de Evaluación
Syllabus como herramienta de planificación del proceso de enseñanza – aprendizaje.

¿CÓMO SE EVIDENCIA EL
¿QUÉ SE APRENDE-ENSEÑA? ¿CÓMO SE APRENDE-ENSEÑA?
APRENDIZAJE?

 Criterios de Evaluación
 Big Questions  Estrategias
 Indicadores de
 Objetivos de aprendizaje  Actividades de Enseñanza Evaluación
y aprendizaje
 Contenidos  Evidencias de
 Recursos Aprendizaje

 Procedimientos, Medios
e Instrumentos
Indicadores o tareas a evaluar- Ejemplo
OBJETIVO DE CRITERIOS O ÁMBITOS INDICADORES DE LOGRO TAREA CON LA QUE SE MIDE
APRENDIZAJE
Equilibrio(estabilidad en Mantiene la dirección
la marcha). de la bicicleta sin salirse
de la pista demarcada.

Que el niño sea Velocidad. Es capaz de recorrer la Andar en bicicleta en una


capaz de andar en pista en un máximo de pista delimitada, en la que
bicicleta solo. 10 minutos. hay obstáculos.
Control de la Sortea los conos sin
Bicicleta(capacidad de toparlos
maniobra)
EJERCICIO N°3

Elaborando Indicadores o
Tareas a evaluar
Actividad: Utilizando el
modelo anterior elaborar
su propio modelo en su
especialidad.
OBJETIVO DE CRITERIOS O ÁMBITOS INDICADORES DE TAREA CON LA QUE SE
APRENDIZAJE LOGRO MIDE

También podría gustarte