MINISTERIO DE EDUCACIÓN

DIRECCIÓN NACIONAL DE EVALUACIÓN EDUCATIVA

TÉCNICAS PARA LA EVALUACIÓN

DE LOS APRENDIZAJES

Por. Magister Dillian Staine

dillian1971@gmail.com

Por. Magister Dillian Staine

http://dillian1971.wix.com/iptiaexito2014
1
 TÉCNICAS PARA LA EVALUACIÓN
DE LOS APRENDIZAJES
• MALAS PRÁCTICAS (ALGUNOS EJEMPLOS EN MATEMÁTICAS)
• PRUEBAS ESTANDARIZADAS
• PANAMÁ EN ESTADISTICAS
• ESTRUCTURA Y COMPONENTES DE LAS PRUEBAS ESTANDARIZADAS
• EL PROCESO DE ELABORACIÓN DE ÍTEMS DE OPCIÓN MÚLTIPLE
• OPERACIÓN COGNITIVA
• ELABORACIÓN DE ÍTEMS DE MATEMÁTICAS
• ELABORACIÓN DE ÍTEMS DE CIENCIAS
• ÍTEMS LIBERADOS DE PISA Por. Magister Dillian Staine 2
 Lo Que Puede Estar Pasando Hoy
Pruebas escritas con ítems como estos:

• En uno de los cajones de una frutería hay 18 tomates. En

una bolsa me hecho 11 tomates para llevarme a casa y
hacer una ensalada. ¿Cuántos tomates me llevo?

• Un obrero gana 400 balboas semanalmente. Esta semana

se gasto 150 en el supermercado y pasaje para viajar al
trabajo, ¿Cuánto le quedo?

• En un barco hay 26 ovejas y 10 cabras. ¿Cuál es la edad

del capitán?
 Malas Prácticas
Algunos Ejemplos en Matemáticas
1. Simplifique 2. Halle X 3. Expanda el polinomio

4. Resuelva la ecuación
5. calcula
Ejemplo de Tareas Auténticas
 Lo Que Deseamos que Pueda pasar
Pruebas escritas con ítems como estos:
• De cuatro corredores de atletismo se sabe que C ha llegado
inmediatamente detrás de B, y D ha llegado en medio de A y C
¿ Podría usted calcular el orden de llegada?

• Conociendo el contenido delos cofres ¿de cual de ellos extraería el sobre

si quisieras conseguir una videoconsola? ¿Por qué?
 Situación - Problema
• Laura necesita alquilar un local para instalar su empresa. Le
muestran un plano con las cuatro habitaciones rectangulares
del local separadas por tabiques y las superficies (en metro
cuadrados) de tres de ellas; la cuarta se ha borrado
involuntariamente. Las medidas corresponden todas a
números enteros

¿Cuánto mide la cuarta habitación?

 ¿Qué son pruebas estandarizadas?

• “son cuestionarios o
inventarios desarrollados
• “Es una tarea o conjunto de
para medir diversas
tareas dadas bajo
variables y que tienen sus condiciones estándar y que
propios procedimientos de está diseñada para evaluar
aplicación, codificación e algún aspecto del
interpretación”. conocimiento, habilidades o
Hernández, et al., (2003) personalidad de un
individuo.”
Green (1981:1001)

Por. Magister Dillian Staine 8

 EL ARTE DE EVALUAR
• La evaluación nos ayudará a reconocer nuestras fortalezas y
debilidades, a superar los obstáculos que enfrentamos y a
aprovechar las oportunidades que se nos presenten, con el
fin de prosperar, de alcanzar una educación de excelencia.

Componentes necesarios para

planificar una evaluación

Por. Magister Dillian Staine 9

Sistemas Nacionales de Evaluación
• A nivel mundial se desarrollan diversos sistemas
de medición para hacer comparaciones

• PISA (OCDE) Tres materias, 56 países, alumnos de

15 años, entre 4 mil y 10 mil alumnos por país.
TIMMS, SERCE + las nacionales

• Pruebas estandarizadas
– La mayor parte de respuesta cerrada
– Pisa explora opciones de respuesta abierta (con
calificaciones diferentes a cada pregunta)

Por. Magister Dillian Staine 10

 SERCE- TERCE-TIMSS-PISA
Estudios del LLECE Estudios TIMSS Estudio de la OCDE PISA
Estudios Regionales Estudio Internacional de
Comparativos y Explicativos Tendencias en
Matemática y Ciencias
(IEA)
Implementación PERCE en 1997 Ciclos de 4 años, Ciclos de 3 años. Inicia en 1997 y
SERCE 2006 iniciando en el año continúa en los años 2000, 2003, 2006,
TERCE 2013 1999. 2009 (Panamá participa), 2012 y
próximamente el año 2015.
Carácter Estudio regional, participan Estudio internacional, Estudio internacional, participan países
países latinoamericanos y del participan países de miembros de la OCDE y países
Caribe todas las regiones del asociados.
mundo.
Muestra Estudiantes de 3° y 6° de la Terminación de ciclo de Estudiantes de 15 años, sin importar el
Educación Primaria. 4° y 8° grado en que se encuentren.
Áreas Lectura, escritura y matemática. Matemática y Ciencias Lectura, matemática y ciencias. Cada
disciplinares Ciencias solo para 6°. ciclo enfatiza en una de las
evaluadas Por. Magister Dillian Staine competencias. 11
Por. Magister Dillian Staine 12
 Gráfica N°1: Porcentaje de estudiantes de 3° por nivel de
desempeño en lectura en SERCE-TERCE.

120

En el nivel debajo I y nivel I 3.91 2.09

100
hubo un disminución de 13, 12.35 19.81
29 % de estudiantes, entre la 80

prueba SERCE y TERCE. 35.29

60
42.93
40
En el nivel IV no hubo 37.24
incremento se disminuyó 20 29.76
0,82%. 0
11.21 5.4
LECTURA SERCE LECTURA TERCE

Debajo de I I II III IV

Por. Magister Dillian Staine 13

 Gráfica N°2: Porcentaje de estudiantes de 6° por
nivel de desempeño en matemática en SERCE-TERCE.

120

2.33
100 2.73 En nivel bajo I y I hubo una
17.64 19.93 disminución 3,32 % de los
80
estudiantes.
60
49.55 50.18 En el nivel IV subió 0,4 %.
40

20
En ambos casos no
27.16 24.66 representan % significativos.
0 3.32 2.5
MATEMÁTICA SERCE MATEMÁTICA TERCE
Debajo de I I II III IV

Por. Magister Dillian Staine 14

Gráfica N°5: Porcentaje de estudiantes de 6° por
nivel de desempeño en ciencias en SERCE-TERCE.
120
0.77 0.98
100
En nivel bajo I y I disminuyó 8.4 10.57
solo un 0.74 %. 80
39.89 36.77
60
En nivel IV subió 0.21%.
40

En ambos casos no fue 44.6 43.43

20
significativo el %.
0 6.34 8.25
CIENCIAS SERCE CIENCIAS TERCE
Debajo de I I II III IV

Por. Magister Dillian Staine 15

 Estructura y Componentes De Las Pruebas Estandarizadas

• Una prueba estandarizada es un instrumento de referencia para la población a la que se

dirige porque recaba información comparable entre todos los sustentantes.

Las características intrínsecas de las pruebas estandarizadas son:

Objetividad. Entendida como la independencia que tiene el instrumento respecto a la
persona que lo aplica o califica.

Validez. Es la congruencia que existe entre lo que se planeó medir y lo que se mide.

Confiabilidad. Significa que los resultados deben ser estables y consistentes.

Por. Magister Dillian Staine 16

Características intrínsecas de las pruebas estandarizadas

Por. Magister Dillian Staine 17

Un ítem es la unidad
básica de la que se
conforman las pruebas
estandarizadas.

También se denomina
reactivo y, en su forma
más simple, puede ser
una pregunta.
Por. Magister Dillian Staine 18
El ítem de opción múltiple es aquel que cuenta con varias opciones
de respuesta, de las cuales solo una es indudablemente correcta.

• De acuerdo con García (2006), el ítem de opción múltiple permite:

– Evaluar una amplia gama de objetivos de aprendizaje desde
conocimientos factuales hasta procedimentales
– Generar información diagnóstica al analizar los patrones de
respuestas incorrectas
– Un muestreo amplio y gran cobertura de contenido de dominios
– La comparación y evaluación de ideas, conceptos y teorías
relacionadas
– La modificación de niveles de dificultad al ajustar el grado de
similitud entre las opciones
Por. Magister Dillian Staine 19
 El proceso de elaboración de ítems

Procedimiento para obtener ítems con calidad técnica.

Por. Magister Dillian Staine 20

 Génesis de los ítems

El campo es la abstracción del

conocimiento que se quiere
explorar.

El grupo temático es un rasgo

que describe algún componente
del campo al que pertenece.

El tópico es la unión de
contenidos semánticos en una
descripción sintética.

Por. Magister Dillian Staine 21

Por. Magister Dillian Staine 22
Por. Magister Dillian Staine 23
 Componentes
• Los componentes a partir de los cuales se constituye un ítem de opción
múltiple son:

Planteamiento. Es la parte principal de cada ítem en que se propone la

situación a resolver, sea en forma declarativa o interrogativa.

Opciones de respuesta. Se presentan como alternativas de resolución del

ítem. Siempre deben plantearse cuatro, de las cuales solo una es correcta y
tres son incorrectas, denominadas distractores plausibles.

Argumentaciones. tanto la opción correcta como los distractores plausibles

deben estar debida y explícitamente justificados, es decir, explicar por qué
son o no correctos.
Por. Magister Dillian Staine 24
 Planteamiento.
Es la parte principal de cada
ítem en que se propone la
situación a resolver, sea en
forma declarativa o
interrogativa.

Por. Magister Dillian Staine 25

Opciones de respuesta

Se presentan como
alternativas de resolución del
ítem.

Siempre deben plantearse

cuatro, de las cuales solo una
es correcta y tres son
incorrectas, denominadas
distractores plausibles.
Por. Magister Dillian Staine 26
Por. Magister Dillian Staine 27
Tanto la opción correcta como los
distractores plausibles deben estar
debida y explícitamente
justificados, es decir, explicar por
qué son o no correctos.

Por. Magister Dillian Staine 28

Ejemplo:

Por. Magister Dillian Staine 29

Por. Magister Dillian Staine 30
Por. Magister Dillian Staine 31
Por. Magister Dillian Staine 32
Por. Magister Dillian Staine 33
Por. Magister Dillian Staine 34
Por. Magister Dillian Staine 35
Por. Magister Dillian Staine 36
ELABORACIÓN DE
ÍTEMS DE
MATEMÁTICA

Por. Magister Dillian Staine 37

 Marco Teórico de la prueba de Matemática
Estudios SERCE y TIMSS 2011 PISA
TERCE
Tercer Sexto Cuarto grado Octavo grado Estudiantes de 15
grado grado años

Dominio de contenidos
• Numérico  Números  Álgebra • Cantidad
• Geométrico  Formas y  Geometría • Espacio y forma
• Medición mediciones  Datos y • Cambio y
• Estadística geométricas probabilidades relaciones
• Variacional  Representación • Incertidumbre y
de datos datos

Por. Magister Dillian Staine 38


Reconocimiento de objetos y
elementos. Identificación de
conceptos, relaciones y
propiedades, información
directa y explícita en el
enunciado.
Solución de problemas simples.
La información está explícita en
el enunciado, referida a una sola
variable, establecimiento de
relaciones directas necesarias
para llegar a la solución.
Solución de problemas
complejos. Requiere la
reorganización de la información
presentada en el enunciado ,
involucra relaciones no
explícitas, en las que se involucra
más de una variable.
Dominio cognitivo
 Conocimiento: recordar,
reconocer/identificar,
calcular, recuperar, medir,
clasificar/ordenar.
 Aplicación: seleccionar,
representar, modelar,
poner en práctica, resolver
problemas de rutina.
 Razonamiento: analizar,
generalizar/especializar,
integrar/sintetizar,
justificar, resolver
problemas no rutinarios.
Por. Magister Dillian Staine
 Formulación matemática
de las situaciones
 Empleo de conceptos,
datos, procedimientos y
razonamientos
matemáticos
 Interpretación, aplicación y
valoración de los resultados
matemáticos
39
 Estudios SERCE y TERCE
El enfoque de habilidades
para la vida, según el cual
deben fomentarse
destrezas, valores y
actitudes para que los
estudiantes desarrollen su
potencial, hagan frente a
situaciones y las
resuelvan, tomen
decisiones utilizando
información disponible, y
defiendan y argumenten
sus puntos de vista. 1er
Reporte SERCE pág. 56.
TIMSS 2011 PISA
Contexto
Se basa principalmente en Para las situaciones en
los currículos vigentes y que se pueda aplicar las
comunes de los países, matemáticas: personal,
entendiendo que el educativa, social y
aprendizaje de la científica.
matemática es útil en la
vida cotidiana, en el uso
de la matemática en la
vida profesional,
asimismo el nivel elevado
de la matemática en
cursos de maestrías y
doctorados como en el
avance de la tecnología.
Por. Magister Dillian Staine 40
Dominio de Dominio Respuesta Nivel de
contenido cognitivo correcta desempeño
Números Conocimiento B Alto

TIMSS 2011/Matemática, 8°

Por. Magister Dillian Staine 41

Dominio de Dominio Respuesta Nivel de
contenido cognitivo correcta desempeño

Datos y azar razonamiento B Avanzado

Por. Magister Dillian Staine 42

Por. Magister Dillian Staine 43
Por. Magister Dillian Staine 44
Por. Magister Dillian Staine 45
Por. Magister Dillian Staine 46
ELABORACIÓN DE
ÍTEMS
CIENCIAS

Por. Magister Dillian Staine 47

 • Marco Teórico de la prueba de ciencias

Estudios SERCE y TERCE TIMSS 2011 PISA

Sexto grado
Para Ciencias, se establecieron  Ciencias de la
tres grandes dominios:
• Seres vivos y salud
• Tierra y ambiente
• Materia y energía
Cuarto grado Octavo grado Estudiantes de 15 años, sin
importar el grado en que se
encuentren.
Dominio de contenidos
 Biología El conocimiento y los
vida  Química conceptos científicos relativos
 Ciencias físicas  Física a la física, la química, la
 Ciencias de la  Ciencias de la biología, la geología y la
tierra tierra astronomía aplicado al
contenido de las preguntas, no
solo reproducido.

Por. Magister Dillian Staine 48

 • Marco Teórico de la prueba de ciencias
Estudios SERCE y TERCE
Sexto grado
 Reconocimiento de
conceptos
 Interpretación y aplicación
de conceptos.
 Solución de problemas
TIMSS 2011 PISA
Cuarto grado Octavo grado Estudiantes de 15 años, sin
importar el grado en que se
encuentren.
Dominio cognitivo
 Conocimiento: recordar/reorganizar,  Describir, explicar y predecir
definir y describir, ilustrar con fenómenos científicos.
ejemplos y demostrar el conocimiento  Comprender la investigación
de instrumentos científicos. científica.
 Aplicación: comparar/ contrastar/  Interpretar las pruebas y
clasificar, utilizar modelos, relacionar, comprender las conclusiones
interpretar la información, encontrar científicas.
soluciones y explicar.
 Razonamiento: analizar,
integrar/sintetizar, elaborar hipótesis y
predecir.
Por. Magister Dillian Staine 49
 • Marco Teórico de la prueba de ciencias
Estudios SERCE y TERCE
Sexto grado
El enfoque de habilidades para
la vida está también en la base
de la evaluación de Ciencias.
Las pruebas se estructuran
alrededor de cinco dimensiones
referidas a habilidades para la
vida: saber ser, hacer, valorar y
convivir y vivir juntos.
TIMSS 2011 PISA
Cuarto grado Octavo grado Estudiantes de 15 años, sin importar el
grado en que se encuentren.
Contexto
En el mundo actual, es absolutamente  Las situaciones en que se
necesario disponer de cierta comprensión puede aplicar las ciencias:
de las Ciencias para que los ciudadanos personal, social y global.
puedan tomar decisiones informadas  Para algunas aplicaciones
sobre ellos mismos y sobre el mundo en concretas: Vida y salud;
que viven, de manera que, cuando sean tierra y medio ambiente y
adultos y se vean ante la necesidad de tecnología.
tomar decisiones como pueden ser el
tratamiento de enfermedades, el
calentamiento global y las aplicaciones de
la tecnología sean capaces de hacerlo
desde una sólida base científica. TIMSS,
Vol II. Agencia de la Calidad de la
Educación, Chile. Pág. 14
Por. Magister Dillian Staine 50
Ejemplo:
4 Grado

Por. Magister Dillian Staine 51

Por. Magister Dillian Staine 52
Ítemes para 8° grado. TIMSS

Por. Magister Dillian Staine 53

Por. Magister Dillian Staine 54
• ÍTEMES LIBERADOS DE LA PRUEBA PISA DE CIENCIAS Y
MATEMÁTICAS

Por. Magister Dillian Staine 55

 Los niveles de la escala combinada se definen como sigue.
NIVEL DESCRIPTOR
Nivel 6 Niveles de competencia o desempeño.
- Conceptualiza, generaliza, relaciona diferentes fuentes de información, demuestra pensamiento y razonamiento
matemático, aplica esta comprensión para desarrollar nuevos enfoques y estrategias y comunica sus acciones y
reflexiones, interpretaciones y argumentaciones adecuándolas a situaciones nuevas
Nivel 5 - Desarrolla y trabaja con modelos complejos, identifica límites, selecciona, compara, tiene la habilidad de
pensamiento y razonamiento, formula y comunica sus interpretaciones y razonamientos.
Nivel 4. - Trabaja con modelos explícitos, realizan suposiciones, incluyen símbolos y asociándolos a situaciones del mundo
real, construye y comunica explicaciones y argumentos basados en sus interpretaciones, argumentaciones y
acciones
Nivel 3 - Ejecuta procedimientos claramente, selecciona y aplica estrategias simples de solución, genera comunicaciones
breves de sus propias interpretaciones, resultados y razonamientos.
Nivel 2 - Interpreta y reconoce situaciones en contextos que requieren únicamente inferencias directas, puede extraer
información relevante de una sola fuente, emplea algoritmos, fórmulas o procedimientos básicos.
Nivel 1 - Contestan preguntas de contexto familiar, donde las preguntas son claras y definidas, desarrolla
procedimientos rutinarios conforme a instrucciones directas.

Debajo del - No son capaces de realizar tareas de matemáticas más elementales

nivel 1
Por. Magister Dillian Staine 56
 Ítems PISA Ciencias

Nivel Proceso Contenido Contexto

1 Explicar procesos científicos Conocimiento de la personal
ciencia. Sistemas vivos

Por. Magister Dillian Staine 57

Por. Magister Dillian Staine 58
 DESCRIPTOR DEL REACTIVO

• Competencia: Resolver problemas de manera autónoma.

• Contenido: Forma espacio y Medida.
• Contexto : Laboral.
• Aprendizajes esperados: Resolver problemas geométricos, que implican
propiedades de altura, medianas, mediatrices y bisectrices en triángulos
y cuadriláteros.
• Nivel 6 (687)1 Punto: Cuatro respuestas son correctas.

Por. Magister Dillian Staine 59

• ÍTEMES LIBERADOS DE LA PRUEBA SERCE DE CIENCIAS

Por. Magister Dillian Staine 60

 Ítems de Ciencias SERCE 2006

Por. Magister Dillian Staine 61

Por. Magister Dillian Staine 62