Taller de Elaboración de Reactivos

de Opción Múltiple (TEROM)

Universidad del Valle de México
(UVM)
Sesión 1
Dirección de Investigación, Calidad Técnica e Innovación Académica
Subdirección de Desarrollo Profesional

Febrero-marzo 2023
 Presentación de instructores

Miguel Herrera Ortíz Aketzalli Rodríguez Pérez

Instructor Responsable de plataforma

miguel.herrera@ceneval.edu.mx evelyn.rodriguez@ceneval.edu.mx

desarrollo.profesional@ceneval.edu.mx
Duración del taller

10 hrs sesiones virtuales

10 hrs de trabajo independiente

Total 20 horas
 Sesiones virtuales

Las cinco sesiones serán grabadas y Durante el inicio de la sesión, Durante la exposición los
podrán revisarlas en el link que se encienda su cámara. micrófonos deberán permanecer
enviará cada viernes. apagados.

Podrá participar en el momento que Es indispensable ingresar a Moodle

desee, solo deberá levantar la mano para llevar a cabo algunas actividades
o escribir en el chat durante la sesión virtual
 Moodle

Este taller se llevará a cabo a través de

la plataforma Cursos Ceneval
(https://cursos.ceneval.edu.mx/)
 Secciones de Moodle Usuario

Área de contenido

Menú de
navegación

Menú de
notificaciones y chat
 Secciones del taller en Moodle

El taller está estructurado en cinco sesiones y para

cada una encontrará:

• Objetivo

• Introducción

• Contenido (temas)

• Presentación

• Recursos para lectura

• Actividades
Que se llevarán a cabo de dos maneras:
• Durante las sesiones virtuales
• En el momento en que el participante
decida realizarlas, pero tendrán fechas
de vencimiento.

• Grabación de la sesión
Objetivo del taller
Al término del taller, usted elaborará
diferentes formatos de reactivos de
opción múltiple cumpliendo con
los lineamientos y estándares
técnicos establecidos en la
Metodología Ceneval.
 Sesiones virtuales
Sesiones virtuales

Tema I. Metodología Ceneval

Sesión 1 Tema II. Eje conceptual de los reactivos 8 de febrero
17 a 19 hrs

Tema III. Especificación de los reactivos

Tema IV. Aspectos procedimentales de los reactivos
15 de febrero
Tema V. Características de los reactivos de selección y sus componentes
Sesión 2 A Tema VI. Formatos de reactivos de opción múltiple
17 a 19 hrs
Tema VII. Formatos de multirreactivos

Tema VIII. Lineamientos generales de los reactivos 22 de febero

Sesión 3 Tema IX. Lineamientos técnicos por componente 17 a 19 hrs

Tema X. Lineamientos específicos por formato

Sesión 4 Tema XI. Validación de reactivos 1 de marzo
Tema XII. Generación automática de reactivos 17 a 19 hrs

Tema XIII. Reactivos de innovación 8 de marzo

Sesión 5 Tema XIV. Lineamientos por formato de reactivos de innovación 17 a 19 hrs
Tema XV. Eje psicométrico de los reactivos
Aportaciones, comentarios
o sugerencias
Tema I. Metodología
Ceneval

c
28 años del Ceneval
28 años del Ceneval
 Metodología Ceneval

La actividad principal del Ceneval es

diseñar y aplicar pruebas para evaluar
constructos educativos.

Matemáticas C Biología
Una prueba es una recolección
sistemática de información, que
aporta evidencia válida, confiable y sin
sesgo sobre el nivel que posee un
sustentante en diferentes constructos
educativos.

Historia
 Metodología Ceneval

Prueba Información Decisiones Consecuencias

 Metodología Ceneval

Impactan la trayectoria
Todos las pruebas que se académica, profesional o
desarrollan en el Centro laboral de quienes las
sustentan.
 Metodología Ceneval
Permite la planeación, el
diseño y el desarrollo de
pruebas educativas de
Debido al impacto de las decisiones que manera:
se toman a partir de los resultados de
las pruebas,

Estandarizada
el Ceneval tiene

Documentada
la responsabilidad social
Sistematizada

de
Validada

desarrollar pruebas
de calidad

a través de
 Metodología Ceneval

La Metodología Ceneval está conformada

por nueve procesos y 30 fases:

Diseño de Delimitación del Construcción del

la evaluación objeto de medida banco de reactivos

Piloteo y
Ensamble de
verificación
versiones
Aplicación
empírica

Procesamiento de Elaboración de
la información y Emisión de material
calificación resultados complementario
 Metodología Ceneval

La Metodología Ceneval está conformada

por nueve procesos y 30 fases:

Proceso I.
Diseño de la evaluación
Diseño de
la evaluación
Se establecen las directrices de la prueba.
Se dan respuestas a las siguientes
preguntas (entre otras):

• ¿Cuál es el propósito de la prueba?

• ¿Cuál es su principal inferencia?
• ¿Qué uso se le dará a la prueba?
• ¿A quién está dirigida la prueba?
• ¿Qué dominio o constructo evaluará?
 Metodología Ceneval

La Metodología Ceneval está conformada

por nueve procesos y 30 fases:

Proceso II.
Delimitación del objeto
de medida
Diseño de Delimitación del
la evaluación objeto de medida

Se determina:

• El marco de sustento
• Los contenidos educativos
• Los tipos de conocimientos
• Las demandas cognitivas
• Se elaboran las especificaciones de los reactivos
 Metodología Ceneval

La Metodología Ceneval está conformada

por nueve procesos y 30 fases:

Proceso III.
Construcción del banco
de reactivos
Diseño de Delimitación del Construcción del
la evaluación objeto de medida banco de reactivos

En este proceso:

• Se elaboran y validan los reactivos que

conformarán las pruebas.
 Metodología Ceneval

La Metodología Ceneval está conformada

por nueve procesos y 30 fases:

Diseño de Delimitación del Construcción del

la evaluación objeto de medida banco de reactivos

Piloteo y
Ensamble de
verificación
versiones
Aplicación
empírica

Procesamiento de Elaboración de
la información y Emisión de material
calificación resultados complementario
Aportaciones, comentarios
o sugerencias
 Actividad 1.1.
Metodología Ceneval
 Metodología Ceneval

La Metodología Ceneval está conformada por nueve

procesos y 30 fases:

Diseño de Delimitación del Construcción del

la evaluación objeto de medida banco de reactivos

Piloteo y
Ensamble de
verificación
versiones
Aplicación
empírica

Procesamiento de Elaboración de
la información y Emisión de material
calificación resultados complementario
Tema II. Eje conceptual de los
reactivos

c
 Eje conceptual de los reactivos

Los reactivos de opción múltiple están conformados por los siguientes componentes:

Base del reactivo: Indique la medida de tendencia central que debe utilizarse considerando el siguiente
conjunto de datos: 2, 6, 8, 10, 13, 45 y 3405. Visible para
Opciones de respuesta: A) Media
el
B) Moda sustentante
C) Mediana
Eje técnico

Respuesta correcta: C

Argumentaciones: A) Incorrecta. No debe utilizarse la media cuando existe un dato extremo en el conjunto de
datos.

B) Incorrecta. La moda es apropiada para datos categóricos.

C) Correcta. La mediana es apropiada cuando existen datos extremos en el conjunto de

datos.
Cada reactivo debe representar un contenido
educativo y su demanda cognitiva
Inferencias sobre
Eje conceptual

Estructura Contenido educativo/ Propiedades de la Demanda cognitiva

mediana
Tema Subtema Tipo de Conocimiento Demanda cognitiva Proceso cognitivo
conocimiento específico
Estadística Medidas de tendencia Conceptual Principios y Comprender Interpretar
Descriptiva central generalizaciones
 Eje conceptual de los reactivos

Los reactivos son las unidades

básicas de las pruebas y la Es por ello es crucial en la
operacionalización de lo que se que el metodología Ceneval.
I.Diseño de II.Delimitación del definió en las fases previas
la evaluación proceso de III. Construcción del
objeto de medida banco de reactivos

Este proceso debe ser congruente con los referentes

conceptuales que se establecen en los procesos
previos.
 Una prueba es un muestreo

DOMINIO O UNIVERSO DE
MEDICIÓN

Contenidos
educativos

Muestra del
dominio o Inferir
universo

Prueba
Las pruebas son similares a
una encuesta en el sentido de
que son un estimado de una
medida más completa que no
podemos obtener (Koretz;
2010).
 Eje conceptual de los reactivos

• ¿Cuál es el propósito de la prueba?

• ¿Cuál es su principal inferencia? Determina
Antes de iniciar con • ¿Qué uso se le dará a la prueba? I. Diseño de los
la elaboración de • ¿A quién está dirigida la prueba? la evaluación
contenidos y
reactivos, se debe • ¿Qué dominio o constructo evaluará? las demandas
tener claridad en: cognitivas
• El marco de sustento que se
• Los contenidos educativos se plasman en la evaluarán en
• Los tipos de conocimientos especificación del una prueba
• Las demandas cognitivas reactivo II.Delimitación del
objeto de medida
 Eje conceptual de los reactivos. Diseño de la evaluación

I.Diseño de II.Delimitación del III.Construcción del

la evaluación objeto de medida banco de reactivos

Se determina:

• ¿Cuál es el propósito de la prueba?

• ¿Cuál es su principal inferencia?
• ¿Qué uso se le dará a la prueba?
• ¿A quién está dirigida la prueba?
• ¿Qué dominio o constructo evaluará?
 Eje conceptual de los reactivos. Diseño de la evaluación
¿Cuál es el propósito de una prueba?

Normativa Criterial

Ordena a los Clasificar, Clasifica a los sustentantes en niveles de

Ordenar
sustentantes en los categorizar
logro o categorías, con base en criterios
dominios o constructos establecidos previamente.
educativos.
 Eje conceptual de los reactivos. Diseño de la evaluación
¿Cuál es la principal inferencia de una prueba?

Normativa Criterial

Clasificar,
Ordenar
categorizar

El lugar que ocupa un El nivel de desempeño

sustentante con que posee el sustentante
respecto al grupo que
presentó ese mismo
examen
Niveles de desempeño de PISA (ejemplo)
 Eje conceptual de los reactivos. Diseño de la evaluación
¿Qué uso se le dará a la prueba?

Normativa Criterial

Clasificar,
ORDENAR
categorizar
 Eje conceptual de los reactivos. Diseño de la evaluación
¿A quién está dirigida la prueba?

Se indica a quiénes se va a evaluar, lo cual permitirá definir las principales

características de la población sustentante.
 Eje conceptual de los reactivos. Diseño de la evaluación
¿Qué dominio o constructo evaluará?

Las pruebas están conformadas por reactivos, que son los medios a través de los cuales se evalúan
constructos y se obtienen inferencias sobre si un sustentante posee o no un contenido educativo.

Inferencias en una prueba

Reactivo 1

Reactivo 2

Reactivo 3

Reactivo 4

Reactivo 5 Evalúan
contenidos Constructo
educativos
Reactivo 6

Reactivo 7

Reactivo 8

Reactivo 9

Reactivo 10
 Eje conceptual de los reactivos. Diseño de la evaluación
¿Qué dominio o constructo evaluará?

Las pruebas están conformadas por reactivos, que son los medios a través de los cuales se evalúan
constructos y se obtienen inferencias sobre si un sustentante posee o no un contenido educativo.

Inferencias en una prueba

Reactivo 1

Reactivo 2

Reactivo 3

Reactivo 4

Reactivo 5 Evalúan
contenidos Constructo
educativos
Reactivo 6

Reactivo 7

Reactivo 8 Conocimientos
pueden ser Competencias
Reactivo 9 Habilidades cognitivas
Habilidades no cognitivas
Reactivo 10
Actitudes
 Eje conceptual de los reactivos. Delimitación del objeto de medida

En el proceso I. Diseño de la evaluación, se indica

el dominio o constructo que evalúa una prueba.

En el proceso II
Se determina:
VISIÓN TEÓRICA
• El marco de sustento (precisión)

II.Delimitación del del cual se derivan las

objeto de medida reglas para elegir los contenidos
específicos.

• Los contenidos educativos se plasman en la

• Los tipos de conocimientos especificación del
• Las demandas cognitivas reactivo
 Eje conceptual de los reactivos. Delimitación del objeto de medida
Contenidos educativos

Los contenidos educativos

pueden ser:
• Competencias
• Conocimientos
Son producto de la Se subdividen en
• Habilidades cognitivas
enseñanza temas, subtemas, etc.
• Habilidades no cognitivas
• Actitudes
 Eje conceptual de los reactivos. Delimitación del objeto de medida
Contenidos educativos

Los reactivos miden contenidos educativos

¿Que contenidos educativos ¿Cómo definimos Conocimientos y

en específico? estos contenidos demandas cognitivas
educativos?
 Contenido educativo 1 Reactivo 1
Eje conceptual de los reactivos. Delimitación del objeto de medida
Contenidos educativos Contenido educativo 2 Reactivo 2

Contenido educativo 3 Reactivo 3

Por ejemplo: Subtema Contenido educativo 4 Reactivo 4

1.1.
Contenido educativo 5 Reactivo 5

Contenido educativo 6 Reactivo 6

Contenido educativo 7 Reactivo 7

Tema 1
Subtema
Contenido educativo 8
1.2. Reactivo 8

Contenido educativo 9 Reactivo 9

Reactivo 10
Conocimientos Se debe
Contenido educativo 10

en Biología desglosar en Contenido educativo 11 Reactivo 11

Subtema Contenido educativo 12 Reactivo 12
2.1.
Contenido educativo 13 Reactivo 13
Tema 2
Contenido educativo 14 Reactivo 14

Contenido educativo 15 Reactivo 15

Subtema
2.2. Contenido educativo 16 Reactivo 16

Contenido educativo 17 Reactivo 17

 Eje conceptual de los reactivos. Delimitación del objeto de medida
Contenidos educativos

Los contenidos educativos se

subdividen en:
Procedimental
(saber cómo)
Conceptual (saber por qué)
Cómo hacer algo, métodos de
Las interrelaciones entre los
investigación y criterios para
elementos básicos dentro de una
usar habilidades, algoritmos y
estructura mayor que les permite
técnicas.
funcionar juntos.

Factual (saber qué)

Los elementos básicos que un Clasificaciones y Habilidades específicas
estudiante debe conocer para categorías y algoritmos
familiarizarse con una disciplina
o resolver problemas en ella.
Principios y Técnicas específicas y
Terminología generalizaciones métodos

Elementos y detalles Teorías, modelos y Criterios para determinar

cuándo usar un procedimiento
específicos estructuras apropiado
 Eje conceptual de los reactivos. Delimitación del objeto de medida
Contenidos educativos

Ejemplos

Conocimiento factual. Elementos básicos que los alumnos deben conocer para relacionarlos con una disciplina o resolver problemas dentro de ella.

Terminología Vocabulario técnico, símbolos musicales

Elementos y detalles específicos Principales recursos naturales, fuentes confiables de información

Conocimiento conceptual. Interrelaciones entre los elementos básicos con una estructura más amplia que les permite funcionar conjuntamente.

Clasificaciones y categorías Períodos de la edad geológica, formas de propiedad empresarial

Principios y generalizaciones Teorema de Pitágoras, ley de la oferta y la demanda

Teorías, modelos y estructuras Teoría de la evolución, estructura del Congreso

Conocimiento procedimental. Cómo hacer algo, métodos de investigación y criterios para utilizar destrezas, algoritmos, técnicas y métodos.
Destrezas utilizadas para la pintura a la acuarela, algoritmo de la división por
Habilidades específicas y algoritmos
números enteros
Técnicas específicas y métodos Técnicas de la entrevista, método científico
Criterios utilizados para determinar cuándo aplicar un procedimiento
relacionado con la segunda ley de Newton, criterios utilizados para juzgar la
Criterios para determinar cuándo usar un procedimiento apropiado
viabilidad de utilizar un método determinado para estimar los costes de
negocio
 Eje conceptual de los reactivos. Delimitación del objeto de medida
Demanda cognitiva

Una vez que se establece el tipo de conocimiento que se evaluará, es

necesario indicar en cada reactivo qué demanda cognitiva se espera que
realice el sustentante con ese conocimiento específico.
 Eje conceptual de los reactivos. Delimitación del objeto de medida
Demanda cognitiva
Proceso cognitivo
6. Crear
Alta demanda Juntar los elementos para formar un todo
coherente; reorganizar un nuevo patrón o generar, planear, producir
cognitiva estructura.

5. Evaluar
Emitir juicios basados en criterios y normas. comprobar, criticar

4. Analizar
Segmentar la información en partes y determinar cómo se
relacionan entre sí para darle estructura o determinar un diferenciar, organizar, atribuir
propósito general.

3. Aplicar
Realizar o usar un procedimiento en una situación dada. ejecutar, implementar

2. Comprender interpretar, ejemplificar,

Construir significado de mensajes instruccionales, incluyendo clasificar, resumir, inferir,
Baja demanda comunicación oral, escrita o gráfica. comparar, explicar
cognitiva

1. Recordar reconocer, recordar

Recuperar información relevante de la memoria de largo plazo.
Eje conceptual de los reactivos. Delimitación del objeto de
medida
Contenidos educativos y demanda cognitiva
Eje conceptual de los reactivos. Delimitación del objeto de medida
Contenidos educativos y demanda cognitiva

De acuerdo con las decisiones y

definiciones tomadas en los procesos I y II
se determina:

A) Una clasificación de contenidos

educativos y de demandas
cognitivas
B) Una lógica de selección de
contenidos basada en una visión
sobre el constructo y un propósito y
uso de la prueba.

El propósito de la prueba comprende una

descripción conceptual de los niveles de
logro.
 Eje conceptual de los reactivos. Delimitación del objeto de medida
Especificación de reactivo

Es una descripción que servirá como guía para elaborar el reactivo y se

conforma de los siguientes elementos:

A) Contenido educativo
B) Demanda cognitiva
C) Condición*
D) Acotamiento*
Aportaciones, comentarios
o sugerencias
 Actividad 1.2
Tipo de conocimiento y
demanda cognitiva
 Actividad 1.2. Tipo de conocimiento y demanda cognitiva

Le pedimos que conteste el cuestionario, en el cual deberá leer cada uno

de los reactivos e indicar el tipo de conocimiento y la demanda cognitiva
que considere que están evaluando.