Está en la página 1de 11

8

Artículo Revista de Educación Técnica


Marzo 2019 Vol.3 No.7 8-18

Método Delphi: validar un instrumento para la medición de características de un


libro de texto de probabilidad y estadística

Delphi Method: validate an instrument for measuring characteristics of a


probability and statistics textbook
MARTINEZ-ACOSTA, María Teresa1,2 †*, SÁNCHEZ-LUJÁN, Bertha Ivonne1 y CAMACHO-RÍOS,
Alberto3
1
Tecnológico Nacional de México: campus Cd. Jiménez.
2
Centro de Investigación y Docencia (CID), Lucio Cabañas 27, Lomas del Santuario Etapa II, Pablo Gómez, 31206
Chihuahua, Chih.
3
Tecnológico Nacional de México: campus Chihuahua II. Av. de las Industrias 11101, Complejo Industrial Chihuahua,
31130 Chihuahua, Chih.

ID 1er Autor: María Teresa, Martínez-Acosta / ORC ID: 0000-0001-8934-4843, CVU CONACYT ID: IT16D725

ID 1er Coautor: Sánchez-Luján, Bertha Ivonne / ORC ID: 0000-0002-3595-8281, CVU CONACYT ID: 342583

ID 2do Coautor: Alberto, Camacho-Rios / ORC ID: 0000-0002-0685-4723, CVU CONACYT ID: 18C618

DOI: 10.35429/JOTE.2019.7.3.8.18 Recibido 10 de Enero, 2019; Aceptado 25 de Marzo, 2019

Resumen Abstract

El diseño y validez que se obtienen de un instrumento de The design and validity obtained from a data collection
recolección de datos son necesarios para garantizar la instrument are necessary to guarantee the reliability of
seriedad de la información dentro de una investigación. the information within an investigation. This work
En este trabajo se describen varias herramientas de describes several tools for measuring textbook contents,
medición de contenidos de libros de texto, sus their particularities, and benefits indicated by different
particularidades y beneficios señalados por diferentes authors, the permanence of the book as a teaching
autores, también se expone la permanencia del libro resource within the classroom, in the life of the teacher
como recurso didáctico dentro del aula de clase, en la and the student. As well as explaining how the subject of
vida del profesor y del estudiante, y se explica la manera Probability and Statistics is taught in engineering careers
en que la asignatura de Probabilidad y Estadística se at a higher level of education. The application of the
imparte en las carreras de ingeniería en nivel superior. La Delphi Method allows developing a tool to measure the
aplicación del Método Delphi, permite desarrollar un content of Probability and Statistics textbooks,
instrumento con el objeto de medir el contenido de libros employing ten proposed items. The usefulness of the
de texto para la asignatura de Probabilidad y Estadística, methodology is demonstrated by ensuring the reliability
por medio de diez rubros propuestos. Se demuestra la of the tool, obtaining quantitative and qualitative
utilidad de la metodología al asegurar la confiabilidad de information. The method is developed in stages for better
la herramienta planteada, al obtener información understanding, and expert judgement is used, despite
cuantitativa y cualitativa. Se desarrolla el método en sometimes being ignored. Finally, an alternative
etapas para mayor comprensión y se utiliza el juicio de validation in instrument design is proposed analytically
expertos, que en ocasiones es ignorado. Para finalizar, se and reliably.
propone una alternativa de validación en diseño de
instrumentos de forma analítica y confiable.
Probabilidad y Estadística, Método Delphi, validez de las Probability and Statistics, Delphi Method, Test validity
pruebas

Citación: MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha Ivonne y CAMACHO-RÍOS, Alberto.


Método Delphi: validar un instrumento para la medición de características de un libro de texto de probabilidad y estadística.
Revista de Educación Técnica. 2019. 3-7: 8-18.

*Correspondencia al Autor (Correo Electrónico: mtmartineztec@gmail.com)


† Investigador contribuyendo como primer autor.

© ECORFAN-Republic of Peru www.ecorfan.org/republicofperu


9
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Introducción a) buscar errores y avisar a los alumnos de su


presencia.
Se realizó una búsqueda de documentos con el
objetivo de poner de manifiesto la importancia b) evaluar el nivel taxonómico de las
del contenido del libro de texto y la separación actividades y situaciones planteadas.
de las partes que lo conforman, de manera que
pueden ser valoradas cada una, según la c) identificar visiones inadecuadas o
clasificación de cada investigador. epistemológicamente erróneas o
inapropiadas.
Se pudo observar en algunas propuestas
los errores que contienen los manuales d) desmitificar las visiones que se transmiten
escolares y como su contenido y estructura han socialmente respecto de los matemáticos y
sido medidos por diferentes autores. La de su forma de construir el conocimiento.
información recabada fue pertinente para
diseñar un instrumento que facilitara la e) hacer explícitas las preguntas conceptuales
medición del contenido de un texto de uso en la que justifican los contenidos.
materia de Probabilidad y Estadística, que se
imparte en las carreras de ingeniería. Para la f) plantear conflictos cognitivos.
validación del instrumento el “Método Delphi”
jugó un papel importante, garantizó la Ortega (1996), presenta unas pautas de
confiabilidad para el desarrollo de cada una de valoración general de textos, para que sirvan de
las etapas de evaluación. El análisis que guía al momento de seleccionar el libro más
presentan Monterrubio & Ortega (2011), adecuado para la impartición de una materia en
clasifica tres dimensiones que en el libro de un centro educativo, al tener en cuenta las
texto deben ser consideradas: particularidades que puedan tener los
estudiantes y los objetivos que establecen los
(a) Semántica, es decir, su contenido. temarios del curso.

(b) Estructural-sintáctica, que hace referencia a Expone una secuencia de interrogantes


su forma de organización y sistema de para obtener datos cuantitativos y cualitativos
símbolos que recopilen información que lleven a
examinar ejemplares y se pueda optar por el
(c) Pragmática, es decir, se toma en cuenta su más manual más conveniente en la clase de
uso y propósitos. estadística. Establece varios tópicos en un
cuestionario, cada uno con cinco o seis
Esta última dimensión pone de preguntas comprensibles, al pretender
manifiesto que el análisis de un texto escolar no respuestas abiertas por parte del entrevistado.
puede hacerse de forma aislada, sino que el Además, comenta la importancia de cada una.
profesor debe establecer una planeación de los
tiempos con que cuenta para desarrollar un El protocolo de evaluación de libros de
tema, así como el lugar que le da a cada uno de texto llamado PROTOTEXT, trata de un
los recursos que utiliza dentro del mismo en el instrumento de observación sistemática, en
aula, y fuera de ella, para completar el proceso forma de observación documental, creado con
de enseñanza y aprendizaje que pretende. Para el objeto de estimar los libros de texto de
algunos profesores, la opción de utilizar un ciencias sociales en educación básica. La
libro de texto en el curso, es una decisión que herramienta establece una validación mediante
requiere seriedad y sustento. Para otros, la información recabada por un grupo de
seleccionar un libro suele ser por costumbre o profesores participantes en un panel de
influencia de otros profesores. Lo que se expertos. Las mejoras que se obtuvieron en esa
observa de manera clara, hasta aquí, es la dinámica de validación se analizaron para
repercusión que tal elección puede ocasionar en reestructurar el protocolo original (Sánchez,
el proceso de enseñanza y aprendizaje en este Serrano & Miralles, 2018).
caso, en la asignatura de Probabilidad y
estadística. Al tener a la mano un manual de
texto, el docente puede, con conocimiento de
causa o no (Campanario, 2001):

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
10
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Los tipos de indicadores que se usan en Problema


la estrategia son cerrados en forma de lista de
chequeo, de respuesta escrita corta y de Las materias que componen la retícula de
estimación numérica (cinco valores). De esta Ingeniería Industrial en las instituciones del
manera busca medir en el libro de texto: los nivel superior de enseñanza del Tecnológico
datos de identificación, diseño del libro, Nacional de México (TecNM), cuentan con un
estructura del libro, análisis de contenidos, temario establecido en el que se determinan
competencias, análisis de actividades, recursos criterios que debe respetar el profesor. Uno de
didácticos utilizados, ilustraciones, tipo de esos apartados son las referencias o listado de
metodología empleada y valores. recursos bibliográficos que deben utilizar los
profesores para el desarrollo de sus temas.
Justificación
El programa de Probabilidad y
Por hoy el libro de texto impreso o electrónico, Estadística incluye la lista antes mencionada.
sigue siendo el recurso fundamental en la Según los autores de los libros de texto que ahí
impartición de una clase en los diferentes se sugieren, la comprensión de los temas varía
niveles educativos, no solo en nuestro país y de uno a otro, al considerar el nivel de
por encima de los comentarios, de las críticas, conocimientos que los autores imponen a los
de los defectos y de la tecnología. propios textos.

Conscientes de la generación a la que Pero ¿Cómo facilitar a los profesores la


pertenecen los profesores y a las generaciones selección del material bibliográfico que debe
de estudiantes que formamos, se tiene presente utilizar en clase?
la nueva modalidad de libro de texto, en forma
virtual o digital, pero sigue constante el modo El diseño de una herramienta que
impreso, a pesar de las predicciones de muchos minimice riesgo en la decisión de los profesores
en relación a su desaparición, la cual, dicho sea en cuanto a sus recursos didácticos, como lo es
de paso, nunca llega. el libro de texto, sería un apoyo considerable en
el proceso académico.
El libro de texto tiene un contenido que
se compone de diferentes partes. Divisiones que Objetivo General
generalmente el lector, en este caso los
estudiantes, en ocasiones no observan. Proponer y validar una herramienta confiable
Eventualmente, el profesor se da a la tarea de que permita medir el contenido analítico de un
analizar algunas de las partes del contenido del libro de texto.
libro, y decide tomar uno o dos de manera
específica para la clase. Marco Teórico

Sin embargo, si se contara con un El método Delphi se caracteriza por la


instrumento que permitiera analizar esas secuencia que establece para validar el diseño
divisiones de manera más objetiva y bajo de instrumentos como el que sugerimos.
ciertos parámetros analíticos, el profesor Aponte, Cardozo & Melo (2012), propusieron
elegiría con seguridad el más adecuado para su un estudio basado en un proceso estructurado
curso y propondría a sus alumnos un ejemplar para coleccionar y sintetizar el conocimiento de
para el desarrollo de la asignatura. un grupo de expertos por medio de
cuestionarios acompañados por comentarios de
Los elementos que componen el libro de opinión controlada, consultas iterativas y
texto pueden provocar el grado de entusiasmo anónimas, generalmente de forma electrónica
del usuario, ya sea profesor o estudiante. La (p. 42).
elección adecuada del documento permite dar
fluidez al curso a partir del paralelismo de los El interés del proceso es maximizar las
temas con el programa de estudio y seguridad a ventajas del método basado en juicios de
los estudiantes en la resolución de problemas y expertos.
adquisición de conocimientos.

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
11
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

La finalidad es asegurar que los


reactivos establecidos sean coherentes con el
objetivo, rubros y argumentos que se pretenden
evaluar, además de considerar los conceptos y
aportes anteriores sobre el tema. La intención es
fortalecer un instrumento sencillo y práctico
para ser contestado por los participantes, sin
descuidar la parte exigente.

George & Trujillo (2018), cuentan con


Figura 1 Proceso general del método Delphi un documento que proporciona confianza en el
Fuente: George & Trujillo (2018) diseño y validación de este tipo de
instrumentos, a través de utilizar la escala tipo
Las características básicas son: likert. Señalan la capacidad que tiene dicha
escala para medir la eficacia de cierta actitud, lo
1) Anonimato, el cual disminuye la influencia que permite ubicar a personas en un rango de
que puede tener el experto por parte de otros valores cualitativos o cuantitativos en línea
profesores y el temor que puede causar que recta, es decir, de mayor a menor, o en un orden
el nombre del experto y sus opiniones sean contrario.
vistas por otras personas.
Con los primeros trabajos que utilizaron
2) Iteración y retroalimentación controlada, los escala tipo likert, se consolidó una tradición en
comentarios y sugerencias son recibidos de el uso de cuatro respuestas propuestas, de
forma directa y por parte de conocedores del hecho, sigue siendo la cantidad más manejada.
tema, lo que brinda mayor confianza de las Domínguez, et. al. (2013), exponen un estudio,
propuestas y correcciones. donde el número óptimo de respuestas oscila
entre cuatro y siete, comentan que después de
3) Respuesta del grupo en forma estadística, el ese número disminuye la confiabilidad del
cambio de datos cualitativos a cuantitativos, cuestionario. Sin embargo, estudios recientes
al complementar los resultados, aumentar el han demostrado que la confiabilidad en el
valor, y proponer el siguiente análisis de ser instrumento no se ve afectada al aumentar las
necesario. opciones hasta el número diez.

Los factores que ayudan para la Por otro lado, se debe tener presente que
obtención de resultados más confiables, van los enunciados en cada opción, si éstos
orientados a exponer aquello que el instrumento incrementan, tendrán que ser más cortos, lo que
pretende evaluar, es decir: puede perjudicar la comprensión del
participante. Además, se brinda una orientación
a) Formulación de preguntas (sustento y en procurar el uso de cuatro categorías, que se
criterios antes expuestos). deben seleccionar en un cuestionario, al
considerar una simetría entre respuestas
b) Selección de expertos (experiencia, (distancia psicológica).
objetividad).
Existe desacuerdo hasta la fecha, con
c) Horizonte del tiempo del proceso (envío del respecto al número de opciones que debe
instrumento para realizar la evaluación y contener una interrogante para que el usuario
última recepción del mismo revisado por el conteste la correcta con base a su experiencia.
experto). Autores defienden los números pares y otros
tantos los números impares.
El instrumento debe permitir valorar
evidencias al determinar el grado de calidad o Una aportación dedicada al análisis de
profundidad con el cual se logra cada indicador número de alternativas en respuestas, destaca la
y caracterizarse porque cada indicador se tendencia a responder los valores centrales.
estima con grados o niveles (Tobón, 2013).

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
12
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Cuando las opciones se presentan en 3. Ilustraciones: Son las imágenes que contiene
números nones, las palabras o frases que se el libro en cada tema, con objeto de su
observan en la opción del centro, las cuales comprensión.
reflejan “indiferencia”, son marcadas por el
participante cuando no analiza a profundidad su 4. Enfatización: Presenta las opciones que
preferencia o experiencia en la interrogante, o pueden utilizarse dentro de la escritura para
simplemente no comprende la pregunta y no llamar la atención o proporcionar niveles de
quiere o no puede investigar al respecto importancia a diferentes palabras o frases.
(Bisquerra & Pérez-Escoda, 2015).
5. Ejercicios, cuestiones y problemas: Son los
Metodología recursos planteados para fortalecer o
retroalimentar la información explicada en
Después de analizar las características que un tema.
contienen los libros de texto, expuestas por
varios autores, así como también algunos 6. Motivación: Son los planteamientos dentro
trabajos de diseño de investigadores, de un tema, que al involucrar al lector
propuestos para valorar textos académicos en pueden influenciar en su entusiasmo para
diferentes niveles escolares, y con estructuras y continuar.
criterios variados entre ellos, se procedió a
establecer las características que se pretenden 7. Metodología: Establece una guía o
medir en el proyecto de investigación, es decir, procedimiento característico en la redacción,
con el apoyo del método Delphi desarrollar el explicación, exposición y en otros aspectos
proceso de validación para la herramienta del libro de texto.
diseñada.
8. Actividades: Los recursos que incitan al
Diseño de investigación usuario a comparar, buscar, investigar y
relacionarse con el tema, durante o al
El diseño de investigación es mixto, de forma terminar de leerlo.
exploratoria. Primero se considera la
recolección de datos cuantitativos para la 9. Nuevas tecnologías: Son las herramientas
modificación del instrumento, y después el modernas, generalmente virtuales, que al
análisis de información cualitativa, para el incorporarse al libro permiten una
rediseño y validación final por jueces expertos retroalimentación o aplicación de la
(Díaz, 2014). información.

Pregunta de investigación 10. Otras: Incluye factores que guardan un


valor de presentación, facilidad y/o estética
¿Cómo obtener la confiabilidad necesaria de un en el libro de texto de manera indirecta, o
instrumento que permita la medición del sea que no necesariamente proporcionan
contenido de un libro de Probabilidad y información de los temas que contiene el
Estadística? ejemplar.

Resultados El trabajo de Ortega (1996), fue un


precedente que fortaleció el diseño de las
Se establecen diez rubros de interés y su interrogantes, independientemente de los años
concepción didáctica, con la finalidad de una que han transcurrido de su aportación a la
mejor comprensión al desarrollar las preguntas valoración de manuales escolares, sus preguntas
en cada uno de ellos, como se presenta a para el contenido de un libro son actuales, en
continuación: alto grado, y permiten ser una guía para su
establecimiento.
1. Entorno: Es el área interna (institución) o
externa donde se utiliza el libro de texto, así
como los lectores que lo requieren.

2. Teoría: Son los temas por escrito que


contiene el libro en comparación con los que
se sugieren en el programa de la materia.
ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha
ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
13
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Después de un razonamiento 1) no es comprensible, 2) bajo nivel de


concienzudo se redactaron y consolidaron comprensión, 3) aceptable nivel de
sesenta y seis reactivos, repartidos en cada uno comprensión y 4) alto nivel de comprensión. En
de los rubros antes señalados y no todos con el cuanto a la redacción, las clasificaciones se
mismo número de cuestiones. Por ejemplo, para organizan en:
el rubro de Teoría, son once preguntas las
establecidas, en cambio para ilustraciones son 1) no es comprensible, 2) bajo nivel de
nueve (figura 2). comprensión, 3) aceptable nivel de
comprensión y 4) alto nivel de comprensión.
c) Referente a Ilustraciones.
Por último, en el diseño de la tabla se incorpora
Reactivos un criterio para cada una de las cuatro
1. ¿Tiene suficientes gráficos? clasificaciones, en ambas categorías, con objeto
2. ¿Utiliza los gráficos como justificación o como aclaración de las teorías?
de facilitar el análisis de los expertos.
3. ¿Son claros y responden a los valores correctos del texto? Categoría Clasificación Criterio
PERTINENCIA 1. No es El reactivo no
4. ¿Responden o se relacionan a la metodología que se está siguiendo en el El reactivo permite pertinente contribuye a evaluar el
texto? evaluar un aspecto propósito y
central del propósito, dimensiones del
5. ¿Son claras las descripciones de los elementos de las figuras? constructo teórico y/o instrumento en ningún
dimensiones del aspecto. Puede ser
6. ¿Las figuras tridimensionales están bien representadas? instrumento. eliminado
completamente.
7. ¿Las ilustraciones son atractivas e invitan a su análisis? 2. Bajo nivel El reactivo hace una
de pertinencia contribución superficial
8. ¿Los colores de las ilustraciones motivan el análisis? a la evaluación del
propósito y
9. ¿Los tipos de gráfico ayudan a la compresión visual? dimensiones del
instrumento.
3. Aceptable El reactivo contribuye
nivel de a evaluar el propósito,
Figura 2 Preguntas parciales del instrumento pertinencia dimensiones y/o
Fuente: elaboración propia constructo teórico del
instrumento.
4. Alto nivel El reactivo contribuye
A continuación, se presenta la manera de pertinencia a evaluar en un alto
grado el propósito,
en que serán propuestas las posibles dimensiones y/o
constructo del
contestaciones de los encuestados. Cabe hacer instrumento. Está
acorde con los
mención que se requirió un análisis al respecto. desarrollos teóricos y
Se observó la necesidad de un modelo de metodológicos
recientes en el área.
selección de respuestas múltiples, debido al REDACCIÓN 1. No es El reactivo no es
El reactivo es comprensible comprensible por los
contenido de los reactivos. comprensible por los potenciales usuarios del
potenciales usuarios y instrumento.
cumple con las 2. Bajo nivel El reactivo debe ser
Se establece un modelo de cuatro normas gramaticales de mejorado en al menos
de la lengua. comprensión la mitad de sus
alternativas como respuesta en cada cuestión componentes, en
planteada en cada reactivo, para incluir en el aspectos de redacción y
gramática.
formato un diseño que agilice las respuestas de 3. Aceptable El reactivo requiere
nivel de algunas mejoras
los participantes. Al tener presente el cuidado comprensión superficiales para que
quede excelente en su
de la veracidad del instrumento, se propone una comprensión.
escala del uno al cuatro, se señala solo una vez 4. Alto nivel El reactivo es
de altamente comprensible
en el encabezado de cada rubro y se da a comprensión por los potenciales
usuarios y sigue las
conocer en las instrucciones el valor que normas gramaticales de
corresponde a los criterios, donde: 1 representa la lengua.

nunca, 2 representa casi nunca, 3 representa


casi siempre y 4 representa siempre.
Figura 3 Extracto encuesta jueces expertos
Fuente: elaboración propia
Al comprender la aportación de Gómez-
González & Tobón (2018), se estimó evaluar
dos categorías en los diez rubros establecidos,
las cuales corresponden a la pertinencia y
redacción. Las clasificaciones para indagar en
la pertinencia son:

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
14
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Selección de los jueces expertos. Las En la herramienta que se ha propuesto


características que fueron consideradas para la en este proyecto, las indicaciones se señalaron
elección de las personas a las que se les solicitó al inicio del cuestionario, y se procuró de
el apoyo para consolidar la validez y manera verbal comentar una pequeña
confiabilidad de instrumento diseñado, fueron introducción a los expertos, los cuales son
influenciadas por los señalamientos de Escobar docentes investigadores especializados con
& Cuervo (2008), quienes, a partir de varios trayectoria matemática y con experiencia en el
autores, llegaron a la conclusión de los área de probabilidad y estadística, y un par de
siguientes criterios de selección: ellos cuentan con formación adicional en
pedagogía (figuras 4 y 5).
(a) Experiencia en la realización de juicios en
áreas académicas y toma de decisiones La presente encuesta pretende conocer las
basada en evidencia o experticia (grados, características que los profesores consideran de
investigaciones, publicaciones, posición, manera consciente o no, deba contener un libro de
experiencia y premios entre otras). texto de probabilidad y estadística, por la importancia
que la asignatura mantiene dentro de la retícula de la
carrera de Ingeniería Industrial.
(b) Reputación en la comunidad. Existen diez rubros considerados.

(c) Disponibilidad y motivación participativa. Figura 4 Extractos encuesta jueces expertos


Fuente: elaboración propia
(d) Imparcialidad y cualidades inherentes como
confianza en sí mismo y adaptabilidad. Instrucciones:
1. Este instrumento, para su evaluación se
Además, agregan que los jueces poden compone de 66 reactivos. Las preguntas están
agrupadas por rubro, en el orden que se
ser escogidos por formación académica similar, proporcionó anteriormente.
práctica y experiencia. La decisión de cuál debe 2. Si usted tiene alguna sugerencia para mejorar
ser el número de jueces seleccionados para la la redacción, le pedimos lo haga en el espacio
validación del instrumento varía entre autores, proporcionado para ello. Las sugerencias
lo cual causa un poco de confusión, al tener pueden ser: a) Mejorar la redacción de la
pregunta, b) Presentar una redacción
conciencia de que la decisión de la cantidad de alternativa.
juicios puede modificar trascendentalmente el 3. Se le solicita responder todos los indicadores.
instrumento. Por otro lado, se observó que, si 4. Las categorías a evaluar en cada rubro serán
la cantidad es grande, existirá complejidad para pertinencia y redacción.
acatar las sugerencias por ser muy variadas y tal 5. Las clasificaciones y criterios se muestran a
continuación:
vez contradictorias. Al analizar varias
explicaciones del número de expertos, se
propuso solicitar a seis, pues la teoría señala Figura 5 Extractos encuesta jueces expertos
Fuente: elaboración propia
que es una cantidad aceptable al estudiar un
fenómeno con un número limitado de
Interpretación y modificación de la
requerimientos. Hay que recordar, que los
valoración del instrumento por parte experta.
jueces expertos deben enterarse de la mejor
Después de la recepción de las valoraciones de
forma de la pretensión que tiene aplicar el
los jueces expertos, el proyecto paso por la
instrumento, y la información que se desea
etapa de análisis de las sugerencias y
obtener, así ellos tendrán en mente, y en todo
observaciones, con la intención de realizar las
momento, las implicaciones y sugerencias que a
modificaciones pertinentes, fortalecer el
cada una de las interrogantes y sus alternativas
instrumento, y reenviarlo para la posible
de contestación pueden brindar para conformar
validación definitiva.
una herramienta altamente consolidada antes de
llegar al participante, sin descuidar la
practicidad y sencillez que se busca desde un
inicio proporcionar al contestar el instrumento.

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
15
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18
Pertinencia Redacción Las medias aritméticas permiten
Reactivo 1 2 3 4 1 2 3 4 Sugerencias/observacio
nes establecer la permanencia del total de los
Adecuaciones o
redacciones alternativas reactivos en el apartado Entrono.
para la mejora
1. ¿Es un Se entiende la idea y
libro está redactado de forma Reactivos Rubro Media Media Permanencia
pensado correcta. Pensaría en Ilustración Permanencia Redacción
para que el algunos cambios de
profesor lo palabras para darle 1. ¿Los gráficos 4 4 Si
utilice en x x mayor formalidad (si es son suficientes
la que eso se busca) como para explicar el
enseñanza? “diseñado” por pensado
y “proceso de tema?
enseñanza” por solo 2. ¿Utiliza los 3.8 3.6 Si
enseñanza.
2. ¿Está Proceso de aprendizaje. gráficos como
pensado justificación o
para que el
alumno lo x x como aclaración
use en el de las teorías?
aprendizaje
?
3. ¿Son claros y 4 4 Si
responden a los
Tabla 1 Extractos reactivos con sugerencias jueces valores
expertos correctos del
Fuente: elaboración propia. texto?
4. ¿Responden 4 4 Si
o se relacionan
Fue necesario dividir el proceso en dos
con la
etapas, una cuantitativa y otra cualitativa. Al metodología
aplicar el método Delphi la primera parte que se está
consistió en un razonamiento estadístico, para siguiendo en el
obtener la media de las validaciones en cada texto?
interrogante y a partir de ello decidir respecto a 5. ¿Son claras 4 4 Si
las
mantener o eliminar reactivos. Se debe tomar descripciones
en cuenta que, para el método de validación de los
utilizado, el criterio para mantener un reactivo elementos de las
es que rebase el 75% de la sumatoria total de figuras?
acuerdo a las valoraciones de los jueces, que en 6. ¿Las figuras 4 3.4 Si
tridimensionales
una escala de 1 a 4 representa un índice de 4.0 están bien
puntos, en caso de que la relevancia sea menor representadas?
a 3.0 puntos, se desecha, al recordar que la 7. ¿Las 4 4 Si
herramienta evalúa dos categorías, que son ilustraciones
pertinencia y redacción. En las siguientes tablas son atractivas e
invitan a su
se observan los resultados para cinco de los análisis?
diez rubros dentro del cuestionario: 8. ¿Los colores 2.4 3.4 No
de las
Reactivos Rubro Media Media Permanencia
Entorno Permanencia Redacción ilustraciones
1. ¿Es un libro pensado 4 4 Si motivan el
para que el profesor lo análisis?
utilice en la enseñanza?
2. ¿Está pensado para 3.6 3.2 Si
9. ¿Los tipos de 3.4 4 Si
que el alumno lo use en gráfico ayudan
el aprendizaje? a la compresión
3. ¿Contempla 4 4 Si
actividades para
visual?
realizar en equipo?
4. ¿Contiene la mayoría 4 3.4 Si Tabla 3 Evaluación cuantitativa de reactivos rubro
de los contenidos
temáticos del curso de
Ilustración
probabilidad y Fuente: elaboración propia
estadística?
5. ¿Es acorde con la 3.6 3.2 Si
metodología del Las medias aritméticas promueven
profesor?
6. ¿Va de acuerdo en el 3.4 3 Si
analizar la permanencia de uno de los reactivos
cómo aprenden los en el apartado Ilustración.
estudiantes
actualmente?

Tabla 2 Evaluación cuantitativa de reactivos rubro


Entrono
Fuente: elaboración propia

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
16
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Reactivos Media Media Permanencia Las medias aritméticas permiten


Rubro Permanencia Redacción
Metodología
establecer la permanencia del total de los
1. ¿Propone 4 4 Si reactivos en el apartado Nuevas Tecnologías.
ejercicios o
problemas que Reactivos Rubro Media Media Permanencia
relaciona con Otras Permanencia Redacción
situaciones de 1. ¿Brinda una 4 3.8 Si
otras bibliografía al
disciplinas? finalizar los
2. ¿Señala 2.8 4 No
temas?
algún
procedimiento 2. ¿Brinda una 4 3.8 Si
a aplicar en el bibliografía al
aula? final del libro?
3. ¿Brinda 3.8 3.6 Si 3. ¿Se 3.6 3.4 Si
alguna encuentra bien
orientación encuadernado
metodológica? (papel)? ó ¿El
4. ¿Propone un 4 4 Si formato digital
objetivo
es accesible?
general del
texto o del 4. ¿Tiene 4 4 Si
tema que se índice
trate? alfabético?
5. ¿Señala o 4 4 Si 5. ¿La portada 3.4 3.2 Si
propone es alusiva a la
alguna manera materia y
de evaluar? llama la
6. ¿Maneja 4 4 Si atención?
algún modelo
de
6. ¿Los 4 4 Si
autoevaluación tamaños y
para el tipos de letra
alumno? del texto
facilitan la
Tabla 4 Evaluación cuantitativa de reactivos rubro lectura e
Metodología interpretación?
Fuente: elaboración propia
Tabla 6 Evaluación cuantitativa de reactivos rubro Otras
Fuente: elaboración propia
Son consideradas las medias aritméticas
al decidir la permanencia de uno de los Las medias aritméticas comprueban la
reactivos en el punto Metodología. permanencia en cada uno de los reactivos en el
Reactivos Media Media Permanencia
apartado Otras. En la segunda parte del proceso
Rubro Nuevas Permanencia Redacción para la validación, la información se evaluó de
tecnologías manera cualitativa, al prestar atención a las
1. ¿Propone 4 3.8 Si
tareas para usar sugerencias y observaciones que realizaron los
la calculadora? expertos en el área de Probabilidad y
2. ¿Sugiere 4 4 Si
realizar tareas
Estadística, dentro de la herramienta en los
con algún reactivos en cuanto a redacción o adecuación.
software? En las siguientes tablas (ver Tablas 7 a 11), se
3. ¿Tiene al 4 4 Si
menos una observan los resultados de cinco de los rubros
práctica verificados y modificados, de tal forma que las
diseñada y
resuelta
preguntas serían más comprensibles para el
utilizando encuestado:
software?
4. ¿Aconseja 4 4 Si
cursar un mooc
que apoye en el
aprendizaje de
la materia?

Tabla 5 Evaluación cuantitativa de reactivos rubro


Nuevas Tecnologías
Fuente: elaboración propia

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
17
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Reactivo Original en Reactivo Modificado Reactivo Original en Reactivo Modificado en


Entorno en Entorno Otras Otras
2. ¿Está pensado para que ¿Es adecuado para que 1. ¿Brinda una ¿Proporciona bibliografía
el alumno lo use en el el estudiante lo utilice en bibliografía al finalizar al finalizar los temas?
aprendizaje? el aprendizaje? los temas?
2. ¿Brinda una ¿Proporciona bibliografía
4. ¿Contiene la mayoría de ¿Incluye los contenidos bibliografía al final del al final del libro?
los contenidos temáticos temáticos mínimos libro?
del curso de probabilidad y necesarios del curso de 5. ¿La portada es alusiva ¿La portada es alusiva a
estadística? probabilidad y a la materia y llama la la materia y atrae la
estadística? atención? atención?
5. ¿Es acorde con la ¿Es acorde con la
metodología del profesor? metodología de Tabla 11 Evaluación cualitativa de reactivos rubro Otras
enseñanza del profesor? Fuente: elaboración propia
6. ¿Va de acuerdo en el ¿Va de acuerdo con
cómo aprenden los cómo aprenden los Conclusiones
estudiantes actualmente? estudiantes actualmente?

Tabla 7 Evaluación cualitativa de reactivos rubro


Como se puede observar, la valoración de los
Entorno expertos permite rediseñar el cuestionario para
Fuente: elaboración propia hacer medibles las variables, mediante la
aplicación sistemática del método Delphi con el
Reactivo Original en Reactivo Modificado en que se determinan qué reactivos son los
Ilustración Ilustración
idóneos, por otro lado, se demuestra la eficacia
2. ¿Utiliza los gráficos ¿Utiliza los gráficos cómo
como justificación o justificación o aclaración para identificar áreas de oportunidad en una
como aclaración de las de las teorías? herramienta al construir la lista final de
teorías? reactivos al recolectar las diferentes
6. ¿Las figuras Si aplica, ¿Las figuras percepciones de expertos.
tridimensionales están tridimensionales están
bien representadas? bien representadas?
8. ¿Los colores de las Se elimina
El instrumento rediseñado es enviado
ilustraciones motivan el nuevamente a los jueces para su revisión, según
análisis? el proceso Delphi, en espera de las opiniones
finales, si es el caso, y si para todos los
Tabla 8 Evaluación cualitativa de reactivos rubro miembros del jurado la herramienta fuera
Ilustración
valorada como conforme, podría ser iniciada la
Fuente: elaboración propia
etapa de aplicación del instrumento a la
Reactivo Original en Reactivo Modificado en población establecida, quienes son profesores
Metodología Metodología que imparten la materia de probabilidad y
2. ¿Señala algún Se elimina el reactivo estadística.
procedimiento a aplicar
en el aula?
3. ¿Brinda alguna ¿Proporciona alguna
El proyecto ejemplificado a lo largo del
orientación orientación metodológica documento, se encuentra en la etapa de
metodológica? para explicar los temas? preparación para aplicarse con la confiabilidad
suficiente, a los catedráticos que se desarrollan
Tabla 9 Evaluación cualitativa de reactivos rubro en el área de Probabilidad y Estadística, el logro
Metodología
Fuente: elaboración propia
de una buena validación es el beneficio
obtenido con la aplicación del método Delphi.
Reactivo Original en Reactivo Modificado en
Nuevas tecnologías Nuevas tecnologías Recomendaciones
1. ¿Propone tareas para ¿Propone tareas para
usar la calculadora? utilizar la calculadora? En algún momento pueden presentarse
4. ¿Aconseja cursar un ¿Aconseja cursar un mooc
mooc que apoye en el (plataforma virtual) que
problemas de investigación en que se requiera
aprendizaje de la apoye en el aprendizaje de obtener información tanto cualitativa como
materia? la materia? cuantitativa, utilizando una metodología
emergente como es el método mixto.
Tabla 10 Evaluación cualitativa de reactivos rubro
Nuevas tecnologías
Fuente: elaboración propia

ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha


ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019
18
Artículo Revista de Educación Técnica
Marzo 2019 Vol.3 No.7 8-18

Existen diferentes modelos de apoyo en George & Trujillo (2018). Aplicación del
el diseño de la herramienta que se requiere Método Delphi Modificado para la Validación
elaborar para captar los datos de la situación. El de un Cuestionario de Incorporación de las TIC
proceso Delphi se compone de pasos en la Práctica Docente. Revista Iberoamericana
estructurados y a la vez flexibles, al brindar de Evaluación Educativa, 11(1), 113-134.
opciones en cada etapa que permitan adecuarse Recuperado de
a las características del problema planteado. El https://revistas.uam.es/index.php/riee/article/vie
considerar el método Delphi en una w/9265
investigación dual, podría ser una buena
estrategia de progreso para validar de una Díaz, S. (2014). Los Métodos Mixtos de
manera confiable los instrumentos que se Investigación: Presupuestos Generales y
pretenden aplicar, como aquí se ha abordado. Aportes a la Evaluación Educativa. Revista
Portuguesa de Pedagogia, 4(1), 7-23.
Referencias Recuperado de https://digitalis-
dsp.uc.pt/bitstream/10316.2/36342/1/Los%20M
Aponte, Cardozo & Melo (2012). Método etodos%20Mixtos%20de%20Investigacion.pdf
Delphi: aplicaciones y posibilidades en la
gestión prospectiva de la investigación y Monterrubio y Ortega (2011). Diseño y
desarrollo. Revista Venezolana de Análisis de aplicación de instrumentos de análisis y
Coyuntura, 18(1), 41-52. Recuperado de valoración de textos escolares de
https://www.redalyc.org/pdf/364/36424414003. matemáticas. PNA. Revista de Investigación en
pdf Didáctica de la Matemática, 5(3), 105-127.
Recuperado de
Bisquerra R. & Pérez-Escoda, N. (2015). http://pna.es/Numeros2/pdf/Monterrubio2011P
¿Pueden las escalas Likert aumentar en NA5(3)Disenno.pdf
sensibilidad?. Revista d'Innovació i Recerca en
Educació, 8(2), p. 129-147. Recuperado de Ortega (1996). Modelo de valoración de textos
http://diposit.ub.edu/dspace/bitstream/2445/110 matemáticos. Números, 28, 4-12. Recuperado
703/1/651238.pdf de
http://www.sinewton.org/numeros/numeros/28/
Campanario, J. (2001). ¿Qué puede hacer un Articulo01.pdf
profesor como tú o un alumno como el tuyo con
un libro de texto como éste? Una relación de Sánchez, M., Serrano, F. & Miralles, P. (2018).
actividades poco convencionales. Enseñanza de PROTOTEXT, un protocolo sistemático para la
las Ciencias, 19 (3), 351–364. Recuperado de evaluación de libros de texto de Ciencias
https://www.raco.cat/index.php/Ensenanza/artic Sociales: diseño y validación. Didacticae:
le/view/21753 Revista de Investigación en Didácticas
Específicas, (4), 60-73. Recuperado de
Domínguez, S., Villegas, G., Yauri, C., Mattos, http://revistes.ub.edu/index.php/didacticae/articl
E. & Ramírez, F. (2013). Propiedades e/view/21682
psicométricas de una escala de autoeficacia
para situaciones académicas en estudiantes Tobón, S. (2013). Formación integral y
universitarios peruanos. Revista de Psicología, competencias: Pensamiento complejo, diseño
2(1), 27-39. Recuperado de curricular, didáctica y evaluación. Bogotá: Ecoe
http://ucsp.edu.pe/investigacion/psicologia/wp- Ediciones.
content/uploads/2014/01/Revista-de-
Psicolog%c3%ada-2do-art%c3%adculo1.pdf

Escobar, J. & Cuervo, Á. (2008). Validez de


contenido y juicio de expertos: una
aproximación a su utilización. Avances en
medición, 6(1), 27-36. Recuperado de
www.researchgate.net/profile/Jazmine_Escobar
Perez/publication/302438451_Validez_de_cont
enido_y_juicio_de_expertos_Una_aproximacio
n_a_su_utilizacion/links/59a8daecaca27202ed5
f593a
ISSN-2523-2460 MARTINEZ-ACOSTA, María Teresa, SÁNCHEZ-LUJÁN, Bertha
ECORFAN® Todos los derechos reservados Ivonne y CAMACHO-RÍOS, Alberto. Método Delphi: validar un
instrumento para la medición de características de un libro de texto de
probabilidad y estadística. Revista de Educación Técnica 2019

También podría gustarte