¿ChatGPT sabe derivar?

Una
experiencia en el aula

Merino Toapanta Andrés Esteban

Pontificia Universidad Católica del Ecuador
aemerino@puce.edu.ec
Ecuador

Nivel educativo en el que se realizó la experiencia: Superior

Resumen
Se presenta la experiencia áulica, implementada en la carrera de Ciencias de
Datos de la Pontificia Universidad Católica del Ecuador, en la cual se utiliza
ChatGPT como recurso educativo para promover el pensamiento crítico
mediante la evaluación de respuestas generadas por sistemas de lenguaje. Los
estudiantes fueron desafiados a solicitar resoluciones de ejercicios a ChatGPT
y luego evaluar las respuestas generadas, determinando su corrección y
analizando posibles errores. Luego de la experiencia, los estudiantes reflejaron
una reflexión sobre la utilidad y las limitaciones de las herramientas de
generación de lenguaje, reconociendo la importancia de cuestionar y evaluar
críticamente las respuestas generadas.

ChatGPT, Educación matemática, Pensamiento crítico.

Abstract
A classroom experience is presented, implemented in the Data Science
program at the Pontificia Universidad Católica del Ecuador, in which ChatGPT
is used as an educational resource to promote critical thinking through the
evaluation of answers generated by language systems. Students were
challenged to request exercise resolutions to ChatGPT and then evaluate the
generated answers, determining their correctness and analyzing possible
errors. After the experience, students reflected on the usefulness and limitations
of language generation tools, recognizing the importance of questioning and
critically evaluating the generated answers.

Simposio STEM Miami 2022. 25 al 30 de septiembre. Broward International University

ChatGPT, Mathematics education, Critical thinking.

Propósito:

Usar ChatGPT como recurso para llevar al estudiante al nivel de proceso

cognitivo de «evaluación» al contrastar la información generada por ChatGPT
al solicitarle procesos de derivación.

Descripción:

En los últimos años, los avances en inteligencia artificial han permitido el

desarrollo de modelos de lenguaje como ChatGPT, que tienen la capacidad de
generar respuestas coherentes y contextualmente relevantes. Esta tecnología
ha despertado un gran interés en el campo educativo, ya que ofrece nuevas
posibilidades para mejorar el aprendizaje y la interacción con los estudiantes
(Zhai, 2022).

En un ambiente tradicional, para evaluar a los estudiantes sobre conceptos

relacionados con la matemática, por ejemplo, el proceso de derivación se
enviará al estudiante un compendio de ejercicios que debe resolver. Si se
limitara a esto, es probable que los estudiantes se apoyaran exclusivamente en
herramientas como WolframAlpha, que proporciona soluciones paso a paso
(Dimiceli et. al. 2010), y simplemente copiarían las respuestas sin profundizar
en el proceso de aprendizaje. En una primera instancia, se podría prohibir al
estudiante la utilización de estas herramientas, sin embargo, una mejor
estrategia sería aprovechar las herramientas tecnológicas de manera correcta,
realizando cambios en el tipo de trabajos que se solicita realizar al estudiante, y
fomentar su uso como un recurso valioso que contribuya al proceso de
enseñanza-aprendizaje.

Es importante destacar que, debido a la naturaleza generativa del modelo de

ChatGPT, las respuestas proporcionadas por este sistema presentan cierto
grado de aleatoriedad. Esta característica tiene implicaciones significativas,

Simposio STEM Miami 2022. 25 al 30 de septiembre. Broward International University

especialmente en el contexto de la resolución de ejercicios matemáticos.
Aunque ChatGPT tiene la capacidad de generar respuestas coherentes, existe
la posibilidad de que la respuesta dada no sea correcta en el caso de ejercicios
específicos. Esto se debe a que, si bien el modelo ha sido entrenado en una
amplia variedad de datos y ha adquirido conocimientos generales, su
capacidad para abordar problemas matemáticos complejos puede verse
limitada (Wardat et. al. 2023). Es decir, en ciertos ejercicios, aunque la
respuesta siga un desarrollo correcto, puede cometer errores al momento de
aplicar los procedimientos a las expresiones algebraicas, como se puede ver
en la siguiente imagen:

Se aprecia que, a pesar de que, en el texto, el procedimiento es coherente, al

implementar este procedimiento en la expresión algebraica, lo realiza de
manera errónea, dando un resultado incorrecto en la derivada, pues, uno de los
términos lo derivó dos veces.

En este contexto, en la Pontificia Universidad Católica del Ecuador, conscientes

de la importancia de preparar a sus estudiantes de la carrera de Ciencia de
Datos para enfrentar los desafíos de la era digital, se decidió implementar una
experiencia educativa innovadora. Esta experiencia tuvo como objetivo
principal utilizar ChatGPT como recurso para llevar a los estudiantes al nivel de

Simposio STEM Miami 2022. 25 al 30 de septiembre. Broward International University

proceso cognitivo de «evaluación» al contrastar la información generada por
ChatGPT al solicitarle procesos de derivación.

Durante la experiencia, se planteó a los estudiantes el desafío de evaluar la

resolución de ejercicios generada por ChatGPT. Para ello, se les solicitó que
realizaran peticiones de resolución de ejercicios a ChatGPT de distintas
maneras. Luego, se les pidió que tomaran capturas de pantalla de las
respuestas generadas por ChatGPT y procedieran a evaluarlas. Por lo tanto,
debía determinar si las respuestas generadas eran correctas o incorrectas, y en
caso de ser incorrectas, analizar dónde se encontraba el error y por qué pudo
haber ocurrido. Para ello, se planteó una variedad de ejercicios, desde
ejercicios simples donde era probable obtener una respuesta correcta, hasta
ejercicios más complejos donde se buscaba identificar posibles errores.

Específicamente, como entregable, solicitó a los estudiantes generar un

documento que constara de capturas de pantalla de las soluciones generadas
por ChatGPT para los ejercicios planteados. Cada solución debía ser
cuidadosamente analizada para determinar si era correcta o incorrecta. En
caso de que la respuesta fuera incorrecta, se les pidió identificar y explicar
dónde se producía el error y por qué pudo haber ocurrido. Además, se les
solicitó realizar un análisis cuantitativo de cuántos ejercicios logró ChatGPT
resolver correctamente, evaluando si había una correlación entre la
complejidad de los ejercicios y la precisión de las soluciones generadas.
Finalmente, se alentó a los estudiantes a ofrecer conclusiones,
recomendaciones y sugerencias para mejorar la utilización de ChatGPT como
recurso educativo, así como reflexionar sobre el papel de las herramientas
tecnológicas en el proceso de enseñanza-aprendizaje.

Todos los trabajos entregados por los estudiantes fueron altamente

satisfactorios, demostrando un nivel de compromiso y comprensión profundos
de la experiencia educativa. Se destacó la habilidad de los estudiantes para
evaluar de manera crítica las soluciones generadas por ChatGPT, identificando

Simposio STEM Miami 2022. 25 al 30 de septiembre. Broward International University

acertadamente las respuestas correctas e identificando los errores en aquellas
respuestas incorrectas. Además, se notó una notable motivación por parte de
los estudiantes al integrar esta herramienta de vanguardia en sus clases.
ChatGPT no solo proporcionó una nueva dimensión de aprendizaje, sino que
también impulsó la curiosidad y el deseo de explorar y comprender cómo
funcionan estos sistemas de lenguaje.

Además, en las conclusiones presentadas por los estudiantes, se observó

cómo lograron reflexionar sobre la utilidad y las limitaciones de las
herramientas de generación de lenguaje como ChatGPT. Si bien reconocieron
el valor y la eficacia de esta tecnología para generar respuestas coherentes,
también comprendieron la importancia de cuestionar y evaluar críticamente las
respuestas generadas. Los estudiantes internalizaron la necesidad de no
depender únicamente de las respuestas proporcionadas, sino de utilizar
ChatGPT como una herramienta complementaria y valiosa que requiere un
análisis y validación adicional. Esta reflexión permitió a los estudiantes
desarrollar habilidades de pensamiento crítico y análisis, mejorando su
capacidad para discernir y determinar la validez de las respuestas generadas
por sistemas de lenguaje como ChatGPT.

Valoración de la experiencia

Esta experiencia educativa me ha brindado una perspectiva valiosa sobre el

uso de herramientas de generación de lenguaje como ChatGPT en el contexto
académico. Me ha llevado a reflexionar sobre la importancia de integrar la
tecnología de manera inteligente y crítica en el proceso de enseñanza-
aprendizaje. Al abordar esta tecnología de manera reflexiva, podemos
aprovechar su potencial como un recurso valioso para impulsar el pensamiento
crítico y el análisis, empoderando a los estudiantes para que se conviertan en
evaluadores activos de la información generada por sistemas de lenguaje y
promoviendo un aprendizaje más profundo y significativo.

Simposio STEM Miami 2022. 25 al 30 de septiembre. Broward International University

Citas

Dimiceli, V. E., Lang, A., & Locke, L. (2010). Teaching calculus with Wolfram|
Alpha. International Journal of Mathematical Education in Science and
Technology, 41(8), 1061–1071.
https://doi.org/10.1080/0020739x.2010.493241
Wardat, Y., Tashtoush, M. A., AlAli, R., & Jarrah, A. M. (2023). ChatGPT: A
revolutionary tool for teaching and learning mathematics. Eurasia Journal
of Mathematics, Science and Technology Education, 19(7), em2286.
https://doi.org/10.29333/ejmste/13272
Zhai, X. (2022). ChatGPT user experience: Implications for education. SSRN
Electronic.

Simposio STEM Miami 2022. 25 al 30 de septiembre. Broward International University