1

Aplicación de Modelos de Evaluación a RED

Ricardo Yepes Carmona

Centro de Educación Virtual CV UDES

Evaluación de Recursos Educativos Digitales

Carolina Suárez Hernández

03 de agosto de 2022
 2

Introducción

El proceso de evaluación de los recursos educativas digitales, conlleva a tomar en consideración,

cuales son esos aspectos que, como docente se desea encontrar en un software educativo. En ese orden

de ideas, el presente informe tiene como objetivo, aplicar un modelo de evaluación de la calidad a tres

diferentes recursos educativos digitales seleccionados. En este proceso, se presentan los RED

seleccionados y se realiza una presentación de los mismo, teniendo en cuenta aspectos como, nombre

del RED, descripción, características, entre otros aspectos.

Una vez se haya realizado el proceso de aplicación del modelo de evaluación de calidad a cada

uno de los RED, se procede a plantear algunas mejoras que se consideren pertinentes, a partir de los

resultados obtenidos. De esta manera, se plantean cambios de tipo tecnológico y pedagógico que

podrían hacer estos RED, más funcionales para el área del conocimiento específico que se está

trabajando.

Finalmente, a través de un video se plantea la importancia de someter los recursos educativo-

digitales a procesos de evaluación de la calidad. Adicionalmente, se justifica las propuestas de mejora a

los tres red mencionadas previamente.

 3

Aplicación de Modelos de Evaluación a RED

En el marco de la evaluación de Recursos Educativos Digitales, se plantea aplicar un modelo de

evaluación de calidad a tres RED seleccionados. Los RED seleccionados son: El Be (the) One Challenge, el

British Council y el 1, 2, 3 Listening, los tres son recursos educativos para el aprendizaje del inglés. Para

este informe se ha seleccionado el Modelo de Calidad de MacCall.

Modelo de Calidad de MacCall

Este modelo se basa en la descomposición del concepto de calidad en tres capacidades que

deben ser observadas en un software, además, se toma como referencia el punto de vista del usuario.

Cada una de las capacidades mencionadas se dividen en un conjunto de factores para finalmente definir

unos criterios de evaluación, evaluación que se lleva a cabo a través de métricas que indican en qué

medida el producto cumple con unas características que han sido establecidas previamente (Rey, 2105).

En este modelo, el concepto de calidad se descompone en 3 capacidades que son: Operación, que a su

vez se subdivide factores de corrección, confiabilidad, usabilidad, integridad o seguridad, eficiencia o

performance. Transición, que se subdivide en, portabilidad, reusabilidad e interoperabilidad. Revisión,

que se subdivide en, facilidad de mantenimiento, flexibilidad y facilidad de prueba (Rey, 2015).

Las métricas propuestas por MacCall, determinan en que grado un sistema posee una característica

determinada. Por ejemplo, se toma como métrica la eficiencia de ejecución del software, lo cual significa

el rendimiento de este a la hora de ejecutar una operación.

Desventajas: “Este modelo es un modelo de calidad fijo y para realizar la evaluación de la calidad de un

producto utilizándolo, se selecciona un subconjunto de factores y métricas aceptando que solo están

disponibles las que propone el modelo” (Rey, 2015, p. 75).

 4

A continuación, se presenta la aplicación del modelo de evaluación la calidad a cada uno de los tres

recursos educativos digitales seleccionados.

Se tendrán en cuenta cuatro aspectos de acuerdo con el área de conocimiento (Idioma Extranjero,

Inglés).

 Funcionalidad

 Usabilidad

 Portabilidad

 Fiabilidad

Nombre del red: Be (the) 1 Challenge

Área de conocimiento: Idioma Extranjero, Inglés

Nivel o grado de aplicación: grado cuarto a once

Autor: Colombia Aprende

Enlace al repositorio: https://eco.colombiaaprende.edu.co/betheone/

Descripción y Características del RED:

El Be (the) 1 Challenge es una estrategia para el fortalecimiento del aprendizaje del inglés. Se

trata de una aplicación para celulares, es un edujuego que tiene como objetivo principal, familiarizar a

los estudiantes desde el grado 4° hasta el grado 11 con el tipo de preguntas de las pruebas

estandarizadas. Básicamente se presentan los 7 tipos de preguntas de una prueba sabe 11 a manera de

juego digital dentro de un contexto gamificado. Para acceder a la aplicación se realiza un proceso de

registro en el cual el estudiantes agrega su nombre, documento de identidad, institución y el grado al

 5

cual pertenece. Adicionalmente, existe una opción para registrase como usuario libre. Es una aplicación

que se puede usar sin necesidad de conexión a internet puesto que esta solo la requiere para el proceso

de registro y para sincronizar los progresos dentro del juego.

Limitaciones: Se trata de una aplicación que está disponible únicamente para dispositivos Android e IOS,

aunque existe la posibilidad de utilizarla desde un ordenador, pero en este caso si requiere tener una

conexión a internet permanente.

Cumplimiento de estándares: Es una estrategia ideada por el ministerio de educación a través de

Colombia Aprende y el British Council y cuyo objetivo es precisamente el fortalecimiento del aprendizaje

del inglés teniendo en cuenta los estándares de competencia y las pruebas estandarizadas.

Figura 1.

Características y métrica para evaluar el RED Be (the) 1 Challenge.

Características Puntaje
Funcionalidad 30
Usabilidad 20
Portabilidad 20
Fiabilidad 30
Total 100
Nota. Adaptado de características y puntaje para modelo de evaluación de calidad del ejemplo, (p. 179),

Rey, 2015.
 6

Figura 2.

Métricas, subcaracterísticas y resultado de la evaluación al RED Be (the) 1 Challenge.

Característica Subcaracterísticas Métrica Descripción Escala de Valoración

valoración obtenida
Funcionalidad Consistencia Uniformidad de ¿Los niveles y Superior Superior
(puntaje la estructura subniveles del Alto
máximo 30 software se Básico
puntos) presentan de Bajo
forma clara y
uniforme?
Integridad Uniformidad en ¿Cada nivel Superior Superior
la presentación presente en el Alto
de los niveles. software es Básico
uniforme y Bajo
consecuente
con los demás
niveles?
Adecuación Potencialidad ¿el software Superior Superior
pedagógica y permite la Alto
didáctica interacción Básico
entre los Bajo
estudiantes,
muestra
congruencia
con el
currículo
sugerido y
fortalece el
aprendizaje
del inglés?
Subtotal funcionalidad Superior
Usabilidad Aprendizaje, Facilidad de ¿el software Superior Alto
(puntaje entendimiento y operación es fácil de Alto
máximo 20 operabilidad. usar, Básico
puntos) comprender y Bajo
operar?
Diseño Diseño ¿el diseño del Superior Alto
software Alto
resulta Básico
atractivo para Bajo
los
estudiantes?
Subtotal usabilidad Alto
Portabilidad Adaptabilidad Adaptabilidad ¿el software Superior bajo
 7

(puntaje se puede Alto

máximo 20 adaptar con Básico
puntos) facilidad a Bajo
otros
dispositivos?
Descarga e Facilidad de ¿el proceso de Superior Superior
instalación descarga e descarga e Alto
instalación instalación del Básico
software se Bajo
lleva a cabo
con facilidad?
Subtotal portabilidad Alto
Fiabilidad Eficiencia Eficiencia ¿el software Superior Alto
(puntaje opera de Alto
máximo 30 manera Básico
puntos) eficiente y sin Bajo
presentar
fallos?
Confiablidad en Confiabilidad ¿los temas y Superior Superior
los contenidos en los contenidos Alto
contenidos presentados Básico
en el software Bajo
son confiables
y probados?
Subtotal fiabilidad Alto
Total Alto
Nota. Adaptado resultados del ejemplo de evaluación, (p. 190), Rey, 2015.

Nombre del red: British Council LearnEnglish

Área de conocimiento: Idioma Extranjero, Inglés

Nivel o grado de aplicación: grado cuarto a once

Autor: British Council

Enlace al repositorio: https://learnenglish.britishcouncil.org/es

Descripción y Características del RED:

 8

El British Council LearnEnglish es una organización para las relaciones culturales y las

oportunidades de educación. Esta web está creada con el objetivo de promover el aprendizaje del

idioma inglés a través de cursos en línea y recursos educativos organizados por temáticas, habilidades y

por niveles de acuerdo con el Marco Común Europeo de Referencia para Colombia.

Limitaciones: Al tratarse de una plataforma en línea, es indispensable que el usuario cuente con una

conexión a internet permanente. Por otro lado, algunas de sus funciones requieren de una suscripción

pagada.

Cumplimiento de estándares: Los recursos encontrados en el repositorio están regidos por el marco

común Europeo de Referencia para Colombia, se presentan las actividades y recursos por niveles que van

desde el A1 hasta el C2.

Figura 3.

Características y métrica para evaluar el RED British Council LearnEnglish

Características Puntaje
Funcionalidad 30
Usabilidad 20
Portabilidad 20
Fiabilidad 30
Total 100
Nota. Adaptado de características y puntaje para modelo de evaluación de calidad del ejemplo, (p. 179),

Rey, 2015.

Figura 4.

Métricas, subcaracterísticas y resultado de la evaluación al RED British Council LearnEnglish.

 9

Característica Subcaracterística Métrica Descripción Escala de Valoració

s valoración n
obtenida
Funcionalidad Consistencia Uniformidad de ¿Los menús se Superior Superior
(puntaje la estructura presentan de Alto
máximo 30 forma clara y Básico
puntos) uniforme? Bajo
Integridad Uniformidad en ¿Cada nivel Superior Superior
la presentación presente en el Alto
de los niveles. software es Básico
uniforme y Bajo
consecuente
con los demás
niveles?
Adecuación Potencialidad ¿el software Superior Superior
pedagógica y permite la Alto
didáctica interacción Básico
entre los Bajo
estudiantes,
muestra
congruencia
con el
currículo
sugerido y
fortalece el
aprendizaje
del inglés?
Subtotal funcionalidad Superior
Usabilidad Aprendizaje, Facilidad de ¿el software Superior Superior
(puntaje entendimiento y operación es fácil de Alto
máximo 20 operabilidad. usar, Básico
puntos) comprender y Bajo
operar?
Diseño Diseño ¿el diseño del Superior Superior
software Alto
resulta Básico
atractivo para Bajo
los
estudiantes?
Subtotal usabilidad Superior
Portabilidad Adaptabilidad Adaptabilidad ¿el software Superior Superior
(puntaje se puede Alto
máximo 20 adaptar con Básico
puntos) facilidad a Bajo
 10

otros
dispositivos?
Descarga e Facilidad de ¿el proceso de Superior Superior
instalación descarga e descarga e Alto
instalación instalación del Básico
software se Bajo
lleva a cabo
con facilidad?
Subtotal portabilidad Superior
Fiabilidad Eficiencia Eficiencia ¿el software Superior Superior
(puntaje opera de Alto
máximo 30 manera Básico
puntos) eficiente y sin Bajo
presentar
fallos?
Confiablidad en Confiabilidad ¿los temas y Superior Superior
los contenidos en los contenidos Alto
contenidos presentados Básico
en el software Bajo
son confiables
y probados?
Subtotal fiabilidad Superior
Total Superior
Nota. Adaptado resultados del ejemplo de evaluación, (p. 190), Rey, 2015.

Nombre del RED: 1, 2, 3 Listening

Área de conocimiento: Idioma Extranjero, Inglés

Nivel o grado de aplicación: grado Transición a once

Autor: MES-English.com

Enlace al repositorio: https://www.123listening.com/

Descripción y Características del RED:

1, 2, 3 Listening, es una herramienta diseñada con el objetivo de ofrecer actividades y recursos para

fortalecer la habilidad de la escucha en el aprendizaje del inglés. Está provista de exámenes, formatos,

juegos y música. La licencia permite al usuario (docente) descargar cualquier recurso del sitio web
 11

siempre y cuando estos sean usados con los estudiantes. La reproducción, modificación o distribución

con fines lucrativos está restringida.

Limitaciones: Es un sitio web que requiere de conexión a internet de manera permanente para su uso,

las actividades y recursos tienen como único objetivo fortalecer la habilidad de la escucha en inglés

(Listening).

Cumplimiento de estándares: Los recursos y actividades consideran diferentes niveles de acuerdo con el

Marco Común Europeo de Referencia.

Figura 5

Características y métrica para evaluar el RED 1, 2, 3 Listening.

Características Puntaje
Funcionalidad 30
Usabilidad 20
Portabilidad 20
Fiabilidad 30
Total 100
Nota. Adaptado de características y puntaje para modelo de evaluación de calidad del ejemplo, (p. 179),

Rey, 2015.

Figura 6

Métricas, subcaracterísticas y resultado de la evaluación al RED 1, 2, 3 Listening.

Característica Subcaracterística Métrica Descripción Escala de Valoració

s valoración n
obtenida
Funcionalidad Consistencia Uniformidad ¿Los niveles y Superior Superior
(puntaje de la subniveles del Alto
máximo 30 estructura software se Básico
puntos) presentan de Bajo
 12

forma clara y
uniforme?
Integridad Uniformidad ¿Cada recurso Superior Superior
en la presente en el Alto
presentación software es Básico
de los niveles. uniforme y Bajo
consecuente con
los demás
niveles?
Adecuación Potencialidad ¿el software Superior Superior
pedagógica y aporta Alto
didáctica significativament Básico
e al proceso de Bajo
formación de los
estudiantes y
muestra
congruencia con
el currículo
sugerido y
fortalece el
aprendizaje del
inglés?
Subtotal funcionalidad Superior
Usabilidad Aprendizaje, Facilidad de ¿el software es Superior Alto
(puntaje entendimiento y operación fácil de usar, Alto
máximo 20 operabilidad. comprender y Básico
puntos) operar? Bajo
Diseño Diseño ¿el diseño del Superior Alto
software resulta Alto
atractivo para los Básico
estudiantes? Bajo
Subtotal usabilidad Alto
Portabilidad Adaptabilidad Adaptabilidad ¿el software se Superior alto
(puntaje puede adaptar Alto
máximo 20 con facilidad a Básico
puntos) otros Bajo
dispositivos?
Descarga e Facilidad de ¿el proceso de Superior No aplica
instalación descarga e descarga e Alto
instalación instalación del Básico
software se lleva Bajo
a cabo con
facilidad?
Subtotal portabilidad Alto
Fiabilidad Eficiencia Eficiencia ¿el software Superior Alto
(puntaje opera de manera Alto
 13

máximo 30 eficiente y sin Básico

puntos) presentar fallos? Bajo
Confiablidad en Confiabilidad ¿los temas y Superior Superior
los contenidos en los contenidos Alto
contenidos presentados en el Básico
software son Bajo
confiables y
probados?
Subtotal fiabilidad Superior
Total Alto
Nota. Adaptado resultados del ejemplo de evaluación, (p. 190), Rey, 2015.

Habiendo aplicado una evaluación de calidad a los tres Recursos Educativos Digitales

seleccionados, se puede evidenciar que, aunque herramientas en términos generales eficientes y que

cumplen con las características que un docente espera encontrar en un recurso para el aprendizaje del

inglés dentro y fuera del aula. Sin embargo, es importante plantear algunas mejoras que sería

importante realizar con el fin de hacerlos más funcionales. En ese orden de ideas, se proponen las

siguientes mejoras a los RED que han sido objeto de evaluación en este informe.

En el caso del Be (the) 1 Challenge, una mejora importante sería, por un lado, corregir algunos

errores que la aplicación evidencia en algunos de los niveles y, por otro lado, sería de gran ayuda que la

herramienta pudiera ser usada en un ordenador y no solamente en la aplicación. Para el caso de los

otros dos recursos, se evidencia que, al contrario de las herramienta antes mencionada, estos solo están

disponible como sitio web y a pesar de que son muy eficientes y funcionales, sería un gran paso poder

tenerlos también como aplicaciones para Android e IOS, de esta manera se mejoran sus condiciones de

portabilidad y el usuario puede llevarlas consigo siempre.

Figura 6.

Captura de pantalla del video

 14

Enlace al video: https://www.youtube.com/watch?v=t7Gjv7HBvs4

 15

Conclusiones

Los Recursos Educativos Digitales deben ser sometidos a evaluaciones en sus diferentes etapas,

ya sea durante su proceso de creación, o al producto ya terminado. La aplicación de modelos de

evaluación de la calidad, demanda de una preparación, se deben considerar los aspectos, características

y subcaracterísticas que se desea encontrar en determinado software. En el caso de los software

educativo, es importante considerar aspectos como área de conocimiento.

Las características que se desea encontrar presentes en un determinado RED, deben definirse en

función del área de aplicación del mismo.

Al plantear mejoras a un red, estas deben estar justificadas y sustentadas, considerando aspectos

tecnológicos y pedagógicos.
 16

Referencias

Rey, A. (2015). Capítulo II y IV, del Libro Electrónico Multimedial LEM: Evaluación de la Calidad de la

Tecnología Educativa. Universidad de Santander, Ed Bucaramanga. https://aulavirtual-

eew.cvudes.edu.co/publico/lems/L.000.008.MG/librov2.html