Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Metodologia de Evaluacion de Software Educativo
Metodologia de Evaluacion de Software Educativo
Resumen: Las instituciones educativas demandan cada vez más modelos, técnicas
y herramientas que ayuden a la evaluación de software educativo para así poder
seleccionar de forma más eficiente la Tecnología de Información (TI) que cumpla con
estándares internacionales que permita garantizar de esa manera la operatividad
razonable de un producto software educacional.
El presente artículo, analiza un caso práctico que permite demostrar como los modelos
aportan y potencian la selección adecuada de productos de software seguro y
eficiente. Además se presenta un nuevo enfoque de evaluación combinando modelos
y técnicas de evaluación de software permitiendo así una selección óptima de un
producto. En este caso se aplica el enfoque de pruebas y el desarrollo de casos para
la correcta determinación del producto software.
Palabras Clave: Software Seguro, Modelos de Calidad, ISO 9126, estándares
internacionales, calidad de software, métricas, indicadores
Abstract: The educational institutions demands models, techniques and tolls that help
to the educational software evaluation in order to select the most efficient Information
Technology to achieve the international standards to guarantee in this way the
operativity reasonable of a educational software product.
This article analyze a study case that show how the models contribute and improve the
adequate selection of secure and efficiency software products.
Also shows a new approach of evaluation combining models and techniques of
software making an optimal selection of a product. In this case we also apply the
testing approach and cases of study to the correct determination of the software
product.
Key Words: Secure software, Quality Models, ISO 9126, international standards,
software quality, metrics, indicators.
INTRODUCCIÓN
Para evaluar software educativo debemos tener en cuenta modelos, métodos, técnicas
y herramientas, lo importante es seleccionar la que vaya acorde al caso. Todo
esto debe ser parte de un portafolio que el evaluador debe tener para ejecutar su
trabajo.
1.2.3.- Determinar roles.- Aquí se determinan las actividades y/ tareas que van a
desarrollar por cada uno de los integrantes del proyecto.
Este modelo diseñado a medida pero que puede ser considerado en un contexto
general considera cuatro niveles a la hora de evaluar software. Estos niveles
son:
Nivel 1: Características
Nivel 2: Subcaracterísticas
Nivel 3: Métricas
Nivel 4: Indicadores
Las métricas de producto se basan en la familia ISO 9126, IEEE 14143, ISO 20.000
que contiene métricas internas, externas y de calidad en uso.
Las métricas de proceso resumen los aspectos comunes de los siguientes estándares
COBIT, ISO 17799, ISO 27001, CMMI, ISO 15504, IEEE 1044, ITIL, ISO 20000,
entre otros.
Nivel 1: Características
Este modelo considera todas las métricas de calidad interna, externa y de uso
agrupadas bajo la denominación de características
Nivel 2: Subcaracterísticas
Para armar el modelo lo primero que hacemos es establecer este nivel que lo
componen los atributos del producto, para ello es aconsejable listar todos los
atributos que debe reunir el software ideal que para el modelo constituyen las
Nivel 3: Métricas
Para cada subcaracterística establecemos las fórmulas o medidas que usaremos para
poder llegar a determinar el grado de cumplimiento de las subcaracterísticas.
Nivel 4: Indicadores
Aplicada las fórmulas llegamos a calcular el número resultante obtenido que puede ser
un número, un porcentaje, un numerador y un denominador, en fin la medida en la cual
las subcaracterísticas se cumplan
EXA EXACTITUD
INT INTEROPERABILIDAD
REC RECUPERABILIDAD
APR APRENDIZAJE
OPE OPERABILIDAD
ATR ATRACCION
CAPACIDAD DE
MA MANTENIMIENTO CAN CAPACIDAD DE SER ANALIZADO
CAM CAMBIABILIDAD
EST ESTABILIDAD
COE COEXISTENCIA
REE REEMPLAZABILIDAD
SEGURIDAD DE
SE USO CCO CAMBIO DE CONTRASEÑAS PERIODICO
Métricas de producto
Las métricas de calidad interna y externa son tomadas del modelo ISO 9126 y
permiten evaluar criterios necesarios de todo software educativo tal como lo incluyó en
su debida época el modelo de McCall y que está vigente aún en nuestros días.
Métricas de proceso
Nivel 1. Características
USABILIDAD 12
FIABILIDAD 9
EFICIENCIA 8
SATISFACCION 8
CAPACIDAD DE MANTENIMIENTO 6
PRODUCTIVIDAD 6
PORTABILIDAD 5
EFECTIVIDAD 3
SEGURIDAD DE USO 3
TOTAL
80
Nivel 2: Subcaracterísticas
X 50 X 50 100
X 30 X 20 X 50 100
X 100 100
X 100
X 50 X 30 X 20 100
X 100 100
Tanto el cuestionario como las pruebas se deben ejecutar en número mínimo de tres y
se debe determinar el peso relativo que deben tener en la evaluación, el cual se puede
resumir de la siguiente forma:
Las entrevistas que se deben realizar son de tipo técnico respecto a las necesidades
tanto educativas como informáticas requeridas
Las encuestas deben ser destinadas a los usuarios o posibles usuarios del software
educativo así como podrían aplicarse cuestionarios de relevamiento técnico.
Las encuestas deben usar preguntas con diversas escalas, las cuales pueden ser
escalas dicotómicas o escalas de Likert, puesto que permiten valorar de mejor forma y
con un criterio más preciso las diversas percepciones de los usuarios o posibles
usuarios.
1 2 3 4 5
Las pruebas deben ser ejecutadas sobre los productos software y ante la presencia de
los solicitantes de la evaluación.
Evaluación ponderada
Peso Cumplimiento
Característica
1 P1 C1 Donde:
Característica
2 P2 C2 C: representa el cumplimiento de la característica,
Característica Si (1) y No (0)
3 P3 C3
… … …
Característica
n Pn Cn P: ponderación de la característica, la suma de las
ponderación da 100%
Valor
R
ponderado
Proporción de cumplimiento
Tabla 7: Ejemplo de
cumplimiento
Característica 1 1
Característica 2 1
Característica 3 0
……. …..
Característica n 1
Proporción 0,75
Nivel 3: Métricas
• La suma de los puntajes máximos de todas las métricas deberá ser igual a 100
puntos.
Todos los puntajes serán referidos como puntaje establecidos, en todos los niveles.
Para establecer los resultados tomamos en una matriz todo el modelo de calidad y
registramos ahí el valor medido u obtenido. Esta matriz de resultados permite
comparar con los criterios predeterminados en el modelo y contrastar así los puntajes
establecidos y obtenidos por cada producto software educativo evaluado.
Este cuadro de resultados permite apreciar los resultados finales y nos ayuda a
determinar el producto que cumple con las especificaciones.
Tabla 9.- Matriz del Modelo de calidad para dos software educativo
Así mismo se debe presentar dos tipos de informes escritos, el informe ejecutivo y el
informe analítico. El informe ejecutivo se presentará como máximo en una hoja y
muestra el resultado de la evaluación mientras que el informe analítico de la
evaluación presentará toda la documentación asociada a la evaluación, es decir las
evidencias del trabajo realizado, formatos de pruebas, pruebas aplicadas, capturas de
pantallas, cuestionarios aplicados, en fin todos los instrumentos usados y la
documentación asociada que explica de forma pormenorizada el trabajo realizado. Un
detalle importante de la evaluación que debe estar incluído en el informe analítico es el
que se muestra a continuación.
Instrumentos Descripción
En este anexo que debe estar incluido en el informe se muestra una explicación de los
instrumentos usados en la evaluación y el objetivo del uso del mismo, así como debe
precisar que información se recogió en ellos.
CONCLUSIONES
Este modelo sirve para evaluar cualquier tipo de software educativo y permite
cuantificar la calidad del producto software a través del uso de pruebas de caja negra,
pruebas administrativas, cuestionario de relevamiento técnico, encuestas dirigidas a
usuarios y entrevistas de confirmación con el personal técnico o desarrollador de la
herramienta, los mismos que dan información de la calidad del producto software, la
cual resume valores cualicuantitavos del modelo de calidad establecido.
REFERENCIAS