UNIVERSIDAD INDUSTRIAL DE SANTANDER

FACULTAD DE FISICO-MECANICAS
ESCUELA DE DISEÑO INDUSTRIAL
USABILIDAD 2019-2

Nombres: Ángela Stephanía Martínez Toloza - 2151442

Silvia Lorena Rodríguez Chaparro - 2131645
Iván Mauricio Rojas Ortiz - 2141904

PROTOCOLO DETALLADO PARA LA EVALUACIÓN DE LAS PLATAFORMAS

DE LAS UNIVERSIDADES “UNIVERSIDAD INDUSTRIAL DE SANTANDER
(UIS)” Y “UNIVERSIDAD AUTÓNOMA DE NUEVO LEÓN (UANL) EN MÉXICO”
CON BASE EN CRITERIOS DE USABILIDAD.

Objetivo:
General:

● Comparar la eficiencia al ejecutar una tarea por estudiantes de Diseño

Industrial aptos para intercambio académico, en dos páginas web
institucionales (UIS- UANL) durante el año 2020.

Específicos:
● Medir el tiempo y número de pasos en que el usuario desarrolla la tarea.
● Identificar cuántos y cuáles errores comete el usuario mientras realiza la
tarea
● Cuantificar los datos obtenidos durante las pruebas.
● Obtener datos de autorreporte acerca de la facilidad para realizar la tarea.

Hipótesis:
A través de este estudio se pretende demostrar que la página de la Universidad
Industrial de Santander es más eficiente que la página de la Universidad
Autónoma de Nueva León en la tarea específica a realizar según las variables de
usabilidad que se plantean (eficiencia, eficacia y satisfacción percibida por el
usuario).

Introducción:
 Con el fin de analizar las plataformas universitarias usadas por los estudiantes de
la escuela de Diseño Industrial para verificar las materias homologables en caso
de intercambio, se hará una prueba comparativa cuasi experimental de tipo
prospectivo de la interfaz de las dos páginas web, considerando dimensiones de
usabilidad en términos de eficiencia, eficacia y satisfacción percibida por el
usuario.El diseño del estudio se presenta el siguiente gráfico:

Figura 1. Diseño de estudio

1. Factores de entrada (Tareas)

1.1 Verificar las materias homologables en la página de la Universidad
Autónoma de Nuevo León: en este factor se consideran materias homologables
cuyas tengan un nombre parecido o igual a las de la Universidad Industrial de
Santander (Polímeros, mecanismos, metales, libre elección I,II,III), dichas materias
de libre elección en su plan de estudios. Cada materia será vista en el documento
del plan de estudios de la página de UANL y no están controladas por el
experimento.
La ruta para seguir por el participante es: desde la página de Google buscar la
página oficial de la UANL-oferta educativa- Licenciatura -Área de Interés
seleccionar arte y humanidades buscar- licenciado en Diseño Industrial- plan de
estudios.
1.2 Verificar las materias homologables en la página de la Universidad Industrial de
Santander: en este factor se consideran materias homologables cuyas tengan un
nombre parecido o igual a las de la Universidad Autónoma de Nuevo León en
México,(materiales y procesos II polímeros, fundamentos del diseño mecatrónico,
materiales y procesos III metales, electivas), dichas materias de libre elección en
su plan de estudios. Cada materia será vista en el documento del plan de estudios
de la página de la UIS y no están controladas por el experimento.
La ruta para seguir por el participante es: desde la página de Google buscar la
página oficial de la UIS -Programas académicos – Diseño Industrial+ -plan de
estudios.

2. Unidad experimental:
Se realizará la evaluación con 14 estudiantes de Diseño Industrial de la
Universidad Industrial de Santander (los 14 estudiantes realizarán el factor 1.1 y el
factor 1.2), que de manera voluntaria quieran participar.
Factores de inclusión:
● Estudiantes de Diseño Industrial de la Universidad Industrial de Santander
● Hombres y mujeres entre los 18 y 26 años.
● Con 60% de los créditos aprobados del programa.
● Promedio ponderado superior a 3,2.
● Interesados en realizar intercambio a México.
Factores de exclusión:
● Ausencia de las dos extremidades superiores.
● Tener alguna discapacidad cognitiva.

3. Variables respuesta (Y):

3.1 Número de errores (Y1): Estos han sido considerados con base en las tareas.
De esta manera se consideran errores cuando no se diligencia por completo los
campos necesarios para ejecutar la tarea y cualquier acción que no logre el
objetivo principal (finalizar la tarea), o no se siga la ruta anteriormente establecida
en la especificación de las tareas. Para la evaluación de esta variable, se grabará
la pantalla de cada usuario y así se contabilizarán los errores cometidos.
3.2 Tiempo en realizar la tarea (Y2): Este tiempo se considerará de acuerdo con la
grabación de la pantalla y un cronómetro manejado por la persona encargada de
la toma y control de los datos.
3.3 Número de pasos requeridos para realizar la tarea (Y3): Esta evaluación se
realizará por medio de un computador con sistema operativo Windows 10, que
permite grabar la pantalla y el audio, y así poder analizar, visualizar y tener mayor
precisión en el número de pasos que realiza el usuario al interactuar con las
plataformas.
3.4 Éxito de la tarea (Y4): Para esta variable se considerará un tiempo límite de 4
min para concluir la prueba, si el participante no lo logra realizar cada tarea en
este tiempo se determina que no tuvo éxito.

VARIABLE FORMA DE MEDIDA ESCALA DE MEDICIÓN

Número de errores Números enteros Discreta
Tiempo en realizar la Números reales Continua
prueba
Número de pasos Números enteros Discreta
Éxito de la tarea No= 0 Si =1 Nominal

3.4 Nivel de satisfacción del usuario: esta variable es una respuesta emocional o
cognitiva dada por diversos factores, ya sea por el juicio evaluativo del rendimiento
de la plataforma y la experiencia personal al momento de interactuar con la
plataforma. En este sentido, se evaluará por medio del método SUS,la cual
consiste en 10 preguntas, cada una de ellas puede ser puntada de 1 a 5, donde 1
significa total desacuerdo y 5 total acuerdo, de la siguiente manera:

Escala de SUS para tarea en la página de la UANL 1 2 3 4 5

Creo que usaría esta página frecuentemente.
Encuentro esta página innecesariamente compleja.
Creo que la página fue fácil de usar.
Creo que necesitaría ayuda de una persona con
conocimientos técnicos para usar esta página.
Las funciones de esta página están bien integradas.
Creo que la página es muy inconsistente.
Imagino que la mayoría de la gente aprendería a
usar esta página muy rápido.
Encuentro que la página es muy difícil de usar.
Me siento confiado al usar esta página.
Necesité aprender muchas cosas antes de ser
capaz de usar esta página.

Escala de SUS para tarea en la página de la UIS 1 2 3 4 5

Creo que usaría esta página frecuentemente.
Encuentro esta página innecesariamente compleja.
Creo que la página fue fácil de usar.
Creo que necesitaría ayuda de una persona con
conocimientos técnicos para usar esta página.
Las funciones de esta página están bien integradas.
Creo que la página es muy inconsistente.
Imagino que la mayoría de la gente aprendería a
usar esta página muy rápido.
Encuentro que la página es muy difícil de usar.
Me siento confiado al usar esta página.
Necesité aprender muchas cosas antes de ser
capaz de usar esta página.

Auto informadas o abiertas

UIS UANL

¿Cuáles considera usted que son

las principales fallas de las
plataformas utilizadas para
desarrollar el procedimiento?

¿Cómo cree usted que podrían

mejorarse?
 4. Recursos:
A continuación, se presentan los equipos necesarios para la realización de la
prueba especificando su uso para la misma:

IMAGEN EQUIPO DESCRIPCIÓN

Computador portátil
con software de
MSI GP62 2QD captura de imágenes
y sonido
(Windows 10)

COMPUTADOR HP Computador portátil

WINDOWS 7 para las encuestas y
PROBOOK 440S resultados

Plataforma en la cual
PLATAFORMA UIS se ejecutan las
tareas

Plataforma en la cual
PLATAFORMA
se ejecutan las
UANL
tareas
 Celular para llevar el
HUAWEI P30 LITE registro de vídeo de
las pruebas.

Cronómetro para
SAMSUNG J5
llevar registro de
METAL
tiempo.

Dispositivo
apuntador utilizado
mouse para facilitar el
manejo de
un entorno gráfico.

5. Preparación de la evaluación

La prueba se llevará a cabo en un salón de la Escuela de Diseño Industrial de la

Universidad Industrial de Santander, donde solo estarán presentes los
evaluadores y el participante, durante el desarrollo de la evaluación, el participante
estará en postura sedente en una silla con espaldar frente a un escritorio y un
equipo de cómputo portátil, en el cual desarrollará las tareas por medio del teclado
y el ratón.
Además los evaluadores deben llevar impreso consigo el discurso de introducción,
tabla de registro con datos del participante (edad, nivel académico, promedio
ponderado y teléfono para futuras interacciones), consentimiento informado,
(todos los documentos anteriormente nombrados se encuentran adjuntos a este
documento, anexos 1, 2 y 3) y demás herramientas mencionadas en el anterior
punto.
Para la realización de la prueba será necesario contar con 3 evaluadores las
tareas a las cuales estará a cargo cada uno se deben repartir previo a la prueba
de la siguiente manera.
 1. Evaluador 1: Realiza la lectura del discurso e indicaciones de tareas.
2. Evaluador 2: Realiza grabación de la prueba desde el costado lateral
derecho del participante.
3. Evaluador 3: Cronometra la tarea desde que el evaluador 1 finaliza las
indicaciones de la prueba.

6. Ejecución de la evaluación
Para la evaluación se tendrá un espacio de máximo 4 minutos por tarea que
realice el participante, el uso del computador MSI y la grabación de la pantalla de
este equipo, 2 evaluaciones por medio de la escala de SUS (una por cada tarea),
con la siguiente metodología:
1) El participante ingresa al salón, se ubica en el espacio establecido para la
prueba.
2) El evaluador 1 da una contextualización de la prueba (discurso de introducción
anexo 1) y presenta el consentimiento informado que debe ser firmado por el
participante.
3) Una vez firmado el consentimiento (anexo 2) se procederá a consignar la
información relacionada a su número de contacto en caso de futuras
interacciones (en tabla de registro, anexo 3).
4) Se termina de dar las indicaciones de la prueba y el evaluador 1 inicia la
grabación de la pantalla.
5) Se inicia la prueba y el segundo evaluador acciona el cronómetro.
6) El tercer evaluador empieza la grabación general de la prueba desde el costado
lateral derecho del participante.
7) Terminada la prueba, se cancela la grabación de pantalla, grabación general
toma de tiempo.
8) El participante cambia de equipo para realizar el autorreporte por medio de una
encuesta de satisfacción.
Nota: el enlace de la encuesta de satisfacción es: si en dado caso no se puede
presentar la encuesta de manera online los evaluadores proporcionarán un
formato físico (Anexo 4)
De esta manera se da por finalizada la toma de datos.

7. Recolección de datos
Con el fin de analizar los datos recolectados, se analizarán los videos
audiovisuales de cada participante grabados con el computador portátil MSI,
obteniendo el tiempo en el que ejecuta la prueba en cada plataforma y
comparándolo con los datos de tiempo tomado por el evaluador 2, así como los
comentarios y dudas. También se analizarán los datos de manera descriptiva y se
simplificarán mediante Excel en la siguiente tabla:

Tarea 1 y 2
Eficiencia Eficacia
# Errores Éxito de tarea # Pasos % de tareas
correctas
P1
P2
P3

Falta insertar la referencia de la escala SUS

añadir enlace de la encuesta

falta hacer anexo de registro de participantes

y falta hacer anexo de discurso de introducción