Documentos de Académico
Documentos de Profesional
Documentos de Cultura
las métricas
de vanidad
¿Cómo descubrir las ideas
accionables de un LMS?
G
DE EMPRESAS básicas de aprendizaje
racias a los nuevos desarrollos en la tecnología para el
aprendizaje, el capturar datos sobre los estudiantes -
muchos datos - es más fácil que nunca. En teoría, toda
esta información obtenida por medio de su sistema de gestión
de aprendizaje (LMS) debe brindarle ideas valiosas que le
ayudarán a su empresa a entender los éxitos y las ineficiencias Fuente: Grupo Brandon Hall Medición del aprendizaje encuesta 2016. Usado con permiso.
20%
reales sobre la salud y efectividad de sus programas de SOLO
Son capaces de analizar
la mayoría de sus
capacitación empresarial. Información reciente del grupo APROXIMADAMENTE
datos de una forma
EL DE EMPRESAS
Brandon Hall encontró que menos del 25% de las empresas significativa
capturan información más allá de las métricas bastante básicas,
y sólo cerca del 20% de las empresas son capaces de analizar la
mayoría de la información de una forma significativa. Es tiempo
de ver más allá de las métricas básicas y recolectar la información
que necesita para tomar decisiones sobre su estrategia de Fuente: Brandon Hall Group Learning Analytics 2017 Survey. Used with permission.
L
as métricas de vanidad son números que puede se vean
bien en papel, pero no necesariamente ayudan a desarrollar
perspectivas críticas. Son esencialmente inútiles en lo que
se refiere a determinar áreas de mejora o alcanzar resultados de
negocios positivos.
La antítesis a las métricas de vanidad son conocidas como
métricas accionables. Las métricas accionables son números de
los cuales perspectivas valiosas pueden ser obtenidas. Este tipo
de números le ayudarán a impulsar su negocio ya que brindan
datos irrefutables que se traducen a un entendimiento de
donde sus esfuerzos de aprendizaje necesitan ser redefinidos.
Como resultado, menos tiempo es usado en actividades no
productivas e ineficientes, y más tiempo puede ser utilizado
en administrar las actividades que impulsan compromiso y
resultados empresariales.
2
Copyright 2017. Todos los derechos reservados. Para contactar a Docebo, porfavor visite: www.docebo.com
NIVEL 1: REACCIÓN NIVEL 2: APRENDIZAJE
EL MODELO KIRKPATRICK MEDICIÓN DE LA EFECTIVIDAD DEL APRENDIZAJE
Q
Nivel en el cual los Nivel en el cual los
participantes encuentran participantes adquieren el uizás el aspecto más significativo del aprendizaje
la capacitación favorable, conocimiento, habilidades, corporativo que debe ser medido es el enlace entre
motivadora y relevante actitud, confianza y el aprendizaje y el desempeño empresarial. Para
a sus trabajos compromiso previsto, evaluar esto, necesitará entender el nivel de efectividad de sus
basado en su participación programas de capacitación.
en la capacitación
El estándar mundial más común para medir la efectividad de las
capacitaciones es conocido con el modelo Kirkpatrick. El modelo
NIVEL 3: COMPORTAMIENTO NIVEL 4: RESULTADOS Kirkpatrick es una estructura de 4 niveles que examina el valor
de las capacitaciones formales e informales. El modelo, creado
NIVEL 2 NIVEL 4 Nivel en el cual los El nivel en el cual los por el Dr. Don Kirkpatrick, es aplicado antes, durante y después
APRENDIZAJE RESULTADOS participantes aplican resultados específicos de las capacitaciones para demostrar el valor de éstas para la
lo que han aprendido ocurren como resultado de empresa.
durante la capacitación la capacitación y el paquete
NIVEL 1 NIVEL 3 cuando están de regreso de apoyo y responsabilidad Según la encuesta del grupo Brandon Hall “Medición del
REACCIÓN COMPORTAMIENTO en el trabajo aprendizaje” 2016, el 40% de las empresas no miden su
aprendizaje al nivel 4 del modelo Kirkpatrick. El 49% de los
encuestados revelaron que una de las razones por la que ellos
no están midiendo al nivel 3 o 4 del modelo Kirkpatrick es porque
no tienen las métricas apropiadas.
Fuente: Socios Kirkpatrick.
3
Copyright 2017. Todos los derechos reservados. Para contactar a Docebo, porfavor visite: www.docebo.com
En “Medición del aprendizaje 2016: un pequeño enlace al desempeño”
ENCONTRAR MÉTRICAS TASA DE USO DE LAS MÉTRICAS
por el grupo Brandon Hall, se brinda un esquema de la tasa de uso
DE APRENDIZAJE ACCIONABLE DE APRENDIZAJE
de métricas comunes de aprendizaje (resumiendo los datos de la
C
(No. 4 es la de más alta calificación) encuesta). Como por ejemplo el potencial de las métricas de vanidad
Cada modelo de negocio es diferente, y las métricas en acción, estas proveen la siguiente observación:
que le brindarán perspectivas útiles varía de empresa Finalización de cursos - 3.38
a empresa. Este reporte corto le proveerá algunos
ejemplos de métricas de vanidad comunes que las empresas Cuestionarios después del curso - 2.82 “La finalización de cursos es la métrica número
usan comúnmente para contar con esta información para sus
programas de aprendizaje, pero mantienen en mente que Encuestas de satisfacción de empleados- 2.69 uno más usada, y por un margen bastante
algunas métricas pueden ser informativas para sus propósitos amplio. Esta es claramente la métrica más fácil
únicos de negocio. Tasas de evaluación de estudiantes- 2.29
de recopilar, pero no le dice mucho a la empresa
Logro de metas empresariales - 2.19 necesariamente. Si el 98% de los estudiantes
Las métricas accionables deben típicamente ayudarle a
responder las siguientes preguntas: Calificaciones de cursos - 2.15 finaliza un curso, usted aún no tiene idea de si fue
efectivo, si les gustó, si lo recuerdan, o si le ayudará
Observaciones gerenciales - 2.13
• ¿Cómo esta información me dirige a tomar a la empresa. Las medidas más estratégicas
una acción específica? Habilidad de desempeño de nuevas tareas - 2.07
se encuentran más abajo en la lista, como la
• ¿Qué es lo que esta información me indica sobre cómo Observaciones de asesores - 1.95 efectividad de equipo o la efectividad de tiempo”.
el aprendizaje está impactando a mis empleados,
clientes, socios, etc? Incremento de productividad - 1.81
Similarmente, una métrica de vanidad común puede ser el
• ¿Es que esta información me ayuda a enlazar Efectividad de equipo - 1.81
número de usuarios registrados en su LMS. Algunos sistemas
el aprendizaje con el desempeño empresarial? cuentan el número total de usuarios registrados como usuarios
Asesoría empresarial - 1.80
activos, cuando de hecho, puede que estos usuarios no se
Habilidad de ser promovido - 1.73 hayan conectado al sistema ni realizado ninguna actividad de
aprendizaje en varios meses. Como tal, tendría mucho más
Tiempo de efectividad en un nuevo puesto - 1.71 sentido el darle seguimiento a métricas como usuarios activos y
actividad por usuario para determinar las perspectivas sobre el
Observaciones de colegas - 1.70 compromiso y efectividad de la capacitación.
Reducción de rotación de empleados - 1.67 Es tan importante como el entender de qué manera ciertas
métricas son medidas. Asegúrese de entender como la definición
Reducción de citaciones regulatorias - 1.63
de ciertas métricas puede variar entre sistemas cuando recopile
esta información.
Análisis de comportamiento - 1.57
4
Copyright 2017. Todos los derechos reservados. Para contactar a Docebo, porfavor visite: www.docebo.com
Su LMS también debe ser capaz de brindar
MEDICIÓN DEL APRENDIZAJE FORMAL E INFORMAL métricas en las actividades de aprendizaje
informal. Con Docebo, por ejemplo, las
S
egún la encuesta del 2016 del grupo Brandon Hall: actividades de aprendizaje social puede ser
Medición del aprendizaje, el 60% de las empresas no son rastreada en base a actividades en la aplicación
“efectivas en lo absoluto” en lo que se refiere a la medición de Coach & Share. Algunos ejemplos incluyen:
del aprendizaje informal (definido como “aprendizaje que se
lleva a cabo típicamente de forma imprevista, usualmente por
medio de la colaboración entre colegas y reuniones sociales”). • Reportes sobre la actividad de revisión entre colegas
Similarmente, el 52% de empresas no son “efectivas en lo
• Reportes en la actividad por canal
absoluto” al medir el aprendizaje experiencial (definido como
“capacitaciones en el trabajo, aprender al hacer, prueba y error, • “Me gusta” y “No me gusta” de respuestas
y observación”).
• Los mejores expertos por su calidad de respuestas
Un LMS puede ayudarle a rastrear el número de • Respuestas marcadas como “mejores respuestas”
actividades del estudiante. Las métricas • Calificación a contribuidores de cursos
del aprendizaje formal y reportes incluyen: (contenido generado por usuarios)
• Actividad de intercambio
• Finalización de cursos
• Número de vistas al contenido
• Fechas de inscripción a cursos
• Tiempo total empleado en cursos y planes de aprendizaje VIENDO MÁS ALLÁ DEL LMS
• Los cursos más vistos
P
• Notas de exámenes or sí solo, su LMS le puede brindar mucha información
valiosa. Esta información se vuelve más valiosa cuando
• Sesiones de cursos de capacitaciones dirigidas por instructores
es combinada con la información obtenida de otras
• Datos de transacciones de comercio electrónico herramientas, como su CRM, software de RRHH, herramientas de
inteligencia de negocio, y más. El analizar las métricas proveídas
• Reportes de planes de aprendizaje
por su LMS en conjunto con la información de otros sistemas le
• Reportes de actividad de usuarios puede ayudar a llenar las brechas en información para poder
enlazar el aprendizaje con el desempeño empresarial, y le puede
• Reportes de Audit trail
ayudar a determinar si está recibiendo rentabilidad sobre su
• Reportes de gamificación (p.ej. Insignias y concursos) inversión en la tecnología para el aprendizaje (además de otras
perspectivas). Por ejemplo, una integración entre su LMS y
• Reportes de certificaciones
Salesforce le brindará visibilidad sobre cómo su equipo de ventas
• Reportes de actividades externas está interactuando con su contenido de aprendizaje, además de
como la tasa de desempeño o adopción cambia para sus clientes
• Reportes personalizados basados en sus necesidades únicas
y socios después del compromiso con la capacitación.
de aprendizaje
L
os datos pueden mejorar las perspectivas que le ayudarán ¿Cuáles son los principales impulsores detrás
a reducir la rotación de empleados, mejorar la autonomía de su enfoque empresarial para la medición
del estudiante, e incrementar la productividad - y esto es del aprendizaje?
nada más la superficie.
6
Copyright 2017. Todos los derechos reservados. Para contactar a Docebo, porfavor visite: www.docebo.com