Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Resumen
Las tecnologas utilizadas en los procesos de aprendizaje implican el registro de todas las actividades realizadas. Estos datos
se pueden aprovechar para la evaluacin de estudiantes, profesores y de los propios procesos. Sin embargo, aunque existe
esta gran cantidad de datos, sigue siendo difcil para los profesores (y otras partes interesadas) verificar hiptesis, extraer
conclusiones o tomar decisiones basadas en hechos o situaciones detectadas. Se presenta un modelo de anlisis de datos
educativos basado en analtica visual, analtica del aprendizaje y analtica acadmica. Por medio de una herramienta de
software permite realizar anlisis de datos exploratorios y confirmatorios, en interaccin con la informacin obtenida de un
sistema tpico de gestin de aprendizaje. El objetivo principal es el descubrimiento de nuevo conocimiento sobre el proceso
de aprendizaje educativo que, a su vez, posibilite la mejora de ste.
Palabras clave
Minera de datos educativa, E-learning, Realimentacin, Analtica del aprendizaje, Anlisis de redes sociales, visualizacin,
Analtica visual.
Abstract
Current technologies used in e-learning processes require the logging of all activities performed. These data can be used
in the assessment of students, instructors and the processes themselves. However, although this wealth of data exists, it
is still difficult for those who teach (and interested stakeholders) to verify a hypothesis, extract conclusions, or make deci-
sions based on the facts or situations that are discovered. This paper introduces an educational data analysis model based
on visual analytics, learning analytics and academic analytics and using a software tool that allows performing confirma-
tory and exploratory data analysis through interaction with the information gathered from a typical Learning Management
System. The main goal is to enable the discovery of knowledge on the specific learning process that, in turn, will permit its
improvement.
Keywords
Educational data mining, Feedback, E-learning, Learning analytics, Inferring social network, Visualization, Visual analytics.
Gmez-Aguilar, Diego-Alonso; Garca-Pealvo, Francisco-Jos; Thern, Roberto (2014). Analtica visual en e-learning.
El profesional de la informacin, mayo-junio, v. 23, n. 3, pp. 236-245.
http://dx.doi.org/10.3145/epi.2014.may.03
1. Definicin de un modelo
de analtica visual en
e-learning
Al igual que con la mayora de las
reas de investigacin, la termi-
nologa que identifica y diferencia
EDM, AA y LA no es tan homog-
nea como sera deseable (Van-
Barneveld; Arnold; Campbell,
2012), sin embargo, las tres reas
tienen en comn, adems del ob-
jetivo de mejorar y comprender
el proceso de aprendizaje, la ne-
cesidad de una gran cantidad de
observaciones de dicho proceso.
Por otro lado, Siemens et al. plan-
tean que las comunidades de LA
y EDM tienen un solapamiento
Figura 1. Modelo terico de la visualizacin analtica en e-learning considerable (tanto en trmi-
nos de investigacin como en
sus investigadores), y que ambas
Las herramientas de VA hacen posible obtener un modelo comunidades creen firmemente en la realizacin de inves-
mental de los datos complejos y nuevo conocimiento (Keim tigaciones y aplicaciones que beneficien a los estudiantes,
et al., 2008; Thomas; Cook, 2005). El objetivo es ayudar a as como la mejora de las ciencias del aprendizaje; adems
los usuarios a descubrir las anomalas inesperadas y sor- plantean algunas diferencias entre estas comunidades (Sie-
prendentes, cambios de patrones y relaciones que luego mens; Baker, 2012); Siemens et al., 2011).
son evaluadas para desarrollar nuevas ideas (Cook; Earns-
Las tcnicas, mtodos y objetivos que diferencian e identifi-
haw; Stasko, 2007). En los ltimos aos, han sido aplicadas
can la LA de la EDM se encuentran mencionados y aplicados
algunas de las tcnicas basadas en el anlisis visual: Gibbs,
en diversas reas de la ciencia dentro del alcance de la VA,
Olexa y Bernas (2006) presentan un software que represen-
por tanto realizar una aplicacin de VA en el rea de la edu-
ta el esquema temporal de las relaciones en los debates;
cacin, ms que ser excluyente a la AA y a LA, las comple-
De-Laat utiliza mtodos del anlisis de redes sociales para
menta. La notable interseccin de estas reas y sus diferen-
estudiar la naturaleza de los patrones de interaccin dentro
cias da lugar al presente modelo de visualizacin analtica
de una comunidad de aprendizaje en red (De-Laat, 2007;
en e-learning (en ingls, visual e-learning analytics, VeLA).
Haythornthwaite; De-Laat, 2010). Por ltimo y ms cerca-
El presente trabajo considera la EDM y SNA como parte de
no al presente trabajo, Govaerts et al. (2012) presentan en
los mtodos, tcnicas e instrumentos tecnolgicos que se
paralelo un histograma y un diagrama de barras que eviden-
utilizan en VeLA. En la figura 1 se muestra como las reas de
cian las diferencias entre los datos.
LA y AA confluyen en un conjunto de objetivos e instrumen-
En el presente trabajo de investigacin se pretende mejorar tos tecnolgicos y cmo el rea de VeLA complementara y
la eficiencia del proceso de anlisis de aprendizaje. El obje- enriquecera el proceso de AA y LA (Chen et al., 2006; Keim;
tivo es proponer y validar un modelo que tome en cuenta Mansmann; Thomas, 2010; Keim; Zhang, 2011; Von-Lan-
tcnicas de analtica visual y la informacin existente en un desberger; Grner; Schreck, 2009), lo que se plantea como
LMS, con el fin de mejorar el proceso de LA y AA, sin olvidar contribucin del presente trabajo.
asegurar el xito y desarrollo de la asignatura. Para ello, a
El modelo de la figura 1 (VeLA) se basa en el modelo de re-
manera de comprobacin del modelo, se ha implantado un
ferencia de LA de Chatti et al. (2012), la teora del ciclo de
sistema y aplicado sobre un LMS para validar su expresivi-
LA de Clow (2012) y el proceso de la exploracin visual de
dad.
datos de Keim (Keim et al., 2010; Keim; Zhang, 2011), y ade-
ms toma en cuenta las restricciones y elementos del mo-
delo de dimensiones crticas de la LA de Greller y Drachsler
Tabla 1. Abreviaturas utilizadas en este trabajo (2012). Por tanto, la aportacin terica principal de la utili-
AA Analtica acadmica Academic analytics zacin de la VA en el rea de la educacin es que el proce-
LA Analtica del aprendizaje Learning analytics so de VeLA combina mtodos de analticas automticas as
como visuales exploratorias, que con una alta interaccin
VA Analtica visual Visual analytics
disponible para el usuario adoptan la finalidad de obtener
EDM Minera de datos educativos Educational data mining
nuevo conocimiento de los datos educativos.
LMS Sistema de gestin de aprendizaje Learning management system
Ben Shneiderman (1996) propuso un paradigma de la bs-
VeLA Visualizacin analtica en e-learning Visual e-learning analytics
queda de la informacin que ha sido extendido por Daniel
Keim et al. (2008) para dar ms capacidad de anlisis en el Anlisis de redes sociales
bucle de antes y despus de la generacin de representa- - Realizar la comparacin de la estructura jerrquica de la
ciones visuales interactivas. Con stas, el usuario explora los plataforma y las relaciones que se crean entre las perso-
datos para ayudarse a extraer modelos abstractos a partir nas (foros y contribuyentes compartidos entre foros).
de conjuntos de datos que son demasiado grandes o dema- - Definir una herramienta grfica social que brinde la posi-
siado complejos para ser analizados de una manera directa, bilidad de encontrar la relacin directamente proporcio-
de tal forma que las preguntas del usuario se respondan y nal del desempeo de los estudiantes con la frecuencia de
se creen durante el ciclo de exploracin. Asimismo el pa- la lectura en los foros y/o recursos.
radigma de Keim, aplicado a la analtica educativa, puede - Ofrecer la posibilidad de ocultar elementos de la red so-
extenderse a un paso final, la intervencin, proporcionando cial a fin de ver ms claramente la estructura y la relacin
al ciclo analtico una retroalimentacin, quedando de la si-
de los elementos que interesen.
guiente forma:
Analyze first; Show the important; Zoom, filter and Mtricas estadsticas
analyze further; Details on demand, Intervention - Definir un sistema que permita mltiple seleccin de sub-
Este ciclo est representado en la figura 2 en la parte central conjuntos y/o el uso de diferentes categoras personali-
del proceso. Se muestra una visin general abstracta de las zadas de actividades, posibilitando diferenciarlas por su
diferentes etapas (representadas a travs de crculos) y sus coloracin con el objetivo de la identificacin de patrones.
transiciones (flechas) en el proceso de VeLA. Dentro de cada Adems de permitir generar un archivo con ellas posibili-
etapa se encuentran representadas las dos reas de la ana- tando la importacin y exportacin.
ltica en la educacin, la AA y LA, y su respectiva descripcin - Soportar mtodos de interaccin, como el filtro de bsque-
en cada etapa. Como se aprecia en el diagrama, el modelo da, ocultacin y reordenacin de las diferentes mtricas.
contempla distintos perfiles de usuario, la diferencia entre Con el fin de comprobar la utilidad y expresividad del mode-
stos es el objetivo y, por tanto, el tipo de informacin de lo y su aplicabilidad se ha implementado un sistema de soft-
su inters. ware de VeLA, como resultado de dos ciclos de investigacin-
Dado que el tipo de dato que se maneja para el anlisis tie- accin, en febrero de 2013 y 2014, basados en los trabajos
ne una temporalidad variable, una socializacin y una alta mencionados y en el modelo anteriormente descrito.
cantidad de actividades sin restriccin de tiempo o espacio, Estos ciclos tuvieron como realimentacin el cuestionario
este trabajo, con el fin de mejorar el reconocimiento de pa- realizado a los estudiantes del Mster Universitario en TICs
trones, aborda especficamente las siguientes necesidades y en Educacin de la Universidad de Salamanca (ver resultado
desafos en el proceso de VeLA: de las encuestas en figura 3). Este cuestionario consta de 30
preguntas sobre usabilidad, practicidad y eficiencia del siste-
Temporalidad
ma, expuesto a los 35 participantes.
- Analizar el contenido del curso de e-learning a travs del
tiempo y no slo un curso, sino tambin un campus o toda 2. Sistema de VeLA
una universidad. La propuesta est dedicada a la solucin del problema de
- Definir una representacin temporal compacta, a fin de anlisis de esa gran cantidad de informacin. El enfoque
encontrar patrones (en meses,
horas o semanas), a travs de
interaccin.
- Personalizar el anlisis por agru-
pacin de actividades, tiempo,
persona especfica y perfil.
Anlisis del contenido semn-
tico
- Determinar un diseo nube de
etiquetas que represente su evo-
lucin en el tiempo, en mltiples
niveles de detalle, equilibrando
as la coherencia semntica, de
contenido y la estabilidad espa-
cial de la visualizacin.
- Plantear un diseo compacto
para la legibilidad del tag cloud
de forma que la importancia o
la frecuencia y la evolucin en el
tiempo de una etiqueta se codi-
fiquen directamente en espacio
del tamao de la palabra. Figura 2. Proceso de analtica visual en e-learning
3. Conclusiones
Figura 8. Representacin de las coordenadas paralelas. Se representa una vista global de un campus
Se han aplicado cuatro repre- completo de una universidad. Ntese a simple vista que con la ayuda de la transparencia en las lneas y
sentaciones para la informacin las tonalidades, se perciben las zonas donde se acumula mayor frecuencia (indicadas con crculos negros
sobre la imagen), ya sea de foros de un curso (segunda columna) o de posts de un usuario especfico
recuperada de los LMS en el (quinta columna) o de discusiones de un foro (tercera columna) a simple vista y sin haber realizado ninguna
sistema de VeLA. En concreto, interaccin.
(por lo general con puntos adicionales por su intervencin). 29, n. 2, pp. 272-292.
Sin embargo, es difcil medir de manera eficaz esta interac- http://dx.doi.org/10.2307/20159033
cin, las visualizaciones de la red social son muy tiles en
Bateman, Scott; Gutwin, Carl; Nacenta, Miguel, (2008).
este sentido, proporcionando informacin sobre cules son
Seeing things in the clouds: the effect of visual features
los usuarios ms activos, las discusiones ms importantes,
on tag cloud selections. En: Proceedings of the nineteenth
los foros ms relevantes y el nivel de participacin en cada
ACM conference on Hypertext and hypermedia (Pittsburgh,
uno de ellos. En la visualizacin propuesta de la red social
USA), pp. 193-202.
se representa la distribucin de los estudiantes (figura 7 a
http://hci.usask.ca/publications/2008/fp039-bateman.pdf
la derecha) en funcin de la relacin entre la frecuencia de
http://dx.doi.org/10.1145/1379092.1379130
lectura y escritura en foros y recursos, proporcionando una
prediccin de su rendimiento y la posible nota del curso. Berlanga, Adriana J.; Pealvo, Francisco G.; Sloep, Peter B.,
Obviamente cuanto mayor sea la actividad global que se (2010). Towards e-learning 2.0 university. Interactive lear-
realice ms precisa ser la prediccin, posibilitando definir ning environments, v. 18, n. 3, pp. 199-201.
estrategias para mejorar la participacin de los estudiantes http://dx.doi.org/10.1080/10494820.2010.500498
teniendo en cuenta las experiencias anteriores y, por tanto,
Bongshin, Lee; Riche, Nathalie-Henry; Karlson, Amy K.;
su rendimiento.
Carpendale, Sheelagh (2010). SparkClouds: visualizing
Gracias a estos conocimientos, la aplicacin de tcnicas de trends in tag clouds. En: IEEE Transactions on Visualization
VA, que combina la representacin visual con una interac- and Computer Graphics, v. 16, n. 6, pp. 1182-1189.
cin sobre la visualizacin, en el rea de LA (como se descri- http://research.microsoft.com/EN-US/UM/REDMOND/
be en el modelo) ayuda sin duda a mejorar los cursos, pro- GROUPS/cue/publications/TVCG2010-SparkClouds.pdf
porciona informacin que de otro modo no sera conocida y http://dx.doi.org/10.1109/TVCG.2010.194
facilita la toma de decisiones sobre cmo y dnde desplegar
Brown, John-Seely; Adler, Richard P. (2008). Minds on fire:
los recursos, permitiendo la optimizacin de los procesos de
open education, the long tail, and learning 2.0. Educause
aprendizaje en la materia.
quarterly, v. 42, n. 6, pp. 16-32.
4. Agradecimientos http://www.educause.edu/ero/article/minds-fire-open-
education-long-tail-and-learning-20
Los autores agradecen el apoyo del Ministerio de Cien-
cia e Innovacin (proyectos FFI2010-16234 y TIN2010- Chatti, Mohamed-Amine; Dyckhoff, Anna-Lea; Schroeder,
21695-C02-01) y la Consejera de Educacin de la Junta de Ulrik; Ths, Hendrik (2012). A reference model for learning
Castilla y Len (proyecto SA294A12-2). analytics. International journal of technology enhanced
learning, v. 4, n. 5/6, pp. 318-331.
5. Bibliografa http://learntech.rwth-aachen.de/dl1139%7CCDST12_IJTEL.pdf
http://dx.doi.org/10.1504/ijtel.2012.051815
Agudo-Peregrina, ngel F.; Hernndez-Garca, ngel;
Iglesias-Pradas, Santiago, (2012). Predicting academic Chen, Chaomei; Ibekwe-SanJuan, Fidelia; SanJuan, Eric;
performance with learning analytics in virtual learning en- Weaver, Chris (2006). Visual analysis of conflicting opi-
vironments: a comparative study of three interaction clas- nions. En: IEEE Symposium on Visual Analytics Science And
sifications. En: International Symposium on Computers in Technology, pp. 59-66.
Education (SIIE), 29-31 Oct., pp. 1-6. http://fidelia1.free.fr/chen.pdf
http://dx.doi.org/10.1109/VAST.2006.261431
Agudo-Peregrina, ngel F.; Iglesias-Pradas, Santiago;
Conde-Gonzlez, Miguel ngel; Hernndez-Garca, ngel, Clow, Doug, (2012). The learning analytics cycle: closing
(2014). Can we predict success from log data in VLEs? Clas- the loop effectively. En: Proceedings of the 2nd Internatio-
sification of interactions for learning analytics and their re- nal Conference on Learning Analytics and Knowledge (Van-
lation with performance in VLE-supported F2F and online couver, Canada), pp. 134-138.
learning. Computers in human behavior, v. 31, pp. 542-550. http://oro.open.ac.uk/34330
http://dx.doi.org/10.1016/j.chb.2013.05.031 http://dx.doi.org/10.1145/2330601.2330636
Baker, Ryan S.J.D.; Yacef, Kalina, (2009). The state of edu- Cook, Kris; Earnshaw, Rae; Stasko, John (2007). Guest edi-
cational data mining in 2009: a review and future visions. tors introduction: discovering the unexpected. Computer
Journal of educational data mining, v. 1, n. 1. graphics and applications, Sep-Oct, v. 27, n. 5, pp. 15-19.
http://educationaldatamining.org/JEDM/index.php/JEDM/ http://dx.doi.org/10.1109/MCG.2007.126
article/viewFile/8/2
De-Laat, Maarten; Lally, Vic; Lipponen, Lasse; Simons,
Bakharia, Aneesha; Dawson, Shane, (2011). SNAPP: a Robert-Jan (2007). Investigating patterns of interaction in
birds-eye view of temporal participant interaction. En: networked learning and computer-supported collaborative
Proceedings of the 1st International Conference on Learning learning: a role for social network analysis. International
Analytics and Knowledge (Alberta, Canada), pp. 168-173. journal of computer-supported collaborative learning, v. 2,
http://dx.doi.org/10.1145/2090116.2090144 n. 1, pp. 87-103.
http://dx.doi.org/10.1007/s11412-007-9006-4
Barry, Bruce; Fulmer, Ingrid-Smithey (2004). The medium
and the message: the adaptive use of communication media Gibbs, William J.; Olexa, Vladimir; Bernas, Ronan S. (2006).
in dyadic influence. The academy of management review, v. A visualization tool for managing and studying online com-
munications. Journal of educational technology & society, Greller, Wolfgang; Drachsler, Hendrik (2012). Translating
v. 9, n. 3, pp. 232-243. learning into numbers: a generic framework for learning
http://www.ifets.info/journals/9_3/20.pdf analytics. Journal of educational technology & society, v.
15, n. 3, pp. 4257.
Goldstein, Philip J.; Katz, Richard N. (2005). Academic
http://www.ifets.info/journals/15_3/4.pdf
analytics: the uses of management information and tech-
nology in higher education. Educause Center for Applied Hassan-Montero, Yusef; Herrero-Solana, Victor (2006). Im-
Research, v. 8. proving tag-clouds as visual information retrieval interfaces.
https://net.educause.edu/ir/library/pdf/ers0508/rs/ En: I International Conference on Multidisciplinary Informa-
ers0508w.pdf tion Sciences and Technologies (Mrida, Spain), pp. 25-28.
http://www.yusef.es/improving_tagclouds.pdf
Gmez-Aguilar, Diego-Alonso; Conde-Gonzalez, Miguel-
ngel; Thern, Roberto; Garca-Pealvo, Francisco-Jos Haythornthwaite, Caroline; De-Laat, Maarten (2010). So-
(2011). Reveling the evolution of semantic content through cial networks and learning networks: using social network
visual snalysis. En: 11th IEEE International Conference on perspectives to understand social learning. En: Proceedings
Advanced Learning Technologies (ICALT) (6-8 July 2011), pp. of the 7th International Conference on Networked Learning
450-454. 2010 (2010).
http://dx.doi.org/10.1109/ICALT.2011.141 http://www.lancaster.ac.uk/fss/organisations/netlc/past/
nlc2010/abstracts/PDFs/Haythornwaite.pdf
Gmez-Aguilar, Diego-Alonso; Garca-Pealvo, Francisco-
Jos; Thern, Roberto, (2013a). Evaluacin visual de las Inselberg, Alfred; Dimsdale, Bernard, (1990). Parallel coor-
relaciones entre participacin de los estudiantes y sus resul- dinates: a tool for visualizing multi-dimensional geometry.
tados en entornos de e-learning. En: XV Simposio Interna- En: Proceedings of the First IEEE Conference on Visualiza-
cional de Tecnologas de la Informacin y las Comunicacio- tion, (23-26 Oct. 1990), pp. 361-378.
nes en la Educacin Conjuntamente con el Congreso Espaol http://www.ifs.tuwien.ac.at/~mlanzenberger/teaching/ps/
de Informtica (CEDI 2013). ISBN: 978 84 695 8362 3 ws04/stuff/auth/00146402.pdf?origin=publication_detail
http://grialdspace.usal.es:443/handle/grial/270 http://dx.doi.org/10.1109/VISUAL.1990.146402
Gmez-Aguilar, Diego-Alonso; Garca-Pealvo, Francisco- Keim, Daniel; Andrienko, Gennady; Fekete, Jean-Daniel;
Jos; Thern, Roberto (2013b). Tap into visual analysis of Grg, Carsten; Kohlhammer, Jrn; Melanon, Guy (2008).
the customization of grouping of activities in e-learning. En: Visual analytics: definition, process, and challenges. En:
Proceedings of the First International Conference on Techno- Kerren, Andreas; Stasko, John; Fekete, Jean-Daniel; North,
logical Ecosystem for Enhancing Multiculturality (Salaman- Chris (eds.) Information visualization, Springer Berlin Heide-
ca, Spain), pp. 253-259. lberg, pp. 154-175. ISBN: 978 3 540 70955 8
http://dx.doi.org/10.1145/2536536.2536575 http://hal-lirmm.ccsd.cnrs.fr/docs/00/27/27/79/PDF/
VAChapter_final.pdf
Gmez-Aguilar, Diego-Alonso; Thern, Roberto; Garca- http://dx.doi.org/10.1007/978-3-540-70956-5_7
Pealvo, Francisco-Jos (2009). Semantic spiral timelines
used as support for e-learning. Jornal of universal compu- Keim, Daniel A.; Kohlhammer, Jrn; Ellis, Geoffrey; Mans-
ter science (j-jucs), April, v. 15, n. 7, pp. 1526-1545. mann, Florian (2010). Mastering the Information age-sol-
http://dx.doi.org/10.3217/jucs-015-07-1526 ving problems with visual analytics. Florian Mansmann.
http://www.vismaster.eu/wp-content/uploads/2010/11/
Gmez-Aguilar, Diego-Alonso; Thern, Roberto; Garca- VisMaster-book-lowres.pdf
Pealvo, Francisco-Jos (2013). Reveal the relationships
among students participation and their outcomes on e-lear- Keim, Daniel A.; Mansmann, Florian; Thomas, Jim (2010).
ning environments: case study. En: IEEE 13th International Visual analytics: how much visualization and how much
Conference on Advanced Learning Technologies (ICALT) (15- analytics?. SIGKDD Explorations newsletter, v. 11, n. 2, pp. 5-8.
18 July 2013), pp. 443-447. http://dx.doi.org/10.1145/1809400.1809403
http://dx.doi.org/10.1109/ICALT.2013.136 Keim, Daniel; Zhang, Leishi (2011). Solving problems with
Gonzlez-Teruel, Aurora; Andreu-Ramos, Carolina (2013). visual analytics: challenges and applications. En: Proceedings
Investigacin del comportamiento informacional a travs of the 11th International Conference on Knowledge Manage-
del anlisis de redes sociales. El Profesional de la Informa- ment and Knowledge Technologies (Graz, Austria), pp. 1-4.
cin, v. 22, n. 6, pp. 522 - 528. http://bib.dbvis.de/uploadedFiles/343.pdf
http://eprints.rclis.org/20686/1/Gonza%CC%81lez-Teruel_ http://dx.doi.org/10.1145/2024288.2024290
Andreu-Ramos_2013.pdf Lipponen, Lasse; Rahikainen, Marjaana; Lallimo, Jiri; Hakka-
http://dx.doi.org/10.3145/epi.2013.nov.04 rainen, Kai (2003). Patterns of participation and discourse
Govaerts, Sten; Verbert, Katrien; Duval, Erik; Pardo, Abe- in elementary students computer-supported collaborative
lardo (2012). The student activity meter for awareness and learning. Learning and instruction, v. 13, n. 5, pp. 487-509.
self-reflection. En: CHI12 Extended Abstracts on Human Fac- http://dx.doi.org/10.1016/S0959-4752(02)00042-7
tors in Computing Systems (Austin, Texas, USA), pp. 869-884. Long, Phil; Siemens, George (2011). Penetrating the fog:
https://lirias.kuleuven.be/bitstream/123456789/343059/1/ analytics in learning and education. Educause review, v. 46,
sigchi2012-casestudy.pdf n. 5, pp. 30-32.
http://dx.doi.org/10.1145/2212776.2212860 https://net.educause.edu/ir/library/pdf/ERM1151.pdf
Modjeska, David (1997). Navigation in electronic worlds: analytics. National Visualization and Analytics Center.
research review for depth oral Exam. University of Toronto. http://vis.pnnl.gov/pdf/RD_Agenda_VisualAnalytics.pdf
Department of Computer Science.
Thomas, James J.; Cook, Kristin A. (2006). A visual analytics agen-
Romero, Cristbal; Ventura, Sebastin (2010). Educational da. Computer graphics and applications, v. 26, n. 1, pp. 10-13.
data mining: a review of the state of the art. IEEE Transac- http://dx.doi.org/10.1109/MCG.2006.5
tions on Systems, Man, and Cybernetics. Part C: applications Van-Barneveld, Angela; Arnold, Kimberly, E.; Campbell,
and reviews, v. 40, n. 6, pp. 601-618. John, P. (2012). Analytics in higher education: establishing
http://dx.doi.org/10.1109/TSMCC.2010.2053532 a common language.
Shneiderman, Ben (1996). The eyes have it: a task by data http://qa.itap.purdue.edu/learning/docs/research/ELI3026.pdf
type taxonomy for information visualizations. En: Procee- Van-Ham, Frank; Schulz, Hans-Jrg; Dimicco, Joan M.
dings IEEE Symposium on Visual Languajes, pp. 336-343. (2009). Honeycomb: visual analysis of large scale social
http://dx.doi.org/10.1109/VL.1996.545307 networks. En: Proceedings of the 12th IFIP TC 13 Interna-
Siemens, George; Baker, Ryan S.J.d. (2012). Learning tional Conference on Human-Computer Interaction: Part II
analytics and educational data mining: towards communi- (Uppsala, Sweden), pp. 429-442.
cation and collaboration. En: Proceedings of the 2nd Inter- http://www.informatik.uni-rostock.de/~hs162/pdf/
national Conference on Learning Analytics and Knowledge interactpaper.pdf
(Vancouver, Canada), pp. 252-254. http://dx.doi.org/10.1007/978-3-642-03658-3_47
http://users.wpi.edu/~rsbaker/LAKs%20reformatting%20v2.pdf Vigas, Fernanda B.; Donath, Judith, (2004). Social net-
http://dx.doi.org/10.1145/2330601.2330661 work visualization: can we go beyond the graph. En: Work-
Siemens, George; Gasevic, Dragan; Haythornthwaite, Caroli- shop on Social Networks for Design and Analysis: Using Net-
ne; Dawson, Shane; Buckingham Shum, Simon; Ferguson, Re- work Information in CSCW 04 (Chicago, USA), pp. 6-10.
becca; Duval, Erik; Verbert, Katrien; Baker, Ryan S.J.d. (2011). http://wiki.commres.org/pds/CommunicationTheory/So-
Open learning analytics: an integrated & modularized platform. cialNetworkVisualization.pdf
Proposal to design, implement and evaluate an open platform Von-Landesberger, Tatiana; Grner, Melanie; Schreck, To-
to integrate heterogeneous learning analytics techniques. bias (2009). Visual analysis of graphs with multiple connec-
http://solaresearch.org/OpenLearningAnalytics.pdf ted components. En: IEEE Symposium on Visual Analytics
Silva, Andr; Figueira, lvaro (2012). Visual analysis of on- Science and Technology. VAST 2009 (12-13 Oct.), pp. 155-162.
line interactions through social network patterns. En: IEEE http://dx.doi.org/10.1109/VAST.2009.5333893
12th International Conference on Advanced Learning Tech-
Willett, Wesley; Heer, Jeffrey; Agrawala, Maneesh (2007).
nologies (ICALT) (4-6 July), pp. 639-641.
Scented widgets: Improving navigation cues with em-
http://dx.doi.org/10.1109/ICALT.2012.57
bedded visualizations. En: IEEE Transactions on Visualiza-
Thomas, James J.; Cook, Kristin A. (2005). Illuminating tion and computer graphics, v. 13, n. 6, pp. 1129-1136.
the path: the research and development agenda for visual http://vis.berkeley.edu/papers/scented_widgets
http://eprints.rclis.org