Summary

Tecnología de seguimiento ocular y técnicas de minería de datos utilizadas para un análisis de comportamiento de adultos involucrados en procesos de aprendizaje

Published: June 10, 2021
doi:

Summary

Presentamos un protocolo para un análisis conductual de adultos (de 18 a 70 años) involucrados en procesos de aprendizaje, realizando tareas diseñadas para el Aprendizaje Autorregulado (SRL). Los participantes, profesores y estudiantes universitarios, y adultos de la Universidad de la Experiencia, fueron monitoreados con dispositivos de seguimiento ocular y los datos fueron analizados con técnicas de minería de datos.

Abstract

El análisis del comportamiento de los adultos que participan en tareas de aprendizaje es un desafío importante en el campo de la educación de adultos. Hoy en día, en un mundo de continuos cambios tecnológicos y avances científicos, existe una necesidad de aprendizaje y educación a lo largo de toda la vida dentro de los entornos educativos formales y no formales. En respuesta a este desafío, el uso de la tecnología de seguimiento ocular y las técnicas de extracción de datos, respectivamente, para el aprendizaje supervisado (principalmente de predicción) y no supervisado (específicamente el análisis de conglomerados), proporcionan métodos para la detección de formas de aprendizaje entre los usuarios y /o la clasificación de sus estilos de aprendizaje. En este estudio, se propone un protocolo para el estudio de los estilos de aprendizaje entre adultos con y sin conocimientos previos a diferentes edades (18 a 69 años) y en diferentes puntos a lo largo del proceso de aprendizaje (inicio y fin). Las técnicas de análisis estadístico de varianza significan que se pueden detectar diferencias entre los participantes por tipo de alumno y conocimiento previo de la tarea. Del mismo modo, el uso de técnicas de agrupamiento de aprendizaje no supervisadas arroja luz sobre formas similares de aprendizaje entre los participantes en diferentes grupos. Todos estos datos facilitarán propuestas personalizadas del profesor para la presentación de cada tarea en diferentes puntos de la cadena de tratamiento de la información. Asimismo, será más fácil para el profesor adaptar los materiales didácticos a las necesidades de aprendizaje de cada alumno o grupo de alumnos con características similares.

Introduction

Metodología de seguimiento ocular aplicada al análisis conductual en el aprendizaje
La metodología de seguimiento ocular, entre otros usos funcionales, se aplica al estudio del comportamiento humano, específicamente durante la resolución de tareas. Esta técnica facilita el seguimiento y análisis durante la realización de las tareas de aprendizaje1. En concreto, los niveles de atención de los alumnos en diferentes puntos del proceso de aprendizaje (inicio, desarrollo y fin) en diferentes materias (Historia, Matemáticas, Ciencias, etc.) se pueden estudiar con el uso de la tecnología de seguimiento ocular. Además, si la tarea incluye el uso de vídeos con una voz que guíe el proceso de aprendizaje, se facilita el Aprendizaje Autorregulado (SRL). Por lo tanto, la implementación de la tecnología de seguimiento ocular en el análisis de tareas a las que srl (que incluyen el uso de videos) se propone como un recurso significativo para entender cómo se desarrolla el aprendizaje2,3,4. Esta combinación también significará que las diferencias entre los métodos de instrucción (con o sin SRL, etc.) se pueden comprobar con diferentes tipos de estudiantes (con o sin conocimientos previos, etc.) 5.Por el contrario, la presentación de información multicanal (presentación simultánea de información tanto auditiva como visual, ya sea verbal, escrita o pictórica) puede facilitar tanto el registro como el análisis de información relevante frente a no relevante de las variables antesmencionadas 6. Los estudiantes con conocimientos previos expuestos a canales de aprendizaje multimedia parecen aprender de manera más efectiva que aquellos con poco o ningún conocimiento previo. Los estudiantes con altos niveles de conocimiento previo de la materia integrarán la información textual y gráfica de manera más efectiva7. Esta funcionalidad se ha observado en el aprendizaje de textos8 que incluyen imágenes9. La tecnología de seguimiento ocular ofrece información sobre dónde se centra la atención y durante cuánto tiempo. Estos datos dan una idea del desarrollo de un proceso de aprendizaje de una manera más precisa que a través de la simple observación del proceso de resolución durante la finalización de una tarea. Además, el análisis de estos indicadores facilita el estudio de si el alumno desarrolla un aprendizaje profundo o superficial. Además, la relación entre estos datos y los resultados del aprendizaje facilita la validación de la información obtenida con la tecnología de seguimiento ocular4,10. De hecho, esta técnica junto con el SRL se utilizan cada vez más en la Educación Superior y en la Educación de Adultos11 entornos de aprendizaje, tanto en cursos regulados como no regulados12.

La tecnología de seguimiento ocular ofrece diferentes métricas: distancia, velocidad, aceleración, densidad, dispersión, velocidad angular, transiciones entre Áreas de Interés (AOI), orden secuencial de AOI, visitas en las fijaciones, saccades, ruta de escaneo y parámetros de mapa de calor. Sin embargo, la interpretación de estos datos es compleja y requiere el uso de técnicas de clúster supervisadas (regresión, árboles de decisión, etc.) y no supervisadas (técnicas de clúster k-means, etc.) 13,14 técnicas de minería de datos. Estas métricas pueden ser aplicadas para el seguimiento del comportamiento de un mismo sujeto a lo largo del tiempo o para una comparación entre varios sujetos y su desempeño con la misma tarea15,mediante el análisis de la diferencia entre los participantes con conocimientos previos frente a los no conocimientos previos16. Investigaciones recientes11,17 han revelado que los aprendices novatos se fijan más tiempo en los estímulos (es decir, hay una mayor frecuencia de fijación mientras se registran patrones similares de trayectoria de exploración). La duración media de la fijación fue mayor para los expertos que para los novatos. Los expertos presentaron su foco de atención en los puntos medios de la información (proximal y central), diferencias que también se pueden ver en los puntos de visualización dentro del AOI en los mapas de calor.

Interpretación de métricas en el seguimiento ocular
Estudios recientes18 han indicado que la adquisición de información está relacionada con el número de fijaciones oculares en los estímulos. Otra métrica importante es el saccade, que se define como el movimiento rápido y repentino de una fijación con un intervalo de [10 ms, 100 ms]. Sharafi et al. (2015)18 encontraron diferencias en el número de saccades, dependiendo de la fase de codificación de la información del estudiante. Otro parámetro relevante es el scan-path, una métrica que captura el orden cronológico de los pasos que el participante realiza para la resolución de la tarea de aprendizaje dentro de la AOI definida por el investigador18. Del mismo modo, la tecnología de seguimiento ocular se puede utilizar para predecir el nivel de comprensión del participante, que parece estar relacionado con el número de fijaciones. Estudios recientes han indicado que la variabilidad en el comportamiento de la mirada está determinada por las propiedades de la imagen (posición, intensidad, color y orientación), las instrucciones para realizar la tarea y el tipo de procesamiento de la información (estilo de aprendizaje) del participante. Estas diferencias se detectan analizando la interacción del alumno con los diferentes AOI19. Se pueden utilizar técnicas cuantitativas20 (análisis de frecuencia) y/o cualitativas o dinámicas21 (ruta de escaneo) para analizar los datos recopilados de las diferentes métricas. Las primeras técnicas se analizan con técnicas estadísticas tradicionales (análisis de frecuencia, diferencia de medias, diferencia de varianza, etc.) y las segundas se analizan con técnicas de Machine Learning (distancias euclidianas con métodos de edición de cadenas21,22,y clustering17). La aplicación de estas técnicas facilita el clustering, al considerar diferentes características de los sujetos. Un estudio17 encontró que cuanto más experto es el estudiante, más efectiva es la estrategia de procesamiento de información espacial y temporal que se implementa. Una tabla descriptiva de los parámetros de medición que se utilizaron en este estudio se puede consultar a continuación en la Tabla 1.

Tabla 1: Parámetros más representativos que se pueden obtener con la técnica de eye-tracking, adaptado de Sáiz, Zaparaín, Marticorena y Velasco (2019). 20   Haga clic aquí para descargar esta tabla.

Aplicación de la metodología de seguimiento ocular al estudio del proceso de aprendizaje
El uso de los avances tecnológicos y las técnicas de análisis de datos descritas anteriormente5 agregará una mayor precisión al análisis conductual de los estudiantes durante la resolución de problemas en las diferentes fases del procesamiento de la información (iniciación de tareas, procesamiento de información y resolución de tareas). Todo ello facilitará el análisis conductual individual, lo que a su vez permitirá la agrupación de estudiantes con características similares24. Asimismo, técnicas predictivas (árboles de decisión, técnicas de regresión, etc.) 25 se pueden aplicar al aprendizaje, relacionados tanto con el número de fijaciones como con los resultados de la resolución de tareas de cada estudiante. Esta funcionalidad supone un avance muy importante en el conocimiento de cómo aprende cada alumno y para la propuesta de programas de aprendizaje personalizados dentro de diferentes colectivos (personas con o sin dificultades de aprendizaje26). Por lo tanto, el uso de esta técnica contribuirá al logro de la personalización y optimización del aprendizaje27. El aprendizaje a lo largo de toda la vida debe entenderse como un ciclo de mejora continua, ya que el conocimiento de la sociedad avanza y progresa constantemente. La psicología evolutiva indica que las habilidades de resolución y la efectividad en el procesamiento de la información disminuyen con la edad. Específicamente, la frecuencia del saccade, la amplitud, y la velocidad de los movimientos de ojo entre adultos se han encontrado para disminuir con edad. Además, a edades más avanzadas, la atención se centra en las áreas inferiores de las escenas visuales, lo que se relaciona con los déficits en la memoria de trabajo14. Sin embargo, la activación aumenta en las áreas frontales y prefrontales a una edad más avanzada, lo que parece compensar estos déficits en la resolución de tareas. Este aspecto incluye el nivel de conocimiento previo y las estrategias de compensación cognitiva que el sujeto puede aplicar. Los participantes experimentados aprenden de manera más eficiente, ya que gestionan la atención de manera más efectiva, debido a la aplicación de procesos de supervisiónautomatizados 28. Además, si la información a aprender se imparte a través de técnicas de SRL, se mitigan las deficiencias antes mencionadas17. El uso de tales técnicas significa que los patrones de seguimiento visual son muy similares, tanto en sujetos sin conocimientos previos como en sujetos con conocimientos previos7.

En resumen, el análisis de los datos multimodal-multicanal sobre SRL obtenidos con el uso de tecnologías de aprendizaje avanzado (eye-tracking) es clave para comprender la interacción entre los procesos cognitivos, metacognitivos y motivacionales, y su impacto en el aprendizaje29. Los resultados y el estudio de las diferencias en el aprendizaje tienen implicaciones para el diseño de materiales de aprendizaje y sistemas de tutoría inteligentes, los cuales permitirán un aprendizaje personalizado que probablemente sea más efectivo y satisfactorio para el estudiante30.

En esta investigación, se hicieron dos preguntas de investigación: (1) ¿Habrá diferencias significativas en los resultados de aprendizaje y en los parámetros de fijación ocular entre los estudiantes y los profesores expertos versus no expertos en Historia del Arte diferenciando a los estudiantes con títulos oficiales de los estudiantes con títulos no oficiales (University of Experience – Educación de adultos)? y (2) ¿Coincidirán los grupos de cada participante con resultados de aprendizaje y parámetros de fijación ocular con el tipo de participantes (estudiantes con títulos oficiales, estudiantes con títulos no oficiales (Universidad de la Experiencia – Educación de Adultos) y profesores)?

Protocol

Este protocolo se realizó en cumplimiento de la normativa de procedimiento del Comité bioético de la Universidad de Burgos (España) nº Nº IR27/2019. Antes de su participación, los participantes habían sido plenamente conscientes de los objetivos de la investigación y todos habían dado su consentimiento informado. No recibieron ninguna compensación económica por su participación. 1. Reclutamiento de participantes Reclutar participantes de entre un grupo de adultos dentro …

Representative Results

Los 36 participantes reclutados para el presente estudio provenían de tres grupos de adultos (estudiantes de la universidad de la experiencia, profesores universitarios y estudiantes de pregrado y maestría) con edades comprendidas entre [18 y 69] años(Tabla 2). El protocolo se probó durante 20 meses en la Universidad de Burgos. Un resumen de la evolución puede verse en la Tabla 4. T…

Discussion

Los resultados de la investigación indicaron que la duración media de la fijación en los estímulos relevantes fue más larga entre los participantes con conocimientos previos. Asimismo, el foco de atención en este grupo está en los puntos medios de información (proximal y distal)7. Los resultados de este estudio han revelado diferencias en la forma en que los participantes procesaron la información. Además, su procesamiento no siempre estuvo vinculado a la agrupación inicial (Estudiantes…

Divulgations

The authors have nothing to disclose.

Acknowledgements

El trabajo se ha desarrollado dentro del Proyecto “Aprendizaje Autorregulado en SmartArt Erasmus+ Educación de Adultos” 2019-1-ES01-KA204-095615-Coordinador 6, financiado por la Comisión Europea. El video de la fase de finalización de la tarea contó con el consentimiento fundamentado previo de Rut Velasco Sáiz. Agradecemos la participación de profesores y estudiantes en la fase de implementación de tareas.

Materials

iViewer XTM iViewer
SMI Experimenter Center 3.0 SMI
SMI Be Gaze SMI

References

  1. van Marlen, T., van Wermeskerken, M., Jarodzka, H., van Gog, T. Effectiveness of eye movement modeling examples in problem solving: The role of verbal ambiguity and prior knowledge. Learning and Instruction. 58, 274-283 (2018).
  2. Taub, M., Azevedo, R., Bradbury, A. E., Millar, G. C., Lester, J. Using sequence mining to reveal the efficiency in scientific reasoning during STEM learning with a game-based learning environment. Learning and Instruction. 54, 93-103 (2018).
  3. Cloude, E. B., Taub, M., Lester, J., Azevedo, R., Isotani, S., Millan, E., Ogan, A., Hastings, P., McLaren, B., Luckin, R. The Role of Achievement Goal Orientation on Metacognitive Process Use in Game-Based Learning. Artificial Intelligence in Education. , 36-40 (2019).
  4. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  5. Sáiz-Manzanares, M. C., Rodríguez-Diez, J. J., Marticorena-Sánchez, R., Zaparín-Yáñez, M. J., Cerezo-Menéndez, R. Lifelong learning from sustainable education: An analysis with eye tracking and data mining techniques. Sustainability. 12 (5), 2-18 (2020).
  6. Alemdag, E., Cagiltay, K. A systematic review of eye tracking research on multimedia learning. Computers & Education. 125, 413-428 (2018).
  7. Ho, H. N. J., Tsai, M. -. J., Wang, C. -. Y., Tsai, C. -. C. Prior knowledge and online inquiry-based science reading: evidence from eye tracking. International Journal of Science and Mathematics Education. 12, 525-554 (2014).
  8. Catrysse, L., Gijbels, D., Donche, V. It is not only about the depth of processing: What if eye am not interested in the text. Learning and Instruction. 58, 284-294 (2018).
  9. Mayer, R. E. Using multimedia for e-learning. Journal of Computer Assisted Learning. 33 (5), 403-423 (2017).
  10. Prokop, M., Pilař, L., Tichá, I. Impact of think-aloud on eye-tracking: A comparison of concurrent and retrospective think-aloud for research on decision-making in the game environment. Sensors. 20 (10), (2020).
  11. DuMouchel, W., Abello, J., Pardalos, P. M., Resende, M. G. C. Data Squashing: Constructing Summary Data Sets. Handbook of Massive Data Sets. , 579-591 (2002).
  12. Stull, A. T., Fiorella, L., Mayer, R. E. An eye-tracking analysis of instructor presence in video lectures. Computers in Human Behavior. 88, 263-272 (2018).
  13. König, S. D., Buffalo, E. A. A nonparametric method for detecting fixations and saccades using cluster analysis: Removing the need for arbitrary thresholds. Journal of Neuroscience Methods. 30 (227), 121-131 (2014).
  14. Maltz, M., Shinar, D. Eye Movements of Younger and Older Drivers. Human Factors. 41 (1), 15-25 (1999).
  15. Burch, M., Kull, A., Weiskopf, D. AOI rivers for visualizing dynamic eye gaze frequencies. Computer Graphics Forum. 32 (3), 281-290 (2013).
  16. Dzeng, R. -. J., Lin, C. -. T., Fang, Y. -. C. Using eye-tracker to compare search patterns between experienced and novice workers for site hazard identification. Safety Science. 82, 56-67 (2016).
  17. Kurzhals, K., Weiskopf, D. Space-time visual analytics of eye-tracking data for dynamic stimuli. IEEE Transactions on Visualization and Computer Graphics. 19 (12), 2129-2138 (2013).
  18. Sharafi, Z., Soh, Z., Guéhéneuc, Y. -. G. A systematic literature review on the usage of eye-tracking in software engineering. Information and Software Technology. 67, 79-107 (2015).
  19. Dalrymple, K. A., Jiang, M., Zhao, Q., Elison, J. T. Machine learning accurately classifies age of toddlers based on eye tracking. Scientific Reports. 9 (1), 6255 (2019).
  20. Seifert, L., Cordier, R., Orth, D., Courtine, Y., Croft, J. L. Role of route previewing strategies on climbing fluency and exploratory movements. PLoS One. 12 (4), 1-22 (2017).
  21. Takeuchi, H., Habuchi, Y. A quantitative method for analyzing scan path data obtained by eye tracker. IEEE Symposium on Computational Intelligence and Data Mining, CIDM 2007. , 283-286 (2007).
  22. Takeuchi, H., Matsuda, N. Scan-path analysis by the string-edit method considering fixation duration. 6th International Conference on Soft Computing and Intelligent Systems, and 13th International Symposium on Advanced Intelligence Systems, SCIS/ISIS 2012. , 1724-1728 (2012).
  23. Sáiz, M. C., Marticorena, R., Anaiz, &. #. 1. 9. 3. ;., Zaparaín, M. J., Peralbo, M., Risso, A., Barca, A., Duarte, B., Almeda, L., Brenlla, J. C. Task analysis with eye tracking technology. srl at Smartart. II Congress of the International Scientific Association of Psychopedagogy Proceedings. , 4093-4104 (2019).
  24. Khedher, A. B., Jraidi, I., Frasson, C. Tracking Students’ Analytical Reasoning Using Visual Scan Paths. IEEE 17th International Conference on Advanced Learning Technologies (ICALT). , 53-54 (2017).
  25. Xia, C., Han, J., Qi, F., Shi, G. Predicting Human Saccadic Scanpaths Based on Iterative Representation Learning. IEEE Trans Image Process. 8 (7), 3502-3515 (2019).
  26. Cerezo, R., Fernández, E., Gómez, C., Sánchez-Santillán, M., Taub, M., Azevedo, R. Multimodal Protocol for Assessing Metacognition and Self-Regulation in Adults with Learning Difficulties. Journal of Visualized Experiments. , e60331 (2020).
  27. Scherer, R., Siddiq, F., Tondeur, J. The technology acceptance model (TAM): A meta-analytic structural equation modeling approach to explaining teachers’ adoption of digital technology in education. Computers & Education. 128 (0317), 13-35 (2019).
  28. Bruder, C., Eißfeldt, H., Maschke, P., Hasse, C. Differences in monitoring between experts and novices. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 57 (1), 295-298 (2013).
  29. Azevedo, R., Gašević, D. Analyzing Multimodal Multichannel Data about Self-Regulated Learning with Advanced Learning Technologies: Issues and Challenges. Computers in Human Behavior. 96, 207-210 (2019).
  30. Taub, M., Azevedo, R. How Does Prior Knowledge Influence Eye Fixations and Sequences of Cognitive and Metacognitive SRL Processes during Learning with an Intelligent Tutoring System. International Journal of Artificial Intelligence in Education. 29 (1), 1-28 (2019).
  31. IBM Corp. . SPSS Statistical Package for the Social Sciences (SPSS) (Version 24). , (2016).
  32. . Orange Software Package Available from: https://orange.biolab.si/docs/ (2020)
check_url/fr/62103?article_type=t

Play Video

Citer Cet Article
Sáiz Manzanares, M. C., Payo Hernanz, R. J., Zaparaín Yáñez, M. J., Andrés López, G., Marticorena Sánchez, R., Calvo Rodríguez, A., Martín, C., Rodríguez Arribas, S. Eye-tracking Technology and Data-mining Techniques used for a Behavioral Analysis of Adults engaged in Learning Processes. J. Vis. Exp. (172), e62103, doi:10.3791/62103 (2021).

View Video