فصلنامه روندها و دستاوردها در فناوری یادگیری

فصلنامه روندها و دستاوردها در فناوری یادگیری

فراترکیب مدل های ارزیابی کار تیمی در محیط های یادگیری آنلاین با تکیه بر واکاوی یادگیری

نوع مقاله : مقاله پژوهشی

نویسندگان
1 دانشجوی دکتری تکنولوژی آموزشی، دانشگاه علامه طباطبائی، تهران، ایران
2 دانشیار گروه تکنولوژی آموزشی، دانشگاه علامه طباطبائی، تهران، ایران.
3 استاد برنامه ریزی درسی، دانشگاه علامه طباطبائی، تهران، ایران.
4 دانشیار گروه کامپیوتر، دانشگاه بیرجند، بیرجند، ایران.
چکیده
با افزایش روزافزون یادگیری مشارکتی در محیط‌های دیجیتال، سنجش دقیق تعاملات دانشجویان به چالشی اساسی تبدیل شده است. واکاوی یادگیری به عنوان یک رویکرد داده‌محور، با ردیابی ردپای دیجیتال فراگیران، پتانسیل منحصربه‌فردی برای شفاف‌سازی فرایندهای گروهی ارائه می‌دهد. ادبیات پژوهشی این حوزه با پراکندگی مدل‌ها و ناهمگونی شاخص‌ها مواجه است. این مقاله با هدف ایجاد انسجام در این حوزه، به ارائه یک فراترکیب کیفی از مدل‌های ارزیابی کار تیمی آنلاین مبتنی بر واکاوی یادگیری می‌پردازد. این مطالعه با جستجوی نظام‌مند در پایگاه‌های داده معتبر علمی انجام شد که پس از غربال‌گری ۲۷۹۰ منبع و ارزیابی کیفیت، نهایتاً ۴۵ مقاله واجد شرایط با روش سنتز موضوعی تحلیل شدند. یافته‌ها نشان داد مدل‌ها در سه دسته اصلی استادمحور (استفاده از داشبوردها برای مداخله آموزشی)، دانشجومحور (استفاده از داده ها برای خودتنظیمی) و چارچوب‌های مفهومی (پیوند پداگوژی با تحلیل داده) قرار می‌گیرند. همچنین، یک روند تحولی مشخص از شاخص‌های محصولی و سطحی (مانند نمرات و تعداد پست‌ها) به سمت شاخص‌های فرآیندی و عمیق‌تر (مانند تحلیل شبکه اجتماعی، پردازش زبان طبیعی و داده‌های چندوجهی) مشاهده شد. نتایج، چالش‌های کلیدی چون تفسیرپذیری داده‌ها، نیاز به سواد داده کاربران، و عدم همخوانی ابزارها با زمینه‌های واقعی آموزشی را برجسته می‌سازد. این فراترکیب نتیجه می‌گیرد که پژوهش‌های آتی باید بر طراحی داشبوردهای انسان‌محور و تلفیق تحلیل‌های کمی و کیفی متمرکز شوند تا شکاف میان توانمندی فنی و یکپارچه‌سازی پداگوژیک پر شود.
کلیدواژه‌ها
موضوعات

عنوان مقاله English

A Meta Synthesis of Teamwork Assessment Models in Online Learning Environments Utilizing Learning Analytics

نویسندگان English

Pedram Safari 1
Zahra Jamebozorg 2
Mahdi Vahedi 2
Hassan Maleki 3
Hamid Saadatfar 4
1 Ph.D Student in Educational Technology, Allameh Tabatabai University, Tehran, Iran
2 Associate Professor, Department of Educational Technology, Allameh Tabataba'i University, Tehran, Iran.
3 Professor, Department of Curriculum Planning, Allameh Tabataba'i University, Tehran, Iran.
4 Associate Professor, Department of Computer Science, University of Birjand, Birjand, Iran.
چکیده English

With the increasing prevalence of collaborative learning in digital environments, the accurate assessment of student interactions has become a fundamental challenge. Learning Analytics (LA), as a data-driven approach, offers unique potential for illuminating group processes by tracking learners' digital traces. However, the research literature in this domain is characterized by the fragmentation of models and heterogeneity of indicators. Aiming to create coherence in this field, this paper presents a qualitative meta-synthesis of online teamwork assessment models based on learning analytics. This study was conducted through a systematic search in reputable scientific databases; after screening 2790 records and assessing quality, 45 eligible studies were ultimately analyzed using thematic synthesis. Findings revealed that existing models fall into three main categories: instructor-centered (utilizing dashboards for pedagogical intervention), learner-centered (utilizing data for self-regulation), and conceptual frameworks (linking pedagogy with data analysis). Furthermore, a distinct evolutionary trend was observed, transitioning from product-oriented and superficial indicators (e.g., grades and post counts) toward deeper, process-oriented indicators (e.g., Social Network Analysis, Natural Language Processing, and multimodal data). The results highlight key challenges such as data interpretability, the need for user data literacy, and the misalignment of tools with authentic educational contexts. This meta-synthesis concludes that future research must focus on designing human-centered dashboards and integrating quantitative and qualitative analyses to bridge the gap between technical capabilities and pedagogical integration.

کلیدواژه‌ها English

Meta-Synthesis
Learning Analytics
Online Teamwork
Collaborative Learning
Learning Dashboard
خلیلی دهکردی، کوروش، اسماعیل‌نیا شیروانی، کامبیز، و باقرپور، معصومه. (۱۴۰۲). ارائه مدل تأثیر آموزش مجازی بر تفکر انتقادی و یادگیری تیمی دانشجویان دستیاری دانشگاه علوم پزشکی شهید بهشتی در دوران شیوع بیماری کووید-۱۹. مجله علوم پزشکی رازی، ۳۰ (۶)، ۲۷۷-۲۸۵.
رئیسی وانانی، سینا، رئیسی وانانی، ایمان، و تقوی فرد، محمدتقی. (۱۳۹۹). مدلی برای بخش‌بندی یادگیرندگان و بهبود عملکرد آموزشی با استفاده از الگوریتم‌های داده‌کاوی. نشریه علمی مطالعات مدیریت کسب‌وکار هوشمند، ۹ (۳۳)، ۵۳-۸۰.
جامه بزرگ، زهرا، سرکشیکیان، سید مهدی، حیدریان، محمدرضا، صفاری، پدرام، عظیمی، علی. (1402). روش‌های تحقیق در طراحی و تکنولوژی یادگیری و آموزشی. تهران: انتشارات آوای نور.
جنانی، ناصر، و فلاح، محمد. (۱۴۰۱). یادگیری کار تیمی از طریق بازی‌های رایانه‌ای: یک رویکرد پدیدارشناسانه. فصلنامه مطالعات منابع انسانی، ۱۲ (۳)، ۱۰۳-۱۲۸.
صفاری، پدرام، و نیلی احمدآبادی، محمدرضا. (۱۴۰۳). مرور نظام‌مند مبانی نظری مداخلات تحلیل یادگیری در آموزش عالی. نشریه روندها و دستاوردها در فناوری یادگیری، ۱ (۱).
طوفانی‌نژاد، احسان، و بنی‌هاشم، سید کاظم. (۱۳۹۹). استفاده از تحلیل شبکه اجتماعی در یادگیری الکترونیکی. پنجمین کنفرانس بین‌المللی وب‌پژوهی، تهران، ایران.
فدوی رودسری، آزاده، صالحی، کیوان، خدایی، ابراهیم، مقدم‌زاده، علی، و جوادی‌پور، محمد. (۱۳۹۹). کاربست فنون داده‌کاوی در تبیین صحت مدل‌های پیش‌بینی افت تحصیلی دانشجویان. مجله علمی دانشگاه علوم پزشکی ایلام، ۲۸ (۱)، ۴۶-۵۷.
کرامتی، محمدرضا، انصاری‌زاده، فهیمه، و کرامتی، علی. (۱۴۰۳). ادراک دانشجویان تحصیلات تکمیلی رشته رهبری آموزشی از کار تیمی در محیط ترکیبی ادوبی کانکت و واتس‌اپ: مطالعه کیفی متعاقب یک طرح پیش‌آزمایشی. مجله رهبری آموزشی کاربردی، ۵ (۱)، ۱-۲۰.
نادی، مجتبی، آهنچیان، محمدرضا، و نوغانی دخت بهمنی، محسن. (۱۳۹۶). مطالعه کیفی وضعیت تیم‌سازی و کار تیمی در دانشگاه‌های دولتی ایران. فصلنامه علمی-پژوهشی مطالعات رفتار سازمانی، ۶ (۲۱)، ۸۱-۱۲۰.
Abouelenein, Y. A. M., Selim, S. A. S., & Aldosemani, T. I. (2025). Impact of an adaptive environment based on learning analytics on pre-service science teacher behavior and self-regulation. Smart Learning Environments, 12(8). https://doi.org/10.1186/s40561-024-00340-7
Ahn, J., Campos, F., Hays, M., & DiGiacomo, D. (2019). Designing in Context: Reaching Beyond Usability in Learning Analytics Dashboard Design. Journal of Learning Analytics, 6(2), 70–85. http://dx.doi.org/10.18608/jla.2019.62.5
Alam, M. I., Malone, L., Nadolny, L., Brown, M., & Cervato, C. (2023). Investigating the impact of a gamified learning analytics dashboard: Student experiences and academic achievement. Journal of Computer Assisted Learning, 39(5), 1436-1449. https://doi.org/10.1111/jcal.12853
Albó, L., Barria-Pineda, J., Brusilovsky, P., & Hernández-Leo, D. (2021). Knowledge-Based Design Analytics for Authoring Courses with Smart Learning Content. International Journal of Artificial Intelligence in Education, 32, 4–27. https://doi.org/10.1007/s40593-021-00253-3
Alfredo, R., Echeverria, V., Zhao, L., Lawrence, L., Fan, J. X., Yan, L., Li, X., Swiecki, Z., Gašević, D., & Martinez-Maldonado, R. (2024). Designing a Human-Centred Learning Analytics Dashboard In-Use. Journal of Learning Analytics, 11(3), 62-81. https://doi.org/10.18608/jla.2024.8487
Baek, C., & Doleck, T. (2021). Educational Data Mining versus Learning Analytics: A Review of Publications From 2015 to 2019. Interactive Learning Environments, 31(6), 3828-3850. https://doi.org/10.1080/10494820.2021.1943689
Baek, C., & Doleck, T. (2024). Learning analytics: A comparison of western, educated, industrialized, rich, and democratic (WEIRD) and non-WEIRD research. Knowledge Management & E-Learning, 16(2), 217-236. https://doi.org/10.34105/j.kmel.2024.16.011
Berková, K., Chalupová, M., Smrčka, F., Musil, M., & Frendlovská, D. (2024). A design of the panel for the progress and formative self-assessment detection in the learning analytics. Education and Information Technologies, 29, 16441–16467. https://doi.org/10.1007/s10639-024-12496-3
Bessadok, A., Abouzinadah, E., & Rabie, O. (2021). Exploring students digital activities and performances through their activities logged in learning management system using educational data mining approach. Interactive Technology and Smart Education, 20(1), 58-72. https://doi.org/10.1108/ITSE-08-2021-0148
Bisri, A., Supardi, Heryatun, Y., Hunainah, & Navira, A. (2025). Educational data mining model using support vector machine for student academic performance evaluation. Journal of Education and Learning (EduLearn), 19(1), 478-486. https://doi.org/10.11591/edulearn.v19i1.21609
Brun, A., Bonnin, G., Castagnos, S., Roussanaly, A., & Boyer, A. (2019). Learning analytics made in France: the METAL project. Journal of Research in Innovative Teaching & Learning, 12(1), 4-18. https://doi.org/10.1108/JRIT-11-2018-0029
Campos, F., Nguyen, H., Ahn, J., & Jackson, K. (2023). Leveraging Cultural Forms in Human-Centered Learning Analytics Design. Journal of the Learning Sciences, 1–32. https://doi.org/10.1080/10508406.2023.2241511
Charleer, S., Van Moere, A., Klerkx, J., Verbert, K., & De Laet, T. (2018). Learning Analytics Dashboards to Support Adviser-Student Dialogue. IEEE Transactions on Learning Technologies, 11(3), 389–400. https://doi.org/10.1109/TLT.2017.2738706
Chen, L., Geng, X., Lu, M., Shimada, A., & Yamada, M. (2023). How Students Use Learning Analytics Dashboards in Higher Education: A Learning Performance Perspective. SAGE Open, 13(3). https://doi.org/10.1177/21582440231192151
Chen, Y., Hmelo-Silver, C. E., Lajoie, S. P., Zheng, J., Huang, L., & Bodnar, S. (2021). Using Teacher Dashboards to Access Group Collaboration in Problem-based Learning. The Interdisciplinary Journal of Problem-Based Learning, 15(2). https://doi.org/10.14434/ijpbl.v15i2.28792
Cheng, N., Zhao, W., Xu, X., Liu, H., & Tao, J. (2024). The influence of learning analytics dashboard information design on cognitive load and performance. Education and Information Technologies, 29, 19729–19752. https://doi.org/10.1007/s10639-024-12606-1
de Andrade, T. L., Rigo, S. J., & Barbosa, J. L. V. (2021). Active Methodology, Educational Data Mining and Learning Analytics: A Systematic Mapping Study. Informatics in Education, 20(2), 171–204. https://doi.org/10.15388/infedu.2021.09
Doleck, T., Lemay, D. J., Basnet, R. B., & Bazelais, P. (2019). Predictive analytics in education: a comparison of deep learning frameworks. Education and Information Technologies, 25, 1951–1963. https://doi.org/10.1007/s10639-019-10068-4
El Aouifi, H., El Hajji, M., Es-Saady, Y., & Douzi, H. (2021). Predicting learner’s performance through video sequences viewing behavior analysis using educational data-mining. Educational and Information Technologies, 26, 5799–5814. https://doi.org/10.1007/s10639-021-10512-4
Fadavi Rudsari, A., Salehi, K., Khodaei, E., Moghaddamzadeh, A., & Javadipour, M. (1399). Application of data mining techniques in explaining the validity of students' academic failure prediction models. Scientific Journal of Ilam University of Medical Sciences, 28(1), 46-57. [In Persian]
Fahmy Yousef, A. M., & Ramadan Khatiry, A. (2021). Cognitive versus behavioral learning analytics dashboards for supporting learner’s awareness, reflection, and learning process. Interactive Learning Environments, 31(9), 5460-5476. https://doi.org/10.1080/10494820.2021.2009881
Hellings, J., & Haelermans, C. (2020). The effect of providing learning analytics on student behaviour and performance in programming: a randomised controlled experiment. Higher Education, 83, 1-18. https://doi.org/10.1007/s10734-020-00560-z
Hernández-García, Á., Acquila-Natale, E., Iglesias-Pradas, S., & Chaparro-Peláez, J. (2018). Design of an Extraction, Transform and Load Process for Calculation of Teamwork Indicators in Moodle. CEUR Workshop Proceedings, 2188, 7.
Herodotou, C., Hlosta, M., Boroowa, A., Rienties, B., Zdrahal, Z., & Mangafa, C. (2019). Empowering online teachers through predictive learning analytics. British Journal of Educational Technology, 51(6), 1-16. https://doi.org/10.1111/bjet.12853
Ho, Y. H., Liao, B. K., & Hsieh, C. L. (2024). Effectiveness of a gamified learning analytics dashboard with coregulation mechanism for self-regulated learning in college ethics courses. Interactive Learning Environments, 32(10), 6628-6644. https://doi.org/10.1080/10494820.2023.2277741
Jamebozorg, Z., Sarkeshikian, S. M., Heydarian, M. R., Saffari, P., & Azimi, A. (1402). Research methods in learning and educational design and technology. Tehran: Avay-e Noor Publications. [In Persian]
Janani, N., & Fallah, M. (1401). Teamwork learning through computer games: A phenomenological approach. Quarterly Journal of Human Resource Studies, 12(3), 103-128. [In Persian]
Keramati, M. R., Ansarizadeh, F., & Keramati, A. (1403). Perception of graduate students in educational leadership of teamwork in a blended Adobe Connect and WhatsApp environment: A qualitative study subsequent to a pre-experimental design. Journal of Applied Educational Leadership, 5(1), 1-20. [In Persian]
Khalili Dehkordi, K., Esmaeilnia Shirvani, K., & Bagherpour, M. (1402). Presenting a model of the impact of virtual education on critical thinking and team learning of residency students at Shahid Beheshti University of Medical Sciences during the COVID-19 pandemic. Razi Journal of Medical Sciences, 30(6), 277-285. [In Persian]
Magana, A. J., Mubarrat, S. T., Kao, D., & Benes, B. (2024). AI-Based Automatic Detection of Online Teamwork Engagement in Higher Education. IEEE Transactions on Learning Technologies, 17, 2037-2049. https://doi.org/10.1109/TLT.2024.3411425
Majumdar, R., Bakilapadavu, G., Majumder, R., Chen, M. A., Flanagan, B., & Ogata, H. (2021). Learning analytics of humanities course: reader profiles in critical reading activity. Research and Practice in Technology Enhanced Learning, 16(25). https://doi.org/10.1186/s41039-021-00164-w
Molenaar, I., & Knoop-van Campen, C. A. N. (2019). How Teachers Make Dashboard Information Actionable. IEEE Transactions on Learning Technologies, 12(3), 347-357. https://doi.org/10.1109/TLT.2018.2854932
Nadi, M., Ahanchian, M. R., & Noghani Dokht Bahmani, M. (1396). A qualitative study of the status of team building and teamwork in Iran's public universities. Scientific-Research Quarterly of Organizational Behavior Studies, 6(21), 81-120. [In Persian]
Naito Mendes Bezerra, L., & Terra Silva, M. (2020). Educational Data Mining Applied to a Massive Course. International Journal of Distance Education Technologies, 18(4), 15-30. https://doi.org/10.4018/IJDET.2020100102
Pei, B., Cheng, Y., Ambrose, A., Dziadula, E., Xing, W., & Lu, J. (2024). LearningViz: a dashboard for visualizing, analyzing and closing learning performance gaps-a case study approach. Smart Learning Environments, 11(56). https://doi.org/10.1186/s40561-024-00346-1
Psathas, G., Tegos, S., Demetriadis, S. N., & Tsiatsos, T. (2023). Exploring the impact of chat-based collaborative activities and SRL-focused interventions on students’ self-regulation profiles, participation in collaborative activities, retention, and learning in MOOCs. International Journal of Computer-Supported Collaborative Learning, 18, 329-351. https://doi.org/10.1007/s11412-023-09394-0
Raeisi Vanani, S., Raeisi Vanani, I., & Taghavi Fard, M. T. (1399). A model for segmenting learners and improving educational performance using data mining algorithms. Scientific Journal of Smart Business Management Studies, 9(33), 53-80. [In Persian]
Reid, D. P., & Drysdale, T. D. (2024). Student-Facing Learning Analytics Dashboard for Remote Lab Practical Work. IEEE Transactions on Learning Technologies, 17, 1037-1049. https://doi.org/10.1109/TLT.2024.3364951
Saffari, P., & Nili Ahmadabadi, M. R. (1403). A systematic review of the theoretical foundations of learning analytics interventions in higher education. Journal of Trends and Achievements in Learning Technology, 1(1). [In Persian]
Susnjak, T., Ramaswami, G. S., & Mathrani, A. (2022). Learning analytics dashboard: a tool for providing actionable insights to learners. International Journal of Educational Technology in Higher Education, 19(12). https://doi.org/10.1186/s41239-021-00313-7
Toofaninezhad, E., & Banihashem, S. K. (1399). The use of social network analysis in e-learning. Fifth International Conference on Web Research, Tehran, Iran. [In Persian]
Villagrán, I., Hernández, R., Schuit, G., Neyem, A., Fuentes, J., Larrondo, L., Margozzini, E., Hurtado, M. T., Iriarte, Z., Miranda, C., Varas, J., & Hilliger, I. (2024). Enhancing Feedback Uptake and Self-Regulated Learning in Procedural Skills Training: Design and Evaluation of a Learning Analytics Dashboard. Journal of Learning Analytics, 11(2), 138-156. https://doi.org/10.18608/jla.2024.8195
Vivian, R., Falkner, K., Falkner, N., & Tarmazdi, H. (2016). A Method to Analyze Computer Science Students' Teamwork in Online Collaborative Learning Environments. ACM Transactions on Computing Education, 16(4), 1-27. https://doi.org/10.1145/2898997
Wang, D., & Han, H. (2020). Applying learning analytics dashboards based on process-oriented feedback to improve students' learning effectiveness. Journal of Computer Assisted Learning, 1-13. https://doi.org/10.1111/jcal.12502
Yang, C. C. Y., Wu, J. Y., & Ogata, H. (2024). Learning analytics dashboard-based self-regulated learning approach for enhancing students' e-book-based blended learning. Education and Information Technologies, 30, 35-56. https://doi.org/10.1007/s10639-024-12913-7
Zhang, S., Che, S. P., Nan, D., Li, Y., & Kim, J. H. (2023). I know my teammates: the role of Group Member Familiarity in Computer-Supported and face-to-face collaborative learning. Education and Information Technologies, 28, 12615-12631. https://doi.org/10.1007/s10639-023-11704-w

  • تاریخ دریافت 20 تیر 1404
  • تاریخ بازنگری 21 شهریور 1404
  • تاریخ پذیرش 01 مهر 1404
  • تاریخ انتشار 01 مهر 1404