多模态学习分析研究综述

作     者：牟智佳 符雅茹 MOU Zhi-jia;FU Ya-ru

作者机构：江南大学“互联网+教育”研究基地江苏无锡214122 

出 版 物：《现代教育技术》 (Modern Educational Technology)

年 卷 期：2021年第31卷第6期

页      面：23-31页

核心收录：

学科分类：0401[教育学-教育学] 04[教育学] 040110[教育学-教育技术学（可授教育学、理学学位）] 

基　　金：江苏省高等教育教改研究重点项目“‘互联网+教育’背景下基于设计思维的课程设计与教学实践研究”(项目编号:2019JSJG082) 中央高校基本科研业务费专项资金资助课题:教育信息化2.0背景下信息技术与教学融合创新研究(项目编号:2019JDZD08)的阶段性研究成果 

主　　题：多模态学习分析 多模态数据 人工智能 数据融合 

摘      要：多模态学习分析为复杂环境下的学习测量与评价提供了新的视角。文章以涵盖多模态学习分析各类学术组织和学术论文的数据库为分析源,采用多种分析方法,对多模态学习分析的研究共同体、研究主题、研究领域、演进情况、研究热点等进行了分析,研究结果显示:多模态学习分析研究已初步形成多个学术群体,但各群体呈零散分布状态;学生编程建模、卷积与对称深层神经网络、传感器数据采集、人类行为识别、协作建构与自动评价等为主要研究主题;多模态感知与情绪分析、多模态数据融合与挖掘、多模态表征与对象识别是多模态学习分析的三大研究领域;演进情况为从知识模型与框架设计发展到多模态特征提取与情感分析、再发展到多模态表征学习与深度学习;研究热点包括多模态学习数据采集与系统设计、多模态学习认知与行为分析、多模态学习分析方法与工具开发。