基本信息

---

下载

文档摘要

---

技术应用|学习兴趣的多模态融合分析方法

为了不影响学生的正常上课，本研究采用了非侵入式、自然感知技术，通过摄像头和师生互动平台，首先分别获取学生面部特征和互动信息，然后进行多模态信号识别：头部姿态估计与面部表情识别、互动信息分析，预测学生的认知注意力、学习情感和思维活跃度，最后基于提出的三维学习兴趣模型融合多模态信号识别结果全面理解其学习兴趣状态。

头部姿态估计

头部姿态可反映学生的课堂注意力方向。然而，由于大场景自然环境下的头部姿态估计受到几何形变、背景光照变化、前景遮挡问题和低分辨率等因素的影响，导致头部姿态估计一直是计算机视觉的难点。本文为解决课堂自然环境下学生头部姿态估计的问题，采