基于虚拟教学代理和多感知融合的智能VR英语课堂研发

应用价值：

VR技术与教育相结合，提升教育方法和教学效果，具有重要意义，有助于学校智能课堂的发展。结合VR、智能交互等计算机技术，构建高可用性和易用性的自我调节式虚拟英语课堂，有助于帮助小学生提升学习兴趣，提高学习动机。通过科学的课题内容和流程设计，结合智能、全面的学习评价和反馈，切实帮助学习提升学习效果。

研究内容：

1 学习内容知识库

（科学的课堂内容设计，构建知识库以及相应的模型库）

2 课堂和学习过程设计与实现

（场景和流程，如图）

3 基于虚拟教学代理的互动、评价和反馈

（虚拟人设计和建模；语音交互；表情和肢体动作生成；评价和反馈设计，如鼓励式的反馈策略以及图形化的学习结果呈现）

4 基于多源信号的学习状态感知和质量评价

（采集脑电、心电等生物电信号，基于此识别和评价用户的专注、焦虑等学习状态；

采集口语信号，评价其英语口语表达的准确性；

采集面部表情，评价其学习情绪；

采集口型和面部肌肉电，评价其发音的标准程度；

句子相似度比较，判断口语表达质量）

5 用户研究

通过用户研究，考察开发的VR英语学习系统在提升学习动机和学习效果中的效果，包括短期效应和长期效应。