基于多模态情感分析的个性化英语教育系统及方法
本申请提供一种基于多模态情感分析的个性化英语教育系统及方法,其系统包括:用于接收并处理学生的多模态数据的多模态交互模块、用于对输入的多模态数据进行情感分析的情感识别模块、基于学生的历史学习数据评估该学生的实时学习状态的个性化模块、根据情感状态与实时学习状态动态调整互动反馈的核心大脑模块。情感识别模块包括情感信息融合,情感信息融合采用加权策略,并通过情感一致性约束和冲突修正机制来调整最终输出的情感状态。本申请通过情感一致性损失函数、冲突修正机制和基于知识图谱的超纲控制机制,精准识别学生情感和认知状态。
厦门大学
2021-01-12