本系统基于北京航空航天大学模式识别与人工智能实验室的多模情感识别与情感表达融合技术,开发了基于3D仿生代理的多模情感人机交互系统。该系统具有情感感知与表达能力,能够通过采集用户的视音频信号,实时感知用户表情和语音中包含的六种基本情感信息(高兴、悲伤、惊讶、害怕、生气、嫌恶),识别准确率达到85%,并通过3D仿生代理生动的语音和肢体动作与用户进行自然和谐的对话交流。系统消耗资源少,适合移动平台;融合表情和语音进行决策级情感识别,识别率高;采用3D仿生代理,交互界面生动自然。该系统及相应情感感知技术可应用于新一代情感人机交互界面。
本成果已获得授权发明专利2项,受理发明专利15项,申请国际发明专利2项。授权发明专利如下:一种鲁棒的人脸表情识别方法,ZL200810223211.6;汉语语音情感信息的提取及建模方法,ZL200810104541.3。
扫码关注,查看更多科技成果