本发明公开了一种基于李群论的多模态情感识别方法，包括以 下步骤：获取视频，并提取视频帧中图像区域的高斯型特征描述子， 基于高斯型特征描述子对视频中的图像区域进行跟踪，根据视频子序 列构建 ARMA 模型获取 ARMA 模型间的距离，根据 ARMA 模型之间 的距离构建核函数，并进行情感表达分类，根据人体、脸部和手部的 情感类别概率对人进行情感识别。本发明根据视频中所包含的人体姿 态运动信息、手势和脸部表情信息来判断人的情感状态，是一个将视 频数据映射到人体运动特征、手势特征和脸部表情特征，再从人体运 动特征空间和脸部表情特征映射到状态空间的过程，并提出利用李群 论进行多模态情感识别，提高模型进行情感识别的精确性。

项目概况本项目综合听觉生理学、汉语语言学、语音信号处理等多学科的研究成果,针对听损患者的生理特点和听力矫正需要,用信号和信息处理的手段研究听损患者的听觉感知过程和听力补偿方法,达到在汉语环境下增强患者言语理解能力的目的。[2008]（号：60472058），]|导师共同申请的基金项目。 意义按世界听力研究机构的统计,中度以上听力损失患者约占世界总人口的 6%,中国听损患者比率超过 9%,约为一亿三千万人。在听损患者的听力矫正治疗中,佩带助听器是最简单有效的方法。据调查,目前中国助听器市场每年的实际销售额大概在 7 亿元左右,并以每年 15%~20%的速度增长。目前中国市场上的全数字助听器几乎全由德国西门子、瑞士峰力、丹麦瑞声达、丹麦奥迪康、丹麦唯听、美国斯达克六家跨国企业垄断,中国由于缺少具有自主知识产权的数字助听器核心语音处理算法研究,导致完全失去了高端市场。本项目的研究对于汉语数字助听器的发展、汉语环境下听损患者的听力矫正治疗与生活质量的提高有积极的影响,具有重要的社会意义及广阔的市场价值。 内容(1) 连续汉语环境下听力矫正评价标准建立(2) 连续汉语语音特征建模(3) 针对听力矫正的汉语言语处理策略(4) 符合人耳听觉特征的分频段响度补偿方法(5) 复杂声场景下高精度低运算量自适应系统估计算法(6) 双耳多通道空间声源定位及自适应波束形成算法

成果介绍在微瓦级极低功耗的情况下，芯片可以应用至智能手机、可穿戴智能设备、小家电、大家电、玩具及车载等众多场景中。技术创新点及参数神经网络拓扑/计算精度动态自适应的系统架构，基于事件驱动的精度可控数模混合近似计算电路，实现面向各种背景噪声的场景自适应低功耗智能计算。基于22nm工艺，实现微瓦级(< 10uW)极低功耗下的高精度关键词语音识别样片验证，相比目前最新研究成果，硬件能效提高近3倍，且支持各种噪声下的高精度识别(Noise-robust recognition)，相关研究成果已发表在电路与系统领域顶刊IEEE Transactions on Circuits and Systems I: Regular Papers。市场前景可集成和使用在对手机、可穿戴设备、智能家居等多种应用场景的智能终端产品。产品当前已经在实验室完成样品测试，各项功能都处于行业优秀水平；芯片目前技术参数可以达到支持离线语音唤醒功能，支持5个唤醒词和10个命令词，还支持声纹识别。它支持3-5m的远场语音唤醒和识别，工作频率为50MHz，延迟不到10ms。

这款设备对使用者要求不高，而且可以录入使用者的语言，如方言等，提高语音识别的准确率。设备有不同通信版本可以选择，包括WIFI版、ZigBee版，4G版，4G版设备可以即插即用。 一、项目分类 关键核心技术突破 二、技术分析 现有的呼救设备可以通过通讯工具或智能终端设备实现，如对讲呼救器、手机、电脑或智能音箱等，然而这类设备往往需要特定的呼叫方式触发，且识别距离受限，在紧急关头难以真正起到呼救作用，而一些专业的呼救设备，往往价格高昂。 本实用新型实施例提供了一种室内语音呼助系统，以解决的现有呼救设备触发要求高且成本高昂的问题。  这款设备对使用者要求不高，而且可以录入使用者的语言，如方言等，提高语音识别的准确率。设备有不同通信版本可以选择，包括WIFI版、ZigBee版，4G版，4G版设备可以即插即用。

成果简介产品交互界面是“人” 安全、 高效和舒适使用产品的必要载体， 是硬件界面和软件界面的综合， 是人与产品信息交流和交互操作的主体。 产品交互界面设计在工作流程上包括产品外观结构设计、 产品人机交互设计和外观造型设计， 从而使人通过感知产品结构、 形态、 色彩、 细节、 声音， 甚至是无形的东西来获取对产品的认识和使用方式的理解， 它关系到产品的功能实现、 质量的提升和消费者满意度的建立。产品交互界面设计以提高用户认知和产品可用性为目标， 帮助生产者提出可用性的产品交

Ø  成果简介：交互式电子沙盘基于实体地形模型，利用动画及多媒体软件演示，通过投影、大屏幕、触摸屏等多种方式同步演示文字、图片、视频等信息，结合灯光音效及配音讲解，生动直观地进行展示，同时，增加的多人互动模块可以通过计算机视觉技术，实现人与沙盘的自然交互，从而让参观者更轻松地获取简明、优美、逼真的动态信息。Ø  项目来源：国家高技术研究发展计划（863计划）Ø  技术领域：增强现实、虚拟现实、互动技术

产品详细介绍产品概述： 交互式智能平板是采用红外阵列扫描感应技术，专业音视频处理技术整合的多功能教学、会议应用一体化产品，操作方便快捷，互动功能强化先进，演示效果出色。 功能特点： 配置主频达2.4GHz的4核CPU，内置2G内存和32G Flash闪存，运行安卓4.3系统，运行速度快，操作体验流畅； 采用红外阵列扫描感应技术，支持真6点完美触摸体验，画板软件支持画中画或全屏模式，画中画可通过手势操作实现外部2路HDMI高清视频的任意无缝切换；同时实现声、视、图、文全方位体验； 支持外部HDMI1输入触摸回控，可在白板端实现对外部电脑输入端的完美控制； 一键推送，支持Windows有限和无线显示模式、安卓无线显示模式，支持2台PC电脑同时推送到白板上显示，多台PC推送时实现智能推挤，且支持触摸回控功能。方便师生之间课题作业实时对比分析，极大的增强了师生之间交流互动； 支持3路USB2.0接口，可连接鼠标、键盘以及USB存储设备，可方便快捷的实现相关控制以及数据交换； 内嵌云教育资源平台，在联网状态下，老师可根据教学需求在教学资料库中任意下载中小学教学课本、音视频教学文件等教学互动资源辅导教学，实现教学互动一体化。具备实时备课功能，简化了老师的备课工作，增强了学生课堂学习的积极性。 规格参数： 参数名称 CR-EWB84 显示屏参数 屏类型 TFT LCD 分辨率 3840(H)X2160(V) 亮度 450cd/m2 对比度 5000:1 可视角度 水平178度 垂直178度 寿命 ≥50000小时 电视系统 USB端口 U盘、鼠标、键盘 WiFi无线网络 802.11 b/g/n 声音输出功耗 2x10W 立体环绕声 有 数字全高清电视 支持1080P 触摸系统 真6点红外触摸 Android无线显示 支持 Windows PC无线显示 支持 处理核心 高清智能引擎4核3G处理器 智能操作系统 Android 4.3 高清多媒体接口 HDMI 触摸回控 支持 规格 整机尺寸（长x宽x厚） 1954*1140*70(不含喇叭厚度） 净重（裸机） 105KG 电源 100Vac~240Vac 50/60Hz ±5％ 额定功耗 450W 待机功耗 0.5W 系统连接图：

产品详细介绍产品概述：  交互式智能平板CR-EWB70是以安卓4.3系统为平台，采用红外阵列扫描感应技术，专业音视频处理技术整合的多功能教学、会议应用一体化产品，功能强大，性能优越，操作方便快捷，互动功能强化先进，演示效果非常出色。  采用4核2.4GHz主频CPU、2G内存、16G Flash闪存，运行安卓4.3系统，支持真6点完美触摸体验，画板软件支持画中画和全屏模式，支持外部接口输入视频回控模式，支持Windows有线显示、安卓无线显示，Windows无线显示模式并支持回控功能，支持2路HDMI高清视频输入，支持2路HDMI高清视频输出(其中1路为环路输出)，支持1路3.5mm外部音频输入和1路平衡音频输出，使用方便，操作体验流畅。 功能特点： 配置主频达2.4GHz的4核CPU，内置2G内存和16G Flash闪存，运行安卓4.3系统，运行速度快，操作体验流畅； 采用红外阵列扫描感应技术，支持真6点完美触摸体验，免驱触控，无漂移，画板软件支持画中画和全屏模式，画中画可实现外部2路HDMI高清视频的任意切换，可同时实现声、视、图、文全方位体验； 支持外部接口输入视频回控模式，可实现对电脑的相关控制； 支持Windows有线和无线显示模式、安卓无线显示模式，支持2路视频同时推送，并且支持回控功能； 内嵌云教育软件，备课教学、师生互动方便快捷； 支持3路USB2.0接口，可连接USB鼠标、键盘以及USB存储设备，可方便快捷的实现相关控制以及数据交换。 规格参数： 参数类型 CR-EWB70 电视系统 USB端口 802.11 b/g/n WiFi无线网络 1路HDMI直播环出接口 声音输出功耗 2x10W 立体环绕声 有 数字全高清电视 支持1080P 多点触控 6点 Android无线显示 支持 Windows PC无线显示 支持 处理核心 支持 智能操作系统 高清智能引擎4核处理器 高清多媒体接口 HDMI 触摸回控 支持 云教育功能 支持  显示屏参数 屏类型 TFT LED 分辨率 1920(H)×1080(V) 亮度 400cd/m2 对比度 5000:1 规格 可视角度 水平178度 垂直178度 寿命 ≥50000小时 白板尺寸 1643(L)×70(W)×965(H)mm 带支架尺寸 1643(L)×670(W)×1815(H)mm 净重（裸机） 75KG 电源 100Vac~240Vac 50/60Hz ±5% 额定功耗 300W 待机功耗 0.5W