|
搜索
搜 索
高等教育领域数字化综合服务平台
AI多模态情绪分析系统
AI多模态情绪分析系统，是人工智能与心理学、计算机视觉、听觉感知等学科深度融合的前沿方向。它不再局限于传统的问卷答题，而是像一位敏锐的观察者，通过分析你的面部微表情、语音语调、肢体语言，甚至生理信号，来实时、客观地"读懂"你的情绪状态。这种技术正在心理健康、教育、人机交互等领域开启全新的可能性。
这套系统的核心在于"多模态"和"融合"。它模拟了人类如何综合视觉、听觉信息来理解对方情绪的过程。
多源数据采集：系统通过摄像头、麦克风等设备，同步采集个体的面部视频、语音音频，甚至可接入可穿戴设备获取心率等生理信号。
单模态特征提取：针对每种数据，用不同的AI模型提取情感特征。
视觉：分析面部肌肉运动（如嘴角上扬、眉毛紧蹙）、头部姿势、眼神等。先进的技术甚至能捕捉难以伪装的微表情（持续仅1/25至1/5秒），或通过分析面部血流图谱（rPPG）来感知生理唤醒水平。
听觉：提取语调、语速、音高、能量（MFCC梅尔频率倒谱系数）等声学特征，判断声音中的情绪色彩。
文本/语义：如果涉及对话，系统还会分析说话内容的语义，理解话语背后的真实意图和情感倾向。
多模态融合与情感解码：这是最关键的一步。系统通过复杂的深度学习算法（如Transformer、自监督多任务学习框架等），将来自不同模态的特征信息进行时空对齐和深度融合。例如，一句愤怒的"我没事"，配上闪躲的眼神和紧绷的嘴角，才会被准确识别为"掩饰性的愤怒"，而非字面意思的"没事"。
湖南可心教育科技有限公司
2026-03-20
一种基于Hankel矩阵扫描的图像置乱方法
提出一种汉克尔矩阵扫描的图像置乱方法，算法实现简单，置乱度高，通用性强，并且能抵抗一定的攻击，可以很好的用于信息隐藏的预处理和图像加密，而且可以满足数字图像加密和隐藏的鲁棒性要求。
辽宁大学
2021-04-11
一种视频图像中提取前景的方法及装置
本发明实施例提供了一种视频图像中提取前景的方法及装置，所述方法包括：利用根据预设数量的背景帧图像建立的高斯模型消除有前景进入的视频帧图像的背景，获得消除背景后的视频帧图像；根据所述消除背景后的视频帧图像的信息和所述预设数量的背景帧图像的信息，生成预先训练好的神经网络模型的输入参数的值；根据所述输入参数的值以及所述训练好的神经网络模型生成相应的输出值；根据所述消除背景后的视频帧图像的信息和所述神经网络模型的输出值的关系，检测出所述消除背景后的视频帧图像包含的阴影点和光照噪声点。
电子科技大学
2021-04-10
超高分辨率图像增强与显示芯片（产品）
成果简介：超分辨率图像重建技术是近年来发展迅速的图像处理新技术，其 目的是超越成像传感器、成像和信道的分辨极限，利用所获低分辨率图像， 实现高分辨率图像的重建。超高分辨率图像增强与显示芯片项目利用超分辨 率图像实时处理技术，实现从一幅或多幅低分辨率视频图像处理获得高分辨率图像，在图像被放大的同时增强图像更多的细节，提高图像的清晰度和分 辨率，实现摄像传感器的低分辨率与显示器高分辨率之间的匹配，解决目前 图像获取与显示分辨率不匹配的瓶颈问题，在现有图
北京理工大学
2021-04-14
HWRX-3型红外热像仪图像采集卡的开发
HWRX-3型红外热像仪的视频信号是模拟信号，没有提供与计算机的数字接口，这对红外热像信息的存储、回放以及处理带来了一定的不便。因此我们设计了一套用于该红外热像仪系统的数据采集卡，Windows 98操作系统下的硬件驱动程序，以及具有多种图像显示、处理功能的用户应用程序。 视频采集卡是一个建立在复杂可编程逻辑器件（CPLD）基础上的系统。总的分为四个模块：信号调整，模数转换（ADC），
南京大学
2021-04-14
一种基于无参考的模糊图像质量评价方法
本发明属于图像质量评价领域，公开了一种基于无参考的模糊图像质量评价方法，该方法首先对待评图像进行重叠双正交变换；然后对变换系数做非均匀量化，主要是对高频分量进行粗量化，对低频系数进行细量化；再对重组系数进行反量化和重叠双正交逆变换获得参考图像；最后计算待评图像与生成的参考图像之间差异，得到图像质量评价因子从而对原图像进行质量的评估。评价结果与主观评价结果有较好的一致性，可以用于对模糊图像的评价应用中，大大提高了
华中科技大学
2021-04-14
一种医学图像的多维多种特征提取方法
本发明提供一种颈动脉图像的多维多种特征提取方法，具体为：（1）依据颈动脉的医学三维超声体数据构建感兴趣区域二维序列图像和感兴趣区域三维图像；（2）对二维序列图像提取二维特征，对三维图像提取三维特征，所述二维特征包括二维纹理特征、二维形态特征和二维弹性特征，所述三维特征包括三维纹理特征；（3）验证各种特征是否对图像分类具有贡献，保留具有贡献的特征；以假发现率最小为目标，在具有贡献的特征中搜索得到全局最优特征组合。本发明针对图像进行了多个维度多类特征的提取，囊括了纹理、形态、弹性三大类特征，特征数目多，
华中科技大学
2021-04-14
一种面向移动终端的抖动模糊图像复原方法
本发明公开了一种面向移动终端的抖动模糊图像复原方法；包·709·括(1)获得一幅移动终端抖动时的模糊图像；(2)获得陀螺仪在相机快门开启时间内，与移动终端抖动轨迹相关的输出序列；(3)对输出序列进行积分处理后获得移动终端的转动角度，并将转动角度进行坐标映射，获得抖动 PSF 模板；(4)根据模糊图像和所述抖动 PSF 模板，采用图像复原算法进行复原处理，获得复原图像。本发明根据移动终端内置的陀螺仪估计移
华中科技大学
2021-04-14
一种对称图像对称轴检测定位方法
本发明公开了一种鲁棒的图像对称轴检测定位方法，具体包括(1)图像边缘提取；(2)边缘点梯度计算；(3)边缘点对的中垂线方向及权值计算；(4)极坐标映射，寻找最优对称轴。本发明利用了对称图像边缘点梯度方向的对称性，针对边缘点集，计算任意两边缘点的中垂线，根据梯度方向计算该中垂线的映射权值，形成待选中轴线；利用了Hough 变换的映射机制，使用标准极坐标公式描述所有的待选中轴线，在对应的极坐标位置上累加映射权值，选择权值
华中科技大学
2021-04-14
一种图像匹配跟踪中匹配模板的选取方法
本发明属于计算机视觉、图像匹配技术领域，具体涉及到一种图像匹配跟踪中匹配模板选择方法。匹配模板选择方法分为匹配模板尺寸自适应确定步骤、匹配模板定位能力判定步骤两个部分；(1)匹配模板尺寸自适应确定步骤方法流程：以给定坐标点位置为中心，设定分割区域；对分割区域利用大津阈值分割算法自动阈值分割算法进行二值化，统计前景区域和背景区域的像素个数，求取前景区域像素个数与背景区域像素个数的比值；计算该比值与设定阈值之间的关系来
华中科技大学
2021-04-14