|
搜索
搜 索
高等教育领域数字化综合服务平台
基于虚实交互场景下的机器狗视觉控制系统研究
一、项目进展
创意计划阶段
二、负责人及成员
姓名
学院/所学专业
入学/毕业时间
学号
史雨杰
电信院/自动化
2019.9/2023.7
201931072537
李耀辉
电信院/机器人工程
2019.9/2023.7
201931072628
刘忠跃
电信院/自动化
2018.9/2022.7
201831073203
王怡欣
电信院/自动化
2018.9/2022.7
201831073423
孟泽涛
电信院/自动化
2018.9/2022.7
201831073302
三、指导教师
姓名
学院/所学专业
职务/职称
研究方向
李杰
电气信息学院
讲师
人工智能
四、项目简介
本项目基于虚实交互技术、仿生机器狗运动控制、机器视觉、机器算法等方面展开研究。其目的在于增强虚实场景下机器狗与现实环境的交互能力，使其更快速地适应复杂地形，并借助机器视觉丰富其应用性。机器狗采用Jetson-Nano为主控板，其上运行ROS系统，采用分布式运行rosserial_arduino、rosbridge实现机器狗运动控制和虚拟场景通信的环节；利用SLAM技术精确构建地形图样，模拟人的真实视觉功能并通过图像摄取装置赋予机器狗，使机器狗能够对图像信号进行获取和识别，并通过数字化处理以实现其在多目标环境下的个体追踪功能以及对人体的姿态识别功能。
西南石油大学
2023-07-17
一种双耳语音增强方法及其在音视频电话会议系统中的应用
针对音视频会议系统的前端声信号釆集与增强问题及行业发展的 急迫需求，本技术研发团队在国家自然科学基金、江苏省自然科学基 金等资金支持下，攻克语音降噪和回声消除等语音增强关键技术，完 成了具有自主知识产权的融合声源定位、语音降噪、回声消除等一系 列语音增强算法的音视频电话会议系统，打破了国外产品在该领域的 垄断地位。在中关在线的会议电话品牌排行榜上，深圳市音络科技有 限公司的市场占用率达到73. 2%,远高于国际知名品牌宝利通的16. 1%O
南京工程学院
2021-01-12
一种面向人机交互的“1”手势识别方法与系统
本发明公开了一种面向人机交互的“1”手势识别方法，可应用于手机、电脑、电视等电子产品的操控。该方法步骤如下：人脸检测，拳头检测，肤色标记，亮度计算。本发明在手势识别过程中，将摄像头采集到的 YUV 视频帧图像中的亮度信息 Y 与颜色信息 UV 独立开来，先利用 UV 通道信息进行肤色的点的采集以及标记，再利用 Y 通道亮度信息进行进一步的判断；其中 UV 通道信息将肤色点与非肤色点区分开，Y 通道信息将与肤色点相近的
华中科技大学
2021-04-14
中银/BOCT交互式电子白板多媒体教学一体机
产品详细介绍
中银/BOCT交互式电子白板多媒体教学一体机
中银(75英寸）教学会议触摸一体机
深圳市中银科技有限公司
2021-08-23
海信交互式触控一体机增强版WR系列
海信交互式触控一体机增强版WR系列，具备差异化功能，配置高且用户体验好，创新性的 加入AI智能识别，NFC权限管控，以及摄像头和麦克风功能，迎来全新智慧课堂。将触控层与显示层全面贴合，滤除空气层减 少反射，可视角度更高，画面更清晰。内置摄像头人脸识别进行教室设备管控，秒 刷人脸简化解锁操作，保障设备安全。全流程教学数据一站式融通，实现高效互动 课堂。高配教学系统，高速引擎运转工作，帮助多 媒体课件流畅播放、不卡顿。密码锁，按键锁，NFC联动校园一卡通等多 重设备权限管理方式，助力设备管控，保障信 息安全。全新白板，全新教学工具，支持智能绘图，智 能绘表，智能书写，智能无处不在，让教室更 智慧，教学更省力。
青岛海信商用显示股份有限公司
2021-08-23
科普领域低成本高性能大型仿人机器人智能交互应用技术
实现非特定人的自然流畅的对话，准确率在99%以上，内容在600句话以上，同时可以发出男声、女声、卡通声等合成效果，具备5种语言以上的语音表达能力（汉语、英语、日语、韩语、阿拉伯语）；在此基础上，完成10种以上不同情绪的语音表达。图像处理方面，基于场馆内光线条件，实现非特定人的人脸识别，准确率在95%以上，同时完成6种以上的典型表情识别，5种以上基于典型情绪的特定行为理解，准确率93%以上。在脸部有17个自由度，与人工皮肤材料有机配合，完成10种以上的表情生成，躯干部分由高性能伺服控制系统进行驱动，完成21个自由度的灵活运动控制，过载能力（190%，1分钟），调速范围（0%-110%额定速度），恢复时间（300毫秒以内），速度超调（2%以内），电流超调（13%以内），加减速时间（6秒以内）。数据库可以进行实时更新，数据信息内容在10000条以上，通过无线局域网完成，智能库可以根据现场制订规则，相应的响应时间在600毫秒以内。可以和展区内全能机器人、变形金刚等设备进行互联，实时响应时间小于500毫秒。该技术可应用于炼钢铁水的脱硫和化铁炉铸造用铁水的脱硫等领域。
北京科技大学
2021-04-11
基于交互力识别运动意图的欠驱动康复机器人的控制方法
本发明属于外骨骼机器人控制相关技术领域，其公开了一种基 于交互力识别运动意图的欠驱动康复机器人的控制方法，其包括以下 步骤:(1)确定欠驱动康复机器人的驱动电机数量及驱动角度矢量;(2)确定运动关节角度矢量;(3)确定初始关节角度矢量。(4)计算出传动矩 阵;(5)求得驱动电机与关节转角之间的关系式;(6)确定欠驱动康复机 器人的刚体雅可比矩阵;(7)确定欠驱动康复机器人末端的速度映射矩 阵;(8)构建出驱动电机的驱动空间到欠驱动康复机器人操作空间的投 影矩阵;(9)根据测量数据计算出患者的手施加在
华中科技大学
2021-04-14
基于柔性传感器的智能机器人“慧听”人机交互系统研发
目前第一代完整的呼吸音采集设备已研发完毕，完全实现呼吸活动的柔性无感持续智能监测评价和适应多场景下交互设计需求，提高医疗救护能力和应急救援能力，减轻医疗及养老行业人力与经济运营成本，创新引领社会与经济发展。
图1 技术路线
【技术优势】
(1) 基于驻极体薄膜的高灵敏度接触式压力传感器
目前用于呼吸音及心音监测的传感器大多采用较硬的基底，难以适应人体胸部曲线，不适合长期可穿戴使用。因此，本成果基于驻极体的自驱动压力传感器的自供能、响应速度快和灵敏度高等优势，设计了一种用于可穿戴式声音监测的高灵敏度柔性驻极体压力传感器，以实现对人体呼吸音与心音地长期、实时监测。
图2 部分成果展示
(2) 智能呼吸音监测分析预警平台
通过深入临床大规模收集心音和呼吸音样本、对病理性样本进行学习训练，对信号的模式识别进行研究匹配，采用人工神经网络、支持向量机两种识别模式，对病理性声音特征进行分析得出智能化参考病症分析。由于呼吸音信号的复杂性，同一种类型的呼吸音有不同人或是同一人在不同时间发出时，样本数据不完全相同，传统方法容错率与识别率极低。本成果将呼吸衰竭患者的呼吸音数据进行分类识别和特征标定，采用人工智能算法进行测试和集训，实现为大数据分析提供数据参考。
(3) 呼吸音智能监测预警系统的人机交互设计
通过分析多个智能呼吸音监测预警操作系统的使用场景、认知特点、输入和输出方式，归纳出它们在交互设计上的一般性的设计原则和设计缺陷。通过多学科的交叉，如人因功效学、设计语义学、设计美学、设计心理学等学科，进行了全面整体的交互设计研究。
图3 智能呼吸音诊断软件界面
图4 临床人员操作软件试用
【性能指标】
华中科技大学
2023-06-19
一种基于立体视觉的三维手掌姿态识别交互方法和系统
本发明公开了一种基于立体视觉的三维手掌姿态识别方法和系统，属于计算机视觉和人机交互技术领域。本发明包括：使用立体视觉信息采集设备进行数据的采集，得到包括深度信息在内的三维数据；·745·通过得到的三维数据对手掌进行分割，然后运用平面拟合，获得手掌在三维空间中的姿态；根据跟踪识别的手掌姿态，匹配预定义的标准手势，进行具体的三维应用，实现人机交互。本发明通过识别手掌的姿态，使得识别的精度更高，更少的出现误识
华中科技大学
2021-04-14
面向脑损伤与渐冻人的脑控康复机器人与语言交互系统
高校科技成果尽在科转云
西安交通大学
2021-04-10