适合编程教学实践课堂  适合AI教学实践课堂 教学控制纯硬件设计，开机即教，零维护 重塑电子教室，智启交互与拓展新境 合班授课新高度，真正实现全球授课 自带设备入课堂，文件收发超丝滑 全系统兼容，Windows、苹果、信创产品随心带    

感官控制的人机交互(human-machine interface, HMI)可以在人和外界 设备之间建立新的自然交流途径，有利于提高人们的生活品质，例如，有意识 地眨一下眼睛，即可开/关电灯。传统的采用眼为微弱的体表生物电信号，却 忽略了眨眼引起的太阳穴附近皮肤的微小运动。本项目采用摩擦纳米发电技术 (triboelectric nanogenerator, TENG ),设计一种微运动 / 位移传感器 (mechnosensationalENG, msTENG),对于该微小运动的探测有极高的灵敏度 (数百倍于同步眼电信号)，并且相对于传统的眼电探测电极具有更好的耐久 性和稳定性。通过与眼部巧妙的附着方式，获取高灵敏度和持久稳定的眨眼 信号采集，并将此眼部微动传感器用于人机交互，构建了眼动控制家用电器 和眼动虚拟打字界面等人机交互系统。这一研究的开展，给感官控制人机交 互领域注入了新的设计理念，使得通过眨眼来控制外部设备有希望从实验室走 向我们的日常生活。 关键技术： (1)  基于摩擦纳米发电技术的眼部微动传感器设计(包括工作模式的选择, 摩擦材料、电极材料的选择及加工等)以及器件制作工艺水平，都将直接影响 传感器的灵敏度、稳定性、美观舒适性，这在整个系统中是最为关键的技术。 (2)  眼部微动传感器在眼部周围附着方式的设计，需要保证器件的灵敏度、 信号的稳定性和操作的方便性，并考虑使用上的舒适美观。这是这项技术能否进 入人们实际生产生活的重要因素之一。 (3)  基于眼部微动传感器的人机交互界面的开发，要求功能适用、界面友 好、操作简易、性能稳定，便于正常人群和闭锁综合征LLock-in，)患者等特 殊人群的使用，这是这项技术具有重要应用前景的关键技术之一。创新点： (1)     首次将基于摩擦电和静电感应耦合的自驱动高灵敏传感器作为替 代传统生物电传感器应用于感官控制的人机交互系统，为人工智能领域注入了 新的传感器设计理念。 (2)     将基于摩擦电和静电感应耦合的自驱动眼部微动传感器巧妙地固 定在眼镜架上，并做到位置可微调，对比传统的眼电传感器将多电极贴在眼部 附近，不仅美观舒适、成本低廉和操作简单，而且采集的信号灵敏度高，信号 输出稳定可靠。 (3)     摩擦电和静电感应耦合的传感技术，采用的单电极信号采集，直 接采集微运动引起的电信号，从信号采集源头上突破了传统的生物电信号采集 弊端(采集多电极间势差变化信号)，可提高传感器的灵敏度数百倍。因此，避 免了传统眼电系统中精准识别算法的开发和严格操作技术的培训等。市场及经济效益分析： 基于摩擦纳米发电技术的微动传感器制作成本低廉，因其高灵敏度和 可靠性带来的后端设备简化，以及其操作的简易性和侃戴的美观舒适性，都 将促成该项研究成果走出实验室服务于广大群众，特别是渴望与外界因此具有非常大的市场价值。恢复交流的特殊疾病患者们，而这一群体在中国高达20 万人并有逐年上升的趋势。

一、项目进展 创意计划阶段 二、负责人及成员 姓名 学院/所学专业 入学/毕业时间 学号 史雨杰 电信院/自动化 2019.9/2023.7 201931072537 李耀辉 电信院/机器人工程 2019.9/2023.7 201931072628 刘忠跃 电信院/自动化 2018.9/2022.7 201831073203 王怡欣 电信院/自动化 2018.9/2022.7 201831073423 孟泽涛 电信院/自动化 2018.9/2022.7 201831073302 三、指导教师 姓名 学院/所学专业 职务/职称 研究方向 李杰 电气信息学院 讲师 人工智能 四、项目简介 本项目基于虚实交互技术、仿生机器狗运动控制、机器视觉、机器算法等方面展开研究。其目的在于增强虚实场景下机器狗与现实环境的交互能力，使其更快速地适应复杂地形，并借助机器视觉丰富其应用性。机器狗采用Jetson-Nano为主控板，其上运行ROS系统，采用分布式运行rosserial_arduino、rosbridge实现机器狗运动控制和虚拟场景通信的环节；利用SLAM技术精确构建地形图样，模拟人的真实视觉功能并通过图像摄取装置赋予机器狗，使机器狗能够对图像信号进行获取和识别，并通过数字化处理以实现其在多目标环境下的个体追踪功能以及对人体的姿态识别功能。

产品介绍 捷宇科技柜外清：M30B信息交互终端是一款针对金融或类金融窗口的无纸化应用产品，设备以定制化的安卓系统集电磁手写、电容触控、硬件密码键盘、软件乱序键盘、指纹仪、客户评价器、广告播放、数据加密存储等功能为一体。实现柜外设备“一柜清”，为业务窗口提供新型电子业务受理方式，实现无纸化办公，有效提升业务窗口服务品质和窗口形象。适用于金融、邮政、通讯、公检法、公共服务等智慧服务厅环境。 10.1寸真彩轻薄 1280*800分辨率24位真彩色，更好展示业务，提升客户体验。机身仅18mm厚度，演绎极致轻薄。 多种功能模块 采用安卓系统，支持电子签名、密码输入、信息交互、服务评价、多媒体广告等，提供增值服务. 丰富外设扩展 支持电容电磁双模屏，出厂前选配指纹仪、接触和非接IC卡，支持电子签名、远程授权、金融IC卡等业务应用。 统一管理平台 支持远程管理，批量下发升级包和视频图片，配置设备参数等，管理更高效快捷。

希沃品课是一套由希沃自主研发的面向高职教师生的智慧课堂解决方案。产品主要围绕课前课中课后的教学场景，为数字化课堂、互动课堂和同步课堂的开展提供高效稳定的技术和产品支撑，为高职校信息化课堂赋能

爱校对 错别字校对工具 依托清华大学人机交互实验室的技术成果，通过深度学习技术在自然语言处理领域的创新应用，致力于打造精准度更高、功能更强的文字校对产品，具备易混词、错别字校对；语法错误检查；政治性差错检查；敏感词、禁用词检查； 旨在为文字工作者提供高效的文字纠错工具，降低校对成本，提高校对效率和准确率。  

产品详细介绍

本发明公开了一种面向人机交互的“1”手势识别方法，可应用于手机、电脑、电视等电子产品的操控。该方法步骤如下：人脸检测，拳头检测，肤色标记，亮度计算。本发明在手势识别过程中，将摄像头采集到的 YUV 视频帧图像中的亮度信息 Y 与颜色信息 UV 独立开来，先利用 UV 通道信息进行肤色的点的采集以及标记，再利用 Y 通道亮度信息进行进一步的判断；其中 UV 通道信息将肤色点与非肤色点区分开，Y 通道信息将与肤色点相近的

目前第一代完整的呼吸音采集设备已研发完毕，完全实现呼吸活动的柔性无感持续智能监测评价和适应多场景下交互设计需求，提高医疗救护能力和应急救援能力，减轻医疗及养老行业人力与经济运营成本，创新引领社会与经济发展。 图1 技术路线 【技术优势】 (1) 基于驻极体薄膜的高灵敏度接触式压力传感器 目前用于呼吸音及心音监测的传感器大多采用较硬的基底，难以适应人体胸部曲线，不适合长期可穿戴使用。因此，本成果基于驻极体的自驱动压力传感器的自供能、响应速度快和灵敏度高等优势，设计了一种用于可穿戴式声音监测的高灵敏度柔性驻极体压力传感器，以实现对人体呼吸音与心音地长期、实时监测。 图2 部分成果展示 (2) 智能呼吸音监测分析预警平台 通过深入临床大规模收集心音和呼吸音样本、对病理性样本进行学习训练，对信号的模式识别进行研究匹配，采用人工神经网络、支持向量机两种识别模式，对病理性声音特征进行分析得出智能化参考病症分析。由于呼吸音信号的复杂性，同一种类型的呼吸音有不同人或是同一人在不同时间发出时，样本数据不完全相同，传统方法容错率与识别率极低。本成果将呼吸衰竭患者的呼吸音数据进行分类识别和特征标定，采用人工智能算法进行测试和集训，实现为大数据分析提供数据参考。 (3) 呼吸音智能监测预警系统的人机交互设计 通过分析多个智能呼吸音监测预警操作系统的使用场景、认知特点、输入和输出方式，归纳出它们在交互设计上的一般性的设计原则和设计缺陷。通过多学科的交叉，如人因功效学、设计语义学、设计美学、设计心理学等学科，进行了全面整体的交互设计研究。 图3 智能呼吸音诊断软件界面 图4 临床人员操作软件试用 【性能指标】