随着移动互联网、智能移动终端及云计算的迅速崛起，移动视觉标签搜索与识别已经成为有重要影响的关键技术之一。摄像头成为了移动互联网时代的入口，就像PC时代的搜索框一样。 “凤凰眼”视觉标签识别系统及产品原型通过自主研发的图像识别算法，实现“静态视觉信息的自动提取与识别”，所见即所得。当用户使用本产品来浏览感兴趣的目标物体时， 用户无需为商品拍照或扫描条形码，当摄像头对着目标“看”了几秒钟后，即可以将真实的物理世界信息映射为视觉标签并识别。 本产品可作为智慧景区、智能购物、私

XM-431眼示教放大模型   XM-431眼示教放大模型置于透明有机玻璃盒内，为眼球正中切口后的半侧眼球，可观察眼球正中矢状切面和半侧眼球的外部结构，可显示眼球的解剖（包括眼球壁和内容物）、眼副器（包括眼睑、结膜、泪器和眼球外肌）、视网膜神经细胞的显微结构和检眼镜眼底检查视网膜图像等。 尺寸：放大 材质：PVC材料

XM-426眼球仪模型（眼球成像演示模型）   XM-426眼球仪模型由成人眼球、光源、校正镜片、活动成像显示屏及底座组成，通过眼球前后及在正中与水平成75°切面，示眼球壁三层被膜， 眼球内晶状体（可改变曲率），玻璃体和虹膜，由外向内三层被膜做成梯形切面，并示其各部结构，在眼球后部装一垂直眼球轴的剖面，以示视网膜成像，可调节晶状体，示远视、近视成像。   尺寸：放大3倍，45×14×27cm 材质：PVC材料   模型结构： 1、眼球成像演示模型由成人眼球、光源、校正镜片、活动成像显示屏及底座组成。 通过眼球前后极在正中与水平成75度切面，示眼球壁三层被膜，眼球内晶状体（可改变曲率），玻璃体和虹膜。由外向内三层被膜做成梯形切面，并示其各部结构。 2、在眼球后部装一垂直眼球轴的剖面，以示视网膜成像。 3、晶状体系有机玻璃制成，二张拉紧的透明橡胶薄膜，里面充满液体。 4、曲率通过改变波纹管的容积来改变薄膜的曲率。 5、光源：220V，15W-40W烛形灯泡作为光源，离眼睛恰好为明视距离。 6、校正镜片由不低于400度的近、远视镜片组成。

XM-433眼常见病模型   XM-433眼常见病模型包括20种常见眼病的形态，每套模型由20只组成，分装入箱内展示正常眼、正常睑结膜、沙眼、、眼睑内翻、溃疡性睑缘炎、眼睑外翻、霰粒肿、麦粒肿、慢性泪囊炎、翼状胬肉、流行性出血性角结膜炎、角膜溃疡、角膜粘连性白斑、急性虹膜睫状体炎、巩膜炎、急性青光眼、老年性白内障、结膜异物、眼睑湿疹形态。 尺寸：放大3倍，37.5×56.5×9cm 材质：PVC材料   20种常见眼病: 1、正常眼：显示上下眼睑、睑缘、泪点、球结膜、巩膜、角膜、虹膜和瞳孔。 2、正常睑结膜：显示上下眼睑睑结膜，表面光滑透明，血管分布清楚。 3、沙眼：显示沙眼第二期重度（Ⅱ++），上眼睑睑结膜炎症，超过1/3以上面积，并有疤痕形成。 4、沙眼性血管翳：显示角膜上部有血管进入角膜组织，占角膜面积1/4。 5、眼睑内翻：显示上眼睑睑缘向内侧翻转，睫毛触及眼球角膜，造成角膜上部沙眼性血管翳，球结膜充血。 6、溃疡性睑缘炎：显示睑缘充血肿胀，睑缘睫毛根部有小脓泡溃疡和脓痂。 7、眼睑外翻：显示下眼睑向外侧翻转，睑结膜色红，肥厚，少光泽，下眼睑睑结膜与球结膜粘连。 8、霰粒肿：显示上眼睑睑结膜上蚕豆大小紫红色隆起肿块，中央呈灰黄色。 9、麦粒肿：显示上眼睑皮肤红肿，近鼻侧有黄色脓头隆起 10、慢性泪囊炎：指压泪囊部，从泪点流出黏液脓性分泌物。 11、翼状胬肉：显示角膜鼻侧有三角形翼状膜，头部进入角膜组织，体部血管丰富，肥厚，隆起。 12、流行性出血性角结膜炎：球结膜充血、水肿，有片状出血，角膜内有灰白色浸润点，下眼睑红肿。 13、角膜溃疡：角膜周围有明显混合性充血，角膜上皮和基质脱落缺损，形成角膜溃疡，有黄白色脓性分泌物。 14、角膜粘连性白斑：瞳孔梨状，梨蒂有白斑，为角膜病变所造成。 15、急性虹膜睫状体炎：混合性充血，瞳孔缩小不正圆。 16、巩膜炎：球结膜水肿，其下方巩膜呈紫红色充血。 17、急性青光眼：眼睑水肿，混合性充血，瞳孔中等散大，呈绿色反光。 18、老年性白内障：显示晶状体混浊，呈灰白色。 19、结膜异物：显示上眼睑睑结膜上黑褐色（铁屑）异物，伴结膜充血。 20、眼睑湿疹：显示下眼睑湿疹，睑缘充血肿胀，滤泡透明呈圆形。

3D微创手术因其治疗手段的先进已是发展趋势并在迅速普及， 3D腔镜、手术机器人、显微镜手术等都提供了3D影像数据。但目前 医生大多通过2D屏或佩戴3D偏光眼镜观看，给主治医生带来：3D 空间还原不准确影响手术安全和效率、手术屏画面昏暗不清晰、眼 镜易产生雾气遮挡视线、长时间观看眩晕等问题。 班度科技基于“周期像素复用”的实时两视点转多视点技术，自 主研发的「裸眼3D手术显示系统」解决了现有技术的困境，实现了 具有正确空间遮挡关系的3D成像，为医生提供精准、快速的判断决 策依据，可极大地降低手术风险和提升医生的诊疗效率，降低低年 资医生的学习曲线和规培成本，提升基层医疗水平。既能减轻医生 负担，又实现了3D手术场景的完整还原，提高了手术安全性和效 率，带来逼真、清晰、舒适的高性能体验。

利用多机器人和多模态视觉传感器有效探索与感知复杂 环境的三维结构，进而理解和分析三维场景。研究从多源异 构的机器人定位与建图等环境感知方面、多模态融合的前景 分割、显著性检测和目标检测等场景分析方面取得突破。

清华大学公共安全研究院和北京辰安科技股份有限公司快速搭建了疫情实时态势感知与分析系统，对区域疫情数据进行实时动态监测、搜集、分析和可视化，服务各级政府疫情应急的资源调度、态势研判和决策指挥。该系统在实时播报全国和世界范围内疫情最新动态的同时，对省级和地市级的人员迁徙比例与分布进行重点信息排查，密切关注人口流动与疫情分布的内在联系，为疫情跨区域传播规律和病例溯源提供依据。该系统深入剖析大数据并探查民众意识和情感倾向，研判民众主流感情倾向和重点关注事件等疫情相关舆情，以“情感分析拼图”、“事件文章热词云”和“全国舆情热度”等分析结果为引证，为辟谣和积极引导舆论提供帮助，在国家抗击疫情最为严重困难的时期为大众的理性思考和科学防备贡献力量。国疾病预防控制中心以及广东省、武汉市、合肥市、深圳市、广州市、佛山市等20多个省市在指挥调度中使用该系统。

自然场景视觉感知与理解是人工智能的前沿热点，其主要任务是对场景中的视觉要素进行认知，进而推断出其中包含的场景语义。IMAGINE实验室近年来相继从场景构成分析、场景内容推理、场景结构建模等角度对这一问题展开了系统研究，着重探索了融合先验建模与深度学习的自然场景视觉理解这一问题。大数据具有规模大、种类多、产生速度快、有价值数据密度低等特点。对大数据信息分析具有重要意义，也是目前研究的热点，其主要任务是利用数据分析的方法从大数据中获取有价值信息。IMAGINE实验室近年来结合深度学习前沿技术和传统数据分析方法进行数据分析和预测，并在海关大数据分析项目和国网电力冰风灾害预测项目中进行应用

01. 成果简介 本成果涉及一种多模态触觉感知装置，属于机器人传感器技术领域。与人类相似，机器人感知外界环境最真实、稳定、便捷的方式便是通过机器人手触摸，机器人手的感知能力决定了机器人是否能够正确认知外界环境以及机器人的操作精度、成功率等。在新一代机器人手中，传感装置已逐渐趋于阵列化、多功能化和集成化。目前常见的触觉传感器有压阻式、电容式、光电式等，它们都存在密度难以提高、电路处理复杂等问题。为了克服以上不足，近年出现了基于视觉的触觉传感装置，具有结构简单、信息丰富等优势。目前基于视觉的触感装置仍存在性能提升空间。 本项目将感温变色油墨材料应用于触感装置，感知机器人操作过程中的温度[1]。同时提出一种基于微视觉的触觉三维力检测方法，通过采集触觉接触区域内弹性体的形变图像的变化，采用一系列图像处理方法，并且使用神经网络拟合的技巧，定性并且定量的刻画物理世界中的触觉、滑觉等，从而提供了一种多模态触觉感知装置，可以得到三维接触力、接触物体表面的温度及纹理等多种模态信息[2]。本装置打破了传统触觉感知装置单模态信息采集的现状，可在同一感知装置中集成受力、纹理、温度等信息的测量，检测触觉、滑觉、压觉三维接触力，获得高精度的接触纹理信息，实现了多模态信息的测量，并将这些信息综合到对一个物体的识别、抓取操作中，使机器人更加智能化、人性化。本装置具有实时性好，检测稳定，检测误差小，检测精度高的优点。 图1. 基于微视觉的多模态触觉感知装置结构图图2. 结合多模态触感装置的机械手02. 应用前景 本成果技术可应用于工业机器人、智能机器人、人机协作、医疗康复等领域，应用前景广泛。03. 知识产权 本成果核心技术已申请发明专利3项。04. 团队介绍 项目团队致力于研究具备自主决策和学习能力的机器人操作技能学习系统。团队包括孙富春、方斌、刘华平、宋亦旭四位教师，专注智能机器人灵巧精准操作研究，研制了拟人触觉的传感装置、多模态穿戴交互装置、残疾人假肢灵巧手、仿人感知灵巧手和变刚度软体手，在本领域发表论文40余篇，申请专利20余项，获得IROS2016机器人灵巧操作比赛冠军、IROS2017服务机器人操作比赛亚军、WRC2016最佳科技创新奖等。同时团队和河北清华发展研究院合作成立了人工智能及机器人研究中心，共同推动智能机器人的产业化发展。05. 合作方式 技术许可。06. 联系方式 邮箱：liuyi2017@tsinghua.edu.cn， fangbin@tsinghua.edu.cn