智能服务语义理解与优化调度

针对目前智能服务系统在服务过程中存在的人机交互语 义理解不够深入、服务适配实时性差、以及智能化优化不足 等问题，利用深度学习、强化学习、知识图谱等技术手段， 重点研究：1）高效低成本的服务数据获取方法，为各类基 于机器学习的服务模型提供高质量训练数据；2）面向服务 过程的深度语义理解，包括服务意图识别、服务过程抽取、 事件检测等；3）面向复杂服务需求的服务任务智能调度， 结合具体服务场景展开基于多目标多约束的智能优化。

浙江工业大学 2021-05-06

基于汉语语义理解的不同意识水平意识障碍患者的诊断与苏醒预测

随着现代神经外科手术和神经重症技术、理念和诊疗系统的发展，越来越多严重脑损伤患者得以幸存，但因此维持于严重意识障碍状态下的患者也越来越多，如何准确判断患者的意识水平和预测患者能否苏醒就愈加重要。

复旦大学 2021-01-12

软件实景互动智能帮助系统

（一）项目背景 用户在使用现有的软件或电子设备中主要有以下三类问题： 一是不知道某一软件是否有自己需要的功能，或是不知道有没有软件开发出了自己需要的功能； 二是在软件中找不到所需功能按钮在哪里； 三是知道某软件有自己需要的功能，也知道在哪里，但就是不会用或用不好。 虽然都有帮助说明书，但这三类问题还是极大影响了软件和电子设备的使用效率，同时制约着软件的广泛普及，是整个电子信息行业的共性问题。 （二）项目简介 本项目提供一种面向软件使用的基于实景语义理解的互动帮助系统，包括用户使用语音或文字自然语言语义理解、用户软件操作实景获取、用户意图分析、给出用户基于实景的互动帮助。 实景语义理解的互动帮助技术突破了现有软件或设备使用说明书使用中的瓶颈，解决由于省略及歧义而使用户在软件使用中的自然语言提问难于理解的问题，减少了用户在理解说明书中的困惑、使用复杂一些功能时的困难，有效解决不知道有没有某一功能，找不到想要的功能及功能不会用的问题。 （三）关键技术 本项目利用深度学习的自然语言处理技术开发了一种面向软件使用的基于实景语义理解的互动帮助系统，可解决目前电子设备和软件使用说明书使用不易使用和不方便的问题。 1.由于在基于深度学习的自然语言处理技术中加入了获取的用户使用实景信息，解决由于省略及歧义而使用户在软件使用中的自然语言提问难于理解的问题。 2. 高效解决了用户不知道某功能按钮的查找问题。使用用户使用实景信息，能保证用户以最快捷的方式找到使用功能按钮。 3. 高效解决了用户用好软件功能的问题。对于一些复杂功能，通过实景信息与对话技术，能让用户用好复杂的软件功能。  4. 高效解决了用户查找软件是否有某一功能的问题。

西安电子科技大学 2023-07-20

视频与图像理解

研究视频与图像的视觉特征表示与特定对象的视觉跟踪 和识别，分析视频结构化语义信息，综合视频与图像检索、 动作识别与行为分析、视频目标跟踪等技术，进而解决视频 与图像理解的难题。

浙江工业大学 2021-05-06

实景声吊麦智能扩声系统

恩平市雅克音响器材厂 2021-08-23

漫画图像版面理解技术

漫画作为一种特殊的休闲娱乐类出版物，通常由简单形象的绘画内容和少量的文字构成，深受不同国家各年龄段阅读者的喜爱。随着移动终端(如智能手机、平板电脑、电子书阅读器)的普及，越来越多的读者开始基于移动终端阅读漫画电子内容，漫画移动阅读已成为漫画出版产业的发展趋势，出现了大量的漫画内容网站以及相应的APP阅读软件（如Apple store里的漫画控、Comic glass，Android应用市场里的卡布漫画、有妖气漫画等）。然而，现有的漫画电子出版物及以往大量的历史纸质出版物通常按照纸质媒介的大小进行排版设计，受漫画内容及排版布局、移动终端屏幕大小及分辨率的限制，无法在移动终端上清晰完整地展示。 为了解决该问题，北京大学计算机科学技术研究所“网络内容保护与文档处理实验室”师生通过近几年的攻关，研究出了漫画图像版面理解技术，对该问题提出了有效的解决方案。

北京大学 2021-02-01

复杂环境的视觉感知、重建与理解

利用多机器人和多模态视觉传感器有效探索与感知复杂 环境的三维结构，进而理解和分析三维场景。研究从多源异 构的机器人定位与建图等环境感知方面、多模态融合的前景 分割、显著性检测和目标检测等场景分析方面取得突破。

浙江工业大学 2021-05-06

语义Web和大数据分析

与华为技术有限公司开展互联网语义分析合作研究，双方共同研发了“电商知识图谱自动化构建和电商评论分析系统”，该系统可以自动化将不同电商网站的数据抽取和集成，形成一个庞大的电商知识图谱，并且利用这个知识图谱来对电商评论做语义分析。该项目中的技术已经被华为公司用于大数据中的视频分析，并且产生了良好的经济效益。另外，与百度签订了“本体及知件技术构建医疗领域知识库和应用研究”项目，提交并审核通过一项专利“一种医疗知识库中保健品与疾病的关联构建方法”，并且提出一种word embedding的方式挖掘非结构化数据中实体关系的方法，项目成果被百度用于医疗保健品的搜索中，取得了很好的社会效应。

东南大学 2021-04-11

传统发酵食品工艺机理解析与优化

通过国家“十一五”科技支撑计划、863 计划、国家自然科学基金、江苏省自然科学基金及镇江市科技支撑计划的资助，解析我国优势传统发酵食品---如镇江香醋的功能性组份及其成因，探寻我国传统多菌种混合发酵过程中微生物群落结构与功能之间的关系，进而进行其功能优化调控。 创新要点 以原位分离出的功能微生物进行“生物强化”，调控产酸、产酯、改善产品品质、提高原料利用率、缩短发酵周期。 

江南大学 2021-04-11

一种场景和目标感知与理解技术

1. 痛点问题 场景、目标对象的感知与语义理解在医疗健康、运动培训等领域具有广阔的应用前景，其核心是如何在像素级、对象级、场景级多层次、多尺度表示下实现语义、几何及空间关系的透彻感知。 现有计算机视觉方法或激光雷达等手段无法同时获取多个维度的高质量场景与目标信息，同时现有的深度估计、语义分割、位姿估计等相关技术，存在识别精度低、提取不到关键信息、应用场景单一等问题，无法满足大尺度场景应用的需求。 2. 解决方案 团队提出多模态采集、时空复用编码摄像方法，获取大景深、高时空分辨、丰富的精确场景视觉信息；提出一种基于物理空间推理和语义关联建模的动态场景深度估计方法，综合语义信息、几何结构信息以及时空间信息进行滤波，实现复杂动态场景的无先验深度估计，将观测目标与背景进行区分；提出一套从图像和视频中预测目标的位置和姿态的方法，包括迭代匹配的深度网络、基于物体三维坐标的旋转/平移解耦、自监督6D模型等，克服了遮挡、光照变化、视觉歧义与数据标注依赖等因素的影响，可以准确估计目标相对相机的 6D 位姿（3D平移量和3D旋转量）；构建了基于全卷积网络和兴趣区域的多目标实例检测与分割框架，有效的解决了复杂类别、场景遮挡情况下的多目标实例分割问题，能够实现同时对场景中多个目标检测与分析。 合作需求 寻求医疗健康服务、医疗器械等领域有相关技术开发、市场推广经验，能推广本技术落地的高科技企业，可以进行深度合作。

清华大学 2022-02-18