搭建多模态以及全视角环境感知平台，研发复杂环境下多模型车辆状态多源信息融合估计技术，研发高精度同步定位与建图技术，研制高鲁棒性自适应车辆路径规划和轨迹跟踪控制系统，研发基于车路协同V2X的车辆安全辅助驾驶系统与自然人机交互界面，研发智能卡车编队控制技术，形成融合感知、定位、决策、控制、车路协同的L2-L4智能驾驶解决方案。

成果介绍ADAS/AD系统核心是决策算法，团队在这方面掌握全套的核心控制算法，并通过实车封闭赛道测试。在实车控制方面，选用农机测试是针对农田复杂环境判断决策后的实车控制效果，实际效果有很大优势，应用到铺装路面的乘用车属于向下兼容。技术创新点及参数搭建了红外成像、彩色可见光成像、多线激光雷达成像等技术组成的车载超模态光学传感；研发高精度同步定位与建图技术，研制高鲁棒性自适应车辆路径规划和轨迹跟踪控制系统；针对车路协同的基于4G网络的专用LTE-V直联通讯技术；市场前景1、实现车道线实时检测和可行驶区域的识别；2. 多目标交通场景的准确识别和定位；3. 实现全局即时定位与地图构建（SLAM）；4. 超模态低辨识度目标识别，构建超模态低辨识度目标同步拍摄系统；5. 组合导航技术；6. 红外感知技术。

设计并实现了一个图像半自动标注系统，以减轻自动驾驶场景中图像数据标注的工作量。该系统打通图像自动标注流程，利用基于深度学习的目标检测方法对图像中的交通目标进行预标注，随后交于用户检查标注结果，并自动整理输出图像标注数据。此外还开发实现了大量实用的图像标注功能，以支持用户进行图像标注，例如2D目标标注、交通标志标注、车道线标注、车灯标注、施工区域标注、目标跟踪标注、2.5D目标标注、停车位标注等。该系统投入使用后大幅提升了图像标注工作的效率，道路交通目标的平均标注速度相较于手工标注提升了115%。 相关技术指标：自动标注系统的平均标注速度为280张/人天。标注算法的漏检率为6.2%、准确率为92.3%、贴合率为81.2%。 技术指标满足系统设计要求，实际效果令人满意。 技术创新点： 1）实现了标注流程的半自动化，大幅减轻在标注流程上的工作量。 2）在标注功能上，相比已有可获得的工具，在交通目标的类型及标注特性上有了较大扩充。 3）在标注性能上，应用了成熟、领先的目标检测算法和机制如ResNeXt、注意力机制、Focal Loss、GIoU Loss等，并进行若干改进，设计了定位置信度模块、倒金字塔注意力模块、稀疏结构注意力机制等，显著提升了模型的检测效果，特别是小目标以及全局性关联目标检测性能。

图像识别服务基于大数据和深度学习实现，可精准识别图像中的视觉内容，包括上千种物体标签、数十种常见场景等，包含图像打标、场景分类、鉴黄等在线API服务模块，应用于智能相册管理、图片分类和检索、图片安全监控等场景。

产品详细介绍 图像定位系统  系统概述 电教摄影师都有这样一个体会：工作很辛苦！尤其是在多机位拍摄时，更加辛苦。当富有激情的老师授课时，在讲台上来回走动，不断展示新的PPT幻灯片，经常与学生交流，为了拍摄好这样的授课情景，摄影师十分忙碌：需要不断推拉摄像机跟踪拍摄老师图像，需要通过切换台不断在VGA与摄像机之间进行切换，还需要调整摄像机对准回答问题的学生，并进行镜头切换。有了PowerCreator Graphic Position System 图像定位系统后，这些工作都可以自动完成（还需要PowerCreator Media Cast配合使用，后面有详细介绍），无需人工参与。 　　　　　　　　　　　 图像定位系统结构图如下所示：    功能特点 系统组成 PowerCreator Graphic Position System 由两个子系统组成：教师跟踪系统与学生定位系统。教师跟踪系统自动计算教师在讲台上的位置，通知教师摄像机进行转动；学生定位系统自动识别站立学生所处的位置，通知学生摄像机进行定位，以特写的方式进行拍摄。 跟踪目标不会丢失 与市场上同类产品相比，PowerCreator Graphic Position System 的一个最大特点就是：跟踪目标不会丢失，即使在讲台上以最快的速度跑动。    真正满足常态化教学要求 录播系统解决方案中，对于如何拍摄学生画面一直是一个难题，一般解决方案都需要学生按一个触发器（可能是按键、 手持麦克、压力感应器等），这些技术不具备实用价值，违反了常态化教学要求。PowerCreator Graphic Position System很好的解决了这个问题，学生和老师无需做任何操作，只需要回答问题时，站立起来就可以了。 抗干扰性强 基于红外技术的产品，容易受太阳光、热光源等因素干扰；基于超声波技术的产品，长时间使用，对人身体健康有害。相比前两种技术，PowerCreator Graphic Position System 基于图像识别技术，很好的解决了以上问题。 部署简单 安装部署PowerCreator Graphic Position System，只需要在教室的几个不同位置安装摄像机就可以了，十分方便。

产品详细介绍 灵活的跟踪策略  老师与学生配置不同的跟踪策略，用户只需选择不同跟踪策略,同时用户可以自行定义跟踪与 切换方案。 双板书跟踪  支持独立板书分析，支持左右两边板书特写跟踪。 多机位协同跟踪，无垃圾镜头，切换延时小  场景采用多机位协同跟踪，切换镜头的方式实现跟踪拍摄（包括教师、学生作答特写画面、 板书特写画面），不出现画面摇动、变焦等不稳定画面。 光流法柔性跟踪  特写镜头的缓和转动，使摄像头画面无拖拽镜头，人体走动跟踪更自然。 区域屏蔽和热点跟踪  避免拍摄区域的亮斑、阴影等干扰，提高系统识别效果；具有多人员识别与拍摄策略；单人 员是特写拍摄、多人员是全景拍摄。可以设置热点区域做跟踪策略。

镜头型号 YF-W11 类型 短焦定焦 电动位移 YES 焦距（mm） 14.5 F值 1.9 镜头直径（mm） 90 重量（KG) 1.2 离轴率 1:1 投射比 0.7:1 投影距离(m) 尺寸（英寸） 长*宽（m） 0.6 40 0.8*0.6 0.84 60 1.2*0.9 1.1 80 1.6*1.2 1.4 100 2.0*1.5 1.7 120 2.4*1.8 2 150 3.0*2.3 2.9 200 4.1*3.0 3.6 250 5.1*3.8 4.2 300 6.1*4.6 4.9 350 7.1*5.3 5.7 400 8.1*6.1 适用机器型号：三洋XT2500 XT3500

镜头型号 YF-WXUA 类型 短焦定焦 电动位移 NO 焦距（mm） 11.4 F值 2.0 镜头直径（mm） 80 重量（KG) 0.8 离轴率 1:0 投射比 0.75:1 投影距离(m) 尺寸（英寸） 长*宽（m） 0.6 40 0.8*0.6 0.9 60 1.2*0.9 1.2 80 1.6*1.2 1.5 100 2.0*1.5 1.8 120 2.4*1.8 2.2 150 3.0*2.3 3 200 4.1*3.0 3.8 250 5.1*3.8 4.5 300 6.1*4.6 5.3 350 7.1*5.3 6 400 8.1*6.1 使用机器型号：三洋XU1050C， XU1060C

镜头型号 YF-W21 类型 短焦定焦 电动位移 YES 焦距（mm） 13.05 F值 2.0 镜头直径（mm） 100 重量（KG) 1.6 离轴率 1:1 投射比 0.8:1 投影距离(m) 尺寸（英寸） 长*宽（m） 0.6 40 0.8*0.6 1 60 1.2*0.9 1.3 80 1.6*1.2 1.6 100 2.0*1.5 1.9 120 2.4*1.8 2.4 150 3.0*2.3 3.2 200 4.1*3.0 4.0 250 5.1*3.8 4.9 300 6.1*4.6 5.7 350 7.1*5.3 6.5 400 8.1*6.1 适用机器型号：三洋PLC-XM1000 /XM1500  PLC-ZM5000C

镜头型号 YF-W21B 类型 短焦定焦 电动位移 YES 焦距（mm） 11.4 F值 2.0 镜头直径（mm） 80 重量（KG) 0.8 离轴率 1:1 投射比 0.75:1 投影距离(m) 尺寸（英寸） 长*宽（m） 0.6 40 0.8*0.6 0.9 60 1.2*0.9 1.2 80 1.6*1.2 1.5 100 2.0*1.5 1.8 120 2.4*1.8 2.2 150 3.0*2.3 3 200 4.1*3.0 3.8 250 5.1*3.8 4.5 300 6.1*4.6 5.3 350 7.1*5.3 6 400 8.1*6.1 适用机器型号：三洋PLC-XM1000 /XM1500  PLC-ZM5000C