自然场景视觉感知与理解是人工智能的前沿热点，其主要任务是对场景中的视觉要素进行认知，进而推断出其中包含的场景语义。IMAGINE实验室近年来相继从场景构成分析、场景内容推理、场景结构建模等角度对这一问题展开了系统研究，着重探索了融合先验建模与深度学习的自然场景视觉理解这一问题。大数据具有规模大、种类多、产生速度快、有价值数据密度低等特点。对大数据信息分析具有重要意义，也是目前研究的热点，其主要任务是利用数据分析的方法从大数据中获取有价值信息。IMAGINE实验室近年来结合深度学习前沿技术和传统数据分析方法进行数据分析和预测，并在海关大数据分析项目和国网电力冰风灾害预测项目中进行应用

成果与项目的背景及主要用途：刀具预调测量仪（简称对刀仪）是数控加工 设备必备的配套仪器，广泛用于各种类型刀具的预调和测量。天津大学精仪学院 在国内首先研制成功第一台基于视觉检测技术的，智能化刀具预调测量仪，结束 了国内传统的投影屏目测瞄准的光学法对刀仪的历史，该刀具预调测量仪曾于 2004 年和 2005 年两次参加国际机床工具展览会，并已成为产品销售。 计算机视觉型刀具预调测量仪使用 CCD 摄像机采集被测刀具图像，通过图 像处理技术实现影像的数字对焦、自动瞄准测量。测量的自动化不仅消除了操作 者的人为误差，而且简化了主机结构，提高了操作的灵活性，实现了数字微米级 的测量精度。 技术原理与工艺流程简介：计算机视觉型刀具预调测量仪使用 CCD 摄像机 采集被测刀具图像，通过图像处理技术实现影像的数字对焦、自动瞄准测量。测 量的自动化不仅消除了操作者的人为误差，而且简化了主机结构，提高了操作的 灵活性，实现了数字微米级的测量精度。 技术水平及专利与获奖情况：智能化刀具预调测量仪，结束了国内传统的投 影屏目测瞄准的光学法对刀仪的历史，技术指标达国际先进水平。 应用前景分析及效益预测：应用于数控加工领域。 12 螺旋铣孔技术 13 微纳加工技术

 本项目以图像处理、模式识别，以及多信息融合技术为基础，构建了一个通用性强、高智能化和自动化水平的视觉测量与检测平台。实现复杂环境下对多种类目标(不同形状和尺寸零件、结构件等)、多参数（尺寸、平行度、挠度等）、多尺度的测量与检测。

研发阶段/n技术简介：将机器视觉技术与自动控制、机械设计相结合，应用于香菇的分级中，实现香菇4个级别（天白花菇、白花菇、茶花菇、光面菇）的在线自动分级，分级准确率大于90%；机器单排每天可分选480.4kg香菇，是单人工的分选的4倍。技术的应用领域前景分析：用机器自动分级代替人工手选，不仅可以排除主观因素干扰，将工人从繁重的劳动中解脱出来，降低加工成本，而且可以记录整个系统的工作状况，提供产量等报表，具有精度好、智能化程度高、效率高，可一次完成多种品质指标的检测等优点。有利于建立产品质量标准化体系，

成果简介：IEEE1394 立体视觉头由多个微型 CMOS 摄象机构成的成象模块和 IEEE 1394 传输模块组成。多个 CMOS 摄象机同步获取图象（摄象机之间信号完全同步），并将图象存储在成象模块的缓存中。摄象机的个数可以根据不 同的视觉感知任务选配。IEEE 1394 传输模块读取成象模块缓存的图象数据， 通过 IEEE 1394 接口将图象数

研究意义1. 视觉感知是高铁、自动驾驶车辆、无人航行器等自动化设备实现环境感知的重要手段。2. 对运动状态下产生的图像模糊进行复原是计算机视觉领域的重要研究内容。3. 运动模糊对于基于视觉的目标检测算法的检测能力具有显著影响。 研究目标 本研究相机在直线运动状态下前进速度与目标检测算法在产 生的模糊图像上检测能力的关系。通过实验进行具体关系的 研究与分析。对模糊图像应用合适的去模糊算法，观察并分 析去模糊后目标检测能力的变化。

视觉里程计可以通过相邻两帧图像之间的差异，计算出机器人位置和姿态的变化。采用FPGA\SOC实现机器人视觉里程计则可以极大地提高处理能力，满足实时计算的要求，本项目： （1）支持SURF特征点和FAST特征点的检测。其中SURF特征点（8个尺度），支持图像的尺度不变性。

工业机器人定位精度是机器人技术研究的关键问题，直接影响到机器人的作业精度和应用水平。本项目瞄准机器人动态误差测量中的关键问题，原创性的将级联棱镜多模式跟踪方法引入机器人动态测量中，结合单站双视场三维重建方案，不仅可以实现粗精顺序跟踪、时变跟踪和连续跟踪等动态测量要求，而且能够产生直线形和圆弧形等多种跟踪样式，同时满足大视场、高分辨率成像和大范围、高精度定向的动态多自由度测量要求。研究内容包括：建立级联棱镜粗精耦合跟踪和双视场成像联控的测量方案和数学模型；研究粗精跟踪和双视场成像的参数匹配、模式转换、测量信息提取与图像处理方法；根据测量要求，建立机器人动态误差测量的理论模型、误差模型和实验方案，并实现测量系统的精确标定；通过机器人动态误差的测量实验，为机器人误差测量提供科学依据，同时对测量精度进行评定。本项目提出的单站多模式跟踪测量方法具有独创性和可行性，旨在攻克激光多模式跟踪机器人误差测量系统中的关键问题，开展测量系统的原理样机实验和应用示范研究，有望为机器人动态误差测量提供全新的解决途径，具有重要的应用价值和市场前景。 近二三十年来，激光跟踪技术发展迅速，在机器人测量领域得到广泛应用。据ElectroniCastConsultants发布的市场研究报告，对光电跟踪行业的全球消费量进行了调查分析。2010年，光电跟踪设备的全球消费价值为5.95亿美元，预计未来五年该行业的消费价值将以9.83％的平均年增长率在成长，2016年将达到9.51亿美元，约合人民币58.96亿元。本项目提出的测量系统以其结构紧凑、准确性高、速度快、偏转角度大、动态性能好、环境适应性好等优点，是一种颇具潜力的测量新技术，可以广泛用机器人动态误差测量领域，具有广阔的市场前景。 根据“中国制造2025”规划，我国需要努力提升高端装备的自主创新研发能力，而测量技术是高端装备制造的重要保证。目前，我国高端光学测量设备主要依赖进口，不仅价格昂贵，而且国外对其关键技术严密封锁。国外每台激光跟踪仪的售价高达百万元，严重制约一些我国中小心型企业的购买。因此本项目研发的产品不仅在国内存在巨大的市场空间和发展潜力，而可以推动先进装备制造的产业化进程，对促进我国自主创新具有重要的战略意义。项目研发中的创新技术处于国际先进水平，将极大提升机器人作业的技术含量。合作单位江阴纳尔捷机器人技术有限公司是专业从事机器人技术研发的高新技术企业，是机器人产业联盟第一届理事单位，具有雄厚的科研和技术开发实力。该项目在研究实验阶段，就可以将成果应用到现有产品的开发中；项目完成后除了该公司以外，研究成果还可以应用到其他自动化机器人装备企业的产品开发中。尤其通过产学研结合，将会极大的提升产品的科技含量并缩短产品开发周期，提前实现批量化市场销售，有望为企业带来良好的经济效益。

"微创手术是外科发展的必然趋势。微创手术机器人可提升医生手术能力，改善工作模式，提高手术质量，对微创手术发展具有重大意义。 项目在国家科技支撑计划、863计划等支持下，围绕微创手术需求，从基础理论、关键技术、临床应用三个层面开展系统研究，结合机器人学、折展机构理论、可靠性设计方法等原理，在系统设计与优化、可靠性设计与系统集成、检测方法与安全性评价、临床评估与应用研究等方面展开工作，研制成功具有完全自主知识产权的微创手术机器人整机系统，打破了国外的长期技术垄断，实现了高端医疗装备自主创新。"