本发明涉及显示技术与人机交互交叉领域，提供基于多模态融合模型的平板显示视觉舒适度预测方法、系统，其中方法包括：步骤一、采集原始图像集，针对每一原始图像，运用生成对抗网络模型将输入的随机序列转换为增强素材，再将增强素材和原始图像按预设比例融合，获得若干新图像；步骤二、采集生理特征和物理特征，获得训练样本；步骤三、基于堆叠集成框架训练多模态融合模型；步骤四、输入测试数据，获得视觉舒适度预测结果。本发明旨在解决平板显示视觉舒适度预测领域高质量标注样本稀缺、单一模态分析耦合关系缺失、场景适配性差的问题。

本发明提供了一种基于机器视觉的铁路散货卸料斗识别与定位方法，涉及铁路散货卸料斗跟踪与定位技术领域。该方法包括：采集目标卸料斗的深度图样本；对深度图样本执行预处理，生成样本数据集；从样本数据集中提取卸料斗的几何特征；将卸料斗的几何特征作为输入，利用CNN进行卸料斗的目标识别与定位训练，得到卸料斗识别模型；将相机捕获到的实时深度图送入卸料斗识别模型进行卸料斗的实时识别与定位，卸料斗识别模型输出卸料斗的三维空间信息和存在概率，将结果传送至控制系统，引导机械臂执行卸料操作。本发明适用于卸料作业中的实时监测，实时精确定位铲斗的当前位置，及时避免铲斗与货舱之间的冲击性损伤，提高卸料的效率与安全性。

联系我们：深圳市大象机器人科技有限公司 官网：https://www.elephantrobotics.com淘宝官方旗舰店：https://shop504055678.taobao.com/?spm=a1z10.1-c-s.0.0.2b0e58e7PY8UhV电话：+86 (0755) 8696 8565/+86 181 2384 1923地址：深圳市福田区华强北电子科技大厦D座智方舟国际智能硬件创新中心D403 D504 D505

一、设备概述         LG-IRBL02型 并联机器人视觉分拣工作站由机器人工作台、输送带、ABB四自由度并联机器人、末端执行器、视觉系统和辅助模块组成。该装置的主要任务是，机器人通过视觉定位抓取散乱工件进行高速高精度分拣放置整齐工作。该功能可用于来料分拣抓取装盒等工作。 二、技术参数 1、输入电源：单相AC200V～230V(＋10%－15%),50Hz； 2、工作环境：温度0℃～45℃，相对湿度20％～90％RH（40℃）； 3、工作站尺寸：2010mm×900mm×1850mm； 4、操作台：700mm×500mm×1350mm 5、四自由度并联机器人采用ABB IRB360-1/800并联机器人，有效负载1KG，拾料范围800mm。 三、设备组成及功能描述 1、输送带     采用两条输送带，主要完成物料输送，配合机器人对物料进行高速分拣。 2、四自由度并联工业机器人     本工作站采用的四自由度ABB IRB360-1/800并联机器人，有效负载1KG，拾料范围800mm。 3、机器人末端执行器     本工作站的机器人末端执行器即为吸盘。末端执行器安装于机器人末端安装法兰面上，用于随机器人对物料进行高速高精度的分拣。 4、视觉系统     本工作站采用欧姆龙FZ-350智能视觉系统，由视觉控制器、白色光源、视觉相机及监视显示器等组成。用于检测工件的特性，如数字、颜色、形状等，还可以对装配效果进行实时检测操作。通过视觉系统对物料的位姿进行检测，将信号传送给控制系统，控制系统通过计算分析后指令机器人对物料进行分拣。 5、机器人工作台     本工作站中并联机器人、输送带、视觉系统等其他辅助模块均集成于工作台上，布局合理、美观，使用方便。 6、辅助模块     本工作站为了保证物料机器人循环分拣物料，故在输送带另一端配装物料导向装置。 四、设备特点 1、直观性较强：主要设备均采用直接外露的安装形式，结构简单，便于学生拆装。 2、系统性强，贴近实际生产：该实训平台将目前两台典型的高速机器人（3+1轴）和机器人视觉系统有机结合，同时集成传感器、气动元器件等知识，使学生对机电一体化设备有了更直观的认识。该平台模拟了机器人实际应用，缩短学生从教室到工业现场的过度和适应时间。 3、开放性和扩展性强：该平台还可根据自己的教学需要快捷地更换主要设备，通过现场总线实现多种设备的挂接。 4、安全性高：该实训平台配备相应的漏电、过载及短路保护，能够确保操作者的人身安全。 五、实训项目 1、并联机器人的机构组成、工作原理、性能指标认识； 2、并联机器人机械系统的组成； 3、并联机器人正逆运动学分析； 4、并联机器人控制系统的学习； 5、PLC的学习与应用； 6、CoDeSys软件的了解与应用； 7、现场总线的应用； 8、机器人示教编程与再现控制原理与方法； 9、机器人PTP运动轨迹控制方法； 10、机器人视觉系统的认识及操作； 11、机器人的视觉分拣实验； 12、系统故障诊断与维护。

相关专利提出了一种用于实验动物固定及实验动物图像融合于一体的辅助设备，用于实验动物的固定及 PET、CT 及 MR 图像融合。该系统在保障了实验动物和工作人员的安全的同时，为图像融合方式方法的研究提供依据，为科研及其临床转化提供更有效、精确、直观的帮助

本发明公开了一种高速印花机图像数据旋转处理系统及方法，系统包括数据接收设备、数据解析设备、数据传输通道、数据处理设备、数据输出设备。由嵌入式处理器完成数据的接收，数据的解析，然后通过RapidIO高速数据传输通道将数据送至FPGA，由FPGA实现数据的处理和数据的输出；在FPGA中通过实现数据的三级流水线的操作方式来提高数据的吞吐量，通过状态机的控制，来实现数据严格的循环操作，提高了系统的可靠性。

本发明公开了一种基于多光谱图像处理的水稻稻叶瘟病检测分级方法。利用可见/近红外多光谱摄像机实时采集绿光波段,红光波段,近红外波段三个波段通道的单色灰度图像,然后使用MATLAB软件,通过图象处理方法编写应用软件,进行图像处理。包括背景及噪声、干扰等的消除和作物病斑信息的识别分析,实现植物是否发病及病斑位置和分级的准确快速处理。每张图片的病害识别时间仅为数秒。本发明用于快速、准确、稳定、实时、非破坏性的水稻稻瘟病感染诊断并且准确地指出病斑所在的位置以及感染程度分级,减少由于全面喷洒而造成的药物用量,降低生产成本并减少污染,为变量喷药提供数据支持,提高精确喷药的决策水平,实现精细农业起到积极的作用。

相关专利提出了一种用于实验动物固定及实验动物图像融合于一体的辅助设备，用于实验动物的固定及 PET、CT 及 MR 图像融合。该系统在保障了实验动物和工作人员的安全的同时，为图像融合方式方法的研究提供依据，为科研及其临床转化提供更有效、精确、直观的帮助应用范围:这种图像融合、固定装置可应用于小动物疾病模型研究、肿瘤生成机制、肿瘤早期成像等实验研究中，在此基础上，判断所制动物模型是否符合临床需要、所移植肿瘤状态是否符合实验需要。同时，还可以为临床找到最优的图像融合方法提供依据，具有非常重要的应用价值。效益分析:基于相关专利开发的实验动物固定及图像融合设备，具有操作简便、成本合理、可重复使用等优点，其主要技术优势和性能指标如下： 一、主要技术优势 （1）可对在实验过程中的实验动物进行固定，有利于保障实验动物和工作人员的安全； （2）可实现两种或三种成像检查图像的精确融合，从而结合各成像技术的优势，为动物活体实验提供更多无创的图像信息。 二、主要性能指标 （1）对实验动物（如鼠、兔等）进行固定； （2）为小动物 PET、CT 及 MR 图像提供固定识别位点，实现两种或三种成像检查图像的精确融合。

相关专利提出了一种用于实验动物固定及实验动物图像融合于一体的辅助设备，用于实验动物的固定及 PET、CT 及 MR 图像融合。该系统在保障了实验动物和工作人员的安全的同时，为图像融合方式方法的研究提供依据，为科研及其临床转化提供更有效、精确、直观的帮助应用范围:这种图像融合、固定装置可应用于小动物疾病模型研究、肿瘤生成机制、肿瘤早期成像等实验研究中，在此基础上，判断所制动物模型是否符合临床需要、所移植肿瘤状态是否符合实验需要。同时，还可以为临床找到最优的图像融合方法提供依据，具有非常重要的应用价值。效益分析:基于相关专利开发的实验动物固定及图像融合设备，具有操作简便、成本合理、可重复使用等优点，其主要技术优势和性能指标如下： 一、主要技术优势 （1）可对在实验过程中的实验动物进行固定，有利于保障实验动物和工作人员的安全； （2）可实现两种或三种成像检查图像的精确融合，从而结合各成像技术的优势，为动物活体实验提供更多无创的图像信息。 二、主要性能指标 （1）对实验动物（如鼠、兔等）进行固定； （2）为小动物 PET、CT 及 MR 图像提供固定识别位点，实现两种或三种成像检查图像的精确融合。

本发明公开了一种快速互相关灰度图像匹配方法与装置，用于 在灰度目标图像中查找目标图案的位置与方向，所述方法包括：对模 板图像进行极坐标转换；获取灰度目标图像中目标图案的外接盒，将 其定义为目标图案搜索区；在目标图案搜索区中选取与模板图像同样 大小的匹配区域，对所述匹配区域进行极坐标转换，计算所述匹配区 域一维数据与所述模板图像一维数组的相关性；直至对所有的匹配区 域均完成相关性计算，选取相关性最大的匹配区域作为目标图案，获 取所述目标图案的位置与方向。通过本发明方法，从而缩小匹配的搜 索范围，提高匹配速度，并且通过极坐标形式的归一化互相关计算， 实现目标图像±180 度全角度匹配。