本项目通过收集本院耳鼻喉科6066张正常人、分泌性中耳炎、急性化脓性中耳炎活动期及化脓性中耳炎静止期耳内镜图像。 一、项目进展 创意计划阶段 二、负责人及成员 姓名 学院/所学专业 入学/毕业时间 徐倩慧 中山大学医学院 2017.09~2022.06 童钊鹏 中山大学孙逸仙纪念医院 2021.09~ 三、指导教师 姓名 学院/所学专业 职务/职称 研究方向 蔡跃新 中山大学孙逸仙纪念医院 副主任医师 耳鼻喉头颈外科 四、项目简介 本项目通过收集本院耳鼻喉科6066张正常人、分泌性中耳炎、急性化脓性中耳炎活动期及化脓性中耳炎静止期耳内镜图像。通过模仿医生诊断的注意力机制，将获取局部关键特征的局部分类器与获取全局特征的主分类器有机结合，构成深度学习的主框架。通过计算AUC等统计学指标来评估模型的性能，并与两位副主任医师、两位主治医师进行人机对比来进一步评估模型的性能，同时通过热图显示深度学习模型在耳内镜图像不同区域的权重，以判断深度学习关注的区域是否与临床医师一致。该深度学习模型可获得整体93.4%的准确率，区分正常人与分泌性中耳炎的AUC为0.99，而区分化脓性中耳炎活动期与静止期的AUC为0.94.模型的准确率要高于两位主治医师，达到副主任医师的水平，同时热图显示深度学习模型定义的关键区域恰好是临床医生做诊断的区域，如化脓性中耳炎鼓膜穿孔区域，分泌性中耳炎的光锥区域。同时，同时，本项目还将深度学习模型的技术落地，自主研发出研发便携式可拍摄与自动诊断的耳镜设备。

本发明公开了一种可见光宽带光谱图像配准方法，包括对图像进行灰度化、去噪和降采样处理，利 用 SIFT 算法提取图像特征点并构造特征描述算子;通过 k-d 树最近邻方法对特征点进行匹配，对匹配 特征点进行坐标升采样处理;根据图像退化阈值 T，利用欧式距离对错误匹配点进行约束，获得约束后 匹配点集 ΩN;对约束后匹配点集进行 m 对匹配点空间均匀采样，获得均匀分布的匹配点集 Ωm;利用最 小二乘方法求解图像放射变换参数矩阵 Tm，利用 Tm 对待配准图像进行坐标变换和双线性插值计算;以 参考图像和配准图像的互信息 MIm 作为评价指标，锁定最大互信息 MImax 对应的配准图像，实现可见光 宽带光谱图像的配准。本发明能显著降低错误匹配点数目、提高图像配准精度。

本发明提供一种图像全局最小可觉察差异的测定方法，模型建立阶段根据每组测试图片特征参数生 成相对应的测试图片，利用阶梯法得到对应的噪声强度阈值，获取针对对比度掩蔽的视觉特性模型，提 出全局最小可觉察差异的计算模型。模型应用阶段，利用模型建立阶段所得全局最小可觉察差异的计算 模型，计算获取任意输入灰度图像的图像全局最小可觉察差异。本发明生成的测试图片具有更大的均方 误差 MSE 与隐藏噪声的能力，更有效地挖掘人眼的感知冗余;本发明提出的图像全局最小可觉察差异 的计算模型，综合了对比度掩蔽效应与其他掩蔽效应，结果更准确。

        技术成熟度：技术突破         领域存在着景深影响效率的突出问题，本产品以高性能异构处理器为核心运算单元，以嵌入式手段通过视觉流与控制流的严格对位，高性能实时完成视频控制信息的结算，并直接输出电机驱动信号控制相关执行机构完成闭环控制。         本产品主要面向高性能伺服闭环控制的视频应用领域，能够显著提升显微工业自动化领域的视频对焦及对位处理的效率及精度，亦可实现宏观领域的视觉嵌入化控制闭环应用。         意向开展成果转化的前提条件：中试放大及产业化工艺开发资金支持

本发明公开了一种基于对数差值点集模板的图像配准方法，包 括：（1）分别确定基准图像和待配准图像的搜索区域；（2）计算搜索区域的像素灰度值对数差值矩阵；（3）将基准图像搜索区域的对数 差值矩阵中绝对值最大的若干个点进行平均分组，每一组点的集合构 成一个基准模板；（4）在待配准图像搜索区域的对数差值矩阵中搜索 各基准模板的最佳匹配模板；（5）根据各基准模板及其最佳匹配模板 得到最终配准结果，实现配准。本发明的对数差值点集模板方法在配 准显微图像时计算操作主要为查表和减法等简单运算，计算速度快。 同时，在保证配准速度的前提下可以评价配准结果的可信度，从而提 高配准结果的可靠性。

本发明所提供了一种基于超像素分割的图像语义标注方法，首先将基于图像超像素分割提取的特征图块输入卷积神经网络，再将卷积神经网络训练得到的特征向量进行扩展和加权处理，最后构建条件随机场模型进行语义类别标注预测。由于采用本发明的技术方案，该方法将超像素块作为研究对象，简化了用于基于图像超像素分割提取的特征图块的复杂度，提高了语义标注的计算效率；另外，采用多层的超像素块进行语义分析，并将其标注结果进行综合，提高了语义标注的准确率和鲁棒性。

本发明涉及一种基于交替优化和序列化正交匹配追踪的SAR图像散射中心参数估计方法，包括以下步骤：获取原始SAR图像并进行预处理，得到原始频域回波数据；根据原始频域回波数据，使用点散射中心模型和OMP算法初始化目标散射中心所在的重点区域，得到初始散射中心位置参数集合和初始散射中心能量占比；根据初始散射中心位置参数集合和初始散射中心能量占比，基于属性散射中心模型和SOMP算法进行属性参数提取，输出散射中心属性参数估计结果、散射中心系数估计结果和散射中心能量占比序列。与现有技术相比，本发明能高效的提取散射中心参数，获取有意义的目标散射部件属性信息。

成果与项目的背景及主要用途：该项目是天津市科技发展计划项目，通过了科委组织的专家验收。项目组采用自顶向下的设计方法，完成了 CMOS 图像传感器 1024×768 像素阵列的版图设计，通过了仿真验证，结果达到了设计要求。在 Chartered 公司0.35um 工艺线上成功试制了关键模块和小规模完整的 CMOS 图像传感器样片。样片工作正常，能够正确的拍摄运动物体，各项指标均满足设计要求。 背景：CMOS 图像传感器是当前已广泛用于民用、工业、科技和国防领域的各类图像摄取系统，近年来民用电子产品领域发展迅猛，如照相手机、PC 机、像机等。该成果主要用于图像摄取系统的核心部件—CMOS 图像传感器设计中。 技术原理与工艺流程简介：CMOS 图像传感器利用成熟的 CMOS 工艺制作光敏像素单元，因此可以把光电接收器和信号处理电路集成在单个芯片上。 主要设计内容包括：像素阵列、消噪放大电路、模数转换器、时序控制电路和测试系统设计。采用自顶向下的设计方法，首先根据功能要求对系统进行架构设计，将系统分为时序控制电路部分（数字电路实现）和从像素阵列到 AD 转换的信号处理部分（模拟电路实现）。版图设计完成后，导出 GDSII 文件，在新加坡 Chartered 公司 0.35um 工艺线进行流片，然后进行封装。根据芯片工作对外界的要求设计 PCB电路板，搭建测试系统，对芯片功能和各项电学指标进行测试分析。  技术水平及专利与获奖情况：技术水平属国内先进。 应用前景分析及效益预测：该项目取得了 CMOS 图像传感器的核心设计技术，可用于各种CMOS图像传感器设计中，中国CMOS图像传感器市场需求庞大，年复合成长率达到 60%，因此有着广阔的应用前景。目前国外同类产品的销售价格远远高于芯片的开发成本，因此存在很大的利润空间，将产生很好的经济效益。功能上可完全兼容、并替代进，通过合作根据市场需求，随时调整产品种类和指标，使经济效益最大化。 应用领域：CMOS 图像传感器广泛应用于消费类、工业和科技等各个领域。 民用领域：拍照手机、数码相机、可视门镜、摄像机、汽车防盗等；工业领域：生产监控、安全监控等。

本发明公开了一种基于多尺度空洞融合迭代优化的增强图像隐写，适用于图像隐写领域，包括以下步骤：使用封面图像C获取其对应的增强图像E后，分别对其进行特征提取，后引入多尺度空洞融合的注意力机制；再将两个图像的特征融合得到图像X；之后与秘密连接形成载密张量M；编码器接收三个输入：图像M的特征、当前的扰动，以及这个扰动的损失函数的梯度进行拼接形成GRU单元的输入；通过反复应用编码器，最终生成的隐写图像；解码器接收编码器生成的隐写图像，经过一系列卷积，从隐写图像中恢复原始的隐藏信息；批评者网络来评估生成的隐写图像的自然性，并提供反馈；重复步骤2到5。最终生成的图像即为包含隐藏信息的隐写图像。本方法将学习和迭代优化方法结合起来，在双通道输入图像增强下结合多尺度融合注意力机制，从而找到图像中更适合隐藏信息的部分，使生成的隐写图像更加隐蔽。

郑州电子信息职业技术学院是经河南省人民政府批准、教育部备案设立的普通高职院校，是省政府规划的升本高校。学院地处郑州都市区、郑州航空港区、中原经济区三区叠加发展区域，郑汴一体化的中心，学院承担着为郑州国家中心城市、航空港区、郑州汽车工业园区培养大批高技能人才的任务。 办学30年来已有十万余名毕业生在全国各地工作着，很多毕业生已成为企业界的领军人物，毕业生就业率连年接近100%。学院的办学事迹受到国家省市100多家新闻媒体的报道表扬，被誉为“技师、工程师、企业家的摇篮”，先后荣获“全国先进职业院校”、“全国职业指导先进院校”、“河南省高等职业教育特色院校”。学院多次被评为“省级办学先进单位”及郑州市“十佳院校”等荣誉称号，河南省高工委、省教育厅党组授予我院党委“河南省高等学校先进基层党组织”称号。时任国家教育部长周济、河南省长郭庚茂、国家政协副主席王志珍到我院调研，对学院在高等职业教育办学方面取得的成绩给予了高度评价。 学院千余亩花园般的校园，30余栋教学科研大楼，近万名在校生，620多名专兼职教师中教授、副教授、高讲、高工等中高级职称的教师占60%以上，其中，国家突出贡献专家2人，享受国务院政府特殊津贴专家2人，再加上解放军信息工程大学、河南大学、郑州大学等高校在我校任教的专家教授已组成了强大的师资队伍。 学院近亿元的各种先进教学设备，实验实训室81个，其中：“电工电子实训基地”、“ 数控实训基地”、“ 郑州海马校外实训基地”被评为省级示范实训基地;“电工电子实验室”、“ 机电一体化实验室”、“ 汽车检测与维修实训中心”被评为郑州市重点实验室。100多家国家大中型企业授牌授证书确立为人才培养输送基地和校企合作实验实习基地，确保学生理论实践相结合。图书馆百万册图书，千兆校园网，校园无线WiFi全覆盖，2500多台先进的计算机，为同学们学习成长奠定了坚实基础。学院建有两个大型体育运动场、一座室内体育中心，足球场、网球场 、篮球场等。学生宿舍为标准四人间，配有空调、独立卫生间、电脑桌、书柜、宽带等设施;校园信息化建设取得初步成效，投资近千万元，建有60个标准化考场;校内机动车检测中心;校内工厂一家;汽车实训中心，基本实现以师带徒。 学院设置七系四部：电子工程系、机电工程系、土木工程系、交通运输系、信息工程系、艺术设计系、经贸管理系、基础教学部、中专教学部、思想政治理论课教学部、体育教学部。现开设专业51个。2016年我院“电子信息工程技术专业”被批准为“河南省品牌专业”;2016年省教育厅授予我院为“河南省高等职业教育特色院校”称号。 学院实施“专家治校”战略。外引内培，加强“双师型”教师队伍建设，提升教师学历层次，优化师资结构。努力构建集团化校企合作办学模式，创建具有专业特点的产教融合、校企一体的人才培养模式。学院始终遵循教育规律和市场规律，始终把为当地经济建设培养急需人才作为工作重心。实行校企合作，厂门校门对接、工学结合、订单培养，学生理论扎实，动手能力强、具有创新能力的办学特色。学院竭尽全力为祖国培养品德好，专业技术过硬，适应市场需求的具有开拓、创新能力的高级技能型人才。 目前学院正遵照河南省“十三五”规划精神，努力为实现中原崛起、河南振兴培养所急需的高级技能型专业技术人才，提高自身办学层次，为把学院办成一所现代化的本科高校而努力奋斗。