本项目通过收集本院耳鼻喉科6066张正常人、分泌性中耳炎、急性化脓性中耳炎活动期及化脓性中耳炎静止期耳内镜图像。 一、项目进展 创意计划阶段 二、负责人及成员 姓名 学院/所学专业 入学/毕业时间 徐倩慧 中山大学医学院 2017.09~2022.06 童钊鹏 中山大学孙逸仙纪念医院 2021.09~ 三、指导教师 姓名 学院/所学专业 职务/职称 研究方向 蔡跃新 中山大学孙逸仙纪念医院 副主任医师 耳鼻喉头颈外科 四、项目简介 本项目通过收集本院耳鼻喉科6066张正常人、分泌性中耳炎、急性化脓性中耳炎活动期及化脓性中耳炎静止期耳内镜图像。通过模仿医生诊断的注意力机制，将获取局部关键特征的局部分类器与获取全局特征的主分类器有机结合，构成深度学习的主框架。通过计算AUC等统计学指标来评估模型的性能，并与两位副主任医师、两位主治医师进行人机对比来进一步评估模型的性能，同时通过热图显示深度学习模型在耳内镜图像不同区域的权重，以判断深度学习关注的区域是否与临床医师一致。该深度学习模型可获得整体93.4%的准确率，区分正常人与分泌性中耳炎的AUC为0.99，而区分化脓性中耳炎活动期与静止期的AUC为0.94.模型的准确率要高于两位主治医师，达到副主任医师的水平，同时热图显示深度学习模型定义的关键区域恰好是临床医生做诊断的区域，如化脓性中耳炎鼓膜穿孔区域，分泌性中耳炎的光锥区域。同时，同时，本项目还将深度学习模型的技术落地，自主研发出研发便携式可拍摄与自动诊断的耳镜设备。

本发明公开了一种可见光宽带光谱图像配准方法，包括对图像进行灰度化、去噪和降采样处理，利 用 SIFT 算法提取图像特征点并构造特征描述算子;通过 k-d 树最近邻方法对特征点进行匹配，对匹配 特征点进行坐标升采样处理;根据图像退化阈值 T，利用欧式距离对错误匹配点进行约束，获得约束后 匹配点集 ΩN;对约束后匹配点集进行 m 对匹配点空间均匀采样，获得均匀分布的匹配点集 Ωm;利用最 小二乘方法求解图像放射变换参数矩阵 Tm，利用 Tm 对待配准图像进行坐标变换和双线性插值计算;以 参考图像和配准图像的互信息 MIm 作为评价指标，锁定最大互信息 MImax 对应的配准图像，实现可见光 宽带光谱图像的配准。本发明能显著降低错误匹配点数目、提高图像配准精度。

本发明提供一种图像全局最小可觉察差异的测定方法，模型建立阶段根据每组测试图片特征参数生 成相对应的测试图片，利用阶梯法得到对应的噪声强度阈值，获取针对对比度掩蔽的视觉特性模型，提 出全局最小可觉察差异的计算模型。模型应用阶段，利用模型建立阶段所得全局最小可觉察差异的计算 模型，计算获取任意输入灰度图像的图像全局最小可觉察差异。本发明生成的测试图片具有更大的均方 误差 MSE 与隐藏噪声的能力，更有效地挖掘人眼的感知冗余;本发明提出的图像全局最小可觉察差异 的计算模型，综合了对比度掩蔽效应与其他掩蔽效应，结果更准确。

本发明公开了一种基于对数差值点集模板的图像配准方法，包 括：（1）分别确定基准图像和待配准图像的搜索区域；（2）计算搜索区域的像素灰度值对数差值矩阵；（3）将基准图像搜索区域的对数 差值矩阵中绝对值最大的若干个点进行平均分组，每一组点的集合构 成一个基准模板；（4）在待配准图像搜索区域的对数差值矩阵中搜索 各基准模板的最佳匹配模板；（5）根据各基准模板及其最佳匹配模板 得到最终配准结果，实现配准。本发明的对数差值点集模板方法在配 准显微图像时计算操作主要为查表和减法等简单运算，计算速度快。 同时，在保证配准速度的前提下可以评价配准结果的可信度，从而提 高配准结果的可靠性。

本发明所提供了一种基于超像素分割的图像语义标注方法，首先将基于图像超像素分割提取的特征图块输入卷积神经网络，再将卷积神经网络训练得到的特征向量进行扩展和加权处理，最后构建条件随机场模型进行语义类别标注预测。由于采用本发明的技术方案，该方法将超像素块作为研究对象，简化了用于基于图像超像素分割提取的特征图块的复杂度，提高了语义标注的计算效率；另外，采用多层的超像素块进行语义分析，并将其标注结果进行综合，提高了语义标注的准确率和鲁棒性。

本发明涉及一种基于交替优化和序列化正交匹配追踪的SAR图像散射中心参数估计方法，包括以下步骤：获取原始SAR图像并进行预处理，得到原始频域回波数据；根据原始频域回波数据，使用点散射中心模型和OMP算法初始化目标散射中心所在的重点区域，得到初始散射中心位置参数集合和初始散射中心能量占比；根据初始散射中心位置参数集合和初始散射中心能量占比，基于属性散射中心模型和SOMP算法进行属性参数提取，输出散射中心属性参数估计结果、散射中心系数估计结果和散射中心能量占比序列。与现有技术相比，本发明能高效的提取散射中心参数，获取有意义的目标散射部件属性信息。

成果与项目的背景及主要用途：该项目是天津市科技发展计划项目，通过了科委组织的专家验收。项目组采用自顶向下的设计方法，完成了 CMOS 图像传感器 1024×768 像素阵列的版图设计，通过了仿真验证，结果达到了设计要求。在 Chartered 公司0.35um 工艺线上成功试制了关键模块和小规模完整的 CMOS 图像传感器样片。样片工作正常，能够正确的拍摄运动物体，各项指标均满足设计要求。 背景：CMOS 图像传感器是当前已广泛用于民用、工业、科技和国防领域的各类图像摄取系统，近年来民用电子产品领域发展迅猛，如照相手机、PC 机、像机等。该成果主要用于图像摄取系统的核心部件—CMOS 图像传感器设计中。 技术原理与工艺流程简介：CMOS 图像传感器利用成熟的 CMOS 工艺制作光敏像素单元，因此可以把光电接收器和信号处理电路集成在单个芯片上。 主要设计内容包括：像素阵列、消噪放大电路、模数转换器、时序控制电路和测试系统设计。采用自顶向下的设计方法，首先根据功能要求对系统进行架构设计，将系统分为时序控制电路部分（数字电路实现）和从像素阵列到 AD 转换的信号处理部分（模拟电路实现）。版图设计完成后，导出 GDSII 文件，在新加坡 Chartered 公司 0.35um 工艺线进行流片，然后进行封装。根据芯片工作对外界的要求设计 PCB电路板，搭建测试系统，对芯片功能和各项电学指标进行测试分析。  技术水平及专利与获奖情况：技术水平属国内先进。 应用前景分析及效益预测：该项目取得了 CMOS 图像传感器的核心设计技术，可用于各种CMOS图像传感器设计中，中国CMOS图像传感器市场需求庞大，年复合成长率达到 60%，因此有着广阔的应用前景。目前国外同类产品的销售价格远远高于芯片的开发成本，因此存在很大的利润空间，将产生很好的经济效益。功能上可完全兼容、并替代进，通过合作根据市场需求，随时调整产品种类和指标，使经济效益最大化。 应用领域：CMOS 图像传感器广泛应用于消费类、工业和科技等各个领域。 民用领域：拍照手机、数码相机、可视门镜、摄像机、汽车防盗等；工业领域：生产监控、安全监控等。

本发明公开了一种基于多尺度空洞融合迭代优化的增强图像隐写，适用于图像隐写领域，包括以下步骤：使用封面图像C获取其对应的增强图像E后，分别对其进行特征提取，后引入多尺度空洞融合的注意力机制；再将两个图像的特征融合得到图像X；之后与秘密连接形成载密张量M；编码器接收三个输入：图像M的特征、当前的扰动，以及这个扰动的损失函数的梯度进行拼接形成GRU单元的输入；通过反复应用编码器，最终生成的隐写图像；解码器接收编码器生成的隐写图像，经过一系列卷积，从隐写图像中恢复原始的隐藏信息；批评者网络来评估生成的隐写图像的自然性，并提供反馈；重复步骤2到5。最终生成的图像即为包含隐藏信息的隐写图像。本方法将学习和迭代优化方法结合起来，在双通道输入图像增强下结合多尺度融合注意力机制，从而找到图像中更适合隐藏信息的部分，使生成的隐写图像更加隐蔽。

青楷槭是长白山地区常见的乔木品种之一，在《本草纲目》、《本草再新》均被提及，其叶片、树皮及果实等部位，均可作为药材使用，具有清热、解毒、抗炎等多重疗效。此外，青楷槭的叶片亦常被用于泡茶或烹饪汤品，有助于缓解上呼吸道相关症状。人参被誉为“天然的能量补充剂”，在提升体力、缓解疲劳方面有显著的效果。现代研究表明，人参能提高体内的ATP（细胞能量来源）水平，改善微循环，从而有效抗疲劳。 青楷槭的抗氧化作用与人参的抗疲劳、增强体能的作用相结合，能够更好地抵御衰老和疲劳的双重挑战。青楷槭与人参的组合具有较好的互补作用。青楷槭的抗氧化、降血糖、调节内分泌等作用与人参的补气、抗疲劳、增强免疫力等特点相结合，能够在提升免疫力、抗衰老、缓解疲劳、调节血糖血脂等多个方面产生协同效应。通过科学的配比和加工，青楷槭与人参合用可以为消费者提供一种功能全面、健康有益的饮品。 1.独特的原料组合与健康功能创新：本项目的核心创新在于将人参与青楷槭这两种具有显著保健功效的天然植物成分进行有机结合。人参以其滋补强身、增强免疫力的传统功效著称，而青楷槭则富含丰富的抗氧化物质、维生素C及矿物质，具有较强的抗衰老、抗疲劳等健康功效。通过选择水醇提取法、冷冻干燥等来确保有效成分的高效提取，并保持其生物活性，创新性地将这两种植物的优势特性融合，开发出一种具有复合健康功能的功能性饮料，填补了市场上同类产品在多元化营养需求上的空白此外，开发了新型的成分稳定化技术，有效解决了植物成分在饮料中的保存和长期保鲜问题，确保了产品的品质稳定性与健康功效的长期有效。 2.口感优化与产品差异化创新：在口感方面，本项目通过多次配方调整与风味优化，使得人参和青楷槭的独特植物风味得到平衡，并加入天然水果香料，改善传统中草药饮料的“草本味”，使饮料口感更加顺滑、清新、适合现代消费者的接受口味。这种口感创新不仅提高了消费者的饮用体验，也突破了传统草本饮料的单一风味模式，为市场带来了差异化竞争优势。 根据市场研究，健康饮品领域，消费者越来越倾向于选择具有增强免疫、抗氧化、抗衰老、降血糖等多重功能的饮品。人参作为传统滋补佳品，已在市场上占据了一定份额，凭借其强身健体、补气养血的功效，广受消费者喜爱。而青楷槭，作为富含多酚类、黄酮类等抗氧化成分的植物，其抗衰老、抗疲劳、降血脂等效果逐渐得到消费者的认可。两者结合的功能性饮料，能够满足市场对天然健康饮品的需求，成为新兴的市场亮点。随着生活方式的变化，越来越多的职场人士、学生群体等年轻人开始关注抗疲劳、抗压、促进睡眠的饮品，这为人参青楷槭饮料的市场拓展提供了机会。 目前，市场上的功能性饮料竞争激烈，主要以一些大型饮料品牌为主导，如红牛、华润怡宝等企业推出的健康功能饮料占据了较大的市场份额。此外，还有一些植物性饮品品牌如植物萃取饮料、草本茶等逐渐获得关注，满足消费者对天然、低糖、无添加的偏好。然而，这些产品多集中在单一功能或传统草本成分上，缺乏多种植物成分的创新结合。因此，人参和青楷槭的结合，作为一种具有多重健康功效的饮品，有望在现有市场中开辟出新的细分市场，填补部分空白。